Per un progetto nel settore pubblico stiamo cercando un/una Cloudera Developer con comprovata esperienza nel disegno architetturale e nello sviluppo di soluzioni Big Data complesse. Lavorerai sull’analisi, progettazione e sviluppo di una Data Platform basata su Cloudera, garantendo scalabilità, integrazione con gli ecosistemi esistenti e aderenza alle best practice di sicurezza e governance.
Modalità Full Remote
Requisiti richiesti
- Sviluppo di pipeline Spark deployate su stack Cloudera / Hadoop.
- Configurazione e gestione di ambienti Cloudera (Data Engineering, Data Warehouse, Machine Learning).
- Integrazione con GitHub per processi CI/CD automatizzati.
- Conoscenza di sicurezza e data governance in contesti enterprise.
- Capacità di fornire referenze su progetti analoghi.
Requisiti preferenziali
- Kafka / NiFi per ingestion batch/real-time e integrazioni.
- Airflow (o orchestratori analoghi) per scheduling/monitoraggio delle pipeline.
- Query layer: Hive / Impala; storage HDFS/Kudu; formati Parquet/Avro.
- Cloudera Manager, Ranger e Atlas per security, policy e lineage.
- Great Expectations (o strumenti simili) per data quality & validation.
- GitHub Actions/Jenkins per CI/CD avanzato con test automatizzati.
- Container & infra: Docker/Kubernetes, Terraform/Ansible per IaC.
- Hardening/compliance per settore pubblico (es. GDPR, linee guida ISO/27001, controllo accessi RBAC).
Mansioni previste
- Analisi, progettazione e sviluppo della piattaforma dati su Cloudera.
- Definizione di architetture robuste e scalabili per data ingestion, processing e serving.
- Sviluppo/ottimizzazione di pipeline Spark; tuning prestazionale e osservabilità.
- Configurazione e manutenzione dei servizi Cloudera (DE, DW, ML) e degli strumenti di sicurezza/governance.
- Implementazione di CI/CD su GitHub e pratiche di data quality.
- Integrazione con sistemi esistenti e collaborazione con team cross-funzionali.
Vuoi costruire una Data Platform affidabile per il settore pubblico con tecnologie Cloudera e Spark?
Candidati ora come Cloudera Developer Full Remote.
>> https://cgmconsulting.it/offerta-lavoro/cloudera-developer-full-remote/
Contratto di lavoro: Tempo pieno, Tempo indeterminato
Retribuzione: €30.000,00 - €35.000,00 all'anno
Vantaggi:
- Buoni pasto
- Computer aziendale
- Lavoro da casa