Experteer Overview
In questa posizione supporti i clienti in progetti Big Data, collaborando con analisti e solution architect per capire casi d’uso e obiettivi. Gestisci acquisizione, trasformazione, pulizia e caricamento dati in data lake per analytics e modelli ML, sfruttando ambienti cloud native e soluzioni Databricks. Farai da ponte tra Data Science e Data Engineering, con un approccio Kaizen volto al miglioramento continuo delle competenze. Unisci innovazione e semplicità per risolvere sfide quotidiane in un contesto internazionale e ibrido tra cultura giapponese ed europea.
Retribuzione / Benefits
- Acquisizione, trasformazione, pulizia, conversione, compressione e caricamento dati nei data lake per analytics e ML
- collaborare con business analyst e solution architect per definire use case e obiettivi
- risolvere sfide in ambiente cloud native con soluzioni innovative ma semplici
- fare da ponte tra Data Science e Data Engineering
- realizzare PoC per indirizzare bisogni di business
- supportare migrazione di workload da on premise a cloud
- monitorare infrastrutture distribuite usando strumenti Azure o open source
- utilizzare Java, Scala, Python e shell scripting per sviluppi e automazioni
- gestire e guidare team medio-piccoli
- utilizzare Apache Spark, Databricks, Azure Data Factory e Azure Synapse in contesti ETL/ELT
Responsabilità
- Esperienza in ambiente cloud native su almeno uno tra GCP/AWS/Azure
- =5 anni su Databricks (preferibile)
- Conoscenza di Big Data architectures, cloud e on-premise
- Esperienza con infrastruttura e networking Azure
- Esperienza nello sviluppo di PoC per rispondere a bisogni di business
- Migrazione workload da on premise al cloud
- Monitoraggio di infrastrutture distribuite con strumenti Azure o Grafana/Prometheus
- Conoscenza di Java, Scala, Python e shell scripting
- SQL
- Esperienza nel guidare team medi
- Esperienza con Spark, Databricks, Azure Data Factory, Azure Synapse e altri strumenti ETL/ELT Azure
- Certificazione Microsoft: almeno una su Azure o Databricks (es. Azure Data Engineer Associate, Databricks Spark Developer)
Requisiti fondamentali
