30 ago
|
Cm Sistemi Informatici
|
Italia
30 ago
Cm Sistemi Informatici
Italia
Siamo alla ricerca di un/una Data Engineer / Databricks Developer da inserire all'interno del team per progettare, sviluppare ed evolvere soluzioni Data & AI su piattaforma Databricks, con particolare attenzione al data engineering, all'integrazione dei dati, all'automazione, all'analytics e allo sviluppo di servizi a supporto dei processi aziendali.
Analizzare, progettare e sviluppare pipeline dati su piattaforma Databricks.
Implementare processi di data ingestion, trasformazione e distribuzione dei dati provenienti da sistemi interni ed esterni.
Sviluppare notebook, workflow e job automatizzati utilizzando Python e gli strumenti della piattaforma Databricks.
Collaborare alla progettazione di moderne architetture Data Lakehouse scalabili.
Sviluppare componenti software, API e servizi backend a supporto delle piattaforme dati.
Integrare Databricks con database, sistemi enterprise, servizi cloud e piattaforme di Machine Learning.
Garantire qualità, affidabilità e monitoraggio delle pipeline dati.
Gestire processi di versionamento, rilascio e automazione tramite pipeline CI/CD.
Collaborare con Data Scientist, Software Engineer, Cloud Engineer e stakeholder di business.
Contribuire all'evoluzione delle piattaforme cloud e delle soluzioni Data & AI aziendali.
Applicare principi di sicurezza, governance e qualità dei dati durante l'intero ciclo di vita delle soluzioni.
Esperienza nello sviluppo con Python.
Esperienza nell'utilizzo della piattaforma Databricks.
Conoscenza di Apache Spark e dei principi di elaborazione distribuita dei dati.
Esperienza nella progettazione e sviluppo di pipeline ETL/ELT.
Ottima conoscenza di SQL e della modellazione dei dati.
Esperienza con Delta Lake e architetture Data Lakehouse.
Conoscenza di database relazionali e sistemi di storage dati.
Esperienza con Git e workflow di sviluppo partecipativo.
Esperienza nell'utilizzo di pipeline CI/CD e strumenti di automazione.
Conoscenza dei principali servizi cloud, preferibilmente Microsoft Azure.
📌 Data Engineer (Italia)
🏢 Cm Sistemi Informatici
📍 Italia