07 ago
|
CM Sistemi Informatici
|
Italia
07 ago
CM Sistemi Informatici
Italia
Informazioni sull'offerta di lavoro Siamo alla ricerca di un/una Data Engineer / Databricks Developer da inserire all'interno del team per progettare, sviluppare ed evolvere soluzioni Data & AI su piattaforma Databricks , con particolare attenzione al data engineering, all'integrazione dei dati, all'automazione, all'analytics e allo sviluppo di servizi a supporto dei processi aziendali. Descrizione Attività Analizzare, progettare e sviluppare pipeline dati su piattaforma Databricks. Implementare processi di data ingestion, trasformazione e distribuzione dei dati provenienti da sistemi interni ed esterni. Sviluppare notebook, workflow e job automatizzati utilizzando Python e gli strumenti della piattaforma Databricks. Collaborare alla progettazione di moderne architetture Data Lakehouse scalabili. Sviluppare componenti software, API e servizi backend a supporto delle piattaforme dati. Integrare Databricks con database, sistemi enterprise, servizi cloud e piattaforme di Machine Learning. Garantire qualità, affidabilità e monitoraggio delle pipeline dati.
Gestire processi di versionamento, rilascio e automazione tramite pipeline CI/CD. Collaborare con Data Scientist, Software Engineer, Cloud Engineer e stakeholder di business. Supportare le attività di troubleshooting e la risoluzione di problematiche tecniche complesse. Contribuire all'evoluzione delle piattaforme cloud e delle soluzioni Data & AI aziendali. Applicare principi di sicurezza, governance e qualità dei dati durante l'intero ciclo di vita delle soluzioni. Requisiti Esperienza nello sviluppo con Python . Esperienza nell'utilizzo della piattaforma Databricks . Conoscenza di Apache Spark e dei principi di elaborazione distribuita dei dati. Esperienza nella progettazione e sviluppo di pipeline ETL/ELT . Ottima conoscenza di SQL e della modellazione dei dati. Esperienza con Delta Lake e architetture Data Lakehouse . Conoscenza di database relazionali e sistemi di storage dati. Esperienza con Git e workflow di s
📌 Data engineer (Italia)
🏢 CM Sistemi Informatici
📍 Italia