Siamo alla ricerca di un/una Data Engineer / Databricks Developer da inserire all'interno del team per progettare, sviluppare ed evolvere soluzioni Data & AI su piattaforma Databricks, con particolare attenzione al data engineering, all'integrazione dei dati, all'automazione, all'analytics e allo sviluppo di servizi a supporto dei processi aziendali.
Descrizione Attività
- Analizzare, progettare e sviluppare pipeline dati su piattaforma Databricks.
- Implementare processi di data ingestion, trasformazione e distribuzione dei dati provenienti da sistemi interni ed esterni.
- Sviluppare notebook, workflow e job automatizzati utilizzando Python e gli strumenti della piattaforma Databricks.
- Collaborare alla progettazione di moderne architetture Data Lakehouse scalabili.
- Sviluppare componenti software, API e servizi backend a supporto delle piattaforme dati.
- Integrare Databricks con database, sistemi enterprise, servizi cloud e piattaforme di Machine Learning.
- Garantire qualità, affidabilità e monitoraggio delle pipeline dati.
- Gestire processi di versionamento, rilascio e automazione tramite pipeline CI/CD.
- Collaborare con Data Scientist, Software Engineer, Cloud Engineer e stakeholder di business.
- Supportare le attività di troubleshooting e la risoluzione di problematiche tecniche complesse.
- Contribuire all'evoluzione delle piattaforme cloud e delle soluzioni Data & AI aziendali.
- Applicare principi di sicurezza, governance e qualità dei dati durante l'intero ciclo di vita delle soluzioni.
Requisiti
- Esperienza nello sviluppo con Python.
- Esperienza nell'utilizzo della piattaforma Databricks.
- Conoscenza di Apache Spark e dei principi di elaborazione distribuita dei dati.
- Esperienza nella progettazione e sviluppo di pipeline ETL/ELT.
- Ottima conoscenza di SQL e della modellazione dei dati.
- Esperienza con Delta Lake e architetture Data Lakehouse.
- Conoscenza di database relazionali e sistemi di storage dati
📌 Data Engineer (Bologna)
🏢 CM Sistemi Informatici
📍 Bologna
Candidati a questo annuncio
Mostra le tue capacità professionali all'azienda, compila il form e lascia un tocco personale nella lettera di presentazione, aiuterà il recruiter nella scelta del candidato.