16 nov
|
Sopra Steria
|
Roma
ph3Descrizione del lavoro /h3 pPer l’ampliamento del nostro centro di competenza dedicato alla Data Engineering e all'Advanced Analytics, siamo alla ricerca di un/una bSenior Databricks Data Engineer /b che operi come pilastro tecnico per la costruzione di architetture dati moderne. La risorsa garantirà la qualità dei processi di ingestione e trasformazione, promuovendo le best practice di sviluppo su ambienti Cloud (Azure/AWS/GCP) all’interno dei team di progetto. /p pSarai responsabile di progettare, sviluppare e implementare pipeline di dati scalabili e performanti, coordinando l'ottimizzazione dei carichi di lavoro in collaborazione con i Data Scientist e i Data Architect. /p pIn scenari complessi, guiderai il design dell'architettura Medallion (Bronze, Silver, Gold) e la gestione del Delta Lake, risolvendo colli di bottiglia tecnici e garantendo la consegna di soluzioni robuste per il processamento di grandi volumi di dati (Batch e Streaming). /p pIn un contesto orientato all'innovazione tecnologica con un’impostazione bBusiness Oriented /b, ti occuperai di: /p ul liSviluppo Pipeline ETL/ELT: Progettazione e implementazione di flussi di dati complessi utilizzando Apache Spark (PySpark, Spark SQL, Scala). /li liGestione del Data Lakehouse: Ottimizzazione delle tabelle Delta Lake e implementazione di logiche di partizionamento e indexing per massimizzare le performance di lettura/scrittura. /li liData Governance Security: Configurazione della sicurezza e del controllo accessi ai dati tramite Unity Catalog, garantendo la conformità alle policy aziendali. /li liCollaborazione Agile: Cooperazione con i Data Scientist per l'integrazione di modelli di Machine Learning (MLflow)
e con i Power BI Developer per l'esposizione di set di dati ottimizzati (Gold Layer). /li liAutomazione e Monitoraggio: Implementazione di workflow tramite Databricks Jobs, integrazione con strumenti di CI/CD e monitoraggio della qualità del dato (Data Quality checks). /li /ul pCompetenze richieste: /p ul liApache Spark /li liProgrammazione Scala e Python /li liAlmeno 2 anni di esperienza su servizi e tecnologie del cloud Microsoft Azure, con competenze nella progettazione e gestione di architetture dati cloud‑native. /li liEsperto nei processi di data ingestion sia batch che streaming, orientato alle performance e alla qualità del dato. /li /ul h3Ulteriori informazioni /h3 pLocation: Possibilità di lavoro da remoto secondo la policy aziendale, con disponibilità a trasferte sul territorio nazionale e internazionale. /p pIl presente annuncio è rivolto ad entrambi i sessi, ai sensi delle leggi 903/77 e 125/91 e a persone di tutte le età e tutte le nazionalità, ai sensi dei decreti legislativi 215/03 e 216/03. /p pTutte le regole relative ai tuoi dati raccolti in questo modo sono dettagliate nell'Informativa sulla Protezione dei Dati dei Candidati ( In conformità con la legislazione / i regolamenti vigenti in materia di tecnologia dell'informazione, documenti e libertà civili, hai diritti di accesso, rettifica, cancellazione, portabilità, limitazione, opposizione e definizione di istruzioni riguardanti la sorte dei tuoi Dati personali dopo la tua morte. Questi diritti saranno esercitati inviando un'email al responsabile della protezione dei dati (DPO) all'indirizzo o per posta a questo indirizzo: Sopra Steria Group S.p.A.
- Hai anche il diritto di presentare un reclamo Garante per la Protezione dei Dati Personali (Piazza di Monte Citorio n.
📌 Senior Data Engineer (SQL) (Roma)
🏢 Sopra Steria
📍 Roma