05 ago
|
Soft Strategy
|
Bari
05 ago
Soft Strategy
Bari
ph3Le tue sfide /h3 pCerchiamo un Data Engineer da inserire nel team che sta realizzando TIDE (Trasferimento Infrastrutturale Dati ed Eventi): una piattaforma infrastrutturale di raccolta e propagazione, in tempo reale e "certificabile", degli eventi di variazione dati provenienti dai database operazionali aziendali.
/p pLa soluzione si basa su un paradigma di Change Data Capture (CDC) e su un'architettura Lakehouse Medallion (Bronze / Silver / Gold) costruita su tecnologie enterprise: Confluent Kafka, Cloudera Data Platform, Apache Iceberg, Apache Spark, Apache NiFi.
È un progetto in robusto crescita, con roadmap pluriennale, che alimenta servizi di business come la Centrale Eventi e casi d'uso di analytics avanzato.
/p pEntrerai in un team strutturato, dove i profili senior definiscono architettura e standard: il tuo compito sarà implementare, far evolvere e mantenere robusti i flussi dati, con reale possibilità di crescere sui temi di streaming, governance e data quality.
/p h3Cosa farai /h3 ul liSviluppare e mantenere pipeline di ingestion CDC dai database sorgente verso il layer Bronze, tramite connettori Debezium / Confluent, garantendo zero data loss ed extract-once.
/li liRealizzare ed evolvere i flussi di elaborazione tra i layer Bronze ? Silver ? Gold con Apache Spark / Spark Streaming in Python (PySpark) e con Apache NiFi (processori e script Groovy).
/li liGestire le tabelle in formato Apache Iceberg su storage Ozone, incluse evoluzioni di schema (DDL) e ottimizzazioni.
/li liConfigurare e gestire topic Kafka, offset e code di dead-letter (DLQ): analisi, reprocessing e alerting sui messaggi in errore.
/li liImplementare monitoraggio, alerting e tuning delle pipeline (salute dei flussi, latenza, volumi, soglie).
/li liApplicare gli standard di progetto: naming convention, tracciabilità, data lineage, accessi e visibilità sui data tier.
/li liContribuire alle attività di testing, versionamento e pipeline CI, oltre alla documentazione tecnica.
/li liSupportare le fasi di migrazione dei flussi attraverso gli ambienti (Test ? Collaudo ? Produzione).
/li /ul h3Perché dovremmo sceglierti /h3 h3Riteniamo Fondamentali Per La Tua Candidatura /h3 ul liLaurea (triennale o magistrale) in Informatica,
Ingegneria Informatica, ICT o discipline affini, oppure esperienza equivalente maturata sul campo.
/li li4-6 anni di esperienza come Data Engineer o in ruoli equivalenti su pipeline dati.
/li liSolida conoscenza di SQL e dei principali database relazionali (almeno uno tra Oracle, PostgreSQL, MySQL, SQL Server).
/li liBuona padronanza di Python per lo sviluppo di job dati, con esperienza pratica di Apache Spark / PySpark (ambito streaming e/o batch su dati strutturati).
/li liConoscenza di Apache Kafka e dei concetti di event streaming (topic, partizioni, offset, consumer group).
/li liFamiliarità con ecosistemi big data / Hadoop / Cloudera e con formati di file colonnari (Parquet).
/li liComprensione dei concetti di pipeline dati, ETL/ELT e architetture a layer (es. Medallion).
/li liDimestichezza con Git e con logiche di versionamento e CI.
/li /ul h3Requisiti Che Costituiscono Un Plus /h3 ul liEsperienza con CDC e con connettori Debezium / Confluent.
/li liConoscenza di Apache NiFi e capacità di scripting in Groovy (processori custom, filtri).
/li liEsperienza con Open Table Format (Apache Iceberg, Delta, Hudi) e concetti di time travel / data versioning.
/li liConoscenza di strumenti di data lineage / data catalog / governance (Apache Atlas, OpenMetadata).
/li liNozioni di data quality, data security e auditing.
/li liEsperienza con MongoDB o altre sorgenti NoSQL.
/li liConoscenza di Ozone o altri storage distribuiti.
/li liFamiliarità con strumenti di collaborazione Jira / Confluence.
/li /ul h3Competenze trasversali /h3 ul liAttenzione a robustezza, affidabilità e qualità del dato.
/li liMetodo e precisione nel seguire standard e convenzioni condivise.
/li liCapacità di lavorare in team e di coordinarsi con figure architetturali e di business.
/li liAutonomia nella diagnosi e risoluzione di problemi su flussi in esercizio.
/li liBuona comunicazione e propensione alla documentazione.
/li liOttime capacità di problem solving e di analisi.
/li liAttitudine al lavoro in team e alla gestione autonoma dei progetti.
/li /ul h3Dettagli Contrattuali e Retributivi /h3 ul liSede di lavoro: Bari (modalità in presenza) /li liOrario di lavoro: Full-time, 40h settimanali (9:*****:00, dal lunedì al venerdì) /li liTrasferte: occasionali su territorio nazionale /li liContratto: tempo indeterminato - CCNL Terziario, livello da definire /li liPacchetto retributivo: €****** - €******, compresi eventuali benefit /li liJob Family: Tech Consultant /li liRuoli possibili: Consultant - Senior Consultant /li liAttività svolta anche presso sedi dei clienti; possibile variazione di contesto e orari in funzione dei progetti, nel rispetto della normativa vigente.
/li /ul h3Sede di lavoro /h3 pBari, con attività svolta interamente in presenza presso il cliente.
/p h3Perché scegliere Soft Strategy?
/h3 h3Chi siamo /h3 pSiamo un'affermata realtà nel settore della consulenza ed offriamo servizi altamente specializzati in ambito Management Consulting, Information Technology e della Customer Experience.
/p h3Investiamo nel nostro asset migliore: le persone /h3 pSarai immerso immediatamente in sfide coinvolgenti, offrendoti l'opportunità di ampliare le tue competenze e gestire progetti complessi e stimolanti presso i nostri clienti.
/p h3Formazione /h3 pValorizziamo il capitale umano per renderlo un asset competitivo.
Crediamo nella formazione perché aumenta il valore della nostra impresa e la motivazione delle nostre risorse.
/p h3Diversity and inclusion /h3 pLa ricerca rispetta il D.lgs.
********, il D.lgs.
****** e il D.lgs.
****** ed è aperta a candidati di qualsiasi orientamento sessuale o espressione di genere, età, etnia e credo religioso.
/p pSettore: Informatica /p pRuolo: Informatica/Tecnologia /p pCCNL applicato: COMMERCIO - Confcommercio /p pRal /p pSalario mensile: EUR **** - EUR **** /p pTipo di occupazione: Contratto a tempo indeterminato /p /p #J-*****-Ljbffr
📌 Data Engineer (Bari)
🏢 Soft Strategy
📍 Bari