h3Chi siamo /h3 pPrefe è una startup innovativa che ha sviluppato una piattaforma AI di market intelligence attiva nel settore Fast-Moving Consumer Goods (FMCG). Stiamo sviluppando sistemi proprietari di intelligenza artificiale che supportano i brand e i retailer nei processi decisionali e stiamo ampliando il nostro team tech. Se vuoi lavorare su dati che alimentano modelli AI distribuiti su larga scala, questo ruolo fa per te! /p h3La tua missione /h3 pSiamo alla ricerca di un Data Engineer che contribuisca alle nostre operazioni di web scraping su larga scala. In questo ruolo supervisionerai, ottimizzerai ed espanderai la nostra infrastruttura di scraping, garantendo elevata qualità e affidabilità dei dati e contribuendo direttamente al successo dell'azienda. /p ul lisarai coinvolto in prima persona nello sviluppo e nella manutenzione di script di web scraping utilizzando le librerie Python più comuni per lo scraping e la gestione dei dati; /li ligestirai le operazioni quotidiane di scraping, coordinando oltre 5.000 spider attivi su punti vendita retail tramite il framework Scrapy; /li liorchestrerai i workflow con Apache Airflow e monitorerai la pipeline di produzione; /li ligestirai e ottimizzerai l'infrastruttura basata su Docker in ambienti VM; /li ligarantirai la qualità del codice e dei dati attraverso revisioni e QA, anche sul lavoro svolto da altri membri del team; /li liutilizzerai un database PostgreSQL per interrogare, validare e analizzare i dati raccolti; /li licontribuirai operativamente alla costruzione e manutenzione degli spider con Scrapy; /li limanterrai e migliorerai la documentazione e le best practice per standardizzare i processi; /li licollaborerai con team trasversali per garantire che i dati acquisiti rispondano alle esigenze di business; /li liutilizzerai GitHub per il version control e la collaborazione sul codice. /li /ul h3Cosa cerchiamo: /h3 ul licomprovata esperienza nel web scraping su larga scala (expertise con Scrapy indispensabile); /li lisolida conoscenza di Apache Airflow per l'orchestrazione dei workflow; /li liesperienza pratica con Docker e ambienti basati su VM; /li libuona conoscenza di SQL e capacità di lavorare con PostgreSQL per interrogazioni e validazione dei dati; /li lispiccate capacità di code review e QA, con attenzione alla qualità e alle performance; /li lieccellenti capacità di documentazione, organizzazione e comunicazione; /li liesperienza con i workflow Git/GitHub. /li /ul h3Cosa ti farà distinguere immediatamente: /h3 ul liesperienza nella gestione di infrastrutture proxy (Scrapoxy o similari); /li liesperienza con Selenium e Playwright per l'estrazione di contenuti dinamici; /li limentalità creativa e problem solving con ossessione per la tecnologia; /li licomprensione delle tecniche anti-scraping e dei metodi per navigarle. /li /ul ul lipossesso di Partita IVA (o disponibilità ad aprirla) per avviare rapidamente la collaborazione in una fase iniziale; /li liesperienza pregressa in startup e/o in contesti con team ridotti, con attitudine all’ownership, pragmatismo e velocità di esecuzione; /li limadrelingua italiano o equivalente e conoscenza della lingua inglese (livello B2 o superiore). /li /ul ul liretribuzione competitive; /li limodello di lavoro flessibile e smart working; /li lielevato livello di ownership e responsabilità tecnica reale; /li lirapida opportunità di crescita professionale; /li liambiente giovane, dinamico, collaborativo e inclusivo. /li /ul pScadenza candidatura: 22/03/2026 /p pPrefe è un datore di lavoro che garantisce pari opportunità. Valorizziamo la diversità e siamo impegnati a creare un contesto inclusivo per tutti i collaboratori. /p #J-18808-Ljbffr

📌 Data Engineer (Milano)
🏢 Prefe
📍 Milano