Data Engineer

Vedi l’offerta su Go Lavoro: golavoro.it/annuncio-lavoro/85hl0l

Michael Page
La figura entrerà a far parte di un team IT/Data composto da circa 10 professionisti e sarà coinvolta in un progetto strategico, in una fase di costruzione ed evoluzione della piattaforma, con il supporto di figure senior e una resistente esposizione alle tecnologie più attuali del mondo Data Engineering.
Resposabilità principali:
- Progettazione, sviluppo e manutenzione di pipeline dati batch e near real-time.
- Supporto all'implementazione e all'evoluzione del Data Lake aziendale.
- Modellazione, trasformazione e consolidamento dei dati a supporto di reporting, analytics e business intelligence.
- Implementazione e gestione dei workflow di orchestrazione tramite Apache Airflow.
- Sviluppo e ottimizzazione di job distribuiti con Apache Spark.
- Gestione di dataset in formato Parquet e architetture basate su Delta Lake.
- Verifica della corretta alimentazione e trasformazione dei dati provenienti da differenti sorgenti informative.
- Controllo e monitoraggio della qualità del dato.
- Supporto alla realizzazione di dataset destinati a reporting e analytics,



anche tramite Power BI.
- Monitoraggio delle performance delle pipeline e gestione delle anomalie.
- Collaborazione con stakeholder aziendali, referenti tecnici e team applicativi per la raccolta dei requisiti e la delivery delle soluzioni.
- Laurea Magistrale in Informatica, Ingegneria Informatica o discipline STEM.
- Esperienza di almeno 2-3 anni in ambito Data Engineering.
- Ottima conoscenza di SQL.
- Buona conoscenza di Python per attività di data engineering e automazione.
- Esperienza concreta con:
- Apache Spark
- Apache Airflow
- Delta Lake
- Formato Parquet
- Esperienza con architetture Data Lake, Lakehouse e Data Warehouse.
- Conoscenza dei processi ETL/ELT.
- Esperienza nell'integrazione di dati provenienti da sorgenti multiple.
- Capacità di troubleshooting e ottimizzazione delle performance.
- Conoscenza di Power BI
- Esperienza maturata in contesti enterprise o su progetti di modernizzazione

Vedi l’offerta su Go Lavoro: golavoro.it/annuncio-lavoro/85hl0l