ESPRIMO Srl, società di consulenza informatica che opera dal 2002 su tutto il territorio nazionale ed internazionale, a supporto delle imprese, si colloca nel settore dell'Information Technology proponendosi come obiettivo quello di fornire una vasta gamma di prodotti, servizi e soluzioni nelle aree più strategiche per l'impresa, come: Infrastrutture IT, Content Management, ERP, Business Intelligence, CRM, Web Applications, è alla ricerca di un: Di seguito, troverà un'analisi completa di tutti i requisiti per i potenziali candidati e le istruzioni su come candidarsi. Data Engineer ambito Big Data con almeno 3 anni di esperienza Responsabilità: Sviluppare e mantenere pipeline di ingestion CDC dai database sorgente verso il layer Bronze, tramite connettori Debezium/Confluent, garantendo zero data loss ed extract-once. Realizzare ed evolvere i flussi di elaborazione tra i layer Bronze → Silver → Gold con Apache Spark/Spark Streaming in Python (PySpark) e con Apache NiFi (processori e script Groovy).

Gestire le tabelle in formato Apache Iceberg su storage Ozone, incluse evoluzioni di schema (DDL) e ottimizzazioni. Configurare e gestire topic Kafka, offset e code di dead-letter (DLQ): analisi, reprocessing e alerting sui messaggi in errore.

Applicare gli standard di progetto: naming convention, tracciabilità, data lineage, accessi e visibilità sui data tier. Contribuire alle attività di testing,

versionamento e pipeline CI, oltre alla documentazione tecnica. Esperienza nello sviluppo di pipeline di Data Engineering.

Conoscenza delle architetture Data Lake e Lakehouse. Esperienza con paradigmi di Change Data Capture (CDC) e gestione di flussi dati in tempo reale. Conoscenza di Apache Spark per l'elaborazione distribuita dei dati.

Esperienza con Apache Kafka e architetture event-driven. Conoscenza di Apache NiFi per l'orchestrazione dei flussi dati. Esperienza con formati tabellari per Data Lake, preferibilmente Apache Iceberg. Conoscenza di piattaforme Big Data, preferibilmente Cloudera Data Platform (CDP).

Buona conoscenza di SQL e dei principali database relazionali. Conoscenza dei principi di Data Quality, Data Governance e monitoraggio delle pipeline. Familiarità con strumenti di versionamento del codice (Git) e pratiche di sviluppo collaborativo.

Capacità di analisi, problem solving e lavoro in team. Bari (in sede 5gg a settimana) Retribuzione indicativa: RAL € 32.000/35.000 Si offre un inserimento in un contesto stimolante e innovativo, con grandi prospettive di crescita qualificato e una retribuzione commisurata all'esperienza. La ricerca è rivolta ad entrambi i sessi (L.Inviare dettagliato curriculum vitae, con l'autorizzazione al trattamento dei dati personali secondo la Legge 196/2003.

Data Engineer ambito Big Data

Aiuti per donna disabile

Tirocinio retribuito

Ricevi nuove offerte di lavoro

Personal trainer

LAVORO a MILANO (Zona Bocconi):