Data Engineering rif 23732

Vedi l’offerta su Go Lavoro: golavoro.it/annuncio-lavoro/86vghr

Siamo alla ricerca di profili Data Engineering per attività in presenza.

Non è affidabile/a delle competenze necessarie per questa opportunità? Legga la descrizione completa qui sotto per avere un quadro completo dei requisiti richiesti.
richiediamo almeno 2/4 anni di esperienza e ottima conoscenza della lingua inglese
Responsabilità
- Sviluppa pipeline di ingestione e trasformazione dati secondo le specifiche concordate, curandone correttezza, leggibilità e manutenibilità.
- Integra dati da sorgenti eterogenee: database relazionali, file, API, sistemi gestionali e applicativi di settore.
- Implementa strutture dati secondo modelli definiti da altri, comprendendo la logica che li governa.
- Verifica il risultato del proprio lavoro, scrivendo test, controlli di qualità e verifiche di coerenza sui flussi realizzati.
- Presidia l'esercizio delle pipeline in produzione, intervenendo su malfunzionamenti e degrado delle prestazioni con il supporto del team.
- Documenta quanto realizza e illustra lo stato di avanzamento del proprio lavoro e partecipa alle riunioni tecniche con il cliente.





Competenze tecniche richieste
- SQL: padronanza solida, incluse le funzioni analitiche e la capacità di leggere e ottimizzare query non banali.
- Programmazione: almeno un linguaggio di programmazione applicato al trattamento dei dati, tipicamente Python, con buona pratica delle librerie di manipolazione.
- Elaborazione dati: comprensione dei paradigmi batch e streaming, delle logiche di caricamento incrementale e della gestione degli errori e dei riavvii.
- Big Data e Apache Spark: pratica operativa di Spark su dati distribuiti — trasformazioni, partizionamento, riconoscimento delle operazioni costose come le ridistribuzioni fra nodi — e conoscenza dei formati colonnari e dei formati tabellari transazionali.
- Modellazione: conoscenza dei principi di modellazione analitica — fatti, dimensioni, storicizzazione — e della differenza fra modello operazionale e modello analitico.
- Ambienti clo

Vedi l’offerta su Go Lavoro: golavoro.it/annuncio-lavoro/86vghr