Senior Databricks Data Engineer
Descrizione dell'azienda
Chi è Sopra Steria
Sopra Steria, leader europeo nel settore tecnologico con ****** dipendenti in 30 Paesi e un fatturato di 5,6 Mld € nel ****, realizza per aziende private e organizzazioni pubbliche progetti di trasformazione strategica, grazie a competenze distintive di consulenza, system integration, sviluppo di soluzioni software, intelligenza artificiale e cybersecurity. Il Gruppo affianca i propri clienti nella generazione di valore sostenibile e risultati concreti, combinando la conoscenza delle tecnologie più innovative con la capacità di interpretare le esigenze di business dei diversi settori.
In Italia è presente con 6 sedi a Milano, Roma, Parma, Padova, Ariano Irpino e Napoli. Con circa ***** collaboratori e un fatturato **** di 107 M€ è attivo nei settori dei Servizi Finanziari, della Pubblica Amministrazione, dell'Energia, delle Telecomunicazioni e dello Spazio. Nel settore privato si distingue per l'esperienza con il Retail e il Lusso, i Media e le aziende manufatturiere. Con questa esperienza trasversale contribuisce ad accelerare la trasformazione digitale del Paese attraverso innovazione, competenze specialistiche e un approccio centrato sulle persone.
The world is how we shape it
Sopra Steria (SOP) è quotata su Euronext Paris (Comparto A) – ISIN: FR**********. Scopri di più su
Descrizione del lavoro
Ai fini dell'ampliamento del nostro centro di competenza dedicato alla Data Engineering e all'Advanced Analytics, siamo alla ricerca di un/una
Senior Databricks Data Engineer
che operi come pilastro tecnico per la costruzione di architetture dati moderne. La risorsa garantirà la qualità dei processi di ingestione e trasformazione, promuovendo le best practice di sviluppo su ambienti Cloud (Azure/AWS/GCP) all'interno dei team di progetto.
Sarai responsabile di progettare, sviluppare e implementare pipeline di dati scalabili e performanti, coordinando l'ottimizzazione dei carichi di lavoro in collaborazione con i Data Scientist e i Data Architect.
In scenari complessi,
guiderai il design dell'architettura
Medallion
(Bronze, Silver, Gold) e la gestione dei
Delta Lake
, risolvendo colli di bottiglia tecnici e garantendo la consegna di soluzioni robuste per il processamento di grandi volumi di dati (Batch e Streaming).
In un contesto orientato all'innovazione tecnologica con un'impostazione
Business Oriented
, ti occuperai di:
Sviluppo Pipeline ETL/ELT: Progettazione e implementazione di flussi di dati complessi utilizzando Apache Spark (PySpark, Spark SQL, Scala);
Gestione del Data Lakehouse: Ottimizzazione delle tabelle Delta Lake e implementazione di logiche di partizionamento e indexing per massimizzare le performance di lettura/scrittura;
Data Governance & Security: Configurazione della sicurezza e del controllo accessi ai dati tramite Unity Catalog, garantendo la conformità alle policy aziendali;
Collaborazione Agile: Cooperazione con i Data Scientist per l'integrazione di modelli di Machine Learning (MLflow) e con i Power BI Developer per l'esposizione di set di dati ottimizzati (Gold Layer);
Automazione e Monitoraggio: Implementazione di workflow tramite Databricks Jobs, integrazione con strumenti di CI/CD e monitoraggio della qualità del dato (Data Quality checks).
Qualifiche
Competenze richieste:
Apache Spark
Ecosistema Hadoop
Programmazione Scala e Python
Almeno 2 anni di esperienza su servizi e tecnologie del cloud Microsoft Azure, con competenze nella progettazione e gestione di architetture dati cloud?native.
Esperto nei processi di data ingestion sia batch che streaming, orientato alle performance e alla qualità del dato.
Informazioni aggiuntive
LA NOSTRA PROPOSTA:
Ti offriamo l'opportunità di lavorare in un ambiente vivace, su progetti nazionali ed internazionali, che ti permetta di approfondire continuamente le tue conoscenze e di sviluppare le tue competenze.
Se vuoi dare una spinta alla tua carriera ed entrare a far parte di una società di servizi IT leader in Europa ed in continua crescita, inviaci il tuo curriculum!
Per questa posizione è prevista una RAL (retribuzione annua lorda) compresa tra € ****** e € ******.
La sede di lavoro è
ROMA
con possibilità, compatibilmente con l'attività svolta, di aderire all'accordo di smart working secondo quanto previsto dalla nostra policy aziendale. E' comunque richiesta la disponibilità a compiere trasferte sul territorio nazionale e internazionale.
Scopri Sopra Steria! Visita il nostro sito e rimani aggiornato attraverso il blog e le pagine social
Il presente annuncio è rivolto ad entrambi i sessi, ai sensi delle leggi 903?77 e 125?91 e a persone di tutte le età e tutte le nazionalità, ai sensi dei decreti legislativi 215?03 e 216?03 .
Tutte le regole relative ai tuoi dati raccolti in questo modo sono dettagliate nell'Informativa sulla Protezione dei Dati dei Candidati ().
In conformità con la legislazione / i regolamenti vigenti in materia di tecnologia dell'informazione, documenti e libertà civili, hai diritti di accesso, rettifica, cancellazione, portabilità, limitazione, opposizione e definizione di istruzioni riguardanti la sorte dei tuoi Dati personali dopo la tua morte. Questi diritti saranno esercitati inviando un'e-mail al responsabile della protezione dei dati (DPO) all'indirizzo ****** o per posta a questo indirizzo: Sopra Steria Group S.p.A. - Ufficio legale - Strada 4 Palazzo A********* Assago (MI).
Hai anche il diritto di presentare un reclamo Garante per la Protezione dei Dati Personali (Piazza di Monte Citorio n. ********* Roma), se il titolare del trattamento non rispetta gli obblighi previsti dalla legislazione in vigore.
Chi è Sopra Steria
Sopra Steria, leader europeo nel settore tecnologico con ****** dipendenti in 30 Paesi e un fatturato di 5,6 Mld € nel ****, realizza per aziende private e organizzazioni pubbliche progetti di trasformazione strategica, grazie a competenze distintive di consulenza, system integration, sviluppo di soluzioni software, intelligenza artificiale e cybersecurity. Il Gruppo affianca i propri clienti nella generazione di valore sostenibile e risultati concreti, combinando la conoscenza delle tecnologie più innovative con la capacità di interpretare le esigenze di business dei diversi settori.
In Italia è presente con 6 sedi a Milano, Roma, Parma, Padova, Ariano Irpino e Napoli. Con circa ***** collaboratori e un fatturato **** di 107 M€ è attivo nei settori dei Servizi Finanziari, della Pubblica Amministrazione, dell'Energia, delle Telecomunicazioni e dello Spazio. Nel settore privato si distingue per l'esperienza con il Retail e il Lusso, i Media e le aziende manufatturiere. Con questa esperienza trasversale contribuisce ad accelerare la trasformazione digitale del Paese attraverso innovazione, competenze specialistiche e un approccio centrato sulle persone.
The world is how we shape it
Sopra Steria (SOP) è quotata su Euronext Paris (Comparto A) – ISIN: FR**********. Scopri di più su
Descrizione del lavoro
Ai fini dell'ampliamento del nostro centro di competenza dedicato alla Data Engineering e all'Advanced Analytics, siamo alla ricerca di un/una
Senior Databricks Data Engineer
che operi come pilastro tecnico per la costruzione di architetture dati moderne. La risorsa garantirà la qualità dei processi di ingestione e trasformazione, promuovendo le best practice di sviluppo su ambienti Cloud (Azure/AWS/GCP) all'interno dei team di progetto.
Sarai responsabile di progettare, sviluppare e implementare pipeline di dati scalabili e performanti, coordinando l'ottimizzazione dei carichi di lavoro in collaborazione con i Data Scientist e i Data Architect.
In scenari complessi,
guiderai il design dell'architettura
Medallion
(Bronze, Silver, Gold) e la gestione dei
Delta Lake
, risolvendo colli di bottiglia tecnici e garantendo la consegna di soluzioni robuste per il processamento di grandi volumi di dati (Batch e Streaming).
In un contesto orientato all'innovazione tecnologica con un'impostazione
Business Oriented
, ti occuperai di:
Sviluppo Pipeline ETL/ELT: Progettazione e implementazione di flussi di dati complessi utilizzando Apache Spark (PySpark, Spark SQL, Scala);
Gestione del Data Lakehouse: Ottimizzazione delle tabelle Delta Lake e implementazione di logiche di partizionamento e indexing per massimizzare le performance di lettura/scrittura;
Data Governance & Security: Configurazione della sicurezza e del controllo accessi ai dati tramite Unity Catalog, garantendo la conformità alle policy aziendali;
Collaborazione Agile: Cooperazione con i Data Scientist per l'integrazione di modelli di Machine Learning (MLflow) e con i Power BI Developer per l'esposizione di set di dati ottimizzati (Gold Layer);
Automazione e Monitoraggio: Implementazione di workflow tramite Databricks Jobs, integrazione con strumenti di CI/CD e monitoraggio della qualità del dato (Data Quality checks).
Qualifiche
Competenze richieste:
Apache Spark
Ecosistema Hadoop
Programmazione Scala e Python
Almeno 2 anni di esperienza su servizi e tecnologie del cloud Microsoft Azure, con competenze nella progettazione e gestione di architetture dati cloud?native.
Esperto nei processi di data ingestion sia batch che streaming, orientato alle performance e alla qualità del dato.
Informazioni aggiuntive
LA NOSTRA PROPOSTA:
Ti offriamo l'opportunità di lavorare in un ambiente vivace, su progetti nazionali ed internazionali, che ti permetta di approfondire continuamente le tue conoscenze e di sviluppare le tue competenze.
Se vuoi dare una spinta alla tua carriera ed entrare a far parte di una società di servizi IT leader in Europa ed in continua crescita, inviaci il tuo curriculum!
Per questa posizione è prevista una RAL (retribuzione annua lorda) compresa tra € ****** e € ******.
La sede di lavoro è
ROMA
con possibilità, compatibilmente con l'attività svolta, di aderire all'accordo di smart working secondo quanto previsto dalla nostra policy aziendale. E' comunque richiesta la disponibilità a compiere trasferte sul territorio nazionale e internazionale.
Scopri Sopra Steria! Visita il nostro sito e rimani aggiornato attraverso il blog e le pagine social
Il presente annuncio è rivolto ad entrambi i sessi, ai sensi delle leggi 903?77 e 125?91 e a persone di tutte le età e tutte le nazionalità, ai sensi dei decreti legislativi 215?03 e 216?03 .
Tutte le regole relative ai tuoi dati raccolti in questo modo sono dettagliate nell'Informativa sulla Protezione dei Dati dei Candidati ().
In conformità con la legislazione / i regolamenti vigenti in materia di tecnologia dell'informazione, documenti e libertà civili, hai diritti di accesso, rettifica, cancellazione, portabilità, limitazione, opposizione e definizione di istruzioni riguardanti la sorte dei tuoi Dati personali dopo la tua morte. Questi diritti saranno esercitati inviando un'e-mail al responsabile della protezione dei dati (DPO) all'indirizzo ****** o per posta a questo indirizzo: Sopra Steria Group S.p.A. - Ufficio legale - Strada 4 Palazzo A********* Assago (MI).
Hai anche il diritto di presentare un reclamo Garante per la Protezione dei Dati Personali (Piazza di Monte Citorio n. ********* Roma), se il titolare del trattamento non rispetta gli obblighi previsti dalla legislazione in vigore.