Data Engineer Con Spark/Scala

07 ago - Italia
Altro

Randstad Digital , divisione specializzata nella ricerca e selezione di profili ICT, ricerca per conto di un'innovativa azienda operante nel settore dello sviluppo tecnologico avanzato un Le seguenti informazioni hanno lo scopo di fornire ai potenziali candidati una migliore comprensione dei requisiti per questo ruolo. Mid Data Platform Engineer da inserire all'interno della propria divisione Data & AI. La risorsa entrerà a far parte del team di Data Engineering con autonomia end-to-end su progettazione, sviluppo e operatività della data platform, lavorando in un contesto guidato dai dati e dove l'AI governa sé stessa. Il candidato ideale collaborerà all'evoluzione dell'infrastruttura, unendo solidità ingegneristica e sperimentazione tecnologica. Responsabilità Principali Evoluzione della Piattaforma: Progettare e sviluppare i layer di ingestione, trasformazione e serving su BigQuery , garantendo elevate performance, ottimizzazione dei costi e freschezza del dato. Infrastructure as Code (IaC): Gestire l'infrastruttura cloud tramite Terraform con approccio zero click-ops,



assicurando un ecosistema completamente versionato e riproducibile. Orchestrazione & Pipeline: Implementare e mantenere le orchestrazioni su Airflow / Cloud Composer adottando un approccio modulare, affidabile e testabile. Scelte Architetturali: Contribuire attivamente alle decisioni strategiche sull'architettura dati, supportando la transizione verso paradigmi quali Data Mesh, Lakehouse e Semantic Layer. Agenti AI (LLM-based): Progettare e sviluppare agenti intelligenti basati su modelli linguistici di grandi dimensioni per la classificazione automatica di dataset, l'intercettazione di anomalie e la remediation autonoma. Data Lineage & Catalogazione: Costruire e supervisionare sistemi di catalogazione avanzata e data lineage integrati con soluzioni di mercato (es. Data Contracts: Definire le policy di accesso e i contratti sui dati (Data Contracts) da applicare programmaticamente attraverso pipeline di

Aiuti per donna disabile

08 ago - Carini
Mary

Tirocinio retribuito

08 ago - Melegnano
Sicurezza e Gestioni

Ricevi nuove offerte di lavoro

Crea una Job Alert gratuita per data engineer con spark/scala / italia

Personal trainer

08 ago - Napoli
Ilaria

LAVORO a MILANO (Zona Bocconi):

08 ago - Milano
dalia2