Databricks Expert - Data Engineer/Data Architect

Vedi l’offerta su Go Lavoro: golavoro.it/annuncio-lavoro/77ystd

Overview

In questa posizione lavori come Databricks Expert all’interno di Data & Intelligence, supportando progetti Big Data per clienti e collaborando con analisti di business e solution architect. Gestisci acquisizione, trasformazione e loading di dati in data lake per analisi e modelli di machine learning. Metti in campo soluzioni innovative nel cloud, collegando Data Science e Data Engineering. L’possibilità unisce cultura giapponese-europea e un approccio KAIZEN per migliorare competenze e processo.

Benefits

- Supporto a progetti Big Data per clienti
- Gestione acquisizione, trasformazione, pulizia, conversione, compression e caricamento dati nei data lake per analytics e ML
- Progettazione e implementazione di soluzioni in ambienti cloud ibridi, agendo da ponte tra Data Science e Data Engineering
- Lead su PoC per indirizzare esigenze di business e scelta di tecnologie
- Monitoraggio e gestione di infrastrutture distribuite (Azure o alternative open source)
- Migrazione workload da on-prem a cloud e ottimizzazione di pipeline ETL/ELT

Responsabilità

- Esperienza in ambienti cloud pubblici (GCP/AWS/Azure)
- 5+ anni su Databricks
- Conoscenza di Big Data architectures, cloud e on premisi
- Esperienza in Azure infrastructure e networking
- Capacità di realizzare PoC per rispondere a bisogni di business
- Esperienza in migrazione da on-prem a cloud




- Monitoring di infrastrutture distribuite (Azure o Grafana/Prometheus)
- Proven experience in Java, Scala, Python, shell scripting
- Conoscenza SQL
- Esperienza nella leadership di team medi
- Esperienza con Apache Spark, Databricks, Azure Data Factory, Azure Synapse
- Certificazione Microsoft: almeno una tra Azure o Databricks (Azure Data Engineer Associate, Azure Solutions Architect Expert, Databricks Spark Developer, Databricks Data Engineer, Databricks Machine Learning)

Requisiti fondamentali

- Esperienza in ambienti cloud pubblici (GCP/AWS/Azure)
- 5+ anni su Databricks
- Conoscenza di Big Data architectures, cloud e on prem
- Esperienza in Azure infrastructure e networking
- Capacità di realizzare PoC per rispondere a bisogni di business
- Esperienza in migrazione da on-prem a cloud
- Monitoring di infrastrutture distribuite (Azure o Grafana/Prometheus)
- Proven experience in Java, Scala, Python, shell scripting
- Conoscenza SQL
- Esperienza nella leadership di team medi
- Esperienza con Apache Spark, Databricks, Azure Data Factory, Azure Synapse
- Certificazione Microsoft: almeno una tra Azure o Databricks (Azure Data Engineer Associate, Azure Solutions Architect Expert, Databricks Spark Developer, Databricks Data Engineer, Databricks Machine Learning)

#J-18808-Ljbffr

Vedi l’offerta su Go Lavoro: golavoro.it/annuncio-lavoro/77ystd