Data Engineer

Vedi l’offerta su Go Lavoro: golavoro.it/annuncio-lavoro/79efoq

Experteer Overview
In questa posizione da Data Engineer, entrerai nel team Data Engineering & Governance per costruire una Data Platform ibrida e interamente on-cloud, con Databricks su AWS. Lavorerai a stretto contatto con Data Science/AI & Analytics e le business unit per trasformare i dati in insight operativi affidabili. L'obiettivo è supportare processi chiave, garantire qualità dei dati e contestualizzazione di business lungo tutto il ciclo di vita. Un ruolo dinamico in un ambiente giovane e orientato all'innovazione, con possibilità di contribuire all'evoluzione verso funzionalità AI. Il progetto offre visibilità end-to-end su pipeline ETL e data model, con trasferte Milano-Verona.Responsabilità
Develop pipelines ETL in SQL, Python and Spark for the Data Platform (Databricks su AWS, Kubernetes)
Monitor and ensure efficiency of processes on the Data Platform (Databricks su AWS, Kubernetes)
Participate in the design of the Data Model and the Data Platform
Support business users in data usage and development




Minimum 2 years experience in relational and NoSQL databases and back-end software development
Excellent knowledge of SQL and relational database design (PostgreSQL, MS SQL, Oracle)
Excellent knowledge of Apache Spark and PySpark
Good experience with Python and ETL/data processing libraries
Familiarity with Git and dataOps/DevOps methodologies, including CI/CD pipelines
Basic experience in at least one cloud environment (AWS, GCP or Azure)
More than 1 year experience with Python
More than 1 year experience with Databricks
More than 1 year experience with PL/SQL
Preferred: Databricks, AWS services for data pipelines (S3, Glue, Lambda, ECR, Athena, EC2), Docker, orchestration tools (Airflow, Prefect Cloud)
Italian language spoken at B2 level
Availability for travel between Milan and Verona and ability to work independently in a team
#J-*****-Ljbffr

Vedi l’offerta su Go Lavoro: golavoro.it/annuncio-lavoro/79efoq