Data Engineer

Vedi l’offerta su Go Lavoro: golavoro.it/annuncio-lavoro/7woro0

CHI SIAMO?

Se pensa di essere il profilo ideale per la seguente opportunità, si candidi dopo aver letto la descrizione completa.

POSIZIONE: DATA ENGINEER – FULL REMOTE

1. IL TUO RUOLO
- Entrerai a far parte di un team tecnico dedicato alla progettazione e all'evoluzione di piattaforme dati moderne e scalabili in atmosfera AWS.
- Ti occuperai della progettazione e dello sviluppo di pipeline dati end-to-end, utilizzando principalmente servizi serverless e containerizzati.
- Sarai coinvolto nella realizzazione di soluzioni di Data Engineering e Data Lake, garantendo qualità, resilienza, scalabilità e affidabilità del dato.
- Svilupperai servizi e API in Python e applicazioni containerizzate, collaborando alle scelte architetturali e all'evoluzione della piattaforma.
- Ti occuperai anche di Data Governance, catalogazione, metadata management e data lineage.
- Avrai un ruolo attivo nell'ottimizzazione delle performance, della sicurezza e dei costi della piattaforma cloud.

2. LE TUE MANSIONI
- Progettare e sviluppare pipeline dati end-to-end su AWS attraverso servizi come Lambda,



Step Functions, AWS Pipes, Glue, ECS ed ECR.
- Realizzare e gestire architetture Data Lake utilizzando tecnologie come S3, Glue e Athena.
- Sviluppare servizi e API in Python, principalmente attraverso FastAPI, e applicazioni containerizzate con Docker.
- Progettare ETL/ELT robusti, scalabili e idempotenti.
- Progettare, amministrare e ottimizzare database RDS e database analitici.
- Gestire attività di Data Governance, catalogazione, metadata management e data lineage attraverso Glue Data Catalog e DataZone.
- Integrare differenti sorgenti dati attraverso strumenti come AppFlow e DMS.
- Implementare sistemi di observability tramite Grafana, metriche, logging strutturato e alerting.
- Applicare le best practice di sicurezza AWS, con particolare attenzione a IAM, gestione dei secret e principio del minimo privilegio.
- Gestire e ottimizzare i costi e l'utilizzo delle risorse AWS.
- Utilizzare s

Vedi l’offerta su Go Lavoro: golavoro.it/annuncio-lavoro/7woro0