Data Engineer Pyspark / Big Data · Freelance
Cerchiamo un data engineer freelance, ibrido su Milano, per entrare in un team dati già avviato, su pipeline PySpark e orchestrazione con Airflow.Competenze, Esperienza, Qualifiche: se possiede i requisiti giusti per questa occasione, si candidi oggi stesso.Attività previsteSviluppare e mantenere pipeline di dati in PySparkOrchestrare i flussi con Airflow e gestirne gli erroriIntegrare nuove fonti di dati con Apache NiFiOttimizzare tempi e costi dei job sul clusterDocumentare flussi e trasformazioni per il resto del teamConoscenze richiesteAlmeno 2 anni come data engineerContano più la testa e la voglia di imparare della lista degli strumenti: se hai lavorato bene su Spark e NiFi o Airflow li conosci poco, candidati lo stesso.Costituiranno un titolo preferenziale conoscenze di:Pagamenti digitali o pubblica amministrazioneClouderaApache NiFiAirflowKafkaHiveLe condizioniDove: ibrido su Milano, con alcuni giorni in sedeIl processo di selezioneIl processo di selezione prevede di rispondere solo alle candidature compatibili, di solito entro 48 ore dall'invio. xysqume Dopodiché si svolgerà un colloquio conoscitivo e successivamente potranno esserci uno o due colloqui di approfondimento tecnico.#J-18808-Ljbffr