Data Engineer

Yesterday

Apply Now

Receive Emails with Similar Jobs

It's Prodigy

WebsiteLinkedInAll Job Openings

FinTech • Digital • Banking • Public administration • Security

11 - 50 employees

Founded 2017

Description

• Stiamo cercando un Data Engineer con esperienza nelle principali tecnologie di gestione e trasformazione dei dati, inclusi AWS, Data Bricks, SQL, Python, MongoDB, Kafka e Apache Spark. • Progettare e implementare pipeline di dati scalabili utilizzando AWS e Databricks. • Gestire e ottimizzare basi di dati relazionali e non relazionali, come SQL e MongoDB. • Utilizzare Apache Kafka per lo streaming e l'integrazione di dati in tempo reale. • Sviluppare e ottimizzare processi ETL complessi utilizzando Python e Apache Spark. • Creare soluzioni sicure e ad alte prestazioni per l’archiviazione e l’elaborazione dei dati su larga scala. • Collaborare con Data Scientists, Data Analysts e altri stakeholder per comprendere e soddisfare le esigenze aziendali. • Implementare strategie di data governance per garantire la qualità e l'integrità dei dati. • Monitorare e risolvere problemi legati alle pipeline di dati e migliorare le performance delle query.

Requirements

• Minimo di 3 di esperienza nel ruolo di Data Engineer. • Esperienza avanzata con AWS (Redshift, S3, Lambda, EC2, RDS). • Conoscenza di Databricks per la gestione e l'elaborazione dei dati. • Forte esperienza con SQL per la gestione e l'ottimizzazione di database relazionali. • Competenze in Python per l'automazione dei processi e lo sviluppo di soluzioni dati. • Esperienza con database NoSQL, in particolare MongoDB. • Conoscenza di Apache Kafka per la gestione di flussi di dati in tempo reale. • Esperienza con Apache Spark per l'elaborazione distribuita e l'analisi di grandi volumi di dati. • Conoscenza di strumenti di orchestrazione di pipeline come Apache Airflow. • Esperienza con infrastrutture containerizzate (Docker, Kubernetes). • Familiarità con la sicurezza dei dati e le normative sulla privacy (es. GDPR). • Esperienza con strumenti di versionamento del codice come Git.

Benefits

• Retribuzione: per questa opportunità siamo aperti a valutare risorse freelance in partita iva. • Ambiente di lavoro flessibile e inclusivo. • Opportunità di crescita in un ambiente giovane e dinamico.