A3Data
Big Data • Data Analytics • Predictive Analytics • Hadoop Analytics • Business Data Lake
51 - 200 employees
🤖 Artificial Intelligence
Data Engineer
November 10
A3Data
Big Data • Data Analytics • Predictive Analytics • Hadoop Analytics • Business Data Lake
51 - 200 employees
🤖 Artificial Intelligence
Description
•Vivência em plataformas em nuvem AWS, Azure ou GCP, ou com as plataformas Hadoop ou Spark. •Experiência com entendimento, importação, higienização e manipulação dos dados. •Criação e implantação de pipeline de dados, e gosta de arquitetura de dados. •Ambiente colaborativo, com desafios diferentes.
Requirements
•Projetos com metodologia Ágil (Scrum) •Desenvolvimento Phyton, Hive, Shellscript •Banco de dados não relacionais – Hbase, Cassandra, MongoDB •Utilização PySpark, SparkR ou PL/SQL para analise exploratória dos dados •Extração de dados de diversas fontes como API, SFTP, Diretório Mapeado e com banco de dados como SQL e No-SQL •Preparação dos dados para modelagem preditiva e prescritiva •Integração das plataformas de visualização de dados com Cloud
Apply NowSimilar Jobs
November 5
Data Engineer to design robust data architectures using GCP and AWS technologies.
October 30
Build and optimize Trustly's big data environment for payment solutions.
October 1
Data Engineer role at WEX, focusing on data infrastructure and transformation workflows.
September 17
Build and maintain data infrastructure for WEX's analytics needs.
September 17
Data Engineer role focusing on data pipeline development at WEX Inc.