A3Data
Big Data • Data Analytics • Predictive Analytics • Hadoop Analytics • Business Data Lake
51 - 200
Data Engineer
November 10
A3Data
Big Data • Data Analytics • Predictive Analytics • Hadoop Analytics • Business Data Lake
51 - 200
Description
•Vivência em plataformas em nuvem AWS, Azure ou GCP, ou com as plataformas Hadoop ou Spark. •Experiência com entendimento, importação, higienização e manipulação dos dados. •Criação e implantação de pipeline de dados, e gosta de arquitetura de dados. •Ambiente colaborativo, com desafios diferentes.
Requirements
•Projetos com metodologia Ágil (Scrum) •Desenvolvimento Phyton, Hive, Shellscript •Banco de dados não relacionais – Hbase, Cassandra, MongoDB •Utilização PySpark, SparkR ou PL/SQL para analise exploratória dos dados •Extração de dados de diversas fontes como API, SFTP, Diretório Mapeado e com banco de dados como SQL e No-SQL •Preparação dos dados para modelagem preditiva e prescritiva •Integração das plataformas de visualização de dados com Cloud
Apply NowSimilar Jobs
November 5
NIR-YU
201 - 500
Data Engineer to design robust data architectures using GCP and AWS technologies.
October 1
WEX
5001 - 10000
Data Engineer role at WEX, focusing on data infrastructure and transformation workflows.