Senior Data Engineer

O seu papel no time:

• Atuar na automação e otimização de fluxos e processos de dados;
• Construir soluções técnicas para obter, processar e armazenar dados de várias fontes e diferentes formatos de dados (dados estruturados / não estruturados / arquivos/ XML ou Json / Parquet / APIs);
• Realizar atividades referentes a análise, construção e manutenção dos processos e estruturas de dados.
• Desempenhar visões de Arquitetura, Mapeamento e Modelagem de dados.
• Ter visões corporativas com alinhamentos a melhores praticas de mercado, blueprint de soluções e desenhos de soluções.

O que esperamos de você - Hard Skills:

• Experiência em projetos de dados;
• Experiência em programação - Python, SQL, Pyspark;
• Experiência em automação de processos de informação (ETL/ELT );
• Experiência em controle de versionamento com Git;
• Experiência com Bancos de Dados Relacionais e NoSQL;
• Experiencia em Azure Cloud, Datafactory, Synapse, ADLS Gen2, Delta lake;
• Experiencia em engenharia e integração de dados (e.g. ETL, APIs, microserviços)
• Experiencia em ambiente Linux, comandos basicos, shell scripts;
• Conhecimento em processos streamin com EventHub e Kafka.
• Conhecimento pureview;
• Conhecimento de ecossistemas de Big Data (Hadoop, Spark, Hive);
• Conhecimentos de representação de dados em estruturas e scripts como JSON, XML, YAML.