Engenheiro de Dados AWS Sênior

Responsabilidades:

• Criar e manter pipelines de processamento de dados que extraem, transformam e carregam dados de diferentes sistemas.
• Projetar e implementar sistemas de armazenamento de dados escaláveis e de alta performance, como sistemas distribuídos e soluções de armazenamento em nuvem.
• Desenvolver modelos de dados que descrevem como os dados são organizados e relacionados entre si.
• Trabalhar com equipes de análise de dados para criar relatórios e dashboards que fornecem insights sobre o negócio ou o desempenho do sistema.
• Garantir a qualidade e a integridade dos dados, identificando e corrigindo problemas de qualidade de dados e criando processos de monitoramento de qualidade de dados.
• Desejável conhecimento com Migração Datalake.
• Nesses processos, você lidará com dados de consumidores com informações sensíveis. Ou seja, segurança da informação fará parte da sua rotina.
• Construir soluções escalonáveis e resilientes de análises de dados no ambiente AWS.
• Implementar melhorias de arquitetura.
• Levantamento de necessidade com as áreas de negócios e documentação.
• Conhecer métodos ágeis.
• Alinhar o ambiente corporativo de TI com as necessidades de negócios, padrões e melhores práticas de mercado.
• Ser capaz de incorporar a cultura data-driven no dia a dia.
• Ter a capacidade de trabalhar em equipe com empatia, saber ouvir e ser ouvido e ter uma boa habilidade de comunicação.

Requisitos:

• Conhecimento do ambiente AWS (S3, EMR, Athena, Lambda, SQS, AWS Glue, RDS, Redshift, DynamoDB, etc).
• Airflow.
• Processamento de dados: SQL, PySpark, Presto, Hive.
• Linguagens de programação: Python, Javascript.
• Ferramentas de gerenciamento de código-fonte: Git.