Ver todas vagas

Data Platform Engineer

Qual será seu papel no time?

Projetar, codificar e executar testes automatizados com alguns testes manuais se a automação não for possível;
Construir e gerenciar o ambiente de Big Data, através da plataforma de dados, possibilitando que os demais papéis de dados possam operá-la com mais facilidade e menos complexidade;
Prezar pela qualidade e a conformidade dos dados contidos na plataforma;
Contribuir para uma cultura de colaboração técnica e sistemas escaláveis e resilientes;
Criar possibilidade de novos pipelines serem integrados no Lake através da plataforma de dados, garantindo consistência nos padrões de design da plataforma;
Siga os padrões e processos acordados em políticas e normativas existentes na empresa;
Trabalhar em prol da integração coesa entre sistemas e modelos de dados.

O que esperamos de você:

Experiência com bancos de dados como SQL, Snowflake, Postgre, por exemplo;
Experiência com Python e Spark e vasto conhecimento em metodologias orientadas a objetos e funcionais;
Experiência em construção de serviços REST;
Experiência prática com ferramentas de pipeline de dados em ambientes baseados em nuvem como Airflow;
Forte compreensão de vários formatos de dados, como CSV, XML, JSON, etc;
Tenha experiência com o sistema de controle de origem Git e capacidade de ajudar outras pessoas na solução de problemas;
Tenha experiência em trabalhar com CI/CD;
Experiência com ferramentas open source de data warehouse;
Experiência no desenvolvimento de alguma plataforma de dados em nuvem Azure;
Experiência com micro serviços.

E Será Um Diferencial Se Você