Desenvolvedor Sênior de Engenharia de Dados

Há 2 semanas

São Paulo, SP, Brasil Capitani Group Tempo integral

Desenvolver pipelines de ingestão, transformação e carga de dados utilizando Python.
Criar e manter workflows (DAGs) no Apache Airflow.
Estruturar dados nas camadas RAW, Silver e Gold da arquitetura Medalhão.
Implementar validações, regras de negócio e contratos de dados em YAML.
Garantir qualidade, consistência e reprocessamento seguro dos dados.
Desenvolver testes automatizados para assegurar a confiabilidade das entregas.
Trabalhar em conjunto com times de arquitetura, plataforma e liderança técnica. Formação superior em Computação, Tecnologia ou áreas correlatas.
Experiência avançada com Python.
Conhecimento em Apache Airflow.
Experiência com modelagem e processamento de dados em Data Lake.
Domínio de SQL e PostgreSQL.
Conhecimento de arquitetura Medalhão (Medallion Architecture).
Experiência com testes automatizados (Pytest).
Controle de versão com Git.
Conhecimento em YAML e contratos de dados.
Aplicação de Design Patterns e boas práticas de desenvolvimento.

#LI-Hybrid