Data engineer

Engenheiro(a) de Dados Sênior

Buscamos um(a) Engenheiro(a) de Dados experiente e inovador(a) para colaborar com nossa equipe na construção e otimização de infraestruturas de dados robustas e escaláveis. Se você é apaixonado(a) por dados, segurança e performance, e gosta de desafios em um ambiente dinâmico, essa vaga é para você

Principais Responsabilidades:

• Desenvolvimento de Infraestrutura de Dados: Colaborar com o arquiteto de dados para projetar, construir e manter pipelines de dados e soluções de armazenamento escaláveis e eficientes.
• Integração de Dados: Integrar diversas fontes de dados, incluindo streams em tempo real, garantindo coleta abrangente e precisa.
• Garantia de Qualidade de Dados: Implementar processos de validação e limpeza de dados para assegurar altos padrões de qualidade.
• Gerenciamento de Banco de Dados: Gerenciar e otimizar bancos de dados, garantindo a integridade e o desempenho dos dados.
• Processos ETL: Desenvolver e manter processos ETL (Extrair, Transformar, Carregar) para facilitar a movimentação e transformação de dados.
• Segurança e Conformidade: Garantir a segurança dos dados e a conformidade com regulamentações e padrões relevantes.
• Otimização de Desempenho: Monitorar e otimizar o desempenho do processamento de dados para atender aos requisitos do projeto.
• Colaboração e Comunicação: Trabalhar em estreita colaboração com arquitetos, cientistas de dados e outras partes interessadas para entender as necessidades e fornecer soluções.
• Documentação e Solução de Problemas: Criar e manter documentação abrangente para processos, infraestrutura e workflows, além de identificar e resolver problemas de dados prontamente.
• Inovação: Manter-se atualizado(a) com as últimas tecnologias e melhores práticas em engenharia de dados, propondo soluções inovadoras.

Qualificações Essenciais:

• Educação: Bacharelado em Ciência da Computação, Tecnologia da Informação ou área relacionada. (Desejável Mestrado).
• Experiência: Experiência comprovada como Engenheiro de Dados, com forte compreensão de arquitetura de dados e princípios de gerenciamento de dados.
• Habilidades Analíticas e de Resolução de Problemas: Capacidade de trabalhar com conjuntos de dados complexos e solucionar desafios de forma eficaz.
• Comunicação e Colaboração: Excelentes habilidades de comunicação e capacidade de trabalhar efetivamente em um ambiente de equipe.
• Atenção aos Detalhes: Alta atenção aos detalhes e comprometimento com a precisão e qualidade dos dados.
• Adaptabilidade: Capacidade de se adaptar a mudanças nos requisitos do projeto e trabalhar em um ambiente de ritmo acelerado.

Habilidades Técnicas Mandatórias:

• Experiência comprovada com desenvolvimento de pipelines de dados, especialmente usando o Azure Data Factory (ADF).
• SQL: Habilidades avançadas para transformação e otimização de dados.
• Snowflake: Experiência prática com integração e transformação de dados.
• APIs REST: Experiência com integração para ingestão/extração de dados.
• Modelagem de Dados: Sólidas habilidades em modelagem (diagramas E/R, normalização, PKs/FKs).
• Infraestrutura Azure: Sólido conhecimento da infraestrutura Azure (ex: Blob Storage, Key Vault, Azure SQL, monitoramento).
• Orquestração e Agendamento de Dados: Experiência com ferramentas como gatilhos do Azure Data Factory e aplicativos lógicos.
• Dados Semiestruturados: Capacidade de trabalhar com formatos como JSON, XML, Parquet.

Competências-Chave Adicionais (Diferenciais):

• Familiaridade com práticas de CI/CD e ferramentas de controle de versão (ex: Git).
• Compreensão de governança, segurança e conformidade de dados (ex: LGPD, criptografia, controle de acesso).
• Exposição a estruturas de qualidade de dados e estratégias de monitoramento.
• Experiência com ajuste de desempenho e otimização de custos em ambientes de nuvem.
• Familiaridade com metodologias ágeis e trabalho em equipes multifuncionais.
  • • Proatividade e autonomia na busca por soluções e melhorias.

Se você se identifica com este perfil e busca um ambiente desafiador e com oportunidades de crescimento, candidate-se

---