Engenheiro de Dados Sr

Principais Responsabilidades

Engenheiro de Dados Sênior O Engenheiro de Dados Sênior será responsável por desenvolver, manter e otimizar os sistemas de coleta e processamento de dados que alimentam os produtos da Winnin. Atuará com protagonismo técnico, colaborando diretamente com os times de engenharia, dados e ciência para garantir escalabilidade, segurança e eficiência. Suas principais responsabilidades incluem:

Desenvolver e manter crawlers e scrapers para coleta de dados via APIs e HTML, assegurando robustez e resiliência frente a mudanças nas fontes;Mapear novas fontes externas e avaliar a viabilidade técnica para automação da coleta em larga escala;Automatizarfluxos de coleta e transformação de dados, com foco em performance e estabilidade em tempo quase real;Ajustar scrapers existentes conforme mudanças em sites e plataformas, mantendo a continuidade dos dados críticos;Processar e organizar os dados coletados para integração com os pipelines internos, garantindo consistência e acessibilidade;Trabalhar em conjunto com os times de engenharia e ciência de dados para entregar soluções confiáveis e orientadas ao negócio;Priorizar a segurança e privacidade das informações coletadas, respeitando boas práticas e conformidade com normas de proteção de dados;Atuar com autonomia e visão sistêmica, contribuindo ativamente para a evolução da infraestrutura de dados da plataforma Perfil Técnico
Experiência no desenvolvimento e manutenção de crawlers e scrapers para coleta de dados via APIs públicas e parsing de HTML, com foco em performance, resiliência e escalabilidade;Vivência com ferramentas de inspeção de rede e engenharia reversa de APIs privadas, utilizando Developer Tools e análise de chamadas HTTP;Conhecimento avançado de SQL para modelagem, análise e transformação de grandes volumes de dados em formatos como Parquet e JSON;Atuação com orquestração de pipelines de dados utilizando Prefect ou Airflow, integrando múltiplas fontes e garantindo confiabilidade e automação; Familiaridade com execução de pipelines e crawlers em ambientes de nuvem (AWS, GCP ou Azure);Experiência prática com automação de browsers utilizando Playwright, Selenium ou ferramentas similares; Conhecimento em estratégias anti-bloqueio como proxy rotation, gestão de captchas e controle de rate limits;Desejável vivência com ferramentas como DBT para modelagem de dados e Apache Spark para processamento paralelo;Participação em projetos de scraping, automação ou engenharia de dados open source ou acadêmicos será considerado diferencial;Inglês técnico para leitura de documentação, análise de APIs e interpretação de especificações técnicas;Formação superior completa em Ciência da Computação, Engenharia de Software, Sistemas de Informação ou áreas correlatas. Perfil Pessoal

Alta capacidade de adaptação a ambientes dinâmicos, com grande volume de dados e constante evolução tecnológica;Boa comunicação interpessoal, com habilidade para dialogar com áreas técnicas e não técnicas, facilitando a tradução de necessidades em soluções de dados eficazes;Perfil proativo, analítico e orientado a soluções, com postura investigativa frente a falhas ou gargalos nos processos de coleta e tratamento de dados;Forte senso de dono, com autonomia para propor melhorias e atuar de forma prática e autônoma em frentes estratégicas; Organização e disciplina para lidar com múltiplos pipelines, entregas simultâneas e contextos de alta complexidade técnica;Postura colaborativa, com facilidade para compartilhar conhecimento, construir em conjunto e contribuir com a cultura técnica do time;Confiança para atuar como referência em engenharia de dados, exercendo protagonismo técnico mesmo sem papel formal de liderança. Remuneração

​​​​​​​R$ 13.000,00 a R$15.000,00 (Dados)Incentivo de curto prazo:Bônus de 1 salário/ anoPlano de saúde e odontológico: Sim, a definir operadora.Refeição: Auxílio alimentação​​​​​​​Outros benefícios: Auxílio home office, Wellhub para colaborador e dependentes, terapias pela Plataforma Holos, idiomas via Fluency Academy, acesso à Udemy para desenvolvimento, auxílio creche, licença maternidade e paternidade estendida, B-day Off, coworking via Woba, equipamentos fornecidos pela empresa e Programa de Retenção de Longo Prazo (mediante elegibilidade)

---