Engenheiro de dados databricks pleno

NOSSO NEGÓCIO Aqui na Programmers, aceleramos grandes ideias com inovação e tecnologia. Com uma trajetória de mais de 30 anos, o que nos move são os desafios em construir ideias em soluções reais, para que nossos clientes sejam referências no segmento que atuam. Especialistas em desenvolvimento de software e inteligência de dados, temos uma relação de transparência, confiança, credibilidade e reconhecimento neste mercado. Nosso maior sonho? Impactar empresas e pessoas. O QUE ESPERAMOS DE VOCÊ? Estamos buscando um Engenheiro de Dados Databricks para integrar nossa equipe de engenharia de dados.Nesta função, você será responsável por desenvolver, manter e evoluir pipelines de dados e soluções analíticas na plataforma Databricks Unified Analytics, apoiando cientistas de dados, analistas e demais áreas de negócio na tomada de decisão baseada em dados. RESPONSABILIDADES: Desenvolver e manter pipelines de dados ETL/ELT no Databricks, utilizando PySpark, SQL e Delta Lake. Contribuir na otimização e monitoramento dos fluxos de dados, utilizando Jobs, Workflows e notebooks Databricks. Realizar integração, limpeza e transformação de dados estruturados e não estruturados provenientes de diferentes fontes (armazenamento em nuvem, APIs, bancos relacionais, etc.). Implementar validações e controles de qualidade de dados. Apoiar o time na modelagem e estruturação de dados, colaborando com analistas e stakeholders. Auxiliar no gerenciamento e execução de pipelines com ferramentas como Databricks Workflows ou Airflow. Seguir boas práticas de segurança, governança e rastreabilidade de dados (ex.: Unity Catalog, permissões por função). Documentar processos e contribuir para melhorias contínuas da plataforma de dados. PARA ESSA OPORTUNIDADE VOCÊ PRECISA TER: Experiência prática em engenharia de dados, com atuação em projetos utilizando Databricks. Conhecimento sólido em PySpark, SQL e processamento distribuído de dados. Experiência com Python para automação e integração de dados. Entendimento dos conceitos de Delta Lake e arquitetura Lakehouse. Experiência em ambientes de nuvem (AWS, Azure ou GCP). Familiaridade com Git e práticas de versionamento de código. Noções de pipelines CI/CD. Conhecimento básico ou experiência inicial com Snowflake. Compreensão de formatos de dados modernos (Parquet, Avro, JSON). Boa capacidade de análise e resolução de problemas técnicos. Inglês avançado para conversação. Certificação Databricks (ex.: Databricks Certified Data Engineer Associate/Professional) é desejável. SERIAM PONTOS DE DESTAQUE SE VOCÊ TIVER: Experiência com Unity Catalog, Databricks SQL ou integrações Partner Connect. Familiaridade com Airflow, Docker, Terraform ou conceitos de DevOps. Experiência com ferramentas de BI (Tableau, Power BI, Looker). Interesse ou exposição a pipelines de machine learning (MLOps) no Databricks. PARA UMA VIDA MAIS SAUDÁVEL, TE PROPORCIONAMOS: Política de Home Office Plano de saúde, com cobertura nacional Plano odontológico Convênio com Sesc Wellhub TE APOIAMOS COM: Vale refeição ou alimentação Auxílio creche Participação nos resultados Licença parental estendida Plano de desenvolvimento individual/anual com subsídio para capacitação Treinamento do idioma inglês Programa de intercâmbio (USA) Nossas vagas são para todos Valorizamos a diversidade, pois ela impulsiona a inovação, fortalece nossas soluções e torna nosso ambiente mais inclusivo. Cada diferença é uma oportunidade de aprendizado, tornando nosso dia a dia mais inspirador e nossas entregas ainda melhores.