Engenheiro de Dados Sr

A NEORIS, agora parte da EPAM, é uma Aceleradora Digital que ajuda empresas a darem o próximo passo em direção ao futuro. Temos mais de 20 anos de experiência como parceiros digitais de algumas das maiores empresas do mundo. Somos mais de 4.000 profissionais em 11 países, com uma cultura multicultural e de startup, na qual cultivamos a inovação e o aprendizado contínuo para criar soluções de alto valor para nossos clientes. Localidade: Rio de Janeiro - Centro Modelo de atuação: Presencial Formato de contratação: CLT Descrição do Cargo Estamos em busca de um Engenheiro de Dados Sr para projetar, desenvolver e manter sistemas de coleta, armazenamento e análise de dados, assegurando que os dados sejam coletados de maneira eficiente, armazenados com segurança e disponibilizados para análise e tomada de decisões estratégicas. Responsabilidades Desenvolver sistemas e processos para coletar dados de diversas fontes, como bancos de dados, aplicativos, sensores e dispositivos. Projetar e manter bancos de dados e sistemas de armazenamento de dados, incluindo bancos de dados relacionais e não relacionais. Preparar e limpar os dados coletados, garantindo que estejam prontos para análise. Isso envolve a transformação, agregação e padronização de dados. Integrar dados de várias fontes em um único ambiente de dados, garantindo a consistência e a integridade dos dados. Criar e manter pipelines de dados que automatizem a transferência e transformação de dados de maneira eficiente. Implementar medidas de segurança para proteger os dados contra acessos não autorizados e vazamentos. Colaborar para fornecer conjuntos de dados prontos para análise. Monitorar o desempenho dos sistemas de dados e otimizar a escalabilidade e a eficiência. Manter documentação completa e atualizada de processos, fluxos de dados e arquitetura de sistemas. Requisitos Conhecimento em tecnologias, soluções e conceitos de Big Data; Experiência em desenvolver e manter pipelines de ETL para processar grandes volumes de dados, garantindo a qualidade e a integridade das informações; Proficiência em Python; Experiência com Apache Airflow ou outras ferramentas para fluxos de trabalho de dados; Experiência com soluções de armazenamento em colunas e/ou conceitos de data lakehouse; Conhecimento de versionamento de código Git; Entendimento do ciclo de vida dos dados e conceitos como linhagem, governança, privacidade, retenção, anonimização, etc; Espírito colaborativo com equipes de Ciência de dados e Analytics, equipe de negócios para entender e atender às necessidades de dados; Excelentes habilidades de comunicação, compartilhamento proativo e busca de contexto para colaborar com diferentes equipes; Diferenciais Conhecimento em estratégias de CI/CD, infraestrutura como código (Terraform), observabilidade, entre outras. Entendimento de como a otimização funciona em vários cenários e pode ser melhorada, como desempenho de consulta, escalabilidade de serviço e gerenciamento de cluster. Conhecimento de Conteinerização (Kubernetes, Docker, Openshift). Curiosidade sobre tecnologias em rápida evolução no domínio da engenharia de dados e está ansioso para aprender e dominá-las, trazendo um impacto significativo para nossa equipe. Vale Refeição e Vale Alimentação: Benefícios mensais para suas despesas com alimentação, dentro e fora de casa. Previdência Privada: Planejamento de futuro com contribuição complementar à aposentadoria. Plano de Saúde: Cobertura médica de alta qualidade para você e seu dependente legal. Seguro de Vida: Proteção e segurança para você e seus entes queridos. Aulas de Inglês/Espanhol: Incentivo ao aprendizado de idiomas. Wellhub: Benefícios e descontos em academias e programas de bem-estar. Auxílio Creche: Suporte financeiro para despesas com educação infantil. Neoris Global Campus: Plataforma de desenvolvimento com oportunidades contínuas de aprendizado e crescimento profissional. #J-18808-Ljbffr