Engenheiro de dados

Transforme o futuro com a MinsaitNa Minsait, acreditamos na tecnologia como força para transformar realidades e gerar impacto positivo. Desenvolvemos soluções que conectam inovação, eficiência e progresso em setores essenciais como administração pública, telecomunicações & mídia, energia & utilities, indústria & consumo, saúde e finanças.Aqui, você encontra um ambiente que valoriza a autonomia, a colaboração e o crescimento contínuo, com projetos desafiadores e oportunidades reais de desenvolvimento.Nosso jeito de serInovamos com propósitoCrescemos com responsabilidadeValorizamos a diversidade e quem transformaValoresInovação, conexão, confiança e antecipação de futuroSe você busca desafios com significado, a Minsait é o seu lugar.ENGENHEIRO DE DADOS PLENODesenvolver e manter pipelines de dados em lote usando o PySpark (focado em SQL)Escreva e otimize consultas SQL complexas para dar suporte à lógica de negócios e às necessidades de relatóriosEntenda os requisitos de forma autônoma e traduza para códigoTransforme e integre dados de diversas fontes em tabelas Iceberg e SnowflakeContribuir para o desenvolvimento de data marts e conjuntos de dados selecionados para consumo comercialColabore com analistas de negócios para entender as necessidades de dadosMonitore e gerencie trabalhos de dados em execução no AWS EMR orquestrados pelo Airflow, aproveitando o S3, o Glue e outros serviços da AWSGaranta a qualidade, a consistência e o desempenho dos dados em todo o pipelineRequisitos Técnicos e de Experiência:Estamos procurando um Engenheiro de Dados Sênior qualificado com uma base sólida em desenvolvimento baseado em SQL. Essa função se concentrará na criação e manutenção de pipelines de dados usando o PySpark, com SQL como a linguagem de codificação principal. O candidato também terá uma boa compreensão das estruturas de modelagem de dados (como modelagem dimensional Kimball) e experiência no suporte a datawarehouses e data marts. Qualificações preferenciaisExperiência na criação e gerenciamento de data martsExposição ao Airflow ou outras ferramentas de orquestraçãoFamiliaridade com ferramentas de infraestrutura como código, como o TerraformCompreensão dos padrões ODS (Operational Data Store) e arquitetura de data lakeExperiência com Bitbucket (ou qualquer ferramenta git semelhante)Experiência/compreensão de JenkinsHabilidades Comportamentais e Competências:Fluência em inglês é um diferencialMínimo de 3 anos de experiência prática em engenharia de dados codificando consultas SQL complexasExperiência comprovada em SQL – incluindo junções, agregações, funções de janela e ajuste de desempenhoExperiência prática com o PySpark, particularmente com o Spark SQLFamiliaridade com os serviços de dados da AWS (por exemplo, EMR, S3, Glue)Compreensão de estruturas de modelagem de dados, incluindo a metodologia KimballExperiência de trabalho com Snowflake ou data warehouses em nuvem semelhantesConhecimento do Apache Iceberg ou formatos de tabela semelhantes (por exemplo, Delta Lake, Hudi)Nível de Experiência Desejado:PlenoTRABALHE NA MINSAITModelo de contratação CLT.Plano de Saúde subsidiado pela empresa para o titular.Opção de inclusão de dependentes no Plano de Saúde com desconto em folha de pagamento.Assistência Odontológica (opcional).Opção de inclusão de dependentes no Plano de Assistência Odontológica com desconto em folha de pagamento.Vale Refeição no cartão Flash Benefícios.Vale Transporte (opcional).POP - Programa de Orientação Pessoal que visa oferecer suporte emocional e aconselhamento com orientação confidencial nas áreas psicológica, jurídica, financeira, social e pet sem custo para titular e dependentes legais.Plataforma de Saúde Wellhub-Gympass (Acesso a mais de 700 academias em todo o Brasil com planos descontado em folha de pagamento).Parcerias com grandes marcas de consumo.Convênio com o SESC para titular e dependentes.Convênios para descontos com instituições de ensino (graduação e pós-graduação) e escola de idiomas.Seguro de vida em grupo.Nosso compromisso com a diversidade é um elemento-chave da nossa cultura: Igualdade de oportunidades, respeito pelas pessoas e não discriminação são princípios de atuação para todos os profissionais da Minsait. Integramos o Bloomberg Gender-Equality Index (GEI) 2021 em termos de diversidade e igualdade de gênero.