Engenheiro de dados sênior

2 semanas atrás


HOME OFFICE, Brasil Oportunidades Tempo inteiro

Pós-graduação em Engenharia de Dados, Ciência de Dados, Computação ou áreas correlatas; Experiência sólida em ambiente AWS, incluindo EKS, Glue, Athena, IAM, Lambda, ECR, RDS e DynamoDB; Conhecimento avançado em CI/CD e práticas DevOps; Proficiência em Kubernetes; Experiência consolidada em Spark (PySpark) e Delta Table; Experiência comprovada em Web Crawling; Domínio da linguagem Python e suas principais bibliotecas de manipulação de dados; Vivência com Apache Airflow para orquestração de pipelines; Conhecimento prático em Kafka; Experiência com Terraform (IaC); Experiência com Azure DevOps; Atuação com Databricks e Snowflake; Certificação e/ou cursos relevantes em Engenharia de Dados. Projetar, desenvolver e implementar soluções de engenharia de dados altamente eficientes, escaláveis e seguras; Atuar de forma estratégica e colaborativa com equipes multifuncionais para definir requisitos e direcionar a arquitetura de dados; Implementar e otimizar processos de CI/CD para garantir automação, versionamento e entrega contínua; Gerenciar e otimizar ambientes Kubernetes, com uso avançado das ferramentas AWS (como EKS); Utilizar de forma aprofundada as ferramentas AWS Developer Tools CodeCommit, CodeBuild, CodeDeploy e CodePipeline; Desenvolver e otimizar jobs Spark (PySpark) voltados ao processamento de grandes volumes de dados, garantindo performance e qualidade; Implementar e manter Tabela Delta, assegurando consistência e rastreabilidade dos dados; Criar e gerenciar Web Crawlers para extração e transformação de dados da web; Configurar e manter pipelines de dados com Apache Airflow, garantindo a orquestração e o monitoramento de processos; Implementar e administrar ambientes Kafka para streaming de dados em tempo real; Gerenciar infraestrutura como código (IaC) utilizando Terraform, promovendo ambientes reprodutíveis e auditáveis; Atuar com Databricks e Snowflake, otimizando armazenamento, performance e governança dos dados; Contribuir para a melhoria contínua das práticas de engenharia de dados, propondo inovações e mentorando profissionais da equipe.



  • HOME OFFICE, Brasil ICON Solutions do Brasil Tempo inteiro

    Posição - Engenheiro(a) de Dados - Sênior (Remoto) Você conhece a Icon? Apaixonados por pessoas e especialistas em tecnologia. Nosso trabalho é encontrar talentos e soluções sob medida para os nossos clientes. Vem encontrar o seu projeto ideal conosco e participar da comunidade ICON! Sobre a Vaga Código da vaga: A Modelo de contratação: PJ Estamos...


  • HOME OFFICE, Brasil Clavis Tempo inteiro

    Nome da vaga Engenheiro de Dados Responsabilidades: Definir e projetar a arquitetura de dados para projetos complexos e de grande escala, garantindo escalabilidade, performance e segurança. Liderar o desenvolvimento e a otimização de pipelines de dados robustos e eficientes utilizando Python para processamento massivo e em tempo real. Ser o especialista...


  • HOME OFFICE, Brasil YDUQS - Vagas Tech Tempo inteiro

    Buscamos profissionais com: Formação em Tecnologia, Engenharia de Dados ou áreas correlatas; Especialização em Engenharia e Arquitetura de Dados, Administração de Bancos de Dados ou similares; Sólidos conhecimentos em programação, especialmente em linguagens como PySpark, Python, R e SQL; Experiência com Hadoop, Spark e outras tecnologias Big...


  • HOME OFFICE, Brasil Grupo BGB Tempo inteiro

    Estamos em busca de um(a) Engenheiro(a) de Dados Big Data Sênior para transformar dados brutos em um recurso estratégico para a empresa, disponibilizando informações de forma rápida, acessível, segura e escalável. O objetivo é permitir análises avançadas e apoiar a tomada de decisões inteligentes. ResponsabilidadesConstruir e manter pipelines de...


  • HOME OFFICE, Brasil CERC Tempo inteiro

    RESPONSABILIDADES E ATRIBUIÇÕESComo Engenheiro de Dados Sênior, você irá:  Conhecer, entender e se envolver com os problemas de negócio do início ao fim, para propor soluções tech eficientes e inovadoras; Participar ativamente da expansão dos nossos sistemas atuais, da construção de novas features com foco no governança de dados; Construir...

  • Engenheiro de dados sênior

    3 semanas atrás


    HOME OFFICE, Brasil Aliare Tempo inteiro

    5+ anos de experiência em engenharia de dados; Expertise em arquiteturas distribuídas e microserviços; Domínio avançado de ferramentas big data (Spark, Kafka, etc.); Experiência em liderança técnica de projetos; Conhecimento profundo de cloud computing; Experiência com DataOps e CI/CD; Liderar implementação de domínios de dados complexo;...


  • HOME OFFICE, Brasil AI Solutions Tempo inteiro

    Pessoa Engenheira de Dados   Remoto. Contrato: PJ Iniciar: Disponibilidade Imediata Sobre a Empresa:A AI Solutions é uma empresa focada no desenvolvimento de soluções tecnológicas com inteligência artificial e machine learning, através da extração, estruturação e consolidação de base de dados e informações. Proporcionamos aos nossos clientes,...


  • HOME OFFICE, Brasil DB1 Group Tempo inteiro

    Na DB1, cada linha de código, teste ou insight é uma chance de criar impacto real. Somos movidos pela curiosidade e pelo desejo de transformar problemas complexos em soluções que simplificam a vida das pessoas. Gostamos de experimentar, aprender e inovar, e por isso, esse é o lugar para colocar seu talento à prova. Se você combina inteligência com...

  • Engenheiro de dados sr

    2 semanas atrás


    HOME OFFICE, Brasil Magazine Luiza Tempo inteiro

    oioi! quer usar suas habilidades para transformar dados em insights valiosos e impulsionar o futuro do delivery? aqui no aiqfome, a gente não só entrega comida, a gente entrega felicidade! e para continuarmos crescendo e inovando, estamos buscando um(a) engenheiro(a) de dados sênior para turbinar nossa equipe de dados! sua missão será construir e manter...

  • Engenheiro dataops sênior

    2 semanas atrás


    HOME OFFICE, Brasil Leega Consultoria Tempo inteiro

    Experiência de mínimo de 2 anos atuando com o desenvolvimento e monitoramento de Pipeline AWS; Domínio de terraform para trabalhar com Infra as Code Domínio em virtualização EC2 Domínio em esteiras de CI/CD com Git Conhecimento prático em Kubernets Conhecimentos em serviços de mensageria, especialmente Kafka Big Data | Tecnologias, Soluções e...