
Engenheiro de dados sr
Há 2 dias
Sobre a Posição
Buscamos um Engenheiro de Dados Sênior com sólida experiência em soluções de dados na nuvem AWS para desenvolvimento e implementação de arquiteturas de dados modernas e escaláveis. O profissional atuará na construção de pipelines de dados robustos, implementação de data lakes e data warehouses, e desenvolvimento de soluções analíticas utilizando o ecossistema AWS em conjunto com Databricks e Trino para processamento distribuído de grandes volumes de dados.
Responsabilidades
Projetar e construir pipelines de dados eficientes usando AWS Athena, PySpark e Databricks
Implementar e gerenciar data lakes no Amazon S3 com estruturas otimizadas
Desenvolver queries e análises complexas usando Amazon Athena, Trino e Databricks
Implementar processos de ETL/ELT para integração de múltiplas fontes de dados
Otimizar performance de queries e processamento de dados em larga escala
Participar de code reviews e mentoria técnica da equipe
Colaborar com stakeholders de negócios para traduzir requisitos em soluções técnicas
Implementar rotinas de monitoramento e observabilidade dos pipelines de dados
Agendar execução de rotinas de ETL usando o Apache Airflow
Requisitos Técnicos
Essenciais
Experiência avançada com Python e SQL
Sólidos conhecimentos em serviços AWS:
Amazon S3 para armazenamento de dados
Amazon Athena para consultas serverless
Experiência com Trino (anteriormente PrestoSQL) para queries distribuídas
Domínio do Databricks e Delta Lake para processamento de dados
Experiência com PySpark para processamento de dados em larga escala
Conhecimento em modelagem de dados e data warehousing
Experiência com particionamento e otimização de performance em data lakes
Domínio de versionamento Git e metodologias ágeis usando o Azure DevOps
Experiência com formatos de dados modernos (Parquet, Delta, Iceberg)
Diferenciais
Certificações AWS (Data Analytics, Solutions Architect ou Data Engineer)
Experiência com Apache Airflow para orquestração
Experiência com streaming de dados (Kinesis, Kafka)
Conhecimento em dbt (Data Build Tool) para transformações
Experiência com Great Expectations para qualidade de dados
Familiaridade com ferramentas de CDC (Change Data Capture)
Conhecimento em observabilidade e monitoramento (Elastic Search com Kibana)
Experiência com APIs RESTful
Conhecimento em containerização (Docker, Kubernetes)
Experiência com Terraform ou CloudFormation para IaC
-
Engenheiro de dados sr.
1 dia atrás
HOME OFFICE, Brasil Stefanini Group Tempo inteiroO que precisamos que você tenha de conhecimento: Sólida experiência como Engenheiro de Dados. Proficiência em Python, SQL e ferramentas de ETL. Conhecimento em tecnologias como NiFi e Airflow. Experiência com sistemas de gerenciamento de bancos de dados e capacidade de projetar e manter bancos de dados eficientes. Conhecimento em práticas de segurança...
-
Engenheiro de dados sr
Há 2 dias
HOME OFFICE, Brasil Stefanini Group Tempo inteiroDescrição do Perfil: Estamos em busca de um(a) Engenheiro(a) de Dados Sênior para atuar em projetos estratégicos de dados. Este(a) profissional será responsável por desenvolver pipelines de dados robustos, apoiar a construção de soluções analíticas e contribuir com a evolução da arquitetura de dados da empresa. Responsabilidades: Desenvolver e...
-
Engenheiro de Dados Especializado
Há 4 dias
HOME OFFICE, Brasil beBeeDesenvolvedor Tempo inteiro R$1.000.000 - R$1.800.000Profissional Engenheiro de Dados">Aqui você terá a oportunidade de trabalhar em um ambiente de alta performance e contínuo desenvolvimento, com autonomia e envolvimento em projetos nacionais e internacionais que testam suas habilidades e impulsionam seu potencial.Funções Principais:Projetar e implementar pipelines de dados escaláveis, seguros e...
-
Engenheiro de dados
Há 5 dias
HOME OFFICE, Brasil NCS Tempo inteiroO que você precisa ter Experiência com Databricks; Experiência com serviços de dados em nuvem (AWS, Azure); Experiência em ferramentas de integração e transformação de dados; Conhecimento em SQL intermediário e Python voltado para engenharia de dados e Spark; Familiaridade com processos de versionamento (Git), CI/CD e automações; Conhecimento...
-
Engenheiro de Dados
Há 3 dias
HOME OFFICE, Brasil beBeeDesenvolvimento Tempo inteiro R$45.000 - R$60.000Engenheiro de Dados: Construa um Futuro BrilhanteQueremos que você se junte a nossa equipe como Engenheiro de Dados e ajude a construir um futuro brilhante para nossos negócios.Descrição da FunçãoO engenheiro de dados será responsável por desenvolver processos de ETL utilizando Pentaho Data Integration e DBT para o Data Warehouse e Data Lake. Além...
-
Engenheiro(a) de dados
Há 2 dias
HOME OFFICE, Brasil TC Tempo inteiroSobre a empresa Somos a maior comunidade de traders da América Latina, e agora, somos também a corretora que vai mudar sua ideia sobre o mercado financeiro. Nossa missão é romper com o tradicional, oferecendo tecnologia de ponta, experiências diferenciadas e um atendimento próximo, humano e inteligente. Acreditamos que investir deve ser simples,...
-
Engenheiro(a) de dados
Há 2 dias
HOME OFFICE, Brasil Stefanini Group Tempo inteiroDescrição do Perfil: Estamos em busca de um(a) Engenheiro(a) de Dados Sênior para atuar em projetos estratégicos de dados. Este(a) profissional será responsável por desenvolver pipelines de dados robustos, apoiar a construção de soluções analíticas e contribuir com a evolução da arquitetura de dados da empresa. Requisitos Técnicos Experiência...
-
Engenheiro(a) de dados sr
Há 3 dias
HOME OFFICE, Brasil Objective Tempo inteiroSomos ávidos por tecnologia, criatividade e desafios. Se você gosta de desafios, aprendizado constante e valoriza as conexões pessoais, junte-se a nós # Valorizamos a diversidade e acreditamos que ela é fundamental para a inovação e entregas de valor aos nossos clientes. Todas as nossas vagas são destinadas a todas as pessoas, com ou sem...
-
HOME OFFICE, Brasil Daki Tempo inteiroEstamos em busca de uma Pessoa Engenheira Full Stack Sr., nosso foco principal é melhorar a jornada e transformar o jeito como as pessoas fazem mercado. Você vai trabalhar no desenvolvimento de soluções robustas, escaláveis e voltadas para performance. Estamos em fase de crescimento acelerado, e você terá espaço para atuar desde as decisões de...
-
Engenheiro(a) de dados
Há 2 dias
HOME OFFICE, Brasil Objective Tempo inteiroSomos ávidos por tecnologia, criatividade e desafios. Se você gosta de desafios, aprendizado constante e valoriza as conexões pessoais, junte-se a nós # Valorizamos a diversidade e acreditamos que ela é fundamental para a inovação e entregas de valor aos nossos clientes. Todas as nossas vagas são destinadas a todas as pessoas, com ou sem...