Engenheiro dados senior
2 semanas atrás
Requisitos obrigatórios: Domínio de Python para desenvolvimento de pipelines e automações. Conhecimento avançado em SQL (consultas complexas, tuning, índices, CTEs, particionamento, views materializadas). Experiência sólida com Apache Airflow (orquestração, versionamento, monitoramento). Experiência com PostgreSQL e modelagem de dados para Data Lake. Familiaridade com object storage (S3 ou equivalente) e formatos otimizados de arquivo (Parquet, ORC, GZIP). Prática com Git e boas práticas de versionamento de código. Desejável (diferenciais): Conhecimento em Oracle/PLSQL. Experiência com Databricks ou ambientes similares (Spark, Delta Lake). Noções de Docker, DBT e monitoramento com Prometheus/Grafana. Formação superior em áreas como Ciência da Computação, Engenharia de Software, Sistemas de Informação ou correlatas. Certificações em cloud ou engenharia de dados (AWS, Azure, Databricks, etc.) serão consideradas um diferencial. O Engenheiro de Dados Sênior será responsável por projetar, desenvolver e manter pipelines e arquiteturas de dados robustas, escaláveis e seguras. Atuará em estreita colaboração com o time de dados e as áreas de negócio para garantir a disponibilidade e confiabilidade das informações utilizadas em análises e produtos de dados. Principais responsabilidades: Desenvolver, orquestrar e monitorar pipelines de dados utilizando Apache Airflow, aplicando boas práticas de modularização e versionamento de DAGs. Implementar rotinas de monitoramento e alertas (logs estruturados, métricas e notificações via Grafana, email, etc.). Atuar na modelagem e implementação das camadas bronze, silver e gold em um Data Lake baseado em Databricks. Construir e manter integrações de dados a partir de APIs REST, bancos relacionais, arquivos CSV/Excel/Parquet e filas de mensagens. Desenvolver estratégias eficientes de carga incremental, controle de versionamento e catalogação de fontes. Revisar e otimizar consultas SQL complexas em PostgreSQL e Oracle (PL/SQL), garantindo desempenho e uso eficiente de recursos. Trabalhar com object storage (S3), definindo estratégias de versionamento, compactação e organização de arquivos. Garantir a observabilidade e qualidade dos pipelines, com testes unitários e de integração e documentação técnica atualizada. Participar de ritos ágeis e colaborar na modelagem de tabelas analíticas voltadas a ferramentas de BI (Power BI, Qlik). Experiências desejadas: Vivência em ambientes de dados complexos, com múltiplas fontes e alto volume de informação. Experiência comprovada na construção de pipelines de ETL/ELT em produção. Atuação anterior com arquitetura em camadas (bronze/silver/gold) e governança de dados.
-
Engenheiro de dados sênior
2 semanas atrás
HOME OFFICE, Brasil Clavis Tempo inteiroNome da vaga Engenheiro de Dados Responsabilidades: Definir e projetar a arquitetura de dados para projetos complexos e de grande escala, garantindo escalabilidade, performance e segurança. Liderar o desenvolvimento e a otimização de pipelines de dados robustos e eficientes utilizando Python para processamento massivo e em tempo real. Ser o especialista...
-
Engenheiro de dados sênior | remoto
2 semanas atrás
HOME OFFICE, Brasil ICON Solutions do Brasil Tempo inteiroEngenheiro de Dados - Sênior (Remoto) Você conhece a Icon? Apaixonados por pessoas e especialistas em tecnologia. Nosso trabalho é encontrar talentos e soluções sob medida para os nossos clientes. Vem encontrar o seu projeto ideal conosco e participar da comunidade ICON! Sobre a Vaga Código da vaga: A Modelo de contratação: PJ Estamos em busca de...
-
Pessoa engenheira de dados sênior
4 semanas atrás
HOME OFFICE, Brasil YDUQS - Vagas Tech Tempo inteiroBuscamos profissionais com: Formação em Tecnologia, Engenharia de Dados ou áreas correlatas; Especialização em Engenharia e Arquitetura de Dados, Administração de Bancos de Dados ou similares; Sólidos conhecimentos em programação, especialmente em linguagens como PySpark, Python, R e SQL; Experiência com Hadoop, Spark e outras tecnologias Big...
-
Engenheiro de dados sênior
1 semana atrás
HOME OFFICE, Brasil Grupo BGB Tempo inteiroEstamos em busca de um(a) Engenheiro(a) de Dados Sênior para atuar em projetos estratégicos, com foco na construção, integração e otimização de pipelines de dados em larga escala. O(a) profissional será responsável por desenvolver soluções robustas, escaláveis e seguras, garantindo a qualidade e disponibilidade dos dados que apoiam as decisões...
-
Engenheiro de dados big data sênior
1 hora atrás
HOME OFFICE, Brasil Grupo BGB Tempo inteiroEstamos em busca de um(a) Engenheiro(a) de Dados Big Data Sênior para transformar dados brutos em um recurso estratégico para a empresa, disponibilizando informações de forma rápida, acessível, segura e escalável. O objetivo é permitir análises avançadas e apoiar a tomada de decisões inteligentes. ResponsabilidadesConstruir e manter pipelines de...
-
Engenheiro de dados sênior
2 semanas atrás
HOME OFFICE, Brasil CERC Tempo inteiroRESPONSABILIDADES E ATRIBUIÇÕESComo Engenheiro de Dados Sênior, você irá: Conhecer, entender e se envolver com os problemas de negócio do início ao fim, para propor soluções tech eficientes e inovadoras; Participar ativamente da expansão dos nossos sistemas atuais, da construção de novas features com foco no governança de dados; Construir...
-
Profissional engenheiro(a) de dados sênior
4 semanas atrás
HOME OFFICE, Brasil Luby Tempo inteiro#VemPraLubyAqui você terá a oportunidade de: Evoluir em um ambiente de alta performance: Uma cultura onde o desenvolvimento é contínuo, com autonomia e envolvimento em projetos nacionais e internacionais que realmente testam suas habilidades e impulsionam seu potencial. Integrar um time apaixonado por tecnologia: Aqui, você vai trabalhar ao lado de...
-
Engenheiro de dados sênior
1 semana atrás
HOME OFFICE, Brasil VOLL Tempo inteiroRequisitos básicos: Experiência comprovada como engenheiro de dados em projetos de evolução e aplicações de grande complexidade. Formação técnica e experiência profissional com viés quantitativo/analítico. Desejável: ter liderado outros desenvolvedores. Experiência atuando em projetos de dados com métodos ágeis (Scrum, Kanban). Requisitos...
-
Engenheiro de dados sênior
Há 5 dias
HOME OFFICE, Brasil Grupo BGB Tempo inteiroEstamos em busca de um(a) Engenheiro(a) de Dados Sênior para atuar em um projeto estratégico de alta complexidade, com foco na implementação de arquiteturas modernas, pipelines escaláveis e governança de dados em ambiente AWS. O(a) profissional será peça-chave na construção e otimização de soluções de dados que suportam decisões críticas de...
-
Pessoa engenheira de dados sênior
2 semanas atrás
HOME OFFICE, Brasil AI Solutions Tempo inteiroPessoa Engenheira de Dados Remoto. Contrato: PJ Iniciar: Disponibilidade Imediata Sobre a Empresa:A AI Solutions é uma empresa focada no desenvolvimento de soluções tecnológicas com inteligência artificial e machine learning, através da extração, estruturação e consolidação de base de dados e informações. Proporcionamos aos nossos clientes,...
