Pleno Data Engineer AWS + Databricks Data Integration · Remoto · Remoto por tempo integral

Why Keyrus, Why Now

A Keyrus é um grupo internacional com 2.800 consultores e especialistas em 28 países , construído sobre uma convicção: a IA não transforma empresas. A inteligência arquitetada transforma. Há mais de 30 anos, construímos as bases de dados que tornam os sistemas inteligentes possíveis, projetando o Sistema Operacional da Empresa Inteligente, onde a inteligência está incorporada ao núcleo dos processos de negócio para criar valor sustentável: operacionalizamos a inteligência.

A IA não substitui os seres humanos. Ela nos reposiciona em um lugar que nenhum sistema pode alcançar: compreender, decidir, criar e inovar. Na Keyrus, você não desenvolverá apenas habilidades; desenvolverá discernimento. Sua expertise se fortalece a cada sistema que você projeta, a cada desafio de negócio que ajuda a resolver e a cada implementação que evolui a partir dos aprendizados anteriores.

Com o tempo, você se tornará um dos profissionais mais raros da era da inteligência: alguém capaz de conectar dados, IA e tomada de decisão humana em escala, entre diferentes setores, mercados e geografias. Esta não é apenas uma posição. É uma disciplina que você domina e uma história que ajuda a escrever para se tornar um Arquiteto da Inteligência da Keyrus.

A tecnologia amplia capacidades. A cultura da Keyrus diferencia. A excelência na execução conecta ambas.

O QUE VOCÊ IRÁ ARQUITETAR

Esta posição combina visão arquitetural, profundidade técnica e atuação consultiva. Buscamos profissionais capazes de transformar desafios complexos em soluções de dados escaláveis, modernas e orientadas a resultados.

QUEM VOCÊ É

Você é um profissional experiente que combina conhecimento técnico com visão estratégica de negócio.

Você entende que dados são a base para decisões mais inteligentes e para a transformação das organizações.

Você consegue navegar com naturalidade entre discussões arquiteturais, implementação técnica e relacionamento com stakeholders.

Você gosta de estruturar ambientes complexos, criar padrões e impulsionar a evolução tecnológica.

Você equilibra pragmatismo e inovação, priorizando soluções que geram impacto real.

Você compartilha conhecimento e contribui para o crescimento técnico das equipes ao seu redor.

Você possui perfil consultivo, analítico e orientado à resolução de problemas.

O QUE VOCÊ TRAZ

Estamos em busca de um(a) Engenheiro(a) de Dados Pleno para atuar no desenvolvimento e na evolução de soluções de dados em um ambiente altamente escalável, trabalhando com grandes volumes de informações e tecnologias modernas.

O profissional será responsável por desenvolver, manter e otimizar pipelines de ingestão e processamento de dados, utilizando principalmente Python, Apache Spark e Databricks , contribuindo para a construção de arquiteturas eficientes, seguras e com alto desempenho.

Experiência e Qualificações

• Desenvolver e manter pipelines de ingestão de dados utilizando Databricks Autoloader, incluindo processamento incremental e evolução de esquemas (Schema Evolution).
• Implementar soluções de processamento de dados em larga escala com Spark Structured Streaming e Spark SQL.
• Aplicar boas práticas de Engenharia de Dados, incluindo particionamento, otimização de processamento e utilização de Delta Lake.
• Analisar e otimizar a performance e os custos dos ambientes Databricks.
• Implementar práticas de Data Quality, garantindo a confiabilidade e a consistência das informações.
• Trabalhar com controle de versionamento utilizando Git e processos de Pull Requests.
• Elaborar documentações técnicas claras sobre as soluções e demandas desenvolvidas.
• Colaborar com times de negócio e Analytics, garantindo a disponibilidade, estruturação e segurança dos dados.
• Requisitos e Qualificações
• Experiência com Engenharia de Dados e processamento de grandes volumes de informações.
• Conhecimento em Python e Apache Spark.
• Experiência com Databricks.
• Conhecimento em construção e manutenção de pipelines de ingestão de dados.
• Vivência com Spark Structured Streaming e Spark SQL.
• Conhecimento em Delta Lake e técnicas de otimização de processamento.
• Experiência com Git e controle de versionamento.
• Conhecimento em práticas de Data Quality.

Diferenciais:

• Conhecimento em arquiteturas modernas de dados e processos ETL/ELT.
• Experiência com metodologias ágeis, como Scrum e Kanban.
• Vivência com otimização de custos e performance em ambientes de dados escaláveis.
• Perfil analítico, autogerenciável e com habilidade para resolução de problemas.
• Interesse em aprender novas tecnologias e propor soluções inovadoras para desafi