Especialistas Databricks

Na wBrain, não apenas transformamos organizações; evoluímos pessoas. Somos um ecossistema de profissionais apaixonados por tecnologia, inovação e por solucionar desafios complexos. Estamos em busca de mentes brilhantes e criativas que pensam fora da caixa e desejam causar um impacto positivo no mundo para se juntarem ao nosso time.

Nossa cultura é pautada na colaboração, no aprendizado contínuo e na troca de experiências. Proporcionamos um ambiente acolhedor e seguro, onde há liberdade para que cada um seja autêntico e tenha autonomia para inovar. Aqui, utilizamos metodologias ágeis e exclusivas para orientar a atuação de nossos times, garantindo não apenas a eficiência e a qualidade das entregas, mas também o desenvolvimento constante de cada wBrainer.

Para esta vaga, você se juntará a uma equipe de alta performance, dedicada a construir e manter uma plataforma de dados de ponta. O time é responsável por garantir a qualidade e a governança dos dados que sustentam as decisões estratégicas de nossos clientes. Valorizamos profissionais proativos, que gostem de trabalhar em equipe, de compartilhar conhecimento e que estejam sempre dispostos a aprender e a experimentar novas tecnologias e abordagens.

Se você busca um lugar para crescer profissionalmente, trabalhar em projetos desafiadores e fazer parte de uma cultura que valoriza as pessoas acima de tudo, a wBrain é o seu lugar.

Responsabilidades e atribuições
Construir uma plataforma de dados resiliente que abranja todos os quesitos de qualidade de dados. A garantia desta qualidade deve ser aplicada desde a coleta dos dados de sistemas, fornecedores e clientes até processamento e disponibilização na camada curada para uso em análises e sustentação de modelos matemáticos.

Manter e desenvolver funcionalidades da plataforma de dados.

Auxiliar na análise e definição de implementação de novas tecnologias.

Auxiliar na definição da arquitetura dos serviços mantidos pela equipe.

Atuar em equipes de desenvolvimento que utilizam métodos ágeis.

Avaliar novas tecnologias e frameworks de mercado para melhoria contínua de produtos e processos, realizando provas de conceito.

Auxílio em definições de políticas de governança.

Estabelecer os stakeholders todos os processos e contratos de modelagem de dados e governança.

Requisitos e qualificações
Sólida experiência prévia com engenharia de dados;

Superior em Ciência da Computação, Engenharias, Sistemas de Informação ou áreas correlatas.

Experiência com análise e desenvolvimento de sistemas, definições de arquitetura e orientação a objetos.

Experiência com construção de serviços de integração de dados em qualquer camada (captura, ingestão, armazenamento, processamento e delivery).

Experiência comprovada na plataforma Databricks.

Desenvolvimento de pipelines com SQL, Spark (Python/Scala) e Delta Lake (merge, vacuum, time travel).

Otimização de workloads (performance tuning, cluster configuration, custo-eficiência).

Uso de ferramentas como Unity Catalog (governança) e Databricks Workflows (orquestração).

Experiência em SQL analítico para transformação de dados (CTEs, window functions, otimização de queries).

Arquitetura de pipelines ETL/ELT modernos (incremental loads, SCDs, streaming).

Práticas de DevOps/DataOps: CI/CD, IaC (Terraform, ARM Templates), e versionamento (Git).

Arquitetura e Mapeamento/Modelagem de dados;

Conhecimento em Power BI para integração com Databricks (conexão direta, import/export de dados, segurança).

Vivência com Azure Data Factory (ou similares como SSIS ) para ingestão e orquestração de dados.

Ciência de dados (diferencial);

Microsoft Fabric;

Conhecimento em Linux, Shell Script, YAML e Terraform.

Informações adicionais
PJ + Benefícios

Híbrido

São Paulo