Engenheiro de Dados Databricks Sênior

Há 6 dias


Goiás, Brasil Brivia Tempo inteiro

Overview

Join to apply for the Engenheiro de Dados Databricks Sênior role at Brivia .

Somos um ecossistema especializado na transformação de marcas, ajudando nossos clientes a superar desafios em transformação digital, tecnologia e marketing. Para isso, buscamos constantemente expandir nossas capacidades, contando com os melhores especialistas em diversas áreas. O Brivia_Group quer contar com o seu talento para fortalecer ainda mais nosso ecossistema de transformação digital.

Responsabilidades e atribuições
  • Desenvolvimento de pipeline de dados: projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de dados.
  • Integração de dados: integre dados de várias fontes e garanta a qualidade e a consistência dos dados em todo o pipeline.
  • Otimização de desempenho: optimize o processamento de dados e solucione problemas no ambiente do Databricks.
  • Colaboração: Trabalhe em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender os requisitos de dados e fornecer soluções.
  • Documentação: crie e mantenha a documentação para processos de dados, arquitetura e fluxos de trabalho.
  • Segurança e conformidade: Garanta a segurança dos dados e a conformidade com os regulamentos e padrões relevantes.
  • Monitoramento e manutenção: Implemente soluções de monitoramento para garantir a confiabilidade do pipeline de dados e realizar manutenção regular.
Requisitos e qualificações Habilidades técnicas
  • Proficiência no uso do Azure Databricks e do Spark para processamento de dados
  • A compreensão da estrutura MDMF será uma vantagem adicional
  • Experiência com SQL e gerenciamento de banco de dados
  • Experiência com serviços de nuvem do Azure, incluindo Azure Data Lake, Banco de Dados SQL do Azure e Armazenamento de Blobs do Azure
  • Capacidade de projetar e implementar modelos de dados complexos
  • Fortes habilidades analíticas e de resolução de problemas
  • Excelentes habilidades de comunicação em inglês para colaborar com equipes multifuncionais
  • Apoie e interaja com diversas equipes em vários locais e fusos horários
  • Interaja com uma equipe multifuncional para resolver problemas e reunir requisitos
  • Deve ser capaz de rastrear incidentes, solicitações de serviço, solicitações de mudança para garantir que os SLAs
Informações adicionais
  • Contratação no modelo PJ (CNPJ ativo necessário)
  • Equipamento próprio

Junte-se a um ecossistema dinâmico e faça parte da revolução do mercado

#J-18808-Ljbffr
  • Databricks Data Architect

    2 semanas atrás


    Goiás, Brasil buscojobs Brasil Tempo inteiro

    Overview Celebal Technologies is seeking an experienced Data Architect with deep expertise in Azure Databricks, Unity Catalog, PySpark, and Delta Live Tables. In this role, you will lead the design, architecture, and delivery of advanced data solutions, collaborating closely with cross-functional teams to ensure scalable, secure, and high-performance...

  • Engenheiro De Software

    2 semanas atrás


    Goiás, Brasil buscojobs Brasil Tempo inteiro

    Engenheiro de software sênior Sobre a XVIA A X-VIA é uma plataforma tecnológica inspirada no modelo estoniano X-Road, referência mundial em governo digital. Adaptada à realidade brasileira, a solução permite que diferentes órgãos públicos compartilhem dados de forma segura, eficiente e padronizada, promovendo agilidade e transparência nos...


  • Goiás, Brasil Netvagas Tempo inteiro

    Profissional engenheiro de dados de IA pleno remoto Evoluir em um ambiente de alta performance: uma cultura de desenvolvimento contínuo, com autonomia e envolvimento em projetos nacionais e internacionais que testam suas habilidades e impulsionam seu potencial. Integrar um time apaixonado por tecnologia: trabalhar ao lado de talentos experientes em um...


  • Valparaíso de Goiás, Brasil Jobbol Tempo inteiro

    Empresa de Engenharia admite Engenheiro Civil Sênior em Valparaíso de Goiás.Responsabilidades:Planejar, coordenar e acompanhar a execução da obra.Garantir qualidade, prazo e custo.Apoiar e orientar a equipe técnica.Elaborar relatórios, cronogramas e medições.Assegurar conformidade com normas e segurança.Remuneração:Salário: Enviar Pretensão...

  • Analista De Governança

    2 semanas atrás


    Goiás, Brasil buscojobs Brasil Tempo inteiro

    Responsabilidades Desenvolver e implementar estratégias de governança de dados, garantindo alinhamento com as necessidades de negócios e requisitos regulatórios. Definir e aplicar políticas, padrões e melhores práticas para o gerenciamento de dados em toda a organização. Gerenciar a qualidade dos dados, realizando processos de monitoramento,...


  • Goiás, Brasil Solvd, Inc. Tempo inteiro

    Solvd is an AI-first advisory and digital engineering firm delivering measurable business impact through strategic digital transformation. Taking an AI-first approach, we bridge the critical gap between experimentation and real ROI, weaving artificial intelligence into everything we do and helping clients at all stages accelerate AI integration into each...


  • Valparaíso de Goiás, Brasil Jobbol Tempo inteiro R$80.000 - R$120.000 por ano

    Empresa de Engenharia admite Engenheiro Civil Sênior em Valparaíso de Goiás.Responsabilidades:Planejar, coordenar e acompanhar a execução da obra. Garantir qualidade, prazo e custo. Apoiar e orientar a equipe técnica. Elaborar relatórios, cronogramas e medições. Assegurar conformidade com normas e segurança.Remuneração:Salário: Enviar Pretensão...


  • Goiás, Brasil Grupo CPA Tempo inteiro

    Vaga ENGENHEIRO DE MACHINE LEARNING (SÊNIOR) | Grupo CPA/Grupo Easy Local: 100% Home Office Modalidade de Contratação: PJ ou Cooperado Tempo de Projeto: Indeterminado Responsabilidades principais Anotar e preparar datasets de visão computacional. Projetar, treinar, validar e otimizar modelos de deep learning para classificação, detecção e...


  • Goiânia, Goiás, Goiás, Brasil Alterdata Software Tempo inteiro

    Desenvolver e Manter Pipelines de Dados:Projetar, implementar e otimizar processos de ETL (Extração, Transformação e Carga) e ELT para coletar dados de diversas fontes (APIs, bancos de dados, streams, etc. ). Gerenciar Infraestrutura na AWS:Estruturar e administrar nosso Data Lake no Amazon S3 e nosso Data Warehouse no Amazon Redshift. Processamento de...


  • Goiás, Brasil buscojobs Brasil Tempo inteiro

    Overview Unidade de Negócio: Newco Gringo + Zapay Local de trabalho: São Paulo Modelo de trabalho: Remoto Responsabilidades e atribuições Ser referência técnica para o time de Engenharia de Dados, promovendo o densenvolvimento contínuo; Liderar esforços para padronização de pipelines e criação de bibliotecas próprias; Ser referência em...