Engenheiro de dados/databricks sênior

1 semana atrás

HOME OFFICE, Brasil Brivia Tempo inteiro

Habilidades técnicas:

  • Proficiência no uso do Azure Databricks e do Spark para processamento de dados
  • A compreensão da estrutura MDMF será uma vantagem adicional
  • Experiência com SQL e gerenciamento de banco de dados.
  • Experiência com serviços de nuvem do Azure, incluindo Azure Data Lake, Banco de Dados SQL do Azure e Armazenamento de Blobs do Azure.
  • Capacidade de projetar e implementar modelos de dados complexos.
  • Fortes habilidades analíticas e de resolução de problemas.
  • Excelentes habilidades de comunicação em inglês para colaborar com equipes multifuncionais.
  • Apoie e interaja com diversas equipes em vários locais e fusos horários.
  • Interaja com uma equipe multifuncional para resolver problemas e reunir requisitos.
  • Deve ser capaz de rastrear incidentes, solicitações de serviço, solicitações de alteração para garantir que os SLAs
    • Desenvolvimento de pipeline de dados: projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de dados.
    • Integração de dados: integre dados de várias fontes e garanta a qualidade e a consistência dos dados em todo o pipeline.
    • Otimização de desempenho: otimize o desempenho do processamento de dados e solucione problemas no ambiente do Databricks.
    • Colaboração: Trabalhe em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender os requisitos de dados e fornecer soluções.
    • Documentação: crie e mantenha a documentação para processos de dados, arquitetura e fluxos de trabalho.
    • Segurança e conformidade: Garanta a segurança dos dados e a conformidade com os regulamentos e padrões relevantes.
    • Monitoramento e manutenção: Implemente soluções de monitoramento para garantir a confiabilidade do pipeline de dados e realizar manutenção regular.

  • Engenheiro de dados sênior

    Há 5 dias

    HOME OFFICE, Brasil ICON Solutions do Brasil Tempo inteiro

    Engenheiro de Dados - Sênior (Remoto) Você conhece a Icon? Apaixonados por pessoas e especialistas em tecnologia. Nosso trabalho é encontrar talentos e soluções sob medida para os nossos clientes. Vem encontrar o seu projeto ideal conosco e participar da comunidade ICON Sobre a Vaga Código da vaga: A Modelo de contratação: PJ Estamos em busca de...

  • Engenheiro de dados sênior

    Há 5 dias

    HOME OFFICE, Brasil ICON Solutions do Brasil Tempo inteiro

    Engenheiro de Dados - Sênior (Remoto) Você conhece a Icon? Apaixonados por pessoas e especialistas em tecnologia. Nosso trabalho é encontrar talentos e soluções sob medida para os nossos clientes. Vem encontrar o seu projeto ideal conosco e participar da comunidade ICON Sobre a Vaga Código da vaga: A Modelo de contratação: PJ Estamos em busca de...

  • Engenheiro de dados sênior

    3 semanas atrás

    HOME OFFICE, Brasil ICON Solutions do Brasil Tempo inteiro

    Engenheiro de Dados - Sênior (Remoto) Você conhece a Icon? Apaixonados por pessoas e especialistas em tecnologia. Nosso trabalho é encontrar talentos e soluções sob medida para os nossos clientes. Vem encontrar o seu projeto ideal conosco e participar da comunidade ICON Sobre a Vaga Código da vaga: A42228995227Modelo de contratação: PJ Estamos em...

  • Engenheiro de dados Sênior

    2 semanas atrás

    Home office, Brasil THERA CONSULTING Tempo inteiro

    Engenheiro de dados Sênior Atuação remota; Inicio imediato; Período: 3 meses – podendo renovar; Contratação PJ; Responsabilidades Obrigatório:Azure (ADF, Synapse, Data Lake, Databricks, SQL, Airflow, Kafka, SSIS); SQL, Python, PySpark; Atuação em projetos da área de dados; Desejável: Delta Lake; Medallion Architecture; CI/CD; Terraform...

  • Engenheiro(a) de dados

    Há 5 dias

    HOME OFFICE, Brasil Stefanini Group Tempo inteiro

    Descrição do Perfil: Estamos em busca de um(a) Engenheiro(a) de Dados Sênior para atuar em projetos estratégicos de dados. Este(a) profissional será responsável por desenvolver pipelines de dados robustos, apoiar a construção de soluções analíticas e contribuir com a evolução da arquitetura de dados da empresa. Requisitos Técnicos Experiência...

  • Engenheiro de dados sênior aws com databricks

    Há 5 dias

    HOME OFFICE, Brasil Leega Consultoria Tempo inteiro

    Ter experiência em Google Analytics; Ter experiência de no mínimo 5 anos com AWS (S3, EMR, Athena, Lambda, SQS, AWS Glue, RDS, Redshift, DynamoDB); Ter experiência de no mínimo 3 anos com Databricks; Experiência no desenvolvimento com Python, Pyspark e Pandas Compreensão da estrutura do Spark e dos recursos e desafios da arquitetura distribuída...

  • Engenheiro de dados

    1 semana atrás

    HOME OFFICE, Brasil NCS Tempo inteiro

     O que você precisa ter Experiência com Databricks; Experiência com serviços de dados em nuvem (AWS, Azure); Experiência em ferramentas de integração e transformação de dados; Conhecimento em SQL intermediário e Python voltado para engenharia de dados e Spark; Familiaridade com processos de versionamento (Git), CI/CD e automações; Conhecimento...

  • Engenheiro de dados sênior

    Há 5 dias

    HOME OFFICE, Brasil CERC Tempo inteiro

    RESPONSABILIDADES E ATRIBUIÇÕESComo Engenheiro de Dados Sênior, você irá:  Conhecer, entender e se envolver com os problemas de negócio do início ao fim, para propor soluções tech eficientes e inovadoras; Participar ativamente da expansão dos nossos sistemas atuais, da construção de novas features com foco no governança de dados; Construir...

  • Engenheiro de dados sr

    Há 5 dias

    HOME OFFICE, Brasil Stefanini Group Tempo inteiro

     Sobre a Posição Buscamos um Engenheiro de Dados Sênior com sólida experiência em soluções de dados na nuvem AWS para desenvolvimento e implementação de arquiteturas de dados modernas e escaláveis. O profissional atuará na construção de pipelines de dados robustos, implementação de data lakes e data warehouses, e desenvolvimento de soluções...

  • Engenheiro de dados

    Há 5 dias

    HOME OFFICE, Brasil Lighthouse Tempo inteiro

    Somos a Lighthouse, uma consultoria apaixonada por tecnologia e inovação. Valorizamos quem busca crescimento e desafios, oferecendo um ambiente que incentiva a iniciativa, a colaboração e a comunicação aberta. Aqui, você terá liberdade para desenvolver suas ideias e criar soluções que transformam o mundo.  Apoiamos aqueles que querem fazer a...