Crie sua Carreira como Engenheiro de Dados

2 semanas atrás

São Paulo, São Paulo, Brasil beBeeEngenheirdados Tempo inteiro R$150.000 - R$200.000

Aqui está uma oportunidade para se destacar como um Engenheiro de Dados

Responsabilidades:

  • Desenvolvimento, testes unitários e de integração;

Ferramentas de Ingestão de Dados:

  • Snowflake, Databricks, Hadoop, AWS ou Azure.
  • StreamSets, Apache NiFi ou Azure Data Factory.

Gerenciamento de Armazenamento Distribuído:

  • Kafka, HDFS, S3/ADLS, Elastic.

Queries SQL:

  • Escrever, depurar e otimizar queries SQL.

Pipelines e Soluções:

  • Desenvolver pipelines e soluções com Python, PySpark, Spark SQL e Spark Structured Streaming.

Ferramentas Adicionais:

  • Github, Github Actions e Databricks Asset Bundles.

Requisitos:

  • Experiência comprovada como Engenheiro de Dados (10 a 15 anos).
  • Proficiência em SQL e programação Python.
  • Dominio de Databricks, Spark e DataLake.
  • Conhecimento em JSON, DataFrame e Structured Streaming.
  • Experiência com ferramentas de versionamento e automação.
  • Inglês fluente (obrigatório).

Qualificações Desejáveis:

  • Conhecimento em SAP WITS/WITSML e CosmoDB.
  • Familiaridade com Databricks CLI.
  • Experiência no setor de Óleo & Gás será considerada um diferencial.

  • Engenheiro(A) De Dados Sr

    2 semanas atrás

    São Paulo, São Paulo, Brasil Vaga Para Engenheiro Tempo inteiro

    Somos oPANÁgeis, flexíveis e criativos, exploramos possibilidades com disposição e desejo de fazer acontecer. Sempre prontos para encarar novos desafios, nutrimos líderes que, além de ter garra, são abertos e empáticos, veem na proximidade das relações, o elo entre cada um.Nossa missão, se faz cumprida quando transformamos a vida dos outros...

  • Engenheiro de Dados

    Há 5 dias

    São Paulo, São Paulo, Brasil EVT IT Tempo inteiro

    Overview Desenvolvimento de pipeline de dados: projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de dados. Integração de dados: integre dados de várias fontes e garanta a qualidade e a consistência dos dados em todo o pipeline. Otimização de desempenho: otimize o...

  • Engenheiro de Dados

    Há 5 dias

    São Paulo, São Paulo, Brasil EVT IT Tempo inteiro

    OverviewDesenvolvimento de pipeline de dados: projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de dados. Integração de dados: integre dados de várias fontes e garanta a qualidade e a consistência dos dados em todo o pipeline. Otimização de desempenho: otimize o...

  • Engenheiro De Dados

    Há 3 dias

    São Paulo, São Paulo, Brasil Evt It Tempo inteiro

    OverviewDesenvolvimento de pipeline de dados: projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de dados.Integração de dados: integre dados de várias fontes e garanta a qualidade e a consistência dos dados em todo o pipeline.Otimização de desempenho: otimize o...

  • Engenheiro de dados

    Há 3 dias

    São Paulo, São Paulo, Brasil Netvagas Tempo inteiro

    OverviewEngenheiro de dados - NetvagasModalidade: RemotaLocal: São Paulo, São Paulo, Brazil (quando aplicável para a posição que aparece no anúncio)ResponsabilidadesDesenvolvimento de pipeline de dados: projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de...

  • Engenheiro(A) De Dados Pl.

    2 semanas atrás

    São Paulo, São Paulo, Brasil Vaga Para Engenheiro Tempo inteiro

    Somos oPANÁgeis, flexíveis e criativos, exploramos possibilidades com disposição e desejo de fazer acontecer. Sempre prontos para encarar novos desafios, nutrimos líderes que, além de ter garra, são abertos e empáticos, veem na proximidade das relações, o elo entre cada um.Nossa missão, se faz cumprida quando transformamos a vida dos outros...

  • Engenheiro de Dados

    2 semanas atrás

    São Paulo, São Paulo, Brasil BairesDev Tempo inteiro

    Join to apply for the Engenheiro de Dados - Trabalho Remoto role at BairesDev Join to apply for the Engenheiro de Dados - Trabalho Remoto role at BairesDev Há mais de 15 anos, a BairesDev é líder em projetos tecnológicos. Entregamos soluções inovadoras para gigantes como Google e Rolls-Royce e as startups mais inovadoras do Vale do Silício. Temos...

  • Engenheiro de Dados

    Há 4 dias

    São Paulo, São Paulo, Brasil BairesDev Tempo inteiro

    Join to apply for the Engenheiro de Dados - Trabalho Remoto role at BairesDev Há mais de 15 anos, a BairesDev é líder em projetos tecnológicos. Entregamos soluções inovadoras para gigantes como Google e Rolls-Royce e as startups mais inovadoras do Vale do Silício. Temos uma equipe diversa de mais de 4.000 profissionais formada pelo Top 1% dos...

  • Engenheiro de Dados

    Há 4 dias

    São Paulo, São Paulo, Brasil BairesDev Tempo inteiro

    Join to apply for the Engenheiro de Dados - Trabalho Remoto role at BairesDevHá mais de 15 anos, a BairesDev é líder em projetos tecnológicos. Entregamos soluções inovadoras para gigantes como Google e Rolls-Royce e as startups mais inovadoras do Vale do Silício.Temos uma equipe diversa de mais de 4.000 profissionais formada pelo Top 1% dos talentos...

  • Carreira como Engenheiro de Dados

    1 semana atrás

    São Paulo, São Paulo, Brasil beBeeEngenheiro Tempo inteiro R$1.000.000 - R$1.200.000

    Oferta de Emprego para Engenheiro de Dados Sênior e EspecialistaNossa equipe está procurando por um profissional experiente e especializado em engenharia de dados para se juntar a nós.Funções do CargoColetar, limpar e transformar dados brutos em formatos utilizáveis para análise;Desenvolver e manter pipelines de dados eficientes e...