Engenharia de dados databricks pleno

4 semanas atrás


Campinas, São Paulo, Brasil Netvagas Tempo inteiro

Join to apply for the Engenharia de dados databricks pleno role at Netvagas

Join to apply for the Engenharia de dados databricks pleno role at Netvagas

  • Desenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade.
  • Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas.
  • Criar e gerenciar fluxos de ETL (extração, transformação e carga) eficientes.
  • Garantir a qualidade, integridade e segurança dos dados em toda a arquitetura.
  • Colaborar com equipes multidisciplinares (cientistas de dados, analistas de BI, desenvolvedores e arquitetos) para integrar dados e transformar informações em insights acionáveis.
  • Participar da definição da arquitetura de dados, garantindo a escalabilidade e desempenho do sistema.
  • Monitorar e otimizar a performance dos pipelines e soluções de dados implementadas.
Responsabilidades
  • Desenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade.
  • Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas.
  • Criar e gerenciar fluxos de ETL (extração, transformação e carga) eficientes.
  • Garantir a qualidade, integridade e segurança dos dados em toda a arquitetura.
  • Colaborar com equipes multidisciplinares (cientistas de dados, analistas de BI, desenvolvedores e arquitetos) para integrar dados e transformar informações em insights acionáveis.
  • Participar da definição da arquitetura de dados, garantindo a escalabilidade e desempenho do sistema.
  • Monitorar e otimizar a performance dos pipelines e soluções de dados implementadas.
Requisitos
  • Experiência comprovada com Databricks para processamento e análise de grandes volumes de dados.
  • Experiência prática com a plataforma Azure (Azure Data Lake, Azure Synapse Analytics, Azure SQL, entre outros).
  • Forte conhecimento em SQL, Python e Spark para manipulação e transformação de dados.
  • Experiência com ferramentas de integração de dados e orquestração (ex. Apache Airflow, Azure Data Factory).
  • Sólidos conhecimentos em modelagem de dados, arquitetura de dados e melhores práticas de segurança.
  • Familiaridade com metodologias ágeis e ferramentas de versionamento de código (Git).
  • Inglês intermediário/avançado
Benefícios
Regime CLT
Vale alimentação/ Refeição (Cartão Flex)
Mobilidade Cartão flexivel (caso seja necessário)
Wellhub
Convênio Médico
Convênio Odontológico
Seguro de vida
Day Off no mês do aniversário
Auxílio- creche para homens e mulheres
Reembolso por certidicações
English Pass
Convênio graduação FIAP
SESC
Licença Paternidade e Maternidade estendida (Empresa Cidadã)
Licença Casamento

Get notified about new Engineering Specialist jobs in Campinas, São Paulo, Brazil .

Americana, São Paulo, Brazil 2 months ago

Indaiatuba, São Paulo, Brazil 2 weeks ago

Engenheiro de desenvolvimento de produtos Mechanical Engineer - HVAC & Utilities Specialist - Real Estate, São Paulo

Santa Bárbara d'Oeste, São Paulo, Brazil 1 week ago

Bolsista Mestre (engenheiro Agrônomo, Engenharia Mecânica, Automação) Bosch

Santa Bárbara d'Oeste, São Paulo, Brazil 23 hours ago

Pessoa Especialista em P&D - Engenharia de Bases de Conhecimento e Ontologias Pessoa Engenheira de Desenvolvimento de Hardware Sênior/Especialista Engenheiro de aplicação Refrigeração Industrial

Indaiatuba, São Paulo, Brazil 1 month ago

Especialista P&D - Engenharia de Bases de Conhecimento e Ontologias Engenheiro(a) de Automação - Transformação Digital Engenheiro(a) Estrutural de Desenvolvimento

Indaiatuba, São Paulo, Brazil 2 weeks ago

Engenheiro(a) ou Arquiteto(a) | Obras - Temporário Engenheiro(a) ou Arquiteto(a) | Obras - Temporário Técnico(a)/Engenheiro(a) Manutenção em Campo PL/SR- Proteção e Controle #J-18808-Ljbffr

  • Campinas, São Paulo, Brasil Kumulus Tempo inteiro

    Desenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade. Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas. Criar e gerenciar fluxos de ETL (extração, transformação e carga)...


  • Campinas, São Paulo, Brasil Kumulus Tempo inteiro

    Desenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade.Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas.Criar e gerenciar fluxos de ETL (extração, transformação e carga)...


  • Campinas, São Paulo, Brasil Netvagas Tempo inteiro R$80.000 - R$120.000 por ano

    ResponsabilidadesDesenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade.Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas.Criar e gerenciar fluxos de ETL (extração, transformação...


  • Campinas, São Paulo, Brasil Kumulus Tempo inteiro

    Join to apply for the Engenharia de Dados Azure Pleno (analytics) role at KumulusResponsibilitiesDesenvolver e manter soluções de ingestão, processamento e armazenamento de dados utilizando ferramentas da plataforma Azure, como Fabric, Azure Databricks, Azure Data Factory, Azure Data Lake, banco de dados SQL e PowerBI;Desenvolver e otimizar fluxos de...


  • Campinas, São Paulo, Brasil Kumulus Tempo inteiro

    Join to apply for the Engenharia de Dados Azure Pleno (analytics) role at Kumulus Responsibilities Desenvolver e manter soluções de ingestão, processamento e armazenamento de dados utilizando ferramentas da plataforma Azure, como Fabric, Azure Databricks, Azure Data Factory, Azure Data Lake, banco de dados SQL e PowerBI; Desenvolver e otimizar fluxos...


  • Campinas, São Paulo, Brasil Atlanteam Soluções em TI Tempo inteiro R$80.000 - R$120.000 por ano

    Sobre a posiçãoProcuramos um Engenheiro de Dados Pleno para atuar no desenvolvimento, manutenção e evolução de soluções de engenharia de dados, com foco em web scraping, integrações, processos ETL/ELT, e implementação em ambientes de nuvem (Azure Databricks e GCP).Esse profissional será responsável por construir pipelines eficientes, aplicar...


  • Campinas, São Paulo, Brasil Kumulus Tempo inteiro

    Join to apply for the Engenharia de Dados Azure Sênior role at Kumulus1 week ago Be among the first 25 applicantsJoin to apply for the Engenharia de Dados Azure Sênior role at KumulusResponsibilitiesProjetar, implementar e manter soluções de ingestão, processamento e armazenamento de dados utilizando ferramentas da plataforma Azure, como: Azure...


  • Campinas, São Paulo, Brasil Kumulus Tempo inteiro

    Join to apply for the Engenharia de Dados Azure Sênior role at Kumulus 1 week ago Be among the first 25 applicants Join to apply for the Engenharia de Dados Azure Sênior role at Kumulus Responsibilities Projetar, implementar e manter soluções de ingestão, processamento e armazenamento de dados utilizando ferramentas da plataforma Azure, como:...


  • Campinas, São Paulo, Brasil Netvagas Tempo inteiro

    Visão geral Pessoa engenheira de dados azure pleno senior Join to apply for the Pessoa engenheira de dados azure pleno senior role at Netvagas Responsabilidades Liderar e desenvolver times de engenheiros de dados; Planejar, priorizar e supervisionar projetos de dados (como construção de data lakes, pipelines, integrações); Trabalhar junto a cientistas...


  • Campinas, São Paulo, Brasil Netvagas Tempo inteiro

    Visão geralPessoa engenheira de dados azure pleno seniorJoin to apply for the Pessoa engenheira de dados azure pleno senior role at NetvagasResponsabilidadesLiderar e desenvolver times de engenheiros de dados;Planejar, priorizar e supervisionar projetos de dados (como construção de data lakes, pipelines, integrações);Trabalhar junto a cientistas de...