Engenharia de dados databricks pleno

Há 7 dias


Campinas, São Paulo, Brasil Netvagas Tempo inteiro

Join to apply for the Engenharia de dados databricks pleno role at Netvagas

Join to apply for the Engenharia de dados databricks pleno role at Netvagas

  • Desenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade.
  • Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas.
  • Criar e gerenciar fluxos de ETL (extração, transformação e carga) eficientes.
  • Garantir a qualidade, integridade e segurança dos dados em toda a arquitetura.
  • Colaborar com equipes multidisciplinares (cientistas de dados, analistas de BI, desenvolvedores e arquitetos) para integrar dados e transformar informações em insights acionáveis.
  • Participar da definição da arquitetura de dados, garantindo a escalabilidade e desempenho do sistema.
  • Monitorar e otimizar a performance dos pipelines e soluções de dados implementadas.
Responsabilidades
  • Desenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade.
  • Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas.
  • Criar e gerenciar fluxos de ETL (extração, transformação e carga) eficientes.
  • Garantir a qualidade, integridade e segurança dos dados em toda a arquitetura.
  • Colaborar com equipes multidisciplinares (cientistas de dados, analistas de BI, desenvolvedores e arquitetos) para integrar dados e transformar informações em insights acionáveis.
  • Participar da definição da arquitetura de dados, garantindo a escalabilidade e desempenho do sistema.
  • Monitorar e otimizar a performance dos pipelines e soluções de dados implementadas.
Requisitos
  • Experiência comprovada com Databricks para processamento e análise de grandes volumes de dados.
  • Experiência prática com a plataforma Azure (Azure Data Lake, Azure Synapse Analytics, Azure SQL, entre outros).
  • Forte conhecimento em SQL, Python e Spark para manipulação e transformação de dados.
  • Experiência com ferramentas de integração de dados e orquestração (ex. Apache Airflow, Azure Data Factory).
  • Sólidos conhecimentos em modelagem de dados, arquitetura de dados e melhores práticas de segurança.
  • Familiaridade com metodologias ágeis e ferramentas de versionamento de código (Git).
  • Inglês intermediário/avançado
Benefícios
Regime CLT
Vale alimentação/ Refeição (Cartão Flex)
Mobilidade Cartão flexivel (caso seja necessário)
Wellhub
Convênio Médico
Convênio Odontológico
Seguro de vida
Day Off no mês do aniversário
Auxílio- creche para homens e mulheres
Reembolso por certidicações
English Pass
Convênio graduação FIAP
SESC
Licença Paternidade e Maternidade estendida (Empresa Cidadã)
Licença Casamento

Get notified about new Engineering Specialist jobs in Campinas, São Paulo, Brazil .

Americana, São Paulo, Brazil 2 months ago

Indaiatuba, São Paulo, Brazil 2 weeks ago

Engenheiro de desenvolvimento de produtos Mechanical Engineer - HVAC & Utilities Specialist - Real Estate, São Paulo

Santa Bárbara d'Oeste, São Paulo, Brazil 1 week ago

Bolsista Mestre (engenheiro Agrônomo, Engenharia Mecânica, Automação) Bosch

Santa Bárbara d'Oeste, São Paulo, Brazil 23 hours ago

Pessoa Especialista em P&D - Engenharia de Bases de Conhecimento e Ontologias Pessoa Engenheira de Desenvolvimento de Hardware Sênior/Especialista Engenheiro de aplicação Refrigeração Industrial

Indaiatuba, São Paulo, Brazil 1 month ago

Especialista P&D - Engenharia de Bases de Conhecimento e Ontologias Engenheiro(a) de Automação - Transformação Digital Engenheiro(a) Estrutural de Desenvolvimento

Indaiatuba, São Paulo, Brazil 2 weeks ago

Engenheiro(a) ou Arquiteto(a) | Obras - Temporário Engenheiro(a) ou Arquiteto(a) | Obras - Temporário Técnico(a)/Engenheiro(a) Manutenção em Campo PL/SR- Proteção e Controle #J-18808-Ljbffr

  • Campinas, São Paulo, Brasil Kumulus Tempo inteiro

    Desenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade. Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas. Criar e gerenciar fluxos de ETL (extração, transformação e carga)...


  • Campinas, São Paulo, Brasil Kumulus Tempo inteiro

    Desenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade.Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas.Criar e gerenciar fluxos de ETL (extração, transformação e carga)...


  • Campinas, São Paulo, Brasil Netvagas Tempo inteiro

    Responsabilidades:-Desenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade.-Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas.-Criar e gerenciar fluxos de ETL (extração,...


  • Campinas, São Paulo, Brasil Netvagas Tempo inteiro R$104.000 - R$130.878 por ano

    ResponsabilidadesDesenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade.Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas.Criar e gerenciar fluxos de ETL (extração, transformação...


  • Campinas, São Paulo, Brasil Kumulus Tempo inteiro

    Join to apply for the Engenharia de Dados Azure Pleno (analytics) role at KumulusResponsibilitiesDesenvolver e manter soluções de ingestão, processamento e armazenamento de dados utilizando ferramentas da plataforma Azure, como Fabric, Azure Databricks, Azure Data Factory, Azure Data Lake, banco de dados SQL e PowerBI;Desenvolver e otimizar fluxos de...


  • Campinas, São Paulo, Brasil Kumulus Tempo inteiro

    Join to apply for the Engenharia de Dados Azure Pleno (analytics) role at Kumulus Responsibilities Desenvolver e manter soluções de ingestão, processamento e armazenamento de dados utilizando ferramentas da plataforma Azure, como Fabric, Azure Databricks, Azure Data Factory, Azure Data Lake, banco de dados SQL e PowerBI; Desenvolver e otimizar fluxos...


  • Campinas, São Paulo, Brasil beBeeDatabricks Tempo inteiro R$1.200.000 - R$1.600.000

    Desenvolvedor de Dados PlenoObjetivo:">">Responsável por desenvolver e otimizar pipelines de dados no Databricks, garantindo performance e escalabilidade; Trabalhar com tecnologias da plataforma Azure, como o Azure Data Lake, Azure SQL e Azure Synapse Analytics;Criar e gerenciar fluxos de ETL eficientes para garantir a qualidade e integridade dos...


  • Campinas, São Paulo, Brasil Netvagas Tempo inteiro

    -Desenvolver e manter soluções de ingestão, processamento e armazenamento de dados utilizando ferramentas da plataforma Azure, como: Fabric, Azure Databricks, Azure Data Factory, Azure Data Lake, banco de dados SQL e PowerBI;-Desenvolver e otimizar fluxos de trabalho ETL (Extração, Transformação e Carga) utilizando PySpark para garantir a integridade...


  • Campinas, São Paulo, Brasil Kumulus Tempo inteiro

    -Desenvolver e manter soluções de ingestão, processamento e armazenamento de dados utilizando ferramentas da plataforma Azure, como: Fabric, Azure Databricks, Azure Data Factory, Azure Data Lake, banco de dados SQL e PowerBI; -Desenvolver e otimizar fluxos de trabalho ETL (Extração, Transformação e Carga) utilizando PySpark para garantir a integridade...


  • Campinas, São Paulo, Brasil Digiage Tempo inteiro

    Buscamos Data Engineer Azure/Databricks Skills: Azure, ETL, Databricks, Inteligência Artificial. Requisitos Graduação completa em cursos relacionados à área de Tecnologia da Informação. Experiência em tecnologias de processamento de dados massivos e ferramentas de ETL/ELT. Conhecimento sólido em plataformas de Data & Analytics da Azure, como: Azure...