Engenheiro de dados Pleno

Há 2 dias

Campinas, São Paulo, Brasil Atlanteam Soluções em TI Tempo inteiro R$80.000 - R$120.000 por ano

Sobre a posição

Procuramos um Engenheiro de Dados Pleno para atuar no desenvolvimento, manutenção e evolução de soluções de engenharia de dados, com foco em web scraping, integrações, processos ETL/ELT, e implementação em ambientes de nuvem (Azure Databricks e GCP).

Esse profissional será responsável por construir pipelines eficientes, aplicar arquitetura Medallion (Bronze, Silver, Gold), manter e evoluir código em Python, além de integrar dados de múltiplas fontes em bancos relacionais e não relacionais e paginas WEB e sistemas WEB.

Desenvolver coleta de dados em paginas WEB e demais fontes, criar rotinas de web scraping e integração com APIs externas para captura de dados (obrigatório).

Esta vaga é Pessoa Juridica.

Responsabilidades:

  • Realizar manutenção, evolução e otimização de código em Python.

  • Desenvolver e manter rotinas ETL/ELT de ingestão, transformação e carga de dados em Azure Databricks (Delta Lake, PySpark, ADF) e Google Cloud (BigQuery, Dataflow, Pub/Sub).

  • Criar e manter rotinas de web scraping e Criar e manter integração com APIs externas.

  • Modelar e administrar bancos de dados SQL e NoSQL (PostgreSQL, SQL Server, MongoDB, etc.).

  • Aplicar arquitetura Medallion (Bronze, Silver, Gold) para governança, qualidade e rastreabilidade dos dados.

  • Construir interfaces e conectores entre diferentes sistemas internos e externos, inclusive sites.

  • Trabalhar em conjunto com equipes de Analytics e Data Science, garantindo dados confiáveis para dashboards, relatórios e modelos de IA.

  • Documentar pipelines, processos e boas práticas.

Requisitos

  • Experiência sólida em Python (manutenção de código e novas implementações).

  • Experiência em ETL/ELT em Azure Databricks (PySpark, Delta Lake) e Google Cloud (BigQuery, Dataflow, Pub/Sub).

  • Conhecimentos avançados em SQL e modelagem de dados.

  • Experiência em arquitetura Medallion e boas práticas de governança de dados.

  • Experiência com APIs REST/GraphQL e integrações.

  • Git e metodologias ágeis.

Desejável

  • Experiência em Azure Data Factory e orquestração de pipelines (Airflow, Prefect, Dagster).

  • Conhecimento de Databricks minimo 1/2 anos (Obrigatório).

  • Conhecimentos em Docker/Kubernetes para empacotamento e escalabilidade.

  • Experiência em Power BI ou outra ferramenta de visualização.

  • Conhecimentos em segurança, privacidade e compliance em ambientes de dados.

Benefícios

  • Vaga PJ com ferias remuneradas.

  • Engenheiro (a) de Dados Pleno

    2 semanas atrás

    Campinas, São Paulo, Brasil Neoenergia SA Tempo inteiro

    Engenheiro (a) de Dados Pleno page is loaded## Engenheiro (a) de Dados Plenolocations: Brasil, Campinasposted on: Publicado há 4 diastime left to apply: Data de término: 18 de setembro de 2025 (5 dias restantes para se candidatar)job requisition id: R-22461**Sinta a nossa energia**Somos um time de 16 mil colaboradores próprios, espalhados por 18...

  • Engenheiro (a) de Dados Pleno

    2 semanas atrás

    Campinas, São Paulo, Brasil Iberdrola, S.A Tempo inteiro

    Engenheiro (a) de Dados Pleno page is loaded## Engenheiro (a) de Dados Plenolocations: Brazil, Campinasposted on: Posted 4 Days Agotime left to apply: End Date: September 18, 2025 (5 days left to apply)job requisition id: R-22461**Sinta a nossa energia**Somos um time de 16 mil colaboradores próprios, espalhados por 18 estados brasileiros e no...

  • Pessoa engenheira de dados azure pleno senior

    4 semanas atrás

    Campinas, São Paulo, Brasil Netvagas Tempo inteiro

    Visão geral Pessoa engenheira de dados azure pleno senior Join to apply for the Pessoa engenheira de dados azure pleno senior role at Netvagas Responsabilidades Liderar e desenvolver times de engenheiros de dados; Planejar, priorizar e supervisionar projetos de dados (como construção de data lakes, pipelines, integrações); Trabalhar junto a cientistas...

  • Pessoa engenheira de dados azure pleno senior

    4 semanas atrás

    Campinas, São Paulo, Brasil Netvagas Tempo inteiro

    Visão geralPessoa engenheira de dados azure pleno seniorJoin to apply for the Pessoa engenheira de dados azure pleno senior role at NetvagasResponsabilidadesLiderar e desenvolver times de engenheiros de dados;Planejar, priorizar e supervisionar projetos de dados (como construção de data lakes, pipelines, integrações);Trabalhar junto a cientistas de...

  • Engenharia de dados databricks pleno

    4 semanas atrás

    Campinas, São Paulo, Brasil Netvagas Tempo inteiro

    Join to apply for the Engenharia de dados databricks pleno role at Netvagas Join to apply for the Engenharia de dados databricks pleno role at Netvagas Desenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade. Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e...

  • Pessoa engenheira de dados azure pleno senior

    3 semanas atrás

    Campinas, São Paulo, Brasil Netvagas Tempo inteiro

    Pessoa engenheira de dados azure pleno senior Buscando projetos internacionais? Então vem com a Mollica IT e encontre a oportunidade certa pra dar match Missão (Resumo): Liderar e desenvolver times de engenheiros de dados; Planejar, priorizar e supervisionar projetos de dados (construção de data lakes, pipelines, integrações); Trabalhar com cientistas...

  • Pessoa engenheira de dados azure pleno senior

    3 semanas atrás

    Campinas, São Paulo, Brasil Netvagas Tempo inteiro

    Pessoa engenheira de dados azure pleno seniorBuscando projetos internacionais? Então vem com a Mollica IT e encontre a oportunidade certa pra dar matchMissão (Resumo):Liderar e desenvolver times de engenheiros de dados;Planejar, priorizar e supervisionar projetos de dados (construção de data lakes, pipelines, integrações);Trabalhar com cientistas de...

  • Engenheiro de Dados

    3 semanas atrás

    Campinas, São Paulo, Brasil LigueLead Tempo inteiro

    Visão geral Estamos em busca de um Engenheiro de Dados para estruturar e manter nossa arquitetura de dados. Este profissional será responsável por projetar e otimizar pipelines de ingestão, transformação e armazenamento de dados, garantindo disponibilidade, escalabilidade e segurança das informações para toda a empresa. Responsabilidades Integrar...

  • Engenheiro de Dados

    3 semanas atrás

    Campinas, São Paulo, Brasil LigueLead Tempo inteiro

    Visão geralEstamos em busca de um Engenheiro de Dados para estruturar e manter nossa arquitetura de dados. Este profissional será responsável por projetar e otimizar pipelines de ingestão, transformação e armazenamento de dados, garantindo disponibilidade, escalabilidade e segurança das informações para toda a empresa.ResponsabilidadesIntegrar dados...

  • Engenheiro de Dados

    4 semanas atrás

    Campinas, São Paulo, Brasil Imerys Tempo inteiro

    Engenheiro de Dados - Oportunidade também para PCDPrincipais Desafios (Responsabilidades):Como engenheiro de dados:Projetar e construir soluções de data lake. Identificar e propor melhorias (escopo de dados na plataforma de dados, simplificação de feeds de dados, enriquecimento da plataforma de dados) da perspectiva do usuário final.Formalizar, avaliar...