Engenheiro de dados Pleno

Há 2 dias

Campinas, São Paulo, Brasil Atlanteam Soluções em TI Tempo inteiro R$80.000 - R$120.000 por ano

Sobre a posição

Procuramos um Engenheiro de Dados Pleno para atuar no desenvolvimento, manutenção e evolução de soluções de engenharia de dados, com foco em web scraping, integrações, processos ETL/ELT, e implementação em ambientes de nuvem (Azure Databricks e GCP).

Esse profissional será responsável por construir pipelines eficientes, aplicar arquitetura Medallion (Bronze, Silver, Gold), manter e evoluir código em Python, além de integrar dados de múltiplas fontes em bancos relacionais e não relacionais e paginas WEB e sistemas WEB.

Desenvolver coleta de dados em paginas WEB e demais fontes, criar rotinas de web scraping e integração com APIs externas para captura de dados (obrigatório).

Esta vaga é Pessoa Juridica.

Responsabilidades:

  • Realizar manutenção, evolução e otimização de código em Python.

  • Desenvolver e manter rotinas ETL/ELT de ingestão, transformação e carga de dados em Azure Databricks (Delta Lake, PySpark, ADF) e Google Cloud (BigQuery, Dataflow, Pub/Sub).

  • Criar e manter rotinas de web scraping e Criar e manter integração com APIs externas.

  • Modelar e administrar bancos de dados SQL e NoSQL (PostgreSQL, SQL Server, MongoDB, etc.).

  • Aplicar arquitetura Medallion (Bronze, Silver, Gold) para governança, qualidade e rastreabilidade dos dados.

  • Construir interfaces e conectores entre diferentes sistemas internos e externos, inclusive sites.

  • Trabalhar em conjunto com equipes de Analytics e Data Science, garantindo dados confiáveis para dashboards, relatórios e modelos de IA.

  • Documentar pipelines, processos e boas práticas.

Requisitos

  • Experiência sólida em Python (manutenção de código e novas implementações).

  • Experiência em ETL/ELT em Azure Databricks (PySpark, Delta Lake) e Google Cloud (BigQuery, Dataflow, Pub/Sub).

  • Conhecimentos avançados em SQL e modelagem de dados.

  • Experiência em arquitetura Medallion e boas práticas de governança de dados.

  • Experiência com APIs REST/GraphQL e integrações.

  • Git e metodologias ágeis.

Desejável

  • Experiência em Azure Data Factory e orquestração de pipelines (Airflow, Prefect, Dagster).

  • Conhecimento de Databricks minimo 1/2 anos (Obrigatório).

  • Conhecimentos em Docker/Kubernetes para empacotamento e escalabilidade.

  • Experiência em Power BI ou outra ferramenta de visualização.

  • Conhecimentos em segurança, privacidade e compliance em ambientes de dados.

Benefícios

  • Vaga PJ com ferias remuneradas.

  • Engenheiros(as) de Dados

    1 semana atrás

    Campinas, São Paulo, Brasil Digiage Tempo inteiro R$80.000 - R$120.000 por ano

    Buscamos Engenheiros(as) de Dados - Azure RequisitosFormação superior completa em áreas relacionadas à Tecnologia da Informação, Engenharia de Computação, Ciência de Dados ou correlatasExperiência comprovada em tecnologias de processamento de dados em larga escala e ferramentas ETL/ELT.Conhecimento sólido nas principais plataformas de Data &...

  • Engenheiro de Dados

    Há 5 dias

    Campinas, São Paulo, Brasil LigueLead Tempo inteiro

    Estamos em busca de um Engenheiro de Dados para estruturar e manter nossa arquitetura de dados. Este profissional será responsável por projetar e otimizar pipelines de ingestão, transformação e armazenamento de dados, garantindo disponibilidade, escalabilidade e segurança das informações para toda a empresa.Responsabilidades:Projetar, desenvolver e...

  • Engenheiro de Dados

    Há 6 dias

    Campinas, São Paulo, Brasil LigueLead Tempo inteiro R$80.000 - R$120.000 por ano

    DescriçãoDescrição da posiçãoEstamos em busca de um Engenheiro de Dados para estruturar e manter nossa arquitetura de dados. Este profissional será responsável por projetar e otimizar pipelines de ingestão, transformação e armazenamento de dados, garantindo disponibilidade, escalabilidade e segurança das informações para toda a...

  • Engenheiro de Dados

    Há 6 horas

    Campinas, São Paulo, Brasil Teclógica Tempo inteiro R$80.000 - R$120.000 por ano

    Junte-se ao nosso time como ENGENHEIRO DE DADOSSe você tem experiência com pipelines de dados, modelagem e ferramentas de Big Data, essa é a oportunidade de contribuir com soluções inteligentes e escaláveisAtuação presencial no cliente em Campinas-SP.Responsabilidades:Projetar, desenvolver e manter pipelines de ingestão, transformação e...

  • Engenheiro de Dados

    1 hora atrás

    Campinas, São Paulo, Brasil TECLÓGICA Tempo inteiro R$90.000 - R$120.000 por ano

    Junte-se ao nosso time como ENGENHEIRO DE DADOSSe você tem experiência com pipelines de dados, modelagem e ferramentas de Big Data, essa é a oportunidade de contribuir com soluções inteligentes e escaláveisAtuação presencial no cliente em Campinas-SP.Responsabilidades:Projetar, desenvolver e manter pipelines de ingestão, transformação e...

  • Engenheiro de Dados Pleno

    Há 7 horas

    Campinas, São Paulo, Brasil Pasquali Solution Tempo inteiro R$90.000 - R$120.000 por ano

    Requisitos ObrigatóriosExperiência comprovada em migração de dados, com habilidades para desenvolver queries em SQL para grandes volumes de dados. Conhecimento avançado em Python, com foco na criação e ajuste de scripts para ingestão de dadosCapacidade de validar e garantir a integridade dos dados junto aos usuários-chave, além de experiência em...

  • engenheiro de dados pleno

    1 semana atrás

    Campinas, São Paulo, Brasil REVISE COMERCIO LTDA Tempo inteiro R$90.000 - R$120.000 por ano

    Sobre nós - Grupo ReviseO Grupo Revise, atua há mais de 28 anos no setor automotivo brasileiro, destaca-se pela qualidade certificada e pelo pioneirismo. Como uma empresa 100% brasileira, possui 3 marcas, sendo: (Brazzo, Mobato e Varimax), com 6 centros de distribuição estratégicos em todo o país e um amplo portfólio que inclui milhares de itens de...

  • engenheiro de dados pleno

    1 semana atrás

    Campinas, São Paulo, Brasil Revise Group Tempo inteiro R$60.000 - R$120.000 por ano

    Sobre nós - Grupo ReviseO Grupo Revise, atua há mais de 28 anos no setor automotivo brasileiro, destaca-se pela qualidade certificada e pelo pioneirismo. Como uma empresa 100% brasileira, possui 3 marcas, sendo: (Brazzo, Mobato e Varimax), com 6 centros de distribuição estratégicos em todo o país e um amplo portfólio que inclui milhares de itens de...

  • Engenheiro (a) de Dados Pleno

    Há 5 dias

    Campinas, São Paulo, Brasil Neoenergia Tempo inteiro R$90.000 - R$120.000 por ano

    Sinta a nossa energiaSomos um time de 16 mil colaboradores próprios, espalhados por 18 estados brasileiros e no Distrito Federal. Aqui, os sotaques se misturam, integração, colaboração e segurança são elementos fundamentais em nosso dia a dia. Atuamos em toda a cadeia do setor elétrico brasileiro, Geração, Transmissão, Distribuição e...

  • Engenheiro (a) de Dados Sr

    Há 6 dias

    Campinas, São Paulo, Brasil Neoenergia Tempo inteiro R$900.000 - R$1.200.000 por ano

    Sinta a nossa energiaSomos um time de 16 mil colaboradores próprios, espalhados por 18 estados brasileiros e no Distrito Federal. Aqui, os sotaques se misturam, integração, colaboração e segurança são elementos fundamentais em nosso dia a dia. Atuamos em toda a cadeia do setor elétrico brasileiro, Geração, Transmissão, Distribuição e...