Big Data Engineer Pleno

Há 3 dias

São Paulo, São Paulo, Brasil Semantix Tempo inteiro R$900.000 - R$1.200.000 por ano

Impactar positivamente bilhões de vidas é nosso propósito e também pode ser o seu

Fundada em 2010, no Brasil, a Semantix é referência em Big Data, Analytics e Inteligência Artificial.

Somos um time de apaixonados por inovação, com diversas origens e diferentes graus de experiência. O que nos une, é a motivação compartilhada de transformar a experiência de nossos clientes através da cultura data driven.

Se você se identificou, a Semantix é seu lugar.

Estamos ansiosos para ter você como parte do time.

Afinal, o futuro se faz juntos.

Requisitos:

Estamos em busca de um(a) Engenheiro(a) de Dados para atuar na gestão, sustentação e manutenção de pipelines de dados em ambiente de Big Data.

O(a) profissional terá papel essencial em garantir a integridade, disponibilidade e performance dos fluxos de dados, atuando tanto em processos automatizados quanto em etapas que ainda demandam intervenção manual. É uma posição estratégica para assegurar que nossa esteira de dados funcione com confiabilidade em um ambiente dinâmico e em constante evolução.

Responsabilidades

Monitorar e dar suporte a pipelines de dados (ETL) em ambiente de Big Data, garantindo sua integridade e disponibilidade.

Acompanhar diariamente a esteira de dados automatizada, validando conclusões e corrigindo falhas quando necessário.

Realizar tuning e otimização de queries SQL complexas, garantindo performance.

Sustentar processos implementados em Apache NiFi, Hue e Hive, solucionando incidentes e apoiando integrações.

Administrar integrações com brokers (ex.: Infobip), realizando tratamentos manuais de registros e backups quando necessário.

Processar arquivos de retorno de cargas e garantir o correto tratamento dos dados.

Prestar suporte técnico em reuniões e atendimentos com clientes e parceiros.

Manter documentação técnica atualizada, propondo melhorias contínuas e automações para evolução do ambiente.

Requisitos obrigatórios

Domínio de SQL e boas práticas de performance/tuning.

Experiência com ferramentas de ETL/ELT em Big Data (NiFi, Hive, Hue, Airflow).

Vivência em ambientes Cloudera.

Conhecimento em Python e PySpark.

Experiência em sustentação de ambientes e troubleshooting de pipelines.

Diferenciais desejáveis

Vivência em ambientes cloud (AWS, Azure ou GCP).

Conhecimento em Scala.

Experiência em projetos de automação de processos manuais.

O que oferecemos:

Ambiente dinâmico e inovador, com oportunidade de atuar em projetos complexos de Big Data.

Cultura de aprendizado contínuo e colaboração com equipes de engenharia e analytics.

Espaço para propor e implementar melhorias, sendo protagonista na evolução do ambiente de dados.

Benefícios

Salário compatível com o mercado;

Caju (cartão flexível) com a recarga de R$ 1.060/mês;

Plano de Saúde Bradesco;

Plano Odontológico Bradesco;

  • Medicina preventiva com Dr. Alper;

Seguro de Vida;

  • Gympass;

SESC;

Auxílio Creche para mamães e papais;

PLR;

Learning – área focada no desenvolvimento de hard e soft skills;

Parceria com instituições de ensino para formação técnica, MBA, pós-graduação, certificações, inglês e espanhol;

Plano de Carreira;

Desconto em produtos de um portal parceiro.

Ressaltamos que todas as nossas vagas estão abertas a pessoas de todos os perfis e origens, valorizando a diversidade e promovendo um ambiente inclusivo e acolhedor para todos.

  • Big Data Engineer Pleno

    2 semanas atrás

    São Paulo, São Paulo, Brasil Semantix Tempo inteiro

    Impactar positivamente bilhões de vidas é nosso propósito e também pode ser o seu Fundada em 2010, no Brasil, a Semantix é referência em Big Data, Analytics e Inteligência Artificial.Somos um time de apaixonados por inovação, com diversas origens e diferentes graus de experiência. O que nos une, é a motivação compartilhada de transformar a...

  • Big Data Engineer

    2 semanas atrás

    São Paulo, São Paulo, Brasil beBeeDataEngineer Tempo inteiro R$55.000 - R$85.000

    Job OpportunityAs a data engineer, you will play a crucial role in building innovative big data technologies and platforms to drive business impact. We are seeking a talented individual who can collaborate with partners and stakeholders to understand customer needs and develop effective solutions.The data team is responsible for designing, testing, coding,...

  • Pleno Data Engineer

    Há 7 dias

    São Paulo, São Paulo, Brasil Semantix Tempo inteiro

    Pleno Data Engineer - Expertise em DM/DMPS (FICO) - Banco de oportunidades Pleno Data Engineer - Expertise em DM/DMPS (FICO) - Banco de oportunidades Impactar positivamente bilhões de vidas é nosso propósito e também pode ser o seu Fundada em 2010, no Brasil, a Semantix é referência em Big Data, Analytics e Inteligência Artificial.Somos um time de...

  • Big Data Engineer

    4 semanas atrás

    São Paulo, São Paulo, Brasil Volare Serviços Médicos e Consultoria Tempo inteiro

    Big Data Engineer Our Client is a US technology company l ooking for a highly motivated Data Engineer with a passion for data, to build and implement data pipelines in cloud technologies, including SnapLogic and AWS. Responsibilities: Develops and maintains scalable data pipelines in SnapLogic and builds out new ETL and API integrations to support continuing...

  • Big Data Engineer

    3 semanas atrás

    São Paulo, São Paulo, Brasil Volare Serviços Médicos e Consultoria Tempo inteiro

    Big Data Engineer Our Client is a US technology company l ooking for a highly motivated Data Engineer with a passion for data, to build and implement data pipelines in cloud technologies, including SnapLogic and AWS. Responsibilities: Develops and maintains scalable data pipelines in SnapLogic and builds out new ETL and API integrations to support continuing...

  • Big Data Engineer

    2 semanas atrás

    São Paulo, São Paulo, Brasil Volare Serviços Médicos e Consultoria Tempo inteiro

    Big Data Engineer Our Client is a US technology company l ooking for a highly motivated Data Engineer with a passion for data, to build and implement data pipelines in cloud technologies, including SnapLogic and AWS. Responsibilities: Develops and maintains scalable data pipelines in SnapLogic and builds out new ETL and API integrations to support continuing...

  • Pleno Data Engineer

    Há 4 dias

    São Paulo, São Paulo, Brasil Semantix Tempo inteiro

    Pleno Data Engineer - Expertise em DM/DMPS (FICO) - Banco de oportunidadesPleno Data Engineer - Expertise em DM/DMPS (FICO) - Banco de oportunidadesImpactar positivamente bilhões de vidas é nosso propósito e também pode ser o seu Fundada em 2010, no Brasil, a Semantix é referência em Big Data, Analytics e Inteligência Artificial.Somos um time de...

  • Data Engineer

    4 semanas atrás

    São Paulo, São Paulo, Brasil E-IT Tempo inteiro

    Role : Data EngineerTotal Experience : Max 8-10 YrsLocation: Make it hybrid 3days/week from Brazil office located at Rua Doutor Geraldo Campos Moreira, 164 – Cidade Monções – São Paulo – SPRole Purpose Work with data engineering using relational databases, NoSQL and Big Data formats, using Spark for data extraction, integration and transformation,

  • Data Engineer Pleno

    Há 7 dias

    São Paulo, São Paulo, Brasil Sauter Tempo inteiro

    Estamos em busca de Data Engineers Plenos para se juntarem à nossa equipe de dados.Se você é apaixonado por construir pipelines de dados robustos, escaláveis e eficientes, e tem uma expertise sólida com o ecossistema do Google Cloud Platform (GCP), essa vaga é para você????Responsabilidades:Projetar, construir e manter pipelines de dados ETL/ELT para...

  • Data Engineer Pleno

    Há 6 dias

    São Paulo, São Paulo, Brasil SAUTER Tempo inteiro

    Estamos em busca de Data Engineers Plenos para se juntarem à nossa equipe de dados. Se você é apaixonado por construir pipelines de dados robustos, escaláveis e eficientes, e tem uma expertise sólida com o ecossistema do Google Cloud Platform (GCP), essa vaga é para vocêResponsabilidadesProjetar, construir e manter pipelines de dados ETL/ELT para...