Senior data engineer

4 semanas atrás

HOME OFFICE, Brasil Cadastra Tempo inteiro

O que a Cadastra espera de você:

  • Sólida experiência comprovada como Engenheiro(a) de Dados, com foco profundo no ecossistema Google Cloud Platform.
  • Domínio de Python e SQL aplicados ao desenvolvimento de soluções de engenharia de dados em larga escala.
  • Experiência prática com as principais ferramentas do GCP: BigQuery (modelagem, otimização de queries, particionamento), Dataflow e/ou Dataproc (Spark), Cloud Composer (Airflow) e Cloud Storage.
  • Experiência com automação e práticas de CI/CD (ex: GitHub Actions, Cloud Build) e Infraestrutura como Código (IaC), preferencialmente com Terraform.
  • Vivência com extração de dados via APIs e modelagem de processos ETL/ELT (sanitização, unificação, agregação de dados).

Diferenciais:

  • Certificação Google Cloud Professional Data Engineer.
  • Experiência com ingestão e modelagem de dados de sistemas SAP (ECC, SF) e/ou em domínios de negócio de RH.
  • Experiência com tecnologias de containerização (Docker, Kubernetes/GKE) no contexto de aplicações de dados.
  • Conhecimento em implementação de ingestão de dados via streaming com Pub/Sub.
  • Experiência com metodologias ágeis de desenvolvimento.

No nosso Data Hub você terá o desafio de:

  • Projetar, desenvolver e gerenciar pipelines de dados (ETL/ELT) robustos e escaláveis, utilizando Dataflow, Dataproc (Spark) e/ou Cloud Data Fusion.
  • Modelar, construir e otimizar nosso Data Warehouse e Data Lake no Google BigQuery e Google Cloud Storage, aplicando as melhores práticas de performance e custo.
  • Orquestrar fluxos de trabalho de dados complexos utilizando o Cloud Composer (Apache Airflow gerenciado).
  • Implementar a ingestão de dados em tempo real (streaming) com Pub/Sub e Dataflow.
  • Implementar e zelar pela governança, segurança e qualidade dos dados na plataforma GCP, utilizando ferramentas como Dataplex, Data Catalog e Secret Manager.
  • Automatizar o provisionamento e o gerenciamento da infraestrutura de dados (IaC), preferencialmente com Terraform.
  • Monitorar a performance e os custos dos serviços de dados em GCP, propondo e implementando otimizações contínuas.
  • Atuar como referência técnica para o time e para o cliente, colaborando com equipes de Analytics e Ciência de Dados para otimizar o consumo dos dados.

  • Data engineer

    4 semanas atrás

    HOME OFFICE, Brasil Pantheon Tempo inteiro

    Buscamos um(a) profissional experiente e apaixonado(a por dados para atuar como Engenheiro(a) de Análise Sênior / Engenheiro(a) de Dados. O candidato ideal terá a oportunidade de trabalhar com estruturas de dados complexas em um ambiente corporativo dinâmico, transformando dados em insights valiosos. Principais Responsabilidades:Projetar, implementar e...

  • Data engineer specialist

    4 semanas atrás

    HOME OFFICE, Brasil Cortex Tempo inteiro

    #Conhecimentos importantes para a posição: Formação em Ciência da Computação, Engenharia de Dados, Sistemas de Informação ou áreas correlatas. Experiência comprovada e sólida como Data Engineer Sênior ou Especialista, atuando no design e implementação de soluções de dados em larga escala. Expertise avançada em Apache Spark, com profunda...

  • Data engineer

    4 semanas atrás

    HOME OFFICE, Brasil ioasys Tempo inteiro

    Familiarity with agile methodologies; Experience in Databricks, SQL, Python, ETL/ELT, Data Modeling, Data Lake, Data Warehouse and data visualization tools; Knowledge on AWS Cloud Watch, KMS, Glue, lambda, S3, redshift, snowflake, jenkins, gitlab, denodo, kubernetes; High learning ability. Preferred Qualifications: Experience in the international...

  • Senior data engineer

    4 semanas atrás

    HOME OFFICE, Brasil Memed ativo Tempo inteiro

    Formação superior completa em Ciência da Computação, Engenharia, Sistemas de Informação, Estatística ou áreas correlatas. Vivência com arquiteturas modernas de dados, como data lakes, streaming de dados e cloud computing (preferencialmente Azure). Experiência com desenvolvimento, manutenção e versionamento de pipelines de dados (ETL/ELT),...

  • Data engineer

    4 semanas atrás

    HOME OFFICE, Brasil Pantheon Tempo inteiro

    Engenheiro(a) de Dados SêniorBuscamos um(a) Engenheiro(a) de Dados experiente e inovador(a) para colaborar com nossa equipe na construção e otimização de infraestruturas de dados robustas e escaláveis. Se você é apaixonado(a) por dados, segurança e performance, e gosta de desafios em um ambiente dinâmico, essa vaga é para você Principais...

  • Data engineer pleno

    4 semanas atrás

    HOME OFFICE, Brasil Cortex Tempo inteiro

    #Conhecimentos importantes para a posição: Formação em Ciência da Computação, Engenharia de Dados, Sistemas de Informação ou áreas relacionadas. Experiência comprovada como Data Engineer ou em funções similares. Experiência com ferramentas de orquestração de workflows, como Apache Airflow. Conhecimento em linguagens de programação como...

  • Data engineer sênior

    4 semanas atrás

    HOME OFFICE, Brasil benup Tempo inteiro

    Propósito  Garantir que os dados fluam com qualidade, segurança e eficiência entre os sistemas da Benup, habilitando produtos, análises e modelos com bases sólidas e confiáveis.  Domínio  Infraestrutura de dados, pipelines de ingestão, transformação, armazenamento e integração entre sistemas.  Responsbilidades  Construir e manter pipelines...

  • Pessoa cloud engineer sênior

    4 semanas atrás

    HOME OFFICE, Brasil Deal Tempo inteiro

    Sobre a Vaga Buscamos alguém que queira cocriar soluções e construir o futuro com a gente como Pessoa Cloud Engineer Sênior Requisitos: Experiência de 5 anos com implementação de arquitetura de infraestrutura na AWS e Azure no que tange compute, networking, storage e orquestradores de containers (EKS, ECS, AKS e etc).Experiência em processos de...

  • Data visualization

    4 semanas atrás

    HOME OFFICE, Brasil Pantheon Tempo inteiro

    We are seeking a talented and communicative Mid-Level Data Visualization Analyst to transform complex data into clear, compelling visuals. This role requires strong data storytelling abilities, advanced conversational English for effective communication with international teams, and hands-on experience with Snowflake and Databricks. Responsibilities: Design...

  • Data engineer sr

    4 semanas atrás

    HOME OFFICE, Brasil Pantheon Tempo inteiro

    Descrição do cargo de engenheiro de dados da PolarisO engenheiro de dados da Polaris estará na vanguarda do projeto e da construção de soluções analíticas modernas dentro do ecossistema Polaris Data & Analytics.ResponsabilidadesEngenharia de DadosColaborar com os Arquitetos de Soluções para entender o design dos Produtos de Dados para permitir uma...