Engenheiro de dados

3 semanas atrás

Curitiba, Paraná, Brasil market4u Tempo inteiro
Principais Responsabilidades

Desenvolvimento de Pipelines ETL/ELT

  • Projetar, implementar e operacionalizar fluxos de ingestão e transformação automatizados (Dataflow, Airflow/Composer, dbt);
  • Integrar diferentes fontes de dados como bancos operacionais (Aurora, RDS), APIs (Google Analytics, Meta) e sistemas legados (SAP, Pipefy, aplicação própria).

Modelagem e Armazenamento

  • Definir e manter modelos lógicos e físicos em Data Warehouse / Lakehouse (BigQuery Bronze/Silver/Gold);
  • Otimizar particionamento, clustering e schema para performance de consultas.

Qualidade, Governança e Segurança

  • Implementar testes de consistência, alertas e rotinas de reconciliação de dados;
  • Colaborar com o time de Governança para catalogação (Data Catalog/DataPlex) e definição de políticas de acesso (IAM, VPC/VPN).

Monitoramento e Performance

  • Criar dashboards para acompanhar SLAs, latência e custos de processamento;
  • Propor melhorias em queries BigQuery e otimização de custos de Storage.

Colaboração Multidisciplinar

  • Trabalhar junto a analistas de BI e cientistas de dados para definição de requisitos e validação de entregáveis;
  • Revisar código e compartilhar boas práticas com o time.
Requisitos Técnicos
  • Formação: Graduação em Ciência da Computação, Engenharia de Dados, Sistemas de Informação ou áreas correlatas;
  • Experiência: 35 anos em engenharia de dados, preferencialmente em ambientes GCP;
  • Linguagens e Ferramentas:
  • SQL avançado e modelagem dimensional;
  • Python (Pandas, Apache Beam, dbt);
  • GCP (BigQuery, Cloud Storage, Datastream/Dataflow, Composer/Airflow);
  • Git, Terraform, Deployment Manager;
  • Conceitos: Lakehouse, Lambda/Kappa, microserviços de dados, contêineres (Docker, Kubernetes).
Características Comportamentais
  • Comunicação clara, traduzindo termos técnicos para linguagem de negócio;
  • Autonomia e responsabilidade para entregas end-to-end;
  • Colaboração e mentoria para o time;
  • Proatividade para identificar e solucionar gargalos;
  • Organização para gerenciar múltiplas demandas e prioridades.

Descrição:

Como Engenheiro de Dados Pleno, você atuará no coração da nossa plataforma de dados, desenvolvendo e mantendo pipelines confiáveis, garantindo a qualidade das informações e colaborando diretamente com os times de IA, Analytics e Data Science para viabilizar insights críticos ao negócio. Terá autonomia para conduzir projetos de complexidade média e será referência técnica em integração e transformação de dados.

  • Engenheiro De Dados

    2 semanas atrás

    Curitiba, Paraná, Brasil Ewave do Brasil Tempo inteiro

    Você fará parte de um dos capítulos de Engenheiros de Dados em Curitiba-PR, Brasil, integrante da comunidade global de Engenheiros de Dados da função Digital & IT Data. Além disso, atuará no desenvolvimento de soluções de dados em um time dentro da área de Analytics & BI – Produto de Dados. Requisitos obrigatórios:Formação acadêmica em uma...

  • Engenheiro de Dados

    2 semanas atrás

    Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiro

    RequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....

  • Engenheiro de Dados

    3 semanas atrás

    Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiro

    RequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....

  • Engenheiro de Dados

    2 semanas atrás

    Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiro

    RequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....

  • Engenheiro de Dados

    3 semanas atrás

    Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiro

    RequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....

  • Engenheiro de Dados

    3 semanas atrás

    Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiro

    RequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....

  • Engenheiro de Dados

    Há 2 dias

    Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiro

    RequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....

  • Engenheiro De Dados

    2 semanas atrás

    Curitiba, Paraná, Brasil Ewave do Brasil Tempo inteiro

    Você fará parte de um dos capítulos de Engenheiros de Dados em Curitiba-PR, Brasil, integrante da comunidade global de Engenheiros de Dados da função Digital & IT Data. Além disso, atuará no desenvolvimento de soluções de dados em um time dentro da área de Analytics & BI – Produto de Dados.Requisitos obrigatórios:- Formação acadêmica em uma...

  • Engenheiro de dados

    2 semanas atrás

    Curitiba, Paraná, Brasil Ewave do Brasil Tempo inteiro

    Você fará parte de um dos capítulos de Engenheiros de Dados em Curitiba-PR, Brasil, integrante da comunidade global de Engenheiros de Dados da função Digital & IT Data. Além disso, atuará no desenvolvimento de soluções de dados em um time dentro da área de Analytics & BI – Produto de Dados. Requisitos obrigatórios: Formação acadêmica em...

  • Engenheiro de dados

    Há 2 dias

    Curitiba, Paraná, Brasil Ewave do Brasil Tempo inteiro

    Você fará parte de um dos capítulos de Engenheiros de Dados em Curitiba-PR, Brasil, integrante da comunidade global de Engenheiros de Dados da função Digital & IT Data. Além disso, atuará no desenvolvimento de soluções de dados em um time dentro da área de Analytics & BI – Produto de Dados. Requisitos obrigatórios: Formação acadêmica em...