[hd] engenheiro de dados pleno

3 meses atrás

PIRACICABA, Brasil iBlue Consulting Tempo inteiro
O que esperamos de você
  • Graduação em Ciência da Computação, Engenharia, Estatística, Matemática, Física ou áreas relacionadas;
  • Experiência comprovada em projetos Big Data, Data Warehouse.
  • Profundo conhecimento em Python, Airflow e Big Data & Data Lake.
  • Experiência em projetar, desenvolver e otimizar pipelines de dados escaláveis e tolerantes a falhas para processar, limpar, transformar e carregar dados de várias fontes para armazenamento e análise.
  • Habilidade para realizar tuning avançado de DAGs do Airflow.
  • Sólidos conhecimentos em construir pipelines de dados, escrever APIs, e realizar processos de data ingestion, cleansing e data preparation.
  • Experiência com GitHub e Docker para construção de repositórios de DataOps.
  • Colaborar efetivamente com equipes multidisciplinares, comunicar resultados complexos de forma clara e eficaz para partes interessadas não técnicas.
Como será o seu dia a dia

Papéis e Responsabilidades:


Arquitetura de Dados:

  • Projetar e implementar arquiteturas Big Data em Nuvem (preferencialmente Azure).
  • Definir estratégias para organização e modelagem dos dados no Data Lake, garantindo sua integridade, segurança e governança.

Desenvolvimento de Pipelines de Dados:

  • Projetar, desenvolver e otimizar pipelines de dados escaláveis e tolerantes a falhas utilizando ferramentas como Apache Spark, Airflow, Azure Data Factory;
  • Realizar processos de ingestão, limpeza, transformação e carga de dados de várias fontes para o Data Lake.

Integração com Machine Learning / Artificial Intelligence:

  • Colaborar com os cientistas de dados na preparação e disponibilização dos dados necessários para construção e treinamento de modelos de ML/AI;
  • Integrar pipelines de dados com ferramentas e serviços de ML/AI .

Configuração e Tuning do Airflow em Kubernetes (Azure ou AWS):

  • Configurar e gerenciar ambientes Airflow em Kubernetes, garantindo alta disponibilidade, escalabilidade e eficiência na execução de DAGs.
  • Realizar tuning avançado de DAGs do Airflow para otimizar o desempenho e a confiabilidade dos pipelines de dados.

Práticas de DevOps e MLOps:

  • Utilizar ferramentas como GitHub e Docker para construir e gerenciar repositórios de DataOps, facilitando o versionamento e a colaboração no desenvolvimento de pipelines de dados;
  • Apoiar os cientistas de dados na implementação de práticas de MLOps para garantir o monitoramento contínuo dos modelos de ML / AI em produção.

Colaboração e Comunicação:

  • Colaborar de forma eficaz com equipes multidisciplinares, incluindo analistas de requisitos, cientistas de dados, desenvolvedores e stakeholders;
  • Comunicar resultados complexos de forma clara e eficaz para partes interessadas não técnicas, demonstrando o valor e o impacto dos insights gerados pela análise de dados.

  • Engenheiro de Dados

    Há 1 mês

    piracicaba, Brasil Empresa de Software Tempo inteiro

    Empresa de Software admite Engenheiro de Dados em Piracicaba. Colaborar com analistas de dados, engenheiros, partes interessadas de negócios, cientistas de dados e outros membros da equipe para entender os requisitos detalhados de dados. Colaborar com analistas de dados e outros membros da equipe do projeto para verificar bugs, planejar correções e...

  • Engenheiro de Dados

    Há 1 mês

    Piracicaba, Brasil Empresa de Software Tempo inteiro

    Empresa de Software admite Engenheiro de Dados em Piracicaba. Colaborar com analistas de dados, engenheiros, partes interessadas de negócios, cientistas de dados e outros membros da equipe para entender os requisitos detalhados de dados. Colaborar com analistas de dados e outros membros da equipe do projeto para verificar bugs, planejar correções e...

  • Engenheiro de Dados

    Há 1 mês

    Piracicaba, Brasil Jobbol Tempo inteiro

    Empresa de Software admite Engenheiro de Dados em Piracicaba para atuar em Tempo integral, A combinar.. Colaborar com analistas de dados, engenheiros, partes interessadas de negócios, cientistas de dados e outros membros da equipe para entender os requisitos detalhados de dados. Colaborar com analistas de dados e outros membros da equipe do projeto para...

  • [hd] engenheiro de dados senior

    3 meses atrás

    PIRACICABA, Brasil iBlue Consulting Tempo inteiro

    O que esperamos de você Graduação em Ciência da Computação, Engenharia, Estatística, Matemática, Física ou áreas relacionadas; Desejável pós-graduação em áreas correlatas; Experiência comprovada em projetos Big Data, Data Warehouse, Ciência de Dados, tendo a compreensão dos conceitos de Data Lake e Lake Warehouse, e experiência em projetar...

  • Engenheiro de Manutenção Pleno: Cultivando Inovação e Valor

    3 semanas atrás

    Piracicaba, São Paulo, Brasil Raízen Tempo inteiro

    A Raízen é a maior referência global em Bioenergia, e agora estamos procurando por um Engenheiro de Manutenção Pleno para fazer parte de nossa equipe em Piracicaba/SP.Descrição do CargoO candidato escolhido irá atuar em uma jornada híbrida no escritório corporativo de Piracicaba/SP (escala 3x2, sendo dois dias em trabalho remoto e três em trabalho...

  • Engenheiro de Software

    Há 5 dias

    Piracicaba, Brasil Empresa de desenvolvimento de software Tempo inteiro

    Empresa de desenvolvimento de software admite Engenheiro de Software em Piracicaba. Compreensão clara da criação e estruturação de casos de teste. Trabalhar em estreita colaboração com outros engenheiros de garantia de qualidade e desenvolvedores de software para discutir o processo de teste adequado. Desenvolvimento de scripts automatizados conforme...

  • Mandrilador CNC Pleno

    2 meses atrás

    Piracicaba, Brasil Fábrica de Máquinas e Equipamentos Tempo inteiro

    Fábrica de Máquinas e Equipamentos admite Mandrilador CNC Pleno em Piracicaba (Unileste). Operar, regular, ajustar, confere e controla máquinas mandrilhadoras. Realizar usinagem de peças não seriadas de médio porte e alta precisão, além da leitura e interpretação de desenho e dados de corte para diversos materiais e instrumentos de medição.

  • Mandrilador CNC Pleno

    2 meses atrás

    piracicaba, Brasil Fábrica de Máquinas e Equipamentos Tempo inteiro

    Fábrica de Máquinas e Equipamentos admite Mandrilador CNC Pleno em Piracicaba (Unileste). Operar, regular, ajustar, confere e controla máquinas mandrilhadoras. Realizar usinagem de peças não seriadas de médio porte e alta precisão, além da leitura e interpretação de desenho e dados de corte para diversos materiais e instrumentos de medição.

  • Engenheiro de Serviços

    2 meses atrás

    piracicaba, Brasil Fábrica de Semicondutores de Energia Renovável Tempo inteiro

    Fábrica de Semicondutores de Energia Renovável admite Engenheiro de Serviços em Piracicaba.

  • Engenheiro de Serviços

    3 semanas atrás

    Piracicaba, Brasil Fábrica de Semicondutores de Energia Renovável Tempo inteiro

    Fábrica de Semicondutores de Energia Renovável admite Engenheiro de Serviços em Piracicaba. Gerenciar e treinar os prestadores de serviços locais (instaladores) e clientes para evitar falhas futuras de inversores devido a erros de instalação.Manter comunicação frequente com a equipe de gestão.

  • Engenheiro de Serviços

    3 semanas atrás

    piracicaba, Brasil Fábrica de Semicondutores de Energia Renovável Tempo inteiro

    Fábrica de Semicondutores de Energia Renovável admite Engenheiro de Serviços em Piracicaba. Gerenciar e treinar os prestadores de serviços locais (instaladores) e clientes para evitar falhas futuras de inversores devido a erros de instalação. Manter comunicação frequente com a equipe de gestão.

  • Mecânico de CNC Pleno

    Há 1 mês

    Piracicaba, São Paulo, Brasil Jobbol Tempo inteiro

    Descrição do Cargo: Mandrilador CNC PlenoO cargo de Mandrilador CNC Pleno é responsável por operar, regular, ajustar, conferir e controlar máquinas mandrilhadoras. Além disso, é necessário realizar usinagem de peças não seriadas de médio porte e alta precisão, além da leitura e interpretação de desenho e dados de corte para diversos materiais...

  • Engenheiro Civil

    3 semanas atrás

    piracicaba, Brasil Fabricação de veículos automotores, reboques e carrocerias Tempo inteiro

    Fabricação de veículos automotores, reboques e carrocerias admite Engenheiro Civil em Piracicaba.

  • Engenheiro Eletricista

    4 semanas atrás

    piracicaba, Brasil Fabricação de veículos automotores, reboques e carrocerias Tempo inteiro

    Fabricação de veículos automotores, reboques e carrocerias admite Engenheiro Eletricista em Piracicaba.

  • Mandrilador CNC Pleno

    2 meses atrás

    Piracicaba, Brasil Jobbol Tempo inteiro

    Fábrica de Máquinas e Equipamentos admite Mandrilador CNC Pleno em Piracicaba Unileste para atuar em Tempo integral, A combinar.. Operar, regular, ajustar, confere e controla máquinas mandrilhadoras. Realizar usinagem de peças não seriadas de médio porte e alta precisão, além da leitura e interpretação de desenho e dados de corte para diversos...

  • Empresa de desenvolvimento de software | Engenheiro de Software | piracicaba

    Há 5 dias

    piracicaba, Brasil Empresa de desenvolvimento de software Tempo inteiro

    Empresa de desenvolvimento de software admite Engenheiro de Software em Piracicaba.

  • Engenheiro Eletricista

    4 semanas atrás

    Piracicaba, Brasil Fabricação de veículos automotores, reboques e carrocerias Tempo inteiro

    Fabricação de veículos automotores, reboques e carrocerias admite Engenheiro Eletricista em Piracicaba.Reportar o andamento da obra.Acompanhar o cronograma e os prazos estabelecidos.Realizar cálculos de circuitos elétricos.Garantir o cumprimento das normativas elétricas brasileiras.Acompanhar a construção elétrica da obra e a montagem das...

  • Engenheiro de Instalação

    Há 3 dias

    Piracicaba, São Paulo, Brasil Basic Telecom Instalações De Equipamentos Eletrônicos Ltda Tempo inteiro

    Descrição do CargoO Engenheiro de Instalação da Basic Telecom será responsável por realizar a instalação, manutenção e suporte de equipamentos e sistemas relacionados a dados e utilidades em nossas redes e serviços.SalárioO salário oferecido é de R$ 1.412,00 a R$ 1.727,94 por mês, dependendo da experiência do...

  • Engenheiro Eletricista

    4 semanas atrás

    Piracicaba, Brasil Fabricação de veículos automotores, reboques e carrocerias Tempo inteiro

    Fabricação de veículos automotores, reboques e carrocerias admite Engenheiro Eletricista em Piracicaba. Reportar o andamento da obra.Acompanhar o cronograma e os prazos estabelecidos.Realizar cálculos de circuitos elétricos.Garantir o cumprimento das normativas elétricas brasileiras.Acompanhar a construção elétrica da obra e a montagem das...

  • Engenheiro Eletricista

    4 semanas atrás

    piracicaba, Brasil Fabricação de veículos automotores, reboques e carrocerias Tempo inteiro

    Fabricação de veículos automotores, reboques e carrocerias admite Engenheiro Eletricista em Piracicaba. Reportar o andamento da obra. Acompanhar o cronograma e os prazos estabelecidos. Realizar cálculos de circuitos elétricos. Garantir o cumprimento das normativas elétricas brasileiras. Acompanhar a construção elétrica da obra e a montagem das...