Engenheiro de dados pl

Há 2 dias

HOME OFFICE, Brasil Stefanini Group Tempo inteiro

Requisitos essenciais: Experiência relevante com Python e SQL. Sólidos conhecimentos em serviços AWS, incluindo: Amazon S3 para armazenamento de dados. Amazon Athena para consultas serverless. Experiência com Trino (anteriormente PrestoSQL) para queries distribuídas. Domínio do Databricks e Delta Lake para processamento de dados. Experiência com PySpark para processamento de dados em larga escala. Conhecimento em modelagem de dados e data warehousing. Experiência com particionamento e otimização de performance em data lakes. Domínio de versionamento Git e metodologias ágeis usando Azure DevOps. Experiência com formatos de dados modernos (Parquet, Delta, Iceberg). Diferenciais: Certificações AWS (Data Analytics, Solutions Architect ou Data Engineer). Experiência com Apache Airflow para orquestração. Experiência com streaming de dados (Kinesis, Kafka). Conhecimento em dbt (Data Build Tool) para transformações. Experiência com Great Expectations para qualidade de dados. Familiaridade com ferramentas de CDC (Change Data Capture). Conhecimento em observabilidade e monitoramento (Elastic Search com Kibana). Experiência com APIs RESTful. Conhecimento em containerização (Docker, Kubernetes). Experiência com Terraform ou CloudFormation para IaC. O que esperamos que você realize: Projetar e construir pipelines de dados eficientes utilizando AWS Athena, PySpark e Databricks. Implementar e gerenciar data lakes no Amazon S3 com estruturas otimizadas Desenvolver queries e análises complexas com Amazon Athena, Trino e Databricks. Implementar processos de ETL/ELT para integração de múltiplas fontes de dados. Otimizar a performance de queries e o processamento de dados em larga escala. Participar de code reviews e fornecer mentoria técnica à equipe. Colaborar com stakeholders de negócios para traduzir requisitos em soluções técnicas. Implementar rotinas de monitoramento e observabilidade dos pipelines de dados Agendar a execução de rotinas de ETL usando Apache Airflow.

  • Engenheiro de dados pl

    Há 6 horas

    HOME OFFICE, Brasil Magazine Luiza Tempo inteiro

    Sobre nósSomos parte de um dos pilares estratégicos do Magalu e desenvolvemos internamente as tecnologias de meios de pagamento do nosso ecossistema. Nós últimos anos, crescemos exponencialmente e nos tornamos uma das maiores empresas do setor. Oferecemos soluções como: Contas digitais; Gestão de recebíveis; Split de pagamentos; Saques e...

  • Engenheiro/a de dados

    Há 6 horas

    HOME OFFICE, Brasil Bridge & Co. Tempo inteiro

    Que tal fazer parte do nosso time como Engenheiro(a) de Dados? Sua missão será estruturar soluções de dados robustas e escaláveis, com base técnica sólida e pensamento conceitual. Você será responsável por desenhar, documentar e evoluir arquiteturas de dados corporativas, definindo padrões e boas práticas para ingestão, modelagem e governança....

  • Engenheiro(a) de dados pl | azure

    2 semanas atrás

    HOME OFFICE, Brasil Objective Tempo inteiro

    Somos ávidos por tecnologia, criatividade e desafios. Se você gosta de desafios, aprendizado constante e valoriza as conexões pessoais, junte-se a nós! # Valorizamos a diversidade e acreditamos que ela é fundamental para a inovação e entregas de valor aos nossos clientes. Todas as nossas vagas são destinadas a todas as pessoas, com ou sem...

  • Engenheiro de dados sênior

    Há 2 dias

    HOME OFFICE, Brasil Clavis Tempo inteiro

    Nome da vaga Engenheiro de Dados Responsabilidades: Definir e projetar a arquitetura de dados para projetos complexos e de grande escala, garantindo escalabilidade, performance e segurança. Liderar o desenvolvimento e a otimização de pipelines de dados robustos e eficientes utilizando Python para processamento massivo e em tempo real. Ser o especialista...

  • Engenheiro de dados sênior

    3 semanas atrás

    HOME OFFICE, Brasil Aliare Tempo inteiro

    5+ anos de experiência em engenharia de dados; Expertise em arquiteturas distribuídas e microserviços; Domínio avançado de ferramentas big data (Spark, Kafka, etc.); Experiência em liderança técnica de projetos; Conhecimento profundo de cloud computing; Experiência com DataOps e CI/CD; Liderar implementação de domínios de dados complexo;...

  • Engenheiro(a) de dados

    Há 4 dias

    HOME OFFICE, Brasil Solutis Tempo inteiro

    Estamos em busca de um(a) Engenheiro(a) de Dados para atuar no desenvolvimento e manutenção de soluções robustas, escaláveis e orientadas a negócios.  ResponsabilidadesDesenvolver e manter arquiteturas e pipelines de dados escaláveis em ambientes AWS (S3, Glue, Lambda etc.) e Azure (Data Factory, Synapse etc.); Automatizar fluxos de dados, garantindo...

  • Pessoa engenheira de dados sênior

    Há 5 horas

    HOME OFFICE, Brasil AI Solutions Tempo inteiro

    Pessoa Engenheira de Dados   Remoto. Contrato: PJ Iniciar: Disponibilidade Imediata Sobre a Empresa:A AI Solutions é uma empresa focada no desenvolvimento de soluções tecnológicas com inteligência artificial e machine learning, através da extração, estruturação e consolidação de base de dados e informações. Proporcionamos aos nossos clientes,...

  • Engenheiro(a) de dados pleno

    4 semanas atrás

    HOME OFFICE, Brasil Pier Seguradora Tempo inteiro

    Sobre a posição:O que esperamos de você?A pessoa engenheira de dados garante a eficiência e evolução da plataforma de dados da Pier, otimizando custos, mantendo o Datalake e solucionando desafios de infraestrutura, processamento e segurança. Responsabilidades:Desenvolver soluções para dados e AI de forma escalável e de custo-benefício; Lidar com...

  • Engenheiro(a) de dados sênior

    3 semanas atrás

    HOME OFFICE, Brasil ICON Solutions do Brasil Tempo inteiro

    Posição - Engenheiro(a) de Dados - Sênior (Remoto) Você conhece a Icon? Apaixonados por pessoas e especialistas em tecnologia. Nosso trabalho é encontrar talentos e soluções sob medida para os nossos clientes. Vem encontrar o seu projeto ideal conosco e participar da comunidade ICON! Sobre a Vaga Código da vaga: A Modelo de contratação: PJ Estamos...

  • Engenheiro de dados sr

    2 semanas atrás

    HOME OFFICE, Brasil Magazine Luiza Tempo inteiro

    oioi! quer usar suas habilidades para transformar dados em insights valiosos e impulsionar o futuro do delivery? aqui no aiqfome, a gente não só entrega comida, a gente entrega felicidade! e para continuarmos crescendo e inovando, estamos buscando um(a) engenheiro(a) de dados sênior para turbinar nossa equipe de dados! sua missão será construir e manter...