Pessoa especialista data platform engineer

2 semanas atrás


HOME OFFICE, Brasil Grupo SBF Tempo inteiro

Graduação em Ciência da Computação, Engenharia da Computação, Sistemas de Informação ou área relacionada; Python; SQL; Conceitos de administração de banco de dados; Conceitos de DW; Shell; Alguma ferramenta/linguagem de IaC: terraform, ansible, puppet; Conceitos de infraestrutura (rede, disco, cpu...); Proficiência com containers (docker, kubernetes); Conceitos de engenharia de software (protocolos de API, SoC, SOLID e etc); Conceitos de sistemas com uso intensivo de dados: lakehouse, data lake, DW MPP; Proficiência com ferramentas de processamento em streaming: kafka, spark, flink; Conceitos de streaming de dados: hopping, session, tumbling; Proficiência com bancos nosql: mongo, cassandra (scyllaDB), druid Conceitos de arquiteturas de sistemas distribuidos: ring, master/worker; Conceitos de machine learning: treino, serving, feature, reinforcement learning; Proficiência com infraestrutura em cloud. Buscar inspiração no mercado para trazer novas ideias que possam ser utilizadas para melhorar a plataforma de dados; Atuar ativamente na detecção e na solução de problemas, oportunidades e melhorias relacionados à disciplina de dados na tecnologia; Garantir que o time esteja alinhado com evolução da plataforma e todos entendam as motivações por trás delas; Identificar e antecipar impactos das abordagens em outros produtos cross-squads; Trazer a visão do todo, ao colaborar com o planejamento, acompanhamento e organização de uma dada iniciativa que visa onde outro analista, seja responsável, até a entrega de valor, ajudando a mapear os possíveis riscos e impactos; Orientar, engaja e fomenta proativamente a cultura data driven em toda a Empresa.



  • HOME OFFICE, Brasil Víssimo Tempo inteiro

    Para isso, a gente espera que você tenha: Forte experiência em plataformas de orquestração de dados/processos (Kestra, Airflow, Prefect ou similares). Experiência sólida em desenvolvimento backend (PHP, Kotlin, Python ou similar), com foco em integrações e serviços. Vivência com integração de sistemas (API REST, mensageria, ETL/ELT)....

  • Data engineer

    4 semanas atrás


    HOME OFFICE, Brasil Feel Tech RH Tempo inteiro

    Oportunidade para Data Engineer em uma empresa multinacional que fornece serviços e soluções de TI com foco em Quality Assurance. Quais serão as responsabilidades dessa pessoa:  Projetar, desenvolver e manter pipelines de dados ETL/ELT escaláveis usando Databricks com PySpark, SQL e Delta Lake. Otimizar o desempenho dos pipelines de dados, gerenciar...


  • HOME OFFICE, Brasil Azos Tempo inteiro

    Trabalhar na Azos é ter autonomia de verdade e gente boa do seu lado. Aqui, todo mundo tem espaço pra fazer acontecer e ver o resultado do próprio trabalho chegando na vida de milhares de famílias brasileiras. Acreditamos em um ambiente leve, diverso e colaborativo, onde a troca é constante e o crescimento vem junto com o time.Temos escritórios em São...

  • Senior data engineer

    Há 8 horas


    HOME OFFICE, Brasil EXA Tempo inteiro

    SENIOR DATA ENGINEER Sua missão: Sua missão será liderar a construção da espinha dorsal de dados da nossa empresa. Você será a força motriz por trás da criação de uma infraestrutura de dados escalável e de alta performance, capacitando nossas equipes de análise, ciência de dados e produto a transformar dados brutos em inteligência de negócio...


  • HOME OFFICE, Brasil idwall Tempo inteiro

    Estamos revolucionando a forma como as relações de confiança são criadas e nutridas. A paixão pelo que fazemos alimenta nossa inquietude coletiva para criar as tecnologias de ponta que são referência em nosso mercado. Acreditamos que onde há confiança, há evolução! Como será seu dia a dia na idwall: Projetar, implementar e gerenciar plataforma...


  • HOME OFFICE, Brasil Dock Tempo inteiro

    Quem é a Dock? Há mais de 20 anos, cumprimos a missão de democratizar o acesso a serviços financeiros, tornando experiências financeiras mais simples e acessíveis. Somos um time de pessoas obstinadas, que acreditam na tecnologia e nos serviços como os principais facilitadores para a evolução de nossos clientes e a transformação do papel das...

  • Data engineer

    2 semanas atrás


    HOME OFFICE, Brasil Zappts Tempo inteiro

    Por que essa vaga já é sua?  Sabemos que o seu talento em engenharia de dados pode transformar a forma como as empresas tomam decisões estratégicas. Estamos em busca de uma Data Engineer para se juntar à nossa equipe e liderar projetos que impactam o mercado de maneira significativa. Queremos que você seja parte da nossa jornada, e que sua expertise...


  • HOME OFFICE, Brasil YDUQS - Vagas Tech Tempo inteiro

    Buscamos profissionais com: Formação em Tecnologia, Engenharia de Dados ou áreas correlatas; Especialização em Engenharia e Arquitetura de Dados, Administração de Bancos de Dados ou similares; Sólidos conhecimentos em programação, especialmente em linguagens como PySpark, Python, R e SQL; Experiência com Hadoop, Spark e outras tecnologias Big...

  • Staff data engineer

    Há 2 dias


    HOME OFFICE, Brasil Grupo OLX Tempo inteiro

    E o que você precisa ter? Bom conhecimento em fundamentos de Engenharia de Software; Vivência em métodos ágeis (Scrum, Kanban); Conhecimento em Python e SQL avançado; Airflow, Pipelines de ETL e Athena/Presto/Trino; Experiência em Data Warehouse Architecture, Data Modeling; AWS (conhecimento aprofundado da Stack de Data Engineer). Será considerado...

  • Staff data engineer

    2 semanas atrás


    HOME OFFICE, Brasil Conta Simples Tempo inteiro

    O que esperamos de você: Ótimos conhecimentos em SQL, Python, Spark/PySpark e Linux; Conhecimentos amplos em AWS, preferencialmente: IAM, EC2, Athena, DynamoDB, RDS, S3, EMR, Lambda, StepFunctions, Lake Formation, CloudWatch, Kinesis; Experiência com Prometheus, Grafana, CloudTrail; Experiência na manutenção de ferramentas de dados, como Airflow,...