Engenheiro(a) de dados pleno

4 semanas atrás


HOME OFFICE, Brasil Darede Tempo inteiro
  • Ferramentas de versionamento: Exemplo Git.
  • Construção de pipelines de processamento utilizando EMR Serverless e PySpark para manipulação e transformação de dados em larga escala;
  • Desenvolvimento e gerenciamento de modelos analíticos e transformações de dados com dbt (data build tool);
  • Integração e armazenamento de dados em Amazon S3 e análise de dados com Athena;
  • Automação de fluxos de trabalho de dados e orquestração de pipelines com Apache Airflow;
  • Manipulação de dados e desenvolvimento de scripts utilizando Python e ferramentas como DuckDB para consultas analíticas rápidas.
  • Experiencia com DevOps/DataOps.


+Formação:

 

  • Bacharelado concluído em Ciência da Computação, Engenharia, Matemática, Estatística ou área relacionada.
  • Pós-graduação cursando ou completa em áreas relacionadas a tecnologia.


+Diferenciais:

  • Conhecimento em desenvolvimento de software.
  • Conhecimento/Certificação AWS.
  • Inglês B2.
  • Desenvolver e manter pipelines de dados: Realizar todo o processo de ETL (extrair, transformar e carregar);
  • Integração de dados: Integrar dados de diversas fontes (bancos de dados, APIs, sistemas externos etc.) e garantir que estejam organizados de maneira eficiente para os usuários finais;
  • Otimização de processos: Identificar e implementar melhorias nos processos de armazenamento, processamento e análise de dados;
  • Modelagem de dados: Definir e criar modelos de dados que suportem as necessidades de análise, garantido qualidade e eficiência na estruturação de dados;
  • Armazenamento de dados: Trabalhar com soluções de armazenamento de dados (Data Warehouse, Data Lake) e definir estratégias de particionamento e armazenamento adequado;
  • Garantia de qualidade e governança de dados: Implementar práticas de governança de dados, garantindo integridade, qualidade, segurança e conformidade dos dados em todas as etapas do processo;
  • Colaboração com outras equipes: Trabalhar em estreita colaboração com os cientistas de dados, analistas de dados e desenvolvedores para garantir que os dados estejam disponíveis e organizados para suportar a análise e a tomada de decisões;
  • Documentação e melhores práticas: Documentar processos e soluções desenvolvidas, mantendo padrões e melhores práticas no uso de ferramentas e tecnologias de dados;
  • Monitoramento e performance: Acompanhar a performance dos sistemas de dados e implementar melhorias de eficiência e escalabilidade;
  • Suporte a stakeholders: Atuar como ponto de contato para sanar as dúvidas e propor soluções para os clientes. 

  • Engenheiro de dados

    Há 15 horas


    HOME OFFICE, Brasil CredAluga Tempo inteiro

    Olá, seja bem vindo(a) a CredAluga! Estamos em constante expansão e com isso buscamos talentos que queiram fazer história e impulsionar nossa marca para o sucesso. Se você  é  um profissional  que está pronto para abraçar desafios emocionantes, esta é a sua chance.Como Engenheiro de Dados - Pleno, você será responsável por desenvolver e manter...

  • Engenheiro de dados gcp

    2 meses atrás


    HOME OFFICE, Brasil Leega Consultoria Tempo inteiro

    - Google Cloud Platform (GCP); - Programação (Python, SQL, etc.); - Conhecimento em Big Data e ferramentas como Hadoop e Spark. Engenheiro de Dados para Sustentação de Pipelines GCP Pipeline de Dados: - Criar e manter pipelines ETL (extração, transformação e carregamento); - Coletar dados brutos de diferentes fontes; - Transformar os dados em um...


  • HOME OFFICE, Brasil Leega Consultoria Tempo inteiro

    CONHECIMENTOS Conhecimento nos serviços / padrões arquiteturas de Cloud (AWS, Azure ou Google); Sólidos conhecimentos nas ferramentas de evento distribuído (Kafka, eventhub, etc); Sólidos conhecimentos em Ecossistema Hadoop, Spark/Databricks, Python, Scala, Java; Conhecimentos de intermediários à avançados em Banco de dados relacional e NoSQL...


  • HOME OFFICE, Brasil Deal Tempo inteiro

    Sobre a Deal   Somos uma consultoria de serviços de tecnologia e parceira estratégica para empresas em qualquer estágio de maturidade digital, sejam aquelas que estão iniciando sua jornada ou as que já nasceram digitalizadas.  Com projetos sob medida e equipes de especialistas multidisciplinares, cocriamos soluções criativas e inteligentes em torno...

  • Engenheiro de dados sênior

    17 minutos atrás


    HOME OFFICE, Brasil mazzatech Tempo inteiro

    Engenheiro de Dados Senior Requerimentos:    Experiência com tecnologias como AWS Redshift, DynamoDB, AWS S3, AWS EMR, AWS Glue, Apache Airflow, Python e PySpark.   Experiência em Databricks - Desenvolvimento de Pipelines, catalogação e manutenção do ambiente.   Experiência com ambientes de alta criticidade e alta volumetria.   Experiência...

  • Engenheiro de dados

    3 meses atrás


    HOME OFFICE, Brasil Stefanini Group Tempo inteiro

    O que precisamos que você tenha de conhecimento: Requisitos essenciais: Expertise em serviços de dados do Azure, como Azure Data Factory, Azure Databricks, Azure Synapse Analytics e Azure SQL Database. Proficiente em linguagens de programação como Python, SQL e Spark. Experiência com ferramentas de ETL/ELT e modelagem de dados. Vivência em projetos de...


  • HOME OFFICE, Brasil Mycon Tempo inteiro

    Para essa vaga é necessário: Experiência prática com serviços do AWS Cloud (Glue, S3, Athena, Lambda). Habilidade com bases de dados relacionais, especialmente SQL Server. Conhecimento de ferramentas de big data como Google BigQuery e plataformas de integração de dados móveis como Firebase. Familiaridade com segmentação e personalização de dados...

  • Engenheiro de dados

    1 dia atrás


    HOME OFFICE, Brasil Grupo Taking Tempo inteiro

    Descrição Vaga: Engenheiro de Dados   Resumo da Posição: Estamos em busca de um Engenheiro de Dados experiente para projetar, implementar e otimizar fluxos de trabalho de dados em ambientes de Big Data, com foco em ferramentas da Azure, como Azure Databricks e Azure Data Factory. Este profissional será responsável por desenvolver pipelines robustos de...


  • HOME OFFICE, Brasil AI Solutions Tempo inteiro

    Pessoa Engenheira de Dados   Remoto. Contrato: PJ Iniciar: Disponibilidade Imediata  Sobre a Empresa:A AI Solutions é uma empresa focada no desenvolvimento de soluções tecnológicas com inteligência artificial e machine learning, através da extração, estruturação e consolidação de base de dados e informações. Proporcionamos aos nossos...


  • HOME OFFICE, Brasil Vetta Tecnologia Tempo inteiro

    Requisitos e qualificações:  O que esperamos de você para essa vaga:   Superior Completo em Sistemas de Informação, Engenharia da Computação ou Ciência da Computação ou curso correlato; Conhecimento em ETL (SSIS e DataStage); Conhecimento de arquitetura Streaming e ferramentas; Desenvolvimento e manutenção de Banco de dados; Python, SQL Ansi,...


  • HOME OFFICE, Brasil CERC Tempo inteiro

    RESPONSABILIDADES E ATRIBUIÇÕESComo Engenheiro de Dados Sênior, você irá:  Conhecer, entender e se envolver com os problemas de negócio do início ao fim, para propor soluções tech eficientes e inovadoras; Participar ativamente da expansão dos nossos sistemas atuais, da construção de novas features com foco no governança de dados; Construir...

  • Engenheiro de dados pl

    1 semana atrás


    HOME OFFICE, Brasil Tinnova Tempo inteiro

    Estamos contratando! Engenheiro de Dados PL 100% Home Office Responsabilidade e atribuições Criar e manter estruturas de data pipeline com performance otimizada. Montar estruturas de dados escaláveis que atendam requisitos funcionais e não funcionais de negócios. Automatizar processos manuais, otimizar data deliveries e redesenhar a infraestrutura para...


  • HOME OFFICE, Brasil NAVA | Technology for Business Tempo inteiro

    O que esperamos de você? Experiência profissional comprovada anterior como Engenheiro de Dados; Experiência com Python, Spark, Pandas, Databricks (Databricks Mandatório); Experiência com desenvolvimento e implementação de APIs; Experiência com Azure Cloud e seus respectivos serviços; Ferramentas e Tecnologias: SQL, NoSQL, Hadoop, Spark, Kafka,...


  • HOME OFFICE, Brasil MJV Technology & Innovation Tempo inteiro

    Competências Comportamentais: Habilidades de resolução de problemas combinadas com a capacidade de desenvolver soluções eficientes, flexíveis e escaláveis. Capacidade de trabalhar de forma colaborativa em um ambiente de equipe e de forma eficaz com pessoas em todos os níveis de uma organização. Capaz de desenhar e implementar soluções técnicas....


  • HOME OFFICE, Brasil Deal Tempo inteiro

    Sobre a Vaga  Buscamos alguém que queira cocriar soluções e construir o futuro com a gente como pessoa Engenheira de Dados Sênior   Requisitos: Power BI, AWS, Kafka, Spark, Python.   Seja um Dealmaker e aproveite: Flash benefícios (VR/VA); Trilha de carreira; Convênio Farmácia; Totalpass; Assistência Médica | Assistência Odontológica; ...

  • Pessoa engenheira de dados

    1 semana atrás


    HOME OFFICE, Brasil MJV Technology & Innovation Tempo inteiro

    Qualificações Necessárias: Bacharelado em ciência da computação, engenharias, matemática aplicada ou áreas relacionadas. Pós-graduação em engenharia de dados / Big Data (ou equivalente) 5+ anos de experiência no desenvolvimento de fluxos de ETL para carga de diferentes fontes de dados (coletar, validar, homogeneizar, transformar e...

  • Engenheiro de dados

    1 dia atrás


    HOME OFFICE, Brasil Leega Consultoria Tempo inteiro

    Linguagens e Tecnologias: Modelagem Relacional/Multidimensional SQL avançado Melhoria de desempenho de consultas Python Estar familiarizado com metodologias Ágeis PowerBI Spark Plataforma Microsoft Azure Data Factory ou ferramenta similar Databricks Banco de dados Synapse, SQL Server SQL Server Reporting Services Banco NoSQL MongoDB Java/Spring ...


  • HOME OFFICE, Brasil Farmácias São João Tempo inteiro

    Requisitos: Ensino superior completo em ciência de dados, engenharia de dados, análise e desenvolvimento de sistema ou áreas afins; Experiência com ferramentas e tecnologias de engenharia de dados, como SQL, Python, Snowflake; Experiência com bancos de dados relacionais e não relacionais; Experiência com ferramentas e práticas de ETL e/ou ELT;...

  • Pessoa engenheira de dados

    4 semanas atrás


    HOME OFFICE, Brasil MJV Technology & Innovation Tempo inteiro

    Conhecimento com Databricks; Conhecimento com sintaxe do Linux; Domínio com banco de dados SQL; Conhecimento sobre arquivos delta e/ou parquet; Noções de jupites/notebook; Domínio em JSON; Conhecimento em tuning de query; Desejável conhecimento em python; Descrição da Vaga: Estamos buscando um(a) Engenheiro(a) de Dados talentoso(a) e motivado(a) para...

  • Engenheiro de software pleno

    4 semanas atrás


    HOME OFFICE, Brasil Grupo GCB Tempo inteiro

    Estamos à procura de um Engenheiro de Software Pleno talentoso e experiente para se juntar ao nosso time dinâmico. O candidato ideal terá entre 2 a 3 anos de experiência com Node.js e React, e será responsável por desenvolver, implementar e manter aplicações web de alta performance.  Responsabilidades:  Desenvolver e manter aplicações web...