Engenheiro(a) de dados pleno
4 semanas atrás
- Ferramentas de versionamento: Exemplo Git.
- Construção de pipelines de processamento utilizando EMR Serverless e PySpark para manipulação e transformação de dados em larga escala;
- Desenvolvimento e gerenciamento de modelos analíticos e transformações de dados com dbt (data build tool);
- Integração e armazenamento de dados em Amazon S3 e análise de dados com Athena;
- Automação de fluxos de trabalho de dados e orquestração de pipelines com Apache Airflow;
- Manipulação de dados e desenvolvimento de scripts utilizando Python e ferramentas como DuckDB para consultas analíticas rápidas.
- Experiencia com DevOps/DataOps.
+Formação:
- Bacharelado concluído em Ciência da Computação, Engenharia, Matemática, Estatística ou área relacionada.
- Pós-graduação cursando ou completa em áreas relacionadas a tecnologia.
+Diferenciais:
- Conhecimento em desenvolvimento de software.
- Conhecimento/Certificação AWS.
- Inglês B2.
- Desenvolver e manter pipelines de dados: Realizar todo o processo de ETL (extrair, transformar e carregar);
- Integração de dados: Integrar dados de diversas fontes (bancos de dados, APIs, sistemas externos etc.) e garantir que estejam organizados de maneira eficiente para os usuários finais;
- Otimização de processos: Identificar e implementar melhorias nos processos de armazenamento, processamento e análise de dados;
- Modelagem de dados: Definir e criar modelos de dados que suportem as necessidades de análise, garantido qualidade e eficiência na estruturação de dados;
- Armazenamento de dados: Trabalhar com soluções de armazenamento de dados (Data Warehouse, Data Lake) e definir estratégias de particionamento e armazenamento adequado;
- Garantia de qualidade e governança de dados: Implementar práticas de governança de dados, garantindo integridade, qualidade, segurança e conformidade dos dados em todas as etapas do processo;
- Colaboração com outras equipes: Trabalhar em estreita colaboração com os cientistas de dados, analistas de dados e desenvolvedores para garantir que os dados estejam disponíveis e organizados para suportar a análise e a tomada de decisões;
- Documentação e melhores práticas: Documentar processos e soluções desenvolvidas, mantendo padrões e melhores práticas no uso de ferramentas e tecnologias de dados;
- Monitoramento e performance: Acompanhar a performance dos sistemas de dados e implementar melhorias de eficiência e escalabilidade;
- Suporte a stakeholders: Atuar como ponto de contato para sanar as dúvidas e propor soluções para os clientes.
-
Engenheiro de dados
Há 15 horas
HOME OFFICE, Brasil CredAluga Tempo inteiroOlá, seja bem vindo(a) a CredAluga! Estamos em constante expansão e com isso buscamos talentos que queiram fazer história e impulsionar nossa marca para o sucesso. Se você é um profissional que está pronto para abraçar desafios emocionantes, esta é a sua chance.Como Engenheiro de Dados - Pleno, você será responsável por desenvolver e manter...
-
Engenheiro de dados gcp
2 meses atrás
HOME OFFICE, Brasil Leega Consultoria Tempo inteiro- Google Cloud Platform (GCP); - Programação (Python, SQL, etc.); - Conhecimento em Big Data e ferramentas como Hadoop e Spark. Engenheiro de Dados para Sustentação de Pipelines GCP Pipeline de Dados: - Criar e manter pipelines ETL (extração, transformação e carregamento); - Coletar dados brutos de diferentes fontes; - Transformar os dados em um...
-
Engenheiro de dados aws pleno
3 meses atrás
HOME OFFICE, Brasil Leega Consultoria Tempo inteiroCONHECIMENTOS Conhecimento nos serviços / padrões arquiteturas de Cloud (AWS, Azure ou Google); Sólidos conhecimentos nas ferramentas de evento distribuído (Kafka, eventhub, etc); Sólidos conhecimentos em Ecossistema Hadoop, Spark/Databricks, Python, Scala, Java; Conhecimentos de intermediários à avançados em Banco de dados relacional e NoSQL...
-
Pessoa engenheira de dados
3 meses atrás
HOME OFFICE, Brasil Deal Tempo inteiroSobre a Deal Somos uma consultoria de serviços de tecnologia e parceira estratégica para empresas em qualquer estágio de maturidade digital, sejam aquelas que estão iniciando sua jornada ou as que já nasceram digitalizadas. Com projetos sob medida e equipes de especialistas multidisciplinares, cocriamos soluções criativas e inteligentes em torno...
-
Engenheiro de dados sênior
17 minutos atrás
HOME OFFICE, Brasil mazzatech Tempo inteiroEngenheiro de Dados Senior Requerimentos: Experiência com tecnologias como AWS Redshift, DynamoDB, AWS S3, AWS EMR, AWS Glue, Apache Airflow, Python e PySpark. Experiência em Databricks - Desenvolvimento de Pipelines, catalogação e manutenção do ambiente. Experiência com ambientes de alta criticidade e alta volumetria. Experiência...
-
Engenheiro de dados
3 meses atrás
HOME OFFICE, Brasil Stefanini Group Tempo inteiroO que precisamos que você tenha de conhecimento: Requisitos essenciais: Expertise em serviços de dados do Azure, como Azure Data Factory, Azure Databricks, Azure Synapse Analytics e Azure SQL Database. Proficiente em linguagens de programação como Python, SQL e Spark. Experiência com ferramentas de ETL/ELT e modelagem de dados. Vivência em projetos de...
-
Engenheiro(a) de dados pleno
1 semana atrás
HOME OFFICE, Brasil Mycon Tempo inteiroPara essa vaga é necessário: Experiência prática com serviços do AWS Cloud (Glue, S3, Athena, Lambda). Habilidade com bases de dados relacionais, especialmente SQL Server. Conhecimento de ferramentas de big data como Google BigQuery e plataformas de integração de dados móveis como Firebase. Familiaridade com segmentação e personalização de dados...
-
Engenheiro de dados
1 dia atrás
HOME OFFICE, Brasil Grupo Taking Tempo inteiroDescrição Vaga: Engenheiro de Dados Resumo da Posição: Estamos em busca de um Engenheiro de Dados experiente para projetar, implementar e otimizar fluxos de trabalho de dados em ambientes de Big Data, com foco em ferramentas da Azure, como Azure Databricks e Azure Data Factory. Este profissional será responsável por desenvolver pipelines robustos de...
-
Pessoa engenheira de dados sênior
3 meses atrás
HOME OFFICE, Brasil AI Solutions Tempo inteiroPessoa Engenheira de Dados Remoto. Contrato: PJ Iniciar: Disponibilidade Imediata Sobre a Empresa:A AI Solutions é uma empresa focada no desenvolvimento de soluções tecnológicas com inteligência artificial e machine learning, através da extração, estruturação e consolidação de base de dados e informações. Proporcionamos aos nossos...
-
Engenheiro(a) de dados pleno
2 meses atrás
HOME OFFICE, Brasil Vetta Tecnologia Tempo inteiroRequisitos e qualificações: O que esperamos de você para essa vaga: Superior Completo em Sistemas de Informação, Engenharia da Computação ou Ciência da Computação ou curso correlato; Conhecimento em ETL (SSIS e DataStage); Conhecimento de arquitetura Streaming e ferramentas; Desenvolvimento e manutenção de Banco de dados; Python, SQL Ansi,...
-
Engenheiro de dados sênior
4 meses atrás
HOME OFFICE, Brasil CERC Tempo inteiroRESPONSABILIDADES E ATRIBUIÇÕESComo Engenheiro de Dados Sênior, você irá: Conhecer, entender e se envolver com os problemas de negócio do início ao fim, para propor soluções tech eficientes e inovadoras; Participar ativamente da expansão dos nossos sistemas atuais, da construção de novas features com foco no governança de dados; Construir...
-
Engenheiro de dados pl
1 semana atrás
HOME OFFICE, Brasil Tinnova Tempo inteiroEstamos contratando! Engenheiro de Dados PL 100% Home Office Responsabilidade e atribuições Criar e manter estruturas de data pipeline com performance otimizada. Montar estruturas de dados escaláveis que atendam requisitos funcionais e não funcionais de negócios. Automatizar processos manuais, otimizar data deliveries e redesenhar a infraestrutura para...
-
Engenheiro de dados sênior azure
4 semanas atrás
HOME OFFICE, Brasil NAVA | Technology for Business Tempo inteiroO que esperamos de você? Experiência profissional comprovada anterior como Engenheiro de Dados; Experiência com Python, Spark, Pandas, Databricks (Databricks Mandatório); Experiência com desenvolvimento e implementação de APIs; Experiência com Azure Cloud e seus respectivos serviços; Ferramentas e Tecnologias: SQL, NoSQL, Hadoop, Spark, Kafka,...
-
Pessoa engenheira de dados sênior
1 semana atrás
HOME OFFICE, Brasil MJV Technology & Innovation Tempo inteiroCompetências Comportamentais: Habilidades de resolução de problemas combinadas com a capacidade de desenvolver soluções eficientes, flexíveis e escaláveis. Capacidade de trabalhar de forma colaborativa em um ambiente de equipe e de forma eficaz com pessoas em todos os níveis de uma organização. Capaz de desenhar e implementar soluções técnicas....
-
Pessoa engenheira de dados
Há 15 horas
HOME OFFICE, Brasil Deal Tempo inteiroSobre a Vaga Buscamos alguém que queira cocriar soluções e construir o futuro com a gente como pessoa Engenheira de Dados Sênior Requisitos: Power BI, AWS, Kafka, Spark, Python. Seja um Dealmaker e aproveite: Flash benefícios (VR/VA); Trilha de carreira; Convênio Farmácia; Totalpass; Assistência Médica | Assistência Odontológica; ...
-
Pessoa engenheira de dados
1 semana atrás
HOME OFFICE, Brasil MJV Technology & Innovation Tempo inteiroQualificações Necessárias: Bacharelado em ciência da computação, engenharias, matemática aplicada ou áreas relacionadas. Pós-graduação em engenharia de dados / Big Data (ou equivalente) 5+ anos de experiência no desenvolvimento de fluxos de ETL para carga de diferentes fontes de dados (coletar, validar, homogeneizar, transformar e...
-
Engenheiro de dados
1 dia atrás
HOME OFFICE, Brasil Leega Consultoria Tempo inteiroLinguagens e Tecnologias: Modelagem Relacional/Multidimensional SQL avançado Melhoria de desempenho de consultas Python Estar familiarizado com metodologias Ágeis PowerBI Spark Plataforma Microsoft Azure Data Factory ou ferramenta similar Databricks Banco de dados Synapse, SQL Server SQL Server Reporting Services Banco NoSQL MongoDB Java/Spring ...
-
Engenheiro(a) de dados pleno/sênior
1 semana atrás
HOME OFFICE, Brasil Farmácias São João Tempo inteiroRequisitos: Ensino superior completo em ciência de dados, engenharia de dados, análise e desenvolvimento de sistema ou áreas afins; Experiência com ferramentas e tecnologias de engenharia de dados, como SQL, Python, Snowflake; Experiência com bancos de dados relacionais e não relacionais; Experiência com ferramentas e práticas de ETL e/ou ELT;...
-
Pessoa engenheira de dados
4 semanas atrás
HOME OFFICE, Brasil MJV Technology & Innovation Tempo inteiroConhecimento com Databricks; Conhecimento com sintaxe do Linux; Domínio com banco de dados SQL; Conhecimento sobre arquivos delta e/ou parquet; Noções de jupites/notebook; Domínio em JSON; Conhecimento em tuning de query; Desejável conhecimento em python; Descrição da Vaga: Estamos buscando um(a) Engenheiro(a) de Dados talentoso(a) e motivado(a) para...
-
Engenheiro de software pleno
4 semanas atrás
HOME OFFICE, Brasil Grupo GCB Tempo inteiroEstamos à procura de um Engenheiro de Software Pleno talentoso e experiente para se juntar ao nosso time dinâmico. O candidato ideal terá entre 2 a 3 anos de experiência com Node.js e React, e será responsável por desenvolver, implementar e manter aplicações web de alta performance. Responsabilidades: Desenvolver e manter aplicações web...