Pessoa Engenheira de Dados
1 semana atrás
Nesta oportunidade de Engenheiro(a) de Dados, você será responsável por construir e otimizar nossa infraestrutura de dados, também atuará como uma referência técnica e mentor(a), capacitando nossas equipes de Analistas, Especialistas e Cientistas de Dados a extraindo o máximo valor dos nossos ativos de dados, assumindo a propriedade de domínios de dados e garantindo que nossas soluções sejam escaláveis, seguras e governadas.
Aqui na Pulse temos compromissos com a equidade de oportunidades para todas as pessoas. Valorizamos as diferenças e temos um ambiente onde todos e todas são mais que bem-vindos, por isso buscamos diversidade em identidade de gênero, idade, cor e etnia, orientação afetivo-sexual, origem, pessoas com deficiência e entre outras diversidades, pois entendemos que todas as pessoas devem sonhar, crescer e realizar.
Para te ajudar a entender este desafio, aqui estão algumas responsabilidades:
- Construção de Pipelines de Dados: Desenvolver, otimizar e manter pipelines de dados (ETL/ELT) robustos, eficientes e escaláveis, utilizando o ecossistema Azure Databricks, incluindo Databricks Jobs e Delta Live Tables (Pipelines);
- Otimização e Performance: Otimizar a performance de queries complexas e processos de ingestão e transformação, garantindo o processamento eficiente de grandes volumes de dados;
- Liderança Técnica e Mentoria: Atuar como referência técnica para o time de dados, promovendo as melhores práticas de engenharia, governança e qualidade de dados, mentorando o time de Dados;
- Monitoramento e Qualidade: Implementar e manter rotinas de monitoramento que garantam a saúde, a consistência e a qualidade dos nossos pipelines e bases de dados;
- Arquitetura e Desenvolvimento em Data Mesh: Liderar a concepção e ser o guardião técnico de domínios de dados específicos, garantindo a qualidade, disponibilidade, segurança e documentação dos "produtos de dados";
- Governança de Dados: Implementar e disseminar estratégias de governança de dados dentro do time, incluindo conhecimento de todos os domínios de dados, garantindo a conformidade e a segurança das informações acessadas;
- Suporte Estratégico: Colaborar ativamente com stakeholders, Analistas e Cientistas de Dados para entender os requisitos de negócio e traduzi-los em soluções de dados eficazes e estratégicas, disponibilizando datasets prontos para consumo;
- Disseminação da Cultura Data-Driven: Agir como um evangelista de dados, auxiliando as áreas de negócio a compreender e utilizar os dados disponíveis para tomar decisões mais inteligentes.
Para esta oportunidade, é necessário que você:
- Superior Completo em Engenharia da Computação, Ciência da Computação, Sistemas de Informação ou áreas correlatas;
- Experiência sólida e comprovada como Engenheiro de Dados, atuando em ambientes de Big Data;
- Profundo conhecimento e experiência prática com a plataforma Databricks no ambiente Azure (ADB), dominando seu principais componentes como Databricks JOBs, Delta Live Tables, e integração com Azure Data Lake Stirage (ADLS);
- Domínio avançado de Python e SQL para manipulação e processamento de dados em larga escala;
- Experiência avançada com Apache Spark / PySpark, incluindo otimização de jobs e performance;
- Sólidos conhecimentos em modelagem de dados (Dimensional, Data Vault) e arquitetura de dados;
- Compreensão profunda e vivência prática com os conceitos e a implementação de arquiteturas Data Mesh;
- Experiência com práticas e ferramentas de governança de dados (Data Governance), qualidade de dados (Data Quality) e segurança;
- Conhecimento em ferramentas de versionamento de código, como Git;
- Excelentes habilidades de comunicação, colaboração e mentoria.
É um diferencial se você possuir:
- Conhecimento em bancos de dados NoSQL, especialmente MongoDB;
- Familiaridade com metodologias ágeis (Scrum, Kanban).
-
Pessoa Engenheira de Dados
4 semanas atrás
Rio de Janeiro, Rio de Janeiro, Brasil Bridge & Co. Tempo inteiroQue tal fazer parte do nosso time como Pessoa Engenheira de Dados?Sua missão será desenvolver e implementar soluções de dados utilizando sua experiência e habilidades em ferramentas e tecnologias como Airflow, Databricks, Python, SQL e Power BI.Essa é uma oportunidade para atuar no modelo híbrido no Rio de Janeiro.RESPONSABILIDADES E ATRIBUIÇÕESComo...
-
Engenheiro de Dados
3 semanas atrás
Rio de Janeiro, Rio de Janeiro, Brasil Clientefc Tempo inteiroOverviewEngenheiro de Dados - Cliente FC. Estamos contratando Engenheiro de Dados com formação sólida em áreas de Exatas, com forte base analítica e lógica, atuando em projetos de arquitetura, modelagem e processamento de dados em larga escala.ResponsibilitiesModelagem e arquitetura de dadosDesenvolvimento de pipelines ETL/ELTIntegração de dados...
-
Engenheiro de Dados
3 semanas atrás
Rio de Janeiro, Rio de Janeiro, Brasil Clientefc Tempo inteiroOverview Engenheiro de Dados - Cliente FC. Estamos contratando Engenheiro de Dados com formação sólida em áreas de Exatas, com forte base analítica e lógica, atuando em projetos de arquitetura, modelagem e processamento de dados em larga escala. Responsibilities Modelagem e arquitetura de dados Desenvolvimento de pipelines ETL/ELT Integração de dados...
-
Engenheiro(a) de dados
4 semanas atrás
Rio de Janeiro, Rio de Janeiro, Brasil BTG Pactual Tempo inteiroEngenheiro(a) de dados | Dados (Rio de Janeiro/RJ) Engenheiro(a) de dados | Dados (Rio de Janeiro/RJ) - BTG Pactual Responsabilidades A atuação será junto a times de áreas de negócio para desenhar, implementar e gerenciar pipelines de Big Data; Criação de tabelas analíticas com os dados normalizados para o consumo e uso das áreas de negócios; ...
-
Engenheiro de Dados
4 semanas atrás
Rio de Janeiro, Rio de Janeiro, Brasil innolevels Tempo inteiroOverview Estamos contratando Engenheiro de Dados - Azure Data Factory , com experiência em pipelines de extração e carga de dados em ambientes de alto volume e complexidade. Entendemos que para essa evolução, é necessário o conhecimento em: Azure Data Factory (ADF), com foco em pipelines de extração de dados Oracle e escrita no Azure Data Lake...
-
Engenheiro de Dados
4 semanas atrás
Rio de Janeiro, Rio de Janeiro, Brasil innolevels Tempo inteiroOverviewEstamos contratando Engenheiro de Dados - Azure Data Factory, com experiência em pipelines de extração e carga de dados em ambientes de alto volume e complexidade. Entendemos que para essa evolução, é necessário o conhecimento em:Azure Data Factory (ADF), com foco em pipelines de extração de dados Oracle e escrita no Azure Data Lake Storage...
-
Engenheiro de Dados
4 semanas atrás
Rio de Janeiro, Rio de Janeiro, Brasil innolevels Tempo inteiroOverview Estamos contratando Engenheiro de Dados - Azure Data Factory , com experiência em pipelines de extração e carga de dados em ambientes de alto volume e complexidade. Entendemos que para essa evolução, é necessário o conhecimento em: Azure Data Factory (ADF), com foco em pipelines de extração de dados Oracle e escrita no Azure Data Lake...
-
Engenheiro de Dados
4 semanas atrás
Rio de Janeiro, Rio de Janeiro, Brasil innolevels Tempo inteiroOverviewEstamos contratando Engenheiro de Dados - Azure Data Factory, com experiência em pipelines de extração e carga de dados em ambientes de alto volume e complexidade.Entendemos que para essa evolução, é necessário o conhecimento em:Azure Data Factory (ADF), com foco em pipelines de extração de dados Oracle e escrita no Azure Data Lake Storage...
-
Engenheiro de Dados
4 semanas atrás
Rio de Janeiro, Rio de Janeiro, Brasil Innolevels Tempo inteiroEstamos contratando Engenheiro de Dados - Azure Data Factory, com experiência em pipelines de extração e carga de dados em ambientes de alto volume e complexidade.Entendemos que para essa evolução, é necessário o conhecimento em:• Azure Data Factory (ADF), com foco em pipelines de extração de dados Oracle e escrita no Azure Data Lake Storage...
-
Engenheiro de Dados
3 semanas atrás
Rio de Janeiro, Rio de Janeiro, Brasil Innolevels Tempo inteiroEstamos contratando Engenheiro de Dados para atuar em projetos de transformação digital, desenvolvendo soluções inovadoras e escaláveis para potencializar a experiência dos usuários em uma grande empresa.Entendemos que para essa evolução, é necessário o conhecimento em:• SQL e PL/SQL• Modelagem de dados e ETL/ELT• Construção de pipelines e...