Engenheiro De Dados Azure Sênior
4 semanas atrás
O candidato selecionado atuará como um membro importante da equipe de dados da Dataside Solucoes Em Dados Ltda, responsável por construir pipelines de dados robustos e eficientes que entreguem modelos de dados de alta qualidade para o time de negócios. Isso permitirá que os profissionais de negócios tenham acesso a dados precisos e atualizados para tomar decisões informadas.
Responsabilidades:
- Desenvolver consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas;
- Construir pipelines de dados utilizando Azure Data Factory;
- Criar notebooks em Python e SQL utilizando Databricks;
- Desenvolver Data Governance utilizando Unity Catalog ou Purview;
- Trabalhar com ingestões de dados em Datalakehouse;
- Definir e explicar conceitos Azure Data Factory, Synapse, Databricks e Fabric de forma crítica;
- Criar e manipular dataframes e RDDs em PySpark de forma eficiente e escalável;
- Usar junções de vários tipos, como junções internas, junções externas e junções naturais;
- Usar subqueries de vários tipos, como subqueries de seleção, subqueries de atualização e subqueries de exclusão;
- Usar funções agregadas de vários tipos, como funções de agregação de agregação;
- Usar SQL com grandes conjuntos de dados;
- Usar SQL para otimizar o desempenho e a escalabilidade de consultas e soluções de dados;
- Usar SQL para resolver problemas complexos de dados;
- Usar PySpark para realizar análise de dados exploratória (EDA) de forma eficiente e escalável;
- Usar PySpark para gerar modelos de aprendizado de máquina de forma eficiente e escalável;
- Usar PySpark para otimizar o desempenho de aplicações de processamento de dados;
- Definir e explicar conceitos de DevOps de maneira abrangente e crítica;
- Utilizar ferramentas de CI/CD para automação eficiente;
- Gerenciar infraestrutura como código, comunicar conceitos eficazmente e liderar projetos de DevOps;
Requisitos:
- Inglês para conversação nível B2-C1 (Pós-intermediário e Avançado);
- Identificar os principais requisitos de negócios para um modelo de dados complexo e desafiador;
- Alto conhecimento em arquitetura de Big Data end-to-end;
- Capacidade de projetar arquitetura de Big Data (Infraestrutura, Ingestão, Armazenamento, Processamento e Serving);
- Implementar um modelo de dados complexo e desafiador em um banco de dados relacional ou não relacional;
- Realizar testes de integridade de dados para garantir que o modelo de dados está funcionando corretamente;
- Usar ferramentas de modelagem de dados para projetar e implementar modelos de dados;
- Documentar modelos de dados para facilitar a comunicação com outras partes interessadas;
- Projetar e implementar modelos de dados para lidar com grandes conjuntos de dados;
- Projetar e implementar modelos de dados para lidar com dados em tempo real;
- Projetar e implementar modelos de dados para lidar com dados de várias fontes;
- Experiência em liderar engenheiros de dados JR e PL;
Diferenciais:
- Projetos de Big Data internacional;
- Liderar projetos de BI complexos e desafiadores;
- Compreensão detalhada dos conceitos de Big Data e computação em nuvem, demonstrando pensamento crítico;
- Experiência em projetos complexos de DB, DW, lake e lakehouse, incluindo segurança e soluções distribuídas;
- Experiência em projetos complexos de ETL, liderando equipes de engenheiros de dados;
- Habilidade comprovada em resolver problemas complexos de dados de forma independente e eficiente;
- Adaptação rápida a mudanças e tomada de decisões informadas em ambientes dinâmicos;
Nossos Incentivos:
1. Auxílio médico;
2. Gympass;
3. Auxílio terapia;
4. Teleatendimento em Nutrição;
5. Seguro de vida;
6. Day off no dia do aniversário;
7. Parceria com instituições de ensino com desconto em cursos (Anhanguera e FIAP);
8. Gameficação interna (troque ações por prêmios);
9. Acesso a nossa plataforma de cursos SideSchool;
10. English Club;
11. Reembolso + Bônus por certificação;
Entre outros
Atuação remota;
Valorizamos cada voz e cada pessoa, porque sabemos que a diversidade nos torna mais inovadores e fortes.
-
Engenheiro de Dados Azure Sênior
2 meses atrás
São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiroPapel na EmpresaConstruir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisões.ResponsabilidadesEscrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de Dados...
-
Engenheiro de Dados Azure Júnior
3 semanas atrás
São José dos Campos, São Paulo, Brasil Dataside Solucoes Em Dados Ltda Tempo inteiroPapel na Empresa: Desenvolver soluções de dados em Azure para apoiar a tomada de decisões dos negócios. Responsabilidades:Desenvolver consultas SQL para realizar tarefas como selecionar, inserir, atualizar e excluir dados de uma tabela.Construir pipelines de dados utilizando Azure Data Factory.Desenvolver notebooks em Python e SQL utilizando...
-
Engenheiro de Dados Azure Pleno
3 semanas atrás
São José dos Campos, São Paulo, Brasil Dataside Solucoes Em Dados Ltda Tempo inteiroPapel na empresa: Nossa empresa está procurando por um profissional experiente em ciência de dados para trabalhar em projetos de grande escala. O candidato ideal terá conhecimento avançado em Azure e experiência em desenvolver soluções de dados em ambientes de nuvem.Responsabilidades: - Desenvolver pipelines de dados utilizando Azure Data Factory; -...
-
Engenheiro de Dados Azure Pleno
Há 1 mês
São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiroPapel na Empresa:Construir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisões.Responsabilidades:Desenvolver consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de Dados...
-
Engenheiro de Dados Sênior
4 semanas atrás
São Paulo, São Paulo, Brasil NAVA | Technology for Business Tempo inteiroO que buscamos em um Engenheiro de Dados Sênior?Experiência profissional comprovada em projetos de análise de dados.Conhecimento em tecnologias como Azure, Python, Spark e Pandas.Ferramentas e tecnologias: SQL, NoSQL, Hadoop, Spark, Kafka e ETL.Bancos de dados: relacionais (MySQL, PostgreSQL) e não-relacionais (MongoDB, Cassandra).Atuação em projetos...
-
Engenheiro de Dados Azure Pleno Senior
2 semanas atrás
São José dos Campos, São Paulo, Brasil Dataside - Consultoria de Data & AI Tempo inteiroPapel no Dataside: Desenvolver pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisões.Responsabilidades: Desenvolver consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de...
-
Engenheiro de Dados Sênior
3 semanas atrás
São Paulo, São Paulo, Brasil Iventis Tecnologia Tempo inteiroDesenvolva sua carreira como Engenheiro de Dados Sênior em Iventis TecnologiaEstamos procurando por um profissional apaixonado por dados para se juntar ao nosso time e contribuir para a nossa jornada de transformação digital. Se você tem experiência em tecnologias avançadas de dados e adora enfrentar desafios complexos, essa é sua chance de crescer...
-
Engenheiro de Dados Sênior
4 semanas atrás
São Paulo, São Paulo, Brasil Brq Digital Solutions Tempo inteiroDescrição da VagaA Brq Digital Solutions está procurando por um Engenheiro de Dados Sênior para se juntar à nossa equipe de transformação digital. Nossa empresa é uma das maiores do país e estamos crescendo rapidamente.ResponsabilidadesDesenvolver e implementar soluções de processamento de dados em lotes e em streaming;Trabalhar com os principais...
-
Engenheiro de Dados Sênior
Há 1 mês
São Paulo, São Paulo, Brasil Foursys Tempo inteiroDescrição do CargoA Foursys é uma empresa inovadora que busca um Engenheiro de Dados Sênior para se juntar à nossa equipe. Nossa empresa é apaixonada por tecnologia e inovação, e estamos procurando alguém que compartilhe esses valores.ResponsabilidadesDesenvolver soluções de dados escaláveis utilizando Databricks e Spark;Construir pipelines de...
-
Desenvolvedor de Dados Sênior
2 semanas atrás
São Paulo, São Paulo, Brasil ICON Solutions do Brasil Tempo inteiroCargo: Engenheiro de Dados SeniorDescrição: Estamos em busca de um profissional para atuar como Engenheiro de Dados Senior, responsável por impulsionar a construção de pipelines de dados escaláveis e eficientes.Responsabilidades:Desenvolver e gerenciar pipelines de dados utilizando Azure Data Factory, Databricks e outras ferramentas do ecossistema...
-
Engenheiro de Dados Sênior
4 semanas atrás
São Paulo, São Paulo, Brasil FOURSYS Tempo inteiroA Foursys é uma equipe apaixonada por inovação e transformação digital. Nossa missão é criar soluções inovadoras para os nossos clientes.Buscamos um Engenheiro de Dados Sênior para se juntar à nossa equipe. O candidato ideal terá experiência em desenvolvimento na nuvem, engenharia de dados e data lake, com foco na construção de pipelines de...
-
Engenheiro de Dados Azure
Há 1 mês
São Paulo, São Paulo, Brasil Brq Digital Solutions Tempo inteiroDescrição da VagaEstamos procurando por um profissional apaixonado por tecnologia e transformação para se juntar à nossa equipe de Engenheiros de Dados Azure na BRQ Digital Solutions.ResponsabilidadesDesenvolver soluções de dados avançadas utilizando Microsoft Azure e tecnologias relacionadas;Trabalhar em equipe para implementar projetos de...
-
Engenheiro(a) de Dados Sênior
Há 1 mês
São Paulo, São Paulo, Brasil Foursys Tempo inteiroPessoa Engenheira de Dados SêniorA Foursys é um time apaixonado por inovação, design e transformação digital. Somos globais, somos GPTW.RequisitosExperiência com desenvolvimento na nuvem (Azure e/ou AWS), com conhecimento de práticas para otimização de custos.Vasta experiência em engenharia de dados e data lake, com foco na construção de...
-
Engenheira de Dados Sênior
Há 1 mês
São Paulo, São Paulo, Brasil Foursys Tempo inteiroA Foursys: Uma Empresa de Inovação e Transformação DigitalNossa empresa é um time apaixonado por inovação, design e transformação digital. Somos uma equipe global e somos reconhecidos como um dos melhores lugares para trabalhar (GPTW). Nossa diversidade é uma das nossas maiores forças, pois acreditamos que as diferentes ideias e perspectivas são...
-
Engenheiro de Dados Sênior
4 semanas atrás
São Paulo, São Paulo, Brasil ICON Solutions do Brasil Tempo inteiroDescrição da VagaEstamos procurando por um Engenheiro de Dados Sênior para integrar nosso time de tecnologia. O profissional atuará diretamente no design e otimização de soluções de dados, colaborando com equipes multidisciplinares para entregar insights valiosos para o negócio.Responsabilidades:Desenvolver e gerenciar pipelines de dados utilizando...
-
Engenheiro de Dados Sênior
4 semanas atrás
São Paulo, São Paulo, Brasil Crescereh Tempo inteiroDescrição do CargoEstamos procurando por um Engenheiro de Dados Sênior para se juntar à nossa equipe de tecnologia. Nossa empresa, a Optima PS2 Optima Solutions, é uma empresa de tecnologia focada em gestão de performance de aplicativos, serviços gerenciados de cloud, app, DB, infra e consultoria especializada em qualidade de serviço e...
-
Engenheiro de Dados Sênior
3 semanas atrás
São Paulo, São Paulo, Brasil Icon Solutions Do Brasil Tempo inteiroVaga para Engenheiro de Dados SêniorEstamos em busca de um profissional experiente para integrar nosso time de tecnologia e impulsionar a construção de pipelines de dados escaláveis e eficientes. O candidato atuará diretamente no design e otimização de soluções de dados, colaborando com equipes multidisciplinares para entregar insights valiosos para...
-
Engenheiro de Dados Sênior
Há 1 mês
São Paulo, São Paulo, Brasil Foursys Tempo inteiroFoursys: Uma Empresa de Transformação DigitalA Foursys é uma empresa apaixonada por inovação, design e transformação digital. Nossa missão é criar soluções inovadoras que melhorem a vida das pessoas.Requisitos para o Cargo de Engenheiro de Dados SêniorExperiência com desenvolvimento na nuvem (Azure e/ou AWS) e conhecimento de práticas para...
-
Engenheiro de Dados Sênior
Há 1 mês
São Paulo, São Paulo, Brasil TOPMIND Tempo inteiroDescrição do CargoBuscamos um profissional experiente para atuar como Engenheiro de Dados Sênior em nossa equipe de tecnologia. O candidato ideal terá experiência em desenvolvimento de pipelines de integração de dados utilizando Python, Scala e Java, além de conhecimento em ambientes Cloud, preferencialmente Azure.ResponsabilidadesDesenvolver...
-
Engenheira de Dados Seniora
4 semanas atrás
São Paulo, São Paulo, Brasil Cogna Educação Tempo inteiroDescrição do CargoBuscamos uma Engenheira de Dados Seniora para liderar nossa equipe de dados e garantir a qualidade e eficiência dos projetos. A candidata ideal terá experiência em liderança de equipe e gestão de projetos, além de conhecimento avançado em Big Data, Modelagem de Dados, SQL, NoSQL, ETL, Data Warehousing, Python, R, Hadoop, Spark,...