Engenheiro de dados azure sênior

4 semanas atrás

São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

Papel na empresa: Construir pipelines de dados entregando modelos de dados nas camadas Bronze, Silver e Gold para o time de negócios; ter capacidade de analisar dados e tomar decisões.
Responsabilidades:
Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.
Construir pipelines de dados utilizando Azure Data Factory.
Construir notebooks em Python e SQL utilizando Databricks.
Construir Modern Data Warehouse com Synapse Analytics (Serverless Dedicated).
Desenvolver Data Governance utilizando Unity Catalog ou Purview.
Trabalhar com ingestões de dados em Data Lakehouse.
Definir e explicar conceitos de Azure Data Factory, Synapse, Databricks e Fabric de forma crítica.
Criar e manipular dataframes e RDDs em PySpark de forma eficiente e escalável.
Usar junções de vários tipos, como junções internas, externas e naturais.
Usar subqueries de vários tipos, como subqueries de seleção, atualização e exclusão.
Usar funções agregadas de vários tipos.
Utilizar SQL com grandes conjuntos de dados.
Utilizar SQL para otimizar o desempenho e a escalabilidade de consultas e soluções de dados.
Utilizar SQL para resolver problemas complexos de dados.
Utilizar PySpark para realizar análise exploratória de dados (EDA) de forma eficiente e escalável.
Utilizar PySpark para gerar modelos de aprendizado de máquina de forma eficiente e escalável.
Utilizar PySpark para otimizar o desempenho de aplicações de processamento de dados.
Definir e explicar conceitos de DevOps de maneira abrangente e crítica.
Utilizar ferramentas de CI/CD para automação eficiente.
Gerenciar infraestrutura como código, comunicar conceitos eficazmente e liderar projetos de DevOps.
Requisitos:
Identificar os principais requisitos de negócios para um modelo de dados complexo e desafiador.
Alto conhecimento em arquitetura de Big Data end-to-end.
Capacidade de projetar arquitetura de Big Data (Infraestrutura, Ingestão, Armazenamento, Processamento e Serving).
Implementar um modelo de dados complexo e desafiador em um banco de dados relacional ou não relacional.
Realizar testes de integridade de dados para garantir que o modelo de dados está funcionando corretamente.
Usar ferramentas de modelagem de dados para projetar e implementar modelos de dados.
Documentar modelos de dados para facilitar a comunicação com outras partes interessadas.
Projetar e implementar modelos de dados para lidar com grandes conjuntos de dados.
Projetar e implementar modelos de dados para lidar com dados em tempo real.
Projetar e implementar modelos de dados para lidar com dados de várias fontes.
Experiência em liderar engenheiros de dados Jr. e Pleno.
Hard skills necessárias:
Python, SQL.
Azure (Data Factory, Data Lake, Synapse).
Databricks, Spark SQL, PySpark.
Nossos Incentivos:
1. Auxílio médico;
2. Wellhub;
3. Auxílio terapia;
4. Teleatendimento em Nutrição;
5. Seguro de vida;
6. Day off no dia do aniversário;
7. Parceria com instituições de ensino com desconto em cursos (Anhanguera e FIAP);
8. Gameficação interna (troque ações por prêmios);
9. English Club;
10. Reembolso + Bônus por certificação.
Entre outros
Atuação remota. 
Valorizamos cada voz e cada pessoa, porque sabemos que a diversidade nos torna mais inovadores e fortes. 

  • Engenheiro de dados azure sênior

    4 semanas atrás

    São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Papel na empresa: Construir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisões.Responsabilidades:Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de Dados...

  • Engenheiro De Dados Sênior Microsoft Azure

    Há 16 horas

    São Paulo, São Paulo, Brasil ATRA Tempo inteiro

    Vaga: Engenheiro(a) de Dados – AzureModalidade: 100% RemotaContratação: PJEstamos em busca de um(a) Engenheiro(a) de Dados Sênior para atuar em projetos desafiadores, desenvolvendo soluções de dados escaláveis e de alta performance em Azure.Responsabilidades:Desenvolver e manter pipelines de dados

  • Engenheiro de Dados

    4 semanas atrás

    São Paulo, São Paulo, Brasil Grupo Criatto Rh Tempo inteiro

    Join to apply for the Engenheiro de Dados - Sênior role at Grupo Criatto Rh Join to apply for the Engenheiro de Dados - Sênior role at Grupo Criatto Rh Estamos em busca de um Engenheiro de Dados Sênior para integrar nosso time e contribuir diretamente em projetos de grande porte e complexidade, com foco em ambientes de nuvem Microsoft...

  • Engenheiro de Dados

    4 semanas atrás

    São Paulo, São Paulo, Brasil Grupo Criatto Rh Tempo inteiro

    Join to apply for the Engenheiro de Dados - Sênior role at Grupo Criatto RhJoin to apply for the Engenheiro de Dados - Sênior role at Grupo Criatto RhEstamos em busca de um Engenheiro de Dados Sênior para integrar nosso time e contribuir diretamente em projetos de grande porte e complexidade, com foco em ambientes de nuvem Microsoft...

  • Engenheiro de dados azure sênior

    Há 2 dias

    São José dos Campos, São Paulo, Brasil Netvagas Tempo inteiro

    Papel na empresa: Construir pipelines de dados entregando modelos de dados nas camadas Bronze, Silver e Gold para o time de negócios; ter capacidade de analisar dados e tomar decisões.Responsabilidades:Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipelines de dados...

  • Engenheiro de Dados Azure Sênior

    3 semanas atrás

    São José dos Campos, São Paulo, Brasil Dataside Tempo inteiro

    Papel na empresa: Construir pipelines de dados entregando modelos de dados nas camadas Bronze, Silver e Gold para o time de negócios; ter capacidade de analisar dados e tomar decisões.Responsabilidades:Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipelines de dados...

  • Engenheiro de Dados Azure Sênior

    Há 4 dias

    São José dos Campos, São Paulo, Brasil Dataside Tempo inteiro

    Papel na empresa: Construir pipelines de dados entregando modelos de dados nas camadas Bronze, Silver e Gold para o time de negócios; ter capacidade de analisar dados e tomar decisões. Responsabilidades: Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas. Construir pipelines de...

  • Engenheiro de dados snowflake sênior

    4 semanas atrás

    São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Papel na empresa: O Engenheiro de Dados Snowflake Sênior atuará em projetos estratégicos, sendo referência técnica nas decisões de arquitetura e desenvolvimento em Snowflake. Com forte atuação consultiva, contribuirá com revisões e entregas técnicas de alto impacto, sempre alinhadas aos objetivos de negócio do cliente.Responsabilidades: Liderar...

  • Engenheiro De Dados Sênior Microsoft Azure

    Há 20 horas

    São Paulo, São Paulo, Brasil ATRA Tempo inteiro

    Vaga:Engenheiro(a) de Dados – AzureModalidade:100% RemotaContratação:PJEstamos em busca de um(a) Engenheiro(a) de Dados Sênior para atuar em projetos desafiadores, desenvolvendo soluções de dados escaláveis e de alta performance em Azure.Responsabilidades:- Desenvolver e manter pipelines de dados em Azure Data Factory, Synapse, Databricks e Microsoft...

  • Engenheiro de Dados Sênior

    Há 3 dias

    São Paulo, São Paulo, Brasil Minsait Tempo inteiro

    Join to apply for the Engenheiro de Dados Sênior role at Minsait Join to apply for the Engenheiro de Dados Sênior role at Minsait Somos aproximadamente 50k Minsaiters no Mundo e mais de 7k Minsaiters no Brasil e estamos presentes nas maiores empresas em todos os setores. Nossa estrutura permite participar de projetos globais e proporciona um ambiente...