Engenheiro De Dados Azure Sênior
Há 6 dias
Papel na empresa: Construir pipelines de dados entregando modelos de dados nas camadas Bronze, Silver e Gold para o time de negócios; ter capacidade de analisar dados e tomar decisões.Responsabilidades:Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipelines de dados utilizando Azure Data Factory.Construir notebooks em Python e SQL utilizando Databricks.Construir Modern Data Warehouse com Synapse Analytics (Serverless & Dedicated).Desenvolver Data Governance utilizando Unity Catalog ou Purview.Trabalhar com ingestões de dados em Data Lakehouse.Definir e explicar conceitos de Azure Data Factory, Synapse, Databricks e Fabric de forma crítica.Criar e manipular dataframes e RDDs em PySpark de forma eficiente e escalável.Usar junções de vários tipos, como junções internas, externas e naturais.Usar subqueries de vários tipos, como subqueries de seleção, atualização e exclusão.Usar funções agregadas de vários tipos.Utilizar SQL com grandes conjuntos de dados.Utilizar SQL para otimizar o desempenho e a escalabilidade de consultas e soluções de dados.Utilizar SQL para resolver problemas complexos de dados.Utilizar PySpark para realizar análise exploratória de dados (EDA) de forma eficiente e escalável.Utilizar PySpark para gerar modelos de aprendizado de máquina de forma eficiente e escalável.Utilizar PySpark para otimizar o desempenho de aplicações de processamento de dados.Definir e explicar conceitos de DevOps de maneira abrangente e crítica.Utilizar ferramentas de CI/CD para automação eficiente.Gerenciar infraestrutura como código, comunicar conceitos eficazmente e liderar projetos de DevOps.Requisitos:Identificar os principais requisitos de negócios para um modelo de dados complexo e desafiador.Alto conhecimento em arquitetura de Big Data end-to-end.Capacidade de projetar arquitetura de Big Data (Infraestrutura, Ingestão, Armazenamento, Processamento e Serving).Implementar um modelo de dados complexo e desafiador em um banco de dados relacional ou não relacional.Realizar testes de integridade de dados para garantir que o modelo de dados está funcionando corretamente.Usar ferramentas de modelagem de dados para projetar e implementar modelos de dados.Documentar modelos de dados para facilitar a comunicação com outras partes interessadas.Projetar e implementar modelos de dados para lidar com grandes conjuntos de dados.Projetar e implementar modelos de dados para dados em tempo real.Projetar e implementar modelos de dados para dados de várias fontes.Experiência em liderar engenheiros de dados Jr.e Pleno.Hard skills necessárias: Python, SQL, Azure (Data Factory, Data Lake, Synapse), Databricks, Spark SQL, PySpark.Nossos Incentivos:Auxílio médico;Wellhub;Auxílio terapia;Teleatendimento em Nutrição;Seguro de vida;Day off no dia do aniversário;Parceria com instituições de ensino com desconto em cursos (Anhanguera, FIAP e Instituto Infnet);Gameficação interna (troque ações por prêmios);English Club;Reembolso + Bônus por certificação.Atuação remota.Valorizamos cada voz e cada pessoa, porque sabemos que a diversidade nos torna mais inovadores e fortes.#J-*****-Ljbffr
-
Engenheiro De Dados Azure Sênior
Há 6 dias
São José dos Campos, Brasil Dataside Solucoes Em Dados Ltda Tempo inteiroPapel na empresa: Liderar soluções robustas em Azure/Databricks, definindo arquitetura, padrões e governança; acelerar times e orientar clientes para resultados mensuráveis de negócio, custo e segurança Responsabilidades: Desenhar arquitetura de referência (rede, segurança, dados e operação) e guiar sua implementação Conduzir discovery;...
-
Engenheiro de Dados Azure Sênior
Há 2 dias
São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro R$90.000 - R$120.000 por anoPapel na empresa: Liderar soluções robustas em Azure/Databricks, definindo arquitetura, padrões e governança; acelerar times e orientar clientes para resultados mensuráveis de negócio, custo e segurança Responsabilidades: Desenhar arquitetura de referência (rede, segurança, dados e operação) e guiar sua implementação Conduzir discovery;...
-
Engenheiro de Dados
2 semanas atrás
São Paulo, Brasil Grupo Criatto Rh Tempo inteiroOverview Join to apply for the Engenheiro de Dados - Sênior role at Grupo Criatto Rh . Estamos em busca de um Engenheiro de Dados Sênior para integrar nosso time e contribuir diretamente em projetos de grande porte e complexidade, com foco em ambientes de nuvem Microsoft Azure. Requisitos Experiência sólida como engenheiro de dados em projetos de grande...
-
Engenheiro de Dados Sênior
1 semana atrás
São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro R$60.000 - R$120.000 por anoPapel na empresa: Atuar no desenho, implementação e gestão de soluções de engenharia de dados em ambientes multicloud (Azure e AWS). Responsável por garantir a disponibilidade, escalabilidade e qualidade dos pipelines de dados, orientando o time em boas práticas e suportando iniciativas de Big Data e Analytics em diferentes plataformas. ...
-
Engenheiro de dados azure sênior
3 semanas atrás
SAO JOSE DOS CAMPOS, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiroPapel na empresa: Liderar soluções robustas em Azure/Databricks, definindo arquitetura, padrões e governança; acelerar times e orientar clientes para resultados mensuráveis de negócio, custo e segurança Responsabilidades: Desenhar arquitetura de referência (rede, segurança, dados e operação) e guiar sua implementação Conduzir discovery;...
-
Engenheiro de Dados Azure Sênior
Há 2 dias
São José dos Campos, São Paulo, Brasil Dataside Tempo inteiro R$90.000 - R$120.000 por anoPapel na empresa:Liderar soluções robustas em Azure/Databricks, definindo arquitetura, padrões e governança; acelerar times e orientar clientes para resultados mensuráveis de negócio, custo e segurançaResponsabilidades:Desenhar arquitetura de referência (rede, segurança, dados e operação) e guiar sua implementação Conduzir discovery; transformar...
-
Engenheiro de Dados
2 semanas atrás
São Paulo, Brasil Winnin Tempo inteiroEstamos em busca de um Engenheiro de Dados Sênior para integrar nosso time e contribuir diretamente em projetos de grande porte e complexidade, com foco em ambientes de nuvem Microsoft Azure. Experiência sólida como engenheiro de dados em projetos de grande porte; Expertise comprovada em grandes clouds (Azure, AWS ou GCP), com forte preferência por...
-
Engenheiro De Dados Sênior
Há 3 dias
São Paulo, Brasil DataEX Tempo inteiro💡 Se você é apaixonado(a) por tecnologia e pelo universo dos dados, temos uma oportunidade especial para você!Estamos em busca de um(a) Engenheiro(a) de Dados Sênior com sólida experiência em projetos estratégicos de dados em nuvem (Azure). Procuramos alguém com forte expertise técnica, capaz de desenvolver pipelines e soluções robustas de...
-
Engenheiro de dados azure sênior
3 semanas atrás
São José dos Campos, Brasil Netvagas Tempo inteiroPapel na empresa: Liderar soluções robustas em Azure/Databricks, definindo arquitetura, padrões e governança; acelerar times e orientar clientes para resultados mensuráveis de negócio, custo e segurança Responsabilidades: Desenhar arquitetura de referência (rede, segurança, dados e operação) e guiar sua implementação Conduzir discovery;...
-
Engenheiro de dados
4 semanas atrás
São Paulo, Brasil Netvagas Tempo inteiroEstamos em busca de um Engenheiro de Dados Sênior para integrar nosso time e contribuir diretamente em projetos de grande porte e complexidade, com foco em ambientes de nuvem Microsoft Azure.Requisitos:Experiência sólida como engenheiro de dados em projetos de grande porte;Expertise comprovada em grandes clouds (Azure, AWS ou GCP), com forte preferência...
