Engenheiro De Dados Azure Sênior
Há 7 dias
Papel na empresa:Construir pipelines de dados entregando modelos de dados nas camadas Bronze, Silver e Gold para o time de negócios; ter capacidade de analisar dados e tomar decisões.Responsabilidades:Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipelines de dados utilizando Azure Data Factory.Construir notebooks em Python e SQL utilizando Databricks.Construir Modern Data Warehouse com Synapse Analytics (Serverless & Dedicated).Desenvolver Data Governance utilizando Unity Catalog ou Purview.Trabalhar com ingestões de dados em Data Lakehouse.Definir e explicar conceitos de Azure Data Factory, Synapse, Databricks e Fabric de forma crítica.Criar e manipular dataframes e RDDs em PySpark de forma eficiente e escalável.Usar junções de vários tipos, como junções internas, externas e naturais.Usar subqueries de vários tipos, como subqueries de seleção, atualização e exclusão.Usar funções agregadas de vários tipos.Utilizar SQL com grandes conjuntos de dados.Utilizar SQL para otimizar o desempenho e a escalabilidade de consultas e soluções de dados.Utilizar SQL para resolver problemas complexos de dados.Utilizar PySpark para realizar análise exploratória de dados (EDA) de forma eficiente e escalável.Utilizar PySpark para gerar modelos de aprendizado de máquina de forma eficiente e escalável.Utilizar PySpark para otimizar o desempenho de aplicações de processamento de dados.Definir e explicar conceitos de DevOps de maneira abrangente e crítica.Utilizar ferramentas de CI/CD para automação eficiente.Gerenciar infraestrutura como código, comunicar conceitos eficazmente e liderar projetos de DevOps.Requisitos:Identificar os principais requisitos de negócios para um modelo de dados complexo e desafiador.Alto conhecimento em arquitetura de Big Data end-to-end.Capacidade de projetar arquitetura de Big Data (Infraestrutura, Ingestão, Armazenamento, Processamento e Serving).Implementar um modelo de dados complexo e desafiador em um banco de dados relacional ou não relacional.Realizar testes de integridade de dados para garantir que o modelo de dados está funcionando corretamente.Usar ferramentas de modelagem de dados para projetar e implementar modelos de dados.Documentar modelos de dados para facilitar a comunicação com outras partes interessadas.Projetar e implementar modelos de dados para lidar com grandes conjuntos de dados.Projetar e implementar modelos de dados para dados em tempo real.Projetar e implementar modelos de dados para dados de várias fontes.Experiência em liderar engenheiros de dados Jr.e Pleno.Hard skills necessárias:Python, SQL, Azure (Data Factory, Data Lake, Synapse), Databricks, Spark SQL, PySpark.Nossos Incentivos:Auxílio médico;Wellhub;Auxílio terapia;Teleatendimento em Nutrição;Seguro de vida;Day off no dia do aniversário;Parceria com instituições de ensino com desconto em cursos (Anhanguera, FIAP e Instituto Infnet);Gameficação interna (troque ações por prêmios);English Club;Reembolso + Bônus por certificação.Atuação remota.Valorizamos cada voz e cada pessoa, porque sabemos que a diversidade nos torna mais inovadores e fortes.#J-*****-Ljbffr
-
Engenheiro de Dados Azure Sênior
Há 2 dias
São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro R$90.000 - R$120.000 por anoPapel na empresa: Liderar soluções robustas em Azure/Databricks, definindo arquitetura, padrões e governança; acelerar times e orientar clientes para resultados mensuráveis de negócio, custo e segurança Responsabilidades: Desenhar arquitetura de referência (rede, segurança, dados e operação) e guiar sua implementação Conduzir discovery;...
-
Engenheiro(a) de Dados
3 semanas atrás
São José dos Campos, Brasil Objective Tempo inteiroSomos ávidos por tecnologia, criatividade e desafios. Se você gosta de desafios, aprendizado constante e valoriza as conexões pessoais, junte-se a nós! # Valorizamos a diversidade e acreditamos que ela é fundamental para a inovação e entregas de valor aos nossos clientes. Todas as nossas vagas são destinadas a todas as pessoas, com ou sem...
-
Engenheiro de Dados Sênior
1 semana atrás
São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro R$60.000 - R$120.000 por anoPapel na empresa: Atuar no desenho, implementação e gestão de soluções de engenharia de dados em ambientes multicloud (Azure e AWS). Responsável por garantir a disponibilidade, escalabilidade e qualidade dos pipelines de dados, orientando o time em boas práticas e suportando iniciativas de Big Data e Analytics em diferentes plataformas. ...
-
Engenheiro de dados azure sênior
4 semanas atrás
SAO JOSE DOS CAMPOS, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiroPapel na empresa: Construir pipelines de dados entregando modelos de dados nas camadas Bronze, Silver e Gold para o time de negócios; ter capacidade de analisar dados e tomar decisões.Responsabilidades:Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipelines de dados...
-
Engenheiro de dados azure sênior
Há 21 horas
SAO JOSE DOS CAMPOS, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiroPapel na empresa: Liderar soluções robustas em Azure/Databricks, definindo arquitetura, padrões e governança; acelerar times e orientar clientes para resultados mensuráveis de negócio, custo e segurança Responsabilidades: Desenhar arquitetura de referência (rede, segurança, dados e operação) e guiar sua implementação Conduzir discovery;...
-
Engenheiro de Dados Azure Sênior
Há 2 dias
São José dos Campos, São Paulo, Brasil Dataside Tempo inteiro R$90.000 - R$120.000 por anoPapel na empresa:Liderar soluções robustas em Azure/Databricks, definindo arquitetura, padrões e governança; acelerar times e orientar clientes para resultados mensuráveis de negócio, custo e segurançaResponsabilidades:Desenhar arquitetura de referência (rede, segurança, dados e operação) e guiar sua implementação Conduzir discovery; transformar...
-
Engenheiro de dados azure
2 semanas atrás
São Paulo, Brasil Netvagas Tempo inteiroEngenheiro de Dados AzureRequisitos:Experiência com Python, Pyspark, Databricks, banco de dados SQL e NoSQL e Cloud Azure.Diferencial: experiência em IA Generativa.
-
Engenheiro de dados
Há 3 dias
São Paulo, Brasil Netvagas Tempo inteiroEstamos em busca de um Engenheiro de Dados Sênior para integrar nosso time e contribuir diretamente em projetos de grande porte e complexidade, com foco em ambientes de nuvem Microsoft Azure.Requisitos:Experiência sólida como engenheiro de dados em projetos de grande porte;Expertise comprovada em grandes clouds (Azure, AWS ou GCP), com forte preferência...
-
Engenheiro De Dados
Há 2 dias
São Paulo, Brasil WISERCORP Tempo inteiroEngenheiro de Dados Sênior – Azure Requisitos: - Experiência prática com Azure Data Factory, Databricks, Data Lake, Python, SQL Server e Azure Cloud; - Histórico de atuação em projetos ágeis (Scrum/Kanban); - Inglês fluente(para comunicação com times e stakeholders globais). Atividades: - Projetar, desenvolver e otimizar pipelines de dados na...
-
Engenheiro de dados azure sênior
Há 3 dias
São José dos Campos, Brasil Netvagas Tempo inteiroPapel na empresa: Liderar soluções robustas em Azure/Databricks, definindo arquitetura, padrões e governança; acelerar times e orientar clientes para resultados mensuráveis de negócio, custo e segurança Responsabilidades: Desenhar arquitetura de referência (rede, segurança, dados e operação) e guiar sua implementação Conduzir discovery;...
