Engenheiro De Dados Azure Sênior
Há 4 dias
Papel na empresa: Construir pipelines de dados entregando modelos de dados nas camadas Bronze, Silver e Gold para o time de negócios; ter capacidade de analisar dados e tomar decisões.Responsabilidades:Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipelines de dados utilizando Azure Data Factory.Construir notebooks em Python e SQL utilizando Databricks.Construir Modern Data Warehouse com Synapse Analytics (Serverless & Dedicated).
Desenvolver Data Governance utilizando Unity Catalog ou Purview.Trabalhar com ingestões de dados em Data Lakehouse.Definir e explicar conceitos de Azure Data Factory, Synapse, Databricks e Fabric de forma crítica.Criar e manipular dataframes e RDDs em PySpark de forma eficiente e escalável.Usar junções de vários tipos, como junções internas, externas e naturais.Usar subqueries de vários tipos, como subqueries de seleção, atualização e exclusão.Usar funções agregadas de vários tipos.Utilizar SQL com grandes conjuntos de dados.Utilizar SQL para otimizar o desempenho e a escalabilidade de consultas e soluções de dados.Utilizar SQL para resolver problemas complexos de dados.Utilizar PySpark para realizar análise exploratória de dados (EDA) de forma eficiente e escalável.Utilizar PySpark para gerar modelos de aprendizado de máquina de forma eficiente e escalável.Utilizar PySpark para otimizar o desempenho de aplicações de processamento de dados.Definir e explicar conceitos de DevOps de maneira abrangente e crítica.Utilizar ferramentas de CI/CD para automação eficiente.Gerenciar infraestrutura como código, comunicar conceitos eficazmente e liderar projetos de DevOps.Requisitos:Identificar os principais requisitos de negócios para um modelo de dados complexo e desafiador.Alto conhecimento em arquitetura de Big Data end-to-end.Capacidade de projetar arquitetura de Big Data (Infraestrutura, Ingestão, Armazenamento, Processamento e Serving).
Implementar um modelo de dados complexo e desafiador em um banco de dados relacional ou não relacional.Realizar testes de integridade de dados para garantir que o modelo de dados está funcionando corretamente.Usar ferramentas de modelagem de dados para projetar e implementar modelos de dados.Documentar modelos de dados para facilitar a comunicação com outras partes interessadas.Projetar e implementar modelos de dados para lidar com grandes conjuntos de dados.Projetar e implementar modelos de dados para dados em tempo real.Projetar e implementar modelos de dados para dados de várias fontes.Experiência em liderar engenheiros de dados Jr.
e Pleno.Hard skills necessárias: Python, SQL, Azure (Data Factory, Data Lake, Synapse), Databricks, Spark SQL, PySpark.Nossos Incentivos:Auxílio médico;Wellhub;Auxílio terapia;Teleatendimento em Nutrição;Seguro de vida;Day off no dia do aniversário;Parceria com instituições de ensino com desconto em cursos (Anhanguera, FIAP e Instituto Infnet);Gameficação interna (troque ações por prêmios);English Club;Reembolso + Bônus por certificação.Atuação remota.Valorizamos cada voz e cada pessoa, porque sabemos que a diversidade nos torna mais inovadores e fortes.
#J-18808-Ljbffr
-
Engenheiro De Dados Sênior
3 semanas atrás
Belém, Pará, Brasil buscojobs Brasil Tempo inteiroResumo Engenheiro de Dados Databricks Resource for SAP Conhecimentos Técnicos Requeridos Conhecimentos Técnicos Requeridos : Desenvolvimento de pipeline de dados : projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de dados. Integração de dados : integre dados de várias...
-
Engenheiro De Dados Sênior
3 semanas atrás
Belém, Pará, Brasil buscojobs Brasil Tempo inteiroResumoEngenheiro de Dados Databricks Resource for SAPConhecimentos Técnicos RequeridosConhecimentos Técnicos Requeridos :Desenvolvimento de pipeline de dados : projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de dados.Integração de dados : integre dados de várias fontes...
-
Belém, Brasil Winnin Tempo inteiroComo Engenheiro (a) de Dados Cloud você irá atuar em cliente de grande porte, com oportunidade de crescimento em frentes diversas na área de dados voltados para o segmento financeiro. Você poderá contar com ferramentas, conhecimentos e oportunidades para avançar e estar pronto/a para construir um mundo de negócios melhor para nossas pessoas, clientes...
-
Engenheiro(A) De Dados
3 semanas atrás
Belém, Pará, Brasil buscojobs Brasil Tempo inteiroVisão geral Desenvolver Arquitetura e fluxo de Dados robusta e escalável, que suporte os times de dados e negócios, democratizando o acesso aos dados, de forma segura, simples, estruturada e com qualidade. O que você precisa para fazer parte deste time O que você precisa para fazer parte deste time : Experiência com implantação de arquitetura de...
-
Engenheiro(A) De Dados
3 semanas atrás
Belém, Pará, Brasil buscojobs Brasil Tempo inteiroVisão geralDesenvolver Arquitetura e fluxo de Dados robusta e escalável, que suporte os times de dados e negócios, democratizando o acesso aos dados, de forma segura, simples, estruturada e com qualidade.O que você precisa para fazer parte deste timeO que você precisa para fazer parte deste time :Experiência com implantação de arquitetura de dados e...
-
Arquiteto a de solucoes stack microsoft azure senior
1 semana atrás
Belém, Brasil Netvagas Tempo inteiroOverview Join to apply for the Arquiteto a de solucoes stack microsoft azure senior role at Netvagas 1 week ago Be among the first 25 applicants 100% REMOTO Idioma: INGLÊS AVANÇADO ( COMUNICAR TIME EUA) Tipo de Contrato: PJ TEMPO: 1 ANO PODENDO PRORROGAR. Estamos em busca de um(a) Arquiteto(a) de Soluções altamente experiente para atuar em...
-
Desenvolvedor a java senior aks
1 semana atrás
Belém, Brasil Netvagas Tempo inteiroAtividades a Serem Realizadas Apoiar em integrações com sistemas proprietários Desenvolvimento de soluções técnicas de alta complexidade Criação de testes de alta complexidade, sejam manuais ou automatizados Documentar tecnicamente etapas desenvolvidas Orientar, capacitar e trabalhar com o time de desenvolvimento Garantir a qualidade do...
-
Especialista Em Dados
2 semanas atrás
Belém, Brasil buscojobs Brasil Tempo inteiroLocalidade : Remoto (Brasil) Modelo de contratação : PJ Horário : Integral (8h / dia) Duração do projeto : 4 a 6 meses, com possibilidade de extensão Nível : Pleno-Sênior Resumo da Oportunidade Estamos em busca de Especialistas em Dados Pleno-Sênior para diferentes oportunidades, atuando em projetos analíticos e de transformação de dados...
-
Engenheiro De Dados Gcp Sr
3 semanas atrás
Belém, Pará, Brasil buscojobs Brasil Tempo inteiroEmpregos para Engenheiro de dados gcp sr - San...A Apgar está em busca de um Arquiteto de Dados especializado em Google Cloud Platform, para se juntar ao nosso time em crescimento no Brasil. A posição é híbrida em Porto Alegre ou remota desde as restantes localizações do Brasil.Você fará parte de uma equipe global que entrega soluções de...
-
Product Owner/Líder Técnico Sênior – Dados
3 semanas atrás
Belém, Pará, Brasil buscojobs Brasil Tempo inteiroOverviewEstamos em busca de um(a) Product Owner / Líder Técnico para atuar em projetos estratégicos de Dados & Analytics, garantindo o alinhamento entre prioridades de negócio e execução técnica.ResponsibilitiesAtuar como ponte entre áreas de negócio e squad técnica, traduzindo requisitos em entregas viáveis.Priorizar demandas e gerenciar backlog...
