Engenheiro de dados azure sênior

1 semana atrás


SAO JOSE DOS CAMPOS, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro
Papel na empresa:
Construir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisoes.
Responsabilidades:
Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.
Construir pipeline de Dados utilizando Azure Data Factory.
Construir nooteboks em Pyton e SQL utilizando Databricks.
Construir Modern Data Warehouse com Synpase Analytics (Serveless Dedicated).
Desenvolver Data Governance utilizando Unity Catalog ou Purview.
Trabalhar com ingestões de dados em Datalakehouse.
Definir e explicar conceitos Azure Data Factory, Synapse, Databricks e Fabric de forma crítica.
Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.
Criar e manipular dataframes e RDDs em PySpark de forma eficiente e escalável.
Usar junções de vários tipos, como junções internas, junções externas e junções naturais.
Usar subqueries de vários tipos, como subqueries de seleção, subqueries de atualização e subqueries de exclusão.
Usar funções agregadas de vários tipos, como funções de agregação de agregação.
Usar SQL com grandes conjuntos de dados.
Usar SQL para otimizar o desempenho e a escalabilidade de consultas e soluções de dados.
Usar SQL para resolver problemas complexos de dados.
Usar PySpark para realizar análise de dados exploratória (EDA) de forma eficiente e escalável.
Usar PySpark para gerar modelos de aprendizado de máquina de forma eficiente e escalável.
Usar PySpark para otimizar o desempenho de aplicações de processamento de dados.
Definir e explicar conceitos de DevOps de maneira abrangente e crítica.
Utilizar ferramentas de CI/CD para automação eficiente.
Gerenciar infraestrutura como código, comunicar conceitos eficazmente e liderar projetos de DevOps.
Requisitos:
Inglês para conversacão nível B2-C1 (Pós intermediário e Avancado).
Identificar os principais requisitos de negócios para um modelo de dados complexo e desafiador.
Alto conhecimento em arquitetura de Big Data end-to-end.
Capacidade de projetar arquitetura de Big Data (Infraestrutura, Ingestão, Armazenamento, Processamento e Serving).
Implementar um modelo de dados complexo e desafiador em um banco de dados relacional ou não relacional.
Realizar testes de integridade de dados para garantir que o modelo de dados está funcionando corretamente.
Usar ferramentas de modelagem de dados para projetar e implementar modelos de dados.
Documentar modelos de dados para facilitar a comunicação com outras partes interessadas.
Projetar e implementar modelos de dados para lidar com grandes conjuntos de dados.
Projetar e implementar modelos de dados para lidar com dados em tempo real.
Projetar e implementar modelos de dados para lidar com dados de várias fontes.
Experiëncia em liderar engenheiros de dados JR e PL.
Diferenciais:
Projetos de Big Data internacional
Liderar projetos de BI complexos e desafiadores.
Compreensão detalhada dos conceitos de Big Data e computação em nuvem, demonstrando pensamento crítico.
Experiência em projetos complexos de DB, DW, lake e lakehouse, incluindo segurança e soluções distribuídas.
Experiência em projetos complexos de ETL, liderando equipes de engenheiros de dados.
Habilidade comprovada em resolver problemas complexos de dados de forma independente e eficiente.
Adaptação rápida a mudanças e tomada de decisões informadas em ambientes dinâmicos.
Nossos Incentivos:
1. Auxílio médico;
2. Gympass;
3. Auxílio terapia;
4. Teleatendimento em Nutrição;
5. Seguro de vida;
6. Day off no dia do aniversário;
7. Parceria com instituições de ensino com desconto em cursos (Anhanguera e FIAP);
8. Gameficação interna (troque ações por prêmios);
9. Acesso a nossa plataforma de cursos SideSchool;
10. English Club;
11. Reembolso + Bônus por certificação.
Entre outros
Atuação remota.
Valorizamos cada voz e cada pessoa, porque sabemos que a diversidade nos torna mais inovadores e fortes.

  • São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Papel na EmpresaConstruir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisões.ResponsabilidadesEscrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de Dados...


  • São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Papel na EmpresaConstruir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisões.ResponsabilidadesEscrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de Dados...


  • São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Papel na EmpresaConstruir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisões.ResponsabilidadesEscrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de Dados...


  • SAO JOSE DOS CAMPOS, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Papel na empresa: Construir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisoes.Responsabilidades:Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de Dados...


  • São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Descrição da VagaEstamos procurando por um Engenheiro de Dados Azure Sênior para integrar nossa equipe em São José dos Campos, SP. O candidato ideal terá experiência em construir pipeline de dados, arquitetura de Big Data e desenvolvimento de modelos de dados.ResponsabilidadesConstrução de Pipeline de Dados: O candidato será responsável por...


  • São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Papel na empresa:Construir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisões.Responsabilidades:Desenvolver e implementar soluções de dados para atender às necessidades do negócio.Construir e manter pipelines de dados para entrega de dados em tempo...


  • São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Papel na Empresa:Construir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisões.Responsabilidades:Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de Dados...


  • São José dos Campos, São Paulo, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Papel na EmpresaConstruir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisões.ResponsabilidadesEscrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de Dados...

  • Cientista de dados sênior

    1 semana atrás


    SAO JOSE DOS CAMPOS, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Requisitos:Experiência com uso de APIs de IA Generativa, em especial Azure OpenAI (GPT).Experiência com Cognitive Search (AI Search).Experiência em Arquitetura Retrieval Augmented Generation (RAG).Experiência com Python para back-end e análise de dados. Contemplando Deploy de modelos e algoritmos em produção.Experiência com Semantic Kernel e...

  • Engenheiro de dados azure

    3 meses atrás


    São José dos Campos, Brasil Netvagas Tempo inteiro

    Papel na empresa: Construir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisoes.Responsabilidades:Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de Dados...

  • Engenheiro de Dados

    2 meses atrás


    Jaboatão dos Guararapes, Brasil Empresa de Software Tempo inteiro

    Empresa de Software admite Engenheiro de Dados em Jaboatão dos Guararapes para atuar em Tempo integral, A combinar.. Desenvolver, implementar e gerenciar a infraestrutura de dados utilizando Databricks e Azure, suportando a criação de uma plataforma de Big Data para democratização e soluções de inteligência de dados. Fornecer dados confiáveis,...


  • São José dos Campos, Brasil Netvagas Tempo inteiro

    Papel na empresa: Construir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisoes.Responsabilidades:Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.Construir pipeline de Dados...

  • Engenheiro de Dados Azure

    2 semanas atrás


    Sao Paulo Metropolitan Area, Brasil BRQ Digital Solutions Tempo inteiro

    Descrição da VagaEstamos procurando por um profissional motivado e apaixonado por tecnologia para se juntar à nossa equipe de Engenharia de Dados Azure na BRQ Digital Solutions.ResponsabilidadesDesenvolver e implementar soluções de Engenharia de Dados utilizando Microsoft Azure;Trabalhar em equipe para analisar e resolver problemas de dados...

  • Engenheiro de Dados

    1 dia atrás


    São José dos Campos, São Paulo, Brasil Empresa de serviços de tecnologia da informação Tempo inteiro

    Empresa de Serviços de Tecnologia da InformaçãoEstamos procurando por um Engenheiro de Dados para se juntar à nossa equipe em São José. O candidato ideal terá experiência em desenvolver soluções de dados e trabalhar em equipe para alcançar metas.Responsabilidades:Desenvolver soluções de dados para apoiar a tomada de decisões;Trabalhar em equipe...


  • SAO JOSE DOS CAMPOS, Brasil DATASIDE SOLUCOES EM DADOS LTDA Tempo inteiro

    Conhecimento em criação de pipelines end-to-end de Machine Learning e IA Generativa.  Requisitos: Experiência com disponibilização de modelos de Machine Learning e Deep Learning em produção utilizando conceitos e práticas de MLOps, Data Ops e Dev Ops. Experiência com Flask.Experiência com MLFlow ou ferramentas semelhantes.Experiência com Docker...

  • Engenheiro de Dados

    1 semana atrás


    campos dos goytacazes, Brasil Empresa de Tecnologia da Informação e Serviços Tempo inteiro

    Empresa de Tecnologia da Informação e Serviços admite Engenheiro de Dados em Campos dos Goytacazes.


  • Sao Paulo, Brasil Foursys Tempo inteiro

    A Foursys nasceu em 2000 com o propósito de revolucionar o mercado de TI e promover soluções inovadoras. Atendemos grandes clientes nacionais e internacionais através de nossos escritórios no Brasil e nos Estados Unidos.• Somos GPTW pelo segundo ano consecutivo• Estamos sempre abertos a novas ideias e promovemos um ambiente de inclusão, diversidade...

  • Engenheiro de dados

    Há 13 horas


    Sao Paulo, Brasil FOURSYS Tempo inteiro

    A Foursys é um time apaixonado por inovação, design e transformação digital.Somos globais, somos GPTW. ‍ ♿️ Na Foursys, celebramos a diversidade e acreditamos que são as diferentes ideias e perspectivas que nos enriquecem. Portanto, sua cor, religião, gênero, raça, nacionalidade, idade, origem, identidade de gênero, deficiência ou...

  • Engenheiro de Dados

    3 semanas atrás


    São José dos Campos, Brasil Escola de Educação Geral Tempo inteiro

    Escola de Educação Geral admite Engenheiro de Dados em São José dos Campos. Melhorar os sistemas existentes analisando oportunidades de otimização.Garantir a segurança dos dados e a conformidade com as regulamentações relevantes.

  • Engenheiro de Dados

    Há 3 dias


    Campos dos Goytacazes, RJ, Brasil Recrutamento e seleção de pessoal Tempo inteiro

    Recrutamento e seleção de pessoal admite Engenheiro de Dados em Campos dos Goytacazes.