Especialista Big Data

Há 4 dias

Brazil, BR First Decision Tempo inteiro

Descrição da Vaga:

Estamos em busca de um(a) profissional qualificado(a) de Big Data para integrar nossa equipe. O(a) candidato(a) será responsável por projetar, construir e manter soluções de Big Data e Data Lake, além de atuar em todo o pipeline de processamento e análise de dados, incluindo administração, governança e monitoramento das ferramentas.


Atividades:

Será responsável por projetar, construir e manter nossas soluções de Big Data e Data Lake, garantindo a eficiência, confiabilidade e escalabilidade dos sistemas, além de atuar ao longo de todo o pipeline de processamento e análise de dados, inclusive na administração e gestão de dados, governança de dados, monitoramento e gestão de ferramentas especializadas.


Requisitos:

  • Experiência com engenharia de dados;
  • Implantação, administração, otimização e troubleshooting de frameworks de Big Data em ambiente on-premises Cluster Apache Spark;
  • Apache Ranger para controle de acessos e segurança do MinIO;
  • Experiência em Delta Lake;
  • Desenvolvimento em Python, PySpark e SQL (DDL, DML, DQL)
  • Vivência em sistemas Linux (Red Hat Enterprise, Ubuntu Server)
  • Experiência com containers (Dockerfile, build, run, compose, volumes, imagens);
  • Conhecimento em GitLab (ou outro versionador de código similar);
  • Implantação e administração de JupyterHub para múltiplos usuários.

  • Senior Data Engineer

    2 semanas atrás

    Brazil, BR Pride Global Tempo inteiro

    We're Hiring: Senior Data Engineer | Remote from Brazil | Fluent English required | Location: Remote – Brazil onlyContact: TemporaryAre you passionate about building scalable data platforms and cutting-edge MLOps solutions? Do you want to work with a top-tier US company revolutionizing e-commerce and circular fashion?We're looking for a Senior Data...

  • Data Consultant Brazil

    2 semanas atrás

    Brazil, BR Artefact Tempo inteiro

    The current vacancy is for the Brazilian office and we work in a Free Office model. Who we areAt Artefact LatAm, we believe in and live a culture based on empathy!A healthy work environment is a place where all voices are heard, respected, and valued.Our commitment is to build a more diverse and inclusive environment, because empathy is for everyone,...

  • Data Engineer

    Há 4 dias

    Brazil, BR HeartCentrix Solutions Tempo inteiro

    We are seeking a highly skilled Python Data Engineer with an AI/ML focus to join our client’s growing data & analytics team in Brazil. This role is ideal for someone who loves building scalable data pipelines, operationalizing machine learning workflows, and partnering closely with data scientists to bring models into production.You will design, develop,...

  • Data Scientist

    2 semanas atrás

    Brazil, BR Tata Consultancy Services Tempo inteiro

    Come to one of the biggest IT Services companies in the world!! Here you can transform your career!Why to join TCS? Here at TCS we believe that people make the difference, that's why we live a culture of unlimited learning full of opportunities for improvement and mutual development. The ideal scenario to expand ideas through the right tools, contributing to...

  • Senior Data Engineer

    2 semanas atrás

    Brazil, BR Eightpoint Tempo inteiro

    About EightpointEightpoint is an internet technology company specializing in the agile development of products and content that address real-world interests, captivating users and driving significant growth for partners. With offices in the United States and Cayman Islands, Eightpoint collaborates with partners globally on the next generation of user-centric...

  • Data Engineer

    2 semanas atrás

    Brazil, BR Artefact Tempo inteiro

    The current vacancy is for the Brazilian office and we work in a Free Office model. Who we areAt Artefact LatAm, we believe in and live a culture based on empathy!A healthy work environment is a place where all voices are heard, respected, and valued.Our commitment is to build a more diverse and inclusive environment, because empathy is for everyone,...

  • Data Architect, Analytics Services

    2 semanas atrás

    Brazil, BR GFT Technologies Brasil Tempo inteiro

    Já conhece a GFT?Com mais de 35 anos de mercado e localizada em 16 países, a GFT emprega mais de 12.000 pessoas ao redor do mundo sendo quase 5.000 pessoas no Brasil.Aqui, a diversidade, a igualdade e a inclusão estão no centro e garantir um ambiente de trabalho seguro para todas as pessoas faz parte de quem somos.Promovemos uma cultura de...

  • Data Scientist

    2 semanas atrás

    Brazil, BR Artefact Tempo inteiro

    The current vacancy is for the Brazilian office and we work in a Free Office model. Who we areAt Artefact LatAm, we believe in and live a culture based on empathy!A healthy work environment is a place where all voices are heard, respected, and valued.Our commitment is to build a more diverse and inclusive environment, because empathy is for everyone,...

  • Líder Técnico III

    2 semanas atrás

    Brazil, BR Instituto Nacional de Telecomunicações - Inatel Tempo inteiro

    O Inatel está recrutando Especialista para atuar na liderança técnica de projetos de Inteligência Artificial, com foco em Visão Computacional, no Inatel Competence Center - PDI SW.Responsabilidades e atribuiçõesDefinir a estratégia técnica do projeto, desenvolver e comunicando uma visão clara e estratégica para a aplicação de Inteligência...

  • Arquiteto de Dados/Engenheiro de Dados Databricks

    Há 4 dias

    Brazil, BR SysMap Solutions Tempo inteiro

    Descrição:Estamos em busca de um Arquiteto de Dados Especialista para se juntar à nossa equipe em São Paulo, SP, no formato remoto. O candidato ideal terá ampla experiência em Data & Analytics, arquitetura de dados, visão holística, conhecimento de governança de dados, plataforma Databricks, pipelines avançados e melhores práticas de gestão para...