Especialista Big Data

Há 2 dias

Brasil First Decision Tempo inteiro

Descrição da Vaga:

Estamos em busca de um(a) profissional qualificado(a) de Big Data para integrar nossa equipe. O(a) candidato(a) será responsável por projetar, construir e manter soluções de Big Data e Data Lake, além de atuar em todo o pipeline de processamento e análise de dados, incluindo administração, governança e monitoramento das ferramentas.

Atividades:

Será responsável por projetar, construir e manter nossas soluções de Big Data e Data Lake, garantindo a eficiência, confiabilidade e escalabilidade dos sistemas, além de atuar ao longo de todo o pipeline de processamento e análise de dados, inclusive na administração e gestão de dados, governança de dados, monitoramento e gestão de ferramentas especializadas.

Requisitos:

- Experiência com engenharia de dados;
- Implantação, administração, otimização e troubleshooting de frameworks de Big Data em ambiente on-premises Cluster Apache Spark;
- Apache Ranger para controle de acessos e segurança do MinIO;
- Experiência em Delta Lake;
- Desenvolvimento em Python, PySpark e SQL (DDL, DML, DQL)
- Vivência em sistemas Linux (Red Hat Enterprise, Ubuntu Server)
- Experiência com containers (Dockerfile, build, run, compose, volumes, imagens);
- Conhecimento em GitLab (ou outro versionador de código similar);
- Implantação e administração de JupyterHub para múltiplos usuários.

  • Senior Big Data Engineer

    2 semanas atrás

    Brasil Sigma Software Tempo inteiro R$60.000 - R$120.000 por ano

    Company DescriptionJoin Sigma Software's AdTech Competence Center — a 300+ team of experts delivering innovative, high-load, and data-driven advertising technology solutions. Since 2008, we've been helping leading AdTech companies and startups design, build, and scale their technology products.We focus on fostering deep domain expertise, building long-term...

  • Data Analyst

    46 minutos atrás

    Brasil beBeeDataAnalysis Tempo inteiro

    Job Title: Data Analyst Job Responsibilities: Analyzing complex problems methodically and delivering results through data-driven insights. Modeling techniques to structure datasets and validate outcomes. Effective communication of technical concepts to both stakeholders and decision-makers. Managing CI/CD pipelines for seamless delivery. Familiarity with...

  • Senior data architect

    3 semanas atrás

    Brasil AGGRANDIZE Tempo inteiro

    Olá!A Aggrandize nasceu em 2015 com a missão de engrandecer pessoas e negócios . Guiados por valores como adaptabilidade, colaboração, foco no cliente e visão de dono, oferecemos soluções que transformam desafios em oportunidades. Somos especialistas em Platform Engineering , Data Analytics , Modern Applications e Cybersecurity , sempre com o...

  • Especialista em governanca de dados senior

    Há 20 horas

    Brasil G4F Tempo inteiro

    Oportunidade para Especialista em Governança de Dados Sênior (Hibrido - Brasília)A G4 F está em busca de um(a) Especialista em Governança de Dados Sênior para atuar no planejamento, estruturação e implementação de políticas, processos e práticas que garantam a qualidade, integridade, segurança e conformidade dos dados corporativos. Se...

  • Senior Data

    2 semanas atrás

    Brasil CI&T Tempo inteiro R$80.000 - R$120.000 por ano

    Somos especialistas em transformação tecnológica, unindo expertise humana à IA para criar soluções tech escaláveis. Com mais de 7.400 CI&Ters ao redor do mundo, já formamos parcerias com mais de 1.000 clientes durante nossos 30 anos de história. Inteligência Artificial é nossa realidade. Importante: se você reside na Região Metropolitana de...

  • ESPECIALISTA DE DADOS-

    3 semanas atrás

    Brasil ASSURANCE IT Tempo inteiro

    multinacional de grande porte do setor de bens de consumo, está em busca de um(a): Especialista de Dados (projeto global / integração de dados) 🚀 Vaga: Project Data Resources – o9 Implementation (Analytics & Data Integration) 📅 Duração: 11 meses (com possibilidade de extensão) 🌎 Local: Remoto – com eventuais viagens para América...

  • Especialista em Engenharia de Dados

    2 semanas atrás

    Brasil beBeeEngenheiroDeDados Tempo inteiro

    Você está à frente de uma oportunidade transformadora, liderando a evolução de nossas soluções de dados. Com nossa plataforma de dados em constante crescimento, precisamos de profissionais experientes e criativos para nos ajudar a alcançar os próximos patamares. Sobre o cargo Nossa equipe de engenharia de dados busca um especialista para desempenhar...

  • Senior data engineer

    3 semanas atrás

    Brasil Pride Global Tempo inteiro

    We're Hiring: Senior Data Engineer | Remote from Brazil | Fluent English required | Location : Remote – Brazil only Contact: Temporary Are you passionate about building scalable data platforms and cutting-edge MLOps solutions? Do you want to work with a top-tier US company revolutionizing e-commerce and circular fashion? We're looking for a Senior Data...

  • Gcp data engineer

    Há 5 dias

    Brasil Tata Consultancy Services Tempo inteiro

    Come to one of the biggest IT Services companies in the world!! Here you can transform your career! Why to join TCS? Here at TCS we believe that people make the difference, that's why we live a culture of unlimited learning full of opportunities for improvement and mutual development. The ideal scenario to expand ideas through the right tools, contributing...

  • Especialista em dados mestres

    Há 20 horas

    Brasil Tata Consultancy Services Tempo inteiro

    Faça parte de uma das maiores empresas de serviços de TI do mundo! Aqui você transforma a sua carreira!Por que entrar na TCS? Aqui na TCS acreditamos que as pessoas fazem a diferença, é por isso que vivemos uma cultura de aprendizado ilimitado, cheia de oportunidades de melhoria, e desenvolvimento mútuo. O cenário ideal para expandir ideias através...