AWS Data Engineer

Há 2 dias

Remoto, Brasil Compass Uol Tempo inteiro

.

Responsabilidades e atribuições

  • Desenvolver e manter pipelines de dados escaláveis na AWS;
  • Migrar dados e workloads de GCP e On-Premise para AWS, garantindo segurança e integridade;
  • Orquestrar e validar dados com Apache Airflow (DAGs);
  • Implementar pipelines de streaming em tempo real com Apache Kafka;
  • Realizar transformações e modelagem de dados com DBT, assegurando qualidade e governança;
  • Atuar com Snowflake para modelagem e otimização analítica;
  • Monitorar performance, promovendo otimização de custos e eficiência;
  • Trabalhar em ambientes containerizados com Kubernetes;
  • Colaborar com times técnicos e de negócio, atendendo requisitos e compliance;
  • Aplicar boas práticas de DevSecOps, segurança da informação e governança de dados.

Requisitos e qualificações

  • Experiência sólida com Apache Airflow;
  • Experiência com Apache Kafka;
  • Experiência com DBT;
  • Experiência com Kubernetes;
  • Experiência com Snowflake;
  • Sólidos conhecimentos em SQL (modelagem, consultas e otimização);
  • Experiência em projetos de migração de dados para AWS;
  • Vivência em ambientes de dados de grande escala e alta criticidade.

Diferencial: Experiência com EC2, EKS e S3 na AWS, conhecimento em CloudWatch e IAM, experiência com AWS Lambda, vivência com Docker e ambientes conteinerizados, experiência com GitHub e GitLab, atuação em metodologias ágeis, conhecimentos em segurança de dados, experiência com Terraform (Infraestrutura como Código).

Não possui todos os requisitos para a vaga?

Está tudo bem Na Compass UOL, estimulamos o desenvolvimento contínuo de novos talentos e transformamos desafios em oportunidades.

Informações adicionais

remote

"remote"

Compass UOL is a global firm and part of the AI Revolution Company, together transforming organizations using Artificial Intelligence, Generative AI, and other of today's most advanced technologies.

We equip our team with proprietary and external AI-driven tools to design and build digital-native platforms, integrating cutting-edge technologies and enabling companies to innovate, transform their businesses, and drive success in their markets.

To achieve this, we attract and develop the best talent, creating opportunities that enhance people's lives and highlight the positive impact of disruptive technologies.

We empower borderless talent and promote knowledge and opportunities in the latest market trends, driving significant personal and professional growth.

Join us and be part of the AI-driven revolution.

  • AWS AI Engineer

    Há 2 dias

    Remoto, Brasil Compass Uol Tempo inteiro

    .Responsabilidades e atribuições Projetar e desenvolver uma plataforma de agentes conversacionais capaz de capturar informações em linguagem natural;Implementar mecanismos de extração, correlação e validação de campos obrigatórios, garantindo consistência e qualidade dos dados;Gerar estruturas formais (JSON) para integração com sistemas...

  • Data Engineer

    Há 2 dias

    Remoto, Brasil Compass Uol Tempo inteiro

    .Responsabilidades e atribuições Garantir a execução estável e controlada das rotinas de dados, assegurando que os pipelines de ingestão, transformação e disponibilização de dados sejam executados conforme o planejado;Identificar incidentes, analisar, comunicar e tratar dentro do SLA;Manter o ambiente íntegro e disponível para consumo analítico...

  • DevOps Engineer

    Há 2 dias

    Remoto, Brasil Digisystem Tempo inteiro

    Descrição da vagaEstamos em busca de um(a) DevOps Engineer para atuar na automação, sustentação e evolução de ambientes de infraestrutura e pipelines de entrega contínua. A pessoa será responsável por garantir estabilidade, segurança e escalabilidade dos sistemas, trabalhando em conjunto com times de desenvolvimento e...

  • Data Management Engineer

    Há 2 dias

    Remoto, Brasil Pantheon Tempo inteiro

    Atividades / ResponsabilidadesGerenciar e prestar suporte à ferramenta de modelagem de dados ER/Studio.Administrar servidores on-premises e em nuvem.Realizar monitoramento de ambientes (local e cloud) utilizando Datadog.Apoiar iniciativas de automação de processos para ganho de eficiência operacional.Atuar em melhorias contínuas de observabilidade,...

  • Full Stack Engineer

    Há 2 dias

    Remoto, Brasil JUST A LITTLE DATA Tempo inteiro

    Buscamos um(a) Full Stack Engineer altamente capacitado(a), com visão sistêmica e foco em performance e escalabilidade, para atuar no desenvolvimento de aplicações web modernas. Esse profissional será responsável por construir soluções ponta-a-ponta, desde o design da arquitetura, implementação de APIs e integração com serviços em nuvem, até o...

  • Spark Data Engineer

    Há 2 dias

    Remoto, Brasil Compass Uol Tempo inteiro

    .Responsabilidades e atribuições Analisar rotinas SAS legadas;Atuar na reescrita e adaptação dos programas SAS para tecnologias do ecossistema de dados;Executar testes necessários, identificando inconsistências e efetuando a correção;Atuar no processo de validação funcional e técnica, comparando resultados entre o legado SAS e a nova...

  • Data Scientist II

    Há 2 dias

    Remoto, Brasil e-Core Tempo inteiro

    Be yourself, be your bestCombinamos nossa experiência global em indústrias-chave e as últimas tecnologias para ajudar empresas em rápido crescimento e estabelecidas a transformar e acelerar seus modelos de negócios, desenvolver soluções digitais inovadoras, escalar capacidades tecnológicas e sustentar seu crescimento.O que você fará nessa...

  • Databricks Data Engineer

    Há 2 dias

    Remoto, Brasil Compass Uol Tempo inteiro

    .Responsabilidades e atribuições Atuar na migração e evolução da Camada Gold;Desenvolver e otimizar pipelines no Databrick;Implementar modelagem dimensional para analytics e B;Garantir a qualidade, governança e consistência dos dados na Camada Gol;Atuar em conjunto com times de negócio e BI para definição e evolução dos modelos...

  • Data Engineer Sênior

    Há 2 dias

    Remoto, Brasil Compass Uol Tempo inteiro

    .Responsabilidades e atribuições Garantia do monitoramento sobre a Qualidade dos Dados: Implementar processos para monitorar a precisão, consistência e integridade dos dados;Segurança dos Dados: Proteger os dados contra acessos não autorizados através de medidas de segurança como criptografia e controle de acesso;Colaboração com Equipes: Trabalhar...

  • Data & AI Manager/Master

    Há 2 dias

    Remoto, Brasil Ci&T Tempo inteiro

    Somos especialistas em transformação tecnológica, unindo expertise humana à IA para criar soluções tech escaláveis. Com mais de 8,000 CI&Ters ao redor do mundo, já formamos parcerias com mais de 1,000 clientes durante nossos 30 anos de história. Inteligência Artificial é nossa realidade.Importante: se você reside na Região Metropolitana de...