Data Engineer | Mid
Há 4 semanas
Brasil
Compass UOL
Remoto
Tempo integral
Grátis com e-mail ou Google
Salve esta vaga e mantenha sua pesquisa organizada
Crie uma conta gratuita para salvar vagas, criar alertas e retornar a esta listagem a partir do seu painel.
Grátis com e-mail ou Google
Ao continuar, você concorda com nossos Termos & Política de Privacidade.
Responsabilidades e atribuições
Construir e manter pipelines de dados escaláveis e confiáveis;
Atuar com ingestão, transformação e modelagem de dados;
Desenvolver soluções utilizando Databricks, Spark e tecnologias de processamento distribuído;
Implementar e evoluir arquiteturas de Data Lake e Data Lakehouse;
Garantir qualidade, performance e disponibilidade dos dados;
Atuar próximo ao negócio, traduzindo requisitos e regras de negócio em soluções de dados.
Requisitos e qualificações
Sólidos conhecimentos em SQL e Python;
Experiência com modelagem de dados, incluindo Fato, Dimensão e Modelagem em Cubo;
Sólidos conhecimentos em Databricks;
Experiência com Apache Spark e processamento distribuído;
Conhecimentos em Airflow, Kafka e dbt;
Experiência com bancos de dados SQL e NoSQL, como PostgreSQL, MongoDB e Cassandra;
Conhecimentos em plataformas cloud AWS, GCP;
Experiência com arquiteturas de Data Lake e Data Lakehouse;
Capacidade de compreender rapidamente regras de negócio e transformá-las em soluções de dados.