
Engenheiro de Dados Transformador
Há 5 dias
Careira em tecnologia
O que você precisa saberProcuramos alguém motivado por desafios e constante evolução. Queremos alguém apaixonado por transformação.
Requisitos:- Forte conhecimento em Analytics com AWS e Spark
- Desenvolvimento de jobs ETL no AWS Glue para transformação entre camadas utilizando PySpark
- Implementação das camadas Bronze, Prata e Ouro no Amazon S3
- Configuração de Glue Crawlers e Data Catalog para as camadas Prata e Ouro
- Experiência em orquestração com ferramentas como Step Functions, EventBridge
- Configuração de Kinesis Data Streams e Kinesis Firehose
- Configuração do Amazon Athena para consultas analíticas
- Experiência com ferramentas de deploy como github, terraform
- Testes de performance de processamento e consultas
- Validação de formatos de dados para integração com aplicações
- Desejável: conhecimento em criação de dashboards no Quicksight
-
Engenheiro De Dados
3 semanas atrás
Curitiba, Paraná, Brasil Ewave do Brasil Tempo inteiroVocê fará parte de um dos capítulos de Engenheiros de Dados em Curitiba-PR, Brasil, integrante da comunidade global de Engenheiros de Dados da função Digital & IT Data. Além disso, atuará no desenvolvimento de soluções de dados em um time dentro da área de Analytics & BI – Produto de Dados. Requisitos obrigatórios:Formação acadêmica em uma...
-
Engenheiro De Dados
Há 4 dias
Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiroRequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion.Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse.Sólida experiência com Databricks e linguagens de script como Spark SQL e...
-
Engenheiro de Dados
3 semanas atrás
Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiroRequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....
-
Engenheiro de Dados
Há 3 dias
Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiroRequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....
-
Engenheiro de Dados
Há 4 dias
Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiroRequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....
-
Engenheiro de Dados
4 semanas atrás
Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiroRequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....
-
Engenheiro de Dados
4 semanas atrás
Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiroRequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....
-
Engenheiro de Dados
4 semanas atrás
Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiroRequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....
-
Engenheiro de Dados
Há 6 dias
Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiroRequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....
-
Engenheiro de Dados
1 semana atrás
Curitiba, Paraná, Brasil Blend It Consultoria Tempo inteiroRequisitosPelo menos 5 anos de experiência como engenheiro de dadosExperiência com DatabricksExperiência na implementação da arquitetura de dados Medallion. Conhecimento profundo de stacks de engenharia de dados do Azure, Data Factory, Data Lake Storage e Synapse. Sólida experiência com Databricks e linguagens de script como Spark SQL e PySpark....