Engenheiro de dados aws pleno

Required Skills: Python -> Pandas, Boto3 Scala -> Spark, SBT Cloud -> AWS: Glue, Athena, Lakeformation (administrators), Lambda Terraform -> AWS Provider Data Modeling Knowledge Git Optional Skills: Platform -> Databricks Docker gitlab ci O que esperamos que você realize: O Engenheiro de Dados será responsável por desenvolver e manter pipelines de dados...

Conhecimento do ambiente AWS (S3, EMR, Athena, Lambda, SQS, AWS Glue, RDS, Redshift, DynamoDB, etc). Airflow. Processamento de dados: SQL, PySpark, Presto, Hive. Linguagens de programação: Python, Javascript. Ferramentas de gerenciamento de código-fonte: Git. Desejável conhecimento com Migração Datalake. Criar e manter pipelines de processamento de...

Graduação Superior Completa (Ciências da Computação, Engenharia da Computação, Sistemas de Informação ou áreas correlatas) Sólida experiência e vivência prática na criação e manutenção de pipelines de dados Domínio em linguagem de programação (SQL, Spark , PySpark e Python) Experiência com integração de Databricks em ambiente de nuvem...

Descubra a oportunidade perfeita em Gupy, onde podemos oferecer uma carreira repleta de desafios e crescimento profissional.Oportunidades de DesenvolvimentoComo Engenheiro(a) de Dados, você terá a responsabilidade de construir, sustentar e evoluir a infraestrutura do Data Lake. Além disso, será necessário implementar sistemas e rotinas de monitoramento,...

Apoiamos uma provedora líder de serviços de aumento de pessoal nearshore, localizada em Nova York. Nossa equipe de 500 talentos de tecnologia está impulsionando a disrupção digital da América Latina para os principais projetos em empresas dos EUA.  A Truelogic tem ajudado empresas de todos os tamanhos a atingir suas metas de transformação...

Experiência comprovada como Engenheiro de Dados ou em posição similar. Proficiência em ferramentas de ETL (ex.: Apache NiFi, Talend, Informatica). Sólidos conhecimentos em bancos de dados relacionais e NoSQL (ex.: PostgreSQL, MongoDB). Experiência com tecnologias de Big Data (ex.: Hadoop, Spark, Kafka). Proficiência em linguagens de programação como...

Experiência comprovada na implementação e manutenção de soluções utilizando a plataforma Databricks. Experiência com integração de Databricks em ambiente de nuvem AWS. Conhecimento sólido em linguagens de programação como Python e SQL. Experiência em design e implementação de arquiteturas de dados distribuídas. Familiaridade com ferramentas...

Requisitos e qualificações:  O que esperamos de você para essa vaga:   Superior Completo em Sistemas de Informação, Engenharia da Computação ou Ciência da Computação ou curso correlato; Conhecimento em ETL (SSIS e DataStage); Conhecimento de arquitetura Streaming e ferramentas; Desenvolvimento e manutenção de Banco de dados; Python, SQL Ansi,...

O Cortex está procurando por um engenheiro de dados experiente para se juntar a nossa equipe.Sobre a VagaEstamos oferecendo uma oportunidade excelente para alguém que deseja trabalhar com tecnologia e contribuir para o sucesso da empresa.SalárioR$ 12.000,00 a R$ 18.000,00 por mês.Descrição do CargoDesenvolver e manter pipelines de dados utilizando...

Ferramentas de versionamento: Exemplo Git. Construção de pipelines de processamento utilizando EMR Serverless e PySpark para manipulação e transformação de dados em larga escala; Desenvolvimento e gerenciamento de modelos analíticos e transformações de dados com dbt (data build tool); Integração e armazenamento de dados em Amazon S3 e análise de...

Superior completo em Engenharia, TI ou áreas correlatas. Desejável especialização em engenharia de dados. Conhecimento avançado em ferramentas de engenharia de dados (SQL, GCP, Aws, Azure ou outra ferramenta voltada a engenharia de dados). Conhecimento intermediário em ferramentas de análise/ciência de dados (Python, R, etc.). Experiência...

Descrição da VagaNossa empresa, Zallpy Digital, está em busca de um Engenheiro de Dados Seniorm/Arquiteto de Tecnologia de Dados, para compor nossa equipe de tecnologia e liderar a transformação digital. Nesta posição, você será o responsável por apoiar analistas de dados em temas avançados de engenharia de dados, atuar como ponto-chave para a...

- Google Cloud Platform (GCP); - Programação (Python, SQL, etc.); - Conhecimento em Big Data e ferramentas como Hadoop e Spark. Engenheiro de Dados para Sustentação de Pipelines GCP Pipeline de Dados: - Criar e manter pipelines ETL (extração, transformação e carregamento); - Coletar dados brutos de diferentes fontes; - Transformar os dados em um...

RESPONSABILIDADES E ATRIBUIÇÕESComo Engenheiro de Dados Sênior, você irá:  Conhecer, entender e se envolver com os problemas de negócio do início ao fim, para propor soluções tech eficientes e inovadoras; Participar ativamente da expansão dos nossos sistemas atuais, da construção de novas features com foco no governança de dados; Construir...

   Com um time multidisciplinar, que combina a abordagem de Tecnologia, Analytics e Gestão, valorizando a qualidade técnica, buscamos solucionar os grandes desafios de negócios do mundo atual. Na EloGroup você terá oportunidade de participar de projetos de diferentes contextos: Big Data e Small Data, implementação de arquiteturas em Cloud e...

O que o time busca? Graduação em cursos relacionados à computação, como Engenharia da Computação, Ciência da Computação ou área afim. Mais de 3 anos de experiência como engenheiro de dados enfrentando problemas tecnicamente desafiadores. Proficiência em SQL. Experiência na criação de pipelines (Ingestão, tratamento, disponibilização e...

Requisitos Experiência em desenvolvimento com Python, com foco em IA e automação.   Experiência prática com APIs de IA e integração de sistemas.   Sólida compreensão de Machine Learning, Deep Learning, Processamento de Linguagem Natural (NLP) e Visão Computacional.   Familiaridade com arquitetura de sistemas em ambientes cloud,...

Perfil mão na massa; Gostar de pesquisar tecnologias; Experiência na construção e manutenção de um Data Lake; Conhecimentos em modelagem de dados transacional e dimensional; SQL e Python; Desejável conhecimento em GCP e/ou AWS; Desejável conhecimento em DevOps. Pesquisar, avaliar, definir e implantar as stacks da plataforma de dados; Desenvolver e...

Sólida experiência com Python para automação de processos e desenvolvimento de soluções; Expertise em AWS, com foco em serviços como Glue, Lambda, S3, EC2 e CloudFormation; Experiência com banco de dados relacional e NoSQL (ex: MySQL, PostgreSQL, DynamoDB); Conhecimento em ETL (Extract, Transform, Load), processamento de dados e integração com...

O que precisamos que você tenha de conhecimento: Requisitos essenciais: Expertise em serviços de dados do Azure, como Azure Data Factory, Azure Databricks, Azure Synapse Analytics e Azure SQL Database. Proficiente em linguagens de programação como Python, SQL e Spark. Experiência com ferramentas de ETL/ELT e modelagem de dados. Vivência em projetos de...