Engenheiro de dados gcp

O que precisamos que você tenha de conhecimento: Requisitos essenciais: Experiência prática com Google Cloud Platform, especialmente Pub/Sub, Dataflow e Cloud Storage; Domínio em Python, com foco no desenvolvimento de scripts para pipelines de dados; Conhecimento sólido em bancos de dados relacionais, preferencialmente PostgreSQL; Inglês avançado para...

GKE (Google Kubernetes Engine): Conhecimento intermediário em GKE, incluindo implantação e gerenciamento de aplicações. Experiência prática com deployments de aplicações. Familiaridade com conceitos como pods, deployments, services, namespaces e configmaps. Capacidade de solucionar problemas e otimizar o desempenho de aplicações em GKE. ...

RESPONSABILIDADES E ATRIBUIÇÕESComo Engenheiro de Dados Sênior, você irá:  Conhecer, entender e se envolver com os problemas de negócio do início ao fim, para propor soluções tech eficientes e inovadoras; Participar ativamente da expansão dos nossos sistemas atuais, da construção de novas features com foco no governança de dados; Construir...

Superior completo em Engenharia, TI ou áreas correlatas. Desejável especialização em engenharia de dados. Conhecimento avançado em ferramentas de engenharia de dados (SQL, GCP, Aws, Azure ou outra ferramenta voltada a engenharia de dados). Conhecimento intermediário em ferramentas de análise/ciência de dados (Python, R, etc.). Experiência...

Formação Acadêmica: Ensino superior completo em Ciência da Computação, Engenharia, Estatística ou áreas correlatas. Habilidades Técnicas Específicas: SQL; ETL; Conhecimento de ferramentas como Apache Airflow e DataFlow; Habilidades de programação em Python/Java. Diferenciais: Certificação Google Cloud Platform (GCP) e conhecimentos em Spark,...

Plataforma de Dados (Estruturação de Plataforma); Nível avançado nas ferramentas Google; Ambientes de processamento massivo de dados, hadoop, spark; Integrações via APIs; Ferramentas de streaming de dados (Spark streaming, Dataflow, Stream Analytics). Estruturação de Plataforma de Dados; Desenvolvimento e manutenção de pipelines de dados;...

Plataforma de Dados (Estruturação de Plataforma); Data enabler; Nível avançado nas ferramentas Google; Nível básico/intermediário em Azure e AWS; Vivência em habilitação de domínios; Comunicação multicloud (Google e Azure) Ambientes de processamento massivo de dados, hadoop, spark; Integrações via APIs; Ferramentas de streaming de dados (Spark...

Habilidades e Competências exigidas: - Plataforma de Dados GCP: Proficiência em BigQuery, Dataflow, Pub/Sub, Cloud Storage e Dataproc. - Governança e Segurança de Dados: Implementação de políticas de segurança com PolicyTags. - Ferramentas de Big Data: Experiência com Apache Spark e Hadoop. - Linguagens de Programação: Proficiência em Python e...

Perfil mão na massa; Gostar de pesquisar tecnologias; Experiência na construção e manutenção de um Data Lake; Conhecimentos em modelagem de dados transacional e dimensional; SQL e Python; Desejável conhecimento em GCP e/ou AWS; Desejável conhecimento em DevOps. Pesquisar, avaliar, definir e implantar as stacks da plataforma de dados; Desenvolver e...

Qualificações Necessárias: Bacharelado em ciência da computação, engenharias, matemática aplicada ou áreas relacionadas. Pós-graduação em engenharia de dados / Big Data (ou equivalente) 5+ anos de experiência no desenvolvimento de fluxos de ETL para carga de diferentes fontes de dados (coletar, validar, homogeneizar, transformar e...

O que buscamos: Experiência sólida em administração de banco de dados PostgreSQL, incluindo instalação, configuração, otimização e manutenção; Experiência prática com Google Cloud Platform (GCP), incluindo serviços como Cloud SQL (PostgreSQL), Firestore e Cloud Datastore; Profundo conhecimento de arquitetura de bancos de dados, modelagem e...

QUEM SOMOS?Somos a primeira fintech do Brasil que cria e opera Mini Bancos! Permitimos que empreendedores abram suas próprias securitizadoras para realizar empréstimos e operações de recebíveis. Nosso propósito é viabilizar o acesso a soluções que geram crédito, liberdade e oportunidade de negócios para quem quer empreender! Estamos à procura de...

Requisitos e qualificações:  O que esperamos de você para essa vaga:   Superior Completo em Sistemas de Informação, Engenharia da Computação ou Ciência da Computação ou curso correlato; Conhecimento em ETL (SSIS e DataStage); Conhecimento de arquitetura Streaming e ferramentas; Desenvolvimento e manutenção de Banco de dados; Python, SQL Ansi,...

Requisitos: Mínimo de 6 anos de experiência na área de Engenharia de Software. Experiência com Python; Experiência com Kubernetes; Processamento de dados via streaming; Conhecimento em bancos de dados (PostgreSQL, Amazon Aurora, DynamoDB ou similares); Conhecimento de ferramentas AWS (DMS, S3, RDS, Glue, Athena etc); Conhecimento em ferramentas de...

Experiência sólida como Engenheiro de Dados, atuando com a plataforma Google Cloud Platform (GCP); Conhecimento avançado em Python para gerenciar Data Proc e Cloud Composer (Airflow); Habilidades em migração de dados, incluindo migração de pipelines ETL/ELT existentes para novos pipelines; Capacidade de criar automações utilizando Cloud Composer...

Engenheiro de Dados Senior Requerimentos:    Experiência com tecnologias como AWS Redshift, DynamoDB, AWS S3, AWS EMR, AWS Glue, Apache Airflow, Python e PySpark.   Experiência em Databricks - Desenvolvimento de Pipelines, catalogação e manutenção do ambiente.   Experiência com ambientes de alta criticidade e alta volumetria.   Experiência...

Descrição Vaga: Engenheiro de Dados   Resumo da Posição: Estamos em busca de um Engenheiro de Dados experiente para projetar, implementar e otimizar fluxos de trabalho de dados em ambientes de Big Data, com foco em ferramentas da Azure, como Azure Databricks e Azure Data Factory. Este profissional será responsável por desenvolver pipelines robustos de...

Pessoa Engenheira de Dados   Remoto. Contrato: PJ Iniciar: Disponibilidade Imediata  Sobre a Empresa:A AI Solutions é uma empresa focada no desenvolvimento de soluções tecnológicas com inteligência artificial e machine learning, através da extração, estruturação e consolidação de base de dados e informações. Proporcionamos aos nossos...

Estamos contratando! Engenheiro de Dados PL 100% Home Office Responsabilidade e atribuições Criar e manter estruturas de data pipeline com performance otimizada. Montar estruturas de dados escaláveis que atendam requisitos funcionais e não funcionais de negócios. Automatizar processos manuais, otimizar data deliveries e redesenhar a infraestrutura para...

O que esperamos de você? Experiência profissional comprovada anterior como Engenheiro de Dados; Experiência com Python, Spark, Pandas, Databricks (Databricks Mandatório); Experiência com desenvolvimento e implementação de APIs; Experiência com Azure Cloud e seus respectivos serviços; Ferramentas e Tecnologias: SQL, NoSQL, Hadoop, Spark, Kafka,...