Engenharia de Dados Sênior

Há 4 dias


Brasil NTConsult Tempo inteiro R$50.000 - R$80.000 por ano

A NT: Somos uma consultoria global de desenvolvimento de software personalizado e contratação de projetos de TI sem restrições geográficas; operamos globalmente, navegando em desafios tecnológicos e empresariais com expertise. Nossa sede nos Estados Unidos está localizada em San Diego, Califórnia, e também temos centros de desenvolvimento estrategicamente localizados no Brasil, México, Peru e Uruguai. Nossa sede na América Latina está sediada em Porto Alegre, Brasil, com uma filial em São Paulo. Há mais de duas décadas, somos reconhecidos globalmente no mercado de software e inovação por entregar projetos com valor agregado, elaborados por equipes ágeis de profissionais qualificados. Confira nossa página nacional e internacional em:  e 

O projeto: Estamos procurando excepcionais profissionais em Engenharia de Dados para esta oportunidade para trabalhar em um cliente na indústria de telecomunicações, com presença em 12 países da Europa e da América Latina. Estão há mais de 20 anos atuando no Brasil, são um hub digital que facilita o acesso a serviços em diferentes áreas, como entretenimento, esportes, segurança digital, finanças, saúde e educação. Atuará em um projeto estratégico de migração de SQL dedicado para postgres, sendo responsável por realizar uma análise profunda e detalhada das aplicações Spark (Jobs & Notebooks), sendo Jobs implementados na linguagem Scala e PySpark, além das Procedures, Functions, scripts SQL, Modelagem Dimensional da camada gold, Schedulers, Pipelines de Dados, Data Lake (Azure ADLS Gen2), Storage Accounts, EventHubs e PowerBI.


Os requisitos mandatórios:

Mínimo de 5 anos de experiência em Engenharia de
Dados;Experiência em implementação e testes de
pipeline de dados;Experiência em implementação de Jobs para
processamento Batch & Streaming;Experiência em Python, Scala, Java e PySpark;Experiência em Arquitetura de Data Lake, Delta
Lake e Lakehouse (Data Mesh, Medallion, Kappa, outros);Experiência em frameworks para processamento de
dados distribuídos (Apache Beam, Apache Spark, outros);Experiência em Data Governance e Data Quality
(Time Travel, Lineage, Anonimização, outros);Vivência em computação em nuvem
(preferencialmente Microsoft Azure);Vivência em plataformas de integração de dados e
Lakehouse (Azure Synapse Analytics, Azure Data Factory, Azure Databricks,
Teradata, Dremio, outros);Vivência em desenvolvimento utilizando práticas
de CI/CD e DataOps;Conhecimento avançado de SQL e Modelagem de
Dados Dimensional para Datawarehouse (ex. Star Schema, Snowflake, Kimbal);Experiência com otimização avançada de consultas
SQL (Query Plan, Analyze, outros);Conhecimento em plataformas/motores de busca
textual (ex. ElasticSearch, Lucene, Solr, outros);Conhecimento em plataformas de streaming de
Dados (ex. Apache Kafka, Azure Event Hubs, outros);Conhecimento avançado em bancos de dados
relacionais (preferencialmente Postgresql), incluindo Functions, Procedures e
técnicas de modelagem de dados performáticas);Experiência em soluções de Visualização de Dados
& Reporting (ex. PowerBI, Tableu, Qlik, Looker, outros);Experiência em técnicas de dimensionamento de
ambientes de dados (ex. Cálculo de Storage, Memória e vCPU).


A Stack tecnológica:

Azure
Synapse Analytics (Clusters Spark & Dedicated SQL);Azure
ADLS Gen2;Azure
DevOps;Azure
Key Vault;Azure
AKS;Azure
PostgreSQL, Atlas MongoDB e CosmosDB;Azure
Log Analytics;GitHub
Copilot.


Os diferenciais:

Boas práticas de engenharia de software
aplicadas para dados (ex. Clean Code);Vivência em Squad Ágeis (Scrum/ Kanban);Conhecimento avançado na utilização de IA para
acelerar o desenvolvimento de código fonte (ex. GitHub Copilot, Claude, outros);Experiência em soluções de orquestração de dados
(ex. Apache Airflow, Apache NiFi, GCP Composer, Azkaban, outros;Maturidade em avaliação de tecnologias de dados
alinhadas com a expectativa das despesas operacionais dos clientes/ projetos
(FinOps e uso de calculadoras dos provedores de Cloud);Conhecimento em bibliotecas e frameworks de LLM
(scikit-learn, pycaret, Keras, Pytorch, Tensorflow, outros) e NLP (spacy, NLTK,
gensim, outros).


O perfil desejado:

Capacidade
de aprendizado rápido em ambientes complexos;Forte
habilidade analítica e visão crítica para entender código fonte e
processos de negócio;Boa
comunicação para interação com stakeholders técnicos e de negócio;Mentalidade
de inovação e uso de IA para acelerar resultados;Experiência
com elaboração de documentações e digramas para a ntrega de projetos.
  • Analista de dados sênior

    2 semanas atrás


    Brasil Talento Sênior Tempo inteiro

    Formação e Conhecimento Técnico Desejáveis • Formação superior completa em Sistemas de Informação, Ciência da Computação, Engenharia, Administração ou áreas correlatas. • Experiência comprovada em Business Intelligence (BI), incluindo a criação de modelos de dados, ETL e dashboards para apoio à tomada de decisão. • Domínio da...


  • Brasil Itaú Unibanco Tempo inteiro

    O Itaú é a marca mais valiosa do Brasil, a melhor empresa para trabalhar segundo o Great Place to Work e o maior banco da América Latina. Nós impactamos diariamente mais de 98 milhões de clientes em 18 países. Somos feitos de pessoas e acreditamos que ter um time com pluralidade de origens, culturas, crenças, experiências, raças, deficiências,...


  • brasil Itaú Unibanco Tempo inteiro

    O Itaú é a marca mais valiosa do Brasil, a melhor empresa para trabalhar segundo o Great Place to Work e o maior banco da América Latina. Nós impactamos diariamente mais de 98 milhões de clientes em 18 países.Somos feitos de pessoas e acreditamos que ter um time com pluralidade de origens, culturas, crenças, experiências, raças, deficiências,...


  • Brasil vaga para Cientista de Dados Especialista Sênior na iFood Tempo inteiro R$900.000 - R$1.200.000 por ano

    Nosso modo de fazer no timeNós, FoodLovers, temos fome de inovação e resultado. Buscamos sempre fazer o nosso melhor, pensando "fora da caixa" e atuando com agilidade e responsabilidade Temos fome de diversidade, conhecimento e compartilhamento. Trabalhamos em um ambiente de muita versatilidade. Sabe o que promove a nossa receita especial? As pessoas Vem...


  • Brasil ATRA Tempo inteiro

    Vaga: Engenheiro(a) de Dados GCP Sênior A ATRA está buscando um(a) Engenheiro(a) de Dados Sênior para atuar em projetos estruturantes envolvendo modelagem, pipelines, migração e otimização de dados em ambiente Cloud. Responsabilidades Estruturar e modelar bases de dados, garantindo boas práticas e consistência. Criar pipelines com rastreabilidade...

  • Engenharia de da Dados

    2 semanas atrás


    Brasil GFT Technologies Tempo inteiro

    O que buscamos:/ Profissional SR com experiência em engenharia de dados, capaz de projetar e desenvolver pipelines escaláveis e robustos em ambientes cloud. A posição exige conhecimento avançado em Azure e Databricks, além de boas práticas de arquitetura lakehouse e governança de dados. Atuação presencial 3 X vezes na região da Faria Lima....

  • Engenharia de da dados

    2 semanas atrás


    Brasil GFT Technologies Tempo inteiro

    O que buscamos:/ Profissional SR com experiência em engenharia de dados, capaz de projetar e desenvolver pipelines escaláveis e robustos em ambientes cloud. A posição exige conhecimento avançado em Azure e Databricks, além de boas práticas de arquitetura lakehouse e governança de dados. Atuação presencial 3 X vezes na região da Faria Lima....

  • Engenharia de da dados

    Há 20 horas


    brasil GFT Technologies Tempo inteiro

    O que buscamos:/Profissional SR com experiência em engenharia de dados, capaz de projetar e desenvolver pipelines escaláveis e robustos em ambientes cloud. A posição exige conhecimento avançado em Azure e Databricks, além de boas práticas de arquitetura lakehouse e governança de dados. Atuação presencial 3 X vezes na região da Faria Lima....


  • Brasil GFT Technologies Tempo inteiro

    O que buscamos:/ Profissional SR com experiência em engenharia de dados, capaz de projetar e desenvolver pipelines escaláveis e robustos em ambientes cloud. A posição exige conhecimento avançado em Azure e Databricks, além de boas práticas de arquitetura lakehouse e governança de dados. Atuação presencial 3 X vezes na região da Faria Lima....

  • Arquiteto de Dados Sênior

    3 semanas atrás


    Brasil SysMap Solutions Tempo inteiro

    Profissional responsável por projetar e definir a arquitetura de dados da organização, garantindo escalabilidade, segurança e governança. Lidera a estratégia de dados, define padrões arquiteturais e orienta equipes técnicas na implementação de soluções robustas em ambientes cloud, com foco em Azure e Databricks. Requisitos: Graduação em...