Especialista em Engenharia de Plataforma de Dados Distribuídos

Descrição e Responsabilidades: Horário: Horário a combinar Nível: Professional Regime de contratação: Tenured
- CLT labor code A área está organizada em três grandes frentes: DevOps e Processos de TI, Engenharia de Plataforma e Integrações, e Governança de Dados e Tecnologias Analíticas. Esta última tem como foco a criação e gestão de políticas, processos e estruturas de governança de dados, assegurando sua qualidade, segurança e conformidade. Além disso, conduz a implementação de tecnologias analíticas e soluções de Big Data, promovendo o uso estratégico das informações em toda a organização. Atividades:
- Projetar, implementar e operar soluções de dados distribuídos, incluindo estratégias de sharding, isolamento de tenants e arquiteturas baseadas em CQRS.
- Administrar e otimizar ambientes DB2 DPF, PostgreSQL com Citus e clusters de bancos de dados em Kubernetes.
- Desenvolver SDKs, automações e componentes de plataforma para simplificar o consumo da camada de dados pelas equipes de desenvolvimento.
- Construir e manter pipelines CI/CD, práticas GitOps e infraestrutura como código (IaC) para provisionamento e operação da plataforma.
- Monitorar desempenho, disponibilidade, capacidade e confiabilidade dos ambientes distribuídos, promovendo melhorias contínuas.
- Garantir conformidade com requisitos regulatórios, segurança da informação, privacidade de dados e padrões de governança corporativa.
- Atuar em conjunto com as áreas de Arquitetura, Governança, Infraestrutura e Desenvolvimento na evolução da plataforma de dados corporativa.
- Implementar e operar soluções de CDC (Change Data Capture), como Qlik Replicate, IBM CDC, Debezium e Apache Kafka.
- Projetar e operar estratégias de Information Lifecycle Management (ILM), incluindo particionamento, retenção e expurgo de dados.
Construir pipelines de ingestão de dados (Kafka ? Delta Lake) e operar o Trino para consultas analíticas e regulatórias sem impacto ao ambiente transacional. Requisitos:
- Requisitos Obrigatórios**:
- Graduação completa em Ciência da Computação, Sistemas de Informação, Engenharia da Computação, Engenharia de Software, Tecnologia em Banco de Dados ou áreas correlatas.
- Experiência em Tecnologia da Informação,com enfâse em administração de bancos de dados corporativos em ambientes críticos de produção.
- Experiência prática comprovada com, no mínimo, dois dos seguintes SGBDs: DB2, PostgreSQL, SQL Server ou Oracle.
- Experiência em tuning de aplicações, análise de performance, modelagem de dados e suporte a equipes de desenvolvimento.
- Vivência com bancos de dados distribuídos e ambientes críticos de alta disponibilidade.
- Experiência com Kubernetes, CI/CD, GitOps, Infraestrutura como Código (IaC) e automação.
- Conhecimento em CDC, integração orientada a eventos e sistemas distribuídos.
- Experiência em performance, escalabilidade, disponibilidade, troubleshooting e resposta a incidentes.
- Experiência com sharding, multi-tenancy e modernização de plataformas de dados.
Domínio avançado de SQL, modelagem de dados, otimização de consultas, estratégias de indexação, análise de planos de execução e administração de bancos de dados distribuídos. Requisitos Desejáveis:
- Pós-graduação ou MBA em Banco de Dados, Arquitetura de Dados, Engenharia de Dados ou áreas relacionadas.
- Conhecimento em Citus (PostgreSQL Distribuído), MongoDB e bancos de dados Cloud Native.
- Experiência com Flyway, Liquibase ou ferramentas de versionamento e migração de banco de dados.
- Conhecimento em Big Data, ambientes analíticos, Delta Lake e Trino.
- Conhecimento em Java, Go (Golang), desenvolvimento de SDKs e frameworks internos.
- Conhecimento em Open Policy Agent (OPA), Rego, Argo CD, Tekton Pipelines e GitOps.
- Experiência com Arquitetura Orientada a Eventos, Apache Kafka, Debezium CDC e SRE.
- Conhecimento em LGPD aplicada a plataformas distribuídas, Redis, Elasticsearch/OpenSearch e observabilidade.
Certificações como IBM Certified Database Administrator, Oracle Database Administration Certification, CKAD e Confluent Certified Developer for Apache Kafka. Benefícios: Auxílio-Creche/ Babá, Bolsa de Estudos para Graduação e Pós-Graduação, Cesta Natalina, Day off
- fim de ano, Licença maternidade estendida, Licença paternidade estendida, Participação nos Resultados (anual), Plano de Saúde, Plano Odontológico, Previdência Privada Multipatrocinada, Programa de Desenvolvimento de Soft e Hard Skills, Programa de Mobilidade Interna
- Match Oportunidades Internas, Programa Viver Bem, Seguro de Vida, Universidade Corporativa Sicoob, Vale-alimentação, Vale-refeição, Vale-transporte (opcional), Wellhub