Data Platform Manager

JOB DESCRIPTION

Como Pessoa Gerente de Plataforma de dados você vai fazer parte da Diretori de dados da Intelipost.

Usamos Tecnologia como meio para impulsionar o negócio e alavancar a Logística do País.

Buscamos um gestor de um time altamente capacitado que incentive o time a ser multidisciplinar, que vai além da construção de pipelines, mas influenciando a gestão de Produto, design e engenharia de software, para impactar diretamente as tomadas de decisão do nosso negócio.

Trabalhará em um ambiente dinâmico, e desafiador, com grandes volumes de dados, apoiando o time com a definição de novos data products visando sempre atender os nossos clientes finais, definindo a arquitetura da plataforma de dados, conhecendo profundamente os dados desde o transacional, até o tratado nas camadas de dados mais agregados da plataforma de dados.

Estará bem próximo às demais squads de data "incubadas" junto aos times de engenharia de software, cocriando produtos de dados embedados nas soluções/plataformas da IP, com bastante interação com as principais clientes do grupo IP, demais times de negócio e tecnologia.

Irá liderar Engenheiros e analistas mentores para entrega de melhores práticas e guidelines para os times de engenharia de dados da diretoria de dados, tantos para os engenheiros que estarão trabalhando cross, como os que atuam nas squads do produto.

Irá liderar o time de engenharia na construção de um ambiente integrado de metadados, apoiando a alfabetização de dados da empresa, desde o primeiro momento descritivo até o preditivo e prescritivo

Precisa ser manter atualizado com as tecnologias e tendências emergentes para engenharia de dados (do descritivo ao prescritivo)

Experiência com papéis similares em empresas do ecossistema logística/e-commerce será um diferencial.

Boa capacidade de comunicação e negociação;

RESPONSIBILITIES AND ASSIGNMENTS

Perfil estratégico, para essa posição é necessário que você tenha um olhar voltado para o negócio, pensando na visão de produtos e métricas, com uma visão analítica e questionadora;

Gerenciar o time de engenharia de dados, influenciando no desenvolvimento de carreira dos seus diretos, através do acompanhamento via 1:1s e avaliações de desempenho periódicas;

Discutir requisitos de negócio com os times de Produto, influenciando no desenvolvimento da solução e antecipando possíveis riscos, negociando e interagindo com diversas áreas;

Facilidade em atuar de forma ativa na resolução de problemas e de conflitos;

Expertise em apoiar a definição de indicadores e dimensões com os times

Garantir que a equipe está entregando com boa qualidade e consistência,

Entendendo o quão bem as pessoas da equipe estão executando;

Experiência com metodologias ágeis;

Gerenciar o time em projetos de arquitetura de solução de dados:

Mantendo pipelines de dados eficientes e escaláveis para processamento e armazenamento de grandes volumes de dados. Coletando, integrando e transformando dados de diferentes fontes para garantir sua qualidade, consistência e disponibilidade Implementando soluções de armazenamento e recuperação de dados, como bancos de dados NoSQL, data lakes e data warehouses. Colaborando com equipes multidisciplinares(engenheiros de software, analistas de dados, PM etc) para entender os requisitos e fornecer soluções de dados eficazes. Identificando e resolver problemas de desempenho, segurança e integridade dos dados. Definindo estratégia de ingestão e modelagem de dados, otimizando custos, e avaliando com frequência os custos de cloud x novos desenvolvimentos e entregas, definindo o ambiente CI/CD Apoiar a definição de guidelines acompanhando o seu uso e evolução técnica. Colaborativo, motivado, capacidade de construir relacionamentos fortes e trabalhar de forma transversal na área de tecnologia e produto Perfil de solucionador de problemas, identificando causas raiz, e apoiando a definição de planos de ação com dados, reavaliando processos, identificando como fazer o charge management de novas soluções de dados integradas

REQUIREMENTS AND QUALIFICATIONS

Sólidas experiências na gestão de pessoas em todos os níveis, gestão do tempo e habilidades de comunicação;

Experiência em liderança de equipe;

Experiência com ciclo de vida de plataformas de dados;

Fortes habilidades de resolução de problemas e alto senso de responsabilidade

Experiência com metodologia e métricas ágeis

Experiência de implementação de Banco de dados relacional e soluções Big Data;

Experiência com ferramentas de ETL - extração, transformação e carregamento;

Experiência com ferramentas de Data Visualization;

Linguagens de programação: Python (bibliotecas Pandas, Arrow, scikit-learn, PySpark) avançado;

Experiência com ambientes cloud, preferencialmente AWS, conhecimento de diferentes serviços, incluindo Open source, como o Apache Pinot, Trino, dentre outros.

Experiência anterior em SQL, Python(bibliotecas Pandas, Arrow, scikit-learn, PySpark) avançado, Spark ou Scala para construção de pipelines;

Experiência anterior em modelagem de dados Lakehouse em um arquitetura lambda

Experiência anterior em ter construído/gerenciado construção de pipelines de dados complexos considerando latência, volume, privacidade e diferentes tipos de fontes de dados.

Experiência em ferramentas ETL/ELT

Experiência anterior em ter construído/gerenciado pipelines utilizando Data bricks, Docker/Kubernetes e sistemas de processamento de dados distribuídos (Hadoop, Spark, Kafka), Aws Glue, Kinesis entre outras

Experiência anterior em ter construído/gerenciado construção de observabilidade de pipelines, e showback de custos para as áreas.

Experiência no uso do GIT para versionamento de data products, e criação de plataforma de dados com CI/CD automáticos (do descritivo ao prescritivo)

Experiência em mascaramento e anonimização de dados

Conhecimento em estratégias e ferramentas de gestão do ciclo de vida dos dados e replicação;

Conhecimento em soluções e conceitos para implementar Governança de Dados cross empresa (qualidade, segurança, linhagem, políticas)

Experiência em documentação e catalogação de dados, utilizando soluções como Apache CKAN, Amundsen ou outro de mercado

Experiência anterior em ter construído/gerenciado plataformas para MLops (Kubflow, dentre outros), utilizando para treinamento de modelos, acompanhamento da acuracidade e evolução de modelos embedados dentro de produtos

Conhecimento em ferramentas de Data Visualization, preferencialmente em Power Bi ou Tableau.

Bacharel em Ciência da Computação, Engenharia de Computação. Engenharia, Estatística / Matemática ou similar;

ADDITIONAL INFORMATION

O que oferecemos?

PLR; Assistência Médica: Assistência Odontológica; Vale Transporte (Opcional); Seguro de Vida; Auxílio Creche; Licença Parental (Maternidade/Paternidade); Programa de Parcerias Intelipost: (Bem-Estar & Qualidade de Vida; Day Off no mês de Aniversário; Comer & Beber, Educação e Para Você); Vale Refeição / VaIe Alimentação R$ 924,00 Mês (Cartão de benefícios flexíveis); Se desenvolver e crescer em uma Startup com ambiente dinâmico e desafiador; Trabalhar com pessoas inspiradoras.

Venha ser Inteliposter

---