Engenheiro de Dados em Nuvem

1 semana atrás

Manaus Pernambuco Brazil CESAR - Centro de Estudios e Sistemas Avançados do Recife Tempo inteiro
Descrição do Cargo

Olá, nós somos o CESAR - Centro de Estudos e Sistemas Avançados do Recife

Somos um centro de inovação e de educação que há quase 30 anos forma pessoas e impulsiona organizações, potencializando suas estratégias digitais. Resolvemos problemas complexos e desafiadores em um ambiente de trabalho descontraído, descentralizado e repleto de benefícios para nossos colaboradores, que atuam como protagonistas, interagindo diretamente com clientes de escala global.

Como Engenheiro de Dados em Nuvem, sua missão será de assegurar a qualidade do produto, promovendo a evolução do time, adquirindo e compartilhando boas práticas e conhecimento técnico, topa? Vamos nessa

Esperamos que você tenha as habilidades e experiências necessárias para:

  • Desenvolver produtos analíticos de dados utilizando Airflow, DataProc, PySpark e BigQuery na Google Cloud Platform, com sólidos princípios de data warehouse.
  • Construir pipelines de dados para monitorar a qualidade dos dados e o desempenho dos modelos analíticos.
  • Manter a Infraestrutura da plataforma de dados usando Terraform e desenvolver, avaliar e entregar um código, por meio de CI/CD.
  • Colaborar com as partes envolvidas na análise de dados para agilizar o processo de aquisição, processamento e apresentação dos dados.
  • Implementar um modelo de governança de dados empresarial e promover ativamente o conceito de proteção, compartilhamento, reutilização, qualidade e padrões de dados.
  • Melhorar e manter as capacidades de DevOps da plataforma de dados.
  • Otimizar e melhorar continuamente as soluções de dados existentes (pipelines, produtos, infraestrutura) para obter o melhor desempenho, alta segurança, baixa vulnerabilidade, baixos custos e alta confiabilidade.
  • Trabalhar em uma equipe ágil de produtos com entregas de código frequentes usando Desenvolvimento Orientado a Testes (TDD), integração contínua e implantação contínua (CI/CD).
  • Resolver issues de qualidade de código apontadas pelas ferramentas SonarQube, Checkmarx, Fossa e Cycode ao longo do ciclo de desenvolvimento.
  • Realizar quaisquer atividades necessárias de mapeamento de dados, linhagem de dados e documentação dos fluxos de informação.
  • Proporcionar visibilidade sobre problemas de qualidade de dados/veículo/recurso e trabalhar com os donos dos negócios para resolver os problemas.
  • Demonstrar conhecimento técnico e habilidades de comunicação com a capacidade de argumentar e defender soluções bem projetadas.
Habilidades Requeridas
  • Inglês avançado para comunicação diária.
  • Experiência comprovada em Engenharia de dados.
  • Conforme senioridade da vaga - Pleno, quantidade de anos de experiência profissional em desenvolvimento de produtos de dados e lançamentos de produtos de software.
  • Experiência em pelo menos três das seguintes linguagens: Java, Python, Spark, Scala, SQL.
  • Engenharia de dados/software na nuvem, construção de pipelines de dados escaláveis, confiáveis e custo-efetivos usando:
    • Google BigQuery.
    • Ferramentas de orquestração de workflows como Airflow.
    • APIs REST para computação, armazenamento, operações e segurança.
    • Ferramentas de DevOps como Tekton, GitHub Actions, Git, GitHub, Terraform, Docker.
    • Ferramentas de gerenciamento de projetos como Atlassian JIRA.
  • Experiência trabalhando em uma equipe de implementação desde o conceito até as operações, fornecendo profunda expertise técnica para um deployment bem-sucedido.
  • Experiência na implementação de métodos para automação de todas as partes do pipeline para minimizar o trabalho no desenvolvimento e na produção.
  • Habilidades analíticas para perfilamento de dados e resolução de problemas em pipelines/produtos de dados.
  • Capacidade de simplificar e comunicar claramente ideias/problemas complexos de dados/software e trabalhar com equipes multifuncionais e todos os níveis de gestão de forma independente.
  • Forte orientação para resultados e capacidade de realizar múltiplas tarefas e trabalhar de forma independente.
  • Experiência com otimização de desempenho em SQL, Python, PySpark ou Java.
  • Capacidade comprovada de documentar sistemas complexos.
  • Compromisso demonstrado com qualidade e prazos de projeto.
  • Prover código que seja comprometido em melhorar projetos de engenharia de dados/software de código aberto.
  • Experiência na arquitetura de infraestrutura em nuvem e manejo de migrações/atualizações de aplicativos.
  • Certificações Profissionais GCP.
  • Compreensão profunda da arquitetura subjacente do GCP e experiência prática com produtos como BigQuery, Google Cloud Storage, Cloud SQL, Memory Store, Dataflow, Dataproc, Artifact Registry, Cloud Build, Cloud Run, Vertex AI, Pub/Sub, APIs do GCP.
Habilidades Desejáveis
  • Mestrado ou grau equivalente estrangeiro em Ciência da Computação, Engenharia de Software, Sistemas de Informação, Engenharia de Dados ou área relacionada.
Benefícios
  • Horário flexível;
  • Estrutura horizontal;
  • Programas de treinamento e desenvolvimento;
  • Cultura voltada para a Diversidade & Inclusão, onde você pode ser livre pra ser quem é

  • Engenheiro de Dados em Nuvem

    1 semana atrás

    Manaus, Pernambuco, Brazil CESAR - Centro de Estudios e Sistemas Avançados do Recife Tempo inteiro

    Descrição do CargoO CESAR - Centro de Estudos e Sistemas Avançados do Recife está procurando por um profissional experiente para ocupar o cargo de Engenheiro de Dados em Nuvem. Nesta função, você será responsável por garantir a qualidade do produto, promovendo a evolução do time, adquirindo e compartilhando boas práticas e conhecimento...

  • Engenheiro de Dados Sênior na Nuvem

    1 semana atrás

    Manaus, Pernambuco, Brazil CESAR - Centro de Estudios e Sistemas Avançados do Recife Tempo inteiro

    Descrição do CargoEstamos procurando por um profissional experiente e habilidoso para ocupar o cargo de Engenheiro de Dados Sênior na nossa equipe de tecnologia. O candidato ideal terá experiência comprovada em desenvolvimento de produtos de dados e lançamentos de produtos de software, além de habilidades avançadas em linguagens de programação como...

  • Engenheiro de Dados Sênior na Nuvem

    Há 6 horas

    Manaus, Pernambuco, Brazil CESAR - Centro de Estudios e Sistemas Avançados do Recife Tempo inteiro

    Descrição do CargoEstamos procurando por um profissional experiente para ocupar o cargo de Engenheiro de Dados Sênior na nossa equipe de tecnologia. O candidato ideal terá experiência em desenvolver produtos analíticos de dados utilizando Airflow, DataProc, PySpark e BigQuery na Google Cloud Platform, com sólidos princípios de data...

  • Engenheiro de DevOps Sênior em Nuvem

    1 semana atrás

    Manaus, Pernambuco, Brazil CESAR - Centro de Estudios e Sistemas Avançados do Recife Tempo inteiro

    Descrição do CargoOlá, nós somos o CESAR - Centro de Estudos e Sistemas Avançados do RecifeSomos um centro de inovação e de educação que há quase 30 anos forma pessoas e impulsiona organizações, potencializando suas estratégias digitais. Resolvemos problemas complexos e desafiadores em um ambiente de trabalho descontraído, descentralizado e...

  • Engenheiro de Dados

    2 semanas atrás

    Pernambuco, Brasil Escola de Educação Geral Tempo inteiro

    Escola de Educação Geral admite Engenheiro de Dados em Jaboatão dos Guararapes. Desenvolver, construir, testar e manter arquiteturas de dados (por exemplo, bancos de dados, sistemas de processamento em larga escala e pipelines). Colaborar com analistas de dados para encontrar e aplicar as melhores práticas em gerenciamento de dados.

  • Engenheiro de Dados

    2 semanas atrás

    Pernambuco, Brasil Empresa de tecnologia Tempo inteiro

    Empresa de tecnologia admite Engenheiro de Dados em Olinda. Projetar, criar e manter as entregas em DataBricks – Azure para dados e análises que envolve as ferramentas de dados. Desenvolver pipelines de dados e processos ETL usando serviços de análise e dados e linguagens de programação como Python. Colaborar com analistas para compreender suas...

  • Engenheiro de Dados

    2 semanas atrás

    Pernambuco, Brasil Empresa de tecnologia Tempo inteiro

    Empresa de tecnologia admite Engenheiro de Dados em Paulista. Projetar, criar e manter as entregas em DataBricks – Azure para dados e análises que envolve as ferramentas de dados. Desenvolver pipelines de dados e processos ETL usando serviços de análise e dados e linguagens de programação como Python. Colaborar com analistas para compreender suas...

  • Engenheiro de Dados

    2 semanas atrás

    Pernambuco, Brasil Empresa de tecnologia Tempo inteiro

    Empresa de tecnologia admite Engenheiro de Dados em Petrolina. Projetar, criar e manter as entregas em DataBricks – Azure para dados e análises que envolve as ferramentas de dados. Desenvolver pipelines de dados e processos ETL usando serviços de análise e dados e linguagens de programação como Python. Colaborar com analistas para compreender suas...

  • Engenheiro de Dados

    Há 5 dias

    Pernambuco, Brasil Empresa de Tecnologia da Informação e Serviços Tempo inteiro

    Empresa de Tecnologia da Informação e Serviços admite Engenheiro de Dados em Recife. Desenvolver soluções com grandes volumes de dados. Garantir políticas de segurança para acesso aos dados.

  • Engenheiro de Dados

    Há 5 dias

    Pernambuco, Brasil Empresa de Tecnologia da Informação e Serviços Tempo inteiro

    Empresa de Tecnologia da Informação e Serviços admite Engenheiro de Dados em Jaboatão dos Guararapes. Desenvolver soluções com grandes volumes de dados. Garantir políticas de segurança para acesso aos dados.

  • Engenheiro de Dados

    Há 5 dias

    Pernambuco, Brasil Empresa de Tecnologia da Informação e Serviços Tempo inteiro

    Empresa de Tecnologia da Informação e Serviços admite Engenheiro de Dados em Caruaru. Redimensionar a capacidade e configurar regras de cluster AWS Redshif, gerenciando as configurações do ambiente. Desenvolver e realizar a manutenção de scripts Python e Terraform para infraestrutura. Desenvolver soluções com grandes volumes de dados. Garantir...

  • Engenheiro de Dados

    Há 5 dias

    Pernambuco, Brasil Empresa de Tecnologia da Informação e Serviços Tempo inteiro

    Empresa de Tecnologia da Informação e Serviços admite Engenheiro de Dados em Paulista. Redimensionar a capacidade e configurar regras de cluster AWS Redshif, gerenciando as configurações do ambiente. Desenvolver e realizar a manutenção de scripts Python e Terraform para infraestrutura. Desenvolver soluções com grandes volumes de dados. Garantir...

  • Engenheiro de Dados

    Há 5 dias

    Pernambuco, Brasil Empresa de Tecnologia da Informação e Serviços Tempo inteiro

    Empresa de Tecnologia da Informação e Serviços admite Engenheiro de Dados em Olinda. Redimensionar a capacidade e configurar regras de cluster AWS Redshif, gerenciando as configurações do ambiente. Desenvolver e realizar a manutenção de scripts Python e Terraform para infraestrutura. Desenvolver soluções com grandes volumes de dados. Garantir...

  • Engenheiro de Dados

    Há 5 dias

    Pernambuco, Brasil Empresa de Tecnologia da Informação e Serviços Tempo inteiro

    Empresa de Tecnologia da Informação e Serviços admite Engenheiro de Dados em Petrolina. Redimensionar a capacidade e configurar regras de cluster AWS Redshif, gerenciando as configurações do ambiente. Desenvolver e realizar a manutenção de scripts Python e Terraform para infraestrutura. Desenvolver soluções com grandes volumes de dados. Garantir...

  • Cientista de Dados

    3 meses atrás

    Manaus, Brasil INSTITUTO DE PESQUISAS ELDORADO Tempo inteiro

    Análise de dados de consumidores de comércio eletrônico e celular; trabalhar com forte time de Cientistas de dados e Engenheiros de Machine Learning; Conduzir análises avançadas de dados, desenvolver modelos preditivos e criar ricas visualizações para mostrar os insights aos nossos parceiros de negócio. Formação Concluída em Ciência da...

  • Engenheiro de Dados Especialista

    4 semanas atrás

    Brazil Verx Consulting Tempo inteiro

    Requisitos: -Experiência sólida como Engenheiro de Dados (mínimo de 8 anos), com histórico comprovado em projetos de grande escala. -Conhecimento avançado em Apache Spark e Scala. -Experiência com Apache Airflow para gerenciamento de workflows de dados. -Proficiência em AWS, incluindo serviços como S3, Redshift e EMR. -Experiência em modelagem e...

  • Engenheiro de Dados Especialista

    4 semanas atrás

    Brazil Verx Consulting Tempo inteiro

    Requisitos: -Experiência sólida como Engenheiro de Dados (mínimo de 8 anos), com histórico comprovado em projetos de grande escala. -Conhecimento avançado em Apache Spark e Scala. -Experiência com Apache Airflow para gerenciamento de workflows de dados. -Proficiência em AWS, incluindo serviços como S3, Redshift e EMR. -Experiência em modelagem e...

  • Engenheiro de Dados Especialista

    3 semanas atrás

    Brazil Verx Consulting Tempo inteiro

    Requisitos: -Experiência sólida como Engenheiro de Dados (mínimo de 8 anos), com histórico comprovado em projetos de grande escala. -Conhecimento avançado em Apache Spark e Scala. -Experiência com Apache Airflow para gerenciamento de workflows de dados. -Proficiência em AWS, incluindo serviços como S3, Redshift e EMR. -Experiência em modelagem e...

  • Engenheiro de Dados

    Há 5 dias

    Manaus, Brasil Empresa de Tecnologia da Informação e Serviços Tempo inteiro

    Empresa de Tecnologia da Informação e Serviços admite Engenheiro de Dados em Manaus para atuar em Tempo integral, A combinar.. Redimensionar a capacidade e configurar regras de cluster AWS Redshif, gerenciando as configurações do ambiente. Desenvolver e realizar a manutenção de scripts Python e Terraform para infraestrutura. Desenvolver soluções...

  • Engenheiro de Análise de Dados

    2 semanas atrás

    Manaus, Pernambuco, Brazil TPF Group Tempo inteiro

    Engenheiro de Análise de Dados**Descrição da Vaga**A TPF Group está expandindo sua equipe de engenharia de projetos e busca um profissional experiente em análise de dados para apoiar a desenvolver e implementar soluções inovadoras para otimizar processos de engenharia civil por meio da integração de bancos de dados.**Responsabilidades**Desenvolver e...