Engenheiro de Big Data Sênior

3 semanas atrás

Salvador, Brasil Plataforma de Dados do Cidacs Tempo inteiro
Job description

Você é um profissional com mais de 5 anos de experiência em Engenharia de Big Data, capaz de desenvolver as atividades com ampla autonomia, tendo potencial para desempenhar papéis de liderança e possui habilidade de lidar com tarefas de alta complexidade, solucionar desafios intrincados e fazer escolhas ponderadas, respaldadas por seu conhecimento e trajetória profissional? Esta posição pode ser para você

No Centro de Integração de Dados e Conhecimentos para Saúde (Cidacs), estamos em busca de um Engenheiro de Big Data Sênior para integrar uma equipe multidisciplinar da sua Plataforma de Dados. Este profissional será responsável por atuar no desenho e implementação de soluções, otimização de performance e suporte a infraestrutura e serviços de Big Data. O objetivo será construir estratégias, processos e produtos de base tecnológica documentados para atender às necessidades e resolver os problemas do negócio.

O trabalho será preferencialmente presencial, no Cidacs/Fiocruz Bahia, mas com a possibilidade de trabalho semipresencial.



Main responsibilities

RESPONSABILIDADES E ATRIBUIÇÕES:

  • Desenho e Implementação de Soluções de Big Data: Projetar, construir e implementar soluções de big data para atender às necessidades de armazenamento, processamento e análise de grandes volumes de dados.
  • Manutenção da Infraestrutura: Garantir que os sistemas de big data estejam sempre operacionais, otimizados e com bom desempenho.
  • Otimização de Performance: Monitorar e otimizar a performance dos sistemas de big data, garantindo processamento rápido e eficiente dos dados.
  • Segurança dos Dados: Implementar e manter padrões e protocolos de segurança para proteger os dados e garantir a privacidade e conformidade, especialmente em contextos regulamentados.
  • Colaboração Interdisciplinar: Trabalhar em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender suas necessidades e traduzi-las em soluções técnicas.
  • Escalabilidade: Projetar soluções que possam crescer em escala, lidando com volumes cada vez maiores de dados, sem comprometer a performance.
  • Implementação de Ferramentas de Big Data: Trabalhar com uma variedade de tecnologias de big data para implementar soluções adequadas às necessidades.
  • Gestão de Pipeline de Dados: Criar e gerenciar pipelines de dados completos, desde a ingestão até o armazenamento, processamento e análise.
  • Automatização: Implementar soluções automatizadas para tarefas recorrentes, garantindo eficiência e redução de erros manuais.
  • Formação e Liderança: Como um profissional sênior, espera-se que esse indivíduo atue como mentor para membros mais jovens da equipe, transmitindo conhecimento e orientação técnica.
  • Avaliação de Novas Tecnologias: Manter-se atualizado com as últimas tecnologias e tendências em big data, avaliando e recomendando novas ferramentas e abordagens que podem beneficiar a organização.
  • Documentação: Criar documentação técnica robusta para soluções implementadas, garantindo que outros engenheiros e partes interessadas compreendam as soluções e possam trabalhar com elas no futuro.


Requirements and skills

QUALIFICAÇÕES E REQUISITOS:

FORMAÇÃO:

  • Diploma em Ciência da Computação, Engenharia da Computação, Sistemas de Informação ou campos relacionados.

EXPERIÊNCIA PRÁTICA:

  • Mínimo de 5 anos em funções relacionadas à big data, com ênfase em infraestrutura e serviços;
  • Experiência comprovada no desenho, implementação, operação e otimização de soluções de big data escaláveis;
  • Histórico de projetos bem-sucedidos em ambientes complexos e de alta disponibilidade.

HABILIDADE TÉCNICAS:

  • Profundo conhecimento e experiência prática com tecnologias de big data, como, Spark, ElasticSearch, Kubernetes, Hadoop, entre outras soluções para Big Data;
  • Conhecimento em sistemas de armazenamento distribuído, como MinIO e HDFS;
  • Experiência com Linux, Shell Script e configuração de serviços Linux;
  • Experiência com bancos de dados NoSQL, como Cassandra, InfluxDB ou Neo4j;
  • Experiência com ferramentas de Infraestrutura como Código (IoC), como Ansible e Terraform;
  • Habilidade em linguagens de programação Python, Java ou Scala;
  • Conhecimento sobre técnicas e ferramentas de otimização de performance para big data;
  • Experiência com orquestração de workflows de dados, como Apache Airflow ou Luigi;
  • Familiaridade com estruturas e operacionalização de data center on-premise;
  • Familiaridade com as melhores práticas de arquitetura de software.

HABILIDADE INTERPESSOAIS:

  • Excelente capacidade de comunicação, tanto para explicar complexidades técnicas para stakeholders não técnicos quanto para colaborar eficazmente com a equipe;
  • Capacidade de liderança e mentoria para desenvolver membros mais jovens da equipe;
  • Habilidades analíticas aguçadas e abordagem orientada a problemas.

OUTRAS QUALIFICAÇÕES:

  • Conhecimento em práticas de segurança voltadas para big data e conformidade regulamentar;
  • Experiência com contêineres e orquestração;
  • Inglês intermediário, especialmente para leitura e escrita técnica;
  • Disposição para se manter atualizado em uma área de tecnologia em rápida evolução.

DIFERENCIAIS (não obrigatórios, mas desejáveis):

  • Certificações profissionais em big data ou tecnologias relacionadas;
  • Pós-graduação em campos relacionados com a vaga;
  • Conhecimentos de ambiente HPC;
  • Conhecimentos de integração de dados e interoperabilidade;
  • Experiência anterior em setores relacionados à saúde ou pesquisa;
  • Experiências com orquestradores e ferramentas para trabalho com Kubernetes, como Kubesphere, Kubeflow, Rancher e outras;
  • Conhecimento sobre padrões e regulamentos de saúde, como Lei Geral de Proteção de Dados (LGPD), GDPR e HIPAA;
  • Conhecimentos técnicos sobre Segurança da Informação e Privacidade (Privacy by Design);
  • Familiaridade com soluções de Cloud Computing, como AWS, Google Cloud ou Azure, e seus respectivos serviços voltados para big data;
  • Familiaridade com práticas de DevOps e CI/CD.


Additional information

SOBRE O CIDACS:

O CIDACS é um centro pioneiro na integração de dados, focado em entender, estudar e avaliar as condições de saúde da população brasileira por meio de Big Data. Nosso trabalho auxilia gestores públicos, pesquisadores e a comunidade, contribuindo para transformar vidas. Se você, assim como nós, é apaixonado por tecnologia e inovação, junte-se ao nosso time. Aqui, você encontrará um ambiente acolhedor, propício para desenvolvimento e inovação, repleto de profissionais de diversas formações acadêmicas unidos por um propósito. Traga seu talento e comprometimento e venha fazer parte desse time

A bolsa de pesquisa varia de R$ 6.500,00 a R$ 8.500,00 de acordo com a experiência do candidato.

Mais informações sobre o Cidacs, acesse:



#J-18808-Ljbffr

  • Engenheiro de big data sênior

    2 meses atrás

    Salvador, Brasil Netvagas Tempo inteiro

    QUALIFICAÇÕES E REQUISITOS:FORMAÇÃO:Diploma em Ciência da Computação, Engenharia da Computação, Sistemas de Informação ou campos relacionados.EXPERIÊNCIA PRÁTICA:Mínimo de 5 anos em funções relacionadas à big data, com ênfase em infraestrutura e serviços;Experiência comprovada no desenho, implementação, operação e otimização de...

  • Engenheiro de Dados Sênior

    Há 2 dias

    Salvador, Bahia, Brasil buscojobs Brasil Tempo inteiro

    Descrição da VagaBuscamos um profissional experiente e qualificado para ocupar o cargo de Engenheiro de Dados Sênior na nossa equipe de tecnologia. O candidato ideal deve ter uma sólida experiência em desenvolvimento de soluções de big data, com foco em infraestrutura e serviços.ResponsabilidadesDesenhar e implementar soluções de big data...

  • Engenheiro de Software Sênior

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    Na BIG Jobsite, somos uma empresa inovadora que se destaca no desenvolvimento de soluções tecnológicas para a gestão tributária e licenciamento, com o objetivo de simplificar os processos administrativos e contribuir para o progresso das cidades brasileiras. Estamos em busca de Engenheiros de Software Sêniores que sejam apaixonados por tecnologias que...

  • Engenheiro de Software Sênior

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    Na BIG Jobsite, somos uma empresa inovadora que se destaca no desenvolvimento de soluções tecnológicas para a gestão tributária e licenciamento, com o objetivo de simplificar os processos administrativos e contribuir para o progresso das cidades brasileiras. Estamos em busca de Engenheiros de Software Fullstack Sêniores que sejam apaixonados por...

  • Engenheiro de Software Java Sênior

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    A BIG Jobsite está em busca de um profissional qualificado para a posição de Engenheiro de Software Java Sênior, focado em soluções em nuvem, para integrar nossa equipe de tecnologia. O candidato ideal deve possuir um mínimo de 4 anos de experiência em desenvolvimento de software em ambientes de nuvem.Além disso, é essencial que os candidatos...

  • Engenheiro de Software Java Sênior

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    A BIG Jobsite está em busca de um profissional qualificado para a posição de Engenheiro de Software Java Sênior, focado em soluções em nuvem, para integrar nossa equipe de tecnologia. O candidato ideal deve possuir um mínimo de 4 anos de experiência em desenvolvimento de software em ambientes de nuvem.Além disso, é essencial que os candidatos...

  • Engenheiro Mecânico Sênior

    2 semanas atrás

    Salvador, Brasil The BIG Jobsite Tempo inteiro

    Oportunidade para engenheiro mecânico sênior com conhecimento em equipamentos de mineração e seus equipamentos, para elaborar especificações técnicas e folhas de dados para os seguintes equipamentos:Alimentadores Vibratórios, Britadores de Mandíbula e Cônicos, Peneiras de Classificação, Peneiras Lavadoras, Elevador de Canecos, Transportadores de...

  • Engenheiro de Software .Net Sênior

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    Descrição do Cargo:Estamos em busca de um Engenheiro de Software .NET Sênior (Back End) para se juntar à nossa equipe na The BIG Jobsite. Este profissional deve ter um forte compromisso com o desenvolvimento profissional e a entrega de soluções tecnológicas de alto valor.Sobre a Empresa:A The BIG Jobsite colabora com líderes globais em diversas...

  • Engenheiro de Dados

    Há 1 mês

    Salvador, Brasil Empresa de Software Tempo inteiro

    Empresa de Software admite Engenheiro de Dados em Salvador para atuar em Tempo integral, A combinar.. Desenvolver, implementar e gerenciar a infraestrutura de dados utilizando Databricks e Azure, suportando a criação de uma plataforma de Big Data para democratização e soluções de inteligência de dados. Fornecer dados confiáveis, seguros e...

  • Engenheiro de Dados

    Há 4 dias

    Salvador, Brasil Empresa do setor privado Tempo inteiro

    Empresa admite Engenheiro de Dados em Salvador. Estabelecer contato com colegas de trabalho e clientes para esclarecer os requisitos de cada tarefa. Conceituar e gerar infraestrutura que permita o acesso e a utilização de big data analisado. Reformular estruturas existentes para otimizar seu funcionamento.

  • Engenheiro de Software Sênior

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    Na The BIG Jobsite, somos uma empresa inovadora focada no desenvolvimento de soluções tecnológicas para a administração pública, visando simplificar processos e promover o crescimento das cidades brasileiras. Estamos em busca de Desenvolvedores Fullstack Sêniores que tenham paixão por tecnologias que fazem a diferença na sociedade. Ao integrar nossa...

  • Engenheiro de Dados

    1 semana atrás

    Salvador, Brasil Empresa Tempo inteiro

    Empresa admite Engenheiro de Dados em Salvador para atuar em Tempo integral, A combinar.. Estabelecer contato com colegas de trabalho e clientes para esclarecer os requisitos de cada tarefa. Conceituar e gerar infraestrutura que permita o acesso e a utilização de big data analisado. Reformular estruturas existentes para otimizar seu funcionamento.. É...

  • Engenheiro de Software .Net Sênior

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    Engenheiro de Software .NET Sênior (Back End) A The BIG Jobsite está em busca de profissionais experientes em Desenvolvimento .NET que tenham um forte desejo de crescimento profissional e de proporcionar valor por meio da tecnologia. Os nossos parceiros são líderes de mercado em diversas áreas, e o candidato selecionado participará de projetos...

  • Curadoria de Big Data Pleno

    2 meses atrás

    Salvador, Brasil Cidacs Tempo inteiro

    Para essa vaga, você atuará nas ações de Curadoria de Dados voltadas à organização, data quality e data handling de grandes bases de dados e elaboração de ETL e sua automação, atuando em projetos multidisciplinar sob a liderança do equipe da Curadoria de Dados do Cidacs. A curadoria de dados é definida como as atividades realizadas para...

  • Engenheiro de Software .Net Sênior

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    Na BIG Jobsite, atuamos com excelência em Estratégia e Inovação, Transformação Digital, BPO, Outsourcing e Serviços Digitais. Com uma equipe robusta de mais de 5.000 profissionais, estamos em busca de um DESENVOLVEDOR .NET SÊNIOR que possua as seguintes qualificações:Requisitos:Graduação completa na área de Tecnologia da...

  • Engenheiro de Dados: Desenvolvedor de Soluções de Dados

    Há 3 dias

    Salvador, Bahia, Brasil Empresa do setor privado Tempo inteiro

    Descrição do Cargo**Empresa do setor privado** busca um profissional qualificado para o cargo de Engenheiro de Dados.ResponsabilidadesEstabelecer contato com colegas de trabalho e clientes para esclarecer os requisitos de cada tarefa.Conceituar e gerar infraestrutura que permita o acesso e a utilização de big data analisado.Reformular estruturas...

  • Engenheiro de Nuvem Sênior

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    Sobre a Vaga:Estamos em busca de um Engenheiro de Nuvem Sênior para se juntar a um projeto de grande escala e relevância internacional.Responsabilidades:Você será responsável por desenvolver e otimizar a infraestrutura necessária para a inferência de modelos de Machine Learning, com foco em processamento de áudio em tempo real. Além disso, você...

  • Engenheiro de Nuvem Sênior

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    Oportunidade:Estamos em busca de um Engenheiro de Nuvem Sênior para se juntar a um projeto inovador em um ambiente internacional.Sobre a Posição:Se você é apaixonado por desenvolver e expandir infraestruturas de Machine Learning e deseja trabalhar em um ambiente dinâmico e flexível, esta é a sua chance.Responsabilidades:Desenvolver e escalar a...

  • Engenheiro de Projetos

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    Junte-se à nossa equipe!Estamos em busca de um Engenheiro de Projetos para integrar nosso time na The BIG Jobsite. Oferecemos um salário compatível com a função, além de um pacote de benefícios atrativo.Horário de Trabalho: ComercialRequisitos:Graduação em Engenharia Civil;Domínio em software Revit;Diferencial: Experiência com estruturas...

  • Engenheiro de Projetos

    2 semanas atrás

    Salvador, Bahia, Brasil The BIG Jobsite Tempo inteiro

    Junte-se à nossa equipe!Estamos em busca de um Engenheiro de Projetos para integrar nosso time na The BIG Jobsite. Oferecemos um salário compatível com a função, além de um pacote de benefícios atrativo.Horário de Trabalho: ComercialRequisitos:Formação em Engenharia Civil;Conhecimento em software Revit;Experiência com estruturas pré-fabricadas...