Engenheiro/a de dados
4 semanas atrás
Para essa função, é essencial que tenha:
- Experiência em Python: Domínio na linguagem de programação Python.
- Experiência em ETL: Conhecimento em processos de Extração, Transformação e Carga de dados.
- Experiência com Docker: Familiaridade com contêineres Docker para desenvolvimento e implementação.
- Experiência em SQL: Habilidade em escrever e otimizar consultas SQL.
É desejável que tenha:
- Experiência com Apache Airflow: Conhecimento em orquestração de workflows de dados.
- Experiência com AWS: Familiaridade com serviços como Athena, S3 e SQS.
- Experiência em extração de dados do Jira: Habilidade em coletar e manipular dados dessa plataforma.
- Conhecimento em Data Lake e Data Warehouse: Entendimento de conceitos e práticas em armazenamento de dados.
Como engenheiro(a) de dados, suas principais responsabilidades incluirão:
- Desenvolvimento de Extratores de Dados: Criar extratores em Python para coletar dados de diversas fontes, como MySQL, PostgreSQL, Jira, Firebird, arquivos XLS e CSV.
- Implementação e Manutenção: Desenvolver, documentar e manter os extratores de dados, garantindo que estejam sempre atualizados e funcionais, conforme as metodologias estabelecidas.
- Gerenciamento de Fluxos de Dados: Programar extrações e cargas de dados usando o Apache Airflow, criando fluxos de DAGs eficientes.
- Desenvolvimento de Crawlers: Criar crawlers para coletar informações de diferentes fontes, como INPI, CEPEA, B3, CQBAL, entre outras.
- Análise de Impactos: Avaliar como mudanças nas configurações dos sistemas e dados existentes podem afetar a operação, buscando sempre minimizar problemas.
- Segurança dos Dados: Especificar e implementar requisitos de segurança para garantir a integridade e a proteção dos dados extraídos.
- Automação e Otimização: Automatizar e otimizar processos de integração, carga de dados, geração de tabelas e tratamento de erros, visando melhorar a performance e a visualização dos dados.
- Pesquisa e Desenvolvimento: Participar de projetos de pesquisa e desenvolvimento, contribuindo com inovações na área de dados.
-
Engenheiro de Dados
Há 1 mês
HOME OFFICE, Brasil QiBit Vagas Tempo inteiroRequisitos para o CargoÉ importante que você tenha conhecimento e/ou experiência em:Experiência como Engenheiro de DadosExperiência em Análise de Big DataExperiência com SQLExperiência em Modelagem de DadosConhecimento em Linguagem de Programação PythonConhecimento em Cloud AWS (S3, Glue, Lambda, Terraform)Se você tem essas habilidades e...
-
Engenheiro de Dados
2 meses atrás
HOME OFFICE, Brasil QiBit Vagas Tempo inteiroÉ importante que você tenha conhecimento e/ou experiência em: Experiência como Engenheiro de Dados; Experiência em análise de Big Data. Experiência com SQL; Experiência em modelagem de Dados; Conhecimento com linguagem de programação Python; Conhecimento em Cloud AWS (S3, Glue, Lambda, Terraform).
-
Engenheiro (a) de dados azure
2 meses atrás
HOME OFFICE, Brasil Stefanini Group Tempo inteiro- Sólida experiência como Engenheiro de Dados utilizando em seu dia a dia: Azure, Synapse, Datafactory Devops. Será um diferencial se tiver: - Experiência com Alteryx e Tableau. 100% Home office Contrato: CLT Estamos à procura de um (a) Engenheiro (a) de Dados com sólida expertise em Azure para se juntar à nossa equipe. O (A) candidato (a) ideal deve...
-
Engenheiro de Dados
4 semanas atrás
HOME OFFICE, Brasil Grupo Autoglass Administrativo Tempo inteiroRequisitos para o CargoPara se candidatar ao cargo de Engenheiro Analítico, é necessário ter:Ensino Superior completo ou em andamento em áreas de tecnologia, administração, engenharias ou afins;Habilidade em comunicação para interagir com stakeholders de áreas técnicas e de negócios;Experiência em ambientes complexos e com grande volume de...
-
Engenheiro de Dados
3 semanas atrás
HOME OFFICE, Brasil Vagas by Intera Tempo inteiroSeja um dos nossos Engenheiros de DadosNa Vagas by Intera, estamos procurando por um profissional talentoso para se juntar à nossa equipe de Engenheiros de Dados. Nossa plataforma de dados de frete é a maior da América Latina e estamos em busca de alguém que possa ajudar a construí-la.ResponsabilidadesDesenvolver e manter pipelines de dados (ETL/ELT/EL)...
-
HOME OFFICE, Brasil BIX Tecnologia - Consultoria de Dados Tempo inteiroDescrição do CargoNossa empresa, BIX Tecnologia - Consultoria de Dados, está procurando por um profissional qualificado para ocupar o cargo de Especialista em Inteligência de Dados. Nesta função, você terá a oportunidade de trabalhar em projetos nacionais e internacionais, desenvolvendo habilidades em análise de dados e ciência de...
-
Engenheiro de dados
4 semanas atrás
HOME OFFICE, Brasil Stefanini Group Tempo inteiroRequisitos para o cargoO Stefanini Group está procurando por um profissional experiente em serviços de dados do Azure para integrar sua equipe de tecnologia. O candidato ideal deve ter conhecimento profundo em serviços de dados do Azure, incluindo Azure Data Factory, Azure Databricks, Azure Synapse Analytics e Azure SQL Database.Competências...
-
Engenheiro de Dados Sênior
3 semanas atrás
HOME OFFICE, Brasil aTip Tempo inteiroDesenvolva sua carreira como Engenheiro de Dados Sênior na aTipA aTip está procurando por um Engenheiro de Dados Sênior para se juntar à nossa equipe. Nesta posição, você terá a oportunidade de trabalhar em projetos de grande escala e contribuir para a inovação e o crescimento da empresa.Responsabilidades:Desenvolver soluções de dados para apoiar...
-
Engenheiro de Dados
4 semanas atrás
HOME OFFICE, Brasil #SejaSBT Tempo inteiroRequisitos da VagaPara a posição de Engenheiro de Dados, você precisa:Ter conhecimento em boas práticas em armazenamento de dados, processos de ETL/ELT e implementação de Data Lake;Ter experiência com processamento distribuído;Conhecimento em arquitetura e mapeamento/modelagem de dados;Ter conhecimento em alguma ferramenta de gerenciamento de fluxo...
-
Engenheiro de Dados Azure
4 semanas atrás
HOME OFFICE, Brasil Stefanini Group Tempo inteiroEstamos procurando por um profissional experiente em Azure para se juntar à nossa equipe de Engenheiros de Dados. O candidato ideal deve ter sólida expertise em Azure, Synapse e Datafactory Devops.Responsabilidades:Desenvolver pipelines de dados utilizando Datafactory Devops.Trabalhar com Synapse para análise de dados.Colaborar com a equipe para...
-
Engenheiro de Dados Azure
3 semanas atrás
HOME OFFICE, Brasil Stefanini Group Tempo inteiroEstamos à procura de um profissional experiente em Azure para se juntar à nossa equipe de Engenheiros de Dados na Stefanini Group. O candidato ideal deve ter sólida expertise em Azure, Synapse e Datafactory Devops.Responsabilidades:Desenvolver pipelines de dados utilizando Datafactory Devops.Trabalhar com Synapse para análise de dados.Colaborar com a...
-
Engenheiro de Dados Pleno
1 semana atrás
HOME OFFICE, Brasil Stefanini Group Tempo inteiroDesenvolvimento de Pipelines de DadosO Engenheiro de Dados será responsável por criar e manter pipelines de dados utilizando linguagens como Python e Scala, além de implementar processos de ETL com ferramentas como AWS Glue e Lambda.Modelagem de DadosDeverá modelar dados para atender às necessidades das equipes de análise e ciência de dados, colaborar...
-
Engenheiro de Dados Sênior
4 semanas atrás
HOME OFFICE, Brasil aTip Tempo inteiroDesenvolva sua carreira como Engenheiro de Dados Sênior na aTipA aTip é uma empresa que conecta pessoas incríveis da comunidade autista com empresas verdadeiramente engajadas em gerar impacto e inclusão. Nossa parceria com a Globant visa promover a contratação de até 7 profissionais autistas ao longo dos próximos meses.Como Engenheiro de Dados...
-
Engenheiro de Dados Pleno
4 semanas atrás
HOME OFFICE, Brasil YDUQS - Vagas Tech Tempo inteiroBuscamos profissionais com habilidades em tecnologia de dados para desenvolver processos de captura, transformação e disponibilização de dados. Será considerado diferencial conhecimento em ferramentas de visualização de dados e experiência em construção e gestão de DataLake.Os principais desafios como Engenheiro de Dados Pleno incluem desenvolver...
-
Engenheiro de Dados Sênior
4 semanas atrás
HOME OFFICE, Brasil Deal Tempo inteiroSobre a DealNossa consultoria de serviços de tecnologia é uma parceira estratégica para empresas em qualquer estágio de maturidade digital. Nossa equipe de especialistas multidisciplinares trabalha em projetos sob medida para criar soluções criativas e inteligentes que atendam às necessidades específicas de cada cliente.Sobre a VagaBuscamos um...
-
Engenheiro/a de dados
1 semana atrás
HOME OFFICE, Brasil Nitro Agro Tempo inteiroExperiência comprovada como Engenheiro de Dados ou em posição similar. Proficiência em ferramentas de ETL (ex.: Apache NiFi, Talend, Informatica). Sólidos conhecimentos em bancos de dados relacionais e NoSQL (ex.: PostgreSQL, MongoDB). Experiência com tecnologias de Big Data (ex.: Hadoop, Spark, Kafka). Proficiência em linguagens de programação como...
-
Engenheiro de Dados Sênior
4 semanas atrás
HOME OFFICE, Brasil Deal Tempo inteiroSobre a DealNossa empresa é uma consultoria de serviços de tecnologia e parceira estratégica para empresas em qualquer estágio de maturidade digital. Somos especialistas em criar soluções criativas e inteligentes para os desafios e necessidades específicas de cada cliente.Sobre a VagaBuscamos alguém que queira contribuir para a nossa equipe como...
-
Engenheiro(a) de dados
3 semanas atrás
HOME OFFICE, Brasil dti digital Tempo inteiroDesenvolvedor de DadosA dti digital está em busca de um profissional apaixonado por desenvolver soluções inovadoras e eficazes para o mundo dos dados. Como Engenheiro(a) de Dados, você será responsável por desenvolver e implementar soluções de dados que ajudem a empresa a tomar decisões informadas e a melhorar a experiência do...
-
Engenheiro de Dados Sênior
1 semana atrás
HOME OFFICE, Brasil Deal Tempo inteiroSobre a DealNossa empresa é uma consultoria de serviços de tecnologia e parceira estratégica para empresas em qualquer estágio de maturidade digital. Nossa missão é criar soluções criativas e inteligentes em torno dos desafios e necessidades específicas de cada cliente.Sobre a VagaEstamos procurando por alguém que queira contribuir para a nossa...
-
Engenheiro de Dados
2 meses atrás
HOME OFFICE, Brasil Vagas by Intera Tempo inteiroSeja um Engenheiro de Dados na Vagas by InteraConstrua a maior plataforma de dados de frete da América Latina com nossa equipe de especialistas em ciência de dados.Responsabilidades e AtribuiçõesParticipar ativamente da construção da plataforma de dados de frete da América Latina;Desenvolver e sustentar pipeline de dados (ETL/ELT/EL) com...