Data Engineer

3 semanas atrás


Recife, Pernambuco, Brasil SGF Global Tempo inteiro

Responsabilidades


• Atuar em todo o ciclo de desenvolvimento de software, incluindo testes unitários e de integração


• Realizar deploy em ambientes como Snowflake, Databricks, Hadoop, AWS ou Azure


• Trabalhar com ferramentas de ingestão de dados como StreamSets, Apache NiFi ou Azure Data Factory


• Gerenciar armazenamento distribuído (Kafka, HDFS, S3/ADLS, Elastic)


• Escrever, depurar e otimizar queries SQL


• Desenvolver pipelines e soluções com Python, PySpark, Spark SQL e Spark Structured Streaming


• Utilizar ferramentas como GitHub, GitHub Actions e Databricks Asset Bundles


• Aplicar princípios de design SOLID

Requisitos


• Experiência comprovada como Data Engineer (10 a 15 anos)


• Proficiência em SQL e programação Python


• Domínio de Databricks, Spark e DataLake


• Conhecimento em JSON, DataFrame e Structured Streaming


• Experiência com ferramentas de versionamento e automação (GitHub, GitHub Actions)


• Inglês fluente (obrigatório)

Qualificações Desejáveis


• Conhecimento em SAP WITS/WITSML e CosmoDB


• Familiaridade com Databricks CLI


• Experiência no setor de Óleo & Gás será considerada um diferencial


• Contratação PJ


• Modelo de trabalho 100% remoto


• Projeto de longa duração com cliente multinacional


• Integração com equipe global


  • Data Engineer

    Há 22 horas


    Recife, Pernambuco, Brasil International institute of training islamabad Tempo inteiro

    Role DescriptionThis is a full-time remote role for a Data Engineer at International Institute of Training Islamabad. The Data Engineer will be responsible for data engineering tasks such as data modeling, ETL processes, data warehousing, and data analytics.QualificationsData Engineering, Data Modeling, and ETL skillsData Warehousing and Data Analytics...

  • Remote Data Engineer

    4 semanas atrás


    Recife, Pernambuco, Brasil Insight Global Tempo inteiro

    5+ years of Data Engineer experience Background within financial servicesExperience in AWS-S3 (simple storage service) AWS Glue,Experience in RedshiftDDL DocumentationExperience with Python & SQLAirflow ETLFamiliarity with finance dataRest API experiencePlusses:Amazon DNS (setting up data APIs/data platforms)Day to Day: Build systems to collect, organize,...

  • Data Engineer

    4 semanas atrás


    Recife, Pernambuco, Brasil Jusfy Tempo inteiro

    A Jusfy está em busca de um Data Engineer para compor o time Somos uma startup jurídica que busca constantemente soluções para facilitar a vida dos advogados e advogadas do Brasil. Atuamos na área de tecnologia, desenvolvendo produtos e ferramentas que auxiliam na produtividade diária dos nossos clientes.Somos uma empresa jovem e muito promissora....


  • Recife, Pernambuco, Brasil beBeeDataEngineer Tempo inteiro R$37.800 - R$53.250

    Job OpportunityA biopharmaceutical firm seeks a skilled engineer to support ongoing clinical projects.Design and implement data solutions using DAX models.Develop data pipelines using PySpark and Python programming languages.Collaborate with technical partners to meet project needs.Communicate effectively with cross-functional teams and stakeholders.Required...

  • Data Engineer com AWS

    4 semanas atrás


    Recife, Pernambuco, Brasil ASSURANCE IT Tempo inteiro

    A Assurance contrata:*Data Engineer - 5545100 Pleno/Sênior*Python+AWS, Dados, SQLFunding AWS - Migração de SASProficiência em programação Python, com extensa experiência em bibliotecas de manipulação de dados como Pandas e NumPy.Conhecimento aprofundado dos serviços AWS, particularmente no Amazon Glue e PySpark, com prova de experiência na...

  • Data Engineer

    2 semanas atrás


    Recife, Pernambuco, Brasil Fetchly Labs Tempo inteiro

    Framebridge is a leading company in the custom framing industry, dedicated to helping customers celebrate their memories in a beautiful and meaningful way. As part of our commitment to innovation, we are building a new data platform that will empower our teams with insightful analytics. Our remote work environment fosters collaboration and creativity,...

  • Data Engineer

    3 semanas atrás


    Recife, Pernambuco, Brasil Tata Consultancy Services Tempo inteiro

    Come to one of the biggest IT Services companies in the world Here you can transform your career Why to join TCS? Here at TCS we believe that people make the difference, that's why we live a culture of unlimited learning full of opportunities for improvement and mutual development. The ideal scenario to expand ideas through the right tools, contributing to...


  • Recife, Pernambuco, Brasil beBeeDataEngineering Tempo inteiro US$125.000 - US$175.000

    Senior Data Engineer PositionWe are seeking a highly skilled Senior Data Engineer to join our team. As a key member of our data infrastructure group, you will play a crucial role in designing, building, and maintaining large-scale data systems that empower our teams to make informed decisions.Our ideal candidate has a strong background in data engineering,...

  • Data Engineer III

    Há 2 dias


    Recife, Pernambuco, Brasil BANCO BRADESCO SA Tempo inteiro R$104.000 - R$130.878 por ano

    Sobre o BradescoO Bradesco é um dos maiores grupos financeiros do Brasil, com uma história marcada pelo pioneirismo e inovação. Por meio da nossa carteira amplamente diversificada de produtos financeiros, serviços bancários e de seguros contribuímos com a realização das pessoas e o crescimento sustentável de empresas e sociedade. Venha fazer parte...


  • Recife, Pernambuco, Brasil beBeeDataPipeline Tempo inteiro R$80.000 - R$140.000

    As a seasoned data architect, you will play a pivotal role in designing and maintaining scalable data pipelines using Python, SQL, and related tools.Our ideal candidate will have strong technical abilities and a consulting mindset, with the capacity to learn undocumented systems, troubleshoot gaps, and design forward-looking solutions that scale as our data...