Data Engineer

Há 9 horas

Belo Horizonte, Brasil Caderno Nacional Tempo inteiro

Data Engineer - Detalhes da Vaga. ? Somos uma empresa tech-first e estamos em fase de rápida expansão, com grandes desafios de dados e automação pela frente. ? Estamos em busca de uma pessoa Sênior Data Engineer para fazer parte do nosso time de dados. ? Você será responsável por projetar, construir e manter pipelines robustas e escaláveis de coleta de dados do mercado de real estate, bem como garantir uma infraestrutura de dados eficiente, escalável e com pensamento em minimização de custos. ? Responsabilidades Dominar Coleta e Transformação de Dados (Scraping & ETL): Liderar nossa estratégia de Web Scraping para capturar dados no mercado imobiliário em larga escala. ? Você será responsável por todo o ciclo de vida do dado, desde a construção dos scrapers resilientes e éticos, passando pela orquestração das pipelines de ETL com ferramentas como o Airflow, até a modelagem e disponibilização no Data Warehouse Otimização Ponta a Ponta: Mergulhar fundo em nossos códigos em Python e SQL para identificar e eliminar possíveis gargalos. ? Você irá otimizar queries complexas em PostgresSQL, refatorar lógicas de negócio para serem mais perfomáticas e reduzir a latência de APIs críticas. ? Construir Fundações Escaláveis: Projetar e implementar a fundação da nossa inteligência de mercado. ? Isso vai desde a construção, manutenção e orquestração dos scrapers, otimização no Data Warehouse em BigQuery, a performance do Cloud SQL e o desenho de APIs de dados robustas. ? Elevar a Barra de Engenharia: Implementar e disseminar uma cultura de excelência. ? Isso significa automação de testes (como testes de carga), CI/CD, monitoramento proativo (observabilidade) e criação de padrões de código que garantam qualidade e performance Referência Técnica: Documentar boas práticas e mentorar outros membros do time Requisitos obrigatórios Histórico sólido (5+ anos) resolvendo problemas de escalabilidade e performance em sistemas de dados complexos Experiência em Otimização em SQL e Python e em construção de Scrapers Experiência Sólida em Arquitetura em Nuvem (GCP/AWS): App Engine, Cloud Run, Pub/Sub, Cloud SQL, BigQuery, Storage Paixão por construir sistemas robustos e bem documentados. ? Você pensa em como suas soluções serão usadas por outros desenvolvedores e como elas se comportarão sob estresse. ? Habilidade de analisar código legado, entender as necessidades do negócio e propor soluções pragmáticas que entreguem valor rapidamente, sem medo de assumir a responsabilidade de ponta a ponta. ? Diferenciais: Experiência com modelos de LLM em produção (LLM Agents) Scrapers no mercado imobiliário (dados e notícias) Experiência com deployment de AI Agents ou outros modelos de AI Se você é apaixonado por dados, curte resolver problemas complexos com soluções elegantes e escaláveis, e quer participar da transformação do mercado imobiliário com tecnologia vem com a gente . Requisitos para participar do processo. ? . O que oferecemos.

  • Data Engineer

    Há 9 horas

    Belo Horizonte, Brasil Caderno Nacional Tempo inteiro

    Data Engineer - Detalhes da Vaga. ? Solutions are delivered by several Product Teams focused on different domains - Customer, Loyalty, Search and Browse, Data Integration, Cart. ?Current overriding priorities are new brands onboarding, re-architecture, database migrations, migration of microservices to a unified cloud-native solution without any disruption...

  • Senior Data Engineer

    Há 9 horas

    Belo Horizonte, Brasil Caderno Nacional Tempo inteiro

    Senior Data Engineer - Detalhes da Vaga. ? This is a full-time, 100% remote opportunity exclusive to candidates located in Brazil. ? You''ll be working with a fast-paced US-based company, leading innovations in sustainable commerce and data-driven operations. ??? What You'll DoDesign, develop, and maintain robust, scalable data infrastructure across...

  • Data Engineer

    1 semana atrás

    Belo Horizonte, Brasil buscojobs Brasil Tempo inteiro

    This position is fully remote and is a PJ contract. Pay range is 25-29 / hr USD. Required Skills & Experience 5+ years of experience as a Data Engineer with minimum 3 years of experience in Azure tool stack (Databricks, ADF, Synapse Analytics) Good to have experience with other Azure services Azure Functions, Event Grid, etc Strong expertise in writing...

  • Senior Data Engineer

    Há 8 horas

    Belo Horizonte, Brasil Pride Global Tempo inteiro

    We're Hiring: Senior Data Engineer (MLOps) | Remote from Brazil | Fluent English required| USD-Hourly payLocation : Remote – Brazil only? Language : Fluent English requiredAre you passionate about building scalable data platforms and cutting-edge MLOps solutions? Do you want to work with a top-tier US company revolutionizing e-commerce and circular...

  • Data Engineer

    Há 9 horas

    Belo Horizonte, Brasil Caderno Nacional Tempo inteiro

    Data Engineer - Detalhes da Vaga. ? S. ?-based company that provides technical expertise, testing, and certification services to the global food and agricultural industry. ? Their mission is to ensure food safety, quality, and sustainability across international supply chains. ?This role is critical to building, maintaining, and modernizing data pipelines...

  • Data Engineer

    1 semana atrás

    Belo Horizonte, Brasil Luxoft Tempo inteiro

    Project Description:The primary goal of the project is the modernization, maintenance and development of an eCommerce platform for a big US-based retail company, serving millions of omnichannel customers each week.Solutions are delivered by several Product Teams focused on different domains - Customer, Loyalty, Search and Browse, Data Integration,...

  • Data/Ai Engineer

    Há 4 dias

    Belo Horizonte, Brasil Able.Digital Tempo inteiro

    We are seeking a fractional Data/AI Specialist to support our sales team on a per-hour/contract basis.This role will primarily serve as a Sales Engineer, providing technical expertise during sales calls and helping prospects understand the value of our data-driven solutions.Key Responsibilities Join sales calls as the technical expert, answering customer...

  • Data Engineer

    2 semanas atrás

    Belo Horizonte, Minas Gerais, Brasil Luxoft Tempo inteiro

    Project Description:The primary goal of the project is the modernization, maintenance and development of an eCommerce platform for a big US-based retail company, serving millions of omnichannel customers each week.Solutions are delivered by several Product Teams focused on different domains - Customer, Loyalty, Search and Browse, Data Integration,...

  • Senior Platform Data Engineer

    1 semana atrás

    Belo Horizonte, Brasil Grid Dynamics Tempo inteiro

    Join to apply for the Senior Platform Data Engineer role at Grid Dynamics6 months ago Be among the first 25 applicantsJoin to apply for the Senior Platform Data Engineer role at Grid DynamicsGet AI-powered advice on this job and more exclusive features.We are seeking a Senior Platform Data Engineer to join our team of experts.This role focuses on developing...

  • Data Engineer

    Há 4 dias

    Belo Horizonte, Brasil Luxoft Tempo inteiro

    Project Description: The primary goal of the project is the modernization, maintenance and development of an eCommerce platform for a big US-based retail company, serving millions of omnichannel customers each week. Solutions are delivered by several Product Teams focused on different domains - Customer, Loyalty, Search and Browse, Data Integration, Cart....