AWS, Databricks, Python, Pyspark, SQL

Há 2 dias

São Paulo, São Paulo, Brasil Infosys Tempo inteiro R$80.000 - R$120.000 por ano

Job Description
Infosys Brazil
is looking for professionals with the profile of
Data Engineer
to join our team.

Main Activities And Responsibilities

  • Connect different data sources (APIs, databases, files);
  • Automate data ingestion processes;
  • Perform ETL/ELT processes;
  • Handle inconsistent data;
  • Create efficient data storage structures;
  • Define schemas and data relationships;
  • Work with relational and non-relational databases;
  • Ensure performance and scalability;
  • Automate data flows using tools;
  • Monitor and maintain production pipelines.

Required Qualifications

  • Solid knowledge of Python/Spark SQL (for coding in Databricks);
  • Familiarity with AWS services (S3, EC2, Lambda, SQS, SNS, DynamoDB, OpenSearch, etc.);
  • Experience with GitHub (for version control) and GitHub Actions for CI/CD;
  • Advanced English for conversation.

A bout Us
Infosys is a global leader in next-generation digital services and consulting. We enable clients in more than 50 countries to navigate their digital transformation. With over four decades of experience in managing the systems and workings of global enterprises, we expertly steer our clients through their digital journey. We do it by enabling the enterprise with an AI-powered core that helps prioritize the execution of change. We also empower the business with agile digital at scale to deliver unprecedented levels of performance and customer delight. Our always-on learning agenda drives their continuous improvement through building and transferring digital skills, expertise, and ideas from our innovation ecosystem.

EEO
Infosys provides equal employment opportunities to applicants and employees without regard to race; color; sex; gender identity; sexual orientation; religious practices and observances; national origin; pregnancy, childbirth, or related medical conditions; status as a protected veteran or spouse/family member of a protected veteran; or disability. Infosys provides equal employment opportunities to applicants and employees without regard to race; color; sex; gender identity; sexual orientation; religious practices and observances; national origin; pregnancy, childbirth, or related medical conditions; or disability.

  • Senior Technical Solutions Engineer

    Há 5 dias

    São Paulo, São Paulo, Brasil Databricks Tempo inteiro R$90.000 - R$120.000 por ano

    P-1382; This role is hybrid with 3 days in our São Paulo office. As a Sr. Technical Solutions Engineer, you will provide technical support for Databricks Platform related issues and resolve any challenges involving the Databricks unified analytics platform. You will assist customers in their Databricks journey and provide them with the guidance and...

  • Engenheiro de Dados – Databricks

    Há 14 horas

    São Paulo, São Paulo, Brasil 4Solution Group Tempo inteiro R$90.000 - R$120.000 por ano

    Código da Vaga: 1305EmpresaÁrea(s) de AtuaçãoTI - Banco de DadosTecnologia(s): DatabricksDescrição da VagaModelo: Híbrido – São Paulo (2 a 3 vezes por semana presencial no cliente)Local: WT Morumbi - próximo a estação de trem Morumbi da CPTMPeríodo: 5 meses, com possibilidade de renovação, de acordo com o desempenho.RequisitosProfissional com...

  • Engenheiro de Databricks Sr

    1 semana atrás

    São Paulo, São Paulo, Brasil TDW Bi Consulting Tempo inteiro R$90.000 - R$120.000 por ano

    Venha fazer parte do Grupo SynoroSobre nós:No Grupo Synoro, acreditamos que as ideias inovadoras podem transformar o mundo Nosso propósito é apoiar empreendedores e fomentar a colaboração entre pessoas e empresas. Com um time diverso e talentoso, somos responsáveis por marcas como TDW,Triibo,Axyma, Synoro Investimentos e Seu Felix. Junte-se a nós em...

  • Sr Data

    Há 5 dias

    São Paulo, São Paulo, Brasil Databricks Tempo inteiro R$120.000 - R$240.000 por ano

    P-993Mission As a Data & AI Technical Solutions Engineer, you play a critical role by helping customers debug and maintain stable production data pipelines, AI workflows, and more using the Databricks platform.  You will develop product expertise in a couple of areas by advising a broad set of customers and use cases across those technologies.  You will...

  • Engenheiro de Dados Azure

    2 semanas atrás

    São Paulo, São Paulo, Brasil AM53 Tempo inteiro R$80.000 - R$120.000 por ano

    Requisitos:Experiência com Python, Pyspark, Databricks, banco de dados SQL e NoSQL e Cloud Azure.Diferencial: experiência em IA Generativa.

  • Engenheiro de Dados Databricks

    2 semanas atrás

    São Paulo, São Paulo, Brasil Jobbol Tempo inteiro R$90.000 - R$120.000 por ano

    Empresa de Tecnologia admite Engenheiro de Dados Databricks em São Paulo (Morumbi).Responsabilidades:Migrar dados e processos de sistemas legados e transacionais para o Databricks Lakehouse. Desenvolver e otimizar pipelines de dados em Databricks (PySpark e SQL). Estruturar e manter a arquitetura em camadas (medalhão). Criar e configurar schemas, jobs e...

  • Staff Technical Solutions Engineer, Spark

    Há 2 dias

    São Paulo, São Paulo, Brasil Databricks Tempo inteiro R$80.000 - R$120.000 por ano

    P-1411Note: this is a hybrid role and requires ~3 days in the office in São Paulo-SP.As a Spark Staff Technical Solutions Engineer, you will provide a deep dive technical and consulting related solutions for the challenging Apache Spark/ML/AI/Delta/Streaming/Lakehouse reported issues by our customers and resolve any challenges involving the Databricks...

  • Engenheiro De Dados Sênior

    2 semanas atrás

    São Paulo, São Paulo, Brasil MANPOWER STAFFING Tempo inteiro

    Informações da VagaEmpresa: MANPOWER STAFFINGLocalização: São Paulo - SPÁrea de Atuação: Informática / TI / TecnologiaPrincipais Responsabilidades"Pré-requisitos: Experiência com Cloud Azure Azure Data Factory Azure Synapse Databricks Python Spark VerificarPyspark Bancos de dados relacionais (como SQL Server) Bancos de dados não relacionais...

  • Analista de BI

    Há 3 dias

    São Paulo, São Paulo, Brasil SysMap Tempo inteiro R$80.000 - R$120.000 por ano

    Description- Sólidos conhecimentos em SQL- Experiência com TABLEAU- Desejável experiência com Python / PySpark- Experiência com Airflow, APIs Rest e data Streaming- Experiência em Cloud AWS, Google- Domínio de metodologias de BI e ÁgilRequirements- Sólidos conhecimentos em SQL- Experiência com TABLEAU- Desejável experiência com Python / PySpark-...

  • ENGENHEIRO DE DADOS

    Há 3 dias

    São Paulo, São Paulo, Brasil To Brasil Tempo inteiro R$80.000 - R$120.000 por ano

    Necessário: Experiência em cloud, preferencialmente Azure; Experiência com Databricks e/ou Data factory; Experiência em desenvolvimento utilizando SQL, Python, Pyspark e Spark SQL; Experiência em desenvolvimento de soluções utilizando framework Spark; Experiência em modelagem de dados; Experiência com transformação de dados com processamento...