Big Data Architect

Há 4 dias

São Paulo, São Paulo, Brasil Cybage Software Tempo inteiro R$80.000 - R$120.000 por ano

JD
:

We are seeking an experienced
Big Data Architect
to design and implement scalable data solutions that enable data-driven decision-making across the organization. This role focuses on architecting end-to-end big data pipelines, ensuring data quality, governance, and efficient processing of large datasets. More focused on Data Architectures (Databricks, AWS (Redshift, Dynamo, etc.)), Data Governance, and Data Management. An emphasis on client facing workshops, solution sessions, capability presentations, etc. Candidate should be strong communicators, ideally have worked in some presales / solutioning type team in IT services provider, and are based either in USA or Brazil.

Responsibilities:

  • Big Data Architecture:
    Design and implement scalable, distributed data processing systems using big data technologies (e.g., Hadoop, Spark).
  • Data Pipelines:
    Build and optimize ETL/ELT pipelines to handle large-scale data ingestion, transformation, and storage.
  • Data Governance:
    Establish data governance frameworks, including policies for data security, privacy, and compliance.
  • Quality Control:
    Develop and enforce data quality standards, leveraging tools to monitor and ensure data accuracy and consistency.
  • Cloud Integration:
    Design big data solutions on cloud platforms (AWS, GCP, Azure), leveraging cloud-native tools.
  • Collaboration:
    Work with data engineers, analysts, and business stakeholders to align data architecture with organizational goals.
  • Innovation and Optimization:
    Stay updated on big data technologies and optimize systems for performance, scalability, and cost-efficiency.

Required Skills:

  • Big Data Expertise:
    Hands-on experience with Hadoop, Spark, Kafka, and other big data frameworks.
  • Data Governance:
    Knowledge of governance frameworks and tools like Collibra, Alation, or similar.
  • Quality Control:
    Proficiency in implementing data quality measures and tools (e.g., Apache Griffin, Talend, or Informatica).
  • Cloud Platforms:
    Experience with cloud-based data solutions (BigQuery, AWS EMR, Dataproc).
  • Programming Skills:
    Proficiency in Python, Java, or Scala for data processing.
  • Database Knowledge:
    Strong understanding of SQL and NoSQL databases.
  • Problem-solving:
    Strong analytical skills for troubleshooting and optimizing complex data architectures.

Preferred:

  • Certifications in big data or cloud technologies (e.g., GCP Data Engineer, AWS Big Data Specialty).
  • Experience with MLOps pipelines and integrating AI/ML workflows with big data systems.
  • Knowledge of metadata management and data lineage tools.
  • Familiarity with GDPR, CCPA, and other data privacy regulations.

  • Data Architect

    Há 2 dias

    São Paulo, São Paulo, Brasil Yuno Tempo inteiro R$100.000 - R$200.000 por ano

    Remote, Latam, Full Time, Individual Contributor, +4 years of experienceWho We AreAt Yuno, we are building the payment infrastructure that enables all companies to participate in the global market. Founded by a team of seasoned experts in the payments and IT industries, Yuno provides a high-performance payment orchestrator. Our technology offers companies...

  • Data Architect

    2 semanas atrás

    São Paulo, São Paulo, Brasil Aravita Tempo inteiro US$90.000 - US$120.000 por ano

    About UsAt Aravita, we're not just building a product; we're building the future of AI-enabled fresh food operations. We are a fast-paced, innovative startup on a mission to solve complex problems with data. Our culture is built on collaboration, curiosity, and a passion for technology. We're looking for a brilliant Data Engineer / Cloud Architect to join...

  • Arquiteto Big Data

    Há 4 dias

    São Paulo, São Paulo, Brasil Semantix Tempo inteiro R$10.000 - R$60.000 por ano

    Impactar positivamente bilhões de vidas é nosso propósito e também pode ser o seuFundada em 2010, no Brasil, a Semantix é referência em Big Data, Analytics e Inteligência Artificial.Somos um time de apaixonados por inovação, com diversas origens e diferentes graus de experiência. O que nos une, é a motivação compartilhada de transformar a...

  • consultor big data jr

    Há 4 dias

    São Paulo, São Paulo, Brasil OEMPREGO Tempo inteiro R$30.000 - R$60.000 por ano

    Experiência em linguagem SQL, banco de dados, sistema operacional Linux, redes LAN e WAN, Shell script e DDL script.Conhecimentos em projetos de BI. - Requisitos solicitados pela empresa: Deve ter disponibilidade para viajar.. Cargo: CONSULTOR BIG DATA JR - SAO PAULO | Salario: A combinar. | Ensino: Ensino superior - Bacharelado | Licenciatura | Tecnologia....

  • consultor big data ia

    Há 2 dias

    São Paulo, São Paulo, Brasil OEMPREGO Tempo inteiro R$80.000 - R$120.000 por ano

    Experiência com sistema operacional Linux, criação de Shell scripts, protocolos de comunicação(FTP, SSH, HTTP, TCP-IP), transferências de dados(REST, JSON, XML), expressões regulares(Regex), linguagem LUA, metodologia de suporte ITIL e implementação de software, RUP e Scrum..Conhecimentos em projetos com soluções de Enterprise Search. - Requisitos...

  • Consultor Big Data

    Há 4 dias

    São Paulo, São Paulo, Brasil Vivo (Telefônica Brasil) Tempo inteiro R$90.000 - R$120.000 por ano

    Descrição da vagaVice-Presidência: Tecnologia da InformaçãoDiretoria: Dir Dados e Inteligencia ArtificialLocal de Trabalho: Híbrido - São PauloSoluções inovadoras, com diferenciais eficientes e competitivos, são direcionadores para quem trabalha no time de Data Driven da Diretoria Dados & IA na Vivo. Essa é a área que busca organizar e...

  • Senior Big Data Engineer – Data Lake Specialist

    Há 4 dias

    São Paulo, São Paulo, Brasil Net2Source (N2S) Tempo inteiro R$70.000 - R$120.000 por ano

    Requisitos principais:Experiência: 6 a 9 anos com programação em Java e habilidades obrigatórias de debug.Experiência desejável: Scripts e SQL.Habilidades Técnicas:Proficiência em linguagens de programação orientadas a objetos como Java / C / C++ (preferencialmente Java).Conhecimento em SQL e ambientes de bancos de dados relacionais, especialmente...

  • Analista Big Data Sênior

    1 semana atrás

    São Paulo, São Paulo, Brasil Vivo (Telefônica Brasil) Tempo inteiro R$80.000 - R$120.000 por ano

    Vice-Presidência: TIDir Dados e Inteligencia ArtificialLocal de Trabalho: Híbrido - São PauloResponsabilidades e atribuiçõesEsperamos que o recurso possua ampla experiência em atuação na elaboração de documentos de projeto, desenvoltura em conduzir reunião com áreas de negócio com o objetivo de levantar requisitos funcionais para escrita de...

  • Solutions Architect

    Há 4 dias

    São Paulo, São Paulo, Brasil Kr ELixir Tempo inteiro R$120.000 - R$240.000 por ano

    Job Title: Solution Architect (AuthN/AuthZ patterns)Location: São Paulo, BrazilExperience: 10+ YearsAbout UsKR Elixir Technology, Inc. is a Next Generation IT Services Company headquartered in Georgia, USA, specializing in Data Solutions and enhancing client experiences. Our core objectives are to deliver Business and IT Solutions that exemplify quality,...

  • Data Architect, Professional Services

    Há 13 horas

    São Paulo, São Paulo, Brasil Amazon Web Services Tempo inteiro R$120.000 - R$240.000 por ano

    DESCRIPTIONThe Professional Services (ProServe) team is seeking a skilled Data Architect to join our team at Amazon Web Services (AWS). In this role, you'll work closely with customers to design, implement, and manage AWS solutions that meet their technical requirements and business objectives. You'll be a key player in driving customer success through their...