Big Data Architect

Há 4 dias

São Paulo, São Paulo, Brasil Cybage Software Tempo inteiro R$80.000 - R$120.000 por ano

JD
:

We are seeking an experienced
Big Data Architect
to design and implement scalable data solutions that enable data-driven decision-making across the organization. This role focuses on architecting end-to-end big data pipelines, ensuring data quality, governance, and efficient processing of large datasets. More focused on Data Architectures (Databricks, AWS (Redshift, Dynamo, etc.)), Data Governance, and Data Management. An emphasis on client facing workshops, solution sessions, capability presentations, etc. Candidate should be strong communicators, ideally have worked in some presales / solutioning type team in IT services provider, and are based either in USA or Brazil.

Responsibilities:

  • Big Data Architecture:
    Design and implement scalable, distributed data processing systems using big data technologies (e.g., Hadoop, Spark).
  • Data Pipelines:
    Build and optimize ETL/ELT pipelines to handle large-scale data ingestion, transformation, and storage.
  • Data Governance:
    Establish data governance frameworks, including policies for data security, privacy, and compliance.
  • Quality Control:
    Develop and enforce data quality standards, leveraging tools to monitor and ensure data accuracy and consistency.
  • Cloud Integration:
    Design big data solutions on cloud platforms (AWS, GCP, Azure), leveraging cloud-native tools.
  • Collaboration:
    Work with data engineers, analysts, and business stakeholders to align data architecture with organizational goals.
  • Innovation and Optimization:
    Stay updated on big data technologies and optimize systems for performance, scalability, and cost-efficiency.

Required Skills:

  • Big Data Expertise:
    Hands-on experience with Hadoop, Spark, Kafka, and other big data frameworks.
  • Data Governance:
    Knowledge of governance frameworks and tools like Collibra, Alation, or similar.
  • Quality Control:
    Proficiency in implementing data quality measures and tools (e.g., Apache Griffin, Talend, or Informatica).
  • Cloud Platforms:
    Experience with cloud-based data solutions (BigQuery, AWS EMR, Dataproc).
  • Programming Skills:
    Proficiency in Python, Java, or Scala for data processing.
  • Database Knowledge:
    Strong understanding of SQL and NoSQL databases.
  • Problem-solving:
    Strong analytical skills for troubleshooting and optimizing complex data architectures.

Preferred:

  • Certifications in big data or cloud technologies (e.g., GCP Data Engineer, AWS Big Data Specialty).
  • Experience with MLOps pipelines and integrating AI/ML workflows with big data systems.
  • Knowledge of metadata management and data lineage tools.
  • Familiarity with GDPR, CCPA, and other data privacy regulations.

  • Big Data Solution Architect

    4 semanas atrás

    São Paulo, São Paulo, Brasil beBeeData Tempo inteiro

    Data Architect Specialist We're seeking a seasoned Data Architect Specialist to spearhead the design and implementation of large-scale data systems. Key Responsibilities: Design, develop, and maintain scalable data pipelines leveraging Snowflake, DBT, and SQL expertise Enhance DBT models and SQL scripts to meet evolving business requirements Oversee...

  • IT Architect

    4 semanas atrás

    São Paulo, São Paulo, Brasil Santander Tempo inteiro

    IT ArchitectCountry: Brazil**WHAT YOU WILL BE DOING****Atividades e desafios**- Adaptação dos desenhos das soluções técnicas de forma que permitam convivência com soluções on premise- Implementação de componentes / soluções para automação do provisionamento e gestão de infraestrutura em Cloud Pública**Perfil necessário para a vaga**-...

  • Data Architect

    2 semanas atrás

    São Paulo, São Paulo, Brasil Aravita Tempo inteiro US$90.000 - US$120.000 por ano

    About UsAt Aravita, we're not just building a product; we're building the future of AI-enabled fresh food operations. We are a fast-paced, innovative startup on a mission to solve complex problems with data. Our culture is built on collaboration, curiosity, and a passion for technology. We're looking for a brilliant Data Engineer / Cloud Architect to join...

  • Consultor Big Data Sr

    4 semanas atrás

    São Paulo, São Paulo, Brasil TIVIT Tempo inteiro

    **Sobre a** **TIVIT** **|** **Seu futuro, nosso desafio**A **TIVIT** é uma multinacional brasileira e one-stop-shop de tecnologia, presente no mercado há 20 anos e com operação em dez países da América Latina. Por meio de quatro unidades de negócios**:Digital Business**, **Cloud Solutions, CyberSecurity** e **Technology Platforms**, a empresa oferece...

  • Arquiteto Big Data

    Há 4 dias

    São Paulo, São Paulo, Brasil Semantix Tempo inteiro R$10.000 - R$60.000 por ano

    Impactar positivamente bilhões de vidas é nosso propósito e também pode ser o seuFundada em 2010, no Brasil, a Semantix é referência em Big Data, Analytics e Inteligência Artificial.Somos um time de apaixonados por inovação, com diversas origens e diferentes graus de experiência. O que nos une, é a motivação compartilhada de transformar a...

  • Consultor big data

    4 semanas atrás

    São Paulo, São Paulo, Brasil Vivo Digital Tempo inteiro

    Desejável Superior Completo: Ciências de Dados e IA / Ciências da Computação / Sistemas de Informação / Engenharia da Computação e correlatas. Diferencial Pós Graduação: Data Analytics / IA / BI / BIG DATA / IA / Transformação Digital Requisitos Imprescindíveis: Experiência na liderança técnica em projetos tradicionais e ágeis com foco...

  • Consultor big data

    4 semanas atrás

    São Paulo, São Paulo, Brasil Netvagas Tempo inteiro

    Desejável Superior Completo:Ciências de Dados e IA / Ciências da Computação / Sistemas de Informação / Engenharia da Computação e correlatas.Diferencial Pós Graduação:Data Analytics / IA / BI / BIG DATA / IA / Transformação DigitalRequisitos Imprescindíveis:Experiência na liderança técnica em projetos tradicionais e ágeis com foco em DADOS...

  • Big Data Engineer Pleno

    2 semanas atrás

    São Paulo, São Paulo, Brasil Semantix Tempo inteiro R$900.000 - R$1.200.000 por ano

    Impactar positivamente bilhões de vidas é nosso propósito e também pode ser o seuFundada em 2010, no Brasil, a Semantix é referência em Big Data, Analytics e Inteligência Artificial.Somos um time de apaixonados por inovação, com diversas origens e diferentes graus de experiência. O que nos une, é a motivação compartilhada de transformar a...

  • Consultor Big Data

    4 semanas atrás

    São Paulo, São Paulo, Brasil Vivo Digital Tempo inteiro

    **Vice-Presidência: Tecnologia da Informação****Diretoria: Dir Dados e Inteligencia Artificial****Local de Trabalho: Híbrido - São Paulo**Soluções inovadoras, com diferenciais eficientes e competitivos, são direcionadores para quem trabalha no time de Data Driven da Diretoria Dados & IA na Vivo. Essa é a área que busca organizar e disponibilizar...

  • Consultor Big Data

    4 semanas atrás

    São Paulo, São Paulo, Brasil Vivo Digital Tempo inteiro

    Consultor Big Data (Product Owner Dados)Vice-Presidência: Tecnologia da InformaçãoDiretoria: Dir Dados e Inteligencia ArtificialLocal de Trabalho: Híbrido - São PauloSoluções inovadoras, com diferenciais eficientes e competitivos, são direcionadores para quem trabalha no time de Data Driven da Diretoria Dados & IA na Vivo. Essa é a área que busca...