Arquiteto de Soluções de Dados Especialista

Verx Tecnologia e Inovação; São Paulo; On-site; BRL 180,000 - 320,000; Full time

Job summary

A Verx Tecnologia e Inovação busca um Arquiteto(a) de Soluções de Dados Especialista para liderar a migração de plataformas de dados para Google Cloud, com foco em IA Generativa aplicada à engenharia de software e conversão de código.

O profissional atuará na definição de soluções de dados, padrões arquiteturais e integração de tecnologias Big Data, garantindo alta qualidade, escalabilidade e governança durante projetos de grande porte.

Qualifications

• Mínimo de 10 anos de experiência na área de dados.
• Sólida experiência em arquitetura de soluções de dados (pelo menos 4 anos).
• Experiência mínima de 3 anos com arquitetura de dados no Google Cloud (Dataproc, BigQuery, Cloud Storage, Composer e IAM).
• Domínio do ecossistema Big Data (Spark, PySpark, Hive, Kafka e HBase).
• Experiência em migração de plataformas de dados para nuvem.
• Conhecimento em Lakehouse, Apache Iceberg e Parquet.
• Vivência com IA Generativa aplicada à engenharia de software e conversão de código.

Responsibilities

• Definir e validar a arquitetura de dados no Google Cloud, alinhada aos requisitos técnicos do projeto.
• Atuar na definição de soluções para migração de plataformas de dados para nuvem.
• Estabelecer padrões arquiteturais para Dataproc, BigQuery, Cloud Storage, Composer e IAM.
• Apoiar a migração de componentes do ecossistema Big Data (Spark, PySpark, Hive, Kafka, HBase).
• Aplicar conceitos de Lakehouse, Apache Iceberg e Parquet na definição das soluções de dados.
• Utilizar aceleradores tecnológicos e IA Generativa para apoiar engenharia de software e conversão de código.
• Avaliar alternativas técnicas e propor soluções para garantir qualidade e integridade dos dados durante a migração.
• Colaborar com equipes técnicas na definição de padrões e boas práticas de arquitetura de dados.

Skills

Arquitetura de dados

Big Data

Google Cloud

IA Generativa

Migração para nuvem

Análise de dados

Comunicação eficaz

Visão sistêmica

Autonomia

Tools

Dataproc

BigQuery

Cloud Storage

Composer

IAM

Apache Iceberg

Parquet

Spark

PySpark

Kafka

HBase

Job description

A VERX é uma consultoria especializada em TI, apaixonada por desafios e comprometida em impulsionar transformações tecnológicas estratégicas para nossos clientes. Se você busca crescimento profissional e deseja atuar em projetos inovadores, essa oportunidade é para você.

Estamos em busca de um(a) Arquiteto(a) de Soluções de Dados Especialista - Google Cloud & IA para atuar em um projeto estratégico de grande porte, envolvendo a migração de plataformas de dados para Google Cloud, com utilização de aceleradores e Inteligência Artificial.

Buscamos um profissional com sólida experiência em arquitetura de dados, domínio do ecossistema Big Data e capacidade de definir soluções tecnológicas para ambientes complexos de dados em nuvem.

Requisitos técnicos:

• Mínimo de 10 anos de experiência na área de dados, sendo pelo menos 4 anos em arquitetura de soluções de dados.
• Experiência mínima de 3 anos com arquitetura de dados no Google Cloud, incluindo Dataproc, BigQuery, Cloud Storage, Composer e IAM.
• Domínio do ecossistema Big Data, incluindo Spark, PySpark, Hive, Kafka e HBase.
• Experiência em migração de plataformas de dados para nuvem.
• Conhecimento em arquiteturas Lakehouse, Apache Iceberg e Parquet.
• Vivência com Inteligência Artificial Generativa aplicada à engenharia de software e conversão de código.

Diferenciais:

• Certificações Google Cloud.
• Experiência com Apache Flink.
• Conhecimento em CDC/Debezium.
• Experiência em projetos no setor financeiro.

O que esperamos de você:

• Capacidade analítica para avaliar alternativas e tomar decisões arquiteturais.
• Boa comunicação para interagir com equipes técnicas e áreas de negócio.
• Visão sistêmica para compreender dependências e impactos entre plataformas de dados.
• Autonomia, colaboração e orientação à qualidade das entregas.
• Capacidade de atuar em projetos de alta complexidade tecnológica.

Atividades e Desafios:

• Definir e validar a arquitetura de dados no Google Cloud, considerando os requisitos técnicos e as necessidades do projeto.
• Atuar na definição de soluções para migração de plataformas de dados para nuvem.
• Estabelecer padrões arquiteturais para utilização de Dataproc, BigQuery, Cloud Storage, Composer e IAM.
• Apoiar a migração de componentes do ecossistema Big Data, incluindo Spark, PySpark, Hive, Kafka e HBase.
• Aplicar conceitos de Lakehouse, Apache Iceberg e Parquet na definição das soluções de dados.
• Utilizar aceleradores tecnológicos e Inteligência Artificial Generativa para apoiar processos de engenharia de software e conversão de código.
• Avaliar alternativas técnicas e propor soluções para garantir a qualidade e a integridade dos dados durante a migração.
• Colaborar com equipes técnicas na definição de padrões e boas práticas de arquitetura de dados.