DATA ENGINEER - BR

Xertica; São Paulo; Presencial; BRL 150 000 - 220 000; Tempo integral

Resumo da oferta

Xertica procura Engenheiro(a) de Dados para atuar no desenvolvimento de soluções escaláveis de dados e IA, incluindo construção de pipelines, arquitetura de dados e automações baseadas em IA.

O profissional irá projetar armazenamento e processamento de dados, trabalhar com bancos SQL/NoSQL/vetoriais e colaborar com equipes de ciência de dados para entregar soluções de IA robustas.

Qualificações

• Formação em Ciência da Computação, Engenharia de Software, Sistemas de Informação ou áreas correlatas.
• Experiência com Python, Java ou Scala.
• Experiência com Apache Spark ou Apache Beam.
• Experiência com orquestradores de workflow, como Airflow, Dagster ou Prefect.
• Experiência com ambientes em nuvem (Google Cloud, AWS ou Azure).
• Conhecimento em bancos de dados relacionais, NoSQL e APIs.
• Conhecimento em modelagem de dados, Data Lake, Data Warehouse e Data Quality.
• Experiência com Git e formatos de armazenamento como Delta, Parquet ou Iceberg.

Responsabilidades

• Desenvolver e manter pipelines de dados (ETL/ELT) escaláveis e de alta performance.

Conhecimentos

Python

Java

Scala

Data modeling

Data Lake/Data Warehouse

Data Quality

Git

Inglês/espanol avançado

Formação académica

Bacharelado em Ciência da Computação ou áreas correlatas

Ferramentas

Apache Spark

Apache Beam

Airflow

Dagster

Prefect

GCP

AWS

Azure

BigQuery

Dataproc

Vertex AI Vector Search

Pinecone

Milvus

Weaviate

Delta Lake

Parquet

Iceberg

Descrição da oferta de emprego

Construa o futuro da Inteligência Artificial na América Latina

Sobre a posição

Buscamos um(a) Engenheiro(a) de Dados para atuar no desenvolvimento de soluções escaláveis de dados e inteligência artificial, sendo responsável pela construção de pipelines, arquiteturas de dados e implementação de automações baseadas em IA para otimizar processos de negócio.

Principais responsabilidades

• Desenvolver e manter pipelines de dados (ETL/ELT) escaláveis e de alta performance.

• Projetar e implementar soluções de armazenamento e processamento de dados.

• Desenvolver soluções utilizando bancos de dados SQL, NoSQL e vetoriais para aplicações de IA e RAG.

• Implementar automações com Inteligência Artificial para aumentar a eficiência operacional.

• Garantir a qualidade, segurança, governança e disponibilidade dos dados.

• Monitorar e otimizar a performance dos ambientes e pipelines de dados.

• Colaborar com cientistas de dados, analistas e equipes de tecnologia na entrega de soluções de dados e IA.

Requisitos

• Formação em Ciência da Computação, Engenharia de Software, Sistemas de Informação ou áreas correlatas.

• Experiência com Python, Java ou Scala.

• Experiência com Apache Spark ou Apache Beam.

• Experiência com orquestradores de workflow, como Airflow, Dagster ou Prefect.

• Experiência com ambientes em nuvem (Google Cloud, AWS ou Azure).

• Conhecimento em bancos de dados relacionais, NoSQL e APIs.

• Conhecimento em modelagem de dados, Data Lake, Data Warehouse e Data Quality.

• Experiência com Git e formatos de armazenamento como Delta, Parquet ou Iceberg.

Diferenciais

• Certificações em Cloud Computing ou Big Data.

• Experiência com BigQuery, Dataproc e Cloud Run (GCP).

• Conhecimento em infraestrutura para LLMOps e integração com modelos de IA.

• Experiência com bancos vetoriais, como Vertex AI Vector Search, Pinecone, Milvus ou Weaviate.

• Conhecimento em Data Masking e PII Redaction.

• Inglês e/ou espanhol avançado.