Senior Data Engineer for AI-Driven Data Pipelines

Openkrill; United States; Remote; USD 120,000 - 170,000; Full time

Benefits offered by this job

Plano de saúde

Vale alimentação e refeição

Auxílio-creche

Licença parental estendida

PLR

Seguro de Vida

CI&T University

Clube de descontos

Idiomas na plataforma

Job summary

CI&T está fortalecendo a infraestrutura de dados para clientes nos setores de serviços financeiros e seguros, com foco em pipelines de dados, ETL e soluções orientadas a eventos. Você fará parte de squads técnicas que trabalham com IA, garantindo ingestão, transformação e disponibilidade de dados para analytics.

A posição demanda experiência em Python/Node.js, SQL, e frameworks de governança; participação em ambientes ágeis é valorizada.

Qualifications

• Experiência sólida em programação back-end para construção de pipelines de dados, com proficiência em Python e/ou Node.js.
• Domínio de SQL para manipulação, modelagem e otimização de dados em larga escala.
• Experiência em arquitetura de soluções de banco de dados NoSQL e data warehouse na nuvem (ex.: BigQuery, Firestore).
• Conhecimento sólido em conceitos de computação em nuvem (AWS e/ou Azure), com domínio das soluções de Big Data do Google Cloud Platform (GCP).
• Experiência na orquestração de pipelines de dados e processos de ETL (ex.: dbt, Airflow, Dataform).
• Familiaridade com frameworks de governança e gestão de dados (ex.: DAMA, CRISP).
• Vivência com metodologias ágeis (Scrum, Kanban) em times multidisciplinares.

Responsibilities

• Gerencia dados da plataforma, assegurando integridade, disponibilidade e consistência ao longo de todo o ciclo de vida dos dados.
• Gerencia a tecnologia da plataforma, mantendo a infraestrutura de dados atualizada, estável e alinhada às necessidades do negócio.
• Orquestra processos de extração, transformação e carga (ETL), automatizando fluxos de dados entre sistemas de origem e ambientes analíticos.
• Arquitetura soluções de dados orientadas a eventos, definindo estruturas que suportam captura e processamento de dados em tempo real.
• Cataloga dados para consumo, documentando fontes, definições e regras de negócio para facilitar o uso por equipes analíticas.
• Promove a qualidade dos dados por meio da implementação de validações, testes e rotinas de monitoramento contínuo.
• Promove a observabilidade da solução, implementando métricas e alertas que permitem identificar falhas e gargalos nos pipelines.
• Promove a otimização de custos da infraestrutura de dados, revisando consumo de recursos e ajustando arquiteturas conforme necessário.
• Habilita e integra dados de domínio, conectando fontes distintas para consolidar uma visão analítica unificada.
• Gerencia APIs da solução, garantindo integrações seguras e performáticas entre sistemas.
• Evolui a capacidade do stack de dados, avaliando e implementando melhorias tecnológicas de forma incremental.

Skills

Python

Node.js

SQL

NoSQL

BigQuery

Firestore

dbt

Airflow

Dataform

Tools

BigQuery

Firestore

dbt

Airflow

Dataform

Job description

CI&T está fortalecendo a infraestrutura de dados para clientes nos setores de serviços financeiros e seguros, com foco em pipelines de dados, ETL e soluções orientadas a eventos. Você fará parte de squads técnicas que trabalham com IA, garantindo ingestão, transformação e disponibilidade de dados para analytics.

A posição demanda experiência em Python/Node.js, SQL, e frameworks de governança; participação em ambientes ágeis é valorizada.