Senior Data Engineer — Azure & Databricks AI Pipelines

OpenKrill; United States; Remote; USD 110.000 - 170.000; Vollzeit

Benefits dieser Stelle

Plano de saúde e odontológico

Vale alimentação e refeição

Auxílio-creche

Licença parental estendida

PLR

Zusammenfassung

CI&T está recrutando para atuar como Engenheiro(a) de Dados para garantir a integridade, consistência e eficiência dos modelos de dados em todo o ecossistema, estabelecendo padrões e governança.

O(a) profissional atuará em pipelines no ambiente Azure com Databricks, integrando equipes de negócio e ciência de dados para deploy de modelos de IA na nuvem, assegurando qualidade e monitoramento de dados.

Qualifikationen

• Experiência sólida em Azure Data Services e Databricks.
• Experiência com Databricks com PySpark.
• Arquitetura medalhão.
• Domínio de Python e SQL para manipulação de dados.
• Conhecimento em CI/CD e versionamento com GitHub.
• Modelagem de dados analíticos ( ingestão, preparação e consumo ).
• Vivência em migração para cloud.
• Experiência em ETL/ELT e integração de grandes volumes de dados.
• Experiência com deploy de modelos de IA e uso de Azure ML.
• Experiência com IA e automação de pipelines.

Aufgaben

• Desenvolver pipelines de dados (ETL/ELT) em Azure com Databricks.
• Garantir visão 360º do projeto e impactos das soluções.
• Aplicar CI/CD para deploys e versionamento no GitHub.
• Modelar e evoluir tabelas no Unity Catalog com boas práticas.
• Projetar modelos de dados para escalabilidade e governança.

Kenntnisse

Azure Data Services

Databricks

PySpark

Python

SQL

CI/CD

GitHub

Data Modeling

Cloud Migration

Tools

Azure ML

Databricks MLflow

Jobbeschreibung

CI&T está recrutando para atuar como Engenheiro(a) de Dados para garantir a integridade, consistência e eficiência dos modelos de dados em todo o ecossistema, estabelecendo padrões e governança.

O(a) profissional atuará em pipelines no ambiente Azure com Databricks, integrando equipes de negócio e ciência de dados para deploy de modelos de IA na nuvem, assegurando qualidade e monitoramento de dados.