DATA ENGINEER / PYTHON

Decision; Brasil; Teletrabalho; BRL 150 000 - 210 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Kafka experience

Azure cloud environments

Large-scale data projects

Resumo da oferta

Decision procura um Engenheiro de Dados para atuar em projeto de 12 meses, com possibilidade de prorrogação. Modelo: 100% Home Office – Brasil. Inglês Avançado/Fluente, atuação com equipe global.

Principais requisitos incluem Azure Databricks, Spark, Python, PySpark, SQL e ETL/ pipelines de dados. Diferenciais: Kafka, Purview/Unity Catalog, experiência em Azure e grandes projetos.

Qualificações

• Experiência prática com Azure Databricks, Spark e Python
• Sólidos conhecimentos em PySpark, SQL e bancos de dados
• Experiência com Delta Live Tables (DLT) e Databricks SQL
• Experiência com ETL e pipelines de dados
• Conhecimento em Azure Functions, mensageria e ferramentas de orquestração
• Familiaridade com Data Governance, Data Lineage e Data Catalog
• Experiência com GitHub e GitHub Actions, versionamento e CI/CD
• Conhecimento em computação distribuída, incluindo particionamento, joins, shuffles e comportamento de clusters
• Conhecimento de SDLC e boas práticas modernas de engenharia

Conhecimentos

Python

PySpark

SQL

Databases

ETL pipelines

Data governance

Data lineage

Data catalog

SDLC

Distributed computing concepts

Ferramentas

Azure Databricks

Spark

Delta Live Tables

Databricks SQL

Azure Functions

GitHub

GitHub Actions

CI/CD

Kafka

Descrição da oferta de emprego

Estamos buscando Data Engineer para atuar em projeto de 12 meses, com possibilidade de prorrogação. Modelo: 100% Home Office – Brasil Inglês: Avançado/Fluente – atuação com equipe global Projeto: 12 meses, com possibilidade de extensão

Principais requisitos

• Experiência prática com Azure Databricks, Spark e Python
• Sólidos conhecimentos em PySpark, SQL e bancos de dados
• Experiência com Delta Live Tables (DLT) e Databricks SQL
• Experiência com ETL e pipelines de dados
• Conhecimento em Azure Functions, mensageria e ferramentas de orquestração
• Familiaridade com Data Governance, Data Lineage e Data Catalog
• Experiência com GitHub e GitHub Actions, versionamento e CI/CD
• Conhecimento em computação distribuída, incluindo particionamento, joins, shuffles e comportamento de clusters
• Conhecimento de SDLC e boas práticas modernas de engenharia

Diferenciais

• Experiência com Kafka
• Conhecimento em Microsoft Purview ou Unity Catalog
• Vivência em ambientes Azure e projetos de engenharia de dados de grande escala