Engenheiro de Dados Azure Sênior (Remoto)

Dataside Soluções em Banco de Dados; Brasil; Teletrabalho; BRL 60.000 - 100.000; Tempo integral

Resumo da oferta

Uma empresa inovadora está em busca de um Engenheiro de Dados Sênior para construir pipelines de dados e modelos de dados nas camadas Bronze, Silver e Gold. Este papel é crucial para capacitar a equipe de negócios a analisar dados e tomar decisões informadas. O candidato ideal terá experiência em SQL, Python e ferramentas de Big Data, além de habilidades em liderança e DevOps. Se você é apaixonado por dados e busca um ambiente que valoriza a diversidade e a inovação, esta é a oportunidade perfeita para você.

Serviços

Auxílio médico

Wellhub

Auxílio terapia

Teleatendimento em Nutrição

Seguro de vida

Dia de folga no aniversário

Parcerias com instituições de ensino

Gamificação interna

English Club

Reembolso por certificação

Qualificações

• Experiência em construir pipelines de dados e modelos de dados complexos.
• Capacidade de liderar engenheiros de dados e gerenciar infraestrutura como código.

Responsabilidades

• Escrever consultas SQL complexas e construir pipelines de dados com Azure Data Factory.
• Desenvolver e otimizar modelos de dados em tempo real com PySpark.

Conhecimentos

SQL

Python

Azure Data Factory

Databricks

Big Data Architecture

Data Governance

PySpark

DevOps

Machine Learning

Data Analysis

Formação académica

Bachelor's Degree in Computer Science or related field

Ferramentas

Azure Synapse Analytics

Unity Catalog

Purview

Descrição da oferta de emprego

Join or sign in to find your next job

2 days ago Be among the first 25 applicants

Get AI-powered advice on this job and more exclusive features.

Papel na empresa: Construir pipeline de dados entregando modelo de dados nas camadas Bronze, Silver, Gold para o time de negócios ter capacidade de analisar dados e tomar decisões.

Responsabilidades:

1. Escrever consultas SQL complexas para realizar tarefas como selecionar, inserir, atualizar e excluir dados de várias tabelas.
2. Construir pipeline de Dados utilizando Azure Data Factory.
3. Construir notebooks em Python e SQL utilizando Databricks.
4. Construir Modern Data Warehouse com Synapse Analytics (Serverless Dedicated).
5. Desenvolver Data Governance utilizando Unity Catalog ou Purview.
6. Trabalhar com ingestões de dados em Datalakehouse.
7. Definir e explicar conceitos Azure Data Factory, Synapse, Databricks e Fabric de forma crítica.
8. Escrever consultas SQL complexas para tarefas de manipulação de dados.
9. Criar e manipular dataframes e RDDs em PySpark de forma eficiente e escalável.
10. Utilizar diversos tipos de junções e subqueries em SQL.
11. Aplicar funções agregadas e otimizar consultas SQL para grandes conjuntos de dados.
12. Realizar análise exploratória de dados (EDA) e gerar modelos de machine learning com PySpark.
13. Otimizar desempenho de aplicações de processamento de dados com PySpark.
14. Definir e explicar conceitos de DevOps, gerenciar infraestrutura como código, liderar projetos de DevOps.

Requisitos:

• Inglês para conversação nível B2-C1.
• Identificação de requisitos de negócios para modelos de dados complexos.
• Alto conhecimento em arquitetura de Big Data end-to-end.
• Capacidade de projetar e implementar modelos de dados para grandes conjuntos e dados em tempo real.
• Experiência em liderar engenheiros de dados JR e PL.

Diferenciais:

• Projetos de Big Data internacionais.
• Liderança em projetos de BI complexos.
• Conhecimento detalhado de Big Data, computação em nuvem, segurança, soluções distribuídas.
• Habilidade em resolver problemas complexos de dados de forma independente.
• Adaptação rápida a mudanças e tomada de decisões em ambientes dinâmicos.

Nossos Incentivos:

• Auxílio médico, Wellhub, auxílio terapia, teleatendimento em Nutrição, seguro de vida, dia de folga no aniversário, parcerias com instituições de ensino, gamificação interna, English Club, reembolso + bônus por certificação, entre outros.

Atuação remota. Valorizamos cada voz e cada pessoa, porque sabemos que a diversidade nos torna mais inovadores e fortes.

Seniority level

• Mid-Senior level

Employment type

• Contract

Job function

• Information Technology

Referrals increase your chances of interviewing at Dataside by 2x

Sign in to set job alerts for “Senior Data Engineer” roles.

We’re unlocking community knowledge in a new way. Experts add insights directly into each article, started with the help of AI.