Engenheiro De Dados Sênior

Datalp Consultoria Em Dados; Teletrabalho; BRL 20.000 - 80.000; Tempo parcial

Resumo da oferta

Uma empresa especializada em dados busca um Engenheiro de Dados Sênior que atuará 100% remoto. O profissional será responsável por desenvolver arquiteturas de dados e implementar soluções de integração utilizando Databricks, DBT e Airflow. É necessário ter domínio em SQL, Python e segurança de dados, além de habilidades em ferramentas de BI, como Power BI. A faixa salarial é de R$ 9.000,00 a R$ 12.000,00, dependendo do contrato.

Qualificações

• Domínio em Databricks e suas ferramentas.
• Experiência em modelagem de dados com DBT.
• Capacidade para otimizar desempenho em SQL e ETL/ELT.
• Experiência com pipelines de dados utilizando Airflow.
• Conhecimentos em governança e segurança de dados.

Responsabilidades

• Desenvolver arquiteturas de dados robustas.
• Design de pipelines de dados para ETL/ELT.
• Criar modelos de dados para análises e relatórios.
• Identificar problemas de desempenho em consultas SQL.
• Documentar processos e arquiteturas de dados.
• Desenvolver dashboards em Power BI.

Conhecimentos

Domínio em Databricks

Domínio em DBT

Domínio em SQL e Python

Domínio em Airflow

Domínio em processamento de dados em larga escala utilizando Spark

DataOPS

Domínio em Governança e Segurança de dados

Domínio em integração com ferramentas de BI/Analytics

Formação académica

Ensino superior em T.I. ou áreas correlatas

Ferramentas

Power BI

Descrição da oferta de emprego

Engenheiro de Dados Sênior PJ 100% Home Office DataLP Consultoria em Dados • Jacareí, Estado de São Paulo, BR

Vaga: Engenheiro de Dados Sênior PJ 100% Home Office

A DataLP Consultoria em Dados é uma empresa especialista e apaixonada por dados e suas análises onde buscamos uma visão estratégica com metodologias modernas para as tomadas de decisões com qualidade. Desse modo, oferecemos a solução ideal para quem quer ter a visão completa dos indicadores do seu negócio.

As demandas em Engenharia de dados são: por escopo de projeto, por horas trabalhadas ou fixo mensal alocado remotamente no cliente.

Responsabilidades:

• Desenvolver e implementar arquiteturas de dados robustas e escaláveis, garantindo que atendam aos requisitos de negócios atuais e futuros.
• Integração de Dados: Projetar e implementar pipelines de dados eficientes para coleta, transformação e carga (ETL/ELT) de dados de diversas fontes para data warehouses ou data lakes.
• Modelagem de Dados: Criar modelos de dados dimensionais e normalizados para suportar análises avançadas e relatórios.
• Otimização de Desempenho: Identificar e resolver problemas de desempenho em consultas SQL, pipelines de dados e processos de ETL/ELT.
• Governança de Dados: Estabelecer políticas e práticas para garantir a qualidade, segurança e integridade dos dados.
• Colaboração com Stakeholders: Trabalhar em estreita colaboração com equipes de negócios, cientistas de dados e analistas para entender requisitos e fornecer soluções de dados adequadas.
• Documentação e Padronização: Documentar processos, padrões e arquiteturas de dados para facilitar a colaboração e garantir a consistência.
• Desenvolvimento de dashboards em Power BI.

Requisitos:

• Domínio em Databricks: uso de notebook, clusters, jobs, Delta Lake e Unity Catalog.
• Domínio em DBT: Arquitetura lakehouse e boas práticas de modelagem de dados com DBT.
• Domínio em SQL e Python:
• Domínio em Airflow:
• Domínio em processamento de dados em larga escala utilizando Spark:
• DataOPS: CI/CD para pipeline de dados, versionamento GIT, testes, automação e orquestração com Airflow.
• Domínio em Governança e Segurança de dados: controle de acessos, catalogação, mascaramento e políticas para dados sensíveis.
• Domínio em integração com ferramentas de BI/Analytics: especialmente Power BI.
• Ensino superior em T.I. ou áreas correlatas.

Diferenciais:

• Conhecimento em engenharia de dados GCP.
• Conhecimento em engenharia de dados AWS.
• Conhecimento em outras ferramentas de BI (Tableau, QlikView, DataStudio ...).
• Conhecimento em outras de E.T.L. (Spark, Hadoop).

Regime de contratação: PJ por escopo de projeto fechado OU por horas trabalhadas OU fixo mensal.

Salário alocado remotamente no cliente: R$ 9.000,00 - 12.000,00 reais

Salário por escopo de projeto: A combinar

Salário por horas trabalhadas: A combinar