Engenheiro de Dados Sênior PJ 100% Home Office DataLP Consultoria em Dados • Rio de Janeiro, Estado do Rio de Janeiro, Brazil
Vaga: Engenheiro de Dados Sênior PJ 100% Home Office
A DataLP Consultoria em Dados é uma empresa especialista e apaixonada por dados e suas análises onde buscamos uma visão estratégica com metodologias modernas para as tomadas de decisões com qualidade. Desse modo, oferecemos a solução ideal para quem quer ter a visão completa dos indicadores do seu negócio.
As demandas em Engenharia de dados são: por escopo de projeto, por horas trabalhadas ou fixo mensal alocado remotamente no cliente.
Responsabilidades
- Desenvolver e implementar arquiteturas de dados robustas e escaláveis, garantindo que atendam aos requisitos de negócios atuais e futuros.
- Integração de Dados: Projetar e implementar pipelines de dados eficientes para coleta, transformação e carga (ETL/ELT) de dados de diversas fontes para data warehouses ou data lakes.
- Modelagem de Dados: Criar modelos de dados dimensionais e normalizados para suportar análises avançadas e relatórios.
- Otimização de Desempenho: Identificar e resolver problemas de desempenho em consultas SQL, pipelines de dados e processos de ETL/ELT.
- Governança de Dados: Estabelecer políticas e práticas para garantir a qualidade, segurança e integridade dos dados.
- Colaboração com Stakeholders: Trabalhar em estreita colaboração com equipes de negócios, cientistas de dados e analistas para entender requisitos e fornecer soluções de dados adequadas.
- Documentação e Padronização: Documentar processos, padrões e arquiteturas de dados para facilitar a colaboração e garantir a consistência.
- Desenvolvimento de dashboards em Power BI.
Requisitos
- Domínio em Databricks: uso de notebook, clusters, jobs, delta lake e unity catalog;
- Domínio em DBT: Arquitetura lakehouse e boas práticas de modelagem de dados com DBT;
- Domínio em SQL e Python;
- Domínio Airflow;
- Domínio em processamento de dados em larga escala utilizando Spark;
- DataOPS: CI/CD para pipeline de dados, versionamento GIT, testes, automação e orquestração com Airflow;
- Domínio em Governança e Segurança de dados: controle de acessos, catalogação, mascaramento e políticas para dados sensíveis;
- Domínio em integração com ferramentas de BI/Analytics: especialmente Power BI.
- Ensino superior em T.I. ou áreas correlativas.
Diferenciais
- Conhecimento em engenharia de dados GCP;
- Conhecimento em engenharia de dados AWS;
- Conhecimento em outras ferramentas de BI (Tableu, QlikView, DataStudio ...);
- Conhecimento em outras de E.T.L. (Spark, Hadoop);
Regime de contratação
PJ por escopo de projeto fechado OU por horas trabalhadas OU fixo mensal.
Salário
- Alocado remotamente no cliente: 9.000,00 - 12.000,00 reais
- Por escopo de projeto: A combinar
- Por horas trabalhadas: A combinar