Vaga: Engenheiro de Dados Sênior PJ 100% Home Office
A DataLP Consultoria em Dados é uma empresa especialista e apaixonada por dados e suas análises onde buscamos uma visão estratégica com metodologias modernas para as tomadas de decisões com qualidade. Desse modo, oferecemos a solução ideal para quem quer ter a visão completa dos indicadores do seu negócio.
As demandas em Engenharia de dados são: por escopo de projeto, por horas trabalhadas ou fixo mensal alocado remotamente no cliente.
Responsabilidades
- Desenvolver e implementar arquiteturas de dados robustas e escaláveis, garantindo que atendam aos requisitos de negócios atuais e futuros.
- Integração de Dados: Projetar e implementar pipelines de dados eficientes para coleta, transformação e carga (ETL / ELT) de dados de diversas fontes para data warehouses ou data lakes.
- Modelagem de Dados: Criar modelos de dados dimensionais e normalizados para suportar análises avançadas e relatórios.
- Otimização de Desempenho: Identificar e resolver problemas de desempenho em consultas SQL, pipelines de dados e processos de ETL / ELT.
- Governança de Dados: Estabelecer políticas e práticas para garantir a qualidade, segurança e integridade dos dados.
- Colaboração com stakeholders: trabalhar em estreita colaboração com equipes de negócios, cientistas de dados e analistas para entender requisitos e fornecer soluções de dados adequadas.
- Documentação e Padronização: Documentar processos, padrões e arquiteturas de dados para facilitar a colaboração e garantir a consistência.
- Desenvolvimento de dashboards em Power BI.
Requisitos
Domínio em Databricks
- uso de notebook, clusters, jobs, delta lake e unity catalog;
Domínio em DBT
- Arquitetura lakehouse e boas práticas de modelagem de dados com DBT;
- Domínio em SQL e Python;
- Domínio Airflow;
Domínio em processamento de dados
- em larga escala utilizando Spark;
- DataOPS;
CI / CD para pipeline de dados, versionamento GIT, testes, automação e orquestração com Airflow
- automação e orquestração com Airflow;
Domínio em Governança e Segurança de dados
- controle de acessos, catalogação, mascaramento e políticas para dados sensíveis;
- Domínio em integração com ferramentas de BI / Analytics especialmente Power BI.
- Ensino superior em T.I. ou áreas correlatas.
Diferenciais
- Conhecimento em engenharia de dados GCP;
- Conhecimento em engenharia de dados AWS;
- Conhecimento em outras ferramentas de BI (Tableu, QlikView, DataStudio ...);
- Conhecimento em outras de E.T.L. (Spark, Hadoop).
Regime de contratação
Regime de contratação : PJ por escopo de projeto fechado OU por horas trabalhadas OU fixo mensal.
Salário
- Salário alocado remotamente no cliente : 9.000,00 - 12.000,00 reais
- Salário por escopo de projeto : A combinar
- Salário por horas trabalhadas : A combinar