Analista de Dados

Incentive; Rio de Janeiro; À distance; BRL 90 000 - 150 000; Plein temps

Avantages offerts par ce poste

Salário competitivo

Plano de saúde

Vale-refeição

Vale-transporte

Home Office

Desenvolvimento profissional

Résumé du poste

A Incentive.me está procurando um Analista de Dados para projetar, desenvolver e gerenciar sistemas de dados, assegurando a coleta, armazenamento, processamento e análise de grandes volumes para orientar decisões estratégicas.

Você atuará com ETL, pipelines em Airflow, dbt, Kafka, Spark e data warehouses, integrando fontes diversas e garantindo segurança, governança e colaboração entre equipes de dados.

Qualifications

• Desenvolver pipelines de dados, transformar dados e entregar insights
• Conhecimento sólido em ETL, modelagem dimensional e dados em tempo real
• Governança de dados, qualidade e lineage

Responsabilités

• Coleta de dados de várias fontes, construção de pipelines
• Armazenamento de dados em data warehouses escaláveis
• Processamento de dados com Spark/Flink e validação de qualidade
• Integração de dados entre fontes heterogêneas
• Garantir segurança e conformidade com privacidade de dados
• Facilitar o acesso a dados para análises e BI
• Monitorar performance de pipelines e otimizar
• Colaborar com cientistas de dados e analistas de negócios
• Documentar arquiteturas, ETL e fluxos de dados

Connaissances

Python

SQL avançado

Inglês intermediário

Outils

Airflow

dbt Cloud

Apache Kafka

Apache Spark

Apache Flink

Azure

Google Cloud

Kubernetes

Docker

BigQuery

ClickHouse

Git

Description du poste

Quem somos?

A Incentive.me é uma plataforma tecnológica de engajamento da força de vendas quepermite alcançar um novo patamar na Gestão de Incentivos. Conectamos empresas avendedores ao longo de toda a cadeia, até a ponta no varejo, criando campanhas deincentivo eficazes que transformam comportamentos e aumentam as vendas. Nossoobjetivo é impulsionar uma cultura voltada para performance e resultados.

Quem procuramos?

O Analista de Dados é responsável por projetar, desenvolver e gerenciar sistemas e arquiteturas de dados, garantindo a coleta, armazenamento, processamento e análise eficiente de grandes volumes de informações para apoiar decisões estratégicas.

Responsabilidades:

• Coleta de Dados: Identificar e coletar dados relevantes de várias fontes, como bancos de dados, logs, streams de dados, APIs, entre outros.

• Armazenamento de Dados: Projetar e implementar sistemas de armazenamento de dados eficientes e escaláveis, que podem incluir bancos de dados relacionais, NoSQL, data warehouses, e sistemas de armazenamento distribuídos.

• Processamento de Dados: Desenvolver pipelines de processamento de dados para limpar, transformar e preparar dados para análise. Isso pode envolver o uso de ferramentas como, Apache Spark, ou outras soluções de processamento distribuído.

• Integração de Dados: Garantir a integridade e a consistência dos dados ao integrar informações de diferentes fontes.

• Segurança e Privacidade: Implementar medidas de segurança e garantir a conformidade com regulamentações de privacidade de dados.

• Análise de Dados: Facilitar o acesso aos dados para análise, seja por meio de ferramentas de visualização, consulta direta ou outras formas de análise de dados.

• Monitoramento e Otimização: Monitorar o desempenho dos sistemas de dados, identificar gargalos e otimizar o desempenho conforme necessário.

• Colaboração com Equipes: Trabalhar em estreita colaboração com cientistas de dados, analistas de negócios e outros profissionais para entender e atender às necessidades de dados da organização.

• Documentação: Manter documentação clara e abrangente sobre arquiteturas de dados, fluxos de trabalho, processos de ETL (Extração, Transformação e Carga), e outros aspectos relacionados aos sistemas de dados.

• Resolução de Problemas: Identificar e resolver problemas relacionados a dados, como inconsistências, falhas no processamento ou questões de desempenho.

• Treinamento e Colaboração: Colaborar com outros membros da equipe, compartilhando conhecimento e oferecendo treinamento quando necessário, especialmente para garantir que os dados sejam utilizados de forma eficaz por toda a organização.

• Governança de Dados: Implementar práticas de governança de dados para garantir a qualidade, consistência e conformidade dos dados, além de estabelecer políticas para o uso adequado e ético das informações.

• Gerenciamento de Projeto: Participar de projetos de dados desde a concepção até a implementação, garantindo que os prazos sejam cumpridos e que os objetivos do projeto sejam alcançados.

• Colaboração com DevOps: Trabalhar em estreita colaboração com equipes de desenvolvimento e operações para integrar práticas de DevOps no ciclo de vida do desenvolvimento de sistemas de dados.

Requisitos:

• Linguagens: Python, SQL avançado.

• Bancos de Dados: Relacionais (MySQL, PostgreSQL), Colunar (Clickhouse, BigQuery).

• ETL e Modelagem: Airflow, dbt Cloud/dbt CLI.

• Big Data & Streaming: Apache Kafka, Apache Spark, Apache Flink (desejável).

• Cloud e Infraestrutura: Azure, Google Cloud, Kubernetes, Docker, Helm.

• Controle de Versão: Git.

• Governança de Dados: Qualidade, metadados e linhagem de dados.

• Habilidades Analíticas: Solução de problemas e otimização de processos.

• Idioma: Inglês intermediário (desejável).

O que oferecemos?

• Salário competitivo.

• Benefícios adicionais: plano de saúde, vale-refeição, vale-transporte e auxílio

• home-office.

• Ambiente de trabalho dinâmico, com oportunidades de desenvolvimento profissional.

Junte-se a nós e faça parte do Futuro do Incentivo!