Descrição
Irá atuar no time de Engenheiros de Dados.
Responsabilidades e atribuições
- Atuar na configuração e design de pipelines de dados, assegurando a transição contínua de informações e a execução ágil de processamentos.
- Colaborarativamente na colaboração com equipes multifuncionais, buscando atender de forma abrangente e eficaz aos requisitos de negócios.
- Realizar aidentificação e extração de dados provenientes de diversas fontes.
- Realizar atransformação e limpeza de dados, garantindo qualidade e eficiência.
- Participar ativamente em reuniões e projetos interdisciplinares.
- Otimizar soluções de armazenamento escaláveis, promovendo o acesso rápido e confiável às informações.
- Desempenharum papel-chave na identificação e implementação de soluções inovadoras.
- Colaborar com o dimensionamento de máquinas e recursos, assegurando operações eficazes dos pipelines.
Requisitos e qualificações
- Python
- Spark
- PySprk
- Dataflow
- Dataproc
- Dataplex
- Bigquery
- Cloud Composer
- Airflow
- SQL
- Git