A engenheiro de dados

NetVagas; São Paulo; Presencial; BRL 90.000 - 120.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia em São Paulo procura um Desenvolvedor de Dados experiente que será responsável por criar e otimizar pipelines de dados e manipular informações utilizando Databricks e Python. O candidato ideal terá um conhecimento sólido em bancos de dados como MongoDB e será capaz de escrever testes unitários para garantir a qualidade do código.

Qualificações

• Experiência em desenvolvimento com Python/Pyspark.
• Conhecimento sólido em Databricks.
• Experiência com Git para controle de versão.

Responsabilidades

• Desenvolver e manter pipelines de dados utilizando Databricks e Python/Pyspark.
• Realizar consultas e manipulação de dados em SQL.
• Implementar e gerenciar bancos de dados MongoDB.

Conhecimentos

Desenvolvimento em Python

Pyspark

Manipulação de dados em SQL

Controle de versão com Git

MongoDB

Testes unitários

Descrição da oferta de emprego

Atividades:

Desenvolver e manter pipelines de dados utilizando Databricks e Python/ Pyspark.

Realizar consultas e manipulação de dados em SQL.

Colaborar com equipes de desenvolvimento utilizando Git para controle de versão.

Implementar e gerenciar bancos de dados MongoDB.

Escrever e executar testes unitários para garantir a qualidade do código.

Perfil que buscamos:

Experiência em desenvolvimento com Python/ Pyspark.

Conhecimento sólido em Databricks.

Experiência com Git para controle de versão.

Familiaridade com MongoDB.

Familiaridade com SQL e pipelines de dados (ETL).

Habilidade em escrever e executar testes unitários.

Experiência com Github e Testes unitários.