Pessoa Engenheira de Dados Júnior

Neoway; Caieiras; Presencial; BRL 80.000 - 120.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia em dados em São Paulo busca um Engenheiro de Dados para desenvolver soluções de web crawling e monitorar serviços de produção. O candidato ideal deve ter experiência em Python, MongoDB e querer evoluir na coleta e tratamento de dados. Benefícios incluem vale alimentação, assistência médica, e programas de participação nos resultados.

Serviços

Vale Alimentação / Refeição

Auxílio transporte

Plano de Assistência médica e odontológica

Licença Maternidade e paternidade estendida

PPR (Programa de participação de resultados)

Gympass - acesso a academias

Wellz - saúde mental e bem estar

Acesso gratuito a quadras esportivas

Quick Massagem (presencial)

Auxílio Creche

Day off e cupom Ifood de aniversário

Seguro de Vida

Parcerias Educacionais com Faculdades e Escolas de Ensino

Qualificações

• Experiência em desenvolvimento de web crawling.
• Conhecimento em Python e bancos de dados como MongoDB.
• Habilidade em trabalhar com Kafka e RabbitMQ.

Responsabilidades

• Desenvolver soluções de web crawling para coleta de dados.
• Monitorar serviços de produção, garantindo sua eficiência.
• Evoluir e manter serviços de coleta e tratamento de dados.

Conhecimentos

Desenvolvimento web crawling

Linguagem de programação Python

MongoDB

Kafka

RabbitMQ

SQL

Parser de HTML

JSON

PDF

Descrição da oferta de emprego

Nosso jeito de fazer história

Entre para a história de construção do maior Hub de Dados e Analytics do Brasil. Além de você contribuir diretamente neste objetivo, você estará se desenvolvendo constantemente, por meio de grandes desafios de negócio, junto a um time de alto impacto. Na Neoway, acreditamos em fazer as coisas de forma inovadora, colaborativa, responsável e com foco no cliente.

Sobre a Engenharia de Dados

Somos a área responsável pela coleta, tratamento, organização e disponibilização dos dados nas soluções e API da Neoway, bem como manter a sustentação desses dados. Nossos times estão organizados de acordo com o contexto de negócio de cada pacote de dados que sustentamos. Estes times são compostos por uma coordenação técnica, responsável por fazer a ponte entre os times de dados e o time de negócio, e pessoas Engenheiras de Dados, responsáveis pelo desenvolvimento e configuração de todas as etapas do fluxo da operação e produção de dados.

Responsabilidades e atribuições

• Dentre as principais funções do papel estão:
• Desenvolvimento de web crawling para coleta de dados;
• Monitoramento dos serviços de produção;
• Evolução e manutenção de serviços de coleta, tratamento e agregação;

Para desenvolver tudo isso contamos que você possua / ou esteja a fim de aprender os conhecimentos abaixo :

Requisitos e qualificações

• Desenvolvimento web crawling;
• Linguagem de programação Python;
• MongoDB, Kafka, RabbitMQ, SQL;
• Parser de HTML, JSON, PDF, entre outros;

Seguimos práticas básicas de desenvolvimento : Testes unitários, integração, e em alguns casos, sistema. Projeto de infraestrutura como código. Usamos CI do gitlab, para automatizar a maior parte de rotinas (testes, release). Nos preocupamos com um código limpo e bem estruturado. Fazemos Code Review. Nenhuma mudança vai para a operação sem o time aprovar. Seja via thumbs up do Gitlab ou durante uma discussão da daily. Todo desenvolvimento de uma nova fonte é baseado em especificações que são escritas pela nossa pessoa Data Owner. Nela temos as definições de inputs e outputs, regras de negócio e resultados esperados. A especificação técnica fica sob responsabilidade do desenvolvedor que tem total abertura para decidir a melhor forma de desenvolvimento em conjunto com os demais colegas de time.

NeoJourney l Cardápio de Benefícios

• Vale Alimentação / Refeição;
• Auxílio transporte;
• Plano de Assistência médica e odontológica;
• Licença Maternidade e paternidade estendida;
• PPR (Programa de participação de resultados);
• Gympass - plataforma que te dá acesso a mais de 18 mil academias no Brasil. Nas academias conveniadas são oferecidas mais de 700 modalidades esportivas;
• Wellz - plataforma de saúde mental e bem estar, com terapia gratuita e muito mais;
• Acesso gratuito a quadras esportivas (Florianópolis e São Paulo);
• Quick Massagem (presencial);
• Auxílio Creche;
• Day off e cupom Ifood de aniversário;
• Seguro de Vida;
• Parcerias Educacionais com Faculdades e Escolas de Ensino.

Somos Mudança

Acreditamos na potência da diversidade. Sabemos que temos um longo caminho pela frente, por isso estamos constantemente aprendendo e criando iniciativas para fortalecer a diversidade e inclusão. E essa jornada conta com o apoio dos nossos grupos de afinidade : #NeoLadies #NeoOba e #NeoPride, todos com o propósito de traduzir nossas mudanças internas em responsabilidade como cidadãos.