Jobs in Porto Alegre, France
Software Engineer, Data Infrastructure & Acquisition - Natal, Brazil
Speechify
Tech Lead, Web Core Product & Chrome Extension - Natal, Brazil
Speechify
Tech Lead, Web Core Product & Chrome Extension - Juiz de Fora, Brazil
Speechify
Connect with headhunters to apply for similar jobsSupervisor Case Manager Long-term Care - Delaware
Highmark Health
Página da Vaga | Arquiteto/Tech Lead – Sistemas de Autorização (ISO 8583)
Stefanini Group
RD Station - Pessoa Cientista de Dados Sênior - Marketing e Performance Analytics
RD Station
AWS Data Engineer | Mid/Senior
Job summary
Uma empresa de tecnologia em dados busca um profissional para desenvolver e otimizar pipelines de dados em ambientes cloud. O candidato ideal possui experiência com Databricks, Pyspark e SQL, e tem habilidades em modelagem de dados. Essa posição é remota, oferecendo flexibilidade e a oportunidade de trabalhar em projetos inovadores.
Qualifications
- Experiência com Databricks, Pyspark e Spark SQL.
- Conhecimentos em AWS DataSync.
- Conhecimento avançado em Python e SQL.
- Experiência em Modelagem de Dados.
Responsibilities
- Desenvolver e otimizar pipelines de dados em ambientes cloud.
- Escrever e otimizar queries SQL em larga escala.
- Realizar ETL/ELT de dados a partir de múltiplas fontes.
Skills
- Desenvolver e otimizar pipelines de dados em ambientes cloud (especialmente AWS);
- Escrever e otimizar queries SQL em larga escala (com foco em performance e escalabilidade);
- Realizar extração, transformação e carga (ETL/ELT) de dados a partir de múltiplas fontes;
- Participar da modelagem de dados para Data Lakes e Data Warehouses;
- Aplicar boas práticas de governança, segurança e qualidade dos dados;
- Automatizar fluxos com ferramentas de orquestração como Apache Airflow;
- Realizar a Migração de dados de Azure para AWS e migração e fundação do Databricks para o ambiente Produtivo na AWS;
- Colaborar com times de negócio e dados para garantir a disponibilidade e usabilidade da informação.
- Experiência com Databricks (Jobs, Notebooks, Workflows), Pyspark e Spark SQL;
- Conhecimentos em AWS DataSync;
- Conhecimento avançado em programação Python e SQL;
- Experiência em Modelagem de Dados;
- Capacidade de consumir e integrar dados via APIs RESTful e/ou SOAP;
- Conhecimento em migração de dados e testes de validação;
- Conhecimento ambiente Azure para realizar a migração para AWS.
Não possui todos os requisitos para a vaga?
Está tudo bem! Na Compass UOL, estimulamos o desenvolvimento contínuo de novos talentos e transformamos desafios em oportunidades.
#remote
remote
* The salary benchmark is based on the target salaries of market leaders in their relevant sectors. It is intended to serve as a guide to help Premium Members assess open positions and to help in salary negotiations. The salary benchmark is not provided directly by the company, which could be significantly higher or lower.
job faster
Follow us
