Full-Stack Data Engineer — AWS, Python & Spark | Growth & Perks

Caixa Mágica Software; Lisboa; On-site; EUR 45,000 - 65,000; Full time

Benefits offered by this job

Seguro de saúde

Seguro de vida

Eventos sociais

Job summary

Caixa Mágica Software procura um Full Stack Data Engineer para desenvolver features e soluções de dados na AWS. O candidato ideal tem experiência em Python e SQL, conhecimento de Spark/PySpark e capacidade de trabalhar de forma independente dentro de uma equipa dinâmica.

Oferecemos contrato estável para projeto de longo prazo, equipamento de trabalho, seguro de saúde e eventos de equipa. Valoriza-se proatividade, curiosidade e vontade de aprender novas competências.

Qualifications

• Experiência com Python, especialmente em manipulação e processamento de dados.
• Experiência com SQL.
• Experiência em programação e depuração.
• Interesse em ciência de dados.
• Experiência com serviços AWS (S3, Lambda, Athena, EC2, Glue, CDK/CloudFormation, Step Functions, Batch, Fargate).
• Experiência com Spark/PySpark.
• Experiência com Git.
• Experiência com Jupyter Notebooks.
• Experiência desenvolvendo aplicações e/ou ambientes de produção.
• Proatividade e iniciativa.
• Boa capacidade de trabalho em equipe.
• Capacidade de resolver problemas de forma independente.
• Interesse em aprender novas habilidades.

Responsibilities

• Desenvolver features End-to-End em plataforma de big data na AWS, com foco em análise e processamento de dados.
• Contribuir para arquitetura de features e definição de fluxos de dados.
• Criar provas de conceito.
• Desenvolver versões prontas para produção, testar, fazer deploy em ambientes de desenvolvimento, QA e produção, monitorar desempenho inicial e realizar debugging.
• Documentar as features usando Confluence.
• Apoiar extração de dados e atividades de análise exploratória de dados.

Skills

Python

SQL

Git

Jupyter Notebooks

Spark/PySpark

AWS

S3

Lambda

Athena

EC2

Glue

CDK/CloudFormation

Step Functions

Fargate

Data analysis

Autonomia

Job description

Caixa Mágica Software procura um Full Stack Data Engineer para desenvolver features e soluções de dados na AWS. O candidato ideal tem experiência em Python e SQL, conhecimento de Spark/PySpark e capacidade de trabalhar de forma independente dentro de uma equipa dinâmica.

Oferecemos contrato estável para projeto de longo prazo, equipamento de trabalho, seguro de saúde e eventos de equipa. Valoriza-se proatividade, curiosidade e vontade de aprender novas competências.