Engenheiro de Dados (AWS Stack)

FCamara; Barueri; Híbrido; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia em Barueri busca um Engenheiro de Dados para desenvolver soluções de dados na AWS. O profissional será responsável por gerenciar pipelines de dados utilizando ferramentas como AWS Glue e Airflow, além de garantir a governança e integridade das informações. O candidato ideal tem experiência em Python, EC2 e bancos de dados, e deve ser proativo e colaborativo, trabalhando em um ambiente híbrido.

Qualificações

• Experiência sólida em arquitetura, desenvolvimento e operação de pipelines de dados na AWS.
• Domínio de Python para manipulação de dados e ETL.
• Vivência com bancos de dados relacionais e não relacionais.

Responsabilidades

• Projetar, desenvolver e gerenciar pipelines de dados utilizando AWS Glue e Airflow.
• Implementar ETLs para ingestão e transformação de dados.
• Colaborar com times de analytics para evoluir soluções baseadas em dados.

Conhecimentos

AWS Glue

Airflow

Python

EC2

S3

Git

Ferramentas

AWS Lambda

Terraform

CloudFormation

Data Lake

Data Warehouse

Descrição da oferta de emprego

Job description

Buscamos um Engenheiro de Dados com experiência sólida em arquitetura, desenvolvimento e operação de pipelines de dados na AWS. Este profissional será responsável por construir soluções escaláveis e de alta performance, garantindo governança, disponibilidade e confiabilidade das informações para apoiar iniciativas analíticas e operacionais.

Responsabilidades

• Projetar, desenvolver e gerenciar pipelines de dados utilizando AWS Glue, AWS Lambda, Airflow e serviços complementares da AWS.
• Implementar e otimizar ETLs/ELTs para ingestão, transformação e disponibilização de dados estruturados e não estruturados.
• Atuar na construção de arquiteturas distribuídas usando EC2, S3, IAM, CloudWatch, VPC e demais componentes AWS.
• Garantir a qualidade, integridade e governança dos dados ao longo de todo o ciclo.
• Monitorar, otimizar performance e reduzir custos em workloads de dados.
• Colaborar com times de analytics, engenharia e produto para evoluir soluções baseadas em dados.
• Aplicar boas práticas de segurança, versionamento de código e automação (CI/CD).

Requisitos Técnicos

• Experiência comprovada com AWS Glue (Jobs, Crawlers, Catalog).
• Domínio de Airflow para orquestração de pipelines.
• Vivência com provisionamento e operação de EC2.
• Conhecimento avançado em Python (incluindo bibliotecas para manipulação de dados).
• Experiência com bancos de dados relacionais e não relacionais (Redshift, RDS, DynamoDB, etc.).
• Conhecimento de S3, IAM, CloudWatch, SNS/SQS, Lambda.
• Experiência com Git e ferramentas de CI/CD.
• Familiaridade com modelagem de dados, Data Lake e Data Warehouse.

Diferenciais

• Experiência com Terraform ou CloudFormation.
• Conhecimento em Redshift Spectrum, Athena e Lake Formation.
• Experiência com ambientes de big data (Spark, EMR, Databricks).
• Certificações AWS (Data Analytics, Solutions Architect, DevOps, etc.).
• Vivência com cultura DevOps e observabilidade.

Soft Skills

• Capacidade de resolver problemas complexos com autonomia.
• Boa comunicação para interação com áreas de negócio.
• Perfil colaborativo e orientado a entregas.
• Proatividade para sugerir otimizações e melhorias arquiteturais.

Cultura e Ambiente

• Modelo híbrido em Alphaville
• Ambiente colaborativo, orientado a resultados e inovação
• Autonomia para propor soluções e melhorias contínuas