Engenheiro (a) de Dados | Sênior

Solfácil; Brasil; Remote; BRL 180,000 - 320,000; Full time

Benefits offered by this job

Plano de saúde SulAmerica

Plano odontológico SulAmerica

Gympass

TelaVita – saúde mental

Descontos Vidalink

Licença parental 180 dias

Job summary

A Solfácil está buscando uma Engenheira de Dados Sênior para liderar arquitetura de dados e infraestrutura na AWS. A posição envolve modelagem, pipelines distribuídos e gestão de dados com foco em governança, escalabilidade e eficiência.

Você atuará com Airbyte, CDC, EMR, PySpark, DBT e Redshift, mantendo padrões de qualidade, custos otimizados e operação estável em produção. Vaga presencial no Brasil com foco em dados empresariais e fintechs.

Qualifications

• Domínio avançado: Fluência em Python, SQL avançado e PySpark para processamento em larga escala.
• Explicabilidade Técnica: Capacidade de justificar, explicar e otimizar decisões de código e arquitetura.
• Pipelines Críticos em Produção: Experiência com ecossistemas de alto volume, SLAs rigorosos e custo alto de processamento.
• Data Lake / Lakehouse na AWS: Vivência prática na arquitetura de Data Lakes / Lakehouses na AWS.
• Terraform: Domínio para provisionamento e gestão de IaC.
• Trade-offs técnicos/ financeiros: Capacidade de avaliar escolhas de arquitetura.
• Ownership extremo: Responsabilidade total pela produção e resiliência do ambiente.

Responsibilities

• Arquitetar dados corporativos, garantindo escalabilidade, governança e disponibilidade.
• Desenvolver pipelines de ingestão com Airbyte + CDC a partir de mais de 60 bancos de dados.
• Construir camada Bronze em S3 + Athena; publicar dados analíticos no Redshift.
• Modelar dados analíticos com DBT; manter consistência histórica.
• Otimizar performance e custos com técnicas FinOps e particionamento.
• Garantir qualidade, validação de schema e resiliência em produção.
• Gerenciar infraestrutura AWS via Terraform; DR e segurança.

Skills

Python

SQL

PySpark

Explanação técnica

Pipelines críticos

Data Lake/Lakehouse

Data governance

Tools

Terraform

AWS

Airbyte

Redshift

Job description

Sobre a Solfácil

Líder de mercado com mais de 6 anos de atuação no segmento de Energia Solar, somos um time que está transformando o futuro da energia solar no Brasil e buscamos pessoas que acreditam no poder da inovação e do impacto positivo.

Se você se move pela curiosidade, tem sede de aprendizado e quer crescer em um ambiente dinâmico, aqui pode ser o seu lugar!

Nossa energia está focada em atrair talentos que querem transformar o mercado: pessoas dedicadas, que vão além, entregam resultados excepcionais e contribuem para um mundo mais sustentável.

Responsabilidades & Dia a Dia

Procuramos uma pessoa Engenheira de Dados Sênior com sólida vivência em arquitetura de dados e infraestrutura cloud na AWS para assumir responsabilidade técnica direta sobre o ecossistema de dados da Solfácil. Você terá atuação transversal na arquitetura de dados, modelagem, pipelines distribuídos e infraestrutura AWS via IaC (Terraform).

• Arquitetura & Governança de Dados: Projetar, evoluir e sustentar a arquitetura de dados corporativa, garantindo escalabilidade, alta disponibilidade, governança, auditabilidade e eficiência operacional e financeira.

• Pipelines de Ingestão & Transformação em Larga Escala:

  • Ingestão via Airbyte + CDC a partir de mais de 60 bancos de dados.

  • Camada Bronze em S3 + Athena (sem exposição direta ao usuário final).

  • Processamento distribuído de alto volume utilizando EMR + PySpark.

  • Construção da camada Silver (current-state).

  • Publicação de dados analíticos para consumo no Redshift.

• Modelagem Analítica: Modelar dados analíticos via DBT, assegurando incrementalidade correta, consistência histórica e contratos de dados alinhados com Negócio e Analytics.

• Otimização de Performance & Custos (FinOps Técnico):

  • Análise aprofundada de planos de execução.

  • Estratégias avançadas de particionamento e distribuição de dados.

  • Otimização refinada de jobs Spark e consultas SQL complexas.

• Qualidade, Confiabilidade & Resiliência:

  • Implementação de validações de schema e testes de dados.

  • Definição de estratégias de reprocessamento e resiliência.

  • Monitoramento e resposta proativa a incidentes em produção.

• Gestão da Infraestrutura AWS (IaC):

  • Responsabilidade técnica sobre serviços AWS (EC2, EMR, S3, Athena, Redshift).

  • Provisionamento e gestão de ambiente via Terraform (incluindo planos de Disaster Recovery / DR).

  • Tuning, segurança, controle de acessos e otimização contínua de custos de nuvem.

O que buscamos (Must-Have / Não-Negociáveis)

• Domínio Avançado: Fluência em Python, SQL avançado e PySpark para processamento em larga escala.

• Explicabilidade Técnica: Capacidade de justificar, explicar e otimizar decisões de código e arquitetura.

• Pipelines Críticos em Produção: Experiência comprovada em ecossistemas de volume elevado, SLAs rigorosos e alto custo de processamento.

• Data Lake / Lakehouse em AWS & Cloud Infra:

  • Vivência prática na arquitetura de Data Lakes / Lakehouses na AWS.

  • Domínio de Terraform para provisionamento e gestão de infraestrutura como código.

  • Capacidade de avaliar trade-offs técnicos e financeiros de arquitetura cloud.

• Ownership Extremo: Mentalidade de responsabilidade total por produção, resiliência e estabilidade do ambiente.

Diferenciais (Nice-to-Have)

• Forte vivência com DBT em ambientes analíticos de alta complexidade.

• Conhecimentos avançados em administração de bancos de dados (DBA) e fundação sólida de infraestrutura.

• Experiência em CDC (Change Data Capture) operando em grande escala.

• Experiência no segmento de fintechs, bancos, meios de pagamento ou setores altamente regulados.

• Conhecimento prático ou vivência em arquitetura GCP.

O que você vai encontrar por aqui

• Saldo mensal no cartão Caju;

• Plano de Saúde SulAmerica extensivo a dependentes, com ótima rede credenciada, reembolso e consultas online;

• Plano Odontológico SulAmerica extensivo a dependentes;

• Gympass, e você escolhe seu plano para academias, estúdios de pilates, crossfit e mais;

• TelaVita, para cuidar da sua saúde mental com psicoterapia online;

• Vidalink, que proporciona descontos e subsídio em medicamentos, além de acesso a produtos saudáveis com descontos;

• Incentivo educacional pelo parceiro Único Skill;

• Licença parental de 180 dias para mamães e 20 dias para papais se dedicarem à chegada de seu/sua bebê.

Site: https://solfacil.com.br

Blog: https://blog.solfacil.com.br/

Instagram: https://instagram.com/solfacil/

LinkedIn: https://linkedin.com/company/solfacil/