Engenheiro de Dados Sênior - EP14JR

Insi; São Paulo; Hybrid; BRL 180.000 - 320.000; Vollzeit

Zusammenfassung

A Insi procura um(a) profissional para atuar com arquiteturas de Data Warehouse e Datalake, liderando soluções técnicas de Data Analytics. Você criará modelos de repositórios de dados e definirá estratégias de aquisição, recuperação e processamento, colaborando com o ecossistema de Big Data.

O papel envolve desenvolver ingesta, tratamento, segurança e disponibilização de dados a diferentes consumidores, lidando com riscos técnicos e testando desempenho, além de apoiar migração de dados de

Qualifikationen

• Imprescindível alto conhecimento em DATABRICKS.
• Bancos de dados relacionais: SQL Server, PostgreSQL, Mysql, Oracle.
• NoSQL: Cassandra, MongoDB, HBase, Elasticsearch e Vertica.
• Cloud: AWS (EMR, S3, Glue, Athena, Redshift, EC2); Azure (Blob Storage, SQL Azure, Data Factory, Synapse); GCP (Cloud Storage, BigQuery, AirFlow).
• Big Data: Spark (Python/Scala), Kafka, Hadoop, Datalake.

Aufgaben

• Construção e implementações de arquiteturas com Data Warehouse e Datalake.
• Liderar como referência soluções técnicas de Data Analytics.
• Criar e definir modelos de repositórios de dados.
• Desenvolver estratégias de aquisição de dados, recuperação de informação e armazenamento.
• Apoiar definições técnicas do ecossistema de Big Data.
• Desenvolver e manter processos de ingestão, tratamento, controle/segurança e disponibilização de dados para diferentes consumidores.
• Levantando riscos técnicos conforme pareceres das áreas de apoio.
• Apoiar testes de performance e migração de dados de sistemas legados.

Kenntnisse

DATABRICKS

SQL Server

PostgreSQL

Mysql

Oracle

Cassandra

MongoDB

HBase

Elasticsearch

Vertica

AWS

Azure

GCP

Big Data

Data Warehouse

Datalake

Jobbeschreibung

Atribuições Principais

Construção e implementações de arquiteturas com Data Warehouse e Datalake;

O que procuramos?

Atribuições Principais

Construção e implementações de arquiteturas com Data Warehouse e Datalake;

Liderar como referência soluções técnicas de Data Analytics;

Criar e definir modelos de repositórios de dados;

Desenvolver estratégias de aquisição de dados, recuperação de informação, implementação de dutos de processamento e armazenamento;

Apoiar nas definições técnicas do ecossistema de Big Data;

Desenvolver e manter processos de consumo, tratamento, controle/segurança e disponibilização de dados para diferentes consumidores;

Levantando possíveis riscos de acordo com o parecer técnico pelas áreas de apoio emitidas;

Apoiar/viabilizar testes de desempenho (desempenho);

Apoiar a migração de dados de sistemas legados para novas soluções.

Requisitos

Construção e implementações de arquiteturas com Data Warehouse e Datalake; Liderar como referência técnica soluções de Data Analytics; Criar e definir modelagens de repositórios de dados; Desenvolver estratégias de aquisição de dados, recuperação de informação, implementação de pipelines de processamentos e armazenamento; Apoiar nas definições técnicas do ecossistema de Big Data; Desenvolver e manter processos de ingestão, tratamento, controle/segurança e disponibilização de dados para diferentes consumidores; Levantando possíveis riscos de acordo com o parecer técnico emitido pelas áreas de apoio; Apoiar/viabilizar testes de performance (desempenho); Apoiar na migração de dados de sistemas legados para novas soluções.

Requisitos obrigatórios Imprescindível alto conhecimento em DATABRICKS. Bancos de dados relacionais: SQL Server, PostgreSQL, Mysql, Oracle; NoSQL: Cassandra, MongoDB, HBase, Elasticsearch e Vertica; Cloud: AWS: EMR, S3, Glue, Athena, Redshift, EC2; Azure: Blob Storage, SQL Azure, Data Factory, Synapse; GCP: Cloud Storage, BigQuery,AirFlow.

Diferenciais:

Big Data: Spark (Python e Scala), SQL, Kafka, Hadoop, “Datalake”; Business Intelligence: Pentaho, Power Bi Microsoft, Tableau e Informática.

Localidade da posição:

3x por semana em São Paulo/SP

Quem é a Insi?

Somos uma consultoria especializada em evolução digital. Mas, acima de tudo, somos uma empresa de gente. Gente que ouve antes de propor. Que vai ao essencial antes de apresentar solução. Que mede sucesso pelo que mudou de verdade, não pelo que foi implementado.

Com mais de três décadas de história e presença global, acreditamos que a verdadeira transformação começa dentro: dentro das pessoas, das equipes, das organizações — e é essa convicção que orienta cada escolha que fazemos, cada projeto que entregamos, cada pessoa que desenvolvemos.

Por que construir sua carreira na Insi?

Porque aqui você pensa, decide e cria junto. Oferecemos autonomia, metas claras e um ambiente onde os Insiders têm espaço para interagir com diferentes tecnologias, participar de projetos desafiadores, trazer novas ideias e trabalhar de qualquer lugar do Brasil e (por que não?) do mundo.

Somos uma das melhores empresas para se trabalhar no Brasil segundo o Great Place to Work e estamos entre os 10 melhores empregadores do Brasil segundo a revista TIME.

Quais são nossos valores?

• Somos pessoas servindo pessoas
• Pensamos e agimos como donos
• Temos gana por performance
• Crescemos e aprendemos juntos
• Buscamos excelência e a simplicidade
• Atuamos com criatividade e inovação

Todas as pessoas são bem-vindas independentemente de sua condição, deficiência, etnia, crença religiosa, orientação sexual, aparência, idade ou afins. Queremos que você cresça conosco em um ambiente acolhedor e repleto de oportunidades.

Se identificou? Então, #VemSerInsi!