Engenheiro(a) de Dados

MeuHome; Brazil; Remote; BRL 120,000 - 180,000; Full time

Job summary

MeuHome procura um profissional pleno de dados para atuar com desenvolvimento de pipelines e validação de dados. O foco é criar scripts de INSERT, configurar pipelines em Dev/Test/Prod e assegurar a qualidade e consistência entre fontes de dados e documentos reference.

Você trabalhará com ADF e Databricks e lidará com migração de dados entre ambientes, garantindo SLA e integridade das informações em projetos de tecnologia e análise de dados.

Qualifications

• Experiência prática com Azure Data Factory (ADF) e Databricks.
• Desenvolvimento de scripts SQL para execução de comandos INSERT.
• Criação e configuração de pipelines para execução de scripts.
• Conhecimento em processos de migração e manipulação de dados entre ambientes.
• Vivência com os ambientes de Desenvolvimento, Testes e Produção.

Responsibilities

• Receber arquivos com informações/ especificações de tabelas e criar scripts de INSERT.
• Desenvolver e configurar pipelines para execução de scripts nos ambientes (Desenvolvimento, Testes e Produção).
• Realizar validações entre dados de origem e documentações recebidas para garantir conformidade.
• Analisar particularidades de cada empresa/processo, identificando divergências e inconsistências.
• Garantir integridade e precisão das informações, evitando ausências de campos.
• Acompanhar fluxo de execução e implantação, considerando dependências de outros times e filas de deploy.
• Atuar com atenção aos detalhes para evitar retrabalho e cumprir SLAs.

Skills

Analítico

Detalhista

Autonomia

Tools

Azure Data Factory (ADF)

Databricks

SQL

Job description

Senioridade: Pleno

Breve Resumo do Perfil: Profissional analítico, organizado e bastante atento aos detalhes, com capacidade de interpretação de processos, validação de informações e identificação de inconsistências. É importante ter autonomia para compreender as particularidades de cada demanda e garantir a qualidade das entregas.

Descrição das Principais Atividades e Reponsabilidades:

• Receber arquivos contendo informações e especificações de tabelas e realizar a criação dos respectivos scripts de INSERT.
• Desenvolver e configurar pipelines para execução dos scripts nos diferentes ambientes (Desenvolvimento, Testes e Produção).
• Realizar validações entre os dados de origem e as documentações recebidas, garantindo que todas as informações, campos e estruturas estejam de acordo com o esperado.
• Analisar particularidades de cada empresa e processo, identificando possíveis divergências e inconsistências.
• Garantir a integridade e a precisão das informações, evitando ausência de campos ou diferenças entre a origem e o documento de referência.
• Acompanhar o fluxo de execução e implantação dos processos, considerando dependências de outros times e filas de aprovação de deploy.
• Atuar com atenção aos detalhes para evitar retrabalhos e garantir o cumprimento dos SLAs.

Descrição Perfil Técnico:

• Experiência prática com Azure Data Factory (ADF) e Databricks.
• Desenvolvimento de scripts SQL para execução de comandos INSERT.
• Criação e configuração de pipelines para execução de scripts.
• Conhecimento em processos de migração e manipulação de dados entre ambientes.
• Vivência com os ambientes de Desenvolvimento, Testes e Produção.

Informações da Empresa:

Nascida do objetivo de atender projetos e prestar serviços de forma eficiente e diferenciada somos uma empresa especializada em serviços de tecnologia e análise de dados, contando com uma equipe altamente capacitada em diversas áreas. Atendemos uma variedade de projetos, oferecendo expertise na captação e análise de dados, bem como a concepção e desenvolvimento de produtos.

Diferenciamo-nos pelo uso de uma metodologia única, proporcionando resultados de alta performance e qualidade com agilidade e eficiência. Acreditamos em ultrapassar o convencional, trazendo inovação para todos os segmentos de negócio.

Com mais de 12 anos de experiência no mercado de tecnologia, a Jump destaca-se como a parceira ideal para extrair o máximo potencial de seus dados de maneira eficaz e ágil. Nossa equipe especializada está sempre pronta para atender às necessidades específicas de nossos clientes em dados, a qualquer momento.