Engenheiro de Dados - DATAHUB

No Close-up nós trabalhamos com dados, informações e tecnologia para ajudar a transformar a área da saúde!Somos uma empresa de conteúdo e serviços para a indústria farmacêutica e, contribuímos para o conhecimento das tendências do mercado, ajudando com eficiência e transparência a estreitar as relações entre laboratórios e profissionais médicos.Estamos em busca de um ENGENHEIRO DE DADOS - DATAHUB para nos apoiar!

Responsabilidades e atribuições

Construir,

manter e evoluir pipelines de ingestão e transformação de dados no

Snowflake.Integrar

dados provenientes de múltiplas fontes, como:

sistemas

de CRM e ERP;

APIs;

planilhas

e arquivos;

serviços

de armazenamento;

bancos

de dados e sistemas locais;

processos

de web scraping.

Estruturar,

manter e evoluir as camadas de dados:

RAW:

armazenamento dos dados brutos, conforme recebidos das fontes de origem;

TRUSTED: dados

tratados, padronizados, validados e submetidos a regras de qualidade;

CURATED: dados

organizados, enriquecidos e disponibilizados para consumo analítico,

integrações e aplicações.

Implementar

mecanismos de governança, qualidade, segurança e rastreabilidade dos

dados.

Monitorar

os processos de carga, identificando falhas, gargalos e oportunidades de

otimização.

Atuar

na padronização e integração de dados entre os diferentes países da

América Latina.

Documentar

pipelines, regras de transformação, integrações e modelos de dados.

Apoiar

a evolução da arquitetura de dados e das iniciativas de inteligência

artificial do DataHub.

Requisitos e qualificaçõesRequisitos técnicos obrigatórios

Experiência

com Snowflake, incluindo:

modelagem

de dados;

ingestão

e transformação de dados;

otimização

de consultas;

monitoramento

e otimização de custos.

Experiência

com Azure Data Factory.

Conhecimento

avançado em SQL.

Experiência

com processos de ETL e ELT.

Experiência

com integração de múltiplas fontes e formatos de dados.

Experiência

com desenvolvimento em Python.

Conhecimento

de práticas de DevOps e implementação de pipelines de CI/CD.

Experiência

com monitoramento, tratamento de erros e observabilidade de pipelines de

dados.

Conhecimentos desejáveis

Conhecimento

do Snowflake Cortex e da preparação de agentes de inteligência artificial

no ambiente Snowflake.

Conhecimento

de modelos de inteligência artificial, Machine Learning e Large Language

Models.

Experiência

com soluções de web scraping e tratamento de alterações nas estruturas das

fontes de dados.

Conhecimento

de segurança, controle de acesso e governança de dados no Snowflake.

Informações adicionaisBenefícios que fazem o seu dia a dia ser ainda melhor💙 Assistência MédicaCom coparticipação e parceria Welhub, garantindo cuidado completo para você e seus dependentes. Saúde e tranquilidade caminhando juntas.😁 Assistência OdontológicaSorriso bonito e sem surpresas: sem coparticipação para o colaborador!💳 Cartão Benefícios FlexNosso cartão é 100% flexível: use como vale-alimentação ou vale-refeição, do seu jeito, de acordo com a sua rotina.💊 Desconto FarmáciaAcesso a condições especiais e descontos em medicamentos para manter a saúde em dia.🛡 Seguro de VidaProteção e segurança para você e sua família.🎂 Day Off de AniversárioO dia é seu — e o presente também! Tire seu merecido descanso no seu aniversário.🎓 Parcerias EducacionaisFaculdades, Idiomas, TI e Dados. Aprender sempre faz parte do nosso pacote!👶🏽 Auxílio Creche para filhos até 1 ano a contar da licença maternidade para as mamães;