Data Engineer SR
Dock
InHireDescrição da vaga
Quem é
a Dock?
Há mais de 20 anos, cumprimos a missã
o de democratizar o acesso a serviç
os financeiros, tornando experiê
ncias financeiras mais simples e acessí
veis. Somos um time de pessoas obstinadas, que acreditam na tecnologia e nos serviç
os como os principais facilitadores para a evoluç
ã
o de nossos clientes e a transformaç
ã
o do papel das finanç
as. Atuando em 11 localidades pela Amé
rica Latina, trabalhamos sob o propó
sito de desmaterializar o universo financeiro para impulsionar a sociedade.
Como é
o nosso time de Plataforma de Dados?
Você
fará parte de um time focado na construç
ã
o de pipelines que transformam o nosso data lake em datasets de eventos confiáveis, versionados e sem vazamento temporal . Nossa missã
o é
garantir a fundaç
ã
o de dados para o treinamento, avaliaç
ã
o e serving de modelos de fundaç
ã
o . Sem dado correto no tempo correto, nenhum modelo vale algo, e você
será a pessoa responsável por garantir isso .
E o dia a dia, como será?
Buscamos por talentos inigualáveis para nos ajudar a espalhar o poder financeiro! Nesta funç
ã
o, você
irá:
Implementar Extraç
ã
o Reprodutí
vel: Construir pipelines a partir do Databricks (Unity Catalog, Delta), aplicando contratos de dados, particionamento e amostragem determiní
stica .
Construir Histó
ricos Confiáveis: Desenvolver tabelas as-of / point-in-time e snapshots , tratando os dados que só
guardam o ú
ltimo valor como risco direto para o treinamento de modelos .
Trabalhar com Sequê
ncias em Escala: Tokenizar e empacotar dados de sequê
ncia (Parquet por faixa de tamanho, batching dinâ
mico) e estruturar dataloaders eficientes para processamento em GPU .
Garantir a Qualidade e Monitoramento: Vigiar a saú
de dos dados de sequê
ncia (esquemas, drift, nulos, duplicidade e identidade das entidades) .
Aplicar Privacidade na Prática: Estruturar pseudonimizaç
ã
o, controle de acesso e trilhas de auditoria, alinhados rigorosamente à
LGPD e aos requisitos de seguranç
a de pagamentos .
Construir Serving de Features: Estruturar a camada de inferê
ncia ( serving ) de features e embeddings com baixa latê
ncia, mantendo logs de chamadas para reconstruir exatamente o que o modelo avaliou em cada d ecisã
o .
O que esperamos
de você
?
5+ anos de só
lida experiê
ncia em Engenharia de Dados ou de Machine Learning .
Domí
nio de Spark/PySpark, Delta Lake e SQL avanç
ado, com vivê
ncia pré
via no ecossistema Databricks .
Proficiê
ncia em Python para produç
ã
o, incluindo testes e CI voltados a pipelines de dados .
Experiê
ncia consolidada lidando com dados transacionais sensí
veis e entendimento prático aprofundado sobre vazamento temporal ( data leakage ) e snapshots .
Postura rigorosa e questionadora: versionar o dataset junto com o có
digo, escrever contratos de dados antes do pipeline e, principalmente, perguntar primeiro se "esse dado existia na hora da decisã
o?" .
É
desejável que você
tenha:
Conhecimento em MLflow, Feature Store, Ray e fluxos de dados em streaming .
Vivê
ncia prática com PyTorch DataLoader ou processos de leitura em streaming voltados para treinamento de modelos .
Experiê
ncia nos domí
nios de pagamentos, transaç
õ
es Pix, cartõ
es de cré
dito ou adquirê
ncia .
Noç
õ
es de infraestrutura como có
digo (Terraform) e modelagem voltada a serving de baixa latê
ncia .
E quais sã
o os benefí
cios?
Auxí
lio alimentaç
ã
o (mercado & restaurante)
Plano de saú
de e odontoló
gico
Hospital digital
Suporte psicoló
gico para psicoterapia online
Orientaç
ã
o ergonô
mica
Wellhub e TotalPass
Auxí
lio mensal para despesas remote first
Previdê
ncia privada apó
s 6 meses de trabalho
Licenç
a parental estendida
Auxí
lio creche
Auxí
lio para pais de filhos especiais
Plataforma de idiomas
Disponibilidade de coworking no Brasil inteiro.
Sobre a empresa
:
Olá! Estamos felizes em saber que você deseja ser um Docker!
Deixa a gente se apresentar: somos uma empresa B2B de tecnologia para meios de pagamento e banking na América Latina, presente hoje em 11 países. Há mais de 25 anos, atuamos na missão de democratizar o acesso a serviços financeiros e promover a inclusão de milhões de pessoas desbancarizadas.
Aqui, respiramos tecnologia. Todos os dias, usamos dados, códigos e nossa expertise para tornar o universo financeiro mais simples, automatizado e acessível. Atuamos como um facilitador, disponibilizando soluções ágeis, flexíveis e escaláveis para apoiar a evolução dos negócios dos nossos clientes e transformar o papel das finanças em todo o mundo.
Estamos em busca de pessoas inovadoras, eficazes, proativas e cheias de vontade de desafiar o status quo para que, juntos, possamos continuar a atuar no propósito de desmaterializar o universo financeiro para impulsionar a sociedade.
Se este é o seu perfil, vem transformar o mundo das finanças com a gente!
Confira nossas vagas: