Research engineer – distributed deep learning
Descrição
Sobre a oportunidade:
Nosso cliente é uma empresa brasileira de tecnologia especializada em pagamentos e infraestrutura financeira. A plataforma processa diariamente grandes volumes de eventos financeiros — transações, autorizações, movimentações de conta e outros registros — para empresas que oferecem produtos financeiros aos seus clientes.
Estamos construindo modelos de Deep Learning de grande escala sobre sequências de eventos financeiros, aprendendo representações do comportamento a partir de dados sem rótulo e medindo seu valor com rigor em comparação com abordagens já estabelecidas.
Buscamos uma pessoa Engenheira de Pesquisa para viabilizar o treinamento desses modelos em escala, combinando engenharia distribuída, processamento de grandes volumes de dados e participação ativa nos experimentos científicos.
ATENÇÃO!
Modelo de Trabalho Hibrido/Remoto – Barueri, SP
Haverá a possibilidade de negociar as idas ao escritório em função do projeto, mesmo que você seja de outro Estado ou more em outro País
Responsabilidades:
- Projetar e implementar treinamentos distribuídos de Deep Learning em múltiplas GPUs e múltiplos nós.
- Escalar modelos utilizando FSDP/DDP, precisão mista e estratégias eficientes de gerenciamento de memória.
- Desenvolver mecanismos de checkpoint, retomada, profiling e otimização de throughput.
- Construir dataloaders e pipelines eficientes para históricos longos, incluindo amostragem, streaming, empacotamento e sharding.
- Construir conjuntos de treinamento temporalmente corretos, evitando vazamento de informações.
- Identificar e otimizar gargalos de processamento, comunicação e computação.
- Avaliar oportunidades de processamento de dados em GPU.
- Participar dos experimentos de pesquisa, contribuindo para decisões de arquitetura, objetivos de aprendizagem e avaliação.
- Documentar processos e garantir a reprodutibilidade dos treinamentos.
Precisamos de alguém com:
- Mestrado e/ou Doutorado completo ou cursando em Computação, Estatística, Matemática, Física, Engenharia ou áreas correlatas, ou experiência equivalente comprovada em pesquisa.
- Experiência profunda em Deep Learning e programação avançada em Python e PyTorch.
- Experiência prática com treinamento distribuído em PyTorch, utilizando FSDP ou DDP.
- Conhecimento de precisão mista, gerenciamento de memória e estabilidade numérica em treinamentos distribuídos.
- Experiência com construção de pipelines de dados de grande volume utilizando Spark e SQL.
- Conhecimento de processamento temporal de dados e prevenção de vazamento de informação.
- Experiência com Hugging Face Transformers, Datasets, Accelerate ou ferramentas equivalentes.
- Domínio de práticas de versionamento, rastreamento de experimentos e reprodutibilidade.
- Inglês técnico avançado/fluente.
Diferenciais
- Experiência com DeepSpeed, Megatron ou NeMo em treinamentos multi-nó.
- Conhecimento de RAPIDS/cuDF para processamento de dados em GPU.
- Experiência com profiling de GPU, PyTorch Profiler ou Nsight.
- Conhecimento de otimização de kernels e mecanismos de atenção.
- Experiência com treinamento de modelos de grande escala em AWS ou outros ambientes cloud.
- Vivência com Databricks, Delta e MLflow.
- Experiência com dados de alto volume em Speech, NLP, recomendação, séries temporais ou logs de eventos.
- Publicações científicas, contribuições open source ou pesquisas técnicas relevantes.
O que esperamos de você:
- Comunicação estruturada baseada em fatos e dados
- Pragmatismo para resolução de problemas
- Perfil colaborativo para apoiar o time na construção de soluções
- Familiaridade com metodologias ágeis
- Indignação construtiva
Remuneração & Benefícios:
- Modelo de contrato CLT
- Vale Refeição e Alimentação
- Convênio médico e odontológico
- Vale Mobilidade
- Seguro de Vida
- Previdência Privada
- Auxílio Creche ou Babá
- Wellhub ou TotalPass
Conheça o nosso processo
O processo seletivo se inicia na candidatura.
O tempo do processo é flexível, mas não se preocupe, nosso time dedicado a candidate experience está preparado para proporcionar a melhor experiência para você.
Analisamos todos os perfis com atenção e sempre enviamos feedbacks, independente da etapa da candidatura.
Além disso, todas as instruções são enviadas por e-mail e/ou WhatsApp, e os feedbacks acontecem em tempo real.
Se encaixou na vaga? Candidate-se no botão abaixo. Conhece alguém com o perfil? Então compartilhe!
Acompanhe a Integrity no Site, Instagram e LinkedIn!
Vagas via INHIRE