Hugging Face diz que testes com modelos reduzidos detectaram bug no UMT5
🎧 Ouça esta notícia
A Hugging Face afirma que um bug introduzido no Transformers em 30 de julho de 2026 permitia ao decodificador do UMT5 acessar tokens futuros durante o treinamento. O problema permaneceu no branch principal por quase dois meses, mas um modelo UMT5 reduzido, executado em um runner de CPU, identificou a regressão ao reproduzir os commits; a correção ocorreu em 28 de setembro. O modelo reduzido tinha 66 MB, contra 1.227 MB do checkpoint de origem.
A empresa propõe os Model Integration Contracts (MICs), um padrão com três partes: um modelo reduzido derivado do checkpoint real, um caminho de uso executável e resultados de referência revisados por uma pessoa. Publicados no huggingface-mic e fixados em revisões congeladas, os contratos podem ser selecionados conforme os arquivos alterados em um pull request. A Hugging Face ressalta que eles complementam, mas não substituem, os testes completos de integração.
Por que importa · interpretação editorial
A proposta da Hugging Face pode tornar a detecção de regressões em modelos mais acessível, usando testes menores e executáveis em CPU sem substituir a integração completa. Ao selecionar contratos conforme os arquivos alterados, as equipes também podem direcionar a verificação para mudanças com maior probabilidade de impacto.