Hugging Face apresenta ToyBlocks, ambiente controlado para robôs aprenderem

A Hugging Face apresentou ToyBlocks, o primeiro FoundationWorld, uma estrutura para criar ambientes simulados controlados voltados à pesquisa em robótica. O cenário usa um braço robótico e blocos sobre uma mesa para investigar como modelos aprendem, generalizam e combinam raciocínio de alto nível com controle físico preciso.

O sistema gera automaticamente tarefas e demonstrações de treinamento, sem exigir teleoperação, e permite variar as experiências usadas no treinamento antes de avaliar o desempenho em tarefas não vistas. Imagens e letras nas faces dos blocos permitem tarefas de busca, classificação e organização, enquanto a variação de propriedades como tamanho dos blocos e altura da mesa testa a generalização. O ToyBlocks usa aprendizado por reforço e planejamento de movimento para gerar habilidades curtas, combinando modelos de raciocínio com modelos que controlam os movimentos do robô.