Ai2 представила ToyBlocks — симулятор для обучения роботов работе с блоками

Ai2 представила ToyBlocks — симулятор для генерации демонстраций и оценки моделей, работающих с блоками. Авторы заявляют ускорение до 24 раз относительно реального времени; перенос результатов на физического робота публикация не подтверждает.

Ai2 представила ToyBlocks — симулятор для обучения роботов работе с блоками. Тематическая карточка Comrad404.

Симулятор для экспериментов с роботами

6 ноября 2026 года Ai2 представила ToyBlocks — симуляционную среду с роботизированной рукой и блоками на столе. В публикации Ai2 на Hugging Face проект назван первым «foundation world» в подходе FoundationWorlds. Исследователи могут использовать виртуальную среду для генерации демонстраций и оценки моделей управления, не прибегая для каждого примера к телеуправлению физическим роботом. Схематически установка состоит из руки, стола и блоков с разными гранями.

Схема: Симулятор для экспериментов с роботами 6 ноября 2026 года Ai2 представила ToyBlocks — симуляционную среду с роботизированной рукой и блоками на столе.; Поэтому ToyBlocks описан как средство обучения и оценки в симуляции, а не как доказательство готовности модели к реальной работе.; Для выводов о работе на физическом роботе потребуется отдельная оценка переноса: сам симулятор её не устанавливает.
Основные элементы, разобранные в статье.

Толкание, переворачивание и укладка

По описанию Ai2, задачи ToyBlocks включают не только захват и складывание предметов: робот может толкать блоки по столу и переворачивать их на другую грань. Изображения и буквы на блоках позволяют задавать поиск, сортировку и размещение; чтобы определить содержимое скрытой грани, роботу может понадобиться сначала повернуть блок.

Авторы предлагают менять состав обучающих примеров: например, генерировать больше демонстраций толкания или переворачивания, а затем оценивать модель на задачах, не включённых в обучение. Это позволяет задать эксперимент на обобщение в самой симуляции, но само по себе не подтверждает успешную работу навыка с реальными предметами.

Как формируются данные

В описании Ai2 высокоуровневые модели выбирают, что делать, а низкоуровневые управляют движениями робота. Планировщик задач и движений формирует последовательности действий; их выполнение в симуляции создаёт демонстрации с метками задачи или навыка. Авторы сообщают, что короткие навыки создаются с помощью обучения с подкреплением и планирования движений в Isaac Lab.

Ai2 заявляет, что сотни планов можно генерировать и выполнять параллельно на одном GPU, достигая производительности до 24 раз выше реального времени. Это заявленный показатель скорости обработки в описанной среде, а не измерение качества обученных моделей или независимый результат редакционного теста.

Граница между симуляцией и реальностью

Для генерации навыков ToyBlocks может использовать точные положение и ориентацию блока, которые симулятор предоставляет напрямую. Физическому роботу такие сведения обычно нужно оценивать по наблюдениям, например изображениям камеры. Этот разрыв важен при интерпретации демонстраций: успешное выполнение задачи в виртуальной среде ещё не доказывает, что обученная модель справится с реальным блоком.

В публикации Ai2 нет независимого сравнения качества или подтверждения переноса результатов на физического робота. Поэтому ToyBlocks описан как средство обучения и оценки в симуляции, а не как доказательство готовности модели к реальной работе. Полные условия лицензирования кода и цена использования в доступных материалах не подтверждены.

Что получает исследователь

Практическое предложение ToyBlocks — автоматизированно получать вариативные демонстрации, менять долю отдельных навыков в обучении и проверять модели на оставленных за его пределами задачах. Среда также разделяет выбор цели и управление движением, позволяя исследовать эти этапы в одном симуляционном сценарии.

Заявленные возможности и ускорение относятся к описанию Ai2 от 6 ноября 2026 года. Для выводов о работе на физическом роботе потребуется отдельная оценка переноса: сам симулятор её не устанавливает.