tgoop.com/world_of_robotics/5232
Last Update:
🤖 Генеративный ИИ создает виртуальные полигоны для обучения роботов
Учёные из CSAIL MIT и Toyota Research Institute представили систему Steerable Scene Generation, которая генерирует реалистичные трёхмерные сцены, пригодные для обучения роботов. Она обучена на 44 миллионах 3D-комнат с предметами вроде столов, посуды и мебели, и умеет собирать из них новые физически корректные виртуальные пространства. На «чистом холсте» постепенно возникает кухня или гостиная, где объекты не пересекаются друг с другом и ведут себя так, как в реальности.
Ключевой инновацией стало применение метода Monte Carlo Tree Search. С его помощью система рассматривает множество вариантов расположения предметов и выбирает те, что делают сцену максимально сложной и правдоподобной. В результате она способна создавать помещения, которые выходят за рамки исходных данных, включая сцены с вдвое большим количеством объектов, чем в обучающем наборе.
Steerable Scene Generation также использует обучение с подкреплением, позволяя системе улучшать созданные сцены под конкретные цели. Пользователь может задать задачу вроде «кухня с четырьмя яблоками и миской на столе» — и алгоритм воспроизводит её с точностью до 98%. Более того, он способен перестраивать существующие сцены, меняя расположение предметов, но сохраняя их общее окружение.
В виртуальных кухнях роботы уже учатся аккуратно раскладывать хлеб по тарелкам или убирать вилки и ножи в подставку. Такие полигоны можно создавать в неограниченных количествах, превращая их в базы данных для отработки сложных манипуляций. В будущем исследователи хотят научить систему генерировать не только сцены, но и новые объекты, включая те, что можно открывать или вращать, как шкафы или банки.
#МирРобототехники #Робототехника #Инновации #Технологии #ИИ #Робот #Роботы
