Компания Синьчжи Эмбодид и Университет Фудань совместно опубликовали три технических отчета, посвященных одному из самых значительных пробелов в воплощенном интеллекте: тактильному восприятию. Хотя возможности зрения и языка быстро развивались, осязание — критически важная модальность для задач манипуляции, таких как захват, сборка и идентификация объектов, — оставалось недоразвитым. В рамках сотрудничества были опубликованы 30 000 часов данных тактильного взаимодействия, собранных в ходе реальных операций роботов, предназначенных для обучения моделей понимать физические свойства, такие как текстура, твердость, температура и трение, через прикосновение.
Нехватка тактильных данных широко признана узким местом в воплощенном ИИ. Системы на основе зрения могут идентифицировать объекты и планировать траектории приближения, но терпят неудачу, когда требуется оценить силу захвата, обнаружить проскальзывание или различить свойства материалов через контакт. Человеческая манипуляция в значительной степени опирается на тактильную обратную связь: способность чувствовать, когда объект надежно удерживается, когда он вот-вот выскользнет, и сколько силы приложить для разных материалов. Эти способности приобретаются в ходе тысяч часов взаимодействия в процессе развития человека, и их воспроизведение в роботах требует столь же обширных данных тактильного опыта.
Три отчета охватывают проектирование и калибровку тактильных датчиков, методологию крупномасштабного сбора тактильных данных и обучение моделей манипуляции с учетом тактильных ощущений. Подход к датчикам сочетает несколько принципов преобразования, включая емкостное, пьезоэлектрическое и резистивное измерение, для захвата как статического распределения давления, так и динамических вибрационных сигналов во время контактов. Сбор данных проводился на нескольких роботизированных платформах, выполняющих задачи захвата, манипуляции в руке и исследования поверхности на тысячах объектов, различающихся по материалам, геометрии и текстуре поверхности.
Эта публикация представляет собой значительный вклад в открытую экосистему воплощенного ИИ. Высококачественные тактильные данные остаются дефицитными, поскольку их сбор требует специализированного оборудования, точной аннотации контактных событий и длительного времени работы роботов. Открывая исходный код 30 000 часов структурированных данных тактильного взаимодействия, Синьчжи Эмбодид и Университет Фудань стремятся ускорить исследования в области манипуляции с осязанием, позволяя разрабатывать роботов, способных справляться с широким разнообразием объектов, материалов и условий, встречающихся в реальных средах, а не ограничиваться работой только на основе зрения в контролируемых условиях.
Эта работа соответствует более широкой тенденции в воплощенном интеллекте к мультимодальному восприятию, отражающему интеграцию человеческих органов чувств. В то время как зрение обеспечивает глобальное пространственное восприятие, а язык — инструкции по задачам, осязание предоставляет локальные данные о физическом взаимодействии, необходимые для ловкой манипуляции. Сотрудничество между Синьчжи Эмбодид и Университетом Фудань, базирующееся в Шанхае, отражает углубление интеграции между академическими исследованиями и инновациями стартапов в экосистеме воплощенного интеллекта Китая, где результаты исследований напрямую влияют на циклы разработки продуктов. Ожидается, что публикация тактильных данных позволит сторонним исследователям и разработчикам создавать возможности манипуляции, которые ранее были недоступны из-за нехватки данных.
Всегда имейте в виду, что редакции могут придерживаться предвзятых взглядов в освещении новостей.
Автор – Pandaily
