В Sony Earbuds встроили камеры, превратив их в подобие «смарт-очков»

Airpods Vuebuds ии компьютерное зрение наушники gizmodo.com

Apple не единственная, кто заинтересован в наделении беспроводных наушников функцией ИИ-видения. Исследователи создали прототип VueBuds. — gizmodo.com

Если вас воодушевляет идея Apple встроить камеры в AirPods, у меня есть хорошие новости: теперь вы можете получить раннее представление о том, как это может выглядеть, благодаря исследователям из Вашингтонского университета в Сиэтле.

Ради науки исследователи сумели уместить камеры внутри пары беспроводных наушников Sony WF-1000XM3, по сути наделив любимое персональное аудиоустройство функцией компьютерного зрения. Подобно умным очкам, эти модифицированные наушники могут сканировать окружающую обстановку и отвечать на вопросы с помощью большой языковой модели. Если это звучит знакомо, то потому, что Apple, по всей видимости, уже присматривается к той же идее.

Согласно недавнему сообщению Марка Гурмана из Bloomberg, AirPods с камерами *действительно* близки к реализации и находятся на «поздних стадиях разработки». Точно так же, как и исследователи из Вашингтонского университета в Сиэтле, ответственные за это «Франкенштейновское» устройство Sony, Apple хочет, чтобы ее модифицированные наушники использовались не для фотосъемки, а для задач с использованием ИИ — например, для пошаговой навигации или вывода напоминаний на основе текущего окружения. Все это очень похоже на такие продукты, как умные очки Ray-Ban Meta* AI, которые используют компьютерное зрение для анализа окружения.

Что интересно в версии исследователей, которую они назвали VueBuds, так это то, как они решают некоторые проблемы, неизбежно возникающие при встраивании камер в беспроводные наушники. Например, время автономной работы. Очевидно, постоянная работа камер вредит времени работы от батареи и конфиденциальности, поэтому исследователи выбрали камеры низкого разрешения, работающие только в черно-белом режиме, что снижает энергопотребление и вероятность захвата изображений, которые могут представлять угрозу безопасности. При такой настройке, по словам исследователей, им удалось добиться времени отклика, сопоставимого со временем отклика очков Ray-Ban Meta* AI, что не является лучшим стандартом в мире, но и не ужасно. Вот видео работы VueBuds.

Идея интересная, но, честно говоря, она сталкивается с теми же проблемами, что и компьютерное зрение в умных очках Ray-Ban. Как человек, который тщательно тестировал носимые ИИ-устройства, я первым скажу, что они не всегда так полезны, как хотелось бы. Ответы часто могут быть неверными или бесполезными, время ожидания может быть дольше желаемого, а вся обработка происходит в облаке, так что если у вас нет стабильного интернет-соединения… что ж, вы остаетесь ни с чем.

Я также предвижу некоторые более технические проблемы с такими подходами, как VueBuds, одна из которых — использование видео низкого разрешения и черно-белого изображения. Конечно, это хорошо для времени автономной работы и, теоретически, лучше для конфиденциальности, но действительно ли это может запечатлеть все необходимые детали? Что, если у вас есть вопрос, связанный с цветом, или вам нужно рассмотреть детали чего-то поблизости?

В любом случае, это интересное упражнение, и, судя по последним сообщениям, в ближайшем будущем мы можем увидеть гораздо более отточенную версию VueBuds от компании стоимостью в несколько триллионов долларов, обладающей немалыми ресурсами. Я, например, заинтересован в том, чтобы увидеть, сможет ли вся эта наличность заставить беспроводные наушники с камерами по-настоящему работать.

Facebook*, Instagram* и WhatsApp* принадлежат компании Meta* Platforms Inc., деятельность которой признана экстремистской и запрещена на территории Российской Федерации.

Всегда имейте в виду, что редакции могут придерживаться предвзятых взглядов в освещении новостей.

В тренде:


Похожие новости: