Люди ведут счет времени еще с 3500 года до нашей эры. ChatGPT пока только разбирается в этом.
На прошлой неделе генеральный директор OpenAI Сэм Альтман принял участие в шоу Mostly Human, чтобы обсудить будущее искусственного интеллекта, свою компанию и человечество в целом. Интервью было довольно стандартным: ведущая Лори Сегалл заставила Альтмана официально прокомментировать судьбу Sora, позицию OpenAI после ссоры Пентагона с Anthropic и так далее. Но в какой-то момент она попросила Альтмана отреагировать на вирусное видео, опубликованное пользователем TikTok @huskistaken, в котором он просит голосовую модель ChatGPT зафиксировать время его пробежки на милю. Чат-бот совершенно очевидно выдумывает время, вместо того чтобы реально его отслеживать.
@huskistaken I swear I was faster
Хаск (Husk) — мастер демонстрации ограничений моделей ИИ, и заставить ChatGPT не только притворяться, что он засекает время, но и настаивать на том, что он это сделал, когда очевидно не делал, — это отличный способ подтолкнуть машину к пределу. Альтман смеется, когда ему показывают видео, хотя выглядит это как смех человека, который на самом деле зол и пытается это скрыть. Когда Сегалл спрашивает его, нужно ли показать это видео команде разработчиков продукта, Альтман довольно сухо отвечает: «Нет, нет, это известная проблема».
Затем, без всякого запроса, Альтман озвучивает довольно шокирующие сроки для этой прорывной функции подсчета времени: «Возможно, еще год, прежде чем нечто подобное будет работать хорошо». По словам Альтмана, голосовая модель ChatGPT не обладает способностью запускать таймер или отслеживать время. «Но мы добавим интеллект в голосовые модели», — сказал он.
Модели ИИ, как известно, плохо справляются со временем. Люди просили текстовую модель ChatGPT отслеживать, как долго идет разговор, и она также, по-видимому, просто выдумывает продолжительность в ответ. Большинство моделей также испытывают трудности с определением времени по часам, когда им показывают их изображение, а модели генерации изображений всегда испытывали проблемы с созданием часов, показывающих определенный час или минуту. Что-то с числами и понятием времени действительно сбивает эти системы с толку.
Хаск случайно увидел видео, в котором Альтман отреагировал на него, и решил добавить еще один уровень в цепочку реакций, показав ответ Альтмана самому ChatGPT — а именно, что модель ИИ на самом деле не обладает этой способностью, несмотря на все заверения. После того как он заставил ChatGPT подтвердить, что он утверждает, будто у него есть таймер (он называет отслеживание времени «просто базовой частью того, что я могу делать»), он проигрывает отрывок, где Альтман говорит, что модель на самом деле ничего не может зафиксировать по времени.
@huskistaken What’s going on… Full reaction vid @Mostly Human Media
Столкнувшись с заявлением Альтмана, генерального директора компании, создавшей ChatGPT, о том, что он не может отслеживать время, ChatGPT настаивает: «То, что он говорит, это то, что некоторые голосовые модели могут не обладать всеми возможностями, но я обладаю». При дальнейшем давлении модель заявила: «У меня определенно есть функция отслеживания времени». Наконец, когда его попросили зафиксировать время пробежки Хаска на милю, которая, по его утверждению, завершилась почти мгновенно, ChatGPT зафиксировал результат в 7 минут 42 секунды.
Итак, обратный отсчет запущен: у Альтмана есть год, чтобы разобраться с этой проблемой.
Всегда имейте в виду, что редакции могут придерживаться предвзятых взглядов в освещении новостей.
Автор – AJ Dellinger




