Они решили, что человеческому суждению нет замены, и вскоре начали искать способы получать честные отзывы людей в масштабе.
Результатом стал DesignArena — инструмент ИИ, который сейчас используют 5,3 миллиона человек по всему миру. Как оказалось, множество компаний в сфере ИИ искали масштабируемые отзывы пользователей — и многие были готовы за них платить.
«Это было недостающим узким местом для многих моделей, чтобы добиться улучшений в области дизайна, — говорит Ли. — Примерно через неделю мы заключили первую крупную сделку с передовой лабораторией, а остальное уже история».
В понедельник компания, стоящая за DesignArena — под названием Intelligence — объявила о посевном раунде на $7,9 млн, который возглавил Index Ventures при участии Conviction (Сара Го и Майк Вернал), A*, Valkyrie и других.
Для не корпоративных пользователей использование DesignArena очень похоже на использование сложного маршрутизатора моделей. Есть окно в стиле ChatGPT для подсказок, с отдельными выпадающими списками для веб-сайтов, изображений и дюжины других визуальных форматов. Как только вы вводите запрос, формат и стиль, вам будет представлен ряд вариантов «A против B», пока вы не оцените несколько результатов от лучшего к худшему.
Это полезный сервис, но настоящая ценность платформы заключается в корпоративной стороне, где участвующие модели могут использовать её как источник бесконечной мгновенной обратной связи для своих моделей, генерирующих медиа. Пользователи, как правило, безразличны к тому, какие модели они оценивают — как говорит Ли, они просто хотят получить наилучший результат — поэтому их оценки могут дать критически важную информацию о том, чего на самом деле хотят пользователи.
Для передовых лабораторий это услуга, за которую стоит платить, говорит Ли, добавляя, что сайт в настоящее время приносит $60 млн годового рекуррентного дохода (ARR), укрепляя свои позиции как ключевой источник данных оценки на основе человеческого мнения для индустрии ИИ.
Важно, что пользователи должны войти в систему, чтобы получить результат, поэтому Intelligence может также отслеживать, как эти предпочтения меняются на разных континентах и с течением времени. (Ли отмечает, что веб-панели в Азии, как правило, имеют более максималистский стиль дизайна.) Эти меры являются важным дополнением к автоматизированным бенчмаркам, которые могут работать в большем масштабе, но часто подвержены накрутке или другим манипуляциям, как наглядно продемонстрировал взлом Hugging Face на прошлой неделе.
Это не значит, что краудсорсинговая обратная связь от людей автоматически станет выигрышным рынком. Менее чем через год после запуска Yupp закрылась в этом году после привлечения $33 млн от a16z crypto и Криса Диксона. Она тоже заполучила несколько передовых моделей в качестве клиентов и, по её словам, имела более 1,3 миллиона пользователей, но так и не смогла построить устойчивый долгосрочный бизнес.
Тем не менее, другие стартапы, основанные на человеческой оценке, похоже, процветают. LM Arena, которая применяет аналогичный подход к текстовым ответам, привлекла $150 млн в раунде Series A в январе, всего через четыре месяца после официального запуска своего платного продукта.
Всегда имейте в виду, что редакции могут придерживаться предвзятых взглядов в освещении новостей.
Автор – Russell Brandom
