Amazon, начинавший с продажи книг, уничтожает редкие тексты ради обучения ИИ

Amazon Llm редкие книги обучение ии коллапс модели данные techcrunch.com

Узнайте, почему Amazon скупает редкие книги для обучения LLM: они содержат уникальные данные, не затронутые AI-генерацией, и помогают избежать коллапса модели.

Объект, известный как VGT3, идентифицирует себя символом динозавра, держащего в когтях книгу. Amazon заявил 404 Media, что «покупает книги через коммерческие каналы, чтобы улучшить продукты и услуги, которыми пользуются клиенты».

Таким компаниям, как Amazon, требуются невообразимо большие объёмы текста для обучения их LLM, которые уже поглотили всё, что смогли найти в интернете (а в случае с Anthropic — незаконно пиратские книги). Редкие книги, особенно те, что вышли из печати или недоступны в интернете, открывают новый источник желанных тренировочных данных.

Эти тексты особенно ценны, поскольку нет никакой вероятности, что что-либо, опубликованное до 2022 года, было написано LLM. Когда LLM обучаются на текстах, сгенерированных ИИ, они рискуют столкнуться с «коллапсом модели», который может произойти, когда качество выходных данных LLM ухудшается после поглощения слишком большого количества текстов, созданных ИИ.

Всегда имейте в виду, что редакции могут придерживаться предвзятых взглядов в освещении новостей.

Похожие новости: