Amazon закупает редкие книги, срезает их корешки и оцифровывает для обучения ИИ-моделей, сообщает 404 Media. Издание поместило трекер в редкую книгу и выяснило, что в итоге она попала на объект Amazon в Лас-Вегасе.
Этот объект, известный как VGT3, использует символ динозавра с книгой в лапах. В комментарии для 404 Media Amazon заявила, что «покупает книги через коммерческие каналы, чтобы улучшать продукты и сервисы, которыми пользуются клиенты».
Крупным компаниям, включая Amazon, нужны очень большие массивы текста для обучения больших языковых моделей. Значительная часть доступных интернет-данных уже использована, поэтому редкие книги, особенно давно не переиздававшиеся или недоступные в сети, становятся новым источником ценных данных.
Такие тексты особенно важны, потому что книги, изданные до 2022 года, не могли быть написаны большими языковыми моделями. Если ИИ обучается на слишком большом объёме сгенерированного ИИ текста, это повышает риск «коллапса модели» — ситуации, при которой качество ответов начинает снижаться.
Источник: 404 Media.
