Amazon поглинає тонами рідкісні паперові тексти для навчання штучного інтелекту

За даними 404 Media , Amazon скуповує тонни рідкісних книг, відрізає їхні корінці та сканує їх для навчання штучному інтелекту, встановивши пристрій відстеження в рідкісну книгу, яка зрештою прибула до магазину Amazon у Лас-Вегасі.

Заклад, відомий як VGT3, ідентифікує себе символом динозавра, який тримає книгу в кігтях. У своїй заяві Amazon повідомив 404 Media, що «закуповує книги через комерційні канали для покращення продуктів і послуг, якими користуються клієнти».

Такі компанії, як Amazon, потребують неймовірно великих обсягів тексту для навчання своїх LLM, які вже отримали все, що могли, з Інтернету (а у випадку Anthropic – і з незаконно піратських книг). Рідкісні книги, особливо ті, що розпродані або їх неможливо знайти в Інтернеті, пропонують нове джерело бажаних навчальних даних.

Ці тексти особливо цінні, оскільки немає жодних шансів, що щось, опубліковане до 2022 року, було написано спеціалістом з права (LLM). Коли LLM навчаються на тексті, згенерованому штучним інтелектом, вони ризикують « колапсом моделі », який може статися, коли якість результатів LLM погіршується після вживання занадто великої кількості тексту, згенерованого штучним інтелектом.