ИИ-компании скупают и уничтожают миллионы книг для обучения нейросетей
Искусственный интеллект добрался до книжных полок: ИИ-компании скупают старые издания тысячами и даже миллионами экземпляров, чтобы оцифровать и уничтожить. Это не заговор против культурного наследия, а прагматичный способ получить качественные данные для обучения нейросетей, которые уже загрязнены контентом, созданным самим ИИ.
Как выяснилось из судебных разбирательств 2025 года, компания Anthropic, разработчик чат-бота Claude, запустила «Проект „Панама“» — инициативу по «деструктивному сканированию всех книг в мире». Внутренние документы, рассекреченные в ходе иска о нарушении авторских прав, раскрыли планы компании. Anthropic обвиняли в использовании сотен тысяч электронных книг с пиратских сайтов для обучения ИИ, так как легальный путь казался компании «юридической, практической и деловой волокитой». Спор урегулировали выплатой $1,5 миллиарда авторам, что стало крупнейшим возмещением ущерба за нарушение авторских прав в истории, но вину компания не признала.
Обжегшись на цифровых книгах, Anthropic переключилась на бумажную литературу. Теперь компания закупает миллионы подержанных книг через посредников, оцифровывает их и уничтожает. Так поступают и другие ведущие ИИ-компании. Причина в том, что интернет наводнен некачественным контентом, созданным самими нейросетями, что загрязняет базы для обучения. Поэтому разработчики обратились к чистому источнику — печатным книгам, особенно выпущенным до 2022 года, где нет сгенерированного текста. Anthropic надеялась, что «захватывающие художественные повествования» помогут Claude писать «точно и убедительно, а не имитировать низкокачественный интернет-сленг».
Метод «деструктивного сканирования» существует давно: специальная машина отрезает корешок, разделяет книгу на листы и быстро сканирует их, обеспечивая высокое качество, но делая книгу непригодной для восстановления. Масштабы закупок впечатляют: Anthropic искала подрядчика для обработки от 500 тысяч до двух миллионов книг за полгода. Книжный сервис ISBNdb предлагал ИИ-компаниям оптовые поставки от 1000 до миллиона экземпляров, обещая конфиденциальность, чтобы избежать негативного имиджа. Продавцы антикварной литературы из Германии, Швейцарии и Австралии получали заказы на случайные нишевые издания и бульварные романы. Суд признал деструктивное сканирование законным в США, поскольку это «преобразующее использование».
