Generic selectors
Exact matches only
Search in title
Search in content
Post Type Selectors

ИИ‑компании скупают и уничтожают редкие книги ради обучения нейросетей

Разработчики ИИ ищут качественные тексты для обучения моделей и всё чаще покупают бумажные книги оптом. Страницы отделяют от корешка, сканируют промышленным оборудованием, а сами экземпляры после этого нередко не сохраняются.

Интернет всё хуже подходит для обучения ИИ. В нём становится больше автоматически созданных текстов, ошибок и повторов. Поэтому разработчики нейросетей ищут другие источники качественного контента — в том числе в старых бумажных книгах, изданных до массового распространения генеративного ИИ. Для индустрии такие тома ценны как массивы человеческого текста, который ещё не успел смешаться с нейросетевым контентом.

Схема проста и беспощадна к печатным экземплярам. Компании выкупают книги у реселлеров крупными партиями, механически отделяют страницы от переплёта и пропускают их через промышленные сканеры. В материалах судебного разбирательства Anthropic упоминалось гидравлическое оборудование для срезания корешков. Так компания переводила бумажные книги в цифровой массив для обучения моделей. Суд признал такое сканирование трансформативным использованием, поскольку книги не распространялись заново в виде копий.

На этом вырос отдельный рынок посредников. Например, сервис ISBNdb, прежде работавший с библиотеками, дистрибьюторами и книжными магазинами, предлагает ИИ‑компаниям оптовые закупки объёмом от 1 000 до 1 млн книг за заказ и обещает конфиденциальность покупателям. Продавцы уже замечают резкие всплески спроса на случайные книги с ISBN, включая иностранные, антикварные и отсутствующие в переизданиях. Проблема в том, что для нейросети редкая книга — это просто строка в датасете, а для библиотек, читателей и коллекционеров — иногда один из последних сохранившихся экземпляров.

1
Еще немного по теме

Nvidia приобрела платформу Hugging Face. Репозиторий с миллионами ИИ-моделей обещают сохранить открытым для разработчиков.

Школьница из Шанхая создала сервис для концентрации во время занятий. Цифровой аватар родителя реагирует на отвлечения и отправляет отчёт после учёбы.