DS

Разработчики ИИ скупают миллионы подержанных книг для обучения моделей

image source

Разработчики ИИ скупают миллионы подержанных книг через посредников, чтобы получить качественные данные для обучения моделей. Это позволяет избежать критики за использование некачественного интернет-контента.

Печатные книги — ценный источник, но процесс вызывает споры об этичности. Нет ясности, изымаются ли редкие издания, а отсканированные данные становятся закрытыми.

База ISBNdb предлагает оптовые закупки книг для ИИ-компаний. Заказы варьируются от тысяч до миллиона экземпляров. Покупатели не торгуются, важны только ISBN.

Anthropic потратила миллионы на оцифровку книг для Claude, затем уничтожила их. Суд признал добросовестное использование, но компании грозит штраф за пиратские электронные книги.

Инженер Том Харви подтвердил программу Project Panama. Сканирование может быть разрушающим: книги разбирают и уничтожают. Разработчики выбирают этот метод из-за эффективности.

источник

Загрузка страницы