Sonata

X открывает код алгоритма ранжирования и запускает инструмент прозрачности

image source

X значительно расширяет открытый исходный код своей платформы, включая алгоритм ленты «Для вас» и основной механизм ранжирования. Компания также добавляет функцию, позволяющую пользователям проверить, повлияли ли системы ранжирования на их аккаунт или публикации.

Исходный код ленты «Для вас» — стандартной подборки, которую видит пользователь при открытии приложения — теперь доступен на GitHub под лицензией Apache v2. Компания расширила предыдущие усилия по открытию кода, добавив детали конфигурации моделей, фильтров и основной системы ранжирования.

Теперь в открытом доступе есть параметры, используемые для взвешивания различных сигналов — это ключ к пониманию того, какие посты фактически показываются пользователям. Благодаря этому кодовая база стала примерно в 10-15 раз больше, чем была раньше.

«Вы получите основной код ранжирования, который отбирает посты, ранжирует их для конкретного пользователя и собирает ленту», — рассказал вице-президент X по продукту Кит Коулман в интервью TechCrunch. По его словам, можно увидеть системы, которые отфильтровывают потенциально проблемный контент, нарушающий правила, а некоторые компоненты, вроде ранжировщика и системы подсчёта очков, можно запустить самостоятельно вне компании.

«Думаю, люди будут довольно удивлены тем, что мы это выпускаем», — добавил он.

Помимо репозитория, X предоставляет инструменты, позволяющие пользователям самостоятельно проверить, как системы ранжирования повлияли на их аккаунт или посты. Новый инструмент прозрачности появится на странице «Под капотом» в настройках приложения.

Пользователи, опубликовавшие десять или более постов за последний месяц, смогут скачать агрегированную статистику в формате JSON. Файл покажет, применялись ли какие-либо метки к аккаунту или публикациям за прошедший календарный месяц.

Нетехнические пользователи могут воспользоваться этой информацией, загрузив её в любую LLM, указав на репозиторий X на GitHub и попросив дать интерпретацию. Изначально инструмент будет доступен тестовой группе аккаунтов возрастом не менее года.

Перед запуском компания предварительно показала открытый код внешним исследователям, знакомым с рекомендательными системами. Им удалось запустить «оценку» — числовое значение, рассчитываемое для каждого поста — вне инфраструктуры X. Коулман назвал это важной вехой в усилиях компании по прозрачности.

Через репозиторий на GitHub разработчики смогут отправлять обновления (pull request), которые инженеры X будут рассматривать для включения в алгоритм. Не все дополнения будут приняты, но Коулман настроен с энтузиазмом.

«Было бы потрясающе, если бы люди отправляли код, улучшающий алгоритм... Насколько круто было бы, если бы алгоритм X стал видимым не только для публики, но и создавался бы публикой?» — сказал он.

Однако некоторые системы не вошли в этот релиз — например, те, что используют Grok для прогнозирования нарушений правил постами. Это сделано, чтобы защитить X от злоумышленников, которые могли бы использовать эту информацию для обхода правил компании и наводнения сети спамом.

Изменения призваны снять сохраняющиеся опасения по поводу того, как алгоритм X влияет на политику, выборы и распространение дезинформации. Платформа давно является площадкой для политических деятелей и высокопоставленных лиц, а теперь принадлежит триллионеру, который помог избранию президента Трампа.

Но Twitter подвергался критике за недостаток прозрачности и до покупки Маском. Ранее республиканцы в Конгрессе утверждали, что калифорнийская соцсеть слишком сильно склоняется влево, и заявляли о «теневом бане» их постов — то есть публикации становились невидимыми без ведома авторов. Twitter последовательно отрицал эти обвинения.

«Наша мечта в том, чтобы любой человек мог оценить, как распределяются посты на платформе, проверить равенство условий, и если считает, что это не так — раскритиковать, чтобы мы могли продолжать улучшать систему», — сказал Коулман.

«В этом весь смысл: код можно проверить, его можно критиковать. Мы будем слушать и хотим сделать систему такой, которой люди будут доверять и считать справедливой», — добавил он.

Хотя X стремится к большей прозрачности в отношении кода и других функций, таких как система коллективной проверки фактов Community Notes, в целом компания стала менее прозрачной при Маске после того, как снова стала частной. Больше не обязанная отчитываться перед SEC, X реже раскрывает данные о пользовательских метриках, росте, доходах и запросах на удаление контента от правительств.

источник

Загрузка страницы