X Илона Маска открывает исходный код алгоритма на основе Grok для ленты «Для вас»

Платформа социальных медиа X Илона Маска выполнила свое обещание приподнять завесу над одним из самых тщательно охраняемых секретов социальных медиа во вторник, опубликовав архитектуру машинного обучения, которая определяет, какие публикации появляются в лентах пользователей.

"Мы открыли исходный код нашего нового алгоритма 𝕏, работающего на той же трансформерной архитектуре, что и модель Grok от xAI", - написала в твиттере инженерная команда X.

"Мы знаем, что алгоритм глупый и нуждается в значительных улучшениях, но, по крайней мере, вы можете видеть, как мы стараемся сделать его лучше в режиме реального времени и с прозрачностью", - написал Маск после релиза. "Никакие другие компании социальных медиа этого не делают."

Релиз выполняет обещание, данное Маском на прошлой неделе, когда он опубликовал, что "сделает новый алгоритм X, включая весь код, используемый для определения того, какие органические и рекламные публикации рекомендуются пользователям, с открытым исходным кодом через 7 дней."

Он пообещал, что обновления будут "повторяться каждые 4 недели с подробными примечаниями для разработчиков, чтобы помочь вам понять, что изменилось."

Репозиторий GitHub детально описывает трансформерную модель на базе Grok, которая ранжирует публикации в ленте "Для вас" X, прогнозируя действия пользователей, такие как лайки и ответы, используя сквозное машинное обучение без вручную разработанных функций, построенное на Rust и Python для модульного извлечения и оценки.

Алгоритм извлекает контент из двух источников: внутрисетевые публикации от аккаунтов, на которые подписаны пользователи, и внесетевые публикации, обнаруженные с помощью извлечения на основе ML, объединяя оба через систему оценки, которая прогнозирует вероятности вовлеченности для каждой публикации.

Мидхун Кришна М, сооснователь и генеральный директор трекера стоимости LLM TknOps.io, заявил, что релиз с открытым исходным кодом может изменить отраслевые стандарты.

"Раскрывая трансформерную архитектуру на базе Grok, X по сути передает разработчикам план для понимания и потенциального улучшения рекомендательных систем, которые годами были черными ящиками", - сказал он Decrypt. "Этот уровень прозрачности может заставить другие платформы последовать примеру или объяснить, почему они этого не сделают."

"Создатели могут узнать, что работает, и скорректировать, не манипулируя системой вслепую, в то время как более четкие стимулы приносят пользу обычным пользователям и приводят к лучшему контенту", - добавил он.

Когда спросили, может ли код с открытым исходным кодом помочь пользователям определить, что делает публикации вирусными, сам Grok проанализировал алгоритм и выявил пять ключевых факторов.

К ним относятся прогнозы вовлеченности на основе истории пользователей для лайков и репостов, новизна и релевантность контента с более высокими оценками своевременных персонализированных публикаций, оценка разнообразия, которая ограничивает повторяющихся авторов, баланс между отслеживаемыми аккаунтами и публикациями, предложенными ML, и негативные сигналы от блокировок и отключения звука, которые снижают оценки.

X под пристальным вниманием

Релиз происходит на фоне усиленного контроля за инициативами X в области искусственного интеллекта, поскольку на прошлой неделе X отозвал доступ к API для проектов InfoFi, которые вознаграждали пользователей за взаимодействие с платформой, при этом руководитель отдела продуктов Никита Бир заявил, что компания "больше не будет разрешать приложения, которые вознаграждают пользователей за публикации в X" из-за опасений по поводу спама, созданного искусственным интеллектом.

Недавно X ограничил функции генерации и редактирования изображений Grok только для платных подписчиков и внедрил технические меры для предотвращения редактирования изображений реальных людей после того, как чат-бот был использован для создания несогласованных сексуализированных изображений, включая изображения несовершеннолетних, что побудило регуляторов по всему миру открыть расследования, которые могут привести к принудительным мерам.