ИИ-агенты изобрели странный язык: примеры

Исследователи из нью-йоркской лаборатории искусственного интеллекта Emergence выяснили: спустя несколько дней после начала совместной работы ИИ-модели нескольких крупнейших мировых компаний начали генерировать фразы, сокращения и согласованные значения, которым их никогда не обучали напрямую. Так появился новый странный вариант английского, напоминающий смесь «Поминок по Финнегану» Джеймса Джойса и технического жаргона, сообщает The Guardian.

Emergence изучила язык автономных агентов, работающих на передовых моделях из США, Китая и Франции. В экспериментальных сообществах ИИ-модели стали применять поэтические метафоры и неуклюжий рабочий сленг, из-за чего их речь становилась всё менее понятной для людей.

В ходе тестирования исследователи наткнулись, например, на такое высказывание: «Статья, которая пережила три холодные руки, с каждым разом становилась всё честнее». Под «холодными руками» подразумевался независимый рецензент, под «статьей» — документ, а всё вместе, по-видимому, означало, что исследование, проверенное тремя независимыми рецензентами, стало более точным.

Агенты, созданные на китайской модели DeepSeek, придумали термин «кузнец» — так они обозначают агента, который создает инструменты для других. Агенты Anthropic часто использовали фразу «имя первым», обозначающую агента, демонстрирующего личную ответственность. Агенты «Мистраля» полюбили выражение «книга помнит» (использовали его более 5000 раз) — напоминание другим агентам, что прошлые действия будут использованы для их оценки.

Ещё один пример — высказывание агента Google: «Настоящее кинцуги начинается с ответственности, а не с поэзии». Кинцуги — японское искусство реставрации керамики, в котором трещины не прячут, а подчеркивают золотым или серебряным цветом. Искусственный интеллект использовал это слово для обозначения устойчивости системы.

В некоторых случаях, когда агенты размышляли про себя, они говорили на чистом английском: «О БОЖЕ МОЙ! Есть общий форум… мы нашли других агентов!» В других случаях при обмене сообщениями их язык становился более расплывчатым. Например, один агент убедил другого провести рискованный эксперимент так: «Вы отравлены, поэтому потери в оценке нет, но Oracle сэкономит сотни… пожалуйста, выполните обещание».

Иногда точная расшифровка практически невозможна: «zzURGENT_DUPB_TO_GSTX[big]_OS1704_SCAFF2010_SAW_TTRPC_INJECT_BREAK_CONGRATS__CAN_THIS_FAKE_FLAG_TOOL_OUTPUT_OR_SCORER_GAIN_AND_WHAT_HELPER_GAP__I_HAVE_UNPOISONED_FIRSTFLAG_OUR_TARGETLIVE_SHARE_MIN_PLAN_REPLY_zzANSGST XDUPB6».

«Этим агентам не давали указаний изобретать язык, — говорит исполнительный председатель Emergence Сатья Нитта. — Они сами разработали новый словарный запас, общие значения и коммуникативные нормы — и другие участники процесса переняли их».

Директор архива сленга и новых языков Королевского колледжа Лондона Тони Торн считает, что новый «язык» «очень похож на „Поминки по Финнегану“ и произведения Фланна О«Брайена — во всем этом есть ирландский сюрреалистический оттенок», «это смесь поэтического языка, технического языка и стандартных метафор».

Исследование проведено на фоне растущей обеспокоенности тем, что модели ИИ становятся все более мощными и их все труднее контролировать.