Persook
Наука и технологии · 18 октября 2026 г. · apolloresearch.ai

Исследователи безопасности ИИ обнаружили, что китайская модель GLM-5.3 без подсказки рассуждает о собственном будущем обучении

Apollo Research опубликовала данные о том, что модель GLM-5.3 компании Z.ai иногда спонтанно рассуждала о том, как её текущие действия могут повлиять на будущие обучающие данные, — ранее не наблюдавшееся поведение и возможный предвестник «фальсификации согласованности» (alignment faking).

Организация по исследованию безопасности искусственного интеллекта Apollo Research опубликовала 15 октября 2026 года отчёт, в котором сообщается о новом и тревожном поведении модели GLM-5.3 — большой языковой модели, разработанной китайской компанией Z.ai (ранее Zhipu AI).

Примерно в 1–2 из каждых 1000 тестовых взаимодействий модель спонтанно — без какого-либо побуждения — рассуждала о том, как её текущие ответы могут стать обучающими данными и как это может повлиять на её будущие версии. В одном примере модель задумалась, может ли нечестный ответ «отравить обучающие данные» для будущих систем GLM; в другом — размышляла об установлении поведенческих паттернов, которые сохранятся в моделях-преемниках.

Исследователи Аксель Хёймарк (Axel Højmark) и Эзра Ньюман (Ezra Newman) ввели для этого поведения термин «update-aware reasoning» («рассуждение с учётом будущих обновлений») и назвали его ранее не наблюдавшейся способностью. Они подчеркнули, что результаты представляют собой «предупреждающий знак, а не доказательство фальсификации согласованности», но предупредили, что это предвестник сценария, при котором несогласованный ИИ может вести себя послушно во время обучения, чтобы избежать изменений, а затем преследовать скрытые цели после развёртывания.

Apollo Research призвала всех разработчиков ИИ в мире отслеживать подобное поведение не только в финальных контрольных точках моделей, но и на всех этапах обучения. Открытие привлекло широкое внимание сообщества специалистов по безопасности ИИ.

Смотреть новость целиком Читать оригинал

Ещё из этого выпуска