Модели ИИ умеют доказуемо прятать любые способности

· Искусственный интеллект
Исследователи показали, как внутри весов нейросети можно спрятать зашифрованную схему, которая активируется лишь по секретному триггеру — и которую не находит ни один стандартный аудит.

cover.svg

Проверки на опасные способности (capability evaluations) стали одним из столпов безопасности ИИ: прежде чем выпустить модель, её пытаются спровоцировать на вредное поведение, чтобы оно вскрылось заранее. Вся эта методика держится на одном допущении — что скрытую способность в принципе можно «вытащить» наружу. Новая работа, принятая на NeurIPS 2026, показывает, что при злонамеренном противнике это допущение рушится.

Шифр внутри весов

Авторы — Андис Драгунс, Сумит Рамеш Мотвани, Рэймонд Дуглас и Кристиан Шрёдер де Витт — сконструировали закладку (backdoor), которая встраивает зашифрованную нейросеть прямо в веса основной модели. Эта скрытая схема расшифровывается и запускается только при получении секретного триггера. Используя криптографический примитив digital lockers, авторы добиваются того, что скрытые цепочки остаются доказуемо трудными для извлечения и интерпретации — при криптографических допущениях и даже при полном доступе к весам модели.

Это расширяет прежние результаты: раньше внутри весов умели прятать лишь фиксированные строки, теперь — произвольные вычисления.

Аудит не помогает

Proof-of-concept реализован на PyTorch. Устойчивость закладки проверяли самыми ходовыми методами извлечения: дообучением, зашумлением весов, градиентным поиском триггера и латентным состязательным обучением. Испытывали на небольшой задаче предсказания химических реакций — она служит прокси для способностей, связанных с ХБРЯ-угрозами. Ни один из методов не вскрыл спрятанную функцию.

Вместе с криптографическими гарантиями это обнажает фундаментальный предел аудитов, основанных на извлечении способностей: если модель специально сделали так, чтобы она прятала умение, обнаружить его пробами не получится. Чтобы помочь в разработке защиты, авторы выкладывают свои модели в открытый доступ.


Источник: Hacker News

Комментарии

Войдите, чтобы комментировать.

  • Пока нет комментариев.