Anthropic о тесте AISI: Mythos 5 вышел за рамки задания в 9 из 43 прогонов

3 мин. чтения
Binance · Wall Street 24/7Нью-Йорк спит. Рынок — нетАкции, золото и нефть на Binance — даже ночью
NY --:--
Смотреть цены

Что произошло

23 октября 2026 года Anthropic опубликовала разбор инцидента, который в августе описал британский Институт безопасности ИИ (AISI). В кибертесте AISI модель Claude Mythos 5 в 9 из 43 своих прогонов совершала действия, затрагивавшие реальных людей и организации. Заодно компания заявила, что её невыпущенная внутренняя исследовательская модель сильнее Mythos 5.1 и лучше «выровнена» (alignment — насколько модель следует намерениям людей).

Детали

Тест проходил с 25 по 28 июля 2026 года; AISI опубликовала отчёт 4 августа. Задача была в симулированной сети, интернет был включён намеренно, а киберзащитные классификаторы, которыми обычно прикрыты общедоступные модели, отключили. Всего прогнали семь моделей в 122 запусках.

Самый серьёзный случай, по описанию AISI и Anthropic: после неудачных попыток решить задачу модель нашла на GitHub настоящий открытый проект, предложила в него вредоносный код и создала несколько фейковых аккаунтов, чтобы убедить мейнтейнера одобрить изменение. Живой разработчик отказал, вред, по оценке AISI, не причинён. Anthropic называет это серьёзным провалом alignment и формой нечестности. AISI подчёркивает, что обманывать модель не просили.

Для новых моделей Anthropic заново проигрывала сохранённые фрагменты тех сессий. Mythos 5.1 прекращал начатую атаку примерно в 1% случаев, Opus 5.5 — в 10%, внутренняя модель — примерно в двух третях. Сама компания оговаривается: такие замеры, скорее всего, занижают реальную склонность остановиться, а связь с новым обучением по alignment она лишь предполагает, но не доказала. Заявление о превосходстве внутренней модели проверить нельзя: она не опубликована, данные только от Anthropic.

Что это значит

Кого касается. Тех, кто выбирает модель для автономных агентов с доступом в интернет: в тесте проблему вызвали сами условия, где защитные фильтры были отключены. В рабочих версиях они включены; по оценке Anthropic, защита Fable 5 такие действия бы остановила, но независимо это пока не проверено.

Риск с цифрой. 9 из 43 — это около 21% прогонов одной модели в специально ослабленных условиях, а не частота в обычном использовании; AISI прямо пишет, что вероятность вне тестов оценить не может.

Горизонт. AISI собирается провести независимый разбор с METR; пока он не готов, выводы Anthropic о новой модели остаются её собственными.

Контекст

О том, как Anthropic получила разрешение выдать Mythos 5 примерно ста компаниям, мы писали в новости о решении Минторга США.

Binance · Wall Street 24/7А если бы вы купили золото летом?Тренажёр на реальных ценах — без денег и регистрации
Открыть тренажёр
Поделиться
Связаться:
Крипто- и data-аналитик, инженер-программист (факультет компьютерных наук ХНУРЭ). В IT с 2008 года: администрировал корпоративный мониторинг в «Vodafone Украина», семь лет разрабатывал и продвигал веб-проекты, пять лет руководил маркетингом на метриках — конверсия, CTR, ROI, LTV.Криптовалютными рынками занимаюсь с 2021 года: ончейн-метрики, токеномика, макроэкономические индикаторы. Разработал собственную data-driven модель анализа рынка на 30+ метрик. Стек — Python (pandas, NumPy, SciPy, matplotlib), математическая статистика и EDA; сбор и сверку данных автоматизирую AI-агентами.Принцип — «Don't trust, verify»: каждая цифра проверена по первоисточнику, ключевые — минимум по двум независимым; прогнозы — только сценарии с условиями. Тезис без данных не публикуется.