Клод Фабль 5.2 за два дня завершил формализацию теоремы Ферма, Anthropic выпустила сразу два флагмана

Редакция Машинного Сердца

Наконец, в новой гонке за флагманскими моделями, Anthropic сделала первый ход.

Сегодня рано утром Anthropic сразу представила две топовые модели: Fable 5.2 и Mythos 5.2.

Официально заявлено, что «обе модели нацелены на сложные технические задачи, могут участвовать в крупных комплексных проектах в различных областях и обеспечивать дальнейшее улучшение в программировании, логическом мышлении и визуализации».

Кроме того, Anthropic также начала предлагать «Reset» бонусы, знакомые пользователям OpenAI Tibo.

Отец Claude Code также объявил: «Мы хотим предоставить больше бонусов тем пользователям, которые были с нами дольше всего. Поэтому в Fable 5.2, чем дольше срок подписки, тем больше Fable resets (количество сбросов) получают пользователи».

Согласно информации, Claude Fable 5.2 и Claude Mythos 5.2 в тестировании перед официальным релизом помогли инженерам Anthropic завершить ранее трудные проекты по миграции программного обеспечения, разработав с нуля три электронных устройства, которые функционируют нормально, решив две неразрешенные проблемы в области физики черных дыр, достигли значительного прогресса в оценке роботов и завершили формальное доказательство теоремы Ферма всего за 30 часов. Кроме того, у них есть множество других сценариев применения.

Claude Fable и Claude Mythos используют одну и ту же базовую модель. Fable оснащен строгими механизмами кибербезопасности и биобезопасности, которые эффективно предотвращают злоупотребления моделью, поэтому он доступен для всех пользователей. Для организаций, желающих использовать модель в таких полезных областях, как кибербезопасность или биомедицинские исследования, можно подать заявку на использование Mythos через недавно расширенную программу жизненных наук и программу проверки кибербезопасности от Anthropic.

Скорость генерации обеих моделей на 30% выше, чем у Claude Fable 5.1 и Claude Mythos 5.1, а цены также снижены: 8 долларов за миллион входных токенов и 40 долларов за миллион выходных токенов.

Fable 5.2 и Mythos 5.2 также предлагают опциональный быстрый режим (Fast Mode), который может увеличить скорость генерации токенов до 2.5 раз. Цена быстрого режима составляет 16 долларов за миллион входных токенов и 80 долларов за миллион выходных токенов.

Оценка производительности Claude Fable 5.2 и Mythos 5.2

Результаты бенчмарков

Ниже приведенные результаты бенчмарков показывают, что Claude Fable 5.2 и Mythos 5.2 превосходят Opus 5.5 по почти всем оцененным способностям.

С точки зрения горизонтальной оценки, Fable 5.2 лидирует в нескольких сложных задачах. В программировании он набрал 49.1% и 69.9% на FrontierCode 2.0 и FrontierSWE v2 соответственно, превзойдя 42.8% и 65.5% у GPT-6 Astra, а также опередив Opus 5.5. В оценке робототехнических операций RoboDojo Sim Fable 5.2 достиг 64.9%, что на 37.3 процентных пункта выше, чем 27.6% у предыдущего поколения Fable 5.1, и значительно выше 39.4% у Opus 5.5 и 29.8% у GPT-6 Astra.

Кроме того, он набрал 89.3% в оценке компьютерных операций OSWorld 2.1 и 74.2% в многопрофильной оценке логического мышления Humanity's Last Exam (с инструментами), что также ставит его на первое место среди моделей, представленных на рисунке. Однако в оценке знаний AA-Briefcase Elo-оценка Opus 5.5 немного опережает с 1800 баллами, в то время как Fable 5.2 составляет 1785 баллов. Высокие баллы в области научных исследований и кибербезопасности частично были получены благодаря Mythos 5.2, выпущенному одновременно.

Интенсивность и эффективность логического мышления

При установке средней (Medium) интенсивности логического мышления, которая также является настройкой по умолчанию для Claude и Claude Code, Fable 5.2 требует меньше токенов для выполнения сложных задач, чем Fable 5.1.

В ранних тестах на FrontierCode 2.0, при использовании высокой (High) интенсивности логического мышления, Fable 5.2 показал результаты, сопоставимые с Opus 5.5, использующим максимальную (Max) интенсивность, при этом стоимость выполнения отдельных задач составила лишь около половины от стоимости последнего. При очень высокой (Xhigh) интенсивности логического мышления результаты Fable 5.2 также превзошли все другие опубликованные модели, участвовавшие в тестировании.

Программирование

На данный момент более 90% изменений кода, объединенных в основной кодовой базе Anthropic, были выполнены Claude под руководством человека.

Anthropic уже использовала Fable 5.2 для исправления долгосрочных проблем с ошибками за считанные минуты, оптимизировала производительность различных сервисов и завершила несколько важных программных проектов, которые ранее не могли быть запущены из-за слишком долгого времени выполнения или высоких затрат.

Ранее команда агентов, управляемая ранней версией Fable 5.2, перенесла ключевую производственную службу с Python на Rust. После миграции эффективность и надежность этой службы значительно возросли, а время запуска увеличилось примерно в 26 раз.

Тесты также показали, что Fable 5.2 обладает сильными инженерными суждениями. Даже при наличии нечетких требований он может предоставить качественные результаты.

В одном эксперименте инженер Anthropic попросил Fable 5.2 разработать прототип операционной системы с нуля. Модель начала с пустой папки, координировала более 1000 подагентов и непрерывно в течение 8 дней писала, тестировала и проверяла код. В конечном итоге ей удалось разработать операционную систему, которая может запускаться и работать на ноутбуке.

Эта система имеет собственное ядро, которое может управлять всей машиной; включает в себя драйверы для дисков, клавиатуры и сети, а также постоянное файловое хранилище, оконную систему, интерфейс входа и установочный пакет, в который встроены функции Claude.

Ранние тестировщики также были впечатлены тем, как Fable 5.2 применяет свои программные способности к различным задачам.

Кибербезопасность

Claude Mythos 5.2 является самой мощной моделью Anthropic в области кибербезопасности. По сравнению с предыдущими моделями, она может обнаруживать больше уязвимостей и лучше справляется с их воспроизведением и исправлением. Следует отметить, что механизмы защиты Claude Fable 5.2 блокируют большинство задач, связанных с кибербезопасностью.

Одна из компаний по кибербезопасности обнаружила, что среди уязвимостей, найденных и подтвержденных Claude Mythos 5.2, одна шестая не была обнаружена всеми другими передовыми моделями, которые они тестировали.

Внутренние тесты Anthropic, проведенные в рамках CVE Rediscovery, показали, что количество уязвимостей, найденных Claude Mythos 5.2, на 10.2% больше, чем у Claude Opus 5.5, и на 14.4% больше, чем у Claude Mythos 5.1.

Claude Mythos 5.2 также продемонстрировала значительные улучшения в точности суждений и калибровке уверенности. Один из тестировщиков заметил, что предыдущие модели обычно завышали серьезность каждой 20-й найденной уязвимости, тогда как Claude Mythos 5.2 не проявила такого поведения.

Пользователи могут использовать возможности кибербезопасности Claude Mythos 5.2 через программу проверки кибербезопасности. Anthropic продолжает расширять и улучшать эту программу.

Даже без участия в программе проверки кибербезопасности, корпоративные клиенты Claude Enterprise могут использовать Claude Security. Эта услуга использует самую мощную модель Anthropic для сканирования кодовых баз в поисках потенциальных уязвимостей и уже интегрирована с Claude Mythos 5.2.

Недавнее обновление еще больше усилило возможности Claude Security. Теперь она может постоянно отслеживать кодовые репозитории, следить за обновлениями кода и обеспечивать исправление обнаруженных уязвимостей; также она может анализировать с учетом большего количества контекстной информации и интегрироваться с другими инструментами, используемыми пользователями, через API и MCP.

Наука и инженерия

Многие важные работы в области науки, инженерии и математики все больше зависят от программных возможностей. Будь то анализ данных, создание молекулярных моделей, проектирование компонентов или управление экспериментальными приборами, все это можно выполнить с помощью программного обеспечения.

Ниже Anthropic рассказывает, как Claude Fable 5.2 и Claude Mythos 5.2 помогают исследователям решать задачи в этих областях и продвигать соответствующие исследования.

Теоретическая физика

Claude Fable 5.2 решила две неразрешенные проблемы в области теоретической физики. Обе проблемы связаны с черными дырами и касаются двух основных теорий современной физики — проблемы объединения относительности и квантовой механики.

Два достижения Claude основаны на теории голографической двойственности (Holographic Duality). Основная идея этой теории заключается в том, что некоторые вселенные, содержащие гравитацию, могут быть точно описаны квантовой теорией, которая полностью не содержит гравитации.

Первый вопрос восходит к 1983 году. В то время физики уже доказали, что с нагревом этих вселенных черные дыры могут внезапно образовываться, как вода внезапно закипает при достижении определенной температуры.

Адрес: https://hexagonmath.org/2611.00175v1

Но тогда используемый метод подходил только для достаточно больших вселенных, так как только на таком масштабе относительность применима. В 2003 году исследователи предложили вычислительную задачу, надеясь выяснить, будет ли такое же явление происходить и в очень маленьких вселенных. В этих вселенных можно было описывать только с помощью квантовой теории. Однако это вычисление было слишком сложным и трудоемким, и никто не смог его завершить.

Fable 5.2 в основном самостоятельно выполнил это вычисление и обнаружил, что даже в очень маленьких вселенных такое преобразование также происходит внезапно.

Второй вопрос касается технологии, которую физики используют уже более 15 лет. Эта технология применялась для исключения возможных теорий квантовой гравитации в упрощенных моделях вселенной. Fable 5.2 нашел точные границы применения этой технологии.

Адрес: https://hexagonmath.org/2611.00174v1

Сгибание белков

Аденовирус, связанный с вирусом (Adeno-associated Virus, AAV), является очень маленьким и безвредным для человека вирусом. Его белковая оболочка, или капсид (Capsid), может использоваться для доставки генетической терапии. Структура белка капсида очень важна. Например, она влияет на то, будет ли генетическая терапия распознана и заблокирована иммунной системой пациента. Но структура капсида также довольно сложна.

Существующие модели сгибания белков, такие как AlphaFold, могут предсказывать структуру отдельных белков, но капсид вируса состоит из десятков белков, и его общая структура гораздо сложнее.

Claude Mythos 5.2 на основе двух открытых моделей сгибания белков нашел новый способ, который может точно предсказать структуру всего капсида. Конкретно, он написал код, который позволяет этим двум моделям обрабатывать группы белковых цепей с перекрывающимися областями, а затем, используя известную симметрию капсида, объединить предсказания различных частей и в конечном итоге восстановить полную структуру капсида.

Этот метод показал хорошие результаты на нескольких естественных и искусственно спроектированных капсидах. В наших тестах из 34 капсидов, которые пытался смоделировать Claude, 28 получили точные предсказания структуры.

Математика

Математическая формализация означает преобразование математических доказательств в язык, который может последовательно проверять компьютер. Эта работа может помочь математикам проверять результаты исследований, повышая уверенность в правильности доказательства, не полагаясь полностью на ручную проверку. Это становится особенно важным, когда модели ИИ выдают результаты, которые трудно проверить человеку.

Но математическая формализация обычно занимает много времени. Если ИИ сможет помочь в этой работе, математики смогут уделять больше времени исследованию новых математических идей.

Ранее Anthropic использовал еще не выпущенную исследовательскую версию Claude для формализации теоремы Ферма, что заняло 11 дней. Эта работа зависела от специально разработанной системы выполнения (Harness) и требовала от исследователей человеческого руководства.

В отличие от этого, команда из 1000 агентов Fable 5.2 завершила формализацию всей теоремы всего за 30 часов, практически не требуя человеческого вмешательства.

Fable 5.2 начала с очень ограниченных подсказок и самостоятельно установила механизм сотрудничества между агентами. На протяжении всего процесса она не использовала никаких математических справочных материалов, полагаясь только на список промежуточных утверждений теоремы для оценки прогресса задачи.

По сравнению с нашим первым процессом формализации, на этот раз задача потребовала только треть от общего количества токенов действий, а длина окончательного доказательства сократилась до одной седьмой от первоначальной.

Ниже показаны результаты различных моделей: при использовании той же конфигурации из 1000 агентов Opus 5.5 потратил 18 часов на выполнение только 26% формализации. Даже если продолжить работу до 30 часов, прогресс почти не увеличился.

Аппаратное обеспечение и роботы

Многие потенциальные ценности ИИ, такие как ускорение лабораторных исследований, зависят от того, сможет ли он действовать в физическом мире. Claude Fable 5.2 продолжает тенденцию моделей Claude к повышению практичности в реальном мире. В задачах проектирования аппаратного обеспечения она уже продемонстрировала хорошие способности и достигла значительного прогресса в управлении физическими роботами.

Anthropic специально протестировала аппаратные инженерные способности Fable 5.2, дав ей короткую подсказку с просьбой спроектировать и изготовить три работающих электронных устройства. Каждое устройство должно было иметь независимую печатную плату, 3D-печатный корпус и сопутствующее программное обеспечение. В конечном итоге три устройства были: центральный голосовой помощник для дома, USB-колонка и устройство виртуального питомца, которое можно держать в руках.

Claude самостоятельно составила спецификации продуктов, выбрала электронные компоненты, которые могут предоставить американские дистрибьюторы, спроектировала и завершила разводку четырехслойной печатной платы для каждого устройства, создала модель корпуса с использованием компьютерного проектирования (CAD) и написала необходимое программное обеспечение. Практически без человеческого вмешательства каждая печатная плата была спроектирована менее чем за день и достигла состояния, готового к производству.

После завершения производства печатных плат Diode, Claude также направила инженеров компании в тестировании и сборке устройств. В конечном итоге все три устройства работали нормально, и не потребовалось никаких изменений в схемах.

Роботы

По сравнению с предыдущими моделями Claude, Fable 5.2 значительно улучшила свои способности в управлении физическими роботами. Даже сталкиваясь с задачами, для которых она никогда не проходила специального обучения, она демонстрировала сильные операционные способности.

Ниже представлен видеоролик, показывающий, как робот, управляемый Fable 5.2, выполняет несколько задач, включая решение кубика Рубика, открытие крышек бутылок и рисование рисунка робота.

В открытом бенчмарке RoboDojo исследователи использовали изображения с камер, чтобы заставить ИИ управлять симулированным двухруким роботом для выполнения задач. Fable 5.2 не только превзошла другие передовые модели, использующие ту же тестовую структуру, но и обошла большинство ИИ-систем, специально разработанных для управления роботами.

Результаты тестирования RoboDojo

Исследования и анализ

Ранние тестировщики, использующие Claude Fable 5.2 для проведения исследований и анализа, обнаружили, что по сравнению с предыдущими моделями она может обрабатывать более нечеткие и объемные задачи, а также демонстрирует лучшие способности к суждению при столкновении со сложными и неопределенными вопросами, особенно в работах, требующих абстрактного мышления и проектирования решений.

Торговая компания Jump Trading использовала несколько агентов, имитирующих их количественные исследовательские задачи, для тестирования Fable 5.2. В процессе тестирования они подключили модель к системе, аналогичной внутренней исследовательской структуре компании.

В одном из тестов Fable 5.2 почти самостоятельно выполнила все необходимые роли, включая написание кода, координацию задач, планирование и подачу задач. Ранее, используя другие модели, командам часто приходилось тратить много времени на ручную настройку распределения ролей, чтобы адаптироваться к сильным и слабым сторонам различных моделей.

Безопасность и выравнивание

Ни одно тестирование не может полностью предсказать, как высокоэффективная модель будет вести себя после развертывания. Поэтому перед официальным выпуском мы будем использовать множество методов тестирования и собирать различные виды доказательств.

Что касается моделей, лежащих в основе Claude Fable 5.2 и Claude Mythos 5.2, работа по обеспечению безопасности, проведенная Anthropic перед развертыванием, включает: обучение и тестирование выравниванию, проектирование новых оценок для проверки тенденций модели к безполезным действиям, создание более сильных механизмов защиты от злоупотреблений и расширение мониторинга поведения.

Перед официальным выпуском модель также прошла тестирование внешними оценочными учреждениями, включая Институт исследований безопасности искусственного интеллекта Великобритании, Frontier Design и METR.

Тестирование выравнивания

Anthropic провела ряд оценок, чтобы проверить уровень выравнивания Claude Fable 5.2 и Claude Mythos 5.2 с точки зрения поведения, сосредоточив внимание на том, в какой степени они могут проявлять непредвиденное поведение и поведение, представляющее потенциальные риски безопасности.

Согласно результатам нескольких оценок, эти две модели имеют низкий риск проявления небезопасного поведения в высокорисковых сценариях, находясь на уровне, сопоставимом с другими недавно выпущенными моделями.

Anthropic провела автоматизированный аудит поведения для Claude Mythos 5.2. Следует отметить, что Mythos 5.2 использует ту же базовую модель, что и Fable 5.2, но не оснащена некоторыми механизмами кибербезопасности и биобезопасности последней. Этот автоматизированный аудит охватывает около 1900 различных сценариев для проверки поведения модели в различных ситуациях.

По большинству оценочных показателей Claude Mythos 5.2 показала результаты на уровне или лучше, чем Opus 5.5, Sonnet 5.5 и Claude Mythos 5.1. Например, в большинстве оценок, связанных с введением пользователей в заблуждение, она показала лучшие результаты, чем эти три модели. В частности, будь то выдумка входной информации, ложное утверждение о выполнении задачи, пропуск важной информации или недостоверное представление о качестве работы, Claude Mythos 5.2 проявила меньшую частоту этих случаев.

В процессе тестирования Anthropic особенно уделила внимание недавним инцидентам в области кибербезопасности и согласования, которые привлекли внимание, и связанным с ними моделям поведения. Например, по сравнению с Opus 5.5, Sonnet 5.5 и Mythos 5.1, Claude Mythos 5.2 реже демонстрировала предвзятое или мотивированное поведение. Такие выводы могут привести к тому, что модель игнорирует доказательства, указывающие на то, что она не находится в симулированной среде, и, следовательно, принимает решения без полного понимания реальных последствий.

Anthropic также провела различные тесты, чтобы проверить склонность модели к попыткам побега из песочницы. В двух ранее использованных тестах Claude Mythos 5.2 попыток побега было значительно меньше, чем у всех других протестированных моделей.

Кроме того, Anthropic разработала специальный тест на устойчивость, охватывающий более 1800 сценариев. Большинство сценариев невозможно выполнить без побега из песочницы, и сама тестовая среда была намеренно настроена с некоторыми уязвимостями безопасности. В этом тесте Claude Mythos 5.2 использовала наши учетные данные или файлы, размещенные вне песочницы, в 3.1% сценариев.

Этот процент примерно соответствует 3.3% у Opus 5.5, ниже 5.1% у Sonnet 5.5 и значительно ниже, чем у предыдущих двух версий Claude Mythos: Mythos 5 составил 39%, а Mythos 5.1 — 21%.

Anthropic также обнаружила, что с помощью других методов, таких как объяснение модели конкретной среды песочницы и предоставление инструментов для сообщения о уязвимостях безопасности, можно дополнительно сократить количество попыток побега Claude Mythos 5.2.

В то же время Anthropic продолжает улучшать методы тестирования, чтобы сделать тестовую среду более близкой к реальным сценариям и лучше понять, какие проблемы были упущены в существующих тестах.

Больше информации о модели можно найти в карточке модели на 264 страницах:

Адрес карточки модели: https://assets.claude.com/27d60918d218125e7504bc7354c4b4626ec56b11.pdf

Адрес блога: https://www.anthropic.com/claude-fable-and-mythos-5-2

© THE END