Назад
4 ноября 2026 г. в 20:40 Anthropic LLM AI Safety Cryptography AI Infrastructure Источник

Anthropic показала способ проверить, какая ИИ-модель ответила на запрос

Anthropic показала способ проверить, какая ИИ-модель ответила на запрос

Anthropic представила FlashProve — исследовательскую систему, которая должна отвечать на неудобный вопрос об ИИ-сервисах: действительно ли ответ сгенерировала заявленная модель, а не более дешёвая, изменённая или не прошедшая проверку версия?

Подход не требует раскрывать веса. Провайдер заранее публикует их криптографический «отпечаток», а затем вместе с ответом может сформировать компактное доказательство: именно эти зафиксированные веса на этом запросе выдали эти токены. Проверяющему не нужна GPU и доступ к закрытой модели — достаточно запроса, ответа и доказательства.

Проверить обещание, а не верить логу

В основе FlashProve — zkSNARK, тип криптографического доказательства с нулевым разглашением. Оно позволяет проверить утверждение, не получая лишних данных о вычислении. Anthropic называет несколько сценариев: аудит того, какая модель обслуживает API, подтверждение использования одобренной модели в регулируемой среде и проверка заявлений о том, что модель анализировала код или другой материал.

Это не означает, что система доказывает качество ответа или отсутствие ошибок. Она подтверждает происхождение конкретного вывода от выбранных весов. Если модель плохо рассуждает, сертификат не сделает ответ правильным — зато не даст незаметно подменить модель после аудита.

Пока это слишком дорого для каждого чата

В эксперименте Anthropic проверяла протокол на Llama 4 Maverick: это Mixture-of-Experts-модель на 400 млрд параметров, из которых для одного токена активируется около 17 млрд. Для пакета из 24 запросов создание доказательств заняло около 223 секунд на одном H100; проверка одного доказательства — примерно 17 секунд на 24-поточном CPU. Размер файла доказательства — около 19 МБ.

Это узкое место важно: по расчётам исследователей, создание доказательства на GPU примерно в 72 раза медленнее обычного инференса vLLM на сопоставимой нагрузке. Поэтому FlashProve — не готовая галочка для каждого ответа Claude и не механизм мгновенной защиты.

Но у идеи есть практическая ставка. По мере того как модели становятся частью проверок безопасности, закупок и регулируемых процессов, журнал действий можно подделать, а криптографически проверяемый ответ — существенно труднее. Работа также опубликована с техническим отчётом и кодом; независимая проверка реализации теперь важнее красивой формулы в анонсе.

Обложка: Anthropic.

Ещё новости

Shield AI собрала первый полноразмерный X-BAT — автономный VTOL-истребитель
4 ноября 2026 г.
Shield AI собрала первый полноразмерный X-BAT — автономный VTOL-истребитель

Shield AI сообщила о завершении сборки первого полноразмерного прототипа X-BAT. Следующий важный рубеж — лётные испытания аппарата, который должен взлетать вертикально и действовать без пилота на борту.

Kimi открыла веса K3.1 Pro: 2,8 трлн параметров и контекст в миллион токенов
4 ноября 2026 г.
Kimi открыла веса K3.1 Pro: 2,8 трлн параметров и контекст в миллион токенов

Moonshot AI выложила в открытый доступ веса Kimi K3.1 Pro — мультимодальной агентной модели с контекстом до миллиона токенов. Модель можно изучать и разворачивать вне закрытого API, но её размер и лицензия ограничивают круг тех, кто сможет сделать это на практике.

Google вынес Guided Learning в Classroom: что показали тесты
3 ноября 2026 г.
Google вынес Guided Learning в Classroom: что показали тесты

Google начинает глобально разворачивать Guided Learning в Classroom. В контролируемом исследовании с более чем 300 студентами доступ к инструменту совпал с более высоким приростом результатов, но это ещё не доказательство для всех школьных сценариев.

GitHub Copilot Fusion сам выбирает модели для задачи
3 ноября 2026 г.
GitHub Copilot Fusion сам выбирает модели для задачи

GitHub вывел Copilot Fusion в общую доступность: режим сам подбирает и комбинирует модели для задачи. Для разработчика это уменьшает ручной выбор модели, но не отменяет контроль расходов и корпоративных политик.

Пенсильвания ввела правила для обманной AI-рекламы
3 ноября 2026 г.
Пенсильвания ввела правила для обманной AI-рекламы

Новый закон Пенсильвании требует заметно раскрывать использование синтетического контента, когда он создаёт ложное впечатление о товаре или услуге.

Кибератака на Selver: в холодильной системе выставили +50 °C
2 ноября 2026 г.
Кибератака на Selver: в холодильной системе выставили +50 °C

В одном из эстонских магазинов Selver атаковали систему охлаждения: по сообщению Postimees, в ней попытались установить температуру +50 °C. Selver заявляет, что партнёр быстро обнаружил инцидент, магазин не понёс ущерба, а товары и покупатели не пострадали.

Gemini Notebook открыл сотни бесплатных учебников
2 ноября 2026 г.
Gemini Notebook открыл сотни бесплатных учебников

Google добавила в Gemini Notebook каталог из сотен учебников от OpenStax, Open Textbook Library и S Chand Publishing. По каждому подключённому учебнику сервис обещает ответы с привязкой к тексту и ссылками на исходные фрагменты. Это делает ИИ удобнее для подготовки, но не отменяет проверку его выводов.

GPT-6 Astra изменила 0,016% весов Qwen и подняла MATH-500 с 7,9% до 48,1%
2 ноября 2026 г.
GPT-6 Astra изменила 0,016% весов Qwen и подняла MATH-500 с 7,9% до 48,1%

Исследователи, связанные с MIT CSAIL, выложили открытые логи эксперимента, в котором GPT-6 Astra напрямую изменила небольшую часть весов Qwen3.5-0.8B. После одной из правок авторы зафиксировали рост на математических тестах и IFEval, но это ранняя работа с оценкой в собственной экспериментальной среде.

Новый тест агентов: лучший ИИ решил лишь 12% рабочих задач
2 ноября 2026 г.
Новый тест агентов: лучший ИИ решил лишь 12% рабочих задач

SemiAnalysis запустила GDPx — бенчмарк агентных моделей на задачах из 11 дорогих для бизнеса областей. По данным авторов, лучший результат пока составляет лишь 12%: эффектные демо ещё не равны надёжной автономной работе.

Google получила первый ответ ИИ с орбитального TPU
1 ноября 2026 г.
Google получила первый ответ ИИ с орбитального TPU

Google получила первый ответ от модели Gemma 4, запущенной на TPU на спутнике Project Suncatcher. Это подтверждает работу вычислительной нагрузки на орбите, но не доказывает жизнеспособность космического дата-центра.

DeepSeek показал прототип «суперагента» для GitHub
1 ноября 2026 г.
DeepSeek показал прототип «суперагента» для GitHub

DeepSeek опубликовала исследовательский прототип dsh-superagent: он следит за событиями в одном репозитории GitHub, запускает отдельные агентные сессии и возвращает результат в исходный диалог.

Критическая дыра в Linux: удалённый запуск кода грозит серверам — ядро пора обновлять
1 ноября 2026 г.
Критическая дыра в Linux: удалённый запуск кода грозит серверам — ядро пора обновлять

В ядре Linux исправили критическую CVE-2026-98432: ошибка в IPv4/TCP при неблагоприятных условиях может дать удалённому неаутентифицированному атакующему выполнение кода. Владельцам серверов стоит проверить статус ядра у своего дистрибутива и запланировать обновление, особенно если система принимает соединения из недоверенных сетей.