Безопасность · Понятие
Сканирование согласованности рассуждений для оценок безопасности ИИ
Новый сканер проверяет внутреннюю согласованность рассуждений цепочки мыслей с ответами модели в протоколах оценки безопасности ИИ.
Consistency scanning could become a standard audit tool for AI safety evaluation pipelines.
Связи
Связи · 2
Как этот узел связан с остальной картой и какие подтверждения стоят за связями.
Сканирование согласованности рассуждений вносит вклад в науку оценки ИИ, предоставляя практичный метод аудита достоверности цепочки мыслей.
+4 приростОтравленные модели оставляют CoT безобидным при вредоносных действиях, ломая anomaly-only мониторинг.
+3 приростИсточники сигнала
Источники сигнала
Датированные факты из первоисточников по этому направлению.
В июне 2025 года Институт безопасности ИИ США переименован в Центр стандартов и инноваций ИИ (CAISI) с разворотом к безопасности, стандартам и оценке моделей противников.
NIST →Anthropic активировала стандарт развёртывания и безопасности ASL-3 вместе с Claude Opus 4 22 мая 2025 — первое реальное срабатывание ступени ответственного масштабирования, нацеленное на блокировку биорисков.
Anthropic →Международная сеть институтов безопасности ИИ (создана в ноябре 2024) провела третье совместное тестирование, сфокусированное на агентных ИИ-системах по кибер- и мошенническим направлениям.
European Commission — AI Office →