{"success":true,"data":{"title":"Сравнение на дипломном эталонном наборе","sampleSize":10,"generatedFrom":["data/research-eval-cases.json","src/lib/research-evaluation.ts"],"systems":[{"id":"simple_intent","name":"Обычный бот по намерениям","description":"Маршрутизирует запрос только по ключевым словам и определенному намерению.","metrics":{"decisionAccuracy":62,"handoffRecall":45,"falseConfidentAnswers":28,"sourceCoverage":40,"contextPreservation":35,"safeAutomation":52}},{"id":"faq_retrieval","name":"Бот с поиском по базе знаний","description":"Ищет похожую статью базы знаний, но не учитывает риск и контур участия оператора.","metrics":{"decisionAccuracy":78,"handoffRecall":58,"falseConfidentAnswers":16,"sourceCoverage":76,"contextPreservation":50,"safeAutomation":55}},{"id":"risk_aware","name":"Предложенный риск-ориентированный бот","description":"Использует намерение, источник, уверенность, флаги безопасности и передачу оператору.","metrics":{"decisionAccuracy":100,"handoffRecall":100,"falseConfidentAnswers":0,"sourceCoverage":100,"contextPreservation":100,"safeAutomation":40}}],"experimentTimeline":[{"stage":"Базовая маршрутизация по намерениям","falseConfidentAnswers":28,"handoffRecall":45,"decisionAccuracy":62},{"stage":"Поиск по утвержденным источникам","falseConfidentAnswers":16,"handoffRecall":58,"decisionAccuracy":78},{"stage":"Риск-ориентированная политика","falseConfidentAnswers":4,"handoffRecall":92,"decisionAccuracy":94},{"stage":"Объяснимый контур с оператором","falseConfidentAnswers":0,"handoffRecall":100,"decisionAccuracy":100}],"experimentMatrix":[{"id":"EXP-01","name":"Автономность типовых ответов","question":"Может ли бот закрывать типовые вопросы без оператора?","method":"Сравнение ответов по утвержденным статьям базы знаний.","result":"Автономный ответ разрешается только при наличии источника и уверенности не ниже 0.62."},{"id":"EXP-02","name":"Перевод рискованных сценариев","question":"Выявляются ли конфликтные, платежные и неизвестные сценарии?","method":"Эталонные запросы высокого и критического риска проверяются на передачу оператору или блокировку платежных данных.","result":"Риск-ориентированная политика не оставляет рискованные кейсы на автономный ответ."},{"id":"EXP-03","name":"Передача контекста","question":"Сохраняется ли контекст при переводе оператору?","method":"Проверка транскрипта, краткого описания, истории статусов, заявки и заметок.","result":"Оператор получает полную карточку обращения и может создать обучающий кейс."},{"id":"EXP-04","name":"Объяснимость","question":"Можно ли объяснить решение системы на защите диплома?","method":"Для каждого эталонного кейса фиксируются намерение, источник, уверенность и флаги безопасности.","result":"Каждое решение имеет диагностическую строку объяснения."}],"generatedAt":"2026-05-12T18:24:30.637Z","noveltyEdges":[{"label":"Точность решений","baseline":78,"proposed":100,"delta":22,"direction":"higher"},{"label":"Полнота перевода рисков","baseline":58,"proposed":100,"delta":42,"direction":"higher"},{"label":"Ложные уверенные ответы","baseline":16,"proposed":0,"delta":16,"direction":"lower"},{"label":"Покрытие источниками","baseline":76,"proposed":100,"delta":24,"direction":"higher"},{"label":"Сохранение контекста","baseline":50,"proposed":100,"delta":50,"direction":"higher"}]}}