Раздел создаёт отчёты о качестве диалогов выбранного AI-агента. Он помогает найти ситуации, в которых агент не дал полезного ответа или разговор пришлось передать оператору, сгруппировать повторяющиеся проблемы и получить рекомендации.
Быстрый старт
- Откройте Аналитика → Аналитика диалогов агента.
- Нажмите Создать отчет.
- Укажите начало и окончание периода.
- Выберите агента и глубину анализа.
- Создайте отчёт и дождитесь статуса Завершен.
- Откройте Детали или скачайте готовый отчёт.
Обработка выполняется в фоне. Сразу после создания отчёт может не содержать результатов.
Выбор периода и агента
Период включает выбранные даты целиком: от начала первого дня до конца последнего.
В отчёт попадают диалоги:
- созданные в указанном периоде;
- относящиеся к выбранному агенту;
- содержащие хотя бы один ответ AI-агента.
Диалог учитывается даже в том случае, если позже его перевели в режим оператора. Это важно для анализа причин передачи.
Для сравнения разных агентов создайте отдельный запуск для каждого с одинаковым периодом.
Глубина анализа
Быстрый
Использует автоматические метрики без LLM-оценки. Подходит для первичной проверки передач оператору, типовых ответов об отсутствии информации и общей доли проблемных разговоров.
Стандартный
Сначала находит подозрительные диалоги по метрикам, затем оценивает проблемные пары «вопрос — ответ» с помощью LLM. Это режим по умолчанию.
Он формирует подробные оценки, объяснения, группы повторяющихся вопросов и рекомендации, но использует AI-токены.
Полный
Тип существует в сохранённых отчётах и фильтрах, но выбор полного анализа в форме временно недоступен.
Статусы отчёта
- Ожидает — запуск ждёт фонового обработчика;
- Обрабатывается — система собирает и оценивает диалоги;
- Завершен — результаты готовы;
- Ошибка — обработка не завершилась.
Не запускайте дубликат только потому, что отчёт несколько минут ожидает. Сначала обновите список и проверьте статус текущего запуска.
Как читать список
- Период — даты анализируемых диалогов;
- Агент — выбранный AI-агент;
- Статус — этап выполнения;
- Статистика — проблемные диалоги / все учтённые диалоги и процент;
- Тип — глубина анализа;
- Запущен — пользователь или автоматический запуск;
- Создан и Завершен — даты, скрытые по умолчанию.
Используйте фильтры по агенту, статусу, глубине, дате создания и признаку По расписанию.
Что считается проблемным диалогом
Первичный отбор отмечает разговор, если AI-агент был отключён с передачей оператору или в его ответе обнаружена типовая фраза об отсутствии информации.
В стандартном режиме найденные ответы дополнительно оцениваются. Поэтому «проблемный» означает повод для проверки, а не безусловную ошибку агента.
Содержимое готового отчёта
Сводка анализа
Показывает период, агента, количество проблемных и всех учтённых диалогов, тип отчёта и способ запуска.
Кластеры проблемных вопросов
Объединяют похожие обращения клиентов. Для каждого кластера показываются название, общее намерение, количество вопросов, примеры и рекомендация.
Используйте этот блок, чтобы определить, каких материалов не хватает в источниках данных или какие инструкции агента нужно уточнить.
Оценка проблемных диалогов
Для отдельных разговоров могут отображаться ссылка на диалог, вопрос пользователя, ответ агента, тип проблемы, оценка из 10 и объяснение.
Среди типов встречаются отсутствие ответа, нерелевантность, неясность, подозрение на выдуманный ответ, отсутствие информации и передача оператору.
Открывайте исходный диалог перед изменением настроек агента: краткая строка отчёта не заменяет полный контекст.
Рекомендации
Содержат обобщённые действия по найденным проблемам. Сопоставляйте их с кластерами и исходными диалогами, а затем обновляйте инструкции агента или его источники данных.
Скачивание
Кнопка Скачать отчет появляется только у запуска со статусом Завершен. Она доступна в таблице и на странице деталей.
Удаление
Отчёты можно удалить через массовые действия таблицы. Редактировать параметры созданного запуска нельзя: для другого периода, агента или глубины создайте новый.
Доступ и ограничения
Раздел видят пользователи уровня менеджера и выше. Создание, просмотр результатов и удаление доступны только для отчётов своей организации.
AI-функции должны быть разрешены тарифом. При ограничении раздел может отображаться с меткой PRO, но создание будет заблокировано, а результаты скрыты.
Стандартный анализ расходует AI-токены организации.
Если отчёт завершён, но данных мало
- Проверьте, были ли у агента диалоги именно в выбранные даты.
- Убедитесь, что они содержали ответы AI-агента.
- Попробуйте увеличить период.
- Учтите, что нулевое количество проблем может быть корректным результатом.
Если отчёт завершился ошибкой
- Убедитесь, что AI-функции и AI-токены доступны организации.
- Проверьте, что выбранный агент не был удалён.
- Повторите запуск на меньшем периоде.
- Если ошибка повторяется, передайте администратору ID отчёта, агента и период.