MH QA
с эталоном
priority

Когда Пользователь Вопрос Тема Оценка Приоритет Эталон
💡 Как работать с вкладкой «Диалоги TG бота»

Здесь собраны все вопросы, которые задавали пользователи, и ответы, которые дал бот. Ваша задача — найти плохие ответы и научить бота отвечать правильно.

  1. Вверху в фильтре «Оценки» выберите 1 и 2 — вы увидите только плохие ответы.
  2. Нажмите на любую строку таблицы — откроется полный текст диалога.
  3. Если ответ бота неправильный, нажмите кнопку «Создать эталон из этого ответа». Откроется форма, где вы напишите правильный вариант.
  4. После сохранения бот будет отвечать правильно на похожие вопросы в будущем.
Совет: начинайте с плохих оценок (1-2) — это самые болезненные места, где пользователи остались недовольны.
Группирует похожие низкооценённые вопросы по смыслу. Одна правка — и эталон закроет сразу всю группу похожих жалоб.

💡 Как работать с вкладкой «Кластеры жалоб»

Бот часто получает много похожих плохих вопросов про одно и то же. Эта вкладка автоматически объединяет их в группы — и вы можете закрыть сразу всю группу одним эталоном.

  1. Нажмите «Сгруппировать» — программа просмотрит последние плохие ответы и соберёт похожие в группы.
  2. В каждой карточке — главный вопрос группы и список похожих. Проверьте, что они действительно про одно и то же.
  3. Нажмите «Создать эталон для группы» — откроется форма с уже заполненным вопросом.
  4. Напишите один правильный ответ — он закроет сразу 5-15 похожих жалоб.
Совет: если групп получилось мало, увеличьте «Окно» до 300, чтобы взять больше данных для анализа.
ID Вопрос Wing/Room Verbatim Активен Обновлено
💡 Как работать с вкладкой «Эталонные ответы»

Эталон — это заранее подготовленный правильный ответ. Когда бот получает похожий вопрос, он отвечает не «из собственных соображений», а по вашему эталону. Так бот становится умнее и точнее.

  1. Обычно эталоны удобно создавать из плохих диалогов (вкладка «Диалоги TG бота») или из групп жалоб (вкладка «Кластеры») — это быстрее и точнее.
  2. Чтобы создать эталон с нуля, нажмите «+ Новый эталон».
  3. В таблице ниже видны все ваши эталоны. Кнопка «✎» редактирует, «🗑» удаляет.
  4. Колонка «Активен»: можно временно отключить эталон, не удаляя его — вдруг потом снова пригодится.
Совет: ставьте галочку «Verbatim» только на самые критичные ответы (цены, юридические тексты) — бот будет возвращать их слово в слово. Для обычных эталонов не нужно.
💡 Как работать с вкладкой «Тест RAG»

Это «песочница» — можно ввести любой вопрос и посмотреть, как бот его понимает, до того как его зададут реальные пользователи. Очень удобно для проверки эталонов.

  1. Напишите вопрос так, как мог бы его задать пользователь.
  2. Нажмите «Проверить».
  3. Смотрите раздел «Short-circuit» — если там появился ваш эталон, значит на похожий вопрос бот вернёт именно его. Это и есть цель.
  4. Ниже — куски базы знаний, которые бот использует для ответа. Чем меньше число «distance», тем точнее совпадение. Зелёные — отличное, жёлтые — среднее, красные — слабое.
Совет: после создания эталона обязательно проверьте его тут разными формулировками одного и того же вопроса. Если все они дают нужный short-circuit — эталон работает хорошо.

🤖 ИИ-тренер обучения бота

Напишите вопрос — как его мог бы задать пользователь. Увидите, как бот отвечает сейчас, и что он использовал. Напишите правильный ответ, а ИИ-ассистент поможет сохранить его правильно: выберет место (эталон или база знаний), авто-подберёт wing/room, сгенерирует 3-5 перефразов и отполирует ответ под стиль бота.

💬
Начните с вопроса
Например: «Как стать партнёром Marine Health?» или «Расскажи про Омега-3»
💡 Как работать с вкладкой «ИИ-тренер»

Это быстрый способ научить бота правильному ответу — не надо самому разбираться в полях эталона, ИИ всё сделает за вас.

  1. Шаг 1. Напишите в чате вопрос так, как его мог бы задать живой пользователь.
  2. Шаг 2. Чат покажет: как сейчас отвечает бот, какие куски базы он использовал, есть ли уже похожий эталон. Раскрывается по «Подробнее».
  3. Шаг 3. Напишите правильный ответ так, как вы бы ответили клиенту. Коротко, по делу.
  4. Шаг 4. ИИ может задать 1-2 уточняющих вопроса (например, «это касается партнёров или клиентов?»). Ответьте коротко.
  5. Шаг 5. ИИ покажет готовое предложение: куда сохранить, с полированным текстом, тегами и перефразами. Вы можете «Сохранить», «Исправить» (поправить поля вручную) или «Отмена».
Совет: в правильном ответе сохраняйте все цифры, цены и ссылки — ИИ их оставит как есть. Если ответ содержит точные данные (цена, сроки) — ИИ сам включит verbatim.
ID Закрыт Канал Язык Msgs Первое сообщение клиента Статус
💡 Как работать с вкладкой «Диалоги Chat2Desk»

Это закрытые диалоги из реальной поддержки (Chat2Desk KZ). PII (имена, телефоны, адреса, паспорта) уже замаскированы автоматически. Задача — вычитать диалог и, если ответ оператора полезный, создать эталон для бота.

  1. Открой диалог — увидишь переписку клиент ↔ оператор в виде чата.
  2. Если ответ оператора хорошо подходит как эталон → кнопка «Создать эталон» — префилит форму с текстом клиента (вопрос) и ответом оператора.
  3. Если диалог не стоит обучения → «Отклонить» (скрывается из списка «новые»).
  4. Синхронизация ночная; кнопка «Обновить» перечитывает локальную БД.
Внимание: перед сохранением эталона проверь, что в тексте нет упоминаний конкретных фамилий или чисел, которые применимы только к этому клиенту — эталон будет показываться всем.

ID ФИО Email Роль Активен Последний вход
💡 Как работать с вкладкой «Сотрудники»

Здесь вы создаёте учётные записи для членов команды QA. Каждый сотрудник заходит в портал со своим email и паролем — так видно, кто какие изменения делал.

  1. Нажмите «+ Добавить сотрудника» — откроется форма.
  2. Введите ФИО, email и придумайте пароль (минимум 8 символов). Пароль лучше передать сотруднику лично или через защищённый канал.
  3. Выберите роль: «QA» — для обычных сотрудников, «Админ» — если этот человек тоже будет управлять командой.
  4. Чтобы временно закрыть доступ сотруднику (например, он в отпуске) — снимите галочку «Активен». Удалять учётку не нужно.
  5. Чтобы сменить сотруднику пароль — нажмите «✎» и введите новый в поле «Новый пароль». Пустое поле — пароль останется прежним.
Важно: в системе всегда должен остаться хотя бы один активный администратор — иначе некому будет управлять сотрудниками. Последнего админа удалить или понизить в роли нельзя.

Когда Сотрудник Действие ID объекта Детали
💡 Как работать с журналом действий

Здесь видно, кто из сотрудников какие действия совершал в QA-портале: создавал эталоны, менял сотрудников, запускал переиндексацию, работал с ИИ-тренером.

  • Сотрудник — фильтр по email (выпадающий список содержит только тех, кто хотя бы раз что-то делал).
  • Действие — тип события (например, create_correction, update_user, reindex_start).
  • Даты — границы поиска. Обе можно оставить пустыми.
  • Детали — дополнительная информация о действии (кого изменили, какие поля правили и т.д.).
Записи сортируются по времени в обратном порядке (сначала свежие). Старые события не удаляются автоматически.

Сотрудник

Диалог #

Chat2Desk #

Эталонный ответ