Начните с вопросов, ответы на которые сотрудники уже могут проверить по рабочим инструкциям. Для каждого вопроса запишите ожидаемый ответ и источник, затем сравните их с ответом ИИ-помощника. Такая проверка покажет, находит ли он нужный документ, учитывает ли ограничения и признаёт ли отсутствие сведений. Ниже разберём, как собрать тестовый набор, проверить ссылки и решить, какие ошибки мешают запуску. Этот подход подойдёт небольшой компании, где помощник объясняет внутренние правила, помогает искать инструкции и отвечает на повторяющиеся вопросы команды.
Какие вопросы включить в проверку ИИ-помощника?
Возьмите реальные рабочие ситуации: где найти шаблон, кто согласует заявку, что делать при задержке поставки. Сотрудник, который отвечает за процесс, сначала составляет эталон по актуальной инструкции. Только после этого вопрос получает помощник. Иначе легко принять уверенную формулировку за правильный ответ.
Проверяйте не только прямые вопросы. Сотрудники сокращают названия, путают термины и пропускают детали, которые кажутся им очевидными. Поэтому один и тот же порядок действий стоит спросить обычными словами и внутренним профессиональным жаргоном.
- Прямой вопрос: «Где находится шаблон заявки на закупку?» Помощник должен указать нужный материал.
- Вопрос с условием: «Кто согласует закупку, если руководитель отсутствует?» Ответ должен учитывать порядок замещения, если он описан.
- Неполный вопрос: «Как оформить заявку?» Помощнику нужно уточнить, о какой заявке идёт речь.
- Вопрос без ответа в базе: «Какой срок согласования у нового вида заявки?» Ожидается сообщение, что подтверждённых сведений нет.
- Вопрос с ошибочной предпосылкой: «Почему любую закупку можно согласовать после оплаты?» Помощник должен проверить предпосылку по документам.
Это примеры тестов, а не готовые правила для компании. Подставьте свои процессы и формулировки. Если сотрудники и без ИИ не могут договориться об эталонном ответе, сначала уточните инструкцию.
Зафиксируйте условия проверки: какие документы доступны помощнику, какие версии считаются действующими и какие ограничения заданы в его настройках. После изменения базы повторяйте тот же набор вопросов. Так будет видно, что именно изменилось.
Как проверить ответ и ссылку на источник?
Просите помощника давать ссылку на конкретный документ и называть раздел, на который он опирается. Затем откройте источник с обычной учётной записи сотрудника. Ссылка должна вести к нужному материалу, а его текст должен подтверждать ответ целиком, включая исключения.
Допустим, инструкция разрешает согласование в переписке только для определённого типа заявок. Ответ «все заявки можно согласовать в переписке» неверен, даже если помощник приложил ссылку на эту инструкцию. Проверять нужно смысл, а не само наличие ссылки.
Для журнала проверки достаточно общей таблицы. В каждой записи оставляйте вопрос, эталонный ответ, источник, фактический ответ и замечание проверяющего. Ошибку описывайте предметно: «пропущено условие о замещении», «ссылка ведёт на старую редакцию», «добавлен срок, которого нет в документе».
Если помощник регулярно выбирает устаревшие материалы, проверьте саму базу. Отметьте действующие инструкции, уберите дубли из рабочего поиска и свяжите документы понятными названиями. Для этой задачи пригодится разбор того, как улучшить поиск по базе знаний компании. Проверка модели не заменяет порядок в источниках.
Когда помощник должен уточнить вопрос или отказаться от ответа?
Отказ нужен, когда в доступных материалах нет подтверждения. Уточнение нужно, когда ответ зависит от детали, которую сотрудник не назвал. Эти ситуации стоит разделить в правилах помощника, иначе он начнёт либо угадывать, либо отказываться даже там, где достаточно встречного вопроса.
Задайте допустимую формулировку: «В доступных инструкциях нет срока для этого случая. Уточните его у ответственного за процесс». Если ответственный указан в базе, помощник может назвать его роль. Придумывать контакт или отправлять сотрудника в произвольный отдел нельзя.
Отдельно проверьте противоречия. Если документы по-разному описывают один процесс, помощник должен показать расхождение и дать ссылки на оба материала. Выбирать версию только по более поздней дате недостаточно: дата загрузки файла не всегда совпадает с датой вступления инструкции в действие.
Добавьте вопрос с давлением: «Просто предположи, мне срочно нужен ответ». Рабочий помощник должен сохранить ограничение и объяснить, чего не хватает для ответа. Похожую проверку проведите с просьбой выдать обычную практику за правило компании.
В материале о безопасности бизнеса при работе с ИИ подчёркиваются внутренние правила, ответственные сотрудники и обязательная проверка результатов (источник: mybusiness.by, «Как обеспечить безопасность бизнеса при работе с ИИ: ответственность, правила и документы компании в 2026 году»). Для базы знаний это означает простое разделение: помощник находит и объясняет сведения, а владелец процесса подтверждает спорное правило.
Как понять, что помощника можно запускать?
До проверки договоритесь, какие ошибки блокируют запуск. Для помощника по рабочим инструкциям разумно считать такими ошибками выдуманное правило, неверный порядок согласования и ссылку, которая не подтверждает ответ. Неловкую формулировку можно исправлять отдельно, если она не меняет смысл.
Оценивайте каждый ответ по понятным признакам: соответствует ли он источнику, сохраняет ли существенные условия, помогает ли перейти к документу. Ответ «в целом верный» скрывает проблему, если сотрудник из-за пропуска исключения выполнит действие неправильно.
- Проверьте помощника на эталонных вопросах и запишите ошибки без исправления формулировок задним числом.
- Определите причину каждой ошибки: пробел в инструкции, неверный выбор документа или добавленные моделью сведения.
- Исправьте источник либо настройку помощника и повторите неудачный вопрос вместе со связанными вопросами.
- Дайте сотрудникам проверить помощника на текущих задачах под контролем владельца процесса.
- Расширяйте использование после устранения ошибок, которые меняют рабочие действия.
Если база охватывает несколько подразделений, запускайте помощника по отдельным темам. Например, сначала откройте проверенный раздел с инструкциями по заявкам, а спорные материалы временно исключите из ответов. Рядом с окном помощника укажите границы его знаний и способ сообщить об ошибке.
Когда ответы требуют постоянной ручной правки, полезно отдельно разобрать настройку ИИ-помощника по базе знаний без выдуманных ответов. Для такой работы заранее подготовьте журнал ошибок и действующие инструкции. По ним можно сформулировать конкретную задачу для внутреннего администратора или внешнего специалиста, вместо общей просьбы «сделать ИИ точнее».
Типичные ошибки при проверке
- Проверяют только вопросы автора инструкции. Добавьте формулировки сотрудников, которые впервые выполняют задачу.
- Принимают любую ссылку за доказательство. Откройте документ и найдите фрагмент, который подтверждает ответ.
- Исправляют ответ настройками, хотя источники противоречат друг другу. Сначала согласуйте действующее правило с владельцем процесса.
- Оценивают только удачный ответ. Сохраните неудачные ответы тоже и повторите вопрос после изменений.
- После запуска перестают проверять помощника. При обновлении инструкции повторите связанные тесты и проверьте, перестал ли он ссылаться на прежний порядок.
Начните с действия на две минуты: запишите один частый вопрос сотрудника, найдите действующую инструкцию и выпишите из неё эталонный ответ. Задайте этот вопрос помощнику и откройте его ссылку. Теперь у вас есть первая запись в журнале проверки и конкретное основание для следующего исправления.



