RAG: нужный пункт нашли, условия потеряли

В работе с корпоративными ИИ-помощниками есть коварная ловушка: если нейросеть привела ссылку на внутренний регламент и назвала правильную цифру, ответ кажется надёжным. На деле между найденным документом и готовым текстом ответа лежит дистанция, на которой легко теряется смысл.

Сотрудник поддержки спрашивает систему, в какой срок нужно передать заявку на возврат в отдел качества. В регламенте прописано чёткое правило: в течение двух рабочих дней после регистрации запроса.

Как работает система: сначала поиск отбирает нужный пункт, затем управляющая программа упаковывает этот отрывок вместе с вопросом и отдаёт языковой модели, а модель пишет ответ. Допустим, на последнем шаге фраза превращается в лаконичное «в течение двух дней». Цифра та же, документ указан верно, но пропали слова «рабочих» и «после регистрации». Без точки отсчёта и типа дней правило перестаёт работать.

Поэтому сама по себе связка поиска и генерации не избавляет от проверки. Оценивать нужно весь маршрут: отсеял ли фильтр старую редакцию регламента, не перепутал ли поиск этап передачи заявки с её рассмотрением и сохранила ли модель все условия срока в финальном тексте.

Пошаговый разбор RAG в блоге

RAG: нужный пункт нашли, условия потеряли | Сетка — социальная сеть от hh.ru