ПРИЧИНА 4. Проще измерить операционное изменение, чем конечный эффект. Скорость обработки, точность распознавания, количество исправлений и трудозатраты сравнительно легко измерить до и после внедрения.
Для оценки экономического результата уже нужны финансовые данные, стоимость владения, сведения о перераспределении ресурсов и затратах на сопровождение.
Для клиентского или социального результата необходимы данные о получателях, изменение качества услуги или общественного результата, а иногда длительный период наблюдения. ПРИЧИНА 5. Отсутствует сквозная связь между ИИ-задачей и конечным результатом В ряде процессов операционные показатели и конечные результаты относятся к разным системам управления.
Например, в обращениях граждан ИИ может повысить качество проекта ответа. Но чтобы установить клиентский эффект, необходимо проверить, получил ли гражданин содержательное решение, сократилось ли число повторных обращений, уменьшились ли обоснованные жалобы. А в нормотворчестве качество правовой экспертизы ещё не означает доказанного повышения качества регулирования.