Эксперт по диагностике систем и проектированию AI-решений
· 28.08
Вопрос
Какой метрикой вы бы измеряли доверие к цифровому продукту или AI-сервису?
напишите коммент
15 комментов
· 28.08
Человечность)
0
ответить
коммент удалён
· 28.08
Я бы сказала: поэтично. Скольким людям сервис сохранил или дал работу? Но боюсь тогда придётся из этой системы удалить сам цифровой продукт
0
ответить
ответ удалён
· 28.08
Деньгами
0
ответить
коммент удалён
· 28.08
Да я не против, только к какому месту прикладывать😀
0
ответить
ответ удалён
· 28.08
Тут много развилок. Вчера, например, обсуждали как заказчик оценивает автоматизацию с помощью ИИ. Мне кажется, это близкий пример к теме вопроса.
0
ответить
ответ удалён
· 28.08
Подписочные сервисы - другая история. Но тоже в деньги можно свести. Как выкристаллизовать доверие из лояльности, это сложнее.
0
ответить
ответ удалён
· 28.08
Рекомендательные ленты - третья история. Деньги превращаются в внимание)
0
ответить
ответ удалён
· 28.08
Вот HR рекомендуют писать в резюме цифры. Одни цифры отражают объем, другие эффект, результат. Я бы поспорила об их объективности, но сейчас не об этом. А о том, что в итоге они предращаются в зарплату кандидата - деньги. Вот я сейчас не о деньгах, а о подобных цифрах, которые говорят о том, что именно этому кандидату стоит доверять. Но только применительно к цифровому продукту.
0
ответить
ответ удалён
· 28.08
Хм 🤔 Неожиданный поворот. Надо подумать в предложенной аналогии
0
ответить
ответ удалён
· 28.08
Доверие — процесс. Оно не статично. Система может быть точной сегодня и начать ошибаться завтра, что резко снизит доверие. Начать с определения ключевых рисков для конкретной задачи (например, в медицине, финансах или в корпоративном ассистенте). Затем под эти риски подобрать набор метрик — технических, объяснимых, поведенческих и субъективных. Так реальнее получить не просто цифру, а понимание, куда двигаться для укрепления доверия.
0
ответить
коммент удалён
· 28.08
Я думаю, что доверие - это результат. Результат взаимомодействия с человеком, системой, продуктом. Любой результат имеет метрику. И взаимодействие это в один раз может подтверждать доверие, а в другой - разочаровывать. А может приниматься с оговоркой. Как говорится: доверяй, но проверяй.
0
ответить
ответ удалён
· 28.08
КПД
0
ответить
коммент удалён
· 28.08
И как его определить?
0
ответить
ответ удалён
· 29.08
Очень субъективная штука -доверие. Но оно однозначно про возвращаемость пользователей. Если система нацелена на решение конкретных задач - сколько к ней возвращались/обращались? Тут человеко-запросами посчитать возможно. (Как я знаю, в крупных организациях еще подсчитывают еще и полезность запросов и решение задач с их помощью) + если это внешняя система, то там еще оценивается временной интервал между запросами. А вообще очень сильно всё от типа зависит. Если это тех.поддержка, то тут пользователь может обратиться единожды. И здесь можно смотреть на решение проблемы(удалось/нет), искал ли пользователь телефон после. Удовлетворён ответом или нет.(хотя тут будет проблема, т.к. если "горит", то пользователь с малым шансом поставит оценку:) ну и опять же - возвратность. Т.е. одной метрикой эффективность показать будет невозможно. Может быть появится общая метрика эффективности, которая будет учитывать несколько параметров, но она не будет однозначно давать полный объем информации. Хотя...смотря как её настроить. 🤫
0
ответить
коммент скрыт — часть юзеров считает его токсичным или некорректным
коммент удалён
· 31.08
Да, одной метрикой доверие, вероятно, не измерить. Поэтому в диагностике мы решили оценивать не само субъективное ощущение, а основания для доверия — разрыв между позиционированием продукта и тем, что подтверждается при проверке.
Условно: если продукт даёт десять обещаний, сколько из них реализовано полностью и именно так, как это понимает пользователь? Чем меньше разрыв между обещанным и фактическим, тем больше оснований доверять продукту.
Возвращаемость, согласна, тоже может быть одним из показателей, но многое зависит от заявленной ценности и сценария использования. Если продукт решает редкую или разовую проблему, отсутствие повторного обращения ещё ничего не говорит о доверии. Возможно, он просто хорошо выполнил свою работу.
0
ответить
коммент скрыт — часть юзеров считает его токсичным или некорректным
ответ удалён