Проверка на выдумки 🧾 Галлюцинации ИИ — это когда нейросеть уверенно сообщает то, чего нет: как сосед, который «точно помнит» рецепт борща, но добавляет туда зефир. Мини-чек-лист: попросите источник, проверьте факт в 2 местах, уточните «в чём ты не уверен?», а цифры и имена сверяйте отдельно. На низком уровне ИИ просто угадывает следующий кусочек текста, а на высоком выглядит как умный собеседник, поэтому доверие лучше включать с ремнём безопасности. Это нужно, чтобы не отправить клиенту выдуманную ссылку и не лечить котика советом из фантазийного справочника. Интересный факт: галлюцинации бывают даже у сильных моделей, так что проверка — это нормальная гигиена работы с ИИ. #ИИшная #нейросети #галлюцинацииИИ #промпты
Ведущий QA Engineer / Manual + Automation Python в ППК Роскадастр-Инфотех
· 29.073 коммента
· 29.07
ИИ вообще в последнее время галлюцинировать стал чаще, чем более ранние модели. Сейчас столкнулась вот с чем. У меня есть текст достаточно большого объёма, прошу сократить его например до 5000 знаков без потери смысла, понятное дело потом проверяю, как сократил. Так вот ИИ пишет, что вот сокращённая версия текста столько то знаков - и выдает мне все тоже самое, просишь пересчитать знаки, пишет 5000, говоришь что больше 5000, пишет да больше тут 5697, хотя по факту 10000. Если включен расширенный поиск по сети, то там вообще жопа начинается, вместо реальных адекватных данных начинает подсовывать всякое дерьмо. Причем убеждать тебя, что это правда. Проводила опыт, я знаю точно как работает механизм. Описываю и отправляю в нейронку, она мне выдает ответ, что мои выводы неверные, приводит мне примеры и обоснования из нейросети с каких-то сайтов, которые изначально дают неправильную информацию. И доказывает мне активно, что я не права. Дальше я просто пишу, что я нейробиолог. Она тут же переобуваться и выдает мне именно правильную трактовку механизма. Понятно, что нейронка подстраивается под человека, но тут уже прямо такой откровенный перебор
коммент скрыт — часть юзеров считает его токсичным или некорректным
ответить
0
коммент удалён
· 29.07
Тоже в последнее время у меня нейронки работают хуже.
коммент скрыт — часть юзеров считает его токсичным или некорректным
ответить
0
ответ удалён
· 29.07
Так это вот достаточно просто - сократить текст, а нет, сделать не может
коммент скрыт — часть юзеров считает его токсичным или некорректным
ответить
0
ответ удалён