Как проверять ответы AI при исследованиях.
Вроде и удобно. Запустил deep research, получил необходимые цифры по рынку и не только.
Но вот на то, чтобы удостовериться в достоверности этих цифр уходит времени сильно больше.
И можно сократить это время если вшить несколько проверок в сами промпты: 1 Рассуждать в виде цепочки 2 Выделять факты и проверять их через поиск 3 Давать общую оценку достоверности и повышать ее от промпта к промпту 4 Задавать вопросы в ходе ответа, и искать на них подтверждения 5 Проверять достоверность по-разному в зависимости от вывода: текст, ссылки, код 6 Спрашивать одно и то же но разными словами
Еще хочется добавить, что делаю уже на автомате, и не зря:
1 Обязательно переходить по каждой ссылке указанной в источниках. Очень часто возникают ситуации что ссылки выдуманные, или что в изначальном источнике в целом нет таких фактов. (вбивать в поиск по странице цифры)
2 Делать кросс проверку в разных моделях. Натренированы они по-разному и дополнительная кросс-проверка точно не помешают.
Ссылка на шпаргалку в PDF формате здесь
Если знаете какие-то еще методы, буду рад если поделитесь в комментариях.
