Чек-лист самоаудита для продвинутого промптинга.
**Навык не растёт от количества диалогов** Исследователи проанализировали 713 564 реальных промпта от 4000 сотрудников KPMG. Главный вывод: **частотность использования AI не делает вас лучше**. Люди, общающиеся с ChatGPT ежедневно по полгода, в среднем не становятся искуснее в формулировке запросов. Прорыв даёт только осознанная практика и самоаудит по трём осям: чёткость, техники промптинга и разнообразие задач. Формальное обучение даёт всплеск, но его эффект исчезает через месяц, если навык не закреплять. **Как это работает: три оси и два поведенческих сигнала** Продвинутость определяется не магией, а структурой запроса и вовлечённостью в диалог. **Ось 1: Чёткость запроса** - Указаны ли ограничения (объём, тон, формат)? - Запрошен ли структурированный вывод (таблица, JSON, список)? - Даны ли критерии оценки ответа? **Ось 2: Осознанные техники** - Задана ли роль/персона для модели? - Приведены ли примеры (few-shot)? - Запрошено ли рассуждение по шагам (Chain-of-Thought)? - Есть ли просьба о самопроверке? - Разрешено ли модели задавать уточняющие вопросы? **Ось 3: Разнообразие задач** Используете ли вы AI только для одного типа работы (например, «написать текст») или для разных: анализ, поиск информации, генерация идей, написание кода? **Поведенческие сигналы** (коррелируют с продвинутостью): - **Амбициозность**: длина и детальность первого сообщения в диалоге. - **Настойчивость**: количество уточнений и итераций внутри одного диалога. **Сквозной пример: как маркетолог перестал получать «средние» ответы** *Задача:* Маркетолог ежедневно просит ChatGPT написать посты для соцсетей, но результат коллеги из другого отдела оказывается точнее и полезнее. Почему? Маркетолог вставляет три последних диалога в чат и даёт модели задание на самоаудит. **Промпт для аудита (копируйте):** ``` Вот три моих последних диалога с тобой [вставьте транскрипты]. Оцени каждый по чек-листу: 1. Чёткость: были ли указаны ограничения, формат вывода, критерии успеха? 2. Техники: использовал ли я роль, примеры, просьбу рассуждать по шагам, самопроверку? 3. Разнообразие: для каких задач я тебя использую – только пишу тексты, или ещё анализирую данные, ищу информацию, генерирую идеи? Дай честную оценку по каждому пункту и покажи, как переписать один из моих промптов, чтобы он использовал больше техник. ``` *Результат:* Модель выявляет, что маркетолог никогда не просит задавать уточняющие вопросы и не даёт критериев успеха. Переписанный промпт добавляет роль («ты — редактор Т-Ж»), примеры удачных постов и просьбу объяснить логику. Качество ответа растёт. **Готовый шаблон для самопроверки** Чтобы оценить свой уровень, используйте этот запрос. Подставьте свою типовую задачу и текущий промпт: ``` Вот мой обычный промпт для задачи: {опишите задачу} "{вставьте свой типичный промпт}" Оцени его по трём критериям: 1. Чёткость – есть ли ограничения, формат, критерии успеха? 2. Техники – использую ли роль, примеры, шаги рассуждения, самопроверку, уточняющие вопросы? 3. Узость – использую ли тебя только для одной задачи или для разных типов работы? Перепиши промпт, добавив хотя бы 2 отсутствующие техники. Объясни, что изменилось и почему это должно улучшить результат. ``` **Почему это работает** Модель не запоминает предыдущие разговоры и не учится «под вас». Улучшается только промпт, который вы пишете. Структурные сигналы (роль, примеры, Chain-of-Thought) убирают неопределённость и заставляют модель генерировать ответ по более узкому, предсказуемому паттерну. Длина первого сообщения и готовность итерировать — индикаторы вовлечённости. Человек, тратящий время на объяснение задачи и уточнения, получает лучший результат, потому что даёт модели больше конкретики, а не потому что она «старается». **Простые рычаги для быстрого улучшения:** - Уберите «без объяснений» — просите модель показывать логику, чтобы видеть слабые места промпта. - Добавьте роль («ты — финансовый аналитик», а не просто «напиши отчёт»). - Замените «напиши» на «напиши, потом объясни, как улучшить» — это встроенная самопроверка. Продолжение в комментарии.
· 01.09
Интересно, что частота не коррелирует с качеством — видимо, дело в структуре запроса, а не в количестве попыток. У меня похожая история с досье под B2B-заход: если промпт заранее заточен под конкретную цель — кто в компании решает и чем её можно зацепить, — результат за минуты получается точнее, чем после десятка хаотичных перезапросов.. Вы как для себя формулируете критерии "хорошего" промпта, кроме результата на выходе?
0
ответить
коммент скрыт — часть юзеров считает его токсичным или некорректным
коммент удалён