навык 06 из 6 · 6 мин чтения · 20 мин практики
Оценка качества
Главный навык оператора — отличить хороший ответ от плохого. Большинство людей этого не умеют: они смотрят на ответ, узнают в нём что-то похожее на правду, и принимают. Без явного критерия успеха невозможно ни улучшить процесс, ни понять, стала ли новая модель лучше старой, ни решить, платить за подписку или нет. Оценка — это не «субъективное мнение». Это заранее написанный чек-лист и счёт по нему.
принцип
Если ты не можешь заранее написать, какой ответ тебя устроит, ты не сможешь отличить хороший ответ от плохого, когда он придёт.
примеры
плохо
Попросил AI написать резюме. Прочитал, кивнул, отправил.
хорошо
Перед запросом написал 4 критерия: 1) длина 1 страница, 2) первая строка — должность и ключевой результат, 3) нет фраз «ответственный за», 4) есть 3 измеримых достижения. После ответа прошёлся по списку, отметил, что не сошлось, попросил переписать только эти места.
почемуБез критериев «хороший ответ» — это то, что звучит убедительно. С критериями — то, что проходит проверку.
плохо
Сравнил две модели «на глаз»: одна «круче».
хорошо
Прогнал обе модели на 10 одинаковых задачах, оценил ответы по заранее написанному чек-листу, посчитал средний балл. Решение принял по цифрам, а не по ощущению.
почему«На глаз» — это анекдотическое доказательство. Цифры — это данные.
задание · 15–30 мин
Напиши чек-лист до запроса
- Возьми задачу, которую часто делаешь с AI.
- До отправки запроса запиши 3–5 пунктов: что должно быть в хорошем ответе, чего быть не должно, в каком формате.
- Отправь запрос, получи ответ.
- Пройдись по чек-листу, поставь +/−. Если меньше 3 «+» — попроси переписать или переделай сам.
успехЕсли ты 3 раза подряд отправил запрос с уже написанным чек-листом — навык стал привычкой.
связано