Урок 6 із 8
Виміряй, тоді вдосконалюй
7 хв читання
Ти підправляєш промпт, нова відповідь відчувається кращою, тож ти лишаєш її. Але відчуття — погане мірило: наступний вхід може її зламати. Те, як профі дізнаються, що промпт покращився, — це не враження. Це оцінка.
Перестань вгадувати, чи стало краще
Виправлення — перевіряти, а не прикидати на око. Тримай невеликий набір реальних випадків — жменьку входів, де ти знаєш, який вигляд має хороша відповідь, — і проганяй кожну версію промпта на всіх них. Тепер «краще» — це не відчуття; це пройдено чотири з п'яти замість двох. Промпт, що влучає в один твій приклад, але провалює інші чотири, ніколи насправді не був хорошим.
Оцінюй промпт, проганяючи його на невеликому наборі відомих випадків, а не на одному вдалому прикладі. Оцінка на реальних входах перетворює «відчувається краще» на щось, що справді можна перевірити.
Змінюй по одній речі за раз
Коли оцінка показує прогалину, стримай бажання переписати все. Зміни одну річ — додай приклад, назви аудиторію, підтягни обмеження — і перевір знову. Якщо ти змінюєш три речі й стає краще, ти нічого не дізнаєшся про те, яка саме спрацювала. Починай просто, додавай деталі по одній правці за раз і хай кожна зміна заслуговує своє місце проти випадків.
Вдосконалюй одну змінну за раз і перевіряй знову. Зміни кілька одразу — і не скажеш, яка допомогла; хірургічні правки — це те, як ти дізнаєшся, чого твоєму промпту насправді бракує.
Швидка самоперевірка будь-якої відповіді: чи була вона точною, повною, зрозумілою, правильної форми й націленою на правильного читача? Кожне «ні» вказує на ту частину промпта, яку виправити наступною.
Підсумок
- —Перевіряй промпт на невеликому наборі відомих випадків, а не на одному вдалому прикладі
- —«Краще» — це вища оцінка на реальних входах, а не відчуття нутром
- —Вдосконалюй по одній речі за раз, щоб знати, яка зміна справді спрацювала
Ти покращуєш промпт, і нова відповідь виглядає чудово на одному прикладі, який ти пробуєш. Що варто зробити, перш ніж їй довіряти?
Продовжити в застосунку
Пройди весь курс «Промпт-інженерія» — з відстеженням
Отримай персональний план, прогрес і стріки в застосунку — цей урок і кожен наступний, по порядку.