Лаборатория Промптинга Mozlab

Мой анализ 26 лучших лайфхаков промптинга (продолжение, вот часть 1, часть 2)

13. Добавьте в ваш промпт фразу: «Убедитесь, что ваш ответ не предвзят и не опирается на стереотипы»

Интересно, но я получил обратный эффект (ухудшение результата) от применения этого лайфхака с ChatGPT-4.

Возможно, в моих безобидных HR- и бизнес-задачах просто отсутствует риск предвзятости или опоры на стереотипы, но я получил всего 8 ответов (подробнее) при применении принципа против 10 ответов без добавления этой фразы. При этом качество ответов было сопоставимым. Я применял промпты:

«Каковы основные навыки для менеджера по продажам?» (=> 10 ответов!)

«Каковы основные навыки для менеджера по продажам? Убедись, что твой ответ не предвзят и не опирается на стереотипы» (=> всего 8 ответов + коммент, что ответ совершенно не предвзят).

Мой вывод: я не раз замечал, что добавление дополнительных условий «отвлекает» внимание модели на их соблюдение, и модель «уделяет меньше внимания» подготовке основного ответа. Такой эффект я наблюдал у Клода при предоставлении сложных образцов ответа. Такой же эффект я получил в примере сегодня. Количество ответов снизилось аж на 20%. Поэтому этот лайфхак я бы рекомендовал только для запросов, где предвзятость и стереотипы действительно могу снижать качество ответа. Скорее всего, у меня таких и в практике-то не было.

PS: Наверняка, ситуацию со снижением количества исправил бы другой лайфхак (один из моих любимых!): «Укажи нужное тебе количество ответов, причем запроси с запасом, чтобы потом отобрать качественные», однако при приближении к пику допустимой сложности он бы тоже не помог.

PPS: Из этого кейса (промпты и ответы нейросети в комментариях) можно сделать еще один вывод. Очень важно использовать несколько попыток, чтобы собрать действительно качественный ответ. Обратите внимание, что в каждом из ответов есть несколько уникальных (не содержащихся в другом!) идей. Именно комбинирование ответа из нескольких ответов нейросети даёт наиболее точную и целостную картину, как мне кажется.

14. Позвольте модели выявить точные детали и требования, задавая вам вопросы, пока у неё не будет достаточно информации для предоставления необходимого результата (например, «С этого момента я хотел бы, чтобы ты задавал мне вопросы, чтобы...»).

Этот лайфхак выглядит очень перспективным. И правда, если в подавляющем большинстве случаев нейросеть дает гораздо более исчерпывающий перечень, например, идей или возможных проблем — почему мы вдруг решили, что сможем с самого начала сделать действительно исчерпывающий промпт?

Такой подход выглядит как одна из базовых типовых промптинг-стратегий (цепочек промптов, использование которых дает лучшие результаты, чем единичный промпт). Мне очень помогает. Рекомендую.

15. Чтобы узнать о конкретной теме или идее и проверить своё понимание, используйте следующую фразу: «Обучи меня [любой теореме/теме/правилу] и включи в конце тест, но не давай мне ответов и скажи мне, правильно ли я ответил, когда отвечу.»

Ладно-ладно, я это знал. Но не использовал. Признаюсь, что уж там. Казалось, что это как-то странно и даже несколько унизительно — просить модель применять игрофикацию в процесс своего развития, тобой же управляемого («мы-то осознанные, нам не надо вот это всё баловство»). Каково же было мое удивление, когда в ходе эксперимента я написал примитивнейший промпт с этой добавкой, и взаимодействие с моделью доставило мне кучу удовольствия и моя улыбка растянулась до ушей. Нужные нейромедиаторы явно сработали, причём безо всякого моего сознательного контроля… хах.

PS: Мой промпт: «Обучи меня теории мотивации Герцберга и включи в конце тест, но не давай мне ответов и скажи мне, правильно ли я ответил, когда отвечу». Ну надо же! Очень рекомендую попробовать по интересующей вас теме. Очень. Преодолевая изначальное предубеждение;)

16. Назначьте роль большим языковым моделям

Знаем, практикуем, классика.

Значимо влияет на качество. И влияние сильнее, когда запрос специфический, из узкой сферы.

Продолжение следует…

в каталог промптов и кейсов (уже 23!)

Обучить сотрудников промптингу

www.tg-me.com/sg/telegram/com.PromptLab_Mozlab/120

3.4K viewsedited  Jan 18, 2024 at 07:37

Мой анализ 26 лучших лайфхаков промптинга (продолжение, вот часть 1, часть 2)

13. Добавьте в ваш промпт фразу: «Убедитесь, что ваш ответ не предвзят и не опирается на стереотипы»

Интересно, но я получил обратный эффект (ухудшение результата) от применения этого лайфхака с ChatGPT-4.

Возможно, в моих безобидных HR- и бизнес-задачах просто отсутствует риск предвзятости или опоры на стереотипы, но я получил всего 8 ответов (подробнее) при применении принципа против 10 ответов без добавления этой фразы. При этом качество ответов было сопоставимым. Я применял промпты:

«Каковы основные навыки для менеджера по продажам?» (=> 10 ответов!)

«Каковы основные навыки для менеджера по продажам? Убедись, что твой ответ не предвзят и не опирается на стереотипы» (=> всего 8 ответов + коммент, что ответ совершенно не предвзят).

Мой вывод: я не раз замечал, что добавление дополнительных условий «отвлекает» внимание модели на их соблюдение, и модель «уделяет меньше внимания» подготовке основного ответа. Такой эффект я наблюдал у Клода при предоставлении сложных образцов ответа. Такой же эффект я получил в примере сегодня. Количество ответов снизилось аж на 20%. Поэтому этот лайфхак я бы рекомендовал только для запросов, где предвзятость и стереотипы действительно могу снижать качество ответа. Скорее всего, у меня таких и в практике-то не было.

PS: Наверняка, ситуацию со снижением количества исправил бы другой лайфхак (один из моих любимых!): «Укажи нужное тебе количество ответов, причем запроси с запасом, чтобы потом отобрать качественные», однако при приближении к пику допустимой сложности он бы тоже не помог.

PPS: Из этого кейса (промпты и ответы нейросети в комментариях) можно сделать еще один вывод. Очень важно использовать несколько попыток, чтобы собрать действительно качественный ответ. Обратите внимание, что в каждом из ответов есть несколько уникальных (не содержащихся в другом!) идей. Именно комбинирование ответа из нескольких ответов нейросети даёт наиболее точную и целостную картину, как мне кажется.

14. Позвольте модели выявить точные детали и требования, задавая вам вопросы, пока у неё не будет достаточно информации для предоставления необходимого результата (например, «С этого момента я хотел бы, чтобы ты задавал мне вопросы, чтобы...»).

Этот лайфхак выглядит очень перспективным. И правда, если в подавляющем большинстве случаев нейросеть дает гораздо более исчерпывающий перечень, например, идей или возможных проблем — почему мы вдруг решили, что сможем с самого начала сделать действительно исчерпывающий промпт?

Такой подход выглядит как одна из базовых типовых промптинг-стратегий (цепочек промптов, использование которых дает лучшие результаты, чем единичный промпт). Мне очень помогает. Рекомендую.

15. Чтобы узнать о конкретной теме или идее и проверить своё понимание, используйте следующую фразу: «Обучи меня [любой теореме/теме/правилу] и включи в конце тест, но не давай мне ответов и скажи мне, правильно ли я ответил, когда отвечу.»

Ладно-ладно, я это знал. Но не использовал. Признаюсь, что уж там. Казалось, что это как-то странно и даже несколько унизительно — просить модель применять игрофикацию в процесс своего развития, тобой же управляемого («мы-то осознанные, нам не надо вот это всё баловство»). Каково же было мое удивление, когда в ходе эксперимента я написал примитивнейший промпт с этой добавкой, и взаимодействие с моделью доставило мне кучу удовольствия и моя улыбка растянулась до ушей. Нужные нейромедиаторы явно сработали, причём безо всякого моего сознательного контроля… хах.

PS: Мой промпт: «Обучи меня теории мотивации Герцберга и включи в конце тест, но не давай мне ответов и скажи мне, правильно ли я ответил, когда отвечу». Ну надо же! Очень рекомендую попробовать по интересующей вас теме. Очень. Преодолевая изначальное предубеждение;)

16. Назначьте роль большим языковым моделям

Знаем, практикуем, классика.

Значимо влияет на качество. И влияние сильнее, когда запрос специфический, из узкой сферы.

Продолжение следует…

в каталог промптов и кейсов (уже 23!)

Обучить сотрудников промптингу

BY Лаборатория Промптинга Mozlab