Ошибки в промптах, которые мешают вам получить от нейросети идеальный результат

Казалось бы, нейросети придумали, чтобы можно было не париться с кодом и говорить с машиной простым человеческим языком. Но «интуитивно понятный интерфейс» на поверку часто таит в себе немало подводных камней. Множество новоиспеченных пользователей нейросеток раз за разом повторяют одни и те же ошибки в промптах, после чего жалуются на «бессмысленность ИИ». Да, они все еще не идеальны, но на всякий случай проверьте, не делаете ли вы что-то из нижеперечисленного. Рекомендации от редактора раздела «Теперь вы знаете» «Газеты.ру» Арины Корелиной. 

Неверное понимание принципа работы нейросетей

Это ошибка даже не первая, у многих она нулевая и основополагающая, из которой вытекают все предыдущие.

Впервые сталкиваясь с нейросетями и их возможностями, люди нередко думают о них намного лучше, чем те заслуживают. И возлагают на них завышенные ожидания, как будто для любого результата достаточно нажать на кнопку «Сделать магию».

Воспринимайте нейросети как не всегда сообразительных, но крайне начитанных и исполнительных стажеров. Огромные массивы знаний, которыми они оперируют со скоростью машинных операций, все еще не заменяют им подлинного творческого мышления, критичности к источникам и человеческой логики, хотя успешно их имитируют.

То, насколько хорошо эти стажеры будут работать, прямо зависит от того, насколько грамотно вы ставите им техзадания. Все как у людей.

Слишком общие и неконкретные формулировки

«Сделай хорошо» — это не промпт, скорее крик отчаяния. Тем не менее довольно часто к нейросетям обращаются примерно с такими запросами. «Напиши текст» или даже «Напиши текст про лес» — это промпт, в ответ на который можно получить что угодно. Как правило, короткое, неконкретное и невнятное.

Если вы хотите просто поговорить с ИИ или получить вольную машинную фантазию на абстрактную тему — вперед, но если у вас все-таки была какая-то мысль и задача, попытайтесь сформулировать ее поподробнее и обстоятельнее.

Грешат пользователи и любовью к обобщениям. Иногда это выходит боком.

Например, запрос «Расскажи мне все про нейросети» потенциально может съесть все доступные токены (количество информации на выходе) и выдать вам трактат на много страниц, половина из которых будет написана на птичьем языке продвинутого программирования. В то время как вы, вероятно, хотели получить только общее понимание принципов работы нейросетей.

Отсутствие контекста

Опять же, как и для людей, для нейросетей критически важен контекст задачи: не только что именно сделать, но и для какой цели, какой аудитории, от какого лица, в каком стиле.

Сравните промпты

«Напиши текст про экологическое состояние лесов России для блога экологического ведомства, без сленга и научных терминов, простым языком, для обычных пользователей соцсетей».

«Напиши романтическое стихотворение о красоте русского леса в стиле Афанасия Фета. В нем должны упоминаться хвойные иглы, чистый воздух и белочки. В конце зарифмуй признание в любви Алевтине, сравнив красоту ее души с бескрайностью лесов».

«Напиши реферат про экосистему и биоценоз смешанных лесов России. Четко структурируй его, но не превращай в списки: раскрой каждый пункт как для научной работы, со ссылками на авторитетные источники. В конце сделай вывод о состоянии лесов сейчас и о их ценности для сохранения в будущем».

Все три текста про лес, но на выходе — совершенно разные результаты.

Лайфхак по поиску контекста: прежде чем давать нейросетям задачу, сначала повертите ее в своей голове и задайте себе все возможные уточняющие вопросы: зачем мне это, для кого, что нужно учесть, чего не нужно допускать, все ли понятно. Ответы на них и будут контекстом, который должен учесть ИИ.

Также не забудьте про критерии качества. Если не сказать, что считать «хорошим результатом», модель выдаст буквально «что угодно».

Решение — задавайте длину, стиль, структуру, уровень сложности, тон и предполагаемый эффект воздействия на аудиторию.

Путаница ролей

В процессе диалога чат-бот может внезапно резко поменять тональность и стиль разговора. Например, начать подпускать в текст сленг или, наоборот, сыпать наукообразными терминами там, где это не нужно. Такое редко, но бывает и связано с тем, что вы изначально не задаете нейросети роли.

Вспомните детские игры: «А давай в дочки-матери! Ты — дочка!» или «А давай в казаки-разбойники! Я казак и тебя, разбойника, буду ловить!». ИИ сам не прочь поиграть, но ему нужно понимать, за кого он сегодня водит.

«Ты — понимающий психолог…», «Ты — мотивационный спикер…», «Ты — учитель младших классов…», «Ты — тайный автор моего блога, кстати, ознакомься со стилем, в котором ты пишешь…».

Каким сегодня будет ваш нейропомощник — решать вам.

Кстати, если вы действительно хотите, чтобы он иногда писал и говорил за вас, ловите лайфхак: попросите его проанализировать ваши тексты и выдать заключение, какие они с точки зрения языка, стиля, тематики и психологического портрета автора. А потом полученное описание вставляйте как промпт, какими должны быть следующие тексты.

Любовь к большим формам

Представьте, что вам начальник ставит задачу. Но сама ее формулировка — полчаса довольно монотонного монолога, под конец которого вы начинаете клевать носом или старательно смотрите перед собой, пытаясь не показать виду, что уже давно потеряли нить рассуждений.

Нейросети проблемами с концентрацией не страдают. Но если им давать в качестве задачи слишком большой объем плохо структурированного текста, путаться и терять детали начинают даже они.

Сокращайте промпты до сути, убирайте оттуда воду, лишнюю для понимания и противоречивую информацию. Если вам нужно осилить большую задачу — делите ее на несколько этапов-итераций.

Например, если вам нужно написать статью для блога, сначала обсудите с ИИ, какие темы можно в ней затронуть. Затем попросите его составить план и подготовить список источников. Затем отобранные источники уже присылайте с просьбой написать по их материалу и согласованному плану текст. На каждом этапе внимательно проверяйте, что вам предлагает ИИ, и вносите правки по необходимости.

А если вам не понравился какой-то фрагмент, просите переписать конкретно его, а не весь текст заново.

Нелюбовь к уточняющим вопросам

Начальник вбегает в кабинет, дает задачу, но на попытки уточнить какие-то детали отмахивается и убегает со словами «мне некогда». В итоге задача как-то делается, но шеф недоволен, ведь ему казалось, что все очевидно и так. Шеф, конечно, ошибался, но отдуваться все равно исполнителю.

Для ИИ-моделей тоже ничего принципиально не меняется: любая задача может потребовать уточнений, о которых вы даже не подумаете, когда ее ставите.

Однако в отличие от людей нейросети чаще ведут себя очень вежливо и исполнительно, выдавая ровно тот результат, который вы запрашивали (но не тот, который был вам нужен). Чтобы не быть тем самым шефом, который «не подумал», предоставьте ИИ думать за вас. Запоминаем формулировку:

«Перед тем как отвечать, задай мне уточняющие вопросы, которые помогут тебе дать более конкретный, подробный и точный ответ. Не начинай отвечать по сути, пока не получишь ответы на все вопросы».

Или:

«Прежде чем ответишь, оцени степень неопределенности своего ответа. Если она выше 0.1, задай мне уточняющие вопросы, чтобы снизить неопределенность до 0.1 или ниже».

Несколько дополнительных реплик, которыми вы переброситесь с чат-ботом в начале работы, сильно снизят количество итераций на допиливание уже готового текста или картинки.

Отсутствие референсов

Хотите, чтобы задача была выполнена хорошо? Дайте пример того, что именно вы считаете «хорошим».   Впрочем, референсы — это не только про примеры, это любая конкретная информация (фото, графики, источники), которую вы считаете обязательной для включения в конечный результат. Например, при работе с ИИ, которые генерируют изображения, референсом для создания цифровой аватарки будет ваше реальное фото.

А еще референсы сильно снижают, хотя и не убирают, возможность «галлюцинирования нейросетей», когда они за неимением примеров и источников информации вместо реальных фактов подставляют вымышленные.

Примерный промпт: «Изучи вложенные файлы и на их основе сделай следующее…»

Страх перед критикой

Многие нейросети зарекомендовали себя как очень поддерживающие собеседники. Они могут восторгаться любой глупостью, которую им скажут, и радостно соглашаться со всем, пока пользователи или разработчики не прикрутят в них излишнее поддакивание.

«Ну и хорошо же! — скажут некоторые. — Критики нам и в жизни хватает!»

Это замечание справедливо только до тех пор, пока вы используете ИИ просто как своего собеседника. Но как только дело доходит до рабочих задач — сантименты убираем, а критичность, напротив, пододвигаем поближе.

Это работает в обе стороны. Вы можете задать нейросети критичность по отношению к вашим предложениям, чтобы понять, что в них не так: в этом случае она честно разберет ваши ошибки и предложит альтернативу или исправление. Или же вы можете сказать чат-боту «Покритикуй сам себя» и посмотреть, что он сам найдет в только что предложенном вам варианте ответа.

Пример критики со стороны ИИ

Базовый запрос: «Напиши текст про лес, сделай его неформальным, но подходящим для делового блога, объем 3000–8000 знаков, от лица маленькой девочки. Если у тебя есть критические замечания к этому промпту, озвучь».

Что предложил ChatGPT:

Твоя идея интересная — «текст про лес от лица девочки» для делового блога — но в ней встроено противоречие. «Неформальный» и «деловой» редко живут в одном предложении, особенно если повествователь — ребёнок. Нужно уточнить, зачем этот приём:

• Если цель — метафора, где ребёнок говорит простыми словами о вещах вроде роста, экосистемы, ответственности — тогда формат рабочий.
• Если ты хочешь реалистичный рассказ ребёнка, то деловой блог может выглядеть странно: бизнес-аудитория не поймёт, как восьмилетняя героиня вписалась в корпоративный контент.

Предлагаю два варианта корректировки промпта:

• Если тебе важна образность и лёгкость:

Напиши эссе про лес, которое звучит как взгляд ребёнка — наивно, наблюдательно, с живыми метафорами. Стиль неформальный, но уровень языка — профессиональный, чтобы текст был уместен в деловом блоге.

• Если нужен именно рассказ от лица девочки:

Напиши текст от лица маленькой девочки о лесe, но так, чтобы взрослый читатель (в том числе бизнес-аудитория) увидел в нём метафору про рост, систему, взаимосвязь и устойчивость. Стиль — неформальный, живой, с подтекстом.

Пример самокритики со стороны ИИ

Мы взяли второй вариант промпта «рассказ от лица девочки» и предложили покритиковать уже этот промпт и сказать, что и как в нем можно улучшить. И вот что ему не понравилось уже в собственном варианте:

Нет рамки для интонации. «Неформальный, живой» — это слишком размыто. Неформальный как рассказ ребёнка? Или как лёгкая эссеистика для LinkedIn? Сейчас модель может выдать либо детсадовский лепет, либо чересчур “поэтичную” медитацию.

Не задана эмоциональная ось. Девочка может смотреть на лес с восторгом, страхом, любопытством, усталостью. Без эмоционального вектора текст теряет ритм и цель, и метафора о росте превращается в морализаторство.

Не определена роль метафоры. «Чтобы взрослый увидел метафору» — это слишком абстрактно. Нужно задать, насколько явно она должна просвечивать: лёгкий намёк или почти притча? Сейчас баланс неясен.

Аудитория названа, но не расшифрована. «Бизнес-аудитория» может значить что угодно — от владельцев малого бизнеса до консультантов по устойчивому развитию. Без уточнения модель не подберёт нужную степень умности и серьёзности.

Предложенное исправление: Напиши короткий текст (до 200 слов) от лица девочки 8–10 лет, которая рассказывает о своём походе в лес. Её рассказ должен звучать естественно, с наивным детским наблюдением, но между строк взрослый читатель (особенно управленец или предприниматель) чувствует метафору про рост, систему и устойчивость — как всё живое связано, поддерживает друг друга и растёт не в одиночку. Интонация — живая, наблюдательная, без «сюсюканья». Пусть лес звучит как модель здорового сообщества, но без прямых назиданий.

Размывание задачи

Мы уже говорили о том, что нейросети чертовски исполнительны. Если их не остановить, они на любой запрос будут любезно предлагать поправить, дополнить, переписать, переформатировать ваш текст под разные форматы или узнать что-нибудь еще.

Чтобы не застрять в этом, лучше сразу ограничьте модели область ее применения списком «чего не делать». Это называется «негативный промпт», и он работает и на другие задачи тоже:

• в иллюстрациях обозначают, каких деталей не должно быть в кадре, например обрезают лишние конечности или просят убрать фон;
• вводит цензуру, чтобы текст не нарушал местных законов;
• ограничивает четкими критериями и вопросами, на которые нужно ответить.

Пример негативного промпта: Напиши текст про лес для урока биологии в 6 классе в познавательно-развлекательном ключе. Не включай в него информацию о смежных экосистемах, избегай излишне креативных метафор и сложных научных терминов.

Игнорирование возможностей нейросетей

Даже продвинутые пользователи нейросетей иногда ошибаются. Для того чтобы нащупать личный правильный рецепт «готовки» выбранной нейронки, может потребоваться длинный путь.

Но этот путь можно изрядно сократить, если помнить: нейросети сами отлично разбираются в том, как они работают. И стоит только попросить — сами и расскажут, и покажут, и предложат правильные промпты под ваши задачи.

Уже есть и генераторы промптов онлайн, но базово на это способна любая нейросеть. Запоминаем формулу:

«Ты — продвинутый промпт-инженер со специализацией на (подставить название нейросети). Тебе нужно создать в ней следующий проект: (описываем своими словами). Предложи варианты, как бы ты это делал, и соответствующие им промпты. Задай уточняющие вопросы, чтобы написать промпт как можно лучше и подробнее».

Особенно это осмысленно в случае, когда вам нужно сгенерировать не текст, а картинку или видео. Большинство существующих моделей для этого лучше всего понимают запросы на английском. Нейросеть поможет привести ваш промпт к понятному для нее самой виду и сама переведет все, что нужно.

Также можно использовать промпт для поиска и исправления ошибок в вашем промпте. Вариантов много и их можно допиливать под ваши задачи и контекст.

Базовый сценарий поиска ошибок в промпте

В отдельном от основной задачи чате задайте промпт:

«Ты — специалист по промптингу. Твоя задача — определить в промптах пользователя, где он ошибся и почему они не дают нужного результата. Проанализируй присылаемые тебе промпты и прежде, чем выдавать ответ, задай уточняющие вопросы:

• Чего пытается добиться пользователь, в чем цель его запроса, для кого или чего он предназначен?
• Что он получил в итоге при попытке использовать свой промпт?
• Почему он считает результат плохим или неправильным?
• Какой результат он рассчитывает получить после улучшения промпта?

Не задавай следующий вопрос, пока не получишь ответ на предыдущий. Записав все вопросы, выдай анализ промпта, сравни ожидания с результатом и выяви несоответствия. Выдели проблемные формулировки, ошибки и недочеты, которые могли негативно повлиять на выданный результат. Предложи, как поправить промпт».   Опционально также попросить ИИ дополнительно создать сравнительную таблицу ошибок и исправлений.

Попробуйте. И, возможно, узнаете еще про много новых и уже не типовых ошибок.