Ничего не найдено. Попробуйте еще
Как составлять промпты для ИИ-помощника в МТС Линк Формах: 7 советов эксперта, которые сэкономят время

В апреле в МТС Линк Формах появилась новая функция — ИИ-проверка свободных ответов: вы задаёте вопрос, пользователь на него развёрнуто отвечает, а ИИ-помощник сам проверяет его релевантность и правильность. Вместе с экспертом по корпоративному обучению и ИИ Владимиром Казаковым разобрались, как грамотно писать промпты для Форм, почему важно умение рефлексировать и какая инструкция точно окажется хорошей.
О функции ИИ-проверки открытых ответов в МТС Линк Формах
МТС Линк Формы — сервис для проведения тестов, опросов и исследований. Он подходит преподавателям, коучам и тренерам для эффективной работы с учениками. Для проверки знаний обучающихся в сервисе можно использовать как вопросы с выбором варианта ответа, так и открытые. А сам процесс проверки легко делегировать ИИ-помощнику.
В основе ИИ-проверки открытых ответов лежит LLM-модель от MTS AI. Чтобы всё прошло корректно, автору формы (тренеру, преподавателю или коучу) нужно составить промпт, или инструкцию для проверки. Чем точнее и подробнее промпт будет сформулирован, тем лучше ИИ-помощник МТС Линк Форм проверит рассуждения ученика.
Как составить грамотный промпт для ИИ-помощника в МТС Линк Формах
Изначально базовый промпт в МТС Линк Формах уже создан. Система МТС Линк Форм сама собирает запрос к ИИ-модели, в этот запрос попадает текст вопроса, ответ, который ввёл респондент, и текст инструкции. Автор формы может влиять на тексты вопроса и инструкции, а текст ответа будет каждый раз меняться в зависимости от того, что написал респондент. И весь секрет успеха проверки заключается в грамотной инструкции.

Тест в МТС Линк Формах
Задайте позицию
Правильно составленная инструкция позволит получить качественные оценки или, к сожалению, несуразицу. Когда мы составляем инструкцию, создавая вопрос со свободным ответом, будет полезно написать для модели, от чьего имени она работает
- «действуй как строгий преподаватель»
- «действуй как учитель начальных классов»
- «действуй как профессиональный филолог».
Распишите критерии
Они должны быть такими, как будто инструкция нужна совершенно незнакомому с вашей темой человеку. Представьте, что вы отправили текст другу, работающему в другой сфере, и просите его оценить ответ вашего учащегося, а он ничего в этом не понимает. Вот такого рода инструкция должна быть. Тогда она будет максимально понятной людям с разным подходом и способом мышления.

Также полезно добавить: «в ответе допустимы опечатки, их наличие не влияет на оценку» или «не обращай внимания на пунктуацию и грамматику».
Добавьте контекст
Владимир Казаков рекомендует описать, кто ваши тестируемые — это дети в школе, рабочие на заводе, а может быть, топ-менеджеры или домохозяйки. Это поможет ИИ лучше понять стиль комментария и ожидания от проверки ответов. Если есть специфические термины, расскажите ИИ про них.
Например, АКБ может быть «аккумуляторная батарея» (в технике) или «акционерный коммерческий банк» (финансы). В вашей организации, вероятно, есть свои сокращения, которых ИИ не знает, но которые будут использоваться в ответах. Их тоже важно указывать.
Поработайте над комментариями
Всегда нужно включать инструкцию по написанию комментария. Это нужно, чтобы он был вразумительным и соответствовал тому, что вы ожидаете. Через комментарии вы даёте обратную связь на открытые ИИ-ответы.

Проверка ответов с помощью ИИ в МТС Линк Формах
Опишите, что вы хотите: похвалить, поругать, найти зоны роста или, наоборот, не искать их, покритиковать или уточнить, чего не хватило. Возможно, вы не желаете рассказывать, какой правильный ответ должен был быть. Эти нюансы должны быть описаны в тексте той инструкции, которую вы прикладываете к вопросу.
Общие рекомендации, чтобы ИИ правильно понял запрос
В настоящий момент ИИ-технологии не способны додумывать за человека, временами могут неправильно интерпретировать двузначности и из-за этого выдавать не те результаты, на которые надеется пользователь. Хорошая новость в том, что этого можно избежать. Пользователю достаточно грамотно сформулировать свои мысли и желания, чтобы ИИ-помощник для проверки ответов его понял. Для этого нужно следовать нескольким правилам.
Рефлексируйте
Владимир Казаков объясняет, что пользователь, который изначально создаёт форму, как правило, сам уже понимает, как он будет ее проверять. Поэтому ему понадобится навык рефлексии — представления того, как незнакомый с темой пользователь может ответить. Эксперту в целом стоит разобраться, как лично он взаимодействует с ИИ, что делает, что вводит, даже если это не до конца осознанное им действие. Ему стоит также понять, в какой он роли: добрый, критикующий или хвалящий, исправляющий каждую ошибку и придирающийся ко всему.
Например, учитель математики, глубоко разбирающийся в теме, создаёт форму, чтобы быстрее проверить знания учеников. Ему важно составить правильный промпт к нейросети или, например, МТС Линк Формам так, чтобы ответ ученика был проверяем и оценивался адекватно. Для этого ему понадобится ввести критерии проверки, а иногда также добавить примеры ответов, комментариев. Но не так, как учитель математики делает это обычно, а как если бы эти критерии и примеры применял другой человек. Например, как если бы проверять эти ответы стал преподаватель истории или географии. Кроме того, учителю нужно заранее примерить на себя роль ученика и представить, как обучающийся введёт ответ на вопрос.
Допустимые критерии в идеале должны быть измеримыми. Есть определённый набор тезисов, которые человеку стоит написать в своем сочинении-запросе. Мы говорим модели, сколько должно быть тезисов в ответе на запрос: два, три, пять и так далее. Ещё стоит уточнить, сколько символов или слов могут быть в ответе — не больше и не меньше определённого числа. Да, модель может не до конца сосчитать все буквы, тем не менее лучше указать этот параметр, чтобы она понимала, должен быть длинный ответ или, наоборот, короткий. Чем более точные эти инструкции, тем лучше.
Выражайтесь предельно чётко
Инструкция для ИИ должна быть чёткая. Такая, что если бы это была инструкция для реального человека, то он бы мог даже немного обидеться. Важно помнить, что нейросеть делает ровно то, что её попросили. Если вы попросили найти ошибки, она будет их искать, даже если их нет. Если запрос состоит в том, чтобы выделить неточности, она придумает их и обязательно выделит. Инструкция должна быть составлена так, будто вы ставите задачу ленивому или далёкому от вашей сферы человеку, от которого вы пытаетесь получить результат. Чем чётче, понятней, лаконичней и жёстче будут написаны промпты для нейросетей, тем ближе к задаче и точнее она их выполнит.
Тестируйте, как никогда
Все инструкции нужно тестировать. В идеале несколько раз на правильных и на неправильных ответах. Но самое опасное в моменте тестирования — это когда вы проверяете сами себя. Ведь респондент может по-другому заполнить форму, не так, как вы представляли.
В таких случаях по возможности стоит показать форму кому-то помимо вас, например тестовой группе. Попросите других людей заполнить анкету и посмотрите по их ответам, правильно или неправильно отработала инструкция. Ведь то, что вы можете написать в виде верного или неверного ответа, не гарантирует совпадения с тем, как будет отвечать другой человек.
Пример хорошего промпта
Чтобы создать промпт для нейросети, обязательно нужно конкретизировать задачу, дать контекст и желательно привести примеры. Если вы добавите роль ИИ, формат и тон, это улучшит итоговую выдачу.
- Роль: «Действуй как учитель литературы. Ты дал задачу ученикам прочитать „Отцы и дети“ Тургенева. Тебе надо проверить ответы ученика».
- Критерии: «Ответы на все вопросы должны быть развёрнутыми — не менее двух предложений. При проверке открытых ответов ориентируйся на раздел „Примеры“».
- Тон: «Используй доброжелательный тон для общения с детьми, не критикуй, предложи, как можно улучшить неправильный ответ. Похвали, если ответ правильный».
- Примеры. Сюда стоит добавить примеры правильных ответов на каждый из вопросов.
Что испортит промпт
Сильнее всего запутать ИИ-систему может составление некорректных инструкций к вопросам. Особенно то, что на один и тот же запрос можно давать отличающиеся ответы, которые будут правильными, но по-разному сформулированными. Чтобы распутаться, обратите внимание на следующее: после того как вы создали инструкцию и добавили вопрос, несколько раз (не один и не два, а лучше пять или десять) следует пройти эту форму самому или попросить тестовую группу. Так вы посмотрите, какие получаются комментарии и какие выдаются результаты.
Важно учесть, что инструкция, состоящая из нескольких слов или пары строк, к сожалению, почти никогда не будет отрабатывать так, как ожидается. Самый важный критерий проверки качества инструкции — ещё раз перечитать её свежим взглядом либо предложить инструкцию коллеге, чтобы получить взгляд со стороны.
Пара слов в финале
Грамотные промпты важно научиться создавать вначале. Пара-тройка проработанных инструкций — и вы сможете оперировать инструкциями для нетипичных задач, получая при этом желаемые результаты. Освободите себе часть времени, автоматизируйте рутину — это облегчит рабочий день и позволит сэкономить силы на выполнение более весомых дел.
Подпишитесь на рассылку МТС Линк Медиа
Каждую пятницу присылаем самые интересные статьи об эффективной работе и коммуникациях в онлайне на почту