Как передать ИИ свой подход к работе

Зачем упаковывать повторяющиеся задачи в скиллы, чем они отличаются от обычных промптов и как собрать свой — на примере работы с учебными тестами.

Иногда работа с ИИ превращается в день сурка. Появляется задача — открываешь чат и снова объясняешь, как работать с источниками, по каким критериям проверять результат и в каком виде его выдавать. Платишь за помощника, который должен облегчать жизнь, а затем полдня тратишь на пояснения к тому, как он должен работать.

В разработке обучения таких задач хватает. Нужно подготовиться к интервью с экспертом, описать аудиторию, составить учебный план, подобрать практику. Содержание задачи меняется от проекта к проекту, но способ работы с ней часто остается похожим.

Повторяющиеся инструкции можно сохранить в скилле — навыке для ИИ.

В этой статье разберемся, какие задачи имеет смысл так упаковывать, чем скилл отличается от промпта и как создать и использовать свой навык. Покажу это на своем примере: как я собрала скилл из комментариев к готовым тестам. О создании и подключении навыков буду говорить на примере ChatGPT Work: в других инструментах эти действия могут отличаться.

Скилл как рецепт

Представьте рецепт сырников с пометками на полях: если творог влажный — сначала отжать; перед всей партией пожарить один пробный сырник. В таких уточнениях сохраняется опыт того, кто готовил по этому рецепту. В скилле для ИИ можно сохранить условия, порядок действий и проверки.

Скилл — это набор инструкций и вспомогательных материалов для выполнения определенной задачи. В нем можно описать, когда применять навык, что уточнять до начала работы, какие действия выполнять и каким требованиям должен соответствовать результат. В скилле также можно сохранить примеры, шаблоны и другие материалы, которые помогают выполнять задачу.

Основные инструкции и описание того, когда применять навык, записывают в файл SKILL.md. Рядом при необходимости размещают примеры, справочные материалы, шаблоны или скрипты. Вместе они составляют папку навыка.

Для разработчика обучения скилл — это способ сделать явной часть собственной методологии.

Например, за требованием «проверь качество теста» могут стоять разные действия:

• сопоставить вопросы с результатами обучения,
• проверить обоснованность ключей,
• найти и убрать подсказки в формулировках.

У каждого специалиста может быть свой подход. Пока эти требования остаются в голове, приходится заново направлять ИИ.

Передать ИИ с помощью скилла можно отдельные этапы работы: первичную разработку, проверку по заданным критериям, подготовку результата в нужном формате. При этом сам специалист определяет цель, передает необходимые материалы и проверяет содержательные решения.

Чем скилл отличается от обычного промпта

Хороший промпт тоже может содержать методологию: последовательность действий, условия выбора, примеры и требования к результату. Поэтому сохранение промпта в файле SKILL.md само по себе не гарантирует улучшения ответа.

Различие проявляется в том, как организована повторяющаяся работа.

Обычный промпт	Скилл
Вы передаете инструкции в запросе, при необходимости копируете их для следующей задачи	Общие инструкции заранее сохранены в навыке, доступном ИИ
Примеры и дополнительные материалы прикладываются к запросу или уже находятся в контексте	Навык может содержать ссылки на свои вспомогательные материалы
Если вы уточнили для себя правила работы над задачей, при следующем запросе нужно передать их обновленную версию	Общие правила можно обновить в самом скилле и использовать его в следующих задачах

В текущем запросе при этом остаются конкретные вводные. Например, в навыке разработки тестов можно сохранить общие правила построения заданий. А для нового теста передать сам урок, информацию об аудитории, количество вопросов и механику прохождения.

Если задача возникает редко и для нее хватает короткой инструкции, обычный промпт вполне подходит. Скилл становится полезнее, когда вы регулярно возвращаетесь к одному процессу, прикладываете те же правила или повторяете одни и те же правки.

Упакуйте в скиллы задачи, к которым регулярно возвращаетесь

Хороший кандидат для скилла — задача, которую вы решаете несколько раз в месяц или в неделю. Простой ориентир: чем чаще приходится заново объяснять ИИ свои требования, тем больше поводов сохранить их в навыке.

В скилл можно упаковать крупный процесс, например, разработку концепции курса, или отдельную задачу:

• разработку и проверку тестов по новым урокам;
• подготовку вопросов к кастдевам;
• анализ результатов кастдевов с разделением фактов, интерпретаций и гипотез;
• подбор метафор с проверкой того, где аналогия работает, а где вводит в заблуждение.

У любого навыка должны быть понятные границы и результат.

→ «Помогай мне с разработкой практики» задает слишком широкую область.

→ «Проверь практическое задание на соответствие результату обучения» уже позволяет описать процесс и проверить его выполнение.

При выборе я бы задала себе четыре вопроса:

1. Как часто возникает задача?
2. Что в ней повторяется?
3. Какие решения я уже могу объяснить?
4. По каким признакам узнаю хороший результат?

Если каждый раз приходится полностью переопределять цель и способ работы, сначала полезнее разобраться с самим процессом.

Что включить в скилл

1. Задача и результат. В каких ситуациях применять навык и что должно получиться на выходе.
2. Исходные данные. Какие материалы нужны и какие вопросы необходимо уточнить до начала работы.
3. Порядок действий. Какие этапы важны и где решение зависит от условий.
4. Проверки. По каким критериям оценивать результат и какие ошибки искать.
5. Формат выдачи. Как собрать ответ, чтобы его можно было использовать в работе.

«И это все надо прописать самому?» — спросите вы. 

Не обязательно начинать с чистого листа: собрать черновик поможет ИИ.

Если вы уже решали задачу с ИИ

В процессе работы над задачей вы могли загружать материалы, объяснять требования и вносить правки. Одни касались содержания: что добавить, убрать или раскрыть подробнее. Другие — формата результата: как его структурировать и в каком виде выдать. Возможно, вы также уточняли порядок действий, требования к источникам, стиль текста или критерии проверки.

Все это может стать материалом для скилла. Откройте нужный диалог или перенесите материалы и важные фрагменты переписки в новый. Попросите ИИ проанализировать проделанную работу и собрать из нее скилл. При необходимости приложите дополнительные документы: свои правила, чек-листы, шаблоны или примеры хорошего результата. Они дополнят требования, которые вы еще не обсуждали в диалоге.

Например, запрос можно сформулировать так:

Как я собрала скилл из комментариев к тестам

А если с ИИ вы эту задачу еще не решали, можно начать с уже готовых материалов. Покажу, как действовала я.

Недавно для проекта мы разрабатывали учебные тесты. Мне присылали готовые задания, а я их проверяла: сопоставляла с материалом уроков, оценивала формулировки и варианты ответа, оставляла правки и комментарии. В документе накопилось много замечаний, за которыми стояли мои требования к качеству тестов.

Чтобы ИИ выделил этот подход, я выгрузила документ вместе с комментариями и попросила проанализировать, как я работала с заданиями.

Запрос для подобной работы можно сформулировать так:

Получив разбор, проверьте, верно ли ИИ понял ваши решения. Затем попросите встроенный создатель навыков собрать скилл из согласованных правил.

Этот способ подходит и тогда, когда вы еще не записывали свою методологию отдельным документом. Материалом для ее описания могут стать ваши комментарии к чужой работе, редакторские правки и объяснения принятых решений. Важно проверить обобщения: замечание к одному вопросу не всегда стоит превращать в правило для всех заданий.

Пример результата такого разбора:

После того как ИИ разобрал мои комментарии, я приложила к чату свои материалы по принципам разработки качественных тестовых заданий и заметки по психометрике. На основе всех этих материалов попросила создать скилл по разработке и проверке тестовых заданий.

Как проверить черновик навыка

Когда ИИ соберет черновик, прочитайте его как рабочую инструкцию:

1. Сначала проверьте, узнаете ли вы в нем свой подход: не потерялись ли важные условия и не появились ли требования, с которыми вы не согласны.
2. Проверьте, чтобы общие требования были описаны конкретно. Например, вместо «обеспечь качество теста» должны быть перечислены нужные проверки: соответствие вопросов материалу урока, обоснованность ключей, отсутствие подсказок и правдоподобие неверных вариантов.
3. Отделите правила от параметров одного запроса. Пять вопросов с четырьмя вариантами ответа — условие конкретного теста. А проверка соответствия ключа окончательному порядку ответов пригодится и в следующих задачах.
4. Оставьте шаги и развилки, которые влияют на результат. Не нужно описывать каждое очевидное действие: избыточные указания тоже могут мешать работе.

Как начать пользоваться навыком

После создания навыка проверьте, что он сохранен и включен в инструменте, где вы работаете. 

На первой задаче проверьте, соблюдает ли ИИ важные этапы и подходит ли вам результат. Я дорабатываю скилл по ходу работы: замечаю недостатки и уточняю инструкции, а затем смотрю, помогли ли изменения.

Делает ли скилл результат лучше

На самом деле, не обязательно. 

Я провела небольшое сравнение: взяла короткий урок из курса и попросила составить три теста. Во всех случаях задала одинаковый объем и формат: пять вопросов, четыре варианта ответа, один правильный, ключи и пояснения.

Отличался способ передачи правил:

1. Запрос	2. Свои правила	3. Скилл
Приложила урок и попросила использовать правила психометрики и качества тестовых заданий. Какие именно правила применять и как их трактовать, определял ИИ.	Приложила урок, свои правила разработки заданий и заметки по психометрике. Нужные требования переданы в документах.	Передала урок и использовала собранный скилл. В навыке уже сохранены правила, порядок работы и формат результата.

Я намеренно не проверяла запрос «составь тест к уроку» без дополнительных вводных: в работе я в любом случае ведь задаю требования к заданиям. Важно было посмотреть результат, когда отличаются способ передачи правил и их детализация. 

Тесты получились близкими по содержанию: во всех проверялись одни и те же основные идеи урока. Уже в варианте с обычным запросом были заметны признаки качественно составленных заданий. Вопросы требовали различать понятия и связи между ними. Варианты ответа были сопоставимы по форме и относились к одному смысловому вопросу, а неверные ответы отражали правдоподобные ошибки в понимании темы. Пояснения не ограничивались отметками «верно» и «неверно», а объясняли смысл ответа и причину ошибки.

По содержанию заметного преимущества варианта со скиллом я не увидела. В этом примере и обычного запроса хватило для полезного черновика. Но для дальнейшей работы важны также формат выдачи и пояснения к ответам.

Формат выдачи. В первом и втором вариантах сначала шли все вопросы с ответами, а ключи и пояснения — отдельным блоком ниже. Чтобы редактировать вопрос, приходилось искать относящийся к нему разбор. В варианте со скиллом я получила редактируемый документ, где вопрос, варианты, ключ и пояснения собраны вместе. Такой результат мне удобнее сразу брать в работу.

Пояснения. В первых двух вариантах комментарии объясняли отдельные ответы, но не учитывали мой подход к обратной связи в тестах. Если тест проходят один раз, я хочу, чтобы в одном пояснении учащийся видел, почему один ответ верный, а остальные нет (а не только пояснение, почему именно этот ответ верный/неверный). Если попытку можно повторить, комментарий к ошибке не должен заранее раскрывать правильный ответ. Это требование я уточнила и закрепила при доработке скилла.

Зачем сохранять свой подход в скилле

В этом примере скилл оказался полезен прежде всего для организации работы: я получила удобный формат выдачи и смогла сохранить уточненные требования к пояснениям. По одному сравнению нельзя судить о том, насколько скиллы улучшают содержание заданий в других ситуациях.

Для меня ценность скилла — в возможности сохранять и дополнять собственную методологию. Решения из отдельных диалогов и комментариев становятся рабочей инструкцией, которую можно уточнять по мере появления новых задач.

Здесь я показала работу с тестами. По тому же принципу можно собрать навыки для разных этапов разработки обучения и использовать их в одном процессе. Например, разобрать материалы эксперта, сформулировать учебные цели и результаты, составить учебный план, разработать контент и практические задания.

Ваша задача в этом случае — задать последовательность работы, проверить промежуточные результаты и передать их на следующий этап. Повторяющиеся действия и проверки при этом выполняет ИИ по сохраненным инструкциям. А вам не приходится каждый раз заново объяснять весь процесс и вручную вести его от исходных материалов до готового результата.