skillcraft.Все статьиEN

НОВОСТИ С ПЕРЕДОВОЙ

Новости с передовой — 13 ноября: как проверить пользу навыка ИИ

В свежем докладе AI Engineer предлагают сравнивать работу с навыком и без него. Разбираем, как новичку проверить свою инструкцию, прежде чем добавлять в неё ещё страницу правил.

Редакция Skillcraft · персонаж Макс · 2026-11-13

Руки сравнивают две инструкции; лупа выделяет точные условия и отметки проверки.

Если вы добавили помощнику длинную инструкцию, проверьте, что именно она улучшила. Для первого сравнения дайте одинаковое задание с инструкцией и без неё. Заранее решите, какие ошибки будете искать.

Выпуск от 13 ноября 2026 года. Сегодня — один ролик из последних двух недель: о проверке навыков, а не о запуске нового продукта. Я выбрал тему, которую можно попробовать без программирования.

Здесь навык — сохранённый набор инструкций для повторяющейся задачи. В ролике обсуждают и технические навыки агентов; для первого опыта вы можете сравнить обычные текстовые инструкции.

Видео: что навык добавляет к ответу

Оригинал: [Your SKILL.md Is 70% Stuff the Model Already Knows — Nikolay Petrov, Intel](https://www.youtube.com/watch?v=yzx4IuEh_tU).

Николай Петров предлагает сравнивать ответы модели с навыком и без него. Отдельно он разбирает, помогает ли инструкция с точными деталями и что происходит после её сокращения.

Практическая польза — способ проверить инструкцию на ваших заданиях. Ограничение — наблюдения спикера не доказывают, что любой навык улучшит результат.

Где искать в ролике

Эти отметки взяты из прочитанной расшифровки. Автоматические субтитры могут ошибаться.

Не удаляйте правила по проценту из заголовка

Заголовок ролика — не основание вычеркнуть большую часть вашей инструкции. У вас могут быть особые требования к суммам, формату или условиям. Я бы сначала выписал, где помощник должен действовать именно по вашим правилам.

Дальше — редакционная адаптация для обычного чата. Это предлагаемый опыт, а не выполненный нами тест.

Пример: ответ на запрос о мероприятии

Представьте вымышленное задание: подготовить ответ гостю по короткой карточке мероприятия. В карточке есть дата, цена и условие подтверждения.

Подготовьте два варианта:

До запуска запишите критерии:

Используйте отдельные новые чаты, одну модель и одинаковые исходные данные. Запишите, какие настройки и дополнительные материалы были включены. Проверьте, что во втором варианте инструкция действительно доступна помощнику.

После получения ответов сравните их по каждому критерию. «Мне больше нравится Б» — полезное впечатление, но оно не объясняет, какое правило сработало.

Что делать с результатом

Если вариант с инструкцией сохраняет важное условие, проверьте его ещё на нескольких новых примерах. Если разницы нет, не спешите удалять всё: возможно, задание слишком простое или нужное правило в нём не понадобилось.

Если решите сократить инструкцию, сохраните прежнюю версию. Уберите один фрагмент и снова сравните результаты. Отдельно добавьте случай, где этот фрагмент должен был помочь.

Одна пара ответов — начало проверки. Она не доказывает устойчивого преимущества. При смене модели, настроек или типа заданий повторите сравнение. Оценку другого помощника сверяйте с исходной карточкой и своими критериями.

Источники

Из мастерской