⭐ У моего агента было 254 навыка. Пользовался он пятнадцатью
Навык, или скилл, это готовая инструкция для ИИ-агента: как собрать презентацию, как прочитать PDF, как пересказать видео. Ставится одной командой, поэтому я ставил всё, что выглядело полезным. Набралось 254.
Потом агент поднял журналы своих 156 сессий за 30 дней. Реально использовались около 15.
📍 Проверка вместо веры
Шесть самых ходовых прогнали на 20 задачах в двух режимах, всего 40 прогонов. Документы Word оставили. PDF отправили в починку, он ломался на кириллице. Пересказ YouTube переписывать: 0 удачных попыток из 4. Управление браузером удалили: 0 из 3. А навык "убрать ИИ-стиль из текста" отключили, потому что он выдумывал цифры, чтобы текст звучал живее.
Инструмент для честного текста врал. Это моя любимая находка.
Судья, который оценивал прогоны, тоже ошибался, три типа его ошибок правили вручную. Проверять пришлось и проверяющего.
📍 Что осталось
241 навык уехал в архив. Активных 14 плюс каталог, по которому агент находит архивный, если он нужен. Контрольный тест: в 10 задачах из 10 нужный навык нашёлся. Каждый запуск каждого проекта стал меньше на 12-15 тысяч токенов.
Заодно сжали общие инструкции агента с 15,5 до 5,3 тысячи знаков. Первая версия потеряла мелочи вроде путей к файлам, их вернули после сверки по 89 пунктам. Без контрольного теста я бы сжимать не стал.
Сколько приложений у вас на телефоне и сколькими вы пользовались за последний месяц? Честно, в комментариях.
Работаем дальше.
