Здесь больше полезного об AI разработке - https://t.me/sachkov_blog
Google открыли код Harness², системы для самоулучшения агентов. Она пробует менять harness, то есть инструкции, скиллы и инструменты, которые определяют, как агент работает. Например, когда агент зацикливается, а что именно поменять в его инструкциях, непонятно.
Harness² запускает варианты на задаче, сравнивает действия агента и сохраняет опыт экспериментов для следующих задач. Саму модель при этом не дообучают.
В тестах авторов есть прирост, но это ещё не значит, что станет лучше именно твой агент. Нужны повторяемые задачи, понятная оценка результата и отдельная проверка изменений на новых примерах. Harness² помогает искать улучшения, а проверять их пользу для своего проекта всё ещё придётся тебе.
Google открыли код Harness², системы для самоулучшения агентов. Она пробует менять harness, то есть инструкции, скиллы и инструменты, которые определяют, как агент работает. Например, когда агент зацикливается, а что именно поменять в его инструкциях, непонятно.
Harness² запускает варианты на задаче, сравнивает действия агента и сохраняет опыт экспериментов для следующих задач. Саму модель при этом не дообучают.
В тестах авторов есть прирост, но это ещё не значит, что станет лучше именно твой агент. Нужны повторяемые задачи, понятная оценка результата и отдельная проверка изменений на новых примерах. Harness² помогает искать улучшения, а проверять их пользу для своего проекта всё ещё придётся тебе.
- Категория
- AI Инструменты
Комментариев нет.
