Новое в Claude Code: claude plugin eval 🎉
Новое в Claude Code: claude plugin eval 🎉 Теперь можно посмотреть, какую пользу на самом деле приносит ваш плагин и не требует ли он доработки. Можно создать тестовые случаи, прогнать на них плагин или навык, оценить результаты, а затем повторно запустить каждый тест уже без…
- 01.Новое в Claude Code: claude plugin eval 🎉 Теперь можно посмотреть, какую пользу на самом деле приносит ваш плагин и не требует ли он доработки
- 02.Можно создать тестовые случаи, прогнать на них плагин или навык, оценить результаты, а затем повторно запустить каждый тест уже без…
Новое в Claude Code: claude plugin eval 🎉 Теперь можно посмотреть, какую пользу на самом деле приносит ваш плагин и не требует ли он доработки. Можно создать тестовые случаи, прогнать на них плагин или навык, оценить результаты, а затем повторно запустить каждый тест уже без плагина и сравнить разницу. Начните в папке вашего плагина и выполните: claude plugin eval init Вы объясняете Claude, как выглядит хороший и плохой результат, и даёте несколько реальных промтов. Claude сам набрасывает тестовые случаи и проверки, делает пробный прогон набора и сообщает, сколько будет стоить полный запуск. Затем выполните: claude plugin eval В терминале вы увидите оценку каждого тестового случая с вашим плагином и без него, а также получите HTML-отчёт со всеми подробностями. Если ваш аккаунт это поддерживает, отчёт также публикуется как приватный артефакт. Проверки вызывают модель, поэтому расходуют токены, а результаты могут отличаться от запуска к запуску. Перед полным прогоном сначала сделайте пробный запуск через: --runs 1 Хуки и MCP-серверы вашего плагина выполняются от вашего имени, поэтому проверяйте только те плагины, которым доверяете. Чтобы попробовать функцию, выполните: claude update https://code.claude.com/docs/en/plugin-evals
Related Intelligence
All stories →From Request to Action: What AI Opportunities Open for Kazakhstan's Business
Said Nasimov spoke about the practical application of artificial intelligence in Kazakhstan, new customer scenarios, and a joint project with Tele2/Altel.
The Download: Anthropic’s IPO, smarter power grids, and exercise pills
This is today’s edition of The Download, our weekday newsletter that provides a daily dose of what’s going on in the world of technology. Will the real Anthropic please stand up? After weeks of frenzied speculation, Anthropic has filed its IPO prospectus. The 335-page document…
Kimi K3.1 Pro Released — Is It Really Stronger Than Claude and GPT?
Kimi K3.1 Pro Released — Is It Really Stronger Than Claude and GPT? The new Chinese neural network has closely approached Claude in programming tests. But can it create complex 3D applications, not just write code? In the new video we compare Kimi with Claude and GPT, and then…