SkillEvaluator: Фреймворк для проверки AI-агентных навыков и замера их влияния на результаты агента.
Фреймворк для проверки AI-агентных навыков и замера их влияния на результаты агента.
Иллюстрация: GitHub
Главное в цифрах
- Звёзд на GitHub: 2 тыс.
- Язык: Python
- Лицензия: Apache-2.0
Чем полезно
Проверяет качество, безопасность и дублирование навыков, а также сравнивает запуски агента с навыком и без него. Это заменяет ручную проверку инструкций перед публикацией.
Главные возможности
- Статическая проверка качества без API-ключа и Docker
- Поиск пересечений между навыками через эмбеддинги
- Живая оценка агента в песочнице с сравнением запусков
Для кого
Авторы AI-агентных навыков и команды, публикующие их в репозиториях
Как начать
pip install skillevaluator
Нашли ошибку или есть что добавить? Напишите редакции
Источник: GitHub
GitHub-находки
Такие новости первыми, в Telegram