StarSkirmish Bench: Бенчмарк, где LLM пишут C++-ботов для StarCraft: Brood War за час.
Бенчмарк, где LLM пишут C++-ботов для StarCraft: Brood War за час.
Главное в цифрах
- Создатели: Kai McPheeters
- Стадия: показан на Hacker News
Как это работает
Каждая модель в первоисточном CLI-харнесе пишет Protoss-бота и сражается с сильными ботами людей; итог, средний процент побед.
Почему мы это показываем
Оригинальный и полезный бенчмарк, но узкий: 3 карты, один час, интерес сообщества умеренный (49 очков на HN), сильных признаков продукта мало.
Источник: Show HN
Стартап-радар
Такие новости первыми, в Telegram