@FiniYang: 做了一个小猫咪生存游戏 让官方的Jev和本地的Laya (mlx) 组队保护小猫 每一步都由模型自己选择…

X AI KOLs Timeline 新闻

摘要

作者创建了一个猫咪生存游戏来测试AI模型Jev和Laya的性能,发现Jev更准确但较慢,而Laya很快但不准确,并计划为这类模型开发一个排行榜。

做了一个小猫咪生存游戏 让官方的Jev和本地的Laya (mlx) 组队保护小猫 每一步都由模型自己选择 这样小猫就会吃饱、受伤或挨饿 结论:Jev更准确但较慢,Laya超级快但不准确 每个关卡测试了三次 官方Jev通过了3/9轮 全部来自觅食关卡; 本地Laya通过了0/9轮 Laya每轮都成功回家,但未能满足每个关卡的饱腹、健康或温暖要求 兄弟们,关卡设计是不是有点太难了? 计划稍后为通关关卡制作一个类似Jev的决策模型排行榜
查看原文
查看缓存全文

缓存时间: 2026/09/22 19:56

做了一个猫咪生存小游戏
让官方Jev和本地Laya(mlx)组队保护小猫
每一步都由模型自行选择
小猫因此会吃饱喝足、受伤或挨饿
结论:Jev更精准但速度慢,Laya极速但准确率低

对每个关卡进行三轮测试
官方Jev通过了3/9轮
全部来自觅食关卡;
本地Laya通过0/9轮
Laya每轮都能成功回家,但始终未能满足各关卡的饱食度、健康或温暖值要求

兄弟们,这关卡设计是不是有点太硬核了?
后续打算做一个类Jev决策模型的通关排行榜

相似文章

jevman:AI 决策模型大战《吃豆人》

Reddit r/LocalLLaMA

作者将六个流行的决策模型(jev 1.13、Kev 4B、Clef、Clef Flash、GPT-6 Luna 和 Laya)放在《吃豆人》游戏中进行实时对决,jev 1.13 以平均 2,750 分领跑排行榜。团队已公开排行榜和开源仓库,任何人提交自己的模型即可参赛。

我将 Qwen3.8-27B Q2_64 + llama.cpp 转换为一个完全 TypeSafe AI 兼容的 Jev 风格系统。OpenAI API 仍然完整!全球首个支持视觉的 Jev 风格模型!显存占用低于 10 GB,在 RTX 3090 上延迟 170 毫秒,聊天速度约 140 tok/s。在包含 22,000 个请求的多样化类型决策基准测试中,准确率为 76%,而 Jev-1.13 为 88%。

Reddit r/LocalLLaMA

Bonsai-Llama-Jev 是一个开源的、支持视觉的类型决策推理系统,可在本地运行,具有低显存占用和高准确率,在多样化基准测试中超越其他系统。