Moby Dick Workout (2022)
摘要
描述了使用 Moby Dick 的全文对待办事项列表和生产力应用进行性能测试,并提供了不同应用格式的测试文件。
暂无内容
查看缓存全文
缓存时间: 2026/07/05 10:31
# Moby Dick 工作负载测试
来源:https://www.hogbaysoftware.com/posts/moby-dick-workout/
2022年4月12日
你的待办事项列表应该能处理多少项内容?这算不上世界上最紧迫的问题,但确实是我偶尔会琢磨的事情。
我认为生产力应用应该能够扩展到“用户生成”的内容。我并不指望每个应用都能加载几 GB 的日志文件,但它至少应该能处理我自己所写的内容。
我使用《白鲸记》(Moby Dick)来做测试。我知道它比我写的任何东西都更长、用词更生僻。如果一个应用在处理《白鲸记》时表现良好,那就有很好的迹象表明它也能满足我的需求。
以下是测试步骤:
1. 打开《白鲸记》。响应是否迅速?
2. 滚动到底部。调整窗口大小。响应是否迅速?
3. 滚动到中间。调整窗口大小。响应是否迅速?
4. 全选。剪切、粘贴、撤销、重做。应用是否依然稳定?
5. 在靠近中间的位置编辑一些内容。是否存在打字延迟?滚动是否会跳闪?
6. 重复步骤 2-5 直到你感到厌倦,然后打开 macOS 活动监视器,查看内存占用是否在可接受范围内。
计算机的速度非常快,相比之下《白鲸记》的数据量微不足道。如果一个应用通不过这个测试,对我而言就意味着可能存在一些问题。这仅仅是一个测试——适合你的优秀应用可能无法通过,而不适合你的应用却可能轻松过关。
测试文件:
- MobyDick.bike (https://github.com/jessegrosjean/mobydickworkout/raw/main/moby_dick.bike.zip) —— 这是我用于测试我的应用 Bike Outliner (https://www.hogbaysoftware.com/bike/) 的文件。
- MobyDick.opml (https://github.com/jessegrosjean/mobydickworkout/raw/main/moby_dick.opml.zip) —— 这是一个 OPML 文件,适用于测试大纲类应用。
- MobyDick.markdown (https://github.com/jessegrosjean/mobydickworkout/raw/main/moby_dick.md.zip) —— 这是一个 Markdown 文件,适用于测试 Markdown 类应用。
相似文章
@dkundel: https://x.com/dkundel/status/2062650378089594955
关于使用Codex的目标模式(/goal)在长时间内完成复杂编码任务的详细指南,包含定义明确标准、提供指导和衡量进度的小贴士。
iOSWorld:个性化智能手机代理的基准测试
介绍了iOSWorld,一个交互式原生iOS模拟器基准测试,具有跨26个应用的持久用户身份,旨在通过133个难度递增的任务评估个性化移动代理的能力。
回到未来:用于电子表格创建基准的工作簿时间机器
本文介绍了工作簿时间机器(workbook time machine),这是一个自动创建基准的流水线,用于评估语言模型在创建派生电子表格对象(如公式、图表、数据透视表和条件格式)方面的能力。作者构建了 WTM-Corpus 和一个经过整理的 150 任务基准 WTM-Bench,并在不同工件类型、步骤复杂度和指令粒度上对电子表格智能体进行了评估。
@yoheinakajima:刚在我的手机(17 Pro)上运行了这个
RunAnywhere 发布了一款设备端 AI 基准测试应用,可让用户直接在自己的手机上测量模型性能,用实时测试取代发布的数据。
DexJoCo: 面向任务的灵巧操作在MuJoCo上的基准测试与工具包
DexJoCo 提出了一个面向任务的灵巧操作在 MuJoCo 中的基准测试与工具包,包含11个功能性任务、一个低成本数据采集系统,以及全面评估,揭示了当前灵巧操作策略的局限性。