标签
一篇实测报告，详细介绍了在经历24小时压力测试后，OpenAI 的「dots」执行模型是如何运作的，相关发现与 r/artificialintelligenc 上的 Reddit 讨论相互印证。
本文认为，时间序列预测基准需要基于场景的压力测试，即测试用例应包含语义场景、显式失效算子和可量化的难度等级，以捕捉体制转换和传感器故障等结构化异常——而这些异常是基于独立同分布扰动的鲁棒性测试所无法覆盖的。
本文提出了一个新的类别，专注于压力测试AI代理以提高可靠性，使用模拟人类行为的自主QA系统来检测工作流中的隐藏故障。
据报道，OpenAI 和 Anthropic 接近达成一项协议，以压力测试彼此的 AI 系统，正如 The Information 所报道。
本文提出了一种通过扩散模型利用Radon-Nikodym导数操纵似然性来实现受控离群点生成的方法，无需重新训练即可创建低似然性样本。
Mondo Robotics推出的Beni机器人是一款自主摄像机器人，旨在追踪和拍摄滑板手等动态主体，但在图像质量、追踪响应和控制方面存在重大限制，影响了其对内容创作者的实用性。
GenOS的开发者正在请求社区提供最糟糕的边界案例，以压力测试和改进这个使用Rust和Git worktrees的多智能体LLM编排开源框架。
论文介绍了PV-SST，一个用于LLM智能体的同行投票社交平台测试平台，并发现同行排名的信息流增加了词汇趋同，但在不同模型家族和主题上未能可靠产生意见捕获或协调优势。
这篇文章描述了一种为 Pony 语言设计的新区域分配器，它解决了在压力测试中发现的内存增长和性能问题，设计灵感来源于 snmalloc。
本文将PRM压力测试表述为使用MAP-Elites的质量-多样性搜索问题，刻画了存档覆盖可以证明和不能证明的内容。在Qwen2.5-Math-PRM-7B上的实验揭示了依赖聚合方式的漏洞，且LoRA修复协议降低了利用率。
本文将信息缺失压力测试推广至开放式医疗对话，发现大语言模型评审者的选择会显著改变表观安全性，且LLM评审者比临床医生更为宽松。
本文介绍如何利用Claude和CIA红队技术，在付诸实践前对糟糕的想法进行压力测试并扼杀它们，从而节省时间、避免失败。
Patronus AI完成5000万美元B轮融资，用于构建模拟数字世界以对AI智能体进行压力测试，帮助确保它们在现实场景中可靠运行。
作者构建了一个基于GPT-5.5的自主Codex代理循环运行器，用于测试，目前处于公开测试阶段，提供50次免费运行机会。
本文介绍了AI-MASLD，一个用于医学大语言模型的压力审计框架，揭示了基准准确率如何掩盖严重的安全故障，并展示了开放权重模型在安全维度上可以媲美或超越专有模型。
MemFail是一个诊断基准，通过形式化总结、存储和检索操作，并用对抗性设计的数据集进行评估，来隔离LLM记忆系统的故障模式。
解释如何使用Claude执行事前验尸（premortem），这是丹尼尔·卡尼曼提出的一种技术，通过想象计划已经失败来对其进行压力测试。
DetectRL-X是一个全面的多语言基准测试，用于评估跨8种语言和6个领域的LLM生成文本检测器，包括针对AI辅助写作操作和扰动的压力测试。它揭示了当前检测器在多语言场景中的优势与局限性。