标签
big-arrow-on-the-screen(bigarrow)是一款开源的小型 macOS 命令行工具和智能体技能,可让 AI 智能体在屏幕上绘制可点击穿透的箭头、方框和文字浮层,用来指示需要用户手动点击的 UI 元素,且不会抢占焦点,也无需额外权限。
一位有五年实时AI助手构建经验的工程师总结了生产级Agent系统的四条关键经验:可视化流程图、预设人工审批环节、集中管理模型选择、以及预先设计模型出错时的处理机制,并附带了一个公开的参考实现项目。
伦敦大学学院(UCL)的研究人员提出了 Text2Dashboard,这是一种受治理的智能体架构,能够将自然语言请求转化为基于企业数据的可审查仪表板。它将受架构约束的 LLM 决策与类型化工具、确定性钩子以及人工审批关卡相结合。在少量 DataBrain 任务和故障场景上的评估结果显示了积极但仍有局限的结果。
作者认为,仅仅证明 AI 系统中有个人类点击了“批准”,并不等于证明这次批准是正当的——真正的治理难题在于:凭什么说明这个人的决定在那个时刻具有权威性。文章提出,构建高风险自主系统的从业者应当如何思考资格、指派、授权、独立性以及时效性这五个要素。
# 人类监督在 AI 辅助决策中的真正要求:以五角大楼 Agent Network 计划为案例分析 本文分析了在 AI 辅助决策中,"有意义的人类监督"究竟意味着什么,以五角大楼的 Agent Network 计划为案例研究,并提出三项可检验的评判标准: - **可理解的推理过程**:决策者必须能够读懂系统给出的理由,而不只是得到一个结果 - **可质疑的假设**:系统所依赖的前提假设应当被明确呈现,且允许被挑战和反驳 - **真正的暂停与否决权**:人类不仅拥有形式上的审批权限,更要具备实际约束系统的权力 这三项标准共同指向一个核心问题:当 AI 参与(甚至主导)高风险决策时,人类角色不应只是走个过场的盖章者,而应是拥有理解、质疑与否决能力的实际决策主体。
该论文提出 FD-SCoPE 框架,利用可验证、可反馈的语言模型与可执行查询,回答临床医生对临床试验证据表格的提问,包括无法直接通过数据库查询得出的派生属性问题,并在肿瘤学免疫检查点抑制剂试验数据上验证其可审计性与有效性。
论文提出了 AgentMonBench 基准(包含 SpecGAP、SilentSwap、FeedbackTrace),用于评估 LLM 识别关键性智能体决策以及发现需求与行为不一致的能力,以实现对长时程 AI 智能体的基于证据的监督。
一位开发者开发并开源了一款工具,强制 AI 编码代理在发送邮件、提交代码和发消息之前,先将其放入人工审核队列,由用户进行编辑和批准,从而减少那些明显带有 AI 痕迹的内容以用户名义发布出去。
这是一篇观点文章,探讨当 AI 系统做出或否决服务决定——例如申请被拒或交易被标记——时出现的问责缺口,并主张重要的 AI 辅助决策应当附带清晰的人工复核与申诉机制。
LangChain 官方发布的《Agents From Scratch》指南提供了一套可动手实践的四步路线图,用于构建具有长期记忆和人机协作能力的邮件 Agent,涵盖 LangGraph 工作流、LLM-as-Judge 测试、human-in-the-loop 确认以及 LangGraph Store 记忆集成,并附带 Notebook 和源代码。
一篇关于企业场景中 AI 代理应拥有多大自主权的思考性讨论,区分了「提出建议、经人工审核后执行」与「完全自主操作」之间的差异,并探讨在退款、财务决策、生产系统变更等高风险任务中,防护措施应设在何处。
Sydney Runkle 介绍了 LangGraph 的一项新功能:带类型化响应模式(typed response schemas)的中断(interrupts),使人工响应在返回给智能体之前先经过验证,从而在 UI 中实现真实的响应表单,而不是原始的 JSON 输入。
一位从业者分享了构建可信报价代理的架构思路:LLM 仅负责在温度 0 下从杂乱的客户消息中提取规格参数,空值转化为追问问题,定价交由带回归测试的确定性代码引擎完成,且每份报价在发出前都必须经过人工审核。
ThuRunel 是一个面向两阶段高风险咨询场景(医美、法律、教育)的顾问代理框架,它将「动态解耦」这一概念形式化:即决定该问什么、何时停止、哪些事项应自行解决,以及哪些问题应上报给专家。该框架结合有限状态信念管理、CoT 教师综合与生成适配器,在与十一个基线的对比中胜出,并以双语、可引用来源的 Web 应用形式对外发布。
本文探讨了在代码更改后控制AI编程智能体的挑战,并提出一个工程控制平面来处理权限、验证和人工审批。
这条推文讨论了AI代理到2030年将使用比人类多100倍的令牌的预测,并介绍了Fo,一个结合AI与人工协助以处理现实任务的个人AI产品。
US和俄罗斯从联合国草案中移除了对AI生成目标进行人类审查的要求,可能削弱全球对自主武器的监管努力。
一篇论文描述了将JEV用于推理任务的门控,作为成本效益高的初审法官,在置信度较低时升级到大语言模型或人类。
EviStreams 是一个开源、无代码的网络平台,它使用人机协作 AI 进行系统综述中的数据提取,表明数据提取的质量更依赖于字段规范而非模型选择。
一位AI爱好者分享了一个人在回路设置,其中名为Cal的AI伴侣与D&D战役文本互动,在长途驾驶中提供互动共听体验。