计算机控制工具的最新进展如何？

Reddit r/LocalLLaMA 工具
computer-control harnesses vision-language-models local-models sandbox cursor-control

摘要

本文讨论了计算机控制工具的最新状态，这些工具允许本地视觉语言模型在沙盒环境中安全地控制光标。

似乎本地视觉语言模型变得足够智能，以至于将它们放在安全的沙盒中控制光标会很有用。那么有哪些工具可以实现这一点呢？
查看原文

相似文章

SkillHarness：为计算机使用代理驾驭安全技能

Hugging Face Daily Papers

SkillHarness 是一个框架，通过整合安全约束和自适应技能选择机制，使计算机使用代理能够在动态环境中安全地学习和执行技能，将不安全率降低了57.1%。

Self-Harness: 自我改进的Harness

Hacker News Top

Self-Harness 提出了一种新范式，其中基于LLM的智能体通过挖掘模型特定的弱点、提出框架修改，并通过回归测试验证这些修改，从而迭代地改进自身的运行框架，在Terminal-Bench-2.0上跨多个基础模型取得了显著的性能提升。