标签
作者宣布推出 mobile-harness,这是一个开源的智能体工具包(agent harness),为 AI 智能体提供统一的 API,用于控制真实的 iOS 和 Android 设备,让任何智能体都能自动化移动端交互。
本文解释了如何使用MCP协议和Mobilerun(一款用于真实设备自动化的开源工具)将AI编排器OpenClaw连接到真实手机,从而实现需要设备完整性或仅限移动应用的任务。
解释AI agent phone是一台真实(或云端托管的真实)手机,由LLM代理操控,通过无障碍树和视觉功能与仅限移动端的应用交互。文中指出了其局限性,并呼吁社区就可靠性问题提供反馈。
作者认为,硬件级交互(HDMI采集+USB HID触摸模拟)优于基于ADB的自动化,可用于构建与操作系统无关的通用AI代理,并介绍了他们使用廉价RV1106开发板的项目Aiden。
H Company发布Holo3.1,这是一个面向计算机使用代理的视觉语言模型系列(0.8B至35B),支持Web、桌面和移动端自动化,具备原生函数调用功能,并提供优化后的量化检查点,便于本地部署。
Holo3.1 是一个更新的计算机使用模型系列,提升了在网页、桌面和移动环境中的鲁棒性,引入了用于本地执行的量化检查点,并增加了对函数调用协议的原生支持。
OpenGUI 被突出展示为一个新颖的 AI 代理平台,它利用实际的 Android 设备执行任务,相较于传统的基于浏览器的代理,提供了更真实的界面。
William 被介绍为首个直接在手机上运行、可自动化重复点击、测试和应用工作流的 AI 代理。