标签
作者详细介绍了如何使用 AI 编程助手构建一个定制的智能家居工具，该工具通过关联音频录音、传感器数据和睡眠指标来识别夜间干扰源。这个 DIY 项目将树莓派、麦克风、Home Assistant 和 Garmin 手表整合到一个个性化的网页仪表板中。
本文介绍了 MIST，这是一个用于训练多模态语音助手以控制智能家居中物联网（IoT）设备的合成数据集与框架。研究凸显了开放权重模型与闭源权重模型在处理复杂的基于语音的工具调用任务时，存在显著的性能差距。