qa

标签

Cards List
#qa

@devindevelopers:如何使用 Devin 基于生产流量自动执行评估。

X AI KOLs Following ↗ · 4天前 缓存

Devin 现在可以自动化 QA 评估:读取真实的生产环境对话,在完整复制的环境中复现智能体的失败案例,并将这些案例转化为评估测试,以 PR 的形式提交供人工审核。

0 人收藏 0 人点赞
#qa

智能体自行报告“这已经完成,所有测试都通过了”,你如何验证这一点?如何在大规模智能体场景下进行验证?

Reddit r/AI_Agents ↗ · 2026-10-12

开发者讨论在 AI 代理规模化工作流中如何验证代理自称的“已完成且测试通过”,提出需要外部独立的验证步骤与可留证的调用记录,而非信任代理的自测结果。

0 人收藏 0 人点赞
#qa

Cresta 对话智能 AI 代理

Reddit r/AI_Agents ↗ · 2026-09-29

本文探讨了 Cresta 的对话智能 AI 代理,重点关注其自动化客户交互的潜力,同时提供集成分析以用于质量保证和辅导,并质疑这种统一平台是否比单独工具简化了操作。

0 人收藏 0 人点赞
#qa

@rauchg: 代理在测试和质量保证软件时的彻底性无可比拟。我指出某事在移动(应用内)浏览器中没有正确渲染……

X AI KOLs Following ↗ · 2026-09-21 缓存

文章强调了AI代理在测试和质量保证软件时的无可比拟的彻底性,通过先进的模拟和部署来实现超越人类极限的质量。

0 人收藏 0 人点赞
#qa

@svpino: 我顾问的一家公司刚额外招聘了3名产品经理,因为现有员工无法跟上软件开发的规模……

X AI KOLs Following ↗ · 2026-08-27 缓存

一家公司正在招聘额外的产品经理来应对软件开发量的增长,并计划在QA、销售和安全部门进一步招聘。

0 人收藏 0 人点赞
#qa

使用AI进行代码审查六个月教会我:“review this”是一个伪装成提示问题的QA问题

Reddit r/AI_Agents ↗ · 2026-08-08

一位开发者回顾了六个月来使用AI进行代码审查的经历,发现模糊的提示会产生看似合理但毫无用处的反馈。解决办法是将审查视为一个带门控的流水线,包含明确的上下文、分范围的检查、验证清单和对抗性自我批评。

0 人收藏 0 人点赞
#qa

@no_stp_on_snek: 实地笔记:AI与QA 将一个代理指向我的测试套件,只问一个问题。不是“测试通过了吗。” 这个测试能不能检测出它存在所要捕获的那个bug…

X AI KOLs Following ↗ · 2026-08-08 缓存

一篇实地笔记认为,全绿的测试套件并不能证明测试是有意义的;应该让AI代理尝试让测试失败,以验证它们确实能捕获bug。

0 人收藏 0 人点赞
#qa

相关但不完整:指称悬空作为硬提示压缩中的范式级失败模式

arXiv cs.CL ↗ · 2026-08-06 缓存

本文识别了硬提示压缩中的一种结构性失败,称为“指称悬空”,即独立评分会拆散相互依赖的证据对,移除了解释保留答案所需的上下文。实验表明,这种现象影响多种压缩器和数据集,而自动恢复缺失的指称可提高问答准确率。

0 人收藏 0 人点赞
#qa

KDE Linux 本月动态:2026年7月

Lobsters Hottest ↗ · 2026-08-03 缓存

2026年7月KDE Linux更新月度摘要,涵盖新的QA/集成测试、内核加固、性能调整,以及通过Flatpak下载扩展Java和DOS应用的软件兼容性。

0 人收藏 0 人点赞
#qa

当大语言模型过度回答:测量与缓解基于LLM的硬件描述语言问答中的质量问题

arXiv cs.AI ↗ · 2026-07-21 缓存

本文研究了LLM生成的硬件描述语言问答中的质量问题,发现过度回答倾向,如冗余(65.7%)和冗长(69.1%),并提出了一种多智能体框架,将核心答案减少37%,非核心内容长度减少31%,同时提高质量分数。

0 人收藏 0 人点赞
#qa

CAFE:一种复合AI因子评估框架

arXiv cs.CL ↗ · 2026-07-14 缓存

CAFE是一个开源平台,应用实验设计原则来评估复合AI系统,通过因子设计和混合效应模型将答案质量差异归因于组件及其交互作用。

0 人收藏 0 人点赞
#qa

聚焦医疗LLM问答中的差异

arXiv cs.CL ↗ · 2026-07-09 缓存

本文系统研究了五种语言下基于LLM的医疗问答中的跨语言差异,发现了事实对齐方面的显著差距,并提出了MultiWikiHealthCare数据集。

0 人收藏 0 人点赞
#qa

@petergyang:我将明天采访@NousResearch Hermes联合创始人@karan4d,你希望我们讨论哪些话题?我已经…

X AI KOLs Following ↗ · 2026-07-02 缓存

Peter Yang 正在采访 NousResearch 旗下 Hermes 的联合创始人 Karan4D,并向社区征求话题建议。

0 人收藏 0 人点赞
#qa

@browser_use:在 Browser Use v4 中使用 QA 技能。你的智能体构建应用。给 Browser Use 提供 URL 让它:> 测试流程并……

X AI KOLs Following ↗ · 2026-06-26 缓存

Browser Use v4 引入了 QA 技能,让你的智能体可以像用户一样点击测试流程、捕获错误并评估 UI,从而为开发者形成反馈闭环。

0 人收藏 0 人点赞
#qa

@mxtaverse: 人们正在纷纷失业,尤其是前端、设计师和QA。情况令人担忧。

X AI KOLs Following ↗ · 2026-06-23

一条推文指出,前端、设计和QA岗位的人正在失去工作,反映了当前科技行业的严峻形势。

0 人收藏 0 人点赞
#qa

QApilot's CoWork

Product Hunt ↗ · 2026-06-17

QApilot的CoWork声称可以在不扩大QA团队的情况下将移动自动化效率提升三倍。

0 人收藏 0 人点赞
#qa

我的语音代理测试现在包含600秒断崖

Reddit r/AI_Agents ↗ · 2026-06-11

作者描述了一次语音代理通话在600秒时被无预警切断的情况,并提出了一种优雅处理最大通话时长的测试方法,包括切断前警告和状态保存。

0 人收藏 0 人点赞
#qa

你的AI智能体只需一个糟糕的提示就能毁掉你的品牌(以及为什么传统QA毫无用处)

Reddit r/AI_Agents ↗ · 2026-06-11

文章认为传统的聊天机器人QA是有缺陷的,因为它只测试了理想路径(happy path),并提出使用AI驱动的用户模拟器,通过多样化的角色和边缘案例来攻击机器人,在部署前发现漏洞。

0 人收藏 0 人点赞
#qa

@neural_avb: 用我的 SLM 在本地生成类似 GRPO 的 rollout,并用这个微型 RM 作为评分标准。接下来我将在…

X AI KOLs Timeline ↗ · 2026-06-11 缓存

Neural_avb 发布了一个轻量级的 Answer-eq 奖励模型,用于问答任务的强化学习训练,声称与外部评判 LM 的一致性达到 80%,且比 F1/ROUGE/BertScore 更快。

0 人收藏 0 人点赞
#qa

@antirez: 整合了 DwarfStar 社区的优秀成果,完善了 Strix Halo 的支持。看起来非常不错。更多质量检查……

X AI KOLs Following ↗ · 2026-06-07 缓存

Antirez 正在整合 DwarfStar 社区的贡献以改进 Strix Halo 的支持,预计很快完成最终质量检查并合并。

0 人收藏 0 人点赞
Next →
← 返回首页

提交意见反馈