标签
作者解决了Claude Code无法读取微信公众号文章的问题,通过伪造User-Agent和Referer绕过微信验证,并用Python标准库提取标题、作者和正文。他将此功能封装成开源skill(rn-wechat-extract),支持一行命令提取全文,可用于Agent工作流。
克里斯·西本曼解释了他的反爬虫措施,由于针对LLM训练的高频爬虫激增,他阻止旧版浏览器,这给Feed阅读器和存档服务带来了混乱。
一篇个人博客文章,解释了一种反爬虫浏览器阻止机制,包括给Inoreader、Feedly、Vivaldi和archive.*用户的特别说明。
作者解释说,他们的博客正在屏蔽来自旧版或可疑浏览器 User-Agent 的请求,以应对大量爬虫请求激增的问题(这很可能是为了收集 LLM 训练数据)。文中为 Vivaldi 和 Inoreader 用户提供了调整设置或报告问题的具体指导。
一位系统管理员解释了如何通过屏蔽老旧浏览器User-Agent来阻止LLM训练爬虫,并为受影响用户提供了应对建议。