crawlers

探讨将虚构传说作为RAG爬虫的可执行系统提示的想法，通过将叙事背景嵌入提示中，可能影响AI代理如何解释和检索信息。

克里斯·西本曼解释了他的反爬虫措施，由于针对LLM训练的高频爬虫激增，他阻止旧版浏览器，这给Feed阅读器和存档服务带来了混乱。