面向 LLM 的 Markdown 浏览器
摘要
作者介绍了 TextWeb,这是一个开源工具,它将网页渲染为 Markdown 格式供 LLM 处理,而非使用昂贵的大视觉模型,该工具支持命令行界面 (CLI) 和 MCP 服务器。
我开发了一款面向 AI Agent 的 Markdown 网页渲染器。TextWeb 不再通过截取昂贵的屏幕截图并将其输入视觉模型来处理,而是直接将网页渲染为 LLM 能够原生理解和分析的 Markdown 格式。它支持完整的 JavaScript 执行,并对交互元素进行了标注。它提供了命令行界面 (CLI) 和 MCP 服务器。你可以在这里找到它:[https://github.com/woheller69/textweb](https://github.com/woheller69/textweb)。LLM 可以执行以下操作:浏览网页、上下滚动、在输入框中输入文本、点击按钮等。它与 llama.cpp Web UI 兼容。该项目基于 [https://github.com/chrisrobison/textweb](https://github.com/chrisrobison/textweb),后者使用的是文本网格渲染器而非 Markdown。
相似文章
@DanKornas: 将网页内容复制到大语言模型时,不应拖拽整个浏览器。.MD this page 是一个浏览器扩展,……
.MD this page 是一个开源浏览器扩展,利用 Mozilla 的 Readability 将网页转换为干净、可直接用于大语言模型的 Markdown,具备一键捕获、预览和导出等功能。
我做了一个浏览器工具,用来可视化小型大语言模型如何选择下一个词,并查看它正在关注什么 [P]
一款基于浏览器的工具,完全在客户端运行 SmolLM2-135M(ONNX、int8),用于可视化下一个词元的概率和注意力权重,并演示注意力汇聚(attention sink)现象。它提供开源 GitHub 仓库和在线演示,甚至可以在移动设备上运行。
@tom_doerr: 将网站转换为干净的 Markdown 和 JSON,供 AI 代理和 RAG 管道使用。https://github.com/0xMassi/webclaw
webclaw 是一款开源工具,可将网站转换为干净的 Markdown、JSON 和 LLM 就绪上下文,提供 CLI、MCP 服务器、REST API 和 SDK,适用于 AI 代理和 RAG 管道。
WebLLM: 高性能浏览器内LLM推理引擎
WebLLM是一个高性能的浏览器内LLM推理引擎,它利用WebGPU进行硬件加速,并且完全兼容OpenAI API,使得开源语言模型可以在本地运行。
MD+HTML Reader
MD+HTML Reader 允许用户在专注的工作区中查看AI生成的Markdown和HTML。