针对现有 URL 抓取服务(如 Jina、Firecrawl)在 Token 浪费和鉴权方面的短板,作者发布了一款升级版 Bookmarklet(书签脚本)。该工具允许用户直接在浏览器本地将网页可视文本(如技术文档)转化为 Markdown 格式。这种方法不仅能剔除无关的导航菜单以节省 AI Token 成本,还能有效绕过远程抓取的登录验证障碍,为 AI 数据预处理提供了一种更精准、低成本的本地化解决方案。
原文链接:Linux.do
针对现有 URL 抓取服务(如 Jina、Firecrawl)在 Token 浪费和鉴权方面的短板,作者发布了一款升级版 Bookmarklet(书签脚本)。该工具允许用户直接在浏览器本地将网页可视文本(如技术文档)转化为 Markdown 格式。这种方法不仅能剔除无关的导航菜单以节省 AI Token 成本,还能有效绕过远程抓取的登录验证障碍,为 AI 数据预处理提供了一种更精准、低成本的本地化解决方案。
原文链接:Linux.do