云聚 AI Token Plan 满 199 减 35 元
port:80 AI Junkie
AI 重度玩家的工程笔记本

AI 搜索新现状:94.8% 的网站从未被 AI 助手提及,仅 8.9% 正确配置爬虫策略

云聚 AI Token Plan 满 199 减 35 元

根据“AI 可见性指数”发布的最新研究报告,基于对 458 个域名和 531 次网站审计的深入分析,揭示了当前中小企业在 AI 搜索时代的生存现状。数据显示,搜索引擎正从传统链接列表向直接提供答案转型,但高达 94.8% 的受审计网站从未出现在 ChatGPT、Claude、Gemini 或 Perplexity 等AI助手的回答中。在 5,978 次针对购买意图的测试回答中,仅有 1.9% 提及了相关业务。值得注意的是,Gemini 提及率最高(2.9%),略高于 ChatGPT(1.7%)和 Claude(1.6%)。技术层面,仅有 8.9% 的网站利用 robots.txt 屏蔽了 AI 爬虫,且策略存在误区:大部分网站屏蔽了用于模型训练的爬虫(如 GPTBot),却忽视了用于实时检索的爬虫(如 OAI-SearchBot)。由于盲目屏蔽检索爬虫会直接导致网站无法被引用,这种策略上的混淆严重损害了企业的 AI 流量入口。此外,仅有 19.3% 的网站发布了关键的 LocalBusiness 结构化数据,导致 AI 难以识别其业务信息。

事件分析

该报告揭示了从传统 SEO 向“AI 可见性”转型的紧迫性。随着用户行为向 AI Agent 偏移,单纯的网站收录已不再保证流量,转化为 AI 回答中的“答案存在感”才是核心指标。数据显示,绝大多数企业尚未适应这一变化,特别是结构化数据的低普及率,构成了 AI 准确引用实体信息的主要技术障碍。更关键的是,报告指出了一个普遍的技术认知偏差:网站所有者往往未能区分“模型训练”与“实时检索”爬虫的区别。屏蔽训练爬虫主要影响未来的模型迭代,而屏蔽检索爬虫则直接切断当前的流量入口。这种精细化管理能力的缺失,解释了为何绝大多数网站在 AI 时代处于“隐形”状态。未来,针对 AI 检索的协议优化和数据标记将是技术栈的必选项。

💡 核心观点:AI 引擎已确立为新的流量分发中心,区分训练与检索爬虫的精细化管理及结构化数据适配,将是企业打破 AI 隐形墙的关键。

阿里云 OPC 一人公司创业装备库

原文链接:Hacker News

阿里云函数计算 一键部署 AI 大模型
赞(0)
未经允许不得转载:80aj » AI 搜索新现状:94.8% 的网站从未被 AI 助手提及,仅 8.9% 正确配置爬虫策略
赞助推荐 FreeModel.dev Claude Code 中转
阿里云函数计算 一键部署 AI 大模型