检测结论:
xueag.com在《GEO 就绪度标准 v1.0》的 15 项判定中通过 11 项,得分 11 分(满分 15),判定为「不可见」。其中 A1(robots.txt 正确放行 AI 爬虫) 是最关键的缺口。
一、概述
xueag.com(农学网)这次 GEO 就绪度检测通过 11 项,得分 11 分,满分 15 分,判定为「不可见」。基础面并不差:正文不依赖 JS 渲染、HTTPS 与可达性正常、TDK 与 JSON-LD 齐备、标题层级清晰、结论前置且有 19 处可摘录结构块与 183 处具体数字,说明内容本身具备被 AI 摘录的底子。最致命的缺口集中在「被 AI 发现」和「被 AI 信任」两端:robots.txt 未声明 QwenBot、KimiBot、Kimi-SearchBot,且 Bytespider、DeepSeekBot 被写在 User-agent: * 之后,实际很可能不生效,等于对国内主流 AI 爬虫半关门;同时 llms.txt 缺失、页面无更新时间、无任何第三方引用与出处标注。修完这四项,可达满分 15 分。
二、逐项判定结果
判定时间:2026-10-06 | 依据:《GEO 就绪度标准 v1.0》 | 检测对象:xueag.com
| 项 | 检查项 | 分组 | 结果 | 关键证据 |
|---|---|---|---|---|
| A1 | robots.txt 正确放行 AI 爬虫 | 可抓取性 | 未通过 | 本站定位:国内站点,国外组为建议项(做外贸时必需);未声明(国内):QwenBot、KimiBot、Kimi-SearchBot;声明了但位置在 User-agent: * 之后:Bytespider、DeepSeekBot |
| A2 | 关键内容不依赖 JS 渲染 | 可抓取性 | 通过 | 源码中可见正文 4200 字符,h1 1 个 |
| A3 | 有 sitemap 且内容有效 | 可抓取性 | 通过 | robots.txt 声明的 https://xueag.com/sitemap.xml 有效(0 条 URL) |
| A4 | 无死链污染(非软 404) | 可抓取性 | 通过 | 探测不存在路径返回 HTTP 404 |
| A5 | 站点稳定可达 + HTTPS 有效 | 可抓取性 | 通过 | 协议 HTTPS,首页 HTTP 200,响应 87 ms |
| B1 | 每页唯一且完整的 TDK | 可理解性 | 通过 | title 30 字符,description 87 字符 |
| B2 | 结构化数据(JSON-LD) | 可理解性 | 通过 | JSON-LD 块 1 个,WebSite 有,Organization 有 |
| B3 | 标题层级语义化 | 可理解性 | 通过 | h1 1 个,h2 14 个 |
| B4 | 有 llms.txt(纯文本) | 可理解性 | 未通过 | llms.txt 返回 HTTP 404 |
| B5 | 主体与作者信息可核验 | 可理解性 | 通过 | 备案信息 有,主体信息入口 有 |
| C1 | 结论前置 | 可引用性 | 通过 | 首屏可见文本前 120 字:农学网 - 农业知识分享平台,智慧农业种植养殖技术与政策解读 欢迎访问农学网(学农网) · 知农惠农兴农 收藏本站 关于… |
| C2 | 存在可摘录结构块 | 可引用性 | 通过 | 列表/表格标签 19 个 |
| C3 | 有独家数据或一手信息 | 可引用性 | 通过 | 含具体数字 183 处 |
| C4 | 有明确更新时间 | 可引用性 | 未通过 | 页面可见更新时间为 无 |
| C5 | 有第三方引用证据 | 可引用性 | 未通过 | 正文可见区既没有指向第三方平台的引用链接,也没有出处标注、也没有 sameAs 站外身份声明 |
内页抽样(按模板各取一页)
首页之外,按 URL 形态从站点地图里各取一个代表页面,看内页的 TDK、正文、结构化数据、更新时间与内链。本节只作补充证据,不参与 15 项评分——评分口径对全站一致,仍按首页判定。
| 抽样页面 | HTTP | TDK | 可见正文 | JSON-LD | 更新时间 | 内链 |
|---|---|---|---|---|---|---|
/2.html |
200 | title 10 / desc 0 | 1038 字 | 1 | 无 | 118 |
/news/zhi-hui-nong-ye |
200 | title 17 / desc 55 | 5361 字 | 1 | 有 | 162 |
/news/zheng-ce-jie-du |
200 | title 19 / desc 58 | 5676 字 | 1 | 有 | 163 |
小结:抽样的 3 个内页中,TDK 完整 2 个、含结构化数据 3 个、标注更新时间 2 个。
内页 TDK 不完整时,AI 抓到内页只能看到一个泛化标题。修法与首页相同(见第三节 B1 的片段),但要改的是列表页/详情页模板,而不是某一篇文章。
三、优先修复(含可直接复制粘贴的代码)
按投入产出排序——「可抓取性」组的问题优先,不修完这一组,后面的优化都不会被 AI 看到。每一项都给出可以整段复制的修复内容,把域名、品牌名和你实际缺失的爬虫都填好了。
1. A1 · robots.txt 正确放行 AI 爬虫
- 现状:本站定位:国内站点,国外组为建议项(做外贸时必需);未声明(国内):QwenBot、KimiBot、Kimi-SearchBot;声明了但位置在 User-agent: * 之后:Bytespider、DeepSeekBot
- 怎么改:把每个 AI 爬虫的 User-agent + Allow: / 放在 User-agent: * 之前——爬虫只匹配第一条命中的规则。国外组建议补齐(做外贸时必需)。
可直接复制的修复
放到:站点根目录 /robots.txt(一个纯文本文件,整份替换即可)
# 【1】AI 爬虫(下面按 国内 / 国外核心 / 国外建议 / 用途令牌 分组,逐个显式声明)
# 爬虫只匹配第一条命中自己的规则组,写在 * 后面等于没写
# ① 国内 AI 爬虫(中文 AI 流量的入口,硬门槛)
User-agent: Bytespider
Allow: /
# 对应:豆包
User-agent: DeepSeekBot
Allow: /
# 对应:DeepSeek
User-agent: QwenBot
Allow: /
# 对应:通义千问 / 元宝
User-agent: KimiBot
Allow: /
# 对应:Kimi(模型训练)
User-agent: Kimi-SearchBot
Allow: /
# 对应:Kimi 搜索
# ② 国外 AI 爬虫 · 核心(外贸站点最关键,硬门槛)
User-agent: GPTBot
Allow: /
# 对应:ChatGPT(训练) # 你已声明过,这里保持一致
User-agent: OAI-SearchBot
Allow: /
# 对应:ChatGPT(搜索索引) # 你已声明过,这里保持一致
User-agent: ClaudeBot
Allow: /
# 对应:Claude(训练) # 你已声明过,这里保持一致
User-agent: Claude-SearchBot
Allow: /
# 对应:Claude(搜索索引) # 你已声明过,这里保持一致
User-agent: PerplexityBot
Allow: /
# 对应:Perplexity # 你已声明过,这里保持一致
User-agent: meta-externalagent
Allow: /
# 对应:Meta AI # 你已声明过,这里保持一致
# ③ 国外 AI 爬虫 · 建议(覆盖越全越好,不作硬门槛)
User-agent: ChatGPT-User
Allow: /
# 对应:ChatGPT(用户触发)
User-agent: Claude-User
Allow: /
# 对应:Claude(用户触发)
User-agent: Perplexity-User
Allow: /
# 对应:Perplexity(用户触发)
User-agent: Google-CloudVertexBot
Allow: /
# 对应:Google Vertex AI
User-agent: meta-externalfetcher
Allow: /
# 对应:Meta(用户触发)
User-agent: FacebookBot
Allow: /
# 对应:Meta / Facebook
User-agent: Amazonbot
Allow: /
# 对应:Amazon / Alexa
User-agent: Applebot
Allow: /
# 对应:Apple Siri / Spotlight
User-agent: CCBot
Allow: /
# 对应:Common Crawl(众多模型的训练语料)
User-agent: DuckAssistBot
Allow: /
# 对应:DuckDuckGo AI
User-agent: MistralAI-User
Allow: /
# 对应:Mistral(用户触发)
# ④ AI 用途令牌(不会单独来抓,只在 robots.txt 生效)
# Allow 表示你授权 AI 使用你的内容;要保留内容可改成 Disallow。
User-agent: Google-Extended
Allow: /
# 对应:Gemini / Vertex AI
User-agent: Applebot-Extended
Allow: /
# 对应:Apple Intelligence
# ② 本次检测显示以下爬虫你已经声明过,无需重复:
# GPTBot、OAI-SearchBot、ClaudeBot、Claude-SearchBot、PerplexityBot、meta-externalagent
# 【2】通用规则放最后
User-agent: *
Allow: /
Disallow: /admin/
Disallow: /api/
# 【3】声明站点地图
Sitemap: https://xueag.com/sitemap.xml
本次检测里,这个文件缺少 QwenBot、KimiBot、Kimi-SearchBot(对应 通义千问 / 元宝、Kimi(模型训练)、Kimi 搜索)。 另有 Bytespider、DeepSeekBot 写在了
User-agent: *之后,等同于没声明。
2. B4 · 有 llms.txt(纯文本)
- 现状:llms.txt 返回 HTTP 404
- 怎么改:在站点根目录放置纯文本 llms.txt,写明定位、核心页面与可引用结论;注意别让服务器把首页 HTML 返回在这个路径上。
可直接复制的修复
放到:站点根目录 /llms.txt。注意别让服务器把首页 HTML 返回在这个路径上(软 404),检测时会判为无效
# 农学网
> 一句话定位:农学网 是做什么的,服务谁,有什么独家数据。
## 核心页面
- [首页](https://xueag.com/):一句话说明
- [产品/服务页](https://xueag.com/xxx):一句话说明
## 可引用的结论(AI 可直接摘录)
- 结论一,带具体数字,例如「样本 120 个,平均 8.6 分」
- 结论二,带时间范围
## 引用格式
引用建议表述:农学网《标题》,2026
更新时间:2026-09-19
3. C4 · 有明确更新时间
- 现状:页面可见更新时间为 无
- 怎么改:在页面显著位置标注「更新于 YYYY-MM-DD」,让 AI 能判断内容新鲜度。
可直接复制的修复
可见文字 + datetime 属性 + JSON-LD 三者都要:AI 需要能读到、也能机器解析出这个时间
<p class="updated">更新于 <time datetime="2026-09-19">2026-09-19</time></p>
<script type="application/ld+json">
{"@context":"https://schema.org","@type":"Article",
"datePublished":"2026-09-01","dateModified":"2026-09-19"}
</script>
四、重点问题分析
一、robots.txt 对国内 AI 爬虫放行不完整(A1)
现状:本站定位为国内站点,但 robots.txt 中完全没有声明 QwenBot、KimiBot、Kimi-SearchBot 三个国内主流 AI 爬虫;Bytespider、DeepSeekBot 虽然写了,却放在 User-agent: * 之后。
后果:爬虫匹配规则时只认第一条命中的 User-agent 段。被写在 User-agent: * 之后的专属声明,等于被通配规则抢先命中,实际按通配规则处理——如果通配段是禁止抓取,这两个爬虫就进不来;即使通配段是放行,专属声明的 Allow 也没有任何额外效力。而完全未声明的三个爬虫,则只能落到通配规则上,站点无法对它们做任何明确的放行表达。结果是:内容再适合引用,AI 也拿不到,后续所有可理解性、可引用性的优化都无从谈起。
修改要点:在 robots.txt 顶部、User-agent: * 之前,为每个 AI 爬虫单独成段,写 User-agent 加 Allow: /,顺序为「专属段在前、通配段在后」。国内组至少补齐 QwenBot、KimiBot、Kimi-SearchBot;Bytespider、DeepSeekBot 从通配段后移到通配段前。国外组(GPTBot、ClaudeBot、PerplexityBot 等)属于建议项,做外贸时再补。
二、缺少 llms.txt(B4)
现状:访问 https://xueag.com/llms.txt 返回 HTTP 404,站点没有面向大模型的纯文本说明文件。
后果:AI 引擎在抓取站点时,缺少一份低成本的「站点说明书」,只能靠逐页解析 HTML 去猜站点定位、核心栏目和哪些结论值得引用。相比结构化数据,llms.txt 是更直接、更省 token 的入口,缺失会让站点在同类农业知识站点中失去一次被优先理解的机会。
修改要点:在站点根目录新建纯文本 llms.txt,用 Markdown 风格写明站点定位(农业知识分享、智慧种植养殖技术与政策解读)、核心页面链接与各页可引用的结论摘要。注意配置服务器,确保该路径返回 llms.txt 本身,而不是被重写成首页 HTML。
三、页面没有可见更新时间(C4)
现状:页面可见区域没有任何更新时间标注,检测结果为「无」。
后果:AI 在决定是否引用一条农业技术或政策解读时,内容新鲜度是重要判断依据。没有时间戳,模型无法判断这条信息是今年还是三年前,倾向于选择有明确时效标注的竞争来源,尤其在政策类内容上更明显。
修改要点:在正文顶部或标题下方显著位置加一行「更新于 YYYY-MM-DD」,同时把同一日期写入 JSON-LD 的 dateModified 字段,做到页面可见与结构化数据一致。
四、缺少第三方引用与出处标注(C5)
现状:正文可见区既没有指向第三方平台的引用链接,也没有出处标注,JSON-LD 中也没有 sameAs 站外身份声明。
后果:AI 判断一个来源是否可信,会看它是否被外部提及、是否交代数据来源。全站自说自话,会削弱模型对内容权威性的判断,183 处具体数字因为没有出处,也难以被当作可核验的一手信息引用。
修改要点:两条路任选其一或并行。一是把站内一手数据整理成可独立引用的结论块,发布到知乎、CSDN 等平台,并在正文中链回;二是在正文中标注「来源:××」,并在 JSON-LD 的 sameAs 中声明站外身份主页。
五、行动建议
重写 robots.txt,把 AI 爬虫专属段全部前移。文件为站点根目录 /robots.txt:先写 User-agent: QwenBot 换行 Allow: /,再依次补 KimiBot、Kimi-SearchBot、Bytespider、DeepSeekBot,每段独立;最后才写 User-agent: *。改完后用浏览器直接访问 https://xueag.com/robots.txt 确认顺序。
新建 /llms.txt。用纯文本写三块内容:站点定位一句话、核心页面清单(首页、栏目页、代表性文章页各若干)、每页可引用的结论摘要。同时检查服务器配置,确保 /llms.txt 返回该文本文件本身,不被重写规则指向首页。
在模板层加更新时间。找到文章页与栏目页的公共模板文件(如 header 或 article 模板),在标题下方插入「更新于 YYYY-MM-DD」的可见文本,日期取文章最后修改时间;同步在页面 JSON-LD 中补 dateModified 字段,与可见日期保持一致。
补 sameAs 与出处标注。在现有 JSON-LD 的 Organization 与 WebSite 节点中增加 sameAs 数组,填入知乎、CSDN 等站外身份主页地址;在引用外部数据的正文段落末尾加「来源:××」并附链接。
补 sitemap 内容。robots.txt 中声明的 https://xueag.com/sitemap.xml 目前为 0 条 URL,虽判定通过,但空 sitemap 无法帮助 AI 发现页面。建议在生成流程中把已发布的文章页与栏目页写入 sitemap,优先提交更新频率高的政策解读与技术类页面。
六、外部引用线索(仅证据,不计分)
未检出站外提及:外部索引里还没有提到
xueag.com的页面。检索方式:Bing RSS,查询式
"xueag.com" -site:xueag.com(打开这次检索)本节只作证据、不计分:搜索结果随时变化,把它纳入评分会破坏本报告「同一站点重复检测结果一致」的承诺。
七、数据来源与复核方式
- 检测方式:程序抓取首页 HTML、robots.txt、sitemap.xml、llms.txt,并按标准逐项判定;每项都保留原始证据(状态码、耗时、命中的原文片段)
- 复核方式:任何人都可以用「GEO 就绪度检测」对
xueag.com重跑,规则与数据完全公开 - 局限性:只检测首页,未覆盖文章页与列表页;C5 只认站内可核验的引用痕迹(指向第三方平台的正文链接、出处标注、JSON-LD sameAs),真正的「被站外引用」见第六节,该节由搜索引擎查询得出、只作证据不计分;C1/C3 由规则推断,标准中已标注「需人工确认」;数据是 2026-10-06 的单时点快照,站点改版后结论可能变化
- 本报告由程序自动检测 + AI 撰写(撰写引擎:deepseek)。如你是本站主体,认为结论有误或希望撤下,可通过「关于我们」的联系方式告知,我们会在核实后更正或删除
附录:原始取数证据
| 资源 | HTTP | 耗时 | 大小 |
|---|---|---|---|
| 首页 HTML | 200 | 87 ms | 50712 B |
| robots.txt | 200 | 114 ms | 7675 B |
| sitemap.xml | 200 | 313 ms | 333 B |
| llms.txt | 404 | 117 ms | — B |
| 不存在路径探测 | 404 | 95 ms | — B |
八、如何引用本报告
安企 GEO《xueag.com GEO 就绪度检测报告》(2026-10-06):该站按《GEO 就绪度标准 v1.0》15 项判定通过 11 项,得分 11 分(满分 15),判定「不可见」。首要缺口为 A1「robots.txt 正确放行 AI 爬虫」。
- 报告名称:xueag.com GEO 就绪度检测报告
- 检测日期:2026-10-06
- 发布方:安企 GEO(AnqiWeb GEO)
- 建议引用格式:xueag.com GEO 就绪度检测报告,安企 GEO,2026
复检记录
| 复检时间 | 得分 | 变化 | 本次新通过 | 本次仍未通过 |
|---|---|---|---|---|
| 2026-10-06 | 11 分(满分 15) | +1 分 | B2 | 无 |
- 复检口径与首次检测完全一致:同一套 15 项条件、同一工具、同一判定代码;
- 分数变动的来源就是上面两列——新通过的项说明这一轮改动生效了,仍未通过的项是下一步要做的事。