检测结论:xueag.com 在《GEO 就绪度标准 v1.0》的 15 项判定中通过 11 项,得分 11 分(满分 15),判定为「不可见」。其中 A1(robots.txt 正确放行 AI 爬虫) 是最关键的缺口。

一、概述

xueag.com(农学网)这次 GEO 就绪度检测通过 11 项,得分 11 分,满分 15 分,判定为「不可见」。基础面并不差:正文不依赖 JS 渲染、HTTPS 与可达性正常、TDK 与 JSON-LD 齐备、标题层级清晰、结论前置且有 19 处可摘录结构块与 183 处具体数字,说明内容本身具备被 AI 摘录的底子。最致命的缺口集中在「被 AI 发现」和「被 AI 信任」两端:robots.txt 未声明 QwenBot、KimiBot、Kimi-SearchBot,且 Bytespider、DeepSeekBot 被写在 User-agent: * 之后,实际很可能不生效,等于对国内主流 AI 爬虫半关门;同时 llms.txt 缺失、页面无更新时间、无任何第三方引用与出处标注。修完这四项,可达满分 15 分。

二、逐项判定结果

判定时间:2026-10-06 | 依据:《GEO 就绪度标准 v1.0》 | 检测对象:xueag.com

项 检查项 分组 结果 关键证据
A1 robots.txt 正确放行 AI 爬虫 可抓取性 未通过 本站定位:国内站点,国外组为建议项(做外贸时必需);未声明(国内):QwenBot、KimiBot、Kimi-SearchBot;声明了但位置在 User-agent: * 之后:Bytespider、DeepSeekBot
A2 关键内容不依赖 JS 渲染 可抓取性 通过 源码中可见正文 4200 字符,h1 1 个
A3 有 sitemap 且内容有效 可抓取性 通过 robots.txt 声明的 https://xueag.com/sitemap.xml 有效(0 条 URL)
A4 无死链污染(非软 404) 可抓取性 通过 探测不存在路径返回 HTTP 404
A5 站点稳定可达 + HTTPS 有效 可抓取性 通过 协议 HTTPS,首页 HTTP 200,响应 87 ms
B1 每页唯一且完整的 TDK 可理解性 通过 title 30 字符,description 87 字符
B2 结构化数据(JSON-LD) 可理解性 通过 JSON-LD 块 1 个,WebSite 有,Organization 有
B3 标题层级语义化 可理解性 通过 h1 1 个,h2 14 个
B4 有 llms.txt(纯文本) 可理解性 未通过 llms.txt 返回 HTTP 404
B5 主体与作者信息可核验 可理解性 通过 备案信息 有,主体信息入口 有
C1 结论前置 可引用性 通过 首屏可见文本前 120 字:农学网 - 农业知识分享平台,智慧农业种植养殖技术与政策解读 欢迎访问农学网(学农网) · 知农惠农兴农 收藏本站 关于…
C2 存在可摘录结构块 可引用性 通过 列表/表格标签 19 个
C3 有独家数据或一手信息 可引用性 通过 含具体数字 183 处
C4 有明确更新时间 可引用性 未通过 页面可见更新时间为 无
C5 有第三方引用证据 可引用性 未通过 正文可见区既没有指向第三方平台的引用链接,也没有出处标注、也没有 sameAs 站外身份声明

内页抽样(按模板各取一页)

首页之外,按 URL 形态从站点地图里各取一个代表页面,看内页的 TDK、正文、结构化数据、更新时间与内链。本节只作补充证据,不参与 15 项评分——评分口径对全站一致,仍按首页判定。

抽样页面 HTTP TDK 可见正文 JSON-LD 更新时间 内链
/2.html 200 title 10 / desc 0 1038 字 1 无 118
/news/zhi-hui-nong-ye 200 title 17 / desc 55 5361 字 1 有 162
/news/zheng-ce-jie-du 200 title 19 / desc 58 5676 字 1 有 163

小结:抽样的 3 个内页中,TDK 完整 2 个、含结构化数据 3 个、标注更新时间 2 个。

内页 TDK 不完整时,AI 抓到内页只能看到一个泛化标题。修法与首页相同(见第三节 B1 的片段),但要改的是列表页/详情页模板,而不是某一篇文章。

三、优先修复(含可直接复制粘贴的代码)

按投入产出排序——「可抓取性」组的问题优先,不修完这一组,后面的优化都不会被 AI 看到。每一项都给出可以整段复制的修复内容,把域名、品牌名和你实际缺失的爬虫都填好了。

1. A1 · robots.txt 正确放行 AI 爬虫

  • 现状:本站定位:国内站点,国外组为建议项(做外贸时必需);未声明(国内):QwenBot、KimiBot、Kimi-SearchBot;声明了但位置在 User-agent: * 之后:Bytespider、DeepSeekBot
  • 怎么改:把每个 AI 爬虫的 User-agent + Allow: / 放在 User-agent: * 之前——爬虫只匹配第一条命中的规则。国外组建议补齐(做外贸时必需)。

可直接复制的修复

放到:站点根目录 /robots.txt(一个纯文本文件,整份替换即可)

# 【1】AI 爬虫(下面按 国内 / 国外核心 / 国外建议 / 用途令牌 分组,逐个显式声明)
#       爬虫只匹配第一条命中自己的规则组,写在 * 后面等于没写

# ① 国内 AI 爬虫(中文 AI 流量的入口,硬门槛)

User-agent: Bytespider
Allow: /
# 对应:豆包

User-agent: DeepSeekBot
Allow: /
# 对应:DeepSeek

User-agent: QwenBot
Allow: /
# 对应:通义千问 / 元宝

User-agent: KimiBot
Allow: /
# 对应:Kimi(模型训练)

User-agent: Kimi-SearchBot
Allow: /
# 对应:Kimi 搜索

# ② 国外 AI 爬虫 · 核心(外贸站点最关键,硬门槛)

User-agent: GPTBot
Allow: /
# 对应:ChatGPT(训练)  # 你已声明过,这里保持一致

User-agent: OAI-SearchBot
Allow: /
# 对应:ChatGPT(搜索索引)  # 你已声明过,这里保持一致

User-agent: ClaudeBot
Allow: /
# 对应:Claude(训练)  # 你已声明过,这里保持一致

User-agent: Claude-SearchBot
Allow: /
# 对应:Claude(搜索索引)  # 你已声明过,这里保持一致

User-agent: PerplexityBot
Allow: /
# 对应:Perplexity  # 你已声明过,这里保持一致

User-agent: meta-externalagent
Allow: /
# 对应:Meta AI  # 你已声明过,这里保持一致

# ③ 国外 AI 爬虫 · 建议(覆盖越全越好,不作硬门槛)

User-agent: ChatGPT-User
Allow: /
# 对应:ChatGPT(用户触发)

User-agent: Claude-User
Allow: /
# 对应:Claude(用户触发)

User-agent: Perplexity-User
Allow: /
# 对应:Perplexity(用户触发)

User-agent: Google-CloudVertexBot
Allow: /
# 对应:Google Vertex AI

User-agent: meta-externalfetcher
Allow: /
# 对应:Meta(用户触发)

User-agent: FacebookBot
Allow: /
# 对应:Meta / Facebook

User-agent: Amazonbot
Allow: /
# 对应:Amazon / Alexa

User-agent: Applebot
Allow: /
# 对应:Apple Siri / Spotlight

User-agent: CCBot
Allow: /
# 对应:Common Crawl(众多模型的训练语料)

User-agent: DuckAssistBot
Allow: /
# 对应:DuckDuckGo AI

User-agent: MistralAI-User
Allow: /
# 对应:Mistral(用户触发)

# ④ AI 用途令牌(不会单独来抓,只在 robots.txt 生效)
#    Allow 表示你授权 AI 使用你的内容;要保留内容可改成 Disallow。

User-agent: Google-Extended
Allow: /
# 对应:Gemini / Vertex AI

User-agent: Applebot-Extended
Allow: /
# 对应:Apple Intelligence

# ② 本次检测显示以下爬虫你已经声明过,无需重复:
#    GPTBot、OAI-SearchBot、ClaudeBot、Claude-SearchBot、PerplexityBot、meta-externalagent

# 【2】通用规则放最后
User-agent: *
Allow: /
Disallow: /admin/
Disallow: /api/

# 【3】声明站点地图
Sitemap: https://xueag.com/sitemap.xml

本次检测里,这个文件缺少 QwenBot、KimiBot、Kimi-SearchBot(对应 通义千问 / 元宝、Kimi(模型训练)、Kimi 搜索)。 另有 Bytespider、DeepSeekBot 写在了 User-agent: * 之后,等同于没声明。

2. B4 · 有 llms.txt(纯文本)

  • 现状:llms.txt 返回 HTTP 404
  • 怎么改:在站点根目录放置纯文本 llms.txt,写明定位、核心页面与可引用结论;注意别让服务器把首页 HTML 返回在这个路径上。

可直接复制的修复

放到:站点根目录 /llms.txt。注意别让服务器把首页 HTML 返回在这个路径上(软 404),检测时会判为无效

# 农学网

> 一句话定位:农学网 是做什么的,服务谁,有什么独家数据。

## 核心页面

- [首页](https://xueag.com/):一句话说明
- [产品/服务页](https://xueag.com/xxx):一句话说明

## 可引用的结论(AI 可直接摘录)

- 结论一,带具体数字,例如「样本 120 个,平均 8.6 分」
- 结论二,带时间范围

## 引用格式

引用建议表述:农学网《标题》,2026

更新时间:2026-09-19

3. C4 · 有明确更新时间

  • 现状:页面可见更新时间为 无
  • 怎么改:在页面显著位置标注「更新于 YYYY-MM-DD」,让 AI 能判断内容新鲜度。

可直接复制的修复

可见文字 + datetime 属性 + JSON-LD 三者都要:AI 需要能读到、也能机器解析出这个时间

<p class="updated">更新于 <time datetime="2026-09-19">2026-09-19</time></p>
<script type="application/ld+json">
{"@context":"https://schema.org","@type":"Article",
 "datePublished":"2026-09-01","dateModified":"2026-09-19"}
</script>

四、重点问题分析

一、robots.txt 对国内 AI 爬虫放行不完整(A1)

现状:本站定位为国内站点,但 robots.txt 中完全没有声明 QwenBot、KimiBot、Kimi-SearchBot 三个国内主流 AI 爬虫;Bytespider、DeepSeekBot 虽然写了,却放在 User-agent: * 之后。

后果:爬虫匹配规则时只认第一条命中的 User-agent 段。被写在 User-agent: * 之后的专属声明,等于被通配规则抢先命中,实际按通配规则处理——如果通配段是禁止抓取,这两个爬虫就进不来;即使通配段是放行,专属声明的 Allow 也没有任何额外效力。而完全未声明的三个爬虫,则只能落到通配规则上,站点无法对它们做任何明确的放行表达。结果是:内容再适合引用,AI 也拿不到,后续所有可理解性、可引用性的优化都无从谈起。

修改要点:在 robots.txt 顶部、User-agent: * 之前,为每个 AI 爬虫单独成段,写 User-agent 加 Allow: /,顺序为「专属段在前、通配段在后」。国内组至少补齐 QwenBot、KimiBot、Kimi-SearchBot;Bytespider、DeepSeekBot 从通配段后移到通配段前。国外组(GPTBot、ClaudeBot、PerplexityBot 等)属于建议项,做外贸时再补。

二、缺少 llms.txt(B4)

现状:访问 https://xueag.com/llms.txt 返回 HTTP 404,站点没有面向大模型的纯文本说明文件。

后果:AI 引擎在抓取站点时,缺少一份低成本的「站点说明书」,只能靠逐页解析 HTML 去猜站点定位、核心栏目和哪些结论值得引用。相比结构化数据,llms.txt 是更直接、更省 token 的入口,缺失会让站点在同类农业知识站点中失去一次被优先理解的机会。

修改要点:在站点根目录新建纯文本 llms.txt,用 Markdown 风格写明站点定位(农业知识分享、智慧种植养殖技术与政策解读)、核心页面链接与各页可引用的结论摘要。注意配置服务器,确保该路径返回 llms.txt 本身,而不是被重写成首页 HTML。

三、页面没有可见更新时间(C4)

现状:页面可见区域没有任何更新时间标注,检测结果为「无」。

后果:AI 在决定是否引用一条农业技术或政策解读时,内容新鲜度是重要判断依据。没有时间戳,模型无法判断这条信息是今年还是三年前,倾向于选择有明确时效标注的竞争来源,尤其在政策类内容上更明显。

修改要点:在正文顶部或标题下方显著位置加一行「更新于 YYYY-MM-DD」,同时把同一日期写入 JSON-LD 的 dateModified 字段,做到页面可见与结构化数据一致。

四、缺少第三方引用与出处标注(C5)

现状:正文可见区既没有指向第三方平台的引用链接,也没有出处标注,JSON-LD 中也没有 sameAs 站外身份声明。

后果:AI 判断一个来源是否可信,会看它是否被外部提及、是否交代数据来源。全站自说自话,会削弱模型对内容权威性的判断,183 处具体数字因为没有出处,也难以被当作可核验的一手信息引用。

修改要点:两条路任选其一或并行。一是把站内一手数据整理成可独立引用的结论块,发布到知乎、CSDN 等平台,并在正文中链回;二是在正文中标注「来源:××」,并在 JSON-LD 的 sameAs 中声明站外身份主页。

五、行动建议

  1. 重写 robots.txt,把 AI 爬虫专属段全部前移。文件为站点根目录 /robots.txt:先写 User-agent: QwenBot 换行 Allow: /,再依次补 KimiBot、Kimi-SearchBot、Bytespider、DeepSeekBot,每段独立;最后才写 User-agent: *。改完后用浏览器直接访问 https://xueag.com/robots.txt 确认顺序。

  2. 新建 /llms.txt。用纯文本写三块内容:站点定位一句话、核心页面清单(首页、栏目页、代表性文章页各若干)、每页可引用的结论摘要。同时检查服务器配置,确保 /llms.txt 返回该文本文件本身,不被重写规则指向首页。

  3. 在模板层加更新时间。找到文章页与栏目页的公共模板文件(如 header 或 article 模板),在标题下方插入「更新于 YYYY-MM-DD」的可见文本,日期取文章最后修改时间;同步在页面 JSON-LD 中补 dateModified 字段,与可见日期保持一致。

  4. 补 sameAs 与出处标注。在现有 JSON-LD 的 Organization 与 WebSite 节点中增加 sameAs 数组,填入知乎、CSDN 等站外身份主页地址;在引用外部数据的正文段落末尾加「来源:××」并附链接。

  5. 补 sitemap 内容。robots.txt 中声明的 https://xueag.com/sitemap.xml 目前为 0 条 URL,虽判定通过,但空 sitemap 无法帮助 AI 发现页面。建议在生成流程中把已发布的文章页与栏目页写入 sitemap,优先提交更新频率高的政策解读与技术类页面。

六、外部引用线索(仅证据,不计分)

  • 未检出站外提及:外部索引里还没有提到 xueag.com 的页面。

  • 检索方式:Bing RSS,查询式 "xueag.com" -site:xueag.com(打开这次检索)

  • 本节只作证据、不计分:搜索结果随时变化,把它纳入评分会破坏本报告「同一站点重复检测结果一致」的承诺。

七、数据来源与复核方式

  • 检测方式:程序抓取首页 HTML、robots.txt、sitemap.xml、llms.txt,并按标准逐项判定;每项都保留原始证据(状态码、耗时、命中的原文片段)
  • 复核方式:任何人都可以用「GEO 就绪度检测」对 xueag.com 重跑,规则与数据完全公开
  • 局限性:只检测首页,未覆盖文章页与列表页;C5 只认站内可核验的引用痕迹(指向第三方平台的正文链接、出处标注、JSON-LD sameAs),真正的「被站外引用」见第六节,该节由搜索引擎查询得出、只作证据不计分;C1/C3 由规则推断,标准中已标注「需人工确认」;数据是 2026-10-06 的单时点快照,站点改版后结论可能变化
  • 本报告由程序自动检测 + AI 撰写(撰写引擎:deepseek)。如你是本站主体,认为结论有误或希望撤下,可通过「关于我们」的联系方式告知,我们会在核实后更正或删除

附录:原始取数证据

资源 HTTP 耗时 大小
首页 HTML 200 87 ms 50712 B
robots.txt 200 114 ms 7675 B
sitemap.xml 200 313 ms 333 B
llms.txt 404 117 ms — B
不存在路径探测 404 95 ms — B

八、如何引用本报告

安企 GEO《xueag.com GEO 就绪度检测报告》(2026-10-06):该站按《GEO 就绪度标准 v1.0》15 项判定通过 11 项,得分 11 分(满分 15),判定「不可见」。首要缺口为 A1「robots.txt 正确放行 AI 爬虫」。

  • 报告名称:xueag.com GEO 就绪度检测报告
  • 检测日期:2026-10-06
  • 发布方:安企 GEO(AnqiWeb GEO)
  • 建议引用格式:xueag.com GEO 就绪度检测报告,安企 GEO,2026

复检记录

复检时间 得分 变化 本次新通过 本次仍未通过
2026-10-06 11 分(满分 15) +1 分 B2 无
  • 复检口径与首次检测完全一致:同一套 15 项条件、同一工具、同一判定代码;
  • 分数变动的来源就是上面两列——新通过的项说明这一轮改动生效了,仍未通过的项是下一步要做的事。