检测结论:shidianguwen.com 在《GEO 就绪度标准 v1.0》的 15 项判定中通过 7 项,得分 7 分(满分 15),判定为「不可见」。其中 A1(robots.txt 正确放行 AI 爬虫) 是最关键的缺口。

一、概述

shidianguwen.com 这次 7 分,判定为不可见。站点基础不差:HTTPS 与首页响应正常,sitemap 有效,404 处理干净,TDK 完整,正文有 8432 字符,还带 548 处具体数字,说明有可被引用的素材。最致命的缺口集中在两个地方:一是 AI 爬虫没有被明确放行,Bytespider、DeepSeekBot、QwenBot、KimiBot、Kimi-SearchBot 均未在 robots.txt 中声明,抓取入口本身就不通畅;二是页面缺少让机器读懂的结构,JSON-LD 为 0 个、h1 为 0 个、llms.txt 返回 404,主体与作者信息、更新时间、第三方引用证据也全部缺失。这意味着即便内容被读到,AI 也难以判断它是什么、谁写的、何时更新、是否可信。修完这些项可达满分 15 分。

二、逐项判定结果

判定时间:2026-09-21 | 依据:《GEO 就绪度标准 v1.0》 | 检测对象:shidianguwen.com

项 检查项 分组 结果 关键证据
A1 robots.txt 正确放行 AI 爬虫 可抓取性 未通过 本站定位:国内站点,国外组为建议项(做外贸时必需);未声明(国内):Bytespider、DeepSeekBot、QwenBot、KimiBot、Kimi-SearchBot
A2 关键内容不依赖 JS 渲染 可抓取性 未通过 源码中可见正文 8432 字符,h1 0 个
A3 有 sitemap 且内容有效 可抓取性 通过 sitemap.xml HTTP 200,内容有效
A4 无死链污染(非软 404) 可抓取性 通过 探测不存在路径返回 HTTP 404
A5 站点稳定可达 + HTTPS 有效 可抓取性 通过 协议 HTTPS,首页 HTTP 200,响应 76 ms
B1 每页唯一且完整的 TDK 可理解性 通过 title 15 字符,description 109 字符
B2 结构化数据(JSON-LD) 可理解性 未通过 JSON-LD 块 0 个,WebSite 无,Organization 无
B3 标题层级语义化 可理解性 未通过 h1 0 个,h2 50 个
B4 有 llms.txt(纯文本) 可理解性 未通过 llms.txt 返回 HTTP 404
B5 主体与作者信息可核验 可理解性 未通过 备案信息 有,主体信息入口 无
C1 结论前置 可引用性 通过 首屏可见文本前 120 字:诗典古文分享 - 诗典古文分享 诗典古文 首页 古诗词 词牌名 诗词名句 诗句赏析 古诗考题 专题 古籍 诗典古文导航 …
C2 存在可摘录结构块 可引用性 通过 列表/表格标签 15 个
C3 有独家数据或一手信息 可引用性 通过 含具体数字 548 处
C4 有明确更新时间 可引用性 未通过 页面可见更新时间为 无
C5 有第三方引用证据 可引用性 未通过 正文可见区既没有指向第三方平台的引用链接,也没有出处标注、也没有 sameAs 站外身份声明

内页抽样(按模板各取一页)

首页之外,按 URL 形态从站点地图里各取一个代表页面,看内页的 TDK、正文、结构化数据、更新时间与内链。本节只作补充证据,不参与 15 项评分——评分口径对全站一致,仍按首页判定。

抽样页面 HTTP TDK 可见正文 JSON-LD 更新时间 内链
/poets 200 title 11 / desc 0 4477 字 1 无 197
/wei-zhi 200 title 11 / desc 0 5304 字 1 无 323
/xian-qin 200 title 11 / desc 0 9439 字 1 无 323

小结:抽样的 3 个内页中,TDK 完整 0 个、含结构化数据 3 个、标注更新时间 0 个。

内页 TDK 不完整时,AI 抓到内页只能看到一个泛化标题。修法与首页相同(见第三节 B1 的片段),但要改的是列表页/详情页模板,而不是某一篇文章。

三、优先修复(含可直接复制粘贴的代码)

按投入产出排序——「可抓取性」组的问题优先,不修完这一组,后面的优化都不会被 AI 看到。每一项都给出可以整段复制的修复内容,把域名、品牌名和你实际缺失的爬虫都填好了。

1. A1 · robots.txt 正确放行 AI 爬虫

  • 现状:本站定位:国内站点,国外组为建议项(做外贸时必需);未声明(国内):Bytespider、DeepSeekBot、QwenBot、KimiBot、Kimi-SearchBot
  • 怎么改:把每个 AI 爬虫的 User-agent + Allow: / 放在 User-agent: * 之前——爬虫只匹配第一条命中的规则。国外组建议补齐(做外贸时必需)。

可直接复制的修复

放到:站点根目录 /robots.txt(一个纯文本文件,整份替换即可)

# 【1】AI 爬虫(下面按 国内 / 国外核心 / 国外建议 / 用途令牌 分组,逐个显式声明)
#       爬虫只匹配第一条命中自己的规则组,写在 * 后面等于没写

# ① 国内 AI 爬虫(中文 AI 流量的入口,硬门槛)

User-agent: Bytespider
Allow: /
# 对应:豆包

User-agent: DeepSeekBot
Allow: /
# 对应:DeepSeek

User-agent: QwenBot
Allow: /
# 对应:通义千问 / 元宝

User-agent: KimiBot
Allow: /
# 对应:Kimi(模型训练)

User-agent: Kimi-SearchBot
Allow: /
# 对应:Kimi 搜索

# ② 国外 AI 爬虫 · 核心(外贸站点最关键,硬门槛)

User-agent: GPTBot
Allow: /
# 对应:ChatGPT(训练)  # 你已声明过,这里保持一致

User-agent: OAI-SearchBot
Allow: /
# 对应:ChatGPT(搜索索引)  # 你已声明过,这里保持一致

User-agent: ClaudeBot
Allow: /
# 对应:Claude(训练)  # 你已声明过,这里保持一致

User-agent: Claude-SearchBot
Allow: /
# 对应:Claude(搜索索引)  # 你已声明过,这里保持一致

User-agent: PerplexityBot
Allow: /
# 对应:Perplexity  # 你已声明过,这里保持一致

User-agent: meta-externalagent
Allow: /
# 对应:Meta AI  # 你已声明过,这里保持一致

# ③ 国外 AI 爬虫 · 建议(覆盖越全越好,不作硬门槛)

User-agent: ChatGPT-User
Allow: /
# 对应:ChatGPT(用户触发)

User-agent: Claude-User
Allow: /
# 对应:Claude(用户触发)

User-agent: Perplexity-User
Allow: /
# 对应:Perplexity(用户触发)

User-agent: Google-CloudVertexBot
Allow: /
# 对应:Google Vertex AI

User-agent: meta-externalfetcher
Allow: /
# 对应:Meta(用户触发)

User-agent: FacebookBot
Allow: /
# 对应:Meta / Facebook

User-agent: Amazonbot
Allow: /
# 对应:Amazon / Alexa

User-agent: Applebot
Allow: /
# 对应:Apple Siri / Spotlight

User-agent: CCBot
Allow: /
# 对应:Common Crawl(众多模型的训练语料)

User-agent: DuckAssistBot
Allow: /
# 对应:DuckDuckGo AI

User-agent: MistralAI-User
Allow: /
# 对应:Mistral(用户触发)

# ④ AI 用途令牌(不会单独来抓,只在 robots.txt 生效)
#    Allow 表示你授权 AI 使用你的内容;要保留内容可改成 Disallow。

User-agent: Google-Extended
Allow: /
# 对应:Gemini / Vertex AI

User-agent: Applebot-Extended
Allow: /
# 对应:Apple Intelligence

# ② 本次检测显示以下爬虫你已经声明过,无需重复:
#    GPTBot、OAI-SearchBot、ClaudeBot、Claude-SearchBot、PerplexityBot、meta-externalagent

# 【2】通用规则放最后
User-agent: *
Allow: /
Disallow: /admin/
Disallow: /api/

# 【3】声明站点地图
Sitemap: https://shidianguwen.com/sitemap.xml

本次检测里,这个文件缺少 Bytespider、DeepSeekBot、QwenBot、KimiBot、Kimi-SearchBot(对应 豆包、DeepSeek、通义千问 / 元宝、Kimi(模型训练)、Kimi 搜索)。

2. A2 · 关键内容不依赖 JS 渲染

  • 现状:源码中可见正文 8432 字符,h1 0 个
  • 怎么改:把正文与标题改为服务端渲染(SSR),或在源码中提供可读的正文与 h1。

可直接复制的修复

若源码里几乎没有正文,三种改法(任选):

  1. Next.js:getServerSideProps / Server Component 输出内容;
  2. Nuxt:ssr: true(默认)并把关键内容放在服务端;
  3. 静态站:构建时预渲染(nuxt generate / next export / 或纯 HTML)。 同时给不执行 JS 的客户端留一份 <noscript> 说明。
# 先用这条确认正文是否出现在源码里(AI 爬虫大多不执行 JS)
curl -s https://shidianguwen.com/ | grep -c "<h1"
curl -s https://shidianguwen.com/ | wc -c

3. B2 · 结构化数据(JSON-LD)

  • 现状:JSON-LD 块 0 个,WebSite 无,Organization 无
  • 怎么改:至少补 WebSite + Organization;文章页加 Article,问答页加 FAQPage。

可直接复制的修复

放到:<head> 内。sameAs 是关键——它把「这个域名」和「你的知乎/公众号/GitHub 主页」关联成同一个实体,AI 才能确认你是谁

<script type="application/ld+json">
{"@context":"https://schema.org","@type":"Organization",
 "name":"诗典古文分享","url":"https://shidianguwen.com/",
 "sameAs":["https://www.zhihu.com/org/你的主页",
           "https://github.com/你的账号"]}
</script>
<script type="application/ld+json">
{"@context":"https://schema.org","@type":"WebSite",
 "name":"诗典古文分享","url":"https://shidianguwen.com/"}
</script>
<!-- 文章页再加 Article:headline / datePublished / dateModified / author -->

四、重点问题分析

一、AI 爬虫未明确放行,抓取入口不通

robots.txt 中没有声明 Bytespider、DeepSeekBot、QwenBot、KimiBot、Kimi-SearchBot 这几个国内主流 AI 爬虫。标准要求把每个 AI 爬虫的 User-agent 加 Allow: / 放在 User-agent: * 之前,因为爬虫只匹配第一条命中的规则。当前写法下,这些爬虫要么落到通配规则上、要么无法确认是否被允许,结果就是内容进不了国内 AI 的索引。对古诗文这类高度依赖问答引用的站点,这等于主动放弃最直接的流量来源。修改要点:在 robots.txt 顶部逐条列出上述爬虫并显式 Allow: /,再保留原有的 User-agent: * 段落;若后续做外贸,再补 GPTBot、ClaudeBot 等国外组。

二、结构化数据为零,机器无法识别页面类型

检测显示 JSON-LD 块 0 个,WebSite 无,Organization 无。AI 在抽取答案时,优先依赖结构化数据来确认「这是谁家的站、这是什么页面」。没有 WebSite 和 Organization,站点身份无法被机器确认;文章页没有 Article、问答页没有 FAQPage,AI 只能靠正文猜测内容类型,引用时容易张冠李戴,或者干脆跳过。修改要点:先在首页模板注入 WebSite 与 Organization 两块 JSON-LD,写明站点名、URL、logo、主体名称;再按页面类型补 Article(诗词赏析、考题)与 FAQPage(问答类页面)。

三、标题层级与主体信息缺失,可信度无法核验

h1 为 0 个、h2 有 50 个,说明页面把层级全压在二级标题上,没有唯一的主题标题。AI 判断页面主题时,h1 是最直接的信号,缺失会让它难以确定这一页到底在讲哪首诗、哪个词牌。同时,备案信息有,但主体信息入口无,页脚没有「关于我们」或联系方式。对 AI 而言,一个连运营主体都查不到的站点,引用风险偏高,尤其在诗词、考题这类需要准确性的内容上。修改要点:每页保留且仅保留一个 h1,用 h2/h3 组织层级,不要用加粗 div 冒充标题;在页脚补备案号并链接到「关于我们」页面,写清主体名称与联系方式。

四、更新时间与第三方引用证据双双缺位

页面可见更新时间为无,正文可见区也没有指向第三方平台的引用链接、出处标注或 sameAs 站外身份声明。AI 在多个来源之间做取舍时,会优先选择新鲜度高、有外部佐证的内容。没有更新日期,内容会被默认当作陈旧;没有出处与站外身份,可信度无法交叉验证。修改要点:在正文显著位置标注「更新于 YYYY-MM-DD」;把站内一手数据整理成可独立引用的结论块发布到知乎、CSDN 等平台并链回正文,或在正文标注「来源:××」,同时在 JSON-LD 的 sameAs 中声明站外身份主页。

五、行动建议

  1. 修改根目录 robots.txt:在文件最顶部逐条写入 User-agent: Bytespider、User-agent: DeepSeekBot、User-agent: QwenBot、User-agent: KimiBot、User-agent: Kimi-SearchBot,每条下面各加一行 Allow: /,全部放在 User-agent: * 之前,保存后直接访问 /robots.txt 确认顺序。
  2. 在首页模板的 head 中注入两块 JSON-LD:WebSite(name、url、potentialAction 搜索入口)与 Organization(name、url、logo、备案主体名称),用 script type=“application/ld+json” 包裹;文章页模板再加 Article,问答页模板加 FAQPage。
  3. 调整页面标题结构:在每个页面模板中把当前作为主题的那行文字改为 h1,确保全页只有一个 h1;把现有的 50 个 h2 按内容归并,需要细分时降为 h3,删除用加粗 div 冒充标题的写法。
  4. 在站点根目录新建纯文本 llms.txt,写明站点定位(古诗文与诗词名句分享)、核心栏目 URL 与可引用的结论性内容;配置服务器确保 /llms.txt 返回该文本文件而不是首页 HTML。
  5. 在页脚补两处内容:一是备案号并链接到「关于我们」页面,页面内写清主体名称与联系方式;二是在文章模板正文顶部加一行「更新于 YYYY-MM-DD」,日期随内容发布或修订自动更新,同时在对应 JSON-LD 的 sameAs 中填入知乎、CSDN 等站外主页地址。

六、外部引用线索(仅证据,不计分)

  • 未检出站外提及:外部索引里还没有提到 shidianguwen.com 的页面。

  • 检索方式:Bing RSS,查询式 "shidianguwen.com" -site:shidianguwen.com(打开这次检索)

  • 本节只作证据、不计分:搜索结果随时变化,把它纳入评分会破坏本报告「同一站点重复检测结果一致」的承诺。

七、数据来源与复核方式

  • 检测方式:程序抓取首页 HTML、robots.txt、sitemap.xml、llms.txt,并按标准逐项判定;每项都保留原始证据(状态码、耗时、命中的原文片段)
  • 复核方式:任何人都可以用「GEO 就绪度检测」对 shidianguwen.com 重跑,规则与数据完全公开
  • 局限性:只检测首页,未覆盖文章页与列表页;C5 只认站内可核验的引用痕迹(指向第三方平台的正文链接、出处标注、JSON-LD sameAs),真正的「被站外引用」见第六节,该节由搜索引擎查询得出、只作证据不计分;C1/C3 由规则推断,标准中已标注「需人工确认」;数据是 2026-09-21 的单时点快照,站点改版后结论可能变化
  • 本报告由程序自动检测 + AI 撰写(撰写引擎:deepseek)。如你是本站主体,认为结论有误或希望撤下,可通过「关于我们」的联系方式告知,我们会在核实后更正或删除

附录:原始取数证据

资源 HTTP 耗时 大小
首页 HTML 200 76 ms 117036 B
robots.txt 200 155 ms 59 B
sitemap.xml 200 155 ms 13948 B
llms.txt 404 131 ms — B
不存在路径探测 404 166 ms — B

八、如何引用本报告

安企 GEO《shidianguwen.com GEO 就绪度检测报告》(2026-09-21):该站按《GEO 就绪度标准 v1.0》15 项判定通过 7 项,得分 7 分(满分 15),判定「不可见」。首要缺口为 A1「robots.txt 正确放行 AI 爬虫」。

  • 报告名称:shidianguwen.com GEO 就绪度检测报告
  • 检测日期:2026-09-21
  • 发布方:安企 GEO(AnqiWeb GEO)
  • 建议引用格式:shidianguwen.com GEO 就绪度检测报告,安企 GEO,2026