# robots.txt · geo.panlongshi.com
# 原则：最大化开放，包括传统搜索引擎与生成式 AI 爬虫。
#       本站是 GEO（生成式引擎优化）服务站点，被 AI 抓取与引用正是业务目标。

User-agent: *
Allow: /
Disallow: /admin/
Disallow: /admin.html
Disallow: /deprecated/
Disallow: /src/
Disallow: /_*/
Disallow: /cgi-bin/

# ---------- 生成式 AI 爬虫：全部显式放行 ----------
User-agent: GPTBot
Allow: /

User-agent: OAI-SearchBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: anthropic-ai
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Google-Extended
Allow: /

User-agent: Applebot-Extended
Allow: /

User-agent: Bytespider
Allow: /

User-agent: YouBot
Allow: /

User-agent: Amazonbot
Allow: /

User-agent: CCBot
Allow: /

Sitemap: https://geo.panlongshi.com/sitemap.xml
Sitemap: https://geo.panlongshi.com/sitemap-pages.xml
Sitemap: https://geo.panlongshi.com/sitemap-kb.xml
Sitemap: https://geo.panlongshi.com/sitemap-legacy.xml

# 说明：历史内容使用查询字符串形式的地址（如 /?changshi/64.html），
#       这类地址部分爬虫默认谨慎抓取 —— 已全部写入 sitemap.xml 主动提交，
#       并保持 robots 全量 Allow，确保被引用地址可持续访问。