# SXS 赛事数据 · robots.txt # 欢迎搜索引擎与 AI 助手抓取公开页面 User-agent: * Allow: / Disallow: /api/ # —— AI 助手爬虫(明确欢迎)—— User-agent: GPTBot Allow: / Disallow: /api/ User-agent: OAI-SearchBot Allow: / Disallow: /api/ User-agent: ChatGPT-User Allow: / Disallow: /api/ User-agent: ClaudeBot Allow: / Disallow: /api/ User-agent: Claude-SearchBot Allow: / Disallow: /api/ User-agent: PerplexityBot Allow: / Disallow: /api/ User-agent: Google-Extended Allow: / Disallow: /api/ User-agent: Applebot-Extended Allow: / Disallow: /api/ User-agent: Bytespider Allow: / Disallow: /api/ # —— 2026-10-19 DSH 补(先生令:把原先靠通配放行的三个 AI 爬虫显式写出)—— # 说明:这三个此前未显式列出,靠 `User-agent: *` 的 Allow: / 放行,**效果本来就是放行**; # 本次只是把「欢迎抓取」的态度写成明确规则,行为不变(仍只拦 /api/)。 User-agent: Claude-User Allow: / Disallow: /api/ User-agent: CCBot Allow: / Disallow: /api/ User-agent: Meta-ExternalAgent Allow: / Disallow: /api/ User-agent: bingbot Allow: / Disallow: /api/ Sitemap: https://sxs-ai.com/sitemap.xml