跳到主要內容
返回報告

robots.txt 允許 ClaudeBot

GEO權重 7.0%(這項在 GEO 分數中的佔比)分數 100

這是什麼

網站的 robots.txt(告訴各家爬蟲哪些地方能來、哪些不能來的設定檔)有沒有擋住 ClaudeBot。ClaudeBot 是 Anthropic 用來收集資料、訓練 Claude 模型的爬蟲。

為什麼重要

擋住 ClaudeBot 主要影響的是你的內容會不會被拿去訓練 Claude。Claude 搜尋網路時另外使用別的爬蟲,所以這項對 Claude 搜尋時能否找到你的影響不大,要不要開放可以依你的意願決定。

怎樣算通過

robots.txt 裡沒有專門寫給 ClaudeBot 的「Disallow: /」(整站禁止)就通過;網站沒有 robots.txt 時不計分。

證據

爬蟲名稱ClaudeBot
爬蟲ClaudeBot (Anthropic)
被封鎖否
有專屬設定否
原始資料

檢查代號 geo.robots.allowsClaudeBot

{
  "bot": "ClaudeBot",
  "label": "ClaudeBot (Anthropic)",
  "blocked": false,
  "matched": false
}

修改建議

Pro 方案可見

允許 ClaudeBot (Anthropic)

robots.txt 目前封鎖 ClaudeBot,AI 答案引擎將無法索引你的網站。

Before / After

目前
User-agent: ClaudeBot
Disallow: /
建議
User-agent: ClaudeBot
Disallow: