返回報告
robots.txt 允許 GPTBot
GEO權重 7.0%(這項在 GEO 分數中的佔比)分數 100
這是什麼
網站的 robots.txt(告訴各家爬蟲哪些地方能來、哪些不能來的設定檔)有沒有擋住 GPTBot。GPTBot 是 OpenAI 用來收集資料、訓練 AI 模型的爬蟲。
為什麼重要
擋住 GPTBot 主要影響的是你的內容會不會被拿去訓練 OpenAI 的模型。ChatGPT 搜尋時另外使用名叫 OAI-SearchBot 的爬蟲,所以擋 GPTBot 對 ChatGPT 搜尋結果的影響不大,要不要開放可以依你的意願決定。
怎樣算通過
robots.txt 裡沒有專門寫給 GPTBot 的「Disallow: /」(整站禁止)就通過;網站沒有 robots.txt 時不計分。
證據
| 爬蟲名稱 | GPTBot |
|---|---|
| 爬蟲 | GPTBot (OpenAI) |
| 被封鎖 | 否 |
| 有專屬設定 | 否 |
原始資料
檢查代號 geo.robots.allowsGPTBot
{
"bot": "GPTBot",
"label": "GPTBot (OpenAI)",
"blocked": false,
"matched": false
}修改建議
Pro 方案可見允許 GPTBot (OpenAI)
robots.txt 目前封鎖 GPTBot,AI 答案引擎將無法索引你的網站。
Before / After
目前
User-agent: GPTBot Disallow: /
建議
User-agent: GPTBot Disallow: