網站明明排在 Google 前面,為什麼 ChatGPT 卻看不到?
Your website might be invisible to ChatGPT (and you'd never know)
重點導讀
網站在 Google 搜得到,不代表 ChatGPT、Claude 或 Perplexity 也看得到。作者發現,自己的網站可能被 robots.txt 或安全工具擋住 AI 爬蟲;如果網頁內容要等 JavaScript 執行後才出現,有些爬蟲看到的可能只是一張空白頁;沒有結構化資料,也可能讓 AI 系統難以弄懂網頁在介紹什麼。作者做了免費工具 BotReady,能檢查網站是否擋住 21 種 AI 爬蟲、爬蟲實際看見哪些內容,還會做 40 項檢查並給分,每天可免費檢查 5 次,不用註冊。若想讓 AI 工具讀取網站內容,可以在 robots.txt 允許 GPTBot、ClaudeBot 和 PerplexityBot;要不要開放,則由網站管理者自己決定。
AI 伴隨問答
針對這篇報導有疑問?可直接點選快捷問題或向 AI 追問背景脈絡與技術細節:
信源出處dev.to
Your website might be invisible to ChatGPT (and you'd never know)
本文為 888news 精選之重點導讀。若需閱讀作者完整原文、技術細節與官方討論,請前往原始網站。
來源: Dev.to Top Tech (dev.to)
開啟原文