Googlebot 爬 Next.js 網站時,有一半請求在抓 JavaScript,176 個頁面還沒被爬過
Half of Googlebot's requests to my Next.js site are for JavaScript. 176 pages were never crawled.
重點導讀
兩個 Next.js 網站都不太被 Google 收錄,問題卻不一樣:一個網站在 90 天內有 176 個網址被 Google 發現,卻完全還沒爬過;另一個網站則有 411 個頁面爬過了,但沒有被收錄。
- 第一個網站的 988 次請求中,50% 用來抓 JavaScript,只有 37% 是 HTML。第二個網站曾在 robots.txt 封鎖
/_next/,裡面的程式和樣式表也因此無法載入。 - 作者移除了這條規則,但無法確定封鎖是不是頁面沒被收錄的原因。這兩種狀況要看 Google Search Console 的「網頁」報告和爬取統計,才能分別處理。
AI 伴隨問答
針對這篇報導有疑問?可直接點選快捷問題或向 AI 追問背景脈絡與技術細節:
信源出處dev.to
Half of Googlebot's requests to my Next.js site are for JavaScript. 176 pages were never crawled.
本文為 888news 精選之重點導讀。若需閱讀作者完整原文、技術細節與官方討論,請前往原始網站。
來源: Dev.to Top Tech (dev.to)
開啟原文