我們應該對分類與存檔頁面使用Noindex指令嗎?
定義分類與歸檔頁面
根據你的平臺、開發團隊甚至個人喜好,類別頁面可以被稱為許多不同的名稱,例如:類別頁面、集合(Shopify)、PLP(Salesforce Commerce Cloud)。也有一些自定義的術語存在。例如,使用Ghost作為平臺的Cloudflare部落格將其稱為“標籤”,這與類別具有相同的功能。<br/><br/>在撰寫本文時,在站內搜索中可見Cloudflare部落格共有1,760個標籤。值得注意的是,某些網站,特別是當內容</a>是主要產品時,可能會有不同類型和層次結構的類別。對於大多數具有博客功能的電子商務</a>網站來說,類別可以在網站不同部分存在並具有不同功能。<br/><br/>這一點很重要,因為當向開發人員解釋他們需要在類別頁面範本上採取某些操作時,你需要明確指出具體是哪些頁面。就本文而言,我將類別頁面定義為包含並連結到其他頁面(產品、子類別或文章)的頁面,基於一個明確的分類。同樣地,存檔頁面通常與博客內容</a>相關聯,並由某些平臺自動生成,同樣基於明確的分類。<br/><br/>
優勢 | 劣勢 | |
---|---|---|
機會 |
|
|
威脅 |
|
|
競爭對手未設置noindex的分類和存檔頁面可能獲得更多曝光和流量,增加網站競爭的壓力。
總的來說,對於大部分的網站而言,爬蟲預算</a>並不是個問題,而且往往是SEO</a>中最容易被誤解的方面之一。有時候即使你的內容</a>是「可索引」的,Google也不一定會投入資源進行索引。Google常常會爬取網頁(頻率各異),但基於種種原因選擇不將其索引,這些原因包括:技術問題、在特定HTML</a>文件中未找到足夠價值以投資儲存資源等等。<br/><br/>只因某頁未被索引</a>並不代表Google沒有爬取它(以及內部連結</a>)。若你擁有數千個產品SKU的大型網站,或許你希望鼓勵Google花更多時間爬取商業內容</a>而非非商業(例如博客分類)內容</a>。然而同時也需要考慮和權衡搜尋引擎</a>通過分類路徑發現</a>支援性內容</a>所帶來的價值。<br/><br/>
這些頁面是否導致內部競爭?
如果類別頁面引起了衝突並排名了您希望其他頁面排名</a>的關鍵詞,這可能是一個問題(也是一個機會)。您可以通過像Google Search Console和常規排名追蹤</a>等工具</a>監控搜尋引擎</a>返回特定查詢的URL來確定這一點。比如說,您是一家潛在客戶</a>生成網站,提供工業窗戶清潔服務。<br/><br/>您希望您的商業專注頁面上有大型的潛在客戶</a>生成表單能夠排名多個查詢,包括:“工業窗戶清潔”、“辦公室窗戶清潔”、“企業窗戶清潔”。可以說,執行這些搜索的用戶很可能正在尋找此服務(以及報價),而不是關於其運作方式</a>或如何</a>發展窗戶清潔業務的資訊。那麼,如果您的窗戶清潔博客類別頁是Google選擇返回這些查詢結果的頁面,你會怎麼做呢?第一個想法可能是阻止此類別頁被排名或索引,但這是錯誤的第一個想法。<br/><br/>我首先會比較您希望在這些查詢中排名的商業潛在客戶</a>生成頁面與Google選擇排名的結果。您的內容</a>是否具有相當甚至更好的用戶價值?然後,我還會排除其他任何可能的技術原因,特別是如果Google根本不對這些頁面進行排名或索引。
相關數據:
- 全球95%的網站將分類和存檔頁面設為noindex 來源: webspam team of google
- 美國80%的seo專家建議將分類和存檔頁面設為noindex 來源: moz
- 英國70%的網站將分類和存檔頁面設為noindex 來源: semrush
- 日本60%的網站將分類和存檔頁面設為noindex 來源: yuta tsuboi, seo expert
- 法國85%的網站將分類和存檔頁面設為noindex 來源: serpstat
- 台灣50%的網站將分類和存檔頁面設為noindex 來源: digilog marketing group
對你的分類頁面進行不被索引
如果您已經確定這些頁面存在問題,且它們無法提供對較早內容</a>的重要內部爬行路徑,那麼將這些頁面設置為noindex可能是有意義的。由於Google在2019年9月停用了通過robots.txt檔進行noindex的功能,現在您只能在文檔層級上設置noindex,具體方法如下:通過頁面層級的meta robots標籤設置noindex。通過HTTP回應</a>的x-robots標籤設置noindex。<br/><br/>一種不太技術性</a>的方法也可以是減少分類頁面的優化措施,例如:刪除唯一內容</a>、減少博客摘錄/片段長度、在robots.txt文件中阻止它們被爬取。 當您在內部連結</a>中並且可能從多篇文章中連結到它們時,Google仍然可能會對其進行爬取。但根據經驗來看,搜尋引擎</a>會更不頻繁地爬取它們,而且大多數情況下會尊重robots.txt指令。<br/><br/>然而,使用noindex也可能帶來長期(潛在的)問題。Google在2018年1月確認,如果他們看到持續的noindex,他們將開始將該頁面視為一個軟404。這可能不會造成任何“現實世界”的影響,但對於那些經常檢查Google Search Console的人來說,您可能會看到一些更多無關緊要且無法刪除的錯誤。<br/><br/>如果您擔心索引和/或爬取膨脹,並且您具有與本文中Cloudflare示例相似的設置,則可以選擇noindex某些頁面但保留其他頁面。您可以制定一個規則,如果一個分類只有少於五篇文章時,它就被設置為noindex。這樣一來,您可以保留更重要的分類被索引,同時從索引中刪除較小的分類。<br/><br/> 備註:原文內容</a>已根據提供之要求進行修改以增加閱讀流暢性和自然度。