10種像Googlebot一樣思考來提升你的技術型SEO的方法

什麼是Googlebot?

Googlebot是一個網路爬蟲</a>(也被稱為機器人或蜘蛛),它從網頁中提取數據。Googlebot只是眾多網路爬蟲</a>之一。每個搜尋引擎</a>都有自己的品牌爬蟲。<br/><br/>在SEO</a>世界中,我們將這些品牌爬蟲名稱稱為「使用者代理」。稍後我們會介紹使用者代理,但現在只需要瞭解,我們指的是特定的網路爬行機器人。一些常見的使用者代理包括: Googlebot - Google Bingbot - Bing Slurp Bot - Yahoo Alexa Crawler - Amazon Alexa DuckDuckBot - DuckDuckGo

技術seo的複雜性可能會阻礙部分人的參與

最快讓Google爬取您的網站的方法是在搜尋控制台中建立一個新屬性並提交您的網站地圖</a>。然而,這不是全部。雖然網站地圖</a>是讓Google爬取您的網站的好方法,但這並不能解釋頁面排名</a>(PageRank)。<br/><br/>內部連結</a>是告訴Google哪些頁面相關且有價值的推薦方式。關於頁面排名</a>和內部連結</a>,網上有很多優質文章可供參考,所以我現在就不再詳述了。Google也可以從Google我的企業列表、目錄和其他網站的連結中發現</a>您的網頁。<br/><br/>這只是Googlebot運作方式</a>的一個簡化版本。要瞭解更多資訊,可以閱讀穀歌關於他們爬蟲器(Googlebot) 的文檔。

使用者體驗與爬蟲體驗

創建網站時,你是要滿足誰的需求?用戶還是Googlebot?這是一個熱門的辯論話題,可能會在UX設計師、網站開發人員和SEO專家</a>之間引起緊張關係。然而,這也是我們共同努力的機會,以更好地理解用戶體驗</a>與爬蟲體驗之間的平衡。UX設計師通常以用戶利益為重,而SEO專業人士</a>則致力於滿足Google的需求。<br/><br/>在中間地帶,我們有網站開發人員試圖創造兩全其美的情況。作為SEO專業人士</a>,我們需要瞭解網絡體驗的每個方面的重要性</a>。是的,我們應該優化以提供最佳用戶體驗</a>。<br/><br/>然而,我們也應該優化我們的網站以適應Googlebot(和其他搜尋引擎</a>)。幸運的是,Google非常注重用戶體驗</a>。大多數現代SEO策略</a>都致力於提供良好的用戶體驗</a>。<br/><br/>以下的10個Googlebot優化技巧應該能夠同時贏得您的UX設計師和網站開發人員的支持。

1. Robots.txt檔案

robots.txt是一個放置在網站根目錄中的文字檔案。這是Googlebot在爬行網站時首先尋找的東西之一。強烈建議在您的網站上添加一個robots.txt檔,並包含指向sitemap.xml的鏈接。<br/><br/>儘管有很多方法可以優化您的robots.txt文件,但在這樣做時要小心謹慎。開發人員可能會意外地在robots.txt中留下全站禁止指令,在將開發站點移至正式站點時阻止所有搜尋引擎</a>爬行網站。即使更正了此問題,恢復自然流量</a>和排名可能需要幾周時間。<br/><br/>有許多關於如何</a>優化您的robots.txt檔的提示和教程。在嘗試編輯文件之前,請先做好調查研究工作。別忘了追蹤您的結果!

相關數據:

• 根據semrush的數據,技術seo的排名因素佔整體排名因素的17% 來源: semrush
• 根據ahrefs的統計,73.6%的所有網站在首頁上有被google索引 來源: ahrefs
• 根據moz的調查,平均而言,超過50%的搜索結果中都有ssl/https加密保護 來源: moz
• 根據google的資料,網站加載速度慢1秒,導致轉換率下降一半 來源: google
• 根據hubspot的數據,63%的移動搜索結果會導致不會再有進一步的行動 來源: hubspot

9. 破碎的連結和重定向迴圈

我們都知道,壞掉的連結是不好的,一些SEO專家</a>聲稱壞掉的連結會浪費爬取預算</a>。然而,John Mueller已經表明壞掉的連結不會減少爬取預算</a>。根據多種資訊混合判斷,我認為我們應該謹慎行事,清理所有壞掉的連結。<br/><br/>在Google Search Console或您喜歡的爬蟲工具</a>中查找站點上的壞掉連結!重定向循環是舊站點常見的現象之一。當重定向命令中存在多個步驟時就會出現重定向循環。搜尋引擎</a>往往難以爬行重定向循環並可能終止爬取。<br/><br/>在這裡最好的做法是將每個頁面上原始鏈接替換為最終鏈接。