如何解決可抓取性問題:改善 WordPress SEO 方法

您是否正在嘗試解決 WordPress SEO 抓取預算問題?

SEO 抓取預算是搜索引擎抓取您網站上的頁面次數。較低的抓取預算可能會延遲您的頁面及時編入索引。這會損害您的 SEO 排名並降低整體流量。

在本文中,我們將解釋 WordPress SEO 抓取預算問題以及如何快速修復它。

因為這是一個很大的話題,我們將其分解為易於理解的部分。以下是我們將在本文中介紹的不同項目:

  • 搜索爬行如何工作?
  • 什麼是 SEO 抓取預算?
  • 是什麼導致 WordPress SEO 抓取預算問題
  • 如何計算您的 SEO 抓取預算
  • 為什麼你應該關心 SEO 抓取預算
  • 如何在 WordPress 中輕鬆優化 SEO 抓取預算
目錄

搜索爬行如何工作?

像谷歌這樣的搜索引擎使用複雜的機器人程序(計算機程序)來訪問互聯網上的網站。

這些機器人在網站上尋找變化並將它們與主要搜索索引進行比較。

如果他們發現了新內容,就會將其添加到搜索索引中。如果他們發現索引中已有內容但已更改,則他們會使用新內容更新索引。

他們跟踪頁面上的連結,然後對這些頁面也執行相同的操作。

機器人從頁面上的一個連結移動到其他連結的方式類似於真正的蜘蛛在其網上爬行的方式。

這就是為什麼使用術語爬行來描述此活動的原因,您有時可能會看到稱為搜索引擎蜘蛛的機器人。

為了獲得更好的 SEO,您需要確保搜索引擎可以輕鬆抓取您的網站。

提示:請參閱我們的完整 WordPress SEO 初學者指南,以了解有關 SEO優化 的更多信息。

什麼是 SEO 抓取預算?

SEO 抓取預算是搜索引擎(如 Google)抓取您網站上的頁面次數。

Google 機器人每天抓取數十億頁。他們試圖計算他們將在每個網站域上抓取多少頁面以有效地使用資源。

這個數字是由基於多種因素的爬網算法自動確定的。

它每天都在波動,這意味著 Google 機器人將在您的WordPress 網站上抓取多少頁面沒有固定數字。

通常,具有更多內容的大型網站具有更高的抓取預算,而較小的網站具有較低的預算。

其他因素也會影響抓取預算,例如 URL 的受歡迎程度、新鮮度、更新頻率等。

但是,由於多種原因,您可能會在不需要的頁面上失去抓取預算。

例如,如果您的網站沒有得到適當的優化,那麼搜索引擎會將您的抓取預算花在您網站上不太重要的部分而不是重要的內容上。

是什麼導致 WordPress SEO 抓取預算問題

WordPress 生成 URL 和重複內容的方式可能會導致抓取預算問題。

例如,WordPress 會自動為您網站的不同區域生成RSS 提要

主要博客、類別和標籤、每個文章和頁面的評論都有 RSS 提要,甚至自定義文章類型都有單獨的 RSS 提要 URL。

這些 RSS 提要的連結被添加到您網站的 HTML 源代碼中,使它們可以被搜索引擎發現。

現在,搜索引擎足夠聰明,可以識別重複內容並忽略它。但是,他們仍然會抓取它們並花費您的 SEO 抓取預算。

除此之外,搜索引擎會比需要的多得多地抓取不太重要的項目。這包括您的檔案、分類法、作者、PDF 文件等。

WordPress 插件或其他第三方工具也可以將查詢參數添加到您的 WordPress URL。

Google 的蜘蛛可能會將這些查詢參數視為不同的頁面並對其進行抓取。

例如,UTM 參數用於Google Analytics 跟踪,帶有或不帶有這些查詢參數的頁面看起來仍然相同。

例子:https://yourdomain.com/landingpage/?utm_source=newsletter

這會將您的 SEO 抓取預算浪費在不太重要的項目上,並成為一個問題。

如何計算您的 SEO 抓取預算

SEO 抓取預算不是一定數量的頁面。

它波動很大,並且沒有可靠的方法來預測 Google 在任何給定的一天將在您的網站上抓取多少頁面。

但是,您可以根據最近的抓取活動獲得一個相當不錯的想法,看看 Google 是如何抓取您的網站的。

如果您還沒有這樣做,您首先需要將您的網站添加到 Google Search Console。它是 Google 提供的免費工具,可幫助網站管理者了解其網站在 Google 搜索中的表現。

只需轉到您的 Search Console 信息中心。從左側欄切換到“設置”菜單,然後點擊“抓取統計信息”旁邊的“打開報告”。

抓取統計報告將顯示過去幾週您網站上抓取請求的概覽。

您可以將鼠標懸停在圖表上以查看每天請求了多少頁。

這讓您了解這段時間內您網站上的平均抓取率是多少。

在此之下,您可以按響應代碼、文件類型、目的和 Google 機器人類型查看抓取活動的細分。

從這裡,您可以看到在錯誤、聯合(RSS 提要)、JavaScript、CSS、圖像等方面花費了多少抓取預算。

這為您提供了項目的快照,您可以優化這些項目以更有效地利用 SEO 抓取預算。

例如,如果您有很多 404 錯誤正在被抓取,那麼您可以使用重定向插件來確保這些抓取工具登陸有用的內容。

(在本文的後面,我們將向您展示如何逐步重定向抓取錯誤。)

為什麼你應該關心 SEO 抓取預算

搜索引擎需要高效地抓取您的網站,以便他們能夠及時正確地索引您的內容。

但是,如果您的 SEO 抓取預算被浪費,那麼您的重要和較新的內容可能無法按時抓取。

搜索引擎甚至可能需要數週時間才能注意到您舊文章的更新或發現您的新內容。

您將錯失從搜索引擎獲得流量的機會,您的 SEO 排名可能不會提高,而且您肯定會在銷售或廣告收入方面蒙受損失。

如何在 WordPress 中輕鬆優化 SEO 抓取預算

在 WordPress 中優化 SEO 爬網預算的最簡單和最安全的方法是使用WordPress 的多合一 SEO

它是最好的 WordPress SEO 插件,內置了 SEO 抓取優化工具。

首先,您需要安裝並激活All in One SEO for WordPress插件。有關更多詳細信息,請參閱我們關於如何安裝 WordPress 插件的分步指南。

注意:還有一個免費版本的 All in One SEO,其中還包括抓取清理功能。我們建議使用付費插件的 PRO 計劃,因為它還可以讓您訪問重定向管理器工具來修復您網站上的 404 錯誤。

激活後,該插件將向您顯示一個設置嚮導。只需按照屏幕上的說明設置插件即可。

之後,您可以轉到All in One SEO » Search Appearance頁面。

然後,只需切換到“高級”選項卡。

向下滾動到頁面底部,您會看到“抓取清理”選項。

點擊切換按鈕以啟用“抓取清理”功能。

您將在爬網清理中看到的第一個選項是刪除查詢參數。

在此之下,您可以提供要允許的查詢參數列表。高級用戶可以在這裡使用 Regex 正則表達式。

接下來,您將看到 WordPress RSS 提要的選項。All in One SEO 將向您展示由 WordPress 生成的各種不同類型的 RSS 提要,您可以禁用不太重要的 RSS 提要。

例如,如果您有一個單一作者的博客,那麼您可以禁用作者提要。

一旦您禁用了所有不需要的 RSS 提要,請不要忘記點擊“保存更改”按鈕來存儲您的設置。

如何為錯誤頁面設置重定向

多合一 SEO 將自動為您禁用的提要設置重定向。例如,標籤 RSS 提要現在會將用戶重定向到標籤存檔頁面。

接下來,您需要切換到 Google Search Console 儀表板並打開抓取統計報告。

從這裡,您可以看到導致錯誤的頁面。

現在,根據狀態代碼,您可以為這些頁面設置重定向。

例如,您可以將 404 錯誤重定向到類似的頁面。您可以檢查其他有錯誤的頁面並為它們設置重定向。

多合一 SEO 使在您的 WordPress 網站上設置重定向變得非常容易。只需轉到All in One SEO » Redirects頁面,然後在“源 URL”下添加舊 URL,在“目標 URL”字段下添加新 URL。

點擊“添加重定向”按鈕以保存您的設置。然後,您可以重複該過程以根據需要設置更多重定向。有關更多詳細信息和替代方法,請參閱我們關於如何在 WordPress 中設置重定向的指南。

我們希望本文能幫助您了解 WordPress SEO 爬網預算問題以及如何解決它。您可能還想查看有關使用 Google Search Console 增加流量的這些專家提示,或查看有關如何提高WordPress自然點擊率的實際示例。

如果您喜歡這篇文章或有其他問題歡迎給我們留言,或請立即聯繫我們

Read More