為什麼要停止搜尋引擎爬行 WordPress 網站？
對大多數 WordPress 網站來說，搜尋引擎是最大的流量來源。那麼為什麼會有人想要阻止搜尋引擎呢？以下是一些您可能不希望搜尋引擎索引您的網站的情況：
- 在初期階段，您可能不知道如何建立本機開發環境或舞台網站，而是在網站上線的時候進行開發。您不會希望 Google 在網站建設或維護模式時索引您的網站。
- 有些人使用 WordPress 來創建私人部落格，他們不希望這些私人內容被搜尋引擎索引。
- 您也可以使用 WordPress 進行專案管理或內部網。在這些情況下，您不希望內部文件公開訪問。
一個常見的誤解是，如果沒有連結指向您的域名，那麼搜尋引擎可能永遠不會找到您的網站。這並不完全正確。例如，域名以前可能被其他人擁有，所以可能有一些連結指向您的網站。此外，有成千上萬的網頁僅列出域名，您的網站可能會出現在其中之一上。
我們將展示四種方法來停止搜尋引擎爬行您的網站：
方法 1：請求搜尋引擎不爬行您的 WordPress 網站
這是最簡單的方法，但不能完全保護您的網站不被爬行。WordPress 帶有內建功能，允許您指示搜尋引擎不索引您的網站。您只需要轉到設定 » 閱讀，然後勾選「搜尋引擎能見度」旁邊的方框。
當勾選該方框後，WordPress 會在您的網站標題中添加以下一行：
<meta name='robots' content='noindex,follow' />WordPress 還會修改您的網站的 robots.txt 文件並添加禁止規則：
User-agent: *
Disallow: /這些行向機器人（網絡爬行器或機器人）請求不索引您的網頁。然而，是否遵循該請求完全取決於搜尋引擎。即使大多數搜尋引擎尊重該請求，您的某些頁面或圖像仍可能被索引。如果您想使搜尋引擎無法索引或爬行您的網站，則需要使用方法 3 或 4 來設置密碼保護。
方法 2：請求搜尋引擎不爬行特定頁面
您可能希望搜尋引擎爬行和索引您網站的大部分內容，但不希望某篇文章或特定頁面出現在搜尋結果頁面中。最簡單的方法是使用 All in One SEO (AIOSEO) 插件。這是 WordPress 最佳 SEO 工具，被超過 300 萬企業信任。
首先，您需要在網站上安裝並激活 AIOSEO 插件。可以參考我們的逐步指南了解如何設置 All in One SEO for WordPress。設置完插件後，您可以使用它請求搜尋引擎不索引某些文章或頁面。
編輯您不希望被索引的文章或頁面，向下滾動至 WordPress 編輯器底部的 AIOSEO 設定，然後點擊「高級」標籤。將「使用預設設置」切換至關閉位置，然後選擇「不索引」。發布或更新文章後，搜尋引擎將被請求不索引該內容。
方法 3：使用 cPanel 密碼保護整個網站
如果您的 WordPress 託管供應商提供 cPanel 訪問來管理您的託管帳戶，則可以使用 cPanel 來保護整個網站。登錄到您的 cPanel 儀表板，然後點擊「目錄隱私」圖標選擇「文件」部分。
尋找您安裝 WordPress 的文件夾，通常是 public_html 文件夾。然後點擊該文件夾旁邊的「編輯」按鈕。勾選「密碼保護此目錄」，然後保存。設置您的用戶名和密碼，記得保存在安全的地方。用戶或搜尋引擎訪問您的網站時需要輸入這些憑據查看網站內容。
方法 4：使用插件密碼保護 WordPress
如果您使用託管 WordPress 託管解決方案，可能無法訪問 cPanel。在這種情況下，您可以使用 WordPress 插件來設置密碼保護。兩個最流行的解決方案是：
- SeedProd: 這是 WordPress 最佳的預告和維護模式插件，用於超過 80 萬個網站。提供完整的訪問控制和權限功能，可隱藏您的網站，包括搜尋引擎。
- Password Protected: 這是一種非常簡單的方式，使用單一密碼保護您的 WordPress 網站。參考我們的逐步指南了解如何設定。
搜尋引擎爬行和索引的專家指南
現在您已經了解如何阻止搜尋引擎爬行您的網站，可能會想了解更多關於搜尋引擎爬行和索引的指南：
- 如何隱藏 WordPress 頁面不被 Google 搜尋到
- 如何讓我的 WordPress 網站列在 Google 上？（新手指南）
- 為什麼我的 WordPress 網站被 Google 移除索引？
- 如何請求 Google 重新爬行您的 WordPress 網站的 URL
- 如何優化您的 WordPress robots.txt 文件以適合 SEO
- WordPress SEO 爬行預算問題以及如何解決
我們希望這篇文章幫助您阻止搜尋引擎爬行或索引您的 WordPress 網站。您可能還想查看我們的網站加速指南或我們精選的最佳 WordPress 登錄頁面插件。
如果您喜歡這篇文章，請訂閱我們的 YouTube 頻道獲取更多 WordPress 教程視頻。您還可以在 Twitter 和 Facebook 上找到我們。
