在幾種情況下,您希望阻止搜索引擎抓取您的網站并將其列在搜索結果中。在本文中,我們將向您展示如何阻止搜索引擎抓取 WordPress 網站。

為什么要阻止搜索引擎抓取 WordPress 網站?
對于大多數來說,搜索引擎是最大的流量來源。你可能會問,為什么有人要勸阻搜索引擎?
以下是您不希望搜索引擎將您的網站編入索引的一些情況:
-
剛開始時,您可能不知道如何創建或,而是在網站上線時開發網站。您不希望 Google 在您的網站正在建設中或處于維護模式時將其編入索引。
-
也有很多人使用WordPress創建。他們不希望它們被搜索引擎索引,因為它們是私有的。
-
您可以使用 WordPress 進行或。在這些情況下,您不希望您的內部文檔可公開訪問。
一個常見的誤解是,如果你沒有指向你的域名的鏈接,那么搜索引擎可能永遠不會找到你的網站。這并不完全正確。
例如,可能存在指向您網站的鏈接,因為該域名以前歸其他人所有。此外,互聯網上有數以千計的頁面只是簡單地列出了域名。您的網站可能會出現在其中之一上。
話雖如此,讓我們來看看如何阻止搜索引擎抓取您的網站。我們將介紹四種方法:
方法1:要求搜索引擎不要抓取您的WordPress網站
這是最簡單的方法,但并不能完全保護您的網站不被抓取。
WordPress 帶有一個內置功能,允許您指示搜索引擎不要索引您的網站。您需要做的就是訪問“設置”?“閱讀”,然后選中“搜索引擎可見性”旁邊的框。

選中此框后,WordPress 會將以下行添加到您網站的標題中:
<meta name=``'robots'` `content=``'noindex,follow'` `/>
WordPress 還會修改您網站的 文件,并向其添加禁止規則:
User-agent: *``Disallow: /
這些行要求機器人(網絡爬蟲或機器人)不要索引您的網頁。但是,完全取決于搜索引擎是否接受或忽略此請求。盡管大多數搜索引擎都尊重該請求,但您網站上的某些頁面或圖像仍有可能被編入索引。
如果你想讓搜索引擎無法索引或抓取你的網站,那么你需要使用方法3或4對你的WordPress網站進行密碼保護。
方法2:要求搜索引擎不要抓取單個頁面
您可能希望搜索引擎抓取您的網站并將其編入索引,但不要在搜索結果頁面中包含特定帖子或特定頁面。
最簡單的方法是使用 插件。它是 ,受到超過 3 萬家企業的信任。
在本教程中,我們將使用 ,因為它包括 SEO 分析工具。,它提供了更多功能,如站點地圖工具、重定向管理器、模式標記、robots .txt 編輯器等。
您需要做的第一件事是在您的網站上安裝并激活 AIOSEO 插件。您可以按照我們關于 的分步指南來學習如何安裝和配置插件。
設置插件后,您可以使用它來要求搜索引擎不要索引某些帖子和頁面。同樣,完全取決于搜索引擎是否接受或忽略它。
只需編輯您不想被編入索引的帖子或頁面即可。您需要向下滾動到 WordPress 編輯器底部的 AIOSEO 設置,然后單擊“高級”選項卡。

請注意,本文使用的是默認的機器人設置。
要更改此設置,您需要將“使用默認設置”開關切換到關閉位置。

現在,您可以單擊“無索引”復選框。一旦帖子發布或更新,搜索引擎將被要求不要將其編入索引。
方法3:使用cPanel密碼保護整個站點
如果您的 提供 cPanel 訪問權限來管理您的托管帳戶,那么您可以使用 cPanel 保護您的整個網站。
您所要做的就是登錄到cPanel儀表板,然后單擊“文件”部分中的“目錄隱私”圖標。

接下來,您需要找到安裝 WordPress 的文件夾。通常,它是public_html文件夾。
之后,只需單擊該文件夾旁邊的“編輯”按鈕。

注意:如果您在該目錄下安裝了多個 WordPress 站點,則需要單擊鏈接以瀏覽這些站點,然后編輯要密碼保護的網站的文件夾。public_html``public_html
這將帶您進入一個屏幕,您可以在其中打開密碼保護。
只需選中“密碼保護此目錄”框,然后單擊“保存”按鈕。如果您愿意,還可以自定義受保護目錄的名稱。

您將看到一條確認消息,指出該目錄的訪問權限已更改。
接下來,您必須單擊“返回”按鈕。

您將被帶到一個屏幕,您可以在其中創建訪問此目錄時需要使用的用戶名和密碼。
您需要輸入用戶名和密碼,然后確認密碼。請務必在安全的地方記下您的用戶名和密碼,例如。

單擊“保存”按鈕后,您已成功將密碼保護添加到您的 WordPress 網站。
現在,每當用戶或搜索引擎訪問您的網站時,系統都會提示他們輸入您之前創建的用戶名和密碼來查看該網站。

方法4:使用插件密碼保護WordPress
如果您使用的是解決方案,那么您可能無法訪問 cPanel。在這種情況下,您可以使用 WordPress 插件對您的網站進行密碼保護。
以下是兩種最流行的解決方案:
-
是 WordPress 的 #1 插件,用于超過 800,000 個網站。它具有完整的訪問控制和權限功能,您可以使用這些功能向所有人(包括搜索引擎)隱藏您的網站。我們為 提供了分步操作指南。
-
密碼保護是一種非常簡單的方法,可以使用單個對WordPress網站進行密碼保護(無需用戶創建)。






