網站SEO優(yōu)化中的meta robots，robots.txt的作用

什么是meta robot/robot.txt

這篇文章我們會告訴你如何使用meta robots以及robots.txt優(yōu)化百度等搜索引擎索引。

meta robots以及robots.txt工作是阻止百度等搜索引擎搜索并索引您的頁面。時下SEO優(yōu)化排名以及高流量是沒有特別大的用處。流量必須對企業(yè)有價值，能夠創(chuàng)造轉換。因此，用戶體驗相對重要。如果你有一個特定的頁面它可能會產生不好的用戶體驗（UX），通過這些方式，您可以防止該頁面出現在百度等搜索引擎搜索結果中。

meta robots vs robots.txt

robots.txt如果你使用它，可以阻止搜索引擎索引你的信息robots.txt為了阻擋搜索引擎，搜索引擎會跳過你阻擋的頁面，而不是搜索。

但meta robots不同的是，他阻止搜索引擎在索引層表面索引你的頁面，但百度等搜索引擎仍然有你的網站信息，但我們?yōu)槭裁匆@樣做呢？文章稍后會說出來的。

基本上，大多數情況下我們不會使用robots.txt為了防止搜索引擎索引我們的網站，除非你確定這個頁面對搜索引擎優(yōu)化有負面影響，如果你有一個頁面不想出現在搜索引擎中，我建議使用它meta robots只需控制索引。網站的數據仍然是一樣的。讓百度等搜索引擎搜索。但是如果你確定這些頁面會影響搜索引擎優(yōu)化，而且你不想搜索百度等搜索引擎，你必須使用它們Robots.txt。(例如，在開發(fā)中，但尚未完成的網頁)

使用robots.txt檔案很簡單，你只需要建立一個叫做robots的檔案txt檔案，并上傳到根目錄，并且在這個檔案中寫下你希望百度等搜索引擎不要抓取的頁面路徑。

你會看到的www.yinyiprinting.cn下面的根目錄我上傳了這個檔案，我不想讓搜索引擎抓住我的后臺登錄頁面，所以會有disallow: /wp-admin/這些內容

基本上在robots.txt你只需要在檔案中填寫這些資料：

User-agent：填寫搜索引擎蜘蛛的值（*號碼代表全部)

Disallow：填寫您希望搜索引擎不索引的頁面路徑

Allow：如果您希望搜索引擎索引，請?zhí)顚懡顾饕捻撁媛窂?/p>

學習使用meta robots

要用meta robots只要您直接將其添加到head下，您必須將此標簽添加到head中，即“您不想被索引的頁面下”。

所以如果你有六個頁面不想被索引？是的，你必須手動添加這六頁meta robots。

meta robots標簽是這樣長的:

基本上這個標簽有兩個值:noindex和nofollow:

index vs noindex

當你不想搜索引擎索引這個頁面時，填寫它noindex，如果你想填寫正常的索引，請?zhí)顚懰黫ndex

follow vs nofollow

至于fofollow，這個值意味著，如果你想讓搜索引擎在搜索這個頁面時不進一步搜索連接到頁面的連接，你將填寫nofolow的值。這個功能通常用于社區(qū)論壇或網站討論版，以防止有人在你的頁面上粘貼連接，以增加他的SEO優(yōu)化反鏈和排名。如果使用nofollow，搜索引擎的搜索將在頁面上停止，并且不會繼續(xù)向其他連接前進。固體可以防止粘貼連接的發(fā)生。

這兩個值的功能完全不同。讓我舉幾個例子，讓你知道如何使用它們。

1.

這種做法是告訴搜索引擎，不要索引我的網站，也不要在搜索數據時搜索相關鏈接。

2.

索引資料時，不要索引相關鏈接。

3.

不要索引我的頁面，但請正常索引頁面上的所有鏈接(最常用的使用方法)

4.

這種做法毫無意義。此外，此標簽與未添加標簽相同，這意味著搜索引擎將正常索引。

做SEO優(yōu)化，何時會用robots.txt阻止百度等搜索引擎索引？

對于索引（Crawl）在優(yōu)化工作中，你的網站百度一定要理解，數據也要掌握。有些動態(tài)的網絡結構對于網絡路爬的索引來說是有問題的，這個我在上一篇文章中提到過，畢竟最遺憾的是你的網站有優(yōu)質的內容，但是百度等搜索引擎根本找不到數據…。百度搜索引擎蜘蛛基本上是網絡上效率最好的，但相對來說就像神馬，Bing，360，它們的效率可能沒有百度搜索引擎那么好，所以我們要隨時關注百度搜索引擎的索引。

但是，你不希望百度等搜索引擎索引到一些頁面和內容，此時你必須使用它們Robots.txt為了阻止百度等搜索引擎蜘蛛的搜索，這也是我們今天文章討論的重點。讓我們來看看百度等搜索引擎蜘蛛不會索引你的網站。

未完成的頁面

如果你有一個由技術人員開發(fā)的頁面，但頁面需要很長時間才能完成，甚至需要修改和測試，未完成的頁面通常不會受到損害SEO優(yōu)化，但您不希望訪問者在搜索引擎中搜索未完成的頁面，因為未完成的頁面會給用戶更差的使用體驗。

測試頁面

我曾經碰過工程師，為了做功能測試，打開了測試用子網域，并上傳了與主網域完全相同的內容來理解百度等搜索引擎Panda：本文提到了網站內容對SEO的影響。完全相同的網站內容會對SEO優(yōu)化造成損害。如果有這樣的頁面，我建議你把百度等搜索引擎蜘蛛擋在門外。

網站背景，其他原因

就我而言，我的網站是用WordPress架設的，所以我用了robots.txt防止搜索引擎搜索我的網站后臺。搜索引擎搜索到后臺的登錄頁面對SEO沒有損害，但一點幫助都沒有。同時，如果你不想搜索引擎搜索你的網站，我也建議你使用它robots.txt阻止搜索引擎的索引。

www.yinyiprinting.cn 寧波海美seo網絡優(yōu)化公司 是網頁設計制作，網站優(yōu)化，企業(yè)關鍵詞排名，網絡營銷知識和開發(fā)愛好者的一站式目的地，提供豐富的信息、資源和工具來幫助用戶創(chuàng)建令人驚嘆的實用網站。 該平臺致力于提供實用、相關和最新的內容，這使其成為初學者和經驗豐富的專業(yè)人士的寶貴資源。