robots.txt文件，SEOER們都曉得，就是可以設置你網站的哪一些內部實質意義准許蛛蛛抓取，哪一些不准許蛛蛛抓取的一個文件。今天，據百度站長平臺最新消息兒，用戶在百度搜索網址或有關關鍵字時，網頁搜索最後結果會顯露出來robots提醒。簡單地說，假如你的網站設置了robots文件，況且是不准許蛛蛛抓取的，而這個網站對用戶有是有需求的，百度就是依據你輸入的網址或有關關鍵字展覽這個網站，然而，這和其他網站不同，搜索的最後結果只顯露出來title中的局部關鍵字，況且不會顯露出來這個網站的元標簽描寫局部。對應的元標簽描寫局部將由最新上線的robots提醒接替，譬如，用戶在搜索淘寶網時，顯露出來因為該網站的robots.txt文件存在限止指令，系統沒有辦法供給該頁面的內部實質意義描寫 – 理解詳細情形字樣。
百度這動不動作，意味著啥子，作者就私人看法談談百度些次網頁搜索最後結果robots顯露出來提醒的意義及獨特的地方。
對搜索最後結果顯露出來robots提醒的了解
面前和大家說到，假如你的網站設置了robots文件，並且是嚴禁百度蛛蛛抓取的，不過你的網站又是百度需求的，用戶在搜索該網址或網站名字時，便會顯露出來robots提醒。百度官方在增長，百度蛛蛛會依據robots協議來是否抓取，並閃現最後結果在搜索最後結果中。從其中我們看見，私人覺得百度是爬動了這網站，只然而是沒去收錄並呈如今搜索最後結果中罷了，然而，作者也測試了一個網站，假如百度蛛蛛沒去爬動，就算你的網站寫了robots文件，況且是嚴禁百度蛛蛛抓取的，搜索最後結果仍然不會顯露出來robots提醒的，或許是百度覺得這網址不是用戶有需求的吧。然而，還真不曉得蛛蛛是怎麼樣確認一個網站是否是用戶需求的，私人感受，一個網站假如嚴禁百度蛛蛛抓取，假如搜索最後結果中要顯露出來robots提醒，那末這個網站一定是蛛蛛爬動過的，況且是對用戶有用的。
搜索最後結果顯露出來robots提醒是為提高用戶體驗認識
像淘寶這麼的大網站，知名度那末高，固然眾多用戶在過訪淘寶網時不會顯露出來去百度搜索，而是直接過訪淘寶網，然而，假如用戶在百度搜索最後結果中顯露出來找不到最後結果，表面化是對用戶體驗認識非常不好的，百度這一舉措，可謂是在不停地增長用戶體驗認識。前些天作者在用google的時刻就發覺了這一功能，表面化，google比百度這在方面做得更好，由於作者一個網站在改版時，設置了robots文件嚴禁google robot抓取，所以回返的最後結果就像百度網頁搜索最後結果一下子，顯露出來了robots提醒。
文章由 生產模型廠 原創，過載請解釋明白來源!