今日來說一個大家非常知道得清楚的物品robot文件，信任大家對這個不生疏吧!不過我發覺眾多站長seo朋友們遺忘了這個文件的關緊性，並且在設置的時刻很隨心。這種了解是差錯的.我自已在一邊兒聽老師教課一邊兒自學，今日遇到了這個問題;隨即,我就諮詢了一位seo的老師，我問他：老師這個robots關緊嗎?當初，老師語重心長的對我講了一句;robots既可以業績你的網站;也可以銷毀你的網站。所以嘛，仍然很關緊的。

　　言歸正傳吧!來和大家聊聊robots在我們網站的一點事情狀況;在seo研討核心有一位和我是比較好的朋友，有一次，他的網站有收錄上千，忽然一個後半晌收錄為0了。當初他慌了，由於網站收錄沒有了;流量也沒有了，辛辛苦苦的忙了一個多月。到頭來卻發覺;竹籃子打水一場空。當初他萬念俱灰;就跑到群裡談天，滿眼去問;我網站被k了，求解決辦法啊!心裡急躁如焚，而後，有眾多人幫他忙;查緝端由，通過一段很長的時間查緝，大家發覺了端由是他的網站robots屏蔽了百度蛛蛛抓取網站頁面。

　　

　　為何會顯露出來這種事情狀況呢?端由在於它在做網站的時刻robots是絕對屏蔽了百度蛛蛛抓取。大家曉得一個事情的真實情況吧!就是當你寫好了規則;屏蔽了百度蛛蛛的時刻，可以發覺百度仍然會抓取的。道理很簡單，百度沒可能做到人同樣智能化。所以你屏蔽蛛蛛他仍然會來抓取的。不過你也別慌啊!等過段時間百度便會把已經抓到的頁面、不過你robots文件中有屏蔽的頁面;他會從引得庫刪去，百度也會有一個發覺的過程;到修改和糾錯的過程。

　　當初，我就想的起來他說了一句話，就是為何會去屏蔽百度蛛蛛?由於網站剛做;並且他本人也學習了seo，所以也聽過seo的老師講過一點這方面的內部實質意義，清楚自已做一個新站可以短時間之內屏蔽網站蛛蛛;等網站做好了再提交處理給搜索引擎網站，況且把robots文件修下，准許百度抓取;有可能是他遺忘了，把這關鍵一步給遺忘了。造成他辛苦做的網站和外鏈;被百度刪去開收錄的頁面，那段時間很苦痛;他整個兒人情緒也曲直常消沈的。

　　今日，我經過這個朋友的經歷也是期望大家能夠去看得起robots這個問題?很關緊，請不要麼重視了;順便自已談談我做的robots的一點經驗，我想的起來網站在新建的時刻。我自已也是沒有注意robots文件這個物品，感到無所說的啊!而後昨日聽老師講到達這個問題;我自已著手看得起了，而後我著手把一點很垃圾的頁面和圖片所有給屏蔽了，頁面主要是一點動態頁面，大家都曉得;百度喜歡靜態的;假如你網站是動態;會導致搜索引擎網站多次抓取，給搜索引擎網站印象又不友善。耗費蛛蛛時間和資源。你說他能對你又好嗎?還有圖片也是一點網上搜集的圖片;由於百度把一點原創圖片給抓取了，假如你網站再用;這會造成百度覺得你網站是剿襲的和偽原創的。這會造成百度不收錄你的網站。

　　說了這樣多，我私人提議就是期望廣大的站長朋友能夠去看得起這個問題!由於很關緊;如有不懂怎麼制造?可以去我博客留言，我會奉復解釋回答!期望你能夠做好robots。

　　文章筆者：SEO每一說，出處：

　　熱烈歡迎參加seo交流群：208564536一塊兒分享和交流seo。

　　版權聲明：過載請注見於文字章出處：謝謝合作。