一個新域名,花了幾天的時間開創了900多個二級域名，而後檢查服務器日記，發覺百度抓取規律，如下所述圖：

　　這些個IP地址 全是百度的各路蛛蛛，可以到ip138去查，那裡面/ HTTP/1.1 代表的是域名首頁的意思，意思就是不含後綴鏈接的意思，譬如二級域名，三級域名，從日記看發覺百度最先抓取首頁，而後再一個個地的抓取其它二級域名，而後再列表頁，這也是為何百度沒有著手收錄內部實質意義頁的端由，百度的原理先務必把網站的群體結構給引得號，而後最終纔抓取內部實質意義頁， 200代表抓取成功，後面那串五位的數碼是頁面體積的意思，單位為KB。

　　我們再來看谷歌蛛蛛的日記：

　　看圖可以發覺谷歌在瞬息間內次數多過訪sitemap，解釋明白谷歌更重視站點地圖，也就是sitemap.xml文件，額外谷歌是在篤守robots.txt文件下看見鏈接就抓取，況且可以很快獲得搜索，不過必須要先搞好網站結構，哪一些該抓取哪一些不該抓取必須要在樹立站之前就設置好，給谷歌蛛蛛好印象，否則你收錄眾多都不會有搜索。

　　這是計數谷歌搜索引擎網站顯露被用戶搜索到本站的關鍵字，一個新站三四天時間就獲得谷歌那末多的搜索，我想眾多站長都不會有這麼的經歷。

　　期望跟大家分享下，本人首次發文，書契團體不如何，見諒，本文愛尚購網原創內部實質意義，過載請注明來源，