蛛蛛、機器上下團結爬行動物是你的朋友。假如要施行SEO，你不但消喜歡他們，同時你實在需求特地地把他們吸引到你的網站上來。

　　在SEO中，蛛蛛、機器上下團結爬行動物大體上講的是同一種物品，不過別不為己甚擔懮—他們都沒有腿和觸須。所以，讓我們一統用爬行動物(crawler)這個詞來人稱他們。請牢記，有時候你需求吸引這些個機器人，還是把你的網站假裝成蛛蛛香餌。這都歸屬同一個原則。 那末，什是爬行動物，為何我們要把它請到我的網站上來呢。 爬行動物是一種手續，還是是一段半自動化的腳本代碼(常常被稱為 bot，即 robot的減寫)，它在網上不已辛勞奔跑到各個URL上去。爬行動物經過他們所瀏覽的網頁上頭的鏈接從一個URL爬到另一個URL。

　　主流搜索引擎網站層出不窮地將他們的爬行動物派出去瀏覽廣大寬闊的互聯網。爬行動物首先找到各個頁面，而後把頁面上的文本和代碼復制並貯存在他們很大的引得服務器上，這個過程叫做爬動(spidering)。這個很大的引得，其實就是一個裡面含有搜索引擎網站爬行動物可以成功過訪到的全部網站頁面的數值庫。該引得被用來作為當你搜索時，可以急速速地獲得一個最後結果的庫房。當你在一個例如Google的搜索引擎網站上輸入一個搜索詞並提交處理，你 實際搜索的是搜索引擎網站所引得的所有內部實質意義，而不是當初互聯網的實際內部實質意義。 當然，網頁會變動。有時候，網頁和網站的變動周期十分短。除此之外，新的網站和網頁任何時間都在迅速顯露出來。這也是為何爬行動物始末都在那邊不斷地爬動，一遍又一到處瀏覽網頁，況且樹立和更新搜索引擎網站的引得信息。 搜索引擎網站引得庫裡邊的內部實質意義是爬行動物瀏覽網頁時看見的內部實質意義。爬行動物所看見的內部實質意義有可能和普通的過訪者看見的大是大非。假如你想檢查爬行動物看見的某個網頁的內部實質意義是啥子，你可以運用 IE瀏覽器前來訪問問它，而後按下Ctrl-A組合鍵，並瀏覽復制下來的內部實質意義(若是Mac系統，則可以運用Apple-U組合鍵)。還是，你可以借助 Google，點擊搜索最後結果下邊的網頁快照鏈接，就可以看見爬行動物近來對這個頁面做的快照了。首先也是最關緊的一點兒是，爬行動物將他們爬過的每個頁面的字和詞和詞組合起來。他們引得文本和鏈接。當你在搜索框中輸入一個搜索詞時，搜索引擎網站盡力非常准確地找出和搜索詞和詞組最般配的網頁。 不一樣的搜索引擎網站有他們獨具seo獨特的風格的爬行動物，和你所期料的同樣，他們並不是都以一致的形式來運行。有點爬行動物取得頁面上所有的內部實質意義，而有點有可能只是對那裡面的某些局部有興致。大多爬行動物都覺得，頁面的題目以及接近頁面頂部的內部實質意義，比遠在頁面下邊的內部實質意義更關緊。爬行動物在爬動網站常常常碰到絆腳石並穿過這些個絆腳石，譬如說，在網站上，沒有讓他們接著爬動的鏈接，還是他們碰到了由怪異技術或代碼導致的問題。爬行動物還有可能因為碰到技術阻攔，而進入了陷坑，因此使他們不可以隨便完成辦公。 所以，不論什麼SEO辦公的第1步的關緊局部都是讓爬行動物更容易發覺和爬動你的網站。假如你的網站沒有被爬行動物爬過，他們也就不會樹立關於你網站的搜索引擎網站引得。假如網頁沒有在引得之中，搜索者也不會在搜索引擎網站中找到它，由於搜索引擎網站覺得那一個頁面根本就不存在。與此同時，搜索者有可能找到其它網頁，況且很可能是你的競爭對手的網頁。 鏈接和專心預設的站點結構是樹立個體網頁、網站欄目與其它站內網頁和欄目之間關系的橋梁。這將給爬行動物供給清楚的爬動道路。

　　開創sitemap

　　樹立 sitemap 是幫忙搜索引擎網站爬行動物抓取網站的最簡單的辦法之一。sitemap是一個給爬行動物供給網站內部實質意義 URL詳細登記單—至少是網站領有者期望爬行動物看見的地址詳細登記單的文件(一般是 XML 款式)。 sitemap 中還可以涵蓋針對每個URL的附帶加上信息，例如指定頁面的近來更新時間、更新頻率，以及相對於網站上其它內部實質意義的關緊度(舉例來說，首頁比結合我們頁面更為關緊)。sitemap 所供給的信息可以幫忙搜索引擎網站爬行動物更智能地抓取網站。Google、MSN、Yahoo!以及 Ask 都接納網站領有者提交處理 sitemap 的煩請。不過需求注意的是，沒有不論什麼一家企業保障sitemap所提交處理的URL都會被抓取還是被引得。 sitemap 對於那一些供給不由得易被直接瀏覽到的信息的網站來說非常有用，例如有點站點儲存了數量多的檔案還是信息數值庫，這些個信息是經過用戶檢索能力看見的。請記取，爬行動物只是依據鏈接來抓取得信任息，而一般事情狀況下，這麼的信息是匱缺鏈接指向的。

　　文章出處： 過載請注明地址