要做好一個網站，一著手就應當把網站的結構做好，由於一著手不確認好結構，後期再改的話虧損會非常大。網站大概主要有以下兩個結構門類。

　　一、物理結構

　　物理結構就是網站的目次方式，普通有兩種方式，扁平靜依從附屬，扁平結構就是全部的頁面都在網站的根目次，依從附屬方式就是每個內部實質意義頁面依從附屬於較高等級目次，層級比較清楚。在物理結構上，眾多人曲解了一句話：目次越少，蛛蛛越好抓取。這句話的意思是網站內裡的頁表情比較而言，目次越少，蛛蛛會優先抓取，譬如：

　　

　　上圖中，針對同一個網站而言，蛛蛛會依照從上到下的順著次序來抓取，由於搜索引擎網站的資源是有限的，因為這個蛛蛛在抓取網頁的時刻肯定會有一個先後順著次序，優先抓取一點目次較少的頁面，而目次較深，url參變量比較多的會放在最終抓取，由於搜索引擎網站的資源有限，我們如果一個蛛蛛來一次可以抓取100個頁面，那末排在後面的一點目次較深的有可能抓取不成，這就要求我們要合理安置網站物理結構，依據頁面的關緊程度來安置結構，而把全部頁面都放在根目次下，看似減損了目次層級，實際上就網站內裡而言，全部的頁面就都沒差別了，由於全部的頁面都在同一個目次下，對蛛蛛而言，已經沒有了不論什麼差別，一點小網站可以這麼安置，不過對於中大型網站這麼做顯然是不符合理的，那末多頁面都放在根目次，管理上太麻煩了，並且也沒不可缺少這麼做。

　　二、URL層級結構

　　實際上物理結構到現在為止對於抓取意義已經半大，URL層級結構就顯得比較關緊了，大家都曉得一個網站的頁面最多從首頁點擊四非主要能看見，多了蛛蛛就很難抓取了，普通的中小網站都沒不可缺少思索問題這一點兒，由於中小網站普通的頁面你不管怎麼做，點擊四次也足夠了。而對於中大型網站來說，因為欄目非常多，並且欄目前還有子欄目，下邊有可能還有子欄目，每個欄目標頁面有可能也太多，這個時刻就需求把內鏈做好，內鏈主要說下內部實質意義頁的鏈接散布，

　　1、鏈接到首頁和最高級欄目標導航

　　2、鏈接到較高等級欄目

　　3、面粉和水發酵制成的食品屑導航

　　3、鏈接到有關內部實質意義

　　4、隨機鏈接現時欄目標其它內部實質意義

　　對於中型網站來說，內部實質意義頁做到這幾點，普通蛛蛛的抓取都不了問題了。