大家好，我是首次在這上頭刊發文章，如有非常不好地方請聖手多多提意見。

　　1、搜索引擎網站能不可以找到網頁。

　　1要讓搜搜引擎發覺網站首頁，就務必有令人滿意的外部鏈接鏈接到首頁，就找到達首頁，而後蛛蛛會沿著鏈接爬的更深。

　　讓蛛蛛經過簡單的html頁面的鏈接到了，javascript鏈接，flash鏈接都是蛛蛛的陷坑。這點要注意。

　　2找到網頁後能不可以抓去內部實質意義。

　　被發覺的蛛蛛是可以被爬取的，數值庫動態生成，帶過眾多的參變量url、sessionID、整個兒頁面都是flash、框架結構、數量多的轉向，和數量多的復制內部實質意義都有可能把蛛蛛中途阻擋在門外。這也也是要注意的

　　2、flash

　　1在網頁某一個局部運用flash來加強視物感覺效果很正常，譬如如今眾多的flash廣告、圖標等。不過這是一個html頁面的一小批。不會有太大的影響

　　2不過有的網站就是一個非常大的flash文件，這就構成了蛛蛛的陷坑，這會兒蛛蛛爬取的只有一個flash鏈接，沒有其它的內部實質意義，所以這點盡力要防止。

　　3、sessionID

　　1有點網站運用sessionID(對話ID)跟蹤用戶的過訪，用戶的沒一次過訪都會生成一個獨立的ID，而後加在url裡，這是蛛蛛每一次抓取網站都會把蛛蛛當作一個新的用戶，導致蛛蛛不可以正常爬取，這也是蛛蛛的一大陷坑。

　　2一般提議跟蹤用戶過訪應當運用cookies而不要保存生命sessionID 。

　　4、各種的跳轉

　　1除開大家知道得清楚的301轉向以外，其它的轉向對搜索蛛蛛都比較敏銳的，譬如302短時間之內轉向，javascript轉向，flash轉向，meta refresh跳轉，所以提議大家不要做其它有弊於網頁的轉向，301也涵蓋，不到沒有辦法的時刻也不要用301轉向。這是個提議。

　　5、框架結構

　　1假如你不曉得框架結構的話，你就可以省略這一個步驟，由於你已經防止了這個蛛蛛陷坑。

　　2運用框架預設頁面，在早期的時刻有，然而如今的網站都很少用框架預設，所以這處就無幾說了，不管你是在用還是沒用，記取一句話：不要讓搜索引擎網站去討好兒你。遺忘框架這回事。

　　6、動態url

　　1動態url是指數值庫驅動的網站所生成的，帶有? =號的等參變量的都是，普通來說要防止這種動態參變量url、由於這麼有弊於蛛蛛爬取。

　　7、javascript鏈接

　　1如今有眾多的網站都喜歡用java腳本代碼生成導航系統，這是一個很嚴重的蛛蛛陷坑，就等於在蛛蛛還沒著手爬的時刻你就已經把守門戶關了了。所以要盡力防止

　　2java鏈接在seo中也有一定的用場，站長可以讓一點不參加名次的網頁和重復的內部實質意義頁面，可以用java鏈接阻擋蛛蛛爬取。

　　8、要求登錄

　　1 有點網站的內部實質意義是需求用戶登錄能力看見的會員地區范圍，由於這局部蛛蛛爬取不到，由於蛛蛛不會注冊，也不會登錄，也不會輸記入帳簿號password。所以要改正掉。

　　9、強迫運用cookies

　　1有點網站為了成功實現某種功能，如記取用戶信息，跟蹤用戶過訪途徑等。強迫用戶用cookies，假如用戶沒有用cookies，頁面便會事實不正常。所以強迫運用cookies只能導致蛛蛛沒有辦法正常過訪。

　　好了，謝謝大家能把我的文章看完，固然不怎麼好，但也是我的一點兒體會，期望能放到首頁供更多的人參照 小弟謝謝。

　　技術交流 83884473