Ailsa：SEO是怎麼樣倚賴技術剖析的

07年曾經的阿裡吧吧，通過幾年的盡力盡量，已經把SEO做到達一個頎長的境界。當初上層SEO團隊的擔任職務的人是做技術出身，所以大家數量多借助技術手眼來剖析和解決SEO之中顯露出來的眾多問題，獲得了美好的效果。由於牽涉到到現存的業務，只能說幾個不那末敏銳的例子。

Google 網站管理職員具剛出來的時刻，我們網站有眾多頻帶都證驗不成那一個google需求你上傳的文件。工程師那裡幫忙查了眾多問題，以為是啥子跳轉什麼的的沒有做好。查了眾多資料，也沒有找到特點標志吻合的有關解決方法。而meta證驗的辦法由於技術上有一點兒問題做不成。所以我們SEO團隊就幫工程師去找問題。我同事瞿波不相同會就找出問題出在啥子地方了，原來問題出在泛解析上。

具體的過程就是這樣：

用了泛解析的url，不管你把url組合成一個啥子模樣，都會有一個正常的頁面給你的。譬如：假如你網站的根目次下用了泛解析， 這個url是你網站壓根兒正常的url。那末你隨心的輸入一個壓根兒不存在的url 如 甚至於 ，網站CMS回返的都是一個正常的頁面。

這在一個大型網站中，眾多地方出於業務需求，都是這樣處置的。不過這麼做，在網站管理職員具的證驗方面就一定不可以經過。為何呢?

由於這麼誰都可以把這個網站加到自個兒的網站管理職員具中。而其實這麼的事情狀況是不會發生的，由於google不止會證驗你上傳的文件存不存在，還會證驗一個不應當存在的文件是不是不存在。google證驗完你上傳的文件後，繼續會摹擬一個叫做 google404errorpage.html 的頁面是不是不存在。google感到你網站根目次下正好存在一個名叫google404errorpage.html的概率是零，所以假如檢驗測定下來發覺你這個頁面也存在的話，那就不可以證驗經過。google這個時刻已經曉得你這是由於泛解析造成的原故。出於盡力照顧你的網站，google不會讓這個證驗經過。

上頭的這個剖析過程，在公開的渠道裡是找不到的。如今在《google網站品質指南》裡也只是讓你給不存在的頁面回返 4xx 狀況碼罷了。，我想眾多人都不會感到這個url有啥子異常。不過在當初，這個url有一個致命問題的。

在02年google的爬行動物還不是很成熟的時刻，為了防止陷於死循環，爬行動物不止會對那一些有駢枝參變量的url抓取量減損，還會對某些特別指定的目次不抓取的。這麼的目次中，就有 /cgi-bin/ 以及大致相似的 /bin/ 這麼的目次。學過CGI語言的人都曉得，/cgi-bin/這個目次下是安放cgi手續的地方，這種目次下施行抓取是沒關系意義的。/bin/這個目次也是其它眾多系統還是語言默許的文件夾名字，這些個目次下都不存在google應當抓取的頁面，所以搜索引擎網站就屏蔽了這麼的目次抓取。而偏生我們定義的文件夾名字就是/bin/，google是不會抓取這個目次的。

在這以後，把這個目次名字改為/trade/，流量立刻就還原了。現在，百度也在robots文件的用處中，就拿/cgi-bin/這個目次做了例舉。 ，我信任這麼的問題縱然放迄今，也沒有人敢置疑是google本身出了問題。有點人還會從上百個因素裡找一個看似很合理的端由，造成真正的端由被打掩護了。不過ben經過技術剖析並實踐，卻得出了讓人相信和佩服的論斷。大致相似的事物，我後來也遇到過好幾回，由於有它們的經驗在鼓舞我，使我也做了一點讓另外的人不可以了解，不過卻給網站帶來非常大流量的事物。

技術剖析在和競爭對手搶流量的時刻，也是競爭力之一。舉一個不那末妥當的例子：

sitemap.xml剛出來的時刻。我們自個兒制造好了sitemap.xml文件，不過畢竟偌大型的sitemap文件誰也沒有做過，尤其是裡邊權重的設置在一個大型網站來說是很有講究的。所以我們就想參照一個海外主要競爭對手的文件。一著手經過一個辦法拿到達它們的文件地址，不過怎麼也打不開那一個鏈接，總是回返404不正確。經過海外的攝理服務器去過訪也是這麼。最終，經過摹擬google爬行動物能力正常的過訪這個文件。 原來一樣十分看得起SEO的這個對手，為了讓自個兒的sitemap.xml文件不被別人看見，只有對那種user-agent是google爬行動物的過訪纔顯露這個文件，因為瀏覽器的user-agent是很容易判斷出來的，就中途阻擋掉了瀏覽器的過訪。

《如何去學SEO》一文，講評了學SEO要從理解網站和搜索引擎網站有關的技術著手。而這篇文章就是讓大家看看具體是怎麼樣應用的。阿裡吧吧最早做SEO的那批人，早在國內還不曉得SEO是之類時刻就已經牽涉到到達好些個技術問題，並立刻獲得壓倒性的優勢。固然如今它們由於某些端由都沒有在做SEO了，不過它們給網站的貢獻是很大的。我私人的觀點: 從某方面來說，是SEO業績了alibaba。