對於robots.txt，有可能普通人的觀點是可寫可不寫，寫錯了還有麻煩，所以索性不寫。實際上，在搜索引擎網站優化中，robots.txt有這樣幾個妙用。如今咱們一一來看下robots.txt的妙用。

　　1、新站開創的時刻指導蛛蛛抓取列表頁。新站初建，在你的robots.txt寫入網站的欄目地址以便抓取。舉出例子如下所述

　　#

　　站長網首發，過載請請保存 / 鏈接。