拒絕搜尋引擎的查詢

By frank on November 1, 2004 1:04 PM | Permalink | Comments (0) | TrackBacks (0)

在 / 放置 robots.txt, 檔案內容如下
User-Agent:*
Disallow:/
遵照標準的搜尋引擎，在查詢前會先檢查有沒有 robots.txt 這個檔，有的話就先讀robots.txt，於是就會知道這個站台不希望被查詢。

更詳細的說明在此，記在這裡以免忘記。

0 TrackBacks

Listed below are links to blogs that reference this entry: 拒絕搜尋引擎的查詢.

TrackBack URL for this entry: http://hardtosay.net/mt/mt-tb.cgi/111

Leave a comment