防止網頁爬蟲
http://support.google.com/webmasters/bin/answer.py?hl=zh-Hant&answer=156449
在跟目錄建立 robots.txt 檔案
User-agent: *
Disallow: /space.php
Disallow: /admin
*.不過不一定所有爬蟲都會去讀 robots.txt
在跟目錄建立 robots.txt 檔案
User-agent: *
Disallow: /space.php
Disallow: /admin
*.不過不一定所有爬蟲都會去讀 robots.txt
防止網頁爬蟲
Reviewed by Wild
on
10/04/2012 10:13:00 上午
Rating:
沒有留言:
沒有Google帳號也可發表意見唷!