懂robots.txt的朋友請進

來源: 於 2013-07-13 15:55:59 [博客] [舊帖] [給我悄悄話] 本文已被閱讀：次

在網站根目錄裏發現一個文件名為robots.txt的文件, 這是幹什麽的? 文件就兩行內容:

User-agent: *
Disallow: /

可以刪處嗎? 多謝.