看板FreeBSD
标 题Re: 请教 Googlebot...
发信站幸运草之씠(Tue Jun 26 12:06:47 2007)
转信站ptt!ctu-reader!ctu-gate!news.nctu!news.ntust!news.cis.nctu!news.ee.ttu
※ 引述《[email protected] (工程酥)》之铭言:
> 我架了一个论坛,最近才发现"会员线上状态"那边经常会有一个访客在上面
> 仔细瞧了一下是来自:crawl-66-249-65-177.googlebot.com
> 後来我看线上的文件写说把robot.txt放在www的/
> robot.txt内容如:
你应该把 robot.txt rename 成 robots.txt
以上只能挡守规矩的搜寻引擎,如果想要档的更彻底
另外可以参考
http://blog.wu-boy.com/2007/06/20/110/
> User-agent: *
> Disallow: /
> 观察一阵子之後Googlebot还是在线上..
> 请教正确的方法应该是如何呢.... 谢谢
--
╭═╮ ╭═╮ ╭═╮ ╭═╮ ╭═╮
╰═╮ ║═╯ ║ ║ ╭═║ ╭═║
╰═╯ ╰═╯ ╰═║ ╰═╰ ╰═╰ ˍ
╰--╯ ▕㊣▏
▔
--
* ◣◤╮ ﹡ segaa.twbbs.org ┼┼┼┼┼ ◣◢ ‧ ‧
┼┼┼┼◢◥╰╮ 幸运草之恋 ◥◤ ˙ 。
<center><a href = http://segaa.net >幸运草首页</a>