梦游时光互联 - Powered by Discuz! Board

标题: 屏蔽了百度、有道、搜狗和爱问蜘蛛，伺服器负担降低了不少呢。 [打印本页]

作者: An_Apple 时间: 2009-9-20 06:23 PM 标题: 屏蔽了百度、有道、搜狗和爱问蜘蛛，伺服器负担降低了不少呢。

在 robots.txt 里加入如下代码，然后上传至网站根目录：

CODE:

User-agent: baiduspider
Disallow: /

User-agent: Baiduspider
Disallow: /

User-agent: YodaoBot
Disallow: /

User-agent: sogou spider
Disallow: /

User-agent: iask spider
Disallow: /

作者: szcw1048 时间: 2009-10-30 09:28 AM

yun

作者: qcg 时间: 2009-10-30 12:23 PM

你自己有服务器了？

作者: An_Apple 时间: 2009-10-30 08:28 PM

QUOTE:

原帖由 qcg 于 2009-10-30 12:23 PM 发表
你自己有服务器了？

服务器是租用的，哎。没有所有权，只有使用权，而且极大地受限。

作者: sunray 时间: 2009-11-4 02:12 AM

seo也完蛋了

欢迎光临梦游时光互联 (http://web.meyu.net/)