当前位置:主页 > 业务范围 > 搜索引擎优化-SEO > SEO-FAQ >
SEO-FAQ
Proposal

新浪微博真的禁止蜘蛛了吗?

的确是被禁止了,很简单去查看一下http://t.sina.com.cn/robots.txt 就知道了,虽然当你去打site命令的时候还是有收录的,这是正常现象,因为robots禁止并不是一枪毙命的。搜索引擎蜘蛛或多或少还是会去爬取一些内容,只是被屏蔽的的网站SEO价值就不是那么高了。新浪这样做的主要目的我认为是1)减少网站资源,因为2大搜索引擎蜘蛛爬取的话对服务器压力是非常大的 2)微博在中国还是比较新鲜的事,所以相对比较敏感一点,万一有个什么anti-g0v的东西就麻烦了,所以不能向外扩展。因此大部分国内微博都目前显示测试版。

新浪微博robots

回答者:Boson

如果您有更多需求或问题——
请垂询021-63868281, Email:marketing[at]darwinmarketing.com

业务范围 成功案例 技术产品 关于我们 联系我们

达闻博客RSS  达闻新浪微博  达闻腾讯微博  达闻微信账号,扫一扫

上海市黄陂南路700号D座303室
电话:+86 (21) 63868281
Email:marketing@darwinmarketing.com
  征信网  上海网警网络110

Copyright© 2014 Darwin Marketing Ltd. All Rights Reserved.

百度星级代理 google代理 SEMPO