robots协议你遵守了吗?百度与360搜索打官司了!

互联网络 - 十月 17, 2013 - 来源:单点日志 - No Comments -

争论的焦点是360搜索没有遵守robots协议,360搜索抓取了百度网站的内容,百度公司旗下所有内容都不允许360搜索索引,很明显其目的应该就是限制360搜索,毕竟百度的有些内容还是可以看看的,但是就像wikipedia.org的robots也没有限制搜索引擎,资源分享让大家都能看到有用的资料,毫无疑问,百度明显是在担心一个问题,360搜索可能会崛起,抢占更大的份额。

如果百度自己本省没有搜索引擎,相信不存在这样的限制。robots协议,定义robots.txt可以告诉搜索引擎您的网站哪些页面可以被收录,哪些页面不可以被收录,如果您不想让搜索引擎收录您网站的某些内容,请用robots.txt文件指定搜索引擎在您网站上的抓取范.txt文件,及robots.txt文件内容,并能按照您的需求生成正确的robots.txt文件。

我们可以是看到“页面不可以被收录”,目前我们可以在360搜索中查询其收录的百度页面已不足20页,诉讼还在继续,百度要求赔偿1亿元,真是狮子大开口阿。

同样我们来看看,著名购物网站,www.taobao.com和www.tmall.com同样唯独限制百度搜索索引,那么如此强大的搜索引擎为何遭到屏蔽不让其索引呢,原因颇多,根本原因是淘宝和百度的网络经营理念存在分歧,同样是限制索引,百度还在索引www.taobao.com和www.tmall.com的内容,那么是不是淘宝也可以起诉百度,要求删除页面,而并不是注明,“由于该网站的robots.txt文件存在限制指令,系统无法提供该页面的内容描述 ”,并且赔偿经济损失2亿元呢。

因为淘宝的影响力,太多的商品,百度不得不索引其标题提供给用户,因为一旦错误,可能造成用户的损失,而曾经就因淘宝客服电话的错误,导致搜索者损失钱财,百度被批评教育,因此百度部的部更多的索引淘宝内容,同样没有遵守robots协议。

这样的举动,我只能说是搬起石头砸自己的脚。



无觅相关文章插件,快速提升流量

《robots协议你遵守了吗?百度与360搜索打官司了!》由单点日志原创提供!
转载请注明:http://spoint.babyshoot.cn/archives/2013/10/robots-xieyi.html

No Comments│赶紧发话! »

发表评论

您必须登录后才能发表评论。
8