淘宝网回应其为何 屏蔽百度蜘蛛爬虫的原因

2009-05-13 02:22:06来源:未知 阅读 ()

新老客户大回馈,云服务器低至5折

中国站长站讯:据消息人士称,淘宝网已经开始屏蔽百度的蜘蛛爬虫,淘宝网在网站根目录下的robots.txt文件中设置相关命令,禁止百度蜘蛛获取网页信息。

淘宝发言人向该人士表示,屏蔽确实存在,但并不是现在才开始,而是一直如此,屏蔽的是用户、成交等敏感信息。

据了解,网络爬虫是一个自动提取网页的程序,它为搜索引擎从Internet网上下载网页,是搜索引擎的重要组成。一旦淘宝网屏蔽百度的爬虫,那用户将在百度上搜索不到任何关于淘宝的信息。

标签:

版权申明:本站文章部分自网络,如有侵权,请联系:west999com@outlook.com
特别注意:本站所有转载文章言论不代表本站观点,本站所提供的摄影照片,插画,设计作品,如需使用,请与原作者联系,版权归原作者所有

上一篇:电视购物 瞬间沦为“垃圾股”?

下一篇:淘宝免费承诺10月到期 是否收费存疑

热门词条
热门标签