方兴东：不要把ROBOTS协议当成竞争的工具

　　近日，搜索界3B大战的一个焦点话题就是：搜索引擎是否一定要遵守 Robots协议?不遵守Robots协议，是否就是窃取隐私?对此，博客网创始人、互联网实验室董事长方兴东表示，Robots协议不该拿来说事，而利用Robots协议打击竞争对手，更是违背开放共享的互联网精神的。

　　Robots协议的来源本来是因为一个网站，由于谷歌的抓取出现技术问题，因此和谷歌协商达成的一个协议，作为一个网站表达对搜索引擎抓取态度的文件。这个约定本身是为了网站内容可以更好更安全地被搜索引擎抓取来设立的。因为网站内容本身就是公开信息，并非隐私，所以Robots协议并不是一个保护隐私的协议，而是一个协调搜索引擎和站长之间关系的协议。

　　据方介绍，这个协议本身就是处理搜索引擎和网站之间的关系而存在，如果被利用拿来做行业竞争。就会出现，垄断网站收买大量网站，通过Robots协议屏蔽其他竞争对手的现象，这就会毁掉开放共享的互联网机制，对互联网信息的自由流动、平等获取和开放共享将收到摧毁式的打击!中国当下更应当倡导和弘扬互联网精神，Robots协议不宜过多强调，更不宜过度使用!更不要作为大旗!

　　“我们试想，如果中国前100家网站都使用Robots协议限制百度，百度马上被摧残;如果百度签下前1000网站的独家抓取的协议，捜索从此再也没有竞争，互联网江湖必将大乱。捜索和网站本来相得益彰，如果百度身兼两职，以Robots协议放弃公正公平，最可能损人不利己!”

　　业内人士认为，Robots协议既不是隐私保护协议，也不是竞争手段，而是行业自律的守则，也是搜索行业得以健康发展的必要守则。