2月1日消息,即日起,盘古搜索获准加入百度网站Robots协议白名单,获得抓取百度网页、百科、知道、文库、贴吧、音乐等百度旗下产品页面的权限。
随着盘古搜索的加入,百度Robots协议白名单已经覆盖谷歌、必应、有道、搜狗、即刻、搜搜等国内外主流搜索引擎。
Robots协议,业界又称爬虫协议或机器人协议,是国际搜索引擎的通用规则。网站通过该协议告诉搜索引擎哪些页面可以索引,哪些页面不能索引。作为国际互联网界通行的道德规范,Robots协议的目的在于保护网站数据或敏感信息,确保用户个人信息和隐私不被侵犯。
百度表示,欢迎其他搜索引擎在遵守Robots协议的情况下索引百度内容,也希望其他违反市场竞争底线,无视Robots协议的厂商尽快纠正其违规行为。
盘古搜索相关人员表示,Robots协议是搜索产业发展繁荣的基石,盘古搜索呼吁业内共同遵循国际通行的行业惯例与商业规则,遵守Robots协议,并愿与行业内的合作伙伴一起,共同提升搜索服务质量。
去年11月,在工信部协调下,中国互联网协会召集百度、即刻搜索、盘古搜索、奇虎360、盛大文学、搜狗、腾讯、网易、新浪、宜搜、易查无限、中搜等12家发起单位共同签署了《互联网搜索引擎服务自律公约》。签约企业承诺遵循国际通行的行业惯例与商业规则,遵守机器人协议(robots协议),营造鼓励创新、公平公正的良性竞争环境,尊重和保护知识产权,尊重权利人的合法权益,保护用户隐私和个人信息安全,抵制不正当竞争行为等。
据透露,在上述公约精神指导下,百度与盘古搜索只用时两周就完成了相关协议签署与技术实现。作为国内最大的搜索引擎,百度同时也是互联网上最大的中文内容源,百度知道、百科、贴吧等内容广受网民欢迎。分析人士指出,百度批准盘古搜索加入白名单,将极大丰富盘古搜索的内容源,对正处于上市进程中的盘古搜索是个重大利好。