站长百科 | 数字化技能提升教程 数字化时代生存宝典 
看似简单的“Robots协议”(爬虫协议)，却关乎所有网民的隐私乃至整个互联网安危。近日多家媒体曝光：360综合搜索“暴力式”打破行业底线，完全无视这一协议，强行抓取互联网信息及百度搜索结果。许多网站负责人及互联网行业资深人士均感到，行业面临巨大危机，纷纷发表声讨360的相关言论。
据了解，搜索引擎必须遵循国际公认的行业规则。所有网站在建站时都会创建robots.txt文件，并在其中明确标明不想被robot访问的部分。而搜索引擎公司的机器人更不能抓取未经访问许可的网页内容，遇到未经授权的内容应跳过。比如百度的机器人就不会抓取淘宝网上标明的内容。
然而，360综合搜索为了其所谓的“搜索全面”、“用户体验良好”，无视爬虫协议，擅自实施抓取，直接导致大量包含网民账号、密码、管理数据等在内的隐私信息都可能暴露在360综合搜索的搜索结果页。更有网友表示，在360综合搜索中输入自己的单位和名字之后，竟然搜索到了自己数周前发出的一封私人电子邮件，这令他非常惊讶!
知名站长 “IT茶馆”创始人王佳伦认为：“robots协议是搜索引擎国际惯例，界定了信息自由分享的权利与边界。如果互联网企业都不遵守这些规则，随意去抓取未经别人授权的数据和内容，整个互联网行业的环境必将大乱。360违反Robots协议是不利于行业良性发展的，应该受到批评。
同时，迅游网负责人谢应也表示：“无视robots协议的行为，其本质是对所有站长权利的侵犯。robots协议是国际公认的互联网最基本规则，360破坏这一规则、肆意抓取网站并未授权开放的隐私内容，将让数百万站长以及他们的用户毫无安全可言，甚至会引发严重的隐私信息泄露事件。此种行为，需要企业自律，也需要政府和主管部门更多法律法规的监督制约”。
显而易见，假设没有Robots协议的被违反，那么谷歌可以随便抓取淘宝的商品信息，一淘网可以随便抓取京东商城的商品信息。用户的电子邮件、账号密码、甚至网页聊天工具的聊天记录，都将通过搜索轻松暴露，那么在互联网上“隐私”一词将不复存在!
聚巴适网站负责人 志明表示：“robots协议是搜索引擎国际惯例，界定了信息自由分享的权利与边界。如果互联网企业都像360一样践踏规则，随意去抓取未经别人授权的数据和内容，不仅会增加服务器的负荷，更将导致涉及网站安全和用户隐私的数据泄露，这也是近期站长们联合抵制360的原因所在”。
资深互联网观察家洪波指出，做搜索就要遵守搜索行业公认的游戏规则，无视规则，肆意违反规则的行为如果不能从法律和政府监管上及时制止，将引发行业大乱。知名IT评论人炳叔则认为，robots协议这种道德契约，不仅仅是大家应该共同遵循的道德底线，更是所有互联网企业赖以生存乃至全球拓展的底线。
不难看出，360综合搜索无视Robots协议的暴力做法，已经威胁到所有网站的生存与发展，更威胁到了中国5亿网民的隐私安全，因此触犯众怒。政府相关部门是否应介入事件?360的做法是否应受到法律的约束?互联网业界和全体网民都在等待答案。
来源: 侠客网
