您現在的位置: 网站首頁 / 業界資訊 / 正文

爲什麽違反Robots協議的搜索引擎最可怕

作者: admin 发布: 2014-8-7 16:53:41 分类: 業界資訊 閱讀: 次 查看評論

爲什麽違反Robots協議的搜索引擎最可怕?

  
  文/科技八哥

  Robots協議是搜索引擎的立命之本,如果不遵守Robots協議,無異于脫缰之馬,對正常秩序的危害後患無窮。事實上,幾乎所有的搜索引擎公司都會自覺遵守Robots協議,不管是Google、Yahoo、微軟必應,還是百度、搜狗,在Robots協議這個問題上,大家都按照國際規範來做事,讓蜘蛛不會去觸碰抓取Robots協議中明文禁止抓取的內容。哪怕是再怎麽有利于豐富充實搜索結果的信息,只要有Robots文件在,蜘蛛也能遵守規則,對其“視而不見”。

  正因如此,Robots協議是國內外絕大多數網站的“保護神”,不管是後台URL,還是各種敏感信息或不願意被搜索引擎收錄分享的內容,只需在Robots文件裏加上一筆,就可以放心大吉。

  然而,市場競爭中,有些後來的搜索引擎,卻往往因爲急于上位或受利益驅使,在不告知對方的情況下,就擅自違反Robots協議,偷偷的抓取收錄Robots文件中禁止抓取的內容,這就已經不只是道德層面的“缺德”,更是一種很惡劣的不正當競爭行爲了。

  雖然在國外還沒有見到過這種不靠譜的搜索引擎存在,但國內卻有這麽一個官司,說的就是不違反Robots的事兒。

  2013年10月中旬,百度訴奇虎360違反“Robots協議”抓取、複制其網站內容侵權一案在北京市第一中級人民法院開庭審理。百度認爲,360搜索在未獲得百度公司允許的情況下,違反業內公認的Robots協議,抓取百度旗下百度知道、百度百科、百度貼吧等網站的內容,已經構成了不正當競爭,並向奇虎索賠1億元。

  這個事情要刨根問底,實際上要再後退一年,從360在2012年8月推出搜索引擎說起。由于360的搜索結果中包含著百度百科、百度知道等多個百度産品內容。百度就不願意了。雙方當時的矛盾焦點主要集中于是否應該遵守Robots協議的問題。奇虎360公司認爲,Robots協議不具有法律效力,也非強制性規範,搜索引擎公司可以不遵守Robots協議。並且百度百科、百度知道的內容是最優質的網絡內容,其搜索結果中應該包括百度相關産品。百度公司表示,奇虎360違反Robost協議抓取大量百度內容,要求360遵守Robots協議停止收錄使用百度産品的信息內容。

  後來,在行業協會的調解下,包括雙方在內的多家互聯網公司簽署了12家搜索引擎服務企業在北京簽署了《互聯網搜索引擎服務自律公約》,公約規定,對于本公約公布前違反robots協議抓取的內容,在收到權利人符合法律規定的通知後,及時刪除、斷開侵權鏈接。

  然而,簽署了公約後的360仍然堅持自己的觀點,繼續抓取收錄百度的上述內容。後來也就有了剛才所說的不正當競爭訴訟。

  是不是不正當競爭,雙方僵持不下,法庭也沒有當即宣判。

  算算日子,宣判日期估計也快到了。

  據國家知識産權戰略實施研究基地主任、北京大學知識産權學院常務副院長張平在《法制日報》發表的最新署名評論認爲,Robots協議是一種單方聲明,但是業界都共同遵守,成爲一種行業慣例,如果上升到經營的角度,就是一種商業的規範。司法判決要給人們的行爲一個指引,否則,司法機關自身也很難去判斷行爲的正確與否。在沒有明確法律規定的情況下,法院應該去支持依靠技術規範建立起來的秩序,即違反Robots協議的行爲應當適用不正當競爭一般條款。

  由此來看,違反Robots協議的搜索引擎不僅有危及隱私保護的隱患,而且也有極大的觸犯法律的可能。而哪怕單從道德層面看,不遵守全球業界規範的公司,本身就無法給用戶安全感,讓人覺得可怕。

  來源:通信世界網 作者:科技八哥

  來源:SEO搜尋引擎優化 - SEO自學網 轉載注明出處!

? 上一篇下一篇 ?   本文關鍵詞: 百度  360  

評論列表:

站長SEO學院
第一節:百度搜索引擎工作原理
第二節:建設對搜索引擎友好的站點
第三節:如何進行網站內容建設
第四節:整體優化、結構優化、網頁優化
第五節:移動搜索-明確移動搜索優化標准
百度SEO資料文檔
百度搜索引擎優化指南2.0
百度移動搜索優化指南2.0
網站分析白皮書(站長版)
移動站點該如何優化
建設對百度友好的站點
百度搜索引擎網頁質量白皮書
石榴算法-綠蘿算法-冰桶算法
新搜索時代下的優化策略
更多百度SEO資料文檔
站長推薦
DIV+CSS布局實例教程-Web標准
网站SEO優化常见问题汇总
SEO優化推广方案该如何写
SEO優化方案步骤
影響網站關鍵詞排名因素總結
影響谷歌搜索引擎排名的因素調查
手機移動端站點適配優化
最近發表