不過,絕大多數(shù)中小網(wǎng)站需要依靠搜索引擎來增加流量,因此通常并不排斥搜索引擎,也很少使用Robots協(xié)議。去年京東商城屏蔽一淘網(wǎng)抓取數(shù)據(jù)時,曾指責一淘網(wǎng)破壞了Robots協(xié)議。

  技術(shù)工程師Joey在接受《每日經(jīng)濟新聞》采訪時表示,谷歌、百度是通過都是自己的服務(wù)器不停地在網(wǎng)上抓內(nèi)容進行索引,而360的模式是讓每個使用360瀏覽器的電腦成為360的蜘蛛爬蟲,把瀏覽的內(nèi)容上傳到360服務(wù)器上做索引。

  Robots協(xié)議約束力幾何?

  此前,在多次“互聯(lián)網(wǎng)大戰(zhàn)”中,360的隱私問題均被競爭對手列為質(zhì)疑的焦點。

  兩年前,奇虎360公司兩名網(wǎng)絡(luò)工程師利用360公司系統(tǒng)收集的用戶信息,通過360服務(wù)器云計算后臺破解了市政一卡通系統(tǒng)的后臺密碼,并遠程為自己和3位同事的一卡通惡意充值2600元。2011年1月,360收集隱私數(shù)據(jù)被谷歌爬蟲抓取,結(jié)果包括網(wǎng)民在百度搜索的關(guān)鍵字、淘寶購物記錄、金蝶等企業(yè)內(nèi)部財務(wù)網(wǎng)絡(luò)數(shù)據(jù)等鏈接數(shù)據(jù)“裸奔”于互聯(lián)網(wǎng)上。

  對于此次業(yè)界的質(zhì)疑,360認為純系百度 “污蔑”。360方面表示,其網(wǎng)站后臺、訂單等敏感數(shù)據(jù)在每個搜索引擎中都是存在的。百度通過人為設(shè)置釣魚陷阱網(wǎng)頁來污蔑360上傳用戶數(shù)據(jù),目的是為了阻止360進入搜索領(lǐng)域,維護其市場地位。

  不過,很多的中立行業(yè)觀察人士認為,該事件的重心并不在口水仗,而是作為“行業(yè)自律”的Robots協(xié)議是否需要更強有力的法律約束?

  互聯(lián)網(wǎng)觀察家洪波指出,搜索引擎無視Robots協(xié)議,直接抓取未經(jīng)授權(quán)的信息數(shù)據(jù),這樣的行為如果不能從法律和監(jiān)管上及時制止,將引發(fā)行業(yè)大亂。”

  鑒于國內(nèi)像360和搜狗這樣既做瀏覽器又做搜索的公司比較少,可以對比同樣既做搜索引擎又做瀏覽器的巨頭:谷歌。

  一位瀏覽器技術(shù)人員對《每日經(jīng)濟新聞》表示,谷歌的Chrome瀏覽器也會根據(jù)用戶訪問的歷史記錄在首頁給出“常訪問的網(wǎng)站”,但不會優(yōu)先出現(xiàn)在搜索結(jié)果中。

  實際上,在“3B大戰(zhàn)”進入第二輪時,國內(nèi)互聯(lián)網(wǎng)大佬的態(tài)度已經(jīng)發(fā)生了轉(zhuǎn)變。

  搜狗CEO王小川表示,歡迎360做搜索,行業(yè)更加開放,給網(wǎng)民更多選擇。而在此之前,王小川對“3B大戰(zhàn)”的態(tài)度是“進攻百度防范360”。

  目前尷尬的是,Robots協(xié)議并沒有上升到一定的高度。此前有消息稱,政府相關(guān)部門已找百度、360、搜狗各方了解事態(tài)進展,希望能夠從中調(diào)停,并防范整個事件升級。從目前情況看,相關(guān)部門正在對360違反Robots協(xié)議的事件進行研究。

  “所謂Robots協(xié)議,其實是谷歌自己制定的一個協(xié)議規(guī)范,并不是各大搜索廠商的共識或統(tǒng)一的協(xié)議,也從來沒有任何一家國內(nèi)搜索引擎服務(wù)商公開承諾遵守Robots協(xié)議或簽署類似的協(xié)議或聲明。”所以說,Robots協(xié)議連個行業(yè)規(guī)范都算不上,更別說什么國際標準了,即便在美國,也只有Google把它當回事。“上述不愿意透露姓名的瀏覽器技術(shù)人員表示。

  “云”與“端”的較量

  主打云概念的搜索巨頭百度,與以客戶端為武器的360交戰(zhàn),頗具深意。

  事實上,百度之所以取得目前的搜索市場地位,一個很重要的原因是其一直在布局中文內(nèi)容平臺,包括知道、百科、貼吧等。百度的“護城河”在“云”,本質(zhì)上是一家媒體,其戰(zhàn)略思路不是僅提供單純的搜索,而是從具備分類、整理的搜索引擎轉(zhuǎn)化為提供、組織內(nèi)容的平臺。

  “在單純的搜索技術(shù)提高前景有限的前提下,提供大量的內(nèi)容使百度具有了巨大的用戶黏性和流量來源。即使用谷歌搜索,首頁結(jié)果里也有大量的百度知道,百度百科與百度貼吧的內(nèi)容。”曹悅平表示。

  事實上,早在2009年李彥宏曾說過,百度不是搜索引擎,而是第一中文媒體平臺。而在剛剛結(jié)束的百度一年一度的世界大會上,李彥宏首次將云存儲、大數(shù)據(jù)智能、云計算三大核心云能力開放出來。

  在曹悅平看來,在云端發(fā)力的好處在于,直接獲取的大量內(nèi)容和用戶數(shù)據(jù)對后來者筑起了“護城河”。但百度多年來在客戶端領(lǐng)域一直缺乏具有影響力的產(chǎn)品,這恰好是360此次進攻百度的機會。

  相比之下,360的競爭優(yōu)勢完全在 “端”——靠瀏覽器和安全衛(wèi)士來占領(lǐng)市場。

  “360的端模式,相對于百度的云模式,在產(chǎn)業(yè)鏈上處于下游。”曹悅平指出,360的風險在于,一旦再出來一個黏性比它更大的客戶端,比如Windows8如果內(nèi)置了安全軟件,那么360危險了。

  在新進入的搜索領(lǐng)域,360的份額正在迅速下滑。CNNIC新的統(tǒng)計數(shù)據(jù)顯示,8月27日~9月2日一周,360搜索覆蓋中國網(wǎng)民比例已由上周13.04%降為11.61%,覆蓋人數(shù)由3420萬降為3052萬,用戶減少368萬。無論用戶覆蓋率、搜索次數(shù)和PV占比,360搜索都遠低于搜狗、搜搜等。同時數(shù)據(jù)顯示,360搜索用戶搜索次數(shù)和PV值比例僅為2.22%和1.47%,明顯低于其他搜索引擎,表明使用360搜索的用戶的使用頻率和深度都很低。