淺談垂直搜索引擎

垂直搜索引擎 

  垂直搜索引擎是相對通用搜索引擎的信息量大、查詢不準確、深度不夠等提出來的新的搜索引擎服務模式,通過針對某一特定領域、某一特定人羣或某一特定需求提供的有一定價值的信息和相關服務。其特點就是“專、精、深”,且具有行業色彩,相比較通用搜索引擎的海量信息無序化,垂直搜索引擎則顯得更加專注、具體和深入。

  垂直搜索引擎能否贏得市場?
   垂直搜索引擎爲用戶提供的並不是上百甚至上千萬相關網頁,而是範圍極爲縮小、極具針對性的具體信息。因此,特定行業的用戶更加青睞垂直搜索引擎,是垂直搜索引擎的長期、穩定的羣體。

  中國十年多來互聯網的不斷髮展,造就出1.3億的網民,搜索引擎也出現空前的火熱。在互聯網出現的初期,雅虎、新浪、網易等大型門戶網站擁有着絕對多的瀏覽量,原因在於當初的大部分網站在技術上無法與門戶網站相媲美,多數質量較差,內容不豐富,所以大型門戶網站優秀的網頁設計風格,大量的信息及時更新贏得了用戶的認可,創造了第一次互聯網的高峯。然而隨之近年來網絡技術的普及與應用,建立一個專業的網站已經不存在太多的技術門檻。於是看好互聯網前景的網站紛紛涌現在我們的面前。相對比而言在某些領域中,大型門戶網站的頁面風格反而不如一些中小型網站的界面漂亮,同時各種分類的行業網站也慢慢的興起,也使得門戶網站的專業性信息遠遠難以相論,如此一來導致了流量的分流,衆多的商家也逐漸意識到互聯網商機並不像當初抄做的那樣有實際價值。於是互聯網第一次危機出現,這也是互聯網發展的必然趨勢。

   搜索引擎的出現,整合了衆多網站信息,恰恰起到了信息導航的作用。通用搜索引擎就如同互聯網第一次出現的門戶網站一樣,大量的信息整合導航,極快的查詢,將所有網站上的信息整理在一個平臺上供網民使用,於是信息的價值第一次普遍的被衆多商家認可,迅速成爲互聯網中最有價值的領域。互聯網的低谷由此演變爲第二次高峯。大家熟知的搜索引擎Google、百度、雅虎等是通用搜索引擎現如今的傑出代,他們爲互聯網的發展做出了重要的貢獻。然而,搜索引擎行業也不是一家公司就可以獨撐天下的,從百度的上市、yahoo中國的併購一系列動作表明,如今的搜索引擎大戰如同門戶網站初期的競爭一樣激烈。相信,通用搜索引擎在經歷過一段時間的角逐後,也將會繼續維持幾大服務商各自分控一部分市場的局面。

   垂直搜索引擎概念的提出,就是針對性的爲某一特定領域、某一特定人羣或某一特定需求提供的有一定價值的信息和相關服務。可以簡單的說成是搜索引擎領域的行業化分工。衆多專業性網站、行業網站獨立服務於互聯網的成功,恰恰證明了互聯網的格局應該是多方面的。通用搜索引擎的性質,決定了其不能滿足特殊領域、特殊人羣的精準化信息需求服務。市場需求多元化決定了搜索引擎的服務模式必將出現細分,針對不同行業提供更加精確的行業服務模式。可以說通用搜索引擎的發展爲垂直搜索引擎的出現提供了良好的市場空間,勢必將出現垂直搜索引擎在互聯網中佔據部分市場的趨勢,也是搜索引擎行業細分化的必然趨勢。


   1、垂直搜索引擎不是什麼?
    垂直搜索不只是類google的行業通用搜索。以房產行業爲例,如果我們按照google抓取網頁的方式,來建造一個房產行業google的做法,是行不通的。技術壁壘不用解釋,就算我們藉助nutch,lucene等搜索技術來做,我們也無法提供差異化的服務,而沒有差異化的產品在互聯網贏家通吃的規則下是無法生存的,就是不要簡單地模仿,而要想辦法形成互補。

    垂直搜索和目前的google,baidu等通用搜索從定位,內容,用戶,市場策略等都是不同的。所以垂直搜索不只是簡單的行業google。

   用戶使用google,baidu等通用搜索引擎的方式是通過關鍵字的方式實現的,是語義上的搜索,返回的結果傾向於知識成果,比如文章,論文,新聞等;垂直搜索也是提供關鍵字來進行搜索的,但被放到了一個行業知識的上下文中,返回的結果更傾向於信息,消息,條目等。對買房的人講,他希望找的房子供求信息和文章,新聞等不同。這個特性是他們各自的的技術特點決定的。打個比方,如果google搜索引擎是一個正金字塔型,那麼垂直搜索引擎就是個倒金字塔型,兩者是互補的。


    2、垂直搜索是什麼?
    我認爲:垂直搜索的本質是對垂直門戶信息提供方式的一次簡化性的整合。
搜索領域有句明言:就是用戶無法描述道他要找什麼,除非讓他看到想找的東西,這個過程有點像找對象,碰運氣是用戶搜索行爲的最大的特徵。而垂直搜索引擎就是提高爲用戶提供更好的運氣。

   垂直搜索是服務於某項功能的,比如:用戶搜索租房,買房信息就是一種垂直搜索。對信息的再加工處理是非常關鍵的,不管是結構化的數據,還是非結構化的數據。


    3、垂直搜索的內容來源:
    A門戶網站自身的資源
    B以開放接口方式讓行業用戶提供的資源
    C普通用戶發佈的資源
    D抓取行業用戶的資源

   微軟亞洲研究院負責搜索的一名技術專家說:75%的內容通用搜索引擎搜索不出來。這裏麪包含2層含義:

   (1)網站結構不合理,網頁對搜索引擎不友好;
    (2)由於信息在互聯網是海量的,非結構化的信息需要經過結構化的梳理後才能更好的展現。 如果梳理者能提供搜索,那樣會更好。而垂直門戶網站就是行業信息最好的梳理者。 垂直搜索引擎提供的主要內容不應該侷限於普通的網頁索引,而且包括商業信息的加工,結構化的信息。

   4、進入垂直搜索的門檻在那裏?
    在互聯網上說門檻,就是比資源。垂直搜索也是這樣,能否提供全面權威的行業信息,能否擁有行業資源是垂直搜索引擎發展的門檻。換句化說,垂直門戶是垂直搜索血統最近的父親。作爲房產行業的搜房網就是一個垂直門戶,在房產領域沒有誰比我們更清楚什麼是垂直搜索了。

    垂直搜索的難點不是技術,而是用戶參與門戶網站行爲的創新和垂直門戶網站對產業上下游信息資源的整合。

   5、垂直搜索的特點:
    (1)、搜索是一個產業商業聯盟的平臺,一個集成產業鏈的上下游公司的搜索門戶。
    (2)、垂直搜索的表現方式和google,baidu的表現方式不同,結構化的搜索和非結構化搜索並用。
    (3)、從廣告模式上 提供了除 google adsense 和 百度競價排名廣告 之外的另一種可能。

   6、垂直搜索引擎的三個特點:

   (1)、垂直搜索引擎抓取的數據來源於垂直搜索引擎關注的行業站點:
比如:找工作的搜索引擎
www.deepdo.com 的數據來源於:www.51job.com , www.zhaoping.com , www.chinahr.com 等等;
股票搜索引擎
www.macd.cn 的數據來源於: www.jrj.com.cn , www.gutx.com 等股票站點;
    (2)、垂直搜索引擎抓取的數據傾向於結構化數據和元數據:
    比如:我們找工作關注的:
    職位信息: 軟件工程師;
    公司名稱,行業名稱:軟件公司,外包行業等;
    地點:北京,海淀;
    (3)、垂直搜索引擎的搜索行爲是基於結構化數據和元數據的結構化搜索:
    比如: 找:海淀 軟件工程師 的工作等。

   7、垂直搜索引擎站點的8條準則:

   1、選擇一個好的垂直搜索方向。俗話說男怕選錯行,這一點對於搜索引擎來說也是一樣的,除了選擇的這個行業有垂直搜索的大量需求外,這個行業的數據屬性最好不要和 Yahoo,Google等通用搜索的的抓取方向重疊。
目前熱門的垂直搜索行業有:購物,旅遊,汽車,工作,房產,交友等行業。搜索引擎對動態url數據不敏感也是衆所周知的,這些可以作爲垂直搜索引擎的切入點;

   2、評價所選垂直搜索行業的網站、垂直搜索內容、行業構成等情況:
    我們都知道垂直搜索引擎並不提供內容來源,它的數據依賴爬蟲蒐集,並做了深度加工而來的。因此考慮垂直搜索引擎的所處的大環境和定位至關重要。

    3、深入分析垂直搜索引擎的索引數據特點:
垂直搜索引擎的索引數據過於結構化,那麼進入的門檻比較低,行業競爭會形成一窩蜂的局面;如果搜索數據特點是非結構化的,抓取,分析這樣的數據很困難,進入壁壘太高,很可能出師未傑身先死。

    4、垂直搜索引擎的索引數據傾向於結構化數據和元數據,這個特點是區別於yahoo,google等通用搜索引擎的,這是垂直搜索引擎的立足點。而垂直搜索引擎是根植於某一個行業 ,因此行業知識,行業專家這些也是通用搜索引擎不具備的。也就是說進入垂直搜索是有門檻的。

    5、垂直搜索引擎的搜索結果要覆蓋整個行業,搜索相關性要高於通用搜索引擎,貼近用戶搜索意圖,搜索結果要及時。

    6、垂直搜索引擎的web 2.0 需求:
    垂直搜索引擎的搜索數據由於帶有結構化的天性,相對於通用搜索引擎的全文索引而言,更顯的少而精。因此,設計的時候要提供收集用戶數據的接口,同時提供tag,積分等機制,使搜索結果更加“垂直”。

    7、垂直搜索引擎的目標是幫助用戶解決問題,而不只是向通用搜索引擎一樣發現信息:
    這一點是垂直搜索引擎的終極目標。 在做垂直搜索引擎的時候你需要考慮:什麼問題是這個行業內的特殊性問題,什麼問題是一般性問題。keso多次提到google的目標是讓用戶儘快離開google,而垂直搜索引擎應該粘住用戶。一般來說,使用垂直搜索引擎的用戶都是和用戶的利益需求密切相關的。所謂利益需求是我自己獨創的,大意是和用戶工作密切相關,生活中必不可少的需求,而求有持續性。比如:學生找論文,業主找裝修信息等等這樣的需求。因此粘住用戶,讓用戶有反饋的途徑是一個關鍵部分。

    8、垂直搜索引擎的社區化特徵:
    這一條和第9條是相關的。
    俗話說物以類聚,人以羣分,垂直搜索引擎定位於一個行業,服務於一羣特定需求的人羣,這個特點決定了垂直搜索的社區化行爲。人們利用垂直搜索引擎解決問題,分享回饋。現在做網站都講求社區化,所以垂直搜索引擎本質上還是:對垂直門戶信息提供方式的一次簡化性的整合。

   搜索市場細分 Google、百度面臨挑戰

   百度上市後,搜索市場一下子熱了起來。越來越多的企業圍繞着搜索市場作起了文章。而且,在搜索大戰的同時,一些企業也拋出了一些驚人言論。近日,記者從專業做人脈交際的聯絡家(www.linkist.com)技術總監冉徵處瞭解到,聯絡家正在加緊研發人脈相關領域的專業垂直搜索引擎系統,比如工作招聘信息搜索引擎等,預計將在2005年底推出,聯絡家之所以涉足專業垂直搜索引擎領域,是看到未來垂直專業搜索引擎市場的巨大商機,他認爲未來搜索市場將進一步細分,象Google、百度等主張大而全的全球式搜索引擎將會面臨垂直專業搜索引擎更大的競爭與挑戰,他們的市場分額將會被逐漸瓜分,專業的行業性垂直搜索將受到網民的青睞。

   那麼緣何能得出如此結論呢?冉先生解釋,CNNIC第十四次互聯網調查顯示,搜索以71.9%的絕對優勢成爲用戶從互聯網上獲得信息的主要方式。幾乎在全球所有的調查中,搜索引擎都是互聯網上使用程度僅次於電子郵箱的服務,搜索引擎服務能成爲最受歡迎的服務是因爲他解決了用戶在浩瀚的互聯網海量快速定位信息屏頸問題,在海量的網頁裏找信息按照傳統方式需要用戶一個網站一個網站一級目錄一級目錄下找,要耗費大量的精力和時間,幾乎是不可能實現的任務。但互聯網的信息量呈爆炸趨勢增長,幾年前全球式搜索引擎收錄的網頁量只有幾千萬頁,而現在已經達到幾十億頁,數量增加帶來的是搜索服務的品質下降,查詢的結果集就是海量的,經常是幾十萬筆的資料,結果裏存在大量的重複信息和垃圾信息,用戶越來越難迅速的找到符合的信息,現在經常使用搜索引擎可以感覺到很難在短時間內準確的篩選出需要的內容,而垂直搜索引擎針對專業特定的領域或行業的內容做了專業和深入的分析挖掘,精細分類,過濾篩選等,信息定位更精準,因此在此垂直領域或行業提供的搜索服務勢必更好更強,更爲用戶所歡迎。

   比如,對於一個網民來說如果有對特定的領域或行業的信息需求的時候,如果一個是專業的垂直搜索能做到精確鎖定內容,但內容量偏小,而另一個是能檢索出大量內容,但搜索到的內容一大部分都是“垃圾”並且很難找到符合的信息,這樣的話,你會選擇哪個呢,就如用戶想購買一個商品,他是會去專門的比價購物搜索引擎上找還是會去Google上找,如果你想找一份工作,是會去專門的工作搜索引擎上找還是會去百度上找?答案很明顯,更多的用戶會捨棄後者,即使前者品牌小名聲小,但結果往往是最令網民看重的。

   冉先生還象記者舉了個簡單的例子,聯絡家LINKIST一直做人脈交際圈的拓展,也就是現在炙手可熱的SNS網站,SNS網站的目的就是要建立一個龐大的人脈圈,參與其中的人都能通過站內人脈的搜索引擎找到自己想找的人,可以找工作、蒐羅人才、尋找合作商機。聯絡家LINKIST短短幾個月的時間已經聚斂起了近7萬多位高級商務人士。有了一定的用戶基礎做鋪墊,聯絡家LINKIST目前大力開發人脈專業領域的垂直搜索引擎,如工作搜索引擎的人脈搜索引擎,而這比以往的“貼簡歷、翻招聘信息”的機械作法要靈活的多。

   而且,能做出這樣的預測顯然並不是空穴來風。據記者瞭解,現在搜索市場大量的的垂直專業搜索引擎的誕生如雨後春筍般,如比價購物搜索引擎,工作搜索引擎,博客搜索引擎等等,佔了百度幾乎一半以上的流量的MP3搜索,其實也可以說是專業的搜索MP3的垂直搜索引擎,許多垂直門戶也紛紛推出了自己的搜索引擎系統。

   記者獲悉,之前剛從
    網易內容總監職位上辭職後創業的李學凌也作起了針對博客內容的搜索引擎,這也表露出,垂直搜索引擎的市場正在孕育過程中,既是機會又存在着挑戰,其贏利模式也已經在Google、百度等身上得到了驗證。而且,很多風險投資(VC)對搜索的概念已經認可並下了賭注。

   那麼,象Google、百度能會不會通過“補課”擠掉這部分專用搜索市場呢?冉先生對記者表示,Google、百度註定了走的是大而全的粗獷路線,而專用的垂直搜索引擎則不同,需要對做內容的深度挖掘,做精細的分類,構建專業領域的知識庫體系等等,而這些都是Google、百度等無法做到的,他們根本就沒有精力做這些,也不可能針對每個行業領域都能做透,“術業有專攻”就是這個道理。

   就象門戶網站與專業垂直的行業性網站可以共存一樣,網民也有不同的胃口,有的僅僅是簡單模糊的信息就已經滿足了,而一些尋找精確內容的網民則更青睞於專業引擎,比如你打算換一份工作,以前去人才招聘網站貼簡歷往往都尿杳無音信,現在,就可以去聯絡家LINKIST試試,還能跟同行的朋友交換下最新的行業信息,探討下行業發展趨勢。而且,以後聯絡家LINKIST推出人脈引擎後,只需輕輕點擊便能收穫頗豐。

   有專家預測,未來,專業的垂直搜索將掀起一輪熱潮,而且,垂直搜索引擎不會是一個簡單的文本框、一個按紐就走遍天下了,更需要專業的信息輔助和配套的增值內容的支持,也就是對相關內容的二次“加工”。而這恰恰是Google、百度類所不能提供的。相信,屆時很多VC的眼球會聚焦於此,而Google、百度又將面臨怎樣的挑戰呢?我們只能拭目以待了。
  
     要了解垂直搜索引擎,就要同大家熟知的橫向搜索引擎即通用搜索引擎來做對比。目前互聯網領域主要的搜索引擎服務商如yahoo、百度、google等,爲用戶提供的都是橫向的海量信息搜索。他們可以滿足大量信息的橫向搜索、提供,但很難兼顧搜索的準確度與相關度的質量。通用搜索引擎的價值在於在做大量的信息導航,對於信息需求相對集中、分類更加詳細的行業客戶缺乏導向。垂直搜索引擎的產生正是有效的解決了以上通用搜索引擎無法滿足的市場需求。

   垂直搜索指搜索引擎爲用戶提供的並不是上百甚至上千萬相關網頁,而是範圍極爲縮小、極具針對性的具體信息。換言之,搜索引擎收集的是市場空間中某一“市場利基”的數據,如工作、旅遊、高端房地產等。這樣的信息不但更加易於爲用戶所消化,而且也更有深度。

   Google、雅虎、MSN這幾大搜索引擎巨頭主宰着互聯網搜索市場,全球大多數網民 都是通過這幾大搜索引擎查找自己所需的信息的。但在查找一些具體信息時,這幾大搜索引擎的表現卻並不盡如人意。有時候用戶得到的是往往是和他們的查詢本意 風馬牛不相及的結果。對拉近用戶及其所需信息之間的距離的需求催生並促進了搜索行業的利基發展。垂直搜索引擎瞄準的正是搜索市場中的不同利基市場。

   利基是Niche這一英文名詞的譯稱,利基市場指市場中通常爲大企業忽略的某些細分市場;而利基市場戰略則指企業通過專業化經營來佔領這些市場,從 而最大限度的獲取收益所採取的策略。實施利基戰略的重要意義在於:進行市場利基的公司事實上已經充分了解了目標顧客羣,因而能夠比其他公司更好、更完善地 滿足消費者的需求。並且,市場利基者可以依據其所提供的附加價值收取更多的利潤額。總之,市場利基者獲得的是“高邊際收益”,而密集市場營銷者獲得的只是“高總量收益”。

   分析家認爲:利基搜索市場和強大的在線廣告市場之間有着密切的聯繫。管理者可以象Google和雅虎那樣利用搜索結果頁面運作廣告,即在搜索結果頁面上提供一定的定向文本廣告。這種廣告策略已被視作搜索行業的一個盈利渠道。

   對於垂直搜索引擎來說,由於數據源得到了詳細劃分,使得對這些數據進行操作,並將其通過簡單易用、消費方便的方式表現出來變成可能。此外,以往的兩種網絡廣告“每千次展示成本”和“每點擊付費(CPC)”這兩種廣告方式上存在着效率低下,廣告費用風險高的問題,這也正是垂直搜索被看好的一個主要原因。垂直搜索能夠提供更爲集中的受衆羣體,從而提高搜索引擎廣告的宣傳能力。同時,垂直搜索也能夠有效推動新的廣告商機的發展――我們姑且稱之爲“每行動成本”。這種廣告方式不限廣告投放量,按照廣告投放的實際效果,即按潛在客戶迴應行動計費。

   淺談垂直搜索引擎

     通過關鍵字:"垂直搜索引擎"在google查一下,在返回結果中可以看到不少的投資公司很看好這一領域,即使百度的發言人也在演講中提到垂直搜索引擎,而一些國外軟件巨頭例如Google和Microsoft也在這一領域有所動作,據說Microsoft的一個研究購物的小組最近就推出了一個購物垂直搜索引擎,

   首先,談談垂直搜索引擎的基本原理,垂直搜索引擎針對某個特定領域,招聘、購物、blog、新聞等方面都是垂直搜索的潛在領域,假想一下,如果網絡上有非常便利的產品垂直搜索引擎、新聞垂直搜索平臺,以後上網就不會漫無目的了,現在許多的行業門戶做的很紅火,而垂直搜索引擎的模式本身就是一種很好的門戶網站.

   接下來談談垂直搜索引擎的技術,垂直搜索引擎技術同信息採集技術有一些共同點,不同的是,信息採集主要是將採集的信息導入本地庫,而垂直搜索引擎主要是以網頁的形式展現給用戶,通用搜索引擎主要是利用一個spider程序到網絡上爬行,一般是某個特定的週期派出一次將網頁更新,垂直搜索引擎同樣應有一個spider程序,但該程序只在一些特定的網絡上爬行,並不會對每一個鏈接都感興趣,相對來說,垂直搜索引擎的收錄範圍大大縮小了,但並不意味着內容的縮小,通用搜索引擎對一些動態腳本是不敏感的,例如***asp?id=***之類的網頁一般不被收錄,而恰恰是這類動態網頁包含了豐富的內容,垂直搜索引擎是必須收錄這些動態腳本的,這就需要在技術上做一些特殊處理,另外由於目前網頁中的鏈接形式非常多,不但有動態腳本也有flash做的鏈接,這些鏈接方式通過傳統的spider程序是很難解析出來的,在垂直搜索引擎中也應該解決.

  以上只是垂直搜索引擎的簡單說明,如果需要深入瞭解甚至實際開發,建議按如下步驟深入學習:
   1) 到搜索引擎中查一下垂直搜索引擎,進一步瞭解垂直搜索引擎的應用前景
   2) 如果要實際開發一個垂直搜索引擎,建議到一些開源網站上找一些spider程序進行分析,看看如何改造成一個垂直搜索的spider,一般將爬行全部鏈接的方式改爲只爬行特定鏈接.這些特定鏈接可以通過正則表達式的方式來匹配,凡不符合匹配的不進行採集.
 
 

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章