
雅虎將其搜尋技術 Vespa 分拆為獨立公司
背景
科技巨頭雅虎(Yahoo)宣布將其搜尋技術 Vespa 從公司中分拆出來,讓其成為一家獨立的創業公司。Vespa 的主要貢獻者之一,曾任雅虎大資料和人工智慧(AI)部門的副總裁林博森(Jon Bratseth),被任命為 CEO。雅虎表示他們將繼續透過投資現金來支援 Vespa,並成為 Vespa 的最大客戶。同時雅虎還將持有 Vespa 的股份,並在獨立公司的董事會佔有一席之地。
雅虎於 2005 年收購了付費搜尋服務提供商 Overture,並透過這一收購獲得了挪威搜尋引擎 AlltheWeb.com。隨後,AllTheWeb 團隊(大約 30 人)與雅虎的電子商務部門合作,將他們的搜尋技術改造為雅虎開發人員可以在內部使用的通用工具,能夠實時處理大規模資料集。
Vespa 在接下來的十年和以後,不斷向多個方向擴充套件,使其能夠處理除文字字元串以外的輸入,根據使用者的點選歷史個性化內容,並根據機器學習算法進行引導。2017 年,雅虎將 Vespa 以開源方式發布,希望能夠在軟體背後召集開發者的支援,並在內外部建立一個生態系統。這無疑是雅虎自 2006 年的 Hadoop 以來最大的開源軟體發布,涉及了 Vespa 團隊在挪威的大規模重寫 Vespa 程式碼庫。
Vespa 現在在雅虎旗下的網站(如 Flickr)上提供搜尋和相關文章推薦服務,並在雅虎品牌的網站(如雅虎體育、雅虎財經、雅虎新聞和雅虎的廣告網路)上執行廣告定向。雅虎聲稱,他們使用大約 150 個使用 Vespa 建立的應用程式,這些應用程式共同服務於十億人口,每秒處理 800,000 次查詢。在雅虎之外,包括 Spotify、OkCupid 和 Wix 在內的成千上萬個品牌現在使用 Vespa 的開源版本或雅虎出售的基於雲端、全面管理的 Vespa Cloud 版本。Vespa 的開源軟體包已經下載了超過 1000 萬次。
Vespa 的競爭優勢
雖然市場上有許多 Vespa 的開源替代品,包括 Solr 和 ElasticSearch,但雅虎表示 Vespa 在幾方面「比市場上的產品更先進」。Bratseth 在一封電子郵件中告訴我說:“最大的差異化來自於我們提供的完整需求,它結合了線上大規模資料和人工智慧的任何應用程式。“他說:“我們有一個非常有經驗的團隊,他們都在努力提升 Vespa,實現這個願景,並不斷地推出改進,而且可以看到,我們在這方面仍然比其他任何公司都快。”
為何將 Vespa 建立為獨立公司?
Bratseth 表示最重要的原因是容量問題。他告訴我說:“越來越多的公司希望將他們的應用程式部署到我們的雲服務中,這樣我們就有更多的容量來建立出一個獨立的功能。”我想知道雅虎返回公開市場的計劃是否促成了這一舉措,但是 Bratseth 和雅虎的首席策略官拉拉·戴維斯(Lara Davis)都未確認或否認這一點。
不過 Vespa 對於雅虎的 AI 和機器學習能力至關重要。雅虎執行長 Jim Lanzone 在新聞稿中表示:“多年來,Vespa 一直是雅虎在所有業務中 AI 和機器學習能力的一個關鍵組成部分。作為 Vespa 最大的客戶和一個重要的投資者,我們將繼續充分利用 Vespa 的所有功能,同時為其他公司創造一個新的商機,使他們可以作為一個獨立實體利用 Vespa 的技術。”
結論
將 Vespa 作為一個獨立公司,可以幫助雅虎更好地滿足日益增長的公司需求,並為其他公司提供 Vespa 技術的使用機會。Vespa 在雅虎內部經過多年的發展和開源之後,已經成為許多知名品牌和開發者的首選,充分體現了其在大資料和人工智慧領域的競爭優勢。我們期待 Vespa 的獨立發展能夠為整個科技行業帶來更多創新和突破。