Marqo：一個開源向量搜尋引擎，應用於人工智慧
背景
近年來人工智慧（AI）運動中的一項關鍵技術是向量資料庫，它們可以儲存結構化資料，如影象、影片和文字，使得人們和系統能夠搜尋未分類的內容。這些資料庫對於大型語言模型（LLM）非常重要，例如驅動 ChatGPT 的 GPT-4，主要原因是資料庫能夠在資料被建立或更新時實時進行索引和搜尋。這對於個性化功能、推薦系統、情感分析等是非常重要的。由於生成型 AI 的需求不斷增加，許多向量資料庫初創企業獲得了大量資金注入。僅在今年 4 月，就有 Pinecone 和 Weaviate 分別籌集到 1 億美元和 5000 萬美元的資金，而同月初創的向量資料庫企業 Chroma 和 Qdrant 則獲得了 1800 萬美元和 750 萬美元的種子融資。去年底，Milvus 開源向量資料庫的核心開發者 Zilliz 也成功籌集了 6000 萬美元的投資。因此顯然，致力於幫助基礎設施跟上 AI 熱潮的公司正面臨著巨大的需求，而澳大利亞初創企業 Marqo 正試圖利用更全面的“端到端”向量搜尋方法來實現此目標。
問題與解決方案
Marqo 成立於去年 6 月，由曾任 Amazon 機器學習科學家的 Jesse Clark 和曾在亞馬遜網路服務（AWS）擔任資料庫軟體工程師的 Tom Hamer 共同創立。Marqo 的使命是解決非結構化資料的難題，據一些估計，非結構化資料佔到了建立資料總量的 90%。隨著越來越多的人們使用生成型 AI 來回答他們的網路查詢或建立新的影象和藝術品，這只會進一步加劇對新工具的需求，以理解它們所建立的內容。
Marqo 的一個核心賣點，與現有競爭對手相比，是它承諾提供一整套向量搜尋工具，包括向量生成、儲存和檢索。這意味著 Marqo 的使用者可以跳過 OpenAI 或 Hugging Face 等第三方向量生成工具，透過單一 API 提供一切。“向量搜尋很難實現，向量資料庫只是謎題的一部分，開發人員發現將所有必需的元件集合在一起以構建具有最佳相關性、延遲和可靠性的向量搜尋體驗非常具有挑戰性，”Marqo 的聯合創始人兼執行長 Tom Hamer 在給 TechCrunch 的電子郵件中解釋道。“Marqo 提供了一個整體系統，將所有這些元件集合在一起，解決了開發人員一個主要痛點。”
此外搜尋系統的好壞取決於其生成的結果，這意味著相關性、準確性和“即時性”對於任何訊息儲存和檢索系統都至關重要。Hamer 表示這正是 Marqo 能夠提供的。他繼續說道：“如果開發人員想要不斷改進搜尋結果的相關性，他們必須手動訓練新的 AI 模型進行向量生成。Marqo 的連續學習技術將根據使用者參與（點選、加入購物車等）自動改進搜尋，這對於電子商務和其他終端使用者搜尋用例尤其重要。”
開源因素
像它的競爭對手一樣，Marqo 的開源理念是一個非常有意的舉措，以取悅開發者社區，開發者可以對產品進行調整和定制，以確保它是否適合他們。反過來，這意味著開發者更有可能向自己所在的公司推薦該產品，甚至參與產品的開發。“我堅信，開發開源產品會產生更高質量的結果，”Hamer 表示。“在開源基礎上構建 Marqo 使我們能夠與使用者建立密切的回饋迴圈，並以極高的速度迭代，以構建真正需要的產品。開源還是一個很好的客戶獲取渠道。客戶可以清楚地看到他們正在購買什麼，他們可以免費嘗試並確保 Marqo 適用於他們的用例。”
然而開源通常需要大量的資源，包括人力投入和基礎設施，才能開發出生產級的產品。這就是 Marqo Cloud 所涉及的領域。“自行託管開源產品是對於不需要實時搜尋且有少量終端使用者的使用者來說是一個不錯的選擇，也適合用於建立概念取證，”Hamer 繼續說道。“Marqo 的 Cloud 平臺處理我們的客戶的雲資源的基礎設施、維護和操作，確保效能和成本效益的最佳化。”
結論
Marqo 是一個澳大利亞初創企業，但在英國註冊了一家母公司，該公司的首個投資者 Creator Fund 就位於英國。Marqo 在倫敦設有一個小辦公室，當前只有一名員工，但計劃擴大到包括銷售、市場銷售和客戶支援，以支援其在歐洲的雄心。Marqo 的種子輪由澳大利亞風險投資公司 Blackbird Ventures 領投，Creator Fund 參投，這兩家公司也參與了前期的融資。在最新的一輪中，Marqo 還吸引了 January Capital 和 Cohere 的投資以及 Cohere 的聯合創始人 Ivan Zhang 和 Aidan Gomez 的投資。
延伸閱讀
- GovDash：幫助企業運用人工智慧贏得政府合約
- Ghost 可能加入 fediverse，成為開源 Substack 競爭對手
- Meta 宣布其 Llama 3 開源 LLM 將在下個月推出
- Fireworks.ai 開源 API 讓生成式人工智慧適用於任何開發者
- 為何伊隆·馬斯克的 AI 公司“開源”Grok 很重要——以及不重要的原因
- 「xAI 開源 Grok 基模型，但沒有任何訓練程式碼」
- SpaceX 檔案外洩，TikTok 禁令加速推動，Grok 計畫轉為開源
- 穆斯克的 Grok 開源了，Reddit 更新了 IPO 申報書
- Ubicloud 計畫打造一個開源替代 AWS 的方案
- 直擊 Upfront 峰會：AI 與其他看點
