市場觀察

預言的生成 AI 助手引領資料管道自動化的新時代

資料工程新創公司 Prophecy 發布資料智慧助手 Data Copilot 加州的資料工程新創公司 Prophecy 今天宣布推出 Data Copilot,這是一個基於生成式人工智慧(AI)的助手,可以根據自然語言提示建立可信的資料管道,並透過更高的測試覆蓋率提高管道質量。這一功能有可能讓管道開 .... (往下繼續閱讀)

分享到 Facebook 分享到 Line 分享到 Twitter

文章目錄

預言的生成 AI 助手引領資料管道自動化的新時代

資料工程新創公司 Prophecy 發布資料智慧助手 Data Copilot

加州的資料工程新創公司 Prophecy 今天宣布推出 Data Copilot,這是一個基於生成式人工智慧(AI)的助手,可以根據自然語言提示建立可信的資料管道,並透過更高的測試覆蓋率提高管道質量。這一功能有可能讓管道開發變得輕鬆,使資料工程師省下寶貴的時間來處理其他更重要的任務。

過去,構建資料管道的任務通常需要編寫復雜的 SQL 程式碼。資料工程師需要花費大量時間和精力才能實現業務使用者期望的管道。然後,像 Prophecy 這樣的公司提供了低程式碼解決方案(一個視覺化的拖拽畫布),來簡化這一過程。現在作為工作的下一步,Prophecy 推出了 Data Copilot,只需用自然語言告訴他們想要的結果即可。

一旦給出一個命令,這個平臺將使用它來建議一個將所有資料集合到期望報表中的管道。使用者可以預覽並接受這個管道,或者拒絕他來想出其他解決方案。Prophecy 的執行長和創始人 Raj Bains 對 VentureBeat 表示:“這將使企業在資料工程資源方面不再成為瓶頸,因為商業資料使用者和其他人都能夠自己服務……此外這些資料產品的一致性和質量也將得到提高,因為 Prophecy Data Copilot 會提出轉換和表達的建議。”為了實現這一目標,Bains 解釋說 Prophecy 建立了一個全面的知識圖,其中包含了公司資料模型的技術後設資料、資料目錄的業務後設資料以及在 SQL、Spark 或 Airflow 上執行的歷史查詢和程式碼。然後將這個知識圖提供給一個先進的大型語言模型,將使用者的自然語言查詢轉化為高效能的資料管道。他還補充說,這個系統還能夠根據使用者的反饋進行學習和改進。

建立 gen AI 應用程式的平臺

除了 Data Copilot 之外,Prophecy 還推出了一個平臺,用於在私有的企業資料上構建像聊天機器人這樣的 gen AI 解決方案。這個平臺透過兩個步驟實現。首先資料工程師將公司內部訊息系統、檔案、支援票據等的非結構化文字(轉換為向量)儲存在一個知識倉庫中。接下來,工程師構建一個基於 OpenAI 支援的流式推理管道(即聊天機器人)。Bains 解釋說:“當一位使用者提出一個問題時,會執行一次向量查詢,以檢索與該問題最相關的內部檔案。這些檔案為回答問題提供了關鍵的背景訊息。這個背景與問題本身結合起來形成提示,然後透過 API 傳送到 OpenAI。答案然後返回給使用者。”這兩個新的解決方案從今天開始提供使用。

VentureBeat 的使命是成為技術決策者獲取關於企業技術變革的知識和進行交易的數位化鎮中心。發現我們的簡報。關鍵詞:Technology-AI 助手,資料管道,自動化新時代

Unsplash gallery keyword: Technology-AI 助手,資料管道,自動化,新時代
江塵

江塵

Reporter

大家好!我是江塵,一名熱愛科技的發展和創新,我一直都保持著濃厚的興趣和追求。在這個瞬息萬變的數位時代,科技已經深入到我們生活的方方面面,影響著我們的工作、學習和娛樂方式。因此,我希望透過我的部落格,與大家分享最新的科技資訊、趨勢和創新應用。