OpenAI 推出 GPT-3.5 Turbo 詞語模型的微調功能
導言
OpenAI 最近推出了 GPT-3.5 Turbo 詞語模型的微調功能,讓企業能夠根據自己的需求進行模型訓練,以應對特定的業務場景和創造獨特而有差異的使用者體驗。這一舉措讓 GPT-3.5 Turbo 更能夠適應企業的內部工作流程,為企業提供更好的指導和自定義服務。
微調 GPT-3.5 Turbo 將帶來什麼好處?
OpenAI 在一篇部落格文章中提到,將預訓練的 GPT-3.5 Turbo 進行微調,可以使企業在模型的指導下取得更好的效果。例如,企業可以按照自己的需求,設定模型在使用德語時回應德語內容。它還可以調整模型的回應方式,如完成給定的程式碼片段,或按照特定品牌的聲音提供回答。此外 OpenAI 表示微調還可以幫助企業縮短提示的長度,加快 API 呼叫的速度,同時降低成本。在早期測試中,開發人員可以透過將指導訊息進一步微調到模型本身上,將提示的大小縮小了多達 90%。
微調 GPT-3.5 Turbo 的步驟
根據 OpenAI 的部落格文章,微調 GPT-3.5 Turbo 包含三個主要步驟:資料準備、上傳檔案和建立微調作業。完成微調後,該模型可以與底層模型具有相同的共享速率約束一起用於生產中。OpenAI 在部落格文章中強調:“微調過程的部署對我們來說非常重要。為了透過微調過程保留預設模型的安全特性,微調訓練資料會透過我們的審查 API 和 GPT-4 驅動的審查系統,檢測與我們的安全標準相衝突的不安全訓練資料。”此外 OpenAI 還強調透過微調 API 和系統傳送的資料由使用者擁有,並且不會被用於訓練 OpenAI 或任何其他企業的任何模型。
微調 GPT-4 和更多功能即將推出
OpenAI 計劃在今年秋季開放其旗艦生成模型 GPT-4 進行微調,該模型甚至能夠理解影象。此外為了改進整個微調過程,該公司還將推出一個微調介面,使開發人員更容易獲取有關正在進行的微調作業、已完成的模型快照和其他與自定義工作相關的訊息。然而當前還沒有確保此介面的推出時間。
影響和競爭
OpenAI 為其主打的詞語模型提供更多面向企業的工具是合理的,但這也將使其直接競爭日益增長的初創企業和成熟企業,這些企業提供自己的第三方詞語模型微調解決方案,其中包括 Armilla AI 和 Apache Spark。OpenAI 的動向表明,該公司正努力在這個領域保持競爭優勢。
延伸閱讀
- OpenAI 宣布移除 ChatGPT 的像 Scarlett Johansson 一樣的聲音
- OpenAI 與 Google 擺出競爭的 AI 願景
- OpenAI 設立超智慧 AI 團隊,卻任由其荒廢,訊息來源指稱
- 本週人工智慧大事記:OpenAI 轉向非安全應用
- OpenAI 成立團隊控制「超智慧」AI,卻任憑其枯萎——訊息來源指出
- Seraphim 最新太空加速器迎來九家企業
- OpenAI 聯合創始人兼長期首席科學家 Ilya Sutskever 離職
- OpenAI 考慮允許 AI 色情內容?
- OpenAI 揭開 AI 祕密指令的面紗
- OpenAI 表示正在建立一個工具,以讓內容創作者選擇退出 AI 訓練