首頁 > 技術 > 正文

快手自研模型“快意”成中文能力top1 61分成績超ChatGPT

2023-08-21 16:02:34來源:中關村在線  


(相關資料圖)

近期,快手自研的大型人工智能模型“快意”(KuaiYii)在AI綜合中文評估基準CMMLU的榜單中嶄露頭角。據悉,該模型的13B版本KwaiYii-13B在five-shot和zero-shot項目下的中文向均位列第一名,尤其在人文學科、中國特定主題等方面表現突出,平均分超過61分。根據快手在GitHub頁面公布的信息,快意是其AI團隊獨立研發(fā)的大規(guī)模語言模型。目前,該模型已經覆蓋了預訓練模型(KwaiYii-Base)和對話模型(KwaiYii-Chat)。快意的主要特點包括:首先,KwaiYii-13B-Base預訓練模型具備優(yōu)異的通用技術底座能力,在大部分權威的中/英文Benchmark上取得了同等模型尺寸下的最佳效果。例如,該模型在MMLU、CMMLU、C-Eval、HumanEval等Benchmark上目前處于同等模型規(guī)模的領先水平。其次,KwaiYii-13B-Chat對話模型具備出色的語言理解和生成能力,支持內容創(chuàng)作、信息咨詢、數學邏輯、代碼編寫、多輪對話等廣泛任務。人工評估結果顯示,KwaiYii-13B-Chat超過了主流的開源模型,并在內容創(chuàng)作、信息咨詢和數學解題上接近ChatGPT(3.5)同等水平。

標簽:

相關閱讀

精彩推薦

相關詞

推薦閱讀