深言科技聯(lián)合清華大學(xué)開(kāi)源 LingoWhale-8B 模型：免費商用，號稱(chēng)性能超 GPT-3.5 Turbo

IT之家 11 月 3 日消息，據深言科技官方公眾號消息，由深言科技與清華大學(xué) NLP 實(shí)驗室共同研發(fā)的語(yǔ)鯨 LingoWhale-8B 模型目前已面向社會(huì )開(kāi)源，對學(xué)術(shù)研究完全開(kāi)放，允許免費商用。

IT之家經(jīng)過(guò)查詢(xún)得知，LingoWhale-8B 模型是擁有約 80 億參數的中英雙語(yǔ)大語(yǔ)言模型，在 C-Eval、MMLU、CMMLU 等多個(gè)權威的公開(kāi)評測基準上，在 10B 以下開(kāi)源模型據稱(chēng)“達到領(lǐng)先效果”。

不過(guò)官方同時(shí)聲稱(chēng)，受模型參數量影響，大模型固有的幻覺(jué)問(wèn)題、數學(xué)計算能力相對較弱、生成內容有無(wú)法預見(jiàn)性等問(wèn)題在 LingoWhale-8B 模型中仍然存在。

在性能方面，截至 10 月 24 日，在中文領(lǐng)域權威評測 C-Eval 中，LingoWhale-8B 模型的性能僅次于 GPT-4。在 C-Eval、CMMLU、GAOKAO 測評中，性能超過(guò) GPT-3.5Turbo，在 10B 以下尺寸模型中性能處于領(lǐng)先位置。

官方給予了一些典型示例，以介紹 LingoWhale-8B 模型的特點(diǎn)。

官方據此表示，LingoWhale-8B 模型具有一定數學(xué)運算能力。

在以上示例中，LingoWhale-8B 模型能夠根據上文正確地列式并進(jìn)行運算，包括函數求導、函數值計算、切線(xiàn)方程計算等操作，并最終得到結果。

而在代碼聲稱(chēng)方面，官方也同時(shí)提供了一些演示：

LingoWhale-8B 具有強大的代碼理解與生成能力，能夠更好地生成代碼并解決具體的問(wèn)題。在本示例中，LingoWhale-8B 模型生成了詳細的 python 代碼以及注釋信息，幫助用戶(hù)更好地理解并使用生成的代碼。

在邏輯方面，官方也同樣進(jìn)行了舉例：

LingoWhale-8B 模型具有解決復雜邏輯推理任務(wù)的能力。在以上的例子中，LingoWhale-8B 將復雜的邏輯問(wèn)題進(jìn)行拆解，按步驟進(jìn)行分析并解決問(wèn)題。

上下文對話(huà)

樣例：

在以上示例中，LingoWhale-8B 模型表現出了較強的角色扮演、方案設計、長(cháng)文本理解以及多輪對話(huà)能力，能夠根據用戶(hù)需求制定方案并組織結構化的輸出，應對更加復雜的任務(wù)場(chǎng)景。

知識百科

樣例 1:

官方表示，在上面兩個(gè)例子中，相較于 GPT-3.5，LingoWhale-8B 模型生成的結果更加準確詳實(shí)。

經(jīng)過(guò)在大規模高質(zhì)量語(yǔ)料上的預訓練，LingoWhale-8B 模型掌握了多個(gè)領(lǐng)域的知識，包括科學(xué)、歷史、文學(xué)、藝術(shù)等，能夠理解并回答各種知識相關(guān)問(wèn)題，提供準確詳細的答案。

IT之家的小伙伴們可以在官方 GitHub 頁(yè)面中獲取更多詳細信息：點(diǎn)此訪(fǎng)問(wèn)