OpenAI CEO：巨型AI模型時(shí)代已結束，馬斯克TruthGPT曝光

至于原因，一方面是大模型需要跳出擴展參數規模的范疇，另一方面受限于高昂的訓練成本。

近幾個(gè)月來(lái)，OpenAI ChatGPT 的強大生成式對話(huà)能力引發(fā)了人們對 AI 的新興趣和投資。隨著(zhù)國內外掀起類(lèi) ChatGPT 研發(fā)熱潮，對話(huà)式 AI 及背后的大模型被更多人看好。
但上周在 MIT 的視頻發(fā)言中，OpenAI CEO Sam Altman 發(fā)表了另一番言論。他警告稱(chēng)，誕生 ChatGPT 的研究策略已經(jīng)結束。至于未來(lái)會(huì )在哪些方面出現進(jìn)展尚不清楚。

過(guò)去幾年，OpenAI 通過(guò)采用現有機器學(xué)習算法并將它們擴展到以往無(wú)法想象的規模，在與語(yǔ)言相關(guān)的人工智能領(lǐng)域取得了一系列引人矚目的進(jìn)展。其中作為最新的進(jìn)展，GPT-4 可能使用數萬(wàn)億文本單詞和數千個(gè)強大的計算機芯片訓練。
GPT-4 在語(yǔ)言、數學(xué)、編程、視覺(jué)、醫學(xué)、法律和心理學(xué)等多種任務(wù)上都有出色的表現。Sam Altman 卻對此表示，讓模型變得更大（比如巨型模型）將不會(huì )進(jìn)一步帶來(lái)新進(jìn)展。

Sam Altman 的這番言論表明，在開(kāi)發(fā)和部署新 AI 算法的競賽中出現了一個(gè)意想不到的轉折。自去年 11 月 ChatGPT 推出以來(lái)，微軟利用底層技術(shù)在必應搜索中添加了基于它的聊天機器人，谷歌也推出 Bard 競品。很多人急著(zhù)嘗試使用新型聊天機器人幫助完成工作或個(gè)人任務(wù)。
與此同時(shí)，包括 Anthropic、AI21、Cohere 和 Character.AI 在內眾多資金雄厚的初創(chuàng )公司都投入大量資源構建規模更大的算法，以努力追趕 OpenAI。
不過(guò)，Sam Altman 的話(huà)似乎預示著(zhù)，GPT-4 可能是 OpenAI 研發(fā)更大模型并喂給它們更多數據這一戰略的最后一個(gè)重大進(jìn)展。這也可以從他親自辟謠 GPT-5 的相關(guān)傳聞中看出一些端倪，他表示目前沒(méi)有訓練 GPT-5，短期內也不會(huì )訓練。
在描述 GPT-4 的論文中，OpenAI 預估擴展模型規模的收益將出現遞減。OpenAI 建造數據中心的數量以及建造速度也存在物理限制。
除了大模型設計和架構本身的原因，巨額花費也是一大原因。據報道，ChatGPT 需要至少 10000 個(gè) GPU 進(jìn)行訓練，還需要更多資源保證持續運行。而英偉達專(zhuān)為 AI 和高性能計算設計的最新 H100 GPU 單價(jià)高達 30,603 美元，無(wú)疑成本高昂。Altman 親自承認，GPT-4 的訓練花費超過(guò)了 1 億美元。
Cohere 的聯(lián)合創(chuàng )始人（曾在谷歌從事 AI 工作）Nick Frosst 表示，Altman 的擴大規模并不能永遠奏效的觀(guān)點(diǎn)聽(tīng)起來(lái)是對的。他也認為，Transformer（GPT-4 及競品的核心機器學(xué)習模型類(lèi)型）的進(jìn)展已經(jīng)超出了擴展范疇。除了向模型添加更多參數之外，還有很多其他方法可以使 Transformer 變得更好、更有用。
新的 AI 模型設計或架構以及基于人類(lèi)反饋的進(jìn)一步微調成為很多研究人員已經(jīng)在探索的有前景的方向。
馬斯克將 AI 項目命名為 TruthGPT
馬斯克這邊，雖然嘴上說(shuō)擔憂(yōu) GPT-4 引發(fā)社會(huì )問(wèn)題，并簽署暫停開(kāi)發(fā)比 GPT-4 更強大的系統至少六個(gè)月。但實(shí)際情況卻是馬斯克正致力于新建一家人工智能初創(chuàng )公司 X.AI，與 OpenAI 直接展開(kāi)競爭。
據報道，馬斯克已經(jīng)從英偉達獲取了上萬(wàn)塊 GPU，這些系統為人工智能和高端圖形處理等密集型任務(wù)所需的計算提供動(dòng)力。

馬斯克證實(shí)了有關(guān)他計劃創(chuàng )建一家人工智能初創(chuàng )公司，與 ChatGPT 競爭的報道。馬斯克在接受?？怂共稍L(fǎng)時(shí)宣布了這項計劃，并表示，「我將創(chuàng )建一種稱(chēng)為 TruthGPT 的人工智能平臺，或者說(shuō)是一個(gè)最大限度地尋求真理的人工智能，可以理解宇宙的本質(zhì)。我認為這可能是通往（AI）安全的最佳途徑，從某種意義上說(shuō)，一個(gè)關(guān)心理解宇宙的人工智能不太可能滅絕人類(lèi)，因為我們是宇宙中有趣的一部分?！?/span>
馬斯克在采訪(fǎng)中還表示，他相信人工智能具有毀滅文明的潛力，無(wú)論（其力量）多么小。
此前，馬斯克于 2015 年與 OpenAI 現任 CEO Sam Altman 等人共同創(chuàng )立了 OpenAI，但馬斯克于 2018 年離開(kāi)了公司董事會(huì )。據了解，馬斯克當時(shí)聲明的原因是為了避免與特斯拉發(fā)生潛在的利益沖突，但后來(lái)馬斯克表示還有其他原因，另一個(gè)原因是他不同意 OpenAI 團隊在做的一些事情。
另外據 Semafor  3 月份報道，馬斯克曾試圖在 2018 年接任公司 CEO 一職，但在 Altman 和其他人拒絕后便離開(kāi)了。
自從退出 OpenAI 董事會(huì )以來(lái)，馬斯克一再批評 OpenAI。就在今年 2 月，他還表示現在的 OpenAI 根本不是他所希望的，并稱(chēng) OpenAI 為微軟控制的、閉源、利潤最大化的公司」。
面多馬斯克的多次攻擊，Altman 表示即便如此，自己仍將馬斯克視為自己的偶像之一，并表示，「我相信馬斯克確實(shí)對 AGI 安全感到壓力，這是可以理解的?！?/span>
值得一提的是這不是馬斯克第一次考慮打造 TruthGPT。他在 2 月曾經(jīng)發(fā)推說(shuō)，我們需要的是 TruthGPT。

關(guān)于 TruthGPT 的更多細節，馬斯克沒(méi)有透漏更多消息，我們可以后續期待一波。
參考鏈接：https://www.wired.com/story/openai-ceo-sam-altman-the-age-of-giant-ai-models-is-already-over/https://venturebeat.com/ai/openai-chief-says-age-of-giant-ai-models-is-ending-a-gpu-crisis-could-be-one-reason-why/