大模型卷了一年後之後,今年 OpenAI 發布的節奏明顯放緩,但最新的模型已經在路上了。贊助商廣告在最近舉行的 KDDI 峰會上,OpenAI 日本公司 CEO Tadao Nagasaki 透露了關於 ChatGPT 下一代模型的最新進展。 Tadao 表示,代號為「GPT-Next」的新一代模型性能預計將比現有的 GPT-4 模型強大 100 倍,並計劃在今年晚些時候發布。 報道稱,該模型在 OpenAI 神秘「草莓」模型的一個更小、更緊湊的版本上進行訓練。 GPT-Next 模型性能的提升歸功於其優化的架構設計和學習效率的改進,而不是單純依賴於龐大的計算資源。 他還透露,目前 OpenAI 全球員工不足 2000 人,其中約一半專注於 AI 開發。OpenAI 的主要客戶包括宣布蘋果公司、可口可樂以及生物科技巨頭 Moderna。 在演講中,Tadao 對 GPT 系列的未來進行了展望,他將 GPT-3 與 GPT-4 進行了對比,他表示,與傳統軟體相比,AI 技術將呈指數級增長。 值得一提的是,據多家外媒報道,OpenAI 正在洽談新一輪融資,估值預計將超過 1000 億美元,有望成為全球市值最高的 AI 獨角獸。 該輪融資的投資者包括 Thrive Capital、微軟、蘋果和英偉達等。外媒 The Information 指出,融資期間,OpenAI 或將從非營利組織轉變為營利性企業。 另外,最新的數據顯示,自去年 11 月份以來,ChatGPT 的周活躍用戶數量已經翻了一倍,超過 2 億。 贊助商廣告除了 OpenAI 被傳融資消息,最近,OpenAI 前首席科學家 Ilya Sutskever 的新公司 SSI 也宣布從紅杉資本和 Andreessen Horowitz 等投資者那裡籌集了 10 億美元。 SSI 計劃利用這筆融資來購買算力並招募一些志同道合的頂尖 AI 人才。 知情人士透露,儘管這家成立三個月、只有 10 名員工的創業公司尚未推出任何產品,但估值已高達 50 億美元。 SSI 共有三位聯合創始人,除了 Ilya,另外兩位聯合創始人分別是 Daniel Gross 和 Daniel Levy。其中 Levy 是主要科學家,而 Gross 負責籌款和尋求計算資源。 在宣布創立 SSI 之前,Gross 是一位投資者,也是前蘋果公司 AI 部門的負責人,因支持包括 Keen Technologies 在內的一些知名 AI 初創公司而備受關注。Keen 由著名程式設計師、3D 遊戲之父約翰・卡馬克創立,旨在開發 AGI。 公開資料顯示,Gross 因創辦的 Greplin 公司受到賞識而加入 YC。後來,更名為 Cue 的 Greplin 公司在 2013 年以約 4000 萬美元的價格被蘋果收購。 藉此,年僅 23 歲的 Gross 也就成為了蘋果的技術總監,主要負責機器學習與搜索業務。 在蘋果公司任職期間,Gross 主要負責將機器學習技術融入 iOS 和 macOS 作業系統中,比如從通信記錄中智能識別並提取聯繫人數據,然後將這些數據整合進通訊錄等應用之中。 在接受路透社採訪時,Gross 曾表示: 對我們來說,找到那些理解、尊重並支持我們使命的投資者至關重要,而我們的使命是直接致力於實現安全的超級智能,尤其是花幾年時間對我們的產品進行研發,然後再將其推向市場。 而 Levy 則因在 OpenAI 與 Ilya 共同訓練 AI 模型而廣受讚譽。 「現在是開展這樣一個項目的最佳時機,」Levy 說,「我的願景與 Ilya 相同:打造一個精幹、專注的小團隊,致力於實現安全超級智能這一目標。」 與 OpenAI 最初出於 AI 安全考慮而採取的非營利組織不同,SSI 採用了標準的營利性結構。 對於本輪融資,SSI 表示,它計劃與雲提供商和晶片公司合作,為其計算能力需求提供資金,但尚未決定將與哪些公司合作,而微軟、英偉達都是潛在選擇。 贊助商廣告Ilya 是 Scaling Law 最早一批的忠實擁躉。該定律指出,隨著 AI 模型的規模(包括參數數量、訓練數據量、計算資源)的擴大,模型的性能和能力也會相應地顯著提升。 據路透社報道,Ilya 將以與「前僱主」 OpenAI 不同的方式繼續 Scaling ,但並沒有透露具體的細節。 「每個人都在談論 Scaling Hypothesis,但大家都忽略了一個問題:我們究竟在 Scaling 什麼?」他說。 有些人可以工作很長時間,但他們只會更快地走上相同的道路。我們並不傾向於這樣做。但是,如果你嘗試一些不同的方式,那麼你就有可能創造一些與眾不同的成果。 原文地址 : https://www.animattoys.com/detail/VDSnotlF/ChatGPT下一代模型宣布比GPT4強100倍