天天看點

最新!OpenAI掌門人分享未來産品路線圖:GPT-4會更快、更便宜

最新!OpenAI掌門人分享未來産品路線圖:GPT-4會更快、更便宜

騰訊科技訊 6月1日消息,機器學習和人工智能初創公司Humanloop首席執行官拉紮·哈比比(Raza Habib)最近邀請人工智能研究公司OpenAI首席執行官薩姆·奧特曼(Sam Altman)以及其他20多位開發者,共同探讨了人工智能的未來。奧特曼非常坦率地分享了OpenAI未來兩年的産品路線圖,還談到OpenAI的使命以及人工智能的社會影響等問題。

最新!OpenAI掌門人分享未來産品路線圖:GPT-4會更快、更便宜

以下為訪談要點:

1、OpenAI嚴重受制于GPU短缺

在整個讨論中出現的一個共同主題是,目前OpenAI的GPU供應非常有限,這導緻他們推遲了許多短期計劃。客戶最大的抱怨是API的可靠性和速度。奧特曼承認存在這種擔憂,并解釋說大部分問題是因GPU短缺所緻。

長度為32k的上下文功能還不能推廣給更多的人。OpenAI還沒有克服相關技術挑戰,是以雖然看起來他們很快(今年)就會有100k到1M令牌的上下文視窗,但更大的視窗都需要在研究上取得突破。

微調API目前也受到GPU可用性的限制。它們還沒有使用Adapters或LoRa等高效的調優方法,是以調優的運作和管理需要大量的計算。将來會有更好的微調支援。他們甚至可以托管一個社群貢獻模型的市場。

專用容量供應受GPU可用性的限制。OpenAI也提供專用容量,為客戶提供該模型的私人副本。但要使用這項服務,客戶必須願意支付相當于10萬美元的費用。

2、OpenAI的近期路線圖

奧特曼分享了他所看到的OpenAI API臨時近期路線圖。

2023年:

更便宜、更快的GPT-4:這是OpenAI的首要任務。總的來說,OpenAI的目标是盡可能地降低“智能成本”,是以他們将努力随着時間的推移繼續降低API的成本。

更長的上下文視窗:在不久的将來,上下文視窗可能高達100萬令牌。

微調API:微調API将擴充到最新的模型上,但其确切形式将由開發者真正想要的元素來決定。

支援會話狀态的API:當你今天調用聊天API時,你必須反複地傳遞相同的會話曆史,并反複支付同樣的令牌。将來,會有一個版本的API可以記住會話曆史記錄。

2024年:

多模态:這在GPT-4釋出時進行了示範,但在更多GPU上線之前不能擴充到所有人。

3、插件“沒有PMF”,可能不會很快出現在API中

許多開發人員都對通過API通路ChatGPT插件感興趣,但奧特曼說他認為這些插件不會很快釋出。除了浏覽,插件的使用表明他們還沒有PMF。奧特曼表示,很多人認為他們希望自己的應用被內建到ChatGPT中,但實際上,他們真正想要的是将ChatGPT引入自己的應用中。

4、OpenAI将避免與他們的客戶競争,除了ChatGPT

許多開發者表示,他們對使用OpenAI API建構産品感到緊張,因為OpenAI最終可能會釋出與他們競争的産品。對此,奧特曼表示,OpenAI不會釋出更多ChatGPT之外的産品。他說,許多偉大的平台公司都有自己的殺手級應用,ChatGPT将允許他們通過成為自家産品的客戶來改進API。ChatGPT的願景是成為一個超級智能的工作助手,但還有很多其他的GPT用例是OpenAI無法觸及的。

5、監管是必要的,但開源同樣重要

雖然奧特曼呼籲對未來的模型進行監管,但他并不認為現有的模型是危險的,認為監管或禁止它們将是一個大錯誤。奧特曼強調了開源的重要性,并表示OpenAI正在考慮開源GPT-3。他們還沒有開源的部分原因在于,他懷疑有多少個人和公司有能力托管大語言模型。

6、縮放定律仍然成立

最近許多文章都聲稱“巨型人工智能模型的時代已經結束”,但奧特曼表示,這并沒有準确地表達他的意思。

OpenAI的内部資料表明,模型性能的縮放定律仍然成立,擴大模型将繼續可以幫助提升性能。但這種擴充速度無法維持下去,因為OpenAI在短短幾年内就把模型放大了數百萬倍,這樣做是不可持續的。不過,這并非意味着OpenAI将停止擴大模型,隻是意味着它們的規模可能每年隻會增加一倍或三倍,而不是以指數級速度增長。

縮放定律繼續發揮作用的事實對通用人工智能(AGI)開發的時間線具有重要意義。縮放假設是指,我們可能已經具備了建構AGI所需的大部分要素,剩下的大部分工作将是采用現有方法,并将其擴充到更大的模型和更大的資料集上。如果縮放時代已經結束,那麼我們應該期待AGI離我們更遙遠。但事實上,縮放定律繼續成立的事實強烈地暗示了時間線正變得更短。(金鹿)