
DeepMind聯(lián)合創(chuàng)始人:GPT-5正在訓(xùn)練中 比當(dāng)前模型大100倍
聲明:該文章來自(快科技)版權(quán)由原作者所有,K2OS渲染引擎提供網(wǎng)頁加速服務(wù)。
DeepMind聯(lián)合創(chuàng)始人Suleyman近日在采訪中表示,GPT-5仍在秘密訓(xùn)練中,未來將會(huì)比現(xiàn)在的GPT-4大100倍。
其實(shí),Open AI CEO Sam Altman此前曾否認(rèn)訓(xùn)練GPT-5的這一說法。有消息人士表示,OpenAI可能給它起了一個(gè)新名字,所以他們才說沒有訓(xùn)練GPT-5。
Suleyman目前是Inflection AI的CEO,Inflection AI正在建造世界上最大的超級(jí)計(jì)算機(jī)之一,并且他認(rèn)為在接下來的18個(gè)月內(nèi),他們可能會(huì)進(jìn)行一次比制造GPT-4的語言模型訓(xùn)練運(yùn)行大10倍或100倍的訓(xùn)練運(yùn)行。
今年3月份GPT-4正式發(fā)布,和ChatGPT最初使用的GPT-3.5模型相比,GPT-4實(shí)現(xiàn)了幾個(gè)方面的飛躍式提升:強(qiáng)大的識(shí)圖能力;文字輸入限制提升至2.5萬字;回答準(zhǔn)確性顯著提高;能夠生成歌詞、創(chuàng)意文本,實(shí)現(xiàn)風(fēng)格變化。
GPT-3.5有1750億參數(shù)規(guī)模,OpenAI沒有公布過GPT-4的具體規(guī)格,但之后的分析認(rèn)為它擁有16個(gè)專家模型,每個(gè)MLP專家大約有1110億個(gè)參數(shù),總計(jì)1.8萬億參數(shù),是GPT-4的10倍規(guī)模。
GPT-5如果按照這個(gè)比例來提升,那要突破10萬億參數(shù)了,有可能成為最大規(guī)模的AI大模型,遠(yuǎn)超其他所有對(duì)手。
[超站]友情鏈接:
四季很好,只要有你,文娛排行榜:https://www.yaopaiming.com/
關(guān)注數(shù)據(jù)與安全,洞悉企業(yè)級(jí)服務(wù)市場(chǎng):https://www.ijiandao.com/
- 1 潮涌天山活力新 7903986
- 2 廣東或大范圍停工 7808431
- 3 央視起底柯克之死 7712730
- 4 多領(lǐng)域重點(diǎn)工程傳來好消息 7617236
- 5 中產(chǎn)運(yùn)動(dòng)三件套又換了 7520479
- 6 牛糞“圍村”成養(yǎng)殖大縣最頭疼的事 7424362
- 7 央行證監(jiān)會(huì)等負(fù)責(zé)人出席發(fā)布會(huì) 7328426
- 8 特朗普兒子模仿爸爸引哄堂大笑 7236171
- 9 內(nèi)蒙古一地集中采集男性居民血樣 7137569
- 10 以總理:絕不會(huì)有巴勒斯坦國(guó) 等著瞧 7045055