微軟的iPhone時(shí)刻
作者|弗雷迪 來(lái)源|格隆匯APP(ID:hkguruclub)
數(shù)據(jù)支持 | 勾股大數(shù)據(jù)(www.gogudata.com)
在新一代GPT問(wèn)世后,微軟旋即推出了Microsoft 365 Copilot,新的辦公軟件由GPT-4驅(qū)動(dòng),在減少大量用戶操作下,協(xié)助生成文檔、電子郵件、演示文稿和更多內(nèi)容。
處理效率之高,愈發(fā)讓人驚呼,生產(chǎn)力和人機(jī)交互的新一輪革命不再只是想象。
新技術(shù)的顛覆效果,往往看它能否展現(xiàn)出更低成本、更高產(chǎn)出、更省時(shí)間的產(chǎn)品力。
為GPT提供算力的CPU服從摩爾定律,即每隔18-24個(gè)月(更省時(shí)間),原來(lái)的晶圓上封裝的晶體管數(shù)量將會(huì)翻倍(更低成本),芯片的性能也會(huì)隨之翻倍(更高產(chǎn)出)。
能夠?qū)崿F(xiàn)以上三角的優(yōu)化解決方案,最終會(huì)推動(dòng)飛輪旋轉(zhuǎn),實(shí)現(xiàn)強(qiáng)大的規(guī)模效應(yīng)。而Open AI與微軟的合作,似乎在朝著這個(gè)方向努力。
01
GPT-4讓我們離AGI又近了一步
ChatGPT風(fēng)靡全球之后,OpenAI的創(chuàng)始人Sam Altman曾表示,一個(gè)全新的摩爾定律即將出現(xiàn),宇宙中的智能數(shù)量每18個(gè)月翻一番。
來(lái)源:推特
AI的復(fù)雜性會(huì)隨著市場(chǎng)邊界的擴(kuò)大而進(jìn)一步加深,具有涌現(xiàn)出新特性的潛質(zhì)。
模型的底層邏輯是算力、數(shù)據(jù)、算法三位一體的結(jié)合,但復(fù)雜程度與數(shù)據(jù)規(guī)模相匹配。
隨著參數(shù)量的增長(zhǎng),大模型的能力比起小模型要更加泛化。如果小模型的目標(biāo)是做一個(gè)行業(yè)專(zhuān)家,那么大模型的定位則是要成為一個(gè)通才。
AGI(通用人工智能)被設(shè)計(jì)的目的,是讓機(jī)器模仿并逐漸超越人類(lèi),實(shí)現(xiàn)與人類(lèi)相近的能力,計(jì)算、推理、思考、創(chuàng)造,但是會(huì)更快、更高效。
學(xué)會(huì)吸納更多的參數(shù),是大模型復(fù)雜度提升的基礎(chǔ)條件,數(shù)據(jù)就是AI 的血液。
第一代GPT的訓(xùn)練參數(shù)只有1.17億參數(shù),模型引入了Transformer架構(gòu),在處理文本的時(shí)候,學(xué)會(huì)利用上下文信息來(lái)預(yù)測(cè)下一個(gè)單詞。
在處理不同的任務(wù)時(shí),僅需要對(duì)預(yù)訓(xùn)練形成的網(wǎng)絡(luò)結(jié)構(gòu)進(jìn)行微調(diào),就能取得比傳統(tǒng)NLP模型更好的泛化效果,也加快了模型處理數(shù)據(jù)的效率。
GPT2.0階段,模型學(xué)會(huì)了多任務(wù)處理。開(kāi)發(fā)者再次測(cè)試了容量對(duì)于性能提升的幫助,不再需要標(biāo)注,而是讓模型根據(jù)給定的指令去理解任務(wù)。
這個(gè)階段的訓(xùn)練表明,隨著模型容量和數(shù)據(jù)增大,不需要給模型提供樣例,它也能夠很好地理解并且完成任務(wù)。
基于這層理解,到了GPT-3,開(kāi)發(fā)者也就有了更大的底氣實(shí)現(xiàn)參數(shù)規(guī)模的躍遷,在海量語(yǔ)言模型參數(shù)集中,少數(shù)樣例設(shè)置下,GPT的準(zhǔn)確性繼續(xù)得到提升。
語(yǔ)言模型參數(shù)增加,GTP在NLP任務(wù)上表現(xiàn)提升
來(lái)源:AI21 Labs
到了第四代,模型之間的代際差異隨著任務(wù)復(fù)雜度的提高更加明顯,這是GPT-4能做到的事情:
來(lái)源:Open AI
國(guó)內(nèi)百度16日發(fā)布了對(duì)標(biāo)chatGPT的產(chǎn)品“文心一言”,也已經(jīng)能夠支持多模態(tài)的轉(zhuǎn)換,文字可以直接在對(duì)話中生成圖片和視頻。
隨著多模態(tài)的實(shí)現(xiàn),基于自然語(yǔ)言模型的GPT未來(lái)有希望率先向AGI靠攏:
OpenAI開(kāi)放GPT 的初衷不僅在于找到最佳的落地應(yīng)用,而且在復(fù)雜的人類(lèi)信息流里得到反饋,擴(kuò)大其能力的邊界。代際之間,GPT快速進(jìn)步的能力超乎想象。
基于AGI最終很可能會(huì)實(shí)現(xiàn)的設(shè)想,AI的安全也將逐漸上升為一個(gè)全人類(lèi)的重要議題。
OpenAI因此會(huì)在正式版本發(fā)布之前花費(fèi)數(shù)月的時(shí)間進(jìn)行風(fēng)險(xiǎn)評(píng)估,不過(guò)最終,無(wú)論進(jìn)行多嚴(yán)格的審查,人類(lèi)的未來(lái)始終該由全人類(lèi)來(lái)共同決定。
02
微軟的iPhone時(shí)刻
殺手級(jí)應(yīng)用的誕生,對(duì)加速生產(chǎn)力變革具有重要的轉(zhuǎn)折作用。
19世紀(jì)末的蒸汽機(jī)靠燒煤提供動(dòng)力,但操作和燃料需要耗散大量人工和效率。后來(lái)西門(mén)子率先發(fā)明了電動(dòng)機(jī)車(chē),只消鋪一條電線,不過(guò)當(dāng)時(shí)電費(fèi)比煤費(fèi)還要貴,需要頻繁充電。
直到福特T型車(chē)橫空出世,流水線生產(chǎn)讓汽車(chē)制造成本大幅降低。隨之重量更輕、體積更小、操作更靈活的內(nèi)燃機(jī)汽車(chē)開(kāi)始走進(jìn)千家萬(wàn)戶,逐漸替代了蒸汽機(jī)和電動(dòng)機(jī)。在這之后我們又有了飛機(jī)和火箭。
AI的應(yīng)用,讓人和計(jì)算機(jī)交互的方式產(chǎn)生了劇變。微軟CEO曾經(jīng)表示,Copilot的自然語(yǔ)言交互將是下一輪人機(jī)交互方式變革的雛形。
從圖像界面的PC,到iPhone多點(diǎn)觸控的智能機(jī),每一次人機(jī)交互方式的變革孕育著全新的下游應(yīng)用生態(tài)。
過(guò)去的AI就只是大模型,把幾十臺(tái)服務(wù)器放在一起訓(xùn)練,沒(méi)有落到實(shí)地的應(yīng)用。OpenAI與微軟的合作,實(shí)現(xiàn)了兩件事情。
一是跑通了商業(yè)模式,GPT的訓(xùn)練和日常運(yùn)營(yíng)背靠微軟Azure的算力支持,微軟云服務(wù)Azure的市場(chǎng)份額僅次于AWS,是谷歌的兩倍。
巨額算力和AI大模型的結(jié)合,允許OpenAI進(jìn)一步推出訂閱式服務(wù),形成了MaaS(Model as a Service)。
Open AI 有兩種訂閱模式,一種to B,給企業(yè)客戶和開(kāi)發(fā)者提供ChatGPT API,一千個(gè)token輸入按0.002美元算,另一種to C,給普通用戶開(kāi)放最新功能,每個(gè)月收20美元。
用戶的快速增長(zhǎng)攤平了訓(xùn)練和推理所需的算力成本。GPT經(jīng)過(guò)用戶反饋的自主增強(qiáng)學(xué)習(xí)后,能力有了更快的提升,形成良好的正反饋機(jī)制,跟平臺(tái)粘性越強(qiáng),獲客成本就越低是一個(gè)道理。
來(lái)源:ChatGPT
二是在微軟的加持下,GPT和Bing、Gibhub以及Office等多個(gè)在線工具深度綁定。你有技術(shù),我有產(chǎn)品,兩家在商業(yè)化上擁有完美的協(xié)同效應(yīng),率先完善了云計(jì)算+AI大模型+應(yīng)用工具開(kāi)發(fā)的生態(tài)。
微軟和谷歌兩家巨頭對(duì)于推進(jìn)AI應(yīng)用有著截然不同的態(tài)度。
交互界面的改變對(duì)兩家來(lái)說(shuō)都如同革自己產(chǎn)品的命。不同之處在于,微軟的產(chǎn)品矩陣更快速地適應(yīng)了進(jìn)化。
GPT-4推出不久后,微軟即正式為365應(yīng)用服務(wù)提供GPT-4驅(qū)動(dòng)Copilot,對(duì)于用戶而言就像一個(gè)辦公助手,附著在側(cè)邊欄。用戶可以調(diào)用它來(lái)生成文檔,根據(jù)文本創(chuàng)建PPT,或者分析Excel數(shù)據(jù)。
來(lái)源:Microsoft 365 Copilot
有了GPT的賦能,對(duì)于微軟產(chǎn)品本身便是如虎添翼,這塊業(yè)務(wù),“Productivity and Business Process”去年下半年的收入達(dá)到了330億美元。全面鋪開(kāi)后,增長(zhǎng)有著更大的想象空間。
未來(lái)人們轉(zhuǎn)向AI聊天界面來(lái)搜索信息,必然會(huì)給搜索引擎的廣告業(yè)務(wù)帶來(lái)巨大沖擊。而谷歌的廣告收入占了營(yíng)收的80%左右,其中占大頭的還是搜索廣告。
谷歌還沒(méi)有想好怎么革自己的命,一直如履薄冰,在應(yīng)用上還沒(méi)有拿出完美的方案,把iPhone時(shí)刻拱手讓給了微軟。
03
應(yīng)用層涌現(xiàn),小模型也大有可為
芯片和算力相當(dāng)于鋰礦和電池,其稀缺性決定了這是少數(shù)企業(yè)有條件參與的游戲。
要匹配相應(yīng)規(guī)模的算力用于AI訓(xùn)練并非易事,因此ChatGPT概念一火,便立刻帶動(dòng)有關(guān)芯片、算力的股票板塊。
英偉達(dá)的A100/H100是目前最強(qiáng)大的數(shù)據(jù)中心專(zhuān)用GPU。1萬(wàn)顆A100芯片被認(rèn)為是AI模型的算力門(mén)檻。據(jù)國(guó)盛證券估算,按照ChatGPT1月份1300萬(wàn)的訪問(wèn)量水平,對(duì)應(yīng)的芯片需求就多達(dá)3萬(wàn)多顆A100。
此外,ChatGPT單月運(yùn)營(yíng)需要算力約4874.4PFlop/s-day。擁有亞洲最大超算中心的商湯科技,總算力超過(guò)每秒4910Petaflops,也就是說(shuō)要訓(xùn)練GPT幾乎得用上全部算力。
在國(guó)內(nèi),只有云廠商具備算力和AI模型的基礎(chǔ)條件。在這個(gè)性能快速提升的領(lǐng)域,先發(fā)優(yōu)勢(shì)可能會(huì)給后邊的企業(yè)帶來(lái)不可逾越的鴻溝。
AI大模型對(duì)于云計(jì)算行業(yè)將發(fā)揮game changer的作用,按李彥宏的話說(shuō),以前更關(guān)注的是基礎(chǔ)算力,而現(xiàn)在需要考慮的則是芯片、模型、框架協(xié)同做得好不好。
可以預(yù)見(jiàn)的是,AI大模型未來(lái)會(huì)自然滲透到各個(gè)辦公、內(nèi)容創(chuàng)作場(chǎng)景,新的應(yīng)用正在涌現(xiàn),正如石油、煤炭賦能了工業(yè)生產(chǎn)、交通運(yùn)輸?shù)阮I(lǐng)域。
對(duì)于不想錯(cuò)過(guò)這一波技術(shù)紅利的企業(yè)來(lái)說(shuō),站在巨人的肩膀上,成功概率也許更大一些。
相比垂類(lèi)行業(yè)的小模型,大模型具有廣泛的遷移學(xué)習(xí)能力,就像人類(lèi)把騎自行車(chē)的能力遷移到學(xué)騎摩托車(chē)一樣,比如在金融領(lǐng)域習(xí)得的知識(shí)可以遷移到稅務(wù)會(huì)計(jì)等其他經(jīng)濟(jì)場(chǎng)景里。
但在大小模型聯(lián)動(dòng)的學(xué)習(xí)方式里,小模型可以通過(guò)知識(shí)蒸餾從大模型中學(xué)習(xí),并可以在許多下游任務(wù)中達(dá)到與大模型相似的性能,就像老師帶著學(xué)生。
同時(shí),AI模型+文本&對(duì)話&圖像&視頻&代碼等多模態(tài)的實(shí)現(xiàn),讓AGI有在影視娛樂(lè)、游戲、電商零售、廣告營(yíng)銷(xiāo)等商業(yè)場(chǎng)景具有成為專(zhuān)家的能力,能夠大幅降低內(nèi)容創(chuàng)作的門(mén)檻,帶來(lái)生產(chǎn)力和成本的優(yōu)化。
因?yàn)锳PI的開(kāi)放,大模型根植于更多已經(jīng)成熟的商業(yè)模式,場(chǎng)景和用戶規(guī)模正在大幅擴(kuò)展。許多已經(jīng)積累了大量用戶的應(yīng)用結(jié)合api對(duì)產(chǎn)品形態(tài)進(jìn)行了升級(jí),包括移動(dòng)端App以及瀏覽器插件,被分流到各類(lèi)應(yīng)用的用戶一旦成為AI使用者,其規(guī)模必將是指數(shù)級(jí)的增長(zhǎng)。
04
尾聲
許多看過(guò)《2001太空漫游》的人應(yīng)該都對(duì)電影開(kāi)頭那個(gè)史詩(shī)級(jí)的蒙太奇影響深刻:
開(kāi)頭兩分鐘的鏡頭展示了人類(lèi)祖先的生活面貌,猿人第一次了解到骨頭如何作為工具使用,開(kāi)啟了智性。當(dāng)白色的獸骨扔到空中時(shí),瞬間切成了遨游在太空里的孤寂的宇宙飛船。
(來(lái)源:《2001太空漫游》)
這一幕匹配剪輯僅用幾秒鐘的時(shí)間,就完成了人類(lèi)進(jìn)步的跨越。幾秒鐘的時(shí)間,對(duì)于宇宙來(lái)說(shuō)無(wú)甚區(qū)別,但對(duì)于人類(lèi)則是長(zhǎng)達(dá)幾十萬(wàn)年的進(jìn)化。
在占比不到1%的技術(shù)文明浪潮中,人類(lèi)的知識(shí)和財(cái)富呈現(xiàn)爆炸性增長(zhǎng),這是由技術(shù)驅(qū)動(dòng)創(chuàng)新帶來(lái)的結(jié)果。
過(guò)去幾十年,關(guān)于智能的定義一直在不斷的被修正,在這一輪技術(shù)革命中,AGI不會(huì)缺席。(全文完)
編者按:本文轉(zhuǎn)載自微信公眾號(hào):格隆匯APP(ID:hkguruclub),作者:弗雷迪
前瞻經(jīng)濟(jì)學(xué)人
專(zhuān)注于中國(guó)各行業(yè)市場(chǎng)分析、未來(lái)發(fā)展趨勢(shì)等。掃一掃立即關(guān)注。