關(guān)于ChatGPT的一些解讀
閱讀蘊藏著無盡可能,有益于明理、增信、崇德、力行,讓人生綻放光彩。
在近10 年 AI 發(fā)展的前兩個階段,人工智能的進展更多體現(xiàn)在基于規(guī)模的技術(shù)突破,如 2015-2020 年,用于模型訓(xùn)練的計算量增長了 6 個數(shù)量級,同時隨著規(guī)模的增大,輸出結(jié)果的質(zhì)量亦迎來質(zhì)變,在語言文字、書寫、圖像識別等領(lǐng)域皆表現(xiàn)出超越人類的水平。但在實用層面,由于所需要的算力巨大,往往需要特殊的 GPU 配置,同時訓(xùn)練過程相對封閉,大多數(shù)人并無法使用,因此技術(shù)無法被多數(shù)人觸達。而人工智能的第三個階段,隨著更新的技術(shù)、更優(yōu)的算法、更大的模型出現(xiàn),算力的成本越來越低,使得模型訓(xùn)練與運行所需成本持續(xù)下降,
而算法從封閉測試到開放測試、開源的逐漸普及,亦降低了使用門檻。由此人工智能無論在經(jīng)濟性與可獲得性上都達到了支持普及的水平。得益于AIGC 基礎(chǔ)設(shè)施可獲得性的逐步提高,平臺層變得更加穩(wěn)固,算力成本持續(xù)下探,模型逐漸趨于開源與免費,應(yīng)用層爆發(fā)式發(fā)展的節(jié)點正在靠近
目前我們正經(jīng)歷從Web2.0 開始向Web3.0 轉(zhuǎn)型的啟航階段,我們已經(jīng)看到內(nèi)容創(chuàng)造從專業(yè)創(chuàng)作(PFC)轉(zhuǎn)型為了用戶創(chuàng)作(UGC)。而 Chat-GPT 的出現(xiàn)以及中短期內(nèi)的產(chǎn)業(yè)化落地將會為從用戶創(chuàng)作(UGC)到 AI 創(chuàng)作(AIGC)的轉(zhuǎn)型提供關(guān)鍵的輔助支持。結(jié)合 Chat-GPT的底層技術(shù)邏輯,我們認為 Chat-GPT 中短期內(nèi)產(chǎn)業(yè)化的方向主要分為四大板塊。1)Chat-GPT 對于文字模態(tài)的 AIGC 應(yīng)用具有重要意義,在歸納性的文字類工作中展現(xiàn)出了其優(yōu)異的表現(xiàn)。中短期內(nèi) Chat-GPT 能在辦公輔助類工具中迅速落地,例如會議總結(jié)、文件翻譯、例行報告等,提升辦公效率并節(jié)省人力成本。
代碼開發(fā)相關(guān)的工作更加規(guī)整也非常適合AI 輔助生成。2021 年中與Github、微軟合作上線的 Copilot 是目前最成熟的 AI 代碼補全工具,根據(jù) Github數(shù)據(jù),測試一年來已有 120 萬用戶,這些用戶編寫的代碼中 40%是由 Copilot自動生成,而截至 2022 年 10 月,Copilot 已經(jīng)融資 2200 萬美元。Chat-GPT在目前測試中表現(xiàn)出的代碼生成能力相比于 Copilot 更加靈活,但欠缺一些底層的穩(wěn)定性。在進行針對性的優(yōu)化后,基于新 GPT 模型的 AI 代碼輔助工具也有望在中短期內(nèi)落地。3)圖像生成領(lǐng)域成為了 2022 年下半年一級市場公司布局的熱點,隨著 Dalle2 的熱度,在商稿方面用 AI 取代人類畫手的思路基本明確。
GPT 模型在圖像生成領(lǐng)域目前效果略遜于擴散模型,但擴散模型可以利用Chat-GPT 生成較佳的 Prompt,對于 AIGC 內(nèi)容和日趨火熱的藝術(shù)創(chuàng)作,提供強大的文字形態(tài)的動力。4)Chat-GPT 最適合直接落地的項目就是智能客服類的工作。根據(jù)模型現(xiàn)有的完成度,在垂直行業(yè)針對性的做人工反饋訓(xùn)練,Chat-GPT 就可以落地為智能客服產(chǎn)品,在 toC 場景中率先應(yīng)用。對比目前的智能客服,Chat-GPT 支撐的客服將在靈活性與人性化服務(wù)方面有顯著的進步。
關(guān)于ChatGPT
1、ChatGPT:更智能的 AI 對話交互工具
ChatGPT 是由 OpenAI 公司于 2022 年 11 月發(fā)布的聊天機器人模型,可以通過對話形式實現(xiàn)交互,能夠回答連續(xù)問題,承認錯誤,質(zhì)疑不正確的前提,并拒絕不合理的需求。ChatGPT 的對話互動可以實現(xiàn)普通聊天、信息咨詢、撰寫詩詞作文、修改代碼等,由于更類人的智能化表現(xiàn),ChatGPT 推出后受到廣泛關(guān)注,上線不到一周用戶量突破 100 萬。2023 年 1 月,微軟 CEO 表示計劃將 ChatGPT 等人工智能工具整合到所有產(chǎn)品中,并作為平臺提供給其他企業(yè)使用。Buzzfeed 和亞馬遜也在探索 ChatGPT 應(yīng)用場景。
GPT 引入新的模型訓(xùn)練方法,AI 行業(yè)發(fā)展有望加速GPT通過Transformer為基礎(chǔ)的預(yù)訓(xùn)練語言模型,此前已公布GPT-1、GPT-2、GPT-3 三個模型,ChatGPT 是對 GPT-3 模型(又稱為 GPT-3.5)微調(diào)后開發(fā)出來的對話機器人。ChatGPT 引入了 RLHF(基于人類反饋的強化學(xué)習(xí))方法,
方法分為三個步驟:1)有監(jiān)督的調(diào)優(yōu):預(yù)訓(xùn)練的語言模型在少量已標注的數(shù)據(jù)上進行調(diào)優(yōu),以學(xué)習(xí)從給定的 prompt 列表生成輸出的有監(jiān)督的策略(SFT 模型);2)模擬人類偏好:標注者們對相對大量的 SFT 模型輸出進行投票,創(chuàng)建一個由比較數(shù)據(jù)組成的新數(shù)據(jù)集,訓(xùn)練獎勵模型(RM);
3)近端策略優(yōu)化(PPO):使用 RM 作為強化學(xué)習(xí)的優(yōu)化目標,利用 PPO算法微調(diào) SFT 模型。我們認為,ChatGPT 的成功展示出 AI 大模型的應(yīng)用潛力,新方法的引入有望加速 NLP 算法及 AI 行業(yè)發(fā)展。
3、巨頭堅定投入,開啟 AI 新浪潮2023 年 1 月 18 日,微軟宣布將于 3 月底前在全球裁員 1 萬人,約占員工總數(shù)的 5%;1 月 23 日微軟在其官方博客宣布,已與 OpenAI 擴大合作伙伴關(guān)系,微軟將向 OpenAI 進行一項為期多年、價值數(shù)十億美元的投資,以加速其在人工智能領(lǐng)域的技術(shù)突破,此前微軟已分別于 2019 年和 2021 年對OpenAI 進行投資1 月 20 日,谷歌母公司 Alphabet 宣布將裁員約 1.2 萬人,占該公司員工總數(shù)的 6%以上,同時谷歌 CEO 表示,公司將會進一步聚焦AI 技術(shù)核心業(yè)務(wù)的研發(fā)投入。我們認為,微軟、谷歌、亞馬遜等全球巨頭堅定投入 AI,展現(xiàn)出 AI 應(yīng)用廣闊的發(fā)展前景,AI 行業(yè)有望開啟新發(fā)展浪潮。
Chat-GPT 的成功,是在前期大量堅實的工作基礎(chǔ)上實現(xiàn)的,不是橫空出世的技術(shù)跨越。這些進步主要來自于數(shù)學(xué)層面上的優(yōu)化帶來的結(jié)果匹配精準度提高,而并非算法真正為 AI 帶來了創(chuàng)造性與完整的邏輯性,也不是能夠從訓(xùn)練的數(shù)據(jù)中學(xué)習(xí)到新的知識。它在“解鎖”(unlock)和挖掘 GPT3 學(xué)到的海量數(shù)據(jù)中的知識和能力,但這些僅通過快速的In-context 的方式較難獲得。InstuctGPT 找到了一種面向主觀任務(wù)來挖掘 GPT3 強大語言能力的方式。因此從這樣的底層技術(shù)邏輯出發(fā),我們能迅速找到中短期內(nèi)適合 Chat-GPT的產(chǎn)業(yè)化方向:一個真正全方位的智能內(nèi)容生成助手。
Chat-GPT 的成功證明了兩點:1)單純擴大模型參數(shù)并非唯一出路;2)讓模型在早
期開放給大眾測試并收集人類反饋數(shù)據(jù)更有利于模型迭代。之前兩個階段,人工智能的進展更多體現(xiàn)在基于規(guī)模的技術(shù)突破,如2015-2020 年,用于模型訓(xùn)練的計算量增長了 6 個
數(shù)量級,同時隨著規(guī)模的增大,輸出結(jié)果的質(zhì)量亦迎來質(zhì)變,在語言文字、書寫、圖像識別等領(lǐng)域皆表現(xiàn)出超越人類的水平。但在實用層面,由于所需要的算力巨大,往往需要特
殊的GPU 配置,同時訓(xùn)練過程相對封閉,大多數(shù)人并無法使用,因此技術(shù)無法被多數(shù)人觸達。而人工智能的第三個階段,隨著更新的技術(shù)、更優(yōu)的算法、更大的模型出現(xiàn),算力的成本越來越低,使得模型訓(xùn)練與運行所需成本持續(xù)下降,而算法從封閉測試到開放測試、開源的逐漸普及,亦降低了使用門檻。由此人工智能無論在經(jīng)濟性與可獲得性上都達到了支持普及的水平。
互聯(lián)網(wǎng)巨頭接連曝光ChatGPT 布局動態(tài),華為下周或也有大動作,行業(yè)可能迎來格局驟變據(jù)21財經(jīng)8日報道,阿里達摩院正在研發(fā)類ChatGPT的對話機器人,目前已開放給公司內(nèi)員工測試。從曝光截圖來看,阿里巴巴可能將Al大模型技術(shù)與釘釘生產(chǎn)力工具深度結(jié)合。受此影響,阿里巴巴盤前漲近2%。
此外,據(jù)上證報報道,接近百度人士透露,此次ChatGPT項目文心一言落地,首站將直接接入百度搜索。另外今日早些時候消息稱,網(wǎng)易有道未來或?qū)⑼瞥鯟hatGPT同源技術(shù)產(chǎn)品,應(yīng)用場景圍繞在線教育。
另據(jù)中國證券報了解,騰訊也有相關(guān)技術(shù)儲備,包括Al大模型、機器學(xué)習(xí)算法以及NLP等領(lǐng)域。騰訊混元Al大模型團隊推出了萬億級別中文NLP預(yù)訓(xùn)練模型HunYuan-NLP-1T,該模型已落地于騰訊廣告、搜索、對話等內(nèi)部產(chǎn)品并通過騰訊云服務(wù)外部客戶。
除了巨頭動作外,2月13日,北京市科委、中關(guān)村管委會等攜手華為、中關(guān)村發(fā)展集團、百度等聯(lián)合舉辦北京人工智能產(chǎn)業(yè)創(chuàng)新發(fā)展大會。大會將發(fā)布人工智能基礎(chǔ)模型、展示領(lǐng)先技術(shù)、分享客戶及伙伴的優(yōu)秀商業(yè)實踐和成果等。
國聯(lián)證券研報指出,科技公司紛紛涌入AIGC賽道,AIGC頭部初創(chuàng)公司OpenA最新估值約為290億美元,作為行業(yè)領(lǐng)域領(lǐng)先的模型ChatGPT在對話機器人、智能創(chuàng)作等領(lǐng)域應(yīng)用廣泛,亞馬遜、微軟、Jasper等公司已經(jīng)開啟商業(yè)化之路,商業(yè)化前景廣闊。
財通證券也表示,ChatGPT是AIGC技術(shù)進展的里程碑,該模型使得利用人工智能進行內(nèi)容創(chuàng)作的技術(shù)成熟度大幅提升,有望成為新的全行業(yè)生產(chǎn)力工具,提升內(nèi)容生產(chǎn)效率與豐富度。部分行業(yè)如搜索引擎、文稿創(chuàng)作、藝術(shù)設(shè)計等可能出現(xiàn)行業(yè)格局與商業(yè)模式的驟變,全行業(yè)
“Al+*浪潮已至。而數(shù)據(jù)、算力、算法作為Al三要素,相互耦合,共同促進,將帶動Al行業(yè)整體協(xié)同發(fā)展。
Chat-GPT 的出現(xiàn)所帶來的內(nèi)容生成能力將會為當今從用戶創(chuàng)作(UGC)到 AI 創(chuàng)作
(AIGC)的轉(zhuǎn)型提供關(guān)鍵的輔助支持。目前我們正經(jīng)歷從 Web2.0 開始向 Web3.0 轉(zhuǎn)型的
啟航階段,在過去五年我們已經(jīng)看到內(nèi)容創(chuàng)造從專業(yè)創(chuàng)作(PFC)轉(zhuǎn)型為了用戶創(chuàng)作(UGC)。
在UGC 階段,隨著消費者定制化需求越來越高,消費者本身亦參與內(nèi)容的生產(chǎn),并伴隨
著互聯(lián)網(wǎng)的興起,智能手機的普及,YouTube、Facebook 等平臺涌現(xiàn),UGC 成為了內(nèi)容
生產(chǎn)的主流模式。而在不遠的將來,AI 協(xié)助內(nèi)容生成(AIUGC)與 AI 創(chuàng)作(AIGC)將為我們提供更低的創(chuàng)作門檻以及更豐富的創(chuàng)作思路。在這兩個階段中。內(nèi)容生產(chǎn)主體從人類
本身開始向人工智能遷移,主要區(qū)別體現(xiàn)在內(nèi)容的生產(chǎn)效率、知識圖譜的多樣性以及提供
更加動態(tài)且可交互的內(nèi)容上。人腦只能基于自己的知識圖譜進行少數(shù)方向的信息處理,而
AI 能從更龐大的知識體系中進行多個方向的處理,進而提供更多的創(chuàng)作思路。Gartner 預(yù)
計,到2025 年,生成式人工智能將占所有生成數(shù)據(jù)的 10%。
投資策略:Chat-GPT 模型的亮眼表現(xiàn)的背后是研究者在 Transformer 模型前進的道路上發(fā)現(xiàn)了類反饋強化學(xué)習(xí)這一方法帶來的潛力,對產(chǎn)業(yè)界 AI 的發(fā)展而言,數(shù)據(jù)質(zhì)量的優(yōu)化、AI 研究人員的儲備與計算能力將是未來能否走在 AI 應(yīng)用前沿的核心能力。Chat-GPT 的成功證明了 Transformer 模型并非陷入困境,不斷的AI 技術(shù)方法上的新突破正驅(qū)動全球 AI 產(chǎn)業(yè)進入加速發(fā)展階段,疊加 AI 產(chǎn)業(yè)集群效應(yīng)的不斷凸顯,AI 產(chǎn)業(yè)有望成為全球科技領(lǐng)域中期最具投資價值的產(chǎn)業(yè)賽道之一。AI 產(chǎn)業(yè)有望繼續(xù)保持“芯片+算力基礎(chǔ)設(shè)施+AI 框架&算法庫+應(yīng)用場景”的穩(wěn)定產(chǎn)業(yè)價值鏈結(jié)構(gòu),擁有完整數(shù)據(jù)閉環(huán)結(jié)構(gòu)、良好數(shù)據(jù)自處理能力的企業(yè)有望持續(xù)成為產(chǎn)業(yè)受益者。重點推薦:特斯拉、英偉達、AMD、高通、微軟、谷
投資建議:Chat-GPT 模型的亮眼表現(xiàn)的背后是研究者在 Transformer 模型前進的道路上發(fā)現(xiàn)了類反饋強化學(xué)習(xí)這一方法帶來的潛力,對產(chǎn)業(yè)界而言,數(shù)據(jù)質(zhì)量的優(yōu)化、AI 研究人員的儲備與計算能力將是未來能否走在 AI 應(yīng)用前沿的核心能力。Chat-GPT 的成功證明了Transformer 模型并非陷入困境,不斷的 AI 技術(shù)方法上的新突破正驅(qū)動全球 AI 產(chǎn)業(yè)進入加速發(fā)展階段,疊加 AI 產(chǎn)業(yè)集群效應(yīng)的不斷凸顯,AI 產(chǎn)業(yè)有望成為全球科技領(lǐng)域中期最
具投資價值的產(chǎn)業(yè)賽道之一。AI 產(chǎn)業(yè)有望繼續(xù)保持“芯片+算力基礎(chǔ)設(shè)施+AI 框架&算法庫+應(yīng)用場景”的穩(wěn)定產(chǎn)業(yè)價值鏈結(jié)構(gòu),擁有完整數(shù)據(jù)閉環(huán)結(jié)構(gòu)、良好數(shù)據(jù)自處理能力的企業(yè)有望持續(xù)成為產(chǎn)業(yè)受益者。
在ChatGPT 引領(lǐng)下, AI 產(chǎn)業(yè)加速發(fā)展,圍繞算力、算法、數(shù)據(jù) AI 產(chǎn)業(yè)三要素,推薦科大訊飛、海天瑞聲、景嘉微(與電子團隊聯(lián)合覆蓋),建議關(guān)注拓爾思、格靈深瞳-U、云從科技-UW、寒武紀-U、光云科技、虹軟科技、當虹科技
風(fēng)險因素:AI 核心技術(shù)發(fā)展不及預(yù)期風(fēng)險;科技領(lǐng)域政策監(jiān)管持續(xù)收緊風(fēng)險;全球宏觀經(jīng)濟復(fù)蘇不及預(yù)期風(fēng)險;宏觀經(jīng)濟波動導(dǎo)致歐美企業(yè) IT 支出不及預(yù)期風(fēng)險;全球云計算市場發(fā)展不及預(yù)期風(fēng)險;企業(yè)數(shù)據(jù)泄露、信息安全風(fēng)險;行業(yè)競爭持續(xù)加劇風(fēng)險等。
注:(免責(zé)申明)本文僅為個人筆記,內(nèi)含個股僅僅是作為分析參考,不能作為投資決策的依據(jù),不構(gòu)成任何建議,據(jù)此入市風(fēng)險自擔(dān)。股市有風(fēng)險,投資需謹慎!
知音難覓,也是人生常態(tài),一曲眾寡,盡管少有人懂,但是我自有我的風(fēng)采
見者點贊,腰纏萬貫!股運長虹,感謝諸君關(guān)注.點贊.評論.轉(zhuǎn)發(fā)!