ChatGPT訓(xùn)練成本測算-總成本持續(xù)提升同級別參數(shù)消耗量將顯著下降
隨著數(shù)據(jù)量快速膨脹,訓(xùn)練數(shù)據(jù)集需求越來越大,數(shù)據(jù)存儲成本也將相應(yīng)提升,單次完整訓(xùn)練價格400-1000萬美元/次,數(shù)據(jù)成本占比20%-25%

AIGC發(fā)展歷程:文本生成技術(shù)較成熟,圖片視頻生成值得期待
早期萌芽階段:受限于科技水平AIGC僅限于小范圍實驗;沉淀積累階段:AIGC從實驗性轉(zhuǎn)向?qū)嵱眯?快速發(fā)展階段: 深度學(xué)習(xí)算法不斷迭代人工智能生成內(nèi)容百花齊放效果逐漸逼真

每一輪人機交互的變革以及帶來產(chǎn)業(yè)級投資機會
手勢追蹤,Insideout,Outside-in,眼球追蹤等,交互方式多元化,沉浸感強;人機共生,文字,音頻,視頻,3D,策略等交互模式融合,智能化程度顯著提升

ChatGPT采用RLHF學(xué)習(xí)機制,有哪些優(yōu)點
GPT-3采用無監(jiān)督學(xué)習(xí)機制,優(yōu)點在于無需人工進行數(shù)據(jù)標(biāo)注,可以節(jié)省模型訓(xùn)練成本;ChatGPT采用RLHF學(xué)習(xí)機制屬于強化學(xué)習(xí),更符合人類偏好

ChatGPT發(fā)布后市場反應(yīng)-用戶體驗 算法的突破
GPT3.5訓(xùn)練階段總算力消耗約 3640PF-days,約使用10000個GPU+285000個CPU, OpenAI耗費10億美元租用Azure,每個月,ChatGPT預(yù)計花費公司1200萬美元

ChatGPT的一小步,AI的一大步
ChatGPT 經(jīng)過多類技術(shù)積累，最終形成針對人類反饋信息學(xué)習(xí)的大規(guī)模預(yù)訓(xùn)練語言模型

數(shù)字機器人公司壹沓科技完成近2億元B輪融資 ，由鼎暉VGC領(lǐng)投
壹沓科技分別在2020年及2021年完成A輪和A+輪融資,陸續(xù)引入SIG海納亞洲,IDG資本,鐘鼎資本,紅杉中國等投資機構(gòu),本輪融資由鼎暉VGC領(lǐng)投

ChatPaper總結(jié)arXiv論文濃縮成固定格式文字少且易讀
ChatPaper可根據(jù)用戶關(guān)鍵詞下載 arXiv 上的最新論文,利用 ChatGPT3.5 API 強大的歸納能力,將其濃縮成固定格式,文字少且易讀,支持個人自己部署