6月6日上午消息,今日舉辦的2025北京智源大會(huì)上,北京智源人工智能研究院發(fā)布“悟界”大模型,宣布圍繞物理AGI所做的大模型最新科研成果和布局,構(gòu)成“悟界”系列大模型。
據(jù)悉,此次推出的“悟界”大模型,“界”代表對(duì)虛實(shí)世界邊界的突破,代表對(duì)物理世界的賦能,物理AGI方向的邁進(jìn)。“悟界”系列大模型目前包含四個(gè)模型:原生多模態(tài)世界模型Emu3、腦科學(xué)多模態(tài)通用基礎(chǔ)模型見微Brainμ、具身大腦RoboBrain 2.0以及全原子微觀生命模型OpenComplex2。
其中,原生多模態(tài)世界模型Emu3,于2024年10月發(fā)布,基于下一個(gè)token預(yù)測(cè)范式統(tǒng)一多模態(tài)學(xué)習(xí),無(wú)需擴(kuò)散模型或組合式架構(gòu)的復(fù)雜性,通過(guò)研發(fā)新型視覺(jué)tokenizer將圖像/視頻編碼為與文本同構(gòu)的離散符號(hào)序列,構(gòu)建模態(tài)無(wú)關(guān)的統(tǒng)一表征空間,實(shí)現(xiàn)文本、圖像、視頻的任意組合理解與生成。Emu3支持多模態(tài)輸入、多模態(tài)輸出的端到端映射,驗(yàn)證了自回歸框架在多模態(tài)領(lǐng)域的普適性與先進(jìn)性,為跨模態(tài)交互提供了強(qiáng)大的技術(shù)基座。
見微Brainμ基于Emu3底層架構(gòu),將fMRI、EEG、雙光子等神經(jīng)科學(xué)與腦醫(yī)學(xué)相關(guān)的腦信號(hào)統(tǒng)一token化,利用預(yù)訓(xùn)練模型多模態(tài)對(duì)齊的優(yōu)勢(shì),可以實(shí)現(xiàn)多模態(tài)腦信號(hào)與文本、圖像等模態(tài)的多向映射,并實(shí)現(xiàn)跨任務(wù)、跨模態(tài)、跨個(gè)體的統(tǒng)一通用建模,以單一模型完成多種神經(jīng)科學(xué)的下游任務(wù)。
Brainμ整合了神經(jīng)科學(xué)領(lǐng)域多個(gè)大型公開數(shù)據(jù)集和多個(gè)合作實(shí)驗(yàn)室的高質(zhì)量神經(jīng)科學(xué)數(shù)據(jù),完成了超過(guò)100萬(wàn)單位的神經(jīng)信號(hào)預(yù)訓(xùn)練,模型可以支持神經(jīng)科學(xué)領(lǐng)域從基礎(chǔ)研究到臨床研究和腦機(jī)接口應(yīng)用的不同方向,有望成為神經(jīng)科學(xué)的 “AlphaFold”模型。
目前,智源正在與國(guó)內(nèi)前沿的基礎(chǔ)神經(jīng)科學(xué)實(shí)驗(yàn)室、腦疾病研究團(tuán)隊(duì)和腦機(jī)接口團(tuán)隊(duì)深入合作,包括北京生命科學(xué)研究所、清華大學(xué)、北京大學(xué)、復(fù)旦大學(xué)與強(qiáng)腦科技BrainCO,拓展Brainμ的科學(xué)與工業(yè)應(yīng)用。(文猛)

新浪科技





京公網(wǎng)安備 11011402013531號(hào)