人類能夠?qū)ψ匀唤缰械奈矬w進行概念化，這一認知能力長期以來被視為人類智能的核心。當我們看到“狗”“汽車”或“蘋果”時，不僅能識別它們的物理特征（尺寸、顏色、形狀等），還能理解其功能、情感價值和文化意義——這種多維度的概念表征構(gòu)成了人類認知的基石。隨著ChatGPT等大語言模型（LLMs）的爆發(fā)式發(fā)展，一個根本性問題浮出水面：這些大模型能否從語言和多模態(tài)數(shù)據(jù)中發(fā)展出類似人類的物體概念表征？
近日，中國科學院自動化研究所神經(jīng)計算與腦機交互（NeuBCI）課題組與中國科學院腦科學與智能技術卓越創(chuàng)新中心的聯(lián)合團隊結(jié)合行為實驗與神經(jīng)影像分析，首次證實多模態(tài)大語言模型（MLLMs）能夠自發(fā)形成與人類高度相似的物體概念表征系統(tǒng)。這項研究不僅為人工智能認知科學開辟了新路徑，更為構(gòu)建類人認知結(jié)構(gòu)的人工智能系統(tǒng)提供了理論框架。相關研究成果以Human-like object concept representations emerge naturally in multimodal large language models為題，發(fā)表于《自然·機器智能》（Nature Machine Intelligence）。
從“機器識別”到“機器理解”的跨越
傳統(tǒng)人工智能研究聚焦于物體識別準確率，卻鮮少探討模型是否真正“理解”物體含義。論文通訊作者何暉光研究員指出：“當前AI能區(qū)分貓狗圖片，但這種‘識別’與人類‘理解’貓狗的本質(zhì)區(qū)別仍有待揭示。”團隊從認知神經(jīng)科學經(jīng)典理論出發(fā)，設計了一套融合計算建模、行為實驗與腦科學的創(chuàng)新范式。研究采用認知心理學經(jīng)典的“三選一異類識別任務”（triplet odd-one-out），要求大模型與人類從物體概念三元組（來自1854種日常概念的任意組合）中選出最不相似的選項。通過分析470萬次行為判斷數(shù)據(jù)，團隊首次構(gòu)建了AI大模型的“概念地圖”。
實驗范式示意圖。a，物體概念集及帶有語言描述的圖像示例。b-d，分別針對 LLM、MLLM 和人類的行為實驗范式和概念嵌入空間。
核心發(fā)現(xiàn)：AI的“心智維度”與人類殊途同歸
研究人員從海量大模型行為數(shù)據(jù)中提取出66個“心智維度”，并為這些維度賦予了語義標簽。研究發(fā)現(xiàn)，這些維度是高度可解釋的，且與大腦類別選擇區(qū)域（如處理面孔的FFA、處理場景的PPA、處理軀體的EBA）的神經(jīng)活動模式顯著相關。
研究還對比了多個模型在行為選擇模式上與人類的一致性（Human consistency）。結(jié)果顯示，多模態(tài)大模型（如Gemini_Pro_Vision、Qwen2_VL）在一致性方面表現(xiàn)更優(yōu)。此外，研究還揭示了人類在做決策時更傾向于結(jié)合視覺特征和語義信息進行判斷，而大模型則傾向于依賴語義標簽和抽象概念。本研究表明大語言模型并非“隨機鸚鵡”，其內(nèi)部存在著類似人類對現(xiàn)實世界概念的理解。
自動化所副研究員杜長德為論文第一作者，何暉光研究員為論文通訊作者。主要合作者還包括腦智卓越中心的常樂研究員等。該研究得到了中國科學院基礎與交叉前沿科研先導專項、國家自然科學基金、北京市自然科學基金項目以及腦認知與類腦智能全國重點實驗室的資助。
論文信息：
Changde Du,Kaicheng Fu,Bincheng Wen,Yi Sun,Jie Peng,Wei Wei,Ying Gao,Shengpei Wang,Chuncheng Zhang,Jinpeng Li,Shuang Qiu,Le Chang,Huiguang He. Human-like object concept representations emerge naturally in multimodal large language models. Nature Machine Intelligence (2025).
DOI：10.1038/s42256-025-01049-z
中國-博士人才網(wǎng)發(fā)布
聲明提示：凡本網(wǎng)注明“來源：XXX”的文/圖等稿件，本網(wǎng)轉(zhuǎn)載出于傳遞更多信息及方便產(chǎn)業(yè)探討之目的，并不意味著本站贊同其觀點或證實其內(nèi)容的真實性，文章內(nèi)容僅供參考。
