国产精品电影_久久视频免费_欧美日韩国产激情_成年人视频免费在线播放_日本久久亚洲电影_久久都是精品_66av99_九色精品美女在线_蜜臀a∨国产成人精品_冲田杏梨av在线_欧美精品在线一区二区三区_麻豆mv在线看

GPT在模仿人類?Nature發(fā)現(xiàn):大腦才是最早的Transformer!

人工智能 新聞
我們以為語言是語法、規(guī)則、結(jié)構(gòu)。但最新的Nature研究卻撕開了這層幻覺。GPT的層級(jí)結(jié)構(gòu)與竟與人大腦里的「時(shí)間印記」一模一樣。當(dāng)淺層、中層、深層在腦中依次點(diǎn)亮,我們第一次看見:理解語言,也許從來不是解析,而是預(yù)測(cè)。

我們一直深信,人類的大腦,是靠著一套嚴(yán)謹(jǐn)?shù)囊?guī)則、語法和結(jié)構(gòu)分析來理解語言的,復(fù)雜且獨(dú)一無二。

這是一個(gè)持續(xù)了數(shù)十年的「共識(shí)」。

可最近Nature Communications上發(fā)表的一項(xiàng)顛覆性研究,把這個(gè)古老的信仰掀了個(gè)底朝天。

論文地址:https://www.nature.com/articles/s41467-025-65518-0

研究者們讓受試者聽30分鐘的故事,同時(shí)用毫秒級(jí)的腦電技術(shù),精準(zhǔn)捕捉大腦對(duì)每個(gè)詞語的反應(yīng)。

接著,他們將同樣的故事文本輸入給大語言模型,比如GPT-2和Llama-2,提取模型每一層對(duì)文本的內(nèi)部理解表示

令人震驚的實(shí)驗(yàn)結(jié)果出現(xiàn)了:

GPT那看似冰冷的層級(jí)結(jié)構(gòu),竟然在人類的大腦里,找到了完美的時(shí)間對(duì)應(yīng)關(guān)系。

過去,我們總以為是GPT在模仿人類。但這個(gè)實(shí)驗(yàn)卻給出了一個(gè)石破天驚的暗示:

或許,我們的大腦,天然就長(zhǎng)成了「GPT」的樣子。

GPT的結(jié)構(gòu),能在大腦里找到對(duì)應(yīng)

要理解這項(xiàng)研究的顛覆性,必須看清它最關(guān)鍵、也最精妙的動(dòng)作:把GPT的48層結(jié)構(gòu),逐層對(duì)齊到人腦的時(shí)間序列。

研究團(tuán)隊(duì)找了9名因癲癇接受術(shù)前監(jiān)測(cè)的病患,他們的大腦皮層上,已經(jīng)植入了高密度的ECoG電極。

ECoG植入和定位示意圖

這種設(shè)備能以毫秒級(jí)精度記錄大腦真實(shí)的電活動(dòng)。

受試者聽了一段30分鐘的播客,研究者同步采集到了圍繞每個(gè)詞出現(xiàn)時(shí)刻的高伽馬腦電信號(hào)。

這些信號(hào)覆蓋了語言通路中的關(guān)鍵區(qū)域:從掌管聽覺的mSTG、aSTG,到負(fù)責(zé)語言整合的IFG,再到高級(jí)語義區(qū)的TP。

與此同時(shí),研究者把同一段文本輸入GPT-2 XL和Llama-2。

每當(dāng)模型處理到一個(gè)詞時(shí),他們就「暫停」,抽取這個(gè)詞在模型內(nèi)部從第一層到最后一層的所有內(nèi)部理解表示。

隨后,他們將模型每一層的表示,通過CA降維進(jìn)行簡(jiǎn)化,然后用線性模型去嘗試預(yù)測(cè)人腦在那一毫秒的電活動(dòng)。

研究方法示意:GPT-2的每一層都會(huì)生成一個(gè)語義表示(左)。研究者把這些語義表示輸入線性模型,預(yù)測(cè)人腦聽到該詞時(shí)的腦電活動(dòng)(右)。如果某一層語義表示能在特定時(shí)間點(diǎn)預(yù)測(cè)腦電,就說明該層與那一時(shí)刻的大腦處理階段對(duì)應(yīng)。

如果GPT的內(nèi)部層級(jí)結(jié)構(gòu)與人腦無關(guān),那么將模型層級(jí)對(duì)齊到大腦的時(shí)間軸上,結(jié)果必然是一團(tuán)亂麻,毫無秩序。

但如果二者真的存在某種結(jié)構(gòu)對(duì)應(yīng),我們就會(huì)在腦電時(shí)間軸上看到秩序。

事實(shí)正是如此。

把模型的層級(jí),排成「時(shí)間階梯」

實(shí)驗(yàn)一開始,研究者只是想驗(yàn)證一個(gè)簡(jiǎn)單的假設(shè):

如果大語言模型的層級(jí)結(jié)構(gòu)與大腦的某個(gè)處理階段相對(duì)應(yīng),那么這種對(duì)應(yīng),就應(yīng)該像接力跑一樣,在時(shí)間軸上依次出現(xiàn)。

研究者把GPT的每一層語義表示丟進(jìn)線性模型里,試圖去預(yù)測(cè)大腦在聽到每個(gè)詞時(shí),高伽馬活動(dòng)會(huì)在哪一毫秒達(dá)到峰值。

他們的設(shè)想是:如果模型的淺層、中層和深層分別承擔(dān)不同的語言功能,那么它們?cè)谌四X活動(dòng)的時(shí)間軸上,也理應(yīng)「錯(cuò)開時(shí)間」、「按序登場(chǎng)」。

結(jié)果,這張「時(shí)間階梯圖」清晰地揭示了大腦的秘密:越靠近高階語義的區(qū)域,越像GPT的深度結(jié)構(gòu)。

GPT的48層在大腦語言通路中呈現(xiàn)出清晰的「時(shí)間—深度」對(duì)應(yīng)結(jié)構(gòu)。淺層(暖色)在更早的時(shí)間點(diǎn)達(dá)到峰值,深層(冷色)在更晚時(shí)間出現(xiàn)。TP、aSTG、IFG等高階區(qū)域表現(xiàn)出強(qiáng)線性關(guān)系(r=.93 / .92 / .85),而mSTG(近聽覺皮層)幾乎沒有層級(jí)結(jié)構(gòu)(r≈0)。

因?yàn)檫@里只處理了聲音本身,語言的語義和結(jié)構(gòu)還未展開。

可一旦進(jìn)入aSTG、IFG、TP,曲線像被拉開一樣,呈現(xiàn)出從淺到深的整齊分布。

在關(guān)鍵語言區(qū)IFG內(nèi)部,GPT的層級(jí)結(jié)構(gòu)同樣呈現(xiàn)強(qiáng)烈的時(shí)間對(duì)應(yīng)關(guān)系。左:淺層至深層的相關(guān)度分布(暖色→冷色)。右:淺層峰值更早、深層更晚,形成規(guī)律性的時(shí)間推移。IFG 的整體擬合度達(dá)到r=.85(p < .001)。

一個(gè)顛覆性的認(rèn)知慢慢浮現(xiàn):

原來,大腦理解語言,并不是先按部就班地解析語法、再一步步地拆解詞匯。

它真正做的,是像GPT一樣,進(jìn)行一層又一層的語義推斷和概率預(yù)測(cè)。

而這套高度復(fù)雜的推斷節(jié)奏,竟然與大語言模型的內(nèi)部深度路徑,完美地重合了。

的規(guī)律越清晰,傳統(tǒng)語言學(xué)就越尷尬

如果GPT的層級(jí)結(jié)構(gòu)真能在大腦里找到對(duì)應(yīng),那么一個(gè)更尖銳的問題隨之而來:

那些我們以為描述語言「最準(zhǔn)確」的傳統(tǒng)模型——音位、詞素、句法、語義,它們構(gòu)建的語言理解框架,會(huì)呈現(xiàn)出同樣的時(shí)間結(jié)構(gòu)嗎?

傳統(tǒng)語言學(xué)語法樹

研究團(tuán)隊(duì)把這四類符號(hào)語言學(xué)模型全部納入測(cè)試。

要知道,它們的構(gòu)建邏輯是教科書級(jí)的,是數(shù)十年來語言學(xué)和心理語言學(xué)的基礎(chǔ)框架。

如果人類語言真的依賴這些規(guī)則,那么它們理應(yīng)比GPT更能精確地預(yù)測(cè)大腦的反應(yīng)。

結(jié)果很快給出了答案:傳統(tǒng)符號(hào)模型確實(shí)能預(yù)測(cè)一部分腦電活動(dòng),但與GPT的「像不像」程度,差得非常遠(yuǎn)。

在同樣的毫秒級(jí)時(shí)間軸上,這些符號(hào)模型的預(yù)測(cè)曲線找不到明確的「淺到深」、「早到晚」的序列分布。

它們沒有層級(jí),也沒有時(shí)間推進(jìn),像是缺失了某種連續(xù)、動(dòng)態(tài)的語言動(dòng)力。

對(duì)比之下,GPT的嵌入式表示呈現(xiàn)的是一種「流動(dòng)式」的處理軌跡:意義隨著時(shí)間被不斷更新、壓縮、整合,每一層都有自己的位置,像精密的齒輪嵌在上下文里。

而符號(hào)模型的結(jié)構(gòu),更像是靜止的、離散的標(biāo)簽堆疊,無法在毫秒級(jí)的時(shí)間維度里,給出足夠細(xì)致的、動(dòng)態(tài)的映射。

這無疑得出了一個(gè)顛覆性的結(jié)論:人腦的語言機(jī)制,并不是符號(hào)規(guī)則的簡(jiǎn)單堆疊,而是一種連續(xù)的、深度預(yù)測(cè)式的加工過程。

當(dāng)我們?cè)噲D用語法樹解釋語言時(shí),大腦實(shí)際上已經(jīng)完成了幾十層的非線性變換;而這些變換,正是Transformer模型最擅長(zhǎng)的核心能力。

視覺對(duì)比:神經(jīng)網(wǎng)絡(luò)與人腦

換句話說,符號(hào)模型能告訴我們「語言是什么」,但GPT卻更像是在展示「大腦是如何處理語言的」。

這是一個(gè)真正的分水嶺。語言學(xué)的解釋框架與神經(jīng)科學(xué)的實(shí)證結(jié)果,第一次發(fā)生了如此明顯的認(rèn)知分歧。

而站在大腦這一側(cè),替大腦說話的,是那臺(tái)我們本以為只是「模仿人類」的GPT。

語言不是規(guī)則,而是一種預(yù)測(cè)能力

當(dāng)GPT的層級(jí)能在人腦里找到清晰的時(shí)間對(duì)應(yīng),當(dāng)耗費(fèi)了幾十年心血的符號(hào)語言學(xué)模型在毫秒級(jí)腦電面前顯得遲緩、無序時(shí),這項(xiàng)研究的意義已經(jīng)超出了單純的模型比拼。

它其實(shí)指向了一個(gè)更底層、更古老的問題:語言到底是什么?

過去幾十年,我們用語法規(guī)則解釋句子,用語義網(wǎng)絡(luò)解釋概念,用樹狀結(jié)構(gòu)描述語言的邏輯關(guān)系。

這些框架強(qiáng)調(diào)「結(jié)構(gòu)、類別、層次」,卻很少討論語言在大腦中的即時(shí)生成方式:它如何在毫秒級(jí)連續(xù)變化?如何在瞬間整合過去與未來?

而這次的結(jié)果,徹底呈現(xiàn)出一種截然不同的景象——

大腦處理語言,根本不像在執(zhí)行規(guī)則,而更像是在沿著一條不斷壓縮、預(yù)測(cè)、更新的軌道向前推進(jìn)。

淺層負(fù)責(zé)快速提取線索;中層開始整合語境;深層構(gòu)建較長(zhǎng)的意義鏈條。

整個(gè)過程,不是一棵靜止的「語法樹」,而是一種向前流動(dòng)的計(jì)算。

這正是Transformer模型在被設(shè)計(jì)出的,試圖通過多層、非線性、依賴上下文、隨時(shí)間滾動(dòng)更新等特性來捕捉的「流動(dòng)結(jié)構(gòu)」。

諷刺的是,我們一直以為這是工程師的發(fā)明。現(xiàn)在看來,它更像是大腦本身為了高效處理信息,在數(shù)十億年進(jìn)化中選擇的一條計(jì)算路徑。

這讓語言的定義悄悄發(fā)生了變化——語言不再是規(guī)則體系,而是一種動(dòng)態(tài)預(yù)測(cè)機(jī)制。

我們理解一句話,并不是先知道它的語法,再去匹配意義;而是在每一毫秒里,把「下一刻可能發(fā)生什么」算出來。

GPT就是按照這種方式訓(xùn)練的。

也許這就是為什么,當(dāng)我們?cè)絹碓揭蕾嚧笮驼Z言模型時(shí),總覺得它們像在理解我們。

不是因?yàn)樗鼈儗W(xué)會(huì)了人類的規(guī)則,而是因?yàn)樗鼈円馔獾仄ヅ淞巳祟惔竽X的節(jié)奏。

當(dāng)GPT的內(nèi)部層級(jí)在大腦里找到了清晰的時(shí)間對(duì)應(yīng),我們看到的,已經(jīng)不再是某一個(gè)AI模型的「勝利」,而是一種結(jié)構(gòu)上的趨同,一種底層計(jì)算規(guī)律的殊途同歸。

語言的本質(zhì),也許從不是靜態(tài)的語法規(guī)則,而是連續(xù)的、動(dòng)態(tài)的預(yù)測(cè)。

大腦靠這種機(jī)制來理解世界、整合信息;模型靠這種機(jī)制來生成語言、模擬智能。

最終,兩條路徑在同一個(gè)高效的計(jì)算規(guī)律上相遇了。

我們熟悉的語言學(xué)和認(rèn)知科學(xué)框架,或許需要一次全面的更新。

理解GPT的內(nèi)部結(jié)構(gòu),也許正是在重新理解我們自己。

責(zé)任編輯:張燕妮 來源: 新智元
相關(guān)推薦

2023-01-27 13:32:51

大腦模型模仿

2022-01-04 11:00:15

AI 數(shù)據(jù)人工智能

2011-10-17 13:54:30

IBM仿生計(jì)算機(jī)

2025-07-14 09:18:26

2021-08-19 15:08:05

機(jī)器學(xué)習(xí)人工智能計(jì)算機(jī)

2024-05-27 00:00:00

2021-01-27 14:24:17

人工智能AI國際象棋AI

2023-01-09 11:01:29

人工智能OpenAI

2023-11-07 08:28:08

GPT模型環(huán)境

2023-08-10 06:51:39

人工智能學(xué)習(xí)模型安全

2024-08-27 00:00:03

2025-03-17 08:37:00

NatureAI模型

2023-07-21 14:28:54

2010-01-14 10:07:14

潮濕計(jì)算機(jī)

2023-02-24 15:26:47

人工智能AI

2025-06-23 09:14:09

AI

2023-03-03 13:06:34

大腦分層預(yù)測(cè)

2023-10-07 13:16:20

GPT-4NatureICLR

2025-03-31 08:12:00

模型AI訓(xùn)練

2022-09-26 15:23:38

模型Transforme
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)

中文字幕在线中文字幕日亚韩一区| 91黑丝在线| 亚洲最大的成人av| 欧美男gay| 黄色av免费在线观看| 亚洲欧美国产不卡| 91精品国产免费久久久久久| 亚洲码国产岛国毛片在线| 在线播放欧美女士性生活| 免费污视频在线一区| 五月天亚洲综合情| 欧美日韩成人在线| 激情久久中文字幕| 福利在线视频导航| 国产女同一区二区| 亚洲高清在线精品| 97精品国产| 青青青草原在线| 国产精品免费视频xxxx| 亚洲一二三四在线| 久久精品欧美一区| 色中色在线视频| 91久久精品一区| 在线精品视频免费观看| 在线精品观看| 超碰在线观看免费版| 国产原创精品| 在线91免费看| 精品写真视频在线观看 | 精品久久久网站| 久久午夜激情| 国产在线观看www| 最新av网址在线观看| 亚洲精品一区av在线播放| 亚洲人成网站77777在线观看| 免费黄色网址在线观看| avtt天堂资源网| 国产美女在线一区| 日韩av电影免费播放| 99久久久精品免费观看国产 | 成年人视频网站在线| 亚洲国产一区二区精品视频| 操91在线视频| 亚洲老头同性xxxxx| 欧美日韩亚洲高清| www.亚洲免费| 欧美日韩一区二区三区在线视频| 欧美日韩久久一区二区| 天堂一区二区在线| 久久91导航| 毛葺葺老太做受视频| 欧美一级视频在线观看| 色噜噜狠狠色综合中国| 秋霞午夜av一区二区三区| 国产综合色区在线观看| 污片在线免费看| 91免费看片在线| 精品国产一区二区国模嫣然| 91麻豆精品一区二区三区| 欧美一级本道电影免费专区| 精品国产白色丝袜高跟鞋| 欧美a级黄色大片| 久久久亚洲成人| 欧美日韩在线另类| 免费观看在线综合色| 亚洲国产精品免费视频| 日本福利在线观看| 色爽爽爽爽爽爽爽爽| 午夜精品久久久久久99热软件| 欧美视频一二三| 国产资源精品在线观看| 性欧美lx╳lx╳| 欧美videos极品另类| 国产免费黄色小视频| 国产欧美韩国高清| 亚洲女人天堂色在线7777| 亚洲色图欧美在线| 日韩—二三区免费观看av| 亚洲午夜精品| 9色在线视频| 欧美成人免费高清视频| 99re视频在线| 俺去亚洲欧洲欧美日韩| 色狠狠av一区二区三区| 99国产精品久久久久| 欧美人与禽猛交乱配视频| 欧美成人福利| 幼a在线观看| 女性隐私黄www网站视频| 国产99午夜精品一区二区三区| 亚洲片在线资源| 日韩人体视频一二区| 丁香婷婷综合网| 国内精品久久久久久久影视麻豆| 成人在线视频免费| 国产免费a∨片在线观看不卡| 波多野结衣家庭教师在线| 成人精品水蜜桃| 久久99视频免费| 欧美一级爆毛片| 一区二区免费看| 丰满亚洲少妇av| 激情视频一区二区三区| 久久久精品区| 亚洲淫性视频| 在线中文字幕av| 中文字幕无码精品亚洲35| 精品国产aⅴ麻豆| 日韩av免费在线观看| 伊人亚洲福利一区二区三区| 欧美性高清videossexo| 国产精品免费久久| 国产尤物一区二区| 亚洲调教视频在线观看| 久久男人av| 日本在线视频一区二区| 国产乱色在线观看| 中文字幕亚洲精品视频| www日韩在线观看| 最新欧美日韩亚洲| 国产欧美一区二区在线播放| 国产成人一区二区三区小说 | 日本在线影院| 国产在线资源| 爽爽免费视频| 北条麻妃视频在线| 国产精品视频网站在线观看| 欧美日韩国产精品一区二区| 91久久久久久| 国产精品久久999| 国内精品伊人久久| 日韩在线观看av| 亚洲精品在线视频| 欧美一区二区三区四区五区| 日韩欧美极品在线观看| 亚洲精品国产品国语在线app| 久久久青草青青国产亚洲免观| 国产福利91精品| 久久www免费人成看片高清| 国产亚洲激情| 亚洲第一精品影视| 欧美在线免费一级片| 日韩精品一卡| 国产永久精品大片wwwapp| 黄色欧美在线| 国产精品视屏| 成人精品动漫一区二区三区| 激情不卡一区二区三区视频在线| 精品国模一区二区三区| 国产精品电影| zzjj国产精品一区二区| 欧美亚洲动漫精品| 一本到三区不卡视频| 福利精品视频在线| 精品女厕一区二区三区| 天天色图综合网| 香蕉久久一区二区不卡无毒影院| 一区二区三区在线视频免费 | 欧美日韩爱爱视频| 色偷偷偷亚洲综合网另类| 亚洲欧美激情四射在线日| 亚洲精品视频久久| 亚洲精品999| 日韩精品在线视频美女| 亚洲片av在线| 中文字幕不卡在线视频极品| 在线国产精品视频| www.久久久久久.com| 美女视频久久黄| 97人洗澡人人免费公开视频碰碰碰| 高清欧美性猛交| 日本中文字幕不卡免费| 成人疯狂猛交xxx| av一本久道久久波多野结衣| 久久99国产精品| 日本一区美女| 宅男噜噜99国产精品观看免费| 黄色网在线视频| 国产曰肥老太婆无遮挡| 日韩有码免费视频| 高清hd写真福利在线播放| 丝袜美女写真福利视频| 日本高清中文字幕二区在线| 成人三级网址| 国产精品亚洲d| 日本精品一区二区三区在线观看视频| 久久黄色影视| 日韩毛片视频| 一本色道精品久久一区二区三区| 蜜桃视频在线观看一区| proumb性欧美在线观看| 亚洲人一二三区| 欧美无人高清视频在线观看| 亚洲黄色在线看| 色婷婷综合久久久久中文字幕1| 欧美一级电影久久| 国产尤物91| 成人性免费视频| 免费观看v片在线观看| 人妖欧美1区|