發(fā)布時間：2022-02-10
2022年2月11日2:00，《Science》期刊以長文形式發(fā)表了題為《序列工作記憶在獼猴前額葉表征的幾何結(jié)構(gòu)》的研究論文。該研究由中國科學(xué)院腦科學(xué)與智能技術(shù)卓越創(chuàng)新中心（神經(jīng)科學(xué)研究所）、中國科學(xué)院靈長類神經(jīng)生物學(xué)重點(diǎn)實(shí)驗(yàn)室王立平研究組、上海腦科學(xué)與類腦研究中心閔斌副研究員和北京大學(xué)生命科學(xué)學(xué)院唐世明課題組合作完成。在該研究中，科學(xué)家訓(xùn)練獼猴記憶由多個空間位置組成的序列，并利用在體雙光子鈣成像技術(shù)記錄獼猴大腦前額葉皮層的神經(jīng)元活動。研究人員發(fā)現(xiàn)神經(jīng)元以群體編碼的形式表征了序列中的每一個空間位置，并在這些表征中發(fā)現(xiàn)了類似的環(huán)狀幾何結(jié)構(gòu)。該研究推翻了經(jīng)典序列工作記憶模型的關(guān)鍵假設(shè)，為神經(jīng)網(wǎng)絡(luò)如何進(jìn)行符號表征這一難題提供了新的見解。
人類大腦無時無刻不在處理序列信息，不論是語言溝通、動作實(shí)施還是情景記憶，本質(zhì)上都涉及對時序信息的表征。另一方面，序列的執(zhí)行需要一定的時間，大腦需要在應(yīng)用時序信息之前記住整個序列。比如，我們需要在在問路時記住指路人給出的一系列方向指引，在學(xué)習(xí)新的舞蹈動作時記住老師演示的一連串動作模式。在這些情況下，不僅單個內(nèi)容需要被記住，它們之間的順序也不能被混淆。認(rèn)知心理學(xué)家們早在19世紀(jì)初就開始思考序列信息的表征方式，序列信息編碼也被認(rèn)為是人類語言句法結(jié)構(gòu)的前提，機(jī)器學(xué)習(xí)領(lǐng)域?qū)π蛄蟹g的探索更是催生了如今大顯身手的Transformer模型。但是，對于具有時序信息記憶的大腦神經(jīng)編碼機(jī)制，我們?nèi)灾跎佟?/p>
獼猴是演化上最接近人類的模式動物，其認(rèn)知能力、大腦的結(jié)構(gòu)與功能相比于其他模式動物更接近人類，是研究時間序列等復(fù)雜高級認(rèn)知功能的最佳模型。因此，為了探究時序記憶編碼問題，研究人員訓(xùn)練獼猴記憶由多個位置點(diǎn)組成的空間序列（圖1）。在任務(wù)中，獼猴面前的屏幕上會依次閃現(xiàn)三個不同的點(diǎn)，獼猴需要在幾秒鐘之后將這些點(diǎn)按之前呈現(xiàn)的順序匯報出來。在匯報前的幾秒記憶保持期內(nèi)，空間序列的信息便以工作記憶的形式被暫時儲存在大腦中。為了記錄大腦神經(jīng)元群體在獼猴進(jìn)行任務(wù)時的活動狀態(tài)，研究人員對工作記憶的大本營——外側(cè)前額葉皮層進(jìn)行了雙光子鈣信號成像。鈣信號可反映神經(jīng)元的脈沖放電活動，而序列信息表征的關(guān)鍵就在記憶期神經(jīng)元群體的活動模式之中。
圖1：獼猴空間序列記憶任務(wù)
大腦如何在記憶期內(nèi)同時表征序列中多個信息呢？研究人員猜想獼猴的大腦中也有一塊“屏幕”，獼猴可以把出現(xiàn)過的點(diǎn)記在這個屏幕上?？扇绻齻€點(diǎn)同時在記憶保持期內(nèi)顯示在了這個屏幕上，每個點(diǎn)的次序又該如何體現(xiàn)呢？獼猴的大腦里面是否會同時存在三塊不同的屏幕？這樣每個屏幕只需要記下一個點(diǎn)的信息，而且屏幕之間不會互相干擾。
研究人員分析了鈣成像獲得的高維數(shù)據(jù)，發(fā)現(xiàn)可以在高維向量空間里面找到每個次序的信息所對應(yīng)的二維子空間(subspace)，即找到其對應(yīng)的“屏幕”（圖2）。在每個子空間內(nèi)，不同的點(diǎn)所對應(yīng)的空間位置與真實(shí)視覺刺激的環(huán)狀結(jié)構(gòu)保持了一致。而且，不同次序所對應(yīng)的子空間接近相互正交，說明大腦確實(shí)用到了三塊不同的屏幕來表征序列信息。
為了進(jìn)一步探究大腦是否總是用相同的這幾塊“屏幕”記憶不同類型的空間序列，研究人員對數(shù)據(jù)做了解碼分析，即運(yùn)用機(jī)器學(xué)習(xí)方法訓(xùn)練線性分類器來區(qū)分不同次序上的空間信息。比如，用獼猴正確應(yīng)答時的神經(jīng)元群體活動訓(xùn)練解碼器，可以在部分做對的序列里面取得較好的解碼效果。這些結(jié)果提示了用于編碼次序的“屏幕”是穩(wěn)定通用的。
圖2：序列記憶在神經(jīng)高維向量空間的表征
研究人員還發(fā)現(xiàn)，不同次序的子空間之間共享了類似的環(huán)狀結(jié)構(gòu)，只是環(huán)的半徑大小會隨次序的增加而減小。一個可能的解釋是，次序靠后的信息所分配到的注意資源更少，導(dǎo)致對應(yīng)的環(huán)變小、區(qū)分度降低。這一結(jié)構(gòu)也對應(yīng)了序列記憶的行為表現(xiàn)，例如我們?nèi)粘Ｉ钪腥绻?b>記憶的內(nèi)容越多，越往后的信息便更容易出錯。
該發(fā)現(xiàn)也可總結(jié)為在群體水平的空間信息編碼幾何結(jié)構(gòu)受時序調(diào)制的性質(zhì)。有意思的是，這種性質(zhì)并不完全適用于單個神經(jīng)元水平，而單神經(jīng)元活動的增強(qiáng)調(diào)制正是經(jīng)典序列工作記憶模型的關(guān)鍵假設(shè)，提示了序列記憶的編碼應(yīng)更加關(guān)注群體神經(jīng)元性質(zhì)。
該研究第一次在群體神經(jīng)元水平闡釋了序列工作記憶的計(jì)算和編碼原理，也為理解神經(jīng)網(wǎng)絡(luò)如何進(jìn)行符號表征這一難題提供了新的思路。上世紀(jì)80年代，人工智能領(lǐng)域就有研究者提出張量乘積這一概念來實(shí)現(xiàn)神經(jīng)網(wǎng)絡(luò)對符號結(jié)構(gòu)的表征，但其如何在神經(jīng)網(wǎng)絡(luò)層面自然涌現(xiàn)一直沒有被很好的解決。序列工作記憶的神經(jīng)表征正好對應(yīng)了將該符號表征由對應(yīng)次序的子空間嵌入到高維向量空間中，同時支持了下游神經(jīng)網(wǎng)絡(luò)對符號結(jié)構(gòu)信息的線性讀取。
中國科學(xué)院腦科學(xué)與智能技術(shù)卓越創(chuàng)新中心王立平研究組博士后謝洋和研究助理胡沛烑為論文共同第一作者，研究助理李俊汝、博士生陳靜文和北京大學(xué)研究生宋衛(wèi)彬在課題的不同階段作出了貢獻(xiàn)。法國國家健康與醫(yī)學(xué)研究院Stanislas Dehaene教授、紐約大學(xué)汪小京教授和中科院腦智卓越中心楊天明研究員參與本研究。該研究獲得科技創(chuàng)新2030-重大項(xiàng)目、上海市市級科技重大專項(xiàng)、中國科學(xué)院戰(zhàn)略性先導(dǎo)科技專項(xiàng)、國家自然科學(xué)基金等項(xiàng)目支持。
圖3：王立平研究員、閔斌副研究員、研究助理胡沛烑、博士后謝洋討論課題
附件下載： 
