5月2日發(fā)表在Science雜志的一篇論文中，來(lái)自MIT的三位神經(jīng)科學(xué)家對(duì)模擬大腦視覺(jué)皮層的計(jì)算模型進(jìn)行了迄今為止最嚴(yán)格的測(cè)試。

       三位作者分別是MIT大腦與認(rèn)知科學(xué)系的負(fù)責(zé)人、麥戈文腦研究所調(diào)查員James DiCarlo，以及博士后研究員Pouya Bashivan和Kohitij Kar。

       他們利用目前的大腦視覺(jué)神經(jīng)網(wǎng)絡(luò)模型，設(shè)計(jì)了一種新方法來(lái)精確地控制單個(gè)神經(jīng)元和位于網(wǎng)絡(luò)中間的神經(jīng)元群。

       在一項(xiàng)動(dòng)物研究中，研究團(tuán)隊(duì)隨后表明，他們利用從計(jì)算模型中獲得的信息創(chuàng)建了一些圖像，這些圖像能夠強(qiáng)烈地激活所選定的大腦神經(jīng)元。

       具體來(lái)說(shuō)，Bashivan等人建立了一個(gè)人工神經(jīng)網(wǎng)絡(luò)來(lái)模擬目標(biāo)視覺(jué)系統(tǒng)的行為，并用它來(lái)構(gòu)建圖像，這些圖像要么能夠廣泛地激活大量神經(jīng)元，要么選擇性地激活一個(gè)神經(jīng)元群，同時(shí)保持其他神經(jīng)元不變。

       然后，他們分析了這些圖像在獼猴視覺(jué)皮層產(chǎn)生預(yù)期效果的有效性。結(jié)果顯示，這些操作有很強(qiáng)的效果，并對(duì)神經(jīng)元群產(chǎn)生了相當(dāng)大的選擇性影響。利用這些圖像，神經(jīng)網(wǎng)絡(luò)被證明可以再現(xiàn)動(dòng)物神經(jīng)反應(yīng)的整體行為。

       研究結(jié)果表明，這些模型與大腦非常相似，可以用來(lái)控制動(dòng)物的大腦狀態(tài)。

       James DiCarlo表示，這項(xiàng)新研究有助于確定視覺(jué)模型在腦科學(xué)研究中的有用性。此前，關(guān)于這類視覺(jué)模型是否準(zhǔn)確地模擬了視覺(jué)皮層的工作方式存在激烈的爭(zhēng)論。

       “人們質(zhì)疑這些模型是否能夠提供對(duì)視覺(jué)系統(tǒng)的理解，”James DiCarlo說(shuō)：“我們沒(méi)有在學(xué)術(shù)意義上爭(zhēng)論這個(gè)問(wèn)題，而是證明了這些模型已經(jīng)足夠強(qiáng)大，能夠支持一項(xiàng)重要的新應(yīng)用。不管你是否理解這個(gè)模型的工作原理，從這個(gè)意義上說(shuō)，它已經(jīng)很有用了。”

       他們?cè)谙旅娴囊曨l采訪更詳細(xì)地闡述了這個(gè)研究。

       訓(xùn)練神經(jīng)網(wǎng)絡(luò)，4步神經(jīng)控制實(shí)驗(yàn)

       在過(guò)去幾年里，DiCarlo等人開(kāi)發(fā)了基于人工神經(jīng)網(wǎng)絡(luò)的視覺(jué)系統(tǒng)模型。每個(gè)網(wǎng)絡(luò)都以一個(gè)由模型神經(jīng)元(model neurons)或節(jié)點(diǎn)(nodes)組成的任意架構(gòu)開(kāi)始，這些神經(jīng)元或節(jié)點(diǎn)可以以不同的強(qiáng)度(也稱為權(quán)重)相互連接。

       然后，研究人員用一個(gè)包含超過(guò)100萬(wàn)張圖像的庫(kù)中訓(xùn)練這些模型。當(dāng)研究人員向模型展示每張圖像，以及圖像中最突出的物體(比如飛機(jī)或椅子)的標(biāo)簽時(shí)，模型通過(guò)改變連接的強(qiáng)度來(lái)學(xué)習(xí)識(shí)別物體。

       很難準(zhǔn)確地了解這個(gè)模型是如何實(shí)現(xiàn)這種識(shí)別的，但是DiCarlo和他的同事之前已經(jīng)證明，這些模型中的“神經(jīng)元”產(chǎn)生的活動(dòng)模式與動(dòng)物視覺(jué)皮層響應(yīng)相同圖像時(shí)的活動(dòng)模式非常相似。

       在這項(xiàng)新研究中，研究人員想要測(cè)試他們的模型是否能夠執(zhí)行一些以前尚未被證明的任務(wù)。特別是，他們想看看這些模型是否可以用來(lái)控制動(dòng)物視覺(jué)皮層的神經(jīng)活動(dòng)。

       他們進(jìn)行了幾個(gè)閉環(huán)的神經(jīng)生理學(xué)實(shí)驗(yàn)：在將模型神經(jīng)元與每個(gè)記錄的大腦神經(jīng)位置匹配之后，使用該模型合成了全新的“控制器”(controller)圖像。

       如上圖所示，神經(jīng)控制實(shí)驗(yàn)分四步完成：（1）通過(guò)訓(xùn)練大量標(biāo)記的自然圖像來(lái)優(yōu)化神經(jīng)網(wǎng)絡(luò)的參數(shù)；（2）ANN “神經(jīng)元” 被映射到每個(gè)記錄的 V4 神經(jīng)位點(diǎn)，構(gòu)成可計(jì)算的預(yù)測(cè)模型。（3）然后將得到的模型用于合成單個(gè)位點(diǎn)或群體控制的 “控制器” 圖像。（4）最后由實(shí)驗(yàn)者將由這些圖像指定的發(fā)光模式應(yīng)用于受試者的視網(wǎng)膜，并測(cè)量神經(jīng)部位的控制程度。

       上圖（D）顯示了猴 M（黑色），猴 N（紅色）和猴 S（藍(lán)色）大腦中神經(jīng)位點(diǎn)的感受野。

       然后，研究人員將這些圖像呈現(xiàn)給每個(gè)受試者，以測(cè)試模型控制受試者神經(jīng)元的能力。在一項(xiàng)測(cè)試中，他們要求模型嘗試控制每個(gè)神經(jīng)元，使其激活程度超過(guò)其通常觀察到的激活水平。研究人員發(fā)現(xiàn)，模型生成的合成刺激成功地驅(qū)動(dòng)了68%的神經(jīng)位點(diǎn)超出了它們的自然觀察激活水平。

       在令一項(xiàng)更嚴(yán)格的測(cè)試中，該模型顯示，它能夠選擇性地控制整個(gè)神經(jīng)亞群，激活一個(gè)特定的神經(jīng)元，同時(shí)使其他記錄的神經(jīng)元失活(成功率達(dá)到76%)。

       接下來(lái)，研究人員使用這些合成的controller圖像來(lái)研究模型預(yù)測(cè)大腦反應(yīng)的能力是否適用于這些圖像。他們發(fā)現(xiàn)該模型確實(shí)相當(dāng)準(zhǔn)確，預(yù)測(cè)了54%的由圖像引起的大腦反應(yīng)模式，但它顯然還不完美。

       “到目前為止，對(duì)這些模型所做的工作是預(yù)測(cè)神經(jīng)會(huì)對(duì)其他刺激產(chǎn)生什么反應(yīng)，這些刺激是他們以前從未見(jiàn)過(guò)的。”Bashivan說(shuō)：“這次的研究主要的不同之處在于，我們更進(jìn)了一步，利用這些模型將神經(jīng)元驅(qū)動(dòng)到所需的狀態(tài)。”

       為了實(shí)現(xiàn)這一目標(biāo)，研究人員首先創(chuàng)建了大腦的視覺(jué)區(qū)域V4中的神經(jīng)元和計(jì)算模型中的節(jié)點(diǎn)的一對(duì)一映射。他們通過(guò)分別向動(dòng)物和模型展示圖像，并比較它們對(duì)相同圖像的反應(yīng)來(lái)實(shí)現(xiàn)這一點(diǎn)。V4區(qū)域有數(shù)百萬(wàn)個(gè)神經(jīng)元，但在這項(xiàng)研究中，研究人員每次為5到40個(gè)神經(jīng)元的亞群創(chuàng)建映射。

       DiCarlo說(shuō)：“一旦每個(gè)神經(jīng)元都有一個(gè)任務(wù)，這個(gè)模型就可以讓你對(duì)那個(gè)神經(jīng)元做出預(yù)測(cè)。”

       然后，研究人員開(kāi)始研究他們是否能利用這些預(yù)測(cè)來(lái)控制視覺(jué)皮層中單個(gè)神經(jīng)元的活動(dòng)。第一種類型的控制，他們稱之為“拉伸”(stretching)，即向?qū)嶒?yàn)者展示一幅圖像，該圖像將驅(qū)動(dòng)特定神經(jīng)元的活動(dòng)，其強(qiáng)度遠(yuǎn)遠(yuǎn)超出通常由“自然”圖像引發(fā)的活動(dòng)，，這些“自然”圖像與用于訓(xùn)練神經(jīng)網(wǎng)絡(luò)的圖像類似。

       研究人員發(fā)現(xiàn)，當(dāng)他們向動(dòng)物展示這些“合成”圖像時(shí)，目標(biāo)神經(jīng)元的反應(yīng)與預(yù)期相符。這些“合成”圖像是由模型生成的，不像自然物體。平均而言，神經(jīng)元對(duì)這些圖像的反應(yīng)要比它們看到自然圖像時(shí)活躍約40%。

       這是科學(xué)家第一次實(shí)現(xiàn)這種控制。

       控制大腦神經(jīng)元，有助于治療情緒障礙

       神經(jīng)科學(xué)的一個(gè)普遍趨勢(shì)是，實(shí)驗(yàn)數(shù)據(jù)收集和計(jì)算建模在某種程度上是獨(dú)立進(jìn)行的，導(dǎo)致很少有模型驗(yàn)證，因此沒(méi)有可測(cè)量的進(jìn)展。這項(xiàng)的工作使這種“閉環(huán)”方法重現(xiàn)生機(jī)，同時(shí)進(jìn)行模型預(yù)測(cè)和神經(jīng)測(cè)量，這對(duì)成功構(gòu)建和測(cè)試最接近大腦的模型至關(guān)重要。

       研究人員還表示，他們可以利用該模型來(lái)預(yù)測(cè)V4區(qū)域的神經(jīng)元對(duì)合成圖像的反應(yīng)。之前對(duì)這些模型的大多數(shù)測(cè)試都使用了與訓(xùn)練模型相同的自然圖像。MIT的研究團(tuán)隊(duì)發(fā)現(xiàn)，這些模型在預(yù)測(cè)大腦對(duì)合成圖像的響應(yīng)方面的準(zhǔn)確率約為54%，而使用自然圖像時(shí)的準(zhǔn)確率接近90%。

       Bashivan說(shuō)：“從某種意義上說(shuō)，我們正在量化這些模型在訓(xùn)練領(lǐng)域之外做出預(yù)測(cè)的準(zhǔn)確性。理想情況下，無(wú)論輸入是什么，模型都應(yīng)該能夠準(zhǔn)確預(yù)測(cè)。”

       研究人員希望在接下來(lái)的研究中，通過(guò)讓模型吸收他們從合成圖像中學(xué)到的新信息來(lái)提高模型的準(zhǔn)確性。

       研究人員表示，這種控制可能對(duì)想要研究不同神經(jīng)元之間如何相互作用以及它們之間如何連接的神經(jīng)科學(xué)家有用。將來(lái)，這種方法有助于治療抑郁癥等情緒障礙。研究人員目前正致力于將他們的模型擴(kuò)展到下顳葉皮層，進(jìn)入杏仁核，這是參與情緒處理的區(qū)域。

       Bashivan說(shuō)：“如果我們有一個(gè)很好的神經(jīng)元模型，這個(gè)模型可以讓我們的神經(jīng)元參與體驗(yàn)情緒，或者引發(fā)各種各樣的紊亂，那么我們就可以用這個(gè)模型來(lái)驅(qū)動(dòng)神經(jīng)元，從而幫助改善這些紊亂。”

       “他們成功地做到了這一點(diǎn)，真的很了不起。就好像，至少對(duì)那個(gè)神經(jīng)元來(lái)說(shuō)，它的理想圖像突然變成焦點(diǎn)，神經(jīng)元突然被提供了它一直在尋找的刺激，”匹茲堡大學(xué)生物工程副教授Aaron Batista評(píng)價(jià)道：“這是一個(gè)了不起的想法，一項(xiàng)了不起的壯舉。這可能是迄今為止，對(duì)使用人工神經(jīng)網(wǎng)絡(luò)來(lái)理解真實(shí)神經(jīng)網(wǎng)絡(luò)的最強(qiáng)有力的驗(yàn)證。”

       參考鏈接：

       http://news.mit.edu/2019/improved-deep-neural-network-vision-systems-just-provide-feedback-loops-0429

       https://science.sciencemag.org/content/364/6439/eaav9436

點(diǎn)擊下圖，觀眾預(yù)登記成功送20元話費(fèi)