據(jù)外媒報(bào)道，近日美國(guó)加州大學(xué)舊金山分校的Joseph Makin及同事在《自然-神經(jīng)科學(xué)》上發(fā)表的一篇論文報(bào)告了一種能夠以較高的準(zhǔn)確率，解碼神經(jīng)活動(dòng)并將其翻譯為句子的機(jī)器翻譯算法。

在人類(lèi)大腦信號(hào)首次解碼出語(yǔ)音十年后，其準(zhǔn)確率和速度仍遠(yuǎn)遠(yuǎn)低于自然語(yǔ)言。

研究人員盤(pán)點(diǎn)了機(jī)器翻譯領(lǐng)域的最新進(jìn)展，并利用這些方法訓(xùn)練循環(huán)神經(jīng)網(wǎng)絡(luò)，將神經(jīng)信號(hào)直接映射為句子。

據(jù)了解，四名受試者此前顱內(nèi)均被植入了用以監(jiān)測(cè)癲癇的電極，電極會(huì)將他們大聲讀出句子時(shí)的神經(jīng)活動(dòng)記錄下來(lái)。

之后，這些記錄被添加到一個(gè)循環(huán)神經(jīng)網(wǎng)絡(luò)中，從而將規(guī)律性出現(xiàn)的神經(jīng)特征表示出來(lái)，這些神經(jīng)特征可能與言語(yǔ)的中的元音、輔音或發(fā)音器官接收的指令相關(guān)。

接著，另一個(gè)循環(huán)神經(jīng)網(wǎng)絡(luò)逐字解碼這種算法表示，形成句子。

作者還發(fā)現(xiàn)，明顯參與言語(yǔ)解碼的腦區(qū)同樣參與言語(yǔ)生成和言語(yǔ)感知。

這種機(jī)器翻譯方法將每名受試者的神經(jīng)活動(dòng)解碼為口頭句子的平均錯(cuò)誤率竟低至3%。

最后，研究人員還展示了如何通過(guò)多個(gè)參與者數(shù)據(jù)來(lái)訓(xùn)練網(wǎng)絡(luò)的某些層，利用傳輸學(xué)習(xí)來(lái)改進(jìn)對(duì)有限數(shù)據(jù)的解碼。

責(zé)任編輯：wv