新研究利用人工智能將大腦信號(hào)轉(zhuǎn)換成語(yǔ)音和動(dòng)畫表情
新華社北京8月28日電 美國(guó)加利福尼亞大學(xué)舊金山分校近日發(fā)布公報(bào)說,該校參與的研究團(tuán)隊(duì)開發(fā)出一種腦機(jī)接口,通過訓(xùn)練人工智能算法,成功將一名因腦干中風(fēng)而嚴(yán)重癱瘓的女性的大腦信號(hào)轉(zhuǎn)換成語(yǔ)音和動(dòng)畫表情,使這名女性患者能夠通過“數(shù)字化身”與人交流。
加州大學(xué)舊金山分校和伯克利分校等機(jī)構(gòu)研究人員在這名癱瘓女性大腦表面植入一個(gè)由253個(gè)電極組成的薄如紙張的矩形設(shè)備。這些電極覆蓋了對(duì)語(yǔ)言功能至關(guān)重要的大腦區(qū)域。研究人員用一根電纜插入固定在患者頭部的接口上,將電極與一組計(jì)算機(jī)連接起來。
構(gòu)建這套系統(tǒng)后,研究團(tuán)隊(duì)在數(shù)周時(shí)間里對(duì)人工智能算法進(jìn)行系統(tǒng)訓(xùn)練,以識(shí)別這名女性患者獨(dú)特的大腦語(yǔ)音信號(hào)。這需要不斷重復(fù)不同的語(yǔ)句,涉及1024個(gè)單詞,直到計(jì)算機(jī)能識(shí)別與患者聲音相關(guān)的大腦活動(dòng)模式。
研究人員并沒有訓(xùn)練人工智能識(shí)別完整的單詞,而是創(chuàng)建了一個(gè)系統(tǒng)可根據(jù)最小的語(yǔ)音單位音素來解碼單詞。就像字母組成書面單詞一樣,音素組成了口語(yǔ)單詞。例如,英文單詞“Hello”包含HH、AH、L和OW四個(gè)音素。利用這種方法,計(jì)算機(jī)只要學(xué)習(xí)39個(gè)音素就能破譯任何英文單詞,這提高了系統(tǒng)的準(zhǔn)確性和運(yùn)算速度。
為了重現(xiàn)患者的聲音,團(tuán)隊(duì)設(shè)計(jì)了一種語(yǔ)音合成算法,利用患者在自己婚禮上的講話錄音將語(yǔ)音個(gè)性化,使之聽起來像她受傷前的聲音。
研究人員還借助一款可模擬面部肌肉運(yùn)動(dòng)并制作動(dòng)畫的軟件為患者制作動(dòng)畫頭像。研究人員創(chuàng)建了定制的機(jī)器學(xué)習(xí)過程,使這款軟件能夠識(shí)別這名女性試圖說話時(shí)大腦發(fā)出的信號(hào),并將這些信號(hào)轉(zhuǎn)換成能夠表示快樂、悲傷和驚訝等情緒的面部動(dòng)畫。
相關(guān)論文近日發(fā)表在英國(guó)《自然》雜志上。團(tuán)隊(duì)下一步計(jì)劃創(chuàng)建該系統(tǒng)的無線版本,使患者無需與腦機(jī)接口進(jìn)行物理連接。
隨便看看:
- [業(yè)內(nèi)]我國(guó)首個(gè)投入商業(yè)開發(fā)的大型頁(yè)巖氣田產(chǎn)氣量突破600億立方米
- [業(yè)內(nèi)]從數(shù)據(jù)到算力 上海為大模型產(chǎn)業(yè)構(gòu)建“生態(tài)社區(qū)”
- [業(yè)內(nèi)]人工智能不能被列為“發(fā)明人”
- [業(yè)內(nèi)]h265為什么不能普及,為什么小米note不支持h265
- [業(yè)內(nèi)]3D打印腫瘤模型助力開發(fā)復(fù)雜癌癥治療方案
- [業(yè)內(nèi)]天開高教科創(chuàng)園 創(chuàng)新創(chuàng)業(yè)“新高地”
- [業(yè)內(nèi)]百度袁佛玉:文心一言將改變?cè)朴?jì)算市場(chǎng)游戲規(guī)則
- [業(yè)內(nèi)]漢諾威訪盛隆電氣:展會(huì)簽約3億元 大國(guó)精品閃亮世界舞臺(tái)
- [業(yè)內(nèi)]北京激發(fā)數(shù)字經(jīng)濟(jì)發(fā)展活力 擴(kuò)大全球“朋友圈”
- [業(yè)內(nèi)]研究人員開發(fā)出“指尖上”的高性能超快激光器
相關(guān)推薦:
網(wǎng)友評(píng)論:
推薦使用友言、多說、暢言(需備案后使用)等社會(huì)化評(píng)論插件
- 力德動(dòng)力30kw微渦發(fā)電機(jī)成功完成高原考核
- 突破溫度與凈化邊界,美的空氣機(jī)打造舒適生活空間
- 原創(chuàng)科技守味二十四節(jié)氣!卡薩帝冰箱濟(jì)南啟動(dòng)非遺守護(hù)
- 最新盤點(diǎn)!中國(guó)超聲波焊接機(jī)TOP10,首位靈科,其
- 科技與美學(xué)的突破:伯恩光學(xué)聯(lián)合三星重塑智能手機(jī)形態(tài)
- 阿爾西溫控技術(shù)自主破局!國(guó)產(chǎn)創(chuàng)新撕破海外壟斷壁壘,
- 樂創(chuàng)技術(shù)五軸點(diǎn)膠+視覺補(bǔ)償:破解AR/VR光學(xué)模塊
- 臺(tái)易探針
- 卓興半導(dǎo)體芯上印刷工藝:封裝新突破,攻克點(diǎn)膠印刷難
- 科技賦能民生福祉 金天國(guó)際以創(chuàng)新實(shí)踐助力國(guó)家戰(zhàn)略落
- 熱點(diǎn)搶先看|2024南方網(wǎng)通第二十五屆渠道商交流會(huì)
- 《大數(shù)據(jù)平臺(tái)云化改造實(shí)踐指南(2024)》發(fā)布,天
- 覺卿諦語(yǔ)智能科技在全國(guó)12355心理健康大會(huì)上展示
- 當(dāng)好“兩個(gè)稀土基地”建設(shè)主力軍,北方嘉軒永磁電機(jī)大
- 大模型助力工業(yè)智能化發(fā)展
- 工商業(yè)光伏發(fā)電施工指南-太陽(yáng)庫(kù)光伏
- 科技賦能,避震嬰兒車或成為行業(yè)硬通貨
- 龍旗科技進(jìn)軍AI PC市場(chǎng),激發(fā)行業(yè)創(chuàng)新活力
- 科技賦能教育:核桃編程亮相“科創(chuàng)中國(guó)·北京創(chuàng)新薈”
- 英偉達(dá)搶占高位,市場(chǎng)急需尋求新機(jī)遇,這三支AI股值