91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Neurotech重建聽到的聲音 并探究人們是如何感知音樂的

IEEE電氣電子工程師 ? 來源:IEEE電氣電子工程師 ? 2023-08-25 16:39 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

你腦子里有沒有一首歌?加州大學(xué)伯克利分校神經(jīng)科學(xué)家團(tuán)隊(duì)的一項(xiàng)新研究在了解音樂感知和認(rèn)知的神經(jīng)基礎(chǔ)方面取得了重大進(jìn)展,真正推動(dòng)了與音樂相關(guān)的神經(jīng)科學(xué)的發(fā)展。

最近發(fā)表在PLOS Biology雜志上的這項(xiàng)研究結(jié)果(journals.plos.org/plosbiology/article?id=10.1371/journal.pbio.3002176)顯示了人類大腦對(duì)音樂表演的反應(yīng)。當(dāng)我們的耳朵聽到一段歌曲片段后,它會(huì)被我們的耳蝸(內(nèi)耳的螺旋腔)轉(zhuǎn)化為神經(jīng)元活動(dòng)。Ludovic Bellier是加州大學(xué)伯克利分校Helen Wills神經(jīng)科學(xué)研究所的博士后,他研究大腦中的神經(jīng)網(wǎng)絡(luò)最終是如何“聽到”這些聲音的。

在他的團(tuán)隊(duì)的實(shí)驗(yàn)中,Bellier和同事分析了聽迷幻搖滾樂隊(duì)Pink Floyd歌曲的人的大腦活動(dòng)。29名參與者是紐約州奧爾巴尼市奧爾巴尼醫(yī)療中心的癲癇患者。作為治療的一部分,這些患者的大腦表面植入了電子傳感器,他們被要求專心聽Pink Floyd的歌曲“Another Brick in the Wall”。研究人員記錄了每個(gè)腦電極的振蕩電位,這些測(cè)量被稱為皮層電圖記錄(ECoG),是反映每個(gè)電極周圍大腦小區(qū)域神經(jīng)活動(dòng)的寬帶信號(hào)。

研究人員假設(shè),每位患者記錄的ECoG信號(hào)反映了他們的大腦是如何感知為他們播放的音樂的。為了驗(yàn)證他們的假設(shè),并了解患者大腦中哪些區(qū)域最參與音樂感知,該團(tuán)隊(duì)擬合模型,以重建歌曲的音頻頻譜圖,當(dāng)以ECoG特征作為輸入時(shí),音頻頻譜圖顯示了聲能在頻率上隨時(shí)間的分布。如果模型能夠在正則化訓(xùn)練后準(zhǔn)確地重建聲譜圖,那么ECoG特征必須反映關(guān)于向患者播放的音樂的一些信息。

根據(jù)Bellier的說法,研究小組能夠驗(yàn)證他們的假設(shè)。通過使用多種類型的模型來重建聽覺信號(hào),科學(xué)家們可以解碼出歌曲輸出音頻的至少部分可聽見的相似性。研究人員表示,據(jù)他們所知,他們的研究結(jié)果是第一份從ECoG數(shù)據(jù)中回歸的音樂音頻出版物。盡管原始音頻和重建音頻之間的相關(guān)性仍遠(yuǎn)未達(dá)到1比1——統(tǒng)計(jì)r平方值為0.325——但當(dāng)將一些模型的輸出轉(zhuǎn)換回音頻波形時(shí),如果距離較遠(yuǎn),則可以將其識(shí)別為經(jīng)典歌曲。一種更復(fù)雜、更非線性的重建算法——所謂的多層感知器,或簡(jiǎn)單的雙層人工神經(jīng)網(wǎng)絡(luò)——會(huì)產(chǎn)生0.429的更高r平方擬合值和更清晰的音頻重建。

為了測(cè)試大腦中哪些區(qū)域最參與音樂處理,研究人員在去除電極輸入的同時(shí),對(duì)模型進(jìn)行了相同的音頻重建任務(wù)訓(xùn)練??傊?,來自所有患者的ECoG數(shù)據(jù)覆蓋了大腦的大部分總表面積,因此科學(xué)家們能夠?qū)⒋竽X的許多潛在區(qū)域視為產(chǎn)生聽音樂體驗(yàn)的關(guān)鍵參與者。

通過比較涉及所有大腦區(qū)域的模型和沒有涉及的模型之間的性能變化——有時(shí)稱為消融研究——研究人員能夠說出每個(gè)大腦區(qū)域提供了多少信息。換言之,如果當(dāng)特定區(qū)域的電極被移除時(shí),重建精度沒有大的變化,那么該區(qū)域就不會(huì)像音樂感知那樣參與其中。

從這個(gè)過程中,研究人員發(fā)現(xiàn),去除從大腦左右兩側(cè)一個(gè)稱為顳上回(STG)的區(qū)域收集的腦電波數(shù)據(jù)會(huì)導(dǎo)致重建精度的最大下降。這個(gè)區(qū)域恰好位于耳朵附近,也被認(rèn)為在語音處理中發(fā)揮著重要作用,因此它實(shí)際上可能在大腦處理復(fù)雜結(jié)構(gòu)化聲音的能力中發(fā)揮更大的作用。

該團(tuán)隊(duì)還發(fā)現(xiàn),從左右STG中單獨(dú)去除數(shù)據(jù)特征對(duì)重建精度的影響顯著不同。這表明,參與者大腦右側(cè)STG的活動(dòng)比左側(cè)STG有更多關(guān)于歌曲的信息。奇怪的是,該領(lǐng)域先前的研究表明,語音處理的情況似乎恰恰相反,左側(cè)STG通常比右側(cè)STG做更多的工作。Bellier說:“在95%的右撇子中,言語主要位于左半球。我們?cè)谡撐闹斜砻?,音樂(在左右STG之間)分布更廣,但具有右側(cè)優(yōu)勢(shì)”——這意味著右側(cè)STG處理的音樂信息比左側(cè)多?!?/p>

“我們可以做一個(gè)非常簡(jiǎn)單的后續(xù)跟進(jìn),”Bellier說。也就是說,本研究只考慮了70到150赫茲的高頻腦電波信息。然而,Bellier表示,根據(jù)ECoG信號(hào)的較低頻率范圍計(jì)算的音頻特征也可以對(duì)重要信息進(jìn)行編碼。這就是為什么他說,該團(tuán)隊(duì)計(jì)劃在當(dāng)前論文中對(duì)不同頻率范圍的神經(jīng)活動(dòng)重復(fù)相同的分析。正如論文所總結(jié)的那樣,該小組目前和未來的工作將增加“我們對(duì)人腦音樂處理理解的又一塊磚”。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 神經(jīng)網(wǎng)絡(luò)

    關(guān)注

    42

    文章

    4838

    瀏覽量

    107869
  • 電極
    +關(guān)注

    關(guān)注

    5

    文章

    897

    瀏覽量

    28416
  • 神經(jīng)元
    +關(guān)注

    關(guān)注

    1

    文章

    369

    瀏覽量

    19175

原文標(biāo)題:Neurotech重建聽到的聲音 并探究人們是如何感知音樂的

文章出處:【微信號(hào):IEEE_China,微信公眾號(hào):IEEE電氣電子工程師】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    如何查看小智是否成功進(jìn)入聲音設(shè)置?

    你可以通過后臺(tái)頁面狀態(tài)、設(shè)備反饋、語音測(cè)試三種方式,快速確認(rèn)小智是否成功進(jìn)入聲音設(shè)置生效。 一、后臺(tái)頁面直接查看(最準(zhǔn)) 登錄小智AI后臺(tái):https://xiaozhi.me/console
    發(fā)表于 02-16 06:39

    云知聲發(fā)布“山海·知音”大模型2.0,醫(yī)療AI加速落地驅(qū)動(dòng)業(yè)績(jī)高增長(zhǎng)

    今年1月,云知聲正式發(fā)布其自研大模型“山?!?b class='flag-5'>知音”2.0版本,并同步披露2025年度業(yè)績(jī)預(yù)告——全年?duì)I收預(yù)計(jì)同比增長(zhǎng)超60%,凈利潤(rùn)實(shí)現(xiàn)扭虧為盈。這一系列動(dòng)作不僅彰顯了云知聲在大模型技術(shù)迭代上的領(lǐng)先
    發(fā)表于 02-06 10:28 ?875次閱讀
    云知聲發(fā)布“山?!?b class='flag-5'>知音</b>”大模型2.0,醫(yī)療AI加速落地驅(qū)動(dòng)業(yè)績(jī)高增長(zhǎng)

    當(dāng)足球遇見人機(jī)交互傳感技術(shù):唯創(chuàng)知音如何用微波雷達(dá)“喚醒”音樂紀(jì)念品

    。本期揭秘智能人機(jī)交互傳感模組在音樂紀(jì)念品上的應(yīng)用這家企業(yè)深耕音響產(chǎn)品領(lǐng)域多年,這一次,他們瞄準(zhǔn)了德國(guó)這片足球氛圍濃厚的市場(chǎng)攜手唯創(chuàng)知音共創(chuàng)了這款紀(jì)念品。德國(guó)擁
    的頭像 發(fā)表于 12-19 12:03 ?231次閱讀
    當(dāng)足球遇見人機(jī)交互傳感技術(shù):唯創(chuàng)<b class='flag-5'>知音</b>如何用微波雷達(dá)“喚醒”<b class='flag-5'>音樂</b>紀(jì)念品

    賦能 BEV 感知課題!高??蒲卸鄠鞲衅鲿r(shí)間同步方案

    在高校自動(dòng)駕駛實(shí)驗(yàn)室里,團(tuán)隊(duì)可能常以BEV(Bird’s-EyeView)感知架構(gòu)為研究主線。旨在通過相機(jī)陣列和激光雷達(dá)的數(shù)據(jù),在空間上重建統(tǒng)一的車周環(huán)境,為下游檢測(cè)、分割提供高精度“語義地圖”。然而,一旦相機(jī)間的時(shí)間同步存在幾十毫秒及以上的
    的頭像 發(fā)表于 11-14 17:32 ?2962次閱讀
    賦能 BEV <b class='flag-5'>感知</b>課題!高??蒲卸鄠鞲衅鲿r(shí)間同步方案

    僅使用智能手機(jī)在NVIDIA Isaac Sim中重建場(chǎng)景

    使用 iPhone 拍攝照片,到利用 3DGUT 進(jìn)行 3D 場(chǎng)景重建,再到將重建的場(chǎng)景導(dǎo)入 NVIDIA Isaac Sim 添加機(jī)器人。若要跳過重建步驟(步驟 1–3),直接在
    的頭像 發(fā)表于 11-10 14:03 ?911次閱讀

    解鎖聲音定位新維度,AR-1105 雙數(shù)字麥克風(fēng)陣列板引領(lǐng)音頻感知革命

    廣泛應(yīng)用于智能家居、工業(yè)監(jiān)測(cè)、智能交互等領(lǐng)域,為設(shè)備提供精準(zhǔn)的聲音定位與高保真音頻采集能力,是聲學(xué)智能應(yīng)用的核心組件,助力產(chǎn)品在聲音感知與處理方面實(shí)現(xiàn)突破性升級(jí)
    的頭像 發(fā)表于 11-07 09:14 ?854次閱讀
    解鎖<b class='flag-5'>聲音</b>定位新維度,AR-1105 雙數(shù)字麥克風(fēng)陣列板引領(lǐng)音頻<b class='flag-5'>感知</b>革命

    如何進(jìn)行聲音定位?

    文章主要介紹了如何利用一種簡(jiǎn)單的TDOA算法進(jìn)行聲音點(diǎn)位,使用數(shù)據(jù)采集卡進(jìn)行聲音定位的實(shí)驗(yàn)。
    的頭像 發(fā)表于 09-23 15:47 ?1843次閱讀
    如何進(jìn)行<b class='flag-5'>聲音</b>定位?

    多路混音聲音播放芯片型號(hào)推薦

    以下是唯創(chuàng)知音旗下主流的多路聲音播放芯片深度解析,結(jié)合精準(zhǔn)參數(shù)、豐富場(chǎng)景及技術(shù)特性,滿足智能設(shè)備多樣化音頻需求: 一、WTV380/890 系列:高集成多模態(tài)交互芯片 核心參數(shù) 通道能力:支持8 路
    的頭像 發(fā)表于 08-15 16:51 ?882次閱讀

    華系首款家用純電SUV全新嵐圖知音下線

    華系首款家用純電SUV——全新嵐圖知音今天正式下線,將于8月13日正式開啟預(yù)售,預(yù)計(jì)8月底上市。
    的頭像 發(fā)表于 08-11 11:39 ?1129次閱讀

    聲源定位模塊-AR1105# 聲源定位# 聲音定位

    聲音降噪
    深圳市聲訊電子有限公司
    發(fā)布于 :2025年08月01日 16:01:09

    無刷直流電機(jī)電流測(cè)量的探究

    電流進(jìn)行采樣,利用二階巴特沃思低通濾波器進(jìn)行濾波,得到較為平滑的電流,到達(dá)有效控制電機(jī)的目的。 純分享帖,點(diǎn)擊下方附件免費(fèi)獲取完整資料~~~ *附件:無刷直流電機(jī)電流測(cè)量的探究.pdf 【免責(zé)聲明】本文系網(wǎng)絡(luò)轉(zhuǎn)載,版權(quán)歸原作者所有。本文所用視頻、圖片、文字如涉及作品版權(quán)
    發(fā)表于 06-26 13:45

    紫光展銳T8300 5G SoC為用戶開創(chuàng)主流音頻新體驗(yàn)

    數(shù)字化時(shí)代,從語音通話到智能交互,從聆聽音樂到創(chuàng)作Vlog,聲音已成為隱形的基礎(chǔ)措施。日益發(fā)展的音頻技術(shù)正在重構(gòu)用戶感知世界的方式,重塑用戶的聽覺體驗(yàn)。
    的頭像 發(fā)表于 06-13 10:07 ?952次閱讀

    音樂盒芯片方案——N9305音樂芯片

    音樂盒芯片方案開發(fā)音樂盒,作為一種融合藝術(shù)與機(jī)械智慧的精巧物件,散發(fā)著獨(dú)特魅力。它以靈動(dòng)的音符為載體,承載著人們的情感、回憶與祝福。從孩童手中開啟夢(mèng)幻世界的木質(zhì)八音盒,到戀人間傳遞愛意的精致
    的頭像 發(fā)表于 06-05 15:29 ?895次閱讀
    <b class='flag-5'>音樂</b>盒芯片方案——N9305<b class='flag-5'>音樂</b>芯片

    從安防到元宇宙:RK3588如何重塑視覺感知邊界?

    定義圖像處理的精度與效率。 應(yīng)用場(chǎng)景深度解析: 智能安防:在智慧園區(qū)部署中,單板可同時(shí)接入32路1080P攝像頭,通過AI算法實(shí)現(xiàn)人臉識(shí)別、異常行為檢測(cè),實(shí)時(shí)壓縮傳輸至云端,帶寬占用降低40%。 AR
    發(fā)表于 04-07 16:11

    PCM2912APJTR設(shè)計(jì)的USB聲卡播放聲音有噠噠的聲音的原因有哪些

    最近學(xué)習(xí)PCB設(shè)計(jì)設(shè)計(jì)了一個(gè)USB聲卡,電路圖參考了官方demo模塊的原理圖,但是設(shè)計(jì)出來的板子發(fā)現(xiàn)播放音樂會(huì)有噠噠的聲音。本人由于是初學(xué)者,所以有點(diǎn)不懂是PCB不對(duì)的問題還是原理圖設(shè)計(jì)的問題了。 希望有人能夠給點(diǎn)修改建議。 下面是原理圖。 布線圖如下:
    發(fā)表于 03-21 11:54