《電子技術(shù)應(yīng)用》
您所在的位置:首頁(yè) > 其他 > 設(shè)計(jì)應(yīng)用 > 面向多說(shuō)話人分離的深度學(xué)習(xí)麥克風(fēng)陣列語(yǔ)音增強(qiáng)
面向多說(shuō)話人分離的深度學(xué)習(xí)麥克風(fēng)陣列語(yǔ)音增強(qiáng)
2022年電子技術(shù)應(yīng)用第5期
張家揚(yáng)1,2,童 峰1,2,3,陳東升1,2,3,黃惠祥1,2
1.廈門(mén)大學(xué) 水聲通信與海洋信息技術(shù)教育部重點(diǎn)實(shí)驗(yàn)室,福建 廈門(mén)361005; 2.廈門(mén)大學(xué) 海洋與地球?qū)W院,福建 廈門(mén)361005;3.廈門(mén)大學(xué)深圳研究院,廣東 深圳518000
摘要: 隨著近年來(lái)人機(jī)語(yǔ)音交互場(chǎng)景不斷增加,利用麥克風(fēng)陣列語(yǔ)音增強(qiáng)提高語(yǔ)音質(zhì)量成為研究熱點(diǎn)之一。與環(huán)境噪聲不同,多說(shuō)話人分離場(chǎng)景下干擾說(shuō)話人語(yǔ)音與目標(biāo)說(shuō)話人同為語(yǔ)音信號(hào),呈現(xiàn)類似的時(shí)、頻特性,對(duì)傳統(tǒng)麥克風(fēng)陣列語(yǔ)音增強(qiáng)技術(shù)提出更高的挑戰(zhàn)。針對(duì)多說(shuō)話人分離場(chǎng)景,基于深度學(xué)習(xí)網(wǎng)絡(luò)構(gòu)建麥陣空間響應(yīng)代價(jià)函數(shù)并進(jìn)行優(yōu)化,通過(guò)深度學(xué)習(xí)模型訓(xùn)練設(shè)計(jì)麥克風(fēng)陣列期望空間傳輸特性,從而通過(guò)改善波束指向性能提高分離效果。仿真和實(shí)驗(yàn)結(jié)果表明,該方法有效提高了多說(shuō)話人分離性能。
中圖分類號(hào): TN912.3
文獻(xiàn)標(biāo)識(shí)碼: A
DOI:10.16157/j.issn.0258-7998.212404
中文引用格式: 張家揚(yáng),童峰,陳東升,等. 面向多說(shuō)話人分離的深度學(xué)習(xí)麥克風(fēng)陣列語(yǔ)音增強(qiáng)[J].電子技術(shù)應(yīng)用,2022,48(5):31-36.
英文引用格式: Zhang Jiayang,Tong Feng,Chen Dongsheng,et al. Deep learning microphone array speech enhancement for multiple speaker separation[J]. Application of Electronic Technique,2022,48(5):31-36.
Deep learning microphone array speech enhancement for multiple speaker separation
Zhang Jiayang1,2,Tong Feng1,2,3,Chen Dongsheng1,2,3,Huang Huixiang1,2
1.Key Laboratory of Underwater Acoustic Communication and Marine Information Technology Ministry of Education, Xiamen University,Xiamen 361005,China; 2.College of Ocean and Earth Sciences,Xiamen Univercity,Xiamen 361005,China; 3.Shenzhen Research Institute of Xiamen Univercity,Shenzhen 518000,China
Abstract: With the increase of human-computer voice interaction scenes in recent years, using microphone array speech enhancement to improve speech quality has become one of the research hotspots. Different from the ambient noise, the interfering speaker′s speech and the target speaker are the same speech signal in the multiple speaker separation scene, showing similar time-frequency characteristics, which poses a higher challenge to the traditional microphone array speech enhancement technology. For the multiple speaker separation scenario, the spatial response cost function of microphone array is constructed and optimized based on deep learning network. The desired spatial transmission characteristics of microphone array are designed through deep learning model training, so as to improve the separation effect by improving the beamforming performance. Simulation and experimental results show that this method effectively improves the performance of multiple speaker separation.
Key words : deep learning;microphone array;beamforming;LSTM

0 引言

    隨著人與機(jī)器之間的語(yǔ)言交互逐漸頻繁,更需要考慮噪聲、混響和其他說(shuō)話人的干擾等引起語(yǔ)音信號(hào)質(zhì)量下降的因素對(duì)語(yǔ)音識(shí)別造成的影響,語(yǔ)音增強(qiáng)技術(shù)[1]可以有效地從受干擾的信號(hào)中提取純凈的語(yǔ)音,而麥克風(fēng)陣列比起單個(gè)麥克風(fēng)可以獲取更多的語(yǔ)音信息和時(shí)空特征,因而麥克風(fēng)陣列語(yǔ)音增強(qiáng)技術(shù)被廣泛應(yīng)用在智能家居、車載系統(tǒng)和音(視)頻會(huì)議等領(lǐng)域。

    麥克風(fēng)陣列對(duì)信號(hào)進(jìn)行空間濾波,可以增強(qiáng)期望方向上的信號(hào)并抑制方向性噪聲,實(shí)現(xiàn)語(yǔ)音增強(qiáng)。傳統(tǒng)麥陣語(yǔ)音增強(qiáng)算法;如形成固定波束的濾波累加波束形成算法(Filter-and-Sum Beamforming,F(xiàn)SB)[2],通過(guò)一定長(zhǎng)度的濾波器系數(shù)對(duì)多通道信號(hào)進(jìn)行濾波累加,實(shí)現(xiàn)了頻率無(wú)關(guān)的空間響應(yīng)特性,具有低復(fù)雜度、硬件容易實(shí)現(xiàn)等優(yōu)點(diǎn),但是對(duì)于具有方向性的噪聲效果不佳。




本文詳細(xì)內(nèi)容請(qǐng)下載:http://www.rjjo.cn/resource/share/2000004272。




作者信息:

張家揚(yáng)1,2,童  峰1,2,3,陳東升1,2,3,黃惠祥1,2

(1.廈門(mén)大學(xué) 水聲通信與海洋信息技術(shù)教育部重點(diǎn)實(shí)驗(yàn)室,福建 廈門(mén)361005;

2.廈門(mén)大學(xué) 海洋與地球?qū)W院,福建 廈門(mén)361005;3.廈門(mén)大學(xué)深圳研究院,廣東 深圳518000)




wd.jpg

此內(nèi)容為AET網(wǎng)站原創(chuàng),未經(jīng)授權(quán)禁止轉(zhuǎn)載。
主站蜘蛛池模板: 国产丝袜不卡一区二区 | 久草在线视频新时代视频 | 在线观看免费精品国产 | аⅴ资源天堂8在线 | 久草观看 | 手机看成人片 | 免费一区二区三区 | 免费一区在线观看 | 欧美国产日韩久久久 | 久久爱com | 99久久免费精品国产免费 | 亚洲精彩 | www.日本在线观看 | 欧美国产成人精品一区二区三区 | 在线成人免费观看国产精品 | 中文字幕日韩一区二区 | 国产三级在线观看 | 日韩精品一区二区三区中文在线 | 波多野结衣被强在线视频 | 在线观看亚洲精品专区 | 欧美一区永久视频免费观看 | 91b站 | 污美女网站www在线观看 | u影一族亚洲精品欧美激情 va欧美 | 久久日本三级韩国三级 | 九九九九九九精品免费 | 天堂va欧美ⅴa亚洲va一国产 | 中文字幕一区二区在线观看 | 成年人午夜免费视频 | 欧美老熟妇bbbb毛片 | 国产激情一区二区三区成人91 | 国产亚洲综合精品一区二区三区 | 国产精品亚洲天堂 | 亚洲网站视频在线观看 | 欧美日韩精品一区二区三区视频 | 国产成人亚洲合集青青草原精品 | 亚洲国产精品免费在线观看 | 九九精品久久久久久噜噜 | 成人在线免费 | 国产精品18久久久久久久久久 | 亚洲国产一级毛片 |