申请/专利权人：通用微(深圳)科技有限公司

申请日：2016-12-21

公开（公告）日：2021-07-16

公开（公告）号：CN107919133B

主分类号：G10L19/032(20130101)

分类号：G10L19/032(20130101);G10L19/26(20130101);G10L21/0216(20130101);G10L21/0272(20130101);G10L25/21(20130101)

优先权：["20161009 US 15/289,181"]

专利状态码：有效-授权

法律状态：2021.07.16#授权;2018.05.11#实质审查的生效;2018.04.17#公开

摘要：本发明公开一种针对目标对象的语音增强系统及语音增强方法，一盲源分离BSS模块用来将多个麦克风记录到的音频混合信号分离维统计上独立的音频分量，多个说话人特征数据中的至少一个用来评分及加权各音频分量，一语音混合器用来首先混合所述加权后的音频分量，再对齐混合后的信号，最后再加总对齐后的信号以产生一所撷取的语音信号，相似地，一噪声混合器首先用来加权音频分量，再混合加权后的信号，最后将混合后的信号加总以产生一所撷取的噪声信号，后处理中进一步利用维纳滤波或频谱滤波来增强所撷取的语音信号，其自所撷取的语音信号的功率谱中减去所撷取的噪声信号的整形后的功率谱。

主权项：1.一种对多个目标说话人中至少一个说话人的语音增强方法，其使用多个音频混合信号中的至少两个执行于一数字电脑，所述数字电脑具有可执行的程序码及数据储存单元，其特征在于，所述方法包含以下步骤：以一盲源分离信号处理器来分离多个音频混合信号中的至少两个成为相同数量的音频分量；加权且混合所述音频分量中的至少两个成为一所撷取的语音信号，其中藉由将音频分量与目标说话人特征数据相比较来产生多个语音混合权重；加权并混合多个音频分量中的至少两个成为一所撷取的噪声信号，其中藉由将音频分量与多个中的至少一个噪声特征数据、或不具有噪声特征数据的目标说话人特征数据相比较来产生多个噪声混合权重；利用维纳滤波，将所述所撷取的噪声信号的功率谱与所述所撷取的语音信号的功率谱相匹配，来先整形所述所撷取的噪声信号的功率谱，再从所述所撷取的语音信号的功率谱中减去整型后的所述所撷取的噪声信号的功率谱，来增强所撷取的语音混合信号。

全文数据：针对目标对象的语音增强系统及语音增强方法技术领域[0001]本发明涉及一种利用信号处理演算法及声学模型来针对目标对象的数字语音信号增强的方法，本发明进一步涉及利用麦克风阵列信号处理及说话人辨识的语音增强系统。背景技术[0002]语音声音在人与人的互动中扮演着重要的角色，然而，无所不在的环境噪音与干扰，会显著地降低麦克风所撷取到的语音信息的品质，某些应用程序例如自动说话人辨识AutomaticSpeechRecognition，ASR及说话人识别特别容易受到该些环境噪音及干扰的影响，听力受损者亦受到语音品质降低之苦，虽然具有正常听力者可容忍所撷取到的语音信号中相当的噪音与干扰，但听者的听力疲劳度容易随着暴露于低信噪比（Signaltonoiseratio,SNR的语音下的时间的增加而升高。[0003]在许多装置上例如智能手机、平板电脑或笔记型电脑），不易设置有一个以上的麦克风，使用麦克风阵列可藉由波束成形（beamforming、盲源分_BlindSourceSeparation，BSS、独立分量分析（IndependentComponentAnalysis，ICA及其他适当的信号处理演算法的手段来提升语音品质，然而，在麦克风阵列设置的音场中，可能有多个语音来源，而该些信号处理演算法无法决定要保留哪一个音源信号，且无法决定哪一个须与噪音及干扰一同被抑制。在现有技术中是使用线性阵列，并假设所欲音源的声波是由阵列的中间或两端方向贯入阵列，因此相对应地，是使用宽边波束成形或端射波束成形来增加所欲的语音信号，故至少对部分情况而言，该些现有技术限制了麦克风阵列的效能。另一种选择，是自麦克风阵列所录得的音频混合信号中，撷取与预先设定的说话人模型或说话人特征数据最匹配的语音信号，此种求解方案在目标说话人是可预期或事先己知的情况下为最佳。举例而言，对个人化装置如智能手机而言，最可能的目标说话人为该装置的所有者，只要建立该装置的所有者的说话人特征数据，除了明确设定为不以此方式操作以外，该装置可以始终聚焦于其所有者的声音，并将其他声音视为干扰。发明内容[0004]本发明的目的在于提供一种对多个目标说话人中至少一个说话人的语音增强系统及方法，是利用麦克风阵列纪录的盲源分离BSS以及依据预设说话人特征数据表的说话人辨识。[0005]为达上述目的，本发明提供一种对多个目标说话人中至少一个说话人的语音增强方法，其使用多个音频混合信号中的至少两个执行于一数字电脑，所述数字电脑具有可执行的程序码及数据储存单元，其中所述方法包含以下步骤：[0006]以一盲源分离信号处理器来分离多个音频混合信号中的至少两个成为相同数量的音频分量；[0007]加权且混合所述音频分量中的至少两个成为一所撷取的语音信号，其中藉由将音频分量与目标说话人特征数据相比较来产生多个语音混合权重；[0008]加权并混合多个音频分量中的至少两个成为一所撷取的噪声信号，其中藉由将音频分量与多个中的至少一个噪声特征数据、或不具有噪声特征数据的目标说话人特征数据相比较来产生多个噪声混合权重；[0009]利用维纳滤波，将所述所擷取的噪声信号的功率谱与所述所撷取的语音信号的功率谱相匹配，来先整形所述所撷取的噪声信号的功率谱，再从所述所撷取的语音信号的功率谱中减去整型后的所述所撷取的噪声信号的功率谱，来增强所撷取的语音混合信号。[0010]为达上述目的，本发明还提供一种对多个目标说话人中至少一个说话人的语音增强系统，其使用多个音频记录中的至少两个执行于一数字电脑，所述数字电脑具有可执行的程序码及数据储存单元，其中包含有：[0011]一盲源分离模块，其以对各频率点的一分离矩阵来分离多个音频混合信号中的至少两个而成为频域下相同数量的音频分量；[0012]一语音混合器，其与盲源分离模块相连接，其依据各音频分量与目标说话人特征数据的相关性来加权各音频分量，并相对应混合所述加权后的音频分量，来使混合后的音频分量成为一所撷取的语音信号；[0013]—噪声混合器，其与盲源分离模块相连接，其依据各音频分量与噪声的相关性来加权各音频分量，并相对应混合所述加权后的音频分量，来使混合后的音频分量成为一所撷取的噪声信号；[0014]—后处理模块，其与语音混合器及噪声混合其相连接，其利用维纳滤波将所撷取的噪声信号视为一噪声参考信号，来抑制在所述所撷取的语音信号中剩余的噪声。[0015]本发明BSS演算法将来自数个麦克风所录得的混音加以分离而成统计独立的音频分量，对各音频分量而言，多个预设目标说话人模型中的至少一个模型是用来评估各音频分量属于目标说话人的可能性，对音源分量加权并混合以产生最匹配于目标说话人模型的单一撷取语音号，后处理是用以进一步抑制所撷取的语音信号中的噪声及干扰。[0016]以下结合附图和具体实施例对本发明进行详细描述，但不作为对本发明的限定。附图说明[0017]图1为现有技术的模块图；[0018]图2为本发明第一实施例的模块图；[0019]图3为本发明第二实施例的模块图；[0020]图4为频域下图2及图3中所示的BSS模块的模块图；[0021]图5为图2及图3中所示的语音混合器的模块图；[0022]图6为图2及图3中所示的噪声混合器的模块图；[0023]图7为本发明的后处理程序的流程图。具体实施方式[0024]下面结合附图对本发明的结构原理和工作原理作具体的描述：[0025]本发明的概述[0026]本发明描述一种对多个目标说话人中至少一个说话人的语音增强方法，是使用多个麦克风中的至少两个来撷取音频混合信号，利用盲源分离BSS演算法或独立分量分析ICA演算法来将该些音频混合信号分离为接近统计独立的音频分量，对各音频分量而言，多个预设目标说话人特征数据中的至少一笔数据系用来评估所选择的音频分量属于所欲的目标说话人的机率或可能性，接着对所有的音频分量依据前述的可能性进行加权后再混合以产生最匹配于目标说话人模型的单一擷取语音信号。另一相似地作法，对于各音频分量而言，多个噪声模型中的至少一个、或多个不具有噪声模型的目标说话人模型中的至少一个，是用来评估该被考虑的音频分量为噪声或不包含来自目标说话人的任何语音信号的机率或可能性，接着对所有的音频分量依据前述的可能性进行加权后再混合以产生单一擷取噪声彳目号，利用该所撷取的噪声信号，藉由维纳滤波Wienerfiltering或频谱滤波法来进一步抑制所撷取的语音信号中剩余的噪声和干扰。[0027]图1为相关现有技术的模块图，自两个语音来源1〇〇、1〇2的声波贯入二纪录装置，即麦克风104、106,一BSS或ICA模块10S将音频混合信号分离为两个音源分量，多个说话人特征数据中的至少一个是储存于储存单元110中，一音频通道选择器112选择一个最匹配于所欲的说话人特征数据的音频分量，并将其输出为所选择的语音信号114。因使用硬性的切换故所述现有技术对于静态的混合信号及离线处理的效果较佳，对于动态或时间变化的混合条件的应用环境，由于涉及动态或时间变化的在线BSS的实施，则难以或不可能将音频混合信号分离为音频分量，因此，只有依音频分量包含所欲的语音信号，举例而言，在BSS程序的过渡阶段中，所有的音频分量均可能包含所欲的语音信号、噪声及干扰，再者，BSS输出可切换频道，使得所欲的语音信号在某一次在某一频道占支配地位，但于另一次又在另一频道占支配地位。具体而言，如图1所示的硬件开关无法正确地处理该些情形，且可能产生严重失真的语音信号。本发明是利用分离-混合程序来克服该些难题，以恰当的维持所欲的语音信号，纵使在动态语音环境下亦同，并利用后处理模块来进一步增强所欲的语音信号。[0028]图2为本发明的一实施例的模块图，其中装置持有者的声音信号2〇〇已被撷取，竞争的声音及噪声202则被抑制，在本实施例中，该装置可为智能手机、平板电脑、个人电脑等。两个所记录的音频混合信号204、206被传送入BSS模块208中，装置持有者的说话人特征数据是储存于数据库210中，说话人特征数据可对应于同一装置、或对应于其他装置并随后传送至所欲的装置。一信号混合模块212将分离的音频分量进行加权，再适当的加以混合以产生一所撷取的语音信号214及一所撷取的噪声信号216,所撷取的语音信号214及所撷取的噪声信号216传送至一后处理模块218,以藉由维纳滤波Wienerfiltering或频谱滤波法进一步抑制语音信号214中剩余的噪声及竞争的声音，进而产生增强后的语音信号220。在一实施例中，所述信号混合模块212进一步包含一语音混合器212A及一噪声混合器212B，其详细模块图分别示于图5及图6中。[0029]图3为本发明另一实施例的模块图，其中涉及多个说话人及使用多个音频混合记录单元，本实施例的典型例示为会议纪录单元，其涉及数个关键说话人的语音信号需要被擷取及增强。于本实施例中，三个说话人3〇0、302、3〇4处于同一录制环境中，其语音信号可能会在时间上重叠，三个音频混合记录器，即语音信号由麦克风305、306、307所记录后传送入BSS模块308中，再分离为三个音频分量，一数据库310可储存多个中至少一个说话人特征数据，藉由所选择的说话人特征数据，一信号混合模块312产生一所撷取的语音信号314及一所撷取的噪声信号316,一后处理模块318进一步增强所撷取的语音信号314以产生增强的语音信号320。[麵]盲源分离[0031]图4为用来说明图2及图3中BSS模块208、308的较佳实施态样的模块图，为了清楚说明，图4为用来说明在频域下的BSS，藉由独立向量分析（Independentvectoranalysis,IVA或联合盲源分离JointBlindSourceS印arationJBSS来分离两个音频混合信号，然而，可以理解的是，本发明不限于在频域下的BSS实施且不限于用来分离两个音频混合信号，在其他交换域下的BSS实施也同样可以使用，例如子带域、子波域、或甚至原始时域，需要被分离的音频混合信号的数量可为两个或任何不小于2的整数，任何适当形式的BSS实施，例如IVA、JBSS或两阶段BSS解法，其中第一阶段以BSS或ICA解法将各频率点bin中的混合信号独立分离，而第二阶段利用到达方向（Direction-Of-Arrival，D0A信息及语音信号的特定统计性质来求解频率点frequencybin的置换，例如自同一语音信号中跨越所有频率点的相似振幅包络。[0032]在图4中，两个分析滤波器组404、406将两个音频混合信号400、402转换为频域，所述两个分析滤波器组404、406应具有相同的结构及参数，且应存在有一综合滤波器组与所述分析滤波器组404、406成对，故当频率信号不再被改变时，其可最佳地或接近最佳地重建原始时域信号，举例而言，所述分析综合滤波器组为短时距傅立叶转换（Short-TimeFourierTransform，STFT及离散傅立叶转换（DiscreteFourierTransform，DFT调变滤波数据库。对各频率点而言，一IVA或JBSS模块408用分离矩阵demixingmatrix将两个音频混合信号分离成两个音频分量，所述频率置换问题通过利用来自相同语音信号源的频率点中的统计相关性而求解，IVA及JBSS的特征。所述音频分量410被传送至单一混合模组212、312中以进一步处理。[0033]一般而言，数个分析滤波器组将数个时域下的音频混合信号转换为数个频域下的音频混合信号，可以如下所示：[0034]xn,t^Xn,k,m公式1[0035]其中xn，t为第n个音频混合信号在离散时间t下的时域信号，而Xn，k，m为在第n个音频混合信号、第k个频率点及第m个框或区段的频域信号，对各频率点而言，形成一个向量如Xk，m=[X1，k，m,X2,k,m，…，XN，k，m]，而对第m个区段，求解一分离矩阵separationmatrixWk，m以将该些音频混合信号分离成音频分量为[0036][Y1，k，m，Y2，k，m，…，YN，k，m]=Wk，mXk，m公式2[0037]其中N为音频混合信号的数量，一具有步长足够小的随机梯度下降演算法stochasticgradientdescentalgorithm是用来求解Wk，m，因此Wk，m缓慢地基于其框序m逐步展开。形成一频率源向量如Yn，m=[Yn，1，m，Yn,2,m，…，Yn，K，m]，熟知的频率置换问题系通过利用来自不同源向量中的统计独立性及来自相同源向量的分量中的统计相关性而求解，即IVA之名。尺度不确定性scalingambiguity为另一在BSS实施上熟知的问题，一现有用来去除所述不确定性的方式，是于各频率点中缩放所述分离矩阵，使得其所有对角元素将具有单位振幅及零相位。[0038]语音混合器[0039]图5为说明语音混合器212A、312A将两个音频分量结合为单一撷取语音信号的附图，然而，图5仅为了能清楚呈现，故仅以两个音频分量来作为范例，故不应被理解为所示的语音混合器212A、312A仅能用来混合两个音频分量。[0040]在图5中，两个相同的声学特征撷取器506、508分别由音频分量5〇〇、5〇2中撷取声学特征，一数据库504储存特征在来自目标说话人的声学特征的概率密度函数probabilitydensityfunction，pdf的说话人模型，藉由比对声学特征撷取器506、508所撷取到的声学特征和说话人特征数据中的声学特征，一语音混合权重产生器510产生两个语音混合权重，且模块512、514相对应将该两增益值应用在音频分量500、502上，对各频率点而言。一矩阵混合器516利用该频率点的分离矩阵的逆矩阵来混合所述加权后的音频分量，一延迟估计器518估算两个再混合音频分量之间的时间延迟，且延迟线520、522对齐所述两再混合音频分量，最后，模块524将两延迟对齐的再混合音频分量相加以产生单一撷取语音信号214、314。[0041]说话人特征数据可为一参数模型，该参数模型是描述撷取自给定说话人的声学信号的声学特征的概率密度函数，一般所使用的声学模型为线性预测倒频谱系数LinearPredictionCepstralCoefficients，LPCC、感知线性预测（PerceptualLinearPrediction，PLP倒频谱系數、及梅尔倒频谱系數（Mel-FrequencyCepstralCoefficients，MFCC，PLP倒频谱系数及MFCC可直接由频域信号呈现中得出，故为在频域下BSS的较佳选择。[0042]对各源分量Yn,m而言，一特征向量fn，m被撷取出且被与一个或多个说话人特征数据比较，以产生一非负分sn，m，分数越高表示特征向量fn，m与所考虑的说话人特征数据间越匹配，在一般判别说话人的实务中，在此的特征向量可包含该框及前一框的信息，常见的特征组为MFCC、MFCC的差分值（delta-MFCC、及MFCC的二次差分值（delta-delta-MFCC〇[0043]高斯混合模型Gaussianmixturemodel，GMM广泛的运用于说话人辨识的参数混合t吴型，且其可用来评价所需分数sn，m，建立一通用背景模型UniverseBackgroundModel，UBM以描述来自目标族群的声学特征的概率密度函数，以相同mm建立目标说话人特征数据，但其参数由UBM调整，一般而言，只有允许调整UBM中高斯分量的均值，如此，在数据库5〇4中的说话人特征数据包含有两组参数:一组参数针对UBM包含所述均值、协方差矩阵及在UBM中的高斯分量的分量权重，另一组参数为针对仅包含GMM的调整后均值的说话人特征数据。[0044]箱由说话人特征数据库及UBM，以下计算对数似然比（LogarithmLikelihoodRatio，LLR[0045]rn，m=logp[fn，m|speakerprofiles]-logp[fn，m|UBM][°046]公式3[0047]当使用多个说话人特征数据时，可能性p[fn，m|说话人特征数据]应被解读为各说话人特征数据上fn,m的可能性的总和，此LLR是很杂乱的，则利用一指数加权移动平均exponentiallyweightedmovingaverage来计算较平滑的LLR如[0048]rsn，m=arsn，m+卜arn，m公式4[0049]其中0al为遗忘因子。[OOSO]—单调递增映射，即一指数函数，是用来将一己平滑的LLR映射为一非负分sn，m，则对各源分量而言，产生一语音混合权重作为一正规化的分数如[0051]gn，m=sn，m[s1，m+s2，m+".+sN，m+so]公式5[0052]其中SQ为一适当的正补偿量，故当所有分数均小到可以忽略时，gn,m接近零;而当sn，m够大时，gn，m接近1，如此，则对音频分量的语音混合权重将与其包含的所欲的语音信号的数量形成正相关。[0053]在所述矩阵混合器516中，该加权后的音频分量被加以混合以产生N个混合信号如[0054][Zl,k,m,Z2,k,m,,ZN,k,m][0055]=W—1k，m[g1，mY1，k，m，g2，mY2，k，m，…，gN，mYN，k，m][0056]公式6[0057]其中W—1k，m为Wk，m的逆。[0058]最后，以一延迟加总程序来结合混合信号Zn，k，m于单一撷取语音信号214、314中，由于Zn，k,m为频域下的信号，广义互相关函数generalizedcrosscorrelation,GCC方法为用来延迟估算的方便选择。一GCC方法计算频域下两个信号之间的加权互相关函数，并藉由离散傅立叶逆转换inverseDFT将频域下的互相关函数转换为时域下的互相关函数来寻找时域的延迟。相位变换phasetransform,PHAT为GCC实施的普遍选择，其仅保留针对时域下互相关函数计算的相位信息。在频域下，一延迟操作delayoperation是对应于相位偏移phaseshifting，因此，被擺取的语音信号可写为[0059]Tk，m[0060]=expjwkdiZ1，k，m+expjwkd2Z2，k，m+...+expjwkdNZN，k，m[0061]公式7[0062]其中j为虚数单元，Wk为第k个频率点的角频率radianfrequency，而dn为第n个混合信号的延迟补偿，需注意的是，只有在混合信号间相对的延迟可被唯一地确定，且平均的延迟可为任意值，一现有作法是假定cb+d#…+dN=0来唯一地确定延迟组。[0063]在此所述的加权与混合程序相较于硬件开关的方法而言，可较佳的维持所欲的语音信号，举例而言，考虑所欲的说话人在活跃及BSS尚未收敛的瞬时阶段，目标语音信号散布在音频分量中，硬件开关的程序将不可避免的因仅选择一音频分量输出而扭曲所欲的语音信号，而前述的本发明的方法藉由权重来结合所有的音频分量，该权重为正比于目标信号在各音频分量中的所占的比例，因此可以保留目标语音信号。[0064]噪声混合器[0065]图6为噪声混合器212B、312B在加权并混合两BSS以产生一所撷取的噪声信号时的模块图，在图6中，噪声特征数据、或不具有噪声特征数据的说话人特征数据系储存于数据库600中，两BSS输出500、502送入一噪声混合权重产生器602以产生两增益值，模块604、606将所述增益值分别应用于BSS输出，而模块6〇8将加权后的BSS输出相加以产生所擷取的噪声信号216、316,理想而言，被截取的噪声信号216、316应仅包含噪声及干扰，而所欲说话人的任何语音信号均被排除在外。[0066]当使用N个麦克风时，将撷取到N个源分量，噪声混合权重产生器产生N个权重如hl，m，h2，m，…，hN，m，简单的加权及相加的混合后产生所撷取的噪声信号Ek，m如[0067]Ek，m=h1，mY1，k，m+h1，mY1，k，m+…+hN，mYN，k，m[0068]公式8[0069]当可取得噪声的GMM时，藉由将说话人特征数据的gmm更换为噪声特征数据的；画，则用来计算语音混合权重产生的相同方法亦可用来计算噪声混合权重，当无法取得噪声的GMM时，较简便的选择为使用公式3的负LLR作为噪声的LLR，接着再以与语音混合权重产生的相同的程序来计算噪声混合权重。[0070]后处理[0071]图7为说明后处理模块21S、31S执行后处理步骤的流程图，对各频率点而言，维纳滤波或频谱滤波，步骤7〇6计算一增益值并应用于所撷取的语音信号214、314以产生增强后的语曰彳5_1?220。对各频率点而g，步骤704将所撤取的噪声信号216、316的功率谱powerspectrum整形以符合步骤706的噪声等级评价noiseievelestimation之用。[0072]用来整形噪声谱的简单方法，是应用一正增益在所撷取的噪声信号的功率谱上，如bk，m|Ek,m|2,均衡系数equalizationcoefficientbk，m可藉由在在噪声主导的时间段bk，m|Ek，m|2and|Tk，m|2匹配均衡前和均衡后的能量来加以估算，该周期为所欲说话人未活跃的周期。对于各频率点而言，所述均衡系数应在静态或缓慢的声学变化环境中接近常数，因此，可使用一指数加权移动平均方法来估算所述均衡系数。[0073]另一用来决定频率点的均衡系数的简单方法为单纯指定其为一常数，当不需要积极的噪声抑制时，此简单方法为较佳者。[0074]增强后的语音信号22〇、320由ck，mTk，m给出，其中ck，m为一非负增益值，其系由维纳滤波或频谱滤波所决定，一简单的频谱滤波决定该增益值为[0075]ck,m=max[l-bk,m|Ek,m|2|Tk,m|2,0]公式9[0076]该简单的方法可能对特定应用为佳，例如语音辨识，但对其他应用可能为不足，例如其导入水声wateringsound，维纳滤波使用决策导向的方法，可平滑该增益波动，以抑制该水声至无法被听见的程度。[0077]当然，本发明还可有其它多种实施例，在不背离本发明精神及其实质的情况下，熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形，但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。

权利要求：1.一种对多个目标说话人中至少一个说话人的语音增强方法，其使用多个音频混合信号中的至少两个执行于一数字电脑，所述数字电脑具有可执行的程序码及数据储存单元，其特征在于，所述方法包含以下步骤：以一盲源分离信号处理器来分离多个音频混合信号中的至少两个成为相同数量的音频分量；加权且混合所述音频分量中的至少两个成为一所撷取的语音信号，其中藉由将音频分量与目标说话人特征数据相比较来产生多个语音混合权重；加权并混合多个音频分量中的至少两个成为一所擷取的噪声信号，其中藉由将音频分量与多个中的至少一个噪声特征数据、或不具有噪声特征数据的目标说话人特征数据相比较来产生多个噪声混合权重；利用维纳滤波，将所述所撷取的噪声信号的功率谱与所述所撷取的语音信号的功率谱相匹配，来先整形所述所撷取的噪声信号的功率谱，再从所述所撷取的语音信号的功率谱中减去整型后的所述所撷取的噪声信号的功率谱，来增强所擷取的语音混合信号。2.如权利要求1所述的方法，其特征在于，其进一步包含有以下步骤:将多个音频混合信号中的其中至少两个转换为频域表示，且以一独立向量分析模块或一联合盲源分离模块，藉由对应于各频率点的一分离矩阵来分离在频域下的音频混合信号。3.如权利要求1所述的方法，其特征在于，其进一步包含以下步骤:藉由先加权所述音频分量，再以各频率点的分离矩阵的逆矩阵来混合加权后的音频分量，再接着延迟加权后且混合后音频分量，最后加总延迟后、加权后且混合后的音频分量，来产生所述所擷取的语音信号。4.如权利要求3所述的方法，其特征在于，其进一步包含以下步骤：自每一音频分量中撷取声学特征；提供以高斯混合模型参数化的多个目标说话人特征数据中的至少一个，所述高斯混合模型建立所述声学特征的概率密度函数;藉由所述说话人特征数据的高斯混合模型来计算各音频分量的一对数似然比;藉由一指数加权移动平均模型来平滑所述对数似然比；以一单调递增函数来将各平滑后的对数似然比映射至一所述语音混合权重。5.如权利要求3所述的方法，其特征在于，其进一步包含以下步骤:利用一广义互相关延迟估计器来估计及追踪在加权后及混合后的音频分量之间的延迟。6.如权利要求1所述的方法，其特征在于，其进一步包含以下步骤:藉由先加权所述音频分量，再将加权后的音频分量加总，来产生所述所撷取的噪声信号。7.如权利要求6所述的方法，其中提供多个噪声特征数据的至少一个，其特征在于，其包含以下步骤：自每一音频分量中撷取声学特征;藉由一噪声特征数据的高斯混合模型来计算各音频分量的一对数似然比；藉由一指数加权移动平均模型来平滑所述对数似然比；以一单调递增函数来将各平滑后的对数似然比转换至一所述噪声混合权重。8.如权利要求6所述的方法，其中未提供噪声特征数据，其特征在于，其包含以下步骤：自每一音频分量中撷取声学特征;藉由说话人特征数据的高斯混合模型来计算各音频分量的一对数似然比；藉由一指数加权移动平均模型来平滑所述对数似然比；以一单调递增函数来将各平滑后的对数似然比转换至一所述噪声混合权重。9.如权利要求1所述的方法，其特征在于，其包含以下步骤:藉由在噪声支配期大致上将所述所擷取的噪声信号的功率谱与所述所撷取的语音信号的功率谱相匹配，来对所述所撷取的噪声信号的功率谱加以整形;利用维纳滤波，从所述所撷取的语音信号的功率谱中减去整型后的所述所擷取的噪声信号的功率谱，来增强所擷取的语音信号。10.—种对多个目标说话人中至少一个说话人的语音增强系统，其使用多个音频记录中的至少两个执行于一数字电脑，所述数字电脑具有可执行的程序码及数据储存单元，其特征在于，其中包含有：一盲源分离模块，其以对各频率点的一分离矩阵来分离多个音频混合信号中的至少两个而成为频域下相同数量的音频分量；一语音混合器，其与盲源分离模块相连接，其依据各音频分量与目标说话人特征数据的相关性来加权各音频分量，并相对应混合所述加权后的音频分量，来使混合后的音频分量成为一所撷取的语音信号；一噪声混合器，其与盲源分离模块相连接，其依据各音频分量与噪声的相关性来加权各音频分量，并相对应混合所述加权后的音频分量，来使混合后的音频分量成为一所撷取的噪声信号；一后处理模块，其与语音混合器及噪声混合其相连接，其利用维纳滤波将所撷取的噪声信号视为一噪声参考信号，来抑制在所述所撷取的语音信号中剩余的噪声。11.如权利要求10所述的系统，其特征在于，其中所述语音混合器包含有:一语音混合权重产生器，其对各音频分量产生混合权重;一矩阵混合器以各频率点的分离矩阵的逆矩阵来混合所述加权后的音频分量;一延迟估计器利用一广义互相关信号处理器来估计在加权后及混合后的音频分量之间的延迟;一延迟加总器将加权后及混合后的音频分量加以对齐，再将其加总以产生所述所撷取的语音信号。12.如权利要求10所述的系统，其特征在于，其中所述语音混合器进一步包含:一声学特征撷取器，其自各音频分量中撷取声学特征;一计算单元，其以多个说话人特征数据中的至少一个来计算各音频分量的对数似然比，其中所述说话人特征数据表示为高斯混合模型的参数，所述高斯混合模型建立所述声学特征的概率密度函数;一平滑单元，其藉由一指数加权移动平均模型来平滑所述对数似然比；一转换单元，其以一单调递增映射来将各平滑后的对数似然比转换为一语音混合权重。13.如权利要求10所述的系统，其特征在于，其中所述噪声混合器进一步包含:一噪声混合权重产生器，其对各音频分量产生噪声混合权重;一权重加总混合器将所述音频分量依据所述噪声混合权重进行加权，再将加权后的音频分量加总以产生所述所撷取的噪声信号。14.如权利要求13所述的系统，其特征在于，其中所述噪声混合器包含：一声学特征撷取器，其自各音频分量中撷取声学特征;一计算单元，其计算各音频分量的对数似然比；一平滑单元，其藉由一指数加权移动平均模型来平滑所述对数似然比；一转换单元，其以一单调递增或递减函数来将各平滑后的对数似然比转换为所述噪声混合权重。15.如权利要求14所述的系统，其特征在于，其中多个噪声特征数据的至少一个被提供，且被用来计算所述对数似然比，一单调递增映射用来将各平滑后的对数似然比转换至所述噪声混合权重。16.如权利要求14所述的系统，其特征在于，其中不具有噪声特征数据，所述说话人特征数据被用来计算所述对数似然比，一单调递增映射用来将各平滑后的对数似然比转换至所述噪声混合权重317.如权利要求10所述的系统，其特征在于，其中所述后处理模块包含:一匹配模块，其在噪声支配期将所述所擷取的噪声信号的功率谱与所述所撷取的语音信号的功率谱相匹配;一维纳滤波器，其从所述所撷取的语音信号的功率谱中减去匹配后的所述所撷取的噪声信号的功率谱，来产生增强后的语音信号。

百度查询： 通用微(深圳)科技有限公司 针对目标对象的语音增强系统及语音增强方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD