專利名稱:聲音處理裝置、控制增益的裝置和方法
技術(shù)領(lǐng)域:
本發(fā)明涉及聲音處理裝置,更具體地,涉及用于放大從麥克風(fēng)輸入的聲 音信號(hào)和處理該聲音信號(hào)的聲音處理裝置、用于控制聲音信號(hào)的放大增益的 增益控制裝置、在聲音處理裝置和增益控制裝置中使用的增益控制方法、和 存儲(chǔ)用以執(zhí)行聲音處理裝置和增益控制裝置的程序的計(jì)算機(jī)程序的程序產(chǎn)
背景技術(shù):
近年來(lái),通過(guò)麥克風(fēng)接收聲音、將聲音轉(zhuǎn)換成聲音信號(hào)、將聲音信號(hào)放 大成適用于語(yǔ)音識(shí)別處理的音頻水平的這種裝置的使用變得普及,并且這種 裝置可基于所放大的聲音信號(hào)執(zhí)行關(guān)于講話者的語(yǔ)音的語(yǔ)音識(shí)別處理。當(dāng)過(guò) 度地增加音頻水平(功率)時(shí),聲音信號(hào)飽和。相反,過(guò)度地減少音頻水平 則導(dǎo)致錯(cuò)誤的語(yǔ)音識(shí)別。因此,為了獲得適當(dāng)?shù)囊纛l水平,重要的是開發(fā)用 以控制放大增益的技術(shù)。
圖22是現(xiàn)有聲音處理裝置1000的功能框圖?,F(xiàn)有聲音處理裝置1000 包括聲音接收單元1010,用于從外部接收聲音(例如由講話者發(fā)出的語(yǔ)音 和噪音);放大器單元1020 (例如可變?cè)鲆娣糯笃?,用于放大由聲音接收 單元1010生成的聲音信號(hào);模擬到數(shù)字(A/D)轉(zhuǎn)換器1030,用于轉(zhuǎn)換由 放大器單元1020放大的模擬聲音信號(hào);和控制單元1040,例如數(shù)字信號(hào)處 理器(DSP)。
控制單元1040包括語(yǔ)音部分檢測(cè)部1041,根據(jù)轉(zhuǎn)換到數(shù)字信號(hào)的聲 音信號(hào)檢測(cè)包含由講話者發(fā)出的語(yǔ)音的部分;和應(yīng)用部1042,基于在檢測(cè)部 中包含的語(yǔ)音執(zhí)行語(yǔ)音識(shí)別處理??刂茊卧?040還包括功率估算部1043, 基于在檢測(cè)部中的聲音信號(hào)估算音頻水平(功率);和增益導(dǎo)出部1044,基 于所估算的音頻水平計(jì)算放大器單元1020的增益的控制值。將所計(jì)算的增 益控制值輸出至基于增益控制值來(lái)放大聲音信號(hào)的放大器單元1020 。
通過(guò)在放大器單元1020中控制用于放大聲音信號(hào)的增益,以調(diào)節(jié)聲音 接收單元1010的靈敏度,可使得用以執(zhí)行語(yǔ)音識(shí)別應(yīng)用程序所需的聲音信 號(hào)的音頻水平接近于在各種噪音環(huán)境下的目標(biāo)值。該特征稱為"自動(dòng)增益控
制(AGC)"。在執(zhí)行例如語(yǔ)音識(shí)別應(yīng)用程序的應(yīng)用時(shí),使用AGC進(jìn)行預(yù)處理。
日本專利申請(qǐng)No.2000-105599描述了用于從包含噪音和語(yǔ)音的信號(hào)中 進(jìn)行語(yǔ)音分離噪音的方法,其中一個(gè)技術(shù)涉及聲音處理。
發(fā)明內(nèi)容
然而,在現(xiàn)有聲音處理裝置中,為了確定由講話者發(fā)出的包含語(yǔ)音的部 分,需要幾十到幾百毫秒的時(shí)間段。因此,在開始增益控制之前,不利的是 會(huì)出現(xiàn)延遲。在延遲期間,語(yǔ)音水平進(jìn)入不適當(dāng)?shù)臓顟B(tài)。因此,聲音信號(hào)可 能飽和,或可能發(fā)生語(yǔ)音誤識(shí)的錯(cuò)誤。
為了解決這個(gè)問(wèn)題,提出一種方法,用于在確定語(yǔ)音部分和執(zhí)行增益控 制之前累積(緩沖)聲音信號(hào)。然而,在該方法中,可能會(huì)發(fā)生處理延遲。 因此,可能發(fā)生語(yǔ)音識(shí)別應(yīng)用程序的響應(yīng)延遲,或可能降低通信應(yīng)用程序的 語(yǔ)音質(zhì)量。
因此,本發(fā)明實(shí)施例的目的在于提供一種使用方向聲音接收技術(shù)估算背 景噪音的功率的聲音處理裝置,使用多個(gè)聲音接收單元,基于所估算的背景 噪音的功率和預(yù)定的功率目標(biāo)值來(lái)計(jì)算增益控制值,和輸出該增益控制值, 從而可減少開始增益控制的延遲時(shí)間,以及可阻止語(yǔ)音識(shí)別應(yīng)用程序的慢響 應(yīng)或語(yǔ)音通信程序的語(yǔ)音質(zhì)量的降低。本發(fā)明實(shí)施例的另一 目的在于提供一 種控制與聲音信號(hào)的放大有關(guān)的增益的增益控制裝置、 一種控制在聲音處理 裝置和增益控制裝置中使用的增益的方法、以及一種實(shí)現(xiàn)聲音處理裝置和增 益控制裝置的計(jì)算機(jī)程序。
根據(jù)一實(shí)施例,提供一種具有以下配置的聲音處理裝置。所述聲音處理
裝置包括多個(gè)聲音接收單元,將輸入聲音轉(zhuǎn)換成聲音信號(hào);多個(gè)放大器單
元,按預(yù)定的增益控制值放大聲音信號(hào);分離單元,根據(jù)聲音信號(hào),基于從 預(yù)定目標(biāo)方向到達(dá)的聲音而分離出第一聲音信號(hào)、以及基于從目標(biāo)方向之外 的其他方向到達(dá)的聲音而分離出第二聲音信號(hào);估算單元,基于第一和第二
聲音信號(hào)之間的相關(guān)性來(lái)估算在聲音信號(hào)中包含的背景噪音的功率;以及導(dǎo) 出單元,基于所估算的背景噪音的功率和預(yù)定的功率目標(biāo)值計(jì)算向多個(gè)放大
器單元輸出的增益控制值。
聲音處理裝置可通過(guò)平滑在所估算的背景噪音的功率和功率目標(biāo)值之 間的差值中的時(shí)間變化來(lái)計(jì)算增益控制值。
此外,聲音處理裝置可基于在所計(jì)算的差值和先前獲得的增益控制值之 間的大小關(guān)系計(jì)算表示平滑化程度的時(shí)間常數(shù),以及基于所確定的時(shí)間常數(shù) 平滑在所述差值中的時(shí)間變化。
此外,導(dǎo)出單元可被配置為,僅當(dāng)所估算的背景噪音的功率大于所述功 率目標(biāo)值時(shí)或僅當(dāng)所估算的背景噪音的功率小于所述功率目標(biāo)值時(shí),計(jì)算增 益控制值。
所述聲音處理裝置可包括選擇單元,基于放大器單元的增益的目標(biāo)值 和預(yù)存的放大器單元的增益,從聲音處理裝置的多個(gè)放大器單元輸出的多個(gè) 聲音信號(hào)中選擇一個(gè)作為處理目標(biāo)。
根據(jù)本發(fā)明的另一實(shí)施例,提供一種控制增益的方法。該方法包括以下 操作將輸入音頻信息轉(zhuǎn)換成對(duì)應(yīng)的聲音信號(hào);按預(yù)定的增益控制值放大聲 音信號(hào);根據(jù)聲音信號(hào),基于從預(yù)定目標(biāo)方向到達(dá)的聲音而分離出第一聲音
信號(hào)、以及基于從目標(biāo)方向之外的其他方向到達(dá)的聲音而分離出第二聲音信
號(hào);基于第一和第二聲音信號(hào)之間的相關(guān)性估算在聲音信號(hào)中包含的背景噪 音的功率;和基于所估算的背景噪音的功率和預(yù)定的功率目標(biāo)值來(lái)計(jì)算增益 控制值。
根據(jù)本發(fā)明一實(shí)施例,由于在不包含語(yǔ)音的噪音部分中的相關(guān)性很高, 所以基于所估算的背景噪音的功率而計(jì)算向放大器單元輸出的增益控制值。 以這樣的方式,就能計(jì)算增益控制值,并且基本實(shí)時(shí)地執(zhí)行控制。因此,可 減少在開始增益控制之前的延遲時(shí)間。此外,由于在開始增益控制之前的聲 音信號(hào)不需要累積,所以可減少語(yǔ)音識(shí)別應(yīng)用程序的響應(yīng)的延遲或語(yǔ)音通信 程序的語(yǔ)音質(zhì)量的降低。
此外,通過(guò)平滑時(shí)間變化,可阻止增益上的突變。因此,可穩(wěn)定諸如語(yǔ) 音識(shí)別等后續(xù)處理。具體地,當(dāng)基于聲音信號(hào)而以預(yù)定時(shí)間間隔離散地獲得 增益控制值時(shí),可阻止增益控制值中階梯方式的明顯變化,而不減小時(shí)間間
隔。
此外,通過(guò)動(dòng)態(tài)確定時(shí)間常數(shù),可控制在功率目標(biāo)值之后的增益控制值 的后繼性能。
此外,例如,當(dāng)按下汽車導(dǎo)航系統(tǒng)的語(yǔ)音開關(guān)以停止由汽車音頻單元引 起的噪音,并在隨后用戶開始講話時(shí),僅執(zhí)行用于增加增益的控制。因此, 可阻止由于增益的增加而引起的聲音接收單元的靈敏度的過(guò)度降低。從而可 阻止例如語(yǔ)音識(shí)別處理或語(yǔ)音通信處理等后續(xù)處理的質(zhì)量的降低。此外,例
如,當(dāng)在頻繁改變?cè)胍羲?noise level)的環(huán)境中使用聲音處理裝置時(shí),僅 執(zhí)行用于減少增益的控制。因此,由于不會(huì)發(fā)生因?yàn)樵鲆娴脑黾佣鸬囊?頻水平(audio levd)的過(guò)度增加,所以可阻止聲音信號(hào)的飽和。
此外,通過(guò)調(diào)節(jié)增益控制值,使得增益的控制帶寬處于控制范圍內(nèi),可 在放大器單元的控制范圍內(nèi)執(zhí)行控制。
此外,由于在不包含語(yǔ)音的噪音部分中的相關(guān)性很高,所以基于所估算 的背景噪音的功率來(lái)計(jì)算增益的目標(biāo)值,并且選擇聲音信號(hào),從而可獲得所 計(jì)算的增益。以這種方式,就能基本實(shí)時(shí)地計(jì)算增益控制值和基本實(shí)時(shí)地執(zhí) 行控制。因此,可減少在開始增益控制之前的延遲時(shí)間。此外,由于在開始 增益控制之前的聲音信號(hào)不需要累積,所以可減少語(yǔ)音識(shí)別應(yīng)用程序的響應(yīng) 延遲或語(yǔ)音通信程序的語(yǔ)音質(zhì)量的降低。
圖1是根據(jù)本發(fā)明第一示例性實(shí)施例的聲音處理裝置的示例性硬件配置 的框圖2是根據(jù)本發(fā)明第一示例性實(shí)施例的聲音處理裝置的示例性特征的功 能框圖3A和圖3B是示出由根據(jù)本發(fā)明第一示例性實(shí)施例的聲音處理裝置的 控制單元接收的聲音信號(hào)的曲線圖4A是示出根據(jù)本發(fā)明第一示例性實(shí)施例在通過(guò)聲音處理裝置的方向 聲音接收處理分離的語(yǔ)音信號(hào)中的時(shí)間變化,圖4B示出噪音信號(hào)中的時(shí)間 變化;
圖5是示出由根據(jù)本發(fā)明第一示例性實(shí)施例的聲音處理裝置的估算部估
算的背景噪音的功率的時(shí)間變化曲線圖6是示出在根據(jù)本發(fā)明第一示例性實(shí)施例的聲音處理裝置中背景噪音
的功率的時(shí)間變化和功率目標(biāo)值的曲線圖7是示出在根據(jù)本發(fā)明第一示例性實(shí)施例的聲音處理裝置中的原始增 益控制值和增益控制值的曲線圖8是根據(jù)本發(fā)明第一示例性實(shí)施例的聲音處理裝置執(zhí)行的示例性處理 的操作圖9是根據(jù)本發(fā)明第二示例性實(shí)施例的聲音處理裝置執(zhí)行的示例性處理 的操作圖10是示出根據(jù)第三示例性實(shí)施例在聲音處理裝置中的原始增益控制 值和增益控制值的時(shí)間變化的曲線圖11是根據(jù)本發(fā)明第三示例性實(shí)施例的聲音處理裝置執(zhí)行的示例性處 理的操作圖12是根據(jù)本發(fā)明第四示例性實(shí)施例的聲音處理裝置的示例性特征的 功能框圖13是根據(jù)本發(fā)明第四示例性實(shí)施例的聲音處理裝置執(zhí)行的示例性處 理的操作圖14是根據(jù)本發(fā)明第五示例性實(shí)施例的聲音處理裝置的示例性硬件配 置的框圖15是根據(jù)本發(fā)明第五示例性實(shí)施例的聲音處理裝置的示例性特征的 功能框圖16是示出根據(jù)本發(fā)明第五示例性實(shí)施例的聲音處理裝置中使用的增 益表的細(xì)節(jié)的曲線圖17是根據(jù)本發(fā)明第五實(shí)施例的聲音處理裝置執(zhí)行的示例性處理的操 作圖18是根據(jù)本發(fā)明第六示例性實(shí)施例的聲音處理裝置的示例性特征的 功能框圖19是根據(jù)本發(fā)明第七示例性實(shí)施例的聲音處理裝置的示例性特征的 功能框圖20是根據(jù)本發(fā)明第八示例性實(shí)施例的聲音處理系統(tǒng)的示例性硬件配
置的框圖21是根據(jù)本發(fā)明第八示例性實(shí)施例的聲音處理系統(tǒng)的示例性特征的 功能框圖;以及
圖22是現(xiàn)有聲音處理裝置的功能框圖。
具體實(shí)施例方式
以下將參照附圖描述本發(fā)明的各個(gè)示例性實(shí)施例。
第一示例性實(shí)施例
圖1是根據(jù)本發(fā)明第一示例性實(shí)施例的聲音處理裝置的示例性硬件配置 的框圖。聲音處理裝置l包括多個(gè)聲音接收單元IO, 10,...,用于將包含 由講話者(speaker)發(fā)出的語(yǔ)音和噪音的輸入聲音轉(zhuǎn)換成模擬聲音信號(hào);放 大器單元ll, 11,...(例如,可變?cè)鲆娣糯笃?,用于放大聲音信號(hào);A/D 轉(zhuǎn)換器12, 12,...,用于將模擬聲音信號(hào)轉(zhuǎn)換成數(shù)字信號(hào);和控制單元13, 例如數(shù)字信號(hào)處理器(DSP)。
放大器單元11基于預(yù)設(shè)的增益控制值按放大度(amplification degree) 對(duì)聲音信號(hào)進(jìn)行放大。每個(gè)A/D轉(zhuǎn)換器12以例如8000Hz或12000Hz的采 樣頻率對(duì)模擬聲音信號(hào)采樣,以將模擬聲音信號(hào)轉(zhuǎn)換成數(shù)字信號(hào)。然后,A/D 轉(zhuǎn)換器12將數(shù)字聲音信號(hào)輸出至控制單元13。聲音處理裝置l包括多組 聲音接收單元IO、放大器單元11和A/D轉(zhuǎn)換器12。以下,描述包括兩組聲 音接收單元10、放大器單元11和A/D轉(zhuǎn)換器12的配置。此外,根據(jù)需要, 將這兩個(gè)聲音接收單元10和IO稱作"第一聲音接收單元10a"和"第二聲音接 收單元10b"。
控制單元13是包括固件(例如計(jì)算機(jī)程序100和數(shù)據(jù))的算術(shù)電路。 控制單元13執(zhí)行以固件形式嵌入的計(jì)算機(jī)程序100。聲音處理裝置1還包括 多種機(jī)構(gòu),例如處理機(jī)構(gòu)、操作單元和輸出機(jī)構(gòu),以用做系統(tǒng),例如汽車導(dǎo) 航系統(tǒng)?;蛘?,聲音處理裝置1可通過(guò)使用在汽車導(dǎo)航系統(tǒng)中包括的計(jì)算機(jī) 來(lái)實(shí)現(xiàn)。
圖2是根據(jù)本發(fā)明第一示例性實(shí)施例的聲音處理裝置1的示例性特征的 功能框圖。通過(guò)執(zhí)行計(jì)算機(jī)程序100,控制單元13產(chǎn)生程序模塊,這些程序
模塊被用作分離部130,基于所到達(dá)的方向來(lái)分離聲音信號(hào);估算部131,
基于分離的聲音信號(hào)來(lái)估算在聲音信號(hào)中包括的背景噪音的功率;導(dǎo)出部 132,基于背景噪音的估算功率和預(yù)定的功率目標(biāo)值來(lái)計(jì)算要輸出到放大器 單元11的增益控制值;以及應(yīng)用部133,基于包括講話者(speaker)的語(yǔ)音 的語(yǔ)音信號(hào)和通過(guò)分離部130分離的語(yǔ)音信號(hào),執(zhí)行語(yǔ)音識(shí)別處理或語(yǔ)音通 信處理。這些程序模塊的功能可由包括算術(shù)電路,例如超大規(guī)模集成電路 (VLSI)的硬件來(lái)實(shí)現(xiàn)。
接下來(lái)描述根據(jù)本發(fā)明第一示例性實(shí)施例的聲音處理裝置1執(zhí)行的信號(hào) 處理??刂茊卧?3基于由第一聲音接收單元10a接收的聲音接收數(shù)字聲音 信號(hào),作為第一輸入信號(hào)in—l(t),并且還基于由第二聲音接收單元10b接收 的聲音接收數(shù)字聲音信號(hào),作為第二輸入信號(hào)in—2(t)。變量t表示以例如 8000Hz或12000Hz的采樣頻率對(duì)模擬聲音信號(hào)采樣時(shí)識(shí)別每個(gè)采樣的采樣 號(hào),并且將其轉(zhuǎn)換成數(shù)字格式。
圖3A和圖3B是示出由控制單元13接收的聲音信號(hào)的曲線圖。在這些 圖中,橫坐標(biāo)表示與采樣時(shí)間對(duì)應(yīng)的采樣號(hào),縱坐標(biāo)表示聲音信號(hào)的振幅。 圖3A是第一輸入信號(hào)in—l(t)的曲線圖,圖3B是第二輸入信號(hào)in—2(t)的曲線 圖。通過(guò)配置第一聲音接收單元10a和第二聲音接收單元10b,以在其間具 有適當(dāng)?shù)拈g距(spacing),根據(jù)聲音到達(dá)的方向,基于由第一聲音接收單元 10a接收的聲音和第二聲音接收單元10b接收的聲音而在聲音信號(hào)之間出現(xiàn) 相差。分離部130基于例如在第一輸入信號(hào)in—l(t)和第二輸入信號(hào)in—2(t)之 間的相差估算聲音到達(dá)的方向。然后,分離部130執(zhí)行方向性聲音接收處理, 將聲音信號(hào)分離成基于從預(yù)定目標(biāo)方向(例如,朝向講話者嘴(mouth)的 方向)到達(dá)的聲音的聲音信號(hào)以及基于從其他方向到達(dá)的聲音的聲音信號(hào)。
在由分離部130執(zhí)行的方向聲音接收處理中,通過(guò)基于第一輸入信號(hào) in一l(t)和第二輸入信號(hào)in—2(t)來(lái)執(zhí)行用以阻止目標(biāo)方向之外的其他方向到達(dá) 的聲音的同步提取,來(lái)提取基于從目標(biāo)方向(例如,由講話者發(fā)出的語(yǔ)音) 到達(dá)的聲音的聲音信號(hào)的語(yǔ)音信號(hào)signal(t)。隨后,通過(guò)執(zhí)行用以抑制 (suppressing)從目標(biāo)方向到達(dá)的聲音的同步提取,來(lái)提取基于從目標(biāo)方向 之外的方向到達(dá)的聲音的聲音信號(hào),即基于背景噪音的噪音信號(hào)noise(t)。
圖4A和圖4B是示出根據(jù)本發(fā)明第一示例性實(shí)施例的聲音處理裝置1
執(zhí)行的方向聲音接收處理分離的聲音信號(hào)中的時(shí)間變化的曲線圖。在這些圖 中,橫坐標(biāo)表示與時(shí)間對(duì)應(yīng)的采樣號(hào)t,縱坐標(biāo)表示聲音信號(hào)的振幅。圖4A
是基于從預(yù)定目標(biāo)方向到達(dá)的聲音的聲音信號(hào),即語(yǔ)音信號(hào)signal(t)的曲線 圖,圖4B是基于從預(yù)定目標(biāo)方向之外的其他方向到達(dá)的聲音的聲音信號(hào), 即噪音信號(hào)noise(t)的曲線圖。從語(yǔ)音信號(hào)signal(t)和噪音信號(hào)noise(t)之間的 比較可以看出,針對(duì)語(yǔ)音信號(hào)的特定的峰值出現(xiàn)在語(yǔ)音信號(hào)signal(t)。分離 部130將語(yǔ)音信號(hào)signal(t)輸出至應(yīng)用部133,應(yīng)用部133基于語(yǔ)音信號(hào) signal(t)執(zhí)行語(yǔ)音識(shí)別處理或語(yǔ)音通信處理。此外,分離部130將語(yǔ)音信號(hào) signal(t)和噪音信號(hào)noise(t)輸出至估算部131。
通過(guò)使用輸入的語(yǔ)音信號(hào)signal(t)和噪音信號(hào)noise(t),估算部131在幀 對(duì)幀的層面上產(chǎn)生語(yǔ)音信號(hào)signal(n)和噪音信號(hào)noise(n),其中一個(gè)幀包括例 如512個(gè)采樣信號(hào)。這里,變量n是識(shí)別每個(gè)幀的幀號(hào)。隨后,估算部131 使用以下等式(1)來(lái)估算背景噪音的功率pow—noise(n),所述等式(1)用 于計(jì)算在基于幀的語(yǔ)音信號(hào)signal(n)和基于幀的噪音信號(hào)noise(n)之間的關(guān) 聯(lián)
其中pow—noise(n)是背景噪音的功率,n是幀號(hào),signal(n)是語(yǔ)音信號(hào), noise(n)是噪音信號(hào)。
圖5是示出由聲音處理裝置1的估算部131估算的背景噪音的功率 pow—noise(n)的時(shí)間變化曲線圖。在該圖中,橫坐標(biāo)表示與時(shí)間對(duì)應(yīng)的幀號(hào)n, 縱坐標(biāo)表示以分貝為單位的背景噪音的功率pow—noise(n)。通過(guò)計(jì)算基于到 達(dá)的方向而分離的語(yǔ)音信號(hào)signal(n)和噪音信號(hào)noise(n)之間的關(guān)聯(lián),以及通 過(guò)使用表示與背景噪音有關(guān)的信號(hào)相關(guān)性高于與語(yǔ)音有關(guān)的信號(hào)相關(guān)性的 特征,可估算背景噪音的功率pow—noise(n)。此外,通過(guò)以這樣的方式估算 相關(guān)性,可減少語(yǔ)音和噪音不規(guī)則(erratic)的效果。隨后,估算部131將 表示背景噪音的功率pow—noise(n)的信息輸出至導(dǎo)出部132。
導(dǎo)出部132通過(guò)使用背景噪音的功率pow—noise(n)和預(yù)定的功率目標(biāo)值 ref以及通過(guò)使用以下等式(2)來(lái)計(jì)算原始增益控制值adj,(n),該值是輸出
至放大器單元11和11的增益控制值adj(n)的來(lái)源, adj'(n) = ref - pow—noise(n) ( 2 )
其中adj'(n)是原始增益控制值,ref是功率目標(biāo)值。
圖6是示出在聲音處理裝置1中背景噪音的功率pow—noise(n)和功率目 標(biāo)值ref的時(shí)間變化的曲線圖。在該圖中,橫坐標(biāo)表示與時(shí)間對(duì)應(yīng)的幀號(hào)n, 縱坐標(biāo)表示以分貝為單位的背景噪音的功率pow—noise(n)和功率目標(biāo)值ref。 在圖6中,實(shí)線表示背景噪音的功率pow—noise(n),虛線表示功率目標(biāo)值ref。 使用等式(2)獲得的原始增益控制值adj,(n)是背景噪音的功率powjoise(n) 與功率目標(biāo)值ref之間的差值。在聲音處理裝置1中,確定放大器單元11和 11的增益控制值adj(t),從而背景噪音的功率pow—noise(n)等于功率目標(biāo)值 ref。這樣,調(diào)節(jié)聲音接收單元10和10的靈敏度。
此外,導(dǎo)出部132通過(guò)使用以下等式對(duì)原始增益控制值adj'(n)的時(shí)間變 化進(jìn)行平滑來(lái)計(jì)算向放大器單元11輸出的增益控制值adj(t):
adj(t) = a.adj(t - 1) + (1 - oc).adj'(n) (3)
其中adj(t)是增益控制值,ct是大于或等于0和小于1的時(shí)間常數(shù)。
圖7是示出在聲音處理裝置1中的原始增益控制值adj'(n)和增益控制值 adj(t)的曲線圖。在該圖中,橫坐標(biāo)表示與采樣時(shí)間對(duì)應(yīng)的采樣號(hào)t,縱坐標(biāo) 表示以分貝為單位的增益控制的量。在圖7中,虛線表示具有幀號(hào)n的變量 的原始增益控制值adj'(n),實(shí)線表示具有采樣號(hào)t的變量的增益控制值adj(t)。 由于原始增益控制值adj'(n)的變量是幀號(hào)n,所以將幀號(hào)n轉(zhuǎn)換成采樣號(hào)t。 之后,示出該轉(zhuǎn)換。在本實(shí)施例所示的實(shí)例中,由于512個(gè)采樣對(duì)應(yīng)于一個(gè) 幀,所以原始增益控制值adj'(n)的值形成具有以階梯形式變化的離散值的曲 線。然而,由于使用等式(3)進(jìn)行平滑的增益控制值adj(t)的時(shí)間變化針對(duì) 于采樣號(hào)t連續(xù)變化,所以該增益不是離散的或突然變化的。隨后,導(dǎo)出部 132輸出所計(jì)算增益控制值adj(t)至放大器單元11和11 ,其將輸入的增益控 制值adj(t)設(shè)置為增益。
接下來(lái),參照?qǐng)D8描述由聲音處理裝置1執(zhí)行的示例性處理。聲音處理 裝置1基于由第一聲音接收單元10a和第二聲音接收單元10b接收的聲音產(chǎn) 生聲音信號(hào),如操作S101。然后,聲音處理裝置1輸出所產(chǎn)生的聲音信號(hào)中 的每一個(gè)至放大器單元11和11中對(duì)應(yīng)的一個(gè)。
放大器單元11和11中的每一個(gè)基于所設(shè)置的增益控制值放大由聲音接 收單元10和10中對(duì)應(yīng)的一個(gè)產(chǎn)生的聲音信號(hào),如操作S102,并輸出所放大
的聲音信號(hào)至A/D轉(zhuǎn)換器12和12中對(duì)應(yīng)的一個(gè)。
A/D轉(zhuǎn)換器12和12執(zhí)行A/D轉(zhuǎn)換處理,用于將模擬聲音信號(hào)轉(zhuǎn)換成數(shù) 字信號(hào),如操作S103。之后,A/D轉(zhuǎn)換器12和12輸出第一輸入信號(hào)in—l(t) 和第二輸入信號(hào)in—2(t)至控制單元13。
通過(guò)由分離部130執(zhí)行的處理,控制單元13基于第一輸入信號(hào)in—l(t) 和第二輸入信號(hào)in—2(t)來(lái)估算到達(dá)的方向,并且分離出基于從目標(biāo)方向到達(dá) 的聲音的聲音信號(hào),即基于從講話者發(fā)出的語(yǔ)音的語(yǔ)音信號(hào)signal(t),以及 基于從目標(biāo)方向之外的其他方向到達(dá)的聲音的聲音信號(hào),即基于背景噪音的 噪音信號(hào)noise(t),如操作S104。
通過(guò)估算部131執(zhí)行的處理,控制單元13基于語(yǔ)音信號(hào)signal(t)和噪音 信號(hào)noise(t)之間的相關(guān)性來(lái)估算背景噪音的功率pow—noise(n),如操作 S105。
通過(guò)導(dǎo)出部132執(zhí)行的處理,控制單元13基于背景噪音的功率 pow—noise(n)和功率目標(biāo)值ref計(jì)算原始增益控制值adj,(n),如操作S106。 通過(guò)平滑化原始增益控制值adj'(n)的時(shí)間變化,控制單元13計(jì)算增益控制 值adj(t),如操作S107。然后,控制單元13輸出所計(jì)算的增益控制值adj(t) 至放大器單元11和11 。
放大器單元11和11基于輸入的增益控制值adj(t)設(shè)置增益,如操作 S108。將操作S104中分離的語(yǔ)音信號(hào)signal(t)輸出至應(yīng)用部133。應(yīng)用部133 基于語(yǔ)音信號(hào)signal(t)執(zhí)行語(yǔ)音識(shí)別處理或語(yǔ)音通信處理。
第二示例性實(shí)施例
基于在第一示例性實(shí)施例的配置中背景噪音的功率的估算結(jié)果和功率 目標(biāo)值之間的比較結(jié)果,第二示例性實(shí)施例確定是否需要增益控制值的計(jì) 算。由于第二示例性實(shí)施例的示例性硬件配置和特征與第一示例性實(shí)施例中 的相同,所以不再重復(fù)描述。在以下的說(shuō)明中,在描述中使用類似的標(biāo)號(hào)描 述與上述第一示例性實(shí)施例中所用組件類似的組件。
在第二示例性實(shí)施例中,導(dǎo)出部132將背景噪音的功率pow—noise(n)與
預(yù)定的功率目標(biāo)值ref相比較。僅當(dāng)大小關(guān)系滿足預(yù)定條件時(shí),導(dǎo)出部132 才更新增益控制值adj(t)。更具體地,在第二示例性實(shí)施例中,僅當(dāng)背景噪 音的功率pow—noise(n)大于功率目標(biāo)值ref時(shí),更新增益控制值adj(t)。在第 二示例性實(shí)施例中,使用以下的條件等式(4)來(lái)代替等式(2):
<formula>formula see original document page 15</formula> (4)
如條件等式(4)所示,在第二示例性實(shí)施例中,如果背景噪音的功率 pow一noise(n)大于功率目標(biāo)值ref,則使用與第一示例性實(shí)施例中描述的等式 (2)類似的等式計(jì)算原始增益控制值adj'(n)。然而,如果背景噪音的功率 pow—noise(n)小于或等于功率目標(biāo)值ref,則將原始增益控制值adj,(n)設(shè)置為 "0"。為了從原始增益控制值adj,(n)獲得增益控制值adj(t),使用在第一示例 性實(shí)施例中描述的等式(3)。因此,在第二示例性實(shí)施例中,僅在背景噪 音的功率pow—noise(n)大于功率目標(biāo)值ref時(shí),才更新增益控制值adj(t)。
接下來(lái),參照?qǐng)D9描述根據(jù)第二示例性實(shí)施例的聲音處理裝置1執(zhí)行的 示例性處理。在第二示例性實(shí)施例中,用基于上述條件等式(4)的處理來(lái) 替換圖8的操作圖中所示的根據(jù)第一示例性實(shí)施例的操作S106的處理。
首先,聲音處理裝置1執(zhí)行在第一示例性實(shí)施例中所述的操作S101至 S105。隨后,通過(guò)由導(dǎo)出部132執(zhí)行的處理,控制單元13確定背景噪音的 功率pow—noise(n)是否大于功率目標(biāo)值ref,如操作S201 。
如果在操作S201中背景噪音的功率pow—noise(n)大于功率目標(biāo)值ref(在 操作S201中為"是"),則通過(guò)由導(dǎo)出部132執(zhí)行的處理,控制單元13基于 背景噪音的功率pow一noise(n)和功率目標(biāo)值ref計(jì)算原始增益控制值adj'(n), 如操作S202。
如果在操作S202中背景噪音的功率pow—noise(n)小于或等于功率目標(biāo) 值ref (在操作S201中為"否"),則由導(dǎo)出部132執(zhí)行的處理,控制單元13 將原始增益控制值adj'(n)設(shè)置為"0",如操作S203。
隨后,聲音處理裝置1執(zhí)行在第一示例性實(shí)施例中所述的操作S107之 后的處理。在該方法中,僅當(dāng)背景噪音的功率pow—noise(n)大于功率目標(biāo)值 ref時(shí),更新增益控制值adj(t)。因此,例如,可在按下汽車導(dǎo)航系統(tǒng)的語(yǔ)音
開關(guān)以停止由汽車音頻單元產(chǎn)生的噪音,并隨后用戶開始講話的情況下,采 用該方法。這樣,由于沒(méi)有發(fā)生因?yàn)樵鲆娴脑黾佣鴮?dǎo)致的聲音接收單元10 和10的靈敏度的過(guò)度增加,所以可阻止聲音信號(hào)的飽和。
僅當(dāng)背景噪音的功率pow一noise(n)小于功率目標(biāo)值ref時(shí),更新增益控制 值adj(t),將條件表達(dá)式(4)改變成以下條件表達(dá)式(5): if (pow—noise(n) < ref)
then adj'(n) = ref-pow—noise(n) else adj'(n) = 0 (5) 在該方法中,通過(guò)使用條件表達(dá)式(5),僅當(dāng)背景噪音的功率pow—noise(n) 小于功率目標(biāo)值ref時(shí),更新增益控制值adj(t)。因此,例如,可對(duì)于噪音水 平頻繁改變的情況下使用該方法。因此,由于不會(huì)發(fā)生增益減少所帶來(lái)的音 頻水平的過(guò)度減少,所以可阻止聲音信號(hào)的保護(hù)。
第三示例性實(shí)施例
在第三示例性實(shí)施例中,根據(jù)在第一示例性實(shí)施例的配置中所獲得的原 始增益控制值和先前的增益控制值之間的大小關(guān)系來(lái)確定時(shí)間常數(shù)。由于第 三示例性實(shí)施例的示例性硬件配置和特征與第一示例性實(shí)施例中的相同,所 以不再重復(fù)描述。在以下的說(shuō)明中,在描述中使用類似的標(biāo)號(hào)描述與上述第 一示例性實(shí)施例中所用組件類似的組件。
在第三示例性實(shí)施例中,導(dǎo)出部132將所獲得的原始增益控制值adj'(n) 和先前的增益控制值adj(t-l)相比較。如果所獲得的原始增益控制值adj'(n) 小于先前的增益控制值adj(t-l),則使用第一時(shí)間常數(shù)al (0£od<l)。然而, 如果所獲得的原始增益控制值adj,(n)大于或等于先前的增益控制值adj(t-l), 則使用第二時(shí)間常數(shù)a2 (0≤x2<l)。在第三示例性實(shí)施例中,使用以下的 條件等式(6)代替等式(3):
if(adj(t-l)<adj'(n))
then adj(t) = ocl-adj(t - 1) + (1 - otl).adj'(n)
else adj(t) = a2.adj(t-1) + (1 - a2).adj'(n) (6)
其中al是大于或等于0并且小于1的第一時(shí)間常數(shù),(x2是大于或等于 0并且小于1的第二時(shí)間常數(shù)。
如條件表達(dá)式(6)所示,當(dāng)增益控制值adj(t)隨時(shí)間減少時(shí),可通過(guò)基 于原始增益控制值adj'(n)和先前的增益控制值adj(t-l)來(lái)確定時(shí)間常數(shù),具體 地,通過(guò)將第二時(shí)間常數(shù)a2設(shè)置為大于第一時(shí)間常數(shù)al的值,來(lái)相對(duì)增加 在平滑化之前隨著原始增益控制值adj'(n)的增益控制值adj(t)的后繼性能。在 將第二時(shí)間常數(shù)ci2設(shè)置為小于第一時(shí)間常數(shù)al的值的情況下,當(dāng)增益控制 值adj(t)隨時(shí)間減少時(shí),可相對(duì)增加在平滑化之前隨著原始增益控制值adj'(n) 的增益控制值adj(t)的后繼性能。
圖10是示出根據(jù)本發(fā)明第三示例性實(shí)施例在聲音處理裝置1中原始增 益控制值adj'(n)和增益控制值adj(t)的時(shí)間變化的曲線圖。在該圖中,橫坐標(biāo) 表示與采樣時(shí)間對(duì)應(yīng)的采樣號(hào)t,縱坐標(biāo)表示以分貝為單位上的增益控制的 數(shù)量。在圖10中,虛線表示以幀號(hào)n為變量的原始增益控制值adj'(n),實(shí) 線表示以采樣號(hào)t為變量的增益控制值adj(t)。由于原始增益控制值adj'(n) 的變量是幀號(hào)n,所以將幀號(hào)n轉(zhuǎn)換成采樣號(hào)t。之后,示出這種轉(zhuǎn)換。在圖 10中,第一時(shí)間常數(shù)cd與第一示例性實(shí)施例的時(shí)間常數(shù)a的值相同,第二 時(shí)間常數(shù)a2大于第一示例性實(shí)施例的值。從與第一示例性實(shí)施例的圖7相 比較可以看出,當(dāng)增益控制值adj(t)隨時(shí)間減少時(shí),使用大于第一示例性實(shí) 施例的時(shí)間常數(shù)ot的第二時(shí)間常數(shù)a2。以這種方式,可增加在平滑化之前跟 隨在原始增益控制值adj'(n)之后的增益控制值adj(t)的后繼性能。
接下來(lái),描述根據(jù)本發(fā)明第三示例性實(shí)施例的由聲音處理裝置1執(zhí)行的 示例性處理。圖11是根據(jù)本發(fā)明第三示例性實(shí)施例的聲音處理裝置1執(zhí)行 的示例性處理的操作圖。在第三示例性實(shí)施例中,通過(guò)基于上述條件表達(dá)式 (6)的處理代替在第一示例性實(shí)施例中所述的操作圖的操作S107中執(zhí)行的 處理。
首先,聲音處理裝置1執(zhí)行在第一示例性實(shí)施例中所述的操作S101至 S106。隨后,通過(guò)由導(dǎo)出部132執(zhí)行的處理,聲音處理裝置1的控制單元13 比較原始增益控制值adj'(n)和先前的增益控制值adj(t-l),以確定原始增益控 制值adj,(n)是否大于先前的增益控制值adj(t-l),如操作S301 。
如果在操作S301中原始增益控制值adj'(n)大于先前的增益控制值 adj(t-l)(在操作S301中為"是"),則通過(guò)由導(dǎo)出部132執(zhí)行的處理,聲音 處理裝置1的控制單元13確定要平滑化為第一時(shí)間常數(shù)oil的時(shí)間常數(shù),如
操作S302。通過(guò)使用所確定的第一時(shí)間常數(shù)al來(lái)平滑化原始增益控制值 adj'(n)的時(shí)間變化,控制單元13計(jì)算增益控制值adj(t),如操作S303。
然而,如果在操作S301中原始增益控制值adj'(n)小于或等于先前的增 益控制值adj(t-l)(在操作S301中為"否"),則通過(guò)由導(dǎo)出部132執(zhí)行的處 理,聲音處理裝置1的控制單元13確定要平滑化為大于第一時(shí)間常數(shù)cd的 第二時(shí)間常數(shù)a2的時(shí)間常數(shù),如操作S304。通過(guò)使用所確定的第二時(shí)間常 數(shù)(x2來(lái)平滑化原始增益控制值adj'(n)的時(shí)間變化,控制單元13計(jì)算增益控 制值adj(t),如操作S305。
之后,聲音處理裝置1執(zhí)行在第一示例性實(shí)施例所述的操作S108之后 的處理。
第四示例性實(shí)施例
在第四示例性實(shí)施例中,改變?cè)诘谝皇纠詫?shí)施例中的放大器單元的控 制方法。由于第四示例性實(shí)施例的示例性硬件配置與第一示例性實(shí)施例中的 相同,所以不再重復(fù)描述。在以下的說(shuō)明中,在描述中使用類似的標(biāo)號(hào)描述 與上述第 一 示例性實(shí)施例中所用組件類似的組件。
圖12是根據(jù)本發(fā)明第四示例性實(shí)施例的聲音處理裝置1的示例性特征 的功能框圖。通過(guò)根據(jù)本實(shí)施例執(zhí)行計(jì)算機(jī)程序100,控制單元13產(chǎn)生用作 分離部130、估算部131、導(dǎo)出部132和應(yīng)用部133的程序模塊。
接下來(lái)描述根據(jù)第四示例性實(shí)施例的聲音處理裝置1執(zhí)行的信號(hào)處理。 在第一示例性實(shí)施例中,從控制單元13輸出至放大器單元11和11的增益 控制值adj(t)是增益的相關(guān)值,其是針對(duì)于在執(zhí)行校正之前的增益的差值。 如果放大器單元11和11具有基于該差值自動(dòng)校正增益的功能,則可基于輸 入增益控制值adj(t)執(zhí)行增益控制,而不會(huì)出現(xiàn)問(wèn)題。然而,如果放大器單 元11和11不具有這種功能,并且直接使用輸入增益控制值adj(t)用于增益, 則需要轉(zhuǎn)換增益控制值adj(t),以變?yōu)樵鲆姹旧怼T诘谒氖纠詫?shí)施例中, 根據(jù)作為相對(duì)值的增益控制值adj(t)來(lái)計(jì)算出作為絕對(duì)值的增益控制值 amp—gain(t)。此外,執(zhí)行使用所計(jì)算的增益控制值amp—gain(t)的控制,從而 放大器單元11和11中的每個(gè)的增益控制范圍保持在由最大值和最小值所確 定的給定的控制范圍內(nèi)。 在第四示例性實(shí)施例中,導(dǎo)出部132使用以下等式根據(jù)增益控制值adj(t) 計(jì)算累加值total一adj(t),其中增益控制值adj(t)是相對(duì)于先前的增益控制值 adj(t-l)的值,所述等式如下
total—adj(t) = total—adj(t - 1) + adj(t) ( 7 )
其中total一adj(t)是adj(t)的累加值。
此外,導(dǎo)出部132調(diào)節(jié)累加值,從而使用以下條件等式將增益控制范圍 保持在由放大器單元11的規(guī)格(specification)所確定的最大值max—amp—gain 和最小值min—amp_gain之間的給定控制范圍內(nèi),所述等式如下
if ((total—adj(t) + init—amp_gain) 〉 max—amp—gain)
then total—adj(t) = max—amp—gain - init—amp—gain
if ((total—adj(t) + init—amp—gain) < min—amp—gain)
then total—adj(t) = min_amp—gain畫init_amp—gain (8)
其中max—amp—gain是放大器單元11和11的增益的最大值, min—amp—gain是放大器單元11禾fUl的增益的最小值,init—amp—gain是放大 器單元11和11的增益的初始值。
此外,導(dǎo)出部132使用以下等式計(jì)算作為放大器單元11和11的絕對(duì)控 制值的增益控制值amp—gain(t),所述等式如下
amp—gain(t) = total_adj(t) + init一amp一gain (9)
其中amp一gain(t)是增益控制值。
接下來(lái)描述根據(jù)本發(fā)明第四示例性實(shí)施例的聲音處理裝置1執(zhí)行的示例 性處理。圖13是根據(jù)本發(fā)明第四示例性實(shí)施例的聲音處理裝置1執(zhí)行的示 例性處理的操作圖。在第四示例性實(shí)施例中,在完成第一示例性實(shí)施例中所 述的操作圖的操作S107中執(zhí)行的處理之后,執(zhí)行基于上述等式(7)至(9) 的處理。
首先,聲音處理裝置1執(zhí)行在第一示例性實(shí)施例中所述的操作S101至 S107。隨后,通過(guò)由導(dǎo)出部132執(zhí)行的處理,聲音處理裝置1的控制單元13 根據(jù)所獲得的增益控制值adj(t)和先前的增益控制值adj(t-l)計(jì)算累積值 total—adj(t),如操作S401。隨后,控制單元13調(diào)節(jié)所計(jì)算的累積值total—adj(t), 使得累積值total—adj(t)落于由放大器單元11的規(guī)格確定的最大值 max—amp—gain和最小值min—amp—gain之間的控制范圍之內(nèi),如操作S402。
之后,通過(guò)由導(dǎo)出部132執(zhí)行的處理,聲音處理裝置1的控制單元13
根據(jù)所調(diào)節(jié)的累積值total—adj(t)和放大器單元11和11的增益的初始值 init—amp—gain計(jì)算用于控制放大器單元11禾口 11的增益控制值amp—gain(t) 的絕對(duì)值,如操作S403。然后,控制單元13輸出所獲得的增益控制值 amp一gain(t)至放大器單元11和11。
聲音處理裝置1的放大器單元11和11將輸入增益控制值amp—gain(t) 設(shè)置為增益,如操作S404。調(diào)節(jié)累積值total_adj(t)使得累積值total_adj(t) 落于最大值max—amp一gain和最小值min—amp一gain之間的給定控制范圍之內(nèi) 的方法不限于此。例如,可采用多種其他方法中的一種。
第五示例性實(shí)施例
盡管在第一示例性實(shí)施例中控制放大器單元的增益,但是在第五示例性 實(shí)施例中使用了具有不同增益的多組放大器單元。在以下的說(shuō)明中,在描述 中使用類似的標(biāo)號(hào)描述與上述第一示例性實(shí)施例中所用組件類似的組件,且 不再重復(fù)對(duì)其的描述。
圖14是根據(jù)本發(fā)明第五示例性實(shí)施例的聲音處理裝置1的示例性硬件 配置的框圖。根據(jù)第五示例性實(shí)施例,聲音處理裝置1包括多組放大器單元 11和ll...,每組對(duì)具有固定增益的聲音信號(hào)進(jìn)行放大。各組的增益不同。 在假設(shè)使用三組放大器單元11、 11和11的情況下進(jìn)行以下說(shuō)明。根據(jù)需要, 將具有最大增益的組的放大器單元11和11指定為第一放大器單元11a和 lla。將具有第二大增益的組的放大器單元11和11指定為第二放大器單元 llb和llb。將具有最小增益的組的放大器單元11和11指定為第三放大器 單元llc和llc。此外,A/D轉(zhuǎn)換器12、 12...中的每個(gè)連接至放大器單元11 中對(duì)應(yīng)的一個(gè)。將對(duì)應(yīng)于A/D轉(zhuǎn)換器12、 12、...中每一個(gè)轉(zhuǎn)換成數(shù)字信號(hào) 的每一個(gè)聲音信號(hào)輸出至控制單元13。
圖15是根據(jù)本發(fā)明第五示例性實(shí)施例的聲音處理裝置1的示例性特征 的功能框圖。通過(guò)根據(jù)本發(fā)明實(shí)施例執(zhí)行計(jì)算機(jī)程序100,控制單元13產(chǎn)生 程序模塊,用作多個(gè)分離部130、 130和130,估算部131、用于計(jì)算增益 的目標(biāo)值的導(dǎo)出部132,應(yīng)用部133,以及基于增益的目標(biāo)值和放大器單元 11、 11和11中每一個(gè)的增益選擇聲音信號(hào)的選擇部134。導(dǎo)出部132包括
增益表132a,其表示在增益的目標(biāo)值和聲音信號(hào)的選擇所需的系數(shù)之間的關(guān) 系。
多個(gè)分離部130、 130和130分別對(duì)應(yīng)于第一放大器單元lla和lla、第 二放大器單元llb和llb、以及第三放大器單元llc和llc。之后,根據(jù)需 要,將與第一放大器單元lla和lla對(duì)應(yīng)的分離部130指定為第一分離部 130a。將與第二放大器單元llb和llb對(duì)應(yīng)的分離部130指定為第二分離部 130b。類似地,將與第三放大器單元llc和llc對(duì)應(yīng)的分離部130指定為第 三分離部130c。
接下來(lái),描述根據(jù)本發(fā)明第五示例性實(shí)施例的由聲音處理裝置1執(zhí)行的 示例性處理。在控制單元13中,第一聲音接收單元10a接收聲音,并且第 一放大器單元lla放大聲音信號(hào)。將所放大的聲音信號(hào)轉(zhuǎn)換成數(shù)字聲音信號(hào)。 第一分離部130a接收數(shù)字聲音信號(hào)作為第一高增益輸入信號(hào)in—1—H(t)。此 外,第二聲音接收單元10b接收聲音,并且第一放大器單元lla放大聲音信 號(hào)。將所放大的聲音信號(hào)轉(zhuǎn)換成數(shù)字聲音信號(hào)。第一分離部130a接收數(shù)字 聲音信號(hào)作為第二高增益輸入信號(hào)in—2—H(t)。此外,在控制單元13中,第 二放大器單元lib基于由第一聲音接收單元10a接收的聲音來(lái)放大聲音信 號(hào)。將所放大的聲音信號(hào)轉(zhuǎn)換成數(shù)字聲音信號(hào)。第二分離部130b接收數(shù)字 聲音信號(hào)作為第一中增益輸入信號(hào)in—1—M(t)。此外,第二放大器單元lib 基于由第二聲音接收單元10b接收的聲音放大聲音信號(hào)。將所放大的聲音信 號(hào)轉(zhuǎn)換成數(shù)字聲音信號(hào)。第二分離部130b接收數(shù)字聲音信號(hào)作為第二中增 益輸入信號(hào)in—2—M(t)。此外,在控制單元13中,第三放大器單元llc基于 由第一聲音接收單元lOa接收的聲音來(lái)放大聲音信號(hào)。將所放大的聲音信號(hào) 轉(zhuǎn)換成數(shù)字聲音信號(hào)。第三分離部130c接收數(shù)字聲音信號(hào)作為第一低增益 輸入信號(hào)in—1—L(t)。此外,第三放大器單元llc和llc基于由第二聲音接收 單元lOb接收的聲音放大聲音信號(hào)。將所放大的聲音信號(hào)轉(zhuǎn)換成數(shù)字聲音信 號(hào)。第三分離部130c接收數(shù)字聲音信號(hào)作為第二低增益輸入信號(hào)in—2—L(t)。
在由第一分離部130a執(zhí)行的方向聲音接收處理中,基于第一高增益輸 入信號(hào)in—l一H(t)和第二高增益輸入信號(hào)in—2—H(t)來(lái)提取基于從目標(biāo)方向到 達(dá)的聲音(即,基于由講話者發(fā)出的語(yǔ)音)的高增益語(yǔ)音信號(hào)signal—H(t)。 在由第二分離部130b執(zhí)行的方向聲音接收處理中,基于第一中增益輸入信
號(hào)in—1—M(t)和第二中增益輸入信號(hào)in—2—M(t)來(lái)提取基于從目標(biāo)方向到達(dá)的 語(yǔ)音的中增益語(yǔ)音信號(hào)signal—M(t)。此外,在由第三分離部130c執(zhí)行的方 向聲音接收處理中,基于第一低增益輸入信號(hào)in—1—L(t)和第二低增益輸入信 號(hào)in—2—L(t)來(lái)提取基于從目標(biāo)方向到達(dá)的語(yǔ)音的低增益語(yǔ)音信號(hào) signal—L(t)。此外,提取基于從目標(biāo)方向之外的其他方向到達(dá)的聲音(即, 基于背景噪音)的噪音信號(hào)noise(t)。
第一分離部130a、第二分離部130b和第三分離部130c向選擇部134分 別輸出高增益語(yǔ)音信號(hào)signal—H(t)、中增益語(yǔ)音信號(hào)signal—M(t)和低增益語(yǔ) 音信號(hào)signal—L(t)。此外,第三分離部130c向估算部131輸出低增益語(yǔ)音信 號(hào)signal—L(t)和噪音信號(hào)noise(t)。
估算部131向?qū)С霾?32輸出信息,所述信息表示基于所輸入的低增益 語(yǔ)音信號(hào)signal—L(t)和噪音信號(hào)noise(t)估算的背景噪音的功率 pow—noise(n)。
導(dǎo)出部132基于背景噪音的功率pow—noise(n)和預(yù)定的功率目標(biāo)值ref 計(jì)算增益控制值amp一gain(t)。可使用用于獲得在第四示例性實(shí)施例中所述的 增益控制值amp—gain(t)的方法計(jì)算增益控制值amp—gain(t)。
此外,導(dǎo)出部132基于增益控制值amp—gain(t)和增益表132a計(jì)算用于 高增益語(yǔ)音信號(hào)signal—H(t)的高增益系數(shù)select—gain—H(t)、用于中增益語(yǔ)音 信號(hào)signal—M(t)的中增益系數(shù)select—gain—M(t)以及用于低增益語(yǔ)音信號(hào) signal—L(t)的低增益系數(shù)select—gain—L(t)。
圖16是示出根據(jù)本發(fā)明第五示例性實(shí)施例的聲音處理裝置1中使用的 增益表132a的細(xì)節(jié)的曲線圖。在圖16中,橫坐標(biāo)表示增益控制值 amp—gain(t),縱坐標(biāo)表示系數(shù)的值。在圖16中,實(shí)線表示高增益系數(shù) select—gain—H(t),虛線表示中增益系數(shù)select—gain—M(t),點(diǎn)劃線表示低增益 系數(shù)select—gain—L(t)。通過(guò)使用圖16中用曲線所示的增益表132a,可計(jì)算 高增益系數(shù)select—gain—H(t)、中增益系數(shù)select—gain—M(t)和低增益系數(shù) select—gain—L(t)。如圖16所示,高增益系數(shù)select—gain—H(t)、中增益系數(shù) select—gain—M(t)和低增益系數(shù)select—gain—L(t)中每個(gè)的范圍為從0至1。這 些值的總和始終為1。隨后,導(dǎo)出部132向選擇部134輸出高增益系數(shù) select—gain—H(t)、中增益系數(shù)select—gain—M(t)和低增益系數(shù)select—gain—L(t)。
選擇部134使用以下等式從高增益語(yǔ)音信號(hào)signal—H(t)、中增益語(yǔ)音信 號(hào)signal一M(t)、低增益語(yǔ)音信號(hào)signal一L(t)、高增益系數(shù)select—gain—H(t)、 中增益系數(shù)select—gain—M(t)和低增益系數(shù)select—gain—L(t)產(chǎn)生向應(yīng)用部133 輸出的語(yǔ)音信號(hào)signal(t),所述等式為
signal(t) = select—gain—H(t).signal一H(t)
+ select—gain—M(t).signal—M(t)
+ select—gain_L(t).signal—L(t) (10) 其中signal(t)是語(yǔ)音信號(hào),select—gain—H(t)是高增益系數(shù),signal—H(t)是 高增益語(yǔ)音信號(hào),select—gain—M(t)是中增益系數(shù),signal—M(t)是中增益語(yǔ)音 信號(hào),select—gain—L(t)是低增益系數(shù),signal—L(t)是低增益語(yǔ)音信號(hào)。
接下來(lái),描述根據(jù)由本發(fā)明第五實(shí)施例的聲音處理裝置1執(zhí)行的示例性 處理。圖17是根據(jù)本發(fā)明第五實(shí)施例的聲音處理裝置1執(zhí)行的示例性處理 的操作圖。聲音處理裝置1基于由第一聲音接收單元lOa和第二聲音接收單 元10b接收的聲音產(chǎn)生聲音信號(hào),如操作S501,并且向第一放大器單元lla 和lla、第二放大器單元llb和lib以及第三放大器單元11c和11c輸出所 產(chǎn)生的聲音信號(hào)。
聲音處理裝置1的第一放大器單元lla和lla、第二放大器單元llb和 1 lb以及第三放大器單元1 lc和1 lc將聲音接收單元10和10產(chǎn)生的聲音信 號(hào)以其各自的固定增益進(jìn)行放大,如操作S502,并向?qū)?yīng)的A/D轉(zhuǎn)換器12、 12、...輸出所放大的聲音信號(hào)。
聲音處理裝置1的A/D轉(zhuǎn)換器12、 12、...執(zhí)行A/D轉(zhuǎn)換處理,如操作 S503,并向控制單元13輸出第一高增益輸入信號(hào)in—1—H(t)、第二高增益輸 入信號(hào)in—2—H(t)、第一中增益輸入信號(hào)in_l—M(t)、第二中增益輸入信號(hào) in—2—M(t)、第一低增益輸入信號(hào)in—1—L(t)和第二低增益輸入信號(hào)in—2—L(t)。
通過(guò)由分離部130、 130、...執(zhí)行的處理,聲音處理裝置1的控制單元將 高增益語(yǔ)音信號(hào)signal—H(t)、中增益語(yǔ)音信號(hào)signal_M(t)、低增益語(yǔ)音信號(hào) signal—L(t)和噪音信號(hào)noise(t)彼此分離,如操作S504。
通過(guò)估算單元131執(zhí)行的處理,聲音處理裝置1的控制單元13基于在 低增益語(yǔ)音信號(hào)signal—L(t)和噪音信號(hào)noise(t)之間的相關(guān)性估算背景噪音的 功率pow—noise(n),如操作S505,以及基于背景噪音的功率pow—noise(n)和
功率目標(biāo)值ref計(jì)算原始增益控制值adj'(n),如操作S506。然后,控制單元 13通過(guò)平滑化在所計(jì)算的原始增益控制值adj,(n)中的時(shí)間變化計(jì)算增益控 制值adj(t),如操作S507。
此外,通過(guò)估算部131執(zhí)行的處理,聲音處理裝置1的控制單元13基 于增益控制值adj(t)計(jì)算增益控制值amp-gain(t),如操作S508。然后控制單 元13基于增益控制值amp—gain(t)和增益表132a計(jì)算高增益系數(shù) select—gain_H(t)、中增益系數(shù)select—gain—M(t)和低增益系數(shù)select—gain—L(t), 如操作S509 。隨后,控制單元13向選擇部134輸出高增益系數(shù) select_gain—H(t)、中增益系數(shù)select—gahyV[(t)和低增益系數(shù)select_gain—L(t)。
此外,通過(guò)選擇部134執(zhí)行的處理,聲音處理裝置1的控制單元13根 據(jù)高增益語(yǔ)音信號(hào)signal—H(t)、中增益語(yǔ)音信號(hào)signal—M(t)、低增益語(yǔ)音信 號(hào)signal—L(t)、高增益系數(shù)select—gain—H(t)、中增益系數(shù)select—gain—M(t)和 低增益系數(shù)select—gain—L(t)產(chǎn)生語(yǔ)音signal(t),如操作S510。在操作S510 中,從按它們自己的增益放大的聲音信號(hào)中選擇作為處理目標(biāo)的至少一個(gè)語(yǔ) 音信號(hào),并且如果選擇多個(gè)語(yǔ)音信號(hào),則產(chǎn)生具有依據(jù)系數(shù)的校正水平的語(yǔ) 音信號(hào)。即,如果一個(gè)系數(shù)是"l",則產(chǎn)生與該系數(shù)相關(guān)的語(yǔ)音信號(hào)作為用于 處理目標(biāo)的語(yǔ)音信號(hào)signal(t)。例如,當(dāng)高增益系數(shù)select—gainji(t)是"l", 中增益系數(shù)select—gain—M(t)是"O",低增益系數(shù)select—gain—L(t)是"O"時(shí),將 高增益語(yǔ)音信號(hào)signal—H(t)設(shè)置為作為處理目標(biāo)的signal(t)?;蛘撸绻?現(xiàn)大于"O"并且小于'T,的多個(gè)系數(shù),則通過(guò)按系數(shù)所指示的比例組合與這些 系數(shù)相關(guān)的語(yǔ)音信號(hào)來(lái)產(chǎn)生語(yǔ)音信號(hào)signal(t)。例如,當(dāng)高增益系數(shù) select—gain—H(t)是"O",中增益系數(shù)select—gain—M(t)是"0.4",低增益系數(shù) select_gain—L(t)是"0.6"時(shí),通過(guò)按4:6的比例對(duì)中增益語(yǔ)音信號(hào)signal—M(t) 和低增益語(yǔ)音信號(hào)signal一L(t)加權(quán)平均來(lái)產(chǎn)生語(yǔ)音信號(hào)signal(t)。或者,取代 選擇聲音信號(hào),選擇部134可選擇放大器單元11和11,并且允許僅僅所選 擇的放大器單元11和11運(yùn)行,以產(chǎn)生語(yǔ)音信號(hào)signal(t)。將操作S510中產(chǎn) 生的語(yǔ)音信號(hào)signal(t)輸出至應(yīng)用部133。應(yīng)用部133基于語(yǔ)音信號(hào)signal(t) 執(zhí)行語(yǔ)音識(shí)別處理或語(yǔ)音通信處理。
第六示例性實(shí)施例
在第六示例性實(shí)施例中,在考慮增益時(shí),第一示例性實(shí)施例的應(yīng)用部執(zhí) 行處理。由于第六示例性實(shí)施例的示例性硬件配置與第一示例性實(shí)施例中的 相同,所以不再重復(fù)描述。在以下的說(shuō)明中,在描述中使用類似的標(biāo)號(hào)描述 與上述第一示例性實(shí)施例中所用組件類似的組件。
圖18是根據(jù)本發(fā)明第六示例性實(shí)施例的聲音處理裝置1的示例性特征 的功能框圖。通過(guò)執(zhí)行根據(jù)本發(fā)明實(shí)施例的計(jì)算機(jī)程序100,控制單元13產(chǎn)
生用作分離部130、估算部131、導(dǎo)出部132和應(yīng)用部133的程序模塊。
接下來(lái)描述根據(jù)本發(fā)明第六示例性實(shí)施例的聲音處理裝置1執(zhí)行的信號(hào) 處理。如在第一至第五示例性實(shí)施例中所述,在聲音處理裝置l中,對(duì)于由
放大器單元11和11執(zhí)行的增益控制動(dòng)態(tài)改變向應(yīng)用部133輸入的語(yǔ)音信號(hào) signal(t)的增益。因此,第六示例性實(shí)施例的聲音處理裝置1輸出由導(dǎo)出部 132計(jì)算的增益控制值amp—gain(t)至放大器單元11和11。同時(shí),聲音處理 裝置1輸出累積值total—adj(t)至應(yīng)用部133,所述累積值total—adj(t)作為增益 控制值adj(t)的累積值??赏ㄟ^(guò)使用用于計(jì)算第四示例性實(shí)施例中所述的增 益控制值amp—gain(t)和累積值total—adj(t)的方法,來(lái)獲得增益控制值 amp—gain(t)和累積{直total_adj (t)。
隨后,通過(guò)利用由增益控制值adj(t)的累積值total—adj(t)表示的增益,應(yīng) 用部133校正語(yǔ)音信號(hào)signal(t)。然后,應(yīng)用部133基于所校正的語(yǔ)音信號(hào) signal(t)執(zhí)行語(yǔ)音識(shí)別處理或語(yǔ)音通信處理。
第七示例性實(shí)施例
在第七示例性實(shí)施例中,將通過(guò)考慮增益而校正的語(yǔ)音信號(hào)輸入至作為 第一示例性實(shí)施例的擴(kuò)展的第六示例性實(shí)施例的應(yīng)用部。由于第七示例性實(shí) 施例的示例性硬件配置與第一示例性實(shí)施例中的相同,所以不再重復(fù)描述。 在以下的說(shuō)明中,在描述中使用類似的標(biāo)號(hào)描述與上述第六示例性實(shí)施例中 所用組件類似的組件。
圖19是根據(jù)本發(fā)明第七示例性實(shí)施例的聲音處理裝置1的示例性特征 的功能框圖。通過(guò)執(zhí)行根據(jù)本發(fā)明實(shí)施例的計(jì)算機(jī)程序100,控制單元13產(chǎn) 生用作分離部130、估算部131、導(dǎo)出部132、應(yīng)用部133和用于校正語(yǔ)音信 號(hào)signal(t)的校正部135的程序模塊。
接下來(lái)描述根據(jù)本發(fā)明第七示例性實(shí)施例的聲音處理裝置1執(zhí)行的信號(hào) 處理。在根據(jù)第七示例性實(shí)施例的聲音處理裝置1中,分離部130將語(yǔ)音信
號(hào)signal(t)輸出至校正部135。此外,導(dǎo)出部132將增益控制值adj(t)的累積 值total—adj(t)輸出至校正部135。
校正部135使用以下等式計(jì)算增益的校正值gain一cor(t),所述等式
gain—cor(t)=kT"-"柳, (11)
其中g(shù)ain—cor(t)是增益的校正值,total—adj(t)是增益控制值adj(t)的累積值。
此外,校正部135通過(guò)使用以下等式校正語(yǔ)音信號(hào)signal(t)產(chǎn)生校正信 號(hào)signal—cor(t),所述等式
signal—cor(t) = gain—cor(t).signal (t) (12) 其中signal—cor(t)是校正信號(hào)。
隨后,校正部135將校正信號(hào)signaLcor(t)輸出至應(yīng)用部133。應(yīng)用部133 基于校正信號(hào)signal—cor(t)執(zhí)行語(yǔ)音識(shí)別處理或語(yǔ)音通信處理。
第八示例性實(shí)施例
通過(guò)給根據(jù)使用多個(gè)裝置的第一示例性實(shí)施例配置與聲音處理裝置對(duì) 應(yīng)的系統(tǒng)來(lái)實(shí)現(xiàn)第八示例性實(shí)施例。在以下的說(shuō)明中,在描述中使用類似的 標(biāo)號(hào)描述與上述第一示例性實(shí)施例中所用組件類似的組件。
圖20是根據(jù)本發(fā)明第八示例性實(shí)施例的聲音處理系統(tǒng)的示例性硬件配 置的框圖。根據(jù)本發(fā)明第八示例性實(shí)施例,聲音處理系統(tǒng)包括聲音接收裝 置2,具有聲音接收單元10和10、放大器單元ll和ll以及A/D轉(zhuǎn)換器12 和12;增益控制裝置3,例如DSP;和處理裝置4,用于執(zhí)行例如語(yǔ)音識(shí)別 處理或語(yǔ)音通信處理。
圖21是根據(jù)本發(fā)明第八示例性實(shí)施例的聲音處理系統(tǒng)的示例性特征的 功能框圖。增益控制裝置3用作分離部130、估算部131和導(dǎo)出部132。處 理裝置4用作第一示例性實(shí)施例的應(yīng)用部133,用于執(zhí)行例如語(yǔ)音識(shí)別處理 或語(yǔ)音通信處理。
由于根據(jù)第八示例性實(shí)施例的裝置的操作與第一示例性實(shí)施例的對(duì)應(yīng) 配置類似,所以不再重復(fù)其描述。
應(yīng)該理解,上述第一至第八示例性實(shí)施例僅是本發(fā)明的多個(gè)實(shí)施例???對(duì)其硬件和軟件配置進(jìn)行適當(dāng)?shù)拇_定。此外,除了上述基本處理之外,還可 組合多種處理。此外,根據(jù)需要,也可以組合某些或所有上述第一至第八示 例性實(shí)施例。
權(quán)利要求
1. 一種聲音處理裝置,用于處理所接收的聲音,所述聲音處理裝置包括多個(gè)聲音接收單元,所述多個(gè)聲音接收單元中的每一個(gè)都接收聲音,并將所述聲音轉(zhuǎn)換成聲音信號(hào);多個(gè)放大器,所述多個(gè)放大器中的每一個(gè)都基于預(yù)定的增益控制值來(lái)控制用于放大所述聲音信號(hào)的增益;分離部,分離由所述多個(gè)聲音接收單元所轉(zhuǎn)換的所述聲音信號(hào),使得所述聲音信號(hào)被分成與來(lái)自預(yù)定方向的聲音對(duì)應(yīng)的第一聲音信號(hào)以及來(lái)自所述預(yù)定方向之外的其他方向的第二聲音信號(hào);估算部,基于第三和第四聲音信號(hào)之間的相關(guān)性,估算在所述第一聲音信號(hào)和所述第二聲音信號(hào)中包括的背景噪音的功率;以及導(dǎo)出部,基于所述背景噪音的功率以及一預(yù)定的功率目標(biāo)值,導(dǎo)出向所述多個(gè)放大器輸出的增益控制值。
2. 根據(jù)權(quán)利要求1所述的聲音處理裝置,其中所述導(dǎo)出部通過(guò)平滑在所 述背景噪音的功率和所述的預(yù)定的功率目標(biāo)值之間的差值中的時(shí)間變化來(lái) 計(jì)算所述差值和所述增益控制值。
3. 根據(jù)權(quán)利要求2所述的聲音處理裝置,其中所述導(dǎo)出部基于在所計(jì)算 的差值和先前獲得的增益控制值之間的大小關(guān)系來(lái)計(jì)算表示平滑程度的時(shí) 間常數(shù),并基于所述時(shí)間常數(shù)來(lái)平滑所述差值中的所述時(shí)間變化。
4. 根據(jù)權(quán)利要求1所述的聲音處理裝置,其中僅當(dāng)所估算的背景噪音的 功率大于所述功率目標(biāo)值時(shí),或僅當(dāng)所估算的背景噪音的功率小于所述功率 目標(biāo)值時(shí),所述導(dǎo)出部計(jì)算增益控制值。
5. 根據(jù)權(quán)利要求1所述的聲音處理裝置,其中所述導(dǎo)出部計(jì)算在所述多 個(gè)放大器的屬性范圍內(nèi)的增益控制值。
6. —種聲音處理裝置,用于處理所接收的聲音,所述聲音處理裝置包括 多個(gè)聲音接收單元,所述多個(gè)聲音接收單元中的每一個(gè)都接收第一聲音和第二聲音,并輸出分別與所接收的第一聲音和第二聲音對(duì)應(yīng)的第一聲音信 號(hào)和第二聲音信號(hào);多個(gè)放大器,所述多個(gè)放大器中的每一個(gè)都基于增益控制值來(lái)放大所述第一聲音信號(hào)和第二聲音信號(hào);分離部,基于由所述多個(gè)放大器中的每一個(gè)所放大的第一聲音信號(hào)和第 二聲音信號(hào)來(lái)分離第三聲音信號(hào)和第四聲音信號(hào),所述第三聲音信號(hào)對(duì)應(yīng)于 來(lái)自預(yù)定方向的聲音,所述第四聲音信號(hào)對(duì)應(yīng)于來(lái)自所述預(yù)定方向之外的其 他方向的聲音;估算部,基于在所述第三聲音信號(hào)和第四聲音信號(hào)之間的相關(guān)性來(lái)估算 在所述第三聲音信號(hào)和第四聲音信號(hào)中包括的背景噪音的功率;導(dǎo)出部,基于所述背景噪音的功率以及一預(yù)定的功率目標(biāo)值,導(dǎo)出向成對(duì)的放大器輸出的所述增益控制值;以及選擇部,基于目標(biāo)增益和所存儲(chǔ)的與所述多個(gè)放大器中的每一個(gè)對(duì)應(yīng)的 每個(gè)增益值,在自所述多個(gè)放大器輸出的多個(gè)所述第一信號(hào)和第二信號(hào)中選 擇要處理的所述第一聲音信號(hào)和第二聲音信號(hào)。
7. —種增益控制裝置,其能夠與聲音接收裝置連接,所述聲音接收裝置 包括放大器,用于放大由多個(gè)接收單元接收的聲音信號(hào),所述聲音信號(hào)是在 噪音環(huán)境下接收的,所述增益控制裝置包括.分離部,基于由所述放大器中的每一個(gè)所放大的第一聲音信號(hào)和第二聲 音信號(hào)來(lái)分離第三聲音信號(hào)和第四聲音信號(hào),所述第三聲音信號(hào)對(duì)應(yīng)于來(lái)自 預(yù)定方向的聲音,所述第四聲音信號(hào)對(duì)應(yīng)于來(lái)自所述預(yù)定方向之外的其他方 向的聲音;估算部,基于在所述第三聲音信號(hào)和第四聲音信號(hào)之間的相關(guān)性來(lái)估算 在所述第三聲音信號(hào)和第四聲音信號(hào)中包括的背景噪音的功率;以及導(dǎo)出部,基于所述背景噪音的功率以及一預(yù)定的功率目標(biāo)值,導(dǎo)出向成 對(duì)的放大器輸出的增益控制值。
8. —種使得計(jì)算機(jī)控制放大器的增益的方法,所述放大器用于放大自接 收聲音的聲音接收器輸出的聲音信號(hào),所述方法包括以下操作分離操作,基于由所述放大器所放大的聲音信號(hào)來(lái)分離第三聲音信號(hào)和 第四聲音信號(hào),所述第三聲音信號(hào)對(duì)應(yīng)于來(lái)自預(yù)定方向的聲音,所述第四聲 音信號(hào)對(duì)應(yīng)于來(lái)自所述預(yù)定方向之外的其他方向的聲音;估算操作,基于在所述第三聲音信號(hào)和第四聲音信號(hào)之間的相關(guān)性,估 算在所述聲音信號(hào)中包含的背景噪音的功率;以及計(jì)算操作,基于所估算的背景噪音的功率以及一預(yù)定的功率目標(biāo)值,計(jì) 算要給所述放大器設(shè)置的增益控制值。
全文摘要
本發(fā)明提供一種使用方向聲音接收技術(shù)來(lái)估算背景噪音的功率的聲音處理裝置、控制增益的裝置和方法,該聲音處理裝置使用多個(gè)聲音接收單元,基于所估算的背景噪音的功率和預(yù)定的功率目標(biāo)值計(jì)算增益控制值,和輸出該增益控制值,從而可減少開始增益控制的延遲時(shí)間,以及可阻止語(yǔ)音識(shí)別應(yīng)用程序的慢響應(yīng)或語(yǔ)音通信程序的語(yǔ)音質(zhì)量的降低。
文檔編號(hào)G10L21/02GK101388216SQ20081014914
公開日2009年3月18日 申請(qǐng)日期2008年9月12日 優(yōu)先權(quán)日2007年9月13日
發(fā)明者松尾直司 申請(qǐng)人:富士通株式會(huì)社