音頻處理裝置、音頻處理方法和程序的制作方法
【專利摘要】本發(fā)明涉及音頻處理裝置和音頻處理方法。根據(jù)本發(fā)明的音頻處理裝置包括：顯示控制單元，被配置成控制多個音頻齒輪的顯示，多個音頻齒輪是能夠在屏幕內(nèi)移動的齒輪，每個音頻齒輪與預(yù)定的音頻數(shù)據(jù)對應(yīng)；以及播放控制單元，被配置成控制多個音頻數(shù)據(jù)的同步播放；其中，在多個音頻齒輪直接或間接嚙合的情況下，顯示控制單元使多個音頻齒輪旋轉(zhuǎn)，并且播放控制單元執(zhí)行與多個音頻齒輪對應(yīng)的多個音頻數(shù)據(jù)的同步播放。
【專利說明】音頻處理裝置、音頻處理方法和程序
【技術(shù)領(lǐng)域】
[0001]本技術(shù)涉及音頻處理裝置、音頻處理方法和程序，更具體地，本技術(shù)涉及能夠通過簡單操作執(zhí)行唱片騎師(DJ)播放的音頻處理裝置、音頻處理方法和程序。
【背景技術(shù)】
[0002]近來，正在銷售使得用戶能夠通過模擬DJ使用的諸如轉(zhuǎn)盤等的設(shè)備來執(zhí)行諸如以同步的方式播放多首樂曲，或者連接多首樂曲并且以不停的方式播放(不停的混音播放)的重混(remix)播放的軟件。
[0003]然而，該軟件簡單地模擬DJ使用的設(shè)備，因此為了使用設(shè)想某種水平的技術(shù)和音樂知識。例如，播放一首樂曲并且在第一首樂曲結(jié)束之后開始下一首樂曲，用戶必須使正在開始的樂曲的節(jié)奏和節(jié)拍位置與已播放的樂曲匹配，并且隨后通過使兩者的音量平衡逐漸地切換樂曲。再者，在兩首樂曲過渡的情況下，這兩首樂曲被立刻播放，因此用戶必須在兩首樂曲的聲音不會創(chuàng)建不悅耳的感受的情況下找到樂曲的組合。
[0004]另一方面，根據(jù)相關(guān)技術(shù)，已提出了用于這種播放的容易地使多首樂曲的節(jié)奏和節(jié)拍位置匹配的技術(shù)。相關(guān)技術(shù)的示例包括國際公布第2007/066919號和日本未審專利申請公布第2008-164932號。

【發(fā)明內(nèi)容】

[0005]然而，這些公布文獻(xiàn)都沒有給出以簡單的操作實現(xiàn)DJ播放的特別考慮。
[0006]已發(fā)現(xiàn)以簡單的操作實現(xiàn)DJ播放的需求。
[0007]根據(jù)一個實施例，一種音頻處理裝置包括:顯示控制單元，被配置成控制多個音頻齒輪的顯示，多個音頻齒輪是能夠在屏幕內(nèi)移動的齒輪，每個音頻齒輪與預(yù)定的音頻數(shù)據(jù)對應(yīng)；以及播放控制單元，被配置成控制多個音頻數(shù)據(jù)的同步播放；其中，在多個音頻齒輪直接或間接嚙合的情況下，顯示控制單元使多個音頻齒輪旋轉(zhuǎn)，并且播放控制單元執(zhí)行與多個音頻齒輪對應(yīng)的多個音頻數(shù)據(jù)的同步播放。
[0008]顯示控制單元可以進(jìn)一步控制作為不與音頻數(shù)據(jù)對應(yīng)的齒輪的動力齒輪的顯示；在多個音頻齒輪與動力齒輪嚙合的情況下，顯示控制單元使多個音頻齒輪與動力齒輪一起旋轉(zhuǎn)，并且播放控制單元執(zhí)行與經(jīng)由動力齒輪間接嚙合的多個音頻齒輪對應(yīng)的多個音頻數(shù)據(jù)的同步播放。
[0009]播放音頻數(shù)據(jù)的節(jié)奏能夠變化，顯示控制單元根據(jù)設(shè)定的節(jié)奏改變動力齒輪的旋轉(zhuǎn)速度以及與動力齒輪嚙合的音頻齒輪的旋轉(zhuǎn)速度。
[0010]動力齒輪和音頻齒輪的每個齒可以表示一個節(jié)拍，在音頻數(shù)據(jù)的一個節(jié)拍的進(jìn)行期間，顯示控制單元使動力齒輪以及與動力齒輪嚙合的音頻齒輪旋轉(zhuǎn)一個齒距。
[0011]顯示控制單元可以進(jìn)一步控制音頻齒輪與動力齒輪嚙合的預(yù)定的多個設(shè)置位置的顯示，播放控制單元播放與設(shè)置在設(shè)置位置的音頻齒輪對應(yīng)的音頻數(shù)據(jù)。
[0012]該音頻處理裝置可以進(jìn)一步包括音頻數(shù)據(jù)搜索單元，其被配置成搜索連接到當(dāng)前播放的第一音頻數(shù)據(jù)的適于播放的第二音頻數(shù)據(jù)，顯示控制單元通過不同的形式顯示多個設(shè)置位置中的每個，并且還通過與連接到第一音頻數(shù)據(jù)的用于播放的設(shè)置位置的顯示形式對應(yīng)的形式來顯示與第二音頻數(shù)據(jù)對應(yīng)的音頻齒輪。
[0013]在當(dāng)?shù)谝灰纛l數(shù)據(jù)正被與動力齒輪嚙合的第一音頻齒輪播放時，與第二音頻數(shù)據(jù)對應(yīng)的第二音頻齒輪與動力齒輪嚙合的情況下，播放控制單元可以使第一音頻數(shù)據(jù)衰落，顯示控制單元結(jié)合第一音頻數(shù)據(jù)的衰落從與動力齒輪嚙合的位置重新定位第一音頻齒輪。
[0014]播放音頻數(shù)據(jù)的節(jié)奏能夠變化，顯示控制單元根據(jù)設(shè)定的節(jié)奏改變音頻齒輪的旋轉(zhuǎn)速度。
[0015]音頻齒輪的每個齒可以表示一個節(jié)拍，在音頻數(shù)據(jù)的一個節(jié)拍的進(jìn)行期間，顯示控制單元使音頻齒輪旋轉(zhuǎn)一個齒距。
[0016]該音頻處理裝置可以進(jìn)一步包括音頻數(shù)據(jù)搜索單元，被配置成搜索連接到當(dāng)前播放的音頻數(shù)據(jù)的適于播放的音頻數(shù)據(jù)，顯示控制單元通過與其他音頻齒輪的形式不同的形式來顯示與搜索的音頻數(shù)據(jù)對應(yīng)的音頻齒輪。
[0017]播放控制單元可以在多個音頻數(shù)據(jù)的小節(jié)的起點匹配的情況下進(jìn)行播放。
[0018]顯示控制單元可以通過不同的形式顯示與樂曲或部分樂曲對應(yīng)的音頻齒輪以及與循環(huán)素材對應(yīng)的音頻齒輪。
[0019]該音頻處理裝置可以進(jìn)一步包括操作單元，其被配置成操作音頻齒輪。
[0020]根據(jù)一個實施例，一種音頻處理方法包括:控制多個音頻齒輪的顯示，多個音頻齒輪是能夠在屏幕內(nèi)移動的齒輪，每個音頻齒輪與預(yù)定的音頻數(shù)據(jù)對應(yīng)；以及在多個音頻齒輪直接或間接嚙合的情況下，控制顯示以便使多個音頻齒輪旋轉(zhuǎn)，并且執(zhí)行與多個音頻齒輪對應(yīng)的多個音頻數(shù)據(jù)的同步播放。
[0021]根據(jù)一個實施例，一種程序使計算機(jī)執(zhí)行如下處理，該處理包括:控制多個音頻齒輪的顯示，多個音頻齒輪是能夠在屏幕內(nèi)移動的齒輪，每個音頻齒輪與預(yù)定的音頻數(shù)據(jù)對應(yīng)；以及在多個音頻齒輪直接或間接嚙合的情況下，控制顯示以便使多個音頻齒輪旋轉(zhuǎn)，并且執(zhí)行與多個音頻齒輪對應(yīng)的多個音頻數(shù)據(jù)的同步播放。
[0022]根據(jù)以上配置，顯示作為能夠在屏幕內(nèi)移動的齒輪的多個音頻齒輪，每個音頻齒輪與預(yù)定的音頻數(shù)據(jù)對應(yīng)；并且在多個音頻齒輪直接或間接嚙合的情況下，使多個音頻齒輪旋轉(zhuǎn)，執(zhí)行與多個音頻齒輪對應(yīng)的多個音頻數(shù)據(jù)的同步播放。因此，可以通過簡單的操作執(zhí)行DJ播放。
【專利附圖】

【附圖說明】
[0023]圖1是圖示已被應(yīng)用本技術(shù)的音樂重混系統(tǒng)的第一實施例的框圖；
[0024]圖2是圖示重混線的示例的示圖；
[0025]圖3是用于描述時間伸縮的示圖；
[0026]圖4是圖示播放裝置的詳細(xì)配置的示圖；
[0027]圖5是圖示音樂重混系統(tǒng)的功能配置的框圖；
[0028]圖6是用于描述節(jié)拍信息、和弦信息和旋律信息的示圖；
[0029]圖7是用于描述相對音調(diào)和絕對音調(diào)的不圖；
[0030]圖8是圖示元數(shù)據(jù)的數(shù)據(jù)配置的示例的示圖；[0031]圖9是圖示元數(shù)據(jù)的具體示例的示圖；
[0032]圖10是用于描述DJ播放處理的流程圖；
[0033]圖11是用于描述DJ播放處理的流程圖；
[0034]圖12是圖示DJ播放屏幕的示例的示圖；
[0035]圖13是樂曲齒輪的放大示圖；
[0036]圖14是素材齒輪的放大示圖；
[0037]圖15是素材齒輪的另一示例的放大示圖；
[0038]圖16是用于描述樂曲齒輪和素材齒輪的顯示方法的示圖；
[0039]圖17是用于描述同步播放處理的細(xì)節(jié)的流程圖；
[0040]圖18是用于描述同步播放處理的詳細(xì)示例的示圖；
[0041]圖19是用于描述同步播放處理的詳細(xì)示例的示圖；
[0042]圖20是用于描述同步播放處理的詳細(xì)示例的示圖；
[0043]圖21是用于描述推薦樂曲搜索處理的細(xì)節(jié)的流程圖；
[0044]圖22是用于描述分值計算處理的細(xì)節(jié)的流程圖；
[0045]圖23是圖示關(guān)于大調(diào)的相似性矩陣的示例的示圖；
[0046]圖24是圖示關(guān)于小調(diào)的相似性矩陣的示例的示圖；
[0047]圖25是圖示關(guān)于音階不同的情況的相似性矩陣的示例的示圖；
[0048]圖26是圖示搜索對象區(qū)間之間的過渡的示圖；
[0049]圖27是圖示推薦樂曲的顯示示例的示圖；
[0050]圖28是圖示推薦樂曲的顯示示例的示圖；
[0051]圖29是圖示衰落時的DJ播放屏幕的顯示示例的示圖；
[0052]圖30是圖示重混線中的小節(jié)的起點的顯示示例的示圖；
[0053]圖31是圖示DJ播放屏幕的修改的示圖；
[0054]圖32是圖示網(wǎng)絡(luò)系統(tǒng)的配置示例的框圖；
[0055]圖33是用于描述與DJ播放的協(xié)同工作的示圖；
[0056]圖34是圖示樂曲齒輪的修改的示圖；以及
[0057]圖35是圖示計算機(jī)配置示例的框圖。
【具體實施方式】
[0058]下文是實施本技術(shù)的實施例(以下稱為“實施例”)的描述。注意，描述將以如下順
序進(jìn)行。
[0059]1.實施例
[0060]2.修改
[0061]1.實施例
[0062]音樂重混系統(tǒng)101的配置示例
[0063]圖1是圖示已被應(yīng)用本技術(shù)的音樂重混系統(tǒng)101的實施例的框圖。
[0064]音樂重混系統(tǒng)101是用于重混播放和DJ播放音頻素材或者來自一部分音頻數(shù)據(jù)的多個音頻素材的裝置。例如，根據(jù)音樂重混系統(tǒng)101，可以簡單地執(zhí)行諸如多個音頻素材的同步播放的精密的和復(fù)雜的DJ播放，或者無縫地播放多個音頻素材的情況下的不停的混音播放。
[0065]這里，“多個音頻素材的同步播放”指的是以相同的節(jié)奏并且以節(jié)拍位置的定時同步的方式播放多個聲音源。再者，存在以每個小節(jié)的起點(而非節(jié)拍位置)的定時同步的方式進(jìn)行播放的情況。
[0066]此外，“多個音頻素材的混音播放”是與是否執(zhí)行同步無關(guān)地播放多個音頻素材。
[0067]音樂重混系統(tǒng)101中使用的音頻素材的類型沒有具體限制。例如，音頻素材的類型通?？梢苑殖蓸非?包括樂曲部分)和循環(huán)素材。
[0068]“樂曲部分”是完整樂曲的部分提取。例如，樂曲部分不僅包括完整樂曲的一部分的音頻數(shù)據(jù)，而且包括從構(gòu)成樂曲的多個音軌中提取的音軌(諸如聲樂音軌等)的音頻數(shù)據(jù)。
[0069]此外，“循環(huán)素材”是作為所記錄的或者人工生成的循環(huán)的有節(jié)奏的聲音的素材，諸如鼓點(drum pattern)、短的音樂片段、人類聲音、動物叫聲、聲音效果等。這些聲音主要重復(fù)地與其他樂曲一起播放。注意，在下文中，樂曲和循環(huán)素材可以被共同稱為“音頻數(shù)據(jù)”。
[0070]音樂重混系統(tǒng)101中的重混播放通過如下方式執(zhí)行，將音頻音軌設(shè)置在由多個音軌構(gòu)成的重混線上，并且隨后在同一時間軸上播放每個音軌，并且將它們組合在一起。
[0071]圖2圖示了由j個音軌，即音軌I至音軌j構(gòu)造的重混線的示例的示圖。在圖2中，水平線表示時間軸，即當(dāng)執(zhí)行重混播放時的時間軸。設(shè)置在同一音軌上的音頻素材按照從左開始的順序播放，并且同時播放設(shè)置在同一時間軸方向、位置和不同音軌上的多個音頻素材。
[0072]注意，在下文中，設(shè)置在重混線的每個音軌中的音頻素材將被特定地稱為“音頻塊”。在圖2的情況下，塊BLK-1至BLK-kj是音頻塊。
[0073]再者，如圖3中所示，在音樂重混系統(tǒng)101執(zhí)行重混播放的情況下，執(zhí)行播放速度的調(diào)整，換言之，(以下稱為“主節(jié)奏”)，執(zhí)行時間伸縮的調(diào)整，以便針對重混線的時間軸上的節(jié)奏，使音頻素材的節(jié)奏與從播放樂曲A至樂曲C中提取的不同的節(jié)奏匹配。
[0074]返回圖1，音樂重混系統(tǒng)101由中央處理單元(CPU) 111、播放裝置112、用戶操作接口裝置113、用戶接口顯示裝置114、只讀存儲器(R0M)115、隨機(jī)存取存儲器(RAM)116、存儲裝置117和網(wǎng)絡(luò)通信裝置118構(gòu)成。CPU111、播放裝置112、用戶操作接口裝置113、用戶接口顯示裝置114、ROMl 15, RAM116、存儲裝置117和網(wǎng)絡(luò)通信裝置118經(jīng)由總線119相互連接。
[0075]CPUlll基于經(jīng)由用戶操作接口裝置113輸入的用戶指令控制音樂重混系統(tǒng)101中的處理。
[0076]播放裝置112在CPUlll的控制下執(zhí)行音頻存儲裝置141中存儲的音頻數(shù)據(jù)的播放處理。播放裝置112包括同步播放控制裝置131、音頻混音裝置132、數(shù)字/模擬轉(zhuǎn)換裝置(D/A) 133和音頻輸出裝置134。
[0077]同步播放控制裝置131在CPUlll的控制下根據(jù)重混線的每個音軌播放音頻存儲裝置141中存儲的音頻數(shù)據(jù)，并且將來自多個系統(tǒng)(音軌)的音頻信號提供給音頻混音裝置132。再者，同步播放控制裝置131將指示重混線的時間軸上的音頻數(shù)據(jù)上的播放位置的信息提供給CPUlll。[0078]音頻混音裝置132在CPUlll的控制下組合來自同步播放控制裝置131的音頻信號的多個系統(tǒng)，并且將其提供給音頻輸出裝置134。
[0079]D/A133將從音頻混音裝置132提供的數(shù)字音頻信號轉(zhuǎn)換成模擬音頻信號，并且將模擬音頻信號提供給音頻輸出裝置134。
[0080]音頻輸出裝置134放大來自D/A133的模擬音頻信號，并且輸出到諸如揚聲器或耳機(jī)的輸出裝置。
[0081]用戶操作接口裝置113例如由觸摸面板、按鍵、按鈕、鼠標(biāo)、鍵盤等構(gòu)成，接受來自用戶的執(zhí)行處理的指令，并且將指示該指令的信息提供給音樂重混系統(tǒng)101的每個單元。
[0082]用戶接口顯示裝置114例如由諸如液晶顯示器(IXD)、發(fā)光二極管(LED)等的顯示裝置構(gòu)成。用戶接口顯示裝置114在CPUlll的控制下顯示諸如DJ播放屏幕的音樂重混系統(tǒng)101的操作狀態(tài)、處理狀態(tài)等以執(zhí)行DJ播放操作。
[0083]注意，例如，用戶操作接口裝置113和用戶接口顯示裝置114可以通過利用觸摸面板構(gòu)造用戶操作接口裝置113并且將其安裝在用戶接口顯示裝置114上來集成。
[0084]ROMl 15存儲由CPUlll執(zhí)行的諸如控制程序或者廣泛的多種數(shù)據(jù)的數(shù)據(jù)。
[0085]RAMl 16用作CPUlll等的工作區(qū)域。
[0086]存儲裝置117由音頻存儲裝置141和音頻元數(shù)據(jù)存儲裝置142構(gòu)成。
[0087]音頻存儲裝置141例如由諸如閃速存儲器或硬盤的存儲裝置或記錄裝置構(gòu)成，并且存儲各種類型的音頻數(shù)據(jù)。例如，以預(yù)定的采樣頻率將音頻數(shù)據(jù)轉(zhuǎn)換成按照脈沖碼調(diào)制(PCM)格式采樣的數(shù)字音頻數(shù)據(jù)，并且適當(dāng)?shù)馗鶕?jù)預(yù)定格式以壓縮狀態(tài)進(jìn)行存儲。
[0088]音頻元數(shù)據(jù)存儲裝置142例如由諸如閃速存儲器或硬盤的存儲裝置或記錄裝置構(gòu)成，并且存儲各種類型的音頻數(shù)據(jù)的元數(shù)據(jù)。注意，后面將參照圖6至9詳細(xì)描述元數(shù)據(jù)。
[0089]注意，對應(yīng)于同一音頻的音頻數(shù)據(jù)和元數(shù)據(jù)使用唯一識別每個音頻的音頻ID彼此相關(guān)。替選地，在音頻數(shù)據(jù)具有諸如MPEG音頻層-3(MP3)的格式的情況下，邊緣數(shù)據(jù)(元數(shù)據(jù))可以存儲在與ID3標(biāo)簽相同的文件中。
[0090]此外，音頻存儲裝置141和音頻元數(shù)據(jù)存儲裝置142可以被構(gòu)造為分立的存儲裝置，或者可以被構(gòu)造為單個存儲裝置。
[0091]網(wǎng)絡(luò)通信裝置118經(jīng)由諸如互聯(lián)網(wǎng)102的網(wǎng)絡(luò)接收并傳送各種類型的信息。例如，網(wǎng)絡(luò)通信裝置118可以從連接到互聯(lián)網(wǎng)102的另一用戶擁有的服務(wù)器或系統(tǒng)下載音頻數(shù)據(jù)和元數(shù)據(jù)，或者將各種類型的信息和數(shù)據(jù)傳送到服務(wù)器和其他系統(tǒng)。
[0092]播放裝置112的實施例的詳細(xì)示例
[0093]圖4是圖示播放裝置112中的同步播放控制裝置131和音頻混音裝置132的詳細(xì)實施例的示例的框圖。
[0094]同步播放控制裝置131由主節(jié)拍生成裝置161、解碼器162_1至162_j以及時間伸縮裝置/音高移位裝置163-1至163-j構(gòu)成。此外，音頻混音裝置132由效果處理單元171-1至171-j、音量調(diào)整裝置172-1至172_j和音頻混合裝置173構(gòu)成。
[0095]解碼器162-1至162-j、時間伸縮裝置/音高移位裝置163_1至163_j、效果處理單元171-1至171-j和音量調(diào)整裝置172-1至172_j形成群組，并且每個群組對一個音軌執(zhí)行處理。例如，解碼器162-1、時間伸縮裝置/音高移位裝置163-1、效果處理單元171-1和音量調(diào)整裝置172-1形成一個群組，并且執(zhí)行與音軌對應(yīng)的處理。因此，圖2中的播放裝置112具有能夠同時播放音頻數(shù)據(jù)(音頻素材)的j個系統(tǒng)(音軌)并且將這些系統(tǒng)組合的構(gòu)造。
[0096]注意，在下文中，當(dāng)解碼器162-1至162-j不必被單獨區(qū)分時，這些解碼器將被簡單地稱為“解碼器162”。當(dāng)時間伸縮裝置/音高移位裝置163-1至163-j不必被單獨區(qū)分時，這些時間伸縮裝置/音高移位裝置將被簡單地稱為“時間伸縮裝置/音高移位裝置163”。當(dāng)效果處理單元171-1至171-j不必被單獨區(qū)分時，這些效果處理單元將被簡單地稱為“效果處理單元171”。當(dāng)音量調(diào)整裝置172-1至172-j不必被單獨區(qū)分時，這些音量調(diào)整裝置將被簡單地稱為“音量調(diào)整裝置172”。
[0097]主節(jié)拍生成裝置161生成作為基于用戶設(shè)定的主節(jié)奏的時鐘信號的主節(jié)拍，并且將其提供給播放裝置112和用戶接口顯示裝置114的每個單元。再者，主節(jié)拍生成裝置161基于用戶等已設(shè)定的重混線中的度量生成作為根據(jù)重混線中的小節(jié)起點的定時的時鐘信號的小節(jié)信號，并且將其提供給播放裝置112和用戶接口顯示裝置114的每個單元。例如，在重混線中的度量被設(shè)定為四節(jié)拍時間的情況下，每當(dāng)輸出主節(jié)拍的四個時鐘(四個節(jié)拍)時，主節(jié)拍生成裝置161輸出小節(jié)信號。再者，主節(jié)拍生成裝置161根據(jù)小節(jié)的節(jié)拍，向CPUl 11提供指示當(dāng)前重混線的播放位置的信息。
[0098]解碼器162和時間伸縮裝置/音高移位裝置163是成對的，并且構(gòu)成音頻信號生成單元。每個音頻信號生成單元在CPUlll的控制下在主節(jié)拍和小節(jié)信號指示的混合線上的時間軸的小節(jié)和節(jié)拍的位置的定時，執(zhí)行音頻存儲裝置141中存儲的音頻數(shù)據(jù)的播放。
[0099]解碼器162-1至162-j在CPUlll的控制下分別從音頻存儲裝置141獲得音頻數(shù)據(jù)并且使用關(guān)于每個樂曲的元數(shù)據(jù)對以諸如MP3或自適應(yīng)變換聲學(xué)編碼(ATRAC)的預(yù)定格式壓縮的音頻數(shù)據(jù)解碼。解碼器162-1至162-j隨后將通過解碼獲得的PCM格式的音頻信號結(jié)果提供給時間伸縮裝置/音高移位裝置163-1至163-j。
[0100]時間伸縮裝置/音高移位裝置163-1至163-j在CPUlll的控制下針對來自解碼器162-1至162-j的音頻信號分別執(zhí)行時間伸縮和音高移位處理，并且在改變音頻信號播放速度和音高之后提供給效果處理單元171-1至171-j。
[0101]效果處理單元171-1至171-j在CPUlll的控制下分別對來自時間伸縮裝置/音高移位裝置163-1至163-j的音頻信號執(zhí)行效果處理，諸如低通濾波器、高通濾波、帶通濾波、語音消除、混響、延遲、失真和最大，隨后將其提供給音量調(diào)整裝置172-1至172-j。
[0102]音量調(diào)整裝置172-1至172-j在CPUlll的控制下分別對來自效果處理單元171_1至171-j的每個單元的音頻信號的音量進(jìn)行調(diào)整，隨后將其提供給音頻混合裝置173。
[0103]音頻混合裝置173組合來自音量調(diào)整裝置172-1至172-j的音頻信號，隨后將其提供給D/A133。
[0104]再者，播放裝置112中的一些功能或者每個功能可以由軟件實現(xiàn)。
[0105]音樂重混系統(tǒng)101的功能配置示例
[0106]圖5是圖示音樂重混系統(tǒng)101的功能配置示例的框圖。出于功能角度，音樂重混系統(tǒng)101由用戶接口處理單元211、重混處理單元212、同步播放單元213、操作單元214、顯示單元215、網(wǎng)絡(luò)通信單元216、音頻元數(shù)據(jù)存儲單元217和音頻存儲單元218構(gòu)成。
[0107]用戶接口處理單元211由執(zhí)行預(yù)定控制程序的CPUlll實現(xiàn)，并且執(zhí)行與音樂重混系統(tǒng)101的用戶接口相關(guān)的處理。用戶接口處理單元211由音頻素材搜索單元231和顯示控制單元232構(gòu)成。
[0108]音頻素材搜索單元231搜索適用于與目標(biāo)音頻素材合并或者一起連續(xù)播放的音頻素材。音頻素材搜索單元231由相似性計算單元241、分值計算單元242和推薦樂曲提取單元243構(gòu)成。
[0109]相似性計算單元241基于每個樂曲的元數(shù)據(jù)計算兩個音頻素材的和弦進(jìn)行的相似性，并且將指示計算的相似性的分值提供給分值計算單元242。
[0110]分值計算單元242基于相似性計算單元241計算的相似性搜索適于與目標(biāo)音頻素材合并或者一起連續(xù)播放的音頻素材。分值計算單元242隨后計算指示有多少搜索到的音頻素材與目標(biāo)音頻素材配合的分值。分值計算單元242將搜索到的音頻素材和指示分值的信息存儲到音頻元數(shù)據(jù)存儲單元217中。
[0111]推薦樂曲提取單元243基于音頻元數(shù)據(jù)存儲單元217中存儲的分值提取適于在當(dāng)前播放作為推薦樂曲的樂曲之后連續(xù)播放的樂曲。推薦樂曲提取單元243將推薦樂曲的提取結(jié)果提供給顯示控制單元232。
[0112]顯示控制單元232通過顯示單元215控制DJ播放屏幕等的顯示。再者，顯示控制單元232基于從主節(jié)拍生成單元281提供的主節(jié)拍使DJ播放屏幕的顯示的每個部分與音頻數(shù)據(jù)的播放同步。
[0113]重混處理單元212由執(zhí)行預(yù)定控制程序的CPUlll實現(xiàn)，并且執(zhí)行與重混播放相關(guān)的處理。重混處理單元212由播放控制單元261和音軌生成單元262構(gòu)成。
[0114]播放控制單元261將音頻數(shù)據(jù)和元數(shù)據(jù)提供給音頻信號生成單元282-1至282-j，并且控制音頻信號生成單元282-1至282-j從每個音頻素材的提取源生成的音頻數(shù)據(jù)的播放位置和播放定時。再者，播放控制單元261基于作為每個音頻素材提取源的音頻數(shù)據(jù)的節(jié)奏的原始節(jié)奏，控制音頻信號生成單元282-1至282-j的音頻素材的播放速度，其中在主節(jié)奏的定時播放音頻素材。
[0115]此外，播放控制單元261控制效果處理單元291以調(diào)整效果處理單元291輸出的音頻信號的音量。此外，播放控制單元261基于原始音調(diào)(其是每個音頻素材的提取源的音頻數(shù)據(jù))和主音調(diào)之間的差異，以及播放控制單元261的播放速度的控制量，適當(dāng)?shù)乜刂埔纛l信號生成單元282-1至282-j的音頻素材的播放聲音的音高，使得音頻素材的音調(diào)與主音調(diào)的定時匹配。
[0116]音軌生成單元262針對重混播放中使用的音軌的數(shù)目生成音頻信號生成單元282。具體地，例如，音軌生成單元262針對重混播放中使用的音軌的數(shù)目，開始解碼器162和時間伸縮裝置/音高移位裝置163的處理。
[0117]同步播放單元213由圖4中的播放裝置112實現(xiàn)，并且構(gòu)成同步播放控制單元271、音頻混音單元272和音頻輸出單元273。同步播放控制單元271由圖4中的同步播放控制裝置131實現(xiàn)，構(gòu)成主節(jié)拍生成單元281和音頻信號生成單元282-1至282-j。主節(jié)拍生成單元281由圖4中的主節(jié)拍生成裝置161實現(xiàn)并且音頻信號生成單元282-1至282-j均由圖4中的解碼器162-1至162-j和時間伸縮裝置/音高移位裝置163-1至163-j實現(xiàn)。
[0118]音頻混音單元272由圖4中的音頻混音裝置132實現(xiàn)，并且配置效果處理單元291和音頻混合單元292。效果處理單元291由圖4中的效果處理單元171-1至171-j和音量調(diào)整裝置172-1至172-j實現(xiàn)，并且音頻混合單元292由圖4中的音頻混合裝置173實現(xiàn)。音頻輸出單元273由圖4中的D/A133和音頻輸出裝置134實現(xiàn)。
[0119]操作單元214、顯示單元215、網(wǎng)絡(luò)通信單元216、音頻元數(shù)據(jù)存儲單元217和音頻存儲單元218均由圖1中的用戶操作接口裝置113、用戶接口顯示裝置114、網(wǎng)絡(luò)通信裝置118、音頻存儲裝置141和音頻元數(shù)據(jù)存儲裝置142實現(xiàn)。
[0120]注意，在下文中，當(dāng)描述音樂重混系統(tǒng)101的處理時，將基于圖5中的框圖進(jìn)行描述。
[0121]音頻數(shù)據(jù)的元數(shù)據(jù)的細(xì)節(jié)
[0122]接下來，將參照圖6至9描述元數(shù)據(jù)的細(xì)節(jié)。元數(shù)據(jù)是指示樂曲的方面，以及音頻數(shù)據(jù)和樂曲之間的對應(yīng)關(guān)系的數(shù)據(jù)，并且包括節(jié)拍信息、和弦信息和旋律信息。
[0123]這里，將參照圖6描述節(jié)拍信息、和弦信息和旋律信息。注意，圖6的下部的波形指示音頻數(shù)據(jù)的波形，并且在標(biāo)為全部樣本的范圍中，被標(biāo)為有效樣本的范圍是實際記錄樂曲數(shù)據(jù)的范圍。
[0124]節(jié)拍信息指示音頻數(shù)據(jù)的小節(jié)和節(jié)拍的位置。為了更準(zhǔn)確，節(jié)拍信息指示樂曲的小節(jié)的起點(以下還可以稱為小節(jié)起點)，以及音頻數(shù)據(jù)的其他小節(jié)和節(jié)拍的樣本位置。在圖6中，文本“節(jié)拍信息”的左側(cè)的長的豎直線指示樂曲的小節(jié)起點的位置，并且小節(jié)起點以外的節(jié)拍的位置由短的豎直小節(jié)指示。注意，圖6圖示了四節(jié)拍時間的示例，并且小節(jié)起點每四個節(jié)拍呈現(xiàn)。
[0125]使用該節(jié)拍信息，音頻數(shù)據(jù)的小節(jié)起點和每個節(jié)拍的位置可以按樣本的增量識另IJ，并且音頻數(shù)據(jù)的預(yù)定區(qū)域可以按小節(jié)或節(jié)拍的增量識別。此外，使用節(jié)拍信息，音頻數(shù)據(jù)的預(yù)定區(qū)域的每分鐘的平均節(jié)拍(BPM)可以基于下述式(I)計算。
[0126]平均BPM=BnXFs/SnX60 (I)
[0127]注意，在式(I)中，Bn指示區(qū)域內(nèi)的節(jié)拍的數(shù)目，F(xiàn)s指示音頻數(shù)據(jù)的采樣率，并且Sn指示區(qū)域內(nèi)的樣本的數(shù)目。
[0128]和弦信息指示樂曲的和弦的進(jìn)行，并且還指示音頻數(shù)據(jù)中的每個和弦的位置。更具體地，如圖6中所示，和弦信息指示在樂曲中呈現(xiàn)的每個和弦的類型的樣本位置。使用該和弦信息，每個和弦的音頻數(shù)據(jù)的位置可以按樣本的增量來識別，并且可以按和弦的增量設(shè)定音頻數(shù)據(jù)的預(yù)定區(qū)域。再者，樂曲的每個和弦的位置可以按節(jié)拍的增量基于和弦信息和節(jié)拍信息來設(shè)定。
[0129]注意，和弦信息中指示的和弦類型基于和弦的根音相對于樂曲的音階的主音的相對位置來表示，而非使用和弦名稱來表示。更具體地，每個和弦通過和弦名稱的根音名稱部分來表不，其被替換為基于作為音階的主音相對于和弦的根音的相對位置的音度的數(shù)字(并且，在適當(dāng)?shù)那闆r下，使用#或[>符號)，諸如例如1、I#(或II b )、I1、II#(或III b )、II1、III# (或 IV b )、IV、IV# (或V b )、V、V# (或VI b )、V1、VI# (或 VII b )、以及 VI1、VII#(或 I b )。
[0130]例如，在通過和弦名稱表示和弦類型的情況下，難于分辨在圖7中的上側(cè)的主音(基調(diào))是C的C大調(diào)中的和弦進(jìn)行C、F、G、Am，以及下側(cè)的主音是E的E大調(diào)中的和弦進(jìn)行E、A、B、C#m,相似地也難于分辨音調(diào)是否變調(diào)到同一音調(diào)。
[0131]另一方面，在基于音階的主音和和弦的根音的相對位置顯示和弦的類型的情況下，兩個和弦進(jìn)行被表示為相同的1、IV、V、VIm。因此，在上側(cè)的每個和弦四個半音上變調(diào)到E大調(diào)的情況下，或者當(dāng)每個下側(cè)的和弦四個半音下變調(diào)到C大調(diào)時，較易于分辨和弦進(jìn)行匹配。換言之，和弦進(jìn)行與音頻素材之間的不同的調(diào)性的關(guān)系將更準(zhǔn)確，并且在音調(diào)改變的情況下，將較容易分辨兩個音頻素材之間的音頻進(jìn)行是否相似。因此，在通過計算機(jī)等的處理將音調(diào)變調(diào)到同一音調(diào)的情況下，較易于計算兩個音頻素材之間的和弦進(jìn)行的相似度。
[0132]注意，在下文中，為了區(qū)分通過和弦名稱表示的和弦以及基于和弦的根音相對于音階的主音的相對位置表示的和弦，前者將被稱為“絕對和弦”，并且后者將被稱為“相對和弦”。再者，通過絕對和弦表示和弦類型將被稱為“絕對表示”，并且使用相對和弦的表示將被稱為“相對表示”。再者，在下文中，在相對和弦中，通過數(shù)字并且在適當(dāng)?shù)那闆r下通過所添加的#或b符號指示和弦的根音相對于音階的主音的相對位置的值將被稱為“音度”。
[0133]旋律信息指示每個旋律元素(以下稱為“旋律塊”)在構(gòu)成樂曲的音頻數(shù)據(jù)中的位置，并且指示旋律的展開。更具體地，旋律信息指示呈現(xiàn)在諸如圖6中所示的樂曲中的旋律塊的類型，諸如序曲、主歌A、主歌B、副歌、間奏、獨奏、結(jié)尾等，以及每個旋律塊的音頻數(shù)據(jù)的樣本位置。使用該旋律信息，音頻數(shù)據(jù)的每個旋律塊的位置可以按樣本的增量來識別，并且音頻數(shù)據(jù)的可選區(qū)間可以按旋律塊的增量來指定。再者，基于旋律信息和節(jié)拍信息，樂曲中的每個旋律塊的位置可以按節(jié)拍的增量來指示。
[0134]圖8圖示了元數(shù)據(jù)的數(shù)據(jù)配置的示例，并且圖9圖示了包括小節(jié)/節(jié)拍編號、屬性和樣本位置的元數(shù)據(jù)的具體示例。
[0135]在小節(jié)/節(jié)拍編號中設(shè)定指示樂曲中的節(jié)拍的位置的值。例如，在第η個小節(jié)的第m個節(jié)拍中的節(jié)拍的情況下，在小節(jié)/節(jié)拍編號中設(shè)定值η和m。例如，在圖9中所示的示例中，第一行是第一小節(jié)的第一節(jié)拍的數(shù)據(jù)，并且最底部的小節(jié)是第二小節(jié)的第二節(jié)拍的數(shù)據(jù)。注意，η是等于或大于I的整數(shù)，并且在樂曲以k度量的情況下，m是I至k的范圍內(nèi)的整數(shù)。
[0136]在屬性中設(shè)定諸如節(jié)拍信息、旋律信息、和弦信息的屬性以及與屬性相關(guān)的詳細(xì)數(shù)據(jù)。例如，在屬性指示和弦信息的情況下，屬性被設(shè)定為具有指示和弦信息中的屬性類型的值，以及指示樣本位置的位置中顯示的和弦的類型的值。
[0137]樣本位置被設(shè)定為具有按樣本的增量與元數(shù)據(jù)對應(yīng)的音頻數(shù)據(jù)的位置。
[0138]注意，對于旋律信息的登記，僅將每個旋律塊的起始位置登記在元數(shù)據(jù)中，并且對于旋律信息，僅將每個和弦的起始位置登記在元數(shù)據(jù)中。然而，可以進(jìn)行如下布置，其中關(guān)于每個節(jié)拍的與旋律塊的類型和和弦的類型相關(guān)的信息可以被登記在元數(shù)據(jù)中。
[0139]此外，除了以上描述的信息之外，相對時間軸不變的信息，諸如采樣頻率和量化比特率，作為整個樂曲的信息被登記到元數(shù)據(jù)。再者，樂曲的音調(diào)和音階信息也被登記到元數(shù)據(jù)。注意，在音調(diào)、音階或者節(jié)拍在樂曲期間改變的情況下，指示改變的樣本位置、音調(diào)和音階或者度量的信息被登記在元數(shù)據(jù)中。
[0140]音樂重混系統(tǒng)101執(zhí)行的DJ播放處理
[0141]接下來，參照圖10和11，將描述音樂重混系統(tǒng)101執(zhí)行的DJ播放處理。注意，在用戶經(jīng)由例如操作單元214輸入指令以開始DJ播放處理的情況下，該處理開始。
[0142]在步驟SI，顯示單元215在顯示控制單元232的控制下顯示DJ播放屏幕。
[0143]圖12圖示了顯示單元215顯示的DJ播放屏幕的示例。在DJ播放屏幕的左側(cè)邊緣示出了一部分主動力齒輪301。如通過箭頭Al所示，主動力齒輪301與主節(jié)拍同步地順時針旋轉(zhuǎn)，并且以與主節(jié)奏相關(guān)的速度旋轉(zhuǎn)。更具體地，主動力齒輪301的每個齒表示節(jié)拍，并且在主節(jié)拍前進(jìn)一個節(jié)拍期間，主動力齒輪301旋轉(zhuǎn)一個齒距。這里，一個齒距意味著相鄰齒之間的空間。
[0144]在主動力齒輪301周圍是占位符302A至303，其直徑小于主動力齒輪301，以預(yù)定間隔安置。占位符302A和占位符302B具有相同尺寸，并且指示將與主動力齒輪301嚙合的樂曲齒輪304-1至304-m的安置位置。占位符303略小于另外兩個占位符303，并且指示將與主動力齒輪301嚙合的素材齒輪305-1至305-m的安置位置。
[0145]再者，占位符302A至303均以不同種類的方面顯示以在一個示圖中進(jìn)行區(qū)分。例如，占位符302A至303被設(shè)計為具有不同種類的顏色和圖案。注意，以下將描述占位符302A至303具有不同顏色的情況。
[0146]在DJ播放屏幕右側(cè)的音頻齒輪場地中，存在隨機(jī)安置的不同種類的音頻齒輪，每個音頻齒輪對應(yīng)于不同的音頻數(shù)據(jù)。存在兩種類型的音頻齒輪，它們是樂曲齒輪304-1至304-m以及素材齒輪305-1至305_n，并且用戶可以使這些音頻齒輪在DJ顯示屏幕中自由移動。
[0147]注意，在圖12中，僅示出了樂曲齒輪304-1至304_m以及素材齒輪305-1至305_n的一部分。再者，在下文中，在樂曲齒輪304-1至304-m不必被單獨區(qū)分的情況下，這些樂曲齒輪將被簡單地稱為“樂曲齒輪304”，并且在素材齒輪305-1至305-n不必被單獨區(qū)分的情況下，這些素材齒輪將被簡單地稱為“素材齒輪305”。
[0148]每個樂曲齒輪304分別與不同的樂曲或者樂曲的一部分相關(guān)，并且被設(shè)定為與占位符302A和302B對應(yīng)的尺寸。如后面描述的，通過將預(yù)定的樂曲齒輪304安置在占位符302A和302B上，播放與樂曲齒輪304對應(yīng)的樂曲或者樂曲的一部分。
[0149]圖13是樂曲齒輪304的特寫。樂曲齒輪304由中間的圓形的信息顯示部分304A以及外部圍繞的外圍部分304B構(gòu)成。信息顯不部分304A例如不出與樂曲齒輪304的樂曲對應(yīng)的專輯或單曲的封面，或者藝術(shù)家的照片。再者，通過利用光標(biāo)或手指指向信息顯示部分304A，具有與樂曲齒輪304相關(guān)的標(biāo)題和藝術(shù)家名稱的氣球321呈現(xiàn)。
[0150]外圍部分304B的每個齒指示節(jié)拍，并且如后面描述的，在相應(yīng)的樂曲的播放前進(jìn)一個節(jié)拍時，主動力齒輪301旋轉(zhuǎn)一個齒距。
[0151]每個素材齒輪305與不同的循環(huán)素材相關(guān)，并且被設(shè)定為與占位符303的尺寸匹配。如后面描述的，通過將預(yù)定的素材齒輪305安置在占位符303上，播放與素材齒輪305對應(yīng)的循環(huán)素材。
[0152]圖14是素材齒輪305的特寫。素材齒輪305由信息顯示部分305A和外圍部分305B構(gòu)成。信息顯示部分305A例如顯示表示與素材齒輪305對應(yīng)的循環(huán)素材的照片或圖
坐/I寸ο
[0153]外圍部分305B的每個齒指示節(jié)拍，并且如后面描述的，在相應(yīng)的循環(huán)素材前進(jìn)一個節(jié)拍時，素材齒輪305旋轉(zhuǎn)一個齒距。此外，外圍部分305B的顏色與占位符303相似。因此，用戶可以直觀地領(lǐng)會素材齒輪305的安置位置是占位符303。
[0154]注意，如圖15中所示，對于素材齒輪305的外圍部分305B，對于與不具有任何節(jié)拍的循環(huán)素材以及不必被同步播放的循環(huán)素材相關(guān)的齒輪，沒有示出齒輪。循環(huán)素材的示例包括模擬沒有音樂節(jié)拍的自然聲音的聲音效果，諸如海浪的聲音等。
[0155]此外，與沒有任何節(jié)拍但是必須在小節(jié)起點處播放的循環(huán)素材或者具有節(jié)拍但是在沒有與主節(jié)奏的任何關(guān)系的情況下按原始節(jié)奏播放的循環(huán)素材相關(guān)的素材齒輪305的外圍部分305B被示出為僅具有一個齒。該循環(huán)素材的示例包括沒有節(jié)奏的人工聲音。
[0156]注意，由于顯示單元215的顯示空間有限，不能顯示所有樂曲齒輪304和素材齒輪305。因此，例如，如圖16中所示，顯示單元215上顯示的齒輪之間的切換可以通過如下方式實現(xiàn)，將樂曲齒輪304和素材齒輪305安置在比顯示單元215的顯示空間大的虛擬顯示空間中并且使顯示區(qū)域豎直滾動，或者切換頁面。
[0157]此外，主動力齒輪301不與任何樂曲或循環(huán)素材相關(guān)。在主動力齒輪301內(nèi)部顯示音量滑塊311、節(jié)奏滑塊312和小節(jié)/節(jié)拍指示符313。
[0158]音量滑塊311用于設(shè)定安置在與樂曲齒輪304對應(yīng)的占位符302A上的樂曲(以下稱為播放樂曲A)以及安置在與樂曲齒輪304對應(yīng)的占位符302B上的樂曲(以下稱為播放樂曲B)的音頻的平衡。例如，使音量滑塊311的設(shè)定位置升高會使播放樂曲A的音量升高并且使播放樂曲B的音量降低，另一方面，使音量滑塊311的設(shè)定位置降低會使播放樂曲A的音量降低并且使播放樂曲B的音量升高。
[0159]節(jié)奏滑塊312用于設(shè)定主節(jié)奏。例如,使節(jié)奏滑塊312的設(shè)定位置升高會使節(jié)奏加速，另一方面，使節(jié)奏滑塊312的設(shè)定位置降低會使節(jié)奏減慢。再者，根據(jù)主節(jié)奏的改變，主動力齒輪301的旋轉(zhuǎn)速度改變，并且與主動力齒輪301嚙合的齒輪，即樂曲齒輪304和素材齒輪305的旋轉(zhuǎn)速度也改變。
[0160]小節(jié)/節(jié)拍指示符313指示重混線的小節(jié)的進(jìn)行以及節(jié)拍。更具體地,小節(jié)/節(jié)拍指示符313將指示符的數(shù)目顯示為重混線的節(jié)拍的數(shù)目。圖12是圖示以四節(jié)拍時間設(shè)定重混線的示例，并且設(shè)定了四個指示符。四個指示符中的最右側(cè)的指示符是指示重混線的小節(jié)起點的指示符，并且被設(shè)定為略大于其他指示符。
[0161]隨后，在重混線的小節(jié)起點的定時，右側(cè)邊緣處的指不符聞売。隨后，在隨著節(jié)拍進(jìn)行的時間，指不符的聞売位置從左側(cè)邊緣向右側(cè)移動。隨后，在重混線中的小節(jié)起點，右側(cè)邊緣處的指示符高亮，并且在隨著節(jié)拍的時間，重復(fù)地執(zhí)行從左側(cè)邊緣向右側(cè)移動的指示符的高亮位置的處理。
[0162]在步驟S2中，音樂重混系統(tǒng)101設(shè)定主節(jié)奏。更具體地，播放控制單元261將與節(jié)奏滑塊312的設(shè)定位置對應(yīng)的主節(jié)奏的值設(shè)定到主節(jié)拍生成單元281。主節(jié)拍生成單元281開始以主節(jié)奏生成主節(jié)拍。
[0163]在步驟S3中，播放控制單元261確定是否已給出播放新音頻數(shù)據(jù)的指令。例如，在用戶對操作單元214進(jìn)行操作，并且預(yù)定的樂曲齒輪304被安置在占位符302A或占位符302B的情況下，播放控制單元261確定已指令播放與樂曲齒輪304對應(yīng)的樂曲。此外，在用戶對操作單元214進(jìn)行操作，并且預(yù)定的素材齒輪305被安置在占位符303的情況下，播放控制單元261確定已指令播放與素材齒輪305對應(yīng)的循環(huán)素材。
[0164]在播放控制單元261確定已指令播放新的音頻數(shù)據(jù)(樂曲或循環(huán)素材)的情況下，流程前往步驟S4。
[0165]在步驟S4，音樂重混系統(tǒng)101執(zhí)行同步播放處理。這里，將參照圖17中的流程圖描述同步播放的細(xì)節(jié)。[0166]在步驟S51，播放控制單元261確定將要播放的音頻是否是樂曲。在將要播放的音頻是樂曲的情況下，流程前往步驟S52。
[0167]在步驟S52中，播放控制單元261設(shè)定樂曲播放的起始位置。更具體地，在播放控制單元261將要單獨播放新的樂曲的情況下，樂曲的起點被設(shè)定為播放起點。注意，在新播放的樂曲是樂曲的一部分的情況下，樂曲的該部分的起點被設(shè)定為播放起點。
[0168]注意，單獨播放新的樂曲的情況指的是例如，從樂曲仍未被播放的狀態(tài)將要播放新的樂曲，或者在當(dāng)前僅播放一首樂曲時播放新的樂曲而非舊的樂曲，與是否播放循環(huán)素材無關(guān)。
[0169]再者，在播放控制單元261開始播放將與當(dāng)前播放的另一樂曲重疊的新的樂曲時，播放控制單元261搜索參考區(qū)域之間的分值對于其他樂曲最大的新的樂曲的區(qū)域(以下稱為“最大分值區(qū)域”)。播放控制單元261隨后將播放起點設(shè)定為與將要播放的新的樂曲中的參考區(qū)域中的接下來將要播放的小節(jié)對應(yīng)的最大區(qū)域分值的小節(jié)的起點。例如，在接下來將要播放從參考區(qū)域的起點起的第η個小節(jié)時,從最大分值區(qū)域的起點起的第η個小節(jié)被設(shè)定為播放開始位置。
[0170]后面將描述參考區(qū)域和分值的細(xì)節(jié)。
[0171]在步驟S53中，播放控制單元261計算時間伸縮值。更具體地，首先，播放控制單元261根據(jù)要新播放的樂曲的播放開始位置計算預(yù)定區(qū)間內(nèi)的平均BPM作為原始節(jié)奏。接下來，播放控制單元261通過將主節(jié)奏除以原始節(jié)奏來計算時間伸縮值Vt。播放控制單元261隨后將計算的時間伸縮值Vt提供給音頻信號生成單元282。
[0172]在步驟S54中，音樂重混系統(tǒng)101在重混線的小節(jié)起點的定時開始播放樂曲。更具體地，音頻信號生成單元282基于從主節(jié)拍生成單元281輸出的小節(jié)信號，在關(guān)于重混線的下一小節(jié)起點的時間，從設(shè)定的播放開始位置開始播放新的樂曲。
[0173]再者，音頻信號生成單元282基于播放控制單元261計算的時間伸縮Vt以Vt倍的播放速度播放要新播放的樂曲。因此，要新播放的樂曲的節(jié)奏與主節(jié)奏匹配。
[0174]因此，當(dāng)在播放樂曲A或播放樂曲B正被播放的同時開始播放另一樂曲時，這兩首樂曲同步播放。就是說，這兩首樂曲被播放，使得節(jié)奏和節(jié)拍位置匹配。此外，這兩首樂曲被播放，使得小節(jié)起點匹配。
[0175]注意，在播放播放樂曲A和播放樂曲B中的一個或另一個時，播放小節(jié)起點與重混線的小節(jié)起點匹配，并且節(jié)奏與主節(jié)奏匹配的樂曲。
[0176]再者，顯示單元215在顯示控制單元232的控制下開始新的樂曲的播放和顯示?，F(xiàn)在，將參照圖18和19描述播放新的樂曲的情況下的DJ顯示屏幕。
[0177]首先，參照圖18，將描述在樂曲齒輪304-1 (播放樂曲A)被安置在占位符302A的情況下開始播放與樂曲齒輪304-1對應(yīng)的樂曲。
[0178]例如，在播放樂曲A的播放開始時，主動力齒輪301的齒和占位符302A的齒嚙合，并且經(jīng)由占位符302A，主動力齒輪301的齒和樂曲齒輪304-1的齒間接嚙合。占位符302A隨后開始在箭頭A2的方向上與樂曲齒輪304-1 —起旋轉(zhuǎn)，并且占位符302A和樂曲齒輪304-1的外圍部分304B的顏色逐漸變暗。
[0179]此外，根據(jù)主節(jié)拍，播放樂曲A的節(jié)拍的進(jìn)行，以及主動力齒輪301、占位符302A和樂曲齒輪304-1的旋轉(zhuǎn)同步。換言之，在播放樂曲A的節(jié)拍進(jìn)行一個時，由于主動力齒輪301的旋轉(zhuǎn)，在主動力齒輪301和占位符302A以及樂曲齒輪304-1的嚙合位置前進(jìn)一個時，每個齒輪旋轉(zhuǎn)一個齒距。
[0180]接下來，參照圖19，將描述如下情況，在正在播放與安置在占位符302A上的樂曲齒輪304-1對應(yīng)的播放樂曲A的同時，通過將樂曲齒輪304-4 (播放樂曲B)安置在占位符302B上開始播放與樂曲齒輪304-4對應(yīng)的樂曲。
[0181]例如，在開始播放樂曲B的播放時，主動力齒輪301和占位符302B的齒彼此嚙合，并且主動力齒輪301的齒和樂曲齒輪304-4的齒經(jīng)由占位符302B間接嚙合。占位符302B隨后開始在箭頭A3的方向上與樂曲齒輪304-4 —起旋轉(zhuǎn)，并且占位符302B和樂曲齒輪304-4的外圍部分304B的顏色逐漸變暗。
[0182]此外，根據(jù)主節(jié)拍，播放樂曲B的節(jié)拍進(jìn)行與主動力齒輪301、占位符302B和樂曲齒輪304-4同步。就是說，在播放樂曲B的節(jié)拍進(jìn)行一個節(jié)拍時，每個齒輪由于主動力齒輪301的旋轉(zhuǎn)而旋轉(zhuǎn)一個齒距，使得主動力齒輪301的齒以及占位符302B和樂曲齒輪304-4的齒的嚙合位置前進(jìn)一個。
[0183]注意，占位符302A和樂曲齒輪304-1繼續(xù)旋轉(zhuǎn)。因此，占位符302A和樂曲齒輪
304-1，以及占位符302B和樂曲齒輪304-4，經(jīng)由主動力齒輪301間接嚙合，并且根據(jù)主動力齒輪301的旋轉(zhuǎn)以相同的速度和相同的方向旋轉(zhuǎn)。
[0184]注意，在占位符302A上安置有樂曲齒輪304(以下稱為樂曲齒輪A),并且另一樂曲齒輪304 (以下稱為樂曲齒輪B)安置在同一占位符302A上的情況下，在占位符302A處顯示的齒輪從樂曲齒輪A更換成樂曲齒輪B。再者，樂曲齒輪A被重新定位到樂曲齒輪場地。此外，在停止與樂曲齒輪A對應(yīng)的樂曲之后,開始播放與樂曲齒輪B對應(yīng)的樂曲。
[0185]通過相同的方式，在占位符302B上安置有樂曲齒輪304 (以下稱為樂曲齒輪C),并且另一樂曲齒輪304 (以下稱為樂曲齒輪D)安置在同一占位符302B上的情況下，在占位符302B處顯示的齒輪從樂曲齒輪C更換成樂曲齒輪D。再者,樂曲齒輪C被重新定位到樂曲齒輪場地。此外，在停止與樂曲齒輪C對應(yīng)的樂曲之后，開始播放與樂曲齒輪D對應(yīng)的樂曲。同步播放處理隨后結(jié)束。
[0186]另一方面，在步驟S51確定將開始播放的音頻不是樂曲而是循環(huán)素材的情況下，流程前進(jìn)到步驟S55。
[0187]在步驟S55中，播放控制單元261確定將要播放的循環(huán)素材是否是具有節(jié)拍的循環(huán)素材。在確定循環(huán)素材是具有節(jié)拍的循環(huán)素材的情況下，流程前往步驟S56。
[0188]在步驟S56中，播放控制單元261確定將要播放的循環(huán)素材是否是按其原始節(jié)奏播放的循環(huán)素材。在確定循環(huán)素材是不按其原始節(jié)奏播放的循環(huán)素材的情況下，換言之，如果確定循環(huán)素材是按主節(jié)奏播放的循環(huán)素材，則流程前進(jìn)到步驟S57。
[0189]在步驟S57中，播放控制單元261計算時間伸縮值。更具體地，首先，播放控制單元261計算新播放的循環(huán)素材平均值BPM作為原始節(jié)奏。播放控制單元261隨后計算時間伸縮值Vt作為將主節(jié)奏除以原始節(jié)奏的值。播放控制單元261隨后將計算的時間伸縮值Vt提供給音頻信號生成單元282。流程隨后前進(jìn)到步驟S59。
[0190]另一方面，在步驟S56中確定循環(huán)素材是按其原始節(jié)奏播放的循環(huán)素材的情況下，跳過步驟S57，并且流程前進(jìn)到步驟S59。
[0191]再者，在步驟S55中，在確定循環(huán)素材沒有節(jié)拍的情況下，流程前往步驟S58。[0192]在步驟S58中，播放控制單元261確定將要播放的循環(huán)素材是否是從小節(jié)起點播放的循環(huán)素材。如果確定循環(huán)素材是從小節(jié)起點播放的循環(huán)素材，則流程前進(jìn)到步驟S59。
[0193]在步驟S59中，音樂重混系統(tǒng)101在重混線的小節(jié)起點的定時開始循環(huán)素材的播放。更具體地，音頻信號生成單元282基于從主節(jié)拍生成單元281輸出的小節(jié)信號，在重混線上的下一小節(jié)開始的時間，從小節(jié)的頂部開始播放新的循環(huán)素材。
[0194]再者，在將要按照主節(jié)奏播放具有節(jié)拍的循環(huán)素材的情況下，音頻信號生成單元282基于播放控制單元261計算的時間伸縮Vt以Vt倍的播放速度播放要新播放的循環(huán)素材。因此，使要新播放的循環(huán)素材的節(jié)奏與主節(jié)奏匹配。
[0195]因此，在播放播放樂曲A和播放樂曲B中的至少一個的同時開始播放該循環(huán)素材的情況下，執(zhí)行正被播放的樂曲和循環(huán)素材的同步播放。就是說，執(zhí)行樂曲和循環(huán)素材的播放，使得節(jié)奏和節(jié)拍位置匹配。此外，執(zhí)行樂曲和循環(huán)素材的播放，使得小節(jié)起點匹配。
[0196]另一方面，在循環(huán)素材將要按其原始節(jié)奏播放，或者循環(huán)素材沒有節(jié)拍的情況下，音頻信號生成單元282沒有變化地按其原始節(jié)奏播放要新播放的循環(huán)素材。
[0197]因此，在播放播放樂曲A和播放樂曲B中的至少一個的同時開始播放循環(huán)素材的情況下，僅小節(jié)起點與正被播放的樂曲匹配，并且播放不同步，與該樂曲的節(jié)奏和節(jié)拍位置無關(guān)。
[0198]再者，顯示單元215在顯示控制單元232的控制下開始新的循環(huán)素材的播放顯示?，F(xiàn)在，將參照圖20針對播放新的循環(huán)素材的情況描述DJ顯示屏幕的示例。
[0199]圖20圖示了在播放與安置在占位符302A的樂曲齒輪304_1對應(yīng)的播放樂曲A以及播放與安置在占位符302B的樂曲齒輪304-4對應(yīng)的播放樂曲B的期間，通過將素材齒輪
305-2安置在占位符303上，開始播放與素材齒輪305-2對應(yīng)的循環(huán)素材(以下稱為新的循環(huán)素材)的情況的示例。
[0200]例如，與開始播放新的循環(huán)素材同時，主動力齒輪301和占位符303的齒嚙合，并且主動力齒輪301和素材齒輪305-2的齒輪經(jīng)由占位符303間接嚙合。占位符303和素材齒輪305-2兩者在箭頭A4指示的方向上開始旋轉(zhuǎn)。
[0201]再者，在新的循環(huán)素材是將按主節(jié)奏播放的、具有節(jié)拍的循環(huán)素材的情況下，循環(huán)素材的節(jié)拍的進(jìn)行以及主動力齒輪301、占位符303和素材齒輪305-2的旋轉(zhuǎn)根據(jù)主節(jié)拍同步。就是說，在新的循環(huán)素材的一個節(jié)拍的進(jìn)行期間，由于主動力齒輪301的旋轉(zhuǎn)，齒輪均旋轉(zhuǎn)一個齒距，使得主動力齒輪301的齒以及占位符302B和素材齒輪305-2的齒的嚙合位
置前進(jìn)一個。
[0202]連續(xù)地重復(fù)播放新的循環(huán)素材。就是說，在結(jié)束播放新的循環(huán)素材時，根據(jù)下一重混線處的小節(jié)起點繼續(xù)播放新的循環(huán)素材。
[0203]注意，在新的循環(huán)素材是具有節(jié)拍但是將按其原始節(jié)奏播放的循環(huán)素材，或者是不具有節(jié)拍但是將從重混線中的小節(jié)起點開始播放的循環(huán)素材，并且對應(yīng)的素材齒輪305僅具有一個齒的情況下，齒輪旋轉(zhuǎn)，使得主動力齒輪301和該素材齒輪305的齒在重混線中的每個小節(jié)的起點處嚙合。
[0204]再者,在另一素材齒輪305 (以下稱為素材齒輪B)被安置在已安置素材齒輪305(以下稱為素材齒輪A)的占位符303處的情況下，在占位符303處顯示的齒輪從素材齒輪A切換到素材齒輪B。再者,素材齒輪A移動到音頻齒輪場地。此外,在停止播放與素材齒輪A對應(yīng)的樂曲之后，開始播放與素材齒輪B對應(yīng)的樂曲。隨后，同步播放處理結(jié)束。
[0205]另一方面，在步驟S58中確定循環(huán)素材不是從小節(jié)起點播放的循環(huán)素材的情況下，即在確定循環(huán)素材是可以從小節(jié)的任何位置播放的循環(huán)素材的情況下，流程前進(jìn)到步驟 S60。
[0206]在步驟S60中，音樂重混系統(tǒng)101開始播放循環(huán)素材。就是說，與重混線上的位置無關(guān)，音頻信號生成單元282從起點開始播放新的循環(huán)素材，并且隨后重復(fù)地和連續(xù)地播放該循環(huán)素材。
[0207]因此，在播放播放樂曲A和播放樂曲B中的至少一個的同時開始播放該循環(huán)素材的情況下，以與正被播放的該樂曲無關(guān)的節(jié)奏、節(jié)拍位置和小節(jié)起點，不同步地播放循環(huán)素材。再者，通過與上文針對圖20描述的情況相同的方式,顯示單元215在顯示控制單元232的控制下開始新的循環(huán)素材的播放顯示。
[0208]然而，注意，這是新的循環(huán)素材是沒有節(jié)拍并且不必從重混線中的小節(jié)起點播放的循環(huán)素材的情況，并且對應(yīng)的素材齒輪305如圖15中所示。因此，主動力齒輪301和素材齒輪305不使齒嚙合，并且使得顯示如同素材齒輪305因為來自主動力齒輪301的旋轉(zhuǎn)的摩擦而轉(zhuǎn)動。隨后，同步播放處理結(jié)束。
[0209]返回圖10，在步驟S5中，播放控制單元261確定開始播放的是否是樂曲。在確定開始播放的不是樂曲的情況下，流程前進(jìn)到步驟S6。
[0210]在步驟S6中，相似性計算單元241設(shè)定已開始播放的樂曲中的參考塊。例如，在通過步驟S4中的處理已開始播放的樂曲中，相似性計算單元241將在開始播放的小節(jié)開始的預(yù)定數(shù)目的小節(jié)(例如，八個小節(jié))設(shè)定為參考塊。
[0211]在步驟S7中，音頻素材搜索單元231執(zhí)行推薦樂曲搜索處理。這里將參照圖21中的流程圖描述推薦樂曲搜索處理的細(xì)節(jié)。
[0212]在步驟SlOl中，相似性計算單元241從音頻元數(shù)據(jù)存儲單元217獲得包括參考塊的樂曲的元數(shù)據(jù)(以下還稱為參考樂曲)，并且基于所獲得的元數(shù)據(jù)獲得參考塊的節(jié)拍計數(shù)
Πο
[0213]在步驟S102中，相似性計算單元241將參考塊的相對和弦加載到具有節(jié)拍粒度的陣列a[]。具體地，相似性計算單元241基于相關(guān)樂曲的元數(shù)據(jù)，在參考塊的每個節(jié)拍獲得相對和弦，并且將其帶入到具有長度η的陣列a[]中。就是說，參考塊的開始節(jié)拍處的相對和弦被代入a[0]中，第二節(jié)拍處的相對和弦被代入a[l]中，如此等等，直至第η個節(jié)拍處的相對和弦被代入a[n_l]中。
[0214]在步驟S103中，相似性計算單元241將O帶入到變量s中。
[0215]在步驟S104中，相似性計算單元241從音頻元數(shù)據(jù)存儲單元217獲得第s+Ι首樂曲的元數(shù)據(jù)(以下還稱為搜索到的樂曲)。
[0216]在步驟S105中，相似性計算單元241確定第s+Ι首樂曲是否是將從搜索中排除的樂曲。在第s+Ι首樂曲，即搜索到的樂曲沒有落在預(yù)定排除條件以下的情況下，相似性計算單元241確定第s+Ι首樂曲不是要從搜索中排除的樂曲，并且流程前往步驟S106。
[0217]在步驟S106中，相似性計算單元241將第s+Ι個塊的相對和弦加載到具有節(jié)拍粒度的陣列b[]。具體地，相似性計算單元241基于搜索到的樂曲的元數(shù)據(jù)獲得與作為搜索到的樂曲的第s+Ι首樂曲的每個節(jié)拍對應(yīng)的相對和弦，并且將其代入到陣列b[]中。就是說，如果搜索到的樂曲的節(jié)拍計數(shù)是m，則搜索到的樂曲的起始節(jié)拍處的相對和弦被代入到b[0]中，第二節(jié)拍處的相對和弦被代入到b[I]中，如此等等，直至第m個節(jié)拍處的相對和弦被代入到b[m-l]中。
[0218]在步驟S107中，音頻素材搜索單元231執(zhí)行分值計算處理?，F(xiàn)在，將參照圖22中的流程圖描述分值計算處理的細(xì)節(jié)。
[0219]在步驟S151中，相似性計算單元241將O代入到變量P。
[0220]在步驟S152中，相似性計算單元241確定音階是否相同。現(xiàn)在，術(shù)語“參考區(qū)間”指的是陣列a[]的從元素a[0]至a[n_l]的區(qū)間，并且術(shù)語“搜索區(qū)間”指的是陣列b[]的從元素b[p]至b[p+n-l]的區(qū)間。在參考區(qū)間和搜索區(qū)間中的一個在大調(diào)上而另一個在小調(diào)上的情況下，基于參考樂曲和搜索樂曲的元數(shù)據(jù)，相似性計算單元241確定兩個樂曲的音階不同，并且流程前進(jìn)到步驟S153。
[0221]在步驟S153中，相似性計算單元241將陣列a[]的值轉(zhuǎn)換成絕對和弦。在步驟S154中，相似性計算單元241將陣列b[]的值轉(zhuǎn)換成絕對和弦。
[0222]另一方面，在步驟S152中，在參考區(qū)間和搜索區(qū)間兩者處于大調(diào)或小調(diào)的情況下，相似性計算單元241確定兩個樂曲的音階是相同的，跳過步驟S153和S154的處理，并且流程前進(jìn)到步驟S155。
[0223]在步驟S155中，相似性計算單元241獲得參考區(qū)間和搜索區(qū)間之間的相似性。相似性計算單元241基于下式(2)和(3)獲得參考區(qū)間和搜索區(qū)間之間的相似性Rab。
[0224]
【權(quán)利要求】
1.一種音頻處理裝置，包括: 顯示控制單元，被配置成控制多個音頻齒輪的顯示，所述多個音頻齒輪是能夠在屏幕內(nèi)移動的齒輪，每個音頻齒輪與預(yù)定的音頻數(shù)據(jù)對應(yīng)；以及 播放控制單元，被配置成控制多個音頻數(shù)據(jù)的同步播放； 其中，在多個所述音頻齒輪直接或間接嚙合的情況下，所述顯示控制單元使所述多個音頻齒輪旋轉(zhuǎn)，并且所述播放控制單元執(zhí)行與所述多個音頻齒輪對應(yīng)的多個音頻數(shù)據(jù)的同步播放。
2.根據(jù)權(quán)利要求1所述的音頻處理裝置， 其中所述顯示控制單元進(jìn)一步控制作為不與音頻數(shù)據(jù)對應(yīng)的齒輪的動力齒輪的顯示； 以及其中，在多個所述音頻齒輪與所述動力齒輪嚙合的情況下，所述顯示控制單元使所述多個音頻齒輪與所述動力齒輪一起旋轉(zhuǎn)，并且所述播放控制單元執(zhí)行與經(jīng)由所述動力齒輪間接嚙合的所述多個音頻齒輪對應(yīng)的多 個音頻數(shù)據(jù)的同步播放。
3.根據(jù)權(quán)利要求2所述的音頻處理裝置， 其中播放音頻數(shù)據(jù)的節(jié)奏能夠變化； 以及其中，所述顯示控制單元根據(jù)設(shè)定的節(jié)奏改變所述動力齒輪的旋轉(zhuǎn)速度以及與所述動力齒輪嚙合的所述音頻齒輪的旋轉(zhuǎn)速度。
4.根據(jù)權(quán)利要求3所述的音頻處理裝置， 其中所述動力齒輪和所述音頻齒輪的每個齒表示一個節(jié)拍； 以及其中，在音頻數(shù)據(jù)的一個節(jié)拍的進(jìn)行期間，所述顯示控制單元使所述動力齒輪以及與所述動力齒輪嚙合的所述音頻齒輪旋轉(zhuǎn)一個齒距。
5.根據(jù)權(quán)利要求2所述的音頻處理裝置， 其中所述顯示控制單元進(jìn)一步控制所述音頻齒輪與所述動力齒輪嚙合的預(yù)定的多個設(shè)置位置的顯示； 以及其中，所述播放控制單元播放與設(shè)置在所述設(shè)置位置的所述音頻齒輪對應(yīng)的音頻數(shù)據(jù)。
6.根據(jù)權(quán)利要求5所述的音頻處理裝置，進(jìn)一步包括: 音頻數(shù)據(jù)搜索單元，被配置成搜索連接到當(dāng)前播放的第一音頻數(shù)據(jù)的適于播放的第二音頻數(shù)據(jù)； 其中所述顯示控制單元通過不同的形式顯示多個設(shè)置位置中的每個，并且還通過與連接到所述第一音頻數(shù)據(jù)的用于播放的所述設(shè)置位置的顯示形式對應(yīng)的形式來顯示與所述第二音頻數(shù)據(jù)對應(yīng)的所述音頻齒輪。
7.根據(jù)權(quán)利要求2所述的音頻處理裝置， 其中，在當(dāng)所述第一音頻數(shù)據(jù)正被與所述動力齒輪嚙合的第一音頻齒輪播放時，與所述第二音頻數(shù)據(jù)對應(yīng)的第二音頻齒輪與所述動力齒輪嚙合的情況下，所述播放控制單元使所述第一音頻數(shù)據(jù)衰落； 以及其中，所述顯示控制單元結(jié)合所述第一音頻數(shù)據(jù)的衰落從與所述動力齒輪嚙合的位置重新定位所述第一音頻齒輪。
8.根據(jù)權(quán)利要求1所述的音頻處理裝置，其中播放音頻數(shù)據(jù)的節(jié)奏能夠變化； 以及其中，所述顯示控制單元根據(jù)設(shè)定的節(jié)奏改變所述音頻齒輪的旋轉(zhuǎn)速度。
9.根據(jù)權(quán)利要求8所述的音頻處理裝置， 其中所述音頻齒輪的每個齒表示一個節(jié)拍； 以及其中，在音頻數(shù)據(jù)的一個節(jié)拍的進(jìn)行期間，所述顯示控制單元使所述音頻齒輪旋轉(zhuǎn)一個齒距。
10.根據(jù)權(quán)利要求1所述的音頻處理裝置，進(jìn)一步包括: 音頻數(shù)據(jù)搜索單元，被配置成搜索連接到當(dāng)前播放的音頻數(shù)據(jù)的適于播放的音頻數(shù)據(jù)； 其中所述顯示控制單元通過與其他音頻齒輪的形式不同的形式來顯示與搜索的音頻數(shù)據(jù)對應(yīng)的所述音頻齒輪。
11.根據(jù)權(quán)利要求1所述的音頻處理裝置， 其中所述播放控制單元在所述多個音頻數(shù)據(jù)的小節(jié)的起點匹配的情況下進(jìn)行播放。
12.根據(jù)權(quán)利要求1所述的音頻處理裝置， 其中所述顯示控制單元通過不同的形式顯示與樂曲或部分樂曲對應(yīng)的音頻齒輪以及與循環(huán)素材對應(yīng)的音頻齒輪。
13.根據(jù)權(quán)利要求1所述的音頻處理裝置，進(jìn)一步包括: 操作單元，被配置成操作所述音頻齒輪。
14.一種音頻處理方法,包括: 控制多個音頻齒輪的顯示，所述多個音頻齒輪是能夠在屏幕內(nèi)移動的齒輪，每個音頻齒輪與預(yù)定的音頻數(shù)據(jù)對應(yīng)；以及 在多個所述音頻齒輪直接或間接嚙合的情況下，控制顯示以便使所述多個音頻齒輪旋轉(zhuǎn)，并且執(zhí)行與所述多個音頻齒輪對應(yīng)的多個音頻數(shù)據(jù)的同步播放。
15.一種使計算機(jī)執(zhí)行如下處理的程序，所述處理包括: 控制多個音頻齒輪的顯示，所述多個音頻齒輪是能夠在屏幕內(nèi)移動的齒輪，每個音頻齒輪與預(yù)定的音頻數(shù)據(jù)對應(yīng)；以及 在多個所述音頻齒輪直接或間接嚙合的情況下，控制顯示以便使所述多個音頻齒輪旋轉(zhuǎn)，并且執(zhí)行與所述多個音頻齒輪對應(yīng)的多個音頻數(shù)據(jù)的同步播放。
【文檔編號】G10L15/00GK103677797SQ201310389065
【公開日】2014年3月26日 申請日期:2013年8月30日 優(yōu)先權(quán)日:2012年9月6日
【發(fā)明者】宮島靖, 橋詰篤志, 向山亮 申請人:索尼公司