專利名稱：圖像聲音輸出系統(tǒng)、裝置、聲音處理程序和記錄介質(zhì)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像聲音輸出系統(tǒng)、圖像聲音數(shù)據(jù)輸出裝置、聲音處理程序和記錄介質(zhì)。
背景技術(shù)：
近年來，伴隨著計算機的圖像處理的高功能化，提出了用計算機處理以往由圖像顯示裝置進行的圖像處理并以數(shù)字形式將處理后的圖像處理數(shù)據(jù)傳送到圖像顯示裝置側(cè)、從而由投影機等圖像顯示裝置顯示圖像的系統(tǒng)(例如，參照專利文獻1)。
在這樣的系統(tǒng)中，作為傳送通路，使用USB、IEEE1394等串行傳送的接口，這些接口連接用的電纜，若與以往的一般的RGB視頻電纜等比較，則由于細而且易于處理，故可以預(yù)想今后用這樣的接口進行連接的形態(tài)將會增加。
然而，投影機等圖像顯示裝置，近年來，在家庭影院等用途方面的使用增多，從而常常要將由上述的計算機進行了圖像處理后的圖像數(shù)據(jù)輸出到圖像顯示裝置并進行顯示，故可以考慮在圖像顯示裝置上顯示視頻圖像、游戲圖像等運動圖像，而在計算機等數(shù)據(jù)輸出裝置側(cè)再現(xiàn)輸出伴隨著這些運動圖像的聲音。
在該情況下，運動圖像數(shù)據(jù)，雖然可以通過圖像顯示裝置與數(shù)據(jù)輸出裝置之間的串行傳送通路被發(fā)送接收，但是，這時，運動圖像數(shù)據(jù)被編碼為對于傳送來說適合的形式并被傳送。
所謂編碼，指在顯示裝置側(cè)需要進行用于使之恢復(fù)為原始的運動圖像的解碼處理，在傳送中，在圖像顯示裝置和數(shù)據(jù)輸出裝置的任何一方中都需要進行用于適當?shù)貍魉途幋a數(shù)據(jù)的緩沖處理。
在該緩沖處理和解碼處理進而圖像的掃描、形成中，由于必然需要圖像顯示裝置固有的處理時間，故在與數(shù)據(jù)輸出裝置向圖像顯示裝置側(cè)傳送運動圖像數(shù)據(jù)的同時，在再現(xiàn)輸出附隨于該運動圖像的聲音時，結(jié)果就變成為聲音數(shù)據(jù)的再現(xiàn)輸出比運動圖像的再現(xiàn)輸出更早，使得運動圖像輸出與聲音輸出的定時、即所謂的口型不一致，從而給觀察者帶來不協(xié)調(diào)感。
對于這樣的問題，可以考慮通過以下的方法來應(yīng)對向視頻聲音輸出裝置或放大器等聲音調(diào)整裝置發(fā)送基于視頻顯示裝置所固有的延遲要素的延遲時間信息，即從接收到視頻的數(shù)據(jù)到進行顯示為止所需要的時間的信息，并根據(jù)該延遲時間信息使各個部分的延遲緩沖器適當?shù)剡M行工作。
特開2004-69996號公報[專利文獻2]特開2002-344898號公報但是，在上述專利文獻2所記載的技術(shù)中，存在著以下問題為了進行延遲時間信息的交換，需要在設(shè)備間進行規(guī)定的通信處理且在各個設(shè)備中必須安裝成為進行該通信處理的手段的通信處理程序，從而使得各個設(shè)備的開發(fā)成本、制造成本增加。

發(fā)明內(nèi)容
本發(fā)明的目的在于提供可以確保圖像輸出和聲音輸出的定時而無須在連接到圖像聲音數(shù)據(jù)輸出裝置的圖像顯示裝置內(nèi)安裝特別的通信處理程序等的圖像聲音輸出系統(tǒng)、圖像聲音數(shù)據(jù)輸出裝置、聲音處理程序和記錄有該聲音處理程序的記錄介質(zhì)。
本發(fā)明是一種圖像聲音輸出系統(tǒng)，是具備能夠輸出圖像聲音數(shù)據(jù)的圖像聲音數(shù)據(jù)輸出裝置、通過傳送通路與該圖像聲音數(shù)據(jù)輸出裝置連接并根據(jù)從上述圖像聲音數(shù)據(jù)輸出裝置輸出的圖像數(shù)據(jù)顯示圖像的圖像顯示裝置的圖像聲音輸出系統(tǒng)，其特征在于，上述圖像聲音數(shù)據(jù)輸出裝置具備
圖像聲音數(shù)據(jù)分離單元，其分離包含在上述圖像聲音數(shù)據(jù)內(nèi)的圖像數(shù)據(jù)和聲音數(shù)據(jù)；圖像數(shù)據(jù)發(fā)送單元，其通過上述傳送通路將分離后的上述圖像數(shù)據(jù)發(fā)送給上述圖像顯示裝置；聲音數(shù)據(jù)輸出單元，其輸出分離后的上述聲音數(shù)據(jù)；圖像數(shù)據(jù)解析單元，其對將通過上述圖像數(shù)據(jù)發(fā)送單元發(fā)送給上述圖像顯示裝置、由該圖像顯示裝置進行再現(xiàn)的圖像數(shù)據(jù)進行解析，并獲取上述解析的結(jié)果；聲音輸出調(diào)整時間生成單元，其根據(jù)該圖像數(shù)據(jù)解析單元的解析結(jié)果，生成與在上述圖像顯示裝置上再現(xiàn)上述圖像數(shù)據(jù)的時間對應(yīng)的聲音輸出調(diào)整時間；以及聲音輸出同步調(diào)整單元，其根據(jù)由該聲音輸出調(diào)整時間生成單元生成的聲音輸出調(diào)整時間，與由上述圖像顯示裝置顯示的圖像再現(xiàn)的定時同步地調(diào)整由分離后的上述聲音數(shù)據(jù)形成的聲音輸出；上述圖像顯示裝置具備圖像數(shù)據(jù)接收單元，其接收從上述圖像聲音數(shù)據(jù)輸出裝置發(fā)送的圖像數(shù)據(jù)；圖像處理單元，其進行由該圖像數(shù)據(jù)接收單元接收的圖像數(shù)據(jù)的再現(xiàn)處理；以及圖像形成單元，其根據(jù)由該圖像處理單元處理過的圖像數(shù)據(jù)形成圖像。
在這里，作為圖像數(shù)據(jù)，例如，可以考慮以MPEG2、MPEG4、MotionJPEG等壓縮形式壓縮后的運動圖像數(shù)據(jù)。
此外，由再現(xiàn)時間計算單元進行的再現(xiàn)時間的計算，例如，既可以是設(shè)定與上述運動圖像數(shù)據(jù)形式對應(yīng)的固定的函數(shù)并根據(jù)該函數(shù)來進行計算，也可以是參照記錄有與壓縮形式對應(yīng)的再現(xiàn)時間的查找表之類的結(jié)構(gòu)來進行計算，詳情將在后面描述。
如果采用本發(fā)明，則由于通過聲音輸出同步調(diào)整單元使得在圖像聲音數(shù)據(jù)輸出裝置側(cè)的內(nèi)部處理中獲得圖像輸出和聲音輸出的同步，故可以使圖像輸出和聲音輸出的定時一致，而無須在例如聲卡以及與之連接的揚聲器等聲音數(shù)據(jù)輸出裝置中處理延遲時間信息。因此，在圖像顯示裝置等各個設(shè)備內(nèi)不需要安裝用于處理延遲時間信息的程序等手段，從而可以實現(xiàn)各個設(shè)備的開發(fā)成本、制造成本的降低。
此外，由于通過圖像數(shù)據(jù)解析單元，使得與圖像數(shù)據(jù)的壓縮形式相對應(yīng)地生成聲音輸出調(diào)整時間，故可以根據(jù)圖像數(shù)據(jù)的壓縮形式以最佳的定時進行聲音輸出。
在本發(fā)明中，優(yōu)選地，上述圖像聲音數(shù)據(jù)輸出裝置具備再現(xiàn)時間記錄單元，其具有記錄有與上述圖像數(shù)據(jù)的分辨率和位速率中的任意一個或這兩者的組合對應(yīng)的再現(xiàn)時間的查找表；其中，上述聲音輸出調(diào)整時間生成單元，參照記錄在上述再現(xiàn)時間記錄單元內(nèi)的查找表生成聲音輸出調(diào)整時間。
如果采用本發(fā)明，則由于在查找表上記錄有與將大大影響圖像顯示裝置中的再現(xiàn)時間的運動圖像的分辨率和位速率等對應(yīng)的再現(xiàn)時間，故聲音輸出調(diào)整時間生成單元，可以根據(jù)由圖像數(shù)據(jù)解析單元所獲取的圖像數(shù)據(jù)的形式，參照查找表簡單地生成聲音輸出調(diào)整時間。
在本發(fā)明中，優(yōu)選地，上述傳送通路能夠進行雙向通信；上述圖像顯示裝置具備顯示狀態(tài)設(shè)定單元，其設(shè)定由上述圖像形成單元形成的圖像的顯示狀態(tài)；以及設(shè)定信息發(fā)送單元，其通過上述傳送通路將由該顯示狀態(tài)設(shè)定單元設(shè)定的設(shè)定信息發(fā)送給上述圖像聲音數(shù)據(jù)輸出裝置；其中，上述圖像處理單元，根據(jù)由上述顯示狀態(tài)設(shè)定單元設(shè)定的設(shè)定信息，進行圖像數(shù)據(jù)的再現(xiàn)處理；上述圖像聲音數(shù)據(jù)輸出裝置具備設(shè)定信息接收單元，其接收從上述圖像顯示裝置發(fā)送的設(shè)定信息；以及處理時間計算單元，其根據(jù)由該設(shè)定信息接收單元接收的設(shè)定信息，計算上述圖像顯示裝置的圖像處理單元的圖像處理時間；其中，上述聲音輸出調(diào)整時間生成單元，加上由該處理時間計算單元計算的圖像處理時間而生成聲音輸出調(diào)整時間。
在這里，作為由圖像顯示裝置側(cè)的顯示狀態(tài)設(shè)定單元進行的顯示狀態(tài)的設(shè)定，例如，可以考慮IP(Interlace to Progressive，隔行掃描到逐行掃描)轉(zhuǎn)換、縮放、γ修正等。
如果采用該發(fā)明，則由于因圖像顯示裝置具備設(shè)定信息發(fā)送單元，圖像聲音數(shù)據(jù)處理裝置具備設(shè)定信息接收單元、處理時間計算單元，使得在圖像顯示裝置側(cè)改變顯示狀態(tài)的設(shè)定時，聲音輸出調(diào)整時間生成單元可以也加上該圖像處理的時間而生成聲音輸出調(diào)整時間，故可以以更接近于圖像輸出的定時的狀態(tài)進行聲音輸出。
作為構(gòu)成本發(fā)明的圖像聲音輸出系統(tǒng)的子組合發(fā)明，有圖像聲音數(shù)據(jù)輸出裝置，具體地，具備以下的結(jié)構(gòu)。
本發(fā)明的圖像聲音數(shù)據(jù)輸出裝置，是能夠輸出圖像聲音數(shù)據(jù)并通過能夠進行雙向通信的傳送通路向所連接的圖像顯示裝置輸出上述圖像數(shù)據(jù)而使之顯示圖像的圖像聲音數(shù)據(jù)輸出裝置，其特征在于，具備圖像聲音數(shù)據(jù)分離單元，其分離包含在上述圖像聲音數(shù)據(jù)內(nèi)的圖像數(shù)據(jù)和聲音數(shù)據(jù)；圖像數(shù)據(jù)發(fā)送單元，其通過上述傳送通路將分離后的上述圖像數(shù)據(jù)發(fā)送給上述圖像顯示裝置；聲音數(shù)據(jù)輸出單元，其輸出分離后的上述聲音數(shù)據(jù)；圖像數(shù)據(jù)解析單元，其對將通過上述圖像數(shù)據(jù)發(fā)送單元發(fā)送給上述圖像顯示裝置、由該圖像顯示裝置進行再現(xiàn)的圖像數(shù)據(jù)進行解析，并獲取上述解析的結(jié)果；聲音輸出調(diào)整時間生成單元，其根據(jù)該圖像數(shù)據(jù)解析單元的解析結(jié)果，生成與在上述圖像顯示裝置上再現(xiàn)上述圖像數(shù)據(jù)的時間對應(yīng)的聲音輸出調(diào)整時間；以及聲音輸出同步調(diào)整單元，其根據(jù)由該聲音輸出調(diào)整時間生成單元生成的聲音輸出調(diào)整時間，與由上述圖像顯示裝置顯示的圖像再現(xiàn)的定時同步地調(diào)整由分離后的上述聲音數(shù)據(jù)輸出單元進行的聲音輸出。
此外，作為本發(fā)明的子組合發(fā)明的計算機可讀記錄介質(zhì)，是為了能夠輸出圖像數(shù)據(jù)和聲音數(shù)據(jù)并通過傳送通路向所連接的圖像顯示裝置輸出上述圖像數(shù)據(jù)而使之顯示圖像、而在下述的圖像聲音數(shù)據(jù)輸出裝置中使用并記錄有下述的聲音輸出調(diào)整時間生成單元的聲音輸出調(diào)整時間生成用的數(shù)據(jù)的計算機可讀記錄介質(zhì)，該圖像聲音數(shù)據(jù)輸出裝置具備圖像聲音數(shù)據(jù)分離單元，其分離包含在上述圖像聲音數(shù)據(jù)內(nèi)的圖像數(shù)據(jù)和聲音數(shù)據(jù)；圖像數(shù)據(jù)發(fā)送單元，其通過上述傳送通路將分離后的上述圖像數(shù)據(jù)發(fā)送給上述圖像顯示裝置；聲音數(shù)據(jù)輸出單元，其輸出分離后的上述聲音數(shù)據(jù)；圖像數(shù)據(jù)解析單元，其對將通過上述圖像數(shù)據(jù)發(fā)送單元發(fā)送給上述圖像顯示裝置、由該圖像顯示裝置進行再現(xiàn)的圖像數(shù)據(jù)進行解析，并獲取上述解析的結(jié)果；聲音輸出調(diào)整時間生成單元，其根據(jù)該圖像數(shù)據(jù)解析單元的解析結(jié)果，生成與在上述圖像顯示裝置上再現(xiàn)上述圖像數(shù)據(jù)的時間對應(yīng)的聲音輸出調(diào)整時間；以及聲音輸出同步調(diào)整單元，其根據(jù)由該聲音輸出調(diào)整時間生成單元生成的聲音輸出調(diào)整時間，與由上述圖像顯示裝置顯示的圖像再現(xiàn)的定時同步地調(diào)整由分離后的上述聲音數(shù)據(jù)輸出單元進行的聲音輸出；其特征在于作為記錄有與上述圖像數(shù)據(jù)的分辨率和位速率中的任意一個或這兩者的組合對應(yīng)的再現(xiàn)時間的查找表進行記錄。
再有，作為子組合發(fā)明，既可以形成為使計算機等圖像聲音數(shù)據(jù)輸出裝置作為上述各個功能性單元發(fā)揮作用的聲音處理程序，也可以構(gòu)成為記錄有該聲音處理程序的記錄介質(zhì)。
此外，還可以構(gòu)成為在聲音處理程序中保存有與上述圖像數(shù)據(jù)的分辨率和位速率中的任意一個或這兩者的組合對應(yīng)的再現(xiàn)時間的結(jié)構(gòu)。


圖1是示出本發(fā)明的實施方式1的圖像聲音輸出系統(tǒng)的結(jié)構(gòu)的概要透視圖；圖2是示出本實施方式的圖像聲音數(shù)據(jù)輸出裝置的結(jié)構(gòu)的示意圖；圖3是本實施方式的圖像聲音數(shù)據(jù)輸出裝置的功能框圖；圖4是示出設(shè)置在本實施方式的圖像聲音數(shù)據(jù)輸出裝置內(nèi)的查找表的結(jié)構(gòu)的示意圖；圖5是示出本實施方式的圖像顯示裝置的結(jié)構(gòu)的示意圖；圖6是本實施方式的圖像顯示裝置的功能框圖；圖7是說明本實施方式的圖像聲音輸出系統(tǒng)的作用的流程圖；圖8是說明本實施方式的圖像聲音輸出系統(tǒng)的作用的流程圖；圖9是本發(fā)明的實施方式2的圖像聲音數(shù)據(jù)輸出裝置的功能框圖；圖10是本發(fā)明的實施方式3的圖像顯示裝置的功能框圖；圖11是本實施方式的圖像聲音數(shù)據(jù)輸出裝置的功能框圖；以及圖12是用于說明本實施方式的作用的示意圖。
符號說明2、8計算機(圖像聲音數(shù)據(jù)輸出裝置)；3投影機(圖像顯示裝置)；4USB電纜(傳送通路)；6、7圖像處理單元；21芯片組(圖像數(shù)據(jù)發(fā)送單元)；27(圖像數(shù)據(jù)發(fā)送單元)；28聲卡(聲音數(shù)據(jù)輸出單元)；53液晶面板(圖像形成單元)；72顯示狀態(tài)設(shè)定單元；73設(shè)定信息發(fā)送單元；82、227聲音輸出調(diào)整時間生成單元；223運動圖像數(shù)據(jù)解析單元(圖像數(shù)據(jù)解析單元)；226圖像聲音分離單元；228聲音輸出同步調(diào)整單元；229LUT(再現(xiàn)時間記錄單元)。
具體實施例方式
以下，根據(jù)

本發(fā)明的一個實施方式。
1.實施方式1圖1示出了本發(fā)明的實施方式1的圖像聲音輸出系統(tǒng)1，該圖像聲音輸出系統(tǒng)1是具備作為圖像聲音數(shù)據(jù)輸出裝置的計算機2、作為圖像顯示裝置的投影機3以及作為連接它們的傳送通路的USB電纜4而構(gòu)成、且從計算機2輸出的圖像數(shù)據(jù)通過USB電纜4被輸入到投影機3、而使計算機2的本地顯示器上的圖像作為投影圖像顯示在屏幕上的系統(tǒng)。此外，在計算機2內(nèi)，還設(shè)置連接到內(nèi)置的聲卡的揚聲器9，該揚聲器9與來自投影機3的投影圖像中的運動圖像相對應(yīng)地進行聲音輸出。
USB電纜4，是遵照USB1.1、USB2.0等標準的電纜，其使得可在連接設(shè)備和被連接設(shè)備之間進行雙向通信。
(1)計算機2的結(jié)構(gòu)作為圖像聲音數(shù)據(jù)輸出裝置的計算機2，如圖2所示，具備設(shè)置在母電路板上的芯片組21；通過總線連接的CPU22；主存儲器23；視頻卡24；光盤裝置25；硬盤裝置26以及USB端口27和聲卡28。
CPU22，是作為以主存儲器23為工作區(qū)域而執(zhí)行各種程序的運算處理裝置發(fā)揮作用的部分，在圖2中，雖然省略了圖示，但是，在該CPU22中還生成通過執(zhí)行操作系統(tǒng)等生成的圖形數(shù)據(jù)等。
視頻卡24，是進行輸入到計算機2的圖像數(shù)據(jù)的圖像處理、并在計算機2所附帶的本地顯示器上進行圖像顯示的部分，該視頻卡24，必須雖然省略了圖示，但是，具備有進行向本地顯示器的輸出用的圖像處理的處理器和存儲應(yīng)處理的圖像數(shù)據(jù)的視頻存儲器等。另外，在本實施方式中，雖然形成為具備這樣的本地顯示器的結(jié)構(gòu)，但是，計算機2并非必須具備本地顯示器。此外，該視頻卡24，也可以是內(nèi)置于芯片組21內(nèi)的圖形功能，而并非必須是單獨的器件。
光盤裝置25，是再現(xiàn)CD(compact disc，壓縮盤)、DVD(DigitalVersatile Disc，數(shù)字通用盤)等光盤介質(zhì)的裝置，當插入了存儲有壓縮后的運動圖像數(shù)據(jù)的光盤后，光盤裝置25再現(xiàn)存儲在光盤內(nèi)的運動圖像數(shù)據(jù)，并通過芯片組21向CPU22所附帶的主存儲器23輸出運動圖像數(shù)據(jù)。
硬盤裝置26，是存儲通過操作由CPU22執(zhí)行的程序、計算機2等所生成的數(shù)據(jù)的存儲裝置，在該硬盤裝置26內(nèi)也可以存儲圖像數(shù)據(jù)，且其可以根據(jù)在CPU22上工作的程序的要求輸出所存儲的圖像數(shù)據(jù)。
USB端口27，是上述的USB電纜4所連接的計算機2側(cè)的端子，該USB端口27的輸入輸出控制，由上述的芯片組21來進行，這些芯片組在本發(fā)明中作為數(shù)據(jù)發(fā)送單元發(fā)揮作用。
聲卡28，是將由CPU22解碼后的數(shù)字形式的聲音數(shù)據(jù)轉(zhuǎn)換成模擬形式的聲音信號、并放大而從揚聲器9進行聲音輸出的部分，其詳情將在后面描述。該聲卡28，也可以是內(nèi)置于芯片組21內(nèi)的聲音處理功能而并非必須是單獨的器件。
在進行通過上述的CPU22輸入的圖形圖像數(shù)據(jù)以及流輸出的圖像聲音數(shù)據(jù)的圖像聲音處理的情況下，在CPU22上執(zhí)行具備有圖3所示那樣的功能性單元的圖像聲音處理程序。具體地，上述的CPU22具備圖形圖像數(shù)據(jù)獲取單元221；運動圖像顯示區(qū)域生成單元222；運動圖像數(shù)據(jù)獲取單元223；運動圖像數(shù)據(jù)解析單元224；數(shù)據(jù)多路化(復(fù)用)單元225；圖像聲音分離單元226；聲音輸出調(diào)整時間生成單元227；聲音輸出同步調(diào)整單元228；LUT(Look Up Table，查找表)229以及音頻解碼器230。
圖形圖像數(shù)據(jù)獲取單元221，是獲取由在操作系統(tǒng)上工作的圖形數(shù)據(jù)生成單元220生成的圖形數(shù)據(jù)的部分，其具備差分數(shù)據(jù)生成部221A和圖形數(shù)據(jù)獲取部221B而構(gòu)成。
差分數(shù)據(jù)生成部221A，是生成例如以計算機2的刷新頻率的周期更新的圖形圖像的差分數(shù)據(jù)(差數(shù)據(jù))的部分，例如，其分別預(yù)先捕獲更新前后的圖像，并對兩者進行比較而將變化了的部分生成為差分數(shù)據(jù)。
圖形數(shù)據(jù)獲取部221B，是獲取由差分數(shù)據(jù)生成部221A生成的差分數(shù)據(jù)作為圖形數(shù)據(jù)，并向后述的數(shù)據(jù)多路化單元225輸出所獲取的圖形數(shù)據(jù)的部分。
運動圖像顯示區(qū)域生成單元222，是從所輸入的圖形數(shù)據(jù)獲取要在以圖形數(shù)據(jù)為基礎(chǔ)的圖形畫面上的哪一部分顯示運動圖像數(shù)據(jù)的信息的部分，其生成例如要在圖形圖像中的哪一位置以哪種程度的大小和分辨率顯示運動圖像數(shù)據(jù)的運動圖像顯示區(qū)域數(shù)據(jù)。
運動圖像數(shù)據(jù)獲取單元223，是不對從光盤裝置25、硬盤裝置26等作為位流依次輸入的運動圖像數(shù)據(jù)MPG進行解碼、而以其壓縮后的原始的狀態(tài)獲取其作為運動圖像數(shù)據(jù)的部分，作為運動圖像數(shù)據(jù)的壓縮形式，可以舉出MPEG2、MPEG4、MotionJPEG等。
運動圖像數(shù)據(jù)解析單元224，是獲取包含在所輸入的運動圖像數(shù)據(jù)內(nèi)的幀速率、位速率、橫縱比、分辨率等圖像顯示用的圖像屬性信息的部分，所獲取的圖像屬性信息，例如可以用于圖像數(shù)據(jù)傳送處理時的定時控制等。另外，例如在運動圖像數(shù)據(jù)的壓縮形式是MPEG2的情況下，這些圖像屬性信息被預(yù)先記錄在MPEG2位流的序列標頭(シ一ケンスヘツダ)、序列擴展(シ一ケンスエクステンシヨン)等內(nèi)，運動圖像數(shù)據(jù)解析單元224，通過獲取記錄在該標頭部分內(nèi)的信息，可以獲取運動圖像的圖像屬性信息。
此外，該運動圖像數(shù)據(jù)解析單元224，向后述的聲音輸出調(diào)整時間生成單元227輸出上述的解析結(jié)果。
數(shù)據(jù)多路化單元(多路復(fù)用器)225，是對由圖形圖像數(shù)據(jù)獲取單元221所獲取的圖形數(shù)據(jù)、由運動圖像顯示區(qū)域生成單元222所生成的運動圖像顯示區(qū)域數(shù)據(jù)以及由運動圖像數(shù)據(jù)獲取單元223所獲取的運動圖像數(shù)據(jù)進行多路化的部分。作為多路化的方法，可以舉出在ISO/IEC-13818-1中所規(guī)定的MPEG-屬TS(Transport Stream，傳輸流)、MPEG-PS(Program Stream，程序流)等方法。這時，數(shù)據(jù)多路化單元225，對于在計算機2上設(shè)置的色度、γ值等圖像修正數(shù)據(jù)也可以同樣地進行多路化。
此外，由該數(shù)據(jù)多路化單元225多路化后的數(shù)據(jù)，可以通過芯片組21、作為串行數(shù)據(jù)從USB端口27發(fā)送輸出。
作為圖像聲音數(shù)據(jù)分離裝置的圖像聲音分離單元226，是作為分離包含在所輸入的圖像聲音數(shù)據(jù)內(nèi)的聲音數(shù)據(jù)的多路分解器發(fā)揮作用的部分，在本實施方式中，雖然用計算機2分離的圖像數(shù)據(jù)未被解碼，但是，聲音數(shù)據(jù)可以被解碼。
聲音輸出調(diào)整時間生成單元227，是根據(jù)運動圖像數(shù)據(jù)解析單元224的運動圖像數(shù)據(jù)的解析結(jié)果、計算在投影機3中直到運動圖像數(shù)據(jù)被再現(xiàn)及顯示為止的時間并生成使聲音輸出延遲的聲音輸出調(diào)整時間的部分，其根據(jù)從運動圖像數(shù)據(jù)解析單元224輸入的運動圖像數(shù)據(jù)的位速率、分辨率等圖像屬性信息，檢索LUT229。
在作為再現(xiàn)時間記錄單元的LUT229內(nèi)，如圖4所示，存儲有與運動圖像數(shù)據(jù)的壓縮形式對應(yīng)的LUT1、LUT2、LUT3…。例如，在與MPEG2對應(yīng)的LUT1的情況下，在行側(cè)存儲有同一標準下的級別(レベル)，在列側(cè)存儲有簡要特征(プロフアイル)，在各個單元內(nèi)存儲有與級別和簡要特征對應(yīng)的再現(xiàn)時間。再現(xiàn)時間，作為從在投影機3中進行的運動圖像數(shù)據(jù)的解碼開始到顯示光柵數(shù)據(jù)的生成、進而到投影圖像形成為止的時間被存儲，并被與投影機3相對應(yīng)地設(shè)定，LUT229，如圖3所示，可通過光盤、互聯(lián)網(wǎng)下載等作為驅(qū)動程序來進行提供。
另外，該驅(qū)動程序，總之，只要是可以進行數(shù)據(jù)參照那樣的形式即可，從而既可以是從最初計算機2保存有執(zhí)行文件并可用該執(zhí)行文件進行參照的表結(jié)構(gòu)的數(shù)據(jù)，此外，也可以是在內(nèi)部保存有與LUT229有關(guān)的數(shù)據(jù)的可執(zhí)行的程序。
此外，聲音輸出調(diào)整時間生成單元227，根據(jù)來自運動圖像數(shù)據(jù)解析單元224的解析結(jié)果、所輸入的運動圖像數(shù)據(jù)的簡要特征、級別等或者位速率、分辨率等信息，在LUT229內(nèi)進行檢索，并獲取與所輸入的運動圖像數(shù)據(jù)對應(yīng)的再現(xiàn)時間。
在獲取了再現(xiàn)時間之后，聲音輸出調(diào)整時間生成單元227，根據(jù)所獲取的再現(xiàn)時間，生成使聲音輸出延遲的聲音輸出調(diào)整時間。所生成的聲音輸出調(diào)整時間，被輸出到聲音輸出同步調(diào)整單元228。
聲音輸出同步調(diào)整單元228，是根據(jù)所生成的聲音輸出調(diào)整時間、與由投影機3進行的運動圖像形成的定時相對應(yīng)地調(diào)整聲音輸出的定時的部分，在本實施方式中，其調(diào)整控制后述的聲卡28。
音頻解碼器230，是對由圖像聲音分離單元226分離后的聲音數(shù)據(jù)進行解碼的部分，解碼后的聲音數(shù)據(jù)，被向聲卡28輸出。
作為聲音輸出單元的聲卡28，如上所述，是將由音頻解碼器230解碼后的數(shù)字形式的聲音數(shù)據(jù)轉(zhuǎn)換為模擬形式的聲音信號、并放大而從揚聲器9進行聲音輸出的部分，其具備延遲緩沖器281、D/A轉(zhuǎn)換器282和放大器283而構(gòu)成。
延遲緩沖器281，存儲由音頻解碼器230解碼后的聲音數(shù)據(jù)，并根據(jù)來自聲音輸出同步調(diào)整單元228的調(diào)整控制指令，依次向D/A轉(zhuǎn)換器282輸出所存儲的聲音數(shù)據(jù)。
D/A轉(zhuǎn)換器282，是將存儲在延遲緩沖器281內(nèi)的數(shù)字形式的聲音數(shù)據(jù)轉(zhuǎn)換為模擬形式的聲音信號并輸出的部分。
放大器283，是放大被D/A轉(zhuǎn)換器282進行了模擬轉(zhuǎn)換后的聲音信號并向揚聲器9輸出的部分，由此，被解碼的聲音數(shù)據(jù)就可以作為聲音從揚聲器9輸出。
(2)投影機3的結(jié)構(gòu)作為圖像顯示裝置的投影機3，如圖5所示，其具備形成光學像的光學引擎5和進行從計算機2發(fā)送輸出的圖像數(shù)據(jù)的圖像處理的圖像處理單元6而構(gòu)成。
光學引擎5，其具備光源裝置51、積分器照明光學系統(tǒng)52、作為圖像形成單元的液晶面板53、色合成光學系統(tǒng)54和投影透鏡55而構(gòu)成。
從光源裝置51射出的光束，在積分器照明光學系統(tǒng)52中以成為均勻的照明光的方式被分割成多個部分光束，并與由液晶面板53輸入的圖像數(shù)據(jù)相對應(yīng)地被進行光調(diào)制，并通過色合成光學系統(tǒng)54和投影透鏡55被投影到屏幕上。另外，在圖4中雖然省略了圖示，但是，本實施方式的投影機3，被形成為由液晶面板53對R、G、B色光中的每一種進行光調(diào)制，且色合成光學系統(tǒng)54，是為了合成對于每一種色光已實施了光調(diào)制后的R、G、B各個光束從而合成彩色圖像而設(shè)置的。
圖像處理單元6，是通過根據(jù)從計算機2輸入來的圖像數(shù)據(jù)進行規(guī)定的圖像處理并進行構(gòu)成光學引擎5的液晶面板53的驅(qū)動控制來形成光學像的部分，其具備設(shè)置在投影機3內(nèi)的裝配到電路基板上的各種電路元件而構(gòu)成。
具體地，該圖像處理單元6具備USB端口61、USB控制器62、CPU63主存儲器64、視頻光柵化器(ラスタライザ)65、多路分解器66、視頻幀存儲器67、圖像處理器68和面板控制器69而構(gòu)成。
USB端口61是連接USB電纜4并輸入來自計算機2的圖像數(shù)據(jù)的端子，USB控制器62是控制該USB端口61的輸入輸出的電路元件。此外，該USB端口61和USB控制器62構(gòu)成本發(fā)明中所謂的數(shù)據(jù)接收單元。
CPU63，是通過以主存儲器64為工作區(qū)域而執(zhí)行各種程序來進行圖像處理單元6的全體的控制的部分。
視頻光柵化器65，是對MPEG2等形式的運動圖像數(shù)據(jù)進行解碼并生成運動圖像光柵數(shù)據(jù)的部分，由該視頻光柵化器65解碼后的運動圖像光柵數(shù)據(jù)，被寫入到后述的視頻幀存儲器67內(nèi)。
作為數(shù)據(jù)解多路化(解復(fù)用)單元的多路分解器66，是分離由上述的計算機2的數(shù)據(jù)多路化單元225多路化后的各種數(shù)據(jù)的部分，分離開的各種數(shù)據(jù)由其他電路元件進行處理，其詳情將在后面描述。此外，本實施方式的多路分解器66也作為差分圖像描繪器(レンダラ一)而發(fā)揮作用，其詳情將在后面描述。
視頻幀存儲器67，是累積由各種電路元件形成的圖像光柵數(shù)據(jù)、并存儲最終由液晶面板53進行顯示的顯示光柵數(shù)據(jù)的部分，其與面板控制器69生成的液晶面板53的數(shù)據(jù)寫入周期相對應(yīng)地改繪顯示光柵數(shù)據(jù)。
作為光柵數(shù)據(jù)合成單元的圖像處理器68，是最終合成由多路分解器66分離開的數(shù)據(jù)而生成顯示光柵數(shù)據(jù)的部分，為了確保液晶面板53的色再現(xiàn)性，除了圖形數(shù)據(jù)和運動圖像數(shù)據(jù)的合成之外，還要進行液晶面板53所固有的V-Tγ修正、亮度不均勻修正和顏色不均勻修正等修正處理。
作為掃描單元的面板控制器69，是進行液晶面板53的驅(qū)動控制的電路元件，由該面板控制器69進行液晶面板53的圖像顯示區(qū)域中的各個像素的驅(qū)動控制。另外，在本實施方式的情況下，如上所述，由于是三板式的投影機3，雖然省略了圖示，但是，對于R、G、B色光中的每一種的液晶面板53都分別設(shè)置有面板控制器69。
在以上，在本實施方式中，雖然圖像處理單元6是將多個電路元件組合起來而構(gòu)成的，但是，圖像處理單元的硬件結(jié)構(gòu)并非必須限定于此，只要是性能極高的運算處理裝置即可，從而也可以利用單片微處理器來進行所有的處理。
圖6中示出了上述的圖像處理單元6的功能塊結(jié)構(gòu)。
在上述的圖像處理單元6的各個電路元件之中，多路分解器66具備數(shù)據(jù)解多路化單元661和解碼器662作為功能性單元，視頻光柵化器65具備解密單元651、視頻解碼器652、縮放器653以及YUV-RGB轉(zhuǎn)換器654作為功能性單元。此外，CPU63，為了獲得畫面更新的同步，具備同步信號生成單元631作為功能性單元。
數(shù)據(jù)解多路化單元661，是將通過USB端口61輸入的多路化的數(shù)據(jù)分離為單獨的數(shù)據(jù)的部分，具體地，分離為圖形數(shù)據(jù)、運動圖像數(shù)據(jù)、運動圖像顯示區(qū)域數(shù)據(jù)、圖像修正數(shù)據(jù)和圖像屬性信息。
此外，該數(shù)據(jù)解多路化單元661，將分離開的圖形數(shù)據(jù)輸出到解碼器662，將運動圖像數(shù)據(jù)輸出到解密單元651，將運動圖像顯示區(qū)域數(shù)據(jù)輸出到解碼器662和縮放器653，將作為包含在圖像屬性信息內(nèi)的幀速率、由計算機2設(shè)定的刷新頻率以及作為差分數(shù)據(jù)輸入的圖形數(shù)據(jù)的畫面更新周期等信息輸出到同步信號生成單元631。
解碼器662，是作為上述的差分圖像描繪器發(fā)揮作用、以使從數(shù)據(jù)解多路化單元661輸出的圖形數(shù)據(jù)成為構(gòu)成一個畫面的圖形圖像的方式進行變換的部分。在本實施方式中，如上所述，由于差分數(shù)據(jù)作為圖形數(shù)據(jù)被發(fā)送，故解碼器662可以預(yù)先將更新前的圖形數(shù)據(jù)保存在主存儲器64內(nèi)，并當作為新的差分數(shù)據(jù)的圖形數(shù)據(jù)被輸入時，僅對差分數(shù)據(jù)的部分進行數(shù)據(jù)的改寫而生成新的圖形數(shù)據(jù)。由這樣的解碼器662進行了變換后的圖形數(shù)據(jù)，作為RGB數(shù)據(jù)被輸出到圖像處理器68。
此外，該解碼器662，還根據(jù)從數(shù)據(jù)解多路化單元661輸出的運動圖像顯示區(qū)域數(shù)據(jù)，在圖形圖像中設(shè)定應(yīng)顯示運動圖像的區(qū)域，并以可作為用于圖像處理器通過重疊而合成運動圖像的鍵控色而利用的顏色涂敷該區(qū)域。然后，生成顯示運動圖像的部分以外的區(qū)域的圖形數(shù)據(jù)。
解密單元651，在對輸入來的運動圖像數(shù)據(jù)進行解碼之前，對出于著作權(quán)等關(guān)系的考慮、為了防止復(fù)制而被加密了的部分進行恢復(fù)，而進行可以用后一級的視頻解碼器652進行解碼那樣的處理。另外，該解密單元651并非是必需的，在存在這樣的防止復(fù)制這樣的運動圖像數(shù)據(jù)的情況下，才成為必需。
視頻解碼器652，是對以被壓縮的狀態(tài)發(fā)送的運動圖像數(shù)據(jù)進行解碼的部分，例如，在壓縮形式是MPEG2的情況下，其經(jīng)過可變長度編碼的解碼、逆掃描、逆量子化、逆DCT、動作補償?shù)雀鱾€步驟，將壓縮狀態(tài)的運動圖像數(shù)據(jù)解碼為光柵數(shù)據(jù)形式的運動圖像數(shù)據(jù)。
縮放器653，是對解碼后的運動圖像數(shù)據(jù)進行伸縮調(diào)整的部分，其根據(jù)從數(shù)據(jù)解多路化單元661輸出的運動圖像顯示區(qū)域數(shù)據(jù)、包含在運動圖像數(shù)據(jù)內(nèi)的分辨率信息以及液晶面板53的規(guī)格等，進行應(yīng)顯示運動圖像數(shù)據(jù)的區(qū)域以及該區(qū)域內(nèi)的分辨率設(shè)定。
YUV-RGB轉(zhuǎn)換器654，是將運動圖像數(shù)據(jù)的YUV形式的數(shù)據(jù)轉(zhuǎn)換為可由圖像顯示裝置處理的RGB形式的部分，轉(zhuǎn)換是根據(jù)固定的關(guān)系式進行的。
圖像處理器68，如上所述，對由解碼器662解碼后的圖形數(shù)據(jù)和由視頻解碼器652解碼后的運動圖像數(shù)據(jù)進行合成而生成顯示光柵數(shù)據(jù)。進而，該圖像處理器68，還進行以從數(shù)據(jù)解多路化單元661輸出的、在計算機2側(cè)設(shè)定的圖像修正數(shù)據(jù)以及液晶面板53所固有被設(shè)定的圖像修正數(shù)據(jù)為基礎(chǔ)的修正處理，并將修正后的顯示光柵數(shù)據(jù)寫入到視頻幀存儲器67內(nèi)。
同步信號生成單元631，是根據(jù)與從數(shù)據(jù)解多路化單元661輸出的畫面更新有關(guān)的信息、生成面板控制器69的畫面更新用的同步信號的部分，在本實施方式中，根據(jù)從運動圖像數(shù)據(jù)的串行標頭得到的幀速率生成同步信號。此外，由該同步信號生成單元631生成的同步信號，也被輸出到圖像處理器68，圖像處理器68根據(jù)該同步信號設(shè)定顯示光柵數(shù)據(jù)向視頻幀存儲器67寫入的定時。
(3)圖像聲音輸出系統(tǒng)1的作用下面，禍根據(jù)圖7和圖8所示的流程圖說明上述的結(jié)構(gòu)的圖像聲音輸出系統(tǒng)1的作用。
(3-1)計算機2側(cè)的處理首先，圖形圖像數(shù)據(jù)獲取單元221，捕獲當前顯示中的圖形圖像，將之作為圖形數(shù)據(jù)來獲取(處理S1)。
其次，圖形圖像數(shù)據(jù)獲取單元221的差分數(shù)據(jù)生成部221A，根據(jù)上一次所捕獲的圖形圖像和本次所捕獲的圖形圖像，進行成為更新后的部分的差分數(shù)據(jù)的生成(處理S2)。與此并行，運動圖像顯示區(qū)域生成單元222，根據(jù)所捕獲的圖形圖像，生成運動圖像顯示區(qū)域的畫面上的X-Y位置、大小、分辨率等運動圖像顯示區(qū)域數(shù)據(jù)(處理S3)。
另一方面，與上述圖形數(shù)據(jù)的獲取相并行，圖像聲音分離單元226將從光盤裝置25等輸入的圖像聲音數(shù)據(jù)，分離成運動圖像數(shù)據(jù)和聲音數(shù)據(jù)(處理S4)。
運動圖像數(shù)據(jù)獲取單元223，獲取分離后的運動圖像數(shù)據(jù)而不進行光柵化處理(處理S5)。其次，運動圖像數(shù)據(jù)解析單元224，從所獲取的運動圖像數(shù)據(jù)的序列標頭和序列擴展(MPEG2的情況下)等部分，作為圖像屬性信息獲取運動圖像數(shù)據(jù)的幀速率、位速率、橫縱比、分辨率等諸信息(處理S6)。
在獲得上述各種信息后，數(shù)據(jù)多路化單元225以上述的MPEG-TS、MPEG-PS等形式對這些數(shù)據(jù)進行多路化(處理S7)。多路化后的數(shù)據(jù)，被作為芯片組21所具有的USB控制器的功能所編碼，并從USB端口27通過USB電纜4輸出到投影機3(處理S8)。
在處理S4中分離后的聲音數(shù)據(jù)由音頻解碼器230所獲取(處理S9)，并由音頻解碼器230所解碼(處理S10)，解碼后的聲音數(shù)據(jù)被依次存儲到延遲緩沖器281內(nèi)。
與此并行，在處理S6中，運動圖像數(shù)據(jù)解析單元224輸出位速率、分辨率等解析結(jié)果，且該解析結(jié)果由聲音輸出調(diào)整時間生成單元227所獲取(處理S11)。
聲音輸出調(diào)整時間生成單元227，根據(jù)所獲取的解析結(jié)果，在LUT229內(nèi)進行檢索(處理S12)，并提取出與適合于解析結(jié)果的級別和簡要特征或者位速率和分辨率對應(yīng)的再現(xiàn)時間。其次，聲音輸出調(diào)整時間生成單元227，根據(jù)所獲取的再現(xiàn)時間，生成聲音輸出調(diào)整時間，并向聲音輸出同步調(diào)整單元228輸出所生成的聲音輸出調(diào)整時間(處理S13)。
聲音輸出同步調(diào)整單元228，根據(jù)所生成的聲音輸出調(diào)整時間，對從延遲緩沖器281輸出到D/A轉(zhuǎn)換器282的聲音數(shù)據(jù)的定時進行調(diào)整，從而實現(xiàn)與運動圖像顯示的定時的同步(處理S14)。
D/A轉(zhuǎn)換器282，依次對從延遲緩沖器281輸入的聲音數(shù)據(jù)進行模擬轉(zhuǎn)換，并利用放大器283進行放大，從而從揚聲器9輸出聲音(處理S15)。
(3-2)投影機3側(cè)的處理來自計算機2的多路化的數(shù)據(jù)，由USB端口61和USB控制器62所接收(處理S16)，進而，由USB控制器62解碼成可由圖像處理單元6進行處理的形式，并向數(shù)據(jù)解多路化單元661輸出。
數(shù)據(jù)解多路化單元661，將多路化的數(shù)據(jù)分離成單獨的圖形數(shù)據(jù)、運動圖像顯示區(qū)域數(shù)據(jù)、運動圖像數(shù)據(jù)以及圖像屬性信息(處理S17)。
解碼器662，獲取分離出的圖形數(shù)據(jù)作為差分數(shù)據(jù)(處理S18)，并根據(jù)更新前的圖形圖像，更新僅改繪了差分數(shù)據(jù)的部分后的圖形數(shù)據(jù)(處理S19)。
與此并行，視頻光柵化器65獲取運動圖像數(shù)據(jù)和運動圖像顯示區(qū)域數(shù)據(jù)(處理S20、S21)，并根據(jù)這些數(shù)據(jù)和包含在運動圖像數(shù)據(jù)內(nèi)的圖像屬性信息等，進行運動圖像的光柵化處理(處理S22)。
在由解碼器662進行的圖形數(shù)據(jù)的光柵化、由視頻光柵化器65進行的光柵化結(jié)束后，圖像處理器68對各個光柵化后的數(shù)據(jù)進行合成，而生成顯示光柵數(shù)據(jù)(處理S23)。進而，圖像處理器68進行液晶面板53所固有的圖像修正處理，并通過由面板控制器69所進行的掃描而在液晶面板53上形成光學像，并通過投影透鏡55在屏幕上顯示投影圖像(處理S24)。
如上所述，如果采用本實施方式，則由于利用聲音輸出同步調(diào)整單元228、在計算機2側(cè)的內(nèi)部處理中得到運動圖像輸出和聲音輸出的同步，故可以利用聲卡28的延遲緩沖器281使圖像輸出和聲音輸出的定時一致。因此，不再需要在聲卡28上另外安裝用于處理延遲時間信息的通信處理程序等，從而可以實現(xiàn)制造成本的降低。
此外，由于利用運動圖像數(shù)據(jù)解析單元224、與圖像數(shù)據(jù)的壓縮形式相對應(yīng)地生成聲音輸出調(diào)整時間，故可以與圖像數(shù)據(jù)的壓縮形式相對應(yīng)地以最佳的定時進行聲音輸出。
此外，由于聲音輸出調(diào)整時間生成單元227根據(jù)運動圖像數(shù)據(jù)解析單元224所生成的解析結(jié)果、在LUT229內(nèi)進行檢索而生成聲音輸出調(diào)整時間，故可以用簡單的處理生成聲音輸出調(diào)整時間。
2.實施方式2下面，對本發(fā)明的實施方式2進行說明。另外，在以下的說明中，對于那些與已經(jīng)說明過的部分相同的部分，賦予同一標號并省略其說明。
在上述的實施方式1中，如圖3所示，聲音輸出同步調(diào)整單元228，通過使存儲在構(gòu)成聲卡28的延遲緩沖器281中的聲音數(shù)據(jù)的輸出延遲，來調(diào)整因聲音輸出調(diào)整時間而形成的聲音數(shù)據(jù)輸出的定時。
相對于此，在實施方式2的圖像輸出數(shù)據(jù)裝置中，如圖9所示，在以下方面不同在輸出由視頻解碼器230解碼后的聲音數(shù)據(jù)時，根據(jù)聲音輸出調(diào)整時間調(diào)整向聲卡28的輸出的定時。
也就是說，實施方式2的聲音輸出同步調(diào)整單元428，如圖9所示，被構(gòu)成為在將由音頻解碼器230解碼后的聲音數(shù)據(jù)存儲在CPU22所附帶的主存儲器23內(nèi)的階段，與由聲音輸出調(diào)整時間生成單元227生成的聲音輸出調(diào)整時間相對應(yīng)地進行延遲而向聲卡28進行輸出。
采用這樣的本實施方式，也可以獲得與在上述的實施方式1中所述的作用和效果相同的作用和效果。
3.實施方式3下面，對本發(fā)明的實施方式3進行說明。
在上述的實施方式1中，由聲音輸出調(diào)整時間生成單元227進行的聲音輸出調(diào)整時間的生成，是根據(jù)專門由運動圖像數(shù)據(jù)解析單元224所解析的解析結(jié)果來進行的。
相對于此，實施方式3的圖像聲音輸出系統(tǒng)，如圖10和圖11所示，在以下方面不同在投影機的圖像處理單元7側(cè)改變顯示設(shè)定時，從投影機的圖像處理單元7向計算機8側(cè)輸出其設(shè)定信息，在計算機8側(cè)，加上因該改變后的設(shè)定信息而進行的圖像處理所需要的時間而生成聲音輸出調(diào)整時間。
具體地，如圖10所示，投影機的圖像處理單元7，除了實施方式1的圖像處理單元6之外，還具備操作面板71、顯示狀態(tài)設(shè)定單元72和設(shè)定信息發(fā)送單元73而構(gòu)成。
操作面板71具備設(shè)置在投影機的外裝機箱上的多個開關(guān)組而構(gòu)成，視聽者通過操作該操作面板71、操作通過USB電纜連接的計算機等，可以使投影機的投影圖像變化成所偏好的色調(diào)，以所希望的方式將所輸入的運動圖像數(shù)據(jù)的掃描形式、例如隔行掃描形式變換成逐行掃描形式，將投影到屏幕上的梯形形狀的投影圖像變?yōu)殚L方形形狀的適合的投影圖像等。
顯示狀態(tài)設(shè)定單元72，是根據(jù)因操作面板71的操作而輸出的操作信號、改變圖像處理單元7上的各個功能性單元的設(shè)定值的部分，例如其可以改變縮放器653的設(shè)定值、圖像處理器68的設(shè)定值等。
設(shè)定信息發(fā)送單元73，是獲取由顯示狀態(tài)設(shè)定單元72所設(shè)定的設(shè)定信息并通過USB控制器62和USB端口61向計算機8發(fā)送輸出的部分。
計算機8，如圖11所示，利用芯片組21的USB控制功能接收從投影機側(cè)發(fā)送來的設(shè)定信息，所接收到的設(shè)定信息由處理時間計算單元81和聲音輸出調(diào)整時間生成單元82進行處理。
處理時間計算單元81，是根據(jù)所接收到的設(shè)定信息計算與各個處理對應(yīng)的處理時間的部分，在本實施方式中，雖然省略了圖示，但是，通過參照包括在LUT229內(nèi)的、存儲有與設(shè)定處理對應(yīng)的處理時間的LUT，來計算各個處理所需要的處理時間。
圖像輸出調(diào)整時間生成單元82，與實施方式1同樣，根據(jù)運動圖像數(shù)據(jù)解析單元224的解析結(jié)果以及處理時間計算單元81所計算的處理時間，生成聲音輸出調(diào)整時間。
以下，對于由該聲音輸出調(diào)整時間生成單元82進行的聲音輸出調(diào)整時間的生成步驟，對圖12所示的示意圖進行說明。
首先，根據(jù)運動圖像數(shù)據(jù)解析單元224的解析結(jié)果，聲音輸出調(diào)整時間生成單元82，獲取恢復(fù)某一幀的時刻DTS(Decoding Time Stamp，解碼時戳)、顯示某一幀的時刻PTSv(Video Presentation Time Stamp，視頻呈現(xiàn)時戳)以及進行與某一幀對應(yīng)的聲音輸出的時刻PTSa(AudioPresentation Time Stamp，音頻呈現(xiàn)時戳)，并獲取運動圖像數(shù)據(jù)的基本的解碼和再現(xiàn)處理時間(處理S25)。
另一方面，處理時間計算單元81，根據(jù)從投影機側(cè)發(fā)送來的設(shè)定信息，區(qū)分已進行了什么樣的處理，并計算與各個設(shè)定的階段對應(yīng)的處理時間(處理S26～處理S28)。例如，在本實施方式中，雖然進行的是3個階段的設(shè)定處理，但是，作為階段1的處理可以考慮IP變換，作為階段2的處理可以考慮縮放，作為階段3的處理可以考慮γ修正等。
在由處理時間計算單元81計算出了處理時間ΔT1～ΔT3后，聲音輸出調(diào)整時間生成單元82，計算對各個時間進行累計后的累計估計處理時間ΔT(處理S29)。
聲音輸出調(diào)整時間生成單元82，將該累計估計處理時間ΔT與在處理S25中獲取的PTSv相加，而計算加上了設(shè)定處理時的某一幀的輸出時刻PTSv’(處理S30)。
最后，聲音輸出調(diào)整時間生成單元82，根據(jù)PTSv’，由所獲取的PTSa計算與上述幀的輸出時刻對應(yīng)的聲音輸出的時刻PTSa’(處理S31)。另外，在本實施方式中，在計算時，對于所獲取的PTSa，不僅單純地加上累計估計時間ΔT，還要加上余量時間α來計算PTSa’。這是因為考慮到了相對于在與運動圖像的變化相比聲音先輸出時會產(chǎn)生不舒服感，即便是聲音輸出比運動圖像的變化多少晚一些，也不怎么會產(chǎn)生不舒服感這樣的視聽者的特性的緣故。
此外，在本實施方式中，設(shè)定處理雖然是用處理S26～處理S28這樣的3個階段來進行說明的，但是，并不限于此，通過對各個處理的處理時間進行加法運算，也可以增加更多的處理。
如果采用這樣的本實施方式，由于因投影機具備設(shè)定信息發(fā)送單元73，圖像聲音數(shù)據(jù)處理裝置具備設(shè)定信息接收單元21、27以及處理時間計算單元81，而使得在投影機側(cè)改變顯示狀態(tài)的設(shè)定時，聲音輸出調(diào)整時間生成單元82可以也加上該圖形處理的時間而生成聲音輸出調(diào)整時間，故可以以更接近于圖像輸出的定時的狀態(tài)進行聲音輸出。
4.實施方式4另外，本發(fā)明并不限定于上述的實施方式，在可以實現(xiàn)本發(fā)明的目的的范圍內(nèi)的變形、改進等，都包括在本發(fā)明內(nèi)。
例如，在上述實施方式中，作為圖像聲音數(shù)據(jù)輸出裝置，雖然使用的是計算機2、8，但是，本發(fā)明并不限于此。也就是說，作為圖像聲音數(shù)據(jù)輸出裝置，也可以采用DVD再現(xiàn)裝置、游戲設(shè)備等裝置。
此外，在上述實施方式中，作為圖像顯示裝置，雖然使用的是液晶投影機3，但是，本發(fā)明并不限于此，在具備DLP等液晶以外的光調(diào)制裝置的投影機、背光源形式的液晶顯示器、等離子顯示器、有機EL顯示器等顯示器中也可以采用本發(fā)明。
再有，在上述實施方式中，作為連接計算機2和投影機3的傳送通路，雖然采用的是USB電纜4，但是，本發(fā)明并不限于此。也就是說，即便是用LAN等可傳送圖像的傳送通路將圖像聲音數(shù)據(jù)輸出裝置和圖像顯示裝置連接起來的系統(tǒng)，也可以采用本發(fā)明。
除此之外，本發(fā)明的實施時的具體的結(jié)構(gòu)和形狀等，在可以實現(xiàn)本發(fā)明的目的的范圍內(nèi)，也可以形成為其他的結(jié)構(gòu)等。
權(quán)利要求
1.一種圖像聲音輸出系統(tǒng)，是具備能夠輸出圖像聲音數(shù)據(jù)的圖像聲音數(shù)據(jù)輸出裝置、通過傳送通路與該圖像聲音數(shù)據(jù)輸出裝置連接并根據(jù)從上述圖像聲音數(shù)據(jù)輸出裝置輸出的圖像數(shù)據(jù)顯示圖像的圖像顯示裝置的圖像聲音輸出系統(tǒng)，其特征在于，上述圖像聲音數(shù)據(jù)輸出裝置具備圖像聲音數(shù)據(jù)分離單元，其分離包含在上述圖像聲音數(shù)據(jù)內(nèi)的圖像數(shù)據(jù)和聲音數(shù)據(jù)；圖像數(shù)據(jù)發(fā)送單元，其通過上述傳送通路將分離后的上述圖像數(shù)據(jù)發(fā)送給上述圖像顯示裝置；聲音數(shù)據(jù)輸出單元，其輸出分離后的上述聲音數(shù)據(jù)；圖像數(shù)據(jù)解析單元，其對將通過上述圖像數(shù)據(jù)發(fā)送單元發(fā)送給上述圖像顯示裝置、由該圖像顯示裝置進行再現(xiàn)的圖像數(shù)據(jù)進行解析，并獲取上述解析的結(jié)果；聲音輸出調(diào)整時間生成單元，其根據(jù)該圖像數(shù)據(jù)解析單元的解析結(jié)果，生成與在上述圖像顯示裝置上再現(xiàn)上述圖像數(shù)據(jù)的時間對應(yīng)的聲音輸出調(diào)整時間；以及聲音輸出同步調(diào)整單元，其根據(jù)由該聲音輸出調(diào)整時間生成單元生成的聲音輸出調(diào)整時間，與由上述圖像顯示裝置顯示的圖像再現(xiàn)的定時同步地調(diào)整由分離后的上述聲音數(shù)據(jù)形成的聲音輸出；上述圖像顯示裝置具備圖像數(shù)據(jù)接收單元，其接收從上述圖像聲音數(shù)據(jù)輸出裝置發(fā)送的圖像數(shù)據(jù)；圖像處理單元，其進行由該圖像數(shù)據(jù)接收單元接收的圖像數(shù)據(jù)的再現(xiàn)處理；以及圖像形成單元，其根據(jù)由該圖像處理單元處理過的圖像數(shù)據(jù)形成圖像。
2.根據(jù)權(quán)利要求1所述的圖像聲音輸出系統(tǒng)，其特征在于，上述圖像聲音數(shù)據(jù)輸出裝置具備再現(xiàn)時間記錄單元，其具有記錄有與上述圖像數(shù)據(jù)的分辨率和位速率中的任意一個或這兩者的組合對應(yīng)的再現(xiàn)時間的查找表；其中，上述聲音輸出調(diào)整時間生成單元，參照記錄在上述再現(xiàn)時間記錄單元內(nèi)的查找表生成聲音輸出調(diào)整時間。
3.根據(jù)權(quán)利要求1或2所述的圖像聲音輸出系統(tǒng)，其特征在于，上述傳送通路能夠進行雙向通信；上述圖像顯示裝置具備顯示狀態(tài)設(shè)定單元，其設(shè)定由上述圖像形成單元形成的圖像的顯示狀態(tài)；以及設(shè)定信息發(fā)送單元，其通過上述傳送通路將由該顯示狀態(tài)設(shè)定單元設(shè)定的設(shè)定信息發(fā)送給上述圖像聲音數(shù)據(jù)輸出裝置；其中，上述圖像處理單元，根據(jù)由上述顯示狀態(tài)設(shè)定單元設(shè)定的設(shè)定信息，進行圖像數(shù)據(jù)的再現(xiàn)處理；上述圖像聲音數(shù)據(jù)輸出裝置具備設(shè)定信息接收單元，其接收從上述圖像顯示裝置發(fā)送的設(shè)定信息；以及處理時間計算單元，其根據(jù)由該設(shè)定信息接收單元接收的設(shè)定信息，計算上述圖像顯示裝置的圖像處理單元的圖像處理時間；其中，上述聲音輸出調(diào)整時間生成單元，加上由該處理時間計算單元計算的圖像處理時間而生成聲音輸出調(diào)整時間。
4.一種圖像聲音數(shù)據(jù)輸出裝置，是能夠輸出圖像聲音數(shù)據(jù)并通過能夠進行雙向通信的傳送通路向所連接的圖像顯示裝置輸出圖像數(shù)據(jù)而使之顯示圖像的圖像聲音數(shù)據(jù)輸出裝置，其特征在于，具備圖像聲音數(shù)據(jù)分離單元，其分離包含在上述圖像聲音數(shù)據(jù)內(nèi)的圖像數(shù)據(jù)和聲音數(shù)據(jù)；圖像數(shù)據(jù)發(fā)送單元，其通過上述傳送通路將分離后的上述圖像數(shù)據(jù)發(fā)送給上述圖像顯示裝置；聲音數(shù)據(jù)輸出單元，其輸出分離后的上述聲音數(shù)據(jù)；圖像數(shù)據(jù)解析單元，其對將通過上述圖像數(shù)據(jù)發(fā)送單元發(fā)送給上述圖像顯示裝置、由該圖像顯示裝置進行再現(xiàn)的圖像數(shù)據(jù)進行解析，并獲取上述解析的結(jié)果；聲音輸出調(diào)整時間生成單元，其根據(jù)該圖像數(shù)據(jù)解析單元的解析結(jié)果，生成與在上述圖像顯示裝置上再現(xiàn)上述圖像數(shù)據(jù)的時間對應(yīng)的聲音輸出調(diào)整時間；以及聲音輸出同步調(diào)整單元，其根據(jù)由該聲音輸出調(diào)整時間生成單元生成的聲音輸出調(diào)整時間，與由上述圖像顯示裝置顯示的圖像再現(xiàn)的定時同步地調(diào)整由分離后的上述聲音數(shù)據(jù)輸出單元進行的聲音輸出。
5.一種記錄介質(zhì)，是為了能夠輸出圖像數(shù)據(jù)和聲音數(shù)據(jù)并通過傳送通路向所連接的圖像顯示裝置輸出上述圖像數(shù)據(jù)而使之顯示圖像、而在下述的圖像聲音數(shù)據(jù)輸出裝置中使用并記錄有下述的聲音輸出調(diào)整時間生成單元的聲音輸出調(diào)整時間生成用的數(shù)據(jù)的計算機可讀記錄介質(zhì)，該圖像聲音數(shù)據(jù)輸出裝置具備圖像聲音數(shù)據(jù)分離單元，其分離包含在上述圖像聲音數(shù)據(jù)內(nèi)的圖像數(shù)據(jù)和聲音數(shù)據(jù)；圖像數(shù)據(jù)發(fā)送單元，其通過上述傳送通路將分離后的上述圖像數(shù)據(jù)發(fā)送給上述圖像顯示裝置；聲音數(shù)據(jù)輸出單元，其輸出分離后的上述聲音數(shù)據(jù)；圖像數(shù)據(jù)解析單元，其對將通過上述圖像數(shù)據(jù)發(fā)送單元發(fā)送給上述圖像顯示裝置、由該圖像顯示裝置進行再現(xiàn)的圖像數(shù)據(jù)進行解析，并獲取上述解析的結(jié)果；聲音輸出調(diào)整時間生成單元，其根據(jù)該圖像數(shù)據(jù)解析單元的解析結(jié)果，生成與在上述圖像顯示裝置上再現(xiàn)上述圖像數(shù)據(jù)的時間對應(yīng)的聲音輸出調(diào)整時間；以及聲音輸出同步調(diào)整單元，其根據(jù)由該聲音輸出調(diào)整時間生成單元生成的聲音輸出調(diào)整時間，與由上述圖像顯示裝置顯示的圖像再現(xiàn)的定時同步地調(diào)整由分離后的上述聲音數(shù)據(jù)形成的聲音輸出；其特征在于作為記錄有與上述圖像數(shù)據(jù)的分辨率和位速率中的任意一個或這兩者的組合對應(yīng)的再現(xiàn)時間的查找表進行記錄。
6.一種聲音處理程序，是在能夠輸出圖像聲音數(shù)據(jù)并通過傳送通路向所連接的圖像顯示裝置輸出上述圖像數(shù)據(jù)而使之顯示圖像的圖像聲音數(shù)據(jù)輸出裝置上執(zhí)行的聲音處理程序，其特征在于，使上述圖像聲音數(shù)據(jù)輸出裝置執(zhí)行以下步驟將上述圖像聲音數(shù)據(jù)分離為圖像數(shù)據(jù)和聲音數(shù)據(jù)的步驟；對將由上述圖像顯示裝置進行再現(xiàn)的圖像數(shù)據(jù)進行解析的步驟；根據(jù)解析結(jié)果、生成與在上述圖像顯示裝置上再現(xiàn)上述圖像數(shù)據(jù)的時間對應(yīng)的聲音輸出調(diào)整時間的步驟；以及根據(jù)所生成的聲音輸出調(diào)整時間、調(diào)整由上述聲音數(shù)據(jù)形成的聲音輸出的步驟。
7.根據(jù)權(quán)利要求6所述的聲音處理程序，其特征在于保存有在上述圖像顯示裝置的再現(xiàn)時間的計算時使用、與上述圖像數(shù)據(jù)的分辨率和位速率中的任意一個或這兩者的組合對應(yīng)的再現(xiàn)時間數(shù)據(jù)。
8.一種計算機可讀記錄介質(zhì)，其特征在于記錄有權(quán)利要求6或7所述的聲音處理程序。
全文摘要
本發(fā)明提供能夠確保圖像輸出和聲音輸出的定時而無須在連接到圖像聲音數(shù)據(jù)輸出裝置的聲音輸出裝置內(nèi)安裝特別的手段等的圖像聲音輸出系統(tǒng)。構(gòu)成圖像聲音輸出系統(tǒng)的圖像聲音數(shù)據(jù)輸出裝置，具備分離包含在圖像聲音數(shù)據(jù)內(nèi)的圖像數(shù)據(jù)和聲音數(shù)據(jù)的單元226；通過傳送通路將分離后的圖像數(shù)據(jù)發(fā)送給圖像顯示裝置的單元21、27；對將在圖像顯示裝置側(cè)進行再現(xiàn)的圖像數(shù)據(jù)進行解析的單元224；根據(jù)解析結(jié)果生成與再現(xiàn)圖像數(shù)據(jù)的時間對應(yīng)的聲音輸出調(diào)整時間的單元227；以及根據(jù)所生成的聲音輸出調(diào)整時間、與圖像再現(xiàn)的定時同步地調(diào)整聲音輸出的單元228。
文檔編號H04N7/24GK1933604SQ200610154189
公開日2007年3月21日 申請日期2006年9月18日 優(yōu)先權(quán)日2005年9月16日
發(fā)明者山田紀彥 申請人:精工愛普生株式會社