一種圖文采集識(shí)別裝置制造方法
【專利摘要】本實(shí)用新型實(shí)施例提供的一種圖文采集識(shí)別裝置，包括：多點(diǎn)圖像信息采集單元和圖像信息識(shí)別單元，所述多點(diǎn)圖像信息采集單元與所述圖像信息識(shí)別單元連接，并將采集的被拍攝對(duì)象的多角度和/或多位置的圖像信息傳送給所述圖像信息識(shí)別單元作為所述圖像信息識(shí)別單元識(shí)別所述圖像信息對(duì)應(yīng)的圖文內(nèi)容信息的依據(jù)；其中，所多點(diǎn)圖像信息采集單元包括至少一個(gè)可活動(dòng)式攝像頭；或者，所述多點(diǎn)圖像信息采集單元包括多個(gè)攝像頭；或者，所述多點(diǎn)圖像信息采集單元包括一個(gè)固定式攝像頭，所述固定式攝像頭包括多個(gè)鏡頭。本實(shí)用新型實(shí)施例的實(shí)現(xiàn)使得在圖像信息采集過程中可以靈活地獲得需要采集圖像信息區(qū)域中的不同角度或不同位置的圖像信息，從而令后續(xù)的圖文識(shí)別處理過程中可以準(zhǔn)確識(shí)別出相應(yīng)的圖文內(nèi)容信息。
【專利說明】一種圖文采集識(shí)別裝置

【技術(shù)領(lǐng)域】
[0001]本實(shí)用新型涉及圖像采集識(shí)別處理【技術(shù)領(lǐng)域】，尤其涉及一種圖文采集識(shí)別裝置。

【背景技術(shù)】
[0002]隨著圖像處理技術(shù)的發(fā)展，相應(yīng)的圖像采集識(shí)別技術(shù)的應(yīng)用也日益廣泛，然而，目前的圖像采集識(shí)別技術(shù)中，通常為采用單個(gè)普通攝像頭固定安裝于待采集圖像區(qū)域中進(jìn)行圖像的采集操作，這種采集圖像的處理方式使得采集到的圖像信息經(jīng)常無法真實(shí)準(zhǔn)確地反應(yīng)被采集區(qū)域中的實(shí)際情況，即無法獲得被告采集區(qū)域中的真實(shí)準(zhǔn)確的圖像，進(jìn)而導(dǎo)致后續(xù)的識(shí)別處理過程中無法準(zhǔn)確識(shí)別出相應(yīng)的圖文內(nèi)容信息。
[0003]具體地，若以普通攝像頭進(jìn)行圖像采集，為了獲得對(duì)所需采集對(duì)象的覆蓋，則需要較遠(yuǎn)距離設(shè)置相應(yīng)的攝像頭。若試圖用廣角鏡或魚眼鏡在短距離對(duì)所需采集對(duì)象的覆蓋則將產(chǎn)生較大的失真。而且單一固定攝像頭其單一焦距導(dǎo)致所拍攝對(duì)象只在焦距合適的那一小部分最清楚，其它部分則由于不在最佳焦距位置處，則不夠清晰。而且對(duì)彎曲表面(比如對(duì)打開的書中部的大彎曲)難以實(shí)現(xiàn)不失真的拍攝。而且，普通攝像頭的拍攝角度也只能在正上方才能對(duì)全部被拍攝對(duì)象有效拍攝，如果從側(cè)面或斜面拍攝則容易使部分不在最佳焦距而不清晰，并且由于投射原理，距攝像頭遠(yuǎn)端的物體成像小，分辨率會(huì)下降很多。因此，若采用普通單個(gè)固定攝像頭(即普通攝像頭)對(duì)所需采集對(duì)象的全面覆蓋則對(duì)攝像頭分辨率要求很高，且無法達(dá)到理想拍攝效果。
[0004]再者，目前的圖書出版發(fā)行量已經(jīng)非常大。但目前還存在一部分人群，如兒童、盲人、老年人等，其不方便對(duì)圖書直接進(jìn)行閱讀，針對(duì)這部分人群需要輔助閱讀發(fā)聲設(shè)備進(jìn)行閱讀，而目前沒有針對(duì)普通圖書的輔助閱讀發(fā)聲設(shè)備。


【發(fā)明內(nèi)容】

[0005]本實(shí)用新型的目的是提供一種圖文采集識(shí)別裝置，從而可以準(zhǔn)確方便地采集到期望的圖像信息，以提高識(shí)別處理過程的準(zhǔn)確性。
[0006]本實(shí)用新型的目的是通過以下技術(shù)方案實(shí)現(xiàn)的:
[0007]—種圖文采集識(shí)別裝置，包括:多點(diǎn)圖像信息采集單元和圖像信息識(shí)別單元，所述多點(diǎn)圖像信息采集單元與所述圖像信息識(shí)別單元連接，并將采集的被拍攝對(duì)象的多角度和/或多位置的圖像信息傳送給所述圖像信息識(shí)別單元作為所述圖像信息識(shí)別單元識(shí)別所述圖像信息對(duì)應(yīng)的圖文內(nèi)容信息的依據(jù)；其中，
[0008]所多點(diǎn)圖像信息采集單元包括至少一個(gè)可活動(dòng)式攝像頭，所述可活動(dòng)式攝像頭的拍照角度和/或位置是可調(diào)整的，所述可活動(dòng)式攝像頭與驅(qū)動(dòng)電機(jī)連接，所述驅(qū)動(dòng)電機(jī)控制所述可活動(dòng)式攝像頭的旋轉(zhuǎn)和/或移動(dòng)；或者，所述多點(diǎn)圖像信息采集單元包括多個(gè)攝像頭，即二個(gè)或三個(gè)或四個(gè)或四個(gè)以上攝像頭，且每個(gè)攝像頭為固定式攝像頭或可活動(dòng)式攝像頭，所述可活動(dòng)式攝像頭的拍照角度和/或位置是可調(diào)整的，所述可活動(dòng)式攝像頭是手動(dòng)控制或與驅(qū)動(dòng)電機(jī)連接，所述驅(qū)動(dòng)電機(jī)控制所述可活動(dòng)式攝像頭的旋轉(zhuǎn)和/或移動(dòng)；或者，所述多點(diǎn)圖像信息采集單元包括一個(gè)固定式攝像頭，所述固定式攝像頭包括多個(gè)鏡頭。
[0009]所述可活動(dòng)式攝像頭包括可旋轉(zhuǎn)式攝像頭和/或可移動(dòng)式攝像頭，即所述可活動(dòng)式攝像頭可旋轉(zhuǎn)或可移動(dòng)或可移動(dòng)可旋轉(zhuǎn)；或者，所述可活動(dòng)式攝像頭包括一個(gè)或多個(gè)可活動(dòng)式鏡頭；所述可活動(dòng)式攝像頭設(shè)置于需要采集所述圖像信息的區(qū)域的位置包括:所述區(qū)域的邊緣上方和/或斜上方和/或正上方。
[0010]所述固定式攝像頭包括一個(gè)或多個(gè)鏡頭，且所述攝像頭設(shè)置于需要采集所述圖像信息的區(qū)域的位置包括:所述區(qū)域的邊緣上方和/或斜上方和/或正上方。
[0011]所述圖像信息識(shí)別單元包括圖文識(shí)別模塊和動(dòng)作識(shí)別模塊。
[0012]該裝置還包括:
[0013]音頻單元，與所述圖像信息識(shí)別單元連接，并在所述多點(diǎn)圖像信息采集單元將采集的圖書中當(dāng)前閱讀頁的或印刷品當(dāng)前閱讀位置的或閱讀操作指示位置的或包含書目信息或包含頁碼信息的圖像信息傳遞給所述圖像信息識(shí)別單元，且所述圖像信息識(shí)別單元根據(jù)所述當(dāng)前閱讀頁的或印刷品當(dāng)前閱讀位置的或閱讀操作指示位置的或包含書目信息或包含頁碼信息的圖像信息識(shí)別出該當(dāng)前閱讀頁的或印刷品當(dāng)前閱讀位置的或閱讀操作指示的或書目信息或頁碼信息的文字內(nèi)容信息對(duì)應(yīng)的音頻信息后，獲取所述音頻信息，再將所述對(duì)應(yīng)的音頻信息通過揚(yáng)聲器以音頻形式輸出；
[0014]和/ 或，
[0015]與所述圖像信息識(shí)別單元連接，且用于獲取音頻信息的音頻輸入單元，；
[0016]和/ 或，
[0017]與所述圖像信息識(shí)別單元和/或所述音頻輸入單元連接，且用于存儲(chǔ)器內(nèi)容信息的存儲(chǔ)單元；
[0018]和/ 或，
[0019]與所述圖像信息識(shí)別單元連接，且用于顯示內(nèi)容信息的顯示單元；
[0020]和/ 或，
[0021]與所述圖像信息識(shí)別單元連接，且用于與計(jì)算機(jī)通信的通信單元。
[0022]由上述本實(shí)用新型提供的技術(shù)方案可以看出，本實(shí)用新型實(shí)施例提供的一種圖文采集識(shí)別裝置由于采用了獨(dú)特的攝像頭布置方案，使得在圖像信息采集過程中可以靈活地獲得需要采集圖像信息區(qū)域中(即被拍攝對(duì)象)多點(diǎn)的圖像信息(即不同角度和/或不同位置的圖像信息)，從而可以使得采集到的圖像信息能夠真實(shí)準(zhǔn)確地反應(yīng)被采集區(qū)域中的實(shí)際情況，進(jìn)而使得后續(xù)的圖文識(shí)別處理過程中可以準(zhǔn)確識(shí)別出相應(yīng)的圖文內(nèi)容信息。從而使得該裝置也可以但不限于作為一種圖文錄入裝置等，圖文錄入比如全文錄入，或隨著對(duì)印刷品進(jìn)行閱讀操作的指示的選擇部分圖文進(jìn)行錄入等。另一方面，在該圖文采集識(shí)別裝置中，由于可以準(zhǔn)確進(jìn)行圖文內(nèi)容信息的識(shí)別，因而可以針對(duì)普通圖書進(jìn)行圖文識(shí)別處理，并結(jié)合相應(yīng)的發(fā)聲功能實(shí)現(xiàn)針對(duì)普通圖書的輔助閱讀發(fā)聲處理，從而為人們提供一種可以對(duì)普通圖書進(jìn)行輔助發(fā)聲的輔助閱讀發(fā)聲設(shè)備。

【專利附圖】

【附圖說明】
[0023]為了更清楚地說明本實(shí)用新型實(shí)施例的技術(shù)方案，下面將對(duì)實(shí)施例描述中所需要使用的附圖作簡(jiǎn)單地介紹，顯而易見地，下面描述中的附圖僅僅是本實(shí)用新型的一些實(shí)施例，對(duì)于本領(lǐng)域的普通技術(shù)人員來講，在不付出創(chuàng)造性勞動(dòng)的前提下，還可以根據(jù)這些附圖獲得其他附圖。
[0024]圖1為本實(shí)用新型實(shí)施例提供的圖文采集識(shí)別裝置的結(jié)構(gòu)示意圖一；
[0025]圖2為本實(shí)用新型實(shí)施例提供的圖文采集識(shí)別裝置的結(jié)構(gòu)示意圖二 ；
[0026]圖3為本實(shí)用新型實(shí)施例提供的包含多個(gè)攝像頭的圖文采集識(shí)別裝置的結(jié)構(gòu)示意圖一;
[0027]圖4為本實(shí)用新型實(shí)施例提供的包含多個(gè)攝像頭的圖文采集識(shí)別裝置的結(jié)構(gòu)示意圖二 ；
[0028]圖5為本實(shí)用新型實(shí)施例提供的包含多個(gè)攝像頭的圖文采集識(shí)別裝置的結(jié)構(gòu)示意圖三；
[0029]圖6為本實(shí)用新型實(shí)施例提供的設(shè)置于邊緣上方的攝像頭的結(jié)構(gòu)示意圖；
[0030]圖7為本實(shí)用新型實(shí)施例提供的設(shè)置于斜上方的攝像頭的結(jié)構(gòu)示意圖一；
[0031]圖8為本實(shí)用新型實(shí)施例提供的設(shè)置于斜上方的攝像頭的結(jié)構(gòu)示意圖二 ；
[0032]圖9為本實(shí)用新型實(shí)施例提供的設(shè)置于正上方的攝像頭的結(jié)構(gòu)示意圖；
[0033]圖10為本實(shí)用新型實(shí)施例提供的多個(gè)攝像頭拍攝圖書上曲面的示意圖一；
[0034]圖11為本實(shí)用新型實(shí)施例提供的多個(gè)攝像頭拍攝圖書上曲面的示意圖二；
[0035]圖12為本實(shí)用新型實(shí)施例提供的多個(gè)攝像頭拍攝圖書上曲面的示意圖三；
[0036]圖13為本實(shí)用新型實(shí)施例提供的可旋轉(zhuǎn)式攝像頭旋轉(zhuǎn)前拍攝圖書上曲面的示意圖；
[0037]圖14為本實(shí)用新型實(shí)施例提供的可旋轉(zhuǎn)式攝像頭旋轉(zhuǎn)后拍攝圖書上曲面的示意圖；
[0038]圖15為本實(shí)用新型實(shí)施例提供的應(yīng)用實(shí)施例結(jié)構(gòu)示意圖。

【具體實(shí)施方式】
[0039]下面結(jié)合本實(shí)用新型實(shí)施例中的附圖，對(duì)本實(shí)用新型實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本實(shí)用新型一部分實(shí)施例，而不是全部的實(shí)施例?；诒緦?shí)用新型的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒有做出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例，都屬于本實(shí)用新型的保護(hù)范圍。
[0040]下面將結(jié)合附圖對(duì)本實(shí)用新型實(shí)施例作進(jìn)一步地詳細(xì)描述。
[0041]本實(shí)用新型實(shí)施例提供了一種圖文采集識(shí)別裝置，其具體實(shí)現(xiàn)結(jié)構(gòu)如圖1所示，可以包括:多點(diǎn)圖像信息采集單元和圖像信息識(shí)別單元，所述多點(diǎn)圖像信息采集單元與所述圖像信息識(shí)別單元連接，并將采集的圖像信息傳遞給所述圖像信息識(shí)別單元作為所述圖像信息識(shí)別單元識(shí)別所述圖像信息對(duì)應(yīng)的圖文內(nèi)容信息的依據(jù)，以便于所述圖像信息識(shí)別單元能夠根據(jù)所述圖像信息識(shí)別出圖文內(nèi)容信息，所述多點(diǎn)圖像信息采集單元采用拍照方式獲得所述圖像信息，即所述多點(diǎn)圖像信息采集單元通過其包含的攝像頭拍攝獲得所述圖像息。
[0042]進(jìn)一步的，為實(shí)現(xiàn)針對(duì)被拍攝對(duì)象的多角度和/或多位置的多點(diǎn)圖像拍攝，相應(yīng)的多點(diǎn)圖像信息采集單元可以采用以下任一結(jié)構(gòu)實(shí)現(xiàn):
[0043](I)所述多點(diǎn)圖像信息采集單元可以包括至少一個(gè)可活動(dòng)式攝像頭，所述可活動(dòng)式攝像頭與驅(qū)動(dòng)電機(jī)連接，所述驅(qū)動(dòng)電機(jī)控制所述可活動(dòng)式攝像頭的旋轉(zhuǎn)和/或移動(dòng)，所述可活動(dòng)式攝像頭基于預(yù)定的控制方式或接收的控制信息控制其活動(dòng)以對(duì)被拍攝對(duì)象進(jìn)行多角度和/或多位置的多點(diǎn)圖像拍攝。例如，根據(jù)反饋?zhàn)詣?dòng)控制(如根據(jù)拍攝圖像識(shí)別后的反饋?zhàn)鲎詣?dòng)調(diào)整)，比如當(dāng)手指示處超出范圍了或部分文字超出范圍了或頁碼超出范圍了，則自動(dòng)調(diào)整可活動(dòng)式攝像頭的角度和/或位置，這樣產(chǎn)品在工作過程中無需或少需人工干預(yù)，或者，根據(jù)用戶輸入的控制信息(如用戶執(zhí)行的特定肢體動(dòng)作或用戶通過操作按鍵輸入的預(yù)定控制信息等)控制所述攝像頭轉(zhuǎn)動(dòng)或移動(dòng)，或者，也可以根據(jù)預(yù)先設(shè)定的時(shí)間間隔自動(dòng)控制所述攝像頭旋轉(zhuǎn)或移動(dòng)，以進(jìn)行針對(duì)被拍攝對(duì)象的多角度和/或多位置的多點(diǎn)拍攝。
[0044]具體地，所述可活動(dòng)式攝像頭包括可旋轉(zhuǎn)式攝像頭和/或可移動(dòng)式攝像頭，即所述可活動(dòng)式攝像頭可旋轉(zhuǎn)或可移動(dòng)或可移動(dòng)可旋轉(zhuǎn)；或者，所述可活動(dòng)式攝像頭包括一個(gè)或多個(gè)可活動(dòng)式鏡頭；若所述可活動(dòng)式攝像頭包含多個(gè)，則多個(gè)可活動(dòng)式攝像頭包含的每個(gè)攝像頭用于采集全部或部分場(chǎng)景的圖文內(nèi)容信息；所述可活動(dòng)式攝像頭可以設(shè)置于需要采集所述圖像信息的區(qū)域的位置包括:所述區(qū)域的邊緣上方和/或斜上方和/或正上方。
[0045]進(jìn)一步地,如圖15所示,相應(yīng)的多點(diǎn)圖像信息采集單元具體可以包括攝像頭，以及用于驅(qū)動(dòng)攝像頭活動(dòng)的轉(zhuǎn)向電機(jī)和相應(yīng)的機(jī)構(gòu)/或者直線電機(jī)及相應(yīng)的機(jī)構(gòu)。
[0046](2)所述多點(diǎn)圖像信息采集單元包括多個(gè)攝像頭，所述多個(gè)攝像頭用于完成多角度和/或多位置的多點(diǎn)圖像拍攝，且每個(gè)攝像頭為固定式攝像頭或可活動(dòng)式攝像頭，所述可活動(dòng)式攝像頭是手動(dòng)控制或與驅(qū)動(dòng)電機(jī)連接，所述驅(qū)動(dòng)電機(jī)控制所述可活動(dòng)式攝像頭的旋轉(zhuǎn)和/或移動(dòng)，即所述可活動(dòng)式攝像頭為基于預(yù)定的控制方式或基于接收的控制信息或手動(dòng)控制其活動(dòng)以對(duì)被拍攝對(duì)象進(jìn)行多角度和/或多位置的多點(diǎn)圖像拍攝。例如，根據(jù)反饋?zhàn)詣?dòng)控制(如根據(jù)拍攝圖像識(shí)別后的反饋?zhàn)鲎詣?dòng)調(diào)整)，比如當(dāng)手指示處超出范圍了或部分文字超出范圍了或頁碼超出范圍了，則自動(dòng)調(diào)整可活動(dòng)式攝像頭的角度和/或位置，這樣產(chǎn)品在工作過程中無需或少需人工干預(yù)，或者，根據(jù)用戶輸入的控制信息(如用戶執(zhí)行的特肢體定動(dòng)作或用戶通過操作按鍵輸入的預(yù)定控制信息等)控制所述攝像頭轉(zhuǎn)動(dòng)或移動(dòng)，或者，也可以根據(jù)預(yù)先設(shè)定的時(shí)間間隔自動(dòng)控制所述攝像頭旋轉(zhuǎn)或移動(dòng)，以進(jìn)行針對(duì)被拍攝對(duì)象的多角度和/或多位置的多點(diǎn)拍攝。
[0047]具體地，所述固定式攝像頭包括一個(gè)或多個(gè)鏡頭，且若所述固定式攝像頭包括多個(gè)鏡頭，則基于預(yù)定的控制方式或接收的控制信息控制各個(gè)鏡頭采集所述圖文內(nèi)容信息，且所述預(yù)定的控制方式包括控制多個(gè)鏡頭中的全部鏡頭或部分鏡頭進(jìn)行多角度和/或多位置的多點(diǎn)圖像拍攝；
[0048]所述多個(gè)攝像頭包含的每個(gè)攝像頭用于采集全部或部分場(chǎng)景的圖文內(nèi)容信息；
[0049]在該方案(2)中，所述攝像頭可以設(shè)置于需要采集所述圖像信息的區(qū)域的位置包括:所述區(qū)域的邊緣上方和/或斜上方和/或正上方。
[0050]也就是說，在該圖文采集識(shí)別裝置中，相應(yīng)的多點(diǎn)圖像信息采集單元可以包含多個(gè)攝像頭，如圖3、圖4和圖5所示，相應(yīng)的多個(gè)攝像頭可以是以固定或可活動(dòng)的方式設(shè)置于被拍攝對(duì)象所在區(qū)域的邊緣上方和/或斜上方和/或正上方，例如，可以設(shè)置于圖書的邊緣上方和/或斜上方和/或正上方，當(dāng)閱讀者在閱讀時(shí)設(shè)置的位置需要不影響閱讀者閱讀圖書即可，具體可以參照?qǐng)D6、圖7、圖8和圖9所示。同時(shí)，由于采用了多個(gè)攝像頭，大大減小了對(duì)每個(gè)攝像頭所需要的拍攝覆蓋，增大了整體覆蓋，從而保證對(duì)識(shí)別所需要的拍攝覆蓋，多個(gè)攝像頭可以各自拍攝進(jìn)行各自的識(shí)別工作，也可將拍攝結(jié)果綜合后以供識(shí)別。
[0051](3)所述多點(diǎn)圖像信息采集單元包括一個(gè)固定式攝像頭，所述固定式攝像頭包括多個(gè)鏡頭，且基于預(yù)定的控制方式或接收的控制信息控制所述多個(gè)鏡頭包含的各個(gè)鏡頭采集所述圖文內(nèi)容信息，從而可以通過所述多個(gè)鏡頭實(shí)現(xiàn)對(duì)被拍攝對(duì)象進(jìn)行多角度和/或多位置的多點(diǎn)圖像拍攝，且所述預(yù)定的控制方式包括控制多個(gè)鏡頭中的全部鏡頭或部分鏡頭進(jìn)行多角度和/或多位置的多點(diǎn)圖像拍攝。例如，根據(jù)反饋?zhàn)詣?dòng)控制(如根據(jù)拍攝圖像識(shí)別后的反饋?zhàn)鲎詣?dòng)調(diào)整)，比如當(dāng)手指示處超出范圍了或部分文字超出范圍了或頁碼超出范圍了，則自動(dòng)調(diào)整可活動(dòng)式攝像頭的角度和/或位置，這樣產(chǎn)品在工作過程中無需或少需人工干預(yù)，或者，根據(jù)用戶輸入的控制信息(如用戶執(zhí)行的肢體定動(dòng)作或用戶通過操作按鍵輸入的預(yù)定控制信息等)控制所述各個(gè)鏡頭對(duì)被拍攝對(duì)象的多角度和/或多位置進(jìn)行拍攝，或者，也可以根據(jù)預(yù)先設(shè)定的各個(gè)鏡頭采集被拍攝對(duì)象的多角度和/或多位置的圖像信息的方式自動(dòng)控制所述各個(gè)鏡頭進(jìn)行拍攝(比如，可以設(shè)定各個(gè)鏡頭為依次拍攝被拍攝對(duì)象獲得相應(yīng)的圖像信息，也可以設(shè)定各個(gè)鏡頭同時(shí)拍攝被拍攝對(duì)象獲得相應(yīng)的圖像信息，或者，也可以設(shè)定部分鏡頭拍攝被拍攝對(duì)象獲得相應(yīng)的圖像信息，等等)。
[0052]具體地，在該方案(3)中，所述固定式攝像頭可以設(shè)置于需要采集所述圖像信息的區(qū)域的位置包括:所述區(qū)域的邊緣上方和/或斜上方和/或正上方，具體可以參照?qǐng)D6、圖7、圖8和圖9所示。
[0053]固定攝像頭通常有固定的視野，但多個(gè)攝像頭可形成全面的覆蓋，而可活動(dòng)式攝像頭在某一角度位置時(shí)有固定的視野，但其通過活動(dòng)改變視野，因此也能形成全面的覆蓋，在具體實(shí)施中，如果固定攝像頭松動(dòng)了，并不能視為可活動(dòng)式攝像頭，同樣，即使攝像頭是可以活動(dòng)的，但如果其工作過程中并不是靠活動(dòng)來獲得所需的特別效果，比如全面的覆蓋等，則實(shí)際上仍屬于固定攝像頭方案。比如，若將可以活動(dòng)的攝像頭事先調(diào)整到合適的角度位置等，但實(shí)際使用中并不需要進(jìn)行活動(dòng)，或活動(dòng)對(duì)特別的效果比如全面的覆蓋等作用很小，則實(shí)際上仍屬于固定攝像頭方案。
[0054]本實(shí)用新型實(shí)施例提供的圖文采集識(shí)別裝置中，所述圖文內(nèi)容信息具體可以但不限于包括:印刷品的圖片或文字內(nèi)容信息，和/或，空間靜物的圖片信息，和/或，肢體動(dòng)作信息，和/或，對(duì)印刷品進(jìn)行閱讀操作的指示信息，和/或，操作物體的動(dòng)作信息；即所述圖文內(nèi)容信息可以為印刷品的圖片或文字內(nèi)容信息、空間靜物的圖片信息、肢體動(dòng)作信息、對(duì)印刷品進(jìn)行閱讀操作的指示信息以及操作物體的動(dòng)作信息中的至少一項(xiàng)。對(duì)應(yīng)的相應(yīng)的圖像信息識(shí)別單元包括圖文識(shí)別模塊和動(dòng)作識(shí)別模塊，以用于識(shí)別相應(yīng)的圖文或動(dòng)作信息，相應(yīng)的圖文識(shí)別模塊和動(dòng)作識(shí)別模塊均為現(xiàn)有技術(shù)中已存在的模塊，故在此不對(duì)其具體實(shí)現(xiàn)方式進(jìn)行詳細(xì)描述。
[0055]也就是說，相應(yīng)的圖像信息識(shí)別單元可以根據(jù)采集到的圖像信息識(shí)別出印刷品中的圖片或文字信息，或者，也可以識(shí)別出空間靜物的圖片(如根據(jù)采集到的空間靜物的圖像信息確定相應(yīng)的空間靜物的對(duì)應(yīng)圖片或文字說明等內(nèi)容信息)，或者，也可以識(shí)別出用戶執(zhí)行的手勢(shì)動(dòng)作等肢體動(dòng)作信息(如識(shí)別預(yù)定的肢體動(dòng)作所對(duì)應(yīng)的執(zhí)行指令含義等)，或者，也可以識(shí)別出用戶操作物體的動(dòng)作信息，或者，也可以識(shí)別出用戶對(duì)印刷品進(jìn)行閱讀時(shí)的閱讀操作指示，等等。進(jìn)一步地，對(duì)印刷品進(jìn)行閱讀操作的指示信息可以通過肢體動(dòng)作信息或操作物體的動(dòng)作信息實(shí)現(xiàn)，即可以將特定的肢體動(dòng)作或操作物體的動(dòng)作作為某種閱讀操作的指示信息；也就是說，所述對(duì)印刷品進(jìn)行閱讀操作的指示信息可以包括:通過手或手持物體在印刷品上進(jìn)行的閱讀指示操作信息，如確定指示一點(diǎn)閱讀的指示或確定需要閱讀內(nèi)容的指示或確定是否需要閱讀的指示等，比如手在印刷品上指點(diǎn)、單擊、雙擊、滑動(dòng)、翻頁坐寸O
[0056]本實(shí)用新型實(shí)施例提供的一種圖文采集識(shí)別裝置由于采用了獨(dú)特的攝像頭布置方案，使得在圖像信息采集過程中可以靈活地獲得需要采集被拍攝對(duì)象的多點(diǎn)圖像信息，即采集被拍攝對(duì)應(yīng)的不同角度和/或不同位置的圖像信息，從而可以使得采集到的圖像信息能夠真實(shí)準(zhǔn)確地反應(yīng)被拍攝對(duì)象的實(shí)際情況，進(jìn)而使得后續(xù)的圖文識(shí)別處理過程中可以準(zhǔn)確識(shí)別出相應(yīng)的圖文內(nèi)容信息，如準(zhǔn)確地識(shí)別出印刷品中的文字或圖片信息，或者，識(shí)別出用戶的肢體動(dòng)作的含義，或者，識(shí)別出用戶操作物體執(zhí)行的動(dòng)作的含義，或者，識(shí)別出用戶通過肢體動(dòng)作或操作物體對(duì)圖書等印刷品的閱讀操作的含義，或者，識(shí)別出用戶指示的文字或圖片等等。
[0057]在本實(shí)用新型實(shí)施例提供的圖文采集識(shí)別裝置中，為便于用戶基于該裝置實(shí)現(xiàn)針對(duì)印刷品的有聲閱讀，則如圖2所示，在該裝置中還可以包括音頻單元，所述多點(diǎn)圖像信息采集單元將采集的圖書中當(dāng)前閱讀頁或印刷品當(dāng)前閱讀位置或閱讀操作指示位置或包含書目信息的或包含頁碼信息的圖像信息傳遞給所述圖像信息識(shí)別單元，所述圖像信息識(shí)別單元識(shí)別出根據(jù)所述當(dāng)前閱讀頁或印刷品當(dāng)前閱讀位置或閱讀操作指示位置或包含書目信息或包含頁碼信息的圖像信息識(shí)別出該當(dāng)前閱讀頁或印刷品當(dāng)前閱讀位置或閱讀操作指示位置或書目信息的或頁碼信息的文字內(nèi)容信息對(duì)應(yīng)的音頻信息并通知所述音頻單元，所述音頻單元將所述對(duì)應(yīng)的音頻信息以音頻形式輸出，從而可以實(shí)現(xiàn)針對(duì)印刷品中文字內(nèi)容的有聲朗讀，便于不方便直觀對(duì)圖書進(jìn)行閱讀的人群獲得普通圖書中的內(nèi)容信息。
[0058]進(jìn)一步地，參照?qǐng)D15所示，相應(yīng)的圖像信息識(shí)別單元可以包括CPU (中央處理器)及存儲(chǔ)器等部件，相應(yīng)的音頻單元可以包括揚(yáng)聲器及相應(yīng)的驅(qū)動(dòng)電路。
[0059]在通過所述音頻單元對(duì)印刷品進(jìn)行有聲閱讀操作過程中，所述多點(diǎn)圖像信息采集單元還包含閱讀位置信息采集模塊，用于通過攝像頭采集用戶閱讀操作位置(即用戶指定的印刷品當(dāng)前閱讀位置)的文字圖像信息，且所述圖像信息識(shí)別單元識(shí)別所述用戶閱讀操作位置的文字圖像信息包含的文字內(nèi)容，并將識(shí)別確定的所述文字內(nèi)容對(duì)應(yīng)的音頻信息或所述文字內(nèi)容轉(zhuǎn)換獲得的音頻信息通知所述音頻單元。其中，所述文字內(nèi)容對(duì)應(yīng)的音頻信息可以為該部分文字內(nèi)容的朗讀音頻信息，也可以為該文字內(nèi)容對(duì)應(yīng)的其他音頻信息，如對(duì)該文字內(nèi)容的解釋說明等音頻信息。
[0060]相應(yīng)的文字識(shí)別目前已經(jīng)逐漸進(jìn)入實(shí)用階段，相應(yīng)的識(shí)別處理過程可以包括:首先對(duì)拍照的圖像預(yù)處理，該預(yù)處理主要包括二值化、噪聲去除、傾斜較正等處理，然后進(jìn)行文字特征抽取，包括對(duì)文字影像細(xì)線化后，取得字的筆劃端點(diǎn)、交叉點(diǎn)之?dāng)?shù)量及位置，或以筆劃段為特征，配合比對(duì)方法進(jìn)行比對(duì)，從而識(shí)別文字。由于文字識(shí)別技術(shù)已經(jīng)為現(xiàn)有技術(shù)，故在此不再對(duì)其進(jìn)行詳細(xì)說明。
[0061]在該圖文采集識(shí)別裝置中，由于可以準(zhǔn)確進(jìn)行圖文內(nèi)容信息的識(shí)別，因而可以針對(duì)普通圖書進(jìn)行圖文識(shí)別處理，并結(jié)合相應(yīng)的發(fā)聲功能實(shí)現(xiàn)針對(duì)普通圖書的輔助閱讀發(fā)聲處理，從而為人們提供一種可以對(duì)普通圖書進(jìn)行輔助發(fā)聲的輔助閱讀發(fā)聲設(shè)備，這就使得兒童、盲人、老年人等不方便對(duì)圖書直接進(jìn)行閱讀的人群可以借助該圖文采集識(shí)別裝置進(jìn)行輔助閱讀，極大地方便了這部分人群對(duì)普通圖書的閱讀操作。而且，識(shí)別過程的準(zhǔn)確性還可以保證圖書閱讀過程能夠順暢地進(jìn)行，進(jìn)一步保證了閱讀用戶具有較佳的閱讀體驗(yàn)。
[0062]在本實(shí)用新型實(shí)施例提供的圖文采集識(shí)別裝置中，為便于保存識(shí)別出的圖文內(nèi)容信息，在該裝置中還可以包括存儲(chǔ)單元，用于保存所述圖像信息識(shí)別單元識(shí)別出的所述圖文內(nèi)容信息，以方便后續(xù)對(duì)所述圖文內(nèi)容信息的調(diào)用。
[0063]在本實(shí)用新型實(shí)施例提供的圖文采集識(shí)別裝置中，所述多點(diǎn)圖像信息采集單元還可以采集的包含有圖書的書目信息的圖像信息并傳遞給所述圖像信息識(shí)別單元，所述圖像信息識(shí)別單元根據(jù)所述包含有圖書的書目信息的圖像信息識(shí)別出圖書名稱。進(jìn)一步地，還可以通過音頻或顯示的方式輸出所述圖書名稱，例如，可以通過所述音頻單元朗讀出圖書名稱，或通過顯示屏顯示出圖書名稱。
[0064]進(jìn)一步地，所述多點(diǎn)圖像信息采集單元可以通過所述攝像頭采集圖書封皮的圖像信息作為包含所述圖書的書目信息的圖像信息，所述圖像信息識(shí)別單元?jiǎng)t可以通過識(shí)別所述圖書封皮(包含封面、封底等)的圖像信息中的文字確定圖書名稱，或者，也可以通過識(shí)別所述圖書封皮的圖像信息確定圖書名稱，或者，還可以通過識(shí)別所述圖書封皮的圖像信息中的標(biāo)簽確定圖書名稱，相應(yīng)的標(biāo)簽包括特制的標(biāo)簽或編碼，或者也可以包括ISBN條碼(國際標(biāo)準(zhǔn)書號(hào)，Internat1nal Standard Book Number)等目前已經(jīng)存在的標(biāo)簽或編碼。
[0065]由于每本書的封面和封底圖像均各不相同，故可以通過拍攝到的圖像信息進(jìn)行對(duì)比識(shí)別，或提取特征對(duì)比從而識(shí)別出具體為哪一本圖書，從而確定相應(yīng)的圖書名稱。而且，為便于識(shí)別，還可以在圖書中設(shè)置相應(yīng)的便于識(shí)別的標(biāo)簽，使得根據(jù)該標(biāo)簽可以確定當(dāng)前圖書的具體圖書名稱，相應(yīng)的標(biāo)簽可以為印制于圖書上的標(biāo)簽，也可以為粘貼于圖書上的標(biāo)簽，且相應(yīng)的標(biāo)簽上可以為圖片或編碼或文字等內(nèi)容信息。由于具體的圖像識(shí)別技術(shù)已經(jīng)為現(xiàn)有技術(shù)，故在此不再對(duì)其進(jìn)行詳細(xì)說明。
[0066]在本發(fā)明實(shí)施例提供的圖文采集識(shí)別裝置中，所述多點(diǎn)圖像信息采集單元還可以采集包含有頁碼信息的圖像信息并傳遞給所述圖像信息識(shí)別單元，所述圖像信息識(shí)別單元根據(jù)所述包含有頁碼信息的圖像信息識(shí)別出頁碼。進(jìn)一步地，還可以通過音頻或顯示的方式輸出所述圖書名稱，例如，可以通過所述音頻單元朗讀出頁碼，或通過顯示屏顯示出頁碼。
[0067]所述頁碼信息采集模塊通過識(shí)別所述圖書內(nèi)頁的圖像信息確定當(dāng)前閱讀的頁碼，或者，通過識(shí)別所述圖書內(nèi)頁的圖像信息中的文字或數(shù)字頁碼確定當(dāng)前閱讀的頁碼。
[0068]該圖文采集識(shí)別裝置還可以包括顯示單元，用于顯示設(shè)定的內(nèi)容信息和/或采集識(shí)別過程中獲得的圖像和文字信息和/或外部獲得的內(nèi)容信息，例如，可以顯示當(dāng)前圖書閱讀的頁碼或圖書名稱等信息，或者，顯示針對(duì)圖書的解釋說明信息(如作者介紹等)，或者，顯示所述圖像信息識(shí)別單元識(shí)別出的用戶的操作指令，或者，播放用于對(duì)圖書進(jìn)行解釋的視頻彳目息，等等。
[0069]具體地，該圖文采集識(shí)別裝置還可以包括以下任一項(xiàng)或多項(xiàng)單元:
[0070]音頻輸入單元，用于獲取音頻信息。相應(yīng)的獲取后的音頻信息可以通過存儲(chǔ)單元進(jìn)行保存。
[0071]存儲(chǔ)單元，包括存儲(chǔ)音頻信息和/或保存采集識(shí)別過程中獲得的圖像和/或文字信息和/或保存外部獲得的內(nèi)容信息，保存的語音信息可以在需要時(shí)通過音頻單元進(jìn)行播放，例如，通過音頻輸入單元和該存儲(chǔ)單元及音頻單元的配合，可以校正語言學(xué)習(xí)過程中用戶的發(fā)音是否準(zhǔn)確等。
[0072]通信單元，用于與計(jì)算機(jī)之間進(jìn)行通信。
[0073]輸入單元，與所述圖像信息識(shí)別單元連接，用于獲得輸入信息，比如按鍵輸入、手寫輸入，屏幕輸入等。
[0074]再者，為加強(qiáng)用戶與該圖文采集識(shí)別裝置之間的互動(dòng)處理，提升用戶使用該圖文采集識(shí)別裝置的體驗(yàn)，在該裝置中還可以包括互動(dòng)處理模塊，用于獲取用戶的互動(dòng)操作控制信息，并根據(jù)所述互動(dòng)操作控制信息執(zhí)行預(yù)定的互動(dòng)操作，且所述互動(dòng)操作控制信息包括肢體動(dòng)作、操作物體的動(dòng)作、語音信息、屏幕輸入或操作按鍵中的至少一項(xiàng)；在互動(dòng)處理過程中，圖文采集識(shí)別裝置還可以通過所述音頻單元向用戶播放特定提示聲音信息，或者也可以通過所述顯示單元向用戶顯示特定的內(nèi)容信息，且用戶可以根據(jù)相應(yīng)的提示聲音信息或顯示的特定的內(nèi)容信息向圖文采集識(shí)別裝置傳遞相應(yīng)的互動(dòng)操作控制信息，以便于與圖文采集識(shí)別裝置進(jìn)行互動(dòng)。具體地，相應(yīng)的互動(dòng)操作控制信息可以包括在印刷品上進(jìn)行的閱讀操作指示信息等，以通過肢體動(dòng)作進(jìn)行互動(dòng)操作為例，對(duì)于閱讀普通圖書的用戶可以通過手或手持物體的動(dòng)作與圖文采集識(shí)別裝置之間互動(dòng)以對(duì)閱讀方式或閱讀內(nèi)容進(jìn)行互動(dòng)控制等，如通過預(yù)定手勢(shì)控制重新閱讀一次當(dāng)前位置的內(nèi)容等。通過該互動(dòng)處理模塊可以識(shí)別閱讀用戶的肢體動(dòng)作或操作物體動(dòng)作，以便于該裝置可以與閱讀用戶之間進(jìn)行互動(dòng)，從而提升閱讀用戶的閱讀體驗(yàn)，使得圖書成為有聲媒體和互動(dòng)媒體。
[0075]在本實(shí)用新型實(shí)施例中，通過相應(yīng)的多點(diǎn)圖像采集近距離就可以對(duì)所需采集對(duì)象的覆蓋且不失真。具體地，相應(yīng)的活動(dòng)攝像頭或多個(gè)攝像頭會(huì)有多個(gè)焦距，這樣就能使所采集對(duì)象所有部分都處于最佳焦距，以保證各部分的圖像均清晰。
[0076]例如，參照?qǐng)D10、圖11、圖12、圖13和圖14所示，由于采用了多攝像頭或可活動(dòng)式攝像頭(如可轉(zhuǎn)頭式攝像頭)的結(jié)構(gòu)，對(duì)于彎曲表面(比如圖書中部的大彎曲面)總能有合適的拍攝角度和位置，因此能有效地對(duì)其進(jìn)行拍攝識(shí)別，相應(yīng)的拍攝角度無論正上方還是偵愐斜面都能對(duì)拍攝對(duì)象有效拍攝，各部分都在良好焦距內(nèi)而獲得清晰圖像和良好的分辨率。而且，相應(yīng)的多點(diǎn)圖像采集使得對(duì)攝像頭分辨率要求較低，或者說以同樣分辨率的攝像頭對(duì)所拍攝物進(jìn)行拍攝可以達(dá)到更高的分辨率(更有利于識(shí)別)。
[0077]進(jìn)一步地，如圖15所示，除上述音頻輸入單元(即語音輸入模塊)外，還可以包括手寫輸入模塊，屏幕輸入模塊或手勢(shì)輸入模塊等。相應(yīng)的通信接口可以為USB接口等。相應(yīng)的存儲(chǔ)單元還可以包括擴(kuò)展存儲(chǔ)空間，如SD卡等。
[0078]以上所述，僅為本實(shí)用新型較佳的【具體實(shí)施方式】，但本實(shí)用新型的保護(hù)范圍并不局限于此，任何熟悉本【技術(shù)領(lǐng)域】的技術(shù)人員在本實(shí)用新型披露的技術(shù)范圍內(nèi)，可輕易想到的變化或替換，都應(yīng)涵蓋在本實(shí)用新型的保護(hù)范圍之內(nèi)。因此，本實(shí)用新型的保護(hù)范圍應(yīng)該以權(quán)利要求書的保護(hù)范圍為準(zhǔn)。
【權(quán)利要求】
1.一種圖文采集識(shí)別裝置，其特征在于，包括:多點(diǎn)圖像信息采集單元和圖像信息識(shí)別單元，所述多點(diǎn)圖像信息采集單元與所述圖像信息識(shí)別單元連接，并將采集的被拍攝對(duì)象的多角度和/或多位置的圖像信息傳送給所述圖像信息識(shí)別單元作為所述圖像信息識(shí)別單元識(shí)別所述圖像信息對(duì)應(yīng)的圖文內(nèi)容信息的依據(jù)；其中， 所多點(diǎn)圖像信息采集單元包括至少一個(gè)可活動(dòng)式攝像頭，所述可活動(dòng)式攝像頭的拍照角度和/或位置是可調(diào)整的，所述可活動(dòng)式攝像頭與驅(qū)動(dòng)電機(jī)連接，所述驅(qū)動(dòng)電機(jī)控制所述可活動(dòng)式攝像頭的旋轉(zhuǎn)和/或移動(dòng)；或者，所述多點(diǎn)圖像信息采集單元包括多個(gè)攝像頭，且每個(gè)攝像頭為固定式攝像頭或可活動(dòng)式攝像頭，所述可活動(dòng)式攝像頭的拍照角度和/或位置是可調(diào)整的，所述可活動(dòng)式攝像頭是手動(dòng)控制或與驅(qū)動(dòng)電機(jī)連接，所述驅(qū)動(dòng)電機(jī)控制所述可活動(dòng)式攝像頭的旋轉(zhuǎn)和/或移動(dòng)；或者，所述多點(diǎn)圖像信息采集單元包括一個(gè)固定式攝像頭，所述固定式攝像頭包括多個(gè)鏡頭。
2.根據(jù)權(quán)利要求1所述的圖文采集識(shí)別裝置，其特征在于，所述可活動(dòng)式攝像頭包括可旋轉(zhuǎn)式攝像頭和/或可移動(dòng)式攝像頭；或者，所述可活動(dòng)式攝像頭包括一個(gè)或多個(gè)可活動(dòng)式鏡頭；所述可活動(dòng)式攝像頭設(shè)置于需要采集所述圖像信息的區(qū)域的位置包括:所述區(qū)域的邊緣上方和/或斜上方和/或正上方。
3.根據(jù)權(quán)利要求1所述的圖文采集識(shí)別裝置，其特征在于，所述固定式攝像頭包括一個(gè)或多個(gè)鏡頭，且所述攝像頭設(shè)置于需要采集所述圖像信息的區(qū)域的位置包括:所述區(qū)域的邊緣上方和/或斜上方和/或正上方。
4.根據(jù)權(quán)利要求1所述的圖文采集識(shí)別裝置，其特征在于，所述圖像信息識(shí)別單元包括圖文識(shí)別模塊和動(dòng)作識(shí)別模塊。
5.根據(jù)權(quán)利要求1、2、3或4所述的圖文采集識(shí)別裝置，其特征在于，該裝置還包括: 音頻單元，與所述圖像信息識(shí)別單元連接，并在所述多點(diǎn)圖像信息采集單元將采集的圖書中當(dāng)前閱讀頁的或印刷品當(dāng)前閱讀位置的或閱讀操作指示位置的或包含書目信息或包含頁碼信息的圖像信息傳遞給所述圖像信息識(shí)別單元，且所述圖像信息識(shí)別單元根據(jù)所述當(dāng)前閱讀頁的或印刷品當(dāng)前閱讀位置的或閱讀操作指示位置的或包含書目信息或包含頁碼信息的圖像信息識(shí)別出該當(dāng)前閱讀頁的或印刷品當(dāng)前閱讀位置的或閱讀操作指示的或書目信息的或頁碼信息的文字內(nèi)容信息對(duì)應(yīng)的音頻信息后，獲取所述音頻信息，再將所述對(duì)應(yīng)的音頻信息通過揚(yáng)聲器以音頻形式輸出； 和/或， 與所述圖像信息識(shí)別單元連接，且用于獲取音頻信息的音頻輸入單元； 和/或， 與所述圖像信息識(shí)別單元和/或所述音頻輸入單元連接，且用于存儲(chǔ)器內(nèi)容信息的存儲(chǔ)單元； 和/或， 與所述圖像信息識(shí)別單元連接，且用于顯示內(nèi)容信息的顯示單元； 和/或， 與所述圖像信息識(shí)別單元連接，且用于與計(jì)算機(jī)通信的通信單元； 和/或， 與所述圖像信息識(shí)別單元連接，且用于獲得輸入信息的輸入單元。
【文檔編號(hào)】H04N1/04GK204046697SQ201420038757
【公開日】2014年12月24日 申請(qǐng)日期:2014年1月21日 優(yōu)先權(quán)日:2013年1月25日
【發(fā)明者】陳旭 申請(qǐng)人:陳旭