本發(fā)明涉及一種圖像處理裝置、圖像處理系統(tǒng)以及圖像處理方法。
背景技術(shù):
有時(shí)一邊翻書一邊使用數(shù)字照相機(jī)等依次拍攝多個(gè)頁(yè),利用由此得到的包含多個(gè)圖像的數(shù)據(jù)。在這種情況下,由于照射到書頁(yè)的光的偏差、翻開(kāi)書的狀態(tài)下的頁(yè)的彎曲等,有時(shí)在拍攝書頁(yè)而得到的圖像中產(chǎn)生亮度不均勻,即所謂亮斑。有亮斑的圖像存在局部產(chǎn)生濃淡以及明亮部分的文字模糊不清等情況,因此有時(shí)看不清楚。
例如在日本特開(kāi)2005-269451號(hào)公報(bào)(以下,稱為專利文獻(xiàn)1)中公開(kāi)了用于修正通過(guò)拍攝原稿而得到的原稿圖像的亮斑的技術(shù)。通常,消除亮斑并使圖像的亮度均勻化的修正也被稱為圖像斑點(diǎn)修正等。
專利文獻(xiàn)1所記載的圖像處理裝置檢查對(duì)原稿圖像進(jìn)行分割后的各塊內(nèi)的各像素的亮度值,針對(duì)每個(gè)塊取得與原稿紙對(duì)應(yīng)的亮度值,根據(jù)該亮度值求出各塊的圖像斑點(diǎn)修正值。而且,根據(jù)求出的圖像斑點(diǎn)修正值對(duì)各塊的像素進(jìn)行圖像斑點(diǎn)修正。考慮將專利文獻(xiàn)1所記載的技術(shù)應(yīng)用于通過(guò)拍攝書的多個(gè)頁(yè)的各頁(yè)而得到的多個(gè)圖像,修正多個(gè)圖像的亮斑。
然而,為了使用專利文獻(xiàn)1所記載的圖像處理裝置修正與書的多個(gè)頁(yè)的各頁(yè)對(duì)應(yīng)的多個(gè)圖像的亮斑,考慮需要對(duì)每個(gè)圖像進(jìn)行上述一系列處理。這樣,圖像處理裝置的處理負(fù)荷有可能增大。
這種用于修正多個(gè)圖像的亮斑的處理負(fù)荷變大的問(wèn)題并不限于打開(kāi)書拍攝多個(gè)頁(yè)的情況,在打開(kāi)裝訂了文件等的檔案等來(lái)拍攝多個(gè)頁(yè)的情況下也有可能發(fā)生。
技術(shù)實(shí)現(xiàn)要素:
本發(fā)明是鑒于上述情形而作出的,其目的在于減輕用于修正多個(gè)圖像的亮斑的處理負(fù)荷,該多個(gè)圖像是打開(kāi)將多個(gè)薄片裝訂在一起的物品進(jìn)行拍攝而得 到的。
本發(fā)明的第一觀點(diǎn)的圖像處理裝置具備:第一修正量取得部,其根據(jù)將多個(gè)處理對(duì)象圖像中的第一圖像進(jìn)行分割而得到的各塊內(nèi)的各像素的亮度,取得該各塊的第一亮度修正量,其中,上述多個(gè)處理對(duì)象圖像是打開(kāi)將多個(gè)薄片裝訂在一起的對(duì)象物進(jìn)行拍攝得到的;以及第一修正部,其根據(jù)上述各塊的第一亮度修正量,修正上述多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。
本發(fā)明的第二觀點(diǎn)的圖像處理系統(tǒng)具備:上述第一觀點(diǎn)的圖像處理裝置;以及拍攝裝置,其拍攝上述多個(gè)處理對(duì)象圖像中的各個(gè)處理對(duì)象圖像。
本發(fā)明的第三觀點(diǎn)的圖像處理方法,包括以下步驟:根據(jù)將多個(gè)處理對(duì)象圖像中的第一圖像進(jìn)行分割而得到的各塊內(nèi)的各像素的亮度,取得該各塊的亮度修正量,其中,上述多個(gè)處理對(duì)象圖像是打開(kāi)將多個(gè)薄片裝訂在一起的對(duì)象物進(jìn)行拍攝得到的;以及根據(jù)上述各塊的亮度修正量,修正上述多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。
附圖說(shuō)明
如果結(jié)合以下附圖考慮以下的詳細(xì)記述,能夠更深刻地理解本申請(qǐng)。
圖1是表示本發(fā)明的第一實(shí)施方式的圖像處理系統(tǒng)的結(jié)構(gòu)的圖。
圖2是表示第一實(shí)施方式的圖像處理系統(tǒng)的功能結(jié)構(gòu)的框圖。
圖3是表示第一實(shí)施方式的終端裝置作為圖像處理裝置而具備的功能結(jié)構(gòu)的框圖。
圖4是表示第一實(shí)施方式的圖像斑點(diǎn)修正部的功能結(jié)構(gòu)的框圖。
圖5是表示對(duì)處理對(duì)象圖像進(jìn)行分割而成的多個(gè)塊的一例的圖。
圖6是表示第一實(shí)施方式的拍攝處理的流程的流程圖。
圖7是表示第一實(shí)施方式的圖像處理的流程的流程圖。
圖8是表示第一實(shí)施方式的圖像斑點(diǎn)修正處理的流程的流程圖。
圖9是表示第一修正表的一例的圖。
圖10A是表示拍攝書的第1頁(yè)時(shí)的光的偏差的圖,圖10B是表示拍攝書的第1頁(yè)時(shí)的頁(yè)P(yáng)的彎曲的示例的圖。
圖11A是表示拍攝書的第2N-1頁(yè)時(shí)的光的偏差的圖,圖11B是表示拍攝書的第2N-1頁(yè)時(shí)的頁(yè)P(yáng)的彎曲的示例的圖。
圖12是表示本發(fā)明的第二實(shí)施方式的圖像斑點(diǎn)修正部的功能結(jié)構(gòu)的框圖。
圖13是表示第二實(shí)施方式的圖像斑點(diǎn)修正處理的流程的流程圖,表示與第一實(shí)施方式的圖像斑點(diǎn)修正處理不同的部分。
圖14是表示本發(fā)明的第三實(shí)施方式的第二修正部的功能結(jié)構(gòu)的框圖。
圖15是表示第三實(shí)施方式的圖像斑點(diǎn)修正處理的流程的流程圖,表示與第二實(shí)施方式的圖像斑點(diǎn)修正處理不同的部分。
圖16用于說(shuō)明通過(guò)對(duì)各塊的亮度修正量Yab進(jìn)行插補(bǔ)而取得處理對(duì)象圖像內(nèi)的像素的亮度修正量Pxy的方法。
圖17是表示本發(fā)明的第四實(shí)施方式的圖像斑點(diǎn)修正部的功能結(jié)構(gòu)的框圖。
圖18是表示第四實(shí)施方式的圖像處理的流程的流程圖,表示與第二實(shí)施方式的圖像修正處理不同的部分。
圖19A和圖19B是表示第四實(shí)施方式的圖像斑點(diǎn)修正處理的流程的流程圖。
圖20是表示第四實(shí)施方式的第一圖像選擇處理的流程的流程圖。
圖21是表示第四實(shí)施方式的第二圖像選擇處理的流程的流程圖。
具體實(shí)施方式
以下,參照附圖說(shuō)明本發(fā)明的實(shí)施方式。此外,對(duì)圖中相同或相當(dāng)?shù)牟糠指郊酉嗤母綀D標(biāo)記。
(第一實(shí)施方式)
本發(fā)明的第一實(shí)施方式的圖像處理系統(tǒng)100是用于對(duì)將多個(gè)薄片裝訂在一起的對(duì)象物進(jìn)行電子化的系統(tǒng)。將多個(gè)薄片裝訂在一起的對(duì)象物除了包含將紙裝訂在一起而形成的書、雜志以外,還包含用裝訂器裝訂了文件的物品、裝訂了文件等的檔案等。在本實(shí)施方式中,以書為例子進(jìn)行說(shuō)明。
如圖1所示,圖像處理系統(tǒng)100具備:翻頁(yè)裝置101,其依次對(duì)書B的頁(yè)P(yáng)進(jìn)行翻頁(yè);以及終端裝置102,當(dāng)翻頁(yè)裝置101打開(kāi)了成為拍攝對(duì)象的頁(yè)P(yáng)時(shí)拍攝該頁(yè)P(yáng),將拍攝到的圖像作為處理對(duì)象圖像實(shí)施圖像處理。終端裝置102例如為智能手機(jī)。翻頁(yè)裝置101與終端裝置102構(gòu)成為通過(guò)未圖示的無(wú)線或有 線線路能夠相互進(jìn)行通信。此外,終端裝置102也可以采用個(gè)人計(jì)算機(jī)、平板終端等。
在本實(shí)施方式中,設(shè)為書B依次具有封面、第1頁(yè)至第2N(N為1以上的整數(shù))頁(yè)、封底。
如圖1所示,翻頁(yè)裝置101具備:保持臺(tái)103,其保持被打開(kāi)的書B;支架104,其用于相對(duì)于書B固定終端裝置102的位置和姿勢(shì);大致長(zhǎng)方體形狀的收納盒105;第一驅(qū)動(dòng)部107,其具有驅(qū)動(dòng)軸106;臂部108,其以驅(qū)動(dòng)軸106為中心擺動(dòng);吸附部110,其經(jīng)由第二驅(qū)動(dòng)部109安裝于臂部108的前端,吸附(或附著)在書B的頁(yè)P(yáng)上;底座部111,其支承第一驅(qū)動(dòng)部107、臂部108和吸附部110;以及送風(fēng)部112,其使風(fēng)通過(guò)翻頁(yè)前的頁(yè)P(yáng)的上方,由此對(duì)翻頁(yè)后的頁(yè)P(yáng)吹風(fēng)。第一驅(qū)動(dòng)部107和第二驅(qū)動(dòng)部109例如分別為電動(dòng)機(jī)。
另外,如圖2所示,翻頁(yè)裝置101在收納盒105的內(nèi)部具備:用于與終端裝置102進(jìn)行通信的接口即第一通信部113;電動(dòng)機(jī)驅(qū)動(dòng)器114、115、116,其用于分別驅(qū)動(dòng)第一驅(qū)動(dòng)部107、第二驅(qū)動(dòng)部109、送風(fēng)部112;存儲(chǔ)有各種程序的ROM(Read Only Memory:只讀存儲(chǔ)器)117;CPU(Central Processing Unit:中央處理器)119,其通過(guò)執(zhí)行存儲(chǔ)在ROM 117中的程序,作為翻頁(yè)控制部118發(fā)揮功能;以及RAM(Random Access Memory:隨機(jī)存取存儲(chǔ)器)120,其在執(zhí)行ROM中存儲(chǔ)的程序時(shí)作為CPU 119的作業(yè)區(qū)域而發(fā)揮功能。
保持臺(tái)103以翻頁(yè)后的頁(yè)P(yáng)相對(duì)于翻頁(yè)前的大致水平的頁(yè)P(yáng)傾斜的方式保持書B。該傾斜角度θ例如為30~45度。
當(dāng)由用戶等調(diào)整終端裝置102的照相機(jī)121(參照?qǐng)D2)的朝向從而能夠拍攝保持臺(tái)103所保持的書B的頁(yè)P(yáng)時(shí),支架104以該位置和姿勢(shì)保持終端裝置102。在本實(shí)施方式中,將終端裝置102固定在支架104上,從而使用照相機(jī)121僅拍攝書B的對(duì)開(kāi)的兩頁(yè)中的左頁(yè)。在此,左右分別與從正面(保持書B一側(cè))觀察翻頁(yè)控制部118時(shí)的左右相對(duì)應(yīng)。
當(dāng)從未圖示的電源供電時(shí),CPU 119執(zhí)行存儲(chǔ)于ROM 117的程序而作為翻頁(yè)控制部118發(fā)揮功能。翻頁(yè)控制部118根據(jù)經(jīng)由第一通信部113取得的用戶的指示,控制電動(dòng)機(jī)驅(qū)動(dòng)器114、115從而對(duì)書B的頁(yè)P(yáng)進(jìn)行翻頁(yè)。
詳細(xì)地說(shuō),翻頁(yè)控制部118當(dāng)經(jīng)由第一通信部113取得翻頁(yè)指示時(shí),在使 電動(dòng)機(jī)驅(qū)動(dòng)器116驅(qū)動(dòng)送風(fēng)部112的狀態(tài)下,通過(guò)以下動(dòng)作對(duì)頁(yè)P(yáng)進(jìn)行翻頁(yè)。
首先,翻頁(yè)控制部118控制第一驅(qū)動(dòng)部107使臂部108從右向左移動(dòng)。由此,吸附部110吸附在翻頁(yè)前的頁(yè)P(yáng)(左側(cè)的頁(yè)P(yáng))上。
接著,翻頁(yè)控制部118控制第一驅(qū)動(dòng)部107使臂部108從左向右移動(dòng)。由此,開(kāi)始對(duì)吸附在吸附部110的頁(yè)P(yáng)進(jìn)行翻頁(yè)。
接著,翻頁(yè)控制部118在使第一驅(qū)動(dòng)部107進(jìn)行驅(qū)動(dòng)的狀態(tài)下控制第二驅(qū)動(dòng)部109使吸附部110旋轉(zhuǎn)。通過(guò)該旋轉(zhuǎn),在使吸附部110從頁(yè)P(yáng)分離時(shí)吸附強(qiáng)度發(fā)生變化,因此能夠切實(shí)地使吸附部110從頁(yè)P(yáng)分離。
當(dāng)使第一驅(qū)動(dòng)部107和第二驅(qū)動(dòng)部109兩者驅(qū)動(dòng)預(yù)定的時(shí)間時(shí),翻頁(yè)控制部118停止第一驅(qū)動(dòng)部107和第二驅(qū)動(dòng)部109。此時(shí),能夠通過(guò)來(lái)自送風(fēng)部112的風(fēng),防止翻頁(yè)后的頁(yè)P(yáng)返回至原來(lái)位置,因此在將頁(yè)P(yáng)進(jìn)行了翻頁(yè)的狀態(tài)下,吸附部110從頁(yè)P(yáng)分離。由此,將頁(yè)P(yáng)翻頁(yè),翻頁(yè)控制部118結(jié)束對(duì)頁(yè)P(yáng)進(jìn)行翻頁(yè)的動(dòng)作。
在此說(shuō)明的翻頁(yè)裝置101大致相當(dāng)于將日本特開(kāi)2015-3446號(hào)公報(bào)所公開(kāi)的裝置構(gòu)成為與終端裝置102進(jìn)行通信。此外,翻頁(yè)裝置101只要是對(duì)書B的頁(yè)P(yáng)進(jìn)行翻頁(yè)的裝置即可,并不限于具備在此說(shuō)明的結(jié)構(gòu)的裝置。
終端裝置102一體地具備以下功能:當(dāng)通過(guò)翻頁(yè)裝置101打開(kāi)了成為拍攝對(duì)象的頁(yè)P(yáng)時(shí)拍攝該頁(yè)P(yáng)的拍攝裝置的功能;以及將拍攝到的圖像作為處理對(duì)象圖像來(lái)實(shí)施圖像處理的圖像處理裝置的功能。
如圖2所示,終端裝置102具備:用于與翻頁(yè)裝置101進(jìn)行通信的接口即第二通信部122;照相機(jī)121,其拍攝書B的頁(yè)P(yáng);ROM 123,其存儲(chǔ)有各種程序;存儲(chǔ)部124,其存儲(chǔ)有各種程序、表示使用照相機(jī)121進(jìn)行拍攝而得到的圖像的數(shù)據(jù)等;CPU 127,其通過(guò)適當(dāng)?shù)貓?zhí)行存儲(chǔ)于ROM 123或存儲(chǔ)部124的程序,作為拍攝控制部125而發(fā)揮功能以及作為圖像處理部126而發(fā)揮功能;RAM 128,在執(zhí)行存儲(chǔ)在ROM 123中的程序時(shí),作為CPU 127的作業(yè)區(qū)域而發(fā)揮功能;液晶設(shè)備等顯示部129,其顯示拍攝到的圖像、實(shí)施了圖像處理的圖像等;以及指示接受部130,其接受根據(jù)用戶的操作輸入的指示。
在本實(shí)施方式中,由顯示部129和指示接受部130構(gòu)成觸摸面板。即,顯示部129顯示包含用于用戶進(jìn)行操作的按鈕等的畫面,指示接受部130接受與 顯示部129的畫面相對(duì)應(yīng)的用戶的操作。指示接受部130也可以是鍵盤、按鈕、指點(diǎn)設(shè)備等。
拍攝裝置的功能例如通過(guò)以下各部來(lái)實(shí)現(xiàn):第二通信部122、照相機(jī)121、作為拍攝控制部125而發(fā)揮功能的CPU 127、由作為拍攝控制部125而發(fā)揮功能的CPU 127讀出或?qū)懭氲腞OM 123、存儲(chǔ)部124和RAM 128、顯示拍攝到的圖像等的顯示部129以及接受拍攝的指示等的指示接受部130。
圖像處理裝置的功能例如通過(guò)以下各部實(shí)現(xiàn):作為圖像處理部126而發(fā)揮功能的CPU 127、由作為圖像處理部126而發(fā)揮功能的CPU 127讀出或?qū)懭氲腞OM 123、存儲(chǔ)部124和RAM 128、顯示實(shí)施了圖像處理的圖像等的顯示部129以及接受用于實(shí)施圖像處理的指示等的指示接受部130。
詳細(xì)地說(shuō),照相機(jī)121例如由鏡頭、固體拍攝元件等構(gòu)成。作為固體拍攝元件的例子,可舉出CCD(Charge Coupled Device:電荷耦合器件)圖像傳感器、CMOS(Complementary Metal Oxide Semiconductor:互補(bǔ)金屬氧化物半導(dǎo)體)圖像傳感器等。
存儲(chǔ)部124由閃速存儲(chǔ)器等構(gòu)成。如圖3所示,在存儲(chǔ)部124中例如存儲(chǔ)有多個(gè)處理對(duì)象圖像數(shù)據(jù)131_1~2N。各個(gè)處理對(duì)象圖像數(shù)據(jù)131_1~2N表示打開(kāi)書B來(lái)拍攝各頁(yè)P(yáng)而得到的處理對(duì)象圖像i(i為1~2N的整數(shù))。處理對(duì)象圖像數(shù)據(jù)131_i表示在緊接著拍攝后使用照相機(jī)121拍攝書B的第i頁(yè)而得到的圖像,之后表示以該圖像為對(duì)象實(shí)施了圖像處理后的圖像。即,通過(guò)進(jìn)行拍攝得到的處理對(duì)象圖像i不僅包含拍攝到的圖像本身,還包含對(duì)其實(shí)施圖像處理后的圖像。
如圖2所示,拍攝控制部125經(jīng)由第二通信部122進(jìn)行通信,由此與翻頁(yè)裝置101對(duì)頁(yè)P(yáng)進(jìn)行翻頁(yè)的動(dòng)作同步地使照相機(jī)121進(jìn)行動(dòng)作。由此,依次拍攝由翻頁(yè)裝置101翻頁(yè)后的各頁(yè)P(yáng)。拍攝控制部125將表示照相機(jī)121拍攝到的圖像的數(shù)據(jù)存儲(chǔ)在存儲(chǔ)部124中。
當(dāng)經(jīng)由指示接受部130接受了用戶的指示時(shí),圖像處理部126對(duì)處理對(duì)象圖像數(shù)據(jù)131_1,3,…,2N-3,2N-1所示的奇數(shù)頁(yè)的處理對(duì)象圖像或處理對(duì)象圖像數(shù)據(jù)131_2,4,…2N-2,2N所示的偶數(shù)頁(yè)的處理對(duì)象圖像實(shí)施圖像處理。
更詳細(xì)地說(shuō),如圖3所示,圖像處理部126具有:失真修正部132,其對(duì)處理對(duì)象圖像實(shí)施失真修正;切出部133,其從實(shí)施了失真修正的處理對(duì)象圖像切出預(yù)定的范圍;圖像斑點(diǎn)修正部134,其對(duì)切出的處理對(duì)象圖像實(shí)施圖像斑點(diǎn)修正;圖像效果修正部135,其對(duì)實(shí)施了圖像斑點(diǎn)修正的處理對(duì)象圖像實(shí)施預(yù)定的圖像效果修正;以及結(jié)合部136,其對(duì)多個(gè)處理對(duì)象圖像進(jìn)行結(jié)合。
當(dāng)經(jīng)由指示接受部130接受了基于用戶操作的圖像處理的開(kāi)始指示時(shí),失真修正部132修正處理對(duì)象圖像的失真。
切出部133從由失真修正部132修正了失真的處理對(duì)象圖像切出預(yù)定的范圍。由此,去除例如在拍攝時(shí)拍攝到的書B的頁(yè)P(yáng)上的影子等。
圖像斑點(diǎn)修正部134對(duì)由切出部133切出的處理對(duì)象圖像實(shí)施圖像斑點(diǎn)修正。圖像斑點(diǎn)修正是指修正亮斑使得整個(gè)處理對(duì)象圖像的亮度變得均勻。
更詳細(xì)地說(shuō),如圖4所示,圖像斑點(diǎn)修正部134具有:圖像取得部137,其取得由切出部133切出的多個(gè)處理對(duì)象圖像中的各個(gè)處理對(duì)象圖像;分割部138,其將由圖像取得部137取得的各個(gè)處理對(duì)象圖像分割為預(yù)定的塊;第一修正量取得部139,其將多個(gè)處理對(duì)象圖像中的一個(gè)處理對(duì)象圖像設(shè)為第一圖像,取得對(duì)該第一圖像進(jìn)行分割而得到的各塊的第一亮度修正量Yab_1;以及第一修正部140,其根據(jù)各塊的第一亮度修正量Yab_1,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。
當(dāng)從切出部133接受了指示時(shí),圖像取得部137從存儲(chǔ)部124取得表示多個(gè)處理對(duì)象圖像中的各處理對(duì)象圖像的處理對(duì)象圖像數(shù)據(jù)131_1~2N-1(或處理對(duì)象圖像數(shù)據(jù)131_2~2N)。在此取得的處理對(duì)象圖像數(shù)據(jù)131是由切出部133存儲(chǔ)于存儲(chǔ)部124的數(shù)據(jù),表示切出的處理對(duì)象圖像。由此,圖像取得部137取得多個(gè)處理對(duì)象圖像。此外,圖像取得部137也可以從切出部133取得處理對(duì)象圖像數(shù)據(jù)131。
分割部138將圖像取得部137取得的多個(gè)處理對(duì)象圖像中的各處理對(duì)象圖像通過(guò)共用的方法分割為多個(gè)塊。
在此,例如如圖5所示,在與第i頁(yè)對(duì)應(yīng)的處理對(duì)象圖像縱橫的各個(gè)像素?cái)?shù)為p×q的情況下,分割部138分割為預(yù)定的大小的塊。預(yù)定大小的塊是指如圖5所示那樣,縱橫各個(gè)像素?cái)?shù)為5×5的塊。通過(guò)這樣進(jìn)行分割,作為在多個(gè) 處理對(duì)象圖像之間對(duì)應(yīng)的塊,生成在多個(gè)處理對(duì)象圖像中的各個(gè)處理對(duì)象圖像中占據(jù)相同區(qū)域的塊。在圖5中示出了將處理對(duì)象圖像縱橫都分割為5個(gè)塊的例子。
第一修正量取得部139將多個(gè)處理對(duì)象圖像中的由用戶指定的一個(gè)處理對(duì)象圖像設(shè)為第一圖像。而且,第一修正量取得部139取得針對(duì)第一圖像進(jìn)行分割而得到的各塊的第一亮度修正量Yab_1,以使整個(gè)第一圖像的亮度變得均勻。
在本實(shí)施方式中,將多個(gè)處理對(duì)象圖像中的哪一個(gè)處理對(duì)象圖像設(shè)為第一圖像包含在根據(jù)用戶的操作而由指示接受部130接受的指示中。例如,用于從多個(gè)處理對(duì)象圖像中確定第一圖像的指示包含在通過(guò)失真修正部132取得的圖像處理的開(kāi)始指示中。即,接受用于確定第一圖像的指示的指示接受部130相當(dāng)于第一指示接受部,該第一指示接受部接受從多個(gè)處理對(duì)象圖像中選擇至少一個(gè)處理對(duì)象圖像來(lái)作為第一圖像的指示。
此外,在第一圖像中期望選擇不包含彩色照片、彩色圖等的頁(yè)P(yáng)的圖像,例如期望選擇背景為與紙對(duì)應(yīng)的白色且僅包含黑色文字的頁(yè)P(yáng)的圖像。
第一修正部140根據(jù)由第一修正量取得部139取得的各塊的第一亮度修正量Yab_1,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。
在本實(shí)施方式中,第一修正部140通過(guò)將共用的第一亮度修正量Yab_1用于在所有的處理對(duì)象圖像之間對(duì)應(yīng)的塊,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。
如圖3所示,圖像效果修正部135對(duì)由圖像斑點(diǎn)修正部134實(shí)施了圖像斑點(diǎn)修正后的處理對(duì)象圖像實(shí)施圖像效果修正。圖像效果修正是指例如對(duì)處理對(duì)象圖像的亮度、顏色等進(jìn)行修正。通過(guò)修正亮度,對(duì)比度、整體的明亮度得到修正。通過(guò)修正顏色,白平衡得到修正。白平衡的修正是指使本來(lái)應(yīng)該為白色的區(qū)域在處理對(duì)象圖像中接近白色,例如在頁(yè)P(yáng)中白色的區(qū)域在處理對(duì)象圖像中成為稍帶黃色的圖像的情況下,將該區(qū)域修正為白色。
結(jié)合部136通過(guò)生成包含由處理對(duì)象圖像數(shù)據(jù)131_1~2N表示的多個(gè)處理對(duì)象圖像的一個(gè)數(shù)據(jù),將多個(gè)處理對(duì)象圖像進(jìn)行結(jié)合。結(jié)合部136例如生成將與書B的各頁(yè)P(yáng)對(duì)應(yīng)的處理對(duì)象圖像按頁(yè)順序進(jìn)行排列的數(shù)據(jù)。該數(shù)據(jù)是將 書B電子化得到的數(shù)據(jù)。
至此說(shuō)明了本發(fā)明的第一實(shí)施方式的圖像處理系統(tǒng)100的結(jié)構(gòu)。從這里開(kāi)始說(shuō)明本實(shí)施方式的圖像處理系統(tǒng)100的動(dòng)作。
<拍攝處理>
圖像處理系統(tǒng)100執(zhí)行圖6所示的拍攝處理。拍攝處理是用于對(duì)書B的各頁(yè)P(yáng)進(jìn)行拍攝的處理。
例如當(dāng)通過(guò)用戶操作指示接受部130,指示接受部130接受了開(kāi)始拍攝的指示時(shí),終端裝置102開(kāi)始進(jìn)行拍攝處理。另外,翻頁(yè)裝置101經(jīng)由第一通信部113和第二通信部122取得終端裝置102接受的開(kāi)始拍攝的指示。由此,翻頁(yè)裝置101開(kāi)始進(jìn)行拍攝處理。
在本實(shí)施方式中,如上所述,通過(guò)照相機(jī)121僅拍攝書B的對(duì)開(kāi)的兩頁(yè)中的左頁(yè)。在此,設(shè)為首先用戶以拍攝奇數(shù)頁(yè)的方式將書B設(shè)定在保持臺(tái)103,然后進(jìn)行用于指示開(kāi)始拍攝的操作。
另外,關(guān)于拍攝書B中的哪一頁(yè)P(yáng),可以由用戶指定,但是在本實(shí)施方式中,設(shè)為拍攝書B的所有的頁(yè)。因而,設(shè)為首先拍攝第1頁(yè)、第3頁(yè)、第5頁(yè)、…、第2N-3頁(yè)、第2N-1頁(yè)。
翻頁(yè)控制部118根據(jù)開(kāi)始拍攝的指示,使電動(dòng)機(jī)驅(qū)動(dòng)器116驅(qū)動(dòng)送風(fēng)部112(步驟S101)。由此,對(duì)翻頁(yè)后的頁(yè)P(yáng)吹風(fēng)。
照相機(jī)121在拍攝控制部125的控制下拍攝第1頁(yè)的頁(yè)P(yáng)(步驟S102)。
拍攝控制部125從照相機(jī)121取得表示在步驟S102中拍攝到的圖像的處理對(duì)象圖像數(shù)據(jù)131_1,將處理對(duì)象圖像數(shù)據(jù)131_1存儲(chǔ)在存儲(chǔ)部124(步驟S103)。
拍攝控制部125經(jīng)由第二通信部122將翻頁(yè)指示發(fā)送給翻頁(yè)裝置101(步驟S104)。翻頁(yè)指示是用于使翻頁(yè)裝置101對(duì)頁(yè)P(yáng)進(jìn)行翻頁(yè)的指示。
翻頁(yè)控制部118當(dāng)經(jīng)由第一通信部113取得了翻頁(yè)指示時(shí),通過(guò)進(jìn)行上述一系列的控制,對(duì)書B的頁(yè)P(yáng)進(jìn)行翻頁(yè)(步驟S105)。由此,將書B的頁(yè)P(yáng)翻頁(yè),因此第3頁(yè)作為由照相機(jī)121進(jìn)行拍攝的對(duì)象成為打開(kāi)的狀態(tài)。
翻頁(yè)控制部118經(jīng)由第一通信部113發(fā)送翻頁(yè)完成信號(hào)(步驟S106)。翻頁(yè)完成信號(hào)是表示用于對(duì)頁(yè)P(yáng)進(jìn)行翻頁(yè)的一系列的控制完成的信號(hào)。
拍攝控制部125根據(jù)來(lái)自指示接受部130的信號(hào),判斷是否收到基于用戶操作的拍攝結(jié)束指示(步驟S107)。
在判斷為未收到拍攝結(jié)束的指示的情況下(步驟S107:“否”),拍攝控制部125和翻頁(yè)控制部118反復(fù)進(jìn)行步驟S102~S106的處理。由此,依次拍攝第3頁(yè)、第5頁(yè)…、奇數(shù)頁(yè)P(yáng),將與第3頁(yè)、第5頁(yè)…中的各頁(yè)對(duì)應(yīng)的處理對(duì)象圖像數(shù)據(jù)131_3、5…存儲(chǔ)在存儲(chǔ)部124中。
當(dāng)在第2N-1頁(yè)被打開(kāi)后進(jìn)一步開(kāi)始對(duì)頁(yè)P(yáng)進(jìn)行翻頁(yè)的動(dòng)作時(shí),用戶在指示接受部130進(jìn)行用于指示拍攝結(jié)束的操作。由此,接受拍攝結(jié)束的指示,因此拍攝控制部125判斷為收到拍攝結(jié)束的指示(步驟S107:“是”),經(jīng)由第二通信部122向翻頁(yè)裝置101通知拍攝結(jié)束的指示,并結(jié)束拍攝處理。翻頁(yè)控制部118經(jīng)由第一通信部113根據(jù)拍攝結(jié)束的指示,結(jié)束拍攝處理。由此,將與書B的所有奇數(shù)頁(yè)P(yáng)對(duì)應(yīng)的處理對(duì)象圖像數(shù)據(jù)131_1、3、5…、2N-3、2N-1存儲(chǔ)在存儲(chǔ)部124。
之后,用戶以拍攝偶數(shù)頁(yè)P(yáng)的方式將書B設(shè)定在保持臺(tái)103。然后,用戶在指示接受部130進(jìn)行用于指示開(kāi)始拍攝的操作。當(dāng)在第2N頁(yè)被打開(kāi)后進(jìn)一步開(kāi)始對(duì)頁(yè)P(yáng)進(jìn)行翻頁(yè)的動(dòng)作時(shí),用戶在指示接受部130進(jìn)行用于指示拍攝結(jié)束的操作。由此,將與書B的偶數(shù)頁(yè)P(yáng)對(duì)應(yīng)的處理對(duì)象圖像數(shù)據(jù)131_2、4、6…、2N-2、2N存儲(chǔ)在存儲(chǔ)部124。因此,結(jié)合上述拍攝處理的結(jié)果,如圖3所示,將與書B的所有的頁(yè)P(yáng)對(duì)應(yīng)的處理對(duì)象圖像數(shù)據(jù)131_1~2N存儲(chǔ)在存儲(chǔ)部124。
<圖像處理>
終端裝置102作為圖像處理裝置,如圖7所示對(duì)處理對(duì)象圖像執(zhí)行圖像處理。處理對(duì)象圖像是存儲(chǔ)部124中存儲(chǔ)的處理對(duì)象圖像數(shù)據(jù)所示的圖像。
在本實(shí)施方式中,如上那樣設(shè)定照相機(jī)121,從而僅拍攝對(duì)開(kāi)的兩頁(yè)中的單頁(yè)。因此,在拍攝奇數(shù)頁(yè)P(yáng)和偶數(shù)頁(yè)P(yáng)兩者的情況下,例如當(dāng)奇數(shù)頁(yè)的拍攝結(jié)束時(shí),為了之后拍攝偶數(shù)頁(yè),需要改變書B的朝向來(lái)設(shè)定在翻頁(yè)裝置101中。由此,與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像和與偶數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像相比,光照方法等拍攝條件有可能發(fā)生變化。
因此,在本實(shí)施方式中,設(shè)為在與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像和與偶數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像之間分開(kāi)執(zhí)行圖像處理。在此,設(shè)為首先根據(jù)包含用于確 定與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像、第一圖像等的信息的圖像處理的開(kāi)始指示,對(duì)與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像實(shí)施圖像處理。
當(dāng)經(jīng)由指示接受部130接受了圖像處理的開(kāi)始指示時(shí),失真修正部132從存儲(chǔ)部124取得處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1。然后,失真修正部132對(duì)取得的處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1所示的各個(gè)處理對(duì)象圖像即與奇數(shù)頁(yè)對(duì)應(yīng)的各個(gè)處理對(duì)象圖像實(shí)施失真修正(步驟S111)。
詳細(xì)地說(shuō),在傾斜拍攝書B的頁(yè)P(yáng)的情況下等,在處理對(duì)象圖像中與頁(yè)P(yáng)的外緣對(duì)應(yīng)的部分的形狀并非矩形,有時(shí)成為梯形等失真的四邊形。
失真修正部132從處理對(duì)象圖像切出根據(jù)照相機(jī)121的視場(chǎng)角、拍攝方向等預(yù)定的四邊形的區(qū)域。然后,失真修正部132通過(guò)對(duì)切出的四邊形實(shí)施投影變換,生成宛如從正面拍攝頁(yè)P(yáng)那樣的處理對(duì)象圖像。失真修正部132將表示生成的處理對(duì)象圖像的處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1存儲(chǔ)在存儲(chǔ)部124。
切出部133從存儲(chǔ)部124取得處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1。然后,切出部133從取得的處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1所示的各處理對(duì)象圖像,即通過(guò)失真修正部132修正后的與奇數(shù)頁(yè)對(duì)應(yīng)的各處理對(duì)象圖像中切出預(yù)定的范圍(步驟S112)。切出部133將表示切出的處理對(duì)象圖像的處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1存儲(chǔ)在存儲(chǔ)部124。
圖像斑點(diǎn)修正部134從存儲(chǔ)部124取得處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1。然后,圖像斑點(diǎn)修正部134對(duì)取得的處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1所示的各處理對(duì)象圖像,即通過(guò)切出部133切出的與奇數(shù)頁(yè)對(duì)應(yīng)的各處理對(duì)象圖像實(shí)施圖像斑點(diǎn)修正(步驟S113)。
在此,在圖8中詳細(xì)表示了圖像斑點(diǎn)修正處理(步驟S113)。
當(dāng)從切出部133收到包含用于確定第一圖像的信息的指示時(shí),圖像取得部137從存儲(chǔ)部124取得處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1。由此,圖像取得部137取得通過(guò)切出部133切出的與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像(步驟S121)。
分割部138將圖像取得部137取得的多個(gè)處理對(duì)象圖像中的各處理對(duì)象圖像分割為共用的多個(gè)塊(步驟S122)。
第一修正量取得部139根據(jù)在步驟S121中取得的圖像處理的開(kāi)始指示內(nèi)包含的信息,確定成為第一圖像的處理對(duì)象圖像。第一修正量取得部139取得在步驟S122中對(duì)第一圖像進(jìn)行分割而得到的各塊內(nèi)的各像素的亮度Y(步驟S123)。
在此,例如通過(guò)0.29891×R+0.58661×G+0.11448×B來(lái)計(jì)算像素的亮度Y。R、G、B分別是像素內(nèi)包含的紅色成分的像素值、綠色成分的像素值、藍(lán)色成分的像素值,是從0至255的值。
第一修正量取得部139根據(jù)在步驟S123中取得的亮度Y,取得對(duì)第一圖像進(jìn)行分割而得到的各塊的第一亮度修正量Yab_1(步驟S124)。
詳細(xì)地說(shuō),第一修正量取得部139關(guān)于對(duì)第一圖像進(jìn)行分割而得到的各塊,求出各像素的亮度Y的發(fā)生頻率,確定發(fā)生頻率最高的亮度Pab。如果與發(fā)生頻率最高的亮度Pab對(duì)應(yīng)的像素的顏色為灰色系,則考慮是與成為背景的紙(例如白色)對(duì)應(yīng)的像素。因此,第一修正量取得部139關(guān)于對(duì)第一圖像進(jìn)行分割而得到的各塊,將從255減去Pab而得到的值設(shè)為第一亮度修正量Yab_1。由此,關(guān)于對(duì)第一圖像進(jìn)行分割而得到的各塊,能夠取得用于使與發(fā)生頻率最高的亮度Pab對(duì)應(yīng)的像素為白色的第一亮度修正量Yab_1。
在此,在將圖5示出的左上的塊設(shè)為原點(diǎn)(縱橫均用0表示的塊)的情況下,Pab表示在橫向上第a塊,且縱向上第b塊中發(fā)生頻率最高的亮度。Yab_1表示與橫向上第a塊且縱向上第b塊有關(guān)的第一亮度修正量。在本實(shí)施方式中,如圖5所示,將各個(gè)處理對(duì)象圖像進(jìn)行分割,因此a,b分別是從0至4的整數(shù)。
在此,將第一修正量取得部139取得的各塊的第一亮度修正量Yab_1制作成圖9所示的第一修正表141,適當(dāng)?shù)乜纱鎯?chǔ)在存儲(chǔ)部124等中。
第一修正部140根據(jù)在步驟S124中取得的各塊的第一亮度修正量Yab_1,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度(步驟S125)。
詳細(xì)地說(shuō),第一修正部140對(duì)于作為第一圖像的處理對(duì)象圖像,對(duì)各塊內(nèi)各像素的亮度相加第一亮度修正量Yab_1。即,關(guān)于橫向第a且縱向第b塊內(nèi)的多個(gè)像素中的各像素,將第一亮度修正量Yab_1與亮度相加。由此,修正作為第一圖像的處理對(duì)象圖像的亮斑。
另外,第一修正部140關(guān)于第一圖像以外的各處理對(duì)象圖像,對(duì)各塊內(nèi)的各像素的亮度相加第一亮度修正量Yab_1。即,關(guān)于橫向第a且縱向第b塊內(nèi)的多個(gè)像素中的各像素,將Yab_1與亮度相加。由此,修正第一圖像以外的各處理對(duì)象圖像的亮斑。這樣,在本實(shí)施方式中,通過(guò)將共用的第一亮度修正量Yab_1用于在所有的處理對(duì)象圖像之間對(duì)應(yīng)的塊,修正多個(gè)處理對(duì)象圖像的亮斑。
第一修正部140將表示修正了亮斑后的各個(gè)處理對(duì)象圖像的處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1存儲(chǔ)在存儲(chǔ)部124(步驟S126)。由此,圖像斑點(diǎn)修正部134結(jié)束圖像斑點(diǎn)修正處理,返回至圖7示出的圖像處理。
再次參照?qǐng)D7。
圖像效果修正部135從存儲(chǔ)部124取得處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1。然后,圖像效果修正部135對(duì)取得到的處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1所示的各處理對(duì)象圖像,即通過(guò)圖像斑點(diǎn)修正部134修正后的與奇數(shù)頁(yè)對(duì)應(yīng)的各處理對(duì)象圖像實(shí)施圖像效果修正(步驟S114)。圖像效果修正部135將表示實(shí)施了圖像效果修正后的處理對(duì)象圖像的處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1存儲(chǔ)在存儲(chǔ)部124。此時(shí),可以對(duì)處理對(duì)象圖像適當(dāng)?shù)貙?shí)施壓縮處理。
結(jié)合部136根據(jù)圖像處理的開(kāi)始指示中是否包含結(jié)合指示,判斷指示接受部130是否收到結(jié)合指示(步驟S115)。
在圖像處理的開(kāi)始指示中未包含結(jié)合指示的情況下,結(jié)合部136判斷為指示接受部130未收到結(jié)合指示(步驟S115:“否”)。在該情況下,顯示部129從存儲(chǔ)部124取得處理對(duì)象圖像數(shù)據(jù)1、3、…2N-3、2N-1,顯示在步驟S114中實(shí)施了圖像效果修正后的處理對(duì)象圖像(步驟S117)。由此,圖像處理結(jié)束。
在圖像處理的開(kāi)始指示中包含結(jié)合指示的情況下,結(jié)合部136判斷為指示接受部130收到結(jié)合指示(步驟S115:“是”)。在該情況下,結(jié)合部136執(zhí)行結(jié)合處理(步驟S116)。
詳細(xì)地說(shuō),結(jié)合部136生成將與各頁(yè)P(yáng)對(duì)應(yīng)的處理對(duì)象圖像按頁(yè)的順序進(jìn)行排列而得到的數(shù)據(jù),將該數(shù)據(jù)存儲(chǔ)在存儲(chǔ)部124。
顯示部129從存儲(chǔ)部124取得在步驟S116中生成的數(shù)據(jù),顯示按頁(yè)的順 序排列的處理對(duì)象圖像(步驟S117)。由此,圖像處理結(jié)束。
由此,與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像的圖像處理結(jié)束。
接著,可執(zhí)行與偶數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像的圖像處理。在此時(shí)的圖像處理的開(kāi)始指示中也可以包含結(jié)合指示。
當(dāng)針對(duì)與偶數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像也賦予了圖像處理的開(kāi)始指示時(shí),執(zhí)行步驟S111~S115的處理。然后,在圖像處理的開(kāi)始指示中包含結(jié)合指示的情況下,執(zhí)行結(jié)合處理(步驟S116)。通過(guò)將上述執(zhí)行的與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像以及與偶數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像進(jìn)行結(jié)合,生成使書B電子化的數(shù)據(jù)。
以上,說(shuō)明了本發(fā)明的第一實(shí)施方式。
根據(jù)本實(shí)施方式,在圖像斑點(diǎn)修正中,根據(jù)將多個(gè)處理對(duì)象圖像中的第一圖像進(jìn)行分割而得到的各塊的第一亮度修正量Yab_1,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。因此,能夠減輕為了修正亮斑針對(duì)第一圖像以外的多個(gè)處理對(duì)象圖像的圖像處理。因而,能夠減輕用于修正將書B打開(kāi)拍攝到的多個(gè)處理對(duì)象圖像的亮斑的處理負(fù)荷。
另外,以往,圖像斑點(diǎn)修正多以與成為背景的紙對(duì)應(yīng)的白色為基準(zhǔn)來(lái)進(jìn)行,因此,難以實(shí)現(xiàn)與包含彩色照片、彩色圖等的頁(yè)P(yáng)對(duì)應(yīng)的處理對(duì)象圖像的圖像斑點(diǎn)修正的自動(dòng)化。根據(jù)本實(shí)施方式,通過(guò)將不包含彩色照片、彩色圖等的處理對(duì)象圖像選擇為第一圖像,能夠適當(dāng)?shù)匦拚c包含彩色照片、彩色圖等的頁(yè)P(yáng)對(duì)應(yīng)的處理對(duì)象圖像的亮斑。
并且,在本實(shí)施方式中,用戶通過(guò)選擇第一圖像這種的較簡(jiǎn)單的操作,能夠適當(dāng)?shù)匦拚鄠€(gè)處理對(duì)象圖像的亮斑。
并且,在本實(shí)施方式中,為了取得亮度修正量Yab而進(jìn)行亮度分析(步驟S123~S124的處理)的處理對(duì)象圖像僅為第一圖像。在其它處理對(duì)象圖像中不進(jìn)行亮度分析,因此能夠降低錯(cuò)誤檢測(cè)亮度修正量Yab的可能性。因而,能夠適當(dāng)?shù)匦拚鄠€(gè)處理對(duì)象圖像的亮斑。
本實(shí)施方式也可以如下那樣變形。
例如,通過(guò)對(duì)第一圖像以外的各處理對(duì)象圖像直接應(yīng)用將第一圖像進(jìn)行分割而得到的各塊的第一亮度修正量Yab_1的例子進(jìn)行了說(shuō)明。但是,也可以將對(duì)第一圖像進(jìn)行分割而得到的各塊的第一亮度修正量Yab_1應(yīng)用于預(yù)先存儲(chǔ) 在存儲(chǔ)部124中的表、關(guān)系式等,由此針對(duì)第一圖像以外的每個(gè)處理對(duì)象圖像取得各塊的亮度修正量Yab。
通常,在拍攝書B的多個(gè)頁(yè)P(yáng)的情況下,如圖10A、圖10B、圖11A和圖11B所示,很多時(shí)候?yàn)榱苏丈漤?yè)P(yáng)而適當(dāng)?shù)卦O(shè)置的照明L所照射的光的偏差、頁(yè)P(yáng)的彎曲等在每次對(duì)頁(yè)P(yáng)進(jìn)行翻頁(yè)時(shí)逐漸發(fā)生變化。
在圖10A和圖10B中示出了拍攝第1頁(yè)時(shí)的光的偏差和頁(yè)P(yáng)的彎曲的示例。在圖11A和圖11B中示出了拍攝第2N-1頁(yè)時(shí)的光的偏差和頁(yè)P(yáng)的彎曲的示例。根據(jù)圖10B和圖11B可知,第1頁(yè)的彎曲比第2N-1頁(yè)小。另外,根據(jù)圖10A和圖11A可知,第1頁(yè)與第2N-1頁(yè)相比光照均勻。
如上所述,通過(guò)對(duì)每個(gè)處理對(duì)象圖像取得各塊的亮度修正量Yab,關(guān)于各個(gè)處理對(duì)象圖像,能夠取得各塊的更適當(dāng)?shù)牧炼刃拚縔ab。因而,能夠減輕用于修正打開(kāi)書B進(jìn)行拍攝得到的多個(gè)處理對(duì)象圖像的亮斑的處理負(fù)荷,并且能夠更適當(dāng)?shù)匦拚涟摺?/p>
例如,照射頁(yè)P(yáng)的照明L并不限于為了照射頁(yè)P(yáng)而適當(dāng)設(shè)置的照明,例如也可以使用電燈、終端裝置102為了進(jìn)行拍攝而具備的照明等。
例如,在本實(shí)施方式中,通過(guò)第一圖像為多個(gè)處理對(duì)象圖像中的一個(gè)處理對(duì)象圖像的示例進(jìn)行了說(shuō)明。但是,在第一圖像中也可以選擇多個(gè)處理對(duì)象圖像中的兩個(gè)以上的處理對(duì)象圖像。在該情況下,可以根據(jù)在作為第一圖像選擇出的處理對(duì)象圖像之間對(duì)應(yīng)的各塊的亮度修正量Yab,取得對(duì)第一圖像進(jìn)行分割而得到的各塊的第一亮度修正量Yab_1。例如,作為各塊的第一亮度修正量Yab_1,可以取得在作為第一圖像選擇出的處理對(duì)象圖像之間對(duì)應(yīng)的各塊的亮度修正量Yab的平均值。這樣,通過(guò)將兩個(gè)以上的處理對(duì)象圖像選擇為第一圖像,能夠取得更適當(dāng)?shù)牡谝涣炼刃拚縔ab_1。因而,能夠減輕用于修正打開(kāi)書B進(jìn)行拍攝得到的多個(gè)處理對(duì)象圖像的亮斑的處理負(fù)荷,并且能夠更適當(dāng)?shù)匦拚涟摺?/p>
例如,翻頁(yè)裝置101具有用戶進(jìn)行操作的操作部,可以根據(jù)該操作,翻頁(yè)裝置101和終端裝置102開(kāi)始執(zhí)行拍攝處理。
例如,也可以不將翻頁(yè)裝置101與終端裝置102可通信連接。在該情況下,用戶幾乎同時(shí)對(duì)各裝置101、102賦予指示,考慮到翻頁(yè)裝置101對(duì)各頁(yè)P(yáng)進(jìn) 行翻頁(yè)所需的時(shí)間大致固定,因此終端裝置102通過(guò)與此對(duì)應(yīng)的時(shí)間間隔連續(xù)地進(jìn)行拍攝即可。由此,能夠拍攝書B的多個(gè)頁(yè)P(yáng)。另外,可以不采用翻頁(yè)裝置101,而由用戶手動(dòng)翻頁(yè),但是通過(guò)采用翻頁(yè)裝置101,能夠減輕用戶的負(fù)擔(dān)。
例如,顯示部129可以適當(dāng)?shù)仫@示各處理的結(jié)果。由此,用戶能夠確認(rèn)處理結(jié)果。在該情況下,可以將指示接受部130構(gòu)成為由用戶根據(jù)需要進(jìn)行操作,由此能夠適當(dāng)?shù)匦拚糜趫D像處理的參數(shù)。由此,能夠進(jìn)行更適當(dāng)?shù)男拚R蚨?,能夠使處理?duì)象圖像成為更高質(zhì)量的圖像。
(第二實(shí)施方式)
在第一實(shí)施方式的圖像斑點(diǎn)修正中,說(shuō)明了根據(jù)對(duì)第一圖像進(jìn)行分割而得到的各塊的第一亮度修正量Yab_1修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度的示例。
但是,如在第一實(shí)施方式的變形例中說(shuō)明的那樣,在拍攝書B的多個(gè)頁(yè)P(yáng)時(shí),很多時(shí)候照射到頁(yè)P(yáng)的光的偏差、頁(yè)P(yáng)的彎曲等在每次翻頁(yè)時(shí)逐漸發(fā)生變化。
在本實(shí)施方式中,說(shuō)明了以下的示例:為了取得與這樣的各頁(yè)P(yáng)的拍攝條件的變化相對(duì)應(yīng)的適當(dāng)?shù)牧炼刃拚縔ab,根據(jù)分別對(duì)第一圖像和第二圖像進(jìn)行分割而得到的各塊的第一亮度修正量Yab_1和第二亮度修正量Yab_2,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。
作為本實(shí)施方式的圖像處理裝置而發(fā)揮功能的終端裝置具備圖12所示的功能結(jié)構(gòu)的圖像斑點(diǎn)修正部234,來(lái)取代作為第一實(shí)施方式的圖像處理裝置發(fā)揮功能的終端裝置102所具備的圖像斑點(diǎn)修正部134。除了這一點(diǎn)以外,本實(shí)施方式的圖像處理系統(tǒng)具有與第一實(shí)施方式的圖像處理系統(tǒng)100大致相同的結(jié)構(gòu)。
本實(shí)施方式的圖像斑點(diǎn)修正部234與第一實(shí)施方式的圖像斑點(diǎn)修正部134同樣,對(duì)通過(guò)切出部133切出的處理對(duì)象圖像實(shí)施圖像斑點(diǎn)修正。
如圖2所示,本實(shí)施方式的圖像斑點(diǎn)修正部234具備第一修正部240來(lái)代替第一實(shí)施方式的圖像斑點(diǎn)修正部134所具備的第一修正部140。另外,圖像斑點(diǎn)修正部234除了第一實(shí)施方式的圖像斑點(diǎn)修正部134所具備的結(jié)構(gòu)以外, 還具備第二修正量取得部242。除了這些以外,圖像斑點(diǎn)修正部234具有與第一實(shí)施方式的圖像斑點(diǎn)修正部134大致相同的結(jié)構(gòu)。
第二修正量取得部242將多個(gè)處理對(duì)象圖像中的一個(gè)處理對(duì)象圖像設(shè)為第二圖像,取得對(duì)該第二圖像進(jìn)行分割而得到的各塊的第二亮度修正量Yab_2。這樣的第二修正量取得部242的功能等同于將上述第一修正量取得部139的功能的說(shuō)明中的第一圖像和第一亮度修正量Yab_1分別替換為第二圖像和第二亮度修正量Yab_2。在此,第二圖像是與第一圖像不同的處理對(duì)象圖像。
即,第二修正量取得部242將多個(gè)處理對(duì)象圖像中的由用戶指定的一個(gè)處理對(duì)象圖像設(shè)為第二圖像。然后,第二修正量取得部242取得對(duì)第二圖像進(jìn)行分割而得到的各塊的第二亮度修正量Yab_2,從而使整個(gè)第二圖像的亮度變?yōu)榫鶆颉?/p>
在本實(shí)施方式中,將多個(gè)處理對(duì)象圖像中的哪個(gè)處理對(duì)象圖像設(shè)為第二圖像包含在根據(jù)用戶的操作指示接受部130接受的指示中。例如,用于從多個(gè)處理對(duì)象圖像中確定第二圖像的指示包含在通過(guò)失真修正部132取得的圖像處理的開(kāi)始指示中。即,接受用于確定第二圖像的指示的指示接受部130相當(dāng)于接受從多個(gè)處理對(duì)象圖像中選擇至少一個(gè)處理對(duì)象圖像來(lái)作為第二圖像的指示的第二指示接受部。
此外,與第一圖像同樣地,在第二圖像中期望選擇不包含彩色照片、彩色圖等的頁(yè)P(yáng)的圖像,例如期望選擇背景為與紙對(duì)應(yīng)的白色且僅包含黑色文字的頁(yè)P(yáng)的圖像。
第一修正部240根據(jù)各塊的第一亮度修正量Yab_1和各塊的第二亮度修正量Yab_2,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。
如圖12所示,第一修正部240具有塊修正量取得部243和第二修正部244。
塊修正量取得部243根據(jù)各塊的第一亮度修正量Yab_1和各塊的第二亮度修正量Yab_2,取得對(duì)多個(gè)處理對(duì)象圖像中的各處理對(duì)象圖像進(jìn)行分割而得到的各塊的亮度修正量Yab。
詳細(xì)地說(shuō),塊修正量取得部243對(duì)于在多個(gè)處理對(duì)象圖像之間對(duì)應(yīng)的各塊,根據(jù)為了得到多個(gè)處理對(duì)象圖像中的各處理對(duì)象圖像而將書B的哪頁(yè)打開(kāi),對(duì)第一亮度修正量Yab_1和第二亮度修正量Yab_2進(jìn)行插補(bǔ)。由此,塊 修正量取得部243取得對(duì)多個(gè)處理對(duì)象圖像中的各處理對(duì)象圖像進(jìn)行分割而得到的各塊的亮度修正量Yab。在本實(shí)施方式中,作為用于取得各塊的亮度修正量Yab的插補(bǔ)方法,采用線性插補(bǔ)。通過(guò)采用線性插補(bǔ),能夠使處理簡(jiǎn)單,但是插補(bǔ)方法并不限于線性插補(bǔ),也可以采用非線性的各種插補(bǔ)方法。
第二修正部244根據(jù)對(duì)多個(gè)處理對(duì)象圖像中的各處理對(duì)象圖像進(jìn)行分割而得到的各塊的亮度修正量Yab,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。
詳細(xì)地說(shuō),第二修正部244將通過(guò)塊修正量取得部243取得的各亮度修正量Yab應(yīng)用于對(duì)應(yīng)的處理對(duì)象圖像的塊。通過(guò)對(duì)多個(gè)處理對(duì)象圖像的所有塊實(shí)施該處理,由此修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。
至此說(shuō)明了本發(fā)明的第二實(shí)施方式的圖像處理系統(tǒng)的結(jié)構(gòu)。從此開(kāi)始說(shuō)明本實(shí)施方式的圖像處理系統(tǒng)的動(dòng)作。
在本實(shí)施方式中,也執(zhí)行與第一實(shí)施方式相同的拍攝處理。在本實(shí)施方式中,由作為圖像處理裝置的終端裝置執(zhí)行的圖像處理與第一實(shí)施方式的圖像處理不同。
詳細(xì)地說(shuō),在本實(shí)施方式的圖像處理中,如圖13所示,執(zhí)行步驟S225的處理來(lái)代替第一實(shí)施方式的圖像處理中包含的各處理(步驟S121~S126)中的步驟S125的處理。另外,在本實(shí)施方式的圖像處理中,除了第一實(shí)施方式的圖像處理中包含的各處理以外,在步驟S124的處理與步驟S225的處理之間執(zhí)行步驟S227~S229的處理。
在本實(shí)施方式中,通過(guò)對(duì)與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像執(zhí)行圖像處理的示例進(jìn)行了說(shuō)明。此外,關(guān)于與偶數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像,與奇數(shù)頁(yè)所對(duì)應(yīng)的處理對(duì)象圖像同樣地,執(zhí)行圖像處理即可。
當(dāng)執(zhí)行步驟S124的處理時(shí),第二修正量取得部242根據(jù)圖像處理的開(kāi)始指示中包含的信息,確定成為第二圖像的處理對(duì)象圖像。第二修正量取得部242取得在步驟S122中對(duì)第二圖像進(jìn)行分割而得到的各塊內(nèi)的各像素的亮度Y(步驟S227)。
第二修正量取得部242根據(jù)在步驟S227中取得的亮度Y,取得對(duì)第二圖像進(jìn)行分割而得到的各塊的第二亮度修正量Yab_2(步驟S228)。
詳細(xì)地說(shuō),第二修正量取得部242通過(guò)與第一修正量取得部139相同的方 法取得各塊的第二亮度修正量Yab_2。即,第二修正量取得部242關(guān)于對(duì)第二圖像進(jìn)行分割而得到的各塊,求出各像素的亮度Y的發(fā)生頻率,確定發(fā)生頻率最高的亮度Pab。第二修正量取得部242關(guān)于對(duì)第二圖像進(jìn)行分割而得到的各塊,將從255減去Pab而得到的值設(shè)為第二亮度修正量Yab_2。由此,關(guān)于對(duì)第二圖像進(jìn)行分割而得到的各塊,能夠取得用于使與發(fā)生頻率最高的亮度Pab對(duì)應(yīng)的像素成為白色的第二亮度修正量Yab_2。在此,Yab_2表示與橫向第a塊且縱向第b塊有關(guān)的第二亮度修正量。
在此,將第二修正量取得部242取得的各塊的第二亮度修正量Yab_2制作成與圖9例示的第一亮度修正量Yab_1相同的第二修正表,也可以適當(dāng)?shù)卮鎯?chǔ)在存儲(chǔ)部124等。
塊修正量取得部243通過(guò)對(duì)第一亮度修正量Yab_1與第二亮度修正量Yab_2進(jìn)行線性插補(bǔ),取得對(duì)于所有的處理對(duì)象圖像的各塊的亮度修正量Yab(步驟S229)。
詳細(xì)地說(shuō),例如,第一圖像為與第e頁(yè)對(duì)應(yīng)的處理對(duì)象圖像,第二圖像為與第f頁(yè)對(duì)應(yīng)的處理對(duì)象圖像。設(shè)e、f為1以上的奇數(shù),e<f。在該情況下,通過(guò)((f-k)×Yab_1+(k-e)×Yab_2)/(f-e)的運(yùn)算,取得在第k頁(yè)的處理對(duì)象圖像中橫向第a塊且縱向第b塊的亮度修正量Yab。在此,k為1~2N的奇數(shù)。
在此,為了通過(guò)插補(bǔ)來(lái)取得按照與處理對(duì)象圖像對(duì)應(yīng)的頁(yè)逐漸發(fā)生變化的亮度修正量Yab_k,期望對(duì)第一圖像指定與接近封面的頁(yè)P(yáng)對(duì)應(yīng)的處理對(duì)象圖像,對(duì)第二圖像指定與接近封底的頁(yè)P(yáng)對(duì)應(yīng)的處理對(duì)象圖像。因此,希望指定e為1,f為2N-1,即期望對(duì)第一圖像指定與第1頁(yè)對(duì)應(yīng)的處理對(duì)象圖像,對(duì)第二圖像指定與第2N-1頁(yè)對(duì)應(yīng)的處理對(duì)象圖像。
但是,在這些頁(yè)包含彩色照片、彩色圖等的情況下,有時(shí)e成為1以外,f成為2N-1以外。
例如在e為1以外的情況下即第一圖像為與第1頁(yè)以外的頁(yè)對(duì)應(yīng)的處理對(duì)象圖像的情況下,可以將對(duì)應(yīng)的各塊的亮度修正量Yab_1應(yīng)用于與第1頁(yè)至第e-2頁(yè)中的各頁(yè)對(duì)應(yīng)的處理對(duì)象圖像的各塊。另外,例如在f為2N-1以外的情況下即第二圖像為與第2N-1頁(yè)以外的頁(yè)對(duì)應(yīng)的處理對(duì)象圖像的情況下,將對(duì)應(yīng)的各塊的亮度修正量Yab_1應(yīng)用于與第f+2頁(yè)至第2N-1頁(yè)中的各頁(yè)對(duì)應(yīng)的 處理對(duì)象圖像的各塊。此外,在這種情況下,也可以通過(guò)插補(bǔ)(外插插補(bǔ))取得亮度修正量Yab。
第二修正部244根據(jù)在步驟S124、步驟S228和步驟S229中取得的各塊的亮度修正量Yab_1、Yab_2、Yab,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度(步驟S225)。
詳細(xì)地說(shuō),第二修正部244關(guān)于作為第一圖像的處理對(duì)象圖像,對(duì)各塊內(nèi)的各像素的亮度相加第一亮度修正量Yab_1。即,對(duì)于橫向第a且縱向第b塊內(nèi)的多個(gè)像素中的各像素,將第一亮度修正量Yab_1與亮度相加。由此,修正作為第一圖像的處理對(duì)象圖像的亮斑。
另外,關(guān)于第二圖像,第二修正部244也通過(guò)與第一圖像相同的方法修正亮斑。詳細(xì)地說(shuō),第二修正部244關(guān)于作為第二圖像的處理對(duì)象圖像,對(duì)各塊內(nèi)的各像素的亮度相加第二亮度修正量Yab_2。即,對(duì)于橫向第a且縱向第b塊內(nèi)的多個(gè)像素中的各像素,將第二亮度修正量Yab_2與亮度相加。由此,修正作為第二圖像的處理對(duì)象圖像的亮斑。
并且,第二修正部244關(guān)于第一圖像和第二圖像以外的各處理對(duì)象圖像,對(duì)各塊內(nèi)的各像素的亮度相加對(duì)應(yīng)的各塊的亮度修正量Yab。該亮度修正量Yab是在步驟S229中取得的亮度修正量。即,對(duì)于橫向第a且縱向第b塊內(nèi)的多個(gè)像素中的各像素,將對(duì)應(yīng)的各塊的亮度修正量Yab與亮度相加。由此,修正第一圖像和第二圖像以外的各處理對(duì)象圖像的亮斑。這樣,在本實(shí)施方式中,根據(jù)第一亮度修正量Yab_1和第二亮度修正量Yab_2,取得針對(duì)所有的處理對(duì)象圖像的各塊的亮度修正量Yab。而且,通過(guò)將各個(gè)亮度修正量Yab應(yīng)用于對(duì)應(yīng)的塊內(nèi)的多個(gè)像素的亮度,修正多個(gè)處理對(duì)象圖像的亮斑。
以上,說(shuō)明了本發(fā)明的第二實(shí)施方式。
根據(jù)本實(shí)施方式,在圖像斑點(diǎn)修正中,根據(jù)將多個(gè)處理對(duì)象圖像中的第一圖像和第二圖像分別進(jìn)行分割而得到的各塊的第一亮度修正量Yab_1和第二亮度修正量Yab_2,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。因此,能夠減輕為了修正亮斑而對(duì)第一圖像和第二圖像以外的多個(gè)處理對(duì)象圖像進(jìn)行的圖像處理。因而,與第一實(shí)施方式同樣地,能夠減輕用于修正打開(kāi)書B進(jìn)行拍攝得到的多個(gè)處理對(duì)象圖像的亮斑的處理負(fù)荷。
另外,根據(jù)本實(shí)施方式,通過(guò)將不包含彩色照片、彩色圖等的處理對(duì)象圖像選擇為第一圖像和第二圖像,與第一實(shí)施方式同樣地,能夠適當(dāng)?shù)匦拚c包含彩色照片、彩色圖等的頁(yè)P(yáng)對(duì)應(yīng)的處理對(duì)象圖像的亮斑。
并且,在本實(shí)施方式中,用戶通過(guò)選擇第一圖像和第二圖像這種較簡(jiǎn)單的操作,能夠適當(dāng)?shù)匦拚鄠€(gè)處理對(duì)象圖像的亮斑。
并且,在本實(shí)施方式中,為了取得亮度修正量Yab而進(jìn)行亮度分析(步驟S123~S124的處理和步驟S227~S228的處理)的處理對(duì)象圖像僅為第一圖像和第二圖像。在其它的處理對(duì)象圖像中,不進(jìn)行亮度分析,因此能夠降低錯(cuò)誤地檢測(cè)亮度修正量Yab的可能性。因而,與第一實(shí)施方式同樣地,能夠適當(dāng)?shù)匦拚鄠€(gè)處理對(duì)象圖像的亮斑。
本實(shí)施方式可以如下那樣變形。
例如在本實(shí)施方式中,說(shuō)明了通過(guò)對(duì)第一亮度修正量Yab_1和第二亮度修正量Yab_2進(jìn)行插補(bǔ)而取得亮度修正量Yab的示例。但是,可以通過(guò)將第一亮度修正量Yab_1和第二亮度修正量Yab_2應(yīng)用于預(yù)先存儲(chǔ)在存儲(chǔ)部124中的表、關(guān)系式等,對(duì)第一圖像和第二圖像以外的每個(gè)處理對(duì)象圖像取得各塊的亮度修正量Yab。由此,起到與第二實(shí)施方式相同的效果。
例如在本實(shí)施方式中,說(shuō)明了第二圖像為多個(gè)處理對(duì)象圖像中的一個(gè)處理對(duì)象圖像的示例。但是,在第二圖像中也可以選擇多個(gè)處理對(duì)象圖像中的兩個(gè)以上的處理對(duì)象圖像。在該情況下,可以根據(jù)在作為第二圖像而選擇的處理對(duì)象圖像之間對(duì)應(yīng)的各塊的亮度修正量Yab,取得對(duì)第二圖像進(jìn)行分割而得到的各塊的第二亮度修正量Yab_2。例如,作為各塊的第二亮度修正量Yab_2,取得在作為第二圖像而選擇的處理對(duì)象圖像之間對(duì)應(yīng)的各塊的亮度修正量Yab的平均值即可。這樣,通過(guò)選擇兩個(gè)以上的處理對(duì)象圖像來(lái)作為第二圖像,能夠取得更適當(dāng)?shù)牡诙炼刃拚縔ab_2。因而,能夠減輕用于修正打開(kāi)書B進(jìn)行拍攝得到的多個(gè)處理對(duì)象圖像的亮斑的處理負(fù)荷,并且能夠更適當(dāng)?shù)匦拚涟摺?/p>
(第三實(shí)施方式)
在第二實(shí)施方式中,說(shuō)明了將共用的亮度修正量Yab(或Yab_1、Yab_2)應(yīng)用于一個(gè)塊內(nèi)的各像素的示例。但是,根據(jù)該方法,在相鄰的塊的邊界,例 如作為與背景對(duì)應(yīng)的區(qū)域的亮度發(fā)生變化的結(jié)果,有時(shí)成為看不清楚的圖像。在本實(shí)施方式中,為了使相鄰的塊的邊界不明顯,對(duì)各塊的亮度修正量Yab進(jìn)行插補(bǔ)。
本實(shí)施方式的圖像處理裝置具備圖14所示的功能結(jié)構(gòu)的第二修正部344來(lái)代替第二實(shí)施方式的圖像處理裝置所具備的第二修正部244。除了這一點(diǎn)以外,本實(shí)施方式的圖像處理系統(tǒng)具有與第二實(shí)施方式的圖像處理系統(tǒng)大致相同的結(jié)構(gòu)。
第二修正部344與第二實(shí)施方式的第二修正部244同樣地,根據(jù)對(duì)多個(gè)處理對(duì)象圖像中的各處理對(duì)象圖像進(jìn)行分割而得到的各塊的亮度修正量Yab,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。第二修正部344與第二實(shí)施方式的第二修正部244的不同點(diǎn)在于,根據(jù)各塊的亮度修正量Yab取得多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度修正量Pxy。
詳細(xì)地說(shuō),如圖14所示,第二修正部344具有像素修正量取得部345和像素修正部346。
像素修正量取得部345根據(jù)對(duì)多個(gè)處理對(duì)象圖像中的各處理對(duì)象圖像進(jìn)行分割而得到的各塊的亮度修正量Yab,取得多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度修正量Pxy。
詳細(xì)地說(shuō),像素修正量取得部345對(duì)于多個(gè)處理對(duì)象圖像中的各處理對(duì)象圖像,根據(jù)在各塊內(nèi)預(yù)定的代表像素R的位置關(guān)系插補(bǔ)各塊的亮度修正量Yab,由此取得多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度修正量Pxy。
在本實(shí)施方式中,設(shè)代表像素R為位于各塊的中心的像素。像素修正量取得部345確定位于要取得亮度修正量Pxy的像素周圍的多個(gè)代表像素。像素修正量取得部345通過(guò)對(duì)所確定的多個(gè)代表像素所歸屬的各塊的亮度修正量Yab進(jìn)行插補(bǔ),取得該像素的亮度修正量Pxy。
另外,在本實(shí)施方式中,作為用于取得各像素的亮度修正量Pxy的插補(bǔ)的方法,采用線性插補(bǔ)。通過(guò)采用線性插補(bǔ),能夠使處理簡(jiǎn)單化,但是插補(bǔ)的方法并不限于線性插補(bǔ),也可以采用非線性的各種插補(bǔ)方法。
像素修正部346根據(jù)多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度修正量Pxy,修正多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度。多個(gè)處理對(duì)象圖像內(nèi)的各像素的亮度 修正量Pxy是通過(guò)像素修正量取得部345取得的各像素的亮度修正量Pxy。
以上,說(shuō)明了本發(fā)明的第三實(shí)施方式的圖像處理系統(tǒng)的結(jié)構(gòu)。以下,說(shuō)明本實(shí)施方式的圖像處理系統(tǒng)的動(dòng)作。
在本實(shí)施方式中,執(zhí)行與第二實(shí)施方式相同的拍攝處理。本實(shí)施方式的圖像處理與第二實(shí)施方式同樣地,由作為圖像處理裝置的終端裝置執(zhí)行。但是,本實(shí)施方式的圖像處理內(nèi)包含的處理的結(jié)構(gòu)與第二實(shí)施方式的圖像處理不同。
詳細(xì)地說(shuō),在本實(shí)施方式的圖像處理中,如圖15所示,執(zhí)行步驟S330~S331的處理,來(lái)代替第二實(shí)施方式的圖像處理內(nèi)包含的各處理(步驟S121~S124、步驟S227~S229、步驟S225和步驟S126)中的步驟S225的處理。
在本實(shí)施方式中,說(shuō)明了對(duì)與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像執(zhí)行圖像處理的示例。此外,對(duì)于與偶數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像,也和與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像同樣地執(zhí)行圖像處理即可。
像素修正量取得部345關(guān)于多個(gè)處理對(duì)象圖像中的各處理對(duì)象圖像,通過(guò)對(duì)相鄰的四個(gè)塊中的各塊的代表像素R所歸屬的各塊的亮度修正量Yab進(jìn)行插補(bǔ),取得以代表像素R為頂點(diǎn)的四邊形內(nèi)的各像素的亮度修正量Pxy。像素修正量取得部345通過(guò)針對(duì)在所有的處理對(duì)象圖像內(nèi)相鄰的四個(gè)塊的所有的組合反復(fù)進(jìn)行這樣的處理,取得所有的處理對(duì)象圖像內(nèi)的各像素的亮度修正量Pxy(步驟S330)。
在此,如圖16所示,以取得屬于橫向第1且縱向第1塊內(nèi)的左上區(qū)域的像素PP的亮度修正量Pxy為例子進(jìn)行說(shuō)明。將位于像素PP周圍的代表像素R_00、R_01、R_10、R_11各自所歸屬的各塊的亮度修正量設(shè)為Y00、Y01、Y10、Y11。
另外,將R_00與R_10的橫向的長(zhǎng)度以及R_01與R_11的橫向的長(zhǎng)度均設(shè)為Gx像素量。將R_00與R_01的縱向的長(zhǎng)度以及R_10與R_11的縱向的長(zhǎng)度均設(shè)為Gy像素量。
并且,將從連接R_00與R_01的直線至像素PP為止的橫向的距離設(shè)為dx像素量。將從連接R_00與R_10的直線至像素PP為止的縱向的距離設(shè)為dy像素量。
在該情況下,通過(guò)C_y0×(1-dy/Gy)+C_y1×(dy/Gy)的運(yùn)算來(lái)取得像素PP 的亮度修正量Pxy。在此,設(shè)為C_y0=Y(jié)00×(1-dx/Gx)+Y10×(dx/Gx)、C_y1=Y(jié)01×(1-dx/Gx)+Y11×(dx/Gx)。
像素修正部346通過(guò)將在步驟S330中取得的各像素的亮度修正量Pxy應(yīng)用于對(duì)應(yīng)的像素的亮度,修正處理對(duì)象圖像內(nèi)的各像素的亮度(步驟S331)。詳細(xì)地說(shuō),像素修正部346將在步驟S330中取得的各像素的亮度修正量Pxy與對(duì)應(yīng)的像素的亮度相加。由此,修正所有的處理對(duì)象圖像內(nèi)的各像素的亮度。
以上,說(shuō)明了本發(fā)明的第三實(shí)施方式。
根據(jù)本實(shí)施方式,起到與第二實(shí)施方式相同的效果。
另外,根據(jù)本實(shí)施方式,根據(jù)各塊的亮度修正量Yab,取得各像素的亮度修正量Pxy。因此,能夠平滑地進(jìn)行插補(bǔ),從而使相鄰塊的邊界不明顯。因而,能夠得到高質(zhì)量的圖像。
本實(shí)施方式也可以如下那樣變形。
在本實(shí)施方式中,說(shuō)明了將根據(jù)各塊的亮度修正量Yab取得各像素的亮度修正量Pxy應(yīng)用于第二實(shí)施方式的例子。也可以將根據(jù)各塊的亮度修正量Yab取得各像素的亮度修正量Pxy應(yīng)用于第一實(shí)施方式。
在該情況下,例如根據(jù)第一圖像的各塊的亮度修正量Yab_1,通過(guò)與第三實(shí)施方式相同的插補(bǔ),取得各像素的亮度修正量Pxy即可。而且,將各像素的亮度修正量Pxy應(yīng)用于各處理對(duì)象圖像的對(duì)應(yīng)的各像素即可。即,對(duì)各處理對(duì)象圖像的像素的亮度相加對(duì)應(yīng)的亮度修正量Pxy即可。由此,能夠平滑地進(jìn)行插補(bǔ),從而使相鄰塊的邊界不明顯。因而,能夠得到高質(zhì)量的圖像。
(第四實(shí)施方式)
在第二實(shí)施方式中,通過(guò)按著用戶的指示選擇第一圖像和第二圖像的例子進(jìn)行了說(shuō)明。在本實(shí)施方式中,說(shuō)明通過(guò)終端裝置選擇第一圖像和第二圖像的示例。此外,在本實(shí)施方式中,也可以將選擇第一圖像應(yīng)用于第一實(shí)施方式。
如圖17所示的功能結(jié)構(gòu)那樣,本實(shí)施方式的圖像處理裝置具備圖像斑點(diǎn)修正部434,來(lái)代替第二實(shí)施方式的圖像處理裝置所具備的圖像斑點(diǎn)修正部234。除了這一點(diǎn)以外,本實(shí)施方式的圖像處理系統(tǒng)具有與第二實(shí)施方式的圖像處理系統(tǒng)大致相同的結(jié)構(gòu)。
圖像斑點(diǎn)修正部434除了具備第二實(shí)施方式的圖像斑點(diǎn)修正部234的結(jié)構(gòu) 以外,還具有從多個(gè)處理對(duì)象圖像中選擇第一圖像的第一圖像選擇部447以及從多個(gè)處理對(duì)象圖像中選擇第二圖像的第二圖像選擇部448。除了這一點(diǎn)以外,本實(shí)施方式的圖像斑點(diǎn)修正部434具有與第二實(shí)施方式的圖像斑點(diǎn)修正部234大致相同的結(jié)構(gòu)。
第一圖像選擇部447根據(jù)每個(gè)處理對(duì)象圖像的表示預(yù)定的顏色的像素?cái)?shù),作為第一圖像選擇預(yù)定數(shù)量的處理對(duì)象圖像。詳細(xì)地說(shuō),第一圖像選擇部447根據(jù)每個(gè)處理對(duì)象圖像的表示預(yù)定的顏色的像素?cái)?shù),從進(jìn)行拍攝時(shí)打開(kāi)的頁(yè)P(yáng)接近書B的封面的頁(yè)開(kāi)始依次選擇預(yù)定數(shù)量的處理對(duì)象圖像來(lái)作為第一圖像。
第二圖像選擇部448根據(jù)每個(gè)處理對(duì)象圖像的表示預(yù)定的顏色的像素?cái)?shù),選擇預(yù)定數(shù)量的處理對(duì)象圖像作為第二圖像。詳細(xì)地說(shuō),第二圖像選擇部448根據(jù)每個(gè)處理對(duì)象圖像的表示預(yù)定的顏色的像素?cái)?shù),從進(jìn)行拍攝時(shí)打開(kāi)的頁(yè)P(yáng)接近書B的封底的頁(yè)開(kāi)始依次選擇預(yù)定數(shù)量的處理對(duì)象圖像來(lái)作為第二圖像。
在本實(shí)施方式中,對(duì)于預(yù)定的顏色,采用與成為背景的紙對(duì)應(yīng)的顏色即白色和作為文字顏色的黑色。而且,對(duì)于預(yù)定數(shù)量采用1。由此,能夠?qū)Ψ謩e第一圖像和第二圖像,自動(dòng)地選擇在白色紙上僅書寫了文字的一頁(yè)。
以上,說(shuō)明了本發(fā)明的第四實(shí)施方式的圖像處理系統(tǒng)的結(jié)構(gòu)。以下,說(shuō)明本實(shí)施方式的圖像處理系統(tǒng)的動(dòng)作。
在本實(shí)施方式中,也執(zhí)行與第二實(shí)施方式相同的拍攝處理。本實(shí)施方式的圖像處理與第二實(shí)施方式同樣地,由作為圖像處理裝置的終端裝置執(zhí)行。但是,本實(shí)施方式的圖像處理內(nèi)包含的處理的結(jié)構(gòu)與第二實(shí)施方式的圖像處理不同。
詳細(xì)地說(shuō),如圖18所示,本實(shí)施方式的圖像處理包含圖像斑點(diǎn)修正處理(步驟S413),來(lái)代替第二實(shí)施方式的圖像處理內(nèi)包含的圖像斑點(diǎn)修正處理(步驟S113)。除了這一點(diǎn)以外,本實(shí)施方式的圖像處理與第二實(shí)施方式的圖像處理大致相同。
在本實(shí)施方式中,通過(guò)對(duì)與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像執(zhí)行圖像處理的示例進(jìn)行了說(shuō)明。此外,對(duì)于與偶數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像,也和與奇數(shù)頁(yè)對(duì)應(yīng)的處理對(duì)象圖像同樣地執(zhí)行圖像處理即可。
如圖19A所示,在本實(shí)施方式的圖像斑點(diǎn)修正處理(步驟S413)中執(zhí)行步驟S121~S122的處理。
接著,第一圖像選擇部447選擇第一圖像(步驟S432)。
詳細(xì)地說(shuō),如圖20所示,第一圖像選擇部447對(duì)變量u設(shè)定1(步驟S441)。在此,u為1~N的整數(shù)。
第一圖像選擇部447取得表示與第2u-1頁(yè)對(duì)應(yīng)的處理對(duì)象圖像的處理對(duì)象圖像數(shù)據(jù)131_2u-1。由此,第一圖像選擇部447取得與第2u-1頁(yè)對(duì)應(yīng)的處理對(duì)象圖像(步驟S442)。
第一圖像選擇部447對(duì)于與第2u-1頁(yè)對(duì)應(yīng)的處理對(duì)象圖像,對(duì)表示白色或黑色的像素進(jìn)行計(jì)數(shù)(步驟S443)。
在此,例如可以根據(jù)RGB的各成分的像素值與其平均值的差是否處于預(yù)定的范圍內(nèi)且亮度是否大于預(yù)定值,來(lái)判斷是否為白色。例如,可以根據(jù)RGB的各成分的像素值與其平均值的差是否處于預(yù)定的范圍內(nèi)且亮度是否小于預(yù)定值,來(lái)判斷是否為黑色。
第一圖像選擇部447判斷在步驟S443中計(jì)數(shù)得到的像素?cái)?shù)是否為預(yù)定的閾值以上(步驟S444)。
在判斷為計(jì)數(shù)得到的像素?cái)?shù)為閾值以上的情況下(步驟S444:“是”),第一圖像選擇部447選擇與第2u-1頁(yè)對(duì)應(yīng)的處理對(duì)象圖像作為第一圖像(步驟S445)。由此,第一圖像選擇部447結(jié)束第一選擇處理(步驟S432)而返回到圖像處理。
在判斷為計(jì)數(shù)得到的像素?cái)?shù)不在閾值以上的情況下(步驟S444:“否”),第一圖像選擇部447對(duì)變量u加上1(步驟S446)。
第一圖像選擇部447判斷在步驟S446中加上1后的變量u是否大于N(步驟S447)。
在判斷為變量u不大于N的情況下(步驟S447:“否”),第一圖像選擇部447返回至步驟S442的處理。
在判斷為變量u大于N的情況下(步驟S447:“是”),與處理對(duì)象圖像對(duì)應(yīng)的頁(yè)P(yáng)到達(dá)封底,因此第一圖像選擇部447執(zhí)行不可選擇處理(步驟S448)。在不可選擇處理(步驟S448)中,例如設(shè)定表示未能選擇出適合于第一圖像的處理對(duì)象圖像的第一不可選擇標(biāo)志。然后,第一圖像選擇部447結(jié)束第一圖像處理(步驟S432)而返回至圖像處理。
通過(guò)執(zhí)行這樣的第一圖像處理(步驟S432),能夠自動(dòng)地選擇在成為背景的紙上僅書寫了文字且距書B的封面最近的頁(yè)P(yáng)。
如圖19A所示,第一圖像選擇部447根據(jù)是否設(shè)定了第一不可選擇標(biāo)志,判斷是否能選擇出第一圖像(步驟S433)。
在設(shè)定了第一不可選擇標(biāo)志的情況下,第一圖像選擇部447判斷為未能選擇出第一圖像(步驟S433:“否”),結(jié)束圖像斑點(diǎn)修正處理(步驟S413)而返回至圖像處理。
在未設(shè)定第一不可選擇標(biāo)志的情況下,第一圖像選擇部447判斷為能夠選擇出第一圖像(步驟S433:“是”)。在該情況下,第一修正量取得部139取得對(duì)在步驟S432中選擇出的第一圖像進(jìn)行分割而得到的各塊內(nèi)的像素的亮度(步驟S423)。在步驟S423中執(zhí)行的處理的詳細(xì)內(nèi)容與步驟S123大致相同。
當(dāng)執(zhí)行步驟S124的處理時(shí),如圖19B所示,第二圖像選擇部448選擇第二圖像(步驟S434)。
詳細(xì)地說(shuō),如圖21所示,第二圖像選擇部448對(duì)變量v設(shè)定N(步驟S451)。在此,v為1~N的整數(shù)。
第二圖像選擇部448取得表示與第2v-1頁(yè)對(duì)應(yīng)的處理對(duì)象圖像的處理對(duì)象圖像數(shù)據(jù)131_2v-1。由此,第二圖像選擇部448取得與第2v-1頁(yè)對(duì)應(yīng)的處理對(duì)象圖像(步驟S452)。
第二圖像選擇部448對(duì)于與第2v-1頁(yè)對(duì)應(yīng)的處理對(duì)象圖像,對(duì)表示白色或黑色的像素進(jìn)行計(jì)數(shù)(步驟S453)。
在此,與步驟S443同樣地判斷是否為白色和是否為黑色即可。
第二圖像選擇部448判斷在步驟S453中計(jì)數(shù)得到的像素?cái)?shù)是否為預(yù)定的閾值以上(步驟S454)。
在判斷為計(jì)數(shù)得到的像素?cái)?shù)為閾值以上的情況下(步驟S454:“是”),第二圖像選擇部448選擇與第2v-1頁(yè)對(duì)應(yīng)的處理對(duì)象圖像作為第二圖像(步驟S455)。由此,第二圖像選擇部448結(jié)束第二選擇處理(步驟S434)而返回至圖像處理。
在判斷為計(jì)數(shù)得到的像素?cái)?shù)不在閾值以上的情況下(步驟S454:“否”),第二圖像選擇部448從變量v減去1(步驟S456)。
第二圖像選擇部448判斷在步驟S456中減去1后的變量v是否大于表示在步驟S432中作為第一圖像而選擇的處理對(duì)象圖像所對(duì)應(yīng)的頁(yè)P(yáng)為哪頁(yè)的變量u。
在判斷為變量v大于變量u的情況下(步驟S457:“是”),第二圖像選擇部448返回至步驟S452的處理。
在判斷為變量v不大于變量u的情況下(步驟S457:“否”),與處理對(duì)象圖像對(duì)應(yīng)的頁(yè)P(yáng)比第一圖像更接近封面,因此第二圖像選擇部448執(zhí)行不可選擇處理(步驟S458)。在不可選擇處理(步驟S458)中,例如設(shè)定表示未能選擇出適合于第二圖像的處理對(duì)象圖像的第二不可選擇標(biāo)志。然后,第二圖像選擇部448結(jié)束第二選擇處理(步驟S434)而返回至圖像處理。
通過(guò)執(zhí)行這樣的第二圖像處理(步驟S434),能夠自動(dòng)地選擇在成為背景的紙上僅書寫了文字且距書B的封面最近的頁(yè)P(yáng)。
第二圖像選擇部448根據(jù)是否設(shè)定了第二不可選擇標(biāo)志,判斷是否能夠選擇出第二圖像(步驟S435)。
在設(shè)定了第二不可選擇標(biāo)志的情況下,第二圖像選擇部448判斷為未能選擇出第二圖像(步驟S435:“否”),結(jié)束圖像斑點(diǎn)修正處理(步驟S413)而返回至圖像處理。
在未設(shè)定第二不可選擇標(biāo)志的情況下,第二圖像選擇部448判斷為能選擇出第二圖像(步驟S435:“是”)。在該情況下,第二修正量取得部242取得對(duì)在步驟S434中選擇出的第二圖像進(jìn)行分割而得到的各塊內(nèi)的像素的亮度(步驟S427)。在步驟S427中執(zhí)行的處理的詳細(xì)內(nèi)容與步驟S227大致相同。
接著,依次執(zhí)行步驟S228~S229、S225和S126的處理。由此,圖像斑點(diǎn)修正處理(步驟S413)結(jié)束,執(zhí)行圖像處理。
以上,說(shuō)明了本發(fā)明的第四實(shí)施方式。
根據(jù)本實(shí)施方式,與第二實(shí)施方式同樣地,能夠減輕用于修正打開(kāi)書B進(jìn)行拍攝得到的多個(gè)處理對(duì)象圖像的亮斑的處理負(fù)荷。
另外,根據(jù)本實(shí)施方式,與第二實(shí)施方式同樣地,能夠適當(dāng)?shù)匦拚c包含彩色照片、彩色圖等的頁(yè)P(yáng)對(duì)應(yīng)的處理對(duì)象圖像的亮斑。
并且,在本實(shí)施方式中,自動(dòng)地選擇第一圖像和第二圖像,因此能夠節(jié)省 用于指定第一圖像和第二圖像的用戶的作業(yè)勞力,同時(shí)能夠適當(dāng)?shù)匦拚鄠€(gè)處理對(duì)象圖像的亮斑。
本實(shí)施方式也可以如下那樣變形。
例如,在本實(shí)施方式中,預(yù)定數(shù)也可以采用2以上。例如直到選擇2以上的預(yù)定數(shù)量的處理對(duì)象圖像為止重復(fù)進(jìn)行第一圖像選擇處理(步驟S432),由此能夠選擇多個(gè)處理對(duì)象圖像作為第一圖像。另外,例如直到選擇2以上的預(yù)定數(shù)量的處理對(duì)象圖像為止重復(fù)進(jìn)行第二圖像選擇處理(步驟S434),由此能夠選擇多個(gè)處理對(duì)象圖像作為第二圖像。
在該情況下,在第一實(shí)施方式、第二實(shí)施方式的各變形例中,與選擇多個(gè)處理對(duì)象圖像中的兩個(gè)以上的處理對(duì)象圖像的情況同樣地對(duì)第一圖像和第二圖像進(jìn)行處理即可。由此,如在各變形例中說(shuō)明那樣,能夠減輕用于修正打開(kāi)書B進(jìn)行拍攝得到的多個(gè)處理對(duì)象圖像的亮斑的處理負(fù)荷,并能夠更適當(dāng)?shù)匦拚涟摺?/p>
例如,第一圖像選擇部447可以從進(jìn)行拍攝時(shí)打開(kāi)的頁(yè)P(yáng)接近書B的封底的頁(yè)開(kāi)始依次選擇預(yù)定數(shù)量的處理對(duì)象圖像作為第一圖像。另外,第二圖像選擇部448可以從進(jìn)行拍攝時(shí)打開(kāi)的頁(yè)P(yáng)接近書B的封面的頁(yè)開(kāi)始依次選擇預(yù)定數(shù)量的處理對(duì)象圖像作為第二圖像。由此,能夠?qū)⑴c接近封面和封底中的一方的頁(yè)對(duì)應(yīng)的處理對(duì)象圖像設(shè)為第一圖像,將與接近封面和封底中的另一方的頁(yè)對(duì)應(yīng)的處理對(duì)象圖像設(shè)為第二圖像。結(jié)果,能夠取得按照與處理對(duì)象圖像對(duì)應(yīng)的頁(yè)逐漸變化的亮度修正量Yab。因而,能夠適當(dāng)?shù)匦拚鄠€(gè)處理對(duì)象圖像的亮斑。
例如,本實(shí)施方式的第一圖像選擇部447可以被裝入第一實(shí)施方式的終端裝置。另外,本實(shí)施方式的第一圖像選擇部447和第二圖像選擇部448可以被裝入第三實(shí)施方式的終端裝置。由此,能夠自動(dòng)地選擇第一圖像或選擇第一圖像和第二圖像,因此能夠節(jié)省用于指定第一圖像和第二圖像的用戶的作業(yè)勞力,同時(shí)能夠適當(dāng)?shù)匦拚鄠€(gè)處理對(duì)象圖像的亮斑。
以上,說(shuō)明了本發(fā)明的實(shí)施方式和變形例,但是本發(fā)明并不限于這些實(shí)施方式和變形例。也可以適當(dāng)?shù)亟M合各實(shí)施方式和各變形例。并且,也可以如下那樣變形。
例如,多個(gè)處理對(duì)象圖像的各處理對(duì)象圖像可以是通過(guò)拍攝書B對(duì)象物的對(duì)開(kāi)兩頁(yè)而得到的圖像。即使如此將各實(shí)施方式進(jìn)行變形,也起到與各實(shí)施方式相同的效果。
例如,進(jìn)行由CPU、RAM、ROM等構(gòu)成的拍攝裝置和圖像處理裝置分別執(zhí)行的拍攝處理和圖像處理的成為中心的部分也可以是專用系統(tǒng),但是能夠使用智能手機(jī)、平板終端、個(gè)人計(jì)算機(jī)等執(zhí)行。例如可以將用于使智能手機(jī)、平板終端、個(gè)人計(jì)算機(jī)等執(zhí)行拍攝處理和圖像處理中的一方或雙方的計(jì)算機(jī)程序存儲(chǔ)在計(jì)算機(jī)可讀取的記錄介質(zhì)(軟盤、CD-ROM(Compact Disk Read Only Memory:光盤只讀存儲(chǔ)器)、DVD-ROM(Digital Versatile Disc Read Only Memory:數(shù)字多功能光盤只讀存儲(chǔ)器)等)而分發(fā),通過(guò)安裝該計(jì)算機(jī)程序,構(gòu)成用于執(zhí)行拍攝處理和圖像處理中的一方或兩方的智能手機(jī)、平板終端、個(gè)人計(jì)算機(jī)等。另外,可以將計(jì)算機(jī)程序存儲(chǔ)在因特網(wǎng)等通信網(wǎng)絡(luò)上的服務(wù)器裝置所具有的存儲(chǔ)裝置中,通過(guò)下載該計(jì)算機(jī)程序等,構(gòu)成用于執(zhí)行拍攝處理和圖像處理中的一方或兩方的智能手機(jī)、平板終端、個(gè)人計(jì)算機(jī)等。
例如在通過(guò)OS(Operating System:操作系統(tǒng))和應(yīng)用程序的分擔(dān)或OS與應(yīng)用程序的協(xié)作實(shí)現(xiàn)圖像處理裝置的功能的情況下等,可以僅將應(yīng)用程序部分存儲(chǔ)在記錄介質(zhì)、存儲(chǔ)裝置中。
例如還能夠?qū)⒂?jì)算機(jī)程序疊加在載波而經(jīng)由通信網(wǎng)絡(luò)傳送。例如也可以在通信網(wǎng)絡(luò)上的公告板(BBS:Bulletin Board System)上公布上述計(jì)算機(jī)程序,經(jīng)由網(wǎng)絡(luò)傳送上述計(jì)算機(jī)程序。而且,也可以構(gòu)成為啟動(dòng)該計(jì)算機(jī)程序,并在OS的控制下與其它應(yīng)用程序同樣地執(zhí)行,由此能夠執(zhí)行上述處理。
以上,說(shuō)明了本發(fā)明的優(yōu)選實(shí)施方式,但是本發(fā)明并不限于上述特定的實(shí)施方式,本發(fā)明包含權(quán)利要求中記載的發(fā)明及其均等的范圍。