圖像處理裝置的制造方法
【專利摘要】本發(fā)明提供一種圖像處理裝置，包括：彩色圖像取得單元，其取得顯示生物體組織的彩色圖像的彩色圖像數(shù)據(jù)；病變判定單元，其基于彩色圖像數(shù)據(jù)對(duì)于彩色圖像的各像素進(jìn)行是否為病變部的像素的判定；標(biāo)記單元，其基于判定的結(jié)果在彩色圖像上標(biāo)注顯示病變部的位置的標(biāo)記。上述標(biāo)記為背景的彩色圖像透明的標(biāo)記。
【專利說(shuō)明】
圖像處理裝置
技術(shù)領(lǐng)域
[0001] 本發(fā)明涉及一種處理生物體組織的圖像的圖像處理裝置。
【背景技術(shù)】
[0002] -般而言，生物體組織的病變部會(huì)與正常的部位顯示出不同的顏色。由于彩色內(nèi) 窺鏡裝置性能的提升，已經(jīng)可以識(shí)別顏色上與正常組織存在細(xì)微不同的病變部。然而，手術(shù) 者為了能夠基于內(nèi)窺鏡圖像上顏色的細(xì)微差別而正確地從正常組織中識(shí)別出病變部，需要 在熟練技術(shù)人員的指導(dǎo)下接受長(zhǎng)期的訓(xùn)練。并且，即使對(duì)于熟練的手術(shù)者來(lái)說(shuō)，也不能輕易 地基于顏色上的細(xì)微差別而識(shí)別出病變部，要求其謹(jǐn)慎的作業(yè)。
[0003] 因此，例如在特開(kāi)2014-18332號(hào)公報(bào)（以下，記為"專利文獻(xiàn)Γ)中為了使得病變部 的識(shí)別變得容易而提出了具有如下功能的電子內(nèi)窺鏡裝置:對(duì)于使用白色光拍攝到的內(nèi)窺 鏡圖像數(shù)據(jù)，基于顏色信息來(lái)判定被攝體是否為病變部，并且進(jìn)行變更被判定為病變部的 像素的顏色的處理。

【發(fā)明內(nèi)容】

[0004] 就專利文獻(xiàn)1的電子內(nèi)窺鏡裝置所生成的標(biāo)記圖像而言，雖然明確地用顏色區(qū)分 疑為病變部的部位，但是，由于診斷所需要的病變部的圖像的信息受到損壞，因此，診斷時(shí) 需要與普通觀察圖像認(rèn)真對(duì)比而存在難以診斷的不便之處。
[0005] 本發(fā)明是鑒于以上的問(wèn)題而完成的，其目的在于提供一種圖像處理裝置，其在充 分地保持病變部的圖像的信息的同時(shí)，能夠明確示出疑為病變部的部位。
[0006] 根據(jù)本發(fā)明的一實(shí)施方式，提供一種圖像處理裝置，包括:彩色圖像取得單元，其 取得顯示生物體組織的彩色圖像的彩色圖像數(shù)據(jù);病變判定單元，其基于彩色圖像數(shù)據(jù)對(duì) 于彩色圖像的各像素進(jìn)行是否為病變部的像素的判定;標(biāo)記單元，其基于判定的結(jié)果在彩 色圖像上標(biāo)注顯示病變部的位置的標(biāo)記;其中，標(biāo)記為背景的彩色圖像透明的標(biāo)記。
[0007] 另外，在所述的圖像處理裝置中，也可以為如下構(gòu)成:病變判定單元具有評(píng)分表生 成單元，評(píng)分表生成單元生成評(píng)分表，評(píng)分表的要素中包括對(duì)于彩色圖像的每個(gè)像素顯示 生物體組織的病變的重癥度的評(píng)分，標(biāo)記單元基于評(píng)分表在彩色圖像上標(biāo)注顯示病變部的 位置以及重癥度的所述標(biāo)記。
[0008] 根據(jù)該構(gòu)成，由于從標(biāo)注在彩色圖像上的標(biāo)記也能夠得到有關(guān)病變的重癥度的信 息，因此，能夠基于客觀的數(shù)據(jù)進(jìn)行高級(jí)的診斷。
[0009] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:標(biāo)記單元在彩色圖像內(nèi)設(shè)定 作為處理的對(duì)象區(qū)域的掩模，計(jì)算掩模內(nèi)的評(píng)分的代表值，基于代表值對(duì)于掩模標(biāo)注標(biāo)記。
[0010] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:標(biāo)記單元設(shè)定規(guī)定的初始尺 寸的掩模，對(duì)于初始尺寸的掩模計(jì)算代表值，根據(jù)代表值變更掩模的大小，以內(nèi)接于變更了 大小的掩模的方式標(biāo)注標(biāo)記。
[0011] 根據(jù)該構(gòu)成，由于通過(guò)標(biāo)記的大小顯示病變的重癥度，因此，能夠從被標(biāo)注了標(biāo)記 的圖像直觀地把握重癥度。
[0012] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成：初始尺寸為掩模的最小尺 寸。
[0013] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:標(biāo)記單元在掩模內(nèi)標(biāo)注與代 表值的數(shù)量相對(duì)應(yīng)的標(biāo)記。
[0014] 根據(jù)該構(gòu)成，由于通過(guò)標(biāo)記的密度顯示病變的重癥度，因此，能夠從被標(biāo)注了標(biāo)記 的圖像直觀地把握重癥度。
[0015] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:標(biāo)記單元一邊在彩色圖像內(nèi) 掃描掩模，一邊在彩色圖像上標(biāo)注標(biāo)記。
[0016] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:標(biāo)記單元以與設(shè)定完成的其 他的掩模不重合的方式設(shè)定掩模。
[0017] 根據(jù)該構(gòu)成，不會(huì)失去已標(biāo)注的標(biāo)記的信息，維持了標(biāo)記的信息的精度。
[0018] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:代表值為相加平均、加權(quán)平 均、中央值、眾數(shù)以及均方根中的任何一個(gè)。
[0019] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成：生成評(píng)分表的單元包括:色 彩空間轉(zhuǎn)換單元，其將彩色圖像數(shù)據(jù)的色彩空間轉(zhuǎn)換為具有顯示亮度或者明度的一個(gè)座標(biāo) 和顯示顏色的性質(zhì)的兩個(gè)座標(biāo)的色彩空間；評(píng)分計(jì)算單元，其基于彩色圖像數(shù)據(jù)的各像素 的顏色的性質(zhì)計(jì)算各像素的評(píng)分。
[0020] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:生成評(píng)分表的單元進(jìn)一步包 括色彩增強(qiáng)單元，色彩增強(qiáng)單元在病變部所特有的像素值的范圍的邊界區(qū)域內(nèi)進(jìn)行提高顏 色的性質(zhì)的對(duì)比度的色彩增強(qiáng)處理，評(píng)分計(jì)算單元基于色彩增強(qiáng)處理之后的像素值計(jì)算各 像素的評(píng)分。
[0021] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:評(píng)分計(jì)算單元基于與色調(diào)-飽和度空間或者色度空間中的基準(zhǔn)點(diǎn)的距離計(jì)算各像素的評(píng)分。
[0022] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:病變部為炎癥部，基準(zhǔn)點(diǎn)為 血液的顏色。
[0023]另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:標(biāo)記為記號(hào)。
[0024]另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:標(biāo)記為具有透過(guò)率的顏色。 [0025]另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:標(biāo)記為重癥度的等高線。
[0026] 另外，在上述的圖像處理裝置中，也可以為如下構(gòu)成:彩色圖像為電子內(nèi)窺鏡圖 像。
[0027] 根據(jù)本發(fā)明的一實(shí)施方式，由于標(biāo)注了生物體組織的彩色圖像透明的標(biāo)記，因此 即使不參照標(biāo)注標(biāo)記之前的彩色圖像也能夠把握生物體組織的形狀或結(jié)構(gòu)，因此，能夠更 加容易且正確地進(jìn)行圖像診斷。
【附圖說(shuō)明】
[0028] 圖1為示出本發(fā)明的實(shí)施方式所涉及的電子內(nèi)窺鏡裝置的概略構(gòu)成的框圖。
[0029] 圖2為示出與本發(fā)明的實(shí)施方式所涉及的電子內(nèi)窺鏡裝置的圖像處理有關(guān)的電路 的概略構(gòu)成的框圖。
[0030] 圖3為示出圖像存儲(chǔ)器的存儲(chǔ)區(qū)域的概略構(gòu)成的圖。
[0031] 圖4為示出圖像處理電路進(jìn)行的處理的順序的流程圖。
[0032]圖5為用于TE處理的增益曲線的一例。
[0033]圖6為示出有效像素判定處理的順序的流程圖。
[0034]圖7為示出病變判定處理的順序的流程圖。
[0035]圖8為在HS坐標(biāo)空間內(nèi)繪制了生物體組織圖像的像素值的散布圖。
[0036]圖9為示出評(píng)分計(jì)算處理的順序的流程圖。
[0037]圖10為示出色調(diào)距離、飽和度距離和相關(guān)值的關(guān)系的圖表。
[0038]圖11為說(shuō)明標(biāo)記處理(掩模的掃描)的圖。
[0039] 圖12為示出掩模的構(gòu)成的圖。
[0040] 圖13為示出標(biāo)記處理的順序的流程圖。
[0041 ]圖14為說(shuō)明標(biāo)記處理的具體例子的圖。
[0042]圖15為說(shuō)明標(biāo)記處理的具體例子的圖。
[0043]圖16為說(shuō)明標(biāo)記處理的具體例子的圖。
[0044] 圖17為說(shuō)明標(biāo)記處理的具體例子的圖。
[0045] 圖18為說(shuō)明標(biāo)記處理的具體例子的圖。
[0046] 圖19為說(shuō)明標(biāo)記處理的具體例子的圖。
[0047]圖20為說(shuō)明標(biāo)記處理的具體例子的圖。
[0048] 圖21為顯不畫(huà)面的一例。
[0049] 圖22為本發(fā)明的第一實(shí)施方式的第一變形例的標(biāo)記圖像。
[0050] 圖23為本發(fā)明的第一實(shí)施方式的第二變形例的標(biāo)記圖像。
[0051]圖24為示出本發(fā)明的第二實(shí)施方式的標(biāo)記處理的順序的流程圖。
[0052]圖25為說(shuō)明圖像混合處理的效果的圖。
[0053]圖26為說(shuō)明本發(fā)明的第三實(shí)施方式中的等高線的作成方法的圖。
【具體實(shí)施方式】
[0054]以下，參照附圖對(duì)本發(fā)明的圖像處理裝置的實(shí)施方式進(jìn)行說(shuō)明。另外，在以下的說(shuō) 明中，作為本發(fā)明的一實(shí)施方式，以電子內(nèi)窺鏡系統(tǒng)為例進(jìn)行說(shuō)明。
[0055] <第一實(shí)施方式>
[0056][電子內(nèi)窺鏡裝置1整體的構(gòu)成]
[0057]圖1為示出本發(fā)明的第一實(shí)施方式的電子內(nèi)窺鏡裝置1的構(gòu)成的框圖。如圖1所示， 電子內(nèi)窺鏡裝置1包括電子鏡(電子只=一7°)1〇〇、處理器200以及監(jiān)視器900。
[0058]處理器200包括系統(tǒng)控制器202和定時(shí)控制器204。系統(tǒng)控制器202執(zhí)行存儲(chǔ)在存儲(chǔ) 器212中的各種程序，并且統(tǒng)一控制電子內(nèi)窺鏡裝置1整體。另外，系統(tǒng)控制器202連接于操 作面板214。系統(tǒng)控制器202根據(jù)由操作面板214輸入的來(lái)自手術(shù)者的指示而變更電子內(nèi)窺 鏡裝置1的各動(dòng)作及用于各動(dòng)作的參數(shù)。定時(shí)控制器204將調(diào)整各部分的動(dòng)作的定時(shí)的同步 信號(hào)輸出至電子內(nèi)窺鏡裝置1內(nèi)的各電路。
[0059]燈208在利用燈電源點(diǎn)火器206開(kāi)始動(dòng)作后射出照射光L。燈208例如為氙燈、鹵素 燈、汞燈、金屬鹵素?zé)舻雀吡炼葻艋蛘週ED (發(fā)光二極管）。照射光L是主要為具有從可見(jiàn)光區(qū) 域擴(kuò)展至不可見(jiàn)的紅外光區(qū)域的光譜的寬波段光(或者至少包含可見(jiàn)光區(qū)域的白色光）。 [0060] 從燈208射出的照明光L通過(guò)聚光透鏡210會(huì)聚在LCB(光導(dǎo)束）102的入射端面，并 且向LCB102內(nèi)入射。
[00611 入射至LCB102內(nèi)的照射光L在LCB102內(nèi)傳播，并從配置于電子鏡100的前端的 LCB102的射出端面射出，經(jīng)由配光透鏡104而照射至被攝體。來(lái)自被照射光L照射的被攝體 的返回光經(jīng)由物鏡106在固體拍攝元件108的受光面上形成光學(xué)圖像。
[0062]固體拍攝元件108為補(bǔ)色方格色差順序方式(補(bǔ)色市松色差線順次方式)的單板式 彩色CCD(電荷耦合裝置)圖像傳感器。固體拍攝元件108對(duì)在受光面上成像的被攝體的光學(xué) 圖像進(jìn)行拍攝，并輸出模擬拍攝信號(hào)。具體而言，固體拍攝元件108將由受光面上的各像素 成像的光學(xué)圖像作為對(duì)應(yīng)于光量的電荷蓄積，生成黃色Ye、青色Cy、綠色G、品紅色Mg的顏色 信號(hào)，將所生成的在垂直方向上鄰接的兩個(gè)像素的顏色信號(hào)相加并混合而得到掃描線，將 得到的上述掃描線依次輸出。此外，固體拍攝元件108并不限于CCD圖像傳感器，也可以調(diào)換 為CMOS(互補(bǔ)金屬氧化物半導(dǎo)體）圖像傳感器或其他種類的拍攝裝置。固定拍攝元件108還 可以搭載原色系濾光器(拜耳陣列濾光器）。
[0063] 在電子鏡100的連接部?jī)?nèi)具有驅(qū)動(dòng)器信號(hào)處理電路110。以半幀周期通過(guò)固體拍攝 元件108向驅(qū)動(dòng)器信號(hào)處理電路110輸入由上述的掃描線構(gòu)成的模擬拍攝信號(hào)。此外，在以 后的說(shuō)明中，"半幀"也可以調(diào)換為"幀"。在本實(shí)施方式中，半幀周期、幀周期分別為1/60秒、 1/30秒。驅(qū)動(dòng)器信號(hào)處理電路110對(duì)于由固體拍攝元件108輸入的模擬拍攝信號(hào)實(shí)施規(guī)定的 處理并向處理器200的圖像處理電路220輸出。
[0064] 驅(qū)動(dòng)器信號(hào)處理電路110還訪問(wèn)存儲(chǔ)器120并讀取電子鏡100的固有信息。存儲(chǔ)器 120中所記錄的電子鏡100的固有信息包括例如固體拍攝器件108的像素?cái)?shù)或敏感度、可操 作的半幀速率、型號(hào)等。驅(qū)動(dòng)器信號(hào)處理電路110將從存儲(chǔ)器120讀出的固有信息輸出至系 統(tǒng)控制器202。
[0065]系統(tǒng)控制器202基于電子鏡100的固有信息進(jìn)行各種運(yùn)算，并生成控制信號(hào)。系統(tǒng) 控制器202使用所生成的控制信號(hào)控制處理器200內(nèi)的各個(gè)電路的動(dòng)作和定時(shí)，從而進(jìn)行適 合與處理器200連接的電子鏡的處理。
[0066] 定時(shí)控制器204根據(jù)系統(tǒng)控制器202的定時(shí)控制生成同步信號(hào)。驅(qū)動(dòng)器信號(hào)處理電 路110根據(jù)從定時(shí)控制器204供應(yīng)的同步信號(hào)，按照與處理器200所生成的視頻信號(hào)的半幀 速率同步的定時(shí)驅(qū)動(dòng)控制固體拍攝元件108。
[0067]在系統(tǒng)控制器202的控制下，圖像處理電路220基于從電子鏡100輸出的拍攝信號(hào) 生成圖像數(shù)據(jù)。另外，圖像處理電路220使用所生成的圖像數(shù)據(jù)生成監(jiān)視器顯示用的畫(huà)面數(shù) 據(jù)，并且將該畫(huà)面數(shù)據(jù)轉(zhuǎn)換為規(guī)定的視頻格式的視頻信號(hào)并輸出。視頻信號(hào)被輸入至監(jiān)視 器900,從而被攝體的彩色圖像顯示在監(jiān)視器900的顯示畫(huà)面上。
[0068]圖2為示出與電子內(nèi)窺鏡裝置1的圖像處理有關(guān)的電路的概略構(gòu)成的框圖。
[0069] 驅(qū)動(dòng)器信號(hào)處理電路110具備驅(qū)動(dòng)電路112和AFE(模擬前端）114。驅(qū)動(dòng)電路112基 于同步信號(hào)生成固體拍攝元件108的驅(qū)動(dòng)信號(hào)。AFE114對(duì)于從固體拍攝元件108輸出的模擬 拍攝信號(hào)進(jìn)行噪音去除、信號(hào)放大/增益修正以及A/D轉(zhuǎn)換，并輸出數(shù)字拍攝信號(hào)。此外，在 本實(shí)施方式中，也可以構(gòu)成為由固體拍攝元件108或者圖像處理電路220進(jìn)行AFE114所進(jìn)行 的全部處理或者部分處理。
[0070] 圖像處理電路220具備基本處理部220a、輸出電路220b、TE(Tone Enhancement:色 調(diào)增強(qiáng))處理部221、有效像素判定部222、色彩空間轉(zhuǎn)換部223、病變判定部224、評(píng)分計(jì)算部 225、標(biāo)記處理部226、圖像存儲(chǔ)器227、顯示畫(huà)面生成部228以及存儲(chǔ)器229。有關(guān)圖像處理電 路220的各部分所進(jìn)行的處理將于后述。
[0071] 圖3(a)為示出圖像存儲(chǔ)器227所具備的存儲(chǔ)區(qū)域的概略構(gòu)成的圖。在本實(shí)施方式 的圖像存儲(chǔ)器227中設(shè)置了三個(gè)存儲(chǔ)區(qū)域P n、Pe、Pm。存儲(chǔ)區(qū)域Pn為存儲(chǔ)基本處理部220a所生 成的普通觀察圖像數(shù)據(jù)N(表示普通觀察圖像NP的圖像數(shù)據(jù)）的區(qū)域。存儲(chǔ)區(qū)域P e為存儲(chǔ)TE 處理部221所生成的色調(diào)增強(qiáng)圖像數(shù)據(jù)E(表示色調(diào)增強(qiáng)圖像EP的圖像數(shù)據(jù)）的區(qū)域。存儲(chǔ)區(qū) 域匕為存儲(chǔ)標(biāo)記處理部226所生成的標(biāo)記圖像數(shù)據(jù)M(表示標(biāo)記圖像MP的圖像數(shù)據(jù))的區(qū)域。 [0072 ]另外，如圖2所示，在存儲(chǔ)器229中存儲(chǔ)標(biāo)識(shí)表FT、評(píng)分表ST、掩模表MT、色調(diào)相關(guān)值 表HCT以及飽和度相關(guān)值表SCT。標(biāo)識(shí)表FT及評(píng)分表ST為由標(biāo)識(shí)F(X，y)、評(píng)分Sc (X，y)構(gòu)成的 數(shù)值表，標(biāo)識(shí)F(x，y)、評(píng)分Sc(x，y)分別示出有關(guān)普通觀察圖像數(shù)據(jù)N的各像素(x，y)的分析 結(jié)果。具體而言，標(biāo)識(shí)F(x，y)是表示在對(duì)應(yīng)的像素(x，y)上所拍攝的組織有無(wú)病變的參數(shù)， 評(píng)分Sc(x，y)是表示該病變的重癥度的參數(shù)。有關(guān)色調(diào)相關(guān)值表HCT、飽和度相關(guān)值表SCT以 及掩模表MT將于后述。
[0073][基本處理S1]
[0074]接著，對(duì)圖像處理電路220進(jìn)行的處理進(jìn)行說(shuō)明。
[0075]圖4為示出圖像處理電路220進(jìn)行的處理的順序的流程圖。從AFE114輸出的數(shù)字信 號(hào)首先通過(guò)基本處理部220a進(jìn)行一般的信號(hào)處理(基本處理S1)，從而生成普通觀察圖像數(shù) 據(jù)N。
[0076]基本處理S1包括:將從AFE114輸出的數(shù)字拍攝信號(hào)轉(zhuǎn)換為亮度信號(hào)Y及色差信號(hào) Cb、Cr的處理;從亮度信號(hào)Y及色差信號(hào)Cb、Cr分離原色信號(hào)R、G、B的原色分離處理;除去偏 置分量的鉗位處理（夕7 乂7°処理）；使用周圍的像素的像素值修正缺陷像素的像素值的缺 陷修正處理;將由單色的像素值構(gòu)成的拍攝數(shù)據(jù)(RAW數(shù)據(jù))轉(zhuǎn)換為由全彩色的像素值構(gòu)成 的圖像數(shù)據(jù)的去馬賽克處理処理）（插值處理）；使用彩色矩陣修正拍攝元件的 分光特性的線性矩陣處理;修正照明光的光譜特性的白平衡處理;補(bǔ)償空間頻率特性的劣 化的輪廓修正等。
[0077]此外，在本實(shí)施方式中，也可以構(gòu)成為由驅(qū)動(dòng)器信號(hào)處理電路110或者固體拍攝元 件108進(jìn)行基本處理部220a所進(jìn)行的處理的全部或者一部分。
[0078]由基本處理部220a生成的普通觀察圖像數(shù)據(jù)N被輸入TE處理部221的同時(shí)被存儲(chǔ) 于圖像存儲(chǔ)器227的存儲(chǔ)區(qū)域Pn。
[0079][動(dòng)作模式判定處理S2]
[0080]接著，判斷是否設(shè)定為圖像分析模式(S2)。本發(fā)明的實(shí)施方式所涉及的圖像分析 模式是對(duì)圖像數(shù)據(jù)的各像素分析顏色信息，基于規(guī)定的判定基準(zhǔn)根據(jù)顏色信息的分析結(jié)果 來(lái)判定是否為拍攝了病變部的像素（以下稱為"病變像素"。），并識(shí)別顯示病變像素的動(dòng)作 模式。所判定的病變的種類可以根據(jù)檢查內(nèi)容來(lái)選擇。在以下說(shuō)明的例子中，提取炎癥性腸 病(IBD)的病變即炎癥(包含浮腫或易出血性的紅色病變)的觀察圖像所特有的色域的像素 并進(jìn)行識(shí)別顯示。
[0081]此外，本實(shí)施方式的電子內(nèi)窺鏡裝置1以在圖像分析模式和普通觀察模式這兩個(gè) 動(dòng)作模式下進(jìn)行動(dòng)作的方式構(gòu)成。動(dòng)作模式通過(guò)對(duì)于電子鏡100的操作部130或處理器200 的操作面板214的用戶操作來(lái)進(jìn)行切換。在設(shè)定為普通觀察模式的情況下（S2:否），處理轉(zhuǎn) 至S9。
[0082] [TE(色調(diào)增強(qiáng)）處理S3]
[0083]在選擇圖像分析模式的情況下（S2:是），接著進(jìn)行由TE處理部221執(zhí)行的TE處理 S3 JE處理S3為如下處理:為了提高病變的判定精度，進(jìn)行對(duì)于普通觀察圖像數(shù)據(jù)N的各原 色信號(hào)R、G、B賦予非線性的增益(收益）的增益調(diào)整，實(shí)質(zhì)性擴(kuò)展判定対象的病變所特有的 色域(特別是其邊界部)附近的動(dòng)態(tài)范圍，提高顏色表現(xiàn)的實(shí)效的分辨率。具體而言，在TE處 理S3中進(jìn)行如下處理:對(duì)于各原色信號(hào)R、G、B賦予圖5所示的非線性的增益而取得原色信號(hào) f、B'(色調(diào)增強(qiáng)圖像數(shù)據(jù)E)。例如，從圖5的增益曲線來(lái)看，從潰瘍所特有的色域的邊界 區(qū)域Ra到炎癥所特有的色域的邊界區(qū)域Rb，斜率變得陡峭。根據(jù)這樣的增益曲線賦予增益， 從邊界區(qū)域Ra至邊界區(qū)域Rb，能夠擴(kuò)展原色信號(hào)R1對(duì)原色信號(hào)R實(shí)施了 TE處理S3的信號(hào)）的 實(shí)質(zhì)的動(dòng)態(tài)范圍，能夠進(jìn)行更精密的閾值判定。
[0084] 此外，通過(guò)TE處理S3色調(diào)變化為：炎癥部變紅，潰瘍部分變白，正常部分變綠。因 此，在監(jiān)視器900上顯示通過(guò)TE處理S3而生成的色調(diào)增強(qiáng)圖像數(shù)據(jù)E的情況下，與顯示TE處 理S3前的普通觀察圖像數(shù)據(jù)N的情況相比，能夠容易地肉眼識(shí)別病變部（炎癥部或潰瘍部 分）。此外，上述的TE處理S3是能夠應(yīng)用于本發(fā)明的色彩增強(qiáng)處理的一例，也可以代替TE處 理S3而使用提高顏色質(zhì)量、具體而言提高色調(diào)或飽和度(或色度)的對(duì)比度的其他種類的色 彩增強(qiáng)處理。
[0085][有效像素判定處理S4]
[0086] TE處理S3完成后，接著對(duì)色調(diào)增強(qiáng)圖像數(shù)據(jù)E進(jìn)行由有效像素判定部222執(zhí)行的有 效像素判定處理S4。此外，也可以省略TE處理S3而對(duì)普通觀察圖像數(shù)據(jù)N進(jìn)行有效像素判定 處理S4。
[0087]圖6為示出有效像素判定處理S4的順序的流程圖。有效像素判定處理S4是判定像 素值是否適合圖像分析的處理，對(duì)構(gòu)成圖像數(shù)據(jù)的所有像素(x，y)依次執(zhí)行。在有效像素判 定處理S4中，首先，對(duì)于各像素(x，y)，根據(jù)下述公式1，從色調(diào)增強(qiáng)圖像數(shù)據(jù)E的原色信號(hào)f (xjX7 (xjhB7 (x，y)計(jì)算修正亮度int(x，y)(S41)。
[0088] 【公式1】
[0089] int(x,7)=0.3^7 (x,7)+0.59^7 (x,y)+0.11*B7 (x,y)
[0090] 此外，計(jì)算出的修正亮度int(x，y)的值用于下面的適當(dāng)曝光判定處理S42。另外， 如公式1所表明的，修正亮度int(x，y)不是原色信號(hào)V (1，7)、6^(1，7)、811，7)的單純平均 而是作為根據(jù)人(手術(shù)者)的相對(duì)可見(jiàn)度特性的加權(quán)平均而求出。
[0091] 接著，基于在處理S41中計(jì)算出的色調(diào)增強(qiáng)圖像數(shù)據(jù)E的修正亮度int(x，y)及原色 信號(hào)f (x，y)，對(duì)于各像素(x，y)進(jìn)行判定是否為適合圖像分析的曝光等 級(jí)的適當(dāng)曝光判定處理S42。在適當(dāng)曝光判定處理S42中，在滿足下面兩個(gè)條件(公式2、公式 3)的至少一方(或雙方）的情況下，判定為適當(dāng)曝光（S42:是）。此外，通過(guò)公式2規(guī)定修正亮 度int(x，y)(整體的光量)的上限值，通過(guò)公式3規(guī)定各原色信號(hào)f (x，y)、Glx，y)、Blx，y) 的下限值。
[0092] 【公式2】
[0093] int(x,y) <235
[0094] 【公式3】
[0095] Max{R7 (x,y),G7 (x,y),B7 (x,y)}>20
[0096] 對(duì)于像素(x，y)，如果滿足公式2或公式3(或者公式2及公式3)而判定為適當(dāng)曝光 (S42:是）的話，則有效像素判定部222將與存儲(chǔ)于存儲(chǔ)器229的標(biāo)識(shí)表FT的像素(X，y)相對(duì) 應(yīng)的標(biāo)識(shí)F(X，y)的值改寫(xiě)為"Γ (S43)。
[0097] 此外，標(biāo)識(shí)F(x，y)取0~2中的一個(gè)標(biāo)識(shí)值。各標(biāo)識(shí)值的定義如下。
[0098] 0:像素?cái)?shù)據(jù)無(wú)效
[0099] 1:正?；蛭磁卸?像素?cái)?shù)據(jù)有效）
[0100] 2:病變(炎癥）
[0101]另外，在適當(dāng)曝光判定處理S42中，在既不滿足公式2也不滿足公式3的條件(或者 不滿足任一個(gè)條件)而判定為曝光不適當(dāng)時(shí)(S42:否），有效像素判定部222將標(biāo)識(shí)表FT的標(biāo) 識(shí)F(X，y)的值改寫(xiě)為"0"（ S44)。
[0102] 接著，在處理S45中，判定是否完成了對(duì)所有的像素(x，y)的處理。重復(fù)上述的處理 S41~S45直至所有的像素(x，y)的處理完成為止。
[0103] [色彩空間轉(zhuǎn)換處理S5]
[0104]有效像素判定處理S4完成后，接著通過(guò)色彩空間轉(zhuǎn)換部223對(duì)色調(diào)增強(qiáng)圖像數(shù)據(jù)E 進(jìn)行色彩空間轉(zhuǎn)換處理S5。色彩空間轉(zhuǎn)換處理S5是將由RGB3原色定義的RGB空間的像素值 轉(zhuǎn)換為由色調(diào)（Hew) ·飽和度（Saturation) ·亮度（Intensity)的3要素定義的HSI(Heu-Saturation-intensity)空間的像素值的處理。具體而言，在色彩空間轉(zhuǎn)換處理S5中，色調(diào) 增強(qiáng)圖像數(shù)據(jù)E的各像素(x，y)的原色信號(hào)f (x，y)被轉(zhuǎn)換為色調(diào)H(x， 7)、飽和度3(義，7)、亮度1(1，7)。
[0105] 另外，曝光不足或者過(guò)剩的像素（x，y)的數(shù)據(jù)的精度低，會(huì)降低分析結(jié)果的可靠 性。因此，色彩空間轉(zhuǎn)換處理S5僅對(duì)將標(biāo)識(shí)F(x，y)的值設(shè)定為"Γ (即在上述的有效像素判 定處理S4中判定為適當(dāng)曝光)的像素(x，y)進(jìn)行。
[0106] 由色彩空間轉(zhuǎn)換部223生成的各像素(x，y)的色調(diào)H(x，y)、飽和度S(x，y)及亮度I (x，y)構(gòu)成的判定用圖像數(shù)據(jù)J{H(x，y)、S(x，y)、I(x，y)}被輸入病變判定部224。
[0107] [病變判定處理S6]
[0108] 色彩空間轉(zhuǎn)換處理S5完成后，接著通過(guò)病變判定部224進(jìn)行使用判定用圖像數(shù)據(jù)J 的病變判定處理S6。病變判定處理S6是對(duì)于內(nèi)窺鏡圖像的各像素(x，y)，根據(jù)判定用圖像數(shù) 據(jù)J被繪制在HS空間（色調(diào)一飽和度空間）內(nèi)的后述的區(qū)域α還是區(qū)域β(圖8)來(lái)判定拍攝在 該像素上的生物體組織的狀態(tài)(是否為炎癥部）的處理。此外，HS空間與色度空間同樣地，是 表示顏色性質(zhì)(除明亮度/亮度以外的顏色的要素)的空間。例如，在CIE 1976L*a*b*色彩空 間等的其他色彩空間上進(jìn)行圖像分析的情況下，病變判定部224在色度空間（例如a*b*空 間）上進(jìn)行。
[0109] 圖7為示出病變判定處理S6的順序的流程圖。病變判定處理S6對(duì)構(gòu)成圖像數(shù)據(jù)的 所有的像素(x，y)依次進(jìn)行。在病變判定處理S6中，首先，參照標(biāo)識(shí)表FT判斷各像素(x，y)的 數(shù)據(jù)是否有效(S61)。如果標(biāo)識(shí)F(x，y)的值為"Γ (像素?cái)?shù)據(jù)有效）的話，則接著進(jìn)行炎癥判 定處理S62。另外，如果標(biāo)識(shí)F(x，y)的值為"0"（像素?cái)?shù)據(jù)無(wú)效)的話，則不進(jìn)行炎癥判定處理 S62而進(jìn)入處理S64。
[0110] 在此，對(duì)在炎癥判定處理S62中進(jìn)行的炎癥判定處理S62進(jìn)行說(shuō)明。圖8為在HS空間 內(nèi)繪制了從多個(gè)炎癥性腸病患者的內(nèi)窺鏡圖像數(shù)據(jù)取得的判定用圖像數(shù)據(jù)J的散布圖。
[0111] 圖8的散布圖被區(qū)分為由右側(cè)下方的虛線包圍的區(qū)域β、和其以外的區(qū)域α。根據(jù)本 發(fā)明人的研究判明，被熟練掌握炎癥性腸病的內(nèi)窺鏡診斷的手術(shù)者判斷為炎癥部的部位的 像素的大部分被繪制于區(qū)域β，被判斷為非炎癥部的部位的像素的大部分被繪制于區(qū)域α。 這意味著，根據(jù)拍攝生物體組織得到的內(nèi)窺鏡觀察圖像的色調(diào)（色調(diào)（色合V、））和飽和度 (鮮明度)這兩個(gè)信息能夠非?？煽康嘏袆e生物體組織的狀態(tài)(有無(wú)炎癥）。
[0112]在炎癥判定處理S62中，判定各像素(x，y)的判定用圖像數(shù)據(jù)J{(H(x，y)，S(x，y)} 是否繪制在圖8的區(qū)域β中。具體而言，在滿足以下的公式4及公式5雙方的情況下，判定用圖 像數(shù)據(jù)·1{汨(^7)，5(^ 7)}繪制在區(qū)域0中（8卩，判定為炎癥部的像素）。另外，在不滿足公式 4及公式5的至少一方的情況下，判定用圖像數(shù)據(jù)】{(!1(1，7)，5(1，7)}繪制在區(qū)域€[中（8卩，判 定為非炎癥部的像素）。此外，δ 51、δΗ1&δΗ2是可由手術(shù)者設(shè)定的修正值，通過(guò)這些修正值的 設(shè)定能夠適當(dāng)調(diào)整判定的嚴(yán)苛度(靈敏度)等。
[0113]【公式4】
[0114] 130+5Si^S(x,y)
[0115] 【公式5】
[0116] 60+δΗι^Η(χ,γ)^100+δΗ2
[0117] 在像素（x，y)的判定用圖像數(shù)據(jù)J{ (H(x，y)，S(x，y)}被繪制在區(qū)域β中的情況下 (S62:是），對(duì)應(yīng)于像素 (X，y)的標(biāo)識(shí)F(X，y)的值被改寫(xiě)為"2"（炎癥）（S63)，進(jìn)入處理S64。另 外，在判定用圖像數(shù)據(jù)J{H(x，y)，S(x，y)}未被繪制在區(qū)域β中的情況下(S62:否），標(biāo)識(shí)F(X， y)不被改寫(xiě)而進(jìn)入處理S64。
[0118] 在處理S64中，判定是否完成對(duì)所有的像素（x，y)的處理。重復(fù)上述的處理S61~ S64直至所有的像素(x，y)的處理完成為止。
[0119] [評(píng)分計(jì)算處理:S7]
[0120]病變判定處理S6完成后，接著進(jìn)行評(píng)分計(jì)算處理S7。評(píng)分計(jì)算處理S7是基于判定 用圖像數(shù)據(jù)J的像素值來(lái)計(jì)算病變部的重癥度的評(píng)價(jià)值即評(píng)分Sc(x，y)的處理。評(píng)分計(jì)算處 理S7對(duì)構(gòu)成圖像數(shù)據(jù)的所有的像素(x，y)依次進(jìn)行。此外，以下說(shuō)明的評(píng)分計(jì)算的算法是一 例，本發(fā)明能夠適用于通過(guò)各種算法算出的評(píng)分的畫(huà)面顯示。
[0121][評(píng)分計(jì)算的原理]
[0122] 在此，對(duì)本實(shí)施方式的評(píng)分計(jì)算的原理進(jìn)行簡(jiǎn)單說(shuō)明。已知癥狀伴隨著血管的擴(kuò) 張及血漿成分向血管外的漏出等的發(fā)展，癥狀越發(fā)展則表面的正常粘膜脫落得就越多，炎 癥部的顏色就越接近血液的顏色。因此，炎癥部的顏色和血液的顏色的相關(guān)程度(后述的相 關(guān)值CV)成為表示炎癥部的重癥度的優(yōu)良指標(biāo)。在本實(shí)施方式中，計(jì)算各像素(x，y)的判定 用圖像數(shù)據(jù)·1出(1， 7)、3(1，7)}和血液的顏色(色調(diào)、飽和度)的相關(guān)值(^(^7)，將其用作表 示炎癥部的重癥度的評(píng)分Sc(x，y)。
[0123] [病變部的判定:S71]
[0124] 圖9為示出評(píng)分計(jì)算處理S7的順序的流程圖。在評(píng)分計(jì)算處理S7中，首先讀出標(biāo)識(shí) 表FT，判斷對(duì)應(yīng)于像素(X，y)的標(biāo)識(shí)F(X，y)的值是否為"2"（炎癥）（S71)。
[0125] 在標(biāo)識(shí)F(x，y)的值為"2"（炎癥）的情況下，即像素（x，y)為病變像素的情況下 (S71:是），處理進(jìn)入S72。另外，在像素（x，y)不是病變像素的情況下（S71:否），處理進(jìn)入 S79〇
[0126] [飽和度的修正:S72]
[0127] 已知血液和含有血液的生物體組織的圖像的飽和度依賴于亮度。具體而言，亮度 和飽和度具有負(fù)的相關(guān)，亮度越亮則飽和度越低。在S72中，使用本發(fā)明人所開(kāi)發(fā)的以下的 修正式（公式6)來(lái)修正判定用圖像數(shù)據(jù)J (X，y)的亮度I (X，y)所帶來(lái)的飽和度S (X，y)的變 動(dòng)。通過(guò)該修正，能夠提高評(píng)分計(jì)算的精度。
[0128] 【公式6】
[0130]其中，
[0131] 1^ (x，y):判定用圖像數(shù)據(jù)J的修正后的亮度
[0132] Scxxrr. (X，y):判定用圖像數(shù)據(jù)J的修正后的飽和度
[0133] Iref:作為基準(zhǔn)值的血樣數(shù)據(jù)的亮度
[0134] Sref:作為基準(zhǔn)值的血樣數(shù)據(jù)的飽和度
[0135] Θ:賦予血樣數(shù)據(jù)的亮度值和飽和度值的相關(guān)系數(shù)(COS0)的角度
[0136] 此外，血樣的飽和度和亮度的相關(guān)系數(shù)(實(shí)測(cè)值)為一0.86,使用0 = 149.32(deg)。
[0137] [色調(diào)距離Dhue的計(jì)算：S73]
[0138] 接著，通過(guò)公式7計(jì)算色調(diào)距離DHUE(x，y)(S73)。色調(diào)距離Dhue是以血樣數(shù)據(jù)的色調(diào) Hrrf為基準(zhǔn)的、判定用圖像數(shù)據(jù)J(x，y)的色調(diào)的相對(duì)值。
[0139] 【公式7】
[0140] Dhue(x，y) =H(x,y)-Href
[0141] [色調(diào)相關(guān)值HCV的確定:S74]
[0142] 接著，根據(jù)色調(diào)距離DHUE(x，y)確定色調(diào)相關(guān)值HCV(x，y)(S74)。色調(diào)相關(guān)值HCV(x， y)是與炎癥部的重癥度具有強(qiáng)相關(guān)的參數(shù)。圖10(a)為圖示色調(diào)距離Dhue和色調(diào)相關(guān)值HCV 的關(guān)系的圖表。色調(diào)距離Dhue在± 30°以內(nèi)的范圍（以下稱作"色調(diào)近似范圍Rn"。）內(nèi)與炎癥 部的重癥度具有強(qiáng)相關(guān)，在其以外的范圍（以下稱作"色調(diào)近似外范圍心 2"。）內(nèi)幾乎不存在 相關(guān)。因此，本實(shí)施方式的色調(diào)相關(guān)值HCV(x，y)在色調(diào)近似外范圍R12內(nèi)被設(shè)定為最小值的 〇.〇,在色調(diào)近似范圍Rn內(nèi)被設(shè)定為色調(diào)距離D HUE(x，y)越接近0°越線性增加。另外，色調(diào)相 關(guān)值HCV( X，y)被標(biāo)準(zhǔn)化為最小值為0.0，最大值為1.0。
[0143] 圖10(a)所示的色調(diào)距離Dhue和色調(diào)相關(guān)值HCV的關(guān)系作為色調(diào)相關(guān)值表HCT存儲(chǔ) 于存儲(chǔ)器229。通過(guò)參照色調(diào)相關(guān)值表HCT，取得與色調(diào)距離D HUE(x，y)相對(duì)應(yīng)的色調(diào)相關(guān)值 HCV(x,y)〇
[0144] [飽和度距離Dsat的計(jì)算:S75]
[0145] 接著，通過(guò)公式8計(jì)算飽和度距離DsAT(x，y) (S75)。飽和度距離DsAT(x，y)是以血樣 數(shù)據(jù)的飽和度Srrf為基準(zhǔn)的、判定用圖像數(shù)據(jù)J(x，y)的飽和度的相對(duì)值。
[0146]【公式8】
[0147] DsAT(X，y) =Sc〇rr. (X，y)_Sref
[0148] [飽和度相關(guān)值SCV的確定:S76]
[0149] 接著，根據(jù)飽和度距離DSAT(x，y)確定飽和度相關(guān)值SCV(x，y)(S76)。飽和度相關(guān)值 SCV(x，y)也是與炎癥部的重癥度具有強(qiáng)相關(guān)的參數(shù)。圖10(b)是圖不飽和度距咼Dsat與飽和 度相關(guān)值SCV的關(guān)系的圖表。飽和度距離D SAT在規(guī)定值以上的負(fù)的范圍（以下稱作"飽和度近 似范圍R22"。）內(nèi)與炎癥部的重癥度具有強(qiáng)相關(guān)，在負(fù)的規(guī)定值以下的范圍（以下稱作"飽和 度近似外范圍R 23"。）內(nèi)幾乎不存在相關(guān)。另外，可以認(rèn)定在飽和度距離DSAT為零以上的范圍， 即病變像素的飽和度為血樣數(shù)據(jù)的飽和度Sref以上的范圍（以下稱作"飽和度一致范圍 R21"。）內(nèi)，重癥度極高。因此，本實(shí)施方式的飽和度相關(guān)值SCV(x，y)在飽和度一致范圍R21內(nèi) 被設(shè)定為最大值的1.0，在飽和度近似外范圍R 23內(nèi)被設(shè)定為最小值的0.0，被設(shè)定在飽和度 近似范圍R22內(nèi)線性地增加。另外，飽和度相關(guān)值SCV(x，y)也是標(biāo)準(zhǔn)化為最小值為0.0、最大 值為1.0的值。
[0150] 圖10(b)所示的飽和度距離Dsat與飽和度相關(guān)值SCV的關(guān)系作為飽和度相關(guān)值表 SCT存儲(chǔ)于存儲(chǔ)器229。通過(guò)參照飽和度相關(guān)值表SCT，取得與飽和度距離DSAT(x，y)相對(duì)應(yīng)的 飽和度相關(guān)值SCV(x，y)。
[0151] [相關(guān)值CV的計(jì)算:S77]
[0152] 接著，通過(guò)將色調(diào)相關(guān)值HCV(x，y)與飽和度相關(guān)值SCV(x，y)相乘，得到病變像素 (X，y)的顏色和血液的顏色的相關(guān)值CV(X，y)。此外，相關(guān)值CV(X，y)也是標(biāo)準(zhǔn)化為最小值為 〇.〇、最大值為1.0的值。另外，相關(guān)值CV(x，y)以每0.1的點(diǎn)刻度被區(qū)分為11段。
[0153] [評(píng)分 Sc 更新:S78]
[0154] 另外，由于相關(guān)值CV(x，y)為炎癥的重癥度的優(yōu)良指標(biāo)，因此評(píng)分表ST的評(píng)分Sc (義，7)的值通過(guò)相關(guān)值(^(1，7)改寫(xiě)(578)。
[0155] [評(píng)分 Sc 更新:S79]
[0156] 另外，在像素(x，y)不是病變像素的情況下（S71:否），不進(jìn)行上述的相關(guān)值CV(x， y)的計(jì)算，并將評(píng)分表ST的評(píng)分Sc (X，y)的值改寫(xiě)為"0"（ S79)。由此，可以以少的計(jì)算量對(duì) 所有的像素(x，y)賦予評(píng)分Sc(x，y)。
[0157] 在處理S80中，判定是否完成對(duì)所有的像素（x，y)的處理。重復(fù)上述的處理S71~ S80,直至所有的像素(x，y)的處理完成為止。
[0158] [標(biāo)記處理：S8]
[0159] 評(píng)分計(jì)算處理S7完成后，接著通過(guò)標(biāo)記處理部226進(jìn)行標(biāo)記處理S8。標(biāo)記處理S8是 為了容易地識(shí)別病變部而對(duì)于普通觀察圖像NP向病變像素分布的圖像區(qū)域標(biāo)注標(biāo)記的處 理。具體而言，在本實(shí)施方式的標(biāo)記處理S8中，對(duì)病變像素分布的圖像區(qū)域標(biāo)注與該圖像區(qū) 域中的重癥度相對(duì)應(yīng)的的大小的記號(hào)(例如圖16中的"X""標(biāo)記330)。
[0160] 圖11為說(shuō)明標(biāo)記處理S8的推進(jìn)方法(掩模310的掃描）的圖。在本實(shí)施方式的標(biāo)記 處理S8中，在普通觀察圖像NP(以及評(píng)分表ST)內(nèi)設(shè)定作為規(guī)定尺寸的圖像區(qū)域的掩模310， 并依次移動(dòng)掩模310，同時(shí)，根據(jù)掩模310內(nèi)的像素311 (圖12)的評(píng)分Sc對(duì)掩模310內(nèi)的圖像 標(biāo)注標(biāo)記330。
[0161] [掩模的構(gòu)成]
[0162] 在本實(shí)施方式中，掩模310的大?。ㄒ约坝裳谀５拇笮〈_定的標(biāo)記330的大小)根據(jù) 掩模310內(nèi)的像素311的評(píng)分Sc進(jìn)行變動(dòng)。圖12為示出預(yù)先設(shè)定的初始尺寸的掩模310的圖。 在本實(shí)施方式中，掩模310的初始尺寸設(shè)定為5X5 (水平方向的像素?cái)?shù)X垂直方向的像素 數(shù)）。掩模310的初始尺寸例如根據(jù)標(biāo)注在掩模310內(nèi)的圖像上的標(biāo)記330的肉眼識(shí)別性(例 如依賴于標(biāo)記330的形狀的復(fù)雜度或者監(jiān)視器910的顯示畫(huà)面的像素?cái)?shù)等)進(jìn)行設(shè)定。具體 而言，掩模310的初始尺寸在確保標(biāo)記330的良好的肉眼識(shí)別性的范圍內(nèi)以盡可能顯示較多 的標(biāo)記330的方式設(shè)定為最小的尺寸。
[0163] 掩模尺寸參照存儲(chǔ)于存儲(chǔ)器229的掩模表MT并基于評(píng)分Sc來(lái)確定。表1為本實(shí)施方 式中使用的掩模表MT的一例。在本實(shí)施方式中，掩模尺寸以初始值(5 X 5)為下限，以與評(píng)分 Sc成比例地變大的方式設(shè)定。
[0164] 【表1】
[0166] 如圖12所示，將構(gòu)成掩模310的多個(gè)像素311中的左上端的像素（即，X坐標(biāo)以及y坐 標(biāo)均為最小的像素)稱為基準(zhǔn)點(diǎn)312。該基準(zhǔn)點(diǎn)312的位置( Xm、ym)定義為掩模310的位置。此 外，也可以將掩模310內(nèi)的任一像素設(shè)定為基準(zhǔn)點(diǎn)312。
[0167] [基準(zhǔn)點(diǎn)的掃描:S81]
[0168] 圖13為示出標(biāo)記處理S8的順序的流程圖。在標(biāo)記處理S8中，首先，復(fù)制存儲(chǔ)在圖像 存儲(chǔ)器227的存儲(chǔ)區(qū)域Pn*的普通觀察圖像數(shù)據(jù)N(原圖像)并作為標(biāo)記圖像數(shù)據(jù)Μ的初始值 存儲(chǔ)于存儲(chǔ)區(qū)域P m。另外，從存儲(chǔ)器229讀出評(píng)分表ST，并在評(píng)分表ST上進(jìn)行基準(zhǔn)點(diǎn)312的掃 描(S81)。在本實(shí)施方式中，基準(zhǔn)點(diǎn)312從評(píng)分表ST的上端的行(y = 0)向下端的行(y = ymax) 逐行地依次掃描(圖11)。另外，基準(zhǔn)點(diǎn)312在各行中從左端(X = 0)向右端(X = xmax)掃描。
[0169] 標(biāo)記處理部226-邊在評(píng)分表ST上掃描基準(zhǔn)點(diǎn)312-邊搜索滿足以下的條件a以及 條件b這兩者的位置(x，y)。
[0170] ?條件a:為病變像素[評(píng)分Sc(x，y)為0· 1以上]
[0171] ?條件b:掩模310與已經(jīng)標(biāo)注的標(biāo)記330(更準(zhǔn)確而言，標(biāo)注標(biāo)
[0172] 記330時(shí)的掩模310)不重疊。
[0173] [掩模設(shè)定:S82]
[0174] 當(dāng)?shù)竭_(dá)滿足上述的條件a以及條件b這兩者的位置(x，y)時(shí)，在該位置設(shè)定初始尺 寸(5X5)的掩模(S82)。
[0175] [掩模內(nèi)平均評(píng)分計(jì)算:S83]
[0176] 接著，計(jì)算作為掩模內(nèi)的像素的評(píng)分S c (X，y)的相加平均值的平均評(píng)分S c a v g. (S83)。此外，平均評(píng)分ScAvg. (S83)也被標(biāo)準(zhǔn)化為最小值為0.0、最大值為1.0的值。另外，平 均評(píng)分ScAvg.也能夠由代表掩模內(nèi)的評(píng)分Sc (X，y)的其他的數(shù)值(例如加權(quán)平均、中央值、眾 數(shù)、均方根等)代替。
[0177] [掩模尺寸更新S84]
[0178] 接著，參照存儲(chǔ)在存儲(chǔ)器229中的掩模表MT讀取與平均評(píng)分ScAvg.對(duì)應(yīng)的掩模尺 寸。并且，將掩模310的尺寸更新為讀取到的掩模尺寸(再設(shè)定掩模310) (S84)。
[0179] [標(biāo)記 S85]
[0180] 接著，對(duì)于標(biāo)記圖像數(shù)據(jù)M，以內(nèi)接于再設(shè)定后的掩模310的邊緣的方式標(biāo)注標(biāo)記 330(S85)。
[0181] 在處理S86中，判定是否掃描至評(píng)分表ST的最后而完成掃描。重復(fù)上述的處理S81 ~S86,直至掃描完所有的評(píng)分Sc(x，y)。
[0182][標(biāo)記處理的具體例子：圖14~20]
[0183] 接著，參照?qǐng)D14~20,對(duì)標(biāo)記處理S8的具體例子進(jìn)行說(shuō)明。圖14~20的普通觀察圖 像數(shù)據(jù)N(評(píng)分表ST)中包括由多個(gè)病變像素321構(gòu)成的病變部的圖像320。
[0184] 如圖14所示，當(dāng)在評(píng)分表ST上從左上開(kāi)始逐行地依次掃描掩模310的基準(zhǔn)點(diǎn)312 (S81)時(shí)，首先檢測(cè)出病變像素321a。
[0185] 在病變像素321a中，為了滿足上述的條件a以及條件b這兩者，以病變像素321a為 基準(zhǔn)點(diǎn)設(shè)定初始尺寸(5 X 5)的掩模310a(圖15的虛線框）（S82)。
[0186]接著，計(jì)算掩模31 Oa內(nèi)的評(píng)分Sc(X，y)的平均值(平均評(píng)分ScAvg.) (S83)。
[0187] 如果平均評(píng)分ScAvg.的計(jì)算結(jié)果為例如0.3的話，則從掩模表MT(表1)取得與該平 均評(píng)分Sc Avg.的值對(duì)應(yīng)的掩模尺寸7 X 7，并且將掩模310a的大小變更為7 X 7(圖15的實(shí)線 框)(S84)〇
[0188] 并且，對(duì)于標(biāo)記圖像MP，以內(nèi)接于掩模310a的邊緣的方式標(biāo)注"X"標(biāo)記330a (S85)。此外，在本實(shí)施方式中，雖然使用"X"作為標(biāo)記330,但是標(biāo)記330可以使用任意的標(biāo) 記(包括文字、數(shù)字、記號(hào)、圖畫(huà)文字、圖案等。但是，堵上掩模310的整體的標(biāo)記除外）。
[0189] 接著，再次掃描基準(zhǔn)點(diǎn)312(圖16)。由于之前設(shè)定的掩模310a內(nèi)不滿足上述的條件 b而跳過(guò)掃描。由于在病變像素321a的行上不存在滿足上述的條件a以及條件b這兩者的病 變像素321，因此，掃描移動(dòng)至下一行而檢測(cè)出病變像素321b。但是，如果以病變像素321b為 起點(diǎn)設(shè)定掩模310的話，則會(huì)與之前設(shè)定的掩模310發(fā)生干涉。因此，不在病變像素321b上設(shè) 定掩模310而繼續(xù)掃描。并且，在跳過(guò)之前設(shè)定的掩模310a之后即檢測(cè)出病變像素321c。
[0190] 在病變像素321c中，由于滿足了上述的條件a以及條件b這兩者，因此，以病變像素 321c為起點(diǎn)設(shè)定初始尺寸(5X5)的掩模310c(圖17)。如果掩模310c內(nèi)的平均評(píng)分Sc Avg.為 例如0.1的話，則對(duì)應(yīng)的掩模尺寸與初始尺寸(5 X 5) -樣，因此，掩模尺寸無(wú)需更新而以內(nèi) 接于掩模310c的邊緣的方式標(biāo)注"X"標(biāo)記330c。
[0191] 以后，重復(fù)同樣的處理S81~S86,對(duì)以病變像素321d為起點(diǎn)設(shè)定的掩模310d標(biāo)注 "X"標(biāo)記330d(圖18)，進(jìn)一步對(duì)以病變像素321e為起點(diǎn)設(shè)定的掩模310e標(biāo)注"X"標(biāo)記330e 之后（圖19)，完成普通觀察圖像數(shù)據(jù)N(評(píng)分表ST)的掃描。其結(jié)果是，在普通觀察圖像數(shù)據(jù)N 上得到標(biāo)注有顯示病變部的像素320的位置或其重癥度的分布的標(biāo)記330a、330c、330d、 330e的標(biāo)記圖像MP(圖20)。所生成的標(biāo)記圖像數(shù)據(jù)Μ被存儲(chǔ)在圖像存儲(chǔ)器227的存儲(chǔ)區(qū)域P m 中。
[0192] [顯示畫(huà)面生成處理~輸出處理:S9~S10]
[0193] 標(biāo)記處理S8完成后，接著進(jìn)行顯示畫(huà)面生成處理S9。顯示畫(huà)面生成處理S9是使用 存儲(chǔ)于圖像存儲(chǔ)器227的各種圖像數(shù)據(jù)生成用于在監(jiān)視器900上顯示的顯示畫(huà)面數(shù)據(jù)的處 理，通過(guò)圖像處理電路220的顯示畫(huà)面生成部228進(jìn)行。顯示畫(huà)面生成部228根據(jù)系統(tǒng)控制器 202的控制，能夠生成多種顯示畫(huà)面數(shù)據(jù)。所生成的顯示畫(huà)面數(shù)據(jù)在通過(guò)輸出電路220b進(jìn)行 圖像灰度校正等處理之后，被轉(zhuǎn)換為規(guī)定的視頻格式的視頻信號(hào)并向監(jiān)視器900輸出(輸出 處理S10)。
[0194] 圖21是通過(guò)顯示畫(huà)面生成處理S9生成的顯示畫(huà)面的一例，是在圖像分析模式下的 內(nèi)窺鏡觀察中顯示的分析模式觀察畫(huà)面340。分析模式觀察畫(huà)面340具備顯示拍攝日期時(shí)間 的日期時(shí)間顯示區(qū)域341、顯示與檢查相關(guān)的基本的信息(例如患者的病歷號(hào)、患者名、手術(shù) 者名）的基本信息顯示區(qū)域342、顯示普通觀察圖像NP(或者色調(diào)增強(qiáng)圖像EP)的普通圖像顯 示區(qū)域344、顯示標(biāo)記圖像MP(標(biāo)記處理S8之后的觀察圖像)的分析圖像顯示區(qū)域345。
[0195] 在顯示畫(huà)面生成處理S9中，顯示畫(huà)面生成部228從圖像存儲(chǔ)器227的存儲(chǔ)區(qū)域組Pn 讀出普通觀察圖像數(shù)據(jù)N(或者從存儲(chǔ)區(qū)域組Pe讀出色調(diào)增強(qiáng)圖像數(shù)據(jù)E)，并在圖像顯示區(qū) 域344顯示普通觀察圖像NP(或者色調(diào)增強(qiáng)圖像EP)。另外，從圖像存儲(chǔ)器227的存儲(chǔ)區(qū)域組 Pm讀出標(biāo)記圖像數(shù)據(jù)M，并在分析圖像顯示區(qū)域345顯示標(biāo)記圖像MP。另外，在日期顯示區(qū)域 341及基本信息顯示區(qū)域342顯示由系統(tǒng)控制器202提供的信息。
[0196] 手術(shù)者一邊觀看分析模式觀察畫(huà)面340-邊進(jìn)行內(nèi)窺鏡觀察。具體而言，參照分析 圖像顯示區(qū)域345所顯示的標(biāo)記圖像MP的同時(shí)，一邊查看普通圖像顯示區(qū)域344所顯示的普 通觀察圖像NP(或者色調(diào)增強(qiáng)圖像EP)-邊進(jìn)行內(nèi)窺鏡觀察。通過(guò)對(duì)于在標(biāo)記圖像MP上標(biāo)記 的部位進(jìn)行特別慎重的觀察，能夠在不遺漏病變部的情況下進(jìn)行準(zhǔn)確的診斷。
[0197] 另外，在本實(shí)施方式中，由于在標(biāo)記圖像MP上標(biāo)注了背景的普通觀察圖像NP透明 的標(biāo)記330,因此能夠一邊僅查看標(biāo)記圖像MP-邊進(jìn)行內(nèi)窺鏡觀察以及診斷。因此，例如也 可以為生成如下分析模式觀察畫(huà)面340的構(gòu)成，即，該分析模式觀察畫(huà)面340不包括普通圖 像顯示區(qū)域344而包括大的分析圖像顯示區(qū)域345。
[0198] 顯示畫(huà)面生成處理S9及輸出處理S10完成后，接著判斷是否繼續(xù)內(nèi)窺鏡觀察 (S11)。重復(fù)上述的處理S1~S11，直至對(duì)處理器200的操作面板214進(jìn)行指示內(nèi)窺鏡觀察結(jié) 束或電子內(nèi)窺鏡裝置1的運(yùn)行停止的用戶操作(S11:否)為止。
[0199] 以上是本發(fā)明的第一實(shí)施方式的說(shuō)明。根據(jù)上述的本發(fā)明的第一實(shí)施方式的構(gòu) 成，由于在標(biāo)記圖像MP中，在病變部的圖像320上標(biāo)注有顯示病變部的位置及重癥度的標(biāo)記 330,因此，即使是內(nèi)窺鏡觀察經(jīng)驗(yàn)少的手術(shù)者也能夠在不會(huì)遺漏病變部或者誤判重癥度的 情況下進(jìn)行利用內(nèi)窺鏡圖像的正確的診斷。另外，在標(biāo)記圖像MP上標(biāo)注未完全地覆蓋背景 (病變部的圖像320)而使得背景的一部分從空隙透過(guò)的（即，具有透過(guò)性)標(biāo)記330。從而，從 標(biāo)記圖像MP也能夠把握病變部的形狀或結(jié)構(gòu)，從而能夠進(jìn)行更加有效且更加正確的診斷。
[0200] 此外，在上述的第一實(shí)施方式中，通過(guò)在普通觀察圖像NP上標(biāo)注標(biāo)記330而生成了 標(biāo)記圖像MP，但是，也可以構(gòu)成為在色調(diào)增強(qiáng)圖像EP等其他的對(duì)于普通觀察圖像NP進(jìn)行加 工而得到的圖像上標(biāo)注標(biāo)記330而生成標(biāo)記圖像MP。
[0201] <第一實(shí)施方式的第一變形例>
[0202] 接著，對(duì)以上說(shuō)明的本發(fā)明的第一實(shí)施方式的幾個(gè)變形例進(jìn)行說(shuō)明。
[0203] 圖22為本發(fā)明的第一實(shí)施方式的第一變形例的標(biāo)記圖像MP。在上述的第一實(shí)施方 式中，采用了如下構(gòu)成:在掩模尺寸更新處理S84中，根據(jù)掩模310內(nèi)的平均評(píng)分Sc Avg.更新 掩模尺寸，并且通過(guò)標(biāo)記330的大小來(lái)表現(xiàn)重癥度。另一方面，在第一變形例中，根據(jù)掩模 310內(nèi)的平均評(píng)分Sc Avg.來(lái)設(shè)定標(biāo)注在掩模310內(nèi)的標(biāo)記330的數(shù)量而非掩模尺寸。在本變形 例中，通過(guò)標(biāo)記330的密度來(lái)表現(xiàn)重癥度。
[0204]此外，在本變形例中，代替上述的第一實(shí)施方式中的掩模表MT(表1)，使用存儲(chǔ)有 掩模310內(nèi)的平均評(píng)分S c AV g.和應(yīng)該標(biāo)注在掩模內(nèi)的標(biāo)記的數(shù)量的對(duì)應(yīng)關(guān)系的標(biāo)記數(shù)量表。 表2中示出標(biāo)記數(shù)量表的例子。
[0205]【表2】
[0207] <第一實(shí)施方式的第二變形例>
[0208] 圖23為本發(fā)明的第一實(shí)施方式的第二變形例的標(biāo)記圖像MP。在上述的第一實(shí)施方 式中，采用了如下構(gòu)成:通過(guò)在掩模310內(nèi)標(biāo)注文字或記號(hào)來(lái)對(duì)普通觀察圖像NP實(shí)施標(biāo)記。 另一方面，在本變形例中，通過(guò)根據(jù)掩模310內(nèi)的平均評(píng)分Sc Avg.來(lái)實(shí)施對(duì)于普通觀察圖像 NP變更掩模310內(nèi)的顏色(換言之，標(biāo)注彩色的標(biāo)記）的處理來(lái)表現(xiàn)病變部的位置及其重癥 度。
[0209] 另外，在本實(shí)施例中，對(duì)于普通觀察圖像NP并非將掩模內(nèi)以單一的顏色（透過(guò)率 〇%)涂滿，而是在普通觀察圖像NP上標(biāo)注賦予規(guī)定的透過(guò)性(例如透過(guò)率80%)的顏色。因 此，與第一實(shí)施方式同樣地，由于在標(biāo)記圖像MP上也保留有病變部的圖像的信息，因此，與 以規(guī)定的顏色涂滿病變部的現(xiàn)有的方法相比，能夠容易地進(jìn)行正確的診斷。
[0210] 另外，在本變形例中，由于無(wú)需識(shí)別標(biāo)注在病變部的記號(hào)的形狀，因此能夠形成為 將掩模的尺寸較小地設(shè)定至IX 1(或者不設(shè)定掩模而逐個(gè)像素進(jìn)行處理)的構(gòu)成。
[0211] 此外，在本變形例中，代替上述的第一實(shí)施方式中的掩模表MT(表1)而使用存儲(chǔ)有 各像素(x，y)的評(píng)分Sc(x，y)和應(yīng)該標(biāo)注于各像素(x，y)的顏色Col(x，y)的對(duì)應(yīng)關(guān)系的顯示 色表。表3中示出顯示色表(24位顏色）的例子。此外，由于對(duì)于評(píng)分Sc(x，y)的值為零(正常 組織）的像素(x，y)賦予顯示無(wú)色透明的空值(null值），因此正常組織的像素不被著色。另 外，應(yīng)該對(duì)各像素(x，y)標(biāo)注的顏色的指定不限于利用RGB進(jìn)行的指定，也可以通過(guò)其他的 顏色表現(xiàn)(例如色調(diào)和/或飽和度)來(lái)指定。
[0212] 【表3】
[0214] <第二實(shí)施方式>
[0215] 接著，對(duì)本發(fā)明的第二實(shí)施方式進(jìn)行說(shuō)明。
[0216] 圖24為示出本發(fā)明的第二實(shí)施方式的標(biāo)記處理S8a的順序的流程圖。本實(shí)施方式 的標(biāo)記處理S8a代替上述的第一實(shí)施方式的標(biāo)記處理S8進(jìn)行。另外，對(duì)構(gòu)成普通觀察圖像數(shù) 據(jù)N的所有的像素(x，y)依次進(jìn)行本實(shí)施方式的標(biāo)記處理S8a。
[0217] 本實(shí)施方式的電子內(nèi)窺鏡裝置1與上述的第一實(shí)施方式的第二變形例同樣地，在 存儲(chǔ)器229中存儲(chǔ)有顯示色表(表3)。另外，在本實(shí)施方式的圖像存儲(chǔ)器227中除了存儲(chǔ)區(qū)域 ?"、？6、?》之外還設(shè)置有存儲(chǔ)區(qū)域匕(參照?qǐng)D3(13))，所述存儲(chǔ)區(qū)域匕存儲(chǔ)標(biāo)記處理58 &中作成 的彩色圖像數(shù)據(jù)CM(顯示彩色圖像CMP的圖像數(shù)據(jù)）。
[0218] [彩色圖像數(shù)據(jù)生成:S81a]
[0219] 在標(biāo)記處理S8a中，首先參照存儲(chǔ)在存儲(chǔ)器229中的顯示色表，基于評(píng)分Sc(X，y)來(lái) 確定適用于各像素(x，y)的顏色Col(x，y)。此外，病變像素以外的像素的顏色Col(x，y)設(shè)定 為無(wú)色透明（null值）。并且，生成由各像素(x，y)的顏色Col(x，y)構(gòu)成的彩色圖像數(shù)據(jù)CM， 并將其存儲(chǔ)在存儲(chǔ)器229的存儲(chǔ)區(qū)域P c*(S81a)。
[0220] [圖像混合處理：S82a]
[0221] 接著，對(duì)彩色圖像CMP賦予透過(guò)性并進(jìn)行將其重合于普通觀察圖像NP上的圖像混 合處理S82a。具體而言，圖像混合處理S82a為將普通觀察圖像數(shù)據(jù)N和彩色圖像數(shù)據(jù)CM進(jìn)行 加權(quán)平均的處理。通過(guò)進(jìn)行加權(quán)平均，能夠賦予彩色圖像CMP以透過(guò)性并使其與普通觀察圖 像NP重合。此外，加權(quán)平均中的普通觀察圖像數(shù)據(jù)N的權(quán)重（重辦）由預(yù)先設(shè)定的彩色圖像 CMP的透過(guò)率確定。通過(guò)圖像混合處理S82a生成的標(biāo)記圖像數(shù)據(jù)Μ被存儲(chǔ)在圖像存儲(chǔ)器227 的存儲(chǔ)區(qū)域匕中，從而完成標(biāo)記處理S8a。此外，加權(quán)平均僅對(duì)病變像素(評(píng)分Sc( X，y)>0) 進(jìn)行，對(duì)于健康的正常部分(評(píng)分Sc(x，y) = 0)的像素(x，y)，普通觀察圖像數(shù)據(jù)N的像素值N (x，y)不變而為標(biāo)記圖像數(shù)據(jù)Μ的像素值M(x，y)。
[0222] 在此，參照?qǐng)D25對(duì)圖像混合處理S82a的效果進(jìn)行說(shuō)明。
[0223] 圖25(a)為包括病變部的圖像320的普通觀察圖像NP。
[0224] 圖25(b)為在普通觀察圖像NP上直接地重合了彩色圖像CMP的圖像(透過(guò)率0 % )。
[0225] 圖25(c)為通過(guò)本實(shí)施方式的圖像混合處理S82a生成的標(biāo)記圖像MP。
[0226] 從圖25(b)和（c)的比較可清楚得知，通過(guò)圖像混合處理S82a生成的標(biāo)記圖像MP， 根據(jù)彩圖而能夠從視覺(jué)上容易地把握被推定為病變部的部位或者推定的重癥度。另外，由 于彩圖具有透過(guò)性，因此，從標(biāo)記圖像MP也能夠在某種程度上把握病變部的形狀和結(jié)構(gòu)，能 夠更加容易地進(jìn)行診斷。
[0227] <第三實(shí)施方式>
[0228] 接著，對(duì)本發(fā)明的第三實(shí)施方式進(jìn)行說(shuō)明。在本實(shí)施方式中，通過(guò)在普通觀察圖像 NP上重合顯示Sc(x，y)的等高線CL，從而肉眼確認(rèn)性良好地顯示病變部的位置或重癥度的 分布。
[0229] 圖26為說(shuō)明第三實(shí)施方式中的等高線CL的作成過(guò)程的圖。在本實(shí)施方式中，首先， 基于從圖26(a)中所示的包括病變部的圖像320的普通觀察圖像NP生成的評(píng)分表ST，參照顯 示色表(表3)，生成圖26(b)中所示的彩色圖像CMP。通過(guò)對(duì)該彩色圖像CMP進(jìn)行例如對(duì)于彩 色圖像數(shù)據(jù)CM的矢量微分運(yùn)算等的處理，生成等高線CL。通過(guò)使如此生成的等高線CL重合 在普通觀察圖像NP上，生成圖26 (c)中所示的本實(shí)施方式的標(biāo)記圖像MP。
[0230] 以上是本發(fā)明的例示性的實(shí)施方式的說(shuō)明。本發(fā)明的實(shí)施方式不限于上述說(shuō)明的 方式，在本發(fā)明的技術(shù)思想的范圍內(nèi)可以進(jìn)行各種變形。例如，通過(guò)適當(dāng)組合說(shuō)明書(shū)中例示 性明示的實(shí)施方式等或顯而易見(jiàn)的實(shí)施方式等而得到的內(nèi)容也包含在本發(fā)明的實(shí)施方式 中。
[0231] 在上述的實(shí)施方式中，雖然在HSI空間中進(jìn)行了病變的判定等的圖像分析，但是， 也可以為代替HIS空間而在以色調(diào)（hue)、飽和度（saturation)以及明度（value(或者 brightness))為基底的HSV(HSB)空間中進(jìn)行圖像解析的構(gòu)成。另外，還可以在CIE1976L*a* b色彩空間或YCbCr色彩空間等的、具有顯示亮度或者明度的一個(gè)座標(biāo)和顯示顏色的性質(zhì) (例如色調(diào)以及飽和度，或者色度)的兩個(gè)座標(biāo)的其他種類的色彩空間上進(jìn)行圖像解析。
[0232] 另外，在上述的實(shí)施方式中，雖然在RGB空間上進(jìn)行了 TE處理S3,但是，也可以為在 色彩空間轉(zhuǎn)換處理S5之后在HIS空間上進(jìn)行TE處理S3的構(gòu)成。
[0233] 另外，也可以代替TE處理S3(色彩增強(qiáng)處理）而應(yīng)用對(duì)比度增強(qiáng)處理(例如通過(guò)擴(kuò) 大直方圖的分布寬度而增強(qiáng)對(duì)比度的直方圖等化法等)或使用了非銳化掩模濾光器的圖像 銳化處理等其他種類的圖像增強(qiáng)處理。
[0234] 另外，上述的實(shí)施方式是在炎癥性腸病的內(nèi)窺鏡檢查中應(yīng)用了本發(fā)明的例子，當(dāng) 然，也可以在其他的疾病的內(nèi)窺鏡檢查中應(yīng)用本發(fā)明。
[0235] 另外，上述的實(shí)施方式為，基于觀察圖像僅評(píng)價(jià)了一種病變(炎癥)的重癥度，并且 對(duì)觀察圖像的相應(yīng)部位標(biāo)注與其重癥度對(duì)應(yīng)的標(biāo)記的例子，但是，也可以為對(duì)多種病變(例 如作為炎癥性腸病中代表性的病變的炎癥和潰瘍)分別判定重癥度，并且對(duì)觀察圖像的相 應(yīng)部位標(biāo)注與其重癥度對(duì)應(yīng)的標(biāo)記的構(gòu)成。另外，在這種情況下，也可以根據(jù)按照病變的種 類來(lái)改變顯示方式(例如記號(hào)的種類或顏色）。
[0236] 另外，在上述的實(shí)施方式中，僅對(duì)病變部標(biāo)注標(biāo)記，但是，與之相反也可以為僅對(duì) 健康的正常部分標(biāo)注標(biāo)記的構(gòu)成。另外，也可以為分別對(duì)病變部和健康的正常部分分別標(biāo) 注不同的標(biāo)記的構(gòu)成。
[0237] 另外，在上述的實(shí)施方式中，使用記號(hào)、等高線以及顯示色中的某一種來(lái)顯示病變 部的重癥度，但是，也可以組合這三種顯示方式的兩種以上來(lái)顯示病變部的重癥度。另外， 也可以為通過(guò)記號(hào)的種類、大小、顏色中兩種以上的組合來(lái)顯示重癥度的構(gòu)成。另外，也可 以為通過(guò)組合等高線的種類(實(shí)線、虛線、點(diǎn)劃線、波浪線等）、粗細(xì)、顏色中的某一種或者上 述的兩種以上來(lái)顯示重癥度的構(gòu)成。
[0238] 此外，上述的實(shí)施方式是將本發(fā)明應(yīng)用于作為數(shù)碼相機(jī)的一種形式的電子內(nèi)窺鏡 裝置的例子，但也可以將本發(fā)明適用于使用了其他種類的數(shù)碼相機(jī)(例如數(shù)碼相機(jī)或數(shù)碼 攝像機(jī))的系統(tǒng)。例如，將本發(fā)明應(yīng)用于數(shù)碼相機(jī)時(shí)，能夠進(jìn)行體表組織的病變部的診斷支 援或開(kāi)顱手術(shù)時(shí)的腦組織的診斷支援。
【主權(quán)項(xiàng)】
1. 一種圖像處理裝置，其特征在于， 包括： 彩色圖像取得單元，其取得顯示生物體組織的彩色圖像的彩色圖像數(shù)據(jù)； 病變判定單元，其基于所述彩色圖像數(shù)據(jù)對(duì)于所述彩色圖像的各像素進(jìn)行是否為病變 部的像素的判定； 標(biāo)記單元，其基于所述判定的結(jié)果在所述彩色圖像上標(biāo)注顯示所述病變部的位置的標(biāo) 記； 其中，所述標(biāo)記為背景的所述彩色圖像透明的標(biāo)記。2. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于， 所述病變判定單元具有評(píng)分表生成單元，所述評(píng)分表生成單元生成評(píng)分表，所述評(píng)分 表的要素中包括對(duì)于所述彩色圖像的每個(gè)像素顯示所述生物體組織的病變的重癥度的評(píng) 分， 所述標(biāo)記單元基于所述評(píng)分表在所述彩色圖像上標(biāo)注顯示所述病變部的位置以及重 癥度的所述標(biāo)記。3. 根據(jù)權(quán)利要求2所述的圖像處理裝置，其特征在于， 所述標(biāo)記單元在所述彩色圖像內(nèi)設(shè)定作為處理的對(duì)象區(qū)域的掩模，計(jì)算所述掩模內(nèi)的 所述評(píng)分的代表值，基于所述代表值對(duì)于所述掩模標(biāo)注所述標(biāo)記。4. 根據(jù)權(quán)利要求3所述的圖像處理裝置，其特征在于， 所述標(biāo)記單元設(shè)定規(guī)定的初始尺寸的掩模，對(duì)于所述初始尺寸的掩模計(jì)算所述代表 值，根據(jù)所述代表值變更所述掩模的大小，以內(nèi)接于變更了大小的所述掩模的方式標(biāo)注所 述標(biāo)記。5. 根據(jù)權(quán)利要求4所述的圖像處理裝置，其特征在于， 所述初始尺寸為所述掩模的最小尺寸。6. 根據(jù)權(quán)利要求3所述的圖像處理裝置，其特征在于， 所述標(biāo)記單元在所述掩模內(nèi)標(biāo)注與所述代表值的數(shù)量相對(duì)應(yīng)的所述標(biāo)記。7. 根據(jù)權(quán)利要求3至6中任一項(xiàng)所述的圖像處理裝置，其特征在于， 所述標(biāo)記單元一邊在所述彩色圖像內(nèi)掃描所述掩模，一邊在所述彩色圖像上標(biāo)注所述 記 D8. 根據(jù)權(quán)利要求7所述的圖像處理裝置，其特征在于， 所述標(biāo)記單元以與設(shè)定完成的其他的所述掩模不重合的方式設(shè)定所述掩模。9. 根據(jù)權(quán)利要求3至8中任一項(xiàng)所述的圖像處理裝置，其特征在于， 所述代表值為相加平均、加權(quán)平均、中央值、眾數(shù)以及均方根中的任何一個(gè)。10. 根據(jù)權(quán)利要求2至9中任一項(xiàng)所述的圖像處理裝置，其特征在于， 所述評(píng)分表生成單元包括： 色彩空間轉(zhuǎn)換單元，其將所述彩色圖像數(shù)據(jù)的色彩空間轉(zhuǎn)換為具有顯示亮度或者明度 的一個(gè)座標(biāo)和顯示顏色的性質(zhì)的兩個(gè)座標(biāo)的色彩空間； 評(píng)分計(jì)算單元，其基于所述彩色圖像數(shù)據(jù)的各像素的顏色的性質(zhì)計(jì)算各像素的評(píng)分。11. 根據(jù)權(quán)利要求10所述的圖像處理裝置，其特征在于， 所述評(píng)分表生成單元進(jìn)一步包括色彩增強(qiáng)單元，所述色彩增強(qiáng)單元在病變部所特有的 像素值的范圍的邊界區(qū)域內(nèi)進(jìn)行提高顏色的性質(zhì)的對(duì)比度的色彩增強(qiáng)處理， 所述評(píng)分計(jì)算單元基于所述色彩增強(qiáng)處理之后的像素值計(jì)算各像素的評(píng)分。12. 根據(jù)權(quán)利要求10或11所述的圖像處理裝置，其特征在于， 所述評(píng)分計(jì)算單元基于與色調(diào)-飽和度空間或者色度空間中的基準(zhǔn)點(diǎn)的距離計(jì)算各像 素的評(píng)分。13. 根據(jù)權(quán)利要求12所述的圖像處理裝置，其特征在于， 所述病變部為炎癥部，所述基準(zhǔn)點(diǎn)為血液的顏色。14. 根據(jù)權(quán)利要求1至13中任一項(xiàng)所述的圖像處理裝置，其特征在于， 所述標(biāo)記為記號(hào)。15. 根據(jù)權(quán)利要求1至14中任一項(xiàng)所述的圖像處理裝置，其特征在于， 所述標(biāo)記為具有透過(guò)率的顏色。16. 根據(jù)權(quán)利要求2所述的圖像處理裝置，其特征在于， 所述標(biāo)記為所述重癥度的等高線。17. 根據(jù)權(quán)利要求1至16中任一項(xiàng)所述的圖像處理裝置，其特征在于， 所述彩色圖像為電子內(nèi)窺鏡圖像。
【文檔編號(hào)】A61B1/04GK106068092SQ201680000508
【公開(kāi)日】2016年11月2日
【申請(qǐng)日】2016年2月8日
【發(fā)明人】池本洋祐, 水口直志, 小師敦, 橘俊雄, 太田紀(jì)子
【申請(qǐng)人】Hoya株式會(huì)社