專(zhuān)利名稱(chēng):圖像處理系統(tǒng)、圖像處理裝置、圖像拾取裝置及方法
技術(shù)領(lǐng)域:
本發(fā)明涉及用于處理在醫(yī)學(xué)、病理學(xué)、生物學(xué)、材料科學(xué)等領(lǐng)域中通過(guò)顯微鏡獲取 的圖像信息的圖像處理系統(tǒng)、圖像處理裝置、圖像處理方法以及程序。
背景技術(shù):
在醫(yī)學(xué)、病理學(xué)等領(lǐng)域中,已經(jīng)提出了如下系統(tǒng),S卩,將通過(guò)光學(xué)顯微鏡所獲得的 諸如生物體的細(xì)胞、組織、器官等的待觀察對(duì)象物的圖像數(shù)字化,從而由醫(yī)生或病理學(xué)家根 據(jù)數(shù)字化的圖像來(lái)檢查組織等或診斷患者。上述系統(tǒng)通常稱(chēng)為虛擬顯微鏡系統(tǒng)。例如,日本專(zhuān)利申請(qǐng)公開(kāi)第2009-37250號(hào)(下文中,稱(chēng)為專(zhuān)利文獻(xiàn)1)披露了如下 方法,即,將根據(jù)放置在顯微鏡鏡臺(tái)上的載玻片樣本(slide specimen)光學(xué)地獲得的圖像 通過(guò)具有CXD (電荷藕接器件)的攝像機(jī)數(shù)字化,將其數(shù)字信號(hào)輸入至PC (個(gè)人計(jì)算機(jī)), 并且在監(jiān)控器上顯現(xiàn)圖像。病理學(xué)家在觀察監(jiān)控器上所顯示的圖像的同時(shí)進(jìn)行檢查等(例 如,見(jiàn)專(zhuān)利文獻(xiàn)1第
段和第
段和圖5)。在虛擬顯微鏡系統(tǒng)中,通過(guò)圖像拾取裝置獲得的圖像的原始數(shù)據(jù)經(jīng)由總線傳送至 PC(圖像處理裝置)。此處,就HDD (硬盤(pán)驅(qū)動(dòng)器)的寫(xiě)入速度而言,很難在PC的HDD中直 接存儲(chǔ)原始數(shù)據(jù)。鑒于此,想到在對(duì)原始數(shù)據(jù)進(jìn)行諸如顯像處理和壓縮處理的各種圖像處 理使其變?yōu)榘↗PEG格式等的預(yù)定格式后,由PC將原始數(shù)據(jù)存儲(chǔ)在HDD中。然而,在圖像拾取裝置在觀察對(duì)象物正在鏡臺(tái)上移動(dòng)的同時(shí)連續(xù)獲取觀察對(duì)象物 的不同區(qū)域的圖像并且PC實(shí)時(shí)處理圖像的情況下,如果PC過(guò)載,則在原始數(shù)據(jù)從圖像拾取 裝置側(cè)向計(jì)算機(jī)側(cè)傳輸?shù)倪^(guò)程中,在圖像數(shù)據(jù)的一部分中恐怕會(huì)出現(xiàn)缺陷。特別地,在醫(yī)學(xué)領(lǐng)域中,用虛擬顯微鏡處理的圖像與病理診斷直接相關(guān)。因此,不 僅不允許數(shù)據(jù)中的缺陷,而且也不允許對(duì)于圖像的局部補(bǔ)充。另外,如果造成了數(shù)據(jù)中的缺 陷,則圖像數(shù)據(jù)可以再次從圖像拾取裝置側(cè)傳送至PC側(cè)。但是,在這種情況下,對(duì)應(yīng)于其中 引起了缺陷的圖像的量會(huì)引起浪費(fèi)的帶域(wasted band)和等待時(shí)間(latency time)。
發(fā)明內(nèi)容
在一個(gè)示例性實(shí)施方式中,信息處理系統(tǒng)包括處理器;圖像拾取裝置,可操作地 連接至具有用于支撐觀察對(duì)象物(即,病理樣本)的鏡臺(tái)的顯微鏡,鏡臺(tái)處于第一位置;以 及存儲(chǔ)設(shè)備,可操作地耦接至處理器,存儲(chǔ)設(shè)備具有緩沖器,所述緩沖器具有數(shù)據(jù)量,存儲(chǔ) 設(shè)備存儲(chǔ)響應(yīng)于包括預(yù)定量的數(shù)據(jù)量使處理器執(zhí)行以下處理的指令(a)使鏡臺(tái)從第一位 置移動(dòng)至不同的第二位置;(b)使緩沖器在鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與觀察對(duì)象物相關(guān)聯(lián) 的圖像,所述圖像由圖像拾取裝置連續(xù)地捕獲;以及(c)其后,響應(yīng)于不包括預(yù)定量的數(shù)據(jù)量,使圖像拾取裝置終止圖像的捕獲。在一個(gè)示例性實(shí)施方式中,圖像拾取裝置包括處理器。在一個(gè)示例性實(shí)施方式中, 信息處理系統(tǒng)包括包含處理器的信息處理裝置。在一個(gè)示例性實(shí)施方式中,指令使所述處理器與另一處理器協(xié)作,對(duì)指定的捕獲 的圖像執(zhí)行圖像處理。在一個(gè)示例性實(shí)施方式中,信息處理裝置經(jīng)由雙向通信通道連接至圖像拾取裝置。在一個(gè)示例性實(shí)施方式中,信息處理裝置包括存儲(chǔ)設(shè)備。在一個(gè)示例性實(shí)施方式中,指令使處理器(a)確定鏡臺(tái)是否具有第一狀態(tài);以及 (b)響應(yīng)于鏡臺(tái)具有第一狀態(tài),使鏡臺(tái)從第一位置移動(dòng)至不同的第二位置。在一個(gè)示例性實(shí)施方式中,如果鏡臺(tái)沒(méi)有正在移動(dòng),則鏡臺(tái)具有第一狀態(tài)。在一個(gè)示例性實(shí)施方式中,顯微鏡包括傳感器。在該示例性實(shí)施方式中,指令使處 理器(a)確定傳感器是否具有第二狀態(tài);以及(b)響應(yīng)于傳感器具有第二狀態(tài),使鏡臺(tái)從 第一位置移動(dòng)至不同的第二位置。在一個(gè)示例性實(shí)施方式中,如果傳感器處于待機(jī)狀態(tài),則傳感器具有第二狀態(tài)。在一個(gè)示例性實(shí)施方式中,指令使處理器確定數(shù)據(jù)量是否包括預(yù)定量。在一個(gè)示例性實(shí)施方式中,指令使處理器通過(guò)確定數(shù)據(jù)量是否小于最大容量來(lái)確 定數(shù)據(jù)量是否包括預(yù)定量。在一個(gè)示例性實(shí)施方式中,顯微鏡包括傳感器。在該示例性實(shí)施方式中,指令使處 理器(a)確定鏡臺(tái)是否具有第一狀態(tài);(b)確定傳感器是否具有第二狀態(tài);以及(c)響應(yīng) 于(i)鏡臺(tái)具有第一狀態(tài);以及(ii)傳感器具有第二狀態(tài),使鏡臺(tái)從第一位置移動(dòng)至不同 的第二位置。在一個(gè)示例性實(shí)施方式中,指令使處理器與另一處理器協(xié)作,對(duì)指定的捕獲的圖 像進(jìn)行以下處理(a)執(zhí)行輸入處理;(b)其后,執(zhí)行顯像處理;(c)其后,執(zhí)行縫合處理; (d)其后,執(zhí)行編碼處理;以及(e)其后,執(zhí)行存儲(chǔ)處理。在一個(gè)示例性實(shí)施方式中,指令使處理器向圖像拾取裝置發(fā)出閥開(kāi)啟命令。在一個(gè)示例性實(shí)施方式中,信息處理系統(tǒng)包括(a)圖像拾取裝置,可操作地連接 至具有用于支撐觀察對(duì)象物的鏡臺(tái)的顯微鏡,所述鏡臺(tái)處于第一位置;以及(b)存儲(chǔ)設(shè)備, 具有緩沖器,所述緩沖器具有數(shù)據(jù)量,方法包括在該示例性實(shí)施方式中,操作信息處理系 統(tǒng)的方法包括,響應(yīng)于包括預(yù)定量的數(shù)據(jù)量,使處理器執(zhí)行指令,以(a)使鏡臺(tái)從第一位 置移動(dòng)至不同的第二位置;(b)使緩沖器在鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與觀察對(duì)象物相關(guān)聯(lián) 的圖像,所述圖像由圖像拾取裝置連續(xù)地捕獲;以及(c)其后,響應(yīng)于不包括預(yù)定量的數(shù)據(jù) 量,使圖像拾取裝置終止圖像的捕獲。在一個(gè)示例性實(shí)施方式中,信息處理裝置包括處理器,可操作地連接至圖像拾取 裝置,圖像拾取裝置可操作地連接至具有用于支撐觀察對(duì)象物(即,病理樣本)的鏡臺(tái)的 顯微鏡,所述鏡臺(tái)處于第一位置;以及存儲(chǔ)設(shè)備,可操作地耦接至處理器,存儲(chǔ)設(shè)備具有緩 沖器,所述緩沖器具有數(shù)據(jù)量,存儲(chǔ)設(shè)備存儲(chǔ)使處理器響應(yīng)于包括預(yù)定量的數(shù)據(jù)量來(lái)執(zhí)行 以下處理的指令(a)使鏡臺(tái)從第一位置移動(dòng)至不同的第二位置;(b)使緩沖器在鏡臺(tái)正在 移動(dòng)的同時(shí)存儲(chǔ)與觀察對(duì)象物相關(guān)聯(lián)的圖像,所述圖像由圖像拾取裝置連續(xù)地捕獲;以及(C)其后,響應(yīng)于不包括預(yù)定量的數(shù)據(jù)量,使圖像拾取裝置終止圖像的捕獲。在一個(gè)示例性實(shí)施方式中,指令使處理器(a)確定鏡臺(tái)是否具有第一狀態(tài);以及 (b)響應(yīng)于鏡臺(tái)具有第一狀態(tài),使鏡臺(tái)從第一位置移動(dòng)至不同的第二位置。在一個(gè)示例性實(shí)施方式中,顯微鏡包括傳感器。在該示例性實(shí)施方式中,指令使處 理器(a)確定傳感器是否具有第二狀態(tài);以及(b)響應(yīng)于傳感器具有第二狀態(tài),使鏡臺(tái)從 第一位置移動(dòng)至不同的第二位置。在一個(gè)示例性實(shí)施方式中,指令使處理器確定數(shù)據(jù)量是否包括預(yù)定量。在一個(gè)示 例性實(shí)施方式中,指令使處理器通過(guò)確定數(shù)據(jù)量是否小于最大容量來(lái)確定數(shù)據(jù)量是否包括
預(yù)定量。在一個(gè)示例性實(shí)施方式中,顯微鏡包括傳感器。在該示例性實(shí)施方式中,指令使處 理器(a)確定鏡臺(tái)是否具有第一狀態(tài);(b)確定傳感器是否具有第二狀態(tài);以及(c)響應(yīng) 于(i)鏡臺(tái)具有第一狀態(tài)以及(ii)傳感器具有第二狀態(tài),使鏡臺(tái)從第一位置移動(dòng)至不同 的第二位置。在一個(gè)示例性實(shí)施方式中,指令使處理器與另一處理器協(xié)作,對(duì)指定的捕獲圖像 進(jìn)行以下處理(a)執(zhí)行輸入處理;(b)其后,執(zhí)行顯像處理;(c)其后,執(zhí)行縫合處理;(d) 其后,執(zhí)行編碼處理;以及(e)其后,執(zhí)行存儲(chǔ)處理。在一個(gè)示例性實(shí)施方式中,指令使處理器向圖像拾取裝置發(fā)出閥開(kāi)啟命令。在一個(gè)示例性實(shí)施方式中,指令使處理器與另一處理器協(xié)作,對(duì)指定的捕獲的圖 像執(zhí)行圖像處理。在一個(gè)示例性實(shí)施方式中,信息處理裝置包括處理器,可操作地連接至圖像拾取 裝置,圖像拾取裝置可操作地連接至具有用于支撐觀察對(duì)象物的鏡臺(tái)的顯微鏡,鏡臺(tái)處于 第一位置;以及存儲(chǔ)設(shè)備,可操作地耦接至處理器,存儲(chǔ)設(shè)備具有緩沖器,所述緩沖器具有 數(shù)據(jù)量,方法包括在一個(gè)示例性實(shí)施方式中,操作信息處理裝置的方法包括,響應(yīng)于包括 預(yù)定量的數(shù)據(jù)量,使處理器執(zhí)行指令,以(a)使鏡臺(tái)從第一位置移動(dòng)至不同的第二位置; (b)使緩沖器在鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與觀察對(duì)象物相關(guān)聯(lián)的圖像,所述圖像由圖像拾 取裝置連續(xù)地捕獲;以及(c)其后,響應(yīng)于不包括預(yù)定量的數(shù)據(jù)量,使圖像拾取裝置終止圖 像的捕獲。在一個(gè)示例性實(shí)施方式中,存儲(chǔ)指令的計(jì)算機(jī)可讀介質(zhì)存儲(chǔ)指令,所述指令被構(gòu) 造為使信息處理裝置響應(yīng)于包括預(yù)定量的數(shù)據(jù)量(a)使鏡臺(tái)從第一位置移動(dòng)至不同的第 二位置;(b)使緩沖器在鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與觀察對(duì)象物相關(guān)聯(lián)的圖像,所述圖像 由圖像拾取裝置連續(xù)地捕獲;以及(c)其后,響應(yīng)于不包括預(yù)定量的數(shù)據(jù)量,使圖像拾取裝 置終止圖像得捕獲。在一個(gè)示例性實(shí)施方式中,圖像拾取裝置包括處理器,所述處理器可操作地連接 至(a)顯微鏡,具有用于支撐觀察對(duì)象物(即,病理樣本)的鏡臺(tái),鏡臺(tái)處于第一位置;以 及(b)信息處理裝置,具有第一存儲(chǔ)設(shè)備,第一存儲(chǔ)設(shè)備具有緩沖器,所述緩沖器具有數(shù)據(jù) 量。在該實(shí)施方式中,圖像拾取裝置還包括第二存儲(chǔ)設(shè)備,第二存儲(chǔ)設(shè)備可操作地耦接至處 理器,第二存儲(chǔ)設(shè)備存儲(chǔ)使處理器與第二存儲(chǔ)設(shè)備協(xié)作,響應(yīng)于包括預(yù)定量的數(shù)據(jù)量來(lái)執(zhí) 行以下處理的指令(a)使鏡臺(tái)從第一位置移動(dòng)至不同的第二位置;(b)使緩沖器在鏡臺(tái)正 在移動(dòng)的同時(shí)存儲(chǔ)與觀察對(duì)象物相關(guān)聯(lián)的圖像,所述圖像由圖像拾取裝置連續(xù)地捕獲;以及(C)其后,響應(yīng)于不包括預(yù)定量的數(shù)據(jù)量,使圖像拾取裝置終止圖像的捕獲。在一個(gè)示例性實(shí)施方式中,指令使處理器確定鏡臺(tái)是否具有第一狀態(tài)。在一個(gè)示 例性實(shí)施方式中,如果鏡臺(tái)沒(méi)有正在移動(dòng),則鏡臺(tái)具有第一狀態(tài)。在一個(gè)示例性實(shí)施方式中,顯微鏡包括傳感器。在該示例性實(shí)施方式中,指令使處 理器(a)確定傳感器是否具有第二狀態(tài);以及(b)響應(yīng)于傳感器具有第二狀態(tài),使鏡臺(tái)從 第一位置移動(dòng)至不同的第二位置。在一個(gè)示例性實(shí)施方式中,如果傳感器處于待機(jī)狀態(tài),則傳感器具有第二狀態(tài)。在一個(gè)示例性實(shí)施方式中,指令使處理器確定數(shù)據(jù)量是否包括預(yù)定量。在一個(gè)示 例性實(shí)施方式中,指令使處理器通過(guò)確定數(shù)據(jù)量是否小于最大容量來(lái)確定數(shù)據(jù)量是否包括
預(yù)定量。在一個(gè)示例性實(shí)施方式中,顯微鏡包括傳感器。在一個(gè)示例性實(shí)施方式中,指令使 處理器(a)確定鏡臺(tái)是否具有第一狀態(tài);(b)確定傳感器是否具有第二狀態(tài);以及(c)響 應(yīng)于(i)鏡臺(tái)具有第一狀態(tài);以及(ii)傳感器具有第二狀態(tài),使鏡臺(tái)從第一位置移動(dòng)至不 同的第二位置。在一個(gè)示例性實(shí)施方式中,指令使處理器與另一處理器協(xié)作,對(duì)指定的捕獲的圖 像執(zhí)行以下處理(a)執(zhí)行輸入處理;(b)其后,執(zhí)行顯像處理;(c)其后,執(zhí)行縫合處理; (d)其后,執(zhí)行編碼處理;以及(e)其后,執(zhí)行存儲(chǔ)處理。在一個(gè)示例性實(shí)施方式中,圖像拾取裝置包括(a)處理器,可操作地連接至(i) 顯微鏡,具有用于支撐觀察對(duì)象物的鏡臺(tái),鏡臺(tái)處于第一位置;以及(ii)信息處理裝置,具 有第一存儲(chǔ)設(shè)備,第一存儲(chǔ)設(shè)備具有緩沖器,所述緩沖器具有數(shù)據(jù)量;以及(b)第二存儲(chǔ)設(shè) 備,可操作地耦接至處理器。在一個(gè)示例性實(shí)施方式中,操作圖像拾取裝置的方法包括,響 應(yīng)于包括預(yù)定量的數(shù)據(jù)量,使處理器執(zhí)行指令,以(a)使鏡臺(tái)從第一位置移動(dòng)至不同的第 二位置;(b)使緩沖器在鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與觀察對(duì)象物相關(guān)聯(lián)的圖像,所述圖像 由圖像拾取裝置連續(xù)地捕獲;以及(c)其后,響應(yīng)于不包括預(yù)定量的數(shù)據(jù)量,使圖像拾取裝 置終止圖像的捕獲。如上所述,根據(jù)本發(fā)明的實(shí)施方式,可以在防止連續(xù)從圖像拾取裝置側(cè)向圖像處 理裝置側(cè)連續(xù)傳輸?shù)膱D像數(shù)據(jù)中的缺陷的同時(shí)盡可能多地實(shí)時(shí)處理圖像數(shù)據(jù)。根據(jù)結(jié)合附圖對(duì)本發(fā)明的優(yōu)選實(shí)施方式進(jìn)行的如下詳細(xì)說(shuō)明,本發(fā)明的這些和其 他的目的、特征和優(yōu)點(diǎn)將更加明顯。
圖1示出了根據(jù)本發(fā)明示例性實(shí)施方式的示例性圖像處理系統(tǒng)的概圖。圖2示出了根據(jù)本發(fā)明示例性實(shí)施方式的示例性圖像處理系統(tǒng)的示例性圖像拾 取裝置的硬件結(jié)構(gòu)及其周邊接口的框圖。圖3示出了根據(jù)本發(fā)明的示例性實(shí)施方式的示例性PC的硬件結(jié)構(gòu)的框圖。圖4示出了在根據(jù)本發(fā)明的示例性實(shí)施方式的示例性PC中的圖像處理的流程的 示圖。圖5示出了根據(jù)本發(fā)明的示例性實(shí)施方式的通過(guò)圖像拾取裝置和PC執(zhí)行的圖像 拾取處理的流程圖。
圖6示出了根據(jù)本發(fā)明的示例性實(shí)施方式的在通過(guò)圖像拾取裝置和PC執(zhí)行圖像 拾取處理中的示例性控制系統(tǒng)的框圖。圖7示出了在根據(jù)本發(fā)明的示例性實(shí)施方式的系統(tǒng)的圖像拾取處理中的示例性 圖像拾取定時(shí)等的時(shí)序圖。圖8示出了在圖7中所示的圖像拾取處理中產(chǎn)生了背壓處理(back pressure process)的情況下的示例性時(shí)序圖。圖9示出了在根據(jù)本發(fā)明的另一個(gè)示例性實(shí)施方式的系統(tǒng)的圖像拾取處理中的 示例性圖像拾取定時(shí)等的示例性時(shí)序圖。圖10示出了在圖9中所示的圖像拾取處理中產(chǎn)生了背壓處理的情況下的示例性 時(shí)序圖。這里描述了附加的特征和優(yōu)勢(shì),并且通過(guò)隨后的詳細(xì)描述和附圖這些特征和優(yōu)勢(shì) 將會(huì)更加顯而易見(jiàn)。
具體實(shí)施例方式下文中,將參照附圖詳細(xì)描述本發(fā)明的示例性實(shí)施方式。圖1示出了根據(jù)本發(fā)明的示例性實(shí)施方式的示例性圖像處理系統(tǒng)的概圖。如圖1 所示,圖像處理系統(tǒng)包括圖像拾取裝置100和PC 200。圖像拾取裝置100與顯微鏡300連 接,從而控制顯微鏡300的操作并讀取獲取的圖像。顯微鏡300包括XYZ鏡臺(tái)31。在XYZ鏡臺(tái)31上,在X、Y以及Z方向上可移動(dòng)地 放置作為觀察對(duì)象物的樣本30。通過(guò)設(shè)置在圖像拾取裝置100上的鏡臺(tái)控制單元(stage control unit)來(lái)控制CTZ鏡臺(tái)31的移動(dòng)。樣本30為,例如,病理樣本30。將人體的切片 組織或器官粘結(jié)在載玻片上,染色,并形成為樣本形式。在XYZ鏡臺(tái)31的下側(cè)區(qū),設(shè)置閃光光源(flash light source) 32和照明光學(xué)系 統(tǒng)。閃光光源32用光照射樣本30,以生成作為圖像拾取目標(biāo)的光學(xué)圖像。照明光學(xué)系統(tǒng)將 來(lái)自閃光光源32的光會(huì)聚至樣本30。圖像拾取裝置100還控制閃光光源32的操作。在CTZ鏡臺(tái)31上方,從樣本30側(cè)依次順序設(shè)置物鏡33、成像透鏡34以及CMOS (互 補(bǔ)金屬氧化物半導(dǎo)體)基板35。物鏡33會(huì)聚透過(guò)樣本30的光,從而形成樣本30的光學(xué)圖 像。該光學(xué)圖像經(jīng)由導(dǎo)光光學(xué)系統(tǒng)(未示出)由成像透鏡34形成在CMOS基板35上所安 裝的CMOS傳感器上。CMOS基板35包括CMOS傳感器和與閃光光源32互鎖的電子閥或機(jī)械閥。CMOS傳 感器通過(guò)在XYZ鏡臺(tái)每次移動(dòng)時(shí)執(zhí)行光電轉(zhuǎn)換來(lái)連續(xù)獲得樣本30的形成的光學(xué)圖像作為 圖像數(shù)據(jù)??梢允褂弥T如CCD(電荷藕接器件)圖像傳感器的其他圖像傳感器來(lái)代替CMOS 傳感器。CMOS傳感器順序獲取的作為原始數(shù)據(jù)的圖像由圖像拾取裝置100讀取并順序傳 送至PC 200。圖像拾取裝置100和PC 200經(jīng)由作為具有雙向性和可靠性的高速通信通道 使用的PCIe總線10而彼此連接。PC 200對(duì)圖像執(zhí)行各種圖像處理,從而存儲(chǔ)圖像,并且將 圖像處理后的圖像顯示在(外部連接至PC 200的)顯示器400上。例如,PC 200的管理 者觀察已經(jīng)進(jìn)行了圖像處理并顯示在顯示器上的圖像,從而檢查其質(zhì)量。PC 200經(jīng)由網(wǎng)絡(luò)連接至作為觀察器(viewer)的另一個(gè)PC(未示出)。觀察者能夠在連接至不同PC的顯示器上觀察存儲(chǔ)在PC 200中的圖像,執(zhí)行各種編輯處理等,并做出 最終的病理診斷等。[示例性圖像拾取裝置的硬件結(jié)構(gòu)]圖2是示出了圖像拾取裝置100的硬件結(jié)構(gòu)及其周邊接口的框圖。如圖2所示,圖像拾取裝置100包括相機(jī)控制基板(camera control substrate) 11和CMOS I/F(接口)基板14。對(duì)相機(jī)控制基板11設(shè)置了相機(jī)控制單元12 和存儲(chǔ)器13。例如,相機(jī)控制單元12被構(gòu)造為FPGA(現(xiàn)場(chǎng)可編程門(mén)陣列),并且在其中具 有邏輯電路。存儲(chǔ)器(下文中,稱(chēng)為相機(jī)存儲(chǔ)器)13為DRAM(動(dòng)態(tài)隨機(jī)存取存儲(chǔ)器)等,并 用作存儲(chǔ)從安裝在CMOS控制基板38上的CMOS傳感器36中讀取的圖像的緩沖器。在相機(jī)控制基板11和CMOS基板35上,分別設(shè)置了符合預(yù)定通信標(biāo)準(zhǔn)的成像器I/ F 16和37。相機(jī)控制基板11和CMOS基板35通過(guò)CM0SI/F基板14和電纜15而連接。相 機(jī)控制單元12通過(guò)電纜15讀取由CMOS傳感器36所獲取的圖像,并且將圖像存儲(chǔ)在相機(jī) 存儲(chǔ)器13中。此外,在PC的控制下,相機(jī)控制單元12控制CMOS傳感器36、XYZ鏡臺(tái)31以 及閃光光源32的操作??梢耘c相機(jī)控制基板11相分離地設(shè)置專(zhuān)用于XYZ鏡臺(tái)31的控制 箱。另一方面,對(duì)PC 200設(shè)置存儲(chǔ)器(下文中,稱(chēng)為PC存儲(chǔ)器)23和用于連接相機(jī)控 制基板11的相機(jī)I/F基板四。如上,PC 200的相機(jī)I/F基板四和圖像拾取裝置100的相 機(jī)控制基板11通過(guò)PCIe總線10而彼此連接。相機(jī)控制單元經(jīng)由PCIe總線10將存儲(chǔ)在 相機(jī)存儲(chǔ)器13中的圖像傳送至PC 200的PC存儲(chǔ)器23。PC存儲(chǔ)器23具有用于接收的圖 像的緩沖器的功能。通過(guò)DMA (直接存儲(chǔ)器訪問(wèn))執(zhí)行相機(jī)存儲(chǔ)器13與PC存儲(chǔ)器23之間的圖像傳輸。 另外,將相機(jī)存儲(chǔ)器13、PCIe總線10以及PC存儲(chǔ)器23構(gòu)造為FIFO (先進(jìn)先出)。S卩,相 機(jī)存儲(chǔ)器13用作傳送FIFO緩沖器,而PC存儲(chǔ)器23用作接收FIFO緩沖器。此處,使用PCIe總線10的傳送帶寬(圖2中的帶B)大于CMOS基板35與相機(jī)控 制基板11之間使用電纜15的傳送帶寬(圖2中的帶A)?;谶@種結(jié)構(gòu),可以將由CMOS傳 感器36所獲取的病理圖像等的大量原始數(shù)據(jù)順利地傳送至PC 200側(cè)。[示例性PC的硬件結(jié)構(gòu)]圖3是示出了 PC 200的硬件結(jié)構(gòu)的框圖。如圖3所示,PC 200包括用作雙核處 理器的CPU 21和22以及用作分別對(duì)應(yīng)于CPU 21和22的緩沖器的PC存儲(chǔ)器23和PC存 儲(chǔ)器對(duì)。在每個(gè)PC存儲(chǔ)器23和M中,設(shè)置了用于存儲(chǔ)從圖像拾取裝置100接收的圖像的 緩沖器。將緩沖器形成為諸如雙緩沖器和三緩沖器的冗余緩沖器(redundant buffer)?;?于這種結(jié)構(gòu),即使從圖像拾取裝置100經(jīng)由PCIe總線10連續(xù)發(fā)送病理圖像等的大量原始 數(shù)據(jù),也可以由緩沖器來(lái)存儲(chǔ)大量原始數(shù)據(jù),從而,可以在一定程度上防止發(fā)送中的錯(cuò)誤。兩個(gè)GPU 25和洸通過(guò)PCIe橋28連接至CPU 22。例如,GPU 25對(duì)從圖像拾取裝 置100接收的圖像執(zhí)行顯像處理,而GPU沈?qū)D像執(zhí)行編碼處理以形成JPEG格式等(隨 后將詳細(xì)描述)。例如,相機(jī)I/F基板四和HDD 20通過(guò)PCIe橋27連接至CPU 21。將從圖像拾取 裝置100接收并進(jìn)行了顯像處理、編碼處理等的圖像存儲(chǔ)在HDD 20中。另外,顯像處理、編 碼處理等必需的各種應(yīng)用程序也存儲(chǔ)在HDD 20中。
[示例性圖像處理系統(tǒng)的操作]接下來(lái),將描述如上所構(gòu)成的圖像處理系統(tǒng)的操作。[示例性流水線處理]首先,將描述PC 200中的各種圖像處理。圖4是示出了圖像處理的流程的示圖。在該示例性實(shí)施方式中,除了顯像處理和編碼處理之外,PC 200還能夠流水線地 進(jìn)行輸入處理、縫合處理(stitching process)、存儲(chǔ)處理等,并且相對(duì)于從圖像拾取裝置 100側(cè)接收并存儲(chǔ)在PC存儲(chǔ)器23和M中的圖像執(zhí)行這些處理??p合處理指的是將多幅圖 像連接為一幅圖像的處理。S卩,例如,如圖4所示,CPU 21對(duì)來(lái)自PC存儲(chǔ)器23和M的圖像(幀)執(zhí)行輸入 處理。隨后,例如,GPU 25對(duì)輸入的圖像執(zhí)行顯像處理。隨后,CPU 22對(duì)顯像處理后的圖 像執(zhí)行縫合處理。此外,GPU沈?qū)p合后的圖像執(zhí)行編碼(壓縮)處理。另外,在CPU 21 從輸入處理中被釋放之后,CPU 21進(jìn)一步在HDD 20中對(duì)編碼處理后的圖像執(zhí)行存儲(chǔ)處理。 各種處理與執(zhí)行這些處理的處理器的組合并不限于圖4中所示出的實(shí)例的過(guò)程。如上所述,例如,PC 200利用那些并行的處理器流水線地進(jìn)行五個(gè)不同的處理,從 而可以盡可能多地實(shí)時(shí)執(zhí)行對(duì)經(jīng)由PCIe總線10接收的大量原始數(shù)據(jù)的圖像處理。如圖4 所示,在輸入幀率設(shè)定為T(mén)s/每幀的情況下,由于流水線處理,從而一個(gè)圖像(幀)從輸入 到存儲(chǔ)的等待時(shí)間變得非常短,具體地,為4XTs。[示例性圖像拾取控制處理]接下來(lái),將給出通過(guò)圖像拾取裝置100而執(zhí)行的圖像拾取處理和相對(duì)于圖像拾取 處理通過(guò)PC 200而執(zhí)行的控制處理的描述。與流水線處理并行地執(zhí)行那些處理。圖5示 出了通過(guò)圖像拾取裝置100和PC 200而執(zhí)行的圖像拾取處理的流程圖。此外,圖6示出了 圖像拾取處理中控制系統(tǒng)的框圖。如圖5所示,首先,PC 200的CPU 21或22 (下文中,為方便起見(jiàn),統(tǒng)稱(chēng)為CPU 21) 判斷XYZ鏡臺(tái)31是否處于停止?fàn)顟B(tài),即,判斷其移動(dòng)是否完成(步驟51)。在判斷XYZ鏡臺(tái)31處于停止?fàn)顟B(tài)(是)的情況下,CPU 21判斷CMOS傳感器36 是否處于待機(jī)狀態(tài),即,判斷CMOS傳感器36對(duì)相機(jī)存儲(chǔ)器13是否處于圖像讀取操作狀態(tài) (步驟52)。在判斷CMOS傳感器36處于待機(jī)狀態(tài)(是)的情況下,CPU 21判斷PC存儲(chǔ)器23 或24(下文中,為方便起見(jiàn),統(tǒng)稱(chēng)為PC存儲(chǔ)器23)的緩沖器是否具有空閑空間,即,判斷緩 沖器中的數(shù)據(jù)容量是否小于預(yù)定容量(步驟53)。在判斷PC存儲(chǔ)器23的緩沖器具有空閑空間(是)的情況下,CPU 21向相機(jī)控制 單元12發(fā)出閥開(kāi)啟命令,并使閥和閃光光源32操作(步驟54)。隨后,當(dāng)閥響應(yīng)于閥開(kāi)啟命令而釋放時(shí),相機(jī)控制單元12使XYZ鏡臺(tái)31的移動(dòng)開(kāi) 始,以進(jìn)行下一次圖像拾取(步驟55)。此外,相機(jī)控制單元12從CMOS傳感器36讀取響應(yīng) 于閥開(kāi)啟命令而獲取的圖像,并且將圖像存儲(chǔ)在相機(jī)存儲(chǔ)器13中(步驟56,圖6的(1)和 O))。相機(jī)控制單元12讀取存儲(chǔ)在相機(jī)存儲(chǔ)器13中的圖像,并對(duì)PC 200的PC存儲(chǔ)器 23執(zhí)行圖像的DMA傳輸(步驟57,圖6的(3)和G))。在PC 200中,讀取存儲(chǔ)在PC存儲(chǔ)器23中的圖像,并且用CPU 21、GPU 25等以及各種應(yīng)用程序執(zhí)行上述 水線處理(圖6的(5))。圖像拾取裝置100和PC 200重復(fù)執(zhí)行上述處理,直至特定數(shù)目的圖像被獲取并被 存儲(chǔ)在PC 200中。通過(guò)上述處理,在根據(jù)該示例性實(shí)施方式的圖像處理系統(tǒng)中,在將圖像從CMOS傳 感器36讀取至相機(jī)存儲(chǔ)器13的時(shí)間段內(nèi),完成CTZ鏡臺(tái)31的移動(dòng)。另外,閥定時(shí)(shutter timing)與CTZ鏡臺(tái)31的移動(dòng)的開(kāi)始同步。此外,從CMOS傳感器36向相機(jī)存儲(chǔ)器13的圖 像讀取處理的完成也與閥定時(shí)同步。結(jié)果,通過(guò)MZ鏡臺(tái)31的移動(dòng)所需的時(shí)間段縮短了等 待時(shí)間,從而,以較高速度獲取并處理圖像。另外,在根據(jù)該示例性實(shí)施方式的圖像處理系統(tǒng)中,僅在PC存儲(chǔ)器23具有空閑空 間、CMOS傳感器36處于待機(jī)狀態(tài)、并且XYZ鏡臺(tái)31處于停止?fàn)顟B(tài)的三個(gè)條件滿足時(shí),釋放 閥。此外,通過(guò)這種控制,在PC存儲(chǔ)器23沒(méi)有空閑空間的情況下,PC 200能夠通過(guò)圖像拾 取裝置100執(zhí)行臨時(shí)停止閥操作的背壓處理(back pressure process)。圖7示出了圖像拾取處理中的圖像拾取定時(shí)等的時(shí)序圖。圖8示出了在圖像拾取 處理中引起背壓處理的情況下的時(shí)序圖。如圖6和圖7所示,相機(jī)控制單元12監(jiān)控XYZ鏡臺(tái)31和CMOS傳感器36的狀態(tài), 并且將用于進(jìn)行XYZ鏡臺(tái)31的停止和從CMOS傳感器36的讀取操作完成(待機(jī)狀態(tài))通 知的通知信號(hào)(鏡臺(tái)移動(dòng)狀態(tài)通知命令和CMOS傳感器操作完成通知命令)作為中斷信號(hào) 傳送至PC 200的CPU21。CPU 21將通知信號(hào)作為中斷信號(hào)來(lái)處理,并且監(jiān)控PC存儲(chǔ)器23 的緩沖器的容量。當(dāng)CPU 21得知在緩沖器中產(chǎn)生(釋放)了空閑空間時(shí),CPU組合條件, 生成閥開(kāi)啟命令。與閥開(kāi)啟命令的發(fā)出同步,執(zhí)行圖6的(1) (5)的處理。PC 200設(shè)置 有用于執(zhí)行中斷處理的中斷控制器(未示出)。通過(guò)將閥開(kāi)啟命令的產(chǎn)生條件作為中斷信 號(hào)來(lái)處理,PC 200能夠更靈活地裁定條件。另一方面,如圖8所示,在施加至由CPU 21、GPU 25等進(jìn)行的圖像處理的加載超過(guò) 了 PC存儲(chǔ)器23的緩沖器的預(yù)定容量的情況下,不滿足用于閥開(kāi)啟命令產(chǎn)生的第三個(gè)條件。 因此,即使通知了鏡臺(tái)移動(dòng)狀態(tài)通知命令和CMOS傳感器操作完成通知命令,仍中止發(fā)出閥 開(kāi)啟命令,結(jié)果CPU21進(jìn)入背壓狀態(tài)。在不是背壓狀態(tài)的正常狀態(tài)下,來(lái)自CMOS傳感器36的讀取完成循環(huán)為關(guān)鍵路徑 (critical path)。在背壓狀態(tài)下,PC存儲(chǔ)器23的緩沖器的釋放為關(guān)鍵路徑。結(jié)果,甚至在由于流水線處理的負(fù)荷的增大引起不可能在PC存儲(chǔ)器23中存儲(chǔ)圖 像的情況下,PC 200仍能夠防止在通過(guò)PCIe總線10的圖像的連續(xù)傳送中的圖像數(shù)據(jù)中的缺陷。如上所述,圖像拾取裝置100的相機(jī)存儲(chǔ)器13和PC 200的PC存儲(chǔ)器23和M被 構(gòu)造為FIFO。因此,在執(zhí)行背壓處理期間,它們之間的同步信息交換(handshaking)是不必 要的。PC 200的CPU 21和22僅管理FIFO的序列,從而無(wú)論并行性的種類(lèi)或狀態(tài)如何,都 允許順利地執(zhí)行背壓處理。[變形實(shí)例]本發(fā)明不限制于上面的示例性實(shí)施方式,只要不違背本發(fā)明的宗旨的情況下,可 以進(jìn)行各種變形。在上面的示例性實(shí)施方式中,PC 200處理并裁定作為中斷信號(hào)的閥開(kāi)啟命令的產(chǎn)生條件。但是,可以在圖像拾取裝置100側(cè)執(zhí)行裁定處理。圖9示出了在這種情況下的圖 像拾取定時(shí)等的時(shí)序圖,圖10示出了在圖9的實(shí)例中產(chǎn)生背壓處理的情況下的時(shí)序圖。如圖9和圖10所示,在該實(shí)例中,對(duì)圖像拾取裝置100設(shè)置裁定單元??梢宰鳛?硬件或軟件來(lái)實(shí)現(xiàn)該裁定單元。裁定單元監(jiān)控XYZ鏡臺(tái)31和CMOS傳感器36的操作狀態(tài), 從而生成與其相關(guān)的條件,并且從PC 200接收關(guān)于PC存儲(chǔ)器23的空閑空間狀態(tài)的條件的 通知信號(hào)。此外,裁定單元組合條件,生成閥開(kāi)啟命令,從而使相機(jī)控制單元12釋放閥。另外,如圖10所示,即使XYZ鏡臺(tái)31和CMOS傳感器36的操作完成,裁定單元仍 中止閥開(kāi)啟命令的發(fā)出,直至裁定單元從PC 200接收到與PC存儲(chǔ)器23的空閑空間狀態(tài)的 條件相關(guān)的通知信號(hào)為止,從而執(zhí)行背壓處理。如上所述,由于在圖像拾取裝置100側(cè)的裁定單元裁定用于閥開(kāi)啟命令生成的條 件,所以減少了圖像拾取裝置100和PC 200之間的同步信息交換,并且PC 200側(cè)的系統(tǒng)開(kāi) 銷(xiāo)(overhead)減少。此外,由于在無(wú)PC 200的圖像拾取裝置100側(cè)發(fā)出閥開(kāi)啟命令,所以 減少了直至閥釋放的等待時(shí)間。此外,可以組合圖像拾取裝置100側(cè)和PC 200側(cè)的條件的生成處理。換句話說(shuō),期 望在PC 200側(cè)生成的條件可以由PC 200生成,組合PC 200側(cè)的條件和圖像拾取裝置100 側(cè)的條件的裁定單元可以設(shè)置在圖像拾取裝置100側(cè)。通過(guò)這種結(jié)構(gòu),由PC 200進(jìn)行的靈 活裁定和等待時(shí)間的減小能夠彼此兼容。在PC 200側(cè)生成的條件可以適當(dāng)?shù)厝我飧淖?。在上面的示例性?shí)施方式中,圖像拾取裝置100和PC 200通過(guò)PCIe連接,但是可 替換地,也可以通過(guò)諸如USB 3.0的另一種通用高速接口來(lái)連接。即,任意通信通道可以用 于從圖像拾取裝置至PC的圖像的傳輸,只要該通信通道具有比用于讀取來(lái)自CMOS傳感器 的圖像的帶寬更寬的帶寬并具有雙向可靠性即可。
權(quán)利要求
1 一種信息處理系統(tǒng),包括處理器;圖像拾取裝置,可操作地連接至具有用于支撐觀察對(duì)象物的鏡臺(tái)的顯微鏡,所述鏡臺(tái) 處于第一位置;以及存儲(chǔ)設(shè)備,可操作地耦接至所述處理器,所述存儲(chǔ)設(shè)備具有緩沖器,所述緩沖器具有 數(shù)據(jù)量,所述存儲(chǔ)設(shè)備存儲(chǔ)使所述處理器響應(yīng)于包括預(yù)定量的數(shù)據(jù)量而執(zhí)行以下處理的指 令(a)使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的第二位置;(b)使所述緩沖器在所述鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與所述觀察對(duì)象物相關(guān)聯(lián)的圖像, 所述圖像由所述圖像拾取裝置連續(xù)捕獲;以及(c)其后,響應(yīng)于不包括所述預(yù)定量的數(shù)據(jù)量,使所述圖像拾取裝置終止所述圖像的所 述捕獲。
2.根據(jù)權(quán)利要求1所述的信息處理系統(tǒng),其中,所述觀察對(duì)象物包括病理樣本。
3.根據(jù)權(quán)利要求1所述的信息處理系統(tǒng),其中,所述圖像拾取裝置包括所述處理器。
4.根據(jù)權(quán)利要求1所述的信息處理系統(tǒng),其包括包含所述處理器的信息處理裝置。
5.根據(jù)權(quán)利要求4所述的信息處理系統(tǒng),其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使得 所述處理器與另一處理器協(xié)作,以對(duì)于指定的捕獲圖像執(zhí)行圖像處理。
6.根據(jù)權(quán)利要求4所述的信息處理系統(tǒng),其中,所述信息處理裝置經(jīng)由雙向通信通道 連接至所述圖像拾取裝置。
7.根據(jù)權(quán)利要求4所述的信息處理系統(tǒng),其中,所述信息處理裝置包括所述存儲(chǔ)設(shè)備。
8.根據(jù)權(quán)利要求1所述的信息處理系統(tǒng),其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使得 所述處理器(a)確定所述鏡臺(tái)是否具有第一狀態(tài);以及(b)響應(yīng)于所述鏡臺(tái)具有所述第一狀態(tài),使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的所述第二位置。
9.根據(jù)權(quán)利要求8所述的信息處理系統(tǒng),其中,如果所述鏡臺(tái)不是正在移動(dòng),則所述鏡 臺(tái)具有所述第一狀態(tài)。
10.根據(jù)權(quán)利要求1所述的信息處理系統(tǒng),其中(a)所述顯微鏡包括傳感器;并且(b)當(dāng)所述指令由所述處理器執(zhí)行時(shí),使得所述處理器(i)確定所述傳感器是否具有第二狀態(tài);以及( )響應(yīng)于所述傳感器具有所述第二狀態(tài),使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的 所述第二位置。
11.根據(jù)權(quán)利要求10所述的信息處理系統(tǒng),其中,如果所述傳感器處于待機(jī)狀態(tài),則所 述傳感器具有所述第二狀態(tài)。
12.根據(jù)權(quán)利要求1所述的信息處理系統(tǒng),其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器確定所述數(shù)據(jù)量是否包括所述預(yù)定量。
13.根據(jù)權(quán)利要求12所述的信息處理系統(tǒng),其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器通過(guò)確定所述數(shù)據(jù)量是否小于最大容量來(lái)確定所述數(shù)據(jù)量是否包括所述預(yù)定量。
14.根據(jù)權(quán)利要求1所述的信息處理系統(tǒng),其中(a)所述顯微鏡包括傳感器;并且(b)當(dāng)所述指令由所述處理器執(zhí)行時(shí),使得所述處理器 (i)確定所述鏡臺(tái)是否具有第一狀態(tài);( )確定所述傳感器是否具有第二狀態(tài);以及(iii)響應(yīng)于(A)所述鏡臺(tái)具有所述第一狀態(tài);以及(B)所述傳感器具有所述第二狀態(tài),使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的所述第二位置。
15.根據(jù)權(quán)利要求1所述的信息處理系統(tǒng),其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器與另一處理器協(xié)作,對(duì)指定的捕獲圖像執(zhí)行以下處理(a)執(zhí)行輸入處理;(b)其后,執(zhí)行顯像處理;(c)其后,執(zhí)行縫合處理;(d)其后,執(zhí)行編碼處理;以及(e)其后,執(zhí)行存儲(chǔ)處理。
16.根據(jù)權(quán)利要求1所述的信息處理系統(tǒng),其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器向所述圖像拾取裝置發(fā)出閥開(kāi)啟命令。
17.一種操作信息處理系統(tǒng)的方法,所述信息處理系統(tǒng)包括(a)圖像拾取裝置,可操 作地連接至具有用于支撐觀察對(duì)象物的鏡臺(tái)的顯微鏡,所述鏡臺(tái)處于第一位置;以及(b) 存儲(chǔ)設(shè)備,具有緩沖器,所述緩沖器具有數(shù)據(jù)量,所述方法包括響應(yīng)于包括預(yù)定量的數(shù)據(jù)量,使得處理器執(zhí)行指令,以(a)使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的第二位置;(b)使所述緩沖器在所述鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與所述觀察對(duì)象物相關(guān)聯(lián)的圖像, 所述圖像由所述圖像拾取裝置連續(xù)捕獲;以及(c)其后,響應(yīng)于不包括所述預(yù)定量的數(shù)據(jù)量,使得所述圖像拾取裝置終止所述圖像的 捕獲。
18.一種信息處理裝置,包括處理器,可操作地連接至圖像拾取裝置,所述圖像拾取裝置可操作地連接至具有用于 支撐觀察對(duì)象物的鏡臺(tái)的顯微鏡,所述鏡臺(tái)處于第一位置;以及存儲(chǔ)設(shè)備,可操作地耦接至所述處理器,所述存儲(chǔ)設(shè)備具有緩沖器,所述緩沖器具有數(shù) 據(jù)量,所述存儲(chǔ)設(shè)備存儲(chǔ)使所述處理器響應(yīng)于包括預(yù)定量的數(shù)據(jù)量執(zhí)行以下處理的指令(a)使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的第二位置;(b)使所述緩沖器在所述鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與所述觀察對(duì)象物相關(guān)聯(lián)的圖像, 所述圖像由所述圖像拾取裝置連續(xù)地捕獲;以及(c)其后,響應(yīng)于不包括所述預(yù)定量的數(shù)據(jù)量,使所述圖像拾取裝置終止所述圖像的捕獲。
19.根據(jù)權(quán)利要求18所述的信息處理裝置,其中,所述觀察對(duì)象物包括病理樣本。
20.根據(jù)權(quán)利要求18所述的信息處理裝置,其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使得所述處理器(a)確定所述鏡臺(tái)是否具有第一狀態(tài);以及(b)響應(yīng)于所述鏡臺(tái)具有所述第一狀態(tài),使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的所 述第二位置。
21.根據(jù)權(quán)利要求18所述的信息處理裝置,其中,(a)所述顯微鏡包括傳感器;以及(b)當(dāng)所述指令由所述處理器執(zhí)行時(shí),使得所述處理器 (i)確定所述傳感器是否具有第二狀態(tài);以及( )響應(yīng)于所述傳感器具有所述第二狀態(tài),使所述鏡臺(tái) 從所述第一位置移動(dòng)至不同的所述第二位置。
22.根據(jù)權(quán)利要求18所述的信息處理裝置,其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器確定所述數(shù)據(jù)量是否包括所述預(yù)定量。
23.根據(jù)權(quán)利要求22所述的信息處理裝置,其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器通過(guò)確定所述數(shù)據(jù)量是否小于最大容量來(lái)確定所述數(shù)據(jù)量是否包括所述預(yù)定量。
24.根據(jù)權(quán)利要求18所述的信息處理裝置,其中(a)所述顯微鏡包括傳感器;以及(b)當(dāng)所述指令由所述處理器執(zhí)行時(shí),使得所述處理器 (i)確定所述鏡臺(tái)是否具有第一狀態(tài);( )確定所述傳感器是否具有第二狀態(tài);以及(iii)響應(yīng)于(A)所述鏡臺(tái)具有所述第一狀態(tài);以及(B)所述傳感器具有所述第二狀態(tài),使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的所述第二位置。
25.根據(jù)權(quán)利要求18所述的信息處理裝置,其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器與另一處理器協(xié)作,對(duì)指定的捕獲圖像執(zhí)行以下處理(a)執(zhí)行輸入處理;(b)其后,執(zhí)行顯像處理;(c)其后,執(zhí)行縫合處理;(d)其后,執(zhí)行編碼處理;以及(e)其后,執(zhí)行存儲(chǔ)處理。
26.根據(jù)權(quán)利要求18所述的信息處理裝置,其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器向所述圖像拾取裝置發(fā)出閥開(kāi)啟命令。
27.根據(jù)權(quán)利要求18所述的信息處理裝置,其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器與另一處理器協(xié)作,對(duì)指定的捕獲圖像執(zhí)行圖像處理。
28.一種操作圖像處理裝置的方法,所述圖像處理裝置包括(a)處理器,可操作地連 接至圖像拾取裝置,所述圖像拾取裝置可操作地連接至具有用于支撐觀察對(duì)象物的鏡臺(tái)的 顯微鏡,所述鏡臺(tái)處于第一位置;以及(b)存儲(chǔ)設(shè)備,可操作地耦接至所述處理器,所述存 儲(chǔ)設(shè)備具有緩沖器,所述緩沖器具有數(shù)據(jù)量,所述方法包括響應(yīng)于包括預(yù)定量的數(shù)據(jù)量,使所述處理器執(zhí)行指令,以(a)使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的第二位置;(b)使所述緩沖器在所述鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與所述觀察對(duì)象物相關(guān)聯(lián)的圖像, 所述圖像由所述圖像拾取裝置連續(xù)地捕獲;以及(c)此后,響應(yīng)于不包括所述預(yù)定量的數(shù)據(jù)量,使所述圖像拾取裝置終止所述圖像的捕-M-犾。
29.一種計(jì)算機(jī)可讀介質(zhì),所述計(jì)算機(jī)可讀介質(zhì)存儲(chǔ)被構(gòu)造為使信息處理裝置響應(yīng)于 包括預(yù)定量的數(shù)據(jù)量而執(zhí)行以下處理的指令,所述信息處理裝置包括(a)處理器,可操作 地連接至圖像拾取裝置,所述圖像拾取裝置可操作地連接至具有用于支撐觀察對(duì)象物的鏡 臺(tái)的顯微鏡,所述鏡臺(tái)處于第一位置;以及(b)存儲(chǔ)設(shè)備,可操作地耦接至所述處理器,所 述存儲(chǔ)設(shè)備具有緩沖器,所述緩沖器具有數(shù)據(jù)量(a)使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的第二位置;(b)使所述緩沖器在所述鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與所述觀察對(duì)象物相關(guān)聯(lián)的圖像, 所述圖像由所述圖像拾取裝置連續(xù)地捕獲;以及(c)其后,響應(yīng)于不包括所述預(yù)定量的數(shù)據(jù)量,使所述圖像拾取裝置終止所述圖像的捕-M-犾。
30.一種圖像拾取裝置,包括處理器,可操作地連接至(a)顯微鏡,具有用于支撐觀察對(duì)象物的鏡臺(tái),所述鏡臺(tái)處 于第一位置;以及(b)信息處理裝置,具有第一存儲(chǔ)設(shè)備,所述第一存儲(chǔ)設(shè)備具有緩沖器, 所述緩沖器具有數(shù)據(jù)量;以及第二存儲(chǔ)設(shè)備,可操作地耦接至所述處理器,所述第二存儲(chǔ)設(shè)備存儲(chǔ)使所述處理器與 所述第二存儲(chǔ)設(shè)備協(xié)作,響應(yīng)于包括預(yù)定量的數(shù)據(jù)量而進(jìn)行以下處理的指令(a)使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的第二位置;(b)使所述緩沖器在所述鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與所述觀察對(duì)象物相關(guān)聯(lián)的圖像, 所述圖像由所述圖像拾取裝置連續(xù)地捕獲;以及(c)其后,響應(yīng)于不包括所述預(yù)定量的數(shù)據(jù)量,使所述圖像拾取裝置終止所述圖像的捕-M-犾。
31.根據(jù)權(quán)利要求30所述的圖像拾取裝置,其中,所述觀察對(duì)象物包括病理樣本。
32.根據(jù)權(quán)利要求30所述的圖像拾取裝置,其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器確定所述鏡臺(tái)是否具有第一狀態(tài)。
33.根據(jù)權(quán)利要求32所述的圖像拾取裝置,其中,如果所述鏡臺(tái)不是正在移動(dòng),則所述 鏡臺(tái)具有所述第一狀態(tài)。
34.根據(jù)權(quán)利要求30所述的圖像拾取裝置,其中(a)所述顯微鏡包括傳感器;以及(b)當(dāng)所述指令由所述處理器執(zhí)行時(shí),使得所述處理器 (i)確定所述傳感器是否具有第二狀態(tài);以及( )響應(yīng)于所述傳感器具有所述第二狀態(tài),使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的 所述第二位置。
35.根據(jù)權(quán)利要求34所述的圖像拾取裝置,其中,如果所述傳感器處于待機(jī)狀態(tài),則所 述傳感器具有所述第二狀態(tài)。
36.根據(jù)權(quán)利要求30所述的圖像拾取裝置,其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器確定所述數(shù)據(jù)量是否包括所述預(yù)定量。
37.根據(jù)權(quán)利要求36所述的圖像拾取裝置,其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 得所述處理器通過(guò)確定所述數(shù)據(jù)量是否小于最大容量來(lái)確定所述數(shù)據(jù)量是否包括所述預(yù)定量。
38.根據(jù)權(quán)利要求30所述的圖像拾取裝置,其中(a)所述顯微鏡包括傳感器;以及(b)當(dāng)所述指令由所述處理器執(zhí)行時(shí),使得所述處理器 (i)確定所述鏡臺(tái)是否具有第一狀態(tài);( )確定所述傳感器是否具有第二狀態(tài);以及 (iii)響應(yīng)于(A)所述鏡臺(tái)具有所述第一狀態(tài);以及(B)所述傳感器具有所述第二狀態(tài),使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的所述第二位置。
39.根據(jù)權(quán)利要求30所述的圖像拾取裝置,其中,當(dāng)所述指令由所述處理器執(zhí)行時(shí),使 所述處理器與另一處理器協(xié)作,對(duì)指定的捕獲圖像執(zhí)行以下處理(a)執(zhí)行輸入處理;(b)其后,執(zhí)行顯像處理;(c)其后,執(zhí)行縫合處理;(d)其后,執(zhí)行編碼處理;以及(e)其后,執(zhí)行存儲(chǔ)處理。
40.一種操作圖像拾取裝置的方法,所述圖像拾取裝置包括(a)處理器,可操作地連 接至(i)顯微鏡,具有用于支撐觀察對(duì)象物的鏡臺(tái),所述鏡臺(tái)處于第一位置;以及(ii)信 息處理裝置,具有第一存儲(chǔ)設(shè)備,所述第一存儲(chǔ)設(shè)備具有緩沖器,所述緩沖器具有數(shù)據(jù)量; 以及(b)第二存儲(chǔ)設(shè)備,可操作地耦接至所述處理器,所述方法包括響應(yīng)于包括預(yù)定量的數(shù)據(jù)量,使所述處理器執(zhí)行指令,以(a)使所述鏡臺(tái)從所述第一位置移動(dòng)至不同的第二位置;(b)使所述緩沖器在所述鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與所述觀察對(duì)象物相關(guān)聯(lián)的圖像, 所述圖像由所述圖像拾取裝置連續(xù)捕獲;以及(c)其后,響應(yīng)于不包括所述預(yù)定量的數(shù)據(jù)量,使所述圖像拾取裝置終止所述圖像的捕-M-犾。
全文摘要
本發(fā)明涉及圖像處理系統(tǒng)、圖像處理裝置、圖像拾取裝置及方法。在一個(gè)示例性實(shí)施方式中,信息處理系統(tǒng)包括連接至具有用于支撐觀察對(duì)象物的鏡臺(tái)的顯微鏡的圖像拾取裝置。在該示例性實(shí)施方式中,鏡臺(tái)具有第一位置。信息處理系統(tǒng)具有緩沖器,所述緩沖器具有數(shù)據(jù)量。響應(yīng)于包括預(yù)定量的數(shù)據(jù)量,信息處理系統(tǒng)使鏡臺(tái)從第一位置移動(dòng)至不同的位置。響應(yīng)于包括預(yù)定量的數(shù)據(jù)量,信息處理系統(tǒng)使緩沖器在鏡臺(tái)正在移動(dòng)的同時(shí)存儲(chǔ)與觀察對(duì)象物相關(guān)聯(lián)的圖像。在一個(gè)示例性實(shí)施方式中,圖像拾取裝置連續(xù)地捕獲圖像。其后,信息處理系統(tǒng)響應(yīng)于不包括預(yù)定量的數(shù)據(jù)量,使圖像拾取裝置終止捕獲圖像。
文檔編號(hào)G02B21/36GK102103737SQ201010581530
公開(kāi)日2011年6月22日 申請(qǐng)日期2010年12月9日 優(yōu)先權(quán)日2009年12月16日
發(fā)明者久曾神宏, 大島拓哉, 成澤龍, 水谷陽(yáng)一, 脅田能宏 申請(qǐng)人:索尼公司