信息處理裝置中的觸摸操作的再現(xiàn)的制作方法
【技術(shù)領(lǐng)域】
[0001]本公開涉及信息處理裝置的控制，更確定而言涉及能夠受理觸摸操作的信息處理裝置中的觸摸操作的再現(xiàn)。
【背景技術(shù)】
[0002]關(guān)于針對裝置的操作的顯示，例如，在日本特開2008-040560號公報中公開了 “在顯示對裝置進(jìn)行的操作等的歷史信息時，能夠不會看丟地顯示繼續(xù)的操作的歷史顯示裝置”。
[0003]另外，在日本特開2000-235549號公報中公開了用于“在之后在其它終端中再生操作者進(jìn)行的鼠標(biāo)的動作等的情況下，使得在再生時得到相同的結(jié)果”的技術(shù)。

【發(fā)明內(nèi)容】

[0004]根據(jù)在日本特開2008-040560號公報中公開的技術(shù)，在顯示對裝置進(jìn)行的操作等的歷史信息時，為了不看丟地顯示繼續(xù)的操作，在生成操作歷史時，能夠在操作部圖像上沿著將以時系列鄰接的2個操作部之間進(jìn)行連接的路徑，以預(yù)定的顯示間隔顯示表示被操作的操作部的位置的操作位置圖像。但是，例如，在應(yīng)用于手勢(gesture)操作的情況下，手勢操作是連續(xù)的操作，2點接近，所以存在無法顯示軌跡這樣的問題。
[0005]另外，根據(jù)在日本特開2000-235549號公報中公開的技術(shù),能夠存儲鼠標(biāo)的輸入事件(鼠標(biāo)點擊、鼠標(biāo)移動等)和結(jié)果事件(視窗的生成、指針位置更新等)，并發(fā)行所存儲的事件。但是，在個人計算機上始終顯示鼠標(biāo)，相對于此，在圖像形成裝置中不存在鼠標(biāo)。因此，存在如下問題:僅通過發(fā)生輸入事件，無法知道在面板上的何處發(fā)生了輸入事件。
[0006]另外，在其它局面中，作為圖像形成裝置的操作內(nèi)容的再生單元，考慮如下方法:存儲觸摸事件，并再生成/發(fā)行所存儲的觸摸事件，從而再生與存儲時相同的操作內(nèi)容。通過使用該方法，能夠完全地再現(xiàn)觸摸操作、手勢操作等用戶操作的內(nèi)容。但是，在進(jìn)行觸摸事件的自動再生的情況下，在圖像形成裝置的內(nèi)部中發(fā)生觸摸事件，所以用戶無法知道何處的鍵被按壓、并且進(jìn)行了什么樣的操作。因此，需要能夠容易地掌握被觸摸的點的坐標(biāo)值、操作(例如輕拂(flick)操作等)的內(nèi)容。
[0007]因此，需要用于解決上述那樣的問題的技術(shù)。本公開是為了解決上述問題而實施的，其目的在于提供一種容易地知道被觸摸的點、操作內(nèi)容的信息處理裝置。另一目的在于提供一種用于控制信息處理裝置以容易地知道被觸摸的點、操作內(nèi)容的方法。又一目的在于提供一種用于使計算機執(zhí)行該方法的程序。
[0008]基于一個實施方式的信息處理裝置具備:顯示部，構(gòu)成為顯示受理針對該信息處理裝置的觸摸操作的畫面；觸摸操作部，構(gòu)成為受理該觸摸操作；觸摸事件發(fā)行部，構(gòu)成為發(fā)行與針對該觸摸操作部的I個以上的觸摸操作分別對應(yīng)的I個以上的觸摸事件；以及手勢控制部，構(gòu)成為能夠分別執(zhí)行根據(jù)由該觸摸事件發(fā)行部發(fā)行的該I個以上的觸摸事件進(jìn)行對應(yīng)的處理的模式、和再生預(yù)先存儲的該觸摸事件的再生模式。該手勢控制部構(gòu)成為在該再生模式下，對與該觸摸事件關(guān)聯(lián)起來的區(qū)域附加表示與存儲的該觸摸事件對應(yīng)的觸摸操作的操作圖像，并顯示于該顯示部。
[0009]根據(jù)另一實施方式，提供用于控制信息處理裝置的方法。該方法具備如下步驟:顯示受理針對該信息處理裝置的觸摸操作的畫面；受理該觸摸操作；發(fā)行與該I個以上的觸摸操作分別對應(yīng)的I個以上的觸摸事件；以及分別執(zhí)行根據(jù)發(fā)行的該I個以上的觸摸事件進(jìn)行對應(yīng)的處理的模式、和再生預(yù)先存儲的該觸摸事件的再生模式。該執(zhí)行的步驟包括在該再生模式下對與該觸摸事件關(guān)聯(lián)起來的區(qū)域附加表示與存儲的該觸摸事件對應(yīng)的觸摸操作的操作圖像并顯示的步驟。
[0010]根據(jù)又一實施方式，提供保存了用于使計算機執(zhí)行用于控制信息處理裝置的方法的程序的并非臨時的計算機可讀取的記錄介質(zhì)。該程序使該計算機執(zhí)行如下步驟:顯示受理針對該信息處理裝置的觸摸操作的畫面；受理該觸摸操作；發(fā)行與該I個以上的觸摸操作分別對應(yīng)的I個以上的觸摸事件；以及分別執(zhí)行根據(jù)發(fā)行的該I個以上的觸摸事件進(jìn)行對應(yīng)的處理的模式、和再生預(yù)先存儲的該觸摸事件的再生模式。該執(zhí)行的步驟包括在該再生模式下對與該觸摸事件關(guān)聯(lián)起來的區(qū)域附加表示與存儲的該觸摸事件對應(yīng)的觸摸操作的操作圖像并顯示的步驟。
[0011]本發(fā)明的上述以及其它目的、特征、局面以及優(yōu)點根據(jù)與附圖關(guān)聯(lián)地理解的與本發(fā)明有關(guān)的接下來的詳細(xì)說明將會更加明確。
【附圖說明】
[0012]圖1是表示由本發(fā)明的實施方式的圖像形成裝置100實現(xiàn)的功能的框圖。
[0013]圖2是表示本發(fā)明的實施方式的圖像形成裝置100的硬件結(jié)構(gòu)的一個例子的圖。
[0014]圖3是表示應(yīng)用本發(fā)明的技術(shù)思想的圖像形成裝置100的概略的圖。
[0015]圖4是表示本發(fā)明的實施方式的圖像形成裝置100和其它設(shè)備連接的狀態(tài)的圖。
[0016]圖5是表示本發(fā)明的實施方式的圖像形成裝置100中的各種觸摸事件的圖。
[0017]圖6是表示本發(fā)明的實施方式的圖像形成裝置100具備的觸摸面板110中的操作的圖。
[0018]圖7是表示本發(fā)明的實施方式的手勢判定部140的結(jié)構(gòu)的圖。
[0019]圖8是表不用于存儲觸摸事件的處理的流程圖。
[0020]圖9是表示本發(fā)明的實施方式的圖像形成裝置100為了存儲觸摸事件而具備的結(jié)構(gòu)的圖。
[0021]圖10是表示本發(fā)明的實施方式的圖像形成裝置100執(zhí)行的處理的一部分的流程圖。
[0022]圖11是表示觸摸事件的再生處理的圖。
[0023]圖12是表示觸摸面板110的畫面的推移的圖。
[0024]圖13是表示本發(fā)明的實施方式的圖像形成裝置100存儲輕拂操作的情況下的觸摸面板110的畫面的推移的圖。
[0025]圖14是表示本發(fā)明的實施方式的圖像形成裝置100的觸摸面板110再生操作事件的情況下的畫面的推移的圖。
[0026]圖15是表示本發(fā)明的實施方式的圖像形成裝置100的觸摸面板110中的夾捏操作和手勢的圖。
[0027]圖16是表示本發(fā)明的實施方式的圖像形成裝置100中的觸摸事件的導(dǎo)入和導(dǎo)出的圖。
[0028]圖17是表示對在圖像形成裝置100具備的觸摸面板110中顯示的手勢附加信息的局面的圖。
[0029]圖18是表示在圖像形成裝置100再生輕拂手勢的情況下附加軌跡的圖。
[0030]圖19是表示在觸摸面板110中顯示了夾捏手勢的軌跡以及方向的樣式的圖。
[0031]圖20是表示在對觸摸面板110進(jìn)行了使圖像旋轉(zhuǎn)的操作的情況下附加信息的一個樣式的圖。
[0032]圖21是表示登記了觸摸事件的圖像形成裝置100的觸摸面板110的大小和再生該觸摸事件的信息處理裝置的觸摸面板的大小不同的情況下的圖像的顯示樣式的圖。
[0033]圖22是表示圖像形成裝置100執(zhí)行的處理的一部分的流程圖。
[0034]圖23是表示圖像形成裝置100執(zhí)行動畫的情況下的手勢的顯示處理的流程圖。
【具體實施方式】
[0035]以下，參照附圖，說明本發(fā)明的實施方式。在以下的說明中，對同一部件附加了同一符號。它們的名稱以及功能也相同。因此，不重復(fù)進(jìn)行關(guān)于它們的詳細(xì)的說明。
[0036]首先，說明作為信息處理裝置的一個樣式的圖像形成裝置的一個局面。在某個局面中，將圖像形成裝置連接到處于遠(yuǎn)處的遠(yuǎn)程終端，從所連接的遠(yuǎn)程終端側(cè)向圖像形成裝置側(cè)發(fā)送指示操作方法的信息，從而圖像形成裝置能夠?qū)χ甘静僮鞣椒ǖ男畔⑦M(jìn)行合成而顯示?？紤]對操作員從遠(yuǎn)程終端側(cè)發(fā)送的指示操作方法的信息(例如〇標(biāo)記、箭頭、手的圖像等)進(jìn)行合成。但是，在該情況下，產(chǎn)生如下問題:在將指示多點觸摸操作的操作方法指示信息從遠(yuǎn)程終端發(fā)送到圖像形成裝置時，由于不知道實際實施了手勢操作時的時間、強度、方向，所以對在圖像形成裝置上再現(xiàn)的操作內(nèi)容進(jìn)行觀察的用戶不知道進(jìn)行何種程度的操作為好。
[0037]另外，構(gòu)成為:在從遠(yuǎn)程終端側(cè)向圖像形成裝置提供兩次放大的命令的情況下，使與第2次的命令對應(yīng)的放大率比與第I次的命令對應(yīng)的放大率大預(yù)先規(guī)定的大小。因此，針對遠(yuǎn)程終端側(cè)的操作，無法在圖像形成裝置側(cè)忠實地再現(xiàn)操作內(nèi)容。
[0038]另外，在其它局面中，在從遠(yuǎn)處進(jìn)行操作支援時，考慮對服務(wù)臺的操作員的面板操作施加校正，將操作員獨特的動作變換為適合的動作。這是作為操作支援者的從第I操作位置(操作開始位置)至第2操作位置(操作結(jié)束位置)為止的操作支援畫面，在從第I操作畫面至第2操作畫面為止的期間，根據(jù)操作時間對操作畫面進(jìn)行插值的、在操作面板中連續(xù)地動畫顯示的動作。作為從遠(yuǎn)程終端側(cè)向圖像形成裝置側(cè)發(fā)送的信息，僅為觸摸開始時的信息(第I坐標(biāo)值)和觸摸結(jié)束時的信息(第2坐標(biāo)值)，無法在圖像形成裝置側(cè)確定手勢操作。這是因為，在手勢的確定中，需要開始了觸摸操作時的坐標(biāo)值、觸摸操作繼續(xù)的期間的坐標(biāo)值、以及觸摸操作結(jié)束了時的坐標(biāo)值。因此，在該局面中，成為省略觸摸操作繼續(xù)中的坐標(biāo)值來校正用戶的操作內(nèi)容的情況，變得與用戶實際操作的內(nèi)容不同。
[0039]以下例示。
[0040](夾捏(pinch)手勢的情況的例子)
[0041]在用二點的手指觸摸了操作面板的狀態(tài)下，圖像形成裝置在一個手指移動的時間點判定為夾捏手勢，在檢測到手指緩慢移動而該移動停止了預(yù)先規(guī)定的一定時間的情況或者一個手指離開了面板的情況下，判斷為手勢操作結(jié)束。
[0042]圖像形成裝置將該結(jié)束位置作為第2坐標(biāo)值，對最初的坐標(biāo)值與最后的坐標(biāo)值(第2坐標(biāo)值)之間進(jìn)行插值(通過插值圖像的合成而使手勢操作內(nèi)容動畫顯示)。
[0043]如果應(yīng)用上述內(nèi)容，則不僅無法忠實地再現(xiàn)操作內(nèi)容，而且在夾捏手勢中圖像放大時，若放開手指則在此圖像的放大應(yīng)結(jié)束，但在放開了手指時被判斷為手勢結(jié)束位置，會進(jìn)行從開始位置至結(jié)束位置為止的插值。
[0044]S卩，在再生時進(jìn)行了夾捏手勢的情況下，發(fā)生在手勢結(jié)束之后接著插值的版本的夾捏手勢操作的內(nèi)容合成到主體面板上這樣的問題,無法忠實地再現(xiàn)操作內(nèi)容并視覺化。
[0045]因此，圖像形成裝置、其它信息處理裝置在根據(jù)來自用戶的觸摸操作自動再生觸摸事件的情況下，需要由用戶容易地識別被觸摸的點的坐標(biāo)值、操作的內(nèi)容(輕拂操作、夾捏操作等)的技術(shù)。因此，本發(fā)明的實施方式的圖像形成裝置100具備以下那樣的結(jié)構(gòu)。
[0046][圖像形成裝置100的結(jié)構(gòu)]
[0047]參照圖1，說明本發(fā)明的實施方式的圖像形成裝置100。圖1是表示由本發(fā)明的實施方式的圖像形成裝置100實現(xiàn)的功能的框圖。以下，作為應(yīng)用本發(fā)明的技術(shù)思想的信息處理裝置的一個例子，使用圖像形成裝置100。但是，該技術(shù)思想的應(yīng)用對象不限于圖像形成裝置100。本發(fā)明的技術(shù)思想能夠應(yīng)用于平板終端、觸摸面板型計算機、其它至少具備觸摸面板的信息處理裝置。
[0048]在某個局面中，圖像形成裝