專利名稱：在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明公開了在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)，屬于無線通信的技術(shù)領(lǐng)域
背景技術(shù)：
隨著社會(huì)的信息化發(fā)展，很多部門也逐步建立各自的業(yè)務(wù)信息系統(tǒng)，但由于部門間共享理念和共享技術(shù)方面的原因，導(dǎo)致位于不同地理位置的各部門雖然都各自擁有足夠充分的數(shù)據(jù)，但這些數(shù)據(jù)仍然沒有被有效共享而集中利用起來。而且即使在同一部門中，由于各業(yè)務(wù)系統(tǒng)建立時(shí)間和提供商不同，各系統(tǒng)的數(shù)據(jù)存在形式、來源和記錄格式也各不相同，這也為異構(gòu)自治系統(tǒng)間實(shí)現(xiàn)數(shù)據(jù)共享帶來不便。同時(shí)，隨著社會(huì)高速發(fā)展，很多企業(yè)部門對數(shù)據(jù)的“實(shí)時(shí)性”需求也越來越高，因?yàn)閿?shù)據(jù)實(shí)時(shí)性越高，將更有利于企業(yè)部門高層做出更及時(shí)、更準(zhǔn)確的決策。因此綜上所述，在這些企業(yè)部門間建立一個(gè)整合了各系統(tǒng)數(shù)據(jù)的“實(shí)時(shí)數(shù)據(jù)共享云”，以實(shí)現(xiàn)完成各部門、各系統(tǒng)的數(shù)據(jù)實(shí)時(shí)共享，對各企業(yè)部門的高端決策具有很大意義。目前關(guān)于通過多系統(tǒng)間數(shù)據(jù)集成最終實(shí)現(xiàn)數(shù)據(jù)共享的方法與系統(tǒng)也有很多，但是這些方法與系統(tǒng)對數(shù)據(jù)共享的實(shí)時(shí)性都還不高。

發(fā)明內(nèi)容
本發(fā)明所要解決的技術(shù)問題是針對上述背景技術(shù)的不足，提供了在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)。本發(fā)明為實(shí)現(xiàn)上述發(fā)明目的采用如下技術(shù)方案:
在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)，包括實(shí)時(shí)監(jiān)測模塊、文件審核模塊、實(shí)時(shí)處理模塊；
所述實(shí)時(shí)監(jiān)測模塊，用于實(shí)時(shí)監(jiān)測異構(gòu)自治系統(tǒng)的數(shù)據(jù)更新情況，將獲取的實(shí)時(shí)數(shù)據(jù)傳輸至文件審核模塊；
所述文件審核模塊，用于從獲取的實(shí)時(shí)數(shù)據(jù)中挑選目標(biāo)數(shù)據(jù)文件，審核目標(biāo)數(shù)據(jù)文件的正確性以及實(shí)時(shí)性,將通過目標(biāo)文件正確性以及實(shí)時(shí)性審核的目標(biāo)數(shù)據(jù)文件傳輸至實(shí)時(shí)處理模塊；
所述實(shí)時(shí)處理模塊，用于根據(jù)目標(biāo)數(shù)據(jù)文件格式提取需要的數(shù)據(jù)，審核數(shù)據(jù)正確性、刪除重復(fù)數(shù)據(jù)，將唯一正確的數(shù)據(jù)傳輸至數(shù)據(jù)共享云。所述在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)中，實(shí)時(shí)處理模塊得到唯一正確數(shù)據(jù)后，按照異構(gòu)自治系統(tǒng)對共享數(shù)據(jù)的需求把唯一正確的數(shù)據(jù)處理為直接共享的數(shù)據(jù)。所述在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)，還包括文件優(yōu)先級審核模塊；
所述文件優(yōu)先級審核模塊，用于向通過文件審核模塊審核的目標(biāo)數(shù)據(jù)文件添加優(yōu)先級
信息，實(shí)時(shí)處理模塊根據(jù)目標(biāo)數(shù)據(jù)文件攜帶的優(yōu)先級信息按序處理目標(biāo)數(shù)據(jù)文件。所述在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)，還包括實(shí)時(shí)推送模塊；
所述實(shí)時(shí)推送模塊，用于將實(shí)時(shí)處理模塊得到的數(shù)據(jù)實(shí)時(shí)推送至異構(gòu)自治系統(tǒng)。本發(fā)明采用上述技術(shù)方案，具有以下有益效果:根據(jù)各異構(gòu)自治系統(tǒng)數(shù)據(jù)的存儲形式和數(shù)據(jù)特征，制定相應(yīng)監(jiān)測方案實(shí)時(shí)監(jiān)測各類數(shù)據(jù)，并通過審核數(shù)據(jù)文件的正確性以及實(shí)時(shí)性，按照優(yōu)先級處理數(shù)據(jù)文件得到直接共享數(shù)據(jù)，提高了異構(gòu)自治系統(tǒng)間實(shí)時(shí)數(shù)據(jù)共享的效率。


圖1為在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)的架構(gòu)圖。圖2為實(shí)時(shí)監(jiān)測模塊實(shí)時(shí)監(jiān)測數(shù)據(jù)更新的示意圖。圖3文件審核模塊審核實(shí)時(shí)數(shù)據(jù)文件示意圖。圖4為實(shí)時(shí)處理模塊處理數(shù)據(jù)文件的示意圖。圖5為實(shí)時(shí)推送模塊推送數(shù)據(jù)的示意圖。
具體實(shí)施例方式下面結(jié)合附圖對發(fā)明的技術(shù)方案進(jìn)行詳細(xì)說明:
在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)，如圖1所示。異構(gòu)自治系統(tǒng)中，部門一有系統(tǒng)
1、系統(tǒng)2，部門_M由系統(tǒng)3、系統(tǒng)4，部門M有系統(tǒng)1、系統(tǒng)2、系統(tǒng)k,，部門N有系統(tǒng)m、系統(tǒng)η。每一個(gè)子系統(tǒng)中的數(shù)據(jù)構(gòu)成目標(biāo)數(shù)據(jù)源。實(shí)時(shí)監(jiān)測模塊、文件審核模塊、文件優(yōu)先級審核模塊、實(shí)時(shí)處理模塊、實(shí)時(shí)推送模塊構(gòu)成本發(fā)明所述的在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)。實(shí)時(shí)監(jiān)測模塊，用于實(shí)時(shí)監(jiān)測異構(gòu)自治系統(tǒng)的數(shù)據(jù)更新情況，將獲取的實(shí)時(shí)數(shù)據(jù)傳輸至文件審核模塊。文件審核模塊，用于從獲取的實(shí)時(shí)數(shù)據(jù)中挑選目標(biāo)數(shù)據(jù)文件，審核目標(biāo)數(shù)據(jù)文件的正確性以及實(shí)時(shí)性，將通過目標(biāo)文件正確性以及實(shí)時(shí)性審核的目標(biāo)數(shù)據(jù)文件傳輸至文件優(yōu)先級審核模塊。文件優(yōu)先級審核模塊向通過文件審核模塊審核的目標(biāo)數(shù)據(jù)文件添加優(yōu)先級信息，實(shí)時(shí)處理模塊根據(jù)目標(biāo)數(shù)據(jù)文件攜帶的優(yōu)先級信息按序處理目標(biāo)數(shù)據(jù)文件。實(shí)時(shí)處理模塊根據(jù)目標(biāo)數(shù)據(jù)文件格式:提取需要的數(shù)據(jù)、審核數(shù)據(jù)正確性、刪除重復(fù)數(shù)據(jù)得到唯一正確的數(shù)據(jù)，將唯一正確的數(shù)據(jù)處理為直接共享的數(shù)據(jù)，將直接共享的數(shù)據(jù)傳輸至數(shù)據(jù)共享云。實(shí)時(shí)推送模塊將實(shí)時(shí)處理模塊得到的數(shù)據(jù)實(shí)時(shí)推送至異構(gòu)自治系統(tǒng)。系統(tǒng)安全性模塊，是在系統(tǒng)在與目標(biāo)數(shù)據(jù)源進(jìn)行數(shù)據(jù)傳輸前需完成的一個(gè)安全認(rèn)證模塊，以確保各部門系統(tǒng)數(shù)據(jù)使用過程中的安全性，當(dāng)系統(tǒng)在初始時(shí)通過了安全性認(rèn)證，那么后續(xù)模塊都不再需要進(jìn)行認(rèn)證，對系統(tǒng)其余模塊“透明”。實(shí)時(shí)監(jiān)測模塊如圖2所示，根據(jù)目標(biāo)數(shù)據(jù)源的格式采取各種數(shù)據(jù)格式對應(yīng)的監(jiān)測方式監(jiān)測數(shù)據(jù)更新:
(1)本地?cái)?shù)據(jù)文件:可采用本地文件監(jiān)測，目前幾種框架都支持對本地文件的實(shí)時(shí)監(jiān)測方法，比如.NET Framework中FileSystemWatcher類可以偵聽文件系統(tǒng)更改通知，并在目錄或目錄中的文件發(fā)生更改時(shí)引發(fā)事件；
(2)異地?cái)?shù)據(jù)文件:可采用將異地?cái)?shù)據(jù)文件路徑以“映射盤”的形式映射為本地路徑，然后再采用(1)方法；
(3)FTP數(shù)據(jù)文件:主要是采用“定時(shí)掃描”的方式，即指每隔指定時(shí)間后對所有文件進(jìn)行一次掃描，以發(fā)現(xiàn)這段時(shí)間內(nèi)是否有新增文件或文件發(fā)生變化。系統(tǒng)主要結(jié)合FTP文件更新頻率設(shè)置系統(tǒng)定時(shí)掃描頻率。對于具有固定文件更新頻率(即每隔固定時(shí)間更新一次文件)的FTP服務(wù)器，系統(tǒng)主要按照文件的更新頻率設(shè)置系統(tǒng)掃描頻率。而對于沒有固定文件更新頻率的FTP服務(wù)器，系統(tǒng)掃描頻率主要根據(jù)實(shí)時(shí)性要求和系統(tǒng)與FTP服務(wù)器負(fù)荷而定。系統(tǒng)掃描頻率就越高，對系統(tǒng)與FTP服務(wù)器負(fù)荷就越大，所以在保證系統(tǒng)和FTP服務(wù)器正常運(yùn)行的前提下，實(shí)時(shí)性要求越高，掃描頻率就越高，反之相反；
(4)數(shù)據(jù)庫數(shù)據(jù):針對不同要求，可以分為兩種，一種是數(shù)據(jù)庫主動(dòng)通知的方法，主要包括:觸發(fā)器法、日志法、廣播法，還有一種為被動(dòng)式的方法，由其他系統(tǒng)定時(shí)掃描數(shù)據(jù)庫以發(fā)現(xiàn)最近更新的目標(biāo)數(shù)據(jù)。文件審核模塊按照圖3所示流程審核實(shí)時(shí)數(shù)據(jù)文件:
(O目標(biāo)文件審核模塊:從實(shí)時(shí)數(shù)據(jù)文件中挑選目標(biāo)數(shù)據(jù)文件，通過目標(biāo)文件審核的實(shí)時(shí)數(shù)據(jù)進(jìn)入下一步驟；否則，停止處理數(shù)據(jù)；
(2)文件正確性初審模塊:檢測目標(biāo)數(shù)據(jù)文件的正確性，對于錯(cuò)誤數(shù)據(jù)不再進(jìn)行處理，對于正確數(shù)據(jù)進(jìn)行下一步驟審核；
(3)文件實(shí)時(shí)性審核模塊:對于有實(shí)時(shí)性限制的數(shù)據(jù)(如:預(yù)警數(shù)據(jù))，設(shè)置最大實(shí)時(shí)時(shí)延值，將數(shù)據(jù)文件“生存時(shí)間”與最大實(shí)時(shí)時(shí)延值對比，其中文件的“生存時(shí)間”由系統(tǒng)實(shí)際處理時(shí)間減去文件最后更新時(shí)間得到，若該數(shù)據(jù)文件的“生存時(shí)間”大于最大實(shí)時(shí)時(shí)延值則不處理該數(shù)據(jù)文件；否則，將該數(shù)據(jù)文件傳輸至文件優(yōu)先級審核模塊。由于系統(tǒng)可能會(huì)出現(xiàn)某一時(shí)間段需要處理的文件過多且數(shù)據(jù)處理較為復(fù)雜，占用系統(tǒng)資源較大，導(dǎo)致超過系統(tǒng)的實(shí)際負(fù)荷，所以系統(tǒng)在文件審核模塊后添加了 “文件優(yōu)先級審核模塊”，該模塊將按照制定一定的“并行處理策略”以實(shí)現(xiàn)各數(shù)據(jù)文件“有序的”并行實(shí)時(shí)處理。具體的“并行處理策略”可以按照各部門對數(shù)據(jù)實(shí)時(shí)性的需求來制定，本發(fā)明主要通過以下幾方面考慮:
(1)設(shè)置系統(tǒng)最多同時(shí)并行處理指定數(shù)量的數(shù)據(jù)文件。具體數(shù)量由系統(tǒng)能承擔(dān)的負(fù)荷和實(shí)際文件更新頻率而定；
(2)制定文件“處理優(yōu)先級”。其中，根據(jù)客戶對各數(shù)據(jù)的實(shí)時(shí)需求，實(shí)時(shí)需求較高的“處理優(yōu)先級”較高，反之，實(shí)時(shí)需求較低的“處理優(yōu)先級”也較低；
(3)對于同一“處理優(yōu)先級”的多個(gè)數(shù)據(jù)文件，根據(jù)文件的更新時(shí)間，優(yōu)先處理較早更新的數(shù)據(jù)文件，根據(jù)各數(shù)據(jù)的不同需求，也可以優(yōu)先處理更新時(shí)間較近的文件。實(shí)時(shí)處理模塊按照圖5所示的流程圖處理數(shù)據(jù)文件。經(jīng)過文件優(yōu)先級審核模塊，已賦予了文件優(yōu)先級的各數(shù)據(jù)文件已被交予實(shí)時(shí)處理模塊，該模塊將按照各文件的優(yōu)先級進(jìn)行有序的并行實(shí)時(shí)處理。而各文件的具體處理細(xì)節(jié)將按照各數(shù)據(jù)文件的要求而不同，各業(yè)務(wù)部門也將按照各自對數(shù)據(jù)的需求添加相對應(yīng)的處理細(xì)節(jié)。一般對數(shù)據(jù)文件的處理主要包括以下幾個(gè)步驟:
(I)數(shù)值提取:由于涉及部門之廣、系統(tǒng)之多，數(shù)據(jù)類型和格式也各不一樣，所以本步驟主要按照各數(shù)據(jù)文件的格式從文件中提取所需要的數(shù)據(jù)。(2)數(shù)據(jù)正確性審核:當(dāng)完成對數(shù)據(jù)文件的數(shù)值提取后，還需要經(jīng)過數(shù)據(jù)的正確性審核。由于包括多個(gè)部門多個(gè)系統(tǒng)的數(shù)據(jù)，數(shù)據(jù)的類型各不一樣，所以各數(shù)據(jù)具體的審核標(biāo)準(zhǔn)也需要按照各數(shù)據(jù)的正確性標(biāo)準(zhǔn)而定，因此數(shù)據(jù)類型不同，數(shù)據(jù)的審核標(biāo)準(zhǔn)也各不一樣。(3)數(shù)據(jù)去重:由于一個(gè)部門中不同的系統(tǒng)間也會(huì)存在相同的數(shù)據(jù)，甚至在不同的部門間也會(huì)發(fā)生數(shù)據(jù)重復(fù)的情況，所以基于“數(shù)據(jù)唯一性”以及“節(jié)省系統(tǒng)資源”等方面考慮，需要將重復(fù)的數(shù)據(jù)進(jìn)行刪除。(4)數(shù)據(jù)處理:當(dāng)完成數(shù)據(jù)的提取、正確性審核和去重后，因不同系統(tǒng)的數(shù)據(jù)需求，有的數(shù)據(jù)可以直接保存到“實(shí)時(shí)數(shù)據(jù)共享云”中，也有部分?jǐn)?shù)據(jù)還需要經(jīng)過一系列的處理才能被其他使用，主要包括:
a數(shù)據(jù)簡單處理:主要包括數(shù)值計(jì)算和數(shù)值統(tǒng)計(jì)等處理；
b數(shù)據(jù)復(fù)雜處理:對于一些具有業(yè)務(wù)特性的數(shù)據(jù)，所做的處理也會(huì)相對復(fù)雜。比如對于具有時(shí)空特性的空間數(shù)據(jù)，一般還要包括插值計(jì)算、提取等值線/等值面、平滑和圖層疊加
等處理。經(jīng)過實(shí)時(shí)處理模塊處理后的數(shù)據(jù)將被統(tǒng)一保存到實(shí)時(shí)數(shù)據(jù)共享云中，實(shí)現(xiàn)了完成各部門、各自治系統(tǒng)間的數(shù)據(jù)實(shí)時(shí)共享。實(shí)時(shí)推送模塊如圖5所示，對于部分系統(tǒng)數(shù)據(jù)對于數(shù)據(jù)“高實(shí)時(shí)性”的要求，在經(jīng)過數(shù)據(jù)實(shí)時(shí)處理模塊的實(shí)時(shí)處理后，數(shù)據(jù)實(shí)時(shí)推送模塊將實(shí)時(shí)將完成把各部門系統(tǒng)所需要的指定數(shù)據(jù)“實(shí)時(shí)主動(dòng)地”推送到各對應(yīng)的系統(tǒng)，或者實(shí)時(shí)發(fā)出消息通知系統(tǒng)去“實(shí)時(shí)數(shù)據(jù)共享云”中獲取指定的數(shù)據(jù)。綜上所述，本發(fā)明具有以下優(yōu)點(diǎn):
(1)文件審核模塊通過正確性驗(yàn)證濾除錯(cuò)誤數(shù)據(jù)，減少了資源浪費(fèi)；對于有實(shí)時(shí)性限制的數(shù)據(jù)進(jìn)行實(shí)時(shí)性審核，略去沒有實(shí)時(shí)性的數(shù)據(jù)，這也減少了資源浪費(fèi)；
(2)文件優(yōu)先級審核模塊給待共享數(shù)據(jù)文件排序，緩解了數(shù)據(jù)共享高峰時(shí)系統(tǒng)的負(fù)荷，提聞了數(shù)據(jù)共孚效率；
(3)實(shí)時(shí)處理模塊對于已經(jīng)挑選出的目標(biāo)數(shù)據(jù)根據(jù)異構(gòu)自治系統(tǒng)需求處理目標(biāo)數(shù)據(jù)得到可以直接共享的數(shù)據(jù)，不需要異構(gòu)自治系統(tǒng)處理目標(biāo)數(shù)據(jù)才能得到共享數(shù)據(jù)，使得數(shù)據(jù)共享更加直接；
(4)實(shí)施推送模塊及時(shí)推送數(shù)據(jù)只需求異構(gòu)自治系統(tǒng)，提高了數(shù)據(jù)共享效率。
權(quán)利要求
1.在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)，其特征在于，包括實(shí)時(shí)監(jiān)測模塊、文件審核模塊、實(shí)時(shí)處理模塊； 所述實(shí)時(shí)監(jiān)測模塊，用于實(shí)時(shí)監(jiān)測異構(gòu)自治系統(tǒng)的數(shù)據(jù)更新情況，將獲取的實(shí)時(shí)數(shù)據(jù)傳輸至文件審核模塊； 所述文件審核模塊，用于從獲取的實(shí)時(shí)數(shù)據(jù)中挑選目標(biāo)數(shù)據(jù)文件，審核目標(biāo)數(shù)據(jù)文件的正確性以及實(shí)時(shí)性,將通過目標(biāo)文件正確性以及實(shí)時(shí)性審核的目標(biāo)數(shù)據(jù)文件傳輸至實(shí)時(shí)處理模塊； 所述實(shí)時(shí)處理模塊，用于根據(jù)目標(biāo)數(shù)據(jù)文件格式提取需要的數(shù)據(jù)，審核數(shù)據(jù)正確性、刪除重復(fù)數(shù)據(jù)，將唯一正確的數(shù)據(jù)傳輸至數(shù)據(jù)共享云。
2.根據(jù)權(quán)利要求1所述的在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)，其特征 在于，所述實(shí)時(shí)處理模塊得到唯一正確數(shù)據(jù)后，按照異構(gòu)自治系統(tǒng)對共享數(shù)據(jù)的需求把唯一正確的數(shù)據(jù)處理為直接共享的數(shù)據(jù)。
3.根據(jù)權(quán)利要求2所述在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)，其特征 在于，所述在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)還包括文件優(yōu)先級審核模塊； 所述文件優(yōu)先級審核模塊，用于向通過文件審核模塊審核的目標(biāo)數(shù)據(jù)文件添加優(yōu)先級信息，實(shí)時(shí)處理模塊根據(jù)目標(biāo)數(shù)據(jù)文件攜帶的優(yōu)先級信息按序處理目標(biāo)數(shù)據(jù)文件。
4.根據(jù)權(quán)利要求2或3所述的在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)，其特征在于，所述在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)還包括實(shí)時(shí)推送模塊； 所述實(shí)時(shí)推送模塊，用于將實(shí)時(shí)處理模塊得到的數(shù)據(jù)實(shí)時(shí)推送至異構(gòu)自治系統(tǒng)。
全文摘要
本發(fā)明公開了在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)，屬于無線通信的技術(shù)領(lǐng)域。所述在異構(gòu)自治系統(tǒng)間實(shí)時(shí)共享數(shù)據(jù)的系統(tǒng)包括實(shí)時(shí)監(jiān)測模塊、文件審核模塊、文件優(yōu)先級審核模塊、實(shí)時(shí)處理模塊、實(shí)時(shí)推送模塊。本發(fā)明通過審核數(shù)據(jù)文件的正確性以及實(shí)時(shí)性，按照優(yōu)先級處理數(shù)據(jù)文件得到直接共享數(shù)據(jù)，提高了數(shù)據(jù)共享的效率。
文檔編號H04L29/08GK103179203SQ201310077990
公開日2013年6月26日 申請日期2013年3月12日 優(yōu)先權(quán)日2013年3月12日
發(fā)明者耿煥同, 黃濤, 賈婷婷, 薛豐昌 申請人:南京信息工程大學(xué)