專利名稱：一種數(shù)據(jù)快速入庫方法
技術(shù)領(lǐng)域：
本發(fā)明涉及網(wǎng)絡(luò)管理技術(shù)，具體地說，是涉及在復(fù)雜的多層網(wǎng)絡(luò)管理系統(tǒng)中，對大量、異地、分散的節(jié)點數(shù)據(jù)進行處理的方法。
背景技術(shù)：
隨著科學技術(shù)的發(fā)展，人們生活水平的提高，電信運營商的業(yè)務(wù)量越來越大。相應(yīng)地，業(yè)務(wù)數(shù)據(jù)量越來越大；隨著集中網(wǎng)管的地位、作用的提升，集中網(wǎng)管的需求越來越多、細致，相應(yīng)地要求更多的原始數(shù)據(jù)，以此來分析、預(yù)測網(wǎng)管系統(tǒng)的性能。
由于集中網(wǎng)管和各節(jié)點存在地域上的差異，各節(jié)點之間也存在地域上的差異；同時各節(jié)點的業(yè)務(wù)不斷增大，節(jié)點也不斷增多；各節(jié)點不斷產(chǎn)生新的數(shù)據(jù)，這就要求在單位時間內(nèi)要將這些大量的、分散的、異地數(shù)據(jù)快速錄入省級網(wǎng)管的數(shù)據(jù)庫中。
在現(xiàn)行技術(shù)中，業(yè)界采用共用數(shù)據(jù)庫，沒有大量、異地、分散數(shù)據(jù)轉(zhuǎn)移的需求。在實際情況中，輸送數(shù)據(jù)時占用較大的網(wǎng)絡(luò)帶寬，同時單位時間內(nèi)處理的數(shù)據(jù)量有限，在單位時間內(nèi)不能滿足數(shù)據(jù)量越來越大的需求；另一方面，各種數(shù)據(jù)庫均有大數(shù)據(jù)量入庫成熟技術(shù)，但前提是，這些大量數(shù)據(jù)必須在本地，且已準備好的。
因此，如何提供一種對大量、異地、分散數(shù)據(jù)的處理方法，成為亟待解決的問題。

發(fā)明內(nèi)容
本發(fā)明所要解決的技術(shù)問題是提供一種數(shù)據(jù)快速入庫方法，來實現(xiàn)在單位時間內(nèi)將分散在各異地節(jié)點的大量數(shù)據(jù)快速入庫，滿足不斷擴大的業(yè)務(wù)需求和集中管理的需求。
為解決上述技術(shù)問題，本發(fā)明提供方案如下一種數(shù)據(jù)快速入庫方法，用于多層網(wǎng)管系統(tǒng)中各級后臺計算機系統(tǒng)間的交互，及后臺網(wǎng)管系統(tǒng)內(nèi)部的交互，包括如下步驟下級節(jié)點收到數(shù)據(jù)包，將數(shù)據(jù)包處理成數(shù)據(jù)文件形式并保存，并將數(shù)據(jù)文件路徑保存至下級節(jié)點中的數(shù)據(jù)隊列中；下級節(jié)點中的數(shù)據(jù)處理線程根據(jù)下級節(jié)點中數(shù)據(jù)隊列中保存的數(shù)據(jù)文件路徑，采用數(shù)據(jù)庫批處理技術(shù)將數(shù)據(jù)文件批量導(dǎo)入下級節(jié)點中的數(shù)據(jù)庫中；下級節(jié)點將下級節(jié)點需要上報的數(shù)據(jù)文件壓縮成數(shù)據(jù)壓縮包，并上傳至上級節(jié)點；上級節(jié)點收到數(shù)據(jù)壓縮包后將數(shù)據(jù)壓縮包進行解壓縮，將解壓縮后的數(shù)據(jù)文件進行保存，并將數(shù)據(jù)文件路徑保存至上級節(jié)點中的數(shù)據(jù)隊列中；上級節(jié)點中的數(shù)據(jù)處理線程根據(jù)上級節(jié)點中數(shù)據(jù)隊列中保存的數(shù)據(jù)文件路徑，采用數(shù)據(jù)庫批處理技術(shù)將數(shù)據(jù)文件批量導(dǎo)入上級節(jié)點中的數(shù)據(jù)庫中。
本發(fā)明所述的方法，通過采用數(shù)據(jù)庫批處理技術(shù)處理數(shù)據(jù)，提高了數(shù)據(jù)處理效率；通過采用壓縮文件進行數(shù)據(jù)傳輸，減小了網(wǎng)絡(luò)負載壓力；通過在下級采用存儲過程入庫的容錯處理，來去除重復(fù)數(shù)據(jù)，保證了上傳數(shù)據(jù)的唯一性，減少重復(fù)數(shù)據(jù)對上級網(wǎng)管的沖擊；本發(fā)明大大提高了上級節(jié)點在單位時間內(nèi)處理數(shù)據(jù)的能力，極大限度的滿足了擴張、集中管理的需要，減少了對網(wǎng)絡(luò)帶寬的壓力。
本發(fā)明所要解決的技術(shù)問題、技術(shù)方案要點及有益效果，將結(jié)合實施例，參照附圖作進一步的說明。


圖1為本發(fā)明實施例所述多級網(wǎng)絡(luò)混合組網(wǎng)結(jié)構(gòu)示意圖；
圖2為本發(fā)明實施例所述多級網(wǎng)管系統(tǒng)數(shù)據(jù)流向示意圖；圖3為本發(fā)明實施例所述前臺數(shù)據(jù)上傳到后臺OMM主題示意圖；圖4為本發(fā)明實施例所述下級節(jié)點中保存數(shù)據(jù)文件及數(shù)據(jù)文件路徑保存示意圖；圖5為本發(fā)明實施例所述下級后臺數(shù)據(jù)批處理入庫流程圖；圖6為本發(fā)明實施例所述下級后臺數(shù)據(jù)存儲過程入庫流程圖；圖7為本發(fā)明實施例所述下級后臺數(shù)據(jù)主報處理流程圖；圖8為本發(fā)明實施例所述上級后臺數(shù)據(jù)主報處理流程圖；圖9為本發(fā)明實施例所述上級后臺數(shù)據(jù)批處理入庫流程圖。
具體實施例方式
本發(fā)明所述方法，用于多層網(wǎng)管系統(tǒng)(單級、二級、三級網(wǎng)管系統(tǒng)等)中各級后臺計算機系統(tǒng)間的交互，及后臺網(wǎng)管系統(tǒng)內(nèi)部的交互。
如圖1所示，本發(fā)明所述方法可用于由操作維護模塊(OMM)、本地操作維護中心(LOMC)及省級操作維護中心(POMC)組成的混合網(wǎng)絡(luò)中，來實現(xiàn)對大量、異地、分散數(shù)據(jù)的快速入庫處理。
參照圖2，來對本發(fā)明所述方法作進一步說明。
在實際組網(wǎng)中，OMM的數(shù)據(jù)可以上報到LOMC的數(shù)據(jù)庫中，也可以直接上報到POMC的數(shù)據(jù)庫中。
首先，操作維護模塊中的網(wǎng)元通信功能子模塊(EMF)接收前臺定期構(gòu)造并上傳的數(shù)據(jù)包，將數(shù)據(jù)包解析、轉(zhuǎn)換成數(shù)據(jù)對象并發(fā)送到一個主題(J2EE體系中的Jboss主題)上；然后，操作維護模塊中的公共應(yīng)用功能子模塊(CAF)采用監(jiān)聽主題的方法從主題上接收數(shù)據(jù)對象，并將數(shù)據(jù)文件路徑保存至操作維護模塊中的數(shù)據(jù)隊列中；此處，采用監(jiān)聽主題的方式接收數(shù)據(jù)，無論網(wǎng)元通信功能子模塊何時發(fā)送數(shù)據(jù)對象至主題，公共應(yīng)用功能子模塊都將能及時從主題上接收數(shù)據(jù)對象，因此可以支持前臺多次數(shù)據(jù)上報；操作維護模塊中的操作維護模塊數(shù)據(jù)處理線程根據(jù)操作維護模塊中數(shù)據(jù)隊列中保存的數(shù)據(jù)文件路徑，采用數(shù)據(jù)庫批處理技術(shù)將數(shù)據(jù)文件批量導(dǎo)入操作維護模塊數(shù)據(jù)庫中；操作維護模塊根據(jù)操作維護模塊中的主報定時器計時到，將需要上報的數(shù)據(jù)文件進行壓縮，并向LOMC或POMC上傳數(shù)據(jù)壓縮包；此處，OMM主報定時器是根據(jù)前臺上報數(shù)據(jù)包的時間點及上報數(shù)據(jù)包的持續(xù)時間來設(shè)定定時時間的；OMM上的數(shù)據(jù)如果是上報到LOMC中的數(shù)據(jù)庫中，則當本地操作維護中心中的主報定時器到，對從操作維護模塊收到的數(shù)據(jù)壓縮包進行解壓縮處理，根據(jù)不同的數(shù)據(jù)文件對象將解壓縮后的數(shù)據(jù)文件進行合并，根據(jù)數(shù)據(jù)文件的兼容性對數(shù)據(jù)文件作兼容處理并保存(由于LOMC一般需要處理多個OMM的數(shù)據(jù)，各OMM可能是不同版本，因此需要作兼容處理)，并將數(shù)據(jù)文件路徑保存至本地操作維護中心中的數(shù)據(jù)隊列中；此處，LOMC主報定時器是根據(jù)操作維護模塊中主報定時器時間、操作維護模塊的壓縮數(shù)據(jù)時間和上傳數(shù)據(jù)包時間來設(shè)定定時時間的；然后，LOMC中的LOMC數(shù)據(jù)處理線程根據(jù)LOMC中數(shù)據(jù)隊列中保存的數(shù)據(jù)文件路徑，采用數(shù)據(jù)庫批處理技術(shù)將數(shù)據(jù)文件批量導(dǎo)入LOMC數(shù)據(jù)庫中。
OMM上的數(shù)據(jù)如果是直接上報到POMC中的數(shù)據(jù)庫中，則當省級操作維護中心中的主報定時器到，對從操作維護模塊收到的數(shù)據(jù)壓縮包進行解壓縮處理，根據(jù)不同的數(shù)據(jù)文件對象將解壓縮后的數(shù)據(jù)文件進行合并，根據(jù)數(shù)據(jù)文件的兼容性對數(shù)據(jù)文件作兼容處理后并保存，并將數(shù)據(jù)文件路徑保存至省級操作維護中心中的數(shù)據(jù)隊列中；此處，POMC主報定時器是根據(jù)操作維護模塊中主報定時器時間、操作維護模塊的壓縮數(shù)據(jù)時間和上傳數(shù)據(jù)包時間來設(shè)定定時時間的；然后，POMC中的POMC數(shù)據(jù)處理線程根據(jù)POMC中數(shù)據(jù)隊列中保存的數(shù)據(jù)文件路徑，采用數(shù)據(jù)庫批處理技術(shù)將數(shù)據(jù)文件批量導(dǎo)入POMC數(shù)據(jù)庫中。
另外，如果LOMC本身管理前臺網(wǎng)元，即LOMC兼有OMM功能，LOMC本身數(shù)據(jù)(非下級其它OMM上報的數(shù)據(jù))直接上報到POMC數(shù)據(jù)庫中，圖2中未示出。這里，需要說明的是，圖2中所示出的情況，是LOMC沒有接前臺，也就是說LOMC本身沒有數(shù)據(jù)，LOMC的數(shù)據(jù)是來自下級OMM；下級OMM的數(shù)據(jù)除了可以上報LOMC，還可以上報POMC；對于上報給POMC的情況，沒必要通過LOMC再轉(zhuǎn)發(fā)一次，因為那樣會導(dǎo)致效率降低。這里，LOMC接收前臺數(shù)據(jù)過程和前面OMM處理過程一樣，這里不再贅述，看一下LOMC將數(shù)據(jù)上報到POMC數(shù)據(jù)庫過程。當LOMC的定時器計時到后，將需要上報的數(shù)據(jù)文件進行壓縮，并向POMC上傳數(shù)據(jù)壓縮包；此處LOMC定時器示根據(jù)前臺上報數(shù)據(jù)包的時間點及上報數(shù)據(jù)包的持續(xù)時間來設(shè)定定時時間的；POMC的數(shù)據(jù)處理流程如前所述。
參照圖3，為本發(fā)明實施例所述前臺數(shù)據(jù)上傳到后臺OMM主題示意圖。
前后臺都是通過網(wǎng)元通信功能子模塊進行消息交互的，前臺定時構(gòu)造數(shù)據(jù)包，以消息的形式發(fā)送給EMF子模塊，EMF子模塊對前臺數(shù)據(jù)包進行處理，解析成后臺可以識別的數(shù)據(jù)對象，再以消息的形式發(fā)送到一個主題上。
參照圖4，為本發(fā)明實施例所述下級節(jié)點中保存數(shù)據(jù)文件及數(shù)據(jù)文件路徑保存示意圖。
下級公共應(yīng)用功能子模塊(CAF)從主題上接收網(wǎng)元通信功能子模塊(EMF)發(fā)送的消息，按照一定的規(guī)則進行解析，把消息中的數(shù)據(jù)對象保存為數(shù)據(jù)文件；此數(shù)據(jù)文件符合數(shù)據(jù)庫批處理要求；同時將數(shù)據(jù)文件的路徑添加到OMM隊列尾。
由于數(shù)據(jù)消息在內(nèi)存中，占用內(nèi)存，而文件保存在硬盤上，所以保存為文件其實是緩存，減小對內(nèi)存的壓力。
參照圖5，為本發(fā)明實施例所述下級后臺數(shù)據(jù)批處理入庫流程圖。
數(shù)據(jù)批處理入庫是一個獨立的數(shù)據(jù)處理線程，一直在運行；當數(shù)據(jù)處理線程隊列有待處理的數(shù)據(jù)文件時，數(shù)據(jù)處理線程就從數(shù)據(jù)文件路徑隊列頭獲取數(shù)據(jù)文件路徑，調(diào)用數(shù)據(jù)庫批處理工具進行數(shù)據(jù)批處理入庫，充分利用數(shù)據(jù)庫批處理的優(yōu)勢。
如果批處理成功，則判斷對象是否需要上報如果需要上報，則保留數(shù)據(jù)文件；如果不需要上報，則刪除該數(shù)據(jù)文件。
如果批處理上報不成功，則調(diào)用存儲過程入庫，得到存儲過程返回的對象數(shù)據(jù)信息如果還有數(shù)據(jù)(不完全是重復(fù)數(shù)據(jù))，則判斷對象是否需要上報如果需要上報，則更新數(shù)據(jù)文件；如果不需要上報，則刪除該數(shù)據(jù)文件。
如果沒有數(shù)據(jù)(完全是重復(fù)數(shù)據(jù))，則刪除該數(shù)據(jù)文件。
參照圖6，為本發(fā)明實施例所述下級后臺數(shù)據(jù)存儲過程入庫流程圖。
在批處理失敗后，調(diào)用存儲過程入庫；批處理入庫是批量處理數(shù)據(jù)，而存儲過程是逐條處理數(shù)據(jù)。
逐條處理數(shù)據(jù)記錄，判斷數(shù)據(jù)記錄是否和數(shù)據(jù)庫記錄重復(fù)如果重復(fù)，則將該記錄丟棄；否則，記錄該數(shù)據(jù)記錄。最后，更新此次數(shù)據(jù)記錄。
參照圖7，為本發(fā)明實施例所述下級后臺數(shù)據(jù)主報處理流程圖。
下級處理流程是由主報定時器來控制的，當主報定時器時間到，掃描數(shù)據(jù)文件存放目錄，將數(shù)據(jù)文件目錄壓縮為一個文件。
壓縮完畢后，查詢數(shù)據(jù)文件需要上報的上級節(jié)點相關(guān)信息。
根據(jù)上報節(jié)點信息，分別按節(jié)點判斷上級節(jié)點的鏈路狀態(tài)如果鏈路狀態(tài)暢通，則使用FTP進行上傳；否則，記錄無法上報的節(jié)點信息以及數(shù)據(jù)文件信息，以備鏈路恢復(fù)后繼續(xù)上傳。
參照圖8，為本發(fā)明實施例所述上級后臺數(shù)據(jù)主報處理流程圖。
上級處理流程是由主報定時器來控制的，當主報定時器時間到，掃描下級壓縮數(shù)據(jù)文件存放目錄；將下級壓縮數(shù)據(jù)文件進行解壓縮，得到數(shù)據(jù)文件目錄及數(shù)據(jù)文件，然后刪除壓縮數(shù)據(jù)文件。
掃描下級數(shù)據(jù)文件目錄，按照對象記錄各下級數(shù)據(jù)文件路徑，將同一對象不同的數(shù)據(jù)文件路徑記錄下來。
根據(jù)記錄的對象數(shù)據(jù)文件路徑，將同一個對象的數(shù)據(jù)文件合并為一個文件；根據(jù)版本兼容的要求，合并過程中可以根據(jù)數(shù)據(jù)的兼容信息對數(shù)據(jù)作兼容處理，使得上級可以兼容下級不同版本；合并的目的是充分利用數(shù)據(jù)庫批處理工具的優(yōu)勢，減少數(shù)據(jù)入庫的次數(shù)，提高單位時間內(nèi)數(shù)據(jù)入庫的能力。
當一個對象的數(shù)據(jù)文件合并完畢后，將合并后的數(shù)據(jù)文件路徑記錄在數(shù)據(jù)文件隊列中，供批處理流程使用。
參照圖9，為本發(fā)明實施例所述上級后臺數(shù)據(jù)批處理入庫流程圖。
數(shù)據(jù)批處理入庫是一個獨立的數(shù)據(jù)處理線程，一直在運行；當數(shù)據(jù)處理線程隊列有待處理的數(shù)據(jù)文件時，數(shù)據(jù)處理線程就從數(shù)據(jù)文件路徑隊列頭獲取數(shù)據(jù)文件路徑，調(diào)用數(shù)據(jù)庫批處理工具進行數(shù)據(jù)批處理入庫，充分利用數(shù)據(jù)庫批處理的優(yōu)勢。
本發(fā)明所述的一種數(shù)據(jù)快速入庫方法，并不僅僅限于說明書和實施方式中所列運用，它完全可以被適用于各種適合本發(fā)明之領(lǐng)域，對于熟悉本領(lǐng)域的人員而言可容易地實現(xiàn)另外的優(yōu)點和進行修改，因此在不背離權(quán)利要求及等同范圍所限定的一般概念的精神和范圍的情況下，本發(fā)明并不限于特定的細節(jié)、代表性的設(shè)備和這里示出與描述的圖示示例。
權(quán)利要求
1.一種數(shù)據(jù)快速入庫方法，用于多層網(wǎng)管系統(tǒng)中各級后臺計算機系統(tǒng)間的交互，及后臺網(wǎng)管系統(tǒng)內(nèi)部的交互，其特征在于包括如下步驟(1)、下級節(jié)點收到數(shù)據(jù)包，將數(shù)據(jù)包處理成數(shù)據(jù)文件形式并保存，并將數(shù)據(jù)文件路徑保存至下級節(jié)點中的數(shù)據(jù)隊列中；(2)、下級節(jié)點中的數(shù)據(jù)處理線程根據(jù)下級節(jié)點中數(shù)據(jù)隊列中保存的數(shù)據(jù)文件路徑，采用數(shù)據(jù)庫批處理技術(shù)將數(shù)據(jù)文件批量導(dǎo)入下級節(jié)點中的數(shù)據(jù)庫中；(3)、下級節(jié)點將下級節(jié)點需要上報的數(shù)據(jù)文件壓縮成數(shù)據(jù)壓縮包，并上傳至上級節(jié)點；(4)、上級節(jié)點收到數(shù)據(jù)壓縮包后將數(shù)據(jù)壓縮包進行解壓縮，將解壓縮后的數(shù)據(jù)文件進行保存，并將數(shù)據(jù)文件路徑保存至上級節(jié)點中的數(shù)據(jù)隊列中；(5)、上級節(jié)點中的數(shù)據(jù)處理線程根據(jù)上級節(jié)點中數(shù)據(jù)隊列中保存的數(shù)據(jù)文件路徑，采用數(shù)據(jù)庫批處理技術(shù)將數(shù)據(jù)文件批量導(dǎo)入上級節(jié)點中的數(shù)據(jù)庫中。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于所述下級節(jié)點是操作維護模塊。
3.根據(jù)權(quán)利要求1所述的方法，其特征在于所述下級節(jié)點是本級操作維護中心。
4.根據(jù)權(quán)利要求2或3所述的方法，其特征在于步驟(1)中所述下級節(jié)點收到數(shù)據(jù)包，將數(shù)據(jù)包處理成數(shù)據(jù)文件形式并保存，是操作維護模塊中的網(wǎng)元通信功能子模塊接收到前臺上報的數(shù)據(jù)包，將接收到的數(shù)據(jù)包解析成數(shù)據(jù)對象并發(fā)送到主題上，操作維護模塊中的公共應(yīng)用功能子模塊從主題上接收數(shù)據(jù)對象并保存為數(shù)據(jù)文件。
5.根據(jù)權(quán)利要求4所述的方法，其特征在于所述操作維護模塊中的網(wǎng)元通信功能子模塊接收到前臺上報的數(shù)據(jù)包，是收到前臺定期構(gòu)造并發(fā)送的數(shù)據(jù)包。
6.根據(jù)權(quán)利要求4所述的方法，其特征在于所述操作維護模塊中的公共應(yīng)用功能子模塊從主題上接收數(shù)據(jù)文件并保存，是公共應(yīng)用功能子模塊以監(jiān)聽主題的方式接收數(shù)據(jù)文件并保存的。
7.根據(jù)權(quán)利要求4所述的方法，其特征在于步驟(3)中所述下級節(jié)點將下級節(jié)點需要上報的數(shù)據(jù)文件壓縮成數(shù)據(jù)壓縮包，并上傳至上級節(jié)點，是下級節(jié)點根據(jù)下級節(jié)點中的主報定時器計時到，將需要上報的數(shù)據(jù)文件進行壓縮，并根據(jù)所要上報的上級節(jié)點將數(shù)據(jù)壓縮包上傳。
8.根據(jù)權(quán)利要求7所述的方法，其特征在于所述下級節(jié)點中的主報定時器是根據(jù)前臺上報數(shù)據(jù)包的時間點及上報數(shù)據(jù)包的持續(xù)時間來設(shè)定定時時間的。
9.根據(jù)權(quán)利要求2所述的方法，其特征在于所述上級節(jié)點是本地操作維護中心或省級操作維護中心。
10.根據(jù)權(quán)利要求3所述的方法，其特征在于所述上級節(jié)點是省級操作維護中心。
11.根據(jù)權(quán)利要求9或10所述的方法，其特征在于步驟(4)中所述上級節(jié)點收到數(shù)據(jù)壓縮包后將數(shù)據(jù)壓縮包進行解壓縮，是上級節(jié)點中的主報定時器到，上級節(jié)點將收到的數(shù)據(jù)壓縮包進行解壓縮。
12.根據(jù)權(quán)利要求11所述的方法，其特征在于所述上級節(jié)點中的主報定時器是根據(jù)下級節(jié)點主報定時器時間、下級節(jié)點壓縮數(shù)據(jù)時間和上傳數(shù)據(jù)包時間來設(shè)定定時時間的。
13.根據(jù)權(quán)利要求9或10所述的方法，其特征在于步驟(4)中所述上級節(jié)點將解壓縮后的數(shù)據(jù)文件進行保存，是根據(jù)不同的數(shù)據(jù)文件對象將解壓縮后的數(shù)據(jù)文件進行合并并保存。
14.根據(jù)權(quán)利要求1所述的方法，其特征在于所述將數(shù)據(jù)文件批量導(dǎo)入下級節(jié)點或上級節(jié)點數(shù)據(jù)庫中，如果導(dǎo)入數(shù)據(jù)庫失敗，將記錄異常文件，再次導(dǎo)入數(shù)據(jù)庫時，采用存儲過程導(dǎo)入數(shù)據(jù)庫。
15.根據(jù)權(quán)利要求1所述的方法，其特征在于所述上傳數(shù)據(jù)壓縮包，如果失敗，將記錄異常信息。
16.根據(jù)權(quán)利要求1所述的方法，其特征在于步驟(4)中所述將解壓縮后的數(shù)據(jù)文件進行保存，是根據(jù)數(shù)據(jù)文件的兼容性對數(shù)據(jù)文件作兼容處理后并保存的。
全文摘要
本發(fā)明公開了一種數(shù)據(jù)快速入庫方法。下級節(jié)點收到數(shù)據(jù)包，將數(shù)據(jù)包處理成數(shù)據(jù)文件形式并保存，并將數(shù)據(jù)文件路徑保存至下級節(jié)點中的數(shù)據(jù)隊列中；下級節(jié)點中的數(shù)據(jù)處理線程根據(jù)下級節(jié)點中數(shù)據(jù)隊列中保存的數(shù)據(jù)文件路徑，采用數(shù)據(jù)庫批處理技術(shù)將數(shù)據(jù)文件批量導(dǎo)入下級節(jié)點中的數(shù)據(jù)庫中；下級節(jié)點將下級節(jié)點需要上報的數(shù)據(jù)文件壓縮成數(shù)據(jù)壓縮包，并上傳至上級節(jié)點；上級節(jié)點收到數(shù)據(jù)壓縮包后將數(shù)據(jù)壓縮包進行解壓縮，將解壓縮后的數(shù)據(jù)文件進行保存，并將數(shù)據(jù)文件路徑保存至上級節(jié)點中的數(shù)據(jù)隊列中；上級節(jié)點中的數(shù)據(jù)處理線程根據(jù)上級節(jié)點中數(shù)據(jù)隊列中保存的數(shù)據(jù)文件路徑，采用數(shù)據(jù)庫批處理技術(shù)將數(shù)據(jù)文件批量導(dǎo)入上級節(jié)點中的數(shù)據(jù)庫中。
文檔編號H04L12/56GK101039212SQ20061005982
公開日2007年9月19日 申請日期2006年3月15日 優(yōu)先權(quán)日2006年3月15日
發(fā)明者黃遠文 申請人:中興通訊股份有限公司