技術(shù)編號:6503610
提示:您尚未登錄,請點 登 陸 后下載,如果您還沒有賬戶請點 注 冊 ,登陸完成后,請刷新本頁查看技術(shù)詳細信息。本發(fā)明公開了一種面向帶有描述信息的海量非結(jié)構(gòu)化數(shù)據(jù)分布式處理架構(gòu),包括數(shù)據(jù)采集模塊,收集非結(jié)構(gòu)化數(shù)據(jù)并發(fā)送至數(shù)據(jù)緩沖隊列中;數(shù)據(jù)緩沖及預(yù)處理模塊,暫存數(shù)據(jù)采集模塊發(fā)送的數(shù)據(jù),并可選擇的對數(shù)據(jù)進行修復(fù)或二次處理工作;數(shù)據(jù)分離及歸檔存儲模塊,從前一個模塊分布式隊列中獲取數(shù)據(jù),可選擇對非結(jié)構(gòu)化數(shù)據(jù)和描述信息分離,分離后的數(shù)據(jù)轉(zhuǎn)發(fā)或存儲至后繼模塊,流處理模塊,對最近接入的數(shù)據(jù)進行實時監(jiān)測、比對、計算和處理;分布式數(shù)據(jù)存儲模塊,對非結(jié)構(gòu)化數(shù)據(jù)和描述信息存儲;分布式業(yè)...
注意:該技術(shù)已申請專利,請尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識儲備,不適合論文引用。
請注意,此類技術(shù)沒有源代碼,用于學(xué)習(xí)研究技術(shù)思路。