技術(shù)總結(jié)
一種大數(shù)據(jù)的實(shí)時(shí)存儲(chǔ)、處理和查詢系統(tǒng),包括分布式支撐模塊、數(shù)據(jù)采集模塊、消息中間件模塊、數(shù)據(jù)清洗模塊、數(shù)據(jù)處理模塊、數(shù)據(jù)深度挖掘模塊、數(shù)據(jù)管理模塊、數(shù)據(jù)查詢模塊、系統(tǒng)調(diào)度模塊;各模塊在系統(tǒng)調(diào)度模塊的協(xié)調(diào)下運(yùn)作,實(shí)現(xiàn)數(shù)據(jù)流在各模塊之間的調(diào)度、流轉(zhuǎn);可以協(xié)調(diào)各模塊之間的處理流程,加快了數(shù)據(jù)實(shí)時(shí)性的特定,針對(duì)高吞吐、海量級(jí)數(shù)據(jù)、快速響應(yīng)消息、數(shù)據(jù)高可用等特點(diǎn)做出了有效的改進(jìn),從而提高了大數(shù)據(jù)實(shí)時(shí)數(shù)據(jù)業(yè)務(wù)系統(tǒng)中綜合能力。
技術(shù)研發(fā)人員:任廣坤;馬亞中;張?jiān)?徐玉陽;趙雷;馬小川
受保護(hù)的技術(shù)使用者:北京中海投資管理有限公司
文檔號(hào)碼:201611270361
技術(shù)研發(fā)日:2016.12.25
技術(shù)公布日:2017.06.09