技術(shù)總結(jié)
本發(fā)明公開一種分布式實(shí)時(shí)計(jì)算系統(tǒng)中計(jì)數(shù)對(duì)賬的方法,其實(shí)現(xiàn)了實(shí)時(shí)計(jì)算中計(jì)數(shù)對(duì)賬過(guò)程中時(shí)間維度的可控性,規(guī)避mysql鎖爭(zhēng)用問(wèn)題。該方法包括:(1)創(chuàng)建存儲(chǔ)spout和bolt計(jì)數(shù)的數(shù)據(jù)庫(kù)表;(2)spout處理過(guò)程中對(duì)消息進(jìn)行計(jì)數(shù)并定時(shí)將計(jì)數(shù)信息刷新到mysql數(shù)據(jù)庫(kù);(3)bolt處理過(guò)程中對(duì)消息進(jìn)行計(jì)數(shù)并定時(shí)將計(jì)數(shù)信息刷新到mysql數(shù)據(jù)庫(kù);(4)topology部署到storm集群,終止topology時(shí)在spout的關(guān)閉方法和bolt的清除方法中加入刷新數(shù)據(jù)庫(kù)的操作。還有分布式實(shí)時(shí)計(jì)算系統(tǒng)中計(jì)數(shù)對(duì)賬的裝置。
技術(shù)研發(fā)人員:曾攀;范衛(wèi)衛(wèi);溫宗臣
受保護(hù)的技術(shù)使用者:北京集奧聚合科技有限公司
文檔號(hào)碼:201610889993
技術(shù)研發(fā)日:2016.10.12
技術(shù)公布日:2017.02.22