大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)的制作方法
【技術(shù)領(lǐng)域】
[0001]本實(shí)用新型涉及網(wǎng)絡(luò)架構(gòu)，尤其涉及一種大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)。
【背景技術(shù)】
[0002]近年來(lái)，大數(shù)據(jù)如浪潮般席卷全球，深刻改變了人們的生活、工作和思維方式。業(yè)界通常用4個(gè)V來(lái)概括大數(shù)據(jù)的特征。一是數(shù)據(jù)體量巨大(Volume)。從TB級(jí)別，躍升到PB級(jí)別。二是數(shù)據(jù)類型繁多(Variety)。這種類型的多樣性也讓數(shù)據(jù)被分為結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。相對(duì)于以往便于存儲(chǔ)的以文本為主的結(jié)構(gòu)化數(shù)據(jù)，非結(jié)構(gòu)化數(shù)據(jù)越來(lái)越多，包括網(wǎng)絡(luò)日志、音頻、視頻、圖片、地理位置信息等，這些多類型的數(shù)據(jù)對(duì)數(shù)據(jù)的處理能力提出了更高要求。三是價(jià)值密度低(Value)。價(jià)值密度的高低與數(shù)據(jù)總量的大小成反比。以視頻為例，一部I小時(shí)的視頻，在連續(xù)不間斷的監(jiān)控中，有用數(shù)據(jù)可能僅有一二秒。如何通過(guò)強(qiáng)大的機(jī)器算法更迅速地完成數(shù)據(jù)的價(jià)值“提純”成為目前大數(shù)據(jù)背景下亟待解決的難題。四是處理速度快(Velocity)。這是大數(shù)據(jù)區(qū)分于傳統(tǒng)數(shù)據(jù)挖掘的最顯著特征。根據(jù)IDC的“數(shù)字宇宙”的報(bào)告，預(yù)計(jì)到2020年，全球數(shù)據(jù)使用量將達(dá)到35.2ZB。在如此海量的數(shù)據(jù)面前，處理數(shù)據(jù)的效率就是企業(yè)的生命。
[0003]同時(shí)，世界上越來(lái)越多的國(guó)家開始從戰(zhàn)略層面認(rèn)識(shí)大數(shù)據(jù)，在政府治理領(lǐng)域融入大數(shù)據(jù)思維和技術(shù)。我國(guó)各政府也應(yīng)順應(yīng)時(shí)代發(fā)展趨勢(shì)，充分利用大數(shù)據(jù)提升國(guó)家治理能力，以契合推進(jìn)國(guó)家治理能力現(xiàn)代化的時(shí)代要求?？梢哉f(shuō)大數(shù)據(jù)為政府治理能力的提升帶來(lái)了發(fā)展機(jī)遇。首先，大數(shù)據(jù)能推動(dòng)政府治理理念和模式的變化。在政府治理領(lǐng)域，通過(guò)讓海量、動(dòng)態(tài)、多樣的數(shù)據(jù)有效集成為有價(jià)值的信息資源，推動(dòng)政府轉(zhuǎn)變管理理念和治理模式，進(jìn)而加快治理體系和治理能力現(xiàn)代化。其次，大數(shù)據(jù)能推動(dòng)政府治理決策精細(xì)化和科學(xué)化。在大數(shù)據(jù)時(shí)代，數(shù)據(jù)的價(jià)值隨著海量積累而產(chǎn)生質(zhì)變，能夠?qū)?jīng)濟(jì)社會(huì)運(yùn)行規(guī)律進(jìn)行直觀呈現(xiàn)，從而降低政府治理偏差概率，提高政府治理的精細(xì)化和科學(xué)化。最后，大數(shù)據(jù)能推動(dòng)政府治理提高效率和節(jié)約成本。利用大數(shù)據(jù)，可以使政府治理所依據(jù)的數(shù)據(jù)資料更加全面，不同部門和機(jī)構(gòu)之間的協(xié)調(diào)更加順暢，進(jìn)而有效提高工作效率，節(jié)約治理成本。由于政府?dāng)?shù)據(jù)的敏感性，對(duì)網(wǎng)絡(luò)及數(shù)據(jù)的安全性也具有更高的要求。
[0004]為了處理快速增加的數(shù)據(jù)，需要配套的硬件環(huán)境滿足大數(shù)據(jù)處理的需要。用于存儲(chǔ)及應(yīng)用大數(shù)據(jù)的網(wǎng)絡(luò)架構(gòu)需要適應(yīng)大數(shù)據(jù)的特征。
【實(shí)用新型內(nèi)容】
[0005]本實(shí)用新型的目的在于提供一種大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)，以適合大數(shù)據(jù)的存儲(chǔ)和應(yīng)用，確保網(wǎng)絡(luò)及數(shù)據(jù)安全。
[0006]為實(shí)現(xiàn)上述目的，本實(shí)用新型提供了一種大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)，包括:路由器，硬件防火墻，應(yīng)用防火墻，第一交換機(jī)，多個(gè)第一應(yīng)用服務(wù)器，以及分布式存儲(chǔ)系統(tǒng)；該路由器連接該硬件防火墻，該硬件防火墻連接該應(yīng)用防火墻，該應(yīng)用防火墻連接該第一交換機(jī)，該第一交換機(jī)連接該第一應(yīng)用服務(wù)器，該第一應(yīng)用服務(wù)器連接該分布式存儲(chǔ)系統(tǒng)。
[0007]其中，還包括第二交換機(jī)和多個(gè)第二應(yīng)用服務(wù)器，該應(yīng)用防火墻連接該第二交換機(jī)并將該第二交換機(jī)設(shè)置于該應(yīng)用防火墻的DMZ區(qū)域中，該第二交換機(jī)連接第二該應(yīng)用服務(wù)器，該第二應(yīng)用服務(wù)器連接該分布式存儲(chǔ)系統(tǒng)。
[0008]其中，該分布式存儲(chǔ)系統(tǒng)為Oracle RAC集群。
[0009]其中，該分布式存儲(chǔ)系統(tǒng)為Hadoop集群。
[0010]其中，該分布式存儲(chǔ)系統(tǒng)包括Oracle RAC集群和Hadoop集群。
[0011]其中，該Oracle RAC集群包括萬(wàn)兆交換機(jī)和多個(gè)節(jié)點(diǎn)計(jì)算機(jī)，該節(jié)點(diǎn)計(jì)算機(jī)分別連接該萬(wàn)兆交換機(jī)。
[0012]其中，該Hadoop集群包括萬(wàn)兆交換機(jī)和多個(gè)節(jié)點(diǎn)計(jì)算機(jī)，該節(jié)點(diǎn)計(jì)算機(jī)分別連接該萬(wàn)兆交換機(jī)。
[0013]綜上所述，本實(shí)用新型的大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)適合大數(shù)據(jù)的存儲(chǔ)和應(yīng)用，能夠確保網(wǎng)絡(luò)及數(shù)據(jù)安全。
【附圖說(shuō)明】
[0014]圖1為本實(shí)用新型大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)一較佳實(shí)施例的方框圖；
[0015]圖2為本實(shí)用新型大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)又一較佳實(shí)施例的方框圖。
【具體實(shí)施方式】
[0016]下面結(jié)合附圖，通過(guò)對(duì)本實(shí)用新型的【具體實(shí)施方式】詳細(xì)描述，將使本實(shí)用新型的技術(shù)方案及其有益效果顯而易見。
[0017]參見圖1，其為本實(shí)用新型大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)一較佳實(shí)施例的方框圖。在此較佳實(shí)施例中，大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)包括:路由器10，硬件防火墻11，應(yīng)用防火墻12，第一交換機(jī)13，兩個(gè)第一應(yīng)用服務(wù)器14，以及分布式存儲(chǔ)系統(tǒng)15 ;路由器10連接該硬件防火墻11并且接入Internet，該硬件防火墻11連接該應(yīng)用防火墻12，該應(yīng)用防火墻12連接該第一交換機(jī)13，該第一交換機(jī)13連接該第一應(yīng)用服務(wù)器14，該第一應(yīng)用服務(wù)器14連接該分布式存儲(chǔ)系統(tǒng)15。
[0018]本實(shí)用新型采用傳統(tǒng)的硬件防火墻11和目前最先進(jìn)的應(yīng)用防火墻12的組合來(lái)全面確保網(wǎng)絡(luò)及數(shù)據(jù)的安全性，傳統(tǒng)的硬件防火墻11可以在網(wǎng)絡(luò)層面通過(guò)包過(guò)濾的方式來(lái)保護(hù)網(wǎng)絡(luò)及數(shù)據(jù)，而目前最先進(jìn)的應(yīng)用防火墻12可以從應(yīng)用層角度，通過(guò)對(duì)應(yīng)用層協(xié)議識(shí)另O、控制及防護(hù)的方式來(lái)保護(hù)網(wǎng)絡(luò)及數(shù)據(jù)。硬件防火墻11可以選用H3C SecPath F5000-A5。應(yīng)用防火墻12可以選用銥迅NGFW-8820或深信服AF-3020。
[0019]分布式存儲(chǔ)系統(tǒng)15可以為Oracle RAC(實(shí)時(shí)應(yīng)用集群)集群，也可以為Hadoop集群，還可以同時(shí)包括Oracle RAC集群和Hadoop集群。Oracle RAC集群可以由萬(wàn)兆交換機(jī)和多個(gè)節(jié)點(diǎn)計(jì)算機(jī)組成，該節(jié)點(diǎn)計(jì)算機(jī)分別連接該萬(wàn)兆交換機(jī)，例如，可采用IBM X3850X5作為節(jié)點(diǎn)。類似的，Hadoop集群也可以由萬(wàn)兆交換機(jī)和多個(gè)節(jié)點(diǎn)計(jì)算機(jī)組成，該節(jié)點(diǎn)計(jì)算機(jī)分別連接該萬(wàn)兆交換機(jī)，例如，具體可采用DELL R620作為2個(gè)主節(jié)點(diǎn)，以及采用DELLR720xd作為20個(gè)數(shù)據(jù)節(jié)點(diǎn)。分布式存儲(chǔ)系統(tǒng)15具有開放性、擴(kuò)展性，適合于存儲(chǔ)大數(shù)據(jù)，利于搭建并行計(jì)算框架，可以對(duì)海量數(shù)據(jù)進(jìn)行快速分析，挖掘潛在有價(jià)值的數(shù)據(jù)，為海量數(shù)據(jù)分析提供更多的應(yīng)用。而且，同時(shí)采用Oracle RAC集群和Hadoop集群，Oracle RAC集群可作為關(guān)系數(shù)據(jù)庫(kù)存儲(chǔ)結(jié)構(gòu)化數(shù)據(jù)，Hadoop集群可以存儲(chǔ)半/非結(jié)構(gòu)化數(shù)據(jù)，適應(yīng)于大數(shù)據(jù)數(shù)據(jù)類型繁多的特點(diǎn)。
[0020]第一應(yīng)用服務(wù)器14可以用于根據(jù)實(shí)際需求預(yù)先部署各類應(yīng)用程序，從而可以對(duì)數(shù)據(jù)進(jìn)行各種加工或應(yīng)用。例如，第一應(yīng)用服務(wù)器14可以部署ETL(抽取、轉(zhuǎn)換、加載)和調(diào)度軟件，通過(guò)自定義調(diào)度策略和抽取模式，將數(shù)據(jù)從其他數(shù)據(jù)來(lái)源導(dǎo)入到分布式存儲(chǔ)系統(tǒng)15中。還可以用于部署數(shù)據(jù)質(zhì)量管理系統(tǒng)，對(duì)抽取的數(shù)據(jù)做數(shù)據(jù)質(zhì)量剖析，通過(guò)抽樣和掃描數(shù)據(jù)發(fā)現(xiàn)數(shù)據(jù)存在的質(zhì)量問(wèn)題，生成數(shù)據(jù)質(zhì)量報(bào)告。還可以用于部署webservice，對(duì)外提供統(tǒng)資源接口。
[0021]參見圖2，其為本實(shí)用新型大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)又一較佳實(shí)施例的方框圖。在此較佳實(shí)施例中，大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)包括:路由器10，硬件防火墻11，應(yīng)用防火墻12，第一交換機(jī)13，第二交換機(jī)131，兩個(gè)第一應(yīng)用服務(wù)器14，兩個(gè)第二應(yīng)用服務(wù)器141，以及分布式存儲(chǔ)系統(tǒng)15 ;路由器10連接該硬件防火墻11并且接入Internet，該硬件防火墻11連接該應(yīng)用防火墻12，該應(yīng)用防火墻12連接該第一交換機(jī)13和第二交換機(jī)131，并將該第二交換機(jī)131設(shè)置于該應(yīng)用防火墻12的DMZ(隔離區(qū))區(qū)域中，一般是通過(guò)將該第二交換機(jī)131與該應(yīng)用防火墻12的DMZ端口連接來(lái)實(shí)現(xiàn)，該第一交換機(jī)13連接該第一應(yīng)用服務(wù)器14，該第二交換機(jī)131連接該第二應(yīng)用服務(wù)器141，該第一應(yīng)用服務(wù)器14和第二應(yīng)用服務(wù)器141連接該分布式存儲(chǔ)系統(tǒng)15。
[0022]第二應(yīng)用服務(wù)器141和第一應(yīng)用服務(wù)器14 一樣可以用于根據(jù)實(shí)際需求預(yù)先部署各類應(yīng)用程序，從而可以對(duì)數(shù)據(jù)進(jìn)行各種加工或應(yīng)用，只是第二應(yīng)用服務(wù)器141通過(guò)連接第二交換機(jī)131設(shè)置于應(yīng)用防火墻12的DMZ區(qū)域中。在此實(shí)施例中，通過(guò)應(yīng)用防火墻12的端口中配置為DMZ的端口來(lái)建立DMZ區(qū)域，根據(jù)安全策略需求來(lái)把第二應(yīng)用服務(wù)器141連接在DMZ區(qū)域內(nèi)，既確保了網(wǎng)絡(luò)及數(shù)據(jù)的安全性，又滿足了向外網(wǎng)提供服務(wù)的需求。
[0023]綜上所述，本實(shí)用新型的大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)適合大數(shù)據(jù)的存儲(chǔ)和應(yīng)用，能夠確保網(wǎng)絡(luò)及數(shù)據(jù)安全。
[0024]以上所述僅為本實(shí)用新型的較佳實(shí)施例，并不用以限制本實(shí)用新型，凡在本實(shí)用新型的精神和原則之內(nèi)所作的任何修改、等同替換和改進(jìn)等，均應(yīng)包含在本實(shí)用新型的保護(hù)范圍之內(nèi)。
【主權(quán)項(xiàng)】
1.一種大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)，其特征在于，包括:路由器，硬件防火墻，應(yīng)用防火墻，第一交換機(jī)，多個(gè)第一應(yīng)用服務(wù)器，以及分布式存儲(chǔ)系統(tǒng)；該路由器連接該硬件防火墻，該硬件防火墻連接該應(yīng)用防火墻，該應(yīng)用防火墻連接該第一交換機(jī)，該第一交換機(jī)連接該第一應(yīng)用服務(wù)器，該第一應(yīng)用服務(wù)器連接該分布式存儲(chǔ)系統(tǒng)。2.根據(jù)權(quán)利要求1所述的大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)，其特征在于，還包括第二交換機(jī)和多個(gè)第二應(yīng)用服務(wù)器，該應(yīng)用防火墻連接該第二交換機(jī)并將該第二交換機(jī)設(shè)置于該應(yīng)用防火墻的DMZ區(qū)域中，該第二交換機(jī)連接第二該應(yīng)用服務(wù)器，該第二應(yīng)用服務(wù)器連接該分布式存儲(chǔ)系統(tǒng)。3.根據(jù)權(quán)利要求1所述的大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)，其特征在于，該分布式存儲(chǔ)系統(tǒng)為 Oracle RAC 集群。4.根據(jù)權(quán)利要求1所述的大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)，其特征在于，該分布式存儲(chǔ)系統(tǒng)為Hadoop集群。5.根據(jù)權(quán)利要求1所述的大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)，其特征在于，該分布式存儲(chǔ)系統(tǒng)包括Oracle RAC集群和Hadoop集群。6.根據(jù)權(quán)利要求3所述的大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)，其特征在于，該OracleRAC集群包括萬(wàn)兆交換機(jī)和多個(gè)節(jié)點(diǎn)計(jì)算機(jī)，該節(jié)點(diǎn)計(jì)算機(jī)分別連接該萬(wàn)兆交換機(jī)。7.根據(jù)權(quán)利要求4所述的大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)，其特征在于，該Hadoop集群包括萬(wàn)兆交換機(jī)和多個(gè)節(jié)點(diǎn)計(jì)算機(jī)，該節(jié)點(diǎn)計(jì)算機(jī)分別連接該萬(wàn)兆交換機(jī)。
【專利摘要】本實(shí)用新型涉及一種大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)。該大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)包括：路由器，硬件防火墻，應(yīng)用防火墻，第一交換機(jī)，多個(gè)第一應(yīng)用服務(wù)器，以及分布式存儲(chǔ)系統(tǒng)；該路由器連接該硬件防火墻，該硬件防火墻連接該應(yīng)用防火墻，該應(yīng)用防火墻連接該第一交換機(jī)，該第一交換機(jī)連接該第一應(yīng)用服務(wù)器，該第一應(yīng)用服務(wù)器連接該分布式存儲(chǔ)系統(tǒng)。本實(shí)用新型的大數(shù)據(jù)存儲(chǔ)應(yīng)用網(wǎng)絡(luò)架構(gòu)適合大數(shù)據(jù)的存儲(chǔ)和應(yīng)用，能夠確保網(wǎng)絡(luò)及數(shù)據(jù)安全。
【IPC分類】H04L29/06, H04L29/08
【公開號(hào)】CN204887020
【申請(qǐng)?zhí)枴緾N201520582413
【發(fā)明人】劉濤, 張毅忠, 賈西貝
【申請(qǐng)人】深圳市華傲數(shù)據(jù)技術(shù)有限公司
【公開日】2015年12月16日
【申請(qǐng)日】2015年8月5日