国产精品1024永久观看,大尺度欧美暖暖视频在线观看,亚洲宅男精品一区在线观看,欧美日韩一区二区三区视频,2021中文字幕在线观看

  • <option id="fbvk0"></option>
    1. <rt id="fbvk0"><tr id="fbvk0"></tr></rt>
      <center id="fbvk0"><optgroup id="fbvk0"></optgroup></center>
      <center id="fbvk0"></center>

      <li id="fbvk0"><abbr id="fbvk0"><dl id="fbvk0"></dl></abbr></li>

      一種分布式的網(wǎng)絡(luò)測量數(shù)據(jù)統(tǒng)計分析方法與流程

      文檔序號:11234465閱讀:897來源:國知局
      本發(fā)明屬于網(wǎng)絡(luò)通信領(lǐng)域,具體涉及一種分布式的網(wǎng)絡(luò)測量數(shù)據(jù)統(tǒng)計分析方法。
      背景技術(shù)
      :高速網(wǎng)絡(luò)的數(shù)據(jù)采集分析是分析數(shù)據(jù)傳輸性能、診斷網(wǎng)絡(luò)故障、判定分組傳輸服務(wù)質(zhì)量的重要手段和方法之一。網(wǎng)絡(luò)數(shù)據(jù)的被動測量和分析處理作為一種具有開銷小、采集測量準(zhǔn)確并且不影響網(wǎng)絡(luò)既有用戶業(yè)務(wù)等優(yōu)點的網(wǎng)絡(luò)測量方法而得到廣泛應(yīng)用。一般而言,網(wǎng)絡(luò)被動測量方法通過在網(wǎng)絡(luò)中部署探針設(shè)備和數(shù)據(jù)分析服務(wù)器設(shè)備實現(xiàn)。探針設(shè)備類似于公路上的監(jiān)控攝像頭,是連接到網(wǎng)絡(luò)中需要監(jiān)控和分析的熱點位置,在不影響正常通信的情況下對通過的數(shù)據(jù)進(jìn)行采集和處理的設(shè)備。數(shù)據(jù)分析服務(wù)器類似于城市中的交通管理中心的監(jiān)控調(diào)度室,服務(wù)器實時搜集、分析、處理并向管理員呈現(xiàn)各個探針設(shè)備采集到的網(wǎng)絡(luò)數(shù)據(jù)。被動測量方法在工作時首先由探針設(shè)備對通過的數(shù)據(jù)進(jìn)行采集并將其原封不動地發(fā)送給數(shù)據(jù)分析服務(wù)器;數(shù)據(jù)分析服務(wù)器周期地匯總探針設(shè)備上報的原始數(shù)據(jù)并對其進(jìn)行比對、分析和處理,將最終分析的結(jié)果呈現(xiàn)給網(wǎng)絡(luò)管理人員。數(shù)據(jù)分析服務(wù)器呈現(xiàn)出的結(jié)果一般是關(guān)于全網(wǎng)時延、帶寬和跳數(shù)等有關(guān)的網(wǎng)絡(luò)性能指標(biāo)。隨著網(wǎng)絡(luò)規(guī)模、探針數(shù)量以及網(wǎng)絡(luò)上的數(shù)據(jù)流量的增大,傳統(tǒng)的被動網(wǎng)絡(luò)測量分析方法面臨如下幾個問題。(1)傳輸帶寬無法滿足需求隨著網(wǎng)絡(luò)業(yè)務(wù)流量的增大和探針數(shù)量的增加,采集的數(shù)據(jù)量可能達(dá)到幾十tb的量級。如此巨量數(shù)據(jù)的實時匯總給網(wǎng)絡(luò)傳輸帶寬帶來巨大的挑戰(zhàn)。假設(shè)一次布置了50個探針設(shè)備規(guī)模的網(wǎng)絡(luò)測量實例,每個探針采集1路g比特接口,則負(fù)責(zé)實時傳輸采集數(shù)據(jù)的網(wǎng)絡(luò)應(yīng)該具備至少50gbps的傳送能力,這在實際網(wǎng)絡(luò)中是不可想象的。(2)集中式處理能力無法滿足要求隨著網(wǎng)絡(luò)業(yè)務(wù)流量的增大和探針數(shù)量的增加,對數(shù)據(jù)分析服務(wù)器的處理能力提出越來越高的要求,常見配置的服務(wù)器已經(jīng)很難滿足海量采集數(shù)據(jù)的處理需求。替換和升級數(shù)據(jù)處理服務(wù)器的成本越來越高,并且極為不便。另一方面,探針設(shè)備具備弱處理能力和低數(shù)據(jù)吞吐量(即流經(jīng)每一個探針設(shè)備的數(shù)據(jù)流量相對于匯總到數(shù)據(jù)處理服務(wù)器的所有探針的原始數(shù)據(jù)而言非常少)的特征,而數(shù)據(jù)分析服務(wù)器具有強處理能力和高數(shù)據(jù)吞吐量的特征。中國專利201220245806.3公開了一種分布式數(shù)據(jù)統(tǒng)計系統(tǒng),用于均衡數(shù)據(jù)處理任務(wù)和提高數(shù)據(jù)處理效率;該系統(tǒng)采用標(biāo)準(zhǔn)http協(xié)議,并且并未定義與網(wǎng)絡(luò)測量相關(guān)的統(tǒng)計分析方法,不適合應(yīng)用于對數(shù)據(jù)融合處理有較高要求的網(wǎng)絡(luò)測量領(lǐng)域的分布式數(shù)據(jù)分析處理。技術(shù)實現(xiàn)要素:本發(fā)明的目的在于提供一種分布式的網(wǎng)絡(luò)測量數(shù)據(jù)統(tǒng)計分析方法,解決在大數(shù)據(jù)量和多探針設(shè)備的網(wǎng)絡(luò)測量數(shù)據(jù)實時分析處理問題。實現(xiàn)本發(fā)明目的的技術(shù)方案為:一種分布式網(wǎng)絡(luò)測量數(shù)據(jù)統(tǒng)計分析方法,包括以下步驟:步驟1,數(shù)據(jù)分析服務(wù)器下發(fā)流表;步驟2,各個網(wǎng)絡(luò)探針設(shè)備對流經(jīng)本節(jié)點的局部數(shù)據(jù)進(jìn)行預(yù)處理;步驟3,數(shù)據(jù)分析服務(wù)器根據(jù)所搜集的各個探針設(shè)備的預(yù)處理結(jié)果進(jìn)行融合處理。與現(xiàn)有技術(shù)相比,本發(fā)明的顯著優(yōu)點為:(1)網(wǎng)絡(luò)探針設(shè)備除采集功能外還具備一定的存儲和計算能力,通過調(diào)度服務(wù)的指令,對采集數(shù)據(jù)執(zhí)行過濾、預(yù)處理、融合、存儲、統(tǒng)計以及回調(diào)等操作,從而通過勤務(wù)網(wǎng)絡(luò)(連接服務(wù)器和探針設(shè)備的網(wǎng)絡(luò))僅向數(shù)據(jù)分析服務(wù)器傳輸有限數(shù)據(jù)量,進(jìn)而可以高效利用勤務(wù)網(wǎng)絡(luò)的傳輸帶寬。(2)探針設(shè)備根據(jù)數(shù)據(jù)分析服務(wù)器下發(fā)的數(shù)據(jù)分析規(guī)則對采集的原始數(shù)據(jù)進(jìn)行匹配、預(yù)處理和融合操作;操作完成后將前端處理結(jié)果和部分融合后數(shù)據(jù)通過勤務(wù)網(wǎng)發(fā)送給數(shù)據(jù)分析服務(wù)器,數(shù)據(jù)分析服務(wù)器接收到融合數(shù)據(jù)后對各探針匯總的數(shù)據(jù)預(yù)處理結(jié)果和融合數(shù)據(jù)進(jìn)行融合處理并最終提交用戶;通過分布式的兩級處理方式,大大降低了勤務(wù)網(wǎng)的帶寬壓力。(3)本發(fā)明將需要較高計算量和較大數(shù)據(jù)處理量的數(shù)據(jù)分析任務(wù)調(diào)度到多個網(wǎng)絡(luò)探針設(shè)備中執(zhí)行,從而達(dá)到將計算負(fù)載在全網(wǎng)計算節(jié)點中均衡的目標(biāo);例如:用戶需要對采集數(shù)據(jù)中滿足特定約束的數(shù)據(jù)進(jìn)行統(tǒng)計分析,則數(shù)據(jù)分析服務(wù)器可以將數(shù)據(jù)流約束條件、實時性需求和統(tǒng)計指標(biāo)等信息下發(fā)到指定的探針設(shè)備;網(wǎng)絡(luò)探針設(shè)備則根據(jù)數(shù)據(jù)分析服務(wù)器下發(fā)的任務(wù)需求對采集數(shù)據(jù)進(jìn)行實時流匹配、處理和統(tǒng)計并最終將處理結(jié)果回送數(shù)據(jù)分析服務(wù)器;本發(fā)明能夠大大降低數(shù)據(jù)分析服務(wù)器的計算負(fù)擔(dān),均衡全網(wǎng)的計算開銷。附圖說明圖1是本發(fā)明分布式網(wǎng)絡(luò)測量數(shù)據(jù)統(tǒng)計分析方法示意圖。具體實施方式結(jié)合圖1,一種分布式網(wǎng)絡(luò)測量數(shù)據(jù)統(tǒng)計分析方法,包括以下步驟:步驟1,數(shù)據(jù)分析服務(wù)器下發(fā)流表;步驟2,各個網(wǎng)絡(luò)探針設(shè)備對流經(jīng)本節(jié)點的局部數(shù)據(jù)進(jìn)行預(yù)處理;步驟3,數(shù)據(jù)分析服務(wù)器根據(jù)所搜集的各個探針設(shè)備的預(yù)處理結(jié)果進(jìn)行融合處理。進(jìn)一步的,所述預(yù)處理包括數(shù)據(jù)匹配過濾、數(shù)據(jù)流量統(tǒng)計、數(shù)據(jù)時延統(tǒng)計和數(shù)據(jù)跳數(shù)統(tǒng)計。進(jìn)一步的,數(shù)據(jù)分析服務(wù)器和探針設(shè)備之間通過主從式的命令應(yīng)答方式進(jìn)行交互。進(jìn)一步的,數(shù)據(jù)分析服務(wù)器向探針設(shè)備下發(fā)數(shù)據(jù)流表,數(shù)據(jù)流表包括標(biāo)識域、統(tǒng)計域和操作域;標(biāo)識域用來標(biāo)識感興趣的數(shù)據(jù)流,統(tǒng)計域用來記錄預(yù)處理統(tǒng)計結(jié)果,操作域用來定義探針設(shè)備針對特定數(shù)據(jù)流所執(zhí)行的操作。進(jìn)一步的,數(shù)據(jù)分析服務(wù)器向探針設(shè)備下發(fā)的數(shù)據(jù)流表標(biāo)識域包括原ip地址、目的ip地址、源端口號、目的端口號、協(xié)議號以及其他用戶自定的報文數(shù)據(jù)標(biāo)識。進(jìn)一步的,數(shù)據(jù)分析服務(wù)器向探針設(shè)備下發(fā)的數(shù)據(jù)流表統(tǒng)計域包括持續(xù)時間、數(shù)據(jù)流量、包流量、時延、跳數(shù)以及其他用戶自定義統(tǒng)計量。進(jìn)一步的,數(shù)據(jù)分析服務(wù)器的融合處理方法包括max-min操作、加性操作和乘性操作這些融合處理方法。進(jìn)一步的,數(shù)據(jù)分析服務(wù)器和探針設(shè)備交互的命令主要包括流表操作類命令、數(shù)據(jù)回取類命令和采集報告類命令,所述流表操作類命令包括添加流表、刪除流表和更改流表,所述數(shù)據(jù)回取類命令包括回取統(tǒng)計量命令和回取數(shù)據(jù)命令,所述采集報告類命令包括數(shù)據(jù)采集報告命令和統(tǒng)計量報告命令。下面對本發(fā)明技術(shù)方案進(jìn)行詳細(xì)說明。本發(fā)明的分布式網(wǎng)絡(luò)測量數(shù)據(jù)統(tǒng)計分析方法主要由交互協(xié)議、流表結(jié)構(gòu)和融合處理方法及各部分構(gòu)成。(一)交互協(xié)議該分布式網(wǎng)絡(luò)測量數(shù)據(jù)分析方法架構(gòu)涉及到數(shù)據(jù)分析服務(wù)器與探針設(shè)備之間的一系列數(shù)據(jù)交互,這些數(shù)據(jù)交互必須在一個統(tǒng)一的協(xié)議約定下有序完成,從而實現(xiàn)分布式的數(shù)據(jù)分析功能??傮w而言,數(shù)據(jù)分析服務(wù)器與探針設(shè)備之間是主從關(guān)系,一般由數(shù)據(jù)分析服務(wù)器發(fā)起命令,探針設(shè)備進(jìn)行應(yīng)答的方式進(jìn)行交互。個別情況下也可以由探針設(shè)備主動發(fā)起上報操作。具體協(xié)議交互流程區(qū)分?jǐn)?shù)據(jù)分析服務(wù)器和探針設(shè)備討論。探針設(shè)備:(1)接收數(shù)據(jù)分析服務(wù)器命令;(2)是否可以執(zhí)行該命令?是則繼續(xù)執(zhí)行,否則跳到第4步;(3)執(zhí)行并發(fā)送確認(rèn)執(zhí)行消息給數(shù)據(jù)分析服務(wù)器,跳到第5步;(4)發(fā)送拒絕確認(rèn)消息給數(shù)據(jù)分析服務(wù)器;(5)跳回第1步。數(shù)據(jù)分析服務(wù)器:(1)等待用戶指令;(2)發(fā)送用戶命令給探針設(shè)備;(3)等待探針設(shè)備的確認(rèn);(4)是否超時?是則繼續(xù),否則跳到第1步;(5)是否超過重傳次數(shù)?是則繼續(xù),否則重傳并跳到第3步;(6)跳到第1步。系統(tǒng)協(xié)議中數(shù)據(jù)分析服務(wù)器下發(fā)的命令主要承載于命令消息中,系統(tǒng)支持的命令消息如下:(1)添加流表命令探針設(shè)備收到該命令后,保存該命令消息里數(shù)據(jù)流表用于匹配數(shù)據(jù)流(數(shù)據(jù)流即是可以標(biāo)識網(wǎng)絡(luò)中數(shù)據(jù)的特定的特征,具有相同特征的數(shù)據(jù)歸屬于同一個流)。并標(biāo)記其是否需要實時回傳、存儲和回復(fù)確認(rèn)應(yīng)答。(2)刪除流表命令探針設(shè)備收到該命令后,刪除對應(yīng)的圖表并回復(fù)確認(rèn)應(yīng)答。(3)更改流表命令探針設(shè)備收到該命令后,更改對應(yīng)的數(shù)據(jù)流表,并回復(fù)確認(rèn)應(yīng)答。(4)回取統(tǒng)計量命令取回目前為止特定數(shù)據(jù)流表所對應(yīng)的統(tǒng)計量結(jié)果。探針設(shè)備收到該命令后,回送統(tǒng)計量報告消息并稍帶確認(rèn)應(yīng)答。(5)回取數(shù)據(jù)命令取回目前為止特定數(shù)據(jù)流表所對應(yīng)的所有存儲數(shù)據(jù)。探針設(shè)備收到該命令后,回送與該流表所對應(yīng)的所有存儲數(shù)據(jù),全部存儲數(shù)據(jù)回送結(jié)束后發(fā)送確認(rèn)應(yīng)答。下表為命令消息說明:表1探針設(shè)備收到某些命令后會向數(shù)據(jù)分析服務(wù)器上報報告數(shù)據(jù)。有些報告數(shù)據(jù)數(shù)量龐大,需要多個報文傳輸,在最后傳輸完畢后,探針設(shè)備會傳送應(yīng)答消息給數(shù)據(jù)分析服務(wù)器。探針設(shè)備傳送的報告消息如下:(1)采集數(shù)據(jù)報告消息探針設(shè)備發(fā)送采集數(shù)據(jù)報告消息最后以應(yīng)答消息結(jié)束。(2)統(tǒng)計量報告消息探針設(shè)備發(fā)送統(tǒng)計量報告消息,并以應(yīng)答消息結(jié)束。下表為報告消息說明:表2(二)流表結(jié)構(gòu)本發(fā)明涉及的分布式網(wǎng)絡(luò)測量數(shù)據(jù)分析方法是面向流的實時數(shù)據(jù)分析。所有探針設(shè)備對流的提取、預(yù)處理以及統(tǒng)計記錄等操作都是以數(shù)據(jù)分析服務(wù)器提供的一系列流表為依據(jù)。每個流表描述了探針設(shè)備對流的標(biāo)識和操作,具體包括標(biāo)識域、統(tǒng)計域以及操作域。如表3所示,標(biāo)識域由以下字段組成。表3(1)匹配字段匹配字段決定了使用報文頭部的哪些區(qū)域進(jìn)行流標(biāo)識。通用的標(biāo)準(zhǔn)區(qū)域包括源ip地址、目的ip地址、源端口、目的端口以及協(xié)議字段。對于某些有專用場景需求的用戶可以在流表中添加若干自定義字段。自定義字段允許用戶采用自定義的方式命名,但不可與標(biāo)準(zhǔn)報頭字段重復(fù)。(2)最大字段長度該字段規(guī)定了用于流匹配字段的最大長度,標(biāo)準(zhǔn)報頭字段的最大匹配長度是固定的。例如源ip地址的最大匹配長度為32比特。用戶自定字段的最大匹配長度有用戶定義,但是不得超過帶采集報文的有效長度。(3)邏輯判定字段該字段的值決定了對應(yīng)記錄的匹配規(guī)則與其他記錄的匹配規(guī)則的邏輯關(guān)系。例如:某個流表總的匹配規(guī)則是源ip為a并且目的ip為b,則該流表的流標(biāo)識域中的源ip地址記錄的邏輯判定域為"and",目的ip地址記錄的邏輯判定域也為"and"。(4)取值范圍字段該字段決定了對應(yīng)記錄匹配字段的取值范圍。當(dāng)探針設(shè)備采集到的某個數(shù)據(jù)的匹配報頭字段的值落入該取值范圍,則代表該報文屬于該流,否則不命中。取值范圍以一系列數(shù)據(jù)集合表示。例如{(3,15),(125,1024)}等等。另外,如果本字段不設(shè)置任何匹配過濾,則可以設(shè)置為全部接受(all)。(5)偏移量與偏移長度字段標(biāo)準(zhǔn)協(xié)議匹配區(qū)域的名稱本身就代表了該匹配字段在報頭中所處的位置,例如:源ip地址為ip報頭的第4-7個字節(jié)。但用戶自定義匹配字段的位置一般處于自定義應(yīng)用層頭部,需要用戶手動指定位置。偏移量和偏移長度兩個字段配合則可以指定用戶自定匹配字段在數(shù)據(jù)包中的位置。例如用戶通過將自定義匹配字段的偏移量和偏移長度分別設(shè)置為100和4,則代表用戶希望通過在報文的第100個字節(jié)開始的4個字節(jié)的數(shù)據(jù)值判定采集報文是否屬于該流表指定操作的流。另外,當(dāng)流標(biāo)識域有多個匹配記錄時,其優(yōu)先級按照先通用標(biāo)準(zhǔn)區(qū)域后自定義區(qū)域的順序。統(tǒng)計域由以下幾個字段組成:(1)持續(xù)時間該統(tǒng)計量代表從表項建立開始,該流的持續(xù)了多長時間,該持續(xù)時間為最后一個到達(dá)報文的到達(dá)時刻。數(shù)據(jù)分析服務(wù)器執(zhí)行取回該字段的操作后,返回值為[tf1…tfn]序列,該序列代表各個探針設(shè)備返回的該流最后一個包的時間戳(已排序),數(shù)據(jù)分析服務(wù)器將取最大值標(biāo)識持續(xù)時間統(tǒng)計量。(2)數(shù)據(jù)流量該統(tǒng)計量代表該流目前為止的流量指標(biāo),單位為比特每秒。數(shù)據(jù)分析服務(wù)器執(zhí)行取回該字段的操作后,返回值為[(lp1,tp1)…(lpn,tpn)]數(shù)據(jù)對序列,該序列中的每個數(shù)據(jù)對兒代表一個特定探針設(shè)備上探測的針對同一個數(shù)據(jù)的時間戳tp1和報文長度lpn,數(shù)據(jù)分析服務(wù)器將對其進(jìn)行后續(xù)處理從而標(biāo)識該統(tǒng)計量。(3)包流量該統(tǒng)計量代表該流目前為止的流量指標(biāo),單位為報文每秒。數(shù)據(jù)分析服務(wù)器執(zhí)行取回該字段的操作后,數(shù)據(jù)分析服務(wù)器返回的值為[tp1…tpn]數(shù)據(jù)序列,該序列中的每個數(shù)據(jù)代表一個特定探針設(shè)備上探測的特定數(shù)據(jù)的時間戳,數(shù)據(jù)分析服務(wù)器將對其進(jìn)行后續(xù)處理從而標(biāo)識該統(tǒng)計量。(4)時延該統(tǒng)計量代表該流目前為止的端到端和點到點的時延指標(biāo)。數(shù)據(jù)分析服務(wù)器執(zhí)行取回該字段的操作后,返回的值為[t1…tn]數(shù)據(jù)序列,該序列中的每個數(shù)據(jù)代表一個特定探針設(shè)備上探測的特定報文的時間戳,數(shù)據(jù)分析服務(wù)器將對其進(jìn)行后續(xù)處理從而標(biāo)識該統(tǒng)計量。(5)跳數(shù)該統(tǒng)計量代表該流目前為止的端到端的跳數(shù)指標(biāo)。數(shù)據(jù)分析服務(wù)器執(zhí)行取回該字段的操作后,返回的值為[ttl1…ttln]數(shù)據(jù)序列,該序列中的每個數(shù)據(jù)代表一個特定探針設(shè)備上探測的特定報文的ttl字段值,數(shù)據(jù)分析服務(wù)器將對其進(jìn)行后續(xù)處理從而標(biāo)識該統(tǒng)計量。(6)其他統(tǒng)計量其他自定義統(tǒng)計量的鍵值和數(shù)據(jù)值為用戶自定義的數(shù)值和處理方法。操作域主要由探針設(shè)備針對特定標(biāo)識域所執(zhí)行的操作和動作,由用戶自定義執(zhí)行。表4為統(tǒng)計域健值與數(shù)據(jù)值,其中鍵值為該統(tǒng)計量的標(biāo)識,可以是流表識,也可以是某個數(shù)據(jù)包標(biāo)識(如ipid)。[(lp1,tp1)…(lpn,tpn)]為(報文長度,時間戳)數(shù)據(jù)對兒序列,[ttl1…ttln]為報文中的ttl序列。表4統(tǒng)計量鍵值數(shù)據(jù)值持續(xù)時間流標(biāo)識[tf1…tfn]數(shù)據(jù)流量ipid[(lp1,tp1)…(lpn,tpn)]包流量ipid[tp1…tpn]時延ipid[t1…tn]跳數(shù)ipid[ttl1…ttln](三)融合處理方法當(dāng)數(shù)據(jù)分析服務(wù)器執(zhí)行統(tǒng)計量取回操作后,探針設(shè)備將把經(jīng)過排序生成的對應(yīng)的統(tǒng)計數(shù)據(jù)對傳送至數(shù)據(jù)分析服務(wù)器。此時,數(shù)據(jù)分析服務(wù)器將啟動后處理(融合處理)過程,該過程對數(shù)據(jù)處理后將向用戶輸出所需的統(tǒng)計量信息,具體的融合處理方法有以下幾類:(1)max-min操作類該類操作主要是對屬于某個鍵值的數(shù)據(jù)集取最大最小操作,從而實現(xiàn)統(tǒng)計量的計算。例如對于流持續(xù)時間操作,數(shù)據(jù)分析服務(wù)器將執(zhí)行如下計算:duration=max([tf1…tfn])其中,[tf1…tfn]為n個探針設(shè)備目前為止的最后一個報文到達(dá)的時間戳。數(shù)據(jù)分析服務(wù)器所取得最大值即為該流的最大持續(xù)時間。其他涉及max-min操作統(tǒng)計量涵蓋最大報文長度和最小跳數(shù)等等。(2)加性操作類該類操作主要是對屬于某個鍵值的數(shù)據(jù)集取加性加減法操作,從而實現(xiàn)統(tǒng)計量的計算。例如對于時延操作,數(shù)據(jù)分析服務(wù)器將執(zhí)行如下計算:delay=max([t1…tn])-min(t1…tn)其中,[t1…tn]為每個探針設(shè)備上報的時間戳信息,該序列的最大與最小值之間的差值即為端到端時延統(tǒng)計量。類似的操作還包括跳數(shù)統(tǒng)計量等。(3)乘性操作類該類操作主要是對屬于某個鍵值的數(shù)據(jù)集取乘法或者除法操作,從而實現(xiàn)統(tǒng)計量的計算。例如對于流量操作,數(shù)據(jù)分析服務(wù)器將執(zhí)行如下計算:其中,tpn為探針設(shè)備n上報的采集報文p的時間戳信息,lpn為探針設(shè)備n上報的報文p的長度,該序列的長度之和與時間差之商即為探針設(shè)備n的流量統(tǒng)計量。類似的操作還包括包流量等。另外,上述的融合處理方法可以采用逐值計算的方法(即每采集到一個數(shù)據(jù)計算一次),也可以采用bucket的計算方法(即取一個計算周期例如10秒,對該周期內(nèi)的數(shù)據(jù)的計算結(jié)果即為該段時間的代表性統(tǒng)計結(jié)果)??傮w而言bucket的方法計算量小,統(tǒng)計量數(shù)值抖動小,能夠體現(xiàn)系統(tǒng)穩(wěn)態(tài)特性。下面參考附圖并結(jié)合實施例來詳細(xì)說明本發(fā)明。實施例結(jié)合圖1,一種分布式的網(wǎng)絡(luò)測量數(shù)據(jù)統(tǒng)計分析方法,包括以下步驟:第一步,在網(wǎng)絡(luò)中配置至少1臺數(shù)據(jù)分析服務(wù)器和若干臺探針設(shè)備。第二步,數(shù)據(jù)分析服務(wù)器根據(jù)用戶配置的輸入,通過添加流表命令對探針設(shè)備配置數(shù)據(jù)流表。第三步,探針設(shè)備根據(jù)數(shù)據(jù)分析服務(wù)器下發(fā)配置的流表開始工作,對采集到的數(shù)據(jù)進(jìn)行預(yù)處理和存儲并將其對應(yīng)的統(tǒng)計值和原始數(shù)據(jù)存儲在探針設(shè)備中。第四步,數(shù)據(jù)分析服務(wù)器根據(jù)用戶的操作,通過回取統(tǒng)計量命令或者回取數(shù)據(jù)命令,獲取某一個特定的或者全部的探針設(shè)備的采集數(shù)據(jù)和統(tǒng)計量數(shù)據(jù)。第五步,探針設(shè)備接收到數(shù)據(jù)分析服務(wù)器的回取命令后,搜集本地預(yù)處理結(jié)果或者原始數(shù)據(jù)。探針設(shè)備通過數(shù)據(jù)報告消息或者統(tǒng)計量報告消息將預(yù)處理結(jié)果上報至數(shù)據(jù)分析服務(wù)器。第六步,數(shù)據(jù)分析服務(wù)器接收到探針設(shè)備上報的數(shù)據(jù)消息或者統(tǒng)計量消息,進(jìn)行融合處理,并將融合處理后的結(jié)果向網(wǎng)絡(luò)管理用戶呈現(xiàn)。當(dāng)前第1頁12
      當(dāng)前第1頁1 2 
      網(wǎng)友詢問留言 已有0條留言
      • 還沒有人留言評論。精彩留言會獲得點贊!
      1