專利名稱：移動通信業(yè)務(wù)端到端性能評估方法及系統(tǒng)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及移動通信領(lǐng)域，尤其涉及一種移動通信業(yè)務(wù)端到端性能評估方法及系統(tǒng)。
背景技術(shù)：
隨著通信技術(shù)的發(fā)展，移動通信網(wǎng)絡(luò)可以為用戶提供越來越豐富的移動業(yè)務(wù)和應(yīng)用，如彩信、網(wǎng)頁瀏覽、WAP(Wireless Application Protocol,無線應(yīng)用協(xié)議)、流媒體、網(wǎng)絡(luò)游戲等，這些業(yè)務(wù)為移動運(yùn)營商提供了持續(xù)增長的收入來源。移動通信服務(wù)已經(jīng)從傳統(tǒng)的單一語音業(yè)務(wù)快速向多元化的數(shù)據(jù)業(yè)務(wù)轉(zhuǎn)變，傳統(tǒng)的網(wǎng)絡(luò)管理模式已經(jīng)無法為用戶提供聞品質(zhì)的服務(wù)。
首先，傳統(tǒng)的2G網(wǎng)絡(luò)優(yōu)化手段一般只注重提升KPI (Key Performance Indicators，關(guān)鍵性能指標(biāo))，并且主要是話音業(yè)務(wù)的KPI，難以評估和提升數(shù)據(jù)業(yè)務(wù)的用戶感知，尤其對于種類繁多的數(shù)據(jù)業(yè)務(wù)缺乏評估和優(yōu)化手段。
其次，由于3G、4G時(shí)代，應(yīng)用業(yè)務(wù)越來越復(fù)雜，好的網(wǎng)絡(luò)KPI并不代表著用戶感知的良好。如果用戶在業(yè)務(wù)應(yīng)用的過程中存在影響感知的任何問題，運(yùn)營商往往是用戶投訴的對象。
因此，運(yùn)營商面臨著嚴(yán)峻的考驗(yàn)，如何高效地在資源和用戶體驗(yàn)之間做出最優(yōu)化的平衡已經(jīng)成為全世界運(yùn)營商越來越難實(shí)現(xiàn)的目標(biāo)。發(fā)明內(nèi)容
本發(fā)明的主要目的是提供一種移動通信業(yè)務(wù)端到端性能評估方法，旨在使得運(yùn)營商可以評估體現(xiàn)用戶感知的移動通信業(yè)務(wù)端到端的性能。
本發(fā)明提供了一種移動通信業(yè)務(wù)端到端性能評估方法，包括以下步驟
采集移動通信網(wǎng)絡(luò)端口的數(shù)據(jù)；
將所采集的數(shù)據(jù)進(jìn)行預(yù)處理，獲得端到端性能評估指標(biāo)統(tǒng)計(jì)所需的關(guān)鍵字段信息庫；
分別從測量報(bào)告MR (Measurement Report,測量報(bào)告)系統(tǒng)及呼叫跟蹤C(jī)T (Cal I Trace,呼叫跟蹤)系統(tǒng)獲取MR數(shù)據(jù)、CT數(shù)據(jù)，并根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)和關(guān)鍵字段信息庫的信息，按照移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系進(jìn)行指標(biāo)統(tǒng)計(jì)；
根據(jù)統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)，進(jìn)行業(yè)務(wù)性能評估。
優(yōu)選地，所述將所采集的數(shù)據(jù)進(jìn)行預(yù)處理，獲得端到端性能評估指標(biāo)統(tǒng)計(jì)所需的關(guān)鍵字段信息庫的步驟包括
將所采集的數(shù)據(jù)進(jìn)行協(xié)議解碼，并按時(shí)間進(jìn)行信息排序；
將經(jīng)過解碼、排序處理的數(shù)據(jù)，進(jìn)行單用戶信息串聯(lián)。
從進(jìn)行信息串聯(lián)的數(shù)據(jù)中抽取關(guān)鍵字段信息，建立關(guān)鍵字段信息庫。
優(yōu)選地，所述移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系包括預(yù)先設(shè)置的需要進(jìn)行性能評估的指標(biāo)組合；
所述根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)和關(guān)鍵字段信息庫的信息，按照移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系進(jìn)行指標(biāo)統(tǒng)計(jì)的步驟具體為
根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)及關(guān)鍵字段信息庫信息，按照以下任一方式或其任意組合方式統(tǒng)計(jì)預(yù)先設(shè)置的需要進(jìn)行性能評估的指標(biāo)業(yè)務(wù)類型、用戶、網(wǎng)元覆蓋范圍。
優(yōu)選地，所述根據(jù)統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)，進(jìn)行業(yè)務(wù)性能評估的具體為
從以下任一或任意組合的維度，將統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)進(jìn)行等級劃分，獲得性能評估結(jié)果
協(xié)議層維度、用戶維度、網(wǎng)元維度、端口維度。
優(yōu)選地，所述端口為無線接入網(wǎng)與核心網(wǎng)之間的接口，或者無線接入網(wǎng)與核心網(wǎng)之間的接口與以下任一或多個(gè)接口的任意組合
核心網(wǎng)的內(nèi)部網(wǎng)元之間的接口、無線接入網(wǎng)內(nèi)部網(wǎng)元之間的接口、核心網(wǎng)與外部互操作網(wǎng)之間的接口、移動通信網(wǎng)內(nèi)的其他網(wǎng)元之間的接口。
本發(fā)明還提供了一種移動通信業(yè)務(wù)端到端性能評估系統(tǒng)，包括
數(shù)據(jù)采集服務(wù)器，用于采集移動通信網(wǎng)絡(luò)端口的數(shù)據(jù)；還用于從MR系統(tǒng)及CT系統(tǒng)獲取MR數(shù)據(jù)、CT數(shù)據(jù)；
數(shù)據(jù)處理服務(wù)器，包括
數(shù)據(jù)預(yù)處理模塊，用于將所采集的數(shù)據(jù)進(jìn)行預(yù)處理，獲得端到端性能評估指標(biāo)統(tǒng)計(jì)所需的關(guān)鍵字段信息庫；
指標(biāo)統(tǒng)計(jì)模塊，用于根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)和關(guān)鍵字段信息庫信息，按照移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系進(jìn)行指標(biāo)統(tǒng)計(jì)；
業(yè)務(wù)性能評估模塊，用于根據(jù)統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)，進(jìn)行業(yè)務(wù)性能評估。
優(yōu)選地，所述數(shù)據(jù)預(yù)處理模塊包括
信息排序單元，用于將所采集的數(shù)據(jù)進(jìn)行協(xié)議解碼，并按時(shí)間進(jìn)行信息排序；
信息串聯(lián)單元，用于將經(jīng)過解碼、排序處理的數(shù)據(jù)，進(jìn)行單用戶信息串聯(lián)；
信息庫建立單元，用于從進(jìn)行信息串聯(lián)的數(shù)據(jù)中抽取關(guān)鍵字段信息，建立關(guān)鍵字段信息庫。
優(yōu)選地，所述移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系包括預(yù)先設(shè)置的需要進(jìn)行性能評估的指標(biāo)組合；
所述指標(biāo)統(tǒng)計(jì)模塊具體用于
根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)及關(guān)鍵字段信息庫的信息，按照以下任一方式或其任意組合方式統(tǒng)計(jì)預(yù)先設(shè)置的需要進(jìn)行性能評估的指標(biāo)業(yè)務(wù)類型、用戶、網(wǎng)元覆蓋范圍。
優(yōu)選地，所述業(yè)務(wù)性能評估模塊具體用于
從以下任一或任意組合的維度，將統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)進(jìn)行等級劃分，獲得性能評估結(jié)果
協(xié)議層維度、用戶維度、網(wǎng)元維度、端口維度。
優(yōu)選地，所述系統(tǒng)還包括數(shù)據(jù)存儲服務(wù)器，其包括
原始數(shù)據(jù)存儲模塊，用于存儲數(shù)據(jù)采集服務(wù)器所采集網(wǎng)絡(luò)端口的數(shù)據(jù)、從MR系統(tǒng)獲取的MR數(shù)據(jù)和從CT系統(tǒng)獲取的CT數(shù)據(jù)；
評估體系存儲模塊，用于存儲移動通信業(yè)務(wù)端到端性能評估指標(biāo)的評估體系；
指標(biāo)統(tǒng)計(jì)結(jié)果存儲模塊，用于存儲移動通信業(yè)務(wù)端到端性能評估指標(biāo)統(tǒng)計(jì)結(jié)果；
業(yè)務(wù)評估結(jié)果存儲模塊，用于存儲移動通信業(yè)務(wù)端到端性能評估結(jié)果；
客戶端顯示模塊，用于各種數(shù)據(jù)的界面化顯示以及操作控制界面的顯示。
本發(fā)明是以用戶感知為基礎(chǔ)、業(yè)務(wù)為分析對象的，在移動通信業(yè)務(wù)的性能評估方法上進(jìn)行了創(chuàng)新，與傳統(tǒng)的網(wǎng)絡(luò)性能評估方法相比，具有以下優(yōu)勢
(I)移動通信業(yè)務(wù)端到端性能評估系統(tǒng)可通過網(wǎng)絡(luò)側(cè)鏡像端口進(jìn)行數(shù)據(jù)采集，不對現(xiàn)網(wǎng)網(wǎng)元進(jìn)行修改或變更，也不會對現(xiàn)網(wǎng)設(shè)備增加負(fù)荷。同時(shí)，無需通過路測或定點(diǎn)撥測等方式獲取數(shù)據(jù)，這樣就使得數(shù)據(jù)獲取更加便捷，也不會引入路測或定點(diǎn)撥測方式獲取的數(shù)據(jù)具有的片面性問題。
(2)以業(yè)務(wù)為分析對象，直接面向終端用戶，能夠體現(xiàn)終端用戶應(yīng)用業(yè)務(wù)過程中的實(shí)際感受。
(3)移動通信業(yè)務(wù)端到端性能評估涉及了物理層到應(yīng)用層的各層接口協(xié)議的工作狀態(tài)，以及承載業(yè)務(wù)的無線網(wǎng)、核心網(wǎng)、業(yè)務(wù)網(wǎng)等端到端設(shè)備鏈全程。
(4)通過多端口的數(shù)據(jù)采集分析，可實(shí)現(xiàn)對端到端鏈路中每個(gè)網(wǎng)元的性能對業(yè)務(wù)性能的影響評估，并對問題進(jìn)行定位。
(5)從用戶維度評估業(yè)務(wù)的端到端性能，從而可以制定出有效的用戶關(guān)懷策略。


圖1是本發(fā)明移動通信業(yè)務(wù)端到端性能評估方法一實(shí)施例的流程示意圖2是本發(fā)明移動通信業(yè)務(wù)端到端性能評估方法一實(shí)施例中采集網(wǎng)絡(luò)端口數(shù)據(jù)的預(yù)處理流程示意圖3是本發(fā)明移動通信業(yè)務(wù)端到端性能評估方法一實(shí)施例中數(shù)據(jù)采集端口的結(jié)構(gòu)示意圖4是本發(fā)明移動通信業(yè)務(wù)端到端性能評估方法一實(shí)施例中FTP下載業(yè)務(wù)的關(guān)鍵字段信息的結(jié)構(gòu)示意圖5是本發(fā)明移動通信業(yè)務(wù)端到端性能評估方法一實(shí)施例中FTP下載業(yè)務(wù)的端到端性能評估結(jié)果示意圖6是本發(fā)明移動通信業(yè)務(wù)端到端性能評估系統(tǒng)一實(shí)施例的結(jié)構(gòu)示意圖7是本發(fā)明移動通信業(yè)務(wù)端到端性能評估系統(tǒng)一實(shí)施例中數(shù)據(jù)預(yù)處理模塊的結(jié)構(gòu)示意圖8是本發(fā)明移動通信業(yè)務(wù)端到端性能評估系統(tǒng)一實(shí)施例中數(shù)據(jù)存儲服務(wù)器的結(jié)構(gòu)示意圖。
本發(fā)明目的的實(shí)現(xiàn)、功能特點(diǎn)及優(yōu)點(diǎn)將結(jié)合實(shí)施例，參照附圖做進(jìn)一步說明。
具體實(shí)施方式
以下結(jié)合說明書附圖及具體實(shí)施例進(jìn)一步說明本發(fā)明的技術(shù)方案。應(yīng)當(dāng)理解，此處所描述的具體實(shí)施例僅僅用以解釋本發(fā)明，并不用于限定本發(fā)明。
圖1是本發(fā)明移動通信業(yè)務(wù)端到端性能評估方法一實(shí)施例的流程示意圖。
參照圖1，本發(fā)明移動通信業(yè)務(wù)端到端性能評估方法包括以下步驟
步驟S110、采集移動通信網(wǎng)絡(luò)端口的數(shù)據(jù)；
該端口為無線接入網(wǎng)與核心網(wǎng)之間的接口，或者無線接入網(wǎng)與核心網(wǎng)之間的接口與以下任一或多個(gè)接口的任意組合
核心網(wǎng)的內(nèi)部網(wǎng)元之間的接口、無線接入網(wǎng)內(nèi)部網(wǎng)元之間的接口，核心網(wǎng)與外部互操作網(wǎng)(interworked network)之間的接口、移動通信網(wǎng)內(nèi)的其他網(wǎng)元之間的接口。
步驟S120、將所采集的數(shù)據(jù)進(jìn)行預(yù)處理，獲得端到端性能評估指標(biāo)統(tǒng)計(jì)所需的關(guān)鍵字段信息庫；
參照圖2，步驟S120進(jìn)一步包括
步驟S121、將所采集的數(shù)據(jù)進(jìn)行協(xié)議解碼，并按時(shí)間進(jìn)行信息排序；
由于需要對業(yè)務(wù)的進(jìn)行多維度(協(xié)議層維度、用戶維度、網(wǎng)元維度、端口維度等) 的分析，所以必須先對所采集的數(shù)據(jù)進(jìn)行協(xié)議解碼，形成統(tǒng)一的數(shù)據(jù)，再對解碼后的數(shù)據(jù)按照時(shí)間進(jìn)行信息排序。
步驟S122、將經(jīng)過解碼、排序處理的數(shù)據(jù)，進(jìn)行單用戶信息串聯(lián)；
將經(jīng)過解碼、排序處理的數(shù)據(jù)，進(jìn)行單用戶信息串聯(lián)，生成以單用戶的消息交互過程為個(gè)體的信息流組。
步驟S123、從進(jìn)行信息串聯(lián)的數(shù)據(jù)中抽取關(guān)鍵字段信息，建立關(guān)鍵字段信息庫。
對信息串聯(lián)的數(shù)據(jù)進(jìn)行過濾，僅保留關(guān)鍵字段信息，建立關(guān)鍵字段信息庫。該關(guān)鍵字段信息庫中的信息以組為單位，每一組信息代表一個(gè)用戶的單次業(yè)務(wù)流程，每一組信息應(yīng)包含以下字段
(I)數(shù)據(jù)采集端口標(biāo)識字段；
(2)業(yè)務(wù)類型字段，該業(yè)務(wù)類型以應(yīng)用層協(xié)議、TCP(Transmission Control Protocol,傳輸控制協(xié)議)端口號、UDP(User Datagram Protocol,用戶數(shù)據(jù)包協(xié)議)端口號及其他特殊字段作為特征字符；
(3)用戶標(biāo)識字段，該用戶標(biāo)識以IMSI (International Mobile Subscriber-1dentification Number,國際移動用戶識別碼)、TMSI (Temporary Mobile Subscriber Identity,臨時(shí)移動用戶識別碼)或 P-TMSI (Packet-Temporary Mobile Subscriber Identity,分組臨時(shí)移動用戶識別碼)為特征字符；
(4)網(wǎng)元覆蓋標(biāo)識字段,該網(wǎng)元覆蓋標(biāo)識字段以LAC (Location Area Code位置區(qū)碼)、CELLID等標(biāo)識為特征字符；
(5)移動通信網(wǎng)的非接入層的各種請求、釋放消息字段，及其響應(yīng)消息字段；
(6)TCP等傳輸層的連接請求、釋放消息字段，及其響應(yīng)消息字段；
(7)應(yīng)用層的業(yè)務(wù)請求、釋放消息字段，及其響應(yīng)消息字段；
(8)以上每條消息的絕對時(shí)間標(biāo)識字段。
步驟Sl3CK從MR (Measurement Report,測量報(bào)告)系統(tǒng)及 CT (Call Trace,呼叫跟蹤)系統(tǒng)獲取MR數(shù)據(jù)、數(shù)據(jù)，并根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)和關(guān)鍵字段信息庫的信息，按照移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系進(jìn)行指標(biāo)統(tǒng)計(jì)；
在這里需要說明的是，本實(shí)施例中的移動通信網(wǎng)絡(luò)已經(jīng)部署了 MR和CT系統(tǒng)，能正常獲取網(wǎng)絡(luò)面覆蓋情況和面向用戶的無線接入層連接建立和釋放信息的指標(biāo)，包括連接建立成功率和時(shí)延。因此通過分別訪問MR系統(tǒng)及CT系統(tǒng)的存儲器，即可獲得MR數(shù)據(jù)和CT 數(shù)據(jù)。
所述端到端性能評估指標(biāo)體系可以根據(jù)具體情況而定義，包括預(yù)先設(shè)置的需要進(jìn)行性能評估的指標(biāo)組合，該指標(biāo)組合既能有效反映用戶感知，又能反映整個(gè)網(wǎng)絡(luò)及其構(gòu)成單元的性能。該端到端性能評估體系還包括各指標(biāo)統(tǒng)計(jì)所采用的計(jì)算公式等等。
每個(gè)數(shù)據(jù)采集端口均對應(yīng)一組移動通信業(yè)務(wù)端到端性能評估指標(biāo)。在本實(shí)施例中可以定義該端到端性能評估指標(biāo)包括以下類型
(I)信號覆蓋指標(biāo)
(2)移動通信網(wǎng)的無線接入層指標(biāo)
(3)移動通信網(wǎng)的非接入層指標(biāo)
(4) TCP傳輸層指標(biāo)
(5)應(yīng)用層指標(biāo)
(6)端到端業(yè)務(wù)質(zhì)量指標(biāo)
上述端到端性能評估指標(biāo)可以按照以下任一方式或其任意組合進(jìn)行統(tǒng)計(jì)
業(yè)務(wù)類型
用戶
網(wǎng)元覆蓋范圍
步驟S140、根據(jù)統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)，進(jìn)行業(yè)務(wù)性能評估。
步驟S140具體為以業(yè)務(wù)為對象，將統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)進(jìn)行等級劃分，獲得性能評估結(jié)果。以本實(shí)施例定義的移動通信業(yè)務(wù)端到端性能評估體系中包括的評估指標(biāo)為例
首先，對每類業(yè)務(wù)的端到端業(yè)務(wù)質(zhì)量指標(biāo)進(jìn)行等級劃分；
其次，對每類業(yè)務(wù)的應(yīng)用層指標(biāo)、TCP傳輸層指標(biāo)、移動通信網(wǎng)的非接入層指標(biāo)、移動通信網(wǎng)的無線接入層指標(biāo)和信號覆蓋指標(biāo)分別進(jìn)行等級劃分。
指標(biāo)等級可以根據(jù)需要進(jìn)行自定義劃分。例如，可以按照優(yōu)秀、良好、一般、較差、 很差五個(gè)等級劃分，也可以按照從好到差分別為一等至十等進(jìn)行劃分為十個(gè)等級，還可以按照百分制進(jìn)行劃分，或者其他的等級劃分方式。
上述性能評估可以從以下四個(gè)維度進(jìn)行評估
(I)協(xié)議層維度
通過分析步驟S130統(tǒng)計(jì)后的移動通信業(yè)務(wù)端到端性能評估指標(biāo)中各協(xié)議層的指標(biāo)，可對業(yè)務(wù)承載的各協(xié)議層性能進(jìn)行評估。
(2)用戶維度
將步驟S130統(tǒng)計(jì)后的移動通信業(yè)務(wù)端到端性能評估指標(biāo)根據(jù)用戶劃分，可對每個(gè)用戶所使用的每類業(yè)務(wù)進(jìn)行性能評估。
(3)網(wǎng)元維度
將步驟S130統(tǒng)計(jì)后的移動通信業(yè)務(wù)端到端性能評估指標(biāo)根據(jù)區(qū)域劃分，可對小區(qū)級或任意小區(qū)組合的區(qū)域進(jìn)行每類業(yè)務(wù)的性能評估。
(4)端口維度
將步驟S130統(tǒng)計(jì)后的移動通信業(yè)務(wù)端到端性能評估指標(biāo)根據(jù)端口劃分，可對各采集端口的指標(biāo)進(jìn)行對比分析，從而實(shí)現(xiàn)對端到端鏈路中每個(gè)網(wǎng)元的性能對業(yè)務(wù)性能的影響評估，并對問題進(jìn)行定位。
針對不同的評估要求，可以僅對四個(gè)維度中的其中一個(gè)或同時(shí)對多個(gè)維度進(jìn)行評估。
本發(fā)明是以用戶感知為基礎(chǔ)、業(yè)務(wù)為分析對象的，在移動通信業(yè)務(wù)的性能評估方法上進(jìn)行了創(chuàng)新，與傳統(tǒng)的網(wǎng)絡(luò)性能評估方法相比，具有以下優(yōu)勢
(I)移動通信業(yè)務(wù)端到端性能評估系統(tǒng)可通過網(wǎng)絡(luò)側(cè)鏡像端口進(jìn)行數(shù)據(jù)采集，不對現(xiàn)網(wǎng)網(wǎng)元進(jìn)行修改或變更，也不會對現(xiàn)網(wǎng)設(shè)備增加負(fù)荷。同時(shí)，無需通過路測或定點(diǎn)撥測等方式獲取數(shù)據(jù)，這樣就使得數(shù)據(jù)獲取更加便捷，也不會引入路測或定點(diǎn)撥測方式獲取的數(shù)據(jù)具有的片面性問題。
(2)以業(yè)務(wù)為分析對象，直接面向終端用戶，能夠體現(xiàn)終端用戶應(yīng)用業(yè)務(wù)過程中的實(shí)際感受。
(3)移動通信業(yè)務(wù)端到端性能評估涉及了物理層到應(yīng)用層的各層接口協(xié)議的工作狀態(tài)，以及承載業(yè)務(wù)的無線網(wǎng)、核心網(wǎng)、業(yè)務(wù)網(wǎng)等端到端設(shè)備鏈全程。
(4)通過多端口的數(shù)據(jù)采集分析，可實(shí)現(xiàn)對端到端鏈路中每個(gè)網(wǎng)元的性能對業(yè)務(wù)性能的影響評估，并對問題進(jìn)行定位。
(5)從用戶維度評估業(yè)務(wù)的端到端性能，從而可以制定出有效的用戶關(guān)懷策略。
下面以某市FTP(File Transfer Protocol,文件傳輸協(xié)議)下載業(yè)務(wù)為實(shí)施例,對本發(fā)明移動通信業(yè)務(wù)端到端性能評估方法進(jìn)行詳細(xì)說明。
步驟Al、如圖 3 所不，在 UMTS (Universal Mobile Telecommunications System, 通用移動通信系統(tǒng))網(wǎng)絡(luò)的IUPS端口進(jìn)行數(shù)據(jù)采集；
步驟A2、將所采集數(shù)據(jù)進(jìn)行預(yù)處理，獲得FTP下載業(yè)務(wù)端到端性能評估指標(biāo)統(tǒng)計(jì)所需的關(guān)鍵字段信息庫；
該FTP下載業(yè)務(wù)的每一組信息包含以下字段
1.數(shù)據(jù)采集端口標(biāo)識字段IUPS
2.業(yè)務(wù)類型字段FTP服務(wù)器端TCP端口號為21，應(yīng)用層協(xié)議為FTP協(xié)議
3.用戶標(biāo)識字段MSI或P-TMSI
4.網(wǎng)元覆蓋標(biāo)識字段LAC、CELLID
以下第5至第8項(xiàng)字段信息如圖4所示
5.移動通信網(wǎng)的非接入層的各種請求、釋放消息字段，及其響應(yīng)消息字段
6. TCP傳輸層的連接請求、釋放消息字段，及其響應(yīng)消息字段
7.應(yīng)用層的業(yè)務(wù)請求、釋放消息字段，及其響應(yīng)消息字段
8.以上每條消息的絕對時(shí)間標(biāo)識字段
步驟A3、根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)和關(guān)鍵字段信息庫信息，統(tǒng)計(jì)FTP下載業(yè)務(wù)的端到端性能評估指標(biāo)；
1.根據(jù)MR數(shù)據(jù)，可統(tǒng)計(jì)得到信號覆蓋指標(biāo)。
2.根據(jù)CT數(shù)據(jù),可統(tǒng)計(jì)得到RRC(Radio Resource Control,無線資源控制協(xié)議)連接成功率和RRC連接時(shí)延。
3.根據(jù)GPRS (General Packet Radio Service,通用分組無線業(yè)務(wù))附著或服務(wù)請求過程和F1DP (Packet Data Protocol,分組數(shù)據(jù)協(xié)議)上下文激活過程的關(guān)鍵消息字段， 統(tǒng)計(jì)得到非接入層指標(biāo)，包括GPRS附著或服務(wù)請求成功率、GPRS附著或服務(wù)請求時(shí)延、PDP 激活成功率、PDP激活時(shí)延。
4.根據(jù)TCP連接過程的關(guān)鍵消息字段，統(tǒng)計(jì)得到TCP傳輸層指標(biāo)，包括FTP (File Transfer Protocol，文件傳輸協(xié)議)服務(wù)器TCP連接成功率、FTP服務(wù)器TCP連接時(shí)延。
5.根據(jù)FTP服務(wù)器登陸過程和FTP下載過程的關(guān)鍵消息字段，統(tǒng)計(jì)得到應(yīng)用層指標(biāo)，包括FTP服務(wù)器登陸成功率、FTP服務(wù)器登錄時(shí)延、FTP業(yè)務(wù)異常中斷率、FTP下載速率、 FTP下載速率穩(wěn)定度。
6.端到端業(yè)務(wù)質(zhì)量指標(biāo)，包括FTP服務(wù)器端到端連接成功率、FTP服務(wù)器端到端連接時(shí)延、FTP業(yè)務(wù)異常中斷率、FTP下載速率、FTP下載速率穩(wěn)定度。
步驟A4、根據(jù)步驟A3統(tǒng)計(jì)得到的FTP下載業(yè)務(wù)端到端性能評估指標(biāo)，進(jìn)行FTP下載業(yè)務(wù)的性能評估。本實(shí)施例中，指標(biāo)等級按照從好到差劃分為“一等”至“十等”共十個(gè)等級。
如圖5所示，為FTP下載業(yè)務(wù)的端到端性能評估指標(biāo)的全網(wǎng)統(tǒng)計(jì)與評估結(jié)果。
根據(jù)協(xié)議層維度，將FPT下載業(yè)務(wù)的端到端性能評估指標(biāo)進(jìn)行統(tǒng)計(jì)，獲得評估結(jié)果。從FTP下載業(yè)務(wù)的端到端業(yè)務(wù)質(zhì)量指標(biāo)等級評估結(jié)果，可以看出
FTP服務(wù)器端到端連接成功率僅為“六等”，質(zhì)量很差，需要重點(diǎn)關(guān)注。其他指標(biāo)良好。
從FTP下載業(yè)務(wù)的應(yīng)用層指標(biāo)、TCP傳輸層指標(biāo)、移動通信網(wǎng)的非接入層指標(biāo)、移動通信網(wǎng)的無線接入層指標(biāo)和 信號覆蓋指標(biāo)等級評估結(jié)果，可以看出
與FTP服務(wù)器端到端連接成功率關(guān)聯(lián)的FTP服務(wù)器登陸成功率僅為“六等”，質(zhì)量很差，是導(dǎo)致端到端業(yè)務(wù)質(zhì)量指標(biāo)差的主要原因，需要重點(diǎn)關(guān)注，通過對響應(yīng)消息關(guān)鍵字段響應(yīng)碼的分析，得到大量的連接失敗為FTP服務(wù)器拒絕導(dǎo)致，從而可以判斷問題所在為FTP 服務(wù)器，其他指標(biāo)良好。
圖6是本發(fā)明移動通信業(yè)務(wù)端到端性能評估系統(tǒng)一實(shí)施例的結(jié)構(gòu)示意圖。
參照圖6，本發(fā)明移動通信業(yè)務(wù)端到端性能評估系統(tǒng)包括
數(shù)據(jù)采集服務(wù)器110，用于采集移動通信網(wǎng)絡(luò)端口的數(shù)據(jù)；還用于從MR系統(tǒng)及CT 系統(tǒng)獲取MR數(shù)據(jù)、CT數(shù)據(jù)；
數(shù)據(jù)處理服務(wù)器120，包括
數(shù)據(jù)預(yù)處理模塊121，用于將所采集的數(shù)據(jù)進(jìn)行預(yù)處理，獲得端到端性能評估指標(biāo)統(tǒng)計(jì)所需的關(guān)鍵字段信息庫；
指標(biāo)統(tǒng)計(jì)模塊122，用于根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)和關(guān)鍵字段信息庫的信息，按照移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系進(jìn)行指標(biāo)統(tǒng)計(jì)；
業(yè)務(wù)性能評估模塊123，用于根據(jù)統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)，進(jìn)行業(yè)務(wù)性能評估。
參照圖7，上述數(shù)據(jù)預(yù)處理模塊121包括
信息排序單元1211，用于將所采集的數(shù)據(jù)進(jìn)行協(xié)議解碼，并按時(shí)間進(jìn)行信息排序;
信息串聯(lián)單元1212，用于將經(jīng)過解碼、排序處理的數(shù)據(jù)，進(jìn)行單用戶信息串聯(lián)。
信息庫建立單元1213，用于從進(jìn)行信息串聯(lián)的數(shù)據(jù)中抽取關(guān)鍵字段信息，建立關(guān)鍵字段信息庫。
上述指標(biāo)統(tǒng)計(jì)模塊122具體用于
根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)及關(guān)鍵字段信息庫的信息，按照以下任一方式或其任意組合方式統(tǒng)計(jì)預(yù)先設(shè)置的需要進(jìn)行性能評估的指標(biāo)業(yè)務(wù)類型、用戶、網(wǎng)元覆蓋范圍。
上述業(yè)務(wù)性能評估模塊123具體用于
從以下任一或任意組合的維度，將統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)進(jìn)行等級劃分，獲得性能評估結(jié)果
協(xié)議層維度、用戶維度、網(wǎng)元維度、端口維度。
上述數(shù)據(jù)采集服務(wù)器110采集的端口為無線接入網(wǎng)與核心網(wǎng)之間的接口，或者無線接入網(wǎng)與核心網(wǎng)之間的接口與以下任一或多個(gè)端口的任意組合
核心網(wǎng)的內(nèi)部網(wǎng)元之間的接口、無線接入網(wǎng)內(nèi)部網(wǎng)元之間的接口、核心網(wǎng)與外部互操作網(wǎng)(interworked network)之間的接口、移動通信網(wǎng)內(nèi)的其他網(wǎng)元之間的接口。
參照圖8，上述系統(tǒng)還包括數(shù)據(jù)存儲服務(wù)器130，其包括
原始數(shù)據(jù)存儲模塊131，用于存儲數(shù)據(jù)采集服務(wù)器110所采集網(wǎng)絡(luò)端口的數(shù)據(jù)、從 MR系統(tǒng)獲取的MR數(shù)據(jù)和從CT系統(tǒng)獲取的CT數(shù)據(jù)；
評估體系存儲模塊132，用于存儲移動通信業(yè)務(wù)端到端性能評估指標(biāo)的評估體系;
指標(biāo)統(tǒng)計(jì)結(jié)果存儲模塊133，用于存儲移動通信業(yè)務(wù)端到端性能評估指標(biāo)統(tǒng)計(jì)的結(jié)果;
業(yè)務(wù)評估結(jié)果存儲模塊134，用于存儲移動通信業(yè)務(wù)端到端性能評估結(jié)果；
客戶端顯示模塊135，用于各種數(shù)據(jù)的界面化顯示以及操作控制界面的顯示。
本發(fā)明是以用戶感知為基礎(chǔ)、業(yè)務(wù)為分析對象的，在移動通信業(yè)務(wù)的性能評估方法上進(jìn)行了創(chuàng)新，與傳統(tǒng)的網(wǎng)絡(luò)性能評估方法相比，具有以下優(yōu)勢
(I)移動通信業(yè)務(wù)端到端性能評估系統(tǒng)可通過網(wǎng)絡(luò)側(cè)鏡像端口進(jìn)行數(shù)據(jù)采集，不對現(xiàn)網(wǎng)網(wǎng)元進(jìn)行修改或變更，也不會對現(xiàn)網(wǎng)設(shè)備增加負(fù)荷。同時(shí)，無需通過路測或定點(diǎn)撥測等方式獲取數(shù)據(jù)，這樣就使得數(shù)據(jù)獲取更加便捷，也不會引入路測或定點(diǎn)撥測方式獲取的數(shù)據(jù)具有的片面性問題。
(2)以業(yè)務(wù)為分析對象，直接面向終端用戶，能夠體現(xiàn)終端用戶應(yīng)用業(yè)務(wù)過程中的實(shí)際感受。
(3)移動通信業(yè)務(wù)端到端性能評估涉及了物理層到應(yīng)用層的各層接口協(xié)議的工作狀態(tài)，以及承載業(yè)務(wù)的無線網(wǎng)、核心網(wǎng)、業(yè)務(wù)網(wǎng)等端到端設(shè)備鏈全程。
(4)通過多端口的數(shù)據(jù)采集分析，可實(shí)現(xiàn)對端到端鏈路中每個(gè)網(wǎng)元的性能對業(yè)務(wù)性能的影響評估，并對問題進(jìn)行定位。
(5)從用戶維度評估業(yè)務(wù)的端到端性能，從而可以制定出有效的用戶關(guān)懷測策略。
以上所述僅為本發(fā)明的優(yōu)選實(shí)施例，并非因此限制其專利范圍，凡是利用本發(fā)明說明書及附圖內(nèi)容所作的等效結(jié)構(gòu)或等效流程變換，直接或間接運(yùn)用在其他相關(guān)的技術(shù)領(lǐng)域，均同理包括在本發(fā)明的專利 保護(hù)范圍內(nèi)。
權(quán)利要求
1.一種移動通信業(yè)務(wù)端到端性能評估方法，其特征在于，包括以下步驟采集移動通信網(wǎng)絡(luò)端口的數(shù)據(jù)；將所采集的數(shù)據(jù)進(jìn)行預(yù)處理，獲得端到端性能評估指標(biāo)統(tǒng)計(jì)所需的關(guān)鍵字段信息庫； 分別從測量報(bào)告MR系統(tǒng)及呼叫跟蹤C(jī)T系統(tǒng)獲取MR數(shù)據(jù)、CT數(shù)據(jù)，并根據(jù)MR數(shù)據(jù)、 CT數(shù)據(jù)和關(guān)鍵字段信息庫的信息，按照移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系進(jìn)行指標(biāo)統(tǒng)計(jì)；根據(jù)統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)，進(jìn)行業(yè)務(wù)性能評估。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將所采集的數(shù)據(jù)進(jìn)行預(yù)處理，獲得端到端性能評估指標(biāo)統(tǒng)計(jì)所需的關(guān)鍵字段信息庫的步驟包括將所采集的數(shù)據(jù)進(jìn)行協(xié)議解碼，并按時(shí)間進(jìn)行信息排序；將經(jīng)過解碼、排序處理的數(shù)據(jù)，進(jìn)行單用戶信息串聯(lián)。從進(jìn)行信息串聯(lián)的數(shù)據(jù)中抽取關(guān)鍵字段信息，建立關(guān)鍵字段信息庫。
3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系包括預(yù)先設(shè)置的需要進(jìn)行性能評估的指標(biāo)組合；所述根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)和關(guān)鍵字段信息庫的信息，按照移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系進(jìn)行指標(biāo)統(tǒng)計(jì)的步驟具體為根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)及關(guān)鍵字段信息庫信息，按照以下任一方式或其任意組合方式統(tǒng)計(jì)預(yù)先設(shè)置的需要進(jìn)行性能評估的指標(biāo)業(yè)務(wù)類型、用戶、網(wǎng)元覆蓋范圍。
4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述根據(jù)統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)，進(jìn)行業(yè)務(wù)性能評估的具體為從以下任一或任意組合的維度，將統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)進(jìn)行等級劃分，獲得性能評估結(jié)果協(xié)議層維度、用戶維度、網(wǎng)元維度、端口維度。
5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述端口為無線接入網(wǎng)與核心網(wǎng)之間的接口，或者無線接入網(wǎng)與核心網(wǎng)之間的接口與以下任一或多個(gè)接口的任意組合核心網(wǎng)的內(nèi)部網(wǎng)元之間的接口、無線接入網(wǎng)內(nèi)部網(wǎng)元之間的接口、核心網(wǎng)與外部互操作網(wǎng)之間的接口、移動通信網(wǎng)內(nèi)的其他網(wǎng)元之間的接口。
6.一種移動通信業(yè)務(wù)端到端性能評估系統(tǒng)，其特征在于，包括數(shù)據(jù)采集服務(wù)器，用于采集移動通信網(wǎng)絡(luò)端口的數(shù)據(jù)；還用于從MR系統(tǒng)及CT系統(tǒng)獲取 MR數(shù)據(jù)、CT數(shù)據(jù)；數(shù)據(jù)處理服務(wù)器，包括數(shù)據(jù)預(yù)處理模塊，用于將所采集的數(shù)據(jù)進(jìn)行預(yù)處理，獲得端到端性能評估指標(biāo)統(tǒng)計(jì)所需的關(guān)鍵字段信息庫；指標(biāo)統(tǒng)計(jì)模塊，用于根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)和關(guān)鍵字段信息庫的信息，按照移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系進(jìn)行指標(biāo)統(tǒng)計(jì)；業(yè)務(wù)性能評估模塊，用于根據(jù)統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)，進(jìn)行業(yè)務(wù)性能評估。
7.根據(jù)權(quán)利要求6所述的系統(tǒng)，其特征在于，所述數(shù)據(jù)預(yù)處理模塊包括信息排序單元，用于將所采集的數(shù)據(jù)進(jìn)行協(xié)議解碼，并按時(shí)間進(jìn)行信息排序；信息串聯(lián)單元，用于將經(jīng)過解碼、排序處理的數(shù)據(jù)，進(jìn)行單用戶信息串聯(lián)； 信息庫建立單元，用于從進(jìn)行信息串聯(lián)的數(shù)據(jù)中抽取關(guān)鍵字段信息，建立關(guān)鍵字段信息庫。
8.根據(jù)權(quán)利要求7所述的系統(tǒng)，其特征在于，所述移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系包括預(yù)先設(shè)置的需要進(jìn)行性能評估的指標(biāo)組合； 所述指標(biāo)統(tǒng)計(jì)模塊具體用于 根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)及關(guān)鍵字段信息庫的信息，按照以下任一方式或其任意組合方式統(tǒng)計(jì)預(yù)先設(shè)置的需要進(jìn)行性能評估的指標(biāo)業(yè)務(wù)類型、用戶、網(wǎng)元覆蓋范圍。
9.根據(jù)權(quán)利要求8所述的系統(tǒng)，其特征在于，所述業(yè)務(wù)性能評估模塊具體用于 從以下任一或任意組合的維度，將統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)進(jìn)行等級劃分，獲得性能評估結(jié)果 協(xié)議層維度、用戶維度、網(wǎng)元維度、端口維度。
10.根據(jù)權(quán)利要求9所述的系統(tǒng)，其特征在于，還包括數(shù)據(jù)存儲服務(wù)器，其包括 原始數(shù)據(jù)存儲模塊，用于存儲數(shù)據(jù)采集服務(wù)器所采集網(wǎng)絡(luò)端口的數(shù)據(jù)、從MR系統(tǒng)獲取的MR數(shù)據(jù)和從CT系統(tǒng)獲取的CT數(shù)據(jù)； 評估體系存儲模塊，用于存儲移動通信業(yè)務(wù)端到端性能評估指標(biāo)的評估體系； 指標(biāo)統(tǒng)計(jì)結(jié)果存儲模塊，用于存儲移動通信業(yè)務(wù)端到端性能評估指標(biāo)統(tǒng)計(jì)結(jié)果； 業(yè)務(wù)評估結(jié)果存儲模塊，用于存儲移動通信業(yè)務(wù)端到端性能評估結(jié)果； 客戶端顯示模塊，用于各種數(shù)據(jù)的界面化顯示以及操作控制界面的顯示。
全文摘要
本發(fā)明公開一種移動通信業(yè)務(wù)端到端性能評估方法及系統(tǒng)，該方法包括以下步驟采集移動通信網(wǎng)絡(luò)端口的數(shù)據(jù)；將所采集的數(shù)據(jù)進(jìn)行預(yù)處理，獲得端到端性能評估指標(biāo)統(tǒng)計(jì)所需的關(guān)鍵字段信息庫；分別從測量報(bào)告MR系統(tǒng)及呼叫跟蹤C(jī)T系統(tǒng)獲取MR數(shù)據(jù)、CT數(shù)據(jù)，并根據(jù)MR數(shù)據(jù)、CT數(shù)據(jù)和關(guān)鍵字段信息庫的信息，按照移動通信業(yè)務(wù)端到端性能評估指標(biāo)體系進(jìn)行指標(biāo)統(tǒng)計(jì)；根據(jù)統(tǒng)計(jì)的移動通信業(yè)務(wù)端到端性能評估指標(biāo)，進(jìn)行業(yè)務(wù)性能評估。本發(fā)明是以用戶感知為基礎(chǔ)、業(yè)務(wù)為分析對象的，在移動通信業(yè)務(wù)的性能評估方法上進(jìn)行了創(chuàng)新，使得運(yùn)營商可以評估體現(xiàn)用戶感知的移動通信業(yè)務(wù)端到端的性能。
文檔編號H04W24/00GK103024767SQ20111028658
公開日2013年4月3日 申請日期2011年9月23日 優(yōu)先權(quán)日2011年9月23日
發(fā)明者羅榮慧, 馬志斌 申請人:中興通訊股份有限公司