本發(fā)明涉及一種將采集到的寬帶數(shù)據(jù)進行挖掘和預(yù)警的方法，具體涉及一種通過采集用戶寬帶的各項數(shù)據(jù)，并將數(shù)據(jù)進行分類、統(tǒng)計和分析，從而找出影響用戶寬帶上網(wǎng)體驗的原因并進行預(yù)警。

背景技術(shù)：

隨著電信運營商寬帶網(wǎng)絡(luò)建設(shè)的全面覆蓋、光纖網(wǎng)絡(luò)的普及和用戶規(guī)模的不斷擴大，因客戶使用原因或網(wǎng)絡(luò)原因?qū)е驴蛻敉对V網(wǎng)絡(luò)上網(wǎng)慢，上不了網(wǎng)的情況，影響用戶上網(wǎng)體驗，導(dǎo)致新客戶發(fā)展慢，出現(xiàn)老客戶流失的現(xiàn)象出現(xiàn)，由于缺少必要的投訴分析手段，投訴處理的難度高，定位問題不精確，投訴問題解決不及時。嚴重影響移動寬帶品牌以及口碑，阻礙移動寬帶的業(yè)務(wù)發(fā)展。

此外，隨著網(wǎng)絡(luò)規(guī)模迅速擴張，網(wǎng)絡(luò)承載能力受到巨大挑戰(zhàn)，寬帶運營商存在的問題也逐漸暴露出來，

A．日常工作缺乏投訴診斷及用戶行為回放手段，無法通過賬號回放用戶歷史信令和業(yè)務(wù)記錄，再現(xiàn)用戶使用場景，大量投訴只能依靠上門排查，投訴處理周期長，定位準確率不高，用戶滿意度較低；

B.缺乏投訴用戶預(yù)警手段，無法先于用戶投訴發(fā)現(xiàn)客戶感知差的問題并進行投訴預(yù)警，及時解決；

C.缺乏運營商寬帶網(wǎng)內(nèi)外業(yè)務(wù)分析手段，難以分析各類業(yè)務(wù)的性能和定位網(wǎng)內(nèi)外較差資源服務(wù)器。

現(xiàn)有寬帶運營商分析用戶行為以及投訴問題的手段，基本來停留在人工現(xiàn)場測試的方法，并未用科學(xué)、海量的大數(shù)據(jù)手段來解決問題。

所以，如何對寬帶網(wǎng)絡(luò)進行全方位科學(xué)的評估優(yōu)化，通過大數(shù)據(jù)手段發(fā)現(xiàn)用戶投訴根源及網(wǎng)絡(luò)資源瓶頸然后進行有效的后臺技術(shù)支撐，提升寬帶網(wǎng)絡(luò)的接入性能和業(yè)務(wù)質(zhì)量，同時做到用戶投訴預(yù)警，達到投訴預(yù)防、降低投訴處理時長、提升投訴相關(guān)指標的目的，這正是本發(fā)明需要解決的重要問題。

通過國內(nèi)檢索發(fā)現(xiàn)以下專利與本發(fā)明有相似之處：

申請?zhí)枮?00810167858.1，名稱為“一種無線寬帶用戶狀態(tài)的監(jiān)測方法和系統(tǒng)”的發(fā)明公開一種無線寬帶用戶狀態(tài)的監(jiān)測方法和系統(tǒng)，該方法包括：在用戶終端和入口服務(wù)器之間發(fā)送檢測報文；用戶終端和入口服務(wù)器根據(jù)檢測報文的接收狀態(tài)確定用戶在線狀態(tài)；用戶終端向用戶提示用戶在線狀態(tài)。此發(fā)明提供的無線寬帶用戶狀態(tài)的監(jiān)測方法和系統(tǒng)，通過在用戶終端和Portal 服務(wù)器之間發(fā)送檢測報文來確定用戶在線狀態(tài)，并在用戶終端向用戶提示用戶在線狀態(tài)，方便了用戶的使用，提升了用戶的良好體驗。

申請?zhí)枮?01410706925.8，名稱為“一種面向家庭寬帶業(yè)務(wù)的PON網(wǎng)絡(luò)故障診斷方法和裝置”的發(fā)明公開一種面向家庭寬帶業(yè)務(wù)的PON網(wǎng)絡(luò)故障診斷方法，根據(jù)故障診斷經(jīng)驗配置各故障類別的故障診斷流程；根據(jù)用戶的故障類別，選擇與所述故障類別相應(yīng)的故障診斷流程；進入所述選擇的故障診斷流程，根據(jù)所述用戶寬帶業(yè)務(wù)賬號獲取該賬號相應(yīng)的設(shè)備信息和業(yè)務(wù)信息，開始依次執(zhí)行所述故障診斷流程中的各個步驟；根據(jù)所述故障診斷流程的診斷結(jié)果到故障診斷知識庫中獲取相應(yīng)的故障處理方法。使用本發(fā)明可有效地減少故障定位的時間，提高處理故障的效率。此發(fā)明還公開一種面向家庭寬帶業(yè)務(wù)的PON網(wǎng)絡(luò)故障診斷裝置。

雖然上述專利也有對用戶寬帶的數(shù)據(jù)的采集和分析，但其作用不是于找出影響用戶上網(wǎng)體驗的原因并進行預(yù)警，從而提高寬帶品牌以及口碑，促進移動寬帶的業(yè)務(wù)發(fā)展。因此，上述專利所采用的方法與本發(fā)明有很大的不同。

技術(shù)實現(xiàn)要素：

本發(fā)明要解決的技術(shù)問題是：目前電信運營商難以對寬帶用戶的上網(wǎng)體驗全面、準確、及時的進行了解，使得由于缺少必要的投訴分析手段，投訴處理的難度高，定位問題不精確，投訴問題解決不及時，嚴重影響了移動寬帶品牌以及口碑，阻礙了寬帶的業(yè)務(wù)發(fā)展。

針以上述問題，本發(fā)明提出的技術(shù)方案是：一種寬帶用戶數(shù)據(jù)挖掘和預(yù)警的方法，先對寬帶用戶上網(wǎng)過程中產(chǎn)生的信息進行數(shù)據(jù)采集，再將采集到的數(shù)據(jù)進行分布式解碼存儲，然后對存儲的數(shù)據(jù)進行實時分析和離線計算；再然后將數(shù)據(jù)分類為：用戶投訴預(yù)警、用戶行為回放、設(shè)備和區(qū)域分析、業(yè)務(wù)專項分析和網(wǎng)內(nèi)外業(yè)務(wù)分析中的一項或多項進行統(tǒng)計，最后將分類和統(tǒng)計好的數(shù)據(jù)以窗口的方式顯示在屏幕上，提供直觀的可視化分析。

進一步地，用戶投訴預(yù)警包括對撥號認證、設(shè)備掉線、終端數(shù)、用戶DNS查詢、P2P流量和HTTP業(yè)務(wù)中的一項或多項進行掃描和統(tǒng)計，并對異常認證、異常掉線、異常終端、異常DNS查詢、異常流量、異常HTTP業(yè)務(wù)中的一項或多項進行預(yù)警。

進一步地，能對掃描到的異常的認證次數(shù)、異常的掉線次數(shù)、異常的終端個數(shù)、異常的DNS查詢成功率、異常的流量大小和異常的HTTP業(yè)務(wù)進行排序和篩選。

進一步地，所述HTTP業(yè)務(wù)包括HTTP成功率、HTTP速率和HTTP丟包重傳率。

進一步地，用戶行為回放包括Radius撥號認證流程、用戶DNS解析流程、用戶TCP信令流程、用戶HTTP業(yè)務(wù)流程中的一項或多項；通過上述信令流程回放再現(xiàn)用戶使用時的場景，定位疑難投訴問題。

進一步地，Radius撥號認證流程包括掃描由于用戶的路由器存在故障，不斷向BRAS發(fā)起PPPOE會話中斷請求導(dǎo)致的異常下線，以及掃描由于用戶路由器至BRAS之間鏈路中斷導(dǎo)致的異常下線，從而對掉線的原因進行準確的預(yù)警。

進一步地，設(shè)備和區(qū)域分析是對不同區(qū)域的OLT、ONU、BRAS用戶的上網(wǎng)設(shè)備和上網(wǎng)的端口進行分類、統(tǒng)計和分析，找出容易出現(xiàn)網(wǎng)絡(luò)異常的上網(wǎng)設(shè)備和端口，以及網(wǎng)絡(luò)異常的上網(wǎng)設(shè)備和端口所分布的地理位置，從而對上網(wǎng)的區(qū)域、設(shè)備和端口進行預(yù)警。

進一步地，業(yè)務(wù)專項分析是針對網(wǎng)絡(luò)電視的流量、播放速率、丟包重傳、卡頓率中的一項或多項進行分類、統(tǒng)計和分析，找出影響網(wǎng)絡(luò)電視播放質(zhì)量的數(shù)據(jù)，從而對網(wǎng)絡(luò)電視的播放質(zhì)量進行預(yù)警。

進一步地，在對網(wǎng)絡(luò)電視的卡頓率進行預(yù)警時，是通過掃描用戶在收看網(wǎng)絡(luò)電視的同時是否有額外流量業(yè)務(wù)，以及用戶在收看網(wǎng)絡(luò)電視時頻道切片的大小，從而找出影響網(wǎng)絡(luò)電視的卡頓率的原因，準確的對網(wǎng)絡(luò)電視的卡頓率進行預(yù)警。

進一步地，網(wǎng)內(nèi)外業(yè)務(wù)分析是對寬帶網(wǎng)絡(luò)中的視頻網(wǎng)站和/或游戲平臺的訪問次數(shù)、訪問成功率、總流量、網(wǎng)絡(luò)傳輸速率中的一項或多項進行分類、統(tǒng)計和分析；并對視頻網(wǎng)站和/或游戲平臺的IP地址段以及URL進行定位，從而對視頻網(wǎng)站和/或游戲平臺進行預(yù)警。

本發(fā)明的優(yōu)點是：

1.本發(fā)明能對用戶使用寬帶過程中的數(shù)據(jù)進行全方位的掃描，從而能找出用戶使用寬帶過程中出現(xiàn)的異常認證、異常掉線、異常終端、異常DNS查詢、異常流量、異常HTTP業(yè)務(wù)的原因，能在用戶投訴前對上述異常情況進行處理，改善用戶的上網(wǎng)體驗，減少投訴，樹立良好的口碑。

2.通過用戶賬號回放用戶Radius撥號認證流程、用戶DNS解析流程、用戶TCP信令流程、用戶HTTP業(yè)務(wù)流程。涵蓋用戶撥號認證、DNS解析、TCP建鏈、HTTP會話等多個關(guān)鍵環(huán)節(jié)；通過信令流程回放再現(xiàn)用戶使用時的場景，精準定位疑難投訴問題，為快速解決用戶遇到的疑難提供了有力的數(shù)據(jù)支持。

3.建立設(shè)備感知層面的分析體系：對不同OLT、ONU、BRAS的用戶進行分析，通過賬號關(guān)聯(lián)，實現(xiàn)不同設(shè)備、不同端口、不通區(qū)域的活躍用戶進行深度分析；實現(xiàn)不同設(shè)備維度、不同區(qū)域維度的小區(qū)寬帶用戶數(shù)量實時監(jiān)控，對大面積用戶感知異常的設(shè)備和區(qū)域及時進行預(yù)警，定期輸出分析報告。

4.對網(wǎng)絡(luò)電視質(zhì)量進行分析：從用戶賬號以及電視頻道維度分析用戶的網(wǎng)絡(luò)電視感知，分析網(wǎng)絡(luò)電視的流量、播放速率、丟包重傳、卡頓率等維度指標。建立網(wǎng)絡(luò)電視性能評價體系。同時可對網(wǎng)絡(luò)電視卡頓用戶進行預(yù)警。對用戶主要訪問的業(yè)務(wù)進行識別和性能分析，對于網(wǎng)內(nèi)較差的資源，以及網(wǎng)外較差的資源，均可提取出存在問題的IP地址段、域名及URL，指導(dǎo)網(wǎng)內(nèi)資源優(yōu)化及往外資源引入。

5.在網(wǎng)內(nèi)外業(yè)務(wù)分析中，對寬帶網(wǎng)絡(luò)中的視頻網(wǎng)站、游戲平臺的訪問次數(shù)、訪問成功率、總流量、網(wǎng)絡(luò)傳輸速率中的一項或多項進行分類、統(tǒng)計和分析；并對視頻網(wǎng)站、游戲平臺的IP地址段以及URL進行定位，從而對視頻網(wǎng)站、游戲平臺進行預(yù)警。

附圖說明

圖1為本發(fā)明的流程圖。

具體實施方式

下面結(jié)合實施例和附圖對本發(fā)明做一步的描述：

實施例一

如圖1所示，首先是對寬帶用戶上網(wǎng)過程中產(chǎn)生的信息進行全面的掃描和數(shù)據(jù)采集，例如：對用戶上網(wǎng)的PPPOE、Radius、HTTP、DNS、TCP/IP等信息進行掃描。再將采集到的數(shù)據(jù)進行分布式解碼存儲，將數(shù)據(jù)存儲到匯聚機房的服務(wù)器上。然后將匯聚機房的服務(wù)器上存儲的數(shù)據(jù)傳輸?shù)街行臋C房的服務(wù)器上進行實時分析和離線計算。

實時分析和離線計算的結(jié)果是將采集到的數(shù)據(jù)進行分類和統(tǒng)計，本實施例中將數(shù)據(jù)分類為：用戶投訴預(yù)警、用戶行為回放、設(shè)備和區(qū)域分析、業(yè)務(wù)專項分析和網(wǎng)內(nèi)外業(yè)務(wù)分析。然后將分類的項目中的信息進行統(tǒng)計，最后將分類和統(tǒng)計好的數(shù)據(jù)以窗口的方式顯示在屏幕上，提供直觀的可視化分析。

其中用戶投訴預(yù)警包括對撥號認證、設(shè)備掉線、終端數(shù)、用戶DNS查詢、P2P流量和HTTP業(yè)務(wù)中的一項或多項進行掃描和統(tǒng)計，并對異常認證、異常掉線、異常終端、異常DNS查詢、異常流量、異常HTTP業(yè)務(wù)中的一項或多項進行預(yù)警。

具體說來，用戶投訴預(yù)警中的拔號認證可以將掃描后得到的用戶賬號、用戶名稱、設(shè)備MAC、用戶所在小區(qū)、用戶聯(lián)系方式、寬帶的帶寬等信息進行統(tǒng)計。設(shè)備掉線中可以將掃描后得到的掉線開始時間、掉線結(jié)束時間、總掉線次數(shù)、每小時平均掉線次數(shù)、峰值時掉線次數(shù)等信息進行統(tǒng)計。終端數(shù)是用戶路由器接入用戶的數(shù)量，可以將掃描后得到的最大終端數(shù)、最小終端數(shù)、平均終端數(shù)等信息進行統(tǒng)計。

用戶DNS查詢中可以將掃描后得到的DNS查詢次數(shù)、DNS查詢成功率、查詢DNS服務(wù)器的個數(shù)等信息進行統(tǒng)計。P2P流量中可以將掃描后得到的用戶總流量、P2P總流量、P2P流量占的比例、P2P上行流量占的比例、P2P下行流量占的比例等信息進行統(tǒng)計。HTTP業(yè)務(wù)包括HTTP成功率、HTTP速率和HTTP丟包重傳率，HTTP業(yè)務(wù)中可以將掃描后得到的在線時長、下載總流量、平均下載速率、峰值下載總流量、HTTP成功率、HTTP丟包重傳率等信息進行統(tǒng)計。

在用戶投訴預(yù)警中還通過將掃描到的異常的認證次數(shù)、異常的掉線次數(shù)、異常的終端個數(shù)、異常的DNS查詢成功率、異常的流量大小和異常的HTTP業(yè)務(wù)進行排序和篩選，且還能對上述異常情況進行進時間上的篩選。時間上的篩選可分為：昨天、今天、近3天、近7天、近15天等。例如：先對掃描到的所有用戶篩選昨天的總掉線次數(shù)，再對總掉線次數(shù)進行排序，然后篩選總掉線次數(shù)大于5的用戶，就能將昨天總掉線次數(shù)大于5的用戶全部列出，并按掉線的次數(shù)進行了排序。

通過上述的用戶投訴預(yù)警中掃描、統(tǒng)計、分析出的數(shù)據(jù)，并將數(shù)據(jù)進行合理的篩選和排序后就能很快的找出近期上不了網(wǎng)或上網(wǎng)慢的用戶。并結(jié)合后續(xù)的用戶行為回放、設(shè)備和區(qū)域分析等信息，就能找出這些用戶上不了網(wǎng)或上網(wǎng)慢的原因。從而能盡快的為用戶解決問題，減少用戶的投訴，提高用戶的上網(wǎng)體驗，樹立良好的品牌形象，使寬帶業(yè)務(wù)更為快速的發(fā)展。

用戶行為回放是回放用戶每一次上線和下線詳細的歷史信令流程，可用以定位用戶接入階段出現(xiàn)的問題，如認證失敗原因、掉線原因；可分析用戶帶寬，在線時長，所在物理端口等信息。用戶行為回放包括Radius撥號認證流程、用戶DNS解析流程、用戶TCP信令流程、用戶HTTP業(yè)務(wù)流程中的一項或多項；通過上述信令流程回放再現(xiàn)用戶使用時的場景，定位疑難投訴問題。

Radius撥號認證流程包括掃描由于用戶的路由器存在故障，不斷向BRAS發(fā)起PPPOE會話中斷請求導(dǎo)致的異常下線，以及掃描由于用戶路由器至BRAS之間鏈路中斷導(dǎo)致的異常下線。如果掃描到的信息顯示：連接中斷的原因是用戶請求，則是由于用戶的路由器存在故障引起的上不了網(wǎng)。而如果掃描到的信息顯示：連接中斷的原因是載波丟失，則是由于線路中斷導(dǎo)致的上不了網(wǎng)。從而對掉線的原因進行準確的預(yù)警，能盡快的解決用戶不能上網(wǎng)的問題。

設(shè)備和區(qū)域分析是對不同區(qū)域的OLT、ONU、BRAS用戶的上網(wǎng)設(shè)備和上網(wǎng)的端口進行分類、統(tǒng)計和分析，找出容易出現(xiàn)網(wǎng)絡(luò)異常的上網(wǎng)設(shè)備和端口，以及網(wǎng)絡(luò)異常的上網(wǎng)設(shè)備和端口所分布的地理位置，從而對上網(wǎng)的區(qū)域、設(shè)備和端口進行預(yù)警。

設(shè)備和區(qū)域分析可以通過掃描得到的信息確定用戶上網(wǎng)使用的設(shè)備、端口和用戶所在的地理位置。例如：能確定用戶是通什么品牌的路由器進行上網(wǎng)的，也能確定用戶是否沒通過路由器，而是直接與電腦連接進行上網(wǎng)的；上網(wǎng)異常時是由80端口還是443端口引起的等。

設(shè)備和區(qū)域分析能通過賬號關(guān)聯(lián)，實現(xiàn)不同設(shè)備、不同端口、不通區(qū)域的活躍用戶進行深度分析。實現(xiàn)不同設(shè)備維度、不同區(qū)域維度的小區(qū)寬帶用戶數(shù)量實時監(jiān)控，對大面積用戶感知異常的設(shè)備和區(qū)域及時進行預(yù)警，定期輸出分析報告。

業(yè)務(wù)專項分析是針對網(wǎng)絡(luò)電視的流量、播放速率、丟包重傳、卡頓率中的一項或多項進行分類、統(tǒng)計和分析，找出影響網(wǎng)絡(luò)電視播放質(zhì)量的數(shù)據(jù)，從而對網(wǎng)絡(luò)電視的播放質(zhì)量進行預(yù)警。在對網(wǎng)絡(luò)電視的卡頓率進行預(yù)警時，是通過掃描用戶在收看網(wǎng)絡(luò)電視的同時是否有額外流量業(yè)務(wù)，以及用戶在收看網(wǎng)絡(luò)電視時頻道切片的大小，從而找出影響網(wǎng)絡(luò)電視的卡頓率的原因，準確的對網(wǎng)絡(luò)電視的卡頓率進行預(yù)警。其中額外流量是指寬帶在使用網(wǎng)絡(luò)電視的同時另外的設(shè)備產(chǎn)生的流量，例如觀看網(wǎng)絡(luò)電視時，還同時通過同一個寬帶進行了電腦和手機的上網(wǎng)。

具體來說，業(yè)務(wù)專項分析是對用戶使用網(wǎng)絡(luò)電視，也就是IPTV時的數(shù)據(jù)進行掃描、分類、統(tǒng)計和分析。業(yè)務(wù)專項分析可以將掃描得到的用戶賬號、小區(qū)名稱、觀看的電視頻道、播放時間、IPTV下載總流量、IPTV平均切片大小、IPTV緩存切片次數(shù)、額外流量、IPTV卡頓次數(shù)、IPTV卡頓頻率等信息進行統(tǒng)計和分析。

觀看網(wǎng)絡(luò)電視引起的卡頓還可能結(jié)合用戶投訴預(yù)警、用戶行為回放、設(shè)備和區(qū)域分析中掃描、統(tǒng)計出的信息一起來分析，從而準確的找出觀看網(wǎng)絡(luò)電視引起卡頓的原因。

網(wǎng)內(nèi)外業(yè)務(wù)分析是對寬帶網(wǎng)絡(luò)中的視頻網(wǎng)站和/或游戲平臺的訪問次數(shù)、訪問成功率、總流量、網(wǎng)絡(luò)傳輸速率中的一項或多項進行分類、統(tǒng)計和分析；并對視頻網(wǎng)站和/或游戲平臺的IP地址段以及URL進行定位，從而對視頻網(wǎng)站和/或游戲平臺進行預(yù)警。

網(wǎng)內(nèi)外業(yè)務(wù)分析主要對網(wǎng)內(nèi)外業(yè)務(wù)進行DPI識別與分析，可快速定位速率差的業(yè)務(wù)IP地址段以及URL明細，為網(wǎng)內(nèi)內(nèi)容資源優(yōu)化和網(wǎng)外資源引入提供依據(jù)。網(wǎng)內(nèi)外業(yè)務(wù)分析可以將掃描得到的網(wǎng)站名稱、業(yè)務(wù)名稱、訪問的次數(shù)、訪問成功的次數(shù)、訪問的成功率、下行總流量、下行總流量、下行平均速率、上行總流量、上行總流量、上行平均速率等信息進行統(tǒng)計分析。

網(wǎng)內(nèi)外業(yè)務(wù)分析也能對掃描得到的信息進行篩選和排序，其中篩選可以在時間方面進行篩選，也可能在各個項目中進行篩選。另外，網(wǎng)內(nèi)外業(yè)務(wù)分析還能通過點擊網(wǎng)站名稱或業(yè)務(wù)名稱中的內(nèi)容打開相對應(yīng)的網(wǎng)站的IP地址段以及URL明細，為網(wǎng)內(nèi)內(nèi)容資源優(yōu)化和網(wǎng)外資源引入提供依據(jù)。

很顯然，在不脫離本發(fā)明所述原理的前提下，作出的若干改進或修飾都應(yīng)視為本發(fā)明的保護范圍。