一種web數(shù)據(jù)自動(dòng)采集系統(tǒng)的制作方法
【專利摘要】本發(fā)明公開一種WEB數(shù)據(jù)自動(dòng)采集系統(tǒng)，包括WEB 客戶端、WEB 服務(wù)器和應(yīng)用服務(wù)器，所述WEB 客戶端包括索引圖，所述索引圖保存圖形和數(shù)據(jù)與鏈接之間的對(duì)應(yīng)關(guān)系，所述WEB 客戶端將客戶點(diǎn)擊的圖形或數(shù)據(jù)對(duì)應(yīng)的鏈接發(fā)送至WEB 服務(wù)器，所述WEB 服務(wù)器從應(yīng)用服務(wù)器采集鏈接對(duì)應(yīng)的圖形或數(shù)據(jù)，并將采集到的圖形或數(shù)據(jù)轉(zhuǎn)換成SVG 文件后返回至WEB 客戶端。本發(fā)明可以將半結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)變?yōu)榻Y(jié)構(gòu)化的元數(shù)據(jù)，實(shí)現(xiàn)航班數(shù)據(jù)的動(dòng)態(tài)跟蹤與監(jiān)測(cè)。
【專利說(shuō)明】一種WEB數(shù)據(jù)自動(dòng)采集系統(tǒng)

【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種數(shù)據(jù)采集系統(tǒng)，更確切地說(shuō)是一種WEB數(shù)據(jù)自動(dòng)采集系統(tǒng)。

【背景技術(shù)】
[0002]Web服務(wù)系統(tǒng)主要實(shí)現(xiàn)信息發(fā)布功能，是配網(wǎng)自動(dòng)化系統(tǒng)的基本功能之一，客戶使用瀏覽器通過(guò)Web服務(wù)系統(tǒng)對(duì)配電網(wǎng)運(yùn)行狀況進(jìn)行了解和分析。目前在線運(yùn)行的配網(wǎng)自動(dòng)化系統(tǒng)基本上都是運(yùn)行于EMS (Energy Manage System,能量管理系統(tǒng))系統(tǒng)的I控制區(qū)，然后通過(guò)隔離裝置將數(shù)據(jù)同步到非控制III區(qū)，通過(guò)非控制III區(qū)對(duì)外提供Web月艮務(wù)。配網(wǎng)自動(dòng)化系統(tǒng)對(duì)外提供的Web服務(wù)，大多是基于ActiveX控件技術(shù)或者Java控件技術(shù)，不管是基于哪種控件技術(shù)，都需要用戶下裝相應(yīng)的控件，控件將配網(wǎng)自動(dòng)化系統(tǒng)某一時(shí)刻的圖形與數(shù)據(jù)全部下載到客戶端，這樣用戶的查看請(qǐng)求可以快速得到響應(yīng)，但用戶看到的并不是當(dāng)前配網(wǎng)自動(dòng)化系統(tǒng)的運(yùn)行狀況。另外，為了系統(tǒng)安全，需要配網(wǎng)自動(dòng)化系統(tǒng)在保護(hù)模式運(yùn)行該控件，如果運(yùn)行的權(quán)限沒(méi)有設(shè)置正確，會(huì)導(dǎo)致這些控件的功能失效，從而導(dǎo)致客戶端的用戶體驗(yàn)不佳。


【發(fā)明內(nèi)容】

[0003]本發(fā)明的目的是提供一種WEB數(shù)據(jù)自動(dòng)采集系統(tǒng)，其可以解決現(xiàn)有技術(shù)產(chǎn)的上述缺點(diǎn)。
[0004]本發(fā)明采用以下技術(shù)方案:
[0005]一種WEB數(shù)據(jù)自動(dòng)采集系統(tǒng)，包括WEB客戶端、WEB服務(wù)器和應(yīng)用服務(wù)器，所述WEB客戶端包括索引圖，所述索引圖保存圖形和數(shù)據(jù)與鏈接之間的對(duì)應(yīng)關(guān)系，所述WEB客戶端將客戶點(diǎn)擊的圖形或數(shù)據(jù)對(duì)應(yīng)的鏈接發(fā)送至WEB服務(wù)器，所述WEB服務(wù)器從應(yīng)用服務(wù)器采集鏈接對(duì)應(yīng)的圖形或數(shù)據(jù)，并將采集到的圖形或數(shù)據(jù)轉(zhuǎn)換成SVG文件后返回至WEB客戶端；還包括一 Web無(wú)線數(shù)據(jù)采集控制系統(tǒng)，Web無(wú)線數(shù)據(jù)采集控制系統(tǒng)由數(shù)據(jù)采集發(fā)送模塊和數(shù)據(jù)接收模塊組成，數(shù)據(jù)采集發(fā)送模塊包括信號(hào)調(diào)理模塊、A/D轉(zhuǎn)換模塊、微控制器和無(wú)線模塊，采集到的信號(hào)經(jīng)過(guò)信號(hào)調(diào)理模塊傳送到A/D轉(zhuǎn)換模塊，A/D轉(zhuǎn)換模塊連接微控制器；數(shù)據(jù)接收模塊包括無(wú)線模塊和微控制器，無(wú)線模塊輸入端連接數(shù)據(jù)采集發(fā)送模塊中的微控制器，無(wú)線模塊輸出端連接數(shù)據(jù)接收模塊中的微控制器，微處理器與PC連接。
[0006]所述WEB服務(wù)器包括:
[0007]鏈接解析模塊，用于解析WEB客戶端發(fā)來(lái)的鏈接得出鏈接的內(nèi)容，并將SVG文件導(dǎo)出程序轉(zhuǎn)換的SVG文件返回給WEB客戶端；
[0008]圖形數(shù)據(jù)采集模塊，用于從應(yīng)用服務(wù)器采集鏈接解析模塊解析出的內(nèi)容對(duì)應(yīng)的圖形或數(shù)據(jù)；
[0009]SVG文件導(dǎo)出程序，用于將圖形數(shù)據(jù)采集模塊采集的圖形或數(shù)據(jù)轉(zhuǎn)換為SVG文件并轉(zhuǎn)發(fā)給鏈接解析模塊。
[0010]所述WEB服務(wù)器還包括SVG文件拓?fù)渲绦?，用于將轉(zhuǎn)換為SVG文件的廠站圖進(jìn)行拓?fù)渲筝敵鼋o所述鏈接解析模塊，所述鏈接解析模塊將拓?fù)渲蟮腟VG文件返回給WEB客戶端。
[0011]所述信號(hào)處理模塊包括信號(hào)放大電路和濾波電路，信號(hào)放大電路輸出端連接濾波電路；所述微控制器為STM32芯片。
[0012]本發(fā)明的優(yōu)點(diǎn)是:可以將半結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)變?yōu)榻Y(jié)構(gòu)化的元數(shù)據(jù)，實(shí)現(xiàn)航班數(shù)據(jù)的動(dòng)態(tài)跟蹤與監(jiān)測(cè)。

【具體實(shí)施方式】
[0013]下面進(jìn)一步闡述本發(fā)明的【具體實(shí)施方式】:
[0014]本發(fā)明公開一種WEB數(shù)據(jù)自動(dòng)采集系統(tǒng)，包括WEB客戶端、WEB服務(wù)器和應(yīng)用服務(wù)器，其特征在于，所述WEB客戶端包括索引圖，所述索引圖保存圖形和數(shù)據(jù)與鏈接之間的對(duì)應(yīng)關(guān)系，所述WEB客戶端將客戶點(diǎn)擊的圖形或數(shù)據(jù)對(duì)應(yīng)的鏈接發(fā)送至WEB服務(wù)器，所述WEB服務(wù)器從應(yīng)用服務(wù)器采集鏈接對(duì)應(yīng)的圖形或數(shù)據(jù)，并將采集到的圖形或數(shù)據(jù)轉(zhuǎn)換成SVG文件后返回至WEB客戶端；還包括一 Web無(wú)線數(shù)據(jù)采集控制系統(tǒng)，Web無(wú)線數(shù)據(jù)采集控制系統(tǒng)由數(shù)據(jù)采集發(fā)送模塊和數(shù)據(jù)接收模塊組成，數(shù)據(jù)采集發(fā)送模塊包括信號(hào)調(diào)理模塊、A/D轉(zhuǎn)換模塊、微控制器和無(wú)線模塊，采集到的信號(hào)經(jīng)過(guò)信號(hào)調(diào)理模塊傳送到A/D轉(zhuǎn)換模塊，A/D轉(zhuǎn)換模塊連接微控制器；數(shù)據(jù)接收模塊包括無(wú)線模塊和微控制器，無(wú)線模塊輸入端連接數(shù)據(jù)采集發(fā)送模塊中的微控制器，無(wú)線模塊輸出端連接數(shù)據(jù)接收模塊中的微控制器，微處理器與PC連接。
[0015]所述WEB服務(wù)器包括:鏈接解析模塊，用于解析WEB客戶端發(fā)來(lái)的鏈接得出鏈接的內(nèi)容，并將SVG文件導(dǎo)出程序轉(zhuǎn)換的SVG文件返回給WEB客戶端；圖形數(shù)據(jù)采集模塊，用于從應(yīng)用服務(wù)器采集鏈接解析模塊解析出的內(nèi)容對(duì)應(yīng)的圖形或數(shù)據(jù)；SVG文件導(dǎo)出程序，用于將圖形數(shù)據(jù)采集模塊采集的圖形或數(shù)據(jù)轉(zhuǎn)換為SVG文件并轉(zhuǎn)發(fā)給鏈接解析模塊。
[0016]所述WEB服務(wù)器還包括SVG文件拓?fù)渲绦颍糜趯⑥D(zhuǎn)換為SVG文件的廠站圖進(jìn)行拓?fù)渲筝敵鼋o所述鏈接解析模塊，所述鏈接解析模塊將拓?fù)渲蟮腟VG文件返回給WEB客戶端。
[0017]所述信號(hào)處理模塊包括信號(hào)放大電路和濾波電路，信號(hào)放大電路輸出端連接濾波電路；所述微控制器為STM32芯片。
[0018]Web數(shù)據(jù)自動(dòng)采集技術(shù)涉及到Web數(shù)據(jù)挖掘、Web信息檢索、信息提取、搜索引擎等技術(shù)。所謂Web數(shù)據(jù)自動(dòng)采集是指從大量非結(jié)構(gòu)化、異構(gòu)的Web信息資源中發(fā)現(xiàn)有效的、新穎的、潛在可用的信息(包括概念、模式、規(guī)則、規(guī)律、約束及可視化等形式)的非平凡過(guò)程。包括Web內(nèi)容挖掘、Web結(jié)構(gòu)挖掘和Web使用挖掘。
[0019]通過(guò)本發(fā)明的WEB數(shù)據(jù)自動(dòng)采集技術(shù)的表現(xiàn)為根據(jù)航班數(shù)據(jù)構(gòu)成規(guī)則，對(duì)指定航空公司、OTA、GDS網(wǎng)站的海量航班數(shù)據(jù)進(jìn)行信息檢索、信息提取、分析處理、查重去噪、整合數(shù)據(jù)，將半結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)變?yōu)榻Y(jié)構(gòu)化的元數(shù)據(jù)，實(shí)現(xiàn)航班數(shù)據(jù)的動(dòng)態(tài)跟蹤與監(jiān)測(cè)。
[0020]本發(fā)明可以將半結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)變?yōu)榻Y(jié)構(gòu)化的元數(shù)據(jù)，實(shí)現(xiàn)航班數(shù)據(jù)的動(dòng)態(tài)跟蹤與監(jiān)測(cè)。
[0021]以上所述僅為本發(fā)明的較佳實(shí)施例而已，并不用以限制本發(fā)明，凡在本發(fā)明的精神和原則之內(nèi)所作的任何修改、等同替換和改進(jìn)等，均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。
【權(quán)利要求】
1.一種WEB數(shù)據(jù)自動(dòng)采集系統(tǒng)，包括WEB客戶端、WEB服務(wù)器和應(yīng)用服務(wù)器，其特征在于，所述WEB客戶端包括索引圖，所述索引圖保存圖形和數(shù)據(jù)與鏈接之間的對(duì)應(yīng)關(guān)系，所述WEB客戶端將客戶點(diǎn)擊的圖形或數(shù)據(jù)對(duì)應(yīng)的鏈接發(fā)送至WEB服務(wù)器，所述WEB服務(wù)器從應(yīng)用服務(wù)器采集鏈接對(duì)應(yīng)的圖形或數(shù)據(jù)，并將采集到的圖形或數(shù)據(jù)轉(zhuǎn)換成SVG文件后返回至WEB客戶端；還包括一Web無(wú)線數(shù)據(jù)采集控制系統(tǒng)，Web無(wú)線數(shù)據(jù)采集控制系統(tǒng)由數(shù)據(jù)采集發(fā)送模塊和數(shù)據(jù)接收模塊組成，數(shù)據(jù)采集發(fā)送模塊包括信號(hào)調(diào)理模塊、A/D轉(zhuǎn)換模塊、微控制器和無(wú)線模塊，采集到的信號(hào)經(jīng)過(guò)信號(hào)調(diào)理模塊傳送到A/D轉(zhuǎn)換模塊，A/D轉(zhuǎn)換模塊連接微控制器；數(shù)據(jù)接收模塊包括無(wú)線模塊和微控制器，無(wú)線模塊輸入端連接數(shù)據(jù)采集發(fā)送模塊中的微控制器，無(wú)線模塊輸出端連接數(shù)據(jù)接收模塊中的微控制器，微處理器與PC連接。
2.根據(jù)權(quán)利要求1所述的WEB數(shù)據(jù)自動(dòng)采集系統(tǒng)，其特征在于，所述WEB服務(wù)器包括: 鏈接解析模塊，用于解析WEB客戶端發(fā)來(lái)的鏈接得出鏈接的內(nèi)容，并將SVG文件導(dǎo)出程序轉(zhuǎn)換的SVG文件返回給WEB客戶端； 圖形數(shù)據(jù)采集模塊，用于從應(yīng)用服務(wù)器采集鏈接解析模塊解析出的內(nèi)容對(duì)應(yīng)的圖形或數(shù)據(jù)； SVG文件導(dǎo)出程序，用于將圖形數(shù)據(jù)采集模塊采集的圖形或數(shù)據(jù)轉(zhuǎn)換為SVG文件并轉(zhuǎn)發(fā)給鏈接解析模塊。
3.根據(jù)權(quán)利要求2所述的WEB數(shù)據(jù)自動(dòng)采集系統(tǒng)，其特征在于，所述WEB服務(wù)器還包括SVG文件拓?fù)渲绦?，用于將轉(zhuǎn)換為SVG文件的廠站圖進(jìn)行拓?fù)渲筝敵鼋o所述鏈接解析模塊，所述鏈接解析模塊將拓?fù)渲蟮腟VG文件返回給WEB客戶端。
4.根據(jù)權(quán)利要求1至3中任意一項(xiàng)所述的WEB數(shù)據(jù)自動(dòng)采集系統(tǒng)，其特征在于，所述信號(hào)處理模塊包括信號(hào)放大電路和濾波電路，信號(hào)放大電路輸出端連接濾波電路；所述微控制器為STM32芯片。
【文檔編號(hào)】H04L29/08GK104283914SQ201310279488
【公開日】2015年1月14日 申請(qǐng)日期:2013年7月4日 優(yōu)先權(quán)日:2013年7月4日
【發(fā)明者】不公告發(fā)明人 申請(qǐng)人:上海朗邁網(wǎng)絡(luò)科技有限公司