數(shù)據(jù)傳輸?shù)姆椒?、裝置及系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及互聯(lián)網(wǎng)技術(shù)領(lǐng)域,尤其涉及一種數(shù)據(jù)傳輸?shù)姆椒?、裝置及系統(tǒng)。
【背景技術(shù)】
[0002]隨著信息技術(shù)的迅猛發(fā)展,互聯(lián)網(wǎng)運(yùn)營(yíng)商在日常運(yùn)營(yíng)的過程中積累了大量的用戶數(shù)據(jù),這些數(shù)據(jù)被稱作“大數(shù)據(jù)”。近年來,用戶數(shù)據(jù)所蘊(yùn)含的巨大價(jià)值逐漸被人們所挖掘,通過對(duì)用戶數(shù)據(jù)的收集、分析、共享,可以為網(wǎng)絡(luò)運(yùn)營(yíng)商及用戶提供一種全新的看待世界的方式。
[0003]目前,擁有海量用戶數(shù)據(jù)資源的運(yùn)營(yíng)商會(huì)通過建立開放平臺(tái)將自身擁有的用戶數(shù)據(jù)提供給第三方站點(diǎn)(后續(xù)簡(jiǎn)稱為第三方),第三方調(diào)用與開放平臺(tái)事先協(xié)定的應(yīng)用程序接口(Applicat1n Program Interface,簡(jiǎn)稱API)向開放平臺(tái)獲取用戶數(shù)據(jù),對(duì)獲取的用戶數(shù)據(jù)進(jìn)行分析以得到興趣標(biāo)簽、好友關(guān)系鏈等用戶的網(wǎng)絡(luò)行為特征數(shù)據(jù)數(shù)據(jù),并根據(jù)獲得的網(wǎng)絡(luò)行為特征數(shù)據(jù)對(duì)站點(diǎn)的運(yùn)營(yíng)策略進(jìn)行有的放矢的調(diào)整。
[0004]在現(xiàn)有提供用戶數(shù)據(jù)的過程中,開放平臺(tái)一般會(huì)對(duì)一個(gè)時(shí)間段內(nèi)產(chǎn)生的用戶數(shù)據(jù)進(jìn)行積累,然后通過離線傳輸?shù)姆绞桨l(fā)送給第三方。例如,每天晚上24:00時(shí)將當(dāng)天產(chǎn)生的用戶數(shù)據(jù)發(fā)送給第三方,或者每周一向第三方發(fā)送上一周產(chǎn)生的用戶數(shù)據(jù)。這種數(shù)據(jù)傳輸?shù)姆绞酱嬖趪?yán)重的滯后性問題,第三方運(yùn)營(yíng)人員只能根據(jù)前一階段產(chǎn)生的用戶數(shù)據(jù)對(duì)當(dāng)前的用戶線上行為進(jìn)行決策,對(duì)于瞬息萬變的互聯(lián)網(wǎng)環(huán)境而言,無法滿足第三方對(duì)用戶數(shù)據(jù)時(shí)效性的要求。
【發(fā)明內(nèi)容】
[0005]本發(fā)明實(shí)施例提供一種數(shù)據(jù)傳輸?shù)姆椒?、裝置及系統(tǒng),能夠解決離線傳輸導(dǎo)致的用戶數(shù)據(jù)時(shí)效性差的問題。
[0006]一方面,本發(fā)明實(shí)施例提供了一種數(shù)據(jù)傳輸?shù)姆椒?,包?
[0007]實(shí)時(shí)獲取線上環(huán)境中產(chǎn)生的用戶數(shù)據(jù)流;
[0008]對(duì)所述用戶數(shù)據(jù)流進(jìn)行復(fù)流分發(fā),獲得多個(gè)相同的數(shù)據(jù)復(fù)流;
[0009]根據(jù)預(yù)設(shè)過濾算法對(duì)所述數(shù)據(jù)復(fù)流進(jìn)行過濾,獲得預(yù)處理的數(shù)據(jù)復(fù)流;
[0010]將所述預(yù)處理的數(shù)據(jù)復(fù)流發(fā)送給對(duì)應(yīng)的第三方運(yùn)營(yíng)業(yè)務(wù)。
[0011]另一方面,本發(fā)明實(shí)施例提供了一種數(shù)據(jù)傳輸?shù)难b置,包括:
[0012]數(shù)據(jù)獲取單元,用于實(shí)時(shí)獲取線上環(huán)境中產(chǎn)生的用戶數(shù)據(jù)流;
[0013]復(fù)流分發(fā)單元,用于對(duì)所述數(shù)據(jù)獲取單元獲取的所述用戶數(shù)據(jù)流進(jìn)行復(fù)流分發(fā),獲得多個(gè)相同的數(shù)據(jù)復(fù)流;
[0014]數(shù)據(jù)過濾單元,用于根據(jù)預(yù)設(shè)過濾算法對(duì)所述復(fù)流分發(fā)單元分發(fā)的所述數(shù)據(jù)復(fù)流進(jìn)行過濾,獲得預(yù)處理的數(shù)據(jù)復(fù)流;
[0015]數(shù)據(jù)發(fā)送單元,用于將所述數(shù)據(jù)過濾單元過濾后的所述預(yù)處理的數(shù)據(jù)復(fù)流發(fā)送給對(duì)應(yīng)的第三方運(yùn)營(yíng)業(yè)務(wù)。
[0016]再一方面,本發(fā)明實(shí)施例提供了一種數(shù)據(jù)傳輸?shù)南到y(tǒng),該系統(tǒng)包括開放平臺(tái)服務(wù)器和第三方站點(diǎn),其中,
[0017]所述開放平臺(tái)服務(wù)器,用于實(shí)時(shí)獲取線上環(huán)境中產(chǎn)生的用戶數(shù)據(jù)流,對(duì)所述用戶數(shù)據(jù)流進(jìn)行復(fù)流分發(fā),獲得多個(gè)相同的數(shù)據(jù)復(fù)流,根據(jù)預(yù)設(shè)過濾算法對(duì)所述數(shù)據(jù)復(fù)流進(jìn)行過濾,獲得預(yù)處理的數(shù)據(jù)復(fù)流,將所述預(yù)處理的數(shù)據(jù)復(fù)流發(fā)送給對(duì)應(yīng)的第三方站點(diǎn);
[0018]所述第三方站點(diǎn),用于接收所述開放平臺(tái)服務(wù)器發(fā)送的所述預(yù)處理的數(shù)據(jù)復(fù)流,在運(yùn)營(yíng)環(huán)境中對(duì)所述預(yù)處理的數(shù)據(jù)復(fù)流進(jìn)行實(shí)時(shí)分析。
[0019]本發(fā)明實(shí)施例提供的數(shù)據(jù)傳輸?shù)姆椒ā⒀b置及系統(tǒng),能夠?qū)﹂_放平臺(tái)線上環(huán)境中產(chǎn)生的用戶數(shù)據(jù)流進(jìn)行實(shí)時(shí)獲取,并對(duì)獲取的用戶數(shù)據(jù)流進(jìn)行復(fù)流分發(fā),獲得多個(gè)相同的數(shù)據(jù)復(fù)流,然后根據(jù)不同的預(yù)設(shè)算法分別對(duì)各個(gè)數(shù)據(jù)復(fù)流進(jìn)行過濾,獲得預(yù)處理的數(shù)據(jù)復(fù)流,最后將預(yù)處理的數(shù)據(jù)復(fù)流分別發(fā)送給對(duì)應(yīng)的第三方運(yùn)營(yíng)業(yè)務(wù),由第三方在運(yùn)營(yíng)環(huán)境中針對(duì)不同的運(yùn)營(yíng)業(yè)務(wù)對(duì)數(shù)據(jù)復(fù)流進(jìn)行分析,獲得需要的網(wǎng)絡(luò)行為特征數(shù)據(jù)。與現(xiàn)有技術(shù)中通過離線傳輸?shù)姆绞较虻谌桨l(fā)送用戶數(shù)據(jù)相比,可以通過實(shí)時(shí)發(fā)送數(shù)據(jù)流的方式保證用戶數(shù)據(jù)分析的時(shí)效性,由此使得第三方可以依據(jù)當(dāng)前用戶數(shù)據(jù)對(duì)當(dāng)前的用戶線上行為進(jìn)行決策,保障決策行為的準(zhǔn)確性和時(shí)效性,更加適用于第三方在運(yùn)營(yíng)環(huán)境中的數(shù)據(jù)分析。
【附圖說明】
[0020]為了更清楚地說明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案,下面將對(duì)實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡(jiǎn)單地介紹,顯而易見地,下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例,對(duì)于本領(lǐng)域普通技術(shù)人員來講,在不付出創(chuàng)造性勞動(dòng)的前提下,還可以根據(jù)這些附圖獲得其他的附圖。
[0021]圖1為本發(fā)明實(shí)施例中數(shù)據(jù)傳輸?shù)姆椒鞒虉D;
[0022]圖2為本發(fā)明實(shí)施例中另一個(gè)數(shù)據(jù)傳輸?shù)姆椒鞒虉D;
[0023]圖3為本發(fā)明實(shí)施例中用戶數(shù)據(jù)流復(fù)流分發(fā)及過濾的示意圖;
[0024]圖4為本發(fā)明實(shí)施例中數(shù)據(jù)傳輸?shù)难b置的結(jié)構(gòu)示意圖;
[0025]圖5為本發(fā)明實(shí)施例中另一個(gè)數(shù)據(jù)傳輸?shù)难b置的結(jié)構(gòu)示意圖;
[0026]圖6為本發(fā)明實(shí)施例中數(shù)據(jù)傳輸?shù)南到y(tǒng)示意圖。
【具體實(shí)施方式】
[0027]下面將結(jié)合本實(shí)施例中的附圖,對(duì)本實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述,顯然,所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例,而不是全部的實(shí)施例?;诒景l(fā)明中的實(shí)施例,本領(lǐng)域普通技術(shù)人員在沒有作出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例,都屬于本發(fā)明保護(hù)的范圍。
[0028]在現(xiàn)有技術(shù)中,開放平臺(tái)通常是在離線狀態(tài)下將前一時(shí)段內(nèi)產(chǎn)生的用戶數(shù)據(jù)發(fā)送給第三方。由于用戶數(shù)據(jù)存在滯后性問題,因此第三方的分析結(jié)果通常時(shí)效性較差,影響第三方?jīng)Q策的準(zhǔn)確性。例如,在進(jìn)行模型調(diào)試時(shí),第三方往往是在線上環(huán)境中進(jìn)行模型調(diào)試,由于用戶數(shù)據(jù)的獲取是分段且滯后的,因此通常需要對(duì)模型進(jìn)行多次調(diào)整,但無論進(jìn)行幾次調(diào)整,滯后的用戶數(shù)據(jù)都無法及時(shí)對(duì)用戶當(dāng)前的網(wǎng)絡(luò)行為進(jìn)行反映,調(diào)整后的模型無法絕對(duì)適用于當(dāng)前的網(wǎng)絡(luò)環(huán)境。
[0029]為解決數(shù)據(jù)時(shí)效性較差對(duì)第三方線上決策的影響,本實(shí)施例提供了一種數(shù)據(jù)傳輸?shù)姆椒ǎ軌驗(yàn)榈谌綄?shí)時(shí)提供決策所需的用戶數(shù)據(jù),幫助第三方提高運(yùn)營(yíng)決策的準(zhǔn)確性。如圖1所示,該方法包括:
[0030]101、開放平臺(tái)實(shí)時(shí)獲取線上環(huán)境中產(chǎn)生的用戶數(shù)據(jù)流。
[0031]開放平臺(tái)對(duì)網(wǎng)絡(luò)社區(qū)、即時(shí)通訊等應(yīng)用線上環(huán)境中產(chǎn)生的用戶數(shù)據(jù)進(jìn)行實(shí)時(shí)獲取,得到用戶數(shù)據(jù)流。該用戶數(shù)據(jù)流為開放平臺(tái)中所有用戶的原始網(wǎng)絡(luò)行為數(shù)據(jù),本步驟中不對(duì)該用戶數(shù)據(jù)流進(jìn)行處理。
[0032]102、開放平臺(tái)對(duì)用戶數(shù)據(jù)流進(jìn)行復(fù)流分發(fā),獲得多個(gè)相同的數(shù)據(jù)復(fù)流。
[0033]通常,開放平臺(tái)會(huì)同時(shí)向多個(gè)第三方提供用戶數(shù)據(jù),而一個(gè)第三方又往往涉及多個(gè)不同的運(yùn)營(yíng)業(yè)務(wù)。本實(shí)施例中,開放平臺(tái)以第三方運(yùn)營(yíng)業(yè)務(wù)作為分發(fā)粒度對(duì)用戶數(shù)據(jù)流進(jìn)行復(fù)流分發(fā),得到多個(gè)相同的數(shù)據(jù)復(fù)流,且每個(gè)數(shù)據(jù)復(fù)流與步驟101中的用戶數(shù)據(jù)流相同。
[0034]103、開放平臺(tái)根據(jù)預(yù)設(shè)過濾算法對(duì)數(shù)據(jù)復(fù)流進(jìn)行過濾,獲得預(yù)處理的數(shù)據(jù)復(fù)流。
[0035]第三方根據(jù)不同運(yùn)營(yíng)業(yè)務(wù)的數(shù)據(jù)需求對(duì)過濾算法進(jìn)行設(shè)置,開放平臺(tái)根據(jù)不同運(yùn)營(yíng)業(yè)務(wù)的過濾算法對(duì)對(duì)應(yīng)不同運(yùn)營(yíng)業(yè)務(wù)的數(shù)據(jù)復(fù)流進(jìn)行過濾,分別獲得多個(gè)預(yù)處理的數(shù)據(jù)復(fù)流。
[0036]本步驟中,開放平臺(tái)根據(jù)過濾算法將對(duì)運(yùn)營(yíng)業(yè)務(wù)無用的用戶數(shù)據(jù)進(jìn)行過濾,能夠減少數(shù)據(jù)傳輸量,以及第三方的數(shù)據(jù)處理量。所述過濾算法包括但不限于是關(guān)鍵字及語義分析規(guī)則,第三方可以根據(jù)不同的運(yùn)營(yíng)業(yè)務(wù)內(nèi)容對(duì)過濾算法進(jìn)行設(shè)置,但這僅為事例性說明,本實(shí)施例不對(duì)過濾算法的具體形式以及過濾算法的具體設(shè)置方式進(jìn)行限制