本技術(shù)涉及數(shù)據(jù)處理領(lǐng)域，尤其涉及一種基于邊緣計(jì)算的異構(gòu)網(wǎng)絡(luò)融合處理方法、設(shè)備及存儲介質(zhì)。

背景技術(shù)：

1、近年來，隨著民航旅客運(yùn)輸量的逐年增長和民航規(guī)模的不斷擴(kuò)大，機(jī)場場面運(yùn)行的智能管控已成為提升機(jī)場運(yùn)行安全與效率的核心。然而，目前機(jī)場場面運(yùn)行對航空器、車輛、人員及業(yè)務(wù)的感知和分析仍不夠深入，運(yùn)行主體間存在信息孤島，活動目標(biāo)之間的主動協(xié)同能力較弱，全局決策的智能化程度不足，機(jī)場多主體異構(gòu)網(wǎng)絡(luò)的互操作與高速傳輸，作為機(jī)場場面海量監(jiān)測信息傳輸與航空業(yè)務(wù)運(yùn)行管控的重要基礎(chǔ)，異構(gòu)網(wǎng)絡(luò)融合處理成為一個(gè)具有應(yīng)用前景的方向。

2、在現(xiàn)有技術(shù)中，異構(gòu)網(wǎng)絡(luò)融合處理方法主要是將數(shù)據(jù)信息存儲于地面的專用服務(wù)器中，通過專用服務(wù)器對多個(gè)異構(gòu)網(wǎng)絡(luò)進(jìn)行信息交流及處理工作。

3、由于現(xiàn)有技術(shù)中，數(shù)據(jù)信息與專用服務(wù)器之間的路徑較長，導(dǎo)致存取信息存在延遲，降低了網(wǎng)絡(luò)間的通信效率，存在異構(gòu)網(wǎng)絡(luò)融合處理效率低的技術(shù)問題。

技術(shù)實(shí)現(xiàn)思路

1、本技術(shù)提供一種基于邊緣計(jì)算的異構(gòu)網(wǎng)絡(luò)融合處理方法、設(shè)備及存儲介質(zhì)，用以達(dá)到提高異構(gòu)網(wǎng)絡(luò)融合處理效率的技術(shù)效果。

2、第一方面，本技術(shù)提供一種基于邊緣計(jì)算的異構(gòu)網(wǎng)絡(luò)融合處理方法，包括：

3、將每個(gè)目標(biāo)異構(gòu)網(wǎng)絡(luò)分別與互聯(lián)網(wǎng)協(xié)議第六版(ipv6)網(wǎng)絡(luò)進(jìn)行融合，構(gòu)建目標(biāo)異構(gòu)網(wǎng)絡(luò)與ipv6網(wǎng)絡(luò)對應(yīng)的多個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)；

4、根據(jù)多個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，建立邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)并確定對應(yīng)的邊緣緩存策略和邊緣緩存運(yùn)行機(jī)制；

5、根據(jù)邊緣緩存策略，獲取訓(xùn)練完成的邊緣計(jì)算模型；

6、在每個(gè)預(yù)設(shè)時(shí)隙，根據(jù)邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)和邊緣緩存運(yùn)行機(jī)制，將每個(gè)目標(biāo)異構(gòu)網(wǎng)絡(luò)中目標(biāo)用戶的請求內(nèi)容輸入至邊緣計(jì)算模型，以使邊緣計(jì)算模型根據(jù)請求內(nèi)容對目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)內(nèi)的緩存內(nèi)容進(jìn)行更新。

7、可選地，目標(biāo)異構(gòu)網(wǎng)絡(luò)包括基于互聯(lián)網(wǎng)協(xié)議套件的航空電信網(wǎng)網(wǎng)絡(luò)、基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)以及機(jī)場場面寬帶移動通信系統(tǒng)網(wǎng)絡(luò)，目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)包括第一協(xié)議轉(zhuǎn)換網(wǎng)關(guān)、第二協(xié)議轉(zhuǎn)換網(wǎng)關(guān)和第三協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，將每個(gè)目標(biāo)異構(gòu)網(wǎng)絡(luò)分別與互聯(lián)網(wǎng)協(xié)議第六版(ipv6)網(wǎng)絡(luò)進(jìn)行融合，構(gòu)建目標(biāo)異構(gòu)網(wǎng)絡(luò)與ipv6網(wǎng)絡(luò)對應(yīng)的多個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，包括：

8、將基于互聯(lián)網(wǎng)協(xié)議套件的航空電信網(wǎng)網(wǎng)絡(luò)及ipv6網(wǎng)絡(luò)設(shè)置為第一目標(biāo)子網(wǎng)，并根據(jù)基于互聯(lián)網(wǎng)協(xié)議套件的航空電信網(wǎng)網(wǎng)絡(luò)及ipv6網(wǎng)絡(luò)，配置對應(yīng)的目標(biāo)安全協(xié)議和目標(biāo)路由協(xié)議；其中，第一目標(biāo)子網(wǎng)為ipv6子網(wǎng)；

9、根據(jù)第一目標(biāo)子網(wǎng)、目標(biāo)安全協(xié)議和目標(biāo)路由協(xié)議，構(gòu)建第一協(xié)議轉(zhuǎn)換網(wǎng)關(guān)；

10、根據(jù)基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)及ipv6網(wǎng)絡(luò)間的需求，建立多個(gè)目標(biāo)功能模塊，并根據(jù)目標(biāo)功能模塊，構(gòu)建第二協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，其中，目標(biāo)功能模塊包括收發(fā)包模塊、網(wǎng)絡(luò)層地址映射模塊、網(wǎng)絡(luò)層報(bào)文頭轉(zhuǎn)換模塊和傳輸層報(bào)文轉(zhuǎn)換模塊；

11、將機(jī)場場面寬帶移動通信系統(tǒng)網(wǎng)絡(luò)及ipv6網(wǎng)絡(luò)設(shè)置為第二目標(biāo)子網(wǎng)；其中，第二目標(biāo)子網(wǎng)為ipv6子網(wǎng)；

12、根據(jù)目標(biāo)協(xié)議認(rèn)證方式，進(jìn)行用戶認(rèn)證，并在用戶認(rèn)證通過后，根據(jù)業(yè)務(wù)服務(wù)器的互聯(lián)網(wǎng)地址訪問業(yè)務(wù)資源，進(jìn)行ipv6數(shù)據(jù)傳輸，以構(gòu)建第三協(xié)議轉(zhuǎn)換網(wǎng)關(guān)。

13、可選地，根據(jù)基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)及ipv6網(wǎng)絡(luò)間的需求，建立多個(gè)目標(biāo)功能模塊，并根據(jù)目標(biāo)功能模塊，構(gòu)建第二協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，包括：

14、根據(jù)基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)與ipv6網(wǎng)絡(luò)間處理網(wǎng)絡(luò)包的需求，建立收發(fā)包模塊；

15、根據(jù)基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)中網(wǎng)絡(luò)服務(wù)訪問點(diǎn)地址與ipv6網(wǎng)絡(luò)中ipv6地址間的網(wǎng)絡(luò)層地址映射需求，建立網(wǎng)絡(luò)層地址映射模塊；

16、根據(jù)基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)中無連接網(wǎng)絡(luò)協(xié)議報(bào)文頭與ipv6網(wǎng)絡(luò)在ipv6報(bào)文頭間的信息轉(zhuǎn)換需求，建立網(wǎng)絡(luò)層報(bào)文頭轉(zhuǎn)換模塊；

17、根據(jù)基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)中傳輸層的錯(cuò)誤檢測和恢復(fù)類協(xié)議與ipv6網(wǎng)絡(luò)中傳輸層的傳輸控制協(xié)議間的轉(zhuǎn)換需求，建立傳輸層報(bào)文轉(zhuǎn)換模塊；

18、根據(jù)收發(fā)包模塊、網(wǎng)絡(luò)層地址映射模塊、網(wǎng)絡(luò)層報(bào)文頭轉(zhuǎn)換模塊和傳輸層報(bào)文轉(zhuǎn)換模塊，構(gòu)建第二協(xié)議轉(zhuǎn)換網(wǎng)關(guān)。

19、可選地，根據(jù)多個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，建立邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)，包括：

20、確定各目標(biāo)協(xié)議網(wǎng)關(guān)對應(yīng)的目標(biāo)路由器和各目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)用戶；

21、針對各目標(biāo)異構(gòu)網(wǎng)絡(luò)，根據(jù)目標(biāo)異構(gòu)網(wǎng)絡(luò)中的目標(biāo)用戶和目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)間的信息傳輸需求，將目標(biāo)異構(gòu)網(wǎng)絡(luò)中的目標(biāo)用戶和目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)建立數(shù)據(jù)連接，數(shù)據(jù)連接包括物理連接或邏輯連接；

22、根據(jù)每個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)間的信息傳輸需求，在任意兩個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)間建立對應(yīng)的物理連接；

23、根據(jù)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)與目標(biāo)用戶的連接關(guān)系、任意兩個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)間的連接關(guān)系和目標(biāo)路由器，構(gòu)建邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)。

24、可選地，確定對應(yīng)的邊緣緩存策略，包括：

25、為每個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)對應(yīng)的強(qiáng)化學(xué)習(xí)智能體；

26、根據(jù)邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)，確定目標(biāo)用戶的請求內(nèi)容、目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的全部緩存內(nèi)容及請求內(nèi)容命中目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的次數(shù)；

27、根據(jù)請求內(nèi)容與目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的全部緩存內(nèi)容的比值，確定當(dāng)前預(yù)設(shè)時(shí)隙的內(nèi)容流行度；

28、根據(jù)內(nèi)容流行度、目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的全部緩存內(nèi)容及請求內(nèi)容命中目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的次數(shù)，對每個(gè)強(qiáng)化學(xué)習(xí)智能體進(jìn)行建模，確定對應(yīng)的模型狀態(tài)、動作和獎勵，以獲取每個(gè)強(qiáng)化學(xué)習(xí)智能體對應(yīng)的邊緣計(jì)算模型，模型狀態(tài)、動作和獎勵通過以下方式確定：

29、目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)觀測到的環(huán)境狀態(tài)為：

30、

31、其中，代表在預(yù)設(shè)時(shí)隙t目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)g觀測到的環(huán)境狀態(tài)，代表目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)g在時(shí)隙t中的內(nèi)容流行度，代表目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)g在時(shí)隙t中的緩存內(nèi)容；

32、在確定環(huán)境狀態(tài)后，根據(jù)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)中強(qiáng)化學(xué)習(xí)智能體，確定緩存更新階段的模型動作模型動作包括對緩存內(nèi)容進(jìn)行更新，得到下一預(yù)設(shè)時(shí)隙的緩存內(nèi)容其中，目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)中的每個(gè)內(nèi)容都有對應(yīng)的索引{1,2,3,…,m}，內(nèi)容包括已緩存內(nèi)容和未緩存內(nèi)容；

33、在緩存更新之前，對已緩存內(nèi)容和未緩存內(nèi)容分別按請求的頻率計(jì)算流行度降序排列，則表示刪除已緩存內(nèi)容中排名最低的k個(gè)內(nèi)容，并獲取未緩存內(nèi)容中排名最高的k個(gè)內(nèi)容以進(jìn)行補(bǔ)充；

34、邊緣計(jì)算模型對應(yīng)的模型獎勵定義為：

35、

36、其中，代表邊緣緩存網(wǎng)關(guān)g在狀態(tài)采取動作得到的獎勵，代表t+1時(shí)隙目標(biāo)用戶通過第i條路徑請求的內(nèi)容命中網(wǎng)關(guān)緩存的次數(shù)，wi為第i條路徑上與時(shí)延減少量有關(guān)的權(quán)重，wi通過以下公式獲得：

37、

38、其中，wi代表第i條路徑上與時(shí)延減少量有關(guān)的權(quán)重，代表在第i條路徑上命中網(wǎng)關(guān)緩存所帶來的時(shí)延減少量；

39、將邊緣計(jì)算模型中確定的模型狀態(tài)、模型動作和模型獎勵作為邊緣緩存策略。

40、可選地，確定對應(yīng)的邊緣緩存運(yùn)行機(jī)制，包括：

41、根據(jù)每個(gè)預(yù)設(shè)時(shí)隙，在邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)中設(shè)置內(nèi)容分發(fā)階段與緩存更新階段；

42、在內(nèi)容分發(fā)階段，根據(jù)邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)，確定每個(gè)目標(biāo)異構(gòu)網(wǎng)絡(luò)中的目標(biāo)用戶的請求內(nèi)容和目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，判斷目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的網(wǎng)絡(luò)數(shù)據(jù)包中是否包含目標(biāo)用戶的請求內(nèi)容；

43、若是，則從目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)中獲取目標(biāo)緩存內(nèi)容，若否，則從其他協(xié)議轉(zhuǎn)換網(wǎng)關(guān)中獲取目標(biāo)緩存內(nèi)容，其中，目標(biāo)緩存內(nèi)容為目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)中與請求內(nèi)容相對應(yīng)的緩存內(nèi)容，其他協(xié)議轉(zhuǎn)換網(wǎng)關(guān)為除目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)外的任一目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)；

44、在緩存更新階段，根據(jù)邊緣緩存策略，在每個(gè)預(yù)設(shè)時(shí)隙對每個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)內(nèi)的緩存內(nèi)容進(jìn)行更新；

45、根據(jù)內(nèi)容分發(fā)階段和緩存更新階段，確定邊緣緩存運(yùn)行機(jī)制。

46、可選地，根據(jù)邊緣緩存策略，獲取訓(xùn)練完成的邊緣計(jì)算模型，包括：

47、在確定邊緣計(jì)算模型建立后，根據(jù)dqn算法，確定對應(yīng)的評估網(wǎng)絡(luò)損失函數(shù)，評估網(wǎng)絡(luò)損失函數(shù)通過以下公式獲得：

48、

49、targetq＝ri+γmaxa?qtarget(si+1,a；θ-)

50、其中，loss(θ)代表評估網(wǎng)絡(luò)損失函數(shù)，e代表求均值，si代表i時(shí)隙下的模型環(huán)境，ai代表i時(shí)隙下的模型動作，γi代表i時(shí)隙下的折扣率，si+1代表(i+1)時(shí)隙下的模型環(huán)境，b代表經(jīng)驗(yàn)回放池中的小批量樣本數(shù)目，θ代表評估網(wǎng)絡(luò)qeval參數(shù)，θ-代表目標(biāo)網(wǎng)絡(luò)qtarget參數(shù)，評估網(wǎng)絡(luò)qeval通過以下公式更新參數(shù)：

51、θt+1←θt-l*▽θloss(θ)

52、其中，θt+1代表t+1時(shí)隙評估網(wǎng)絡(luò)qeval的參數(shù)，θt代表t時(shí)隙評估網(wǎng)絡(luò)qeval的參數(shù)，l代表學(xué)習(xí)率；

53、根據(jù)評估網(wǎng)絡(luò)損失函數(shù)，在每個(gè)預(yù)設(shè)時(shí)隙對邊緣緩存策略對應(yīng)的邊緣計(jì)算模型進(jìn)行訓(xùn)練，獲取訓(xùn)練完成的邊緣計(jì)算模型。

54、第二方面，本技術(shù)提供的一種基于邊緣計(jì)算的異構(gòu)網(wǎng)絡(luò)融合處理裝置，包括：

55、構(gòu)建模塊，用于將每個(gè)目標(biāo)異構(gòu)網(wǎng)絡(luò)分別與互聯(lián)網(wǎng)協(xié)議第六版(ipv6)網(wǎng)絡(luò)進(jìn)行融合，構(gòu)建目標(biāo)異構(gòu)網(wǎng)絡(luò)與ipv6網(wǎng)絡(luò)對應(yīng)的多個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)；

56、第一處理模塊，用于根據(jù)多個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，建立邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)并確定對應(yīng)的邊緣緩存策略和邊緣緩存運(yùn)行機(jī)制；

57、第二處理模塊，用于根據(jù)邊緣緩存策略，獲取訓(xùn)練完成的邊緣計(jì)算模型；

58、控制模塊，用于在每個(gè)預(yù)設(shè)時(shí)隙，根據(jù)邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)和邊緣緩存運(yùn)行機(jī)制，將每個(gè)目標(biāo)異構(gòu)網(wǎng)絡(luò)中目標(biāo)用戶的請求內(nèi)容輸入至邊緣計(jì)算模型，以使邊緣計(jì)算模型根據(jù)請求內(nèi)容對目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)內(nèi)的緩存內(nèi)容進(jìn)行更新。

59、可選地，構(gòu)建模塊還用于：

60、將基于互聯(lián)網(wǎng)協(xié)議套件的航空電信網(wǎng)網(wǎng)絡(luò)及ipv6網(wǎng)絡(luò)設(shè)置為第一目標(biāo)子網(wǎng)，并根據(jù)基于互聯(lián)網(wǎng)協(xié)議套件的航空電信網(wǎng)網(wǎng)絡(luò)及ipv6網(wǎng)絡(luò)，配置對應(yīng)的目標(biāo)安全協(xié)議和目標(biāo)路由協(xié)議；其中，第一目標(biāo)子網(wǎng)為ipv6子網(wǎng)，每個(gè)網(wǎng)絡(luò)各對應(yīng)一個(gè)ipv6子網(wǎng)；

61、根據(jù)第一目標(biāo)子網(wǎng)、目標(biāo)安全協(xié)議和目標(biāo)路由協(xié)議，構(gòu)建第一協(xié)議轉(zhuǎn)換網(wǎng)關(guān)；

62、根據(jù)基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)及ipv6網(wǎng)絡(luò)間的需求，建立多個(gè)目標(biāo)功能模塊，并根據(jù)目標(biāo)功能模塊，構(gòu)建第二協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，其中，目標(biāo)功能模塊包括收發(fā)包模塊、網(wǎng)絡(luò)層地址映射模塊、網(wǎng)絡(luò)層報(bào)文頭轉(zhuǎn)換模塊和傳輸層報(bào)文轉(zhuǎn)換模塊；

63、將機(jī)場場面寬帶移動通信系統(tǒng)網(wǎng)絡(luò)及ipv6網(wǎng)絡(luò)設(shè)置為第二目標(biāo)子網(wǎng)；其中，第二目標(biāo)子網(wǎng)為ipv6子網(wǎng)，每個(gè)網(wǎng)絡(luò)各對應(yīng)一個(gè)ipv6子網(wǎng)；

64、根據(jù)目標(biāo)協(xié)議認(rèn)證方式，進(jìn)行用戶認(rèn)證，并在用戶認(rèn)證通過后，根據(jù)業(yè)務(wù)服務(wù)器的互聯(lián)網(wǎng)地址訪問業(yè)務(wù)資源，進(jìn)行ipv6數(shù)據(jù)傳輸，以構(gòu)建第三協(xié)議轉(zhuǎn)換網(wǎng)關(guān)。

65、可選地，構(gòu)建模塊還用于：

66、根據(jù)基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)與ipv6網(wǎng)絡(luò)間處理網(wǎng)絡(luò)包的需求，建立收發(fā)包模塊；

67、根據(jù)基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)中網(wǎng)絡(luò)服務(wù)訪問點(diǎn)地址與ipv6網(wǎng)絡(luò)中ipv6地址間的網(wǎng)絡(luò)層地址映射需求，建立網(wǎng)絡(luò)層地址映射模塊；

68、根據(jù)基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)中無連接網(wǎng)絡(luò)協(xié)議報(bào)文頭與ipv6網(wǎng)絡(luò)在ipv6報(bào)文頭間的信息轉(zhuǎn)換需求，建立網(wǎng)絡(luò)層報(bào)文頭轉(zhuǎn)換模塊；

69、根據(jù)基于開放式系統(tǒng)互連參考模型的航空電信網(wǎng)網(wǎng)絡(luò)中傳輸層的錯(cuò)誤檢測和恢復(fù)類協(xié)議與ipv6網(wǎng)絡(luò)中傳輸層的傳輸控制協(xié)議間的轉(zhuǎn)換需求，建立傳輸層報(bào)文轉(zhuǎn)換模塊；

70、根據(jù)收發(fā)包模塊、網(wǎng)絡(luò)層地址映射模塊、網(wǎng)絡(luò)層報(bào)文頭轉(zhuǎn)換模塊和傳輸層報(bào)文轉(zhuǎn)換模塊，構(gòu)建第二協(xié)議轉(zhuǎn)換網(wǎng)關(guān)。

71、可選地，第一處理模塊還用于：

72、確定各目標(biāo)協(xié)議網(wǎng)關(guān)對應(yīng)的目標(biāo)路由器和各目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)用戶；

73、針對各目標(biāo)異構(gòu)網(wǎng)絡(luò)，根據(jù)目標(biāo)異構(gòu)網(wǎng)絡(luò)中的目標(biāo)用戶和目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)間的信息傳輸需求，將目標(biāo)異構(gòu)網(wǎng)絡(luò)中的目標(biāo)用戶和目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)建立數(shù)據(jù)連接，數(shù)據(jù)連接包括物理連接或邏輯連接；

74、根據(jù)每個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)間的信息傳輸需求，在任意兩個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)間建立對應(yīng)的物理連接；

75、根據(jù)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)與目標(biāo)用戶的連接關(guān)系、任意兩個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)間的連接關(guān)系和目標(biāo)路由器，構(gòu)建邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)。

76、可選地，第一處理模塊還用于：

77、為每個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)對應(yīng)的強(qiáng)化學(xué)習(xí)智能體；

78、根據(jù)邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)，確定目標(biāo)用戶的請求內(nèi)容、目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的全部緩存內(nèi)容及請求內(nèi)容命中目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的次數(shù)；

79、根據(jù)請求內(nèi)容與目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的全部緩存內(nèi)容的比值，確定當(dāng)前預(yù)設(shè)時(shí)隙的內(nèi)容流行度；

80、根據(jù)內(nèi)容流行度、目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的全部緩存內(nèi)容及請求內(nèi)容命中目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的次數(shù)，對每個(gè)強(qiáng)化學(xué)習(xí)智能體進(jìn)行建模，確定對應(yīng)的模型狀態(tài)、動作和獎勵，以獲取每個(gè)強(qiáng)化學(xué)習(xí)智能體對應(yīng)的邊緣計(jì)算模型，模型狀態(tài)、動作和獎勵通過以下方式確定：

81、目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)觀測到的環(huán)境狀態(tài)為：

82、

83、其中，代表在預(yù)設(shè)時(shí)隙t目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)g觀測到的環(huán)境狀態(tài)，代表目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)g在時(shí)隙t中的內(nèi)容流行度，代表目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)g在時(shí)隙t中的緩存內(nèi)容；

84、在確定環(huán)境狀態(tài)后，根據(jù)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)中強(qiáng)化學(xué)習(xí)智能體，確定緩存更新階段的模型動作模型動作包括對緩存內(nèi)容進(jìn)行更新，得到下一預(yù)設(shè)時(shí)隙的緩存內(nèi)容其中，目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)中的每個(gè)內(nèi)容都有對應(yīng)的索引{1,2,3,…,m}，內(nèi)容包括已緩存內(nèi)容和未緩存內(nèi)容；

85、在緩存更新之前，對已緩存內(nèi)容和未緩存內(nèi)容分別按請求的頻率計(jì)算流行度降序排列，則表示刪除已緩存內(nèi)容中排名最低的k個(gè)內(nèi)容，并獲取未緩存內(nèi)容中排名最高的k個(gè)內(nèi)容以進(jìn)行補(bǔ)充；

86、邊緣計(jì)算模型對應(yīng)的模型獎勵定義為：

87、

88、其中，代表邊緣緩存網(wǎng)關(guān)g在狀態(tài)采取動作得到的獎勵，代表t+1時(shí)隙目標(biāo)用戶通過第i條路徑請求的內(nèi)容命中網(wǎng)關(guān)緩存的次數(shù)，wi為第i條路徑上與時(shí)延減少量有關(guān)的權(quán)重，wi通過以下公式獲得：

89、

90、其中，wi代表第i條路徑上與時(shí)延減少量有關(guān)的權(quán)重，代表在第i條路徑上命中網(wǎng)關(guān)緩存所帶來的時(shí)延減少量；

91、將邊緣計(jì)算模型中確定的模型狀態(tài)、模型動作和模型獎勵作為邊緣緩存策略。

92、可選地，第一處理模塊還用于：

93、根據(jù)每個(gè)預(yù)設(shè)時(shí)隙，在邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)中設(shè)置內(nèi)容分發(fā)階段與緩存更新階段；

94、在內(nèi)容分發(fā)階段，根據(jù)邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)，確定每個(gè)目標(biāo)異構(gòu)網(wǎng)絡(luò)中的目標(biāo)用戶的請求內(nèi)容和目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，判斷目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)的網(wǎng)絡(luò)數(shù)據(jù)包中是否包含目標(biāo)用戶的請求內(nèi)容；

95、若是，則從目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)中獲取目標(biāo)緩存內(nèi)容，若否，則從其他協(xié)議轉(zhuǎn)換網(wǎng)關(guān)中獲取目標(biāo)緩存內(nèi)容，其中，目標(biāo)緩存內(nèi)容為目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)中與請求內(nèi)容相對應(yīng)的緩存內(nèi)容，其他協(xié)議轉(zhuǎn)換網(wǎng)關(guān)為除目標(biāo)異構(gòu)網(wǎng)絡(luò)對應(yīng)的目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)外的任一目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)；

96、在緩存更新階段，根據(jù)邊緣緩存策略，在每個(gè)預(yù)設(shè)時(shí)隙對每個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)內(nèi)的緩存內(nèi)容進(jìn)行更新；

97、根據(jù)內(nèi)容分發(fā)階段和緩存更新階段，確定邊緣緩存運(yùn)行機(jī)制。

98、可選地，第二處理模塊還用于：

99、在確定邊緣計(jì)算模型建立后，根據(jù)dqn算法，確定對應(yīng)的評估網(wǎng)絡(luò)損失函數(shù)，評估網(wǎng)絡(luò)損失函數(shù)通過以下公式獲得：

100、

101、targetq＝ri+γmaxaqtarget(si+1,a；θ-)

102、其中，loss(θ)代表評估網(wǎng)絡(luò)損失函數(shù)，e代表求均值，si代表i時(shí)隙下的模型環(huán)境，ai代表i時(shí)隙下的模型動作，γi代表i時(shí)隙下的折扣率，si+1代表(i+1)時(shí)隙下的模型環(huán)境，b代表經(jīng)驗(yàn)回放池中的小批量樣本數(shù)目，θ代表評估網(wǎng)絡(luò)qeval參數(shù)，θ-代表目標(biāo)網(wǎng)絡(luò)qtarget參數(shù)，評估網(wǎng)絡(luò)qeval通過以下公式更新參數(shù)：

103、θt+1←θt-l*▽θloss(θ)

104、其中，θt+1代表t+1時(shí)隙評估網(wǎng)絡(luò)qeval的參數(shù)，θt代表t時(shí)隙評估網(wǎng)絡(luò)qeval的參數(shù)，l代表學(xué)習(xí)率；

105、根據(jù)評估網(wǎng)絡(luò)損失函數(shù)，在每個(gè)預(yù)設(shè)時(shí)隙對邊緣緩存策略對應(yīng)的邊緣計(jì)算模型進(jìn)行訓(xùn)練，獲取訓(xùn)練完成的邊緣計(jì)算模型。

106、第三方面，本技術(shù)提供了一種基于邊緣計(jì)算的異構(gòu)網(wǎng)絡(luò)融合處理設(shè)備，包括：

107、處理器和存儲器；

108、存儲器存儲計(jì)算機(jī)執(zhí)行指令；

109、處理器執(zhí)行存儲器存儲的計(jì)算機(jī)執(zhí)行指令，使得處理器執(zhí)行如上第一方面中各種可能的實(shí)施方式。

110、第四方面，本技術(shù)提供了一種計(jì)算機(jī)可讀存儲介質(zhì)，計(jì)算機(jī)可讀存儲介質(zhì)中存儲有計(jì)算機(jī)執(zhí)行指令，計(jì)算機(jī)執(zhí)行指令被處理器執(zhí)行時(shí)用于實(shí)現(xiàn)如第一方面中各種可能的實(shí)施方式。

111、第五方面，本技術(shù)提供了一種計(jì)算機(jī)程序產(chǎn)品，計(jì)算機(jī)程序被處理器執(zhí)行時(shí)用于實(shí)現(xiàn)如第一方面中各種可能的實(shí)施方式。

112、本技術(shù)提供的一種基于邊緣計(jì)算的異構(gòu)網(wǎng)絡(luò)融合處理方法、設(shè)備及存儲介質(zhì)，通過將每個(gè)目標(biāo)異構(gòu)網(wǎng)絡(luò)分別與互聯(lián)網(wǎng)協(xié)議第六版(ipv6)網(wǎng)絡(luò)進(jìn)行融合，構(gòu)建目標(biāo)異構(gòu)網(wǎng)絡(luò)與ipv6網(wǎng)絡(luò)對應(yīng)的多個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)；根據(jù)多個(gè)目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，建立邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)并確定對應(yīng)的邊緣緩存策略和邊緣緩存運(yùn)行機(jī)制；根據(jù)邊緣緩存策略，獲取訓(xùn)練完成的邊緣計(jì)算模型；在每個(gè)預(yù)設(shè)時(shí)隙，根據(jù)邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)和邊緣緩存運(yùn)行機(jī)制，將每個(gè)目標(biāo)異構(gòu)網(wǎng)絡(luò)中目標(biāo)用戶的請求內(nèi)容輸入至邊緣計(jì)算模型，以使邊緣計(jì)算模型根據(jù)請求內(nèi)容對目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)內(nèi)的緩存內(nèi)容進(jìn)行更新，從而通過構(gòu)建目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)，將各異構(gòu)網(wǎng)絡(luò)間進(jìn)行融合，提升了網(wǎng)絡(luò)互操作性，并通過建立邊緣緩存異構(gòu)網(wǎng)絡(luò)融合系統(tǒng)，實(shí)現(xiàn)了各異構(gòu)網(wǎng)絡(luò)間的互聯(lián)互通，同時(shí)根據(jù)邊緣緩存運(yùn)行機(jī)制以及邊緣緩存策略對應(yīng)的邊緣計(jì)算模型，分析目標(biāo)用戶的請求內(nèi)容，并將其緩存于目標(biāo)協(xié)議轉(zhuǎn)換網(wǎng)關(guān)中，以使緩存內(nèi)容隨著用戶需求的改變而改變，縮短了網(wǎng)絡(luò)請求路徑、減少了平均時(shí)延，解決了異構(gòu)網(wǎng)絡(luò)融合處理效率低的技術(shù)問題，達(dá)到了提高異構(gòu)網(wǎng)絡(luò)融合處理效率的技術(shù)效果。