本發(fā)明涉及資源調(diào)度,尤其涉及一種計(jì)算任務(wù)分配方法、裝置、電子設(shè)備及存儲介質(zhì)。
背景技術(shù):
1、隨著計(jì)算機(jī)技術(shù)的不斷發(fā)展,為了提高處理效率,數(shù)據(jù)處理系統(tǒng)通常將待處理的任務(wù)分配至服務(wù)器集群包括的多個(gè)計(jì)算節(jié)點(diǎn)執(zhí)行。
2、相關(guān)技術(shù)中,在進(jìn)行計(jì)算任務(wù)分配時(shí),一般是將計(jì)算任務(wù)均勻分配至各個(gè)計(jì)算節(jié)點(diǎn)設(shè)備來進(jìn)行數(shù)據(jù)計(jì)算。然而,不同節(jié)點(diǎn)設(shè)備情況不同,其運(yùn)行狀況也不同。基于上述方式進(jìn)行任務(wù)分配時(shí),可能會出現(xiàn)部分節(jié)點(diǎn)設(shè)備已經(jīng)計(jì)算完成,部分設(shè)備還處于計(jì)算狀態(tài)下的情況,進(jìn)而,會延長計(jì)算時(shí)間,影響計(jì)算中心的整體計(jì)算效率。
技術(shù)實(shí)現(xiàn)思路
1、本發(fā)明提供了一種計(jì)算任務(wù)分配方法、裝置、電子設(shè)備及存儲介質(zhì),以實(shí)現(xiàn)在提高計(jì)算資源利用率的基礎(chǔ)上,依據(jù)計(jì)算節(jié)點(diǎn)的可用資源量對系統(tǒng)的待計(jì)算數(shù)據(jù)量進(jìn)行均衡且合理的分配的效果,進(jìn)而,提高了待計(jì)算數(shù)據(jù)量的計(jì)算效率。
2、根據(jù)本發(fā)明的一方面,提供了一種計(jì)算任務(wù)分配方法,該方法包括:
3、獲取數(shù)據(jù)處理系統(tǒng)在當(dāng)前時(shí)刻對應(yīng)的待計(jì)算數(shù)據(jù)量;
4、獲取與所述數(shù)據(jù)處理系統(tǒng)相關(guān)聯(lián)的多個(gè)計(jì)算節(jié)點(diǎn)在所述當(dāng)前時(shí)刻之后預(yù)設(shè)時(shí)間段內(nèi)的可用資源量,并從多個(gè)所述可用資源量中確定出目標(biāo)可用資源量;
5、在所述待計(jì)算數(shù)據(jù)量小于預(yù)設(shè)的資源量閾值的情況下,根據(jù)所述待計(jì)算數(shù)據(jù)量和多個(gè)所述可用資源量中除所述目標(biāo)可用資源量之外的其他可用資源量,確定所述數(shù)據(jù)處理系統(tǒng)在當(dāng)前時(shí)刻對應(yīng)的目標(biāo)計(jì)算節(jié)點(diǎn),其中,所述目標(biāo)計(jì)算節(jié)點(diǎn)用于計(jì)算所述數(shù)據(jù)處理系統(tǒng)在所述當(dāng)前時(shí)刻對應(yīng)的待計(jì)算數(shù)據(jù)量。
6、根據(jù)本發(fā)明的另一方面,提供了一種計(jì)算資源分配裝置,該裝置包括:
7、數(shù)據(jù)量獲取模塊,用于獲取數(shù)據(jù)處理系統(tǒng)在當(dāng)前時(shí)刻對應(yīng)的待計(jì)算數(shù)據(jù)量;
8、可用資源量確定模塊,用于獲取與所述數(shù)據(jù)處理系統(tǒng)相關(guān)聯(lián)的多個(gè)計(jì)算節(jié)點(diǎn)在所述當(dāng)前時(shí)刻之后預(yù)設(shè)時(shí)間段內(nèi)的可用資源量,并從多個(gè)所述可用資源量中確定出目標(biāo)可用資源量;
9、計(jì)算節(jié)點(diǎn)確定模塊,用于在所述待計(jì)算數(shù)據(jù)量小于預(yù)設(shè)的資源量閾值的情況下,根據(jù)所述待計(jì)算數(shù)據(jù)量和多個(gè)所述可用資源量中除所述目標(biāo)可用資源量之外的其他可用資源量,確定所述數(shù)據(jù)處理系統(tǒng)在當(dāng)前時(shí)刻對應(yīng)的目標(biāo)計(jì)算節(jié)點(diǎn),其中,所述目標(biāo)計(jì)算節(jié)點(diǎn)用于計(jì)算所述數(shù)據(jù)處理系統(tǒng)在所述當(dāng)前時(shí)刻對應(yīng)的待計(jì)算數(shù)據(jù)量。
10、根據(jù)本發(fā)明的另一方面,提供了一種電子設(shè)備,所述電子設(shè)備包括:
11、至少一個(gè)處理器;以及
12、與所述至少一個(gè)處理器通信連接的存儲器;其中,
13、所述存儲器存儲有可被所述至少一個(gè)處理器執(zhí)行的計(jì)算機(jī)程序,所述計(jì)算機(jī)程序被所述至少一個(gè)處理器執(zhí)行,以使所述至少一個(gè)處理器能夠執(zhí)行本發(fā)明任一實(shí)施例所述的計(jì)算任務(wù)分配方法。
14、根據(jù)本發(fā)明的另一方面,提供了一種計(jì)算機(jī)可讀存儲介質(zhì),所述計(jì)算機(jī)可讀存儲介質(zhì)存儲有計(jì)算機(jī)指令,所述計(jì)算機(jī)指令用于使處理器執(zhí)行時(shí)實(shí)現(xiàn)本發(fā)明任一實(shí)施例所述的計(jì)算任務(wù)分配方法。
15、本實(shí)施例的技術(shù)方案,通過獲取數(shù)據(jù)處理系統(tǒng)在當(dāng)前時(shí)刻對應(yīng)的待計(jì)算數(shù)據(jù)量,進(jìn)一步的,獲取與數(shù)據(jù)處理系統(tǒng)相關(guān)聯(lián)的多個(gè)計(jì)算節(jié)點(diǎn)在當(dāng)前時(shí)刻之后預(yù)設(shè)時(shí)間段內(nèi)的可用資源量,并從多個(gè)可用資源量中確定出目標(biāo)可用資源量,進(jìn)一步的,在待計(jì)算數(shù)據(jù)量小于預(yù)設(shè)的資源量閾值的情況下,根據(jù)待計(jì)算數(shù)據(jù)量和多個(gè)可用資源量中除目標(biāo)可用資源量之外的其他可用資源量,確定數(shù)據(jù)處理系統(tǒng)在當(dāng)前時(shí)刻對應(yīng)的目標(biāo)計(jì)算節(jié)點(diǎn),解決了相關(guān)技術(shù)中存在的計(jì)算任務(wù)分配不均衡、降低資源利用率和影響計(jì)算效率的問題,實(shí)現(xiàn)了在提高計(jì)算資源利用率的基礎(chǔ)上,依據(jù)計(jì)算節(jié)點(diǎn)的可用資源量對系統(tǒng)的待計(jì)算數(shù)據(jù)量進(jìn)行均衡且合理的分配的效果,進(jìn)而,提高了待計(jì)算數(shù)據(jù)量的計(jì)算效率。
16、應(yīng)當(dāng)理解,本部分所描述的內(nèi)容并非旨在標(biāo)識本發(fā)明的實(shí)施例的關(guān)鍵或重要特征,也不用于限制本發(fā)明的范圍。本發(fā)明的其它特征將通過以下的說明書而變得容易理解。
1.一種計(jì)算任務(wù)分配方法,其特征在于,包括:
2.根據(jù)權(quán)利要求1所述的計(jì)算任務(wù)分配方法,其特征在于,所述從多個(gè)所述可用資源量中確定出目標(biāo)可用資源量,包括:
3.根據(jù)權(quán)利要求1所述的計(jì)算任務(wù)分配方法,其特征在于,所述根據(jù)所述待計(jì)算數(shù)據(jù)量和多個(gè)所述可用資源量中除所述目標(biāo)可用資源量之外的其他可用資源量,確定所述數(shù)據(jù)處理系統(tǒng)在當(dāng)前時(shí)刻對應(yīng)的目標(biāo)計(jì)算節(jié)點(diǎn),包括:
4.根據(jù)權(quán)利要求3所述的計(jì)算任務(wù)分配方法,其特征在于,所述目標(biāo)計(jì)算節(jié)點(diǎn)的數(shù)量為一個(gè);所述根據(jù)所述待比對資源量、排序后的所述其他可用資源量和待計(jì)算數(shù)據(jù)量,確定所述數(shù)據(jù)處理系統(tǒng)在所述當(dāng)前時(shí)刻對應(yīng)的目標(biāo)計(jì)算節(jié)點(diǎn),包括:
5.根據(jù)權(quán)利要求3所述的計(jì)算任務(wù)分配方法,其特征在于,所述目標(biāo)計(jì)算節(jié)點(diǎn)的數(shù)量為多個(gè);所述根據(jù)所述待比對資源量、排序后的所述其他可用資源量和待計(jì)算數(shù)據(jù)量,確定所述數(shù)據(jù)處理系統(tǒng)在所述當(dāng)前時(shí)刻對應(yīng)的目標(biāo)計(jì)算節(jié)點(diǎn),包括:
6.根據(jù)權(quán)利要求5所述的計(jì)算任務(wù)分配方法,其特征在于,所述根據(jù)所述資源量差值、確定出的所述其他可用資源量和排序后的所述其他可用資源量確定目標(biāo)計(jì)算節(jié)點(diǎn),包括:
7.根據(jù)權(quán)利要求1所述的計(jì)算任務(wù)分配方法,其特征在于,還包括:
8.一種計(jì)算任務(wù)分配裝置,其特征在于,包括:
9.一種電子設(shè)備,其特征在于,所述電子設(shè)備包括:
10.一種計(jì)算機(jī)可讀存儲介質(zhì),其特征在于,所述計(jì)算機(jī)可讀存儲介質(zhì)存儲有計(jì)算機(jī)指令,所述計(jì)算機(jī)指令用于使處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1-7中任一項(xiàng)所述的計(jì)算任務(wù)分配方法。