技術(shù)編號(hào):40352148
提示:您尚未登錄,請(qǐng)點(diǎn) 登 陸 后下載,如果您還沒(méi)有賬戶請(qǐng)點(diǎn) 注 冊(cè) ,登陸完成后,請(qǐng)刷新本頁(yè)查看技術(shù)詳細(xì)信息。本申請(qǐng)涉及數(shù)據(jù)處理領(lǐng)域,尤其涉及一種任務(wù)處理方法、裝置、計(jì)算機(jī)設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。背景技術(shù)、當(dāng)前在利用spark任務(wù)實(shí)現(xiàn)大規(guī)模數(shù)據(jù)量處理時(shí),需要充分調(diào)用及應(yīng)用大規(guī)模集群的計(jì)算資源來(lái)完成數(shù)據(jù)處理,因而當(dāng)前大多通過(guò)依賴集群的調(diào)度管理器對(duì)集群中的多個(gè)任務(wù)處理節(jié)點(diǎn)進(jìn)行調(diào)用及將數(shù)據(jù)分配至多個(gè)任務(wù)處理節(jié)點(diǎn),實(shí)現(xiàn)計(jì)算資源的分配,但目前大多通過(guò)任務(wù)處理節(jié)點(diǎn)上的可用資源是否足夠作為分配原則,分配方式較為單一;并且目前的分配方式在任務(wù)處理節(jié)點(diǎn)變更處理的任務(wù)類(lèi)型時(shí)容易出現(xiàn)變更失敗的情況,從而導(dǎo)致spark任務(wù)...
注意:該技術(shù)已申請(qǐng)專利,請(qǐng)尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識(shí)儲(chǔ)備,不適合論文引用。
請(qǐng)注意,此類(lèi)技術(shù)沒(méi)有源代碼,用于學(xué)習(xí)研究技術(shù)思路。