技術(shù)特征：

1.一種基于hdfs塊狀態(tài)的數(shù)據(jù)遷移方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取源磁盤和其他磁盤的存儲(chǔ)量和容量，計(jì)算其他磁盤的預(yù)期可存儲(chǔ)量，包括：

3.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，所述獲取源磁盤和其他磁盤的存儲(chǔ)量和容量，計(jì)算其他磁盤的預(yù)期可存儲(chǔ)量之后，所述方法還包括：

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述根據(jù)所述其他磁盤的預(yù)留存儲(chǔ)量和所述其他磁盤的存儲(chǔ)量，計(jì)算所述其他磁盤的最大可存儲(chǔ)量之后，所述方法還包括：

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述預(yù)設(shè)副本狀態(tài)包括：

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述在所述其他磁盤的預(yù)期可存儲(chǔ)量大于所述源磁盤的存儲(chǔ)量的情況下，將所述任務(wù)列表中的塊文件按照優(yōu)先級(jí)順序遷移至所述其他磁盤，包括：

7.一種基于hdfs塊狀態(tài)的數(shù)據(jù)遷移裝置，其特征在于，包括：

8.一種電子設(shè)備，其特征在于，包括：處理器、存儲(chǔ)器及存儲(chǔ)在所述存儲(chǔ)器上并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被所述處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至6中任一項(xiàng)所述的基于hdfs塊狀態(tài)的數(shù)據(jù)遷移方法。

9.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，包括：所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)上存儲(chǔ)計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至6中任一項(xiàng)所述的基于hdfs塊狀態(tài)的數(shù)據(jù)遷移方法。

10.一種計(jì)算機(jī)程序產(chǎn)品，其特征在于，包括：所述計(jì)算機(jī)程序產(chǎn)品包括計(jì)算機(jī)程序，當(dāng)所述計(jì)算機(jī)程序在計(jì)算機(jī)上運(yùn)行時(shí)，使得所述計(jì)算機(jī)實(shí)現(xiàn)如權(quán)利要求1至6中任一項(xiàng)所述的基于hdfs塊狀態(tài)的數(shù)據(jù)遷移方法。

技術(shù)總結(jié)
本申請(qǐng)涉及一種基于HDFS塊狀態(tài)的數(shù)據(jù)遷移方法、裝置、設(shè)備、介質(zhì)及產(chǎn)品，尤其涉及數(shù)據(jù)處理技術(shù)領(lǐng)域。包括：設(shè)置源磁盤進(jìn)入維護(hù)模式；統(tǒng)計(jì)源磁盤中塊文件的副本狀態(tài)，生成任務(wù)列表；任務(wù)列表包括與預(yù)設(shè)副本狀態(tài)對(duì)應(yīng)的塊文件；獲取源磁盤和其他磁盤的存儲(chǔ)量和容量，計(jì)算其他磁盤的預(yù)期可存儲(chǔ)量；源磁盤和其他磁盤屬于相同數(shù)據(jù)節(jié)點(diǎn)；在其他磁盤的預(yù)期可存儲(chǔ)量大于源磁盤的存儲(chǔ)量的情況下，將任務(wù)列表中的塊文件按照優(yōu)先級(jí)順序遷移至其他磁盤，優(yōu)先級(jí)順序與預(yù)設(shè)副本狀態(tài)對(duì)應(yīng)。本申請(qǐng)實(shí)施例通過計(jì)算其他磁盤的預(yù)期可存儲(chǔ)量，衡量其他磁盤是否能夠承載源磁盤數(shù)據(jù)，提升了HDFS磁盤的運(yùn)維能力，也避免副本缺失產(chǎn)生內(nèi)網(wǎng)流量，從而降低了集群業(yè)務(wù)的受沖擊風(fēng)險(xiǎn)。

技術(shù)研發(fā)人員：李金鑫,袁東東
受保護(hù)的技術(shù)使用者：中電云計(jì)算技術(shù)有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/10