国产精品1024永久观看,大尺度欧美暖暖视频在线观看,亚洲宅男精品一区在线观看,欧美日韩一区二区三区视频,2021中文字幕在线观看

  • <option id="fbvk0"></option>
    1. <rt id="fbvk0"><tr id="fbvk0"></tr></rt>
      <center id="fbvk0"><optgroup id="fbvk0"></optgroup></center>
      <center id="fbvk0"></center>

      <li id="fbvk0"><abbr id="fbvk0"><dl id="fbvk0"></dl></abbr></li>

      一種用于數(shù)倉數(shù)據(jù)生命周期管理的方法、系統(tǒng)、設(shè)備及介質(zhì)與流程

      文檔序號(hào):39622784發(fā)布日期:2024-10-11 13:44閱讀:來源:國知局

      技術(shù)特征:

      1.一種用于數(shù)倉數(shù)據(jù)生命周期管理的方法,其特征在于,包括以下步驟:

      2.如權(quán)利要求1所述的一種用于數(shù)倉數(shù)據(jù)生命周期管理的方法,其特征在于,所述分析并提取表級(jí)信息,具體為:

      3.如權(quán)利要求1所述的一種用于數(shù)倉數(shù)據(jù)生命周期管理的方法,其特征在于,所述數(shù)據(jù)庫分類具體為根據(jù)存儲(chǔ)數(shù)據(jù)的重要性,對(duì)數(shù)倉中的數(shù)據(jù)庫進(jìn)行分類分級(jí),區(qū)分正式表與臨時(shí)表、核心庫與非核心庫。

      4.如權(quán)利要求1所述的一種用于數(shù)倉數(shù)據(jù)生命周期管理的方法,其特征在于,所述生命周期策略配置具體為根據(jù)業(yè)務(wù)需求,為不同分類分級(jí)的數(shù)據(jù)庫配置相應(yīng)的生命周期策略,包括數(shù)據(jù)保留周期、到期處理方式,其中核心庫表的數(shù)據(jù)保留周期設(shè)為3年,臨時(shí)表的數(shù)據(jù)保留周期設(shè)為180天。

      5.如權(quán)利要求1所述的一種用于數(shù)倉數(shù)據(jù)生命周期管理的方法,其特征在于,所述定時(shí)檢查與提醒具體為:系統(tǒng)每天定時(shí)檢查各數(shù)據(jù)庫中的表是否到達(dá)其生命周期策略中設(shè)定的保留期限,通過比較表的最后訪問時(shí)間與配置的有效期,判斷是否小于當(dāng)前日期來確定表是否到期;對(duì)于到期的表,系統(tǒng)執(zhí)行預(yù)定的到期處理操作。

      6.如權(quán)利要求1所述的一種用于數(shù)倉數(shù)據(jù)生命周期管理的方法,其特征在于,所述對(duì)于到期的表,執(zhí)行預(yù)定的到期處理操作,具體為:

      7.一種用于數(shù)倉數(shù)據(jù)生命周期管理的系統(tǒng),其特征在于,包括以下模塊:

      8.如權(quán)利要求7所述的一種用于數(shù)倉數(shù)據(jù)生命周期管理的系統(tǒng),其特征在于,還包括權(quán)限管理模塊,所述權(quán)限管理模塊負(fù)責(zé)系統(tǒng)用戶的權(quán)限分配和管理,確保不同用戶只能訪問和操作其被授權(quán)的數(shù)據(jù)和功能。

      9.一種設(shè)備,包括存儲(chǔ)器、處理器以及存儲(chǔ)在所述存儲(chǔ)器中并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序,其特征在于,所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)如權(quán)利要求1-7任一項(xiàng)所述方法的步驟。

      10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)有計(jì)算機(jī)程序,其特征在于,所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-7任一項(xiàng)所述方法的步驟。


      技術(shù)總結(jié)
      本發(fā)明公開了一種用于數(shù)倉數(shù)據(jù)生命周期管理的方法、系統(tǒng)、設(shè)備及介質(zhì),方法包括定時(shí)獲取HDFS鏡像文件,將HDFS鏡像文件解析為CSV格式文件,并上傳到HDFS中;分析并提取表級(jí)信息;查詢Hive元數(shù)據(jù)庫;擴(kuò)展表信息;數(shù)據(jù)庫分類與生命周期策略配置;定時(shí)檢查與提醒;對(duì)于到期的表,執(zhí)行預(yù)定的到期處理操作;延期處理。通過自動(dòng)化的定時(shí)任務(wù),從HDFS鏡像文件的獲取、解析到表級(jí)信息的提取和上傳,再到Hive元數(shù)據(jù)庫的查詢、表信息的擴(kuò)展、數(shù)據(jù)庫的分類與生命周期策略配置,整個(gè)過程實(shí)現(xiàn)了高度的自動(dòng)化,大幅提升了數(shù)據(jù)管理的效率。本發(fā)明的方法在提升管理效率、增強(qiáng)數(shù)據(jù)可見性、優(yōu)化資源利用、提高數(shù)據(jù)安全性及降低運(yùn)營成本等方面均展現(xiàn)出顯著的優(yōu)勢(shì)。

      技術(shù)研發(fā)人員:王志敏,張星
      受保護(hù)的技術(shù)使用者:河南中原消費(fèi)金融股份有限公司
      技術(shù)研發(fā)日:
      技術(shù)公布日:2024/10/10
      當(dāng)前第2頁1 2 
      網(wǎng)友詢問留言 已有0條留言
      • 還沒有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
      1