技術特征：

1.一種數(shù)據(jù)的處理方法，其特征在于，包括：

2.根據(jù)權利要求1所述的數(shù)據(jù)的處理方法，其特征在于，在根據(jù)目標日志模板文件對日志數(shù)據(jù)進行過濾之前，還包括：

3.根據(jù)權利要求2所述的數(shù)據(jù)的處理方法，其特征在于，根據(jù)所述日志數(shù)據(jù)的類型選取目標日志模板文件，包括：

4.根據(jù)權利要求3所述的數(shù)據(jù)的處理方法，其特征在于，構建新的日志模板文件，包括：

5.根據(jù)權利要求4所述的數(shù)據(jù)的處理方法，其特征在于，對多個所述單位數(shù)據(jù)進行解析處理，包括：

6.根據(jù)權利要求5所述的數(shù)據(jù)的處理方法，其特征在于，對每個所述單位數(shù)據(jù)進行離散處理，包括：

7.根據(jù)權利要求6所述的數(shù)據(jù)的處理方法，其特征在于，在將所述數(shù)字內(nèi)容和非數(shù)字內(nèi)容進行隔離之后，還包括：

8.根據(jù)權利要求7所述的數(shù)據(jù)的處理方法，其特征在于，對所述非數(shù)字內(nèi)容部分進行統(tǒng)計分析，包括：

9.根據(jù)權利要求7所述的數(shù)據(jù)的處理方法，其特征在于，對所述數(shù)字內(nèi)容部分進行統(tǒng)計分析，包括：

10.根據(jù)權利要求4所述的數(shù)據(jù)的處理方法，其特征在于，根據(jù)所述規(guī)則集生成所述新的日志模板文件，包括：

11.根據(jù)權利要求4所述的數(shù)據(jù)的處理方法，其特征在于，所述單位數(shù)據(jù)包括所述日志數(shù)據(jù)中的至少一行數(shù)據(jù)。

12.根據(jù)權利要求4所述的數(shù)據(jù)的處理方法，其特征在于，在判斷存在與所述日志數(shù)據(jù)的類型匹配的日志模板文件之后，還包括：

13.根據(jù)權利要求1所述的日志數(shù)據(jù)的處理方法，其特征在于，在得到壓縮日志文件數(shù)據(jù)之后，還包括：

14.一種數(shù)據(jù)的處理裝置，其特征在于，包括：

15.一種電子設備，其特征在于，包括：

16.一種計算機可讀存儲介質(zhì)，其特征在于，所述計算機可讀存儲介質(zhì)上存儲有數(shù)據(jù)的處理程序，所述數(shù)據(jù)的處理程序被處理器執(zhí)行時實現(xiàn)如權利要求1-13任一項所述的數(shù)據(jù)的處理方法。

技術總結
本發(fā)明公開了一種數(shù)據(jù)的處理方法、裝置及電子設備，方法包括：根據(jù)目標日志模板文件對日志數(shù)據(jù)進行過濾，對得到的動態(tài)數(shù)據(jù)部分創(chuàng)建變量對象；分析變量對象是否發(fā)生變化；若是，則記錄該變量對象對應的動態(tài)數(shù)據(jù)，否則，記錄變量對象的基礎信息；將記錄的動態(tài)數(shù)據(jù)和/或基礎信息進行壓縮，得到壓縮日志文件。本發(fā)明針對巨量日志數(shù)據(jù)進行大數(shù)據(jù)分析，并自動匹配合適的目標日志模板文件，無需人工參與和更改日志模板，提高了處理過程的智能性，并且根據(jù)數(shù)據(jù)特性，對日志數(shù)據(jù)進行過濾、去冗余處理和壓縮，使得到的壓縮日志文件里不存在過多的冗余信息，利于節(jié)省存儲空間，提高數(shù)據(jù)傳輸效率。

技術研發(fā)人員：衷誠龍,尹雪芹,曹虎,尹小強,黃饒
受保護的技術使用者：比亞迪股份有限公司
技術研發(fā)日：
技術公布日：2024/10/10