国产精品1024永久观看,大尺度欧美暖暖视频在线观看,亚洲宅男精品一区在线观看,欧美日韩一区二区三区视频,2021中文字幕在线观看

  • <option id="fbvk0"></option>
    1. <rt id="fbvk0"><tr id="fbvk0"></tr></rt>
      <center id="fbvk0"><optgroup id="fbvk0"></optgroup></center>
      <center id="fbvk0"></center>

      <li id="fbvk0"><abbr id="fbvk0"><dl id="fbvk0"></dl></abbr></li>

      一種數(shù)據(jù)處理方法及相關設備與流程

      文檔序號:39611228發(fā)布日期:2024-10-11 13:20閱讀:來源:國知局

      技術特征:

      1.一種數(shù)據(jù)處理方法,其特征在于,所述方法應用于第一設備,所述第一設備包括多個第一加速卡,所述方法包括:

      2.根據(jù)權利要求1所述的方法,其特征在于,所述特征標識包括第一比特位與第二比特位,所述第一比特位用于所述多個第一數(shù)據(jù)的去重,所述第二比特位用于確定與第二數(shù)據(jù)相關的所述第二加速卡。

      3.根據(jù)權利要求2所述的方法,其特征在于,所述多個第二數(shù)據(jù)中沒有相同所述第一比特位的兩個第二數(shù)據(jù)。

      4.根據(jù)權利要求1至3中任一項所述的方法,其特征在于,所述方法還包括:

      5.一種數(shù)據(jù)處理方法,其特征在于,所述方法應用于交換設備,所述方法包括:

      6.根據(jù)權利要求5所述的方法,其特征在于,所述特征標識包括第一比特位與第二比特位,所述第一比特位用于多個第一數(shù)據(jù)的去重,所述第二比特位用于確定所述多個第三數(shù)據(jù)所屬第二設備的第二加速卡。

      7.根據(jù)權利要求6所述的方法,其特征在于,所述多個第二數(shù)據(jù)中沒有相同所述第一比特位的兩個第二數(shù)據(jù)。

      8.根據(jù)權利要求5至7中任一項所述的方法,其特征在于,所述方法還包括:

      9.一種數(shù)據(jù)處理方法,其特征在于,所述方法應用于第二設備,所述第二設備包括多個第二加速卡,所述方法包括:

      10.根據(jù)權利要求9所述的方法,其特征在于,所述特征標識還用于確定所述第三數(shù)據(jù)所屬的第二加速卡。

      11.一種第一設備,其特征在于,所述第一設備包括多個第一加速卡,所述第一設備包括:

      12.根據(jù)權利要求11所述的第一設備,其特征在于,所述特征標識包括第一比特位與第二比特位,所述第一比特位用于所述多個第一數(shù)據(jù)的去重,所述第二比特位用于確定與第二數(shù)據(jù)相關的所述第二加速卡。

      13.根據(jù)權利要求12所述的第一設備,其特征在于,所述多個第二數(shù)據(jù)中沒有相同所述第一比特位的兩個第二數(shù)據(jù)。

      14.根據(jù)權利要求11至13中任一項所述的第一設備,其特征在于,所述第一設備還包括:

      15.一種交換設備,其特征在于,所述交換設備包括:

      16.根據(jù)權利要求15所述的交換設備,其特征在于,所述特征標識包括第一比特位與第二比特位,所述第一比特位用于多個第一數(shù)據(jù)的去重,所述第二比特位用于確定所述多個第三數(shù)據(jù)所屬第二設備的第二加速卡。

      17.根據(jù)權利要求16所述的交換設備,其特征在于,所述多個第二數(shù)據(jù)中沒有相同所述第一比特位的兩個第二數(shù)據(jù)。

      18.根據(jù)權利要求15至17中任一項所述的交換設備,其特征在于,所述接收單元,還用于接收來自所述多個第二設備的多個第四數(shù)據(jù),所述多個第四數(shù)據(jù)包括損失函數(shù)的梯度與梯度標識,所述梯度用于更新所述模型的參數(shù),所述梯度標識用于所述交換設備進行梯度聚合;

      19.一種第二設備,其特征在于,所述第二設備包括多個第二加速卡,所述第二設備包括:

      20.根據(jù)權利要求19所述的第二設備,其特征在于,所述特征標識還用于確定所述第三數(shù)據(jù)所屬的第二加速卡。

      21.一種第一設備,其特征在于,包括:處理器,所述處理器與存儲器耦合,所述存儲器用于存儲程序或指令,當所述程序或指令被所述處理器執(zhí)行時,使得所述第一設備執(zhí)行如權利要求1至4中任一項所述的方法。

      22.一種交換設備,其特征在于,包括:處理器,所述處理器與存儲器耦合,所述存儲器用于存儲程序或指令,當所述程序或指令被所述處理器執(zhí)行時,使得所述交換設備執(zhí)行如權利要求5至8中任一項所述的方法。

      23.一種第二設備,其特征在于,包括:處理器,所述處理器與存儲器耦合,所述存儲器用于存儲程序或指令,當所述程序或指令被所述處理器執(zhí)行時,使得所述第二設備執(zhí)行如權利要求9或10所述的方法。

      24.一種通信系統(tǒng),其特征在于,所述通信系統(tǒng)包括如權利要求21所述的第一設備、如權利要求22所述的交換設備、和/或如權利要求23所述的第二設備。

      25.一種計算機存儲介質,其特征在于,包括計算機指令,當所述計算機指令在終端設備上運行時,使得所述終端設備執(zhí)行如權利要求1至10中任一項所述的方法。

      26.一種計算機程序產品,其特征在于,當所述計算機程序產品在計算機上運行時,使得所述計算機執(zhí)行如權利要求1至10中任一項所述的方法。


      技術總結
      本申請?zhí)峁┝艘环N數(shù)據(jù)處理方法,可以應用于多機多卡訓練等場景。該方法應用于第一設備,第一設備包括多個第一加速卡,方法包括:獲取來自多個第一加速卡的多個第一數(shù)據(jù),多個第一數(shù)據(jù)包括模型的樣本特征與特征標識,多個第一數(shù)據(jù)為跨數(shù)據(jù)面?zhèn)鬏數(shù)臄?shù)據(jù);基于特征標識對多個第一數(shù)據(jù)進行去重處理以得到多個第二數(shù)據(jù);基于特征標識與映射關系向交換設備發(fā)送多個第二數(shù)據(jù),映射關系用于表示特征標識與多個第二設備中第二加速卡的關聯(lián)關系。在模型對應樣本特征的傳輸過程中,第一設備通過向交換設備發(fā)送去重后的第二數(shù)據(jù),可以減少跨平面?zhèn)鬏斨貜偷奶卣鲾?shù)據(jù),進而提升模型的訓練/推理效率。

      技術研發(fā)人員:黃鑫
      受保護的技術使用者:華為技術有限公司
      技術研發(fā)日:
      技術公布日:2024/10/10
      當前第2頁1 2 
      網友詢問留言 已有0條留言
      • 還沒有人留言評論。精彩留言會獲得點贊!
      1