本申請涉及人工智能，尤其涉及一種基于大模型的辦事流程驗(yàn)證方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)：

1、隨著人工智能技術(shù)的飛速發(fā)展，大模型(如transformer、gpt等)在自然語言處理領(lǐng)域取得了顯著成果。

2、目前，由于通過人工梳理政務(wù)領(lǐng)域的辦事指南以得到便于理解的辦事流程時(shí)，存在由于需要跨部門協(xié)同梳理與維護(hù)導(dǎo)致人力資源浪費(fèi)以及時(shí)間消耗大的問題，即依賴人工梳理得到辦事流程的方式，存在效率低的問題。因此，為解決這一問題，業(yè)界開始利用大模型的語言理解能力和語言生成能力，將辦事指南信息轉(zhuǎn)換為辦事流程信息，然而大模型在處理政務(wù)領(lǐng)域的任務(wù)時(shí)，可能會(huì)為了保證語言的連貫性使得生成的辦事流程信息包含不實(shí)信息，從而導(dǎo)致辦事流程的準(zhǔn)確率低，影響用戶辦事效率的問題。

3、因此，如何提高基于辦事流程辦理政務(wù)事項(xiàng)的成功率，是目前亟需解決的一個(gè)問題。

技術(shù)實(shí)現(xiàn)思路

1、本申請的主要目的在于提供一種基于大模型的辦事流程驗(yàn)證方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)，旨在提高基于辦事流程辦理政務(wù)事項(xiàng)的成功率。

2、為實(shí)現(xiàn)上述目的，本申請?zhí)峁┮环N基于大模型的辦事流程驗(yàn)證方法，所述基于大模型的辦事流程驗(yàn)證方法包括：

3、將目標(biāo)政務(wù)辦事指南輸入至目標(biāo)大模型，得到所述目標(biāo)政務(wù)辦事指南對應(yīng)的辦事流程信息；

4、通過目標(biāo)驗(yàn)證器對所述辦事流程信息中的多個(gè)步驟信息進(jìn)行準(zhǔn)確率驗(yàn)證，得到各所述步驟信息各自的驗(yàn)證結(jié)果，其中，所述目標(biāo)驗(yàn)證器是以樣本辦事流程信息為模型輸入數(shù)據(jù)，以基于所述樣本辦事流程信息辦理政務(wù)事項(xiàng)的真實(shí)辦理結(jié)果為模型訓(xùn)練標(biāo)簽進(jìn)行訓(xùn)練得到的；

5、基于各所述驗(yàn)證結(jié)果確定所述辦事流程信息的準(zhǔn)確率，并在所述準(zhǔn)確率大于預(yù)設(shè)閾值的情況下，輸出所述辦事流程信息以指導(dǎo)政務(wù)事項(xiàng)的辦理。

6、在一實(shí)施例中，所述通過目標(biāo)驗(yàn)證器對所述辦事流程信息中的多個(gè)步驟信息進(jìn)行準(zhǔn)確率驗(yàn)證，得到各所述步驟信息各自的驗(yàn)證結(jié)果的步驟，包括：

7、通過目標(biāo)驗(yàn)證器將所述辦事流程信息拆解為多個(gè)步驟信息，并確定各所述步驟信息各自對應(yīng)的指南信息，其中，所述指南信息為與所述步驟信息中的關(guān)鍵詞相關(guān)的政務(wù)辦事指南；

8、通過所述目標(biāo)驗(yàn)證器比對每一所述步驟信息與所述步驟信息對應(yīng)的指南信息，得到各所述步驟信息各自的驗(yàn)證結(jié)果。

9、在一實(shí)施例中，所述確定各所述步驟信息各自對應(yīng)的指南信息的步驟，包括：

10、確定每一所述步驟信息的關(guān)鍵詞，調(diào)用搜索引擎以在預(yù)設(shè)指南知識(shí)庫中檢索所述關(guān)鍵詞，得到各所述步驟信息各自對應(yīng)的指南信息，其中，所述預(yù)設(shè)指南知識(shí)庫為基于實(shí)時(shí)政務(wù)辦事指南構(gòu)建的。

11、在一實(shí)施例中，所述通過所述目標(biāo)驗(yàn)證器比對每一所述步驟信息與所述步驟信息對應(yīng)的指南信息，得到各所述步驟信息各自的驗(yàn)證結(jié)果的步驟，包括：

12、分別將各所述步驟信息和各所述指南信息輸入至預(yù)訓(xùn)練語言模型，得到各所述步驟信息各自的第一語義信息以及各所述指南信息各自的第二語義信息，其中，所述預(yù)訓(xùn)練語言模型具備語義分析功能；

13、分別比對每一所述步驟信息的第一語義信息與所述步驟信息對應(yīng)的所述指南信息的第二語義信息，得到各所述步驟信息各自的驗(yàn)證結(jié)果。

14、在一實(shí)施例中，所述基于各所述驗(yàn)證結(jié)果確定所述辦事流程信息的準(zhǔn)確率的步驟，包括：

15、確定各所述驗(yàn)證結(jié)果中表征準(zhǔn)確無誤的目標(biāo)驗(yàn)證結(jié)果的第一數(shù)量；

16、將所述第一數(shù)量除以各所述驗(yàn)證結(jié)果的第二數(shù)量，得到所述辦事流程信息的準(zhǔn)確率。

17、在一實(shí)施例中，所述目標(biāo)大模型是以樣本政務(wù)辦事指南為模型輸入數(shù)據(jù)，以所述樣本政務(wù)辦事指南對應(yīng)的真實(shí)辦事流程信息為模型訓(xùn)練標(biāo)簽進(jìn)行訓(xùn)練得到的。

18、在一實(shí)施例中，所述基于各所述驗(yàn)證結(jié)果確定所述辦事流程信息的準(zhǔn)確率的步驟之后，所述方法還包括：

19、在所述準(zhǔn)確率小于或者等于預(yù)設(shè)閾值的情況下，確定所述辦事流程信息為不可靠信息，并輸出提示信息以提醒用戶采用其他梳理方式獲取政務(wù)事項(xiàng)的辦理指導(dǎo)。

20、此外，為實(shí)現(xiàn)上述目的，本申請還提供一種基于大模型的辦事流程驗(yàn)證裝置，所述基于大模型的辦事流程驗(yàn)證裝置包括：

21、獲取模塊，用于將目標(biāo)政務(wù)辦事指南輸入至目標(biāo)大模型，得到所述目標(biāo)政務(wù)辦事指南對應(yīng)的辦事流程信息；

22、驗(yàn)證模塊，用于通過目標(biāo)驗(yàn)證器對所述辦事流程信息中的多個(gè)步驟信息進(jìn)行準(zhǔn)確率驗(yàn)證，得到各所述步驟信息各自的驗(yàn)證結(jié)果，其中，所述目標(biāo)驗(yàn)證器是以樣本辦事流程信息為模型輸入數(shù)據(jù)，以基于所述樣本辦事流程信息辦理政務(wù)事項(xiàng)的真實(shí)辦理結(jié)果為模型訓(xùn)練標(biāo)簽進(jìn)行訓(xùn)練得到的；

23、輸出模塊，用于基于各所述驗(yàn)證結(jié)果確定所述辦事流程信息的準(zhǔn)確率，并在所述準(zhǔn)確率大于預(yù)設(shè)閾值的情況下，輸出所述辦事流程信息以指導(dǎo)政務(wù)事項(xiàng)的辦理。

24、此外，為實(shí)現(xiàn)上述目的，本申請還提供一種存儲(chǔ)介質(zhì)，所述存儲(chǔ)介質(zhì)為計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)上存儲(chǔ)有實(shí)現(xiàn)基于大模型的辦事流程驗(yàn)證方法的程序，所述實(shí)現(xiàn)基于大模型的辦事流程驗(yàn)證方法的程序被處理器執(zhí)行以實(shí)現(xiàn)如上所述基于大模型的辦事流程驗(yàn)證方法的步驟。

25、此外，為實(shí)現(xiàn)上述目的，本申請還提供一種計(jì)算機(jī)程序產(chǎn)品，包括計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如上述的基于大模型的辦事流程驗(yàn)證方法的步驟。

26、本申請?zhí)峁┝艘环N基于大模型的辦事流程驗(yàn)證方法，本申請將目標(biāo)政務(wù)辦事指南輸入至目標(biāo)大模型，得到目標(biāo)政務(wù)辦事指南對應(yīng)的辦事流程信息，通過目標(biāo)驗(yàn)證器對辦事流程信息中的多個(gè)步驟信息進(jìn)行準(zhǔn)確率驗(yàn)證，得到各步驟信息各自的驗(yàn)證結(jié)果，其中，目標(biāo)驗(yàn)證器是以樣本辦事流程信息為模型輸入數(shù)據(jù)，以基于樣本辦事流程信息辦理政務(wù)事項(xiàng)的真實(shí)辦理結(jié)果為模型訓(xùn)練標(biāo)簽進(jìn)行訓(xùn)練得到的，最后基于各步驟信息各自的驗(yàn)證結(jié)果確定該辦事流程信息的準(zhǔn)確率，并在該準(zhǔn)確率大于預(yù)設(shè)閾值的情況下，輸出該辦事流程信息以指導(dǎo)用戶進(jìn)行政務(wù)事項(xiàng)的辦理。

27、綜上，本申請考慮到大模型為了保證語言連貫性導(dǎo)致輸出的辦事流程包含不實(shí)信息的問題，通過預(yù)先訓(xùn)練好的目標(biāo)驗(yàn)證器對大模型輸出的辦事流程信息進(jìn)行準(zhǔn)確率驗(yàn)證，得到該辦事流程信息的準(zhǔn)確率，并在該準(zhǔn)確率大于預(yù)設(shè)閾值，即該辦事流程信息的準(zhǔn)確率較高時(shí)，輸出該辦事流程信息以指導(dǎo)事項(xiàng)辦理。如此，相比于傳統(tǒng)直接使用大模型基于目標(biāo)政務(wù)辦事指南梳理的辦事流程進(jìn)行政務(wù)事項(xiàng)辦理的方式，本申請確保在辦事流程信息的準(zhǔn)確率較高時(shí)輸出該辦事流程信息以指導(dǎo)事項(xiàng)辦理，避免了用戶基于大模型輸出的不實(shí)信息進(jìn)行事項(xiàng)辦理導(dǎo)致辦事成功率較低的問題，即提高基于辦事流程辦理政務(wù)事項(xiàng)的成功率。

技術(shù)特征：

1.一種基于大模型的辦事流程驗(yàn)證方法，其特征在于，所述基于大模型的辦事流程驗(yàn)證方法包括：

2.如權(quán)利要求1所述的方法，其特征在于，所述通過目標(biāo)驗(yàn)證器對所述辦事流程信息中的多個(gè)步驟信息進(jìn)行準(zhǔn)確率驗(yàn)證，得到各所述步驟信息各自的驗(yàn)證結(jié)果的步驟，包括：

3.如權(quán)利要求2所述的方法，其特征在于，所述確定各所述步驟信息各自對應(yīng)的指南信息的步驟，包括：

4.如權(quán)利要求2所述的方法，其特征在于，所述通過所述目標(biāo)驗(yàn)證器比對每一所述步驟信息與所述步驟信息對應(yīng)的指南信息，得到各所述步驟信息各自的驗(yàn)證結(jié)果的步驟，包括：

5.如權(quán)利要求1所述的方法，其特征在于，所述基于各所述驗(yàn)證結(jié)果確定所述辦事流程信息的準(zhǔn)確率的步驟，包括：

6.如權(quán)利要求1所述的方法，其特征在于，所述目標(biāo)大模型是以樣本政務(wù)辦事指南為模型輸入數(shù)據(jù)，以所述樣本政務(wù)辦事指南對應(yīng)的真實(shí)辦事流程信息為模型訓(xùn)練標(biāo)簽進(jìn)行訓(xùn)練得到的。

7.如權(quán)利要求1所述的方法，其特征在于，所述基于各所述驗(yàn)證結(jié)果確定所述辦事流程信息的準(zhǔn)確率的步驟之后，所述方法還包括：

8.一種基于大模型的辦事流程驗(yàn)證裝置，其特征在于，所述基于大模型的辦事流程驗(yàn)證裝置包括：

9.一種基于大模型的辦事流程驗(yàn)證設(shè)備，其特征在于，所述基于大模型的辦事流程驗(yàn)證設(shè)備包括：存儲(chǔ)器、處理器及存儲(chǔ)在所述存儲(chǔ)器上并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序，所述計(jì)算機(jī)程序配置為實(shí)現(xiàn)如權(quán)利要求1至7中任一項(xiàng)所述的基于大模型的辦事流程驗(yàn)證方法的步驟。

10.一種存儲(chǔ)介質(zhì)，其特征在于，所述存儲(chǔ)介質(zhì)為計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)上存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至7中任一項(xiàng)所述的基于大模型的辦事流程驗(yàn)證方法的步驟。

技術(shù)總結(jié)
本申請公開了一種基于大模型的辦事流程驗(yàn)證方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)，本申請涉及人工智能技術(shù)領(lǐng)域，該基于大模型的辦事流程驗(yàn)證方法包括：將目標(biāo)政務(wù)辦事指南輸入至目標(biāo)大模型，得到目標(biāo)政務(wù)辦事指南對應(yīng)的辦事流程信息；通過目標(biāo)驗(yàn)證器對辦事流程信息中的多個(gè)步驟信息進(jìn)行準(zhǔn)確率驗(yàn)證，得到各步驟信息各自的驗(yàn)證結(jié)果，其中，目標(biāo)驗(yàn)證器是以樣本辦事流程信息為模型輸入數(shù)據(jù)，以基于樣本辦事流程信息辦理政務(wù)事項(xiàng)的真實(shí)辦理結(jié)果為模型訓(xùn)練標(biāo)簽進(jìn)行訓(xùn)練得到的；基于各驗(yàn)證結(jié)果確定辦事流程信息的準(zhǔn)確率，并在準(zhǔn)確率大于預(yù)設(shè)閾值的情況下，輸出辦事流程信息以指導(dǎo)政務(wù)事項(xiàng)的辦理。本申請能夠提高基于辦事流程辦理政務(wù)事項(xiàng)的成功率。

技術(shù)研發(fā)人員：陸志鵬,韓光,李嘉寧,鄭曦,郭祎萍,范國浩,劉彬彬,馬博原,連森,顧杰
受保護(hù)的技術(shù)使用者：中電數(shù)據(jù)產(chǎn)業(yè)集團(tuán)有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/17