本發(fā)明主要涉及視頻監(jiān)控顯示,具體地涉及一種基于規(guī)程的視頻自動(dòng)化組態(tài)方法和系統(tǒng)。
背景技術(shù):
1、在核工程的工作環(huán)境中,嚴(yán)格遵守規(guī)程要求是至關(guān)重要的。這些規(guī)程中,部分會(huì)伴隨有相應(yīng)的圖形顯示界面或監(jiān)控視頻畫面,通過(guò)畫面直觀展示關(guān)鍵的關(guān)聯(lián)信息。傳統(tǒng)的畫面信息查詢與檢索機(jī)制依賴于電子化規(guī)程系統(tǒng)中明確指出的參數(shù)或設(shè)備標(biāo)識(shí),通過(guò)預(yù)設(shè)的鏈接將用戶導(dǎo)向集散式控制系統(tǒng)(distributed?control?system,dcs)中包含這些信息的完整畫面。這一過(guò)程需要人工操作,如點(diǎn)擊或利用配置的畫面導(dǎo)航工具進(jìn)行畫面的切換、打開等步驟,以展現(xiàn)整幅dcs工藝流程的顯示畫面。
2、dcs顯示畫面往往內(nèi)容繁雜,直接呈現(xiàn)的畫面并不總能聚焦于與當(dāng)前規(guī)程步驟直接相關(guān)的信息點(diǎn)。因此操縱員不得不進(jìn)行二次檢索,手動(dòng)定位并查看特定的顯示區(qū)域以獲取所需信息。這種人工信息檢索方式不僅效率低下,還顯著增加了操縱員在執(zhí)行任務(wù)時(shí)的人機(jī)接口管理類任務(wù)負(fù)荷,如搜索、切換畫面等操作占據(jù)了他們大量的時(shí)間和精力。目前在從dcs的視頻畫面中獲取規(guī)程相關(guān)的關(guān)聯(lián)信息時(shí),存在效率不高的問(wèn)題。
技術(shù)實(shí)現(xiàn)思路
1、本申請(qǐng)所要解決的技術(shù)問(wèn)題是提供一種基于規(guī)程的視頻自動(dòng)化組態(tài)方法和系統(tǒng),可以根據(jù)規(guī)程步驟的執(zhí)行順序自動(dòng)顯示相應(yīng)的視頻畫面內(nèi)容,使工作人員能夠高效、準(zhǔn)確地獲取規(guī)程相關(guān)的關(guān)聯(lián)信息。
2、本申請(qǐng)為解決上述技術(shù)問(wèn)題而采用的技術(shù)方案是一種基于規(guī)程的視頻自動(dòng)化組態(tài)方法,包括:步驟s1:獲取規(guī)程內(nèi)容和集散式控制系統(tǒng)的視頻畫面,識(shí)別規(guī)程內(nèi)容中的規(guī)程步驟和規(guī)程步驟對(duì)應(yīng)的關(guān)聯(lián)信息,根據(jù)關(guān)聯(lián)信息對(duì)視頻畫面進(jìn)行切割,獲得規(guī)程步驟對(duì)應(yīng)的視頻區(qū)塊;步驟s2:根據(jù)規(guī)程內(nèi)容構(gòu)建視頻布局模板,根據(jù)預(yù)設(shè)規(guī)則將視頻區(qū)塊排布整合進(jìn)視頻布局模板,獲得規(guī)程配套視頻畫面;以及步驟s3:根據(jù)規(guī)程步驟的執(zhí)行順序同步觸發(fā)顯示規(guī)程配套視頻畫面中的視頻區(qū)塊。
3、在本申請(qǐng)的一實(shí)施例中,步驟s1中,識(shí)別規(guī)程內(nèi)容中的規(guī)程步驟和規(guī)程步驟對(duì)應(yīng)的關(guān)聯(lián)信息的步驟包括:將規(guī)程內(nèi)容輸入預(yù)訓(xùn)練的多模態(tài)神經(jīng)網(wǎng)絡(luò)模型,預(yù)訓(xùn)練的多模態(tài)神經(jīng)網(wǎng)絡(luò)模型輸出規(guī)程步驟和規(guī)程步驟對(duì)應(yīng)的關(guān)聯(lián)信息;對(duì)每個(gè)規(guī)程步驟進(jìn)行編號(hào),獲得規(guī)程步驟編號(hào)。
4、在本申請(qǐng)的一實(shí)施例中,步驟s1中,根據(jù)關(guān)聯(lián)信息對(duì)視頻畫面進(jìn)行切割,獲得規(guī)程步驟對(duì)應(yīng)的視頻區(qū)塊的步驟包括:根據(jù)關(guān)聯(lián)信息采用目標(biāo)跟蹤方法和/或圖像識(shí)別方法識(shí)別視頻畫面,獲得關(guān)聯(lián)信息對(duì)應(yīng)的視頻位置區(qū)域;采用像素級(jí)視頻切割方法對(duì)視頻位置區(qū)域進(jìn)行切割,獲得視頻區(qū)塊;其中,視頻區(qū)塊中包括關(guān)聯(lián)信息;對(duì)每個(gè)視頻區(qū)塊進(jìn)行編號(hào),獲得區(qū)塊編號(hào)。
5、在本申請(qǐng)的一實(shí)施例中,關(guān)聯(lián)信息包括:設(shè)備信息、實(shí)時(shí)運(yùn)行參數(shù)信息、報(bào)警信息、趨勢(shì)信息、安全提示信息、歷史記錄信息中的一種或任意種的組合。
6、在本申請(qǐng)的一實(shí)施例中,步驟s2中,根據(jù)規(guī)程內(nèi)容構(gòu)建視頻布局模板,根據(jù)預(yù)設(shè)規(guī)則將視頻區(qū)塊排布整合進(jìn)視頻布局模板的步驟包括:根據(jù)每個(gè)規(guī)程步驟的執(zhí)行順序和重要程度構(gòu)建視頻布局模板;其中,視頻布局模板包括多個(gè)網(wǎng)格;根據(jù)每個(gè)規(guī)程步驟的執(zhí)行順序?qū)⒚總€(gè)規(guī)程步驟對(duì)應(yīng)的視頻區(qū)塊按從上到下、從左到右的方式有序排布整合進(jìn)視頻布局模板;每個(gè)視頻區(qū)塊根據(jù)網(wǎng)格的大小進(jìn)行自適應(yīng)縮放調(diào)整。
7、在本申請(qǐng)的一實(shí)施例中,步驟s2中,在獲得規(guī)程配套視頻畫面的步驟之后,還包括:將規(guī)程步驟對(duì)應(yīng)的視頻區(qū)塊作為視頻集合;對(duì)每個(gè)規(guī)程步驟對(duì)應(yīng)的視頻集合進(jìn)行編號(hào),獲得場(chǎng)景編號(hào)。
8、在本申請(qǐng)的一實(shí)施例中,步驟s3中,根據(jù)規(guī)程步驟的執(zhí)行順序同步觸發(fā)顯示規(guī)程配套視頻畫面中的視頻區(qū)塊的步驟包括:根據(jù)每個(gè)規(guī)程步驟的執(zhí)行順序同步觸發(fā)對(duì)應(yīng)的場(chǎng)景編號(hào);調(diào)取并顯示場(chǎng)景編號(hào)對(duì)應(yīng)的視頻區(qū)塊。
9、在本申請(qǐng)的一實(shí)施例中,步驟s3中,在顯示規(guī)程配套視頻畫面中的視頻區(qū)塊的過(guò)程中,采用視覺提示方法和/或語(yǔ)音提示方法凸出強(qiáng)調(diào)當(dāng)前規(guī)程步驟對(duì)應(yīng)的視頻區(qū)塊;其中,視覺提示方法包括高亮顯示、閃爍顯示、邊框加粗顯示、邊緣凸起顯示中的一種或任意種的組合,語(yǔ)音提示方法包括播報(bào)當(dāng)前規(guī)程步驟的序號(hào)和/或當(dāng)前規(guī)程步驟的特定報(bào)警音。
10、本申請(qǐng)為解決上述技術(shù)問(wèn)題還提出一種基于規(guī)程的視頻自動(dòng)化組態(tài)系統(tǒng),被配置為執(zhí)行如上的基于規(guī)程的視頻自動(dòng)化組態(tài)方法,包括:信息抓取模塊,用于獲取規(guī)程內(nèi)容和集散式控制系統(tǒng)的視頻畫面,識(shí)別規(guī)程內(nèi)容中的規(guī)程步驟和規(guī)程步驟對(duì)應(yīng)的關(guān)聯(lián)信息,根據(jù)關(guān)聯(lián)信息對(duì)視頻畫面進(jìn)行切割,獲得規(guī)程步驟對(duì)應(yīng)的視頻區(qū)塊;布局整合模塊,用于根據(jù)規(guī)程內(nèi)容構(gòu)建視頻布局模板,根據(jù)預(yù)設(shè)規(guī)則將視頻區(qū)塊排布整合進(jìn)視頻布局模板,獲得規(guī)程配套視頻畫面;聯(lián)動(dòng)顯示模塊,用于根據(jù)規(guī)程步驟的執(zhí)行順序同步觸發(fā)顯示規(guī)程配套視頻畫面中的視頻區(qū)塊。
11、本申請(qǐng)的技術(shù)方案通過(guò)根據(jù)關(guān)聯(lián)信息對(duì)視頻畫面進(jìn)行切割,能夠準(zhǔn)確地獲得每個(gè)規(guī)程步驟直接對(duì)應(yīng)的視頻區(qū)塊內(nèi)容;通過(guò)將視頻區(qū)塊排布整合進(jìn)視頻布局模板,能夠根據(jù)不同的工作場(chǎng)景自動(dòng)生成定制化的規(guī)程配套視頻畫面;通過(guò)根據(jù)規(guī)程步驟的執(zhí)行順序同步顯示相應(yīng)的視頻區(qū)塊,能夠幫助工作人員快速獲取所需的信息,從而提高了整體的工作效率。
12、可以將本申請(qǐng)基于規(guī)程的視頻自動(dòng)化組態(tài)方法封裝成視頻自動(dòng)化組態(tài)與監(jiān)視軟件,通過(guò)視頻畫面的調(diào)用與拼接融合組態(tài),能夠巧妙地繞開dcs對(duì)顯示內(nèi)容的傳統(tǒng)限制。通過(guò)對(duì)多個(gè)單畫面的智能切割與實(shí)時(shí)拼接,本申請(qǐng)能夠打破“一步驟一畫面”的傳統(tǒng)束縛,可以實(shí)現(xiàn)“多步驟多窗口”的集約式規(guī)程畫面展示,無(wú)需增加dcs軟件畫面,僅憑顯示終端視頻源的靈活重組,就可以大幅提升監(jiān)視效率。本申請(qǐng)可廣泛應(yīng)用于主控制室操作站的vdu(video?display?unit)或大屏幕顯示系統(tǒng),可以極大地豐富視頻終端的顯示內(nèi)容,使其與規(guī)程使用更加匹配,有效減輕了操縱員在執(zhí)行規(guī)程時(shí)的任務(wù)負(fù)荷。
1.一種基于規(guī)程的視頻自動(dòng)化組態(tài)方法,其特征在于,包括:
2.如權(quán)利要求1所述的視頻自動(dòng)化組態(tài)方法,其特征在于,所述步驟s1中,識(shí)別所述規(guī)程內(nèi)容中的規(guī)程步驟和所述規(guī)程步驟對(duì)應(yīng)的關(guān)聯(lián)信息的步驟包括:
3.如權(quán)利要求1所述的視頻自動(dòng)化組態(tài)方法,其特征在于,所述步驟s1中,根據(jù)所述關(guān)聯(lián)信息對(duì)所述視頻畫面進(jìn)行切割,獲得所述規(guī)程步驟對(duì)應(yīng)的視頻區(qū)塊的步驟包括:
4.如權(quán)利要求1所述的視頻自動(dòng)化組態(tài)方法,其特征在于,所述關(guān)聯(lián)信息包括:設(shè)備信息、實(shí)時(shí)運(yùn)行參數(shù)信息、報(bào)警信息、趨勢(shì)信息、安全提示信息、歷史記錄信息中的一種或任意種的組合。
5.如權(quán)利要求1所述的視頻自動(dòng)化組態(tài)方法,其特征在于,所述步驟s2中,根據(jù)所述規(guī)程內(nèi)容構(gòu)建視頻布局模板,根據(jù)預(yù)設(shè)規(guī)則將所述視頻區(qū)塊排布整合進(jìn)所述視頻布局模板的步驟包括:
6.如權(quán)利要求1所述的視頻自動(dòng)化組態(tài)方法,其特征在于,所述步驟s2中,在獲得規(guī)程配套視頻畫面的步驟之后,還包括:
7.如權(quán)利要求1或6所述的視頻自動(dòng)化組態(tài)方法,其特征在于,所述步驟s3中,根據(jù)所述規(guī)程步驟的執(zhí)行順序同步觸發(fā)顯示所述規(guī)程配套視頻畫面中的視頻區(qū)塊的步驟包括:
8.如權(quán)利要求1所述的視頻自動(dòng)化組態(tài)方法,其特征在于,所述步驟s3中,在顯示所述規(guī)程配套視頻畫面中的視頻區(qū)塊的過(guò)程中,采用視覺提示方法和/或語(yǔ)音提示方法凸出強(qiáng)調(diào)當(dāng)前規(guī)程步驟對(duì)應(yīng)的視頻區(qū)塊;其中,所述視覺提示方法包括高亮顯示、閃爍顯示、邊框加粗顯示、邊緣凸起顯示中的一種或任意種的組合,所述語(yǔ)音提示方法包括播報(bào)所述當(dāng)前規(guī)程步驟的序號(hào)和/或所述當(dāng)前規(guī)程步驟的特定報(bào)警音。
9.一種基于規(guī)程的視頻自動(dòng)化組態(tài)系統(tǒng),其特征在于,被配置為執(zhí)行如權(quán)利要求1-8任一項(xiàng)所述的基于規(guī)程的視頻自動(dòng)化組態(tài)方法,包括: