本申請(qǐng)涉及視線(xiàn)追蹤，尤其涉及基于用戶(hù)視線(xiàn)的車(chē)輛控制方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)：

1、在智能汽車(chē)和人機(jī)交互技術(shù)不斷發(fā)展的今天，車(chē)輛已經(jīng)超越了單純的交通工具角色，演變?yōu)橐粋€(gè)集多種功能于一體的移動(dòng)智能空間，這一轉(zhuǎn)變背后，是科技的進(jìn)步和消費(fèi)者對(duì)于更加舒適、便捷、安全駕駛體驗(yàn)的追求，在這個(gè)背景下，眼球視線(xiàn)追蹤技術(shù)作為一項(xiàng)新興的人機(jī)交互方式，正在逐步應(yīng)用于車(chē)機(jī)系統(tǒng)中，以期提供更為自然、高效和安全的交互體驗(yàn)。

2、眼球視線(xiàn)追蹤能夠?qū)崿F(xiàn)無(wú)接觸式的交互，用戶(hù)只需用眼睛看就可以選擇菜單選項(xiàng)、切換歌曲或?qū)Ш侥康牡?，這種交互方式更加直觀(guān)，隨著智能汽車(chē)功能的日益豐富，用戶(hù)對(duì)于個(gè)性化服務(wù)的需求也在增長(zhǎng)，傳統(tǒng)的物理按鍵或觸摸屏操作需要駕駛員將視線(xiàn)從道路上移開(kāi)，增加了交通事故的風(fēng)險(xiǎn)。

3、上述內(nèi)容僅用于輔助理解本申請(qǐng)的技術(shù)方案，并不代表承認(rèn)上述內(nèi)容是現(xiàn)有技術(shù)。

技術(shù)實(shí)現(xiàn)思路

1、本申請(qǐng)的主要目的在于提供一種基于用戶(hù)視線(xiàn)的車(chē)輛控制方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)，旨在解決由于眼球的快速移動(dòng)和復(fù)雜的光照條件，可能導(dǎo)致追蹤結(jié)果的不準(zhǔn)確問(wèn)題的技術(shù)問(wèn)題。

2、為實(shí)現(xiàn)上述目的，本申請(qǐng)?zhí)岢鲆环N基于用戶(hù)視線(xiàn)的車(chē)輛控制方法，所述基于用戶(hù)視線(xiàn)的車(chē)輛控制方法包括：

3、獲取用戶(hù)的眼內(nèi)圖像；

4、根據(jù)所述眼內(nèi)圖像得到用戶(hù)的當(dāng)前視線(xiàn)值；

5、根據(jù)所述當(dāng)前視線(xiàn)值得到用戶(hù)視線(xiàn)在車(chē)載顯示屏上的參考坐標(biāo)，識(shí)別所述參考坐標(biāo)對(duì)應(yīng)車(chē)載信息的內(nèi)容屬性；

6、基于所述內(nèi)容屬性生成控制信號(hào)，根據(jù)所述控制信號(hào)對(duì)車(chē)輛進(jìn)行控制。

7、在一實(shí)施例中，所述根據(jù)所述眼內(nèi)圖像得到用戶(hù)的當(dāng)前視線(xiàn)值，包括：

8、根據(jù)預(yù)設(shè)時(shí)間間隔從所述眼內(nèi)圖像中多個(gè)參考圖像；

9、識(shí)別所述參考圖像中的視線(xiàn)中心點(diǎn)，基于所述視線(xiàn)中心點(diǎn)得到視線(xiàn)值；

10、根據(jù)多個(gè)參考圖像的視線(xiàn)值得到視線(xiàn)平均值，根據(jù)所述視線(xiàn)平均值作為用戶(hù)的當(dāng)前視線(xiàn)值。

11、在一實(shí)施例中，所述根據(jù)所述當(dāng)前視線(xiàn)值得到用戶(hù)視線(xiàn)在車(chē)載顯示屏上的參考坐標(biāo)，識(shí)別所述參考坐標(biāo)對(duì)應(yīng)車(chē)載信息的內(nèi)容屬性，包括：

12、獲取當(dāng)前車(chē)載顯示屏的顯示內(nèi)容和各個(gè)顯示內(nèi)容對(duì)應(yīng)的顯示坐標(biāo)；

13、將所述視線(xiàn)值對(duì)應(yīng)的顯示坐標(biāo)作為參考坐標(biāo)，將所述顯示坐標(biāo)對(duì)應(yīng)的顯示內(nèi)容作為參考內(nèi)容；

14、根據(jù)所述參考內(nèi)容得到所述參考坐標(biāo)對(duì)應(yīng)車(chē)載信息的內(nèi)容屬性。

15、在一實(shí)施例中，所述基于所述內(nèi)容屬性生成控制信號(hào)，根據(jù)所述控制信號(hào)對(duì)車(chē)輛進(jìn)行控制，包括：

16、在所述內(nèi)容屬性為功能控制類(lèi)時(shí)，根據(jù)所述參考坐標(biāo)在所述車(chē)載顯示屏上對(duì)應(yīng)的控制類(lèi)型生成控制信號(hào)，根據(jù)所述控制信號(hào)對(duì)車(chē)輛進(jìn)行控制；

17、在所述內(nèi)容屬性為信息顯示類(lèi)時(shí)，根據(jù)所述參考坐標(biāo)在所述車(chē)載顯示屏上對(duì)應(yīng)的信息顯示確定用戶(hù)意圖，根據(jù)所述用戶(hù)意圖生成控制信號(hào)，根據(jù)所述控制信號(hào)對(duì)車(chē)輛進(jìn)行控制。

18、在一實(shí)施例中，所述在所述內(nèi)容屬性為信息顯示類(lèi)時(shí)，根據(jù)所述參考坐標(biāo)在所述車(chē)載顯示屏上對(duì)應(yīng)的信息類(lèi)型確定用戶(hù)意圖，根據(jù)所述用戶(hù)意圖生成控制信號(hào)，根據(jù)所述控制信號(hào)對(duì)車(chē)輛進(jìn)行控制，包括：

19、所述在所述內(nèi)容屬性為信息顯示類(lèi)時(shí)，根據(jù)所述參考坐標(biāo)在所述車(chē)載顯示屏上對(duì)應(yīng)的信息顯示確定目標(biāo)信息；

20、基于預(yù)設(shè)信息分析模型預(yù)估所述目標(biāo)信息對(duì)應(yīng)的用戶(hù)意圖；

21、根據(jù)所述用戶(hù)意圖得到控制信號(hào)，將所述控制信號(hào)發(fā)送至目標(biāo)控制器。

22、在一實(shí)施例中，所述基于預(yù)設(shè)信息分析模型預(yù)估所述目標(biāo)信息對(duì)應(yīng)的用戶(hù)意圖，包括：

23、基于預(yù)設(shè)信息分析模型對(duì)所述目標(biāo)信息進(jìn)行預(yù)估得到用戶(hù)關(guān)心信息；

24、根據(jù)預(yù)設(shè)關(guān)聯(lián)表查詢(xún)所述用戶(hù)關(guān)心信息的關(guān)聯(lián)信息；

25、判斷所述關(guān)聯(lián)信息是否滿(mǎn)足用戶(hù)駕駛需求，得到判斷結(jié)果；

26、根據(jù)所述判斷結(jié)果得到所述目標(biāo)信息對(duì)應(yīng)的用戶(hù)意圖。

27、在一實(shí)施例中，所述根據(jù)所述用戶(hù)意圖得到控制信號(hào)，將所述控制信號(hào)發(fā)送至目標(biāo)控制器，包括：

28、根據(jù)預(yù)設(shè)控制表識(shí)別所述用戶(hù)意圖的控制對(duì)象；

29、基于所述控制對(duì)象和所述車(chē)輛的當(dāng)前駕駛狀態(tài)得到控制信號(hào)；

30、將所述控制信號(hào)發(fā)送至目標(biāo)控制器。

31、此外，為實(shí)現(xiàn)上述目的，本申請(qǐng)還提出一種基于用戶(hù)視線(xiàn)的車(chē)輛控制裝置，所述基于用戶(hù)視線(xiàn)的車(chē)輛控制裝置包括：

32、圖像獲取模塊，用于獲取用戶(hù)的眼內(nèi)圖像；

33、視線(xiàn)識(shí)別模塊，用于根據(jù)所述眼內(nèi)圖像得到用戶(hù)的當(dāng)前視線(xiàn)值；

34、所述視線(xiàn)識(shí)別模塊，還用于根據(jù)所述當(dāng)前視線(xiàn)值得到用戶(hù)視線(xiàn)在車(chē)載顯示屏上的參考坐標(biāo)，識(shí)別所述參考坐標(biāo)對(duì)應(yīng)車(chē)載信息的內(nèi)容屬性；

35、車(chē)輛控制模塊，用于基于所述內(nèi)容屬性生成控制信號(hào)，根據(jù)所述控制信號(hào)對(duì)車(chē)輛進(jìn)行控制。

36、此外，為實(shí)現(xiàn)上述目的，本申請(qǐng)還提出一種基于用戶(hù)視線(xiàn)的車(chē)輛控制設(shè)備，所述設(shè)備包括：存儲(chǔ)器、處理器及存儲(chǔ)在所述存儲(chǔ)器上并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序，所述計(jì)算機(jī)程序配置為實(shí)現(xiàn)如上文所述的基于用戶(hù)視線(xiàn)的車(chē)輛控制方法的步驟。

37、此外，為實(shí)現(xiàn)上述目的，本申請(qǐng)還提出一種存儲(chǔ)介質(zhì)，所述存儲(chǔ)介質(zhì)為計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，所述存儲(chǔ)介質(zhì)上存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如上文所述的基于用戶(hù)視線(xiàn)的車(chē)輛控制方法的步驟。

38、此外，為實(shí)現(xiàn)上述目的，本申請(qǐng)還提供一種計(jì)算機(jī)程序產(chǎn)品，所述計(jì)算機(jī)程序產(chǎn)品包括計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如上文所述的基于用戶(hù)視線(xiàn)的車(chē)輛控制方法的步驟。

39、本申請(qǐng)?zhí)岢龅囊粋€(gè)或多個(gè)技術(shù)方案，至少具有以下技術(shù)效果：

40、通過(guò)獲取用戶(hù)的眼內(nèi)圖像計(jì)算出用戶(hù)當(dāng)前的視線(xiàn)方向和在車(chē)載顯示屏上的參考坐標(biāo)，自動(dòng)解析該坐標(biāo)對(duì)應(yīng)的信息內(nèi)容屬性，基于內(nèi)容屬性自動(dòng)推斷用戶(hù)的操作意圖，能夠生成相應(yīng)的控制信號(hào)，基于控制信號(hào)控制車(chē)輛，用戶(hù)無(wú)需手動(dòng)操作即可完成一系列控制動(dòng)作，極大地提升了駕駛過(guò)程中的便利性和安全性。

技術(shù)特征：

1.一種基于用戶(hù)視線(xiàn)的車(chē)輛控制方法，其特征在于，所述基于用戶(hù)視線(xiàn)的車(chē)輛控制方法包括：

2.如權(quán)利要求1所述的基于用戶(hù)視線(xiàn)的車(chē)輛控制方法，其特征在于，所述根據(jù)所述眼內(nèi)圖像得到用戶(hù)的當(dāng)前視線(xiàn)值，包括：

3.如權(quán)利要求1所述的基于用戶(hù)視線(xiàn)的車(chē)輛控制方法，其特征在于，所述根據(jù)所述當(dāng)前視線(xiàn)值得到用戶(hù)視線(xiàn)在車(chē)載顯示屏上的參考坐標(biāo)，識(shí)別所述參考坐標(biāo)對(duì)應(yīng)車(chē)載信息的內(nèi)容屬性，包括：

4.如權(quán)利要求1所述的基于用戶(hù)視線(xiàn)的車(chē)輛控制方法，其特征在于，所述基于所述內(nèi)容屬性生成控制信號(hào)，根據(jù)所述控制信號(hào)對(duì)車(chē)輛進(jìn)行控制，包括：

5.如權(quán)利要求4所述的基于用戶(hù)視線(xiàn)的車(chē)輛控制方法，其特征在于，所述在所述內(nèi)容屬性為信息顯示類(lèi)時(shí)，根據(jù)所述參考坐標(biāo)在所述車(chē)載顯示屏上對(duì)應(yīng)的信息類(lèi)型確定用戶(hù)意圖，根據(jù)所述用戶(hù)意圖生成控制信號(hào)，根據(jù)所述控制信號(hào)對(duì)車(chē)輛進(jìn)行控制，包括：

6.如權(quán)利要求5所述的基于用戶(hù)視線(xiàn)的車(chē)輛控制方法，其特征在于，所述基于預(yù)設(shè)信息分析模型預(yù)估所述目標(biāo)信息對(duì)應(yīng)的用戶(hù)意圖，包括：

7.如權(quán)利要求5所述的基于用戶(hù)視線(xiàn)的車(chē)輛控制方法，其特征在于，所述根據(jù)所述用戶(hù)意圖得到控制信號(hào)，將所述控制信號(hào)發(fā)送至目標(biāo)控制器，包括：

8.一種基于用戶(hù)視線(xiàn)的車(chē)輛控制裝置，其特征在于，所述基于用戶(hù)視線(xiàn)的車(chē)輛控制裝置包括：

9.一種基于用戶(hù)視線(xiàn)的車(chē)輛控制設(shè)備，其特征在于，所述設(shè)備包括：存儲(chǔ)器、處理器及存儲(chǔ)在所述存儲(chǔ)器上并可在所述處理器上運(yùn)行的基于用戶(hù)視線(xiàn)的車(chē)輛控制程序，所述基于用戶(hù)視線(xiàn)的車(chē)輛控制程序配置為實(shí)現(xiàn)如權(quán)利要求1至7中任一項(xiàng)所述的基于用戶(hù)視線(xiàn)的車(chē)輛控制方法。

10.一種存儲(chǔ)介質(zhì)，其特征在于，所述存儲(chǔ)介質(zhì)上存儲(chǔ)有基于用戶(hù)視線(xiàn)的車(chē)輛控制程序，所述基于用戶(hù)視線(xiàn)的車(chē)輛控制程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至7任一項(xiàng)所述的基于用戶(hù)視線(xiàn)的車(chē)輛控制方法。

技術(shù)總結(jié)
本申請(qǐng)公開(kāi)了一種基于用戶(hù)視線(xiàn)的車(chē)輛控制方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)，涉及視線(xiàn)追蹤技術(shù)領(lǐng)域，公開(kāi)了基于用戶(hù)視線(xiàn)的車(chē)輛控制方法，包括：獲取用戶(hù)的眼內(nèi)圖像；根據(jù)眼內(nèi)圖像得到用戶(hù)的當(dāng)前視線(xiàn)值；根據(jù)當(dāng)前視線(xiàn)值得到用戶(hù)視線(xiàn)在車(chē)載顯示屏上的參考坐標(biāo)，識(shí)別參考坐標(biāo)對(duì)應(yīng)車(chē)載信息的內(nèi)容屬性；基于內(nèi)容屬性生成控制信號(hào)，根據(jù)控制信號(hào)對(duì)車(chē)輛進(jìn)行控制；該方法通過(guò)獲取用戶(hù)的眼內(nèi)圖像計(jì)算出用戶(hù)當(dāng)前的視線(xiàn)方向和在車(chē)載顯示屏上的參考坐標(biāo)，自動(dòng)解析該坐標(biāo)對(duì)應(yīng)的信息內(nèi)容屬性，基于內(nèi)容屬性自動(dòng)推斷用戶(hù)的操作意圖，能夠生成相應(yīng)的控制信號(hào)，基于控制信號(hào)控制車(chē)輛，用戶(hù)無(wú)需手動(dòng)操作即可完成一系列控制動(dòng)作，極大地提升了駕駛過(guò)程中的便利性和安全性。

技術(shù)研發(fā)人員：楊思其
受保護(hù)的技術(shù)使用者：嵐圖汽車(chē)科技有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/10/10