本申請(qǐng)涉及一種車載生理數(shù)據(jù)檢測(cè)方法、裝置、存儲(chǔ)介質(zhì)、系統(tǒng)和車輛。

背景技術(shù)：

1、隨著智能技術(shù)的快速發(fā)展，智能座艙系統(tǒng)逐漸成為熱門研究領(lǐng)域。智能座艙系統(tǒng)通過整合車輛內(nèi)部的各種傳感器、攝像頭和人工智能算法，為駕駛員和乘客提供更加智能化、舒適和安全的駕乘體驗(yàn)。將非接觸式生理數(shù)據(jù)檢測(cè)方法應(yīng)用于智能座艙系統(tǒng)，不僅可使車輛座艙內(nèi)部的生理數(shù)據(jù)檢測(cè)變得更加方便，同時(shí)可以增加智能座艙系統(tǒng)的智能性。

2、諸如成像式光電容積描記技術(shù)(image?photoplethysmography，ippg)等應(yīng)用于車載場(chǎng)景的非接觸式生理數(shù)據(jù)檢測(cè)方法，通過攝像頭采集用戶的面部視頻并基于面部視頻分析得到用戶的生理數(shù)據(jù)，其對(duì)面部視頻的質(zhì)量和穩(wěn)定性均有較高要求，然而，在車輛行駛的環(huán)境下視頻錄制的穩(wěn)定性難以保證，若提取到的視頻段穩(wěn)定性不足會(huì)影響車載場(chǎng)景下用戶生理數(shù)據(jù)的檢測(cè)準(zhǔn)確性。

3、因此，亟待提出一種新的車載生理數(shù)據(jù)檢測(cè)技術(shù)，以提升車載場(chǎng)景下用戶生理數(shù)據(jù)的檢測(cè)準(zhǔn)確性。

技術(shù)實(shí)現(xiàn)思路

1、為了解決或至少部分地解決上述技術(shù)問題，本申請(qǐng)?zhí)峁┝艘环N車載生理數(shù)據(jù)檢測(cè)方法、裝置、存儲(chǔ)介質(zhì)、系統(tǒng)和車輛，能夠有效提升車載場(chǎng)景下用戶生理數(shù)據(jù)的檢測(cè)準(zhǔn)確性。

2、本申請(qǐng)的第一方面，提供了一種車載生理數(shù)據(jù)檢測(cè)方法，包括：

3、獲取車輛座艙內(nèi)目標(biāo)乘員的目標(biāo)視頻，目標(biāo)視頻包含目標(biāo)乘員的連續(xù)多幀面部圖像；

4、基于所述目標(biāo)乘員的目標(biāo)視頻生成至少一個(gè)圖像序列，每個(gè)圖像序列包含連續(xù)多幀面部感興趣區(qū)域圖像；

5、檢測(cè)所述至少一個(gè)圖像序列的穩(wěn)定度，選取穩(wěn)定度滿足預(yù)定條件的部分面部感興趣圖像作為有效幀序列；

6、基于所述有效幀序列提取目標(biāo)乘員的生理數(shù)據(jù)。

7、一些實(shí)施方式中，所述獲取車輛座艙內(nèi)目標(biāo)乘員的目標(biāo)視頻之前，還包括：獲取安裝在車輛座艙內(nèi)的攝像組實(shí)時(shí)采集的第一圖像，所述攝像組用于采集所述目標(biāo)乘員的目標(biāo)視頻；檢測(cè)所述第一圖像是否符合預(yù)定規(guī)則；若所述第一圖像不符合所述預(yù)定規(guī)則，發(fā)出消息以使得所述目標(biāo)乘員和/或車輛相關(guān)設(shè)備作出調(diào)整從而使得所述第一圖像符合所述預(yù)定規(guī)則。

8、一些實(shí)施方式中，所述檢測(cè)所述至少一個(gè)圖像序列的穩(wěn)定度，選取穩(wěn)定度滿足預(yù)定條件的部分面部感興趣圖像作為有效幀序列，包括：

9、針對(duì)每個(gè)圖像序列，將所述圖像序列劃分為若干預(yù)定長(zhǎng)度的子序列；

10、計(jì)算每個(gè)子序列中面部感興趣區(qū)域圖像的穩(wěn)定度；

11、選取穩(wěn)定度滿足預(yù)定條件的一個(gè)或多個(gè)子序列作為有效幀序列。

12、一些實(shí)施方式中，所述計(jì)算每個(gè)子序列中面部感興趣區(qū)域圖像的穩(wěn)定度，包括：

13、計(jì)算每個(gè)子序列中任意兩幀面部感興趣區(qū)域圖像的波動(dòng)值；

14、選取波動(dòng)值的最大值作為所述子序列的穩(wěn)定度。

15、一些實(shí)施方式中，所述選取穩(wěn)定度滿足預(yù)定條件的一個(gè)或多個(gè)子序列作為有效幀序列，包括：

16、檢測(cè)一個(gè)或多個(gè)子序列的穩(wěn)定度是否小于等于預(yù)設(shè)閾值；

17、若是，則選取子序列作為有效序列；

18、若否，則丟棄子序列。

19、一些實(shí)施方式中，所述波動(dòng)值包括光線亮度差值和/或面部位置移動(dòng)值。

20、一些實(shí)施方式中，同一圖像序列中，每個(gè)子序列包含預(yù)定長(zhǎng)度的連續(xù)幀面部感興趣圖像，相鄰子序列彼此重疊且重疊長(zhǎng)度為固定值或者相鄰子序列的首幀間隔幀數(shù)固定，所述子序列的預(yù)定長(zhǎng)度至少大于一個(gè)生理數(shù)據(jù)采樣周期。

21、一些實(shí)施方式中，基于所述有效幀序列提取目標(biāo)乘員的生理數(shù)據(jù)，包括：基于所述有效幀序列提取ippg信號(hào)以獲得目標(biāo)乘員的生理數(shù)據(jù)。

22、本申請(qǐng)的第二方面，提供了一種車載生理數(shù)據(jù)檢測(cè)裝置，包括：

23、獲取單元，用于獲取車輛座艙內(nèi)目標(biāo)乘員的目標(biāo)視頻，目標(biāo)視頻包含目標(biāo)乘員的連續(xù)多幀面部圖像；

24、區(qū)域提取單元，用于基于所述目標(biāo)乘員的目標(biāo)視頻生成至少一個(gè)圖像序列，每個(gè)圖像序列包含連續(xù)多幀面部感興趣區(qū)域圖像；

25、圖像檢測(cè)單元，用于檢測(cè)所述至少一個(gè)圖像序列的穩(wěn)定程度，以從至少一個(gè)圖像序列中選取穩(wěn)定程度滿足需求的部分面部感興趣圖像形成有效幀序列；

26、圖像分析單元，用于基于所述有效幀序列提取目標(biāo)乘員的生理數(shù)據(jù)。

27、本申請(qǐng)的第三方面，提供了一種計(jì)算設(shè)備，包括至少一個(gè)處理器和至少一個(gè)存儲(chǔ)器，存儲(chǔ)器存儲(chǔ)有程序指令，程序指令當(dāng)被至少一個(gè)處理器執(zhí)行時(shí)使得至少一個(gè)處理器執(zhí)行上述的車載生理數(shù)據(jù)檢測(cè)方法。

28、本申請(qǐng)的第四方面，提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有程序指令，其特征在于，程序指令當(dāng)被計(jì)算機(jī)執(zhí)行時(shí)使得計(jì)算機(jī)執(zhí)行上述的車載生理數(shù)據(jù)檢測(cè)方法。

29、本申請(qǐng)的第五方面，提供了一種車載生理數(shù)據(jù)檢測(cè)系統(tǒng)，包括計(jì)算設(shè)備、攝像組；

30、計(jì)算設(shè)備包括至少一個(gè)處理器和至少一個(gè)存儲(chǔ)器，存儲(chǔ)器存儲(chǔ)有程序指令，程序指令當(dāng)被至少一個(gè)處理器執(zhí)行時(shí)使得至少一個(gè)處理器執(zhí)行權(quán)利要求上述的車載生理數(shù)據(jù)檢測(cè)方法；

31、攝像組，包括安裝在車輛座艙內(nèi)的一個(gè)或多個(gè)攝像頭，用于采集目標(biāo)乘員的目標(biāo)視頻；

32、本申請(qǐng)的第六方面，提供了一種車輛，包括上述的車載生理數(shù)據(jù)檢測(cè)裝置、上述的計(jì)算設(shè)備或者上述的車載生理數(shù)據(jù)檢測(cè)系統(tǒng)。

33、相比于現(xiàn)有技術(shù)而言，本申請(qǐng)具有如下有益效果：

34、本申請(qǐng)實(shí)施例，通過從目標(biāo)視頻中提取包含面部感興趣區(qū)域圖像的多個(gè)圖像序列，檢測(cè)這些圖像序列中各幀感興趣區(qū)域圖像的光線變化情況和面部晃動(dòng)情況來選取多幀面部感興趣區(qū)域圖像形成有效幀序列，最后使用有效幀序列得到目標(biāo)乘員的生理數(shù)據(jù)，由此，能夠在目標(biāo)視頻中找到用戶面部晃動(dòng)幅度較小與光線變化穩(wěn)定的多幀感興趣區(qū)域圖像，并通過這些感興趣區(qū)域圖像來獲得目標(biāo)乘員的生理數(shù)據(jù)，從而在例如車輛行駛等車輛座艙內(nèi)光線變化頻繁且用戶面部容易晃動(dòng)的場(chǎng)景下，準(zhǔn)確高效地借由用戶視頻提取到用戶的生理數(shù)據(jù)，能夠有效提高車載場(chǎng)景下用戶生理數(shù)據(jù)的檢測(cè)準(zhǔn)確性和檢測(cè)效率。

技術(shù)特征：

1.一種車載生理數(shù)據(jù)檢測(cè)方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的車載生理數(shù)據(jù)檢測(cè)方法，其特征在于，所述獲取車輛座艙內(nèi)目標(biāo)乘員的目標(biāo)視頻之前，還包括：

3.根據(jù)權(quán)利要求1所述的車載生理數(shù)據(jù)檢測(cè)方法，其特征在于，所述檢測(cè)所述至少一個(gè)圖像序列的穩(wěn)定度，選取穩(wěn)定度滿足預(yù)定條件的部分面部感興趣圖像作為有效幀序列，包括：

4.根據(jù)權(quán)利要求3所述的車載生理數(shù)據(jù)檢測(cè)方法，其特征在于，所述計(jì)算每個(gè)子序列中面部感興趣區(qū)域圖像的穩(wěn)定度，包括：

5.根據(jù)權(quán)利要求4所述的車載生理數(shù)據(jù)檢測(cè)方法，其特征在于，所述選取穩(wěn)定度滿足預(yù)定條件的一個(gè)或多個(gè)子序列作為有效幀序列，包括：

6.根據(jù)權(quán)利要求5所述的車載生理數(shù)據(jù)檢測(cè)方法，其特征在于，所述波動(dòng)值包括光線亮度差值和/或面部位置移動(dòng)值。

7.根據(jù)權(quán)利要求3所述的車載生理數(shù)據(jù)檢測(cè)方法，其特征在于，同一圖像序列中，每個(gè)子序列包含預(yù)定長(zhǎng)度的連續(xù)幀面部感興趣圖像，相鄰子序列彼此重疊且重疊長(zhǎng)度為固定值或者相鄰子序列的首幀間隔幀數(shù)固定，所述子序列的預(yù)定長(zhǎng)度至少大于一個(gè)生理數(shù)據(jù)采樣周期。

8.根據(jù)權(quán)利要求1所述的車載生理數(shù)據(jù)檢測(cè)方法，其特征在于，基于所述有效幀序列提取目標(biāo)乘員的生理數(shù)據(jù)，包括：基于所述有效幀序列提取ippg信號(hào)以獲得目標(biāo)乘員的生理數(shù)據(jù)。

9.一種車載生理數(shù)據(jù)檢測(cè)裝置，其特征在于，包括：

10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有程序指令，其特征在于，程序指令當(dāng)被計(jì)算機(jī)執(zhí)行時(shí)使得計(jì)算機(jī)執(zhí)行權(quán)利要求1-8任一項(xiàng)的車載生理數(shù)據(jù)檢測(cè)方法。

11.一種車載生理數(shù)據(jù)檢測(cè)系統(tǒng)，其特征在于，包括計(jì)算設(shè)備、攝像組；

12.一種車輛，其特征在于，包括如權(quán)利要求9的車載生理數(shù)據(jù)檢測(cè)裝置、如權(quán)利要求11的車載生理數(shù)據(jù)檢測(cè)系統(tǒng)。

技術(shù)總結(jié)
本申請(qǐng)公開了一種車載生理數(shù)據(jù)檢測(cè)方法、裝置、存儲(chǔ)介質(zhì)、系統(tǒng)和車輛。本申請(qǐng)實(shí)施例的車載生理數(shù)據(jù)檢測(cè)方法，包括：獲取車輛座艙內(nèi)目標(biāo)乘員的目標(biāo)視頻，目標(biāo)視頻包含目標(biāo)乘員的連續(xù)多幀面部圖像；基于目標(biāo)乘員的目標(biāo)視頻生成至少一個(gè)圖像序列，每個(gè)圖像序列包含連續(xù)多幀面部感興趣區(qū)域圖像；檢測(cè)至少一個(gè)圖像序列的穩(wěn)定程度，以從至少一個(gè)圖像序列中選取穩(wěn)定程度滿足需求的部分面部感興趣圖像形成有效幀序列；基于有效幀序列提取目標(biāo)乘員的生理數(shù)據(jù)。本申請(qǐng)能夠有效提高車載生理數(shù)據(jù)的檢測(cè)準(zhǔn)確性和檢測(cè)效率。

技術(shù)研發(fā)人員：董林杰,謝剛,婁燁烽,鄧偉華
受保護(hù)的技術(shù)使用者：上海萬柔汽車電子有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2025/6/26