[發明專利]基于熱成像的呼吸率檢測方法、裝置及電子設備

在審

• 申請號: 202110877891.9
• 申請日: 2021-07-30
• 公開（公告）號: CN113576452A
• 公開（公告）日: 2021-11-02
• 發明（設計）人: 覃德智
• 申請（專利權）人: 深圳市商湯科技有限公司
• 主分類號: A61B5/08
• 分類號: A61B5/08;A61B5/01;A61B5/00;G06N3/08;G06K9/00;G06K9/62;G06T7/00
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 熊永強;董文俊

1.一種基于熱成像的呼吸率檢測方法，其特征在于，所述方法包括：

獲取至少兩個熱圖像，所述熱圖像包括基于目標對象的溫度信息渲染出的所述目標對象的輪廓；

基于神經網絡提取各所述熱圖像中的目標區域；

提取各所述目標區域對應的溫度信息；

所述溫度信息跟隨所述目標對象的呼吸產生周期性變化，根據提取到的所述溫度信息，確定所述目標對象的呼吸率。

2.根據權利要求1所述的方法，其特征在于，所述神經網絡基于下述方法得到：

獲取樣本熱圖像和所述樣本熱圖像對應的標簽；所述樣本熱圖像包括基于樣本目標對象的溫度信息渲染出的所述樣本目標對象的輪廓，所述標簽表征所述樣本目標對象的目標區域；所述目標區域為所述樣本目標對象的口鼻區域或口罩區域；

對所述樣本熱圖像進行特征提取，得到樣本特征信息；

根據所述樣本特征信息預測目標區域，得到目標區域預測結果；

根據所述目標區域預測結果和所述標簽，訓練所述神經網絡。

3.根據權利要求2所述的方法，其特征在于，所述對所述樣本熱圖像進行特征提取，得到樣本特征信息，包括：

對所述樣本熱圖像進行初始特征提取，得到第一特征圖；

對所述第一特征圖進行復合特征提取，得到第一特征信息，所述復合特征提取包括通道特征提?。?/p>

基于所述第一特征信息中的顯著特征，對所述第一特征圖進行過濾；

提取過濾結果中的第二特征信息；

融合所述第一特征信息和所述第二特征信息，得到所述樣本特征信息。

4.根據權利要求1所述的方法，其特征在于，所述神經網絡包括第一神經網絡和第二神經網絡；所述基于神經網絡提取各所述熱圖像中的目標區域，包括：

基于所述第一神經網絡提取各所述熱圖像中的人臉目標；

基于所述第二神經網絡提取所述人臉目標中的目標區域，所述目標區域為所述人臉目標中的口罩區域。

5.根據權利要求1所述的方法，其特征在于，所述基于神經網絡提取各所述熱圖像中的目標區域，包括：

基于所述神經網絡提取各所述熱圖像中的關鍵區域，所述關鍵區域為口罩區域或口鼻區域；

確定呼吸率檢測場景；

根據所述呼吸率檢測場景，確定關鍵區域與目標區域的目標映射關系；

根據所述目標映射關系和所述關鍵區域，確定所述目標區域。

6.根據權利要求5所述的方法，其特征在于，所述確定呼吸率檢測場景，包括：

獲取場景映射信息，所述場景映射信息表征場景特征信息與場景類別的對應關系；

對至少一個所述熱圖像進行場景特征提取，得到目標場景特征信息；

根據所述目標場景特征信息和所述場景映射信息，得到所述目標場景特征信息對應的目標場景類別，所述目標場景類別指向所述呼吸率檢測場景。

7.根據權利要求6所述的方法，其特征在于，所述根據所述呼吸率檢測場景，確定關鍵區域與目標區域的目標映射關系，包括：

獲取映射關系管理信息，所述映射關系管理信息表征映射關系與場景類別的對應關系；

根據所述目標場景類別和所述映射關系管理信息，得到所述目標映射關系。

8.根據權利要求6或7所述的方法，其特征在于，所述對至少一個所述熱圖像進行場景特征提取，得到目標場景特征信息，包括：

對所述熱圖像進行多尺度特征提取，得到多個層級的特征提取結果；

按照層級遞增順序，對所述特征提取結果進行融合，得到多個層級的特征融合結果；

按照層級遞減順序，對所述特征融合結果進行融合，得到所述目標場景特征信息。

9.根據權利要求1至8中任意一項所述的方法，其特征在于，所述提取各所述目標區域對應的溫度信息，包括：

對于每一目標區域，確定所述目標區域中相關像素點對應的溫度信息；

根據各所述相關像素點對應的溫度信息，計算所述目標區域對應的溫度信息。