[發(fā)明專利]骨骼模型修正方法和裝置有效
| 申請?zhí)枺?/td> | 202210568530.0 | 申請日： | 2022-05-24 |
| 公開（公告）號： | CN114663432B | 公開（公告）日： | 2022-08-16 |
| 發(fā)明（設(shè)計）人： | 曾承 | 申請（專利權(quán)）人： | 武漢泰樂奇信息科技有限公司 |
| 主分類號： | G06T7/00 | 分類號： | G06T7/00;G06T7/73;G06T17/00;G06V10/762;G06V10/774;G06V10/82;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司： | 北京集智東方知識產(chǎn)權(quán)代理有限公司 11578 | 代理人： | 吳倩;龔建蓉 |
| 地址： | 430223 湖北省武漢市東湖新技術(shù)*** | 國省代碼： | 湖北;42 |
| 權(quán)利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關(guān)鍵詞： | 骨骼 模型 修正 方法 裝置 | ||
1.一種骨骼模型修正方法，其特征在于，包括：
采集多個臨床操作視頻，并對所述臨床操作視頻中的醫(yī)學(xué)專家的骨骼點進行標記，得到多個第一標記；
根據(jù)所述第一標記和所述臨床操作視頻構(gòu)建所述醫(yī)學(xué)專家的三維動作模型，按照預(yù)設(shè)的臨床步驟將所述三維動作模型按照時間順序進行步驟分解，得到多個三維動作子模型；
將所述三維動作子模型輸入至初始模型中，并在所述初始模型中獲取所述三維動作子模型中各個骨骼點至目標對象的距離；
將在預(yù)設(shè)距離內(nèi)的骨骼點記為有效骨骼點，提取所述三維動作子模型中對應(yīng)的有效骨骼點的局部子模型，獲取所述局部子模型每幀中所述有效骨骼點的第一位置信息，以及所述目標對象的第二位置信息；
基于所述第一位置信息計算每個所述有效骨骼點至其余的有效骨骼點的第一向量，以及基于所述第二位置信息計算每個所述有效骨骼點至所述目標對象的第二向量；
基于所述第二向量的模設(shè)定各個所述第一向量的空間注意力分值，提取所述局部子模型每幀中同一第一向量，構(gòu)成第一向量集合；其中，所述第一向量集合中任意兩個第一向量所對應(yīng)的兩個有效骨骼點相同；
按照時間順序?qū)⑺龅谝幌蛄考现械牡谝幌蛄窟M行排列；
計算相鄰的兩個第一向量的位置差；
根據(jù)softmax函數(shù)設(shè)置第n+1幀局部子模型中第m個第一向量對應(yīng)的位置注意力分值，以及將第一幀局部子模型中的第一向量對應(yīng)的位置注意力分值設(shè)置為常數(shù)；
根據(jù)所述每個第一向量以及對應(yīng)的空間注意力分值和位置注意力分值進行加權(quán)求和，得到每個局部子模型的加權(quán)和；
將所述局部子模型的各幀局部子模型的加權(quán)和輸入至對應(yīng)的判別網(wǎng)絡(luò)輸入層中，并將所述臨床操作對應(yīng)的預(yù)設(shè)分值作為所述判別網(wǎng)絡(luò)的輸出進行訓(xùn)練，訓(xùn)練完成后，得到骨骼修正模型；
獲取實習(xí)醫(yī)生的臨床操作視頻，并輸入所述骨骼修正模型中得到所述實習(xí)醫(yī)生的技能分值，基于所述技能分值對所述實習(xí)醫(yī)生的動作進行修正。
2.如權(quán)利要求1所述的骨骼模型修正方法，其特征在于，所述按照預(yù)設(shè)的臨床步驟將所述三維動作模型按照時間順序進行步驟分解，得到多個三維動作子模型的步驟，包括：
獲取每幀所述三維動作模型所述骨骼點的第三位置信息；
根據(jù)所述第三位置信息獲取每個骨骼點在每一幀所述三維動作模型相對于前一幀移動的距離，并求和得到所述醫(yī)學(xué)專家的相鄰幀位移總量；
判斷是否具有連續(xù)所述相鄰幀位移總量均大于位移總量閾值；
若是，則將該連續(xù)所述相鄰幀位移總量均大于位移總量閾值的幀作為截斷點；
按照所述截斷點依次對所述三維動作模型進行分解，得到多個三維動作子模型。
3.如權(quán)利要求1所述的骨骼模型修正方法，其特征在于，所述提取所述三維動作子模型中對應(yīng)的有效骨骼點的局部子模型的步驟，包括：
獲取所述三維動作子模型每幀中所述有效骨骼點所在的第一位置信息以及所述目標對象的所述第二位置信息；
根據(jù)所述第一位置信息和所述第二位置信息確定目標空間，所述目標空間中包含有所有的第一位置信息所對應(yīng)的位置以及第二位置信息所對應(yīng)的位置；
從所述目標空間中獲取所述局部子模型。
4.如權(quán)利要求1所述的骨骼模型修正方法，其特征在于，所述根據(jù)所述第一標記和所述臨床操作視頻構(gòu)建所述醫(yī)學(xué)專家的三維動作模型的步驟，包括：
從各個所述臨床操作視頻中獲取含有各個骨骼點的二維圖片；
根據(jù)K-means算法在所述二維圖片中設(shè)定k個聚集中心；
根據(jù)所述k個聚集中心確定最小中心矩形；其中，所述最小中心矩形中含有所述k個聚集中心；
計算各個最小中心矩形的面積，并將面積最小的最小中心矩形所對應(yīng)的臨床操作視頻記為主視頻，并將其余的臨床操作視頻記為輔視頻；
基于所述主視頻建立空間坐標系，并得到各個所述骨骼點的兩個坐標軸上的坐標點；
根據(jù)所述輔視頻得到所述骨骼點的剩余一個坐標軸上的坐標點，從而得到各個所述骨骼點的完整坐標值；
基于各個所述完整坐標值構(gòu)建所述醫(yī)學(xué)專家的三維動作模型。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息，商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于武漢泰樂奇信息科技有限公司，未經(jīng)武漢泰樂奇信息科技有限公司許可，擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作，請聯(lián)系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202210568530.0/1.html，轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
