[發明專利]一種AR虛擬說明書的滑動展示方法

有效

• 申請號: 202010431739.3
• 申請日: 2020-05-20
• 公開（公告）號: CN111582418B
• 公開（公告）日: 2022-03-08
• 發明（設計）人: 郝杰
• 申請（專利權）人: 郝杰
• 主分類號: G06K17/00
• 分類號: G06K17/00;G06V20/20;G06V10/764;G06V10/774;G06K9/62;G06F16/538;G06F16/583;G06T19/00;G06T19/20;G06F3/04845;G06F3/0485
• 代理公司: 太原高欣科創專利代理事務所(普通合伙) 14109
• 代理人: 崔浩;冷錦超

1.一種AR虛擬說明書的滑動展示方法，其特征在于：包括如下步驟：

步驟一：在服務器端，商家上傳一張AR說明圖片作為產品的說明書，用以展示說明；

步驟二：在服務器端，商家將產品周邊劃分為若干視角區域，在每個視角區域內采集一張或多張產品照片并上傳；

步驟三：在服務器端，商家根據說明需求，在AR說明圖片內定義一個邊界框，同時根據步驟二劃分的視角區域指定一個對應的產品視角區域，使該定義的邊界框與該產品視角區域建立映射關系；

步驟四：在服務器端，由步驟三建立多個映射關系，商家在每個映射關系中的產品視角區域內為產品拍多張照片，照片將作為該產品視角區域類別的圖片樣本并上傳；

步驟五：在服務器端，由步驟四為各個產品視角區域收集圖片樣本構成訓練數據集，所述訓練數據集中的圖片樣本根據所屬的產品視角區域進行分組，用于訓練新的目標分類模型，所述目標分類模型將用于對圖片中的產品視角區域進行分類；

步驟六：在移動終端，使用移動終端攝像頭采集到的產品識別碼，從服務器端下載該產品對應的目標分類模型和一張AR說明圖片，此時移動終端的展示窗口顯示AR說明圖片的默認位置；

步驟七：在移動終端，使用移動終端攝像頭采集產品的視頻圖像，并通過目標分類模型對視頻圖像中出現的產品視角區域進行實時分類；

步驟八：在移動終端，根據下載目標分類模型中的映射關系，將AR說明圖片上與實時分類結果對應的邊界框部分滑動到展示窗口，同時對AR說明圖片進行縮放操作使邊界框與展示窗口大小相匹配；

步驟九：在移動終端，移動或轉動產品，若目標分類模型的實時分類結果未發生變化，即視頻流中的產品視角區域未發生變化，則移動終端對實時提取的部分特征描述符的移動軌跡數據進行數據處理，數據處理結果用于控制AR說明圖片在同一視角區域內做同步平面移動，無需縮放操作，將AR說明圖片相應位置滑動到展示窗口，展示給用戶；

若目標分類模型的實時分類結果發生變化，即視頻流中的產品視角區域發生改變，則跳轉至步驟八。

2.根據權利要求1所述的一種AR虛擬說明書的滑動展示方法，其特征在于：所述步驟二中采集的產品照片具體為產品局部照片，或為產品整體照片。

3.根據權利要求1所述的一種AR虛擬說明書的滑動展示方法，其特征在于：所述步驟二中若干視角區域具體為將產品所有視角劃分為若干組，每一組代表一個產品視角區域。

4.根據權利要求1所述的一種AR虛擬說明書的滑動展示方法，其特征在于：所述步驟三中定義的邊界框具體為在AR說明圖片的大小范圍內定義一個長寬任意的矩形框。

5.根據權利要求1所述的一種AR虛擬說明書的滑動展示方法，其特征在于：所述步驟五中的目標分類模型為機器學習模型中分類模型的一種，具體為支持向量機圖像分類模型或卷積神經網絡圖像分類模型。

6.根據權利要求1所述的一種AR虛擬說明書的滑動展示方法，其特征在于：所述步驟五中的產品識別碼具體為產品上的條形碼或者二維碼。

7.根據權利要求1所述的一種AR虛擬說明書的滑動展示方法，其特征在于：所述步驟五中AR說明圖片的默認位置具體為與包含產品識別碼的產品視角區域相映射的一個邊界框位置，或者為位于AR說明圖片中心的一個邊界框位置。

8.根據權利要求1所述的一種AR虛擬說明書的滑動展示方法，其特征在于：所述移動終端具體為智能手機、產品展示裝置或AR眼鏡。