[發明專利]用于遠程協助的方法、裝置、系統及電子設備

有效

• 申請號: 201710770766.1
• 申請日: 2017-08-31
• 公開（公告）號: CN107491174B
• 公開（公告）日: 2021-12-24
• 發明（設計）人: 周北川
• 申請（專利權）人: 中科云創（北京）科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/14
• 代理公司: 北京律智知識產權代理有限公司 11438
• 代理人: 闞梓瑄;王衛忠

本申請公開一種用于遠程協助的方法、裝置、系統及電子設備。涉及計算機信息處理領域，該方法包括：通過攝像裝置獲取當前圖像；獲取標記信息，所述標記信息包括標記圖像信息與標記位置信息；根據所述標記信息對所述當前圖像進行圖像處理，獲取識別數據；以及根據所述識別數據，將所述標記信息在顯示屏幕的對應位置進行展示。本申請公開的用于遠程協助的方法、裝置、系統及電子設備，能夠提高遠程協助的準確度與工作效率。

技術領域

本發明涉及計算機信息處理，具體而言，涉及一種用于遠程協助的方法、裝置、系統及電子設備。

背景技術

中國作為一個制造大國，在各行各業中使用了大量機械設備，并通常高強度地持續運轉，不可避免地會出現各種故障，然而專業維修技術人員缺乏，而且現場維修又必然帶來時間和差旅費用上的大大增加，單靠語音和現場的固定攝像頭溝通效率非常低下，雖然也出現過用手機拍攝照片和視頻傳輸到后臺，或者利用頭戴式攝像頭傳輸視頻的方式，但由于操作麻煩，難以釋放雙手，拍攝方位難以校準，溝通不夠實時等問題，多年來一直沒有很好的手段解決遠程維修的協助溝通問題。在遠程醫療、遠程教育等領域也存在相類似的指導溝通問題亟待解決。

利用視頻會議系統解決遠程聲像多人互動的問題已經有多年歷史，但受限于網絡條件和硬件限制，一直很少應用在設備維修遠程指導領域。隨著智能硬件技術和無線網絡技術(比如：3G/4G通信網絡)的發展，目前已經具備相應的技術條件。未來幾年必將引來本應用的爆發式增長。

現有技術方案通常利用AR眼鏡作為現場采集設備，結合傳統的遠程視頻會議系統實現實時交互式遠程維修指導。除了語音通訊外，現場和遠端都能看到對方的視頻畫面，或者現場和遠端都看到現場的畫面，但現場視頻是傳到網絡服務器再傳回現場的方式。還能通過白板將遠端的筆跡或共享的數字材料傳回到現場端的顯示單元上。

但該技術在運用過程中存在以下問題：

1.現場和遠端看到的是對方的實時畫面，而實際現場并不需要看到遠端的攝像頭所對應的畫面，這就浪費了一路視頻的網絡流量，增加了現場穿戴式硬件的圖像解析性能損耗，也使得現場人員并不了解自己的攝像頭是否對準了希望拍攝的物體。

2.遠端需要對現場進行指導時，現有的技術只能通過語音指示，偶有通過屏幕截取的方式，遠端截取現場的瞬時畫面，再在瞬時的靜態畫面上繪圖后通過共享或白板的方式傳回現場，異步指導現場進行操作，不具有實時性，操作步驟繁瑣。難以在現場視頻基礎上或直接在現場環境中用增強現實疊加的方式解決實時溝通的問題。

3.無法將遠程傳輸的數字材料直接在現場端設備上打開查看。比如：圖片、視頻、3D模型等。遠端無法完全控制現場顯示的內容，導致現場人員在切換顯示內容時需要頻繁對穿戴設備進行操作，而穿戴設備通常不便于帶著手套或手上有油污時進行操作。即使可以語音控制，但由于現場維修環境通常比較嘈雜，語音控制會出現困難。

因此，需要一種新的用于遠程協助的方法、裝置、系統及電子設備。

在所述背景技術部分公開的上述信息僅用于加強對本發明的背景的理解，因此它可以包括不構成對本領域普通技術人員已知的現有技術的信息。

發明內容

有鑒于此，本發明提供一種用于遠程協助的方法、裝置、系統及電子設備，能夠提高遠程協助的準確度與工作效率。

本發明的其他特性和優點將通過下面的詳細描述變得顯然，或部分地通過本發明的實踐而習得。

根據本發明的一方面，提出一種用于遠程協助的方法，該方法包括：通過攝像裝置獲取當前圖像；獲取標記信息，標記信息包括標記圖像信息與標記位置信息；根據標記信息對當前圖像進行圖像處理，獲取識別數據；以及根據識別數據，將標記信息在顯示屏幕的對應位置進行展示。

在本公開的一種示例性實施例中，顯示屏幕包括：可穿戴式顯示設備的顯示屏幕。