[發明專利]平面確定方法及增強現實顯示信息的顯示方法、相應裝置

在審

• 申請號: 201710853701.3
• 申請日: 2017-09-15
• 公開（公告）號: CN108629800A
• 公開（公告）日: 2018-10-09
• 發明（設計）人: 羅振波;王樹;朱翔宇;姜映映
• 申請（專利權）人: 北京三星通信技術研究有限公司;三星電子株式會社
• 主分類號: G06T7/50
• 分類號: G06T7/50;G06T7/11
• 代理公司: 北京市立方律師事務所 11330
• 代理人: 張筱寧

1.一種平面確定的方法，其特征在于，包括：

對多媒體信息進行區域分割及深度估計；

根據區域分割結果以及深度估計結果，確定所述多媒體信息的三維平面信息。

2.根據權利要求1所述的平面確定的方法，其特征在于，所述區域分割結果包含二維平面信息以及二維平面對應的語義信息。

3.根據權利要求2所述的平面確定的方法，其特征在于，所述對多媒體信息進行區域分割，具體包括：

通過同一深度學習網絡，對多媒體信息進行區域分割，得到二維平面信息以及二維平面對應的語義信息。

4.根據權利要求1-3中任一項所述的平面確定的方法，其特征在于，所述對多媒體信息進行區域分割及深度估計，還包括：

根據區域分割結果，對深度估計結果進行校正；和/或

根據深度估計結果，對區域分割結果進行校正。

5.根據權利要求1-4中任一項所述的平面確定的方法，其特征在于，還包括：

根據確定出的三維平面信息對應的語義信息和空間關系信息，對確定出的三維平面信息進行調整。

6.根據權利要求5所述的平面確定的方法，其特征在于，所述對確定出的三維平面信息進行調整，具體包括：

根據確定出的三維平面信息對應的語義信息和空間關系信息，確定三維平面間的關聯關系，通過確定出的所述關聯關系，對確定出的三維平面信息進行調整。

7.根據權利要求1-6中任一項所述的平面確定的方法，其特征在于，對多媒體信息進行區域分割及深度估計之前，還包括：

確定多媒體信息的紋理信息；根據所述紋理信息，確定紋理缺失區域；

對多媒體信息進行區域分割及深度估計，包括：

針對確定出的所述紋理缺失區域，進行區域分割及深度估計。

8.一種增強現實顯示信息的顯示方法，其特征在于，包括：

確定多媒體信息對應的三維平面信息；

根據所述多媒體信息對應的三維平面信息，顯示增強現實顯示信息。

9.根據權利要求8所述的增強現實信息的顯示方法，其特征在于，所述根據所述多媒體信息對應的三維平面信息，顯示增強現實顯示信息的步驟，包括：

獲取所述三維平面信息對應的屬性信息，和/或虛擬顯示信息對應的屬性信息；

根據獲取的三維平面信息對應的屬性信息和/或虛擬顯示信息對應的屬性信息，顯示增強現實顯示信息。

10.根據權利要求9所述的增強現實顯示信息的顯示方法，其特征在于，所述三維平面對應的屬性信息包括以下至少一項：

所述三維平面對應的語義信息、所述語義信息對應的關聯屬性信息、所述三維平面的物理屬性信息。

11.根據權利要求10所述的增強現實顯示信息的顯示方法，其特征在于，所述獲取三維平面信息對應的語義信息的步驟，包括：

將所述多媒體信息的二維平面信息對應的語義信息，作為對應的三維平面信息的語義信息；

或者，根據所述多媒體信息的二維平面信息對應的語義信息以及所述多媒體信息的深度估計結果，確定三維平面信息的語義信息；

或者，對所述三維平面信息進行語義分析，得到所述三維平面對應的語義信息。

12.根據權利要求9-11中任一項所述的增強現實顯示信息的顯示方法，其特征在于，根據獲取的三維平面信息對應的屬性信息和/或虛擬顯示信息對應的屬性信息，顯示增強現實顯示信息，包括：

根據獲取的三維平面信息對應的屬性信息和/或虛擬顯示信息對應的屬性信息，確定虛擬顯示信息與三維平面間的位置關系，和/或虛擬顯示信息間的位置關系；

根據確定出的位置關系，顯示增強現實顯示信息。