[發明專利]筆跡同步方法、裝置、系統、終端設備及存儲介質

有效

• 申請號: 202110263015.7
• 申請日: 2021-03-11
• 公開（公告）號: CN112684922B
• 公開（公告）日: 2021-07-23
• 發明（設計）人: 楊昊民
• 申請（專利權）人: 廣東小天才科技有限公司
• 主分類號: G06F3/0354
• 分類號: G06F3/0354;G06F3/038;G06F3/042;G06T11/20
• 代理公司: 廣州德科知識產權代理有限公司 44381
• 代理人: 楊中強;萬振雄

1.一種筆跡同步方法，其特征在于，應用于終端設備，所述終端設備包括不可見光攝像模組和可見光攝像模組；所述方法包括：

在數碼筆書寫時，通過所述不可見光攝像模組采集包括所述數碼筆投射在書寫面上的光斑的第一圖像，以及通過所述可見光攝像模組采集包括所述數碼筆和所述書寫面的第二圖像；所述數碼筆包括光發射器，所述光發射器用于發射不可見光，以在所述書寫面上形成光斑；所述數碼筆的筆尖設置有透光通孔，所述光發射器發射的不可見光通過所述透光通孔投射至所述書寫面；

從所述第一圖像中識別出一個或多個光斑，并確定所述第一圖像中的各個光斑的光斑形狀；

將光斑形狀與預設形狀相匹配的光斑確定為第一圖像的有效光斑，并根據所述第一圖像的有效光斑生成虛擬筆跡；所述預設形狀參考所述透光通孔的形狀設置；

識別所述書寫面在所述第二圖像中占據的圖像區域，以及在所述第二圖像中識別標識圖形，所述標識圖形為所述透光通孔的形狀；

根據所述標識圖形在所述第二圖像中的圖像位置確定所述數碼筆的筆尖在所述第二圖像中的圖像位置；

將所述數碼筆的筆尖在所述第二圖像中的圖像位置確定為所述數碼筆在所述第二圖像中的圖像位置，并根據所述數碼筆的圖像位置與所述書寫面的所述圖像區域確定所述書寫面與所述數碼筆的第一相對位置；

將所述第一相對位置轉換為虛擬筆跡與虛擬的書寫展示頁面的第二相對位置；

基于所述第二相對位置在所述書寫展示頁面上輸出所述虛擬筆跡。

2.根據權利要求1任一所述的方法，其特征在于，所述數碼筆還包括：壓力傳感器，所述壓力傳感器用于檢測所述數碼筆的筆尖受到的壓力；以及，所述光發射器，還用于在所述壓力傳感器檢測到的壓力超過壓力閾值時發射不可見光。

3.根據權利要求2所述的方法，其特征在于，所述數碼筆與所述終端設備之間建立通信連接；以及，所述通過所述不可見光攝像模組采集包括所述數碼筆投射在書寫面上的光斑的第一圖像，以及通過所述可見光攝像模組采集包括所述數碼筆和所述書寫面的第二圖像，包括：

在接收到所述數碼筆發送的書寫觸發信號時，通過所述不可見光攝像模組采集包括所述數碼筆投射在書寫面上的光斑的第一圖像，并通過所述可見光攝像模組采集包括所述數碼筆和所述書寫面的第二圖像，其中，所述書寫觸發信號是所述數碼筆在所述壓力傳感器檢測到的壓力超過所述壓力閾值時通過所述通信連接發送的可見光攝像。

4.一種筆跡同步系統，其特征在于，所述系統包括：終端設備和數碼筆；所述終端設備包括不可見光攝像模組和可見光攝像模組，所述數碼筆包括光發射器；

所述數碼筆，用于在書寫面上書寫時，通過所述光發射器發射不可見光，以在所述書寫面上形成光斑；所述數碼筆的筆尖設置有透光通孔，所述光發射器發射的不可見光通過所述透光通孔投射至所述書寫面；

所述終端設備，用于通過所述不可見光攝像模組采集包括所述數碼筆投射在書寫面上的光斑的第一圖像，以及通過所述可見光攝像模組采集包括所述數碼筆和所述書寫面的第二圖像；以及，

用于從所述第一圖像中識別出一個或多個光斑，并確定所述第一圖像中的各個光斑的光斑形狀；將光斑形狀與預設形狀相匹配的光斑確定為第一圖像的有效光斑，并根據所述第一圖像的有效光斑生成虛擬筆跡；所述預設形狀參考所述透光通孔的形狀設置；

所述終端設備，還用于識別所述書寫面在所述第二圖像中占據的圖像區域，在所述第二圖像中識別標識圖形，所述標識圖形為所述透光通孔的形狀；以及，根據所述標識圖形在所述第二圖像中的圖像位置確定所述數碼筆的筆尖在所述第二圖像中的圖像位置；以及，將所述數碼筆的筆尖在所述第二圖像中的圖像位置確定為所述數碼筆在所述第二圖像中的圖像位置，并根據所述數碼筆的圖像位置與所述書寫面的所述圖像區域確定所述書寫面與所述數碼筆的第一相對位置；將所述第一相對位置轉換為虛擬筆跡與虛擬的書寫展示頁面的第二相對位置；以及，基于所述第二相對位置在所述書寫展示頁面上輸出所述虛擬筆跡。

5.根據權利要求4所述的系統，其特征在于，所述數碼筆還包括：壓力傳感器，所述壓力傳感器用于檢測所述數碼筆的筆尖受到的壓力；以及，所述光發射器，還用于在所述壓力傳感器檢測到的壓力超過壓力閾值時發射不可見光。