[發明專利]一種對實體積木進行拍照實現編程的方法、裝置及設備

在審

• 申請號: 202011197806.6
• 申請日: 2020-10-30
• 公開（公告）號: CN112558956A
• 公開（公告）日: 2021-03-26
• 發明（設計）人: 李天馳;孫悅;馮君途
• 申請（專利權）人: 深圳點貓科技有限公司
• 主分類號: G06F8/34
• 分類號: G06F8/34;G06N3/08;G06Q50/20;G06T3/40;H04L29/08
• 代理公司: 廣東良馬律師事務所 44395
• 代理人: 張柯

1.一種對實體積木進行拍照實現編程的方法,其特征在于,所述方法包括：

采集包含實體積木串的積木串圖像，將積木串圖像上傳至云端，所述實體積木串的實體積木圖案與圖像化編程中積木庫中虛擬積木圖案一一對應；

通過云端將積木串圖像分解為若干個積木圖像；將若干個積木圖像分別通過深度學習模型進行識別，獲取所有積木圖像中對應的虛擬積木信息；

獲取云端返回的虛擬積木信息，在圖形化編程程序中調用對應的虛擬積木，對虛擬積木進行拼接后，完成編程。

2.根據權利要求1所述的對實體積木進行拍照實現編程的方法，其特征在于，所述采集包含實體積木串的積木串圖像，將積木串圖像上傳至云端，通過云端提取積木串圖像中的積木串信息，包括：

采集用戶拼接后的實體積木串的圖像，生成包含實體積木串的積木串圖像，將積木串圖像上傳至云端；

根據預設的識別規則，通過云端提取積木串圖像中的積木串信息。

3.根據權利要求2所述的對實體積木進行拍照實現編程的方法，其特征在于，所述通過云端將積木串圖像分解為若干個積木圖像；將若干個積木圖像分別通過深度學習模型進行識別，獲取所有積木圖像中對應的虛擬積木信息，包括：

獲取積木串圖像中的積木串，將圖像中的積木數量作為圖像特征值，根據圖像特征值及積木數量將所提取的積木串信息進行拆分，生成若干個積木圖像；

將若干個積木圖像輸入預先訓練好的深度學習模型，識別實體積木對應的虛擬積木的樣式信息；

獲取云端返回的封裝后所有實體積木對應的虛擬積木的樣式信息。

4.根據權利要求3所述的對實體積木進行拍照實現編程的方法，其特征在于，所述根據預設的識別規則，通過云端提取積木串圖像中的積木串信息，還包括：

獲取用戶在圖形化編程界面的積木點擊指令，根據積木點擊指令，提取積木串圖像中的積木串信息。

5.根據權利要求4所述的對實體積木進行拍照實現編程的方法，其特征在于，所述采集用戶拼接后的實體積木串的圖像，生成包含實體積木串的積木串圖像，包括：

采集用戶拼接后的實體積木串的圖像，獲取圖像中實體積木的樣式及實體積木間的關系，根據實體積木的樣式及實體積木間的關系，生成包含實體積木串的積木串圖像。

6.根據權利要求5所述的對實體積木進行拍照實現編程的方法，其特征在于，所述根據圖像特征值及積木數量將所提取的積木串信息進行拆分，生成若干個積木圖像，包括：

根據實體積木的數量、實體積木的樣式及實體積木間的關系對積木串信息進行拆分，生成若干個積木圖像。

7.根據權利要求6所述的對實體積木進行拍照實現編程的方法，其特征在于，所述獲取云端返回的封裝后所有實體積木對應的虛擬積木的樣式信息，包括：

獲取云端返回的封裝后所有實體積木對應的虛擬積木的編號數據、積木的數量值和積木間的關系。

8.一種對實體積木進行拍照實現編程的裝置，其特征在于，所述裝置包括：

圖像采集與上傳模塊，用于采集包含實體積木串的積木串圖像，將積木串圖像上傳至云端，所述實體積木串的實體積木圖案與圖像化編程中積木庫中虛擬積木圖案一一對應；

積木匹配模塊，用于通過云端將積木串圖像分解為若干個積木圖像；將若干個積木圖像分別通過深度學習模型進行識別，獲取所有積木圖像中對應的虛擬積木信息；

編程實現模塊，用于獲取云端返回的虛擬積木信息，在圖形化編程程序中調用對應的虛擬積木，對虛擬積木進行拼接后，完成編程。

9.一種對實體積木進行拍照實現編程的設備，其特征在于，所述設備包括至少一個處理器；以及，

與所述至少一個處理器通信連接的存儲器；其中，

所述存儲器存儲有可被所述至少一個處理器執行的指令，所述指令被所述至少一個處理器執行，以使所述至少一個處理器能夠執行權利要求1-7任一項所述的對實體積木進行拍照實現編程的方法。

10.一種非易失性計算機可讀存儲介質，其特征在于，所述非易失性計算機可讀存儲介質存儲有計算機可執行指令，該計算機可執行指令被一個或多個處理器執行時，可使得所述一個或多個處理器執行權利要求1-7任一項所述的對實體積木進行拍照實現編程的方法。