[發明專利]一種對實體積木進行拍照實現編程的方法、裝置及設備

在審

• 申請號: 202011197806.6
• 申請日: 2020-10-30
• 公開（公告）號: CN112558956A
• 公開（公告）日: 2021-03-26
• 發明（設計）人: 李天馳;孫悅;馮君途
• 申請（專利權）人: 深圳點貓科技有限公司
• 主分類號: G06F8/34
• 分類號: G06F8/34;G06N3/08;G06Q50/20;G06T3/40;H04L29/08
• 代理公司: 廣東良馬律師事務所 44395
• 代理人: 張柯

本發明公開了一種對實體積木進行拍照實現編程的方法、裝置及設備，該方法包括：采集包含實體積木串的積木串圖像，將積木串圖像上傳至云端，所述實體積木串的實體積木圖案與圖像化編程中積木庫中虛擬積木圖案一一對應；通過云端將積木串圖像分解為若干個積木圖像；將若干個積木圖像分別通過深度學習模型進行識別，獲取所有積木圖像中對應的虛擬積木信息；獲取云端返回的虛擬積木信息，在圖形化編程程序中調用對應的虛擬積木，對虛擬積木進行拼接后，完成編程。本發明實施例實現在公立學校或者教育機構的編程教學場景中，少兒用戶可通過實體積木學習圖形化編程，可以快速運行程序查看結果，滿足少兒用戶的編程體驗。

技術領域

本發明涉及互聯網技術領域，尤其涉及一種對實體積木進行拍照實現編程的方法、裝置及設備。

背景技術

隨著社會的發展和進步，以及計算機科學的飛速發展，編程成為了現代人一項越來越重要的基本能力，而不僅僅是IT行業人員的專職工作。任何年齡、任何基礎的人員都有越來越強的學習和體驗程序編寫的需求，圖形化編程工具隨著時代的發展應運而生。使用圖形化編程工具，用戶僅僅通過拖拽編程組件，就能獨立完成具有復雜邏輯的程序編寫。

但是在現在的圖形化編程工具中，編程只能通過電子設備在屏幕上完成，學習的方式比較單一。尤其是在一些電子設備缺乏的教學場景中，老師為了完成編程的教學，基于圖形化編程的虛擬積木制作出了實體積木，但制作出來的實體積木難以再次轉化為程序，不利于滿足用戶完整的編程體驗。

因此，現有技術還有待于改進和發展。

發明內容

鑒于上述現有技術的不足，本發明的目的在于提供一種對實體積木進行拍照實現編程的方法、裝置及設備，旨在解決現有技術中圖形化編程的方式較為單一，過于依賴電子設備，不利于滿足用戶多元化的編程體驗的技術問題。

本發明的技術方案如下：

一種對實體積木進行拍照實現編程的方法，所述方法包括：

采集包含實體積木串的積木串圖像，將積木串圖像上傳至云端，所述實體積木串的實體積木圖案與圖像化編程中積木庫中虛擬積木圖案一一對應；

通過云端將積木串圖像分解為若干個積木圖像；將若干個積木圖像分別通過深度學習模型進行識別，獲取所有積木圖像中對應的虛擬積木信息；

獲取云端返回的虛擬積木信息，在圖形化編程程序中調用對應的虛擬積木，對虛擬積木進行拼接后，完成編程。

進一步地，所述采集包含實體積木串的積木串圖像，將積木串圖像上傳至云端，通過云端提取積木串圖像中的積木串信息，包括：

采集用戶拼接后的實體積木串的圖像，生成包含實體積木串的積木串圖像，將積木串圖像上傳至云端；

根據預設的識別規則，通過云端提取積木串圖像中的積木串信息。

進一步優選地，所述通過云端將積木串圖像分解為若干個積木圖像；將若干個積木圖像分別通過深度學習模型進行識別，獲取所有積木圖像中對應的虛擬積木信息，包括：

獲取積木串圖像中的積木串，將圖像中的積木數量作為圖像特征值，根據圖像特征值及積木數量將所提取的積木串信息進行拆分，生成若干個積木圖像；

將若干個積木圖像輸入預先訓練好的深度學習模型，識別實體積木對應的虛擬積木的樣式信息；

獲取云端返回的封裝后所有實體積木對應的虛擬積木的樣式信息。

進一步優選地，所述根據預設的識別規則，通過云端提取積木串圖像中的積木串信息，還包括：

獲取用戶在圖形化編程界面的積木點擊指令，根據積木點擊指令，提取積木串圖像中的積木串信息。