[發明專利]基于Android系統的TalkingAvatar手游軟件的構建方法

在審

• 申請號: 201710030650.4
• 申請日: 2017-01-17
• 公開（公告）號: CN106823374A
• 公開（公告）日: 2017-06-13
• 發明（設計）人: 葉楓;吳勝艷;胡程;常寧
• 申請（專利權）人: 河海大學
• 主分類號: A63F13/60
• 分類號: A63F13/60;A63F13/655;G06K9/00
• 代理公司: 南京蘇高專利商標事務所(普通合伙)32204
• 代理人: 李玉平

技術領域

本發明涉及一種人臉識別、玩偶合成、語音錄制及調用、手機屏幕的錄制及分享等技術領域。

背景技術

隨著移動技術的迅速發展和使用Android操作系統的手機用戶的普及，基于移動端的各類手游軟件愈發受到了青睞。一個典型的例子是由Outfit7公司推出的手機寵物類應用游戲“會說話的湯姆貓”，該軟件是一只可愛的寵物貓玩偶，它可以在用戶觸摸玩偶不同的身體部位時做出各種反應，并且可以用滑稽的聲音完整地復述用戶所說的內容。錄制湯姆貓復述用戶說話的視頻，還可以上傳至YouTube、Facebook、Sina微博或者是朋友圈，并通過電子郵件發送給親友，因此受到各個年齡層次的用戶的極大喜愛。但是，由于隨著用戶群體的變化，此類簡單的Talking Avater手游軟件已不再能滿足不同用戶群體的需求，比如：用戶希望看見屏幕上和他們互動的不是寵物貓，是用戶自己的Talking Avatar形象，或者說是其他的新奇的形象，這樣才能更好地適用不同用戶的需求；用戶也希望把很多的簡單實用的軟件功能也加入進去，這樣可以讓一個軟件具備多樣的功能，也可以減少用戶手機內存的占用。

發明內容

發明目的：為了彌補現如今此類手機游戲功能覆蓋不夠全面的不足，本發明提供一種基于Android系統的Talking Avatar手游軟件的構建方法。本發明除了具有上述湯姆貓也具有的功能以外，用戶還可以通過點擊按鈕調用前置攝像頭拍照或導入自己手機中的照片，然后系統通過面目識別技術生成一個與用戶相似的玩偶形象，該玩偶形象可完成用戶指定的一系列動作，生成Avatar。之后通過點擊界面的圖標按鈕在所給的服裝造型中挑選出自己喜歡的造型即可完成對Avatar的換裝。當用戶對著Avatar說出一段話時，它會復述出來這段話，并根據不一樣的說話內容做出相應的肢體動作以及豐富的面部表情等。當用戶完成對Avatar的錄音之后，可以將其復述及其動作進行屏幕錄制，點擊保存即可保存該段視頻文件到本地，用戶可在保存對應的保存路徑中找到該視頻文件，并通過點擊分享按鈕將其進行分享至朋友圈、微博等社交平臺。

技術方案：一種基于Android系統的Talking Avatar手游軟件的構建方法，其功能特征主要包括如下方面：

功能1：用戶導入一張照片，通過人臉識別，得到用戶臉部相應特征點的值，然后生成一個和用戶相似的玩偶形象，即Talking Avatar；人臉偵測寬松化了對人臉的要求，可多角度對人臉進行偵測，根據對稱映射，補全特征點信息，可檢測的范圍是以正前方為原點正負45度。獲取到特征點信息后，對特征點信息進行人臉比列縮放處理，再應用歐式距離相似度算法，分別計算出與人臉庫中的各組像的相似度值，對其進行統一比較，冒泡法抉擇最大相似度人臉，即最像臉。獲取到相關信息記錄，發送到Avatar庫，與Avatar庫對接，然后選擇對應的Avatar人臉，合成玩偶人臉；

功能2：該軟件可以根據用戶喜好，對Talking Avatar進行換裝和背景更換；Talking Avatar手機軟件提供多樣的服飾和背景，供用戶選擇；

功能3：Talking Avatar會把用戶說的話錄下來然后進行復述；實現了語音—文本—語音的語音轉換算法；

功能4：Talking Avatar會根據用戶說的話，進行識別，得到相應的關鍵詞，如“你、我、他等”當語音中發現這些關鍵詞，玩偶會做出相應的肢體表情動作；KMP關鍵詞提取算法從文本中獲得關鍵詞，依據關鍵詞的與動畫之間的綁定關系。并動態觸發動畫，字符庫之間與動畫庫之間實現動態綁定，支持同義觸發；

功能5：用戶可以根據自己的需求，從某個時候選擇開始錄制視頻，并且在任意的時候停止錄制，用戶還可以將錄制的視頻分享到微博、朋友圈、QQ空間等社交平臺上。調用了Mob移動分享平臺對視頻進行錄制和合成，之后存儲在用戶賬戶中。上傳視頻之后可以分享到各社交平臺，也可以查看視頻文件。