[發(fā)明專利]符號生成系統(tǒng)的訓(xùn)練方法、裝置、電子設(shè)備和存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 202310103748.3
• 申請日: 2023-02-13
• 公開（公告）號: CN115984652B
• 公開（公告）日: 2023-07-18
• 發(fā)明（設(shè)計）人: 陳陽;余山
• 申請（專利權(quán)）人: 中國科學(xué)院自動化研究所
• 主分類號: G06V10/774
• 分類號: G06V10/774;G06V10/764;G06V10/82
• 代理公司: 北京路浩知識產(chǎn)權(quán)代理有限公司 11002
• 代理人: 程琛

1.一種符號生成系統(tǒng)的訓(xùn)練方法，其特征在于，包括：

確定訓(xùn)練樣本，并初始化所述訓(xùn)練樣本對應(yīng)的符號向量，其中所述訓(xùn)練樣本為圖像樣本，所述訓(xùn)練樣本中每一個圖像樣本對應(yīng)著一個類別，且所述符號向量用于表示所述類別，所述符號向量包含若干個實數(shù)元素；

基于所述訓(xùn)練樣本和所述符號向量對待訓(xùn)練的符號生成系統(tǒng)進行訓(xùn)練，并對所述符號向量進行更新；

所述符號生成系統(tǒng)包括：任務(wù)處理網(wǎng)絡(luò)，用以執(zhí)行特定任務(wù)，所述特定任務(wù)為圖像分類；情景處理網(wǎng)絡(luò)，用于根據(jù)不同的情景輸入，將符號向量連接到任務(wù)處理網(wǎng)絡(luò)中；在基于所述訓(xùn)練樣本和所述符號向量對所述符號生成系統(tǒng)進行訓(xùn)練時，將所述符號向量輸入至所述情景處理網(wǎng)絡(luò)中，以及將所述圖像樣本輸入至所述任務(wù)處理網(wǎng)絡(luò)中，然后所述任務(wù)處理網(wǎng)絡(luò)會根據(jù)輸入的圖像樣本和所述情景處理網(wǎng)絡(luò)輸入的信息進行處理得到輸出結(jié)果；所述情景處理網(wǎng)絡(luò)層中神經(jīng)元產(chǎn)生控制信號，并將其發(fā)送到所述任務(wù)處理網(wǎng)絡(luò)中相應(yīng)m層中的神經(jīng)元，調(diào)制其輸出為；所述情景處理網(wǎng)絡(luò)中的控制神經(jīng)元與所述任務(wù)處理網(wǎng)絡(luò)中的受控神經(jīng)元一對一匹配；

在確定訓(xùn)練后的所述符號生成系統(tǒng)未收斂時，基于所述訓(xùn)練樣本和更新后的所述符號向量對參數(shù)調(diào)節(jié)后的所述符號生成系統(tǒng)進行訓(xùn)練；

至訓(xùn)練后的所述符號生成系統(tǒng)收斂，得到訓(xùn)練好的所述符號生成系統(tǒng)，其中，訓(xùn)練好的所述符號生成系統(tǒng)應(yīng)用于智能體對目標(biāo)圖像進行識別，并在識別是生成與所述目標(biāo)圖像相對應(yīng)的符號向量，以及響應(yīng)所述符號向量對應(yīng)的功能，所述智能體至少包括智能機器人。

2.根據(jù)權(quán)利要求1所述的符號生成系統(tǒng)的訓(xùn)練方法，其特征在于，所述確定訓(xùn)練樣本，并初始化所述訓(xùn)練樣本對應(yīng)的符號向量，包括：

確定訓(xùn)練樣本，并對所述訓(xùn)練樣本進行類別劃分，得到若干類別，且每一類別包含若干圖像樣本；

初始化每一個類別對應(yīng)的符號向量，并基于類別將所述符號向量與所述訓(xùn)練樣本中的每一圖像樣本進行關(guān)聯(lián)，確定每一圖像樣本對應(yīng)的初始化符號向量。

3.根據(jù)權(quán)利要求2所述的符號生成系統(tǒng)的訓(xùn)練方法，其特征在于，所述基于所述訓(xùn)練樣本和所述符號向量對待訓(xùn)練的符號生成系統(tǒng)進行訓(xùn)練，并對所述符號向量進行更新，包括：

將所述訓(xùn)練樣本中的每一圖像樣本與所述符號向量進行組合，得到若干組輸入圖像樣本；

基于所述若干組輸入圖像樣本對所述符號生成系統(tǒng)進行訓(xùn)練，并在訓(xùn)練完成時得到中間符號生成系統(tǒng)；

根據(jù)所述中間符號生成系統(tǒng)對所述訓(xùn)練樣本中每一圖像樣本對應(yīng)的初始化符號向量進行更新。

4.根據(jù)權(quán)利要求3所述的符號生成系統(tǒng)的訓(xùn)練方法，其特征在于，所述基于所述若干組輸入圖像樣本對所述符號生成系統(tǒng)進行訓(xùn)練，并在訓(xùn)練完成時得到中間符號生成系統(tǒng)，包括：

將所述輸入圖像樣本輸入至所述符號生成系統(tǒng)中，輸出得到所述輸入圖像樣本對應(yīng)的處理結(jié)果；

基于所述輸入圖像樣本對應(yīng)的初始化符號向量和所述處理結(jié)果，對所述符號生成系統(tǒng)進行參數(shù)調(diào)節(jié)，并在完成參數(shù)調(diào)節(jié)時得到中間符號生成系統(tǒng)。

5.根據(jù)權(quán)利要求3所述的符號生成系統(tǒng)的訓(xùn)練方法，其特征在于，所述在確定訓(xùn)練后的所述符號生成系統(tǒng)未收斂時，基于所述訓(xùn)練樣本和更新后的所述符號向量對參數(shù)調(diào)節(jié)后的所述符號生成系統(tǒng)進行訓(xùn)練，包括：

在確定訓(xùn)練后的所述符號生成系統(tǒng)未收斂時，將所述訓(xùn)練樣本與更新后的所述符號向量進行重新組合，得到重新組合后的若干組輸入圖像樣本；

基于重新組合后的若干組輸入圖像樣本，對所述中間符號生成系統(tǒng)進行訓(xùn)練。

6.根據(jù)權(quán)利要求1所述的符號生成系統(tǒng)的訓(xùn)練方法，其特征在于，所述方法還包括：

在確定訓(xùn)練后的所述符號生成系統(tǒng)是否收斂，包括以下任意一項：

根據(jù)當(dāng)前訓(xùn)練序號與所設(shè)的次數(shù)閾值進行比較，確定是否收斂；

根據(jù)更新后的所述符號向量與相鄰前一次更新后的符號向量進行對比，確定是否收斂。