[發(fā)明專利]神經(jīng)網(wǎng)絡模型的運行方法、可讀介質(zhì)和電子設備

在審

• 申請?zhí)枺?/td>: 202210100000.3
• 申請日: 2022-01-27
• 公開（公告）號: CN114491167A
• 公開（公告）日: 2022-05-13
• 發(fā)明（設計）人: 韓冥生;余宗橋;王曉雪;趙翼飛
• 申請（專利權(quán)）人: 安謀科技（中國）有限公司
• 主分類號: G06F16/901
• 分類號: G06F16/901;G06F17/16;G06F7/523;G06N3/04
• 代理公司: 上海華誠知識產(chǎn)權(quán)代理有限公司 31300
• 代理人: 肖華

1.一種神經(jīng)網(wǎng)絡模型的運行方法，應用于電子設備，其特征在于，包括：

在運行所述神經(jīng)網(wǎng)絡模型的過程中檢測到第一運算，所述第一運算包括第一運算部分，其中，所述第一運算部分包括至少一個非線性運算因子；

從第一數(shù)據(jù)矩陣中，獲取所述第一運算的第一輸入數(shù)據(jù)；

生成所述第一輸入數(shù)據(jù)的第一查表參數(shù)；

確定索引表中與所述第一查表參數(shù)對應的第一索引值，所述第一索引值對應的浮點數(shù)與所述第一查表參數(shù)對應的浮點數(shù)數(shù)值相同；

獲取所述索引表中與所述第一索引值對應的第一查表結(jié)果，其中，所述第一查表參數(shù)與所述第一索引值為定點數(shù)，并且所述第一查表結(jié)果為預先將所述第一索引值作為所述第一運算部分的輸入數(shù)據(jù)計算得到的定點數(shù)結(jié)果；

基于所述第一查表結(jié)果確定所述第一運算部分的運算結(jié)果。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述生成所述第一輸入數(shù)據(jù)的第一查表參數(shù)，包括：

從至少一個第二數(shù)據(jù)矩陣中獲取與所述第一輸入數(shù)據(jù)對應的至少一個第二輸入數(shù)據(jù)，并將所述第一運算部分中，包括所述第一輸入數(shù)據(jù)和所述第二輸入數(shù)據(jù)的第一子運算的運算結(jié)果，作為所述第一輸入數(shù)據(jù)的第一查表參數(shù)，其中，所述第一子運算只包括線性運算因子，所述第二輸入數(shù)據(jù)在所述第二數(shù)據(jù)矩陣中的行和列與所述第一輸入數(shù)據(jù)在所述第一數(shù)據(jù)矩陣中的行和列相同。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述第一查表參數(shù)的量化位數(shù)為M，所述索引表中的索引值的量化位數(shù)為N；并且

所述確定索引表中與所述第一查表參數(shù)對應的第一索引值，包括：

在M小于或等于N的情況下，所述第一索引值為所述索引表中與所述第一查表參數(shù)相等的索引值；

在M大于N的情況下，所述第一索引值為所述索引表中與所述第一查表參數(shù)對應的二進制數(shù)的高N位相等的索引值。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述基于所述第一查表結(jié)果確定所述第一運算的運算結(jié)果，包括：

在M小于或等于N的情況下，以所述第一查表結(jié)果為所述第一運算部分的運算結(jié)果。

5.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述基于所述第一查表結(jié)果確定所述第一運算的運算結(jié)果，包括：

在M大于N的情況下，基于所述第一索引值加1得到的第二索引值，從所述索引表中獲取所述第二索引值對應的第二查表結(jié)果；

確定所述第二查表結(jié)果減去所述第一查表結(jié)果的差值，并將所述差值與所述第一查表參數(shù)減去所述第一索引值的差值相乘后再向右移M-N位，得到修正值；

將所述修正值與第一查表結(jié)果的和作為所述第一運算部分的運算結(jié)果。

6.根據(jù)權(quán)利要求1至5中任一項所述的方法，其特征在于，所述第一運算還包括第二運算部分；并且所述方法還包括：

基于所述第一運算部分的運算結(jié)果和所述第二運算部分的運算結(jié)果的線性運算，確定所述第一運算的定點數(shù)運算結(jié)果。

7.根據(jù)權(quán)利要求6中任一項所述的方法，其特征在于，所述第一運算為利用LRN算子對待歸一化數(shù)據(jù)集中的第一輸入數(shù)據(jù)進行歸一化的運算，所述待歸一化數(shù)據(jù)集包括N(N1)個數(shù)據(jù)矩陣，并且所述第一運算通過以下公式定義：

其中，為所述第一輸入數(shù)據(jù)，表示所述待歸一化數(shù)據(jù)集中第i(1≤i≤N)個數(shù)據(jù)矩陣中的第x行第y列的數(shù)據(jù)；為所述第一運算的運算結(jié)果，表示所述第一輸入數(shù)據(jù)的歸一化結(jié)果；k、α、β、n為超參數(shù)；所述第一運算部分包括所述第二運算部分包括

8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述第一查表參數(shù)根據(jù)以下公式確定：

其中，表示所述待歸一化數(shù)據(jù)集中第j(max(0，i-n/2)≤j≤min(N，i-n/2))個數(shù)據(jù)矩陣中的第x行第y列的數(shù)據(jù)對應的定點數(shù)。