[發明專利]具有數據處理的方法和裝置

在審

• 申請號: 202011106670.3
• 申請日: 2020-10-15
• 公開（公告）號: CN112668691A
• 公開（公告）日: 2021-04-16
• 發明（設計）人: 伊戈爾·瓦瑟利佐夫;張祐錫;黃榮南
• 申請（專利權）人: 三星電子株式會社
• 主分類號: G06N3/04
• 分類號: G06N3/04;G06N3/063;G06N3/08
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 吳曉兵

一種處理器實現的數據處理方法包括：對包括除法運算在內的激活函數的輸入數據進行歸一化；通過從存儲器讀取根據經歸一化的輸入數據進行尋址的第一查找表的值，確定與除法運算的被除數相對應的被除數數據；通過對被除數數據進行累加，確定與除法運算的除數相對應的除數數據；以及確定與除法運算的輸出相對應的激活函數的輸出數據，其中，除法運算的輸出是通過從存儲器讀取根據被除數數據和除數數據進行尋址的第二查找表的值而獲得的。

相關申請的交叉引用

本申請要求于2019年10月16日向美國專利商標局提交的美國臨時專利申請No.62/915,846的優先權，并且要求于2020年5月6日向韓國知識產權局提交的韓國專利申請No.10-2020-0054050的優先權，這兩個申請的全部公開通過引用合并于此以用于所有目的。

技術領域

以下描述涉及具有數據處理的方法和裝置。

背景技術

神經網絡可以是一種參考計算架構實現的計算系統。各種電子系統被用于通過使用數據處理裝置分析數據并提取有效信息。

數據處理裝置可以執行大量的數據計算。

發明內容

提供本發明內容以用簡化形式介紹對將在下面的具體實施方式中進一步描述的概念的選擇。本發明內容既不旨在標識所要求保護的主題的關鍵特征或必要特征，也不旨在用于幫助確定所要求保護的主題的范圍。

在一個總體方面，一種處理器實現的數據處理方法包括：對包括除法運算在內的激活函數的輸入數據進行歸一化；通過從存儲器讀取根據經歸一化的輸入數據進行尋址的第一查找表的值，確定與所述除法運算的被除數相對應的被除數數據；通過對所述被除數數據進行累加，確定與所述除法運算的除數相對應的除數數據；以及確定與所述除法運算的輸出相對應的所述激活函數的輸出數據，其中所述除法運算的輸出是通過從所述存儲器讀取根據所述被除數數據和所述除數數據進行尋址的第二查找表的值而獲得的。

所述歸一化可以包括：對所述輸入數據進行歸一化，使得經歸一化的輸入數據的最大值是0。

確定所述輸出數據可以包括：基于所述被除數數據的值，確定對所述第二查找表的列進行尋址的列索引；基于所述除數數據的值，確定對所述第二查找表的行進行尋址的行索引；以及從所述存儲器讀取根據所述列索引和所述行索引進行尋址的所述第二查找表的值。

確定所述除數數據可以包括：使用累加器對所述被除數數據進行累加，并且確定所述行索引可以包括：從由所述累加器的最高有效位指示的值確定所述行索引。

確定所述行索引可以包括：基于所述第二查找表的總行數的以2為底的對數的值，確定所述最高有效位的數量。

確定所述最高有效位的數量可以包括：將所述對數的值的具體數加1。

確定所述輸出數據可以包括：通過選擇所述存儲器的根據所述行索引進行尋址的字線，讀取所述第二查找表的值。

所述方法可以包括：確定對數據進行處理的精度；以及從預先生成的多個查找表中選擇與所述精度相對應的所述第一查找表和所述第二查找表。

選擇所述第一查找表和所述第二查找表可以包括：選擇所述第一查找表和所述第二查找表，使得所述第一查找表和所述第二查找表對應于不同精度。

所述激活函數可以包括Softmax函數。

一種可以存儲指令的非暫時性計算機可讀存儲介質，當所述指令由處理器執行時，將所述處理器配置為執行所述方法。