[發明專利]用于輸出數據的方法和裝置

有效

• 申請號: 201810010609.5
• 申請日: 2018-01-05
• 公開（公告）號: CN108595211B
• 公開（公告）日: 2021-11-26
• 發明（設計）人: 劉宇龍
• 申請（專利權）人: 百度在線網絡技術（北京）有限公司
• 主分類號: G06F9/38
• 分類號: G06F9/38;G06N3/04
• 代理公司: 北京英賽嘉華知識產權代理有限責任公司 11204
• 代理人: 王達佐;馬曉亞

本申請實施例公開了用于輸出數據的方法和裝置。該方法的一具體實施方式包括：獲取目標數據集合；確定組成目標數據集合的子集和子集的序號；根據子集的序號，對各個子集進行分組，得到至少一個子集組，其中，至少一個子集組中的每個子集組包括的子集的數量小于等于第一預設數量；對于至少一個子集組中的每個子集組，從該子集組中的每個子集中分別提取第二預設數量個目標數據；輸出所提取的目標數據。該實施方式提高了處理數據的效率。

技術領域

本申請實施例涉及計算機技術領域，具體涉及數據處理技術領域，尤其涉及用于輸出數據的方法和裝置。

背景技術

隨著計算機技術的發展，對大規模數據進行處理的場景越來越多。比如，在機器學習領域，在對數據集合(例如卷積神經網絡中的矩陣)中的數據進行運算時，往往每次提取一個數據，計算機在執行完運算后再提取下一個數據。

發明內容

本申請實施例提出了用于輸出數據的方法和裝置。

第一方面，本申請實施例提供了一種用于輸出數據的方法，該方法包括：獲取目標數據集合；確定組成目標數據集合的子集和子集的序號；根據子集的序號，對各個子集進行分組，得到至少一個子集組，其中，至少一個子集組中的每個子集組包括的子集的數量小于等于第一預設數量；對于至少一個子集組中的每個子集組，從該子集組中的每個子集中分別提取第二預設數量個目標數據；輸出所提取的目標數據。

在一些實施例中，根據子集的序號，對各個子集進行分組，得到至少一個子集組，包括：執行如下分組步驟：響應于確定未分組的子集的數量小于等于第一預設數量，將未分組的子集確定為一個子集組；響應于確定未分組的子集的數量大于第一預設數量，從序號最小的子集開始，將第一預設數量個子集確定為一個子集組；重新確定未分組的子集的數量，響應于確定重新確定的未分組的子集的數量不為零，繼續執行分組步驟。

在一些實施例中，從該子集組中的每個子集中分別提取第二預設數量個目標數據，包括：獲取第二預設數量個目標位置編號，其中，位置編號用于表征目標數據在子集中的位置；從該子集組中的每個子集中提取目標位置編號對應的目標數據。

在一些實施例中，目標數據集合為由目標數據組成的至少一個同型矩陣，子集為至少一個同型矩陣中的矩陣。

在一些實施例中，目標數據為矩陣中的元素，目標位置編號為目標數據在矩陣中的行列號。

在一些實施例中，第一預設數量是基于預設的單指令多數據流SIMD指令單次執行所處理的最大數據量確定的數量。

第二方面，本申請實施例提供了一種用于輸出數據的裝置，該裝置包括：獲取單元，配置用于獲取目標數據集合；確定單元，配置用于確定組成目標數據集合的子集和子集的序號；分組單元，配置用于根據子集的序號，對各個子集進行分組，得到至少一個子集組，其中，至少一個子集組中的每個子集組包括的子集的數量小于等于第一預設數量；提取單元，配置用于對于至少一個子集組中的每個子集組，從該子集組中的每個子集中分別提取第二預設數量個目標數據；輸出單元，配置用于輸出所提取的目標數據。

在一些實施例中，分組單元，包括：分組模塊，配置用于執行如下分組步驟：響應于確定未分組的子集的數量小于等于第一預設數量，將未分組的子集確定為一個子集組；響應于確定未分組的子集的數量大于第一預設數量，從序號最小的子集開始，將第一預設數量個子集確定為一個子集組；確定模塊，配置用于重新確定未分組的子集的數量，響應于確定重新確定的未分組的子集的數量不為零，繼續執行分組步驟。

在一些實施例中，提取單元，包括：獲取模塊，配置用于獲取第二預設數量個目標位置編號，其中，位置編號用于表征目標數據在子集中的位置；提取模塊，配置用于從該子集組中的每個子集中提取目標位置編號對應的目標數據。

在一些實施例中，目標數據集合為由目標數據組成的至少一個同型矩陣，子集為至少一個同型矩陣中的矩陣。