[發明專利]一種基于分布式的二進制數據分類處理方法和系統

有效

• 申請號: 202011494936.6
• 申請日: 2020-12-17
• 公開（公告）號: CN112559482B
• 公開（公告）日: 2022-10-14
• 發明（設計）人: 谷昊遠;馬建雄;蘇天翔
• 申請（專利權）人: 中國電子科技集團公司第五十二研究所
• 主分類號: G06F16/182
• 分類號: G06F16/182;G06F16/172;G06F16/16
• 代理公司: 杭州君度專利代理事務所(特殊普通合伙) 33240
• 代理人: 楊天嬌

1.一種基于分布式的二進制數據分類處理方法，用于雷達數據的分類存儲，其特征在于，所述基于分布式的二進制數據分類處理方法，包括：

步驟1、接收待分類的二進制文件以及與所述二進制文件對應的二進制格式配置文件，所述二進制格式配置文件中包括分片規格、數據循環精度以及對應的二進制文件中存儲的二進制數據的數據類型、每種數據類型對應的數據長度和數據格式；

步驟2、按照所述分片規格對所述二進制文件中的二進制數據進行分片操作，得到多個分片并對所有分片進行順序編號；

步驟3、對多個分片進行并行解析，生成對應每一分片的一組 “數據類型-數據內容”鍵值對，包括：

步驟3.1、確定每一分片中的預估斷點，包括：

步驟3.1.1、若矯正標志未設置，則取多個分片中編號位于首位的分片作為首位分片，首位分片的第一個字節為預估斷點，該預估斷點同時為真實斷點；若矯正標志已設置，則取首位分片中的真實斷點，并更新預估斷點為該真實斷點；

步驟3.1.2、確定所述二進制文件中所有數據類型中的最大數據長度；

步驟3.1.3、除首位分片的其余分片，由分片的第一個字節開始向上一分片回推最大數據長度對應的字節數，將回推后確定的字節作為起始字節；

步驟3.1.4、根據二進制文件中每種數據類型對應的數據長度和數據格式，從起始字節開始連續匹配數據長度和數據格式，若連續匹配到的二進制數據的條數大于等于所述數據循環精度，則設置起始字節為預估斷點；否則設置起始字節的下一字節作為起始字節，并重新執行步驟3.1.4；

步驟3.2、每一分片由所述預估斷點起，根據二進制文件中每種數據類型對應的數據長度和數據格式，不斷匹配數據長度和數據格式，提取出所述分片中的每一條二進制數據，根據每一條二進制數據的數據類型將每一條二進制數據映射為“數據類型-數據內容”鍵值對；

步驟3.3、取每一分片中的最后一條二進制數據，根據該二進制數據的末尾字節，確定當前分片對應的下一分片的真實斷點；

步驟4、根據所述“數據類型-數據內容”鍵值對，將相同數據類型的數據內容歸為一類；

步驟5、將不同類別的數據內容寫入不同的新的二進制文件中，完成所述二進制文件中二進制數據的分類處理。

2.如權利要求1所述的基于分布式的二進制數據分類處理方法，其特征在于，所述步驟4還包括：

在所有數據內容分類完畢后，判斷每一分片的預估斷點和真實斷點是否相同，若所有分片的預估斷點和真實斷點均相同，則繼續執行步驟5；否則將首個預估斷點和真實斷點不相同的分片作為首位分片，設置矯正標志并獲取首位分片以及其后的所有分片重新執行步驟3。