[發明專利]一種電商平臺交易數據高效存儲方法

在審

• 申請號: 202211041923.2
• 申請日: 2022-08-29
• 公開（公告）號: CN115589229A
• 公開（公告）日: 2023-01-10
• 發明（設計）人: 朱玉龍;王京
• 申請（專利權）人: 南京豐豪奇玉網絡科技有限公司
• 主分類號: H03M7/46
• 分類號: H03M7/46
• 代理公司: 江蘇長德知識產權代理有限公司 32478
• 代理人: 張勝海

本發明涉及數據存儲領域，具體涉及一種電商平臺交易數據高效存儲方法，獲取電商平臺交易數據的二進制數據，并將二進制數據轉換為消息編碼，將二進制數據中每位作為一個消息位，每四位作為一個消息編碼，根據每個消息編碼中數字種類和每種數字連續出現的次數判斷每個消息編碼中是否存在錯誤碼，若消息編碼不存在錯誤碼，則消息編碼沒有需要監督的消息位，若消息編程存在錯誤碼，則根據錯誤碼所在消息位確定監督的消息位，計算所有消息編碼中沒有監督的消息位的概率和有監督的消息位的概率，根據概率在每個消息編碼的末位設置監督碼，將已設置監督碼的消息編碼中需要監督的消息位上的錯誤碼修改后進行游程編碼存儲，提高了數據存儲效率。

技術領域

本申請涉及數據存儲領域，具體涉及一種電商平臺交易數據高效存儲方法。

背景技術

電商平臺產生大量的交易數據，這些業務數據包括用戶信息、產品信息、交易信息等，這些信息通常是由文字信息和數字信息組合，其在存儲的過程中都需要進行數字化的處理，最終將漢字信息和數字信息轉換為二進制的數據進行存儲。隨著電商平臺的快速發展，每天產生海量的交易數據，而對如此海量的數據，如果不能高效的存儲，會造成大量存儲設備的浪費，由于二進制數據的交易數據具有較大的重復性，可以采用游程編碼進行壓縮存儲，游程編碼的基本思想是將重復且連續出現多次的字符使用一個字符來表示，并且游程長度越長，游程編碼的壓縮效率越高，當二進制數據中出現很多大部分重復、個別不同的數據時，此時若將個別少數不同數據替換為大部分重復數據，則可極大的增加游程編碼的長度，提高壓縮效率，但常規的游程編碼只是針對原二進制數據中字符的連續出現次數進行游程編碼，并未對個別不同的數據進一步處理，游程長度并未改變，壓縮效率較低。

發明內容

本發明提供一種電商平臺交易數據高效存儲方法，解決電商平臺產生大量的交易數據存儲效率低的問題，采用如下技術方案：

獲取電商平臺每個交易數據的二進制數據，將每四位二進制數據作為一個消息編碼；

根據每個消息編碼中數字的種類判斷每個消息編碼中是否存在影響游程長度的消息位；

若消息編碼不存在影響游程長度的消息位，則該消息編碼無錯誤位；若消息編碼存在一位影響游程長度的消息位，則將該影響游程長度的消息位作為錯誤位；

若消息編碼存在兩位影響游程長度的消息位，將原消息編碼中數字相同的兩個消息位為一組，將原第一組消息位上的數字修改為原第二組消息位上的數字，將原第二組消息位上的數字修改為原第一組消息位上的數字，得到第一消息編碼；

獲取交易數據中與原消息編碼相同的消息編碼數據和與第一消息編碼相同的消息編碼數據，并且消息編碼數據中每個消息編碼的前一消息編碼為無錯誤位或含有一個錯誤位的消息編碼；

根據原消息編碼的錯誤編碼與前一消息編碼的錯誤編碼相同的情況在消息編碼數據中出現的次數得到第一概率；根據第一消息編碼的錯誤編碼與前一消息編碼的錯誤編碼相同的情況在消息編碼數據中出現的次數得到第二概率；

若第一概率大于等于第二概率，則第一組消息位為存在兩位影響游程長度的消息編碼的兩個錯誤位，否則，第二組消息位為兩個錯誤位；

對消息編碼的錯誤位設置監督碼，進行游程編碼存儲。

所述判斷每個消息編碼中是否存在影響游程長度的消息位的方法為：

若消息編碼中所有消息位的數字為同一種，即全為0或全為1，則該消息編碼不存在影響游程長度的消息位；

若消息編碼中所有消息位的數字為兩種，即同時出現0和1，則該消息編碼存在影響游程長度的消息位；

若消息編碼存在影響游程長度的消息位，并且0的數量大于1或者1的數量大于0，則該消息編碼存在一個影響游程長度的消息位；