[發(fā)明專利]一種數(shù)據(jù)碰撞方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 202110040425.5
• 申請(qǐng)日: 2021-01-13
• 公開（公告）號(hào): CN112732761B
• 公開（公告）日: 2022-08-23
• 發(fā)明（設(shè)計(jì)）人: 劉祥;張超;單曉暉;任培培;陳洪楠;夏婷
• 申請(qǐng)（專利權(quán)）人: 青島海信網(wǎng)絡(luò)科技股份有限公司
• 主分類號(hào): G06F16/2455
• 分類號(hào): G06F16/2455;G06F16/242;G06F16/248;G06F16/22
• 代理公司: 北京同達(dá)信恒知識(shí)產(chǎn)權(quán)代理有限公司 11291
• 代理人: 郭潤(rùn)湘

1.一種數(shù)據(jù)碰撞方法，其特征在于，包括：

獲取多個(gè)第一數(shù)據(jù)集，并獲取第二數(shù)據(jù)集；所述多個(gè)第一數(shù)據(jù)集中任意第一數(shù)據(jù)集為滿足第一查詢條件的數(shù)據(jù)集；所述第一查詢條件為多個(gè)第一查詢條件中任一第一查詢條件；所述第二數(shù)據(jù)集為滿足第二查詢條件的數(shù)據(jù)集；所述第二查詢條件為所述多個(gè)第一查詢條件的并集；所述多個(gè)第一數(shù)據(jù)集任一第一數(shù)據(jù)集在大數(shù)據(jù)存儲(chǔ)工具中以相應(yīng)第一數(shù)據(jù)表的形式存儲(chǔ)；所述第二數(shù)據(jù)集在所述大數(shù)據(jù)存儲(chǔ)工具中以對(duì)應(yīng)第二數(shù)據(jù)表的形式存儲(chǔ)；

針對(duì)所述第二數(shù)據(jù)集中任一條數(shù)據(jù)記錄，針對(duì)所述多個(gè)第一數(shù)據(jù)表的任一數(shù)據(jù)表，對(duì)所述第一數(shù)據(jù)表和所述第二數(shù)據(jù)表進(jìn)行數(shù)據(jù)表連接操作，若所述數(shù)據(jù)記錄為所述第二數(shù)據(jù)表中與所述第一數(shù)據(jù)表連接成功的數(shù)據(jù)記錄，則確定與所述第一數(shù)據(jù)表存在碰撞；根據(jù)所述數(shù)據(jù)記錄與所述多個(gè)第一數(shù)據(jù)集的多個(gè)數(shù)據(jù)碰撞結(jié)果，確定所述數(shù)據(jù)記錄的條件組合指示信息；所述條件組合指示信息用于指示所述多個(gè)第一查詢條件中第一查詢條件的組合情形，所述第二數(shù)據(jù)集中任一數(shù)據(jù)記錄的條件組合指示信息具體包括多個(gè)第一字段和\或第二字段；所述多個(gè)第一字段用于指示所述數(shù)據(jù)記錄是否滿足所述多個(gè)第一查詢條件中的各第一查詢條件；所述第二字段用于指示所述數(shù)據(jù)記錄滿足所述多個(gè)第一查詢條件的程度，所述第二字段的取值是根據(jù)所述數(shù)據(jù)記錄滿足所述多個(gè)第一查詢條件的個(gè)數(shù)得到的。

2.如權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述多個(gè)數(shù)據(jù)碰撞結(jié)果，確定所述數(shù)據(jù)記錄的條件組合指示信息之后，還包括：

根據(jù)所述第二數(shù)據(jù)集中各數(shù)據(jù)記錄的條件組合指示信息，按照不同的條件組合對(duì)所述第二數(shù)據(jù)集中各數(shù)據(jù)記錄進(jìn)行分組。

3.如權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述多個(gè)數(shù)據(jù)碰撞結(jié)果，確定所述數(shù)據(jù)記錄的條件組合指示信息之后，還包括：

根據(jù)所述第二數(shù)據(jù)集中的數(shù)據(jù)記錄的多個(gè)第一字段的取值和\或第二字段的取值，對(duì)所述第二數(shù)據(jù)集中的數(shù)據(jù)記錄排序。

4.如權(quán)利要求3所述的方法，其特征在于，所述第二字段的取值與所述數(shù)據(jù)記錄滿足所述多個(gè)第一查詢條件的個(gè)數(shù)呈正相關(guān)；所述根據(jù)所述第二數(shù)據(jù)集中的數(shù)據(jù)記錄的多個(gè)第一字段的取值和\或第二字段的取值，對(duì)所述第二數(shù)據(jù)集中的數(shù)據(jù)記錄排序，包括：

按照所述第二數(shù)據(jù)集中的數(shù)據(jù)記錄的第二字段的取值從大到小的順序，對(duì)所述第二數(shù)據(jù)集中的數(shù)據(jù)記錄進(jìn)行排列。

5.如權(quán)利要求1至4任一項(xiàng)所述的方法，其特征在于，所述獲取第二數(shù)據(jù)集，包括：

將所述多個(gè)第一數(shù)據(jù)集中預(yù)設(shè)字段相同的多條數(shù)據(jù)記錄合并為一條數(shù)據(jù)記錄，根據(jù)所述多個(gè)第一數(shù)據(jù)集合并了數(shù)據(jù)記錄后的數(shù)據(jù)集確定所述第二數(shù)據(jù)集。

6.一種數(shù)據(jù)碰撞裝置，其特征在于，包括：

獲取模塊，用于獲取多個(gè)第一數(shù)據(jù)集，并獲取第二數(shù)據(jù)集；所述多個(gè)第一數(shù)據(jù)集中任意第一數(shù)據(jù)集為滿足第一查詢條件的數(shù)據(jù)集；所述第一查詢條件為多個(gè)第一查詢條件中任一第一查詢條件；所述第二數(shù)據(jù)集為滿足第二查詢條件的數(shù)據(jù)集；所述第二查詢條件為所述多個(gè)第一查詢條件的并集；所述多個(gè)第一數(shù)據(jù)集任一第一數(shù)據(jù)集在大數(shù)據(jù)存儲(chǔ)工具中以相應(yīng)第一數(shù)據(jù)表的形式存儲(chǔ)；所述第二數(shù)據(jù)集在所述大數(shù)據(jù)存儲(chǔ)工具中以對(duì)應(yīng)第二數(shù)據(jù)表的形式存儲(chǔ)；

處理模塊，用于針對(duì)所述第二數(shù)據(jù)集中任一條數(shù)據(jù)記錄，針對(duì)所述多個(gè)第一數(shù)據(jù)表的任一數(shù)據(jù)表，對(duì)所述第一數(shù)據(jù)表和所述第二數(shù)據(jù)表進(jìn)行數(shù)據(jù)表連接操作，若所述數(shù)據(jù)記錄為所述第二數(shù)據(jù)表中與所述第一數(shù)據(jù)表連接成功的數(shù)據(jù)記錄，則確定與所述第一數(shù)據(jù)表存在碰撞；根據(jù)所述數(shù)據(jù)記錄與所述多個(gè)第一數(shù)據(jù)集的多個(gè)數(shù)據(jù)碰撞結(jié)果，確定所述數(shù)據(jù)記錄的條件組合指示信息；所述條件組合指示信息用于指示所述多個(gè)第一查詢條件中第一查詢條件的組合情形。

7.一種計(jì)算機(jī)設(shè)備，其特征在于，包括程序或指令，當(dāng)所述程序或指令被執(zhí)行時(shí)，如權(quán)利要求1至5中任意一項(xiàng)所述的方法被執(zhí)行。

8.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，包括程序或指令，當(dāng)所述程序或指令被執(zhí)行時(shí)，如權(quán)利要求1至5中任意一項(xiàng)所述的方法被執(zhí)行。