[發明專利]構建索引的方法及設備

有效

• 申請號: 201710075884.0
• 申請日: 2017-02-13
• 公開（公告）號: CN108427675B
• 公開（公告）日: 2022-09-02
• 發明（設計）人: 韓陸
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/23
• 代理公司: 上海百一領御專利代理事務所(普通合伙) 31243
• 代理人: 陳貞健;邵棟

1.一種構建索引的方法，其中，所述方法包括：

從數據源中，以分片為單位獲取數據；

對所述數據建立索引，并生成所述數據的分片信息，其中，所述分片信息用于標識所述數據在數據源中所在的分片；

生成所述數據的操作標記，所述操作標記包括索引正確或索引錯誤；

在更新索引時，根據所述分片信息從所述數據源獲取出錯數據的更新內容，并根據所述更新內容覆蓋所述索引中出錯數據的當前內容，其中，所述出錯數據是操作標記為索引錯誤的數據；

在對所述數據建立索引時，生成關于所述數據的時間戳，其中，所述時間戳表示該數據建立索引的時間，用于確定所述出錯數據是否存在更新內容。

2.根據權利要求1所述的方法，其中，所述方法還包括：

在更新索引時，從所述數據源中獲取新增數據，其中，所述新增數據為未建立索引的數據；

對所述新增數據建立索引，并生成所述新增數據的分片信息。

3.根據權利要求1所述的方法，其中，所述方法還包括：

構建所述數據的主鍵，其中，所述主鍵用于在數據源的相應分片中定位所述數據。

4.根據權利要求3所述的方法，其中，在更新索引時，根據所述分片信息從所述數據源獲取出錯數據的更新內容，包括：

在更新索引時，根據所述分片信息在所述數據源中確定所述出錯數據所在的分片；

根據所述數據的主鍵，在數據源的相應分片中定位所述出錯數據；

獲取所述出錯數據的更新內容。

5.根據權利要求1所述的方法，其中，根據所述更新內容覆蓋所述索引中出錯數據的當前內容之后，還包括：

更新所述出錯數據的操作標記。

6.根據權利要求5所述的方法，其中，該方法還包括：

當所述出錯數據的操作標記的更新次數達到預設值時，停止從所述數據源中獲取出錯數據的更新內容，并根據所述更新內容覆蓋所述索引中出錯數據的當前內容。

7.一種構建索引的設備，其中，所述設備包括：

傳輸裝置，用于從數據源中，以分片為單位獲取數據；

處理裝置，用于對所述數據建立索引，并生成所述數據的分片信息，生成所述數據的操作標記，所述操作標記包括索引正確或索引錯誤，以及根據更新內容覆蓋所述索引中出錯數據的當前內容，其中，所述出錯數據是操作標記為索引錯誤的數據，以及在對所述數據建立索引時，生成關于所述數據的時間戳，其中，所述分片信息用于標識所述數據在數據源中所在的分片，所述時間戳表示該數據建立索引的時間，用于確定所述出錯數據是否存在更新內容。

8.根據權利要求7所述的設備，其中，所述傳輸裝置，還用于在更新索引時，從所述數據源中獲取新增數據，其中，所述新增數據為未建立索引的數據；

所述處理裝置，還用于對所述新增數據建立索引，并生成所述新增數據的分片信息。

9.根據權利要求7或8所述的設備，其中，所述處理裝置，還用于構建所述數據的主鍵，其中，所述主鍵用于在數據源的相應分片中定位所述數據。

10.根據權利要求9所述的設備，其中，所述傳輸裝置，用于在更新索引時，根據所述分片信息在所述數據源中確定所述出錯數據所在的分片；根據所述數據的主鍵，在數據源的相應分片中定位所述出錯數據；以及獲取所述出錯數據的更新內容。

11.根據權利要求7所述的設備，其中，所述處理裝置，還用于在根據所述更新內容覆蓋所述索引中出錯數據的當前內容之后，更新所述出錯數據的操作標記。

12.根據權利要求11所述的設備，其中，所述處理裝置，還用于在所述出錯數據的操作標記的更新次數達到預設值時，停止從所述數據源中獲取出錯數據的更新內容，并根據所述更新內容覆蓋所述索引中出錯數據的當前內容。

13.一種構建索引的設備，其中，所述設備包括：

處理器；以及

被安排成存儲計算機可執行指令的存儲器，所述可執行指令在被執行時使所述處理器：從數據源中，以分片為單位獲取數據；對所述數據建立索引，并生成所述數據的分片信息，生成所述數據的操作標記，所述操作標記包括索引正確或索引錯誤；在更新索引時，根據所述分片信息從所述數據源獲取出錯數據的更新內容，并根據所述更新內容覆蓋所述索引中出錯數據的當前內容，其中，所述出錯數據是操作標記為索引錯誤的數據；以及在對所述數據建立索引時，生成關于所述數據的時間戳，其中，所述分片信息用于標識所述數據在數據源中所在的分片，所述時間戳表示該數據建立索引的時間，用于確定所述出錯數據是否存在更新內容。