[發(fā)明專利]一種與汽車相關(guān)的多源數(shù)據(jù)的整合存儲系統(tǒng)及方法

有效

• 申請?zhí)枺?/td>: 201710155049.8
• 申請日: 2017-03-14
• 公開（公告）號: CN108573003B
• 公開（公告）日: 2020-07-10
• 發(fā)明（設(shè)計）人: 張守義
• 申請（專利權(quán)）人: 北京宸信征信有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/25;G06F16/28
• 代理公司: 北京康思博達知識產(chǎn)權(quán)代理事務所(普通合伙) 11426
• 代理人: 劉冬梅;路永斌

1.一種與汽車相關(guān)的多數(shù)據(jù)源整合存儲方法，其特征在于，該方法包括如下步驟：

步驟1，通過原始數(shù)據(jù)部(001)存放外部的多源數(shù)據(jù)，并將其中的數(shù)據(jù)傳輸給數(shù)據(jù)初步處理部(002)；

步驟2，通過數(shù)據(jù)初步處理部(002)將原始數(shù)據(jù)部(001)中的數(shù)據(jù)轉(zhuǎn)化為關(guān)系型數(shù)據(jù)，并將之存儲在初步數(shù)據(jù)存儲部(003)中：

步驟3，通過初步數(shù)據(jù)存儲部(003)存儲經(jīng)數(shù)據(jù)初步處理部(002)處理過的數(shù)據(jù)，并將該數(shù)據(jù)傳遞給數(shù)據(jù)清理處理部(004)；所述初步數(shù)據(jù)存儲部(003)中存儲的數(shù)據(jù)所具有的屬性包括車輛牌號、排量、品牌；

步驟4，通過數(shù)據(jù)清理處理部(004)檢查并處理來自初步數(shù)據(jù)存儲部(003)數(shù)據(jù)的合規(guī)性和深層次合規(guī)性，并將符合要求的數(shù)據(jù)傳輸至只讀系統(tǒng)部(005)；

步驟5，通過只讀系統(tǒng)部(005)存儲經(jīng)過數(shù)據(jù)清理處理部(004)處理后的數(shù)據(jù)，以便隨時調(diào)用；

在步驟4中，通過如下子步驟檢查并處理來自初步數(shù)據(jù)存儲部(003)數(shù)據(jù)的合規(guī)性：

子步驟1，通過車輛牌號合規(guī)處理部(0411)檢驗和/或轉(zhuǎn)換車輛牌號數(shù)據(jù)的長度、檢驗車輛牌號數(shù)據(jù)的第一個字符是否為有效的省份簡稱、檢驗車輛牌號數(shù)據(jù)的第二個字符是否為有效的地區(qū)代碼，并將長度為7位、第一個字符是有效的省份簡稱、第二個字符是有效的地區(qū)代碼的數(shù)據(jù)標記為合規(guī)數(shù)據(jù)，將其他數(shù)據(jù)標記為不合規(guī)數(shù)據(jù)或刪除；

車輛牌號合規(guī)處理部(0411)檢驗到車輛牌號數(shù)據(jù)長度為非7位、第一個字符非有效的省份簡稱或者第二個字符非有效的地區(qū)代碼時將該車輛牌號數(shù)據(jù)移動到數(shù)據(jù)回收站，繼續(xù)檢驗下一個車輛牌號數(shù)據(jù)，待每一個車輛牌號數(shù)據(jù)都檢驗完畢后，檢驗數(shù)據(jù)回收站中的車輛牌號數(shù)據(jù)，判斷其中大于7位的車輛牌號是否可以轉(zhuǎn)換為7位，若可以轉(zhuǎn)換，則將其轉(zhuǎn)換處理為7位，若不能轉(zhuǎn)換，則刪除該車輛牌號；

子步驟2，通過排量合規(guī)處理部(0412)檢驗和/或轉(zhuǎn)換排量數(shù)據(jù)，將排量單位L前的字符是數(shù)字的數(shù)據(jù)標記為合規(guī)數(shù)據(jù)，將其他數(shù)據(jù)標記為不合規(guī)數(shù)據(jù)或刪除；

排量合規(guī)處理部(0412)檢驗到排量數(shù)據(jù)中含有單位L，且單位L前的字符為數(shù)字時將該排量數(shù)據(jù)標記為合規(guī)數(shù)據(jù)，否則將該排量數(shù)據(jù)移動到數(shù)據(jù)回收站，繼續(xù)檢驗下一個排量數(shù)據(jù)，待排量數(shù)據(jù)都檢驗完畢后，檢驗數(shù)據(jù)回收站中的排量數(shù)據(jù)，將其中無單位L且位數(shù)是三位的數(shù)據(jù)轉(zhuǎn)換為帶有單位L的排量數(shù)據(jù)，則刪除其他數(shù)據(jù)；

子步驟3，通過品牌合規(guī)處理部(0413)檢驗和/或轉(zhuǎn)換品牌數(shù)據(jù)，將適格品牌數(shù)據(jù)標記為合規(guī)數(shù)據(jù)，將其他數(shù)據(jù)標記為不合規(guī)數(shù)據(jù)或刪除；

品牌合規(guī)處理部(0413)檢驗到品牌數(shù)據(jù)中含有適格品牌時將該品牌數(shù)據(jù)標記為合規(guī)數(shù)據(jù)，否則將該品牌數(shù)據(jù)移動到數(shù)據(jù)回收站，繼續(xù)檢驗下一個品牌數(shù)據(jù)，待品牌數(shù)據(jù)都檢驗完畢后，檢驗數(shù)據(jù)回收站中的品牌數(shù)據(jù)，判斷品牌數(shù)據(jù)中是否包含能夠表征品牌特征的信息，并根據(jù)該信息將該品牌數(shù)據(jù)轉(zhuǎn)換為適格品牌，若不包含能夠表征品牌特征的信息，則刪除該品牌數(shù)據(jù)；

子步驟4，通過車輛識別碼合規(guī)處理部(0414)檢驗和/或轉(zhuǎn)換車輛識別碼數(shù)據(jù)，將長度為17位的車輛識別碼數(shù)據(jù)標記為合規(guī)數(shù)據(jù)，將其他數(shù)據(jù)標記為不合規(guī)數(shù)據(jù)或刪除；

車輛識別碼合規(guī)處理部(0414)檢驗到車輛識別碼數(shù)據(jù)的位數(shù)是17位時將該車輛識別碼數(shù)據(jù)標記為合規(guī)數(shù)據(jù)，否則將該車輛識別碼數(shù)據(jù)移動到數(shù)據(jù)回收站，繼續(xù)檢驗下一個車輛識別碼數(shù)據(jù)，待車輛識別碼數(shù)據(jù)都檢驗完畢后，檢驗數(shù)據(jù)回收站中的車輛識別碼數(shù)據(jù)，判斷車輛識別碼數(shù)據(jù)中大于17位的車輛識別碼是否可以轉(zhuǎn)換為17位，若可以轉(zhuǎn)換，則將其轉(zhuǎn)換處理為17位，若不能轉(zhuǎn)換，則刪除該車輛識別碼數(shù)據(jù)；

在步驟4中，通過如下子步驟檢查并處理來自初步數(shù)據(jù)存儲部(003)數(shù)據(jù)的深層次合規(guī)性：

子步驟a，通過車輛牌號深度處理部(0421)檢驗車輛牌號數(shù)據(jù)中第3位至第7位字符是否只由字母和數(shù)字組成，檢驗結(jié)果為“是”的車輛牌號數(shù)據(jù)為具有深層次合規(guī)性的數(shù)據(jù)，并將該數(shù)據(jù)傳輸至只讀系統(tǒng)部(005)；

子步驟b，通過排量深度處理部(0422)檢驗排量數(shù)據(jù)中的數(shù)值是否介于0到10之間，檢驗結(jié)果為“是”的排量數(shù)據(jù)為具有深層次合規(guī)性的數(shù)據(jù)，并將該數(shù)據(jù)傳輸至只讀系統(tǒng)部(005)；

子步驟c，通過品牌深度處理部(0423)檢驗品牌數(shù)據(jù)中是否包含多個品牌信息，將包含多個品牌信息的品牌數(shù)據(jù)拆分成多個只包含一個品牌信息的品牌數(shù)據(jù)，都標記成具有深層次合規(guī)性的數(shù)據(jù)，并都傳輸至只讀系統(tǒng)部(005)；

子步驟d，通過車輛識別碼深度處理部(0424)檢驗車輛識別碼數(shù)據(jù)中的第1-3位是否為有效的世界制造商識別代碼、第4-8位是否為合法的車輛特征代碼、第9位是否為合法的校驗位、第10-11位是否為數(shù)字或字母、第12-17位是否為合法的數(shù)字，并將判斷結(jié)果都為“是”的車輛識別碼數(shù)據(jù)標記成具有深層次合規(guī)性的數(shù)據(jù)，并傳輸至只讀系統(tǒng)部(005)；

所述數(shù)據(jù)初步處理部(002)包括：常規(guī)數(shù)據(jù)處理模塊、非常規(guī)數(shù)據(jù)處理模塊和數(shù)據(jù)判斷分類模塊；

其中，常規(guī)數(shù)據(jù)處理模塊(021)用于處理來自原始數(shù)據(jù)部(001)的常規(guī)數(shù)據(jù)；非常規(guī)數(shù)據(jù)處理模塊(022)用于處理來自原始數(shù)據(jù)部(001)的非常規(guī)數(shù)據(jù)；數(shù)據(jù)判斷分類模塊(023)用于接收原始數(shù)據(jù)部(001)傳出的數(shù)據(jù)，判斷該接收到的數(shù)據(jù)是常規(guī)數(shù)據(jù)或者非常規(guī)數(shù)據(jù)，將常規(guī)數(shù)據(jù)傳遞給常規(guī)數(shù)據(jù)處理模塊(021)，將非常規(guī)數(shù)據(jù)傳遞給非常規(guī)數(shù)據(jù)處理模塊(022)；

所述常規(guī)數(shù)據(jù)為存儲在常規(guī)文件中的數(shù)據(jù)，所述常規(guī)文件包括excel文件；

或者，所述常規(guī)文件包括數(shù)據(jù)庫導出文件；

或者，所述常規(guī)文件包括有固定分隔符的文本文件；

所述只讀系統(tǒng)部(005)在導入來自數(shù)據(jù)清理處理部(004)的數(shù)據(jù)時處于讀寫狀態(tài)，在完成數(shù)據(jù)導入后自動回置為只讀狀態(tài)。