[發(fā)明專利]一種通過(guò)標(biāo)準(zhǔn)數(shù)據(jù)元進(jìn)行政務(wù)數(shù)據(jù)清洗的方法和系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010559413.9
• 申請(qǐng)日: 2020-06-18
• 公開(kāi)（公告）號(hào): CN111858567A
• 公開(kāi)（公告）日: 2020-10-30
• 發(fā)明（設(shè)計(jì)）人: 蘇榮康;姚伯祥;蔣鈺;吳宇龍;陸曉清;李康;呂健;陳峰;趙明亮;倪雯;戎鑫;張成;劉兵;吳榮華;李興洋;趙海寧
• 申請(qǐng)（專利權(quán)）人: 南京市江寧區(qū)信息化管理服務(wù)中心;中科曙光南京研究院有限公司
• 主分類號(hào): G06F16/215
• 分類號(hào): G06F16/215;G06F16/22;G06Q50/26
• 代理公司: 南京泰普專利代理事務(wù)所(普通合伙) 32360
• 代理人: 竇賢宇

1.一種通過(guò)標(biāo)準(zhǔn)數(shù)據(jù)元進(jìn)行政務(wù)數(shù)據(jù)清洗的方法，其特征在于，包括如下步驟：

S1、從相關(guān)政務(wù)網(wǎng)站和商業(yè)數(shù)據(jù)庫(kù)，收集現(xiàn)有的數(shù)據(jù)元標(biāo)準(zhǔn)，批量導(dǎo)入系統(tǒng)中，進(jìn)行分類和維護(hù)；

S2、給收集的數(shù)據(jù)表字段，添加中文注釋；

S3、根據(jù)中文注釋和數(shù)據(jù)來(lái)源部門提供的信息，匹配標(biāo)準(zhǔn)數(shù)據(jù)元;

S4、根據(jù)所匹配數(shù)據(jù)元標(biāo)準(zhǔn)，修改數(shù)據(jù)結(jié)構(gòu)；

S5、根據(jù)數(shù)據(jù)元標(biāo)準(zhǔn)，編制數(shù)據(jù)元字典表；

S6、根據(jù)實(shí)際情況和數(shù)據(jù)來(lái)源部門提供的信息，編制數(shù)據(jù)字典表；

S7、選擇字段，匹配數(shù)據(jù)字典表。

2.根據(jù)權(quán)利要求1所述的通過(guò)標(biāo)準(zhǔn)數(shù)據(jù)元進(jìn)行政務(wù)數(shù)據(jù)清洗的方法，其特征在于，所述數(shù)據(jù)元包括：數(shù)據(jù)項(xiàng)名稱、數(shù)據(jù)項(xiàng)標(biāo)識(shí)符、中文全拼、說(shuō)明、字符類型、字符長(zhǎng)度、表示詞、特性詞、表示格式、值域、內(nèi)部標(biāo)識(shí)符、提交單位及機(jī)構(gòu)信息。

3.根據(jù)權(quán)利要求1所述的通過(guò)標(biāo)準(zhǔn)數(shù)據(jù)元進(jìn)行政務(wù)數(shù)據(jù)清洗的方法，其特征在于，所述數(shù)據(jù)元導(dǎo)按照描述對(duì)象及所屬業(yè)務(wù)進(jìn)行分類，并組織形成樹(shù)狀結(jié)構(gòu)。

4.根據(jù)權(quán)利要求1所述的通過(guò)標(biāo)準(zhǔn)數(shù)據(jù)元進(jìn)行政務(wù)數(shù)據(jù)清洗的方法，其特征在于，優(yōu)選的，所述添加中文注釋的具體步驟為：根據(jù)數(shù)據(jù)源系統(tǒng)數(shù)據(jù)庫(kù)設(shè)計(jì)文檔。

5.根據(jù)權(quán)利要求1所述的通過(guò)標(biāo)準(zhǔn)數(shù)據(jù)元進(jìn)行政務(wù)數(shù)據(jù)清洗的方法，其特征在于，所述數(shù)據(jù)元維護(hù)功能為：通過(guò)后臺(tái)維護(hù)數(shù)據(jù)元標(biāo)準(zhǔn)體系支持對(duì)數(shù)據(jù)元進(jìn)行人工新增、修改及刪除操作，可對(duì)數(shù)據(jù)元所有的相關(guān)屬性進(jìn)行維護(hù)。

6.根據(jù)權(quán)利要求1所述的通過(guò)標(biāo)準(zhǔn)數(shù)據(jù)元進(jìn)行政務(wù)數(shù)據(jù)清洗的方法，其特征在于，所述匹配標(biāo)準(zhǔn)數(shù)據(jù)元的步驟為：對(duì)數(shù)據(jù)資源字段進(jìn)行整理分析及統(tǒng)計(jì)，確定字段的提交單位及機(jī)構(gòu)、產(chǎn)生原因、實(shí)際含義，并與現(xiàn)有的數(shù)據(jù)元進(jìn)行對(duì)照，尋找相關(guān)聯(lián)的數(shù)據(jù)元；對(duì)于不確定的數(shù)據(jù)元，按照統(tǒng)一的流程從提交單位及機(jī)構(gòu)、值域、特性詞等方面依次進(jìn)行分析。

7.根據(jù)權(quán)利要求1所述的通過(guò)標(biāo)準(zhǔn)數(shù)據(jù)元進(jìn)行政務(wù)數(shù)據(jù)清洗的方法，其特征在于，所述修改數(shù)據(jù)結(jié)構(gòu)為：修改數(shù)據(jù)表字段名稱、字段類型、字段長(zhǎng)度；在修改字段長(zhǎng)度時(shí)，如果出現(xiàn)現(xiàn)有數(shù)據(jù)長(zhǎng)度超出標(biāo)準(zhǔn)字段長(zhǎng)度的情況，需要把這些數(shù)據(jù)分離出，再修改字段長(zhǎng)度。

8.根據(jù)權(quán)利要求1所述的通過(guò)標(biāo)準(zhǔn)數(shù)據(jù)元進(jìn)行政務(wù)數(shù)據(jù)清洗的方法，其特征在于，所述編制數(shù)據(jù)字典表為：根據(jù)數(shù)據(jù)來(lái)源部門提供的數(shù)據(jù)庫(kù)設(shè)計(jì)文檔編寫(xiě)數(shù)據(jù)字典表；若沒(méi)有數(shù)據(jù)庫(kù)設(shè)計(jì)文檔，對(duì)數(shù)據(jù)內(nèi)容進(jìn)行分類分析編寫(xiě)數(shù)據(jù)字典表。

9.一種通過(guò)標(biāo)準(zhǔn)數(shù)據(jù)元進(jìn)行政務(wù)數(shù)據(jù)清洗的系統(tǒng)，其特征在于，包括如下模塊：

數(shù)據(jù)導(dǎo)入模塊，從相關(guān)政務(wù)網(wǎng)站和商業(yè)數(shù)據(jù)庫(kù)，收集現(xiàn)有的數(shù)據(jù)元標(biāo)準(zhǔn)，批量導(dǎo)入系統(tǒng)中，進(jìn)行分類和維護(hù)；

中文注釋模塊，給收集的數(shù)據(jù)表字段，添加中文注釋；

匹配數(shù)據(jù)元模塊，根據(jù)中文注釋和數(shù)據(jù)來(lái)源部門提供的信息，匹配標(biāo)準(zhǔn)數(shù)據(jù)元;

修改數(shù)據(jù)模塊，根據(jù)所匹配數(shù)據(jù)元標(biāo)準(zhǔn)，修改數(shù)據(jù)結(jié)構(gòu)；

編制數(shù)據(jù)字典模塊，根據(jù)數(shù)據(jù)元標(biāo)準(zhǔn)，編制數(shù)據(jù)元字典表；根據(jù)實(shí)際情況和數(shù)據(jù)來(lái)源部門提供的信息，編制數(shù)據(jù)字典表；選擇字段，匹配數(shù)據(jù)字典表。