[發(fā)明專(zhuān)利]一種數(shù)據(jù)處理方法和裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202010744185.2
• 申請(qǐng)日: 2020-07-29
• 公開(kāi)（公告）號(hào): CN111930306A
• 公開(kāi)（公告）日: 2020-11-13
• 發(fā)明（設(shè)計(jì)）人: 李春曉;潘余昌;王建偉
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京京東乾石科技有限公司
• 主分類(lèi)號(hào): G06F3/06
• 分類(lèi)號(hào): G06F3/06;G06F16/22;G06F16/23
• 代理公司: 中原信達(dá)知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11219
• 代理人: 李陽(yáng);郭晗

本發(fā)明公開(kāi)了一種數(shù)據(jù)處理方法和裝置，涉及計(jì)算機(jī)技術(shù)領(lǐng)域。該方法的一具體實(shí)施方式包括：監(jiān)測(cè)可行駛設(shè)備的自動(dòng)駕駛數(shù)據(jù)，確定監(jiān)測(cè)到的自動(dòng)駕駛數(shù)據(jù)的第一數(shù)據(jù)級(jí)別和第一時(shí)間區(qū)間；將產(chǎn)生時(shí)刻在第一時(shí)間區(qū)間內(nèi)的自動(dòng)駕駛數(shù)據(jù)的數(shù)據(jù)信息與第一數(shù)據(jù)級(jí)別對(duì)應(yīng)存儲(chǔ)在數(shù)據(jù)信息表中；當(dāng)執(zhí)行數(shù)據(jù)刪除時(shí)，根據(jù)數(shù)據(jù)信息表中數(shù)據(jù)級(jí)別和對(duì)應(yīng)的數(shù)據(jù)信息中的產(chǎn)生時(shí)刻，按預(yù)設(shè)的刪除順序逐一刪除自動(dòng)駕駛數(shù)據(jù)，直到數(shù)據(jù)存儲(chǔ)空間滿足預(yù)設(shè)要求。該實(shí)施方式能以精簡(jiǎn)便捷的方式定時(shí)維護(hù)數(shù)據(jù)與磁盤(pán)狀態(tài)，減少冗余數(shù)據(jù)產(chǎn)生的網(wǎng)絡(luò)需求與磁盤(pán)壓力，有條件地保留或刪除數(shù)據(jù)，兼容不同容量磁盤(pán)，滿足自動(dòng)駕駛場(chǎng)景處理需求，提高該場(chǎng)景中數(shù)據(jù)處理的自動(dòng)化程度。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)技術(shù)領(lǐng)域，尤其涉及一種數(shù)據(jù)處理方法和裝置。

背景技術(shù)

每臺(tái)可行駛設(shè)備(例如自動(dòng)駕駛車(chē)輛)在日常測(cè)試或運(yùn)營(yíng)過(guò)程中會(huì)產(chǎn)生大量數(shù)據(jù)，例如源數(shù)據(jù)、中間數(shù)據(jù)等，這些數(shù)據(jù)使得可行駛設(shè)備(車(chē)端)磁盤(pán)容量面臨較大壓力。如不及時(shí)處理車(chē)端數(shù)據(jù)，將會(huì)造成數(shù)據(jù)丟失、磁盤(pán)報(bào)錯(cuò)等局面。

自動(dòng)駕駛車(chē)端產(chǎn)生的數(shù)據(jù)存儲(chǔ)在磁盤(pán)上，雖然可掛載大容量的硬盤(pán)，但使用和維護(hù)大容量硬盤(pán)中的數(shù)據(jù)也多有不便。例如，打滿時(shí)如采用更換硬盤(pán)的方式，則硬盤(pán)需獲得物理空間的轉(zhuǎn)移才能到達(dá)使用者手中；而采用清理磁盤(pán)空間的方式，若磁盤(pán)空間容量大，則累計(jì)的歷史數(shù)據(jù)較多，清理時(shí)間較長(zhǎng)，若磁盤(pán)空間容量較小，則可能遺漏、丟失或無(wú)法獲得相應(yīng)的場(chǎng)景數(shù)據(jù)，十分不便。另外，大批量上傳數(shù)據(jù)則對(duì)網(wǎng)絡(luò)、流量要求較高，數(shù)據(jù)量大時(shí)上傳時(shí)間較長(zhǎng)，由于可行駛設(shè)備常處于移動(dòng)狀態(tài)，即使裝載流量卡，網(wǎng)絡(luò)狀態(tài)也不完全穩(wěn)定，且對(duì)流量要求較大，不適于大量數(shù)據(jù)的傳輸。

在實(shí)現(xiàn)本發(fā)明過(guò)程中，發(fā)明人發(fā)現(xiàn)現(xiàn)有技術(shù)中至少存在如下問(wèn)題：

數(shù)據(jù)維護(hù)不便，對(duì)網(wǎng)絡(luò)需求較大，不能有效減少可行駛設(shè)備的磁盤(pán)壓力，無(wú)法滿足自動(dòng)駕駛場(chǎng)景的數(shù)據(jù)處理需求。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明實(shí)施例提供一種數(shù)據(jù)處理方法和裝置，能夠以精簡(jiǎn)、便捷的方式定時(shí)維護(hù)數(shù)據(jù)與磁盤(pán)狀態(tài)，減少冗余數(shù)據(jù)產(chǎn)生的網(wǎng)絡(luò)需求與磁盤(pán)壓力，有條件地保留或刪除數(shù)據(jù)，可兼容不同容量的磁盤(pán)，滿足自動(dòng)駕駛場(chǎng)景的數(shù)據(jù)處理需求，提高自動(dòng)駕駛場(chǎng)景中數(shù)據(jù)處理的自動(dòng)化程度。

為實(shí)現(xiàn)上述目的，根據(jù)本發(fā)明實(shí)施例的一個(gè)方面，提供了一種數(shù)據(jù)處理方法。

一種數(shù)據(jù)處理方法，包括：監(jiān)測(cè)可行駛設(shè)備在各時(shí)刻產(chǎn)生的自動(dòng)駕駛數(shù)據(jù)，每當(dāng)監(jiān)測(cè)到所述自動(dòng)駕駛數(shù)據(jù)后，確定監(jiān)測(cè)到的自動(dòng)駕駛數(shù)據(jù)的第一數(shù)據(jù)級(jí)別和第一時(shí)間區(qū)間，所述第一時(shí)間區(qū)間包括第一時(shí)刻，所述第一時(shí)刻為所述監(jiān)測(cè)到的自動(dòng)駕駛數(shù)據(jù)的產(chǎn)生時(shí)刻；將產(chǎn)生時(shí)刻在所述第一時(shí)間區(qū)間內(nèi)的所述自動(dòng)駕駛數(shù)據(jù)的數(shù)據(jù)信息與所述第一數(shù)據(jù)級(jí)別對(duì)應(yīng)存儲(chǔ)在數(shù)據(jù)信息表中，所述數(shù)據(jù)信息包括對(duì)應(yīng)的所述自動(dòng)駕駛數(shù)據(jù)的產(chǎn)生時(shí)刻和存儲(chǔ)路徑；當(dāng)執(zhí)行數(shù)據(jù)刪除時(shí)，根據(jù)所述數(shù)據(jù)信息表中的數(shù)據(jù)級(jí)別和對(duì)應(yīng)的所述數(shù)據(jù)信息中的所述自動(dòng)駕駛數(shù)據(jù)的產(chǎn)生時(shí)刻，按照預(yù)設(shè)的刪除順序逐一刪除所述存儲(chǔ)路徑下的所述自動(dòng)駕駛數(shù)據(jù)，直到所述可行駛設(shè)備的數(shù)據(jù)存儲(chǔ)空間滿足預(yù)設(shè)要求時(shí)，停止所述數(shù)據(jù)刪除的操作。

可選地，確定所述監(jiān)測(cè)到的自動(dòng)駕駛數(shù)據(jù)的第一數(shù)據(jù)級(jí)別的步驟包括：確定所述監(jiān)測(cè)到的自動(dòng)駕駛數(shù)據(jù)的來(lái)源模塊，所述來(lái)源模塊為所述可行駛設(shè)備上自動(dòng)駕駛程序中的功能模塊；根據(jù)所述來(lái)源模塊的處理邏輯，對(duì)所述監(jiān)測(cè)到的自動(dòng)駕駛數(shù)據(jù)進(jìn)行預(yù)設(shè)處理，并根據(jù)得到的處理結(jié)果確定所述監(jiān)測(cè)到的自動(dòng)駕駛數(shù)據(jù)的第一數(shù)據(jù)級(jí)別。