[發明專利]交通信息流的構建方法和裝置

在審

• 申請號: 201811222416.2
• 申請日: 2018-10-19
• 公開（公告）號: CN111159832A
• 公開（公告）日: 2020-05-15
• 發明（設計）人: 張俊飛;孫慶瑞;毛繼明;董芳芳
• 申請（專利權）人: 百度在線網絡技術（北京）有限公司
• 主分類號: G06F30/20
• 分類號: G06F30/20;G06K9/62
• 代理公司: 北京市鑄成律師事務所 11313
• 代理人: 楊瑾瑾;陳建煥

1.一種交通信息流的構建方法，其特征在于，包括：

加載需要構建的仿真場景的區域地圖；

在所述區域地圖的中放置多個智能體；

控制各所述智能體在所述區域地圖中運行，并收集各所述智能體的運行狀態；

利用交通規則對各所述智能體的運行狀態進行強化學習，得到所述仿真場景的交通信息流。

2.根據權利要求1所述的方法，其特征在于，利用交通規則對各所述智能體的運行狀態進行強化學習，得到所述仿真場景的交通信息流，包括：

利用規則庫中的交通規則對各所述智能體的運行狀態進行打分；

如果所述智能體的分數高于設定閾值，則對所述智能體進行獎勵；

如果所述智能體的分數低于設定閾值，則對所述智能體進行懲罰；

根據各智能體的分數和獎懲結果，各智能體自調整運行策略，以使得各智能體的分數滿足設定閾值且不被懲罰。

3.根據權利要求1或2所述的方法，其特征在于，還包括：

在所述仿真場景中放置主車，所述主車具有自動駕駛系統；

控制所述主車按照自身的運行策略在所述仿真場景中行駛；

對所述主車的行駛狀態進行判定，利用判定結果調整所述主車自身的運行策略。

4.根據權利要求3所述的方法，其特征在于，還包括：

保存所述主車在所述仿真場景中行駛的快照信息。

5.根據權利要求4所述的方法，其特征在于，保存所述主車在所述仿真場景中行駛的快照信息，包括：

如果所述主車在所述仿真場景中行駛過程中出現事故，則保存事故過程的快照信息。

6.一種交通信息流的構建裝置，其特征在于，包括：

地圖加載模塊，用于加載需要構建的仿真場景的區域地圖；

智能體放置模塊，用于在所述區域地圖的中放置多個智能體；

智能體控制模塊，用于控制各所述智能體在所述區域地圖中運行，并收集各所述智能體的運行狀態；

強化學習模塊，用于利用交通規則對各所述智能體的運行狀態進行強化學習，得到所述仿真場景的交通信息流。

7.根據權利要求6所述的裝置，其特征在于，所述強化學習模塊包括：

打分子模塊，用于利用規則庫中的交通規則對各所述智能體的運行狀態進行打分；

獎勵子模塊，用于如果所述智能體的分數高于設定閾值，則對所述智能體進行獎勵；

懲罰子模塊，用于如果所述智能體的分數低于設定閾值，則對所述智能體進行懲罰；

調整子模塊，用于根據各智能體的分數和獎懲結果，各智能體自調整運行策略，以使得各智能體的分數滿足設定閾值且不被懲罰。

8.根據權利要求6或7所述的裝置，其特征在于，還包括：

主車放置模塊，用于在所述仿真場景中放置主車，所述主車具有自動駕駛系統；

主車控制模塊，用于控制所述主車按照自身的運行策略在所述仿真場景中行駛；

主車調整模塊，用于對所述主車的行駛狀態進行判定，利用判定結果調整所述主車自身的運行策略。

9.根據權利要求8所述的裝置，其特征在于，還包括：

快照模塊，用于保存所述主車在所述仿真場景中行駛的快照信息。

10.根據權利要求9所述的裝置，其特征在于，所述快照模塊還用于如果所述主車在所述仿真場景中行駛過程中出現事故，則保存事故過程的快照信息。

11.一種交通信息流的構建裝置，其特征在于，包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序；

當所述一個或多個程序被所述一個或多個處理器執行時，使得所述一個或多個處理器實現如權利要求1至5中任一項所述的方法。

12.一種計算機可讀存儲介質，其存儲有計算機程序，其特征在于，該程序被處理器執行時實現如權利要求1至5中任一項所述的方法。