[發明專利]一種智能會議記錄系統及方法

在審

• 申請號: 202110015673.4
• 申請日: 2021-01-07
• 公開（公告）號: CN112348493A
• 公開（公告）日: 2021-02-09
• 發明（設計）人: 沈玉勤;陶子元
• 申請（專利權）人: 北京電信易通信息技術股份有限公司
• 主分類號: G06Q10/10
• 分類號: G06Q10/10;G06K9/00;G06K9/62;G06T3/40;H04N5/76;G10L15/26;G10L17/00;G10L17/02;G10L17/06
• 代理公司: 北京高沃律師事務所 11569
• 代理人: 杜陽陽

1.一種智能會議記錄系統，其特征在于，包括：

攝像頭，用于采集會議發生時的視頻圖像信息；

麥克風，用于采集會議發生時的聲音信息；

同步器，分別與所述攝像頭和所述麥克風連接，用于發出同步信號控制所述攝像頭和所述麥克風同時工作；

控制模塊，分別與所述攝像頭、所述麥克風以及所述同步器連接，用于控制同步器工作，以及用于收集所述視頻圖像信息和所述聲音信息；

位置解析模塊，與所述控制模塊連接，用于根據所述視頻圖像信息以及所述聲音信息解析當前發言人的位置；

聲音識別模塊，與所述控制模塊連接，用于提取所述聲音信息中的聲音特征，并將提取到的聲音特征與存儲模塊中存儲的聲音特征進行匹配，確定發言人的身份信息；所述聲音識別模塊還用于將所述聲音信息轉換為文字信息；

人臉識別模塊，與所述控制模塊連接，用于根據所述視頻圖像信息進行人臉識別，并將識別到的人臉特征與存儲模塊中存儲的人臉特征進行匹配，確定參會人員身份信息；

圖像處理模塊，與所述控制模塊以及所述聲音識別模塊連接，用于將多個攝像頭采集的視頻圖像信息進行擬合；所述擬合后的圖像以統一的時間為基準插入到所述文字信息中，生成會議記錄；

存儲模塊，分別與所述控制模塊、所述聲音識別模塊、所述圖像處理模塊、所述人臉識別模塊連接，用于存儲參會人員的聲音特征、參會人員的人臉特征以及所述會議記錄。

2.根據權利要求1所述的智能會議記錄系統，其特征在于，所述根據所述視頻圖像信息以及所述聲音信息解析當前發言人的位置的公式如下：

其中，（Xa、Ya、Za）、（Xb、Yb、Zb）、（Xc、Yc、Zc）、（Xd、Yd、Zd）為麥克風a、b、c、d的坐標，Tba為聲音到達麥克風b、a的時間差，Tca為聲音到達麥克風c、a的時間差，Tda為聲音到達麥克風d、a的時間差，V是聲音的傳播速度，x、y表示人員位置坐標。

3.根據權利要求1所述的智能會議記錄系統，其特征在于，所述攝像頭在使用前要進行標定，所述標定包括內參標定和外參標定；所述內參標定為獲取圖像畸變參數，所述外參標定為獲取所述攝像頭的安裝位置和角度，所述角度為所述攝像頭的圖像中心像素所在射線的角度。

4.根據權利要求3所述的智能會議記錄系統，其特征在于，所述圖像畸變參數通過標定板或棋盤板獲取。

5.根據權利要求3所述的智能會議記錄系統，其特征在于，所述安裝位置通過全站儀類的測量設備獲取，所述角度通過全站儀類測量設備和攝像頭圖像采集聯合獲取。

6.根據權利要求1所述的智能會議記錄系統，其特征在于，所述圖像處理模塊包括：

會議焦點提取單元，用于根據所述視頻圖像信息中當前參會人員的人臉朝向確定會議焦點；

焦點圖像拼接單元，與所述會議焦點提取單元連接，用于根據所述會議焦點對所述視頻圖像信息進行拼接。

7.一種智能會議記錄方法，其特征在于，所述方法應用于上述權利要求1-6任意一項所述的智能會議記錄系統，所述方法包括：

采集會議發生時的視頻圖像信息；

采集會議發生時的聲音信息；

根據所述視頻圖像信息以及所述聲音信息解析當前發言人的位置；

提取所述聲音信息中的聲音特征，并將提取到的聲音特征與存儲模塊中存儲的聲音特征進行匹配，確定發言人的身份信息；

將所述聲音信息轉換為文字信息；

根據所述視頻圖像信息進行人臉識別，并將識別到的人臉特征與存儲模塊中存儲的人臉特征進行匹配，確定參會人員身份信息；

將多個攝像頭采集的視頻圖像信息進行擬合；所述擬合后的圖像以統一的時間為基準插入到所述文字信息中，生成會議記錄。