一种智能决策会议机器人的制作方法

本发明涉及智能办公技术领域，尤其是涉及一种智能决策会议机器人。

背景技术：

在日常的会议进程中，为保证会议的高效性，往往需要进行会议发言记录，并及时得出会议结论，目前通常由人工进行会议记录，并由人工总结得出会议结论，有时甚至还需要在会议结束后重新翻看整理会议记录，才能得出相应的会议结论，这种方式无疑存在耗时耗力的问题，且无法保证会议记录的准确性和可追溯性，不利于后续检索及整理相关会议记录，导致不能及时得出会议结论。

技术实现要素：

本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种智能决策会议机器人，以实现自动进行与发言人相对应的会议记录，同时提供会议决策图谱，以有效帮助会议参与者及时得出会议结论。

本发明的目的可以通过以下技术方案来实现：一种智能决策会议机器人，包括放置于会议室内空间的机器人机身本体，所述机身本体上安装有分别与中央处理器相连接的摄像头、触摸显示屏，所述中央处理器还连接有存储器以及包括多个麦克风的麦克风阵列，所述摄像头用于采集会议参与者的面部图像；

所述麦克风阵列中各麦克风均配置有对应的发言编码，且每个麦克风分别对应于一位会议参与者，以分别对应采集各会议参与者的语音数据；

所述中央处理器用于对各会议参与者的语音数据依次进行语音识别和观点分析，并生成会议记录数据表和会议决策知识图谱；

所述触摸显示屏用于协助用户进行人机交互操作，以及显示来自中央处理器输出的数据信息；

所述存储器用于存储会议记录数据和会议决策知识图谱。

进一步地，所述会议记录数据包含对应于发言编码的会议参与者面部图像、会议参与者发言文本数据和会议参与者观点分析数据。

进一步地，所述中央处理器内设有语音识别单元、观点分析单元、数据整理单元和决策图谱生成单元，所述语音识别单元的输入端与麦克风阵列相连接，以获取对应于发言编码的语音数据，所述语音识别单元用于识别并输出对应于语音数据的文本数据，所述语音识别单元的输出端连接至观点分析单元，以对文本数据进行观点倾向性分析，得到对应的观点分析数据，所述观点分析单元分别与数据整理单元和决策图谱生成单元相连接，由数据整理单元生成会议记录数据、决策图谱生成单元输出会议决策知识图谱。

进一步地，所述数据整理单元还分别与摄像头和存储器相连接，以分别接收会议参与者的面部图像、将会议记录数据传输至存储器进行存储，所述决策图谱生成单元与存储器相连接，以将会议决策知识图谱传输至存储器进行存储。

进一步地，所述中央处理器的具体工作过程包括以下步骤：

s1、数据整理单元从摄像头获取对应于发言编码的会议参与者面部图像；

s2、语音识别单元从麦克风阵列获取对应于发言编码的语音数据，并对语音数据依次进行预处理、特征提取和语音解码搜索，以输出对应的文本数据给观点分析单元；

s3、观点分析单元对文本数据进行观点倾向分析，得到观点分析数据，并将该文本数据及对应的观点分析数据分别传输给数据整理单元和决策图谱生成单元；

s4、基于发言编码及对应的会议参与者面部图像、文本数据、观点分析数据，由数据整理单元生成会议记录数据表，并将该会议记录数据表传输给存储器；

s5、基于各会议参与者发言的文本数据和观点分析数据，由知识图谱生成单元生成会议决策知识图谱，并将该会议决策知识图谱传输给存储器。

进一步地，所述步骤s2中预处理具体是切除语音数据的首尾端静音以及使用移动窗函数对语音数据进行声音分帧操作；

特征提取具体是基于mel倒谱系数，将每一帧声音波形变成一个包含声音信息的多维向量；

语音解码搜索具体是根据预先训练好的声学模型和语言模型，结合字典对提取特征后的语音数据进行解码，从而得到对应的文本数据。

进一步地，所述步骤s3中观点分析单元对文本数据进行观点倾向分析的具体过程为：

s31、将文本数据分割为若干语义段；

s32、针对各语义段，采用条件随机场模型进行主观内容提取和观点倾向识别，以确定各语义段的观点倾向值；

s33、计算各语义段的权重值，结合各语义段的观点倾向值，即可得到该文本数据的观点分析数据。

进一步地，所述步骤s5中会议决策知识图谱中的实体包括会议参与者和观点分析数据，会议决策知识图谱中的关系为各会议参与者分别与各个观点分析数据之间到的关系。

进一步地，所述摄像头位于机身本体的顶部，所述摄像头通过滑轨安装于机身本体上，以实现摄像头高度位置的可调节，从而适应不同身高会议参与者的面部图像采集。

进一步地，所述麦克风具体为佩戴于会议参与者身上的领夹式麦克风或放置于会议桌对应会议参与者位置的桌面式麦克风。

与现有技术相比，本发明具有以下优点：

一、本发明基于现有的语音识别技术、观点倾向分析技术和知识图谱技术，结合摄像头和麦克风阵列分别获取会议参与者的面部图像、发言编码和发言语音数据，能够及时、自动、准确地将各会议参与者的发言进行记录和观点分析，并能构建出整个会议对应的会议决策知识图谱，以此提高了会议记录的效率和准确度，且能通过会议决策知识图谱有效帮助会议参与者快速得出会议结论。

二、本发明利用存储器存储会议记录数据和会议决策知识图谱，能够保证会议记录的可追溯性，同时结合触摸显示屏进行人机交互操作，通过触摸显示屏可以将会议记录数据以及会议决策知识图谱直观地显示给会议参与者，更有利于本发明在实际应用中的可操作性和便利性。

附图说明

图1为本发明的结构示意图；

图2为实施例的具体应用过程示意图；

图中标记说明：1、机身本体，2、中央处理器，3、摄像头，4、触摸显示屏，5、存储器，6、麦克风阵列，201、语音识别单元，202、观点分析单元，203、数据整理单元，204、决策图谱生成单元。

具体实施方式

下面结合附图和具体实施例对本发明进行详细说明。

实施例

如图1所示，一种智能决策会议机器人，包括放置于会议室内空间的机器人机身本体1，机身本体1外部安装有触摸显示屏4和摄像头3，机身本体1内部安装中央处理器2和存储器5，中央处理器2还与机身本体1外部的麦克风阵列6相连接，麦克风阵列6有多个分别配置有发言编码的麦克风组成，以在会议记录过程中对应不同会议参与者采集各会议参与者发言的语音数据，为便于实际应用，麦克风可以是佩戴于会议参与者身上的领夹式麦克风或放置于会议桌对应会议参与者位置的桌面式麦克风；

摄像头3用于采集会议参与者的面部图像，为适应不同身高会议参与者的面部图像采集，将摄像头3通过滑轨结构安装于机身本体1的顶部，从而可调节摄像头3的高度位置；

触摸显示屏4用于协助用户进行人机交互操作，以及显示来自中央处理器2输出的数据信息；

中央处理器2包括语音识别单元201、观点分析单元202、数据整理单元203和决策图谱生成单元204，其中，语音识别单元201的输入端与麦克风阵列6相连接，以获取对应于发言编码的语音数据，语音识别单元201用于识别并输出对应于语音数据的文本数据，语音识别单元201的输出端连接至观点分析单元202，以对文本数据进行观点倾向性分析，得到对应的观点分析数据，观点分析单元202分别与数据整理单元203和决策图谱生成单元204相连接，数据整理单元203还分别与摄像头3和存储器5相连接，决策图谱生成单元204与存储器5相连接，由数据整理单元203生成会议记录数据(包含对应于发言编码的会议参与者面部图像、会议参与者发言文本数据和会议参与者观点分析数据)、决策图谱生成单元204输出会议决策知识图谱(实体：会议参与者和观点分析数据，关系：各会议参与者分别与各个观点分析数据之间到的关系)，并均由存储器5进行存储。

将上述智能决策会议机器人应用于实际，如图2所示，其具体工作过程包括：

一、会议开始前：会议参与者依次与麦克风阵列6中各麦克风进行身份关联，即获得发言编码，之后通过摄像头3采集各会议参与者的面部图像，并将会议参与者的发言编码和对应的面部图像传输至数据整理单元203；

二、会议进行中：会议参与者正常发言进行讨论，麦克风阵列6实时采集来自各会议参与者的语音数据，并将采集的语音数据传输至语音识别单元201；

首先，语音识别单元201对语音数据依次进行预处理、特征提取和语音解码搜索，以输出对应的文本数据给观点分析单元202，其中，预处理具体是切除语音数据的首尾端静音以及使用移动窗函数对语音数据进行声音分帧操作；

特征提取具体是基于mel倒谱系数，将每一帧声音波形变成一个包含声音信息的多维向量；

语音解码搜索具体是根据预先训练好的声学模型和语言模型，结合字典对提取特征后的语音数据进行解码，从而得到对应的文本数据；

之后，观点分析单元202对文本数据进行观点倾向分析，得到观点分析数据，并将该文本数据及对应的观点分析数据分别传输给数据整理单元203和决策图谱生成单元204，其中，观点倾向分析主要包括以下过程：

将文本数据分割为若干语义段；

针对各语义段，采用条件随机场模型进行主观内容提取和观点倾向识别，以确定各语义段的观点倾向值；

计算各语义段的权重值，结合各语义段的观点倾向值，即可得到该文本数据的观点分析数据；

最后，基于发言编码及对应的会议参与者面部图像、文本数据、观点分析数据，数据整理单元203生成会议记录数据表，并将该会议记录数据表传输给存储器5；

基于各会议参与者发言的文本数据和观点分析数据，由知识图谱生成单元204生成会议决策知识图谱，并将该会议决策知识图谱传输给存储器5；

三、会议结束后：用户在触摸显示屏4上进行人机交互操作，比如查阅会议记录或会议决策知识图谱，中央处理器2接收到操作指令后，会对应从存储器5提取相应会议记录数据或会议决策知识图谱，并传输至触摸显示屏4，从而使用户可以直观看到本次会议相应的会议记录数据和相关观点分析结果，有利于用户快速得出会议结论。

综上所述，在使用本发明的过程中，首先需要明确会议参与者发言人的角色，即通过摄像头采集会议参与者的面部图像，并利用麦克风发言编码以关联会议参与者身份，发言时，机器人通过麦克风阵列采集发言人语音信息，机器人会自动识别语音信号、对发言人语音记录进行整理、观点分析和知识图谱构建；会议结束后，自动生成会议记录和决策知识图谱。用户可以随时检索并调阅会议记录及相关决策知识图谱，从而快速得出会议结论。因此，本发明能够协助高效地进行会议整理记录、检索浏览，实现会议智能分析，进一步降低会议决策风险，增强会议决策的科学性和正确性。

起点商标作为专业知识产权交易平台，可以帮助大家解决很多问题，如果大家想要了解更多知产交易信息请点击 【在线咨询】或添加微信 【19522093243】与客服一对一沟通，为大家解决相关问题。

此文章来源于网络,如有侵权,请联系删除