CN104038354A - 一种基于智能手机的会议交互方法 - Google Patents

一种基于智能手机的会议交互方法 Download PDF

Info

Publication number
CN104038354A
CN104038354A CN201410178026.5A CN201410178026A CN104038354A CN 104038354 A CN104038354 A CN 104038354A CN 201410178026 A CN201410178026 A CN 201410178026A CN 104038354 A CN104038354 A CN 104038354A
Authority
CN
China
Prior art keywords
information
speech
server
spokesman
meeting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410178026.5A
Other languages
English (en)
Inventor
於志文
胥皇
王柱
倪红波
郭斌
周兴社
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Northwestern Polytechnical University
Original Assignee
Northwestern Polytechnical University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Northwestern Polytechnical University filed Critical Northwestern Polytechnical University
Priority to CN201410178026.5A priority Critical patent/CN104038354A/zh
Publication of CN104038354A publication Critical patent/CN104038354A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种智能会议室前端交互设计方法,本发明服务器运行于PC,包含信息展示界面、语音播放和数据存储功能,接收来自客户端的用户信息并展示,实时播放客户端发送的语音流,整理并存储用户和语音信息。与会者发言前点击软件发言按钮,通过手机麦克风发言,服务器通过会议室音响设备播放发言,同时显示发言人信息。与会者通过手机客户端查看发言人信息,同时可存储发言人信息,与会者间可通过手机客户端互相交流。服务器将每个发言人的语音和个人信息以及与会者间的交互信息分别存放至会议记录数据库,并为智能会议室系统提供访问接口。智能会议室系统通过接口访问会议记录数据库,作为其语音数据记录,可简化发言人识别,交互分析等步骤。

Description

一种基于智能手机的会议交互方法
技术领域
本发明涉及人机交互领域,尤其涉及一种智能会议室前端交互设计方法。
背景技术
现代社会生活中,会议是信息和知识共享的重要渠道。语言交流是会议中最常见的交流方式,因此提高与会者的口头交流体验是提升会议效果的重要途径。传统的大型会议室一般通过传递麦克风的方式来满足与会者的发言要求,但是麦克风传递浪费大量时间,且会降低与会者的参与感和积极性。同时,与会者往往希望通过会议结交其它参会人员,但在传统会议环境下,陌生的与会者之间通过会议建立联系的途径少、效率低。
智能会议室是一种分析会议交互数据,以提高会议的组织和参与效率的系统。该类系统录制会场语音和视频,进行发言人识别和交互分析等。由于会场录音中,多个发言人同时或相间发言,导致发言人识别过程中需使用语音识别、声音定位等复杂算法。若将每个发言人的语音数据分别存放,同时绑定发言人信息,则可免去发言人识别,同时简化交互分析过程。
随着智能移动设备和无线网络技术的发展和普及,会议室普遍配备无线Wi-Fi网络和投影显示设备,智能手机成为人们普遍使用的通讯工具。利用智能移动设备提供的麦克风、用户界面和无线通信功能,结合会议场所的基础通信设施,可以更好的提升与会者的会议体验,简化与会者发言方式,促进与会者间交流,提高会议效率,为智能会议室系统提供包含语音的会议记录数据,简化发言人识别以及交互分析等步骤。
鉴于上述原因,本发明创作者经过长时间的研究和实践终于获得了本创作。
发明内容
本发明的目的在于提供一种智能会议室前端交互设计方法,以简化与会者发言方式,促进与会者间交流,提高会议效率,为智能会议室系统提供包含语音的会议记录数据,简化发言人识别以及交互分析等步骤。
为实现上述目的,本发明提供一种智能会议室前端交互设计方法,其所述方法的步骤如下:
S1、开放Wi-Fi接入信号,接入计算机和与会者使用的智能手机;
S2、计算机和与会者使用的智能手机运行服务器软件;
S3、与会者发言前点击软件发言按钮,通过手机麦克风发言,服务器通过会议室音响设备播放发言,同时显示发言人信息;
S4、与会者通过手机客户端查看发言人信息,同时可存储发言人信息,与会者间可通过手机客户端互相交流;
S5、服务器将每个发言人的语音和个人信息以及与会者间的交互信息、分别存放至会议记录数据库,并为智能会议室系统提供访问接口;
S6、智能会议室系统通过接口访问会议记录数据库,作为其语音数据记录,可简化发言人识别,交互分析等步骤。
所述S1中的会场包括封闭的会议室和开放环境的会议场所等。与计算机互联的投影仪或显示屏是现代会议场所常用设备。Wi-Fi接入是指会场通过无线路由器或者其它无线网络设备提供无线接入方法,使得其它无线接入设备连接该网络后,接入同一个局域网。本专利应用时要求会场计算机接入上述Wi-Fi局域网。
所述S2中的智能手机指运行Android或IOS等智能操作系统的手机,其必备的硬件包括:显示屏、麦克风、无线网络调制解调器等。
本发明客户端软件运行于智能手机平台,包含语音传递、发言人信息查询及即时通信功能,通过手机麦克风采集用户语音并由Wi-Fi传递至服务器,用户可通过客户端软件互相发送消息。本专利服务器运行于PC,通过TCP协议监听来自客户端的用户连接请求,包含信息展示界面、语音播放和数据存储功能,接收来自客户端的用户信息并展示,实时播放客户端发送的语音流,整理并存储用户和语音信息。
所述S1中对应服务器软件,通过TCP协议获取客户端用户信息并在软件界面上显示,通过RTP协议监听来自客户端的实时语音请求并在服务器运行的计算机上播放。本专利对应客户端软件,通过TCP协议向服务器发送用户自定义信息,通过RTP协议向服务器发送从手机麦克风采集的实时语音信息。
用户自定义信息由用户在客户端界面上编辑设置。
所述S4中的发言人信息由服务器通过TCP协议向客户端推送,客户端同时通过TCP协议定时向服务器查询发言人信息。客户端界面同步显示发言人信息,用户可存储该信息备用。与会者可通过手机客户端向其它与会者发送消息,与会者间通过客户端可进行文字交流。
所述S5中的服务器将发言人的音轨和其个人信息以及发言时间绑定,对每个发言人分别形成一个track,存放至数据库。同时,用户通过客户端进行交互的信息由客户端发送至服务器,服务器存储至数据库。服务器提供所有数据访问接口。
所述S6中的智能会议室系统在进行会议分析时,需记录会场语音和交互视频,进行发言人识别以及交互分析。本专利为智能会议系统提供数据访问接口,可作为其语音记录库。因数据库中发言和交互数据均与与会者个人信息绑定,因此不再需要进行发言人识别,同时,可以简化交互分析过程。
与现有技术相比较本发明的有益效果在于:本发明提出了一种智能会议室前端交互设计方法,与传统会议交互方法相比,可以更好的提升与会者的会议体验,简化与会者发言方式,促进与会者间交流,提高会议效率,为智能会议室系统提供包含语音的会议记录数据,简化发言人识别以及交互分析等步骤。
附图说明
图1为本发明实例中智能会议室前端交互设计示意图;
图2为本发明实例中的客户端连接服务器界面图;
图3为本发明实例中的客户端用户信息编辑界面图;
图4为本发明实例中的客户端发言人信息界面图;
图5为本发明实例中的客户端联系人信息界面图;
图6为本发明实例中的客户端用户间交互信息界面图;
图7为智能会议室系统结构图;
图8为本发明对应系统结构图。
具体实施方式
以下结合附图,对本发明上述的和另外的技术特征和优点作更详细的说明。
请参阅图1所示,本发明智能会议室前端交互设计方法的具体过程为:
步骤1,会场开放Wi-Fi接入信号,并将连接投影或显示屏设备的计算机接入该Wi-Fi所属局域网。
会场包括封闭的会议室和开放环境的会议场所等。与计算机互联的投影仪或显示屏是现代会议场所常用设备。Wi-Fi接入是指会场通过无线路由器或者其它无线网络设备提供无线接入方法,使得其它无线接入设备连接该网络后,接入同一个局域网。本专利应用时要求会场计算机接入上述Wi-Fi局域网。
步骤2,本发明对应的智能会议室前端系统由服务器和客户端共同构成,系统结构图如附图8所示。会议室计算机运行服务器软件,与会者使用智能手机接入上述Wi-Fi局域网,并运行客户端软件,会议室计算机同步显示已连接用户信息。本发明客户端软件运行于智能手机平台,包含语音传递、发言人信息查询及即时通信功能,通过手机麦克风采集用户语音并由Wi-Fi传递至服务器,用户可通过客户端软件互相发送消息。本专利服务器运行于PC,包含信息展示界面、语音播放和数据存储功能,接收来自客户端的用户信息并展示,实时播放客户端发送的语音流,整理并存储用户和语音信息。
智能手机指运行Android或IOS等智能操作系统的手机,其必备的硬件包括:显示屏、麦克风、无线网络调制解调器等。
本发明客户端软件运行于智能手机平台,包含语音传递、发言人信息查询及即时通信功能,通过手机麦克风采集用户语音并由Wi-Fi传递至服务器,用户可通过客户端软件互相发送消息。本专利服务器运行于PC,通过TCP协议监听来自客户端的用户连接请求,包含信息展示界面、语音播放和数据存储功能,接收来自客户端的用户信息并展示,实时播放客户端发送的语音流,整理并存储用户和语音信息。
与会者连接会场服务器后,客户端界面显示如附图2所示。
步骤3,与会者发言时点击软件发言按钮,通过手机麦克风发言,服务器通过会议室音响设备播放发言,同时显示发言人信息。
本专利对应服务器软件,通过TCP协议获取客户端用户信息并在软件界面上显示,通过RTP协议监听来自客户端的实时语音请求并在服务器运行的计算机上播放。本专利对应客户端软件,通过TCP协议向服务器发送用户自定义信息,通过RTP协议向服务器发送从手机麦克风采集的实时语音信息。客户端发言人信息显示如附图5所示。
用户自定义信息由用户在客户端界面上编辑设置,编辑界面如附图3所示。
步骤4,与会者通过手机客户端查看发言人信息,同时可存储发言人信息,与会者间可通过手机客户端互相交流。
发言人信息由服务器通过TCP协议向客户端推送,客户端同时通过TCP协议定时向服务器查询发言人信息。客户端界面同步显示发言人信息,用户可存储发言人信息备用,存储的发言人信息以列表的方式呈现,如附图5所示。与会者可通过手机客户端向其它与会者发送消息,与会者间通过客户端可进行文字交流,交流的方式如附图6所示。
步骤5,服务器将每个发言人的语音和个人信息以及与会者间的交互信息分别存放至会议记录数据库,并为智能会议室系统提供访问接口。
服务器将发言人的音轨和其个人信息以及发言时间绑定,对每个发言人分别形成一个track,存放至数据库。同时,用户通过客户端进行交互的信息由客户端发送至服务器,服务器存储至数据库。服务器提供所有数据访问接口。
步骤6,智能会议室系统的通用架构如附图7所示,包括信息获取、会议识别和信息获取等三个主要模块,系统的主要功能为,通过分析会议现场记录,对会议内容进行索引和注释等,帮助会议组织者和参与者提高会议效率。智能会议室系统在进行会议分析时,需通过麦克风和摄像头记录会场语音和交互视频,并进行发言人识别以及交互分析。本专利为智能会议系统提供数据访问接口,可作为其语音记录库。因数据库中发言和交互数据均与与会者个人信息绑定,因此不再需要进行发言人识别,且发言人辨别正确率为100%,从而可以简化会议交互分析过程。
本发明提出了一种智能会议室前端交互设计方法,与传统会议交互方法相比,可以更好的提升与会者的会议体验,简化与会者发言方式,促进与会者间交流,提高会议效率,为智能会议室系统提供包含语音的会议记录数据,简化发言人识别以及交互分析等步骤。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (6)

1.一种智能会议室前端交互设计方法,其特征在于,所述方法的步骤如下:
S1、开放Wi-Fi接入信号,接入计算机和与会者使用的智能手机;
S2、计算机和与会者使用的智能手机运行服务器软件;
S3、与会者发言前点击软件发言按钮,通过手机麦克风发言,服务器通过会议室音响设备播放发言,同时显示发言人信息;
S4、与会者通过手机客户端查看发言人信息,同时可存储发言人信息,与会者间可通过手机客户端互相交流;
S5、服务器将每个发言人的语音和个人信息以及与会者间的交互信息分别存放至会议记录数据库,并为智能会议室系统提供访问接口;
S6、智能会议室系统通过接口访问会议记录数据库,作为其语音数据记录,可简化发言人识别,交互分析等步骤。
2.根据权利要求1所述的一种基于智能手机的会议交互方法,其特征在于,所述S1中的计算机连接有投影或显示屏设备。
3.根据权利要求1所述的一种智能会议室前端交互设计方法,其特征在于,所述S2中的智能手机指运行Android或IOS等智能操作系统的手机。
4.根据权利要求1所述的一种智能会议室前端交互设计方法,其特征在于,所述S2中的服务器软件包含语音传递、发言人信息查询及即时通信功能,通过手机麦克风采集用户语音并由Wi-Fi发送至服务器,用户可通过客户端软件互相发送消息。
5.根据权利要求1所述的一种智能会议室前端交互设计方法,其特征在于,所述S5中的服务器将发言人的音轨和其个人信息以及发言时间绑定,对每个发言人分别形成一个track,存放至数据库;同时,用户通过客户端进行 交互的信息由客户端发送至服务器,服务器存储至数据库;服务器提供所有数据访问接口。
6.根据权利要求1所述的一种智能会议室前端交互设计方法,其特征在于,所述S6中智能会议室系统在进行交互分析时,需记录会场语音和交互视频,进行发言人识别以及交互分析。
CN201410178026.5A 2014-04-25 2014-04-25 一种基于智能手机的会议交互方法 Pending CN104038354A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410178026.5A CN104038354A (zh) 2014-04-25 2014-04-25 一种基于智能手机的会议交互方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410178026.5A CN104038354A (zh) 2014-04-25 2014-04-25 一种基于智能手机的会议交互方法

Publications (1)

Publication Number Publication Date
CN104038354A true CN104038354A (zh) 2014-09-10

Family

ID=51468951

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410178026.5A Pending CN104038354A (zh) 2014-04-25 2014-04-25 一种基于智能手机的会议交互方法

Country Status (1)

Country Link
CN (1) CN104038354A (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104579710A (zh) * 2015-01-16 2015-04-29 四川联友电讯技术有限公司 碎片化异步会议系统会议成员发布语音信息的方法
CN104579715A (zh) * 2015-01-16 2015-04-29 四川联友电讯技术有限公司 通话质量高的电话会议系统及方法
CN105376516A (zh) * 2015-10-19 2016-03-02 深圳市航安网络科技有限公司 一种移动视频会议系统及其实现方法
CN105430628A (zh) * 2015-12-15 2016-03-23 邢海安 小型局域网式多方会议召开装置
CN105491540A (zh) * 2015-12-15 2016-04-13 邢海安 智能化单位内部局域网系统
CN107544307A (zh) * 2017-09-23 2018-01-05 南京律智诚专利技术开发有限公司 一种智能会议室系统
CN109068088A (zh) * 2018-09-20 2018-12-21 明基智能科技(上海)有限公司 基于用户便携终端的会议交互方法、装置及系统
CN109525800A (zh) * 2018-11-08 2019-03-26 江西国泰利民信息科技有限公司 一种远程会议语音识别数据传输方法
CN109753208A (zh) * 2017-11-06 2019-05-14 北京仁光科技有限公司 一种智能会议方法和智能会议系统
CN109920428A (zh) * 2017-12-12 2019-06-21 杭州海康威视数字技术股份有限公司 一种笔录录入方法、装置、电子设备及存储介质
CN110730323A (zh) * 2019-09-06 2020-01-24 平安科技(深圳)有限公司 会议交互信息处理方法、装置、计算机装置及存储介质
CN111601069A (zh) * 2020-05-13 2020-08-28 中国三峡建设管理有限公司 智能会议系统
CN112291139A (zh) * 2020-11-30 2021-01-29 重庆满集网络科技有限公司 基于xmpp协议的即时通讯方法及系统
CN113271432A (zh) * 2021-06-30 2021-08-17 北京二六三企业通信有限公司 发送和接收说话者列表的方法及装置
CN113517002A (zh) * 2020-03-25 2021-10-19 钉钉控股(开曼)有限公司 信息处理方法、装置以及系统、会议端、服务器
CN114666454A (zh) * 2020-12-23 2022-06-24 沈阳新松机器人自动化股份有限公司 一种智能会议系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050033805A1 (en) * 2001-09-14 2005-02-10 Hideharu Fujiyama Network information processing system and information processing method
CN101438532A (zh) * 2006-05-05 2009-05-20 艾利森电话股份有限公司 用于管理虚拟会议的方法和设备

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050033805A1 (en) * 2001-09-14 2005-02-10 Hideharu Fujiyama Network information processing system and information processing method
CN101438532A (zh) * 2006-05-05 2009-05-20 艾利森电话股份有限公司 用于管理虚拟会议的方法和设备

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
ZHIWEN YU等: "《Smart meeting systems: a survey of state-of-the-art and open issues》", 《ACM COMPUTING SURVEYS》 *
李子竞等: "《一种基于智能手机的会议系统》", 《计算机应用》 *
赵晓强: "《基于Wi-Fi的无线多功能会议信息系统设计与实现》", 《中国优秀硕士学位论文全文数据库信息科技辑》 *

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104579715A (zh) * 2015-01-16 2015-04-29 四川联友电讯技术有限公司 通话质量高的电话会议系统及方法
CN104579710B (zh) * 2015-01-16 2018-11-09 四川联友电讯技术有限公司 碎片化异步会议系统
CN104579710A (zh) * 2015-01-16 2015-04-29 四川联友电讯技术有限公司 碎片化异步会议系统会议成员发布语音信息的方法
CN105376516A (zh) * 2015-10-19 2016-03-02 深圳市航安网络科技有限公司 一种移动视频会议系统及其实现方法
CN105430628A (zh) * 2015-12-15 2016-03-23 邢海安 小型局域网式多方会议召开装置
CN105491540A (zh) * 2015-12-15 2016-04-13 邢海安 智能化单位内部局域网系统
CN107544307A (zh) * 2017-09-23 2018-01-05 南京律智诚专利技术开发有限公司 一种智能会议室系统
CN109753208A (zh) * 2017-11-06 2019-05-14 北京仁光科技有限公司 一种智能会议方法和智能会议系统
CN109920428A (zh) * 2017-12-12 2019-06-21 杭州海康威视数字技术股份有限公司 一种笔录录入方法、装置、电子设备及存储介质
CN109068088A (zh) * 2018-09-20 2018-12-21 明基智能科技(上海)有限公司 基于用户便携终端的会议交互方法、装置及系统
CN109525800A (zh) * 2018-11-08 2019-03-26 江西国泰利民信息科技有限公司 一种远程会议语音识别数据传输方法
CN110730323A (zh) * 2019-09-06 2020-01-24 平安科技(深圳)有限公司 会议交互信息处理方法、装置、计算机装置及存储介质
CN110730323B (zh) * 2019-09-06 2023-03-21 平安科技(深圳)有限公司 会议交互信息处理方法、装置、计算机装置及存储介质
CN113517002A (zh) * 2020-03-25 2021-10-19 钉钉控股(开曼)有限公司 信息处理方法、装置以及系统、会议端、服务器
CN111601069A (zh) * 2020-05-13 2020-08-28 中国三峡建设管理有限公司 智能会议系统
CN112291139A (zh) * 2020-11-30 2021-01-29 重庆满集网络科技有限公司 基于xmpp协议的即时通讯方法及系统
CN112291139B (zh) * 2020-11-30 2022-11-29 重庆满集网络科技有限公司 基于xmpp协议的即时通讯方法及系统
CN114666454A (zh) * 2020-12-23 2022-06-24 沈阳新松机器人自动化股份有限公司 一种智能会议系统
CN113271432A (zh) * 2021-06-30 2021-08-17 北京二六三企业通信有限公司 发送和接收说话者列表的方法及装置
CN113271432B (zh) * 2021-06-30 2022-11-18 北京二六三企业通信有限公司 发送和接收说话者列表的方法及装置

Similar Documents

Publication Publication Date Title
CN104038354A (zh) 一种基于智能手机的会议交互方法
CN101969467B (zh) 在镜像设备中提供客户服务的方法
CN104881237B (zh) 一种网络互动方法及客户端
CN103078986B (zh) 移动终端的通话信息保存方法、装置和移动终端
CN105376515B (zh) 用于视频通讯的通讯信息的呈现方法、装置及系统
WO2014101472A1 (zh) 一种视频交流的信息处理方法及装置
CN110139062A (zh) 一种视频会议记录的创建方法、装置及终端设备
CN107911646A (zh) 一种会议分享、生成会议记录的方法及装置
US20140136999A1 (en) Multi-User Interactive Virtual Environment System and Method
CN106961421B (zh) 一种Android系统服务端、远程桌面音频重定向方法及系统
US20100195812A1 (en) Audio transforms in connection with multiparty communication
JP2007189671A (ja) 話し手を示す(who−is−speaking)(wis)信号アプリケーションを可能にするためのシステムおよび方法
CN106303590A (zh) 邀请观看视频影片的实现方法和装置
CN104836981A (zh) 智能会议的协作方法和会议终端
CN103368929A (zh) 一种视频聊天方法及系统
CN109361527B (zh) 语音会议记录方法及系统
CN108040061A (zh) 一种云会议直播方法
CN106385603A (zh) 媒体文件的消息传输方法和装置
CN110246501B (zh) 用于会议记录的语音识别方法及系统
CN110493627A (zh) 多媒体内容同步方法及装置
CN105302424A (zh) 一种多维动态标记的录制并回放的方法与系统
CN103561106A (zh) 远程教学及会议系统和方法
CN103731647A (zh) 数字化监督监控指挥系统
CN104751868B (zh) 语音录制方法、通话录音回放方法以及相关装置和系统
CN103902040A (zh) 用于移动终端的处理装置、处理方法和电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20140910

RJ01 Rejection of invention patent application after publication