CN110556112A - 操作辅助装置、操作辅助系统以及操作辅助方法 - Google Patents

操作辅助装置、操作辅助系统以及操作辅助方法 Download PDF

Info

Publication number
CN110556112A
CN110556112A CN201910437152.0A CN201910437152A CN110556112A CN 110556112 A CN110556112 A CN 110556112A CN 201910437152 A CN201910437152 A CN 201910437152A CN 110556112 A CN110556112 A CN 110556112A
Authority
CN
China
Prior art keywords
display device
input terminal
terminal
input terminals
person
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910437152.0A
Other languages
English (en)
Other versions
CN110556112B (zh
Inventor
佐藤康二
栋朝洋树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN110556112A publication Critical patent/CN110556112A/zh
Application granted granted Critical
Publication of CN110556112B publication Critical patent/CN110556112B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/279—Recognition of textual entities
    • G06F40/284—Lexical analysis, e.g. tokenisation or collocates
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L2015/088—Word spotting

Abstract

本发明提供一种操作辅助装置、操作辅助系统、以及操作辅助方法。操作辅助装置辅助显示设备的操作。操作辅助装置具备语音识别部和命令生成部。语音识别部将语音数据转换为文本信息。命令生成部生成激活显示设备所具备的多个输入端子中的至少一个的切换命令。命令生成部在表示人物的关键词包含于文本信息的情况下，从显示设备所具备的多个输入端子之中，确定与人物相关联的输入端子。命令生成部生成激活确定的输入端子的切换命令。

Description

操作辅助装置、操作辅助系统以及操作辅助方法
技术领域
本发明涉及辅助用户对显示设备的操作的操作辅助装置、操作辅助系统以及操作辅助方法。
背景技术
在专利文献1中公开了利用语音识别技术来辅助用户的操作的广播接收装置。专利文献1中公开的广播接收装置将与用户语音对应的外部输入装置所连接的外部输入端子激活，显示从与用户语音对应的外部输入装置接收的视频。具体而言，专利文献1所公开的广播接收装置具备：多个外部输入端子、呼叫语设定部、保存部、语音识别部、控制部、以及显示器部。另外，广播接收装置与服务器连接并且能与服务器通信。
在各外部输入端子连接有外部输入装置。呼叫语设定部对各外部输入装置的呼叫语进行设定。保存部将呼叫语和与呼叫语对应的外部输入装置所连接的外部输入端子匹配后进行保存。语音识别部将用户语音转换为数字信号后发送到服务器。服务器基于数字信号生成与用户语音对应的文本信息。
控制部基于从服务器接收到的文本信息来判断在用户语音中是否包括呼叫语，在用户语音中包括呼叫语的情况下，将与呼叫语对应的外部输入端子激活，控制显示部使其显示与呼叫语对应的外部输入端子所接收的视频。专利文献1中公开的呼叫语例如是视频、DVD、蓝光。
现有技术文献
专利文献
专利文献1：日本特开2014-021493号公报
然而，在专利文献1所公开的广播接收装置中，即使用户发出表示外部输入装置的持有者那样的人物的关键词，也不切换显示的视频。
发明内容
本发明是鉴于所述课题而完成的，其目的在于，提供一种能够根据表示人物的关键词切换显示设备显示的图像信息的操作辅助装置、操作辅助系统、以及操作辅助方法。
本发明的操作辅助装置辅助显示设备的操作。所述操作辅助装置具备语音识别部和命令生成部。所述语音识别部将语音数据转换为文本信息。所述命令生成部生成激活所述显示设备所具备的多个输入端子中的至少一个的切换命令。所述命令生成部在表示人物的关键词包含于所述文本信息的情况下，从所述显示设备所具备的所述多个输入端子之中，确定与所述人物相关联的输入端子。所述命令生成部生成激活确定的所述输入端子的所述切换命令。
本发明的操作辅助系统具备显示设备和辅助上述显示设备的操作的操作辅助装置。上述操作辅助装置具备语音识别部和指令生成部。上述语音识别部将语音数据转换为文本信息。所述命令生成部生成激活所述显示设备所具备的多个输入端子中的至少一个的切换命令。所述命令生成部在表示人物的关键词包含于所述文本信息的情况下，从所述显示设备所具备的所述多个输入端子之中，确定与所述人物相关联的输入端子。所述命令生成部生成激活确定所述输入端子的所述切换命令。所述显示设备显示通过所述切换命令而被激活的所述输入端子接收的图像信息。
本发明的操作辅助方法为辅助显示设备的操作方法。所述操作辅助方法包含：语音识别步骤，将语音数据转换为文本信息；命令生成步骤，生成激活所述显示设备所具备的多个输入端子中的至少一个的切换命令；以及显示通过所述切换命令而被激活的所述输入端子接收的图像信息的步骤。所述命令生成步骤包含：在表示人物的关键词包含于所述文本信息的情况下，从所述显示设备所具备的所述多个输入端子之中，确定与所述人物相关联的输入端子的步骤；以及生成激活确定的所述输入端子的所述切换命令的步骤。
根据本发明，能够根据表示人物的关键词切换显示设备显示的图像信息。
附图说明
图1为表示本发明的实施方式所涉及的会议系统的图。
图2为表示本发明的实施方式所涉及的会议辅助服务器的结构的图。
图3为表示本发明的实施方式所涉及的第一终端设备的结构的图。
图4为表示本发明的实施方式所涉及的第二终端设备的结构的图。
图5为表示本发明的实施方式所涉及的麦克风/扬声器装置的结构的图。
图6为表示本发明的实施方式所涉及的显示设备的结构的图。
图7为表示本发明的实施方式所涉及的注册画面的图。
图8为表示本发明的实施方式所涉及的管理表的图。
图9为表示本发明的实施方式所涉及的第一关键词组的图。
图10为表示本发明的实施方式所涉及的第二关键词组的图。
图11为表示本发明的实施方式所涉及的第一注册处理的图。
图12为表示本发明的实施方式所涉及的第二注册处理的图。
图13为表示本发明的实施方式所涉及的删除处理的图。
图14为表示本发明的实施方式所涉及的显示切换处理的图。
图15为表示本发明的实施方式所涉及的显示切换处理的图。
图16为表示本发明的实施方式所涉及的显示画面设定处理的图。
图17为表示本发明的其他实施方式所涉及的显示画面设定处理的图。
具体实施方式
以下，参照附图说明本发明的实施方式。不过，本发明不限于以下的实施方式。针对图中的同一或相当部分附上同一附图标记而不进行反复说明。另外，针对说明重复的部位有时适当地省略说明。
图1是表示本实施方式的会议系统1的图。会议系统1在会议中使用。会议系统1是操作辅助系统的一例。如图1所示，会议系统1具备：会议辅助服务器2、接入点3、第一终端设备4～第三终端设备6、麦克风/扬声器装置7以及显示设备8。
在本实施方式中，会议辅助服务器2是操作辅助装置的一例，辅助显示设备8的操作。具体而言，会议辅助服务器2在用户发出的语音中包含预先注册的关键词的情况下，根据用户发出的语音切换显示设备8的显示画面。另外，以下的说明中，有时将用户发出的语音记作“用户语音”。
接入点3将互联网线路9和LAN(Local Area Network：局域网)缆线10连接。LAN缆线10连接第一终端设备4～第三终端设备6和显示设备8。会议辅助服务器2经由网络线路9、接入点3、以及LAN线缆10，在第一终端设备4～第三终端设备6之间实施通信。
接入点3经由无线LAN与麦克风/扬声器装置7连接。会议辅助服务器2经由互联网线路9、接入点3以及无线LAN在与麦克风/扬声器装置7之间进行通信。
另外，接入点3也可以经由无线LAN与第一终端设备4～第三终端设备6连接，也可以经由LAN线缆与麦克风/扬声器装置7连接。
第一终端设备4～第三终端设备6连接到显示设备8，将图像信息输出到显示设备8。第一终端设备4经由LAN线缆10在显示设备8之间实施通信。另外，第一终端设备4也可以经由无线LAN在显示设备8之间实施通信。
第一终端设备4只要能够输出图像信息，则并不特别限定。在本实施方式中，第一终端设备4为会议室PC(个人计算机)。在会议室PC中能使用通用的个人计算机。
第二终端设备5和第三终端设备6只要能输出图像信息即可，没有特别限定。第二终端设备5和第三终端设备6例如可以是输出经由互联网线路9从外部的服务器取得的视频信息的设备。或者，第二终端设备5和第三终端设备6可以是通用的个人计算机、摄像机、DVD播放装置或蓝光播放装置。在本实施方式中，第二终端设备5以及第三终端设备6为访客PC。
麦克风/扬声器装置7是语音收集装置的一例，对用户发出的语音进行收集，将收集到的语音转换为语音数据(数字数据)，将其向会议辅助服务器2发送。另外，麦克风/扬声器装置7基于从会议辅助服务器2接收到的语音数据(数字数据)输出语音。
显示设备8显示图像信息。具体地说，显示设备8具备第一输入端子81～第三输入端子83。第一输入端子81～第三输入端子83连接着能输出图像信息的设备。第一输入端子81～第三输入端子83例如是D-SUB端子、HDMI(注册商标)端子或Displayport。
在本实施方式中，第一输入端子81连接着第一终端设备4。第二输入端子82连接着第二终端设备5。第三输入端子83连接着第三终端设备6。显示设备8激活第一输入端子81～第三输入端子83中的至少一个，并显示激活的输入端子接收到的图像信息。例如，在激活第一输入端子81的情况下，显示设备8显示第一输入端子81从第一终端设备4接收的图像信息。
接下来，参照图1和图2说明会议辅助服务器2的构成。图2是表示会议辅助服务器2的构成的图。如图2所示，会议辅助服务器2具备通信部21、语音识别部22、存储部23以及控制部24。
通信部21与网络线路9(图1)连接。例如，通信部21具备LAN板或LAN模块。通信部21对第一终端设备4～第三终端设备6(图1)以及麦克风/扬声器装置7(图1)之间的通信进行控制。
语音识别部22将从麦克风/扬声器装置7(图1)接收到的语音数据通过语音识别技术转换为文本信息(以下有时记载为“识别结果文本”)。语音识别部22例如具备语音识别LSI(Large Scale Integration：大规模集成电路)。
存储部23例如具备RAM(Random Access Memory：随机存取存储器)以及ROM(ReadOnly Memory：只读存储器)那样的半导体存储器。存储部23还具备HDD(Hard Disk Drive：硬盘驱动器)那样的存储设备。存储部23存储控制部24所执行的控制程序。本实施方式的存储部23还存储管理表231、第一关键词组232、以及第二关键词组233。
在管理表231中，使显示设备8的第一输入端子81～第三输入端子83(图1)与人物相关联。本实施方式中，人物包含：第一终端设备4～第三终端设备6(图1)的各自的持有者和分别登录于第一终端设备4～第三终端设备6(图1)的登录用户。更具体而言，在管理表231中注册表示各持有者的标识符和表示各登录用户的标识符。
第一关键词组232包含表示各持有者的关键词。第二关键词组233包含表示各登录用户的关键词。本实施方式中，第一关键词组232包含表示各持有者的标识符的关键词。第二关键词组233包含表示各登录用户的标识符的关键词。
持有者的标识符只要能够对持有者进行标识，则并不特别限定。例如，持有者的标识符可以是持有者的姓氏、姓名、名字、或任意设定的持有者的别名。同样地，登录用户的标识符只要能够对登录用户进行标识，则并不特别限定。例如，登录用户的标识符可以是登录用户的姓氏、姓名、名字、或任意设定的登录用户的别名。
控制部24例如具备CPU(Central Processing Unit：中央处理单元)或MPU(MicroProcessing Unit：微处理单元)那样的处理器。此外，控制部24(计算机)基于存储部23所存储的控制程序(计算机程序)，对会议辅助服务器2的动作进行控制。在本实施方式中，控制部24通过执行控制程序而作为判定部25以及命令生成部26发挥功能。
判定部25参照第一关键词组232以及第二关键词组233，判定识别结果文本信息所包含的关键词。在判定部25对识别结果文本信息所包含的关键词进行了判定的情况下，命令生成部26生成与通过判定部25判定的关键词对应的切换命令。命令生成部26在生成切换命令时，经由通信部21将生成的切换命令发送至第一终端设备4(图1)。切换命令表示激活显示设备8的第一输入端子81～第三输入端子83(图1)中的至少一个的命令。
详细而言，在识别结果文本信息包含表示持有者的标识符或登录用户的标识符的关键词的情况下，命令生成部26参照管理表231，从显示设备8的第一输入端子81～第三输入端子83(图1)之中，确定与识别结果文本信息所包含的关键词对应的输入端子。具体而言，命令生成部26确定与识别结果文本信息所表示的持有者的标识符或登录用户的标识符相关联的输入端子。命令生成部26在确定输入端子时，生成激活确定的输入端子的切换命令。例如，在识别结果文本信息表示与第一终端设备4(图1)的持有者或登录于第一终端设备4(图1)的用户对应的标识符的情况下，命令生成部26生成激活第一输入端子81(图1)的切换命令。
另一方面，在判定部25无法对识别结果文本信息所包含的关键词进行判定的情况下，控制部24执行语音数据输出处理。具体而言，控制部24经由通信部21将预设的语音数据发送至麦克风/扬声器装置7。预设的语音数据存储于存储部23。预设的语音数据表示用于使用户再次发声的消息。例如，消息的内容为“请再说一次”。
以上，参照图1和图2说明了会议辅助服务器2。此外，图2所示的会议辅助服务器2具备语音识别部22，但控制部24也可以具有语音识别部22的功能。在该情况下，可省略语音识别部22。
接下来参照图1以及图3，对第一终端设备4(会议室PC)的结构进行说明。图3为表示第一终端设备4的结构的图。如图3所示，第一终端设备4具备：输出端子41、通信部42、操作部43、显示部44、存储部45、以及控制部46。
输出端子41输出图像信息。输出端子41连接到显示设备8的第一输入端子81(图1)。在显示设备8的第一输入端子81(图1)实现了激活的情况下，由显示设备8(图1)显示从输出端子41输出的图像信息。
通信部42连接到LAN缆线10(图1)。通信部42例如具备LAN板或LAN模块。通信部42控制与会议辅助服务器2(图1)之间的通信。此外，通信部42对显示设备8(图1)之间的通信进行控制。具体而言，通信部42从会议辅助服务器2(图1)接收切换命令。此外，通信部42将切换命令发送至显示设备8(图1)。
操作部43由用户操作，受理来自用户的指示。操作部43将与用户的操作相应的信号输出到控制部46。其结果是，第一终端设备4执行与操作部43所受理的操作相应的动作。操作部43例如具备定位设备、键盘。此外，操作部43也可以具备触摸传感器。触摸传感器与显示部44的显示面重叠。例如，用户对操作部43进行操作来登录到第一终端设备4。此外，用户对操作部43进行操作而从第一终端设备4退出。
显示部44显示各种画面。本实施方式中，显示部44显示参照图6后述的注册画面60。注册画面60为用户接口画面，并受理各种信息的注册。显示部44例如为液晶显示器或有机EL(electroluminescence)显示器。另外，在触控传感器与显示部44的显示面重叠的情况下，显示部44作为触控显示器发挥功能。
存储部45具备例如RAM以及ROM那样的半导体存储器。而且，存储部45具备HDD那样的存储装置。存储部45存储控制部46执行的控制程序。本实施方式的存储部45还存储显示切换控制程序451以及用户名通知程序452。
显示切换控制程序451为，用于将从会议辅助服务器2(图1)接收到的切换命令向显示设备8(图1)发送的程序。用户名通知程序452为，用于将登录于第一终端设备4的用户的标识符向会议辅助服务器2(图1)发送的程序。
控制部46具备例如CPU那样的处理器。此外，控制部46(计算机)基于存储部45所存储的控制程序(计算机程序)，对第一终端设备4的动作进行控制。
在本实施方式中，控制部46通过执行显示切换控制程序451，而将从会议辅助服务器2(图1)接收到的切换命令发送至显示设备8(图1)。此外，控制部46通过执行用户名通知程序452，而将表示登录于第一终端设备4的用户的标识符的信息发送至会议辅助服务器2(图1)。而且，控制部46通过执行用户名通知程序452，而将表示从第一终端设备4退出的用户的标识符的信息发送至会议辅助服务器2(图1)。
另外，控制部46也可以将显示部44所显示的图像的图像数据，经由输出端子41(图1)以及LAN线缆10(图1)发送至第一输入端子81(图1)，将显示部44所显示的图像显示于显示设备8(图1)。
接下来参照图1以及图4，对第二终端设备5(访客PC)的结构进行说明。图4为表示第二终端设备5的结构的图。如图4所示，第二终端设备5具备：输出端子51、通信部52、操作部53、显示部54、存储部55、以及控制部56。
输出端子51输出图像信息。输出端子51与显示设备8的第二输入端子82(图1)连接。在显示设备8的第二输入端子82(图1)被激活的情况下，通过显示设备8(图1)显示从输出端子51输出的图像信息。
通信部52与LAN线缆10(图1)连接。通信部52具备例如LAN板或LAN模块。通信部52对会议辅助服务器2(图1)之间的通信进行控制。具体而言，通信部52将表示登录于第二终端设备5的用户的标识符的信息发送至会议辅助服务器2(图1)。而且，通信部52将表示从第二终端设备5退出的用户的标识符的信息发送至会议辅助服务器2(图1)。
操作部53由用户来操作，并受理来自用户的指示。操作部53将与用户的操作相应的信号输出至控制部56。其结果，第二终端设备5执行与操作部53受理到的操作相应的动作。操作部53具备例如定位设备、键盘。另外，操作部53也可以具备触控传感器。触控传感器与显示部54的显示面重叠。例如，用户对操作部53进行操作来登录第二终端设备5。此外，用户对操作部53进行操作而从第二终端设备5退出。
显示部54显示各种画面。显示部54例如为液晶显示器或有机EL显示器。另外，在触控传感器与显示部54的显示面重叠的情况下，显示部54作为触控显示器发挥功能。
存储部55具备例如RAM以及ROM那样的半导体存储器。而且，存储部55具备HDD那样的存储装置。存储部55存储控制部56执行的控制程序。此外，存储部55存储用户名通知程序452。
控制部56具备例如CPU那样的处理器。此外，控制部56(计算机)基于存储部55所存储的控制程序(计算机程序)，对第二终端设备5的动作进行控制。
在本实施方式中，控制部56通过执行用户名通知程序452，将表示登录于第二终端设备5的用户的标识符的信息发送至会议辅助服务器2(图1)。而且，控制部56通过执行用户名通知程序452，而将从第二终端设备5退出的用户的标识符示信息发送至会议辅助服务器2(图1)。
以上，对第二终端设备5进行了说明。另外，由于第三终端设备6的结构与第二终端设备5相同，因此省略其说明。
接下来参照图1以及图5，对麦克风/扬声器装置7的结构进行说明。图5为表示麦克风/扬声器装置7的结构的图。如图5所示，麦克风/扬声器装置7具备：通信部71、语音输入部72、语音输出部73、存储部74、以及控制部75。
通信部71与接入点3(图1)连接。通信部71对会议辅助服务器2(图1)之间的通信进行控制。具体而言，通信部71将语音数据发送至会议辅助服务器2(图1)。此外，通信部71从会议辅助服务器2(图1)接收语音数据。通信部71例如为无线LAN板或无线LAN模块。
语音输入部72收集用户发出的语音，并转换为模拟电信号。模拟电信号输入至控制部75。语音输入部72例如为麦克风。语音输出部73输出与从会议辅助服务器2(图1)接收到的语音数据对应的语音。语音输出部73例如为扬声器。
存储部74具备例如RAM以及ROM那样的半导体存储器。存储部74也可以还具备HDD那样的存储装置。存储部74存储控制部75所执行的控制程序。
控制部75具备例如CPU或MPU那样的处理器。此外，控制部75(计算机)基于存储部74所存储控制程序(计算机程序)，对麦克风/扬声器装置7的动作进行控制。
接下来参照图1以及图6，对显示设备8的结构进行说明。图6为表示显示设备8的结构的图。如图6所示，显示设备8除参照图1说明的第一输入端子81～第三输入端子83以外，还具备通信部84、输入端子切换部85、显示部86、存储部87、以及控制部88。
通信部84与LAN线缆10(图1)连接。通信部84具备例如LAN板或LAN模块。通信部84对第一终端设备4(图1)之间的通信进行控制。具体而言，通信部84从第一终端设备4(图1)接收切换命令。
输入端子切换部85激活第一输入端子81～第三输入端子83中的至少一个。在本实施方式中，输入端子切换部85根据切换命令，激活第一输入端子81～第三输入端子83中的任意一个。
显示部86显示第一输入端子81～第三输入端子83中的被激活的输入端子所接收的图像信息。显示部86例如为液晶显示器或有机EL显示器。另外，显示部86可具备触控传感器。换言之，显示部86可以是触控显示器。
存储部87具备例如RAM以及ROM那样的半导体存储器。而且，存储部87可具备HDD那样的存储装置。存储部87存储控制部88执行的控制程序。
控制部88具备例如CPU或MPU那样的处理器。此外，控制部88(计算机)基于存储部87所存储的控制程序(计算机程序)，对显示设备8的动作进行控制。本实施方式的控制部88根据切换命令，对输入端子切换部85进行控制。具体而言，控制部88基于切换命令，激活第一输入端子81～第三输入端子83中的任意一者。
以上，参照图1～图6对本实施方式进行了说明。另外，在本实施方式中，会议辅助服务器2执行语音识别处理，但也可以是，麦克风/扬声器装置7执行语音识别处理，并将识别结果文本信息发送至会议辅助服务器2。
根据本实施方式，能够根据表示人物的关键词切换显示设备8显示的图像信息。例如，在用户语音所包含的关键词表示第一终端设备4的持有者的标识符的情况下，第一输入端子81被激活，能够将第一终端设备4的显示部44显示的图像显示于显示设备8。
此外，根据本实施方式，能够参照管理表231生成切换命令，因此能够容易地生成切换命令。
接下来参照图1～图3、图6以及图7，对注册画面60进行说明。图7为表示本实施方式所涉及的注册画面60的图。注册画面60为第一终端设备4的显示部44(图3)所显示的用户接口画面。用户对第一终端设备4的操作部43(图3)进行操作，来在注册画面60上设定(注册)各种信息。另外，也可以是，第一终端设备4(图3)将用户接口画面的图像数据发送至显示设备8(图6)，将第一终端设备4的显示部44(图3)所显示的用户接口画面显示于显示设备8的显示部86(图6)。
如图7所示，本实施方式的注册画面60显示输入端子名栏61、连接设备名注册栏62、以及持有者信息注册栏63。此外，注册画面60显示保存按钮64以及取消按钮65。
在输入端子名栏61中设定有作为第一输入端子81～第三输入端子83(图1)的各个名称而事前设定的名称(默认名)。具体而言，在输入端子名栏61中设定有D-SUB端子、HDMI(注册商标)端子、或Displayport等。
在连接设备名注册栏62中设定有与第一输入端子81～第三输入端子83(图1)的各个连接的设备的名称(设备名)。设备名由用户任意确定。在本实施方式中，设定有第一终端设备4～第三终端设备6(图1)的名称。
在持有者信息注册栏63中设定有表示与第一输入端子81～第三输入端子83(图1)的各个连接的设备的持有者的标识符。在本实施方式中，在持有者信息注册栏63中设定有表示第一终端设备4～第三终端设备6(图1)的各自的持有者的标识符。
保存按钮64为用于保存注册画面60中设定的信息的按钮，在用户对操作部43(图3)进行操作而输入按下保存按钮64的指示时，保存注册画面60中设定的信息，会议辅助服务器2的控制部24(图2)创建管理表231(图2)。
取消按钮65为用于取消使用了注册画面60的信息注册处理的按钮，在用户对操作部43(图3)进行操作而输入按下取消按钮65的指示时，不保存注册画面60中设定的信息，而关闭注册画面60。
接下来参照图1、图2、图7以及图8，对管理表231进行说明。图8为表示本实施方式所涉及的管理表231的图。如图8所示，管理表231具有：显示设备ID栏701、第一标志栏702、第二标志栏703、持有者信息栏704、以及登录用户信息栏705。
在显示设备ID栏701中设定有显示设备8(图1)的标识编号(默认值)。预先设定显示设备8(图1)的标识编号。
在第一标志栏702中设定有第一输入端子81～第三输入端子83(图1)的第一标志。针对第一输入端子81～第三输入端子83(图1)的第一标志，使用作为第一输入端子81～第三输入端子83(图1)的各个名称而事前设定的名称(默认名)。详细而言，在第一标志栏702中反映参照图7进行了说明的输入端子名栏61中设定的名称。具体而言，会议辅助服务器2的控制部24(图2)基于参照图7进行了说明的输入端子名栏61中设定的信息，创建第一标志栏702。
在第二标志栏703中设定有第一输入端子81～第三输入端子83(图1)的第二标志。在第一输入端子81～第三输入端子83(图1)的第二标志中设定有与第一输入端子81～第三输入端子83(图1)的各个连接的设备(第一终端设备4～第三终端设备6)的名称(设备名)。详细而言，在第二标志栏703中反映参照图7进行了说明的连接设备名注册栏62中设定的名称。具体而言，会议辅助服务器2的控制部24(图2)基于参照图7进行了说明的连接设备名注册栏62中设定的信息，创建第二标志栏703。
在持有者信息栏704中设定有表示与第一输入端子81～第三输入端子83(图1)的各个连接的设备(第一终端设备4～第三终端设备6)的持有者的标识符。详细而言，在持有者信息栏704中反映参照图7进行了说明的持有者信息注册栏63中设定的标识符。具体而言，会议辅助服务器2的控制部24(图2)基于参照图7进行了说明的持有者信息注册栏63中设定的信息，创建持有者信息栏704。
在登录用户信息栏705中设定有登录于与第一输入端子81～第三输入端子83(图1)的各个连接的设备(第一终端设备4～第三终端设备6)的用户的标识符。会议辅助服务器2的控制部24(图2)基于表示从第一终端设备4～第三终端设备6(图1)接收的登录用户的标识符的信息、以及表示从第一终端设备4～第三终端设备6(图1)接收的退出用户的标识符的信息，创建登录用户信息栏705。另外，在用户未登录的情况下，在登录用户信息栏705中设定为“Null”。
接下来参照图1、图2、图8以及图9，对第一关键词组232进行说明。图9为表示本实施方式所涉及的第一关键词组232的图。在本实施方式中，第一关键词组232包含表示与第一输入端子81～第三输入端子83(图1)连接的第一终端设备4～第三终端设备6(图1)的持有者的标识符。具体而言，会议辅助服务器2的控制部24(图2)基于参照图8进行了说明的持有者信息栏704中设定的信息，创建第一关键词组232。
接下来参照图1、图2、图8以及图10，对第二关键词组233进行说明。图10为表示本实施方式所涉及的第二关键词组233的图。在本实施方式中，第二关键词组233包含表示登录于与第一输入端子81～第三输入端子83(图1)连接的第一终端设备4～第三终端设备6(图1)的用户的标识符。具体而言，会议辅助服务器2的控制部24(图2)基于参照图8进行了说明的登录用户信息栏705中设定的信息，创建第二关键词组233。
接下来参照图1～图16，对会议系统1执行的处理(动作)进行说明。首先，参照图1～图3、图7～图9、以及图11，对第一注册处理进行说明。第一注册处理为，使用参照图7进行了说明的注册画面60对各种信息进行注册的处理。图11为表示本实施方式所涉及的第一注册处理的图。
在用户对第一终端设备4的操作部43进行操作而输入使第一终端设备4的显示部44显示注册画面60的指示时，开始图11所示的第一注册处理。
如图11所示，在用户输入显示注册画面60的指示时，第一终端设备4的控制部46使第一终端设备4的显示部44显示注册画面60(步骤S1)。
第一终端设备4的控制部46在第一终端设备4的显示部44显示注册画面60时，判定注册画面60的保存按钮64以及取消按钮65中的任意的按钮是否被按下(步骤S2)。
在用户对第一终端设备4的操作部43进行操作而按下保存按钮64(步骤S2；保存)时，第一终端设备4的控制部46将注册画面60中设定的各种信息向会议辅助服务器2发送(步骤S3)，并结束处理。此外，在用户对第一终端设备4的操作部43进行操作而按下取消按钮65(步骤S2；取消)时，第一终端设备4的控制部46不将注册画面60中设定的各种信息向会议辅助服务器2发送，并结束处理。
会议辅助服务器2的控制部24将从第一终端设备4接收到的信息注册到管理表231中(步骤S4)。在会议辅助服务器2的控制部24参照管理表231创建第一关键词组232时，结束处理。
接下来参照图1～图3、图8、图10以及图12，对第二注册处理进行说明。第二注册处理为，对登录用户的标识符进行注册的处理。图12为表示本实施方式所涉及的第二注册处理的图。详细而言，图12中示出对登录于第一终端设备4的用户的标识符进行注册的处理。
如图12所示，在用户对第一终端设备4的操作部43进行操作登录于第一终端设备4时，第一终端设备4的控制部46将表示登录用户的标识符的信息向会议辅助服务器2发送(步骤S11)，并结束处理。
会议辅助服务器2的控制部24基于从第一终端设备4接收的信息，在管理表231的登录用户信息栏705中注册登录用户的标识符(步骤S12)。会议辅助服务器2的控制部24在参照管理表231创建第二关键词组233或更新第二关键词组233时，结束处理。
以上，参照图1～图3、图8、图10以及图12，对第二注册处理进行了说明。另外，在用户登录第二终端设备5或第三终端设备6的情况下，也与图12所示的处理同样地执行第二注册处理。
接下来参照图1～图3、图8、图10以及图13，对删除处理进行说明。删除处理为删除登录用户的标识符的处理。图13为表示本实施方式所涉及的删除处理的图。详细而言，图13中示出删除从第一终端设备4退出的用户的标识符的处理。
如图13所示，在用户对第一终端设备4的操作部43进行操作而从第一终端设备4退出时，第一终端设备4的控制部46将表示退出用户的标识符的信息向会议辅助服务器2发送(步骤S21)，并结束处理。
会议辅助服务器2的控制部24基于从第一终端设备4接收到的信息，从管理表231的登录用户信息栏705中删除与退出用户对应的登录用户的标识符(步骤S22)。会议辅助服务器2的控制部24在参照管理表231从第二关键词组233中删除与退出用户对应的关键词时，结束处理。
以上，参照图1～图3、图8、图10以及图13，对删除处理进行了说明。另外，即使在用户从第二终端设备5或第三终端设备6退出的情况下，也与图13所示的处理同样地执行删除处理。
接下来参照图1～图3、图5～图10、以及图14～图16，对会议系统1执行的显示切换处理进行说明。显示切换处理为切换显示设备8的显示画面的处理。
首先参照图1、图2、图5、以及图14，对会议辅助服务器2以及麦克风/扬声器装置7执行的处理进行说明。图14为表示本实施方式所涉及的显示切换处理的图，详细而言，示出会议辅助服务器2以及麦克风/扬声器装置7执行的处理。
显示切换处理通过用户发出语音来开始。如图14所示，在用户发出语音时，麦克风/扬声器装置7收集用户语音(步骤S31)，并将与用户语音对应的语音数据向会议辅助服务器2发送(步骤S32)。
在会议辅助服务器2从麦克风/扬声器装置7接收语音数据(步骤S41)时，会议辅助服务器2的语音识别部22将语音数据转换为文本信息。其结果为，会议辅助服务器2的控制部24取得识别结果文本信息(步骤S42)。
会议辅助服务器2的控制部24在取得识别结果文本信息时，执行显示画面设定处理(步骤S43)。具体而言，会议辅助服务器2的控制部24执行生成参照图2进行了说明的切换命令的处理。针对显示画面设定处理，将参照图16在下文中叙述。
会议辅助服务器2的控制部24在显示画面设定处理的执行后，判定显示画面的设定是否失败(步骤S44)。会议辅助服务器2的控制部24在判定显示画面的设定未失败的情况(步骤S44；否)下，将切换命令向第一终端设备4发送(步骤S45)，并结束图14所示的处理。
另一方面，会议辅助服务器2的控制部24在判定显示画面的设定失败的情况(步骤S44；是)下，执行参照图2进行了说明的语音数据输出处理。具体而言，会议辅助服务器2的控制部24将表示用于使用户再次发声的消息的语音数据发送至麦克风/扬声器装置7(步骤S46)。会议辅助服务器2的控制部24在执行语音数据输出处理时，结束图14所示的处理。
麦克风/扬声器装置7在发送语音数据后，判定是否从会议辅助服务器2接收到语音数据(步骤S33)。在麦克风/扬声器装置7未从会议辅助服务器2接收到语音数据的情况(步骤S33；否)下，结束图14所示的处理。
另一方面，在麦克风/扬声器装置7从会议辅助服务器2接收到语音数据的情况(步骤S33；是)下，输出与从会议辅助服务器2接收到的语音数据对应的语音(步骤S34)，并结束图14所示的处理。因而，用户能够再次通过语音实施将显示画面切换为期望的画面的指示。
接下来参照图1、图3、图6、以及图15，对第一终端设备4(会议室PC)以及显示设备8执行的处理进行说明。图15为表示本实施方式所涉及的显示切换处理的图，详细而言，示出第一终端设备4(会议室PC)以及显示设备8执行的处理。
如图15所示，第一终端设备4的控制部46在从会议辅助服务器2接收切换命令(步骤S51)时，将接收到的切换命令向显示设备8发送(步骤S52)。
显示设备8的控制部88在从第一终端设备4接收切换命令(步骤S61)时，根据切换命令执行切换处理(步骤S62)。具体而言，显示设备8的控制部88根据切换命令，激活第一输入端子81～第三输入端子83中的至少一个输入端子。
显示设备8的控制部88在执行切换处理后，将响应信号向第一终端设备4发送(步骤S63)，并结束图15所示的处理。响应信号表示完成切换处理。第一终端设备4的控制部46在从显示设备8接收响应信号(步骤S53)时，结束图15所示的处理。
接下来参照图1、图2、图7～图10、以及图16，对显示画面设定处理(图14的步骤S43)进行说明。图16为表示本实施方式所涉及的显示画面设定处理的图。
如图16所示，会议辅助服务器2的控制部24在取得识别结果文本信息时，判定识别结果文本信息是否包含第一关键词组232的关键词(步骤S431)。详细而言，会议辅助服务器2的控制部24判定识别结果文本信息是否包含表示第一终端设备4～第三终端设备6的任意的持有者的标识符的关键词。在本实施方式中，会议辅助服务器2的控制部24判定识别结果文本信息是否包含关键词“○○○○”、关键词“□□□□”、以及关键词“△△△△”中的任意一者(图9)。
会议辅助服务器2的控制部24在判定为识别结果文本信息包含第一关键词组232的关键词的情况(步骤S431；是)下，参照管理表231，生成切换命令(步骤S432)。例如，在识别结果文本信息包含关键词“○○○○”的情况下，会议辅助服务器2的控制部24从持有者信息栏704的各行之中，搜索设定有与关键词“○○○○”对应的标识符“○○○○”的行(图8)。接着，会议辅助服务器2的控制部24从第一标志栏702中搜索已搜索到的行中设定的输入端子“第一输入端子”(图8)。并且，会议辅助服务器2的控制部24生成激活第一输入端子81的切换命令。会议辅助服务器2的控制部24在生成切换命令时，返回图14的处理。
会议辅助服务器2的控制部24在判定为识别结果文本信息不包含第一关键词组232的关键词的情况(步骤S431；否)下，判定识别结果文本信息是否包含第二关键词组233的关键词(步骤S433)。详细而言，会议辅助服务器2的控制部24判定识别结果文本信息是否包含表示第一终端设备4～第三终端设备6的任意的登录用户的标识符的关键词。在本实施方式中，会议辅助服务器2的控制部24判定识别结果文本信息是否包含关键词“XXXX”或关键词“YYYY”(图10)。
会议辅助服务器2的控制部24在判定为识别结果文本信息包含第二关键词组233的关键词的情况(步骤S433；是)下，参照管理表231，生成切换命令(步骤S432)。例如，在识别结果文本信息包含关键词“XXXX”的情况下，会议辅助服务器2的控制部24从登录用户信息栏705的各行之中，搜索设定有与关键词“XXXX”对应的标识符“XXXX”的行(图8)。接着，会议辅助服务器2的控制部24从第一标志栏702中搜索已搜索到的行中设定的输入端子“第一输入端子”(图8)。并且，会议辅助服务器2的控制部24生成激活第一输入端子81的切换命令。会议辅助服务器2的控制部24在生成切换命令时，返回图14的处理。
会议辅助服务器2的控制部24在判定为识别结果文本信息不包含第二关键词组233的关键词的情况(步骤S433；否)下，设定表示显示画面的设定失败的标记(步骤S434)，并返回图14所示的处理。
以上，参照图1、图2、图7～图10、以及图16，对显示画面设定处理进行了说明。另外，在执行图16所示的显示画面设定处理的情况下，需要对第一终端设备4～第三终端设备6设定互不相同的持有者的标识符。
接下来参照图17，对显示画面设定处理的其他例进行说明。图17为表示其他实施方式所涉及的显示画面设定处理的图。图17所示的显示画面设定处理与图16所示的显示画面设定处理相比，调换了步骤S431以及步骤S433的处理的顺序。即，在图17所示的显示画面设定处理中，会议辅助服务器2的控制部24在判定了识别结果文本信息是否包含第二关键词组233的关键词后(步骤S433)，判定识别结果文本信息是否包含第一关键词组232的关键词(步骤S431)。
根据图17所示的显示画面设定处理，即使针对第一终端设备4～第三终端设备6中的两台以上设定有相同的持有者的标识符的情况下，也能够适当地执行显示切换。
具体而言，在作为共用的PC的会议室PC(第一终端设备4)中设定为持有者的人物X，有时作为会议参加者而在会议中自备PC(第二终端设备5或第三终端设备6)。在该情况下，存在有会议室PC中设定的持有者的标识符与自备PC中设定的持有者的标识符一致的可能性。此外，还存在有人物X登录于会议室PC时使用的登录用户的标识符与人物X登录于自备PC时使用的登录用户的标识符一致的可能性。即使在这样的情况下，根据图17所示的显示画面设定处理，通过人物X仅登录会议室PC以及自备PC中的1台，就能够使显示设备8显示人物X登录的PC所显示的画面。例如，通过仅在存储有显示设备8显示所需的数据文件的PC中登录人物X，并且将人物X从其他PC退出，能够使显示设备8显示人物X登录的PC所显示的画面。或者，也可以通过能够实施Windows(注册商标)对同时登录部分的限制的附件工具那样的系统工具，限制人物X同时登录多个PC。
以上，参照附图说明了本发明的实施方式。不过，本发明不限于上述的实施方式，能在不脱离其宗旨的范围内通过各种方式实施。
例如，显示设备8也可以显示将基于用户语音实现了激活的输入端子通知给用户的图像。将实现了激活的输入端子通知给用户的图像例如示出实现了激活的输入端子的名称(D-SUB端子、HDMI(注册商标)端子以及Displayport等)。或者显示设备8也可以显示将基于用户语音实现了激活的输入端子所连接的终端设备通知给用户的图像。将实现了激活的输入端子所连接的终端设备通知给用户的图像例如示出终端设备的名称(第一终端、第二终端等)。
另外，在本发明的实施方式中，说明了会议系统1，但应用本发明的系统只要是具备显示设备的系统即可，没有特别限定。例如，本发明能应用于在补习班或学校中使用的讲演系统、在家庭中使用的显示系统。
另外，在本发明的实施方式中，使用了麦克风/扬声器装置7，但第一终端设备4(会议室PC)或显示设备8也可以具有麦克风/扬声器装置7的功能。
另外，在本发明的实施方式中，使用了会议辅助服务器2作为操作辅助装置，但操作辅助装置既可以使用第一终端设备4(会议室PC)，也可以使用显示设备8。
此外，在本发明的实施方式中，第一终端设备4将从会议辅助服务器2发送的切换命令向显示设备8发送，但会议辅助服务器2也可以向显示设备8发送切换命令。
另外，在本发明的实施方式中，显示设备8具备三个输入端子(第一输入端子81～第三输入端子83)，但显示设备8具备的输入端子的数量不限于三个，显示设备8只要具备多个输入端子即可。
另外，在本发明的实施方式中，为了取得用户语音而使用了具备收集语音的功能和输出语音的功能的装置(麦克风/扬声器装置7)，但也可以使用仅具备收集语音的功能和输出语音的功能中的收集语音的功能的装置。
此外，在本发明的实施方式中，管理表231具有：显示设备ID栏701、第一标志栏702、第二标志栏703、持有者信息栏704、以及登录用户信息栏705，但也可以省略第二标志栏703。在该情况下，也可以从注册画面60中省略连接设备名注册栏62。
产业上的可利用性
本发明对于如会议系统、讲演系统以及授课系统那样的使用显示设备的系统而言是有用的。
附图标记说明
1 会议系统
2 会议辅助服务器
4 第一终端设备
5 第二终端设备
6 第三终端设备
7 扬声器装置
8 显示设备
21 通信部
22 语音识别部
23 存储部
24 控制部
25 判定部
26 命令生成部
41 输出端子
42 通信部
43 操作部
44 显示部
45 存储部
46 控制部
81 第一输入端子
82 第二输入端子
83 第三输入端子
84 通信部
85 输入端子切换部
86 显示部
87 存储部
88 控制部
231 管理表
232 第一关键词组
233 第二关键词组
451 显示切换控制程序
452 用户名通知程序
702 第一标志栏
704 持有者信息栏
705 登录用户信息栏

Claims (8)

1.一种操作辅助装置，其辅助显示设备的操作，其特征在于，具备：
语音识别部，其将语音数据转换为文本信息；以及
命令生成部，其生成激活所述显示设备所具备的多个输入端子中的至少一个输入端子的切换命令，
所述命令生成部在表示人物的关键词包含于所述文本信息的情况下，从所述显示设备所具备的所述多个输入端子之中，确定与所述人物相关联的输入端子，并生成激活所确定的所述输入端子的所述切换命令。
2.根据权利要求1所述的操作辅助装置，其特征在于，
还具备存储部，所述存储部存储使所述人物与所述显示设备所具备的所述多个输入端子中的至少一个输入端子相关联的管理表，
所述命令生成部参照所述管理表确定与所述人物相关联的输入端子。
3.根据权利要求2所述的操作辅助装置，其特征在于，
在所述管理表中，使表示终端的持有者的第一标识符与所述显示设备所具备的所述多个输入端子中的至少一个输入端子相关联，
表示所述人物的关键词包含表示所述第一标识符的关键词，
在表示所述第一标识符的关键词包含于所述文本信息的情况下，所述命令生成部从所述显示设备所具备的所述多个输入端子之中，确定与所述持有者相关联的输入端子。
4.根据权利要求2或3所述的操作辅助装置，其特征在于，
在所述管理表中，使表示登录于终端的人物的第二标识符与所述显示设备所具备的所述多个输入端子中的至少一个输入端子相关联，
表示所述人物的关键词包含表示所述第二标识符的关键词，
在表示所述第二标识符的关键词包含于所述文本信息的情况下，所述命令生成部从所述显示设备所具备的所述多个输入端子之中，确定与所述登录的人物对应的所述终端所连接的输入端子。
5.一种操作辅助系统，其具备显示设备和辅助所述显示设备的操作的操作辅助装置，其特征在于，
所述操作辅助装置具备：
语音识别部，其将语音数据转换为文本信息；以及
命令生成部，其生成激活所述显示设备所具备的多个输入端子中的至少一个输入端子的切换命令，
所述命令生成部在表示人物的关键词包含于所述文本信息的情况下，从所述显示设备所具备的所述多个输入端子之中，确定与所述人物相关联的输入端子，并生成激活所确定的所述输入端子的所述切换命令，
所述显示设备显示通过所述切换命令而被激活的所述输入端子接收的图像信息。
6.根据权利要求5所述的操作辅助系统，其特征在于，
还具备分别与所述显示设备所具备的所述多个输入端子中的至少一个输入端子连接的至少一个设备，
所述设备在用户登录所述设备时，将表示登录的所述用户的信息发送至所述操作辅助装置。
7.根据权利要求5或6所述的操作辅助系统，其特征在于，
还具备分别与所述显示设备所具备的所述多个输入端子中的至少一个输入端子连接的至少一个设备，
所述设备在用户从所述设备退出时，将表示退出的所述用户的信息发送至所述操作辅助装置。
8.一种操作辅助方法，其辅助显示设备的操作，其特征在于，包含：
语音识别步骤，将语音数据转换为文本信息；
命令生成步骤，生成激活所述显示设备所具备的多个输入端子中的至少一个输入端子的切换命令；以及
显示通过所述切换命令而被激活的所述输入端子接收的图像信息的步骤，
所述命令生成步骤包含：
在表示人物的关键词包含于所述文本信息的情况下，从所述显示设备所具备的所述多个输入端子之中，确定与所述人物相关联的输入端子的步骤；以及
生成激活所确定的所述输入端子的所述切换命令的步骤。
CN201910437152.0A 2018-05-30 2019-05-24 操作辅助装置、操作辅助系统以及操作辅助方法 Active CN110556112B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018103827A JP7152191B2 (ja) 2018-05-30 2018-05-30 操作支援装置、操作支援システム、及び操作支援方法
JP2018-103827 2018-05-30

Publications (2)

Publication Number Publication Date
CN110556112A true CN110556112A (zh) 2019-12-10
CN110556112B CN110556112B (zh) 2023-06-06

Family

ID=68694129

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910437152.0A Active CN110556112B (zh) 2018-05-30 2019-05-24 操作辅助装置、操作辅助系统以及操作辅助方法

Country Status (3)

Country Link
US (1) US11037569B2 (zh)
JP (1) JP7152191B2 (zh)
CN (1) CN110556112B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111554291A (zh) * 2020-05-18 2020-08-18 中移（杭州）信息技术有限公司 设备控制方法、语音输入终端、语音平台及存储介质
CN111405232B (zh) * 2020-03-05 2021-08-06 深圳震有科技股份有限公司 视频会议主讲人画面切换处理方法及装置、设备、介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117640861A (zh) * 2022-08-16 2024-03-01 华为技术有限公司 一种导播控制方法及装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002304286A (ja) * 2001-04-04 2002-10-18 Nec Viewtechnology Ltd 音声認識機能を内蔵した映像表示装置
CN102256098A (zh) * 2010-05-18 2011-11-23 宝利通公司 具有多个语音跟踪摄像机的视频会议端点
KR20140009002A (ko) * 2012-07-12 2014-01-22 삼성전자주식회사 외부 입력 제어 방법 및 이를 적용한 방송 수신 장치
CN104144315A (zh) * 2013-05-06 2014-11-12 华为技术有限公司 一种多点视频会议的显示方法及多点视频会议系统
CN105373359A (zh) * 2014-08-14 2016-03-02 三星电子株式会社 显示设备及其控制方法
CN105684422A (zh) * 2016-01-18 2016-06-15 王晓光 一种视频网络会议的人物跟踪方法及系统
CN107396036A (zh) * 2017-09-07 2017-11-24 北京小米移动软件有限公司 视频会议中视频处理方法及终端

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9288421B2 (en) 2012-07-12 2016-03-15 Samsung Electronics Co., Ltd. Method for controlling external input and broadcast receiving apparatus
US10642231B1 (en) * 2016-11-02 2020-05-05 Edison Labs, Inc. Switch terminal system with an activity assistant

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002304286A (ja) * 2001-04-04 2002-10-18 Nec Viewtechnology Ltd 音声認識機能を内蔵した映像表示装置
CN102256098A (zh) * 2010-05-18 2011-11-23 宝利通公司 具有多个语音跟踪摄像机的视频会议端点
KR20140009002A (ko) * 2012-07-12 2014-01-22 삼성전자주식회사 외부 입력 제어 방법 및 이를 적용한 방송 수신 장치
CN104144315A (zh) * 2013-05-06 2014-11-12 华为技术有限公司 一种多点视频会议的显示方法及多点视频会议系统
CN105373359A (zh) * 2014-08-14 2016-03-02 三星电子株式会社 显示设备及其控制方法
CN105684422A (zh) * 2016-01-18 2016-06-15 王晓光 一种视频网络会议的人物跟踪方法及系统
CN107396036A (zh) * 2017-09-07 2017-11-24 北京小米移动软件有限公司 视频会议中视频处理方法及终端

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111405232B (zh) * 2020-03-05 2021-08-06 深圳震有科技股份有限公司 视频会议主讲人画面切换处理方法及装置、设备、介质
CN111554291A (zh) * 2020-05-18 2020-08-18 中移（杭州）信息技术有限公司 设备控制方法、语音输入终端、语音平台及存储介质
CN111554291B (zh) * 2020-05-18 2023-04-28 中移（杭州）信息技术有限公司 设备控制方法、语音输入终端、语音平台及存储介质

Also Published As

Publication number Publication date
JP7152191B2 (ja) 2022-10-12
JP2019207640A (ja) 2019-12-05
US11037569B2 (en) 2021-06-15
US20190371336A1 (en) 2019-12-05
CN110556112B (zh) 2023-06-06

Similar Documents

Publication Publication Date Title
CN110556112B (zh) 操作辅助装置、操作辅助系统以及操作辅助方法
CN1617558B (zh) 顺序多模输入
CN1617559B (zh) 顺序多模输入
JP6548045B2 (ja) 会議システム、会議システム制御方法、およびプログラム
JP6254209B2 (ja) 音声を利用できるテルネットインターフェイス
CN110677614A (zh) 信息处理方法、装置及计算机可读存储介质
US20240080283A1 (en) Information processing system and information processing method
JP2014215729A (ja) 自動取引装置操作支援システム
US11113027B2 (en) Apparatus, system, and method that support operation to switch to input terminal to be activated among input terminals included in display apparatus
JP2010026686A (ja) 統合的インタフェースを有する対話型コミュニケーション端末及びそれを用いたコミュニケーションシステム
JP6936165B2 (ja) 表示制御装置、表示制御システム、及び表示制御方法
US20210125602A1 (en) Communication system, communication method, and non-transitory recording medium
CN108806411A (zh) 一种盲文辅助显示装置
CN110060670B (zh) 操作辅助装置、操作辅助系统以及操作辅助方法
JP2006197041A (ja) ＰｏＣシステム、ＰｏＣ携帯端末及びそれらに用いるポインタ表示方法並びにそのプログラム
US9065920B2 (en) Method and apparatus pertaining to presenting incoming-call identifiers
CN112863495A (zh) 信息处理方法、装置及电子设备
JP2020119043A (ja) 音声翻訳システムおよび音声翻訳方法
JP2020077083A (ja) 応対支援システム、及び応対支援方法
JP2019125972A (ja) 端末装置、情報処理方法、プログラム、通信システム
JP7427936B2 (ja) ユーザサポートシステム、ユーザサポート方法およびプログラム
JP2023123980A (ja) 情報処理装置、情報処理方法、およびシステム
KR19990015120A (ko) 음성 및 펜 입력을 갖는 휴대통신 장치 및 그방법
JP2015076039A (ja) 情報処理方法、情報処理装置、及びプログラム
JP2015076040A (ja) 情報処理方法、情報処理装置、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant