CN110177186B - 显示控制装置、显示控制系统及显示控制方法 - Google Patents

显示控制装置、显示控制系统及显示控制方法 Download PDF

Info

Publication number
CN110177186B
CN110177186B CN201910124957.XA CN201910124957A CN110177186B CN 110177186 B CN110177186 B CN 110177186B CN 201910124957 A CN201910124957 A CN 201910124957A CN 110177186 B CN110177186 B CN 110177186B
Authority
CN
China
Prior art keywords
information processing
display
information
unit
command
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910124957.XA
Other languages
English (en)
Other versions
CN110177186A (zh
Inventor
中泽刚
寺田智
蛭川庆子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN110177186A publication Critical patent/CN110177186A/zh
Application granted granted Critical
Publication of CN110177186B publication Critical patent/CN110177186B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006Details of the interface to the display terminal
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00912Arrangements for controlling a still picture apparatus or components thereof not otherwise provided for
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00912Arrangements for controlling a still picture apparatus or components thereof not otherwise provided for
    • H04N1/00938Software related arrangements, e.g. loading applications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0383Remote input, i.e. interface arrangements in which the signals generated by a pointing device are transmitted to a PC at a remote location, e.g. to a PC in a LAN
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/04Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/12Use of DVI or HDMI protocol in interfaces along the display data pipeline
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/20Details of the management of multiple sources of image data
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供一种显示控制装置、显示控制系统及显示控制方法。显示控制装置控制显示装置。显示装置包括与信息处理装置连接的两个以上的输入部。显示控制装置包括存储部、判定部和命令生成部。存储部存储装置信息和信号接收状况信息。装置信息表示信息处理装置的各个状态。信号接收状况信息表示输出显示装置所显示的显示图像的信息处理装置。判定部判定来自使用者的指示的内容。命令生成部基于判定部的判定结果和存储部所存储的信息,生成向信息处理装置及显示装置中的至少一个发布的命令。

Description

显示控制装置、显示控制系统及显示控制方法
技术领域
本发明涉及显示控制装置、显示控制系统及显示控制方法。
背景技术
专利文献1中公开了一种利用声音识别技术切换输入的播放信号接收装置。专利文献1公开的播放信号接收装置在用户声音中包含提示词的情况下,激活与提示词对应的外部输入装置所连接的外部输入端子,显示从与用户声音对应的外部输入装置接收的影像。专利文献1公开的提示词为例如收音机、DVD、蓝光光盘,在提示词为收音机的情况下,播放信号接收装置激活收音机装置所连接的外部输入端子。
现有技术文献
专利文件
日本特开2014-021493号公报
但是,专利文献1公开的播放信号接收装置在外部输入装置为任意状态均激活与提示词对应的外部输入装置所连接的输入端子。因此,无法对应于外部输入装置的状态控制输入切换。
发明内容
本发明是鉴于上述课题提出的,其目的在于提供一种能够对应于与显示装置连接的信息处理装置的状态控制显示装置的输入切换的显示控制装置、显示控制系统及显示控制方法。
本发明的显示控制装置控制显示装置。所述显示装置包括与信息处理装置连接的两个以上的输入部。所述显示控制装置包括存储部、判定部和命令生成部。所述存储部存储装置信息及信号接收状况信息。所述装置信息表示所述信息处理装置的各个状态。所述信号接收状况信息表示输出所述显示装置显示的显示图像的所述信息处理装置。所述判定部判定来自使用者的指示的内容。所述命令生成部基于所述判定部的判定结果和所述存储部所存储的信息,生成向所述信息处理装置及所述显示装置中的至少一个发布的命令。
本发明的显示控制系统包括显示装置和对所述显示装置进行控制的显示控制装置。所述显示装置包括与信息处理装置连接的两个以上的输入部。所述显示控制装置包括存储部、判定部和命令生成部。所述存储部存储装置信息及信号接收状况信息。所述装置信息表示所述信息处理装置的各个状态。所述信号接收状况信息表示输出所述显示装置显示的显示图像的所述信息处理装置。所述判定部判定来自使用者的指示的内容。所述命令生成部基于所述判定部的判定结果和所述存储部所存储的信息,生成向所述信息处理装置及所述显示装置中的至少一个发布的命令。所述显示装置显示与所述命令对应的图像。
本发明的显示控制方法是对显示装置进行控制的方法。所述显示装置包括与信息处理装置连接的两个以上的输入部。所述显示控制方法包含存储装置信息和信号接收状况信息的存储步骤。所述装置信息表示所述信息处理装置的各个状态。所述信号接收状况信息表示输出所述显示装置显示的显示图像的所述信息处理装置。所述显示控制方法还包括:判定步骤,在该判定步骤中,判定来自使用者的指示的内容;命令生成步骤,在该命令生成步骤中,基于在所述判定步骤中判定的结果和在所述存储步骤中存储的信息,生成向所述信息处理装置及所述显示装置中的至少一个发布的命令;以及所述显示装置显示与所述命令对应的图像的步骤。
根据本发明,能够对应于与显示装置连接的信息处理装置的状态对显示装置的输入切换进行控制。
附图说明
图1是表示本发明第一实施方式的显示控制系统的图。
图2是表示本发明第一实施方式的指示输入装置的构成的图。
图3是表示本发明第一实施方式的显示控制装置的构成的图。
图4是表示本发明第一实施方式的第一信息处理装置的构成的图。
图5是表示本发明第一实施方式的显示装置的构成的图。
图6是表示本发明第一实施方式的连接装置登记画面的一例的图。
图7的(a)是表示本发明第一实施方式的第一管理表的一例的图。图7的(b)是表示本发明第一实施方式的第二管理表的一例的图。
图8是表示本发明第一实施方式的应用程序使用设备表的一例的图。
图9是表示本发明第一实施方式的第一登记处理的图。
图10是表示本发明第一实施方式的第二登记处理的图。
图11是表示本发明第一实施方式的第三登记处理的图。
图12是表示本发明第一实施方式的第四登记处理的图。
图13是表示本发明第一实施方式的第五登记处理的图。
图14是表示本发明第一实施方式的显示控制装置的控制部执行的处理的图。
图15是表示本发明第一实施方式的显示控制装置的控制部执行的处理的一例的图。
图16是表示本发明第一实施方式的显示控制装置的控制部执行的处理的一例的图。
图17是表示本发明第一实施方式的显示装置的变形例的构成的图。
图18是表示本发明第二实施方式的第一信息处理装置及第二信息处理装置的构成的图。
图19是表示本发明第二实施方式的显示装置的构成的图。
图20是表示本发明第三实施方式的显示控制装置的构成的图。
图21是表示本发明第三实施方式的第一信息处理装置及第二信息处理装置的构成的图。
图22的(a)是表示本发明第三实施方式的第一管理表的一例的图。图22的(b)是表示本发明第三实施方式的第二管理表的一例的图。
图23是表示本发明第三实施方式的显示控制装置的控制部执行的处理的一例的图。
图24是表示本发明第三实施方式的显示控制装置的控制部执行的处理的一例的图。
具体实施方式
以下参照附图说明本发明的实施方式。但是,本发明不限定于以下实施方式。图中对相同或相当部分标注同一附图标记,不进行重复说明。另外,存在对重复说明的部位省略适当说明的情况。
[第一实施方式]
图1是表示第一实施方式的显示控制系统1的图。如图1所示,显示控制系统1包括指示输入装置2、显示控制装置3、第一信息处理装置4a、第二信息处理装置4b及显示装置5。
指示输入装置2输入来自使用者的指示,将表示所输入的指示的数据向显示控制装置3发送。在本实施方式中,指示输入装置2是声音输入装置,输入使用者发出的声音,将所输入的声音转换为数字信号(声音数据)并向显示控制装置3发送。以下存在将使用者发出的声音记为“使用者声音”的情况。指示输入装置2是例如智能扬声器这样的扬声器麦克风装置。
显示控制装置3是例如云服务器或PC(个人计算机)这样的信息处理装置。显示控制装置3经由例如因特网线路在指示输入装置2、第一信息处理装置4a及第二信息处理装置4b之间进行通信。或者,显示控制装置3经由LAN(Local Area Network)线缆或无线LAN在指示输入装置2、第一信息处理装置4a及第二信息处理装置4b之间进行通信。
显示控制装置3基于从指示输入装置2发送的声音数据(使用者声音)对显示装置5的输入切换进行控制。换言之,显示控制装置3根据输入至指示输入装置2的来自使用者的指示对显示装置5的输入切换进行控制。具体来说,显示装置5包括第一输入部51a及第二输入部51b。显示控制装置3根据来自使用者的指示,决定使显示装置5显示第一输入部51a接收的图像,还是使显示装置5显示第二输入部51b接收的图像。
详细来说,显示控制装置3存储装置信息和信号接收状况信息。装置信息表示第一信息处理装置4a及第二信息处理装置4b各自的状态。信号接收状况信息表示输出显示装置5显示的图像的信息处理装置是第一信息处理装置4a及第二信息处理装置4b中的哪一个。显示控制装置3判定来自使用者的指示的内容,基于该判定结果和存储的信息生成命令。命令包含执行输入切换的切换命令。在本实施方式中,命令向第一信息处理装置4a或第二信息处理装置4b发布。
第一信息处理装置4a与第一输入部51a连接。第一信息处理装置4a将图像信号向第一输入部51a输出。第二信息处理装置4b与第二输入部51b连接。第二信息处理装置4b将图像信号向第二输入部51b输出。第一信息处理装置4a及第二信息处理装置4b分别为例如机顶盒、PC或平板终端。在本实施方式中,第一信息处理装置4a是主PC,第二信息处理装置4b是客人PC。
在本实施方式中,第一信息处理装置4a及第二信息处理装置4b执行与从显示控制装置3发布的命令对应的处理。第一信息处理装置4a或第二信息处理装置4b执行与命令对应的处理,从而显示装置5显示与命令对应的图像。
详细来说,第一信息处理装置4a或第二信息处理装置4b若从显示控制装置3接收切换命令,则输出输入切换信号。从第一信息处理装置4a输出的输入切换信号表示将显示装置5显示的图像切换为从第一信息处理装置4a输出的图像的指示。显示装置5在由第一输入部51a接收输入切换信号时,显示从第一信息处理装置4a输出的图像。同样地,从第二信息处理装置4b输出的输入切换信号表示将显示装置5显示的图像切换为从第二信息处理装置4b输出的图像的指示。显示装置5在由第二输入部51b接收输入切换信号时,显示从第二信息处理装置4b输出的图像。在本实施方式中,第一输入部51a及第二输入部51b是HDMI(注册商标)端子这样的影像接口。
并且,在以下的说明中,存在将显示装置5显示的图像记为“显示图像”,将输出显示图像的信息处理装置记为“显示图像输出装置”的情况。另外,存在将显示图像输出装置所连接的输入部记为“显示图像接收部”的情况。
接下来,参照图1及图2说明指示输入装置2的构成。图2是表示第一实施方式的指示输入装置2的构成的图。如图2所示,指示输入装置2包括通信部21、声音输入部22、存储部23及控制部24。
通信部21对与显示控制装置3间的通信进行控制。具体来说,通信部21将声音数据向显示控制装置3发送。通信部21是例如LAN板或无线LAN板。
声音输入部22收集使用者声音,转换为模拟电信号。模拟电信号被向控制部24输入。声音输入部22是例如麦克风。
存储部23包括例如RAM(Random Access Memory)及ROM(Read Only Memory)这样的半导体存储器。存储部23也可以进一步包括HDD(Hard Disk Drive)这样的存储设备。存储部23存储控制部24执行的控制程序。
控制部24包括例如CPU(Central Processing Unit)或MPU(Micro ProcessingUnit)这样的存储器。另外,控制部24(计算机)基于在存储部23中存储的控制程序(计算机程序)对指示输入装置2的动作进行控制。在本实施方式中,控制部24将从声音输入部22输入的模拟电信号转换为数字信号(声音数据),使通信部21发送数字信号。
接下来,参照图1及图3说明显示控制装置3的构成。图3是表示第一实施方式的显示控制装置3的构成的图。如图3所示,显示控制装置3包括通信部31、声音识别部32、存储部33及控制部34。
通信部31是例如LAN板或无线LAN板。通信部31对与指示输入装置2间的通信、与第一信息处理装置4a间的通信及与第二信息处理装置4b间的通信进行控制。具体来说,通信部31从指示输入装置2接收声音数据。另外,通信部31向第一信息处理装置4a及第二信息处理装置4b发送命令(发布命令)。在本实施方式中,通信部31从第一信息处理装置4a及第二信息处理装置4b接收请求命令发布的命令请求信号。
声音识别部32利用声音识别技术将从指示输入装置2接收的声音数据转换为文本信息(以下存在记为“识别结果文本”的情况。)。声音识别部32具有例如声音识别LSI(LargeScale Integration)。
存储部33具有例如RAM及ROM这样的半导体存储器。此外,存储部33具有HDD这样的存储设备。存储部33存储控制部34执行的控制程序。
在本实施方式中,存储部33存储第一管理表331、第二管理表332、应用程序使用设备表333及关键词表334。
在第一管理表331中登记装置信息。具体来说,在第一管理表331中登记连接信息、周边设备信息及应用程序信息。
连接信息表示与显示装置5连接的第一信息处理装置4a的输出部。另外,连接信息表示与显示装置5连接的第二信息处理装置4b的输出部。因此,连接信息表示与第一信息处理装置4a连接的显示装置5的输入部及与第二信息处理装置4b连接的显示装置5的输入部。在本实施方式中,作为与显示装置5连接的第一信息处理装置4a的输出部,登记与第一输入部51a连接的输出部。另外,作为与显示装置5连接的第二信息处理装置4b的输出部,登记与第二输入部51b连接的输出部。或者,作为与第一信息处理装置4a连接的显示装置5的输入部,登记第一输入部51a,作为与第二信息处理装置4b连接的显示装置5的输入部,登记第二输入部51b。
周边设备信息表示与第一信息处理装置4a及第二信息处理装置4b连接的周边设备。应用程序信息表示在第一信息处理装置4a及第二信息处理装置4b安装的应用程序软件。应用程序信息此外表示在第一信息处理装置4a及第二信息处理装置4b安装的应用程序软件是否在动作中。并且,在以下的说明中,存在将应用程序软件记为“应用程序”的情况。
在第二管理表332中登记信号接收状况信息。具体来说,在第二管理表332中登记表示显示图像输出装置的信息和表示显示图像接收部的信息。
在应用程序使用设备表333中登记表示特定应用程序的信息和表示与特定应用程序相关的周边设备的信息。特定应用程序及周边设备可以预先登记,也可以由使用者登记。与特定应用程序相关的周边设备是例如在特定应用程序的动作中使用的设备。具体来说,在特定应用程序为电视会议应用程序及网络会议应用程序这样的远程会议应用程序的情况下,作为表示周边设备的信息,登记表示麦克风、扬声器及视频拍摄用摄像机的信息。
在关键词表334中登记表示使特定应用程序执行的功能的关键词。例如作为表示使远程会议应用程序执行的功能的关键词,登记“电视会议”、“网络会议”等。另外,在关键词表334中登记表示远程会议的对象(远程会议应用程序的连接目标)的关键词。例如作为表示远程会议的对象的关键词,登记“○○君”、“△△君”等。
控制部34具有例如CPU或MPU这样的存储器。另外,控制部34(计算机)基于在存储部33中存储的控制程序(计算机程序)对显示控制装置3的动作进行控制。在本实施方式中,控制部34通过执行控制程序而作为判定部341、命令生成部342及命令发布部343发挥作用。
判定部341判定来自使用者的指示的内容。在本实施方式中,判定部341基于识别结果文本和存储部33存储的信息,判定来自使用者的指示的内容。具体来说,判定部341判定在识别结果文本中是否包含在关键词表334中登记的关键词。另外,判定部341从识别结果文本提取关键词表334中登记的关键词。
命令生成部342基于判定部341的判定结果和存储部33存储的信息,生成向第一信息处理装置4a或第二信息处理装置4b发布的命令。另外,命令生成部342使存储部33存储所生成的命令。
在本实施方式中,命令生成部342基于判定部341提取的关键词、在第一管理表331中登记的信息、在第二管理表332中登记的信息和在应用程序使用设备表333中登记的信息生成命令。
具体来说,命令生成部342根据提取的关键词判定来自使用者的指示执行所使用的应用程序即指示对应应用程序。另外,命令生成部342参照应用程序使用设备表333判定与指示对应应用程序相关的特定周边设备。另外,命令生成部342参照第一管理表331,从第一信息处理装置4a及第二信息处理装置4b中判定特定周边设备所连接的信息处理装置即指示对应装置。另外,命令生成部342参照第二管理表332判定是否生成切换命令。详细来说,判定显示图像输出装置是否是指示对应装置。切换命令将显示图像切换为从指示对应装置输出的图像。
另外,命令生成部342生成第一功能执行命令或第二功能执行命令。详细来说,命令生成部342参照第一管理表331,判定在指示对应装置中安装的指示对应应用程序是否在动作中。命令生成部342在指示对应应用程序非动作中的情况下,生成第一功能执行命令。第一功能执行命令表示使指示对应应用程序启动的命令和使指示对应应用程序执行与来自使用者的指示对应的功能的命令。另一方面,在指示对应应用程序为动作中的情况下,命令生成部342生成第二功能执行命令。第二功能执行命令表示使指示对应应用程序执行与来自使用者的指示对应的功能的命令。
命令发布部343在通信部31从第一信息处理装置4a接收到命令请求信号的情况下,从存储部33读取以第一信息处理装置4a为发布目标的命令,向第一信息处理装置4a发布命令。同样地,命令发布部343在通信部31从第二信息处理装置4b接收到命令请求信号的情况下,从存储部33读取以第二信息处理装置4b为发布目标的命令,向第二信息处理装置4b发布命令。
以上参照图1及图3对显示控制装置3的构成进行了说明。并且,图3所示的显示控制装置3具有声音识别部32,但也可以是控制部34具有声音识别部32的功能。在该情况下,省略声音识别部32。
接下来,参照图1、图3及图4说明第一信息处理装置4a的构成。图4是表示第一实施方式的第一信息处理装置4a的构成的图。如图4所示,第一信息处理装置4a包括通信部41、操作部42、显示部43、输出部44、声音输入输出部45a、视频输入部45b、存储部46及控制部47。
通信部41对与显示控制装置3间的通信进行控制。具体来说,通信部41向显示控制装置3发送命令请求信号,从显示控制装置3接收命令。通信部41是例如LAN板或无线LAN板。
操作部42受理使用者的操作。操作部42将与使用者的操作对应的信号向控制部47输出。其结果,第一信息处理装置4a执行与操作部42受理的操作对应的动作。操作部42例如包括定点设备和键盘。并且,操作部42也可以具有触摸传感器。触摸传感器与显示部43的显示面重叠。
显示部43显示各种画面。显示部43是例如液晶显示器或有机EL(electroluminescence)显示器。并且,在触摸传感器与显示部43的显示面重叠的情况下,显示部43作为触摸显示器发挥作用。在本实施方式中,显示部43参照图6显示后述的连接装置登记画面60。连接装置登记画面60是用户接口画面,在连接装置登记画面60登记的信息利用通信部41向显示控制装置3发送。显示控制装置3的控制部34使第一管理表331反映在连接装置登记画面60登记的信息。
输出部44输出图像信号。另外,输出部44输出输入切换信号。输出部44与显示装置5的第一输入部51a连接。输出部44是例如HDMI(注册商标)端子这样的影像接口。
声音输入输出部45a与扬声器麦克风装置100a连接。声音输入输出部45a是周边设备连接部的一例,扬声器麦克风装置100a是周边设备的一例。声音输入输出部45a是例如模拟音频端子,扬声器麦克风装置100a是例如头戴式耳机。
视频输入部45b与视频拍摄用摄像机100b连接。视频输入部45b是周边设备连接部的一例,视频拍摄用摄像机100b是周边设备的一例。视频输入部45b是例如USB端子,视频拍摄用摄像机100b是例如网络摄像机。
存储部46具有例如RAM及ROM这样的半导体存储器。此外,存储部46具有HDD这样的存储设备。存储部46存储控制部47执行的控制程序。
控制部47具有例如CPU或MPU这样的存储器。另外,控制部47(计算机)基于在存储部46中存储的控制程序(计算机程序)对第一信息处理装置4a的动作进行控制。在本实施方式中,控制部47通过执行控制程序而作为装置信息获取部471、命令获取部472及切换指示部473发挥作用。
装置信息获取部471获取第一信息处理装置4a的当前状态。具体来说,装置信息获取部471获取表示当前安装于第一信息处理装置4a的应用程序的信息。另外,装置信息获取部471在第一信息处理装置4a中获取表示动作中的应用程序的信息。此外,装置信息获取部471获取表示当前与第一信息处理装置4a连接的周边设备的信息。装置信息获取部471获取的信息利用通信部41向显示控制装置3发送。显示控制装置3的控制部34使第一管理表331反映装置信息获取部471获取的信息。
命令获取部472使通信部41发送命令请求信号。其结果,从显示控制装置3发布针对第一信息处理装置4a的命令,命令获取部472获取针对第一信息处理装置4a的命令。命令请求信号例如定期每隔一定期间向显示控制装置3发送。
切换指示部473使输出部44输出输入切换信号。具体来说,切换指示部473在输出部44与显示装置5的第一输入部51a连接时,使输出部44输出输入切换信号。另外,切换指示部473在命令获取部472获取切换命令时,使输出部44输出输入切换信号。控制部47在从输出部44输出输入切换信号时,使通信部41发送输入切换信息。输入切换信息表示从第一信息处理装置4a输出了输入切换信号这一情况。显示控制装置3的控制部34基于输入切换信息,在第二管理表332中登记信号接收状况信息。
以上参照图1、图3及图4对第一信息处理装置4a的构成进行了说明。并且,第二信息处理装置4b的构成由于与第一信息处理装置4a相同,因此其说明省略。
接下来,参照图1及图5说明显示装置5的构成。图5是表示第一实施方式的显示装置5的构成的图。如图5所示,显示装置5在参照图1说明的第一输入部51a及第二输入部51b的基础上,具有输入切换部52、显示部53、存储部54及控制部55。
第一输入部51a接收从第一信息处理装置4a输出的图像信号。另外,第一输入部51a接收从第一信息处理装置4a输出的输入切换信号。第一输入部51a接收到的图像信号被向输入切换部52发送。第一输入部51a接收到的输入切换信号被向控制部55发送。
同样地,第二输入部51b接收从第二信息处理装置4b输出的图像信号。另外,第二输入部51b接收从第二信息处理装置4b输出的输入切换信号。第二输入部51b接收到的图像信号被向输入切换部52发送。第二输入部51b接收到的输入切换信号被向控制部55发送。
输入切换部52将显示图像接收部在第一输入部51a与第二输入部51b之间切换。详细来说,输入切换部52在第一输入部51a被设定为显示图像接收部的情况下,将第一输入部51a接收到的图像信号向控制部55发送。同样地,输入切换部52在第二输入部51b被设定为显示图像接收部的情况下,将第二输入部51b接收到的图像信号向控制部55发送。
显示部53显示第一输入部51a接收的图像或第二输入部51b接收的图像。显示部53是例如液晶显示器或有机EL显示器。
存储部54具有例如RAM及ROM这样的半导体存储器。此外,存储部54可以具有HDD这样的存储设备。存储部54存储控制部55执行的控制程序。
控制部55具有例如CPU或MPU这样的存储器。另外,控制部55(计算机)基于在存储部54中存储的控制程序(计算机程序)对显示装置5的动作进行控制。
在本实施方式中,控制部55基于输入切换信号对输入切换部52进行控制。具体来说,控制部55在第一输入部51a接收到输入切换信号的情况下,将第一输入部51a设定为显示图像接收部。另外,控制部55在第二输入部51b接收到输入切换信号的情况下,将第二输入部51b设定为显示图像接收部。
以上参照图1至图5对本实施方式进行了说明。并且,在本实施方式中,显示控制装置3执行声音识别处理,但也可以是指示输入装置2执行声音识别处理并将识别结果文本向显示控制装置3发送。
根据本实施方式,能够对应于第一信息处理装置4a及第二信息处理装置4b的状态对显示装置5的输入切换进行控制。详细来说,即使是相同的使用者声音,也对应于第一信息处理装置4a及第二信息处理装置4b的状态将不同的输入部设定为显示图像接收部。例如,在与指示对应应用程序相关的周边设备仅与第一信息处理装置4a及第二信息处理装置4b中的第一信息处理装置4a连接的情况下,第一输入部51a被设定为显示图像接收部。另一方面,在与指示对应应用程序相关的周边设备仅与第一信息处理装置4a及第二信息处理装置4b中的第二信息处理装置4b连接的情况下,第二输入部51b被设定为显示图像接收部。
另外,根据本实施方式,能够对应于第一信息处理装置4a及第二信息处理装置4b的状态,从第一信息处理装置4a及第二信息处理装置4b中判定指示对应装置。因此,使用者只要发出希望使之执行的功能的声音即可,不需要确定该功能执行使用的周边设备所连接的信息处理装置。其结果,使用者的便利性提高。
接下来参照图4及图6说明连接装置登记画面60。图6是表示连接装置登记画面60的一例的图。使用者能够对第一信息处理装置4a的操作部42进行操作,在连接装置登记画面60(用户接口画面)上设定(登记)信息。并且,第一信息处理装置4a也可以将用户接口画面的图像数据向显示装置5发送,使显示装置5的显示部53显示在第一信息处理装置4a的显示部43显示的用户接口画面。
如图6所示,连接装置登记画面60显示装置名称信息登记栏61、连接信息登记栏62、保存按键63及取消按键64。在装置名称信息登记栏61设定第一信息处理装置4a及第二信息处理装置4b的装置名称。装置名称由使用者任意决定。
在连接信息登记栏62设定与显示装置5的第一输入部51a连接的第一信息处理装置4a的输出部44的名称。另外,在连接信息登记栏62设定与显示装置5的第二输入部51b连接的第二信息处理装置4b的输出部44的名称。或者,在连接信息登记栏62设定与第一信息处理装置4a的输出部44连接的显示装置5的输入部的名称及与第二信息处理装置4b的输出部44连接的显示装置5的输入部的名称。换言之,在连接信息登记栏62中,作为连接信息设定表示显示装置5分别与第一信息处理装置4a及第二信息处理装置4b连接的接口的信息。具体来说,在连接信息登记栏62设定D-SUB端子、HDMI(注册商标)端子或Displayport等。图6作为连接信息例示HDMI(注册商标)端子。
保存按键63是用于保存在连接装置登记画面60设定的信息的按键,若使用者操作第一信息处理装置4a的操作部42并输入按下保存按键63的指示,则第一信息处理装置4a的通信部41将在连接装置登记画面60设定的信息向显示控制装置3发送。
取消按键64是用于取消使用连接装置登记画面60的信息登记处理的按键,若使用者操作第一信息处理装置4a的操作部42并输出按下取消按键64的指示,则不保存在连接装置登记画面60设定的信息,将连接装置登记画面60关闭。
接下来,参照图4、图6及图7的(a)说明第一管理表331。图7的(a)是表示第一管理表331的一例的图。如图7的(a)所示,第一管理表331具有装置名称信息栏71、周边设备信息栏72、连接信息栏73、应用程序信息栏74。
在装置名称信息栏71中反映在连接装置登记画面60的装置名称信息登记栏61(图6)中设定的名称。在周边设备信息栏72中反映第一信息处理装置4a及第二信息处理装置4b的装置信息获取部471(图4)获取的周边设备信息。在连接信息栏73中反映在连接装置登记画面60的连接信息登记栏62(图6)中设定的名称。在应用程序信息栏74中反映第一信息处理装置4a及第二信息处理装置4b的装置信息获取部471(图4)获取的应用程序信息。
接下来,参照图3、图7的(a)及图7的(b)说明第二管理表332。图7的(b)是表示第二管理表332的一例的图。如图7的(b)所示,第二管理表332具有装置名称信息栏81及连接信息栏82。
在装置名称信息栏81中设定显示图像输出装置的名称。详细来说,显示控制装置3的控制部34参照从第一信息处理装置4a或第二信息处理装置4b接收到的输入切换信息和第一管理表331的装置名称信息栏71,在装置名称信息栏81中设定显示图像输出装置的名称。
在连接信息栏82中设定显示图像接收部的名称。详细来说,显示控制装置3的控制部34参照从第一信息处理装置4a或第二信息处理装置4b接收到的输入切换信息和第一管理表331的连接信息栏73,在连接信息栏82中设定显示图像接收部的名称。
接下来,参照图8说明应用程序使用设备表333。图8是表示应用程序使用设备表333的一例的图。如图8所示,应用程序使用设备表333具有应用程序名信息栏91和设备名信息栏92。在应用程序名信息栏91中登记应用程序的名称。在设备名信息栏92中登记与在应用程序名信息栏91中登记的应用程序相关的周边设备的名称。
接下来,参照图3、图4、图7的(a)及图9说明第一登记处理。第一登记处理为,使用连接装置登记画面60,登记第一信息处理装置4a及第二信息处理装置4b各自的装置名称、及将第一信息处理装置4a及第二信息处理装置4b分别与显示装置5连接的接口的名称。图9是表示第一登记处理的图。
若使用者操作第一信息处理装置4a的操作部42而输入使第一信息处理装置4a的显示部43显示连接装置登记画面60的指示,则图9所示的处理开始。
如图9所示,若使用者输入使连接装置登记画面60进行显示的指示,则第一信息处理装置4a的控制部47使第一信息处理装置4a的显示部43显示连接装置登记画面60(步骤S1)。
第一信息处理装置4a的控制部47在使第一信息处理装置4a的显示部43显示连接装置登记画面60时,判定连接装置登记画面60的保存按键63及取消按键64中的哪个按键被按下(步骤S2)。
若使用者操作第一信息处理装置4a的操作部42并按下保存按键63(步骤S2;保存),则第一信息处理装置4a的控制部47将在连接装置登记画面60上设定的信息向显示控制装置3发送(步骤S3),结束处理。另外,若使用者操作第一信息处理装置4a的操作部42并按下取消按键64(步骤S2;取消),则第一信息处理装置4a的控制部47不向显示控制装置3发送在连接装置登记画面60设定的信息,结束处理。
显示控制装置3的控制部34将从第一信息处理装置4a接收到的信息登记在第一管理表331中(步骤S4),结束处理。
接下来,参照图3、图4及图10说明第二登记处理。第二登记处理是登记周边设备信息的处理。图10是表示第二登记处理的图。若第一信息处理装置4a的控制部47识别第一信息处理装置4a的周边设备连接部连接有周边设备,则图10所示的处理开始。同样地,若第二信息处理装置4b的控制部47识别第二信息处理装置4b的周边设备连接部连接有周边设备,则图10所示的处理开始。以下以第一信息处理装置4a连接有周边设备的情况为例说明第二登记处理。
如图10所示,若周边设备与第一信息处理装置4a的周边设备连接部连接,则第一信息处理装置4a的控制部47(装置信息获取部471)识别与第一信息处理装置4a的周边设备连接部连接的周边设备(步骤S11)。换言之,第一信息处理装置4a的控制部47(装置信息获取部471)获取表示与第一信息处理装置4a的周边设备连接部连接的周边设备的信息。接下来,第一信息处理装置4a的控制部47将获取的信息(周边设备信息)向显示控制装置3发送(步骤S12),结束处理。
显示控制装置3的控制部34参照从第一信息处理装置4a接收到的周边设备信息,将表示与第一信息处理装置4a连接的周边设备的信息登记在第一管理表331中(步骤S13),结束处理。
接下来,参照图3、图4及图11说明第三登记处理。第三登记处理是从第一管理表331删除周边设备信息的处理。图11是表示第三登记处理的图。第一信息处理装置4a的控制部47若识别周边设备被从第一信息处理装置4a的周边设备连接部拆下,则图11所示的处理开始。同样地,若第二信息处理装置4b的控制部47识别周边设备被从第二信息处理装置4b的周边设备连接部拆下,则图11所示的处理开始。以下以周边设备被从第一信息处理装置4a的周边设备连接部拆下的情况为例,说明第三登记处理。
如图11所示,若从第一信息处理装置4a的周边设备连接部拆下周边设备,则第一信息处理装置4a的控制部47(装置信息获取部471)识别从第一信息处理装置4a的周边设备连接部拆下的周边设备(步骤S21)。换言之,第一信息处理装置4a的控制部47(装置信息获取部471)获取表示从第一信息处理装置4a的周边设备连接部拆下的周边设备的信息。接下来,第一信息处理装置4a的控制部47将获取的信息(周边设备信息)向显示控制装置3发送(步骤S22),结束处理。
显示控制装置3的控制部34参照从第一信息处理装置4a接收到的周边设备信息,将表示从第一信息处理装置4a拆下的周边设备的信息从第一管理表331删除(步骤S23),结束处理。
并且,与第二登记处理同样地,第一信息处理装置4a的控制部47在向第一信息处理装置4a安装应用程序时,获取表示安装的应用程序的信息(应用程序信息),并向显示控制装置3发送。显示控制装置3的控制部34参照从第一信息处理装置4a接收到的应用程序信息,将表示安装于第一信息处理装置4a的应用程序的信息登记在第一管理表331中。将表示安装于第二信息处理装置4b的应用程序的信息登记到第一管理表331中的处理也同样地执行。
另外,与第三登记处理同样地,第一信息处理装置4a的控制部47在从第一信息处理装置4a卸载应用程序时,获取表示卸载的应用程序的信息(应用程序信息),并向显示控制装置3发送。显示控制装置3的控制部34参照从第一信息处理装置4a接收到的应用程序信息,将表示从第一信息处理装置4a卸载的应用程序的信息从第一管理表331删除。将表示从第二信息处理装置4b卸载的应用程序的信息从第一管理表331删除的处理也同样地执行。
接下来,参照图3、图4及图12说明第四登记处理说明。第四登记处理是登记应用程序信息的处理。图12是表示第四登记处理的图。若第一信息处理装置4a的控制部47识别到安装于第一信息处理装置4a的应用程序开始动作时,则图12所示的处理开始。同样地,若第二信息处理装置4b的控制部47识别到安装于第二信息处理装置4b的应用程序开始动作,则图12所示的处理开始。以下以安装于第一信息处理装置4a的应用程序开始动作的情况为例,说明第四登记处理。
如图12所示,若安装于第一信息处理装置4a的应用程序开始动作,则第一信息处理装置4a的控制部47(装置信息获取部471)识别该应用程序在动作中(步骤S31)。换言之,第一信息处理装置4a的控制部47(装置信息获取部471)获取表示动作中的应用程序的信息。接下来,第一信息处理装置4a的控制部47将所获取的信息(应用程序信息)向显示控制装置3发送(步骤S32),结束处理。
显示控制装置3的控制部34参照从第一信息处理装置4a接收到的应用程序信息,将表示安装于第一信息处理装置4a的应用程序在动作中的信息登记在第一管理表331中(步骤S33),结束处理。
接下来,参照图3、图4及图13说明第五登记处理。第五登记处理是登记信号接收状况信息的处理。图13是表示第五登记处理的图。若从第一信息处理装置4a的输出部44输出输入切换信号,则图13所示的处理开始。同样地,若从第二信息处理装置4b的输出部44输出输入切换信号,则图13所示的处理开始。以下以从第一信息处理装置4a的输出部44输出输入切换信号的情况为例,说明第五登记处理。
如图13所示,第一信息处理装置4a的控制部47(切换指示部473)在从第一信息处理装置4a的输出部44输出输入切换信号时(步骤S41),第一信息处理装置4a的控制部47将输入切换信息向显示控制装置3发送(步骤S42),结束处理。
显示控制装置3的控制部34参照从第一信息处理装置4a接收到的输入切换信息和第一管理表331的装置名称信息栏71及连接信息栏73,在第二管理表332中登记信号接收状况信息(步骤S43),结束处理。
接下来,参照图1、图3及图14参照显示控制装置3的控制部34执行的处理。图14是表示显示控制装置3的控制部34执行的处理的图。图14所示的处理在显示控制装置3从指示输入装置2接收声音数据时开始。
如图14所示,控制部34执行的处理包含判定处理(步骤S100)、命令生成处理(步骤S200)和命令发布处理(步骤S300)。
具体来说,在显示控制装置3从指示输入装置2接收声音数据时,控制部34(判定部341)对来自使用者的指示的内容进行判定(步骤S100)。
接下来,控制部34(命令生成部342)基于在步骤100中判定的结果和在显示控制装置3的存储部33中存储的信息,生成向第一信息处理装置4a或第二信息处理装置4b发布的命令(步骤S200)。控制部34生成的命令存储在显示控制装置3的存储部33中。
控制部34(命令发布部343)在从第一信息处理装置4a发送命令请求信号时,从存储部33读取以第一信息处理装置4a为发布目标的命令,向第一信息处理装置4a发布命令(步骤S300),结束处理。同样地,控制部34(命令发布部343)在从第二信息处理装置4b发送命令请求信号时,从存储部33读取以第二信息处理装置4b为发布目标的命令,向第二信息处理装置4b发布命令(步骤S300),结束处理。
接下来,参照图1、图3、图7的(a)、图7的(b)、图15及图16说明显示控制装置3的控制部34执行的处理(判定处理、命令生成处理及命令发布处理)的一例。图15及图16是表示第一实施方式的显示控制装置3的控制部34执行的处理的一例的图。
在图15及图16所示的处理中,步骤S101至步骤S103的处理是判定处理的一例,步骤S201至S208的处理是命令生成处理的一例。图15及图16所示的处理在声音识别部32生成识别结果文本时开始。
在声音识别部32生成识别结果文本时,控制部34(判定部341)判定识别结果文本中是否包含特定的关键词(步骤S101)。具体来说,控制部34(判定部341)判定在关键词表334中登记的关键词是否包含在识别结果文本中。
控制部34在判定为在关键词表334中登记的关键词未包含在识别结果文本中的情况下(步骤S101的否),设定第一标记(步骤S102),结束图15及图16所示的处理。第一标记表示在关键词表334中登记的关键词未包含在识别结果文本中。
控制部34(判定部341)在判定为在关键词表334中登记的关键词包含在识别结果文本中的情况下(步骤S101的是),从识别结果文本提取在关键词表334中登记的关键词(步骤S103)。例如,在使用者声音为“与○○君开电视会议”的情况下,控制部34(判定部341)从识别结果文本提取“○○君”及“电视会议”。
接下来,控制部34(命令生成部342)基于所提取的关键词判定指示对应应用程序(步骤S201)。例如在从识别结果文本提取了“○○君”及“电视会议”提取的情况下,控制部34(命令生成部342)判定指示对应应用程序为远程会议应用程序。
接下来,控制部34(命令生成部342)参照应用程序使用设备表333判定与指示对应应用程序相关的特定的周边设备(步骤S202)。在例如指示对应应用程序为远程会议应用程序的情况下,控制部34(命令生成部342)判定特定的周边设备为“麦克风”、“扬声器”及“摄像机”。
接下来,控制部34(命令生成部342)参照第一管理表331及第二管理表332,判定输出显示装置5显示的图像的信息处理装置(显示图像输出装置)是否连接与指示对应应用程序相关的特定的周边设备(步骤S203)。例如,如图7的(b)所示,在显示图像输出装置为第二信息处理装置4b的情况下,控制部34(命令生成部342)判定第二信息处理装置4b是否与“麦克风”、“扬声器”及“摄像机”连接。
控制部34(命令生成部342)在判定为显示图像输出装置连接有特定的周边设备的情况下(步骤S203的是),根据显示图像输出装置的指示对应应用程序是否在动作中,生成第一功能执行命令或第二启动执行命令(步骤S204)。控制部34(命令生成部342)参照第一管理表331判定显示图像输出装置的指示对应应用程序是否在动作中。控制部34(命令生成部342)在生成命令时,使存储部33存储所生成的命令(图16所示的步骤S208)。
另一方面,控制部34(命令生成部342)在判定为显示图像输出装置未连接特定的周边设备的情况下(步骤S203的否),如图16所示,参照第一管理表331判定是否存在与特定的周边设备连接的信息处理装置即周边设备连接装置(步骤S205)。
控制部34在判定为不存在周边设备连接装置的情况下(步骤S205的否),设定第二标记(步骤S206),结束图15及图16所示的处理。第二标记表示不存在周边设备连接装置。
控制部34在判定为存在周边设备连接装置的情况下(步骤S205的是),生成向周边设备连接装置发布的切换命令(步骤S207)。另外,根据安装于周边设备连接装置的指示对应应用程序是否为动作中,生成第一功能执行命令或第二启动执行命令(步骤S207)。
例如,在图7的(a)及图7的(b)所示的例子中,由于作为显示图像输出装置的第二信息处理装置4b未连接“麦克风”、“扬声器”及“摄像机”,因此控制部34(命令生成部342)判定第一信息处理装置4a是否连接有“麦克风”、“扬声器”及“摄像机”(步骤S205)。
在图7的(a)及图7的(b)所示的例子中,由于第一信息处理装置4a连接有“麦克风”、“扬声器”及“摄像机”(步骤S205的是),因此控制部34(命令生成部342)生成向第一信息处理装置4a发布的切换命令(步骤S207)。另外,由于第一信息处理装置4a的远程会议应用程序非动作中,因此控制部34(命令生成部342)生成第一功能执行命令(步骤S207)。
控制部34(命令生成部342)使存储部33存储所生成的命令(步骤S208)。然后,控制部34(命令发布部343)执行参照图14说明的命令发布处理(步骤S300),结束图15及图16所示的处理。例如,在图7的(a)及图7的(b)所示的例子中,向第一信息处理装置4a发送切换命令和第一功能执行命令。其结果,第一信息处理装置4a的远程会议应用程序将“○○君”与远程会议连接,显示装置5显示从第一信息处理装置4a输出的图像。
以上参照图1至图16对第一实施方式进行了说明。并且,在本实施方式中,第一信息处理装置4a及第二信息处理装置4b接收切换命令,向显示装置5指示输入切换,但也可以由显示装置5接收切换命令。在该情况下,命令生成部342生成以显示装置5为发布目标的切换命令。另外,在该情况下,显示装置5如图17所示具有通信部57。图17是表示显示装置5的变形例的构成的图。通信部57向显示控制装置3发送命令请求信号。另外,通信部57从显示控制装置3接收切换命令。切换命令使显示图像接收部设定指示对应装置所连接的输入部。通信部57是例如LAN板或无线LAN板。
另外,在本实施方式中,使用连接装置登记画面60对第一信息处理装置4a及第二信息处理装置4b的装置名称信息及连接信息进行登记,但也可以由第一信息处理装置4a及第二信息处理装置4b各自的控制部47(装置信息获取部471)获取第一信息处理装置4a及第二信息处理装置4b的装置名称信息及连接信息。在该情况下,无需使用连接装置登记画面60,就能够登记第一信息处理装置4a及第二信息处理装置4b的装置名称信息及连接信息。
例如,第一信息处理装置4a的控制部47(装置信息获取部471)也可以从第一信息处理装置4a的存储部46获取表示第一信息处理装置4a的装置名称的信息,并将获取的信息向显示控制装置3发送。在第一信息处理装置4a的存储部46中存储的装置名称可以是预先存储的装置名称,也可以是使用者登记的装置名称。另外,第一信息处理装置4a的控制部47(装置信息获取部471)也可以在第一信息处理装置4a的输出部44与显示装置5连接时,从存储部46获取表示第一信息处理装置4a的输出部44的名称的信息,并将获取的信息向显示控制装置3发送。第二信息处理装置4b的控制部47(装置信息获取部471)也同样地,能够获取装置名称信息及连接信息并向显示控制装置3发送。
或者,如图17所示,在显示装置5具有通信部57的情况下,无需使用连接装置登记画面60就能够登记第一信息处理装置4a及第二信息处理装置4b的装置名称信息及连接信息。具体来说,显示装置5的控制部55从与第一输入部51a及第二输入部51b连接的设备获取表示与第一输入部51a及第二输入部51b连接的设备的信息。并且,通信部57将表示与第一输入部51a连接的设备的信息和表示第一输入部51a的名称的信息向显示控制装置3发送,从而能够登记第一信息处理装置4a的装置名称信息及连接信息。同样地,通信部57将表示与第二输入部51b连接的设备的信息和表示第二输入部51b的名称的信息向显示控制装置3,从而能够登记第二信息处理装置4b的装置名称信息及连接信息。
[第二实施方式]
接下来,参照图18及图19说明本发明的第二实施方式。但是,说明与第一实施方式不同的内容,而与第一实施方式相同内容的说明省略。第二实施方式与第一实施方式的区别在于第一信息处理装置4a及第二信息处理装置4b的构成及显示装置5的构成。
详细来说,在第一实施方式中,第一信息处理装置4a及第二信息处理装置4b从一个接口(输出部44)输出图像信号及输入切换信号,但第二实施方式的第一信息处理装置4a及第二信息处理装置4b包括输出图像信号的接口和输出输入切换信号的接口。
图18是表示第二实施方式的第一信息处理装置4a及第二信息处理装置4b的构成的图。如图18所示,第二实施方式的第一信息处理装置4a及第二信息处理装置4b取代在第一实施方式中说明的输出部44,具有显示输出部44a及指示输出部44b。显示输出部44a是输出图像信号的接口,指示输出部44b是输出输入切换信号的接口。显示输出部44a是例如D-SUB端子、HDMI(注册商标)端子或Displayport。指示输出部44b是例如LAN板或无线LAN板。
图19是表示第二实施方式的显示装置5的构成的图。如图19所示,第二实施方式的显示装置5具有指示输入部56。指示输入部56是接收输入切换信号的接口。指示输入部56是例如LAN板或无线LAN板。并且,第二实施方式的第一输入部51a及第二输入部51b是例如D-SUB端子、HDMI(注册商标)端子或Displayport。
以上参照图18及图19对第二实施方式进行了说明。根据本实施方式,能够根据第一信息处理装置4a及第二信息处理装置4b的状态对显示装置5的输入切换进行控制。
并且,在本实施方式中,对第一信息处理装置4a及第二信息处理装置4b具有指示输出部44b的情况进行了说明,但第一信息处理装置4a及第二信息处理装置4b的通信部41也可以作为输出输入切换信号的接口发挥作用。另外,在本实施方式中,第一信息处理装置4a及第二信息处理装置4b双方具有输出图像信号的接口和输出输入切换信号的接口,但也可以是第一信息处理装置4a及第二信息处理装置4b中的一方具有输出图像信号的接口和输出输入切换信号的接口。
[第三实施方式]
接下来,参照图20至图24说明本发明的第三实施方式。但是,对与第一及第二实施方式不同的内容进行说明,对于与第一及第二实施方式相同内容的说明省略。第三实施方式与第一及第二实施方式的区别在于显示控制装置3执行的处理和第一信息处理装置4a及第二信息处理装置4b的构成。
图20是表示第三实施方式的显示控制装置3的构成的图。如图20所示,在第三实施方式中,存储部33存储第一管理表331、第二管理表332和关键词表334,未存储在第一实施方式中说明的应用程序使用设备表333。
在本实施方式中,在关键词表334中登记表示使显示装置5显特定的图像的关键词。例如,在关键词表334中登记“投影主PC的画面”及“投影客人PC的画面”等。
另外,在本实施方式中,命令生成部342在来自使用者的指示是使显示装置5显示特定图像的指示的情况下,参照判定部341从识别结果文本提取的关键词,从第一信息处理装置4a及第二信息处理装置4b中判定输出特定图像的信息处理装置即特定图像输出装置。详细来说,在判定部341从识别结果文本提取的关键词中包含表示使显示装置5显示第一信息处理装置4a显示的图像这一情况的关键词、或表示使显示装置5显示第二信息处理装置4b显示的图像这一情况的关键词的情况下,命令生成部342将第一信息处理装置4a及第二信息处理装置4b中的一方决定为特定图像输出装置。
另外,在本实施方式中,命令生成部342判定能够接收特定图像并使之显示的指示对应应用程序。进而,命令生成部342参照第二管理表332判定显示图像输出装置,参照第一管理表331判定安装于显示图像输出装置的指示对应应用程序是否是能够接收特定图像并使之显示的状态。换言之,命令生成部342判定指示对应应用程序是否在动作中。命令生成部342在指示对应应用程序非能够接收特定图像并使之显示的状态的情况下,生成将显示图像切换为特定图像的命令。具体来说,命令生成部342生成将特定图像输出装置所连接的输入部设定为显示图像接收部的切换命令。
另外,在本实施方式中,命令生成部342在安装于显示图像输出装置的指示对应应用程序是使显示装置5显示图像的应用程序,且指示对应应用程序处于能够接收特定的图像并使之显示的状态的情况下,生成向特定图像输出装置发布的第一功能执行命令,并生成向显示图像输出装置发布的第一功能执行命令及第二功能执行命令。
向特定图像输出装置发布的第一功能执行命令表示,使从特定图像输出装置向显示图像输出装置传送特定图像的应用程序启动,使该应用程序从特定图像输出装置向显示图像输出装置传送特定的图像。
向显示图像输出装置发布的第一功能执行命令表示,使接收从特定图像输出装置向显示图像输出装置传送的特定图像的应用程序启动,使该应用程序接收从特定图像输出装置向显示图像输出装置传送的特定图像。另外,向显示图像输出装置发布的第二功能执行命令表示,使特定的图像与使显示装置5显示指示对应应用程序的图像重叠。
图21是表示第三实施方式的第一信息处理装置4a及第二信息处理装置4b的构成的图。在第三实施方式中,第一信息处理装置4a的通信部41在与显示控制装置3间的通信控制的基础上,还执行与第二信息处理装置4b间的通信控制。同样地,第二信息处理装置4b的通信部41在与显示控制装置3间的通信控制的基础上,还执行与第一信息处理装置4a间的通信控制。
另外,第一信息处理装置4a及第二信息处理装置4b的存储部46存储有图像传送应用程序461。第一信息处理装置4a的图像传送应用程序461使第一信息处理装置4a的显示部43显示的图像经由通信部41向第二信息处理装置4b传送。同样地,第二信息处理装置4b的图像传送应用程序461使第二信息处理装置4b的显示部43显示的图像经由通信部41向第一信息处理装置4a传送。
接下来,参照图20至图24说明第三实施方式的显示控制装置3的控制部34执行的处理(判定处理、命令生成处理及命令发布处理)的一例。图22的(a)是表示第三实施方式的第一管理表331的一例的图。图22的(b)是表示第三实施方式的第二管理表332的一例的图。图23及图24是表示第三实施方式的显示控制装置3的控制部34执行的处理的一例的图。
在图23及图24所示的处理中,步骤S101至步骤S103的处理是判定处理的一例,步骤S211至S218的处理是命令生成处理的一例。图23及图24所示的处理在声音识别部32生成识别结果文本时开始。并且,步骤S101至步骤S103的处理及步骤S300的处理,与在第一实施方式中说明的步骤S101至步骤S103的处理及步骤S300的处理相同,因此其说明省略。另外,步骤S218的处理与在第一实施方式中说明的步骤S208的处理相同,因此其说明省略。
如图23所示,在从识别结果文本提取的关键词是表示使显示装置5显示特定图像的关键词的情况下,控制部34(命令生成部342)基于所提取的关键词,从第一信息处理装置4a及第二信息处理装置4b中判定输出特定图像的信息处理装置(特定图像输出装置)(步骤S211)。例如,在从识别结果文本提取的关键词是“投影客人PC的画面”的情况下,控制部34(命令生成部342)判定第二信息处理装置4b为特定图像输出装置。
接下来,控制部34(命令生成部342)判定能够接收特定的图像并使之显示的指示对应应用程序(步骤S212)。例如控制部34(命令生成部342)判定远程会议应用程序为指示对应应用程序。
接下来,控制部34(命令生成部342)参照第一管理表331及第二管理表332,判定输出显示装置5显示的图像的信息处理装置(显示图像输出装置)是否安装有指示对应应用程序(步骤S213)。
控制部34(命令生成部342)在判定为显示图像输出装置未安装指示对应应用程序的情况下(步骤S213的否),设定第三标记(步骤S214),结束图23及图24所示的处理。第三标记表示显示图像输出装置未安装指示对应应用程序。
控制部34(命令生成部342)在判定为显示图像输出装置安装有指示对应应用程序的情况下(步骤S213的是),如图24所示,参照第一管理表331判定指示对应应用程序是否正在动作(步骤S215)。
控制部34(命令生成部342)在判定为指示对应应用程序正在动作的情况下(步骤S215的是),生成向特定图像输出装置发布的第一功能执行命令,并生成向显示图像输出装置发布的第一功能执行命令及第二功能执行命令(步骤S216)。
控制部34(命令生成部342)在判定为指示对应应用程序未动作的情况下(步骤S215的否),生成向特定图像输出装置发布的切换命令(步骤S217)。
在图22的(a)及图22的(b)所示的例子中,第一信息处理装置4a是显示图像输出装置,向第一信息处理装置4a安装远程会议应用程序。另外,第一信息处理装置4a的远程会议应用程序在动作中,使显示装置5显示图像。因此,控制部34(命令生成部342)使安装于第二信息处理装置4b(特定图像输出装置)的图像传送应用程序461启动,生成使第二信息处理装置4b显示的图像向第一信息处理装置4a传送的第一功能执行命令。另外,控制部34(命令生成部342)使安装于第一信息处理装置4a(显示图像输出装置)的图像传送应用程序461启动,生成接收从第二信息处理装置4b传送的图像的第一功能执行命令。此外,控制部34(命令生成部342)生成使从第二信息处理装置4b传送的图像重叠于显示图像的第二功能执行命令。其结果,第一信息处理装置4a的远程会议应用程序使从第二信息处理装置4b传送的图像重叠于显示图像。另一方面,在第一信息处理装置4a的远程会议应用程序非动作中的情况下,显示装置5显示第二信息处理装置4b输出的图像。
以上参照图20至图24对第三实施方式进行了说明。根据本实施方式,能够根据第一信息处理装置4a及第二信息处理装置4b的状态对显示装置5的输入切换进行控制。详细来说,即使是相同的使用者声音,也能够对应于第一信息处理装置4a及第二信息处理装置4b的状态,将不同的输入部设定为显示图像接收部。例如,在指示对应应用程序正在动作的情况下,不变更显示图像接收部。另一方面,在指示对应应用程序未动作的情况下,与特定图像输出装置连接的输入部被设定为显示图像接收部。
并且,在本实施方式中使用了图像传送应用程序461,但在显示图像输出装置及特定图像输出装置双方均安装有远程会议应用程序的情况下,也可以启动特定图像输出装置的远程会议应用程序,使显示图像输出装置及特定图像输出装置的远程会议应用程序执行画面共有功能。
以上参照附图对本发明的实施方式进行了说明。但本发明不限于上述实施方式,能够在不脱离其要旨的范围内以多种方式实施。
例如,能够将第一实施方式的显示控制装置3执行的处理与第三实施方式的显示控制装置3执行的处理组合。在该情况下,显示控制装置3的控制部34只要根据从识别结果文本提取的关键词,执行在第一实施方式中说明的处理和在第三实施方式中说明的处理中的一方即可。
另外,在本发明的实施方式中,指示输入装置2是声音输入装置,但指示输入装置2只要是能够输入来自使用者的指示的装置即可,不限定于声音输入装置。例如,指示输入装置2可以是平板终端或PC这样的信息处理装置。
另外,在本发明的实施方式中,使用关键词判定使用者的指示,但判定使用者指示的处理也可以是意图推定处理。在显示控制装置3的控制部34执行意图推定处理的情况下,显示控制装置3的存储部33取代关键词表334存储语料库。
另外,在本发明的实施方式中,显示控制装置3由一台信息处理装置构成,但显示控制装置3也可以由多台信息处理装置构成。
另外,在本发明的实施方式中,第一信息处理装置4a、第二信息处理装置4b及显示装置5向显示控制装置3请求命令,但第一信息处理装置4a、第二信息处理装置4b及显示装置5也可以不向显示控制装置3请求命令,而由显示控制装置3向第一信息处理装置4a、第二信息处理装置4b及显示装置5发布命令。
另外,在本发明的实施方式中,显示控制系统1包括指示输入装置2,但也可以将第一信息处理装置4a或第二信息处理装置4b作为指示输入装置2使用。
另外,在本发明的实施方式中,对显示装置5具有两个输入部(第一输入部51a及第二输入部51b)的情况进行了说明,但显示装置5也可以具有三个以上输入部。换言之,显示控制系统1也可以具有三台以上的信息处理装置。
本发明能够用于会议系统、演讲系统及授课系统这样的使用显示装置的系统。
附图标记说明
1 显示控制系统
3 显示控制装置
4a 第一信息处理装置
4b 第二信息处理装置
5 显示装置
32 声音识别部
33 存储部
45a 声音输入输出部
45b 视频输入部
51a 第一输入部
51b 第二输入部
100a 扬声器麦克风装置
100b 视频拍摄用摄像机
331 第一管理表
332 第二管理表
333 应用程序使用设备表
334 关键词表
341 判定部
342 命令生成部
343 命令发布部
461 图像传送应用程序

Claims (7)

1.一种显示控制装置,其对显示装置进行控制,该显示控制装置的特征在于,
所述显示装置具有与信息处理装置连接的两个以上的输入部,
所述显示控制装置包括:
存储部,其存储装置信息和信号接收状况信息;
判定部,其判定来自使用者的指示的内容;以及
命令生成部,其基于所述判定部的判定结果和所述存储部所存储的信息,生成向所述信息处理装置及所述显示装置中的至少一个发布的命令,
所述装置信息表示所述信息处理装置的各个状态,
所述信号接收状况信息表示输出显示图像的所述信息处理装置的信息,所述显示图像为所述显示装置显示的图像,
所述装置信息包含表示连接于所述信息处理装置的周边设备的信息、安装于所述信息处理装置的应用程序软件的信息和表示所述应用程序软件是否在动作中的信息,
所述命令生成部基于所述判定部的判定结果来判定第一应用程序软件,判定与所述第一应用程序软件相关的特定的周边设备,从所述信息处理装置中,判定连接有所述特定的周边设备的所述信息处理装置即指示对应装置,生成将所述显示装置显示的所述显示图像切换为从所述指示对应装置输出的图像的第一命令,
所述第一应用程序软件是用于执行来自所述使用者的指示的应用程序软件。
2.根据权利要求1所述的显示控制装置,其特征在于,
所述命令生成部还生成使安装于所述指示对应装置的所述第一应用程序软件执行与所述指示对应的功能的第二命令。
3.根据权利要求1或2所述的显示控制装置,其特征在于,
在所述指示是使所述显示装置显示第一图像的指示的情况下,
所述命令生成部从所述信息处理装置中判定输出所述第一图像的所述信息处理装置即特定图像输出装置,判定能够接收所述第一图像并使之显示的第二应用程序软件,判定所述第二应用程序软件是否是能够接收所述第一图像并使之显示的状态,在所述第二应用程序软件不是能够接收所述第一图像并使之显示的状态的情况下,生成将所述显示装置显示的所述显示图像切换为所述第一图像的第三命令。
4.根据权利要求3所述的显示控制装置,其特征在于,
所述第二应用程序软件是使所述显示装置显示第二图像的应用程序软件,在所述第二应用程序软件是能够接收所述第一图像并使之显示的状态的情况下,所述命令生成部生成使所述第一图像与所述第二图像重叠的第四命令。
5.根据权利要求1、2、4中任一项所述的显示控制装置,其特征在于,
具有识别所述使用者的声音的声音识别部,
所述判定部基于所述声音识别部的识别结果判定来自所述使用者的指示的内容。
6.一种显示控制系统,其包括显示装置和对所述显示装置进行控制的显示控制装置,该显示控制系统的特征在于,
所述显示装置具有与信息处理装置连接的两个以上的输入部,
所述显示控制装置包括:
存储部,其存储装置信息和信号接收状况信息;
判定部,其判定来自使用者的指示的内容;以及
命令生成部,其基于所述判定部的判定结果和所述存储部所存储的信息,生成向所述信息处理装置及所述显示装置中的至少一个发布的命令,
所述装置信息表示所述信息处理装置的各个状态,
所述信号接收状况信息表示输出显示图像的所述信息处理装置的信息,
所述显示图像为所述显示装置显示的图像,
所述装置信息包含表示连接于所述信息处理装置的周边设备的信息、安装于所述信息处理装置的应用程序软件的信息和表示所述应用程序软件是否在动作中的信息,
所述命令生成部基于所述判定部的判定结果来判定指示对应的应用程序软件,判定与所述指示对应的应用程序软件相关的特定的周边设备,从所述信息处理装置中,判定连接有所述特定的周边设备的所述信息处理装置即指示对应装置,生成将所述显示装置显示的显示图像切换为从所述指示对应装置输出的图像的命令,
所述指示对应的应用程序软件是用于执行来自所述使用者的指示的应用程序软件,
所述显示装置显示与所述命令对应的图像。
7.一种显示控制方法,其对显示装置进行控制,该显示控制方法的特征在于,
所述显示装置具有与信息处理装置连接的两个以上的输入部,
所述显示控制方法包括:
存储步骤,在该存储步骤中,存储装置信息和信号接收状况信息;
判定步骤,在该判定步骤中,判定来自使用者的指示的内容;
命令生成步骤,在该命令生成步骤中,基于在所述判定步骤中判定的结果和在所述存储步骤中存储的信息,生成向所述信息处理装置及所述显示装置中的至少一个发布的命令;以及
所述显示装置显示与所述命令对应的图像的步骤,
所述装置信息表示所述信息处理装置的各个状态,
所述装置信息包含表示连接于所述信息处理装置的周边设备的信息、安装于所述信息处理装置的应用程序软件的信息和表示所述应用程序软件是否在动作中的信息,
所述信号接收状况信息表示输出显示图像的所述信息处理装置的信息,
所述显示图像为所述显示装置显示的图像,
所述命令生成步骤包括:
基于所述判定步骤中的判定结果来判定指示对应的应用软件的步骤;
判定与所述指示对应的应用软件相关联的特定的周边设备的步骤;
从所述信息处理装置中,判定连接有所述特定的周边设备的所述信息处理装置即指示对应装置的步骤;
生成将所述显示装置显示的所述显示图像切换为从所述指示对应装置输出的图像的命令的步骤;
所述指示对应的应用程序软件是用于执行来自所述使用者的指示的应用程序软件。
CN201910124957.XA 2018-02-19 2019-02-19 显示控制装置、显示控制系统及显示控制方法 Active CN110177186B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-027015 2018-02-19
JP2018027015A JP6936165B2 (ja) 2018-02-19 2018-02-19 表示制御装置、表示制御システム、及び表示制御方法

Publications (2)

Publication Number Publication Date
CN110177186A CN110177186A (zh) 2019-08-27
CN110177186B true CN110177186B (zh) 2021-03-16

Family

ID=67617787

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910124957.XA Active CN110177186B (zh) 2018-02-19 2019-02-19 显示控制装置、显示控制系统及显示控制方法

Country Status (3)

Country Link
US (1) US10996923B2 (zh)
JP (1) JP6936165B2 (zh)
CN (1) CN110177186B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6936165B2 (ja) * 2018-02-19 2021-09-15 シャープ株式会社 表示制御装置、表示制御システム、及び表示制御方法
CN110910874A (zh) * 2019-11-08 2020-03-24 深圳明心科技有限公司 一种互动课堂语音控制方法、终端设备、服务器和系统
JP7459760B2 (ja) * 2020-10-27 2024-04-02 セイコーエプソン株式会社 表示システムの制御方法、表示システム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1434366A (zh) * 2002-01-21 2003-08-06 Lg电子株式会社 处理显示设备输入信号的方法和设备
CN105491413A (zh) * 2014-10-07 2016-04-13 三星电子株式会社 显示装置、显示系统以及显示方法
CN107547884A (zh) * 2016-06-27 2018-01-05 精工爱普生株式会社 显示装置以及显示装置的控制方法
US9996310B1 (en) * 2016-09-15 2018-06-12 Amazon Technologies, Inc. Content prioritization for a display array

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6157705A (en) * 1997-12-05 2000-12-05 E*Trade Group, Inc. Voice control of a server
JP2001197379A (ja) * 2000-01-05 2001-07-19 Matsushita Electric Ind Co Ltd 機器設定装置、機器設定システムおよび機器設定処理プログラムを記録した記録媒体
US7298960B1 (en) * 2002-05-10 2007-11-20 Microsoft Corporation Playback diagnostics
JP5504547B2 (ja) * 2005-10-31 2014-05-28 カシオ計算機株式会社 画像出力装置及びプログラム
JP2007280199A (ja) * 2006-04-10 2007-10-25 Brother Ind Ltd アプリケーションソフトウェア
JP2009055538A (ja) * 2007-08-29 2009-03-12 Sharp Corp 表示装置および表示システム
US8050713B2 (en) * 2007-10-03 2011-11-01 Harris Corporation Keypad display unit
US10027676B2 (en) * 2010-01-04 2018-07-17 Samsung Electronics Co., Ltd. Method and system for multi-user, multi-device login and content access control and metering and blocking
KR20130142824A (ko) * 2012-06-20 2013-12-30 삼성전자주식회사 원격 제어 장치 및 그 제어 방법
US9288421B2 (en) 2012-07-12 2016-03-15 Samsung Electronics Co., Ltd. Method for controlling external input and broadcast receiving apparatus
KR101743514B1 (ko) 2012-07-12 2017-06-07 삼성전자주식회사 외부 입력 제어 방법 및 이를 적용한 방송 수신 장치
JP2014191116A (ja) * 2013-03-26 2014-10-06 Sharp Corp 携帯端末、表示装置、出力方法、プログラム、及び、記録媒体
KR102411611B1 (ko) * 2016-01-05 2022-06-21 삼성전자주식회사 디스플레이 장치 및 그의 제어방법
JP6936165B2 (ja) * 2018-02-19 2021-09-15 シャープ株式会社 表示制御装置、表示制御システム、及び表示制御方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1434366A (zh) * 2002-01-21 2003-08-06 Lg电子株式会社 处理显示设备输入信号的方法和设备
CN105491413A (zh) * 2014-10-07 2016-04-13 三星电子株式会社 显示装置、显示系统以及显示方法
CN107547884A (zh) * 2016-06-27 2018-01-05 精工爱普生株式会社 显示装置以及显示装置的控制方法
US9996310B1 (en) * 2016-09-15 2018-06-12 Amazon Technologies, Inc. Content prioritization for a display array

Also Published As

Publication number Publication date
JP2019144740A (ja) 2019-08-29
CN110177186A (zh) 2019-08-27
US10996923B2 (en) 2021-05-04
US20190258455A1 (en) 2019-08-22
JP6936165B2 (ja) 2021-09-15

Similar Documents

Publication Publication Date Title
CN110177186B (zh) 显示控制装置、显示控制系统及显示控制方法
US7584306B2 (en) KVM switch with on-screen-display and a computer switching method thereof
US10606367B2 (en) Command relay device, system and method for providing remote assistance/remote control
US20110263202A1 (en) Bluetooth communication method and system
US20200037144A1 (en) Method and apparatus for establishing device connection
KR20200047162A (ko) 분할된 화면 상에서 실행 가능한 어플리케이션 리스트를 디스플레이하는 전자 장치 및 전자 장치의 동작 방법
WO2019112181A1 (ko) 오디오 데이터에 포함된 음소 정보를 이용하여 어플리케이션을 실행하기 위한 전자 장치 및 그의 동작 방법
EP3822768A1 (en) Information processing system, information processing method, and information processing apparatus
CN110413249B (zh) 远程交互系统
US11113027B2 (en) Apparatus, system, and method that support operation to switch to input terminal to be activated among input terminals included in display apparatus
CN114489350A (zh) 一种输入法调用方法及相关设备
US11264031B2 (en) Method for processing plans having multiple end points and electronic device applying the same method
WO2020138909A1 (ko) 콘텐트 공유 방법 및 그 전자 장치
CN110060670B (zh) 操作辅助装置、操作辅助系统以及操作辅助方法
JP2009543422A (ja) 携帯電話に連結される統合インタフェース情報を内蔵する通信環境設定装置及びその設定方法
US8423684B2 (en) Display apparatus operated in multiple modes and mode changing method thereof
JP7141226B2 (ja) 音声入力装置、及び遠隔対話システム
KR20190108977A (ko) 화면 제어 방법 및 이를 지원하는 전자 장치
JP7427875B2 (ja) 表示装置、表示方法、表示プログラム、表示システム
JP7088703B2 (ja) 情報処理システム
US11625218B2 (en) Sound output device, sound output system, and output sound control method with appropriately controllable volume, and recording medium
US11169695B2 (en) Method for processing dynamic image and electronic device thereof
KR20120066283A (ko) 컴퓨팅 처리가 가능한 휴대용 장치 및 그의 컴퓨팅 처리 방법
US20200388279A1 (en) Audio processing system, conferencing system, and audio processing method
KR20210017138A (ko) 사용자 인터페이스를 표시하는 폴더블 전자 장치 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant