CN103748541A - 被支援装置、支援装置、设备间向导系统、记录介质、以及集成电路 - Google Patents

被支援装置、支援装置、设备间向导系统、记录介质、以及集成电路 Download PDF

Info

Publication number
CN103748541A
CN103748541A CN201280026411.7A CN201280026411A CN103748541A CN 103748541 A CN103748541 A CN 103748541A CN 201280026411 A CN201280026411 A CN 201280026411A CN 103748541 A CN103748541 A CN 103748541A
Authority
CN
China
Prior art keywords
assisting system
information
guide
screen
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280026411.7A
Other languages
English (en)
Other versions
CN103748541B (zh
Inventor
田冈幸
安达孝夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN103748541A publication Critical patent/CN103748541A/zh
Application granted granted Critical
Publication of CN103748541B publication Critical patent/CN103748541B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/453Help systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/452Remote windowing, e.g. X-Window System, desktop virtualisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种被支援装置,包括:输出部(1109),显示作为包含被支援装置的操作项目的图像的操作画面;请求发行部(1105),发行开始支援请求,该开始支援请求是包含用于确定被显示在操作画面的操作项目的信息的操作画面信息的信号;收发部,将开始支援请求发送给支援装置,从支援装置接收操作项目之中的示出被支援用户应该操作的操作项目的向导GUI信息;以及向导GUI重叠部(1107),根据向导GUI信息使向导GUI重叠到操作画面,该向导GUI是用于将应该操作的操作项目指导给被支援用户的图像。

Description

被支援装置、支援装置、设备间向导系统、记录介质、以及集成电路
技术领域
本发明涉及被支援装置等,尤其涉及设备间向导系统中的被支援装置等,在该设备间向导系统中,支援用户通过经由网络与被支援装置连接的支援装置,来支援对被支援装置进行操作的被支援用户。
背景技术
近些年,智能手机、平板电脑终端等面向个人用户的高功能终端正在普及。这些终端中搭载Android(注册商标)或iOS等平台,并且具备用于下载并执行各种应用软件的环境,据此,在逐步实现高功能化、进入复杂化的同时,向新的功能的更新周期也不断短缩。
因此,对于高龄者等不熟悉家电设备的操作(IT技能不高)的用户而言,学习操作新的功能是比较困难的。
作为由其他的设备来支援某个设备的操作的以往技术,例如可以列举出微软公司的操作系统中所搭载的远程桌面技术、以及专利文献1中记载的技术。
在远程桌面技术中提供的机构是,由作为支援一方的设备的远程的PC来操作被支援一方的设备操作,并执行处理。
并且,在专利文献1所记载的技术中提供的机构是,由支援一方设备来记录操作应用软件的映像,并发送到被支援一方设备。
(现有技术文献)
(专利文献)
专利文献1    日本特开2009-289098号公报
但是,在以往的操作支援技术中存在以下的课题。
首先,在远程桌面中,由于远程的支援一方设备操作被支援一方设备并执行处理,因此会出现不熟悉家电设备的操作的用户失去学习操作方法的机会的问题。
发明内容
本发明为了解决以往的课题,目的在于提供一种既不会使被支援用户失去学习机会,又能够从支援用户接受交互式操作支援的被支援装置等。
本发明的一个局面所涉及的被支援装置,在设备间向导系统中,支援用户经由通过网络与被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该被支援装置具备:输出部,显示操作画面,该操作画面是包含所述被支援装置的操作项目的图像;请求发行部,发行开始支援请求,该开始支援请求是包含操作画面信息的信号,该操作画面信息是用于确定被显示在所述操作画面的所述操作项目的信息;收发部,将所述开始支援请求发送给所述支援装置,从所述支援装置接收所述操作项目之中的、示出所述被支援用户应该操作的操作项目的向导GUI信息;以及向导GUI重叠部,根据所述向导GUI信息,使向导GUI重叠到所述操作画面,所述向导GUI是用于将所述应该操作的操作项目指导给所述被支援用户的图像。
并且,本发明不仅可以作为这样的被支援装置来实现,而且可以作为将被支援装置中所包含的特征性的单元用作步骤的被支援方法来实现,并且可以作为使计算机执行具有这种特征的步骤的程序来实现。并且,这些程序能够通过CD-ROM(Compact Disc Read Only Memory:只读光盘)等记录介质以及互联网等传输介质来流通。
而且,本发明既能够作为实现这种被支援装置的功能的一部分或者全部的半导体集成电路(LSI)来实现,又能够作为包括这种被支援装置以及支援装置的设备间向导系统来实现。
通过本发明,能够提供一种既不会使被支援用户失去学习机会,又能够从支援用户接受交互式操作支援的被支援装置等。
附图说明
图1示出了本发明的实施方式中的设备间向导系统所具备的被支援装置以及支援装置的功能块构成的一个例子。
图2是示出本发明的实施方式中的的设备间向导系统的第一构成的模式图。
图3是示出本发明的实施方式中的设备间向导系统的第二构成的模式图。
图4是示出本发明的实施方式中的设备间向导系统的第三构成的模式图。
图5示出了本发明的实施方式中的被支援装置所显示的操作画面的迁移的一个例子。
图6示出了本发明的实施方式中的向导GUI(图形用户界面)重叠部将向导GUI重叠到被支援装置的输入输出部所显示的操作画面时的画面的一个例子。
图7示出了由本发明的实施方式中的向导画面生成部生成的向导画面的一个例子。
图8是以向导模式进行工作时的本发明的实施方式所涉及的被支援装置以及支援装置间的时序图。
图9是本发明的实施方式中的向支援装置发送开始支援请求的处理的详细的流程图。
图10是本发明的实施方式中的由被支援装置进行的向导GUI的重叠处理的详细的流程图。
图11是本发明的实施方式中的从被支援装置继续向支援装置发出请求的处理的详细的流程图。
图12是本发明的实施方式中的由支援装置进行的向导画面的描绘处理的详细的流程图。
图13是本发明的实施方式中的从支援装置向被支援装置发送向导GUI信息的发送处理的详细的流程图。
图14是以代行操作模式来进行工作时的本发明的实施方式所涉及的被支援装置以及支援装置间的时序图。
图15是本发明的实施方式中的从被支援装置向支援装置的请求开始支援的发送处理的详细的流程图。
图16是本发明的实施方式中的被支援装置所具备的代行履历记录部所进行的代行操作履历信息的记录处理的详细的流程图。
图17是本发明的实施方式中的直到在支援装置显示代行操作画面为止的处理的详细的流程图。
图18是本发明的实施方式中的由支援装置向被支援装置发送代行操作履历信息的发送处理的详细的流程图。
图19是示出实现本发明的实施方式所涉及的被支援装置等的计算机系统的硬件构成的方框图。
具体实施方式
(成为本发明的基础的见解)
在作为以往的技术的专利文献1所记载的方法中的构成是,事先从支援一方的设备向被支援一方的设备发送操作映像,不是双方向通信。因此所出现的第一个课题是,被支援一方设备的被支援用户与支援一方设备的支援用户彼此一边互相确认操作画面一边即时地沟通进行操作,在进行这种通信的逐步操作方法中,不能对操作方法的学习进行支援。
并且,在专利文献1所记载的方法中存在的第二个课题是,由于需要将操作画面的映像信息从支援一方的设备传输到被支援一方的设备,在支援一方以及被支援一方这双方的设备所具备的画面的分辨率、图标等操作部件的大小、或者图标的配置位置等在两个装置所具备的显示设备的规格不同的情况下,则不能进行以操作部件为单位的向导。
为了解决上述的第一个课题,本发明的一个局面所涉及的被支援装置,在设备间向导系统中,支援用户经由通过网络与被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该被支援装置具备:输出部,显示操作画面,该操作画面是包含所述被支援装置的操作项目的图像;请求发行部,发行开始支援请求,该开始支援请求是包含操作画面信息的信号,该操作画面信息是用于确定被显示在所述操作画面的所述操作项目的信息;收发部,将所述开始支援请求发送给所述支援装置,从所述支援装置接收所述操作项目之中的、示出所述被支援用户应该操作的操作项目的向导GUI信息;以及向导GUI重叠部,根据所述向导GUI信息,使向导GUI重叠到所述操作画面,所述向导GUI是用于将所述应该操作的操作项目指导给所述被支援用户的图像。
根据此构成,被支援用户能够通过被显示在操作画面的向导GUI,从支援用户请教被支援装置的操作方法。即,支援用户所使用的支援装置与被支援用户所使用的被支援装置之间的操作项目被共享,并且通过作为从支援用户向被支援用户发出远程指示的资源来使用向导GUI,从而能够在支援用户与被支援用户之间实现与被支援用户的理解相符的相互作用。其结果是,被支援用户不会失去学习机会,能够从支援用户接受交互式的操作支援。此时,在被支援装置与支援装置之间,不是将画面全体作为图像来公用,而是仅将画面中所包含的操作项目的标识符等、用于确定操作项目而事先决定的信息公用。因此,可以不必依存于支援装置以及被支援装置所具备的显示设备,就能够在被支援用户与支援用户之间共享操作项目。
并且,也可以是,所述向导GUI重叠部,在所述向导GUI信息包含多个所述操作项目与用于确定该多个所述操作项目的每一个的操作顺序的信息的情况下,将与该多个所述操作项目的每一个对应的向导GUI与示出对应的操作顺序的图像一起重叠到所述操作画面。
据此,被支援装置通过以将操作顺序与向导GUI一起重叠到自身所显示的操作画面的方式来进行输出,从而能够将与向导GUI信息对应的操作项目指导给被支援用户。
并且,也可以是,所述向导GUI信息是示出所述支援装置所显示的向导画面中的由所述支援用户操作了的操作项目的信息。
据此,能够将支援用户所操作的操作项目作为被支援用户将要操作的操作项目。
并且,也可以是,该被支援装置还具备处理决定部,该处理决定部接受来自所述被支援用户的支援请求,所述处理决定部,在从所述被支援用户接受了所述支援请求时,判断由所述被支援用户指定的操作支援的模式的类别,在判断为所述模式的类别为第一模式的情况下,且在所述收发部接收了所述向导GUI信息的情况下,使所述向导GUI重叠部将所述向导GUI重叠到所述操作画面,所述请求发行部,发行所述开始支援请求,该开始支援请求包含有所述操作画面信息以及示出被判断的所述模式的类别的信息。
据此,被支援用户能够选择操作支援的模式。因此,被支援用户能够从事先决定的操作支援模式中选择自己所希望的模式,并接受操作支援。
并且,也可以是,该被支援装置还具备代行履历记录部,该代行履历记录部用于记录代行操作履历信息,该代行操作履历信息是所述支援用户对所述支援装置所显示的所述操作项目进行操作的履历信息,所述处理决定部,在所述模式的类别被判断为是与所述第一模式不同的第二模式的情况下,使所述代行履历记录部将从所述支援装置获得的所述代行操作履历信息与所述操作画面对应起来记录。
据此,被支援用户能够选择与第一模式不同的第二模式来用作操作支援模式。具体而言,在第二模式中,被支援用户将操作对象装置的操作全都委托给支援用户,事后通过确认该操作内容,从而能够学习由支援装置进行的操作对象装置的操作方法。
并且,也可以是,该被支援装置还具备操作执行部,该操作执行部将操作信号发送给所述操作对象装置,所述操作信号是用于对外部的操作对象装置进行操作的信号,所述处理决定部,使所述操作执行部将与由所述被支援用户进行的所述操作画面的操作相对应的所述操作信号发送给所述操作对象装置,并与通过所述操作信号的所述操作对象装置的处理结果相对应地对所述操作画面进行更新,并且,使所述收发部将示出被更新的所述操作画面中所包含的操作项目的所述操作画面信息发送给所述支援装置。
并且,也可以是,所述处理决定部,至少以如下的情况之一作为契机,使所述向导GUI重叠部中止所述向导GUI的重叠,所述情况包括:由所述被支援用户进行的规定的操作、从所述操作对象装置获得的规定的信号的接收、从所述支援装置发送的规定的信号的接收、以及事先决定的时间的经过。
据此,处理决定部在以第一模式进行操作支援时,能够以恰当的时机来中止操作支援。
本发明的其他的局面所涉及的支援装置为,在设备间向导系统中,支援用户经由通过网络与被支援装置连接的所述支援装置,对操作所述被支援装置的被支援用户进行支援,该支援装置具备:收发部,从所述被支援装置接收操作画面信息,该操作画面信息是用于确定所述被支援装置的操作项目的信息;向导画面生成部,根据所述操作画面信息,生成向导画面,该向导画面是包含所述操作项目的图像;输出部,显示所述向导画面;输入部,获得由支援用户对所述向导画面进行的操作;以及向导GUI生成部,生成向导GUI信息,该向导GUI信息是示出所述支援装置所显示的向导画面中的由所述支援用户操作了的操作项目的信息,所述收发部进一步将所述向导GUI信息发送给所述被支援装置。
据此,支援用户通过操作支援装置所显示的向导画面中包含的操作项目,从而能够将向导GUI信息发送给被支援装置,该向导GUI信息是用于确定应该操作的操作项目的信息。
并且,也可以是,该支援装置还具备:请求接受部,根据所述开始支援请求中包含的信息来判断所述模式的类别,在所述模式的类别被判断为是第一模式的情况下,使所述向导画面生成部生成所述向导画面;以及处理决定部,在所述模式的类别被判断为是所述第一模式的情况下,使所述向导GUI生成部生成所述向导GUI信息。
据此,能够按照被支援用户对操作支援模式进行的选择,支援装置来变更支援方法。
并且,也可以是,该支援装置还具备:代行画面生成部,根据操作画面信息生成代行画面,该代行画面是与所述被支援装置的操作画面对应的图像,所述操作画面信息是用于确定被显示在所述被支援装置的操作画面的操作项目的信息;代行履历生成部,生成代行操作履历信息,该代行操作履历信息是所述支援用户对所述代行画面进行操作的履历信息;以及代行操作执行部,将操作信号发送给所述操作对象装置,所述操作信号是用于对外部的操作对象装置进行操作的信号,所述请求接受部,在所述模式的类别被判断为是与所述第一模式不同的第二模式的情况下,使所述代行画面生成部生成所述代行画面,所述处理决定部,在所述模式的类别被判断为是所述第二模式的情况下,使所述代行操作执行部将与由所述支援用户进行的所述代行画面的操作内容相对应的所述操作信号,发送给所述操作对象装置,所述代行操作执行部,在所述模式的类别被判断为是所述第二模式的情况下,使所述代行履历生成部生成所述代行操作履历信息,使所述收发部将该代行操作履历信息发送给所述被支援装置。
据此,支援装置在第二操作模式被选择的情况下,生成代行操作履历信息并发送给被支援装置。其结果是,即使在第二操作模式中,被支援用户也能够从支援用户进行的操作履历,事后学习操作方法。
本发明的其他的局面所涉及的设备间向导系统为,由支援用户经由通过网络与被支援装置连接的支援装置,对为了从所述被支援装置对操作对象装置进行操作而操作所述被支援装置的被支援用户进行支援,该设备间向导系统具备:所述被支援装置中的输出部,显示操作画面,该操作画面是包含所述被支援装置的操作项目的图像;所述被支援装置中的请求发行部,发行开始支援请求,该开始支援请求是包含操作画面信息的信号,所述操作画面信息是用于对被显示在所述操作画面的所述操作项目进行确定的信息;所述被支援装置中的发送部,将所述开始支援请求发送给所述支援装置;所述支援装置中的接收部,从所述被支援装置接收所述操作画面信息;所述支援装置中的向导画面生成部,根据所述操作画面信息,生成向导画面,该向导画面是包含所述操作项目的图像;所述支援装置中的输出部,显示所述向导画面;所述支援装置中的输入部,获得由所述支援用户对所述向导画面进行的操作;所述支援装置中的向导GUI生成部,生成向导GUI信息,该向导GUI信息是示出所述向导画面中的由所述支援用户操作了的所述操作项目的信息;所述支援装置中的发送部,将所述向导GUI信息发送给所述被支援装置;所述被支援装置中的接收部,接收所述向导GUI信息;以及所述被支援装置中的向导GUI重叠部,根据所述向导GUI信息,使向导GUI重叠到所述操作画面,该向导GUI是用于将应该操作的所述操作项目指导给所述被支援用户的图像。
并且,也可以是,用于确定所述操作项目的信息是用于识别包含操作项目的图像的标识符,所述被支援装置的输出部,将所述被支援装置所保持的图像之中的、由所述标识符识别的第一图像,作为包含所述操作项目的图像来显示到操作画面,所述支援装置的输出部,将所述支援装置所保持的图像之中的、由所述标识符识别的第二图像,作为包含所述操作项目的图像来显示到向导画面。
据此,被支援装置以及支援装置所分别保持的图像被显示到各个显示画面,从而可以不依存于显示设备就能够实现交互式的操作支援。即,能够解决上述的第二课题。
本发明的其他的局面所涉及的被支援方法为,在设备间向导系统中,支援用户经由通过网络与被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该被支援方法包括:输出步骤,将包含操作项目的操作画面显示到所述被支援装置;请求发行步骤,发行开始支援请求,该开始支援请求是包含操作画面信息的信号,所述操作画面信息是用于确定被显示在所述操作画面的所述操作项目的信息;发送步骤,将所述开始支援请求发送给所述支援装置;接收步骤,从所述支援装置接收向导GUI信息,该向导GUI信息示出所述操作项目之中的所述被支援用户应该操作的操作项目;以及向导GUI重叠步骤,使向导GUI重叠到所述操作画面,该向导GUI是用于将由所述向导GUI信息示出的操作项目指导给所述被支援用户的图像。
本发明的其他的局面所涉及的记录介质为,记录程序,以便使计算机作为设备间向导系统中的被支援装置来工作,在该设备间向导系统中,支援用户经由通过网络与所述被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该记录介质中记录的程序使所述计算机执行以下的步骤:输出步骤,将包含操作项目的操作画面显示到所述被支援装置;请求发行步骤,发行开始支援请求,该开始支援请求是包含操作画面信息的信号,所述操作画面信息是用于确定被显示在所述操作画面的所述操作项目的信息;发送步骤,将所述开始支援请求发送给所述支援装置;接收步骤,从所述支援装置接收向导GUI信息,该向导GUI信息示出所述操作项目之中的所述被支援用户应该操作的操作项目;以及向导GUI重叠步骤,使向导GUI重叠到所述操作画面,该向导GUI是用于将由所述向导GUI信息示出的操作项目指导给所述被支援用户的图像。
本发明的其他的局面所涉及的集成电路为,被搭载在具备输出部的非支援装置,所述输出部在设备间向导系统中显示作为包含操作项目的图像的操作画面,并且在该设备间向导系统中,支援用户经由通过网络与所述被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该集成电路包括:请求发行部,发行开始支援请求,该开始支援请求是包含操作画面信息的信号,该操作画面信息是用于确定被显示在所述操作画面的所述操作项目的信息;收发部,将所述开始支援请求发送给所述支援装置,从所述支援装置接收所述操作项目之中的、示出所述被支援用户应该操作的操作项目的向导GUI信息;以及向导GUI重叠部,根据所述向导GUI信息将向导GUI重叠到所述操作画面,该向导GUI是用于将所述应该操作的操作项目指导给所述被支援用户的图像。
在本发明的其他的局面所涉及的支援方法中,在设备间向导系统中,支援用户经由通过网络与被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该被支援方法包括:接收步骤,从所述支援装置接收操作画面信息,该操作画面信息是用于确定被显示在所述被支援装置的操作画面的操作项目的信息;向导画面生成步骤,根据所述操作画面信息,生成向导画面,该向导画面是与所述被支援装置的操作画面对应的操作画面;输出步骤,显示所述向导画面;输入步骤,获得支援用户对所述向导画面进行的操作;向导GUI生成步骤,生成向导GUI信息,该向导GUI信息是用于确定由所述支援用户操作的所述向导画面中所包含的所述操作项目的信息;以及发送步骤,将所述向导GUI信息发送给所述被支援装置。
本发明的其他的局面所涉及的记录介质为,记录程序,以便使计算机作为设备间向导系统中的支援装置来工作,在该设备间向导系统中,支援用户经由通过网络与被支援装置连接的所述支援装置,对操作所述被支援装置的被支援用户进行支援,该记录介质中记录的程序使所述计算机执行以下的步骤:接收步骤,从所述支援装置接收操作画面信息,该操作画面信息是用于确定被显示在所述被支援装置的操作画面的操作项目的信息;向导画面生成步骤,根据所述操作画面信息,来生成向导画面,该向导画面是与所述被支援装置的操作画面对应的操作画面;输出步骤,显示所述向导画面;输入步骤,获得支援用户对所述向导画面进行的操作;向导GUI生成步骤,生成向导GUI信息,该向导GUI信息是用于确定由所述支援用户操作的所述向导画面中包含的所述操作项目的信息;以及发送步骤,将所述向导GUI信息发送给所述被支援装置。
本发明的其他的局面所涉及的集成电路为,被搭载在具备输出部和输入部的支援装置,所述输出部显示向导画面,所述输入部获得支援用户对所述向导画面进行的操作,在设备间向导系统中,支援用户经由通过网络与被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该集成电路包括:收发部,从所述被支援装置接收操作画面信息,该操作画面信息是用于确定所述被支援装置的操作项目的信息;向导画面生成部,根据所述操作画面信息,生成向导画面,该向导画面是包含所述操作项目的图像;以及向导GUI生成部,生成向导GUI信息,该向导GUI信息是示出所述向导画面中的由所述支援用户操作了的所述操作项目的信息,所述收发部进一步将所述向导GUI信息发送给所述被支援装置。
并且,这些所有的或者具体的实施方式不仅可以作为系统、方法、集成电路、计算机程序或者记录介质来实现,而且可以通过对系统、方法、集成电路、计算机程序或者记录介质进行任意地组合来实现。
以下参照附图对本发明的实施方式进行说明。并且,这些附图仅用于对本发明所采用的技术特征进行说明,记载的装置的构成以及各种处理的流程图等在没有特殊的记载的情况下并非是对本发明的限定,而仅是简单的说明例子。
本发明的设备间向导系统是提供如下的操作学习机会的设备间向导系统,这种操作学习是指,利用被支援一方设备的对家电设备的操作不熟悉的利用者一边与支援设备的利用者进行通信一边进行的操作。例如可以设想是以下这样的设备间向导系统等,即:经由通过网络与被支援装置连接的支援装置,支援用户来支援操作被支援装置的被支援用户。
图1示出了本发明的实施方式中的设备间向导系统1001的功能块构成的一个例子。
设备间向导系统1001具备:被支援装置1101、支援装置1201、以及操作对象装置1301。
被支援装置1101、支援装置1201、以及操作对象装置1301分别通过LAN(Local Area Network:局域网)等网络来连接。并且,在本实施方式中,虽然被支援装置1101与操作对象装置1301通过网络相连接,不过也可以像后述的那样,被支援装置1101的内部包括操作对象装置1301。在这种情况下,被支援装置1101是通过自身的操作来从支援装置1201接受操作支援的。
被支援装置1101以及支援装置1201分别例如是,智能手机、平板电脑终端、或者是像TV这种针对显示的操作画面来接受用户的操作的设备。在此,操作画面是指,至少包括一个作为用户所操作(例如通过手指进行的触摸操作等)的对象的操作项目的图像。操作对象装置1301例如是通过智能手机、平板电脑终端、TV、或者记录器这种来自用户的操作或者来自其他的设备的操作,来执行处理的设备。
被支援装置1101是设备间向导系统1001中的被支援装置,在该设备间向导系统1001中,通过经由网络与被支援装置1101连接的支援装置1201,支援用户对操作被支援装置1101的被支援用户进行支援。
并且,支援装置1201是设备间向导系统1001中的支援装置,在该设备间向导系统1001中,通过经由网络与被支援装置1101连接的支援装置1201,支援用户对操作被支援装置1101的被支援用户进行支援。
以下,对被支援装置1101所具备的各个构成进行说明。并且在图1中,对于被支援装置1101所必需的功能块用实线来表示,对于能够省略的功能块用虚线来表示。
被支援装置1101具备:输入部1102、用户输入接受部1103、处理决定部1104、请求发行部1105、收发部1106、向导GUI(Graphical UserInterface:图形用户界面)重叠部1107、画面输出控制部1108、输出部1109、操作执行部1110、以及代行履历记录部1111。并且,在本实施方式所涉及的被支援装置1101中,输入部1102与输出部1109作为输入输出部812被构成为一体。输入输出部812具体为触摸显示屏等。本实施方式所涉及的被支援装置1101显示向输入输出部812的操作画面,并将用户针对操作画面的触摸操作等作为输入来获得。
被支援装置1101的输入部1102对来自用户的输入操作进行识别,并将与输入操作对应的电信号输出给用户输入接受部1103。输入部1102是输入界面,其构成为将用户的输入操作变换为能够由被支援装置1101处理的电信号。输入部1102例如是触摸面板、遥控器、键盘等,除了由用户的手指进行的输入操作之外,还可以将通过麦克风等的声音作为输入操作来获得,并可以变换为电信号。
被支援装置1101的用户输入接受部1103从输入部1102获得与用户的输入操作相对应的电信号,并将用户输入通知给处理决定部1104。
被支援装置1101的处理决定部1104在被通知了用户输入时,确定输入是支援请求还是操作请求。在此,支援请求是一种用户输入,是在用户作为被支援用户,通过支援装置1201向支援用户请教被支援装置1101的操作方法的请求。并且,操作请求也是一种用户输入,表示用户针对被支援装置1101所具备的操作执行部请求处理的执行。
并且,处理决定部1104在从被支援用户接受支援请求时,判断由被支援用户指定的操作支援的模式的类别。在判断的结果为,模式的类别被判断为向导模式(以后称为第一模式)的情况下,也即收发部1106从支援装置1201接收了向导GUI信息的情况下,使向导GUI重叠部1107将向导GUI重叠到操作画面。并且,向导GUI信息是指,表示操作画面中所包含的操作项目中的被支援用户应该操作的操作项目的信息。并且,向导GUI是用于向被支援用户指导应该操作的操作项目的图像。具体说明待后述。
具体而言,在输入为支援请求的情况下,处理决定部1104确定由用户指示的支援的“模式”以及支援用户所使用的支援装置。接着,将“模式”和作为用于确定支援装置的标识符的ID交给请求发行部1105,并进行支援请求。并且,如后述那样,模式的类别中例如可以想定有两种,即向导模式和代行操作模式。
另外,处理决定部1104在来自用户的输入为操作请求的情况下,将操作内容交给操作执行部1110,并请求操作的执行。例如后述那样,在为向导模式中的操作请求的情况下,用户针对被重叠有向导GUI的操作画面进行输入操作,处理决定部1104将用户所进行的输入操作的内容交给操作执行部1110,在请求对应的操作的执行的同时,将“操作画面的更新”通知给请求发行部1105。
在此,关于来自用户的输入是支援请求还是操作请求的确定、以及在为支援请求的情况下的“模式”是“向导模式”还是“代行操作模式”的确定、以及支援装置的确定,例如能够通过用户针对被配置在被支援装置1101的操作画面的操作部件进行的输入操作(例如用手指触摸等)、以及事先将与应该执行的处理的对应关系编为程序来实现。
图5示出了被支援装置所具备的输入输出部812所显示的操作画面的迁移的一个例子。
用户在触摸了图5的(a)所示的应用软件操作画面中的“设定”键5002时,画面迁移到图5的(b)所示的设定画面5-1。在设定画面5-1,在用户触摸“请求支援”键5102时,处理决定部1104将来自用户的输入确定为支援请求,画面迁移到图5的(c)所示的设定画面5-2。接着,在设定画面5-2,在用户触摸“委托向导”键5202时,处理决定部1104将支援时的模式确定为向导模式。另外,在设定画面5-2,在用户触摸“委托代行操作”键5203时,处理决定部1104将支援时的模式确定为代行操作模式。
不论选择了哪种模式,画面均接着迁移到图5的(d)所示的设定画面5-3。在设定画面5-3中,示出事先与支援装置相对应的支援用户的候补名的键5302至5304被显示在操作画面,根据用户所触摸的支援用户的名字来确定支援装置。并且,在用户触摸“设定结束”键5305时,处理决定部1104将确定的信息交给请求发行部1105并进行支援请求,返回图5的(a)所示的应用软件操作画面。
另外,在用户在图5的(a)所示的应用软件操作画面中,选择了被配置在支援设定用的“设定”键5002以外的情况下,处理决定部1104将用户的输入确定为是操作请求。具体而言,在触摸了键5003、5004、或者5005的情况下,用户的输入被确定为是操作请求,将操作内容交给操作执行部1110,并请求操作的执行。
再次参照图1,请求发行部1105发行开始支援请求,该开始支援请求是包含有操作画面信息和示出由处理决定部1104判断的模式的类别的信息的信号,所述操作画面信息是用于确定被显示在操作画面的操作项目的信息。
更具体而言,处理决定部1104在从用户接受到支援请求时,进行模式的判断。在此,在判断为模式是向导模式的情况下,请求发行部1105将现状的操作画面信息、模式、以及支援设备的ID交给收发部1106,并向支援装置1201进行向导模式的开始支援请求。之后,如后述那样,向导GUI重叠部1107根据来自支援装置1201的信息,对处理决定部1104进行设定,以使得在将向导GUI重叠到现状的操作画面为止的期间,或者直到用户解除“向导模式”的开始支援请求为止的期间,被支援装置1101不接受来自用户的操作请求。
另外,在判断为模式是“代行操作模式”的情况下,请求发行部1105将现状的操作画面信息、模式、支援设备的ID、以及作为用于确定操作对象装置1301的标识符的ID交给收发部1106,并向支援装置1201进行代行操作模式的开始支援请求。之后,直到“代行操作模式”的开始支援请求被解除为止的期间,对处理决定部1104进行设定,以使得被支援装置1101不接受来自用户的操作请。
在此,操作画面信息是用于支援装置1201的向导画面生成部1205生成“向导画面”的信息,并且是用于支援装置1201的代行画面生成部1206生成“代行操作画面”的信息。
在此,向导画面以及代行操作画面是指,支援装置1201所显示的图像,也是包含被显示在被支援装置1101的操作画面的操作项目的图像。
具体而言,例如由用于确定被配置在操作画面上的操作部件的标识符、用于描述用户在对部件进行操作时的处理的事件信息、部件的大小、形状、位置信息、数量等构成。
并且,也可以是,作为“操作画面信息”,将在支援装置1201与被支援装置1101之间能够唯一确定的操作画面的URL从被支援装置1101交给支援装置1201,支援装置一方参照URL来生成操作画面。
并且,支援装置一方没有必要将配置在“向导画面”或“代行操作画面”的操作部件的大小、形状、位置与操作画面相同。对于生成依照支援装置的画面分辨率、输入装置、用户来变更布局的向导画面也能够适用本发明。
更具体而言,例如以键作为操作部件的例子时,在向导模式的情况下,只要使被支援装置1101与支援装置1201公用相同数量的被赋予了相同的标签的键。即,在操作画面信息中只要包含作为被显示在被支援装置1101的操作画面的操作部件的键的数量、以及赋予在每个键的标签即可。支援装置1201将操作部件信息中的哪个形状的键以怎样的配置来显示到“向导画面”,这取决于支援装置1201的安装。同样,在代行操作模式中,是要使被支援装置1101与支援装置1201之间公用相同数量的被赋予了相同的标签的键,并公用示出与针对每个键的操作相对应的处理的事件处理器的内容即可。如后述那样,在代行操作模式中,由于支援装置1201自身对操作对象装置1301进行操作,因此,并非是虚设“代行操作画面”,而是需要针对操作对象装置1301进行与被支援装置1101的操作画面相同的操作。
如以上所述,操作画面信息是一种信息,用于对被支援装置1101的操作项目与支援装置1201的操作项目建立逻辑对应关系,不管被支援装置1101的显示设备与支援装置1201的显示设备的技术要求(分辨率、能够显示的色数、设备大小等)是否有差异,均在两装置间共享操作项目。
请求发行部1105在从处理决定部1104接受了“操作画面的更新”通知的情况下,将更新了的操作画面信息交给收发部1106,并向支援装置1201委托以同样的模式继续进行支援。并且,直到向导GUI被再次重叠到操作画面为止的期间,或者直到“向导模式”的支援请求被解除为止的期间,将处理决定部1104设定为不接受来自用户的操作请求。
被支援装置1101的收发部1106是通信界面,将开始支援请求发送给支援装置1201,并从支援装置接收向导GUI信息。作为通信媒体可以是无线也可以是有线。例如可以考虑到有线或无线的LAN、红外线、短距离无线通信等。
更具体而言,收发部1106在从请求发行部1105接受指示时,在向导模式的情况下,将开始支援请求发送给支援装置1201,该开始支援请求中包括:“模式=向导模式”、“操作画面信息”、以及“作为确定被支援装置1101自身的标识符的ID”。并且,在代行操作模式的情况下,收发部1106将包含有“模式=代行操作模式”、“操作画面信息”、“被支援装置1101自身的ID”、以及“操作对象装置1301的ID”的开始支援请求发送给支援装置1201。
在此,将从被支援装置1101发送给支援装置1201的开始支援请求、与针对开始支援请求的从支援装置1201向被支援装置1101的应答,定义为作为用于建立对应的信息的“支援ID”。“支援ID”是,在从被支援装置1101向支援装置1201进行开始支援请求之时,由支援装置1201或被支援装置1101发行的ID,具有在被连接的终端之间唯一确定的值。关于“支援ID”的发行,只要是被连接的终端之间唯一确定的值,既可以由被支援装置发行,也可以由支援装置发行。
被支援装置1101的收发部1106在向导模式执行时操作画面被更新的情况下,将“支援ID”、“模式”、最新的“操作画面信息”、以及“被支援装置1101自身的ID”发送给支援装置1201,并继续请求支援。
并且,被支援装置1101的收发部1106在从支援装置1201在“模式”=“向导模式”的状态下接受作为“向导GUI”的信息的向导GUI信息、以及“支援ID”时,将从支援装置1201获得的“模式”、向导GUI信息、以及“支援ID”发送到向导GUI重叠部1107。并且,收发部1106在从支援装置1201在“模式”=“代行操作模式”的状态下接受作为“代行操作履历”的信息的代行操作履历信息、以及“支援ID”时,将从支援装置1201获得的“模式”、代行操作履历信息、以及“支援ID”发送给代行履历记录部1111。详细待后述。
向导GUI重叠部1107在获得了被显示在被支援装置1101的操作画面的操作项目之中的、表示应该由被支援用户操作的操作项目的向导GUI信息的情况下,将向导GUI重叠到操作画面,该向导GUI是用于将应该操作的操作项目指导给被支援用户的图像。
更具体而言,向导GUI重叠部1107在从收发部1106接受向导GUI信息时,委托画面输出控制部1108进行输出,以使被重叠了向导GUI的操作画面被交到输入输出部812。并且,关于“向导GUI”以及“向导GUI”的信息,将在后述的支援装置1201的向导GUI生成部1212的构成中详细说明。
并且,向导GUI重叠部1107没有必要将显示在操作画面的“向导GUI”的大小或形状、位置,显示成完全与支援装置1201所生成的、支援用户所操作的向导GUI相同。例如,在被支援装置与支援装置的画面分辨率、操作部件的配置等不同的情况下,可以与被支援装置1101的输入输出部812的分辨率、以及操作画面上的操作部件的配置等相对应地,指导向导GUI应该对哪个操作项目进行操作,或者调整并显示大小や形状、配置,以便用户能够确认向导GUI与操作项目的对应关系。
图6示出了向导GUI重叠部1107将向导GUI重叠到输入输出部812所显示的操作画面的画面的一个例子。更具体而言,图6示出了由支援用户进行的支援装置1201的操作画面的操作、与由被支援用户进行的被支援装置1101的操作画面的操作之间的相互作用。
并且,为了便于说明,在此视为被支援用户以向导模式来请求支援用户222,对以TV来看照片的操作方法进行支援。
首先,支援用户222操作作为支援装置1201所具备的触摸显示屏的输入输出部822所显示的操作画面(向导画面),触摸键5014(“用TV来看照片”)(图6的(a))。其结果是,示出与键5014对应的被支援装置1101的操作画面上的操作项目的信息,作为向导GUI信息从支援装置1201发送给被支援装置1101。
接着,接收了向导GUI信息的向导GUI重叠部1107将向导GUI6002(例如,四角形的粗框),重叠并显示到由向导GUI信息示出的操作项目所对应的键,即键5004(“用TV来看照片”)(图6的(b))。
接着,被支援用户对被重叠到图6的(b)所示的操作画面的“用TV来看照片”的键5004的向导GUI6002,在触摸操作画面上的“用TV来看照片”键5004时,处理决定部1104将“键5004已被触摸”这一操作内容交给操作执行部1110,并请求与操作对应的处理的执行。其结果是,被显示在输入输出部812的操作画面被更新为,用于选择显示照片的电视的操作画面(例如,从图6的(d)中去除了向导GUI6102的画面)。之后,处理决定部1104使请求发行部1105发行“操作画面的更新”通知,该“操作画面的更新”通知中包含与被更新的操作画面对应的操作画面信息。被发行的“操作画面的更新”通知被发送给支援装置1201。
接着,支援装置1201将与接收的操作画面信息对应的新的向导画面显示到输入输出部822(图6的(c))。
在此视为,支援用户222在输入输出部822所显示的向导画面中触摸了键6115,键6115是与被支援用户为了看照片而使用的、事前询问的TV的TV标识符“EFG3456”相对应的键。其结果是,示出与键6115相对应的被支援装置1101的操作画面上的操作项目的信息,作为向导GUI信息从支援装置1201被发送给被支援装置1101。
接着,接收了向导GUI信息的向导GUI重叠部1107,将向导GUI6102(例如、四角形的粗框)重叠显示到由向导GUI信息示出的操作项目,也即重叠显示到与键6115对应的键6105(“EFG3456”)(图6的(d))。
在此,在被重叠了向导GUI6102的键6105由被支援用户触摸时,处理决定部1104将“键6105已被触摸”这一操作内容交给操作执行部1110,并请求操作的执行。其结果是,被显示在输入输出部812的操作画面,被更新为用于选择在TV显示的照片的操作画面(例如,从图6的(f)中去除了向导GUI6202至向导GUI6204之后的画面)。之后,处理决定部1104将包含有与被更新的操作画面相对应的操作画面信息的“操作画面的更新”通知,发行给请求发行部1105。被发行的“操作画面的更新”通知被发送给支援装置1201。
接着,支援装置1201将与接收的操作画面信息相对应的向导画面显示到输入输出部822(图6的(e))。
在此为支援用户222在输入输出部822所显示的向导画面中,触摸了与被支援用户想要用TV来看的、事前询问了的照片相对应的键P001和P003。其结果是,成为两张照片被选择的状态。而且,支援用户222为了表示照片的选择已经结束,而触摸决定键。其结果是,示出与键P001、键P003、以及决定键6207相对应的被支援装置1101的操作画面上的操作项目的信息,作为向导GUI信息从支援装置1201被发送给被支援装置1101。
接着,接收了向导GUI信息的向导GUI重叠部1107,将向导GUI6202至向导GUI6204,分别重叠并显示到由向导GUI信息示出的操作项目,也即分别重叠显示到与键P001、键P003、以及决定键6207对应的键(图6的(f))。
在此,在向导GUI6202至向导GUI6204的每一个中,被赋予了示出支援装置1201侧的支援用户所操作的操作项目的顺序信息的图像。即,为了使被支援装置1101侧的支援用户能够知道操作项目的操作顺序,而将表示向导GUI与操作顺序的图像重叠到操作画面。
在此参照图1,画面输出控制部1108在接受了来自向导GUI重叠部1107的指示时,更新操作画面的描绘并将描绘信息发送给输出部1109。
输出部1109是显示包含被支援装置1101的操作项目的操作画面的显示装置。具体而言,输出由画面输出控制部1108所生成的描绘信息表示的画面。即,输出部1109将从画面输出控制部1108发送的操作画面输出给用户。作为输出部1109,例如能够利用液晶显示器或CRT(Cathode Ray Tube)等。
操作执行部1110在从处理决定部1104接受操作指示时,将用于操作外部的操作对象装置1301的操作信号发送给操作对象装置1301,从而向操作对象装置1301指示处理的执行。
例如在向导模式中所设想的情况是,被支援用户将被支援装置1101作为操作对象装置1301的操作用遥控器来使用。在此,被支援用户看着重叠了向导GUI的操作画面来进行操作时,操作执行部1110从处理决定部接受包含有用于确定被支援用户进行的操作内容的信息的操作指示,将与被支援用户所进行的操作对应的处理的执行指示给操作对象装置1301。
更具体而言,此时的处理决定部1104使操作执行部1110,将与被支援用户对操作画面进行的操作相对应的操作信号发送给操作对象装置1301,为了与通过操作信号的操作对象装置1301的处理结果相对应,从而更新操作画面,并且使收发部1106将示出被更新的操作画面中所包含的操作项目的操作画面信息发送给支援装置1201。
代行履历记录部1111记录代行操作履历信息,该代行操作履历信息是支援用户222对支援装置1201所显示的操作项目进行的操作的履历信息。
具体而言,处理决定部1104在模式的类别被判断为是代行操作模式的情况下,将从支援装置1201获得的代行操作履历信息与操作画面对应后记录到代行履历记录部1111。
更详细而言,代行履历记录部1111在从收发部1106发送了代行操作履历信息时,将代行操作履历信息与“支援ID”和“操作画面信息”对应起来记录。在此,在从被支援装置1101的被支援用户接受了请求时等,被记录的代行操作履历信息与操作画面对应后被显示到输入输出部812。被支援用户能够从所显示的代行操作履历信息中,学习操作执行部1110的操作方法。
以上对被支援装置1101所具备的各个构成要素进行了说明。
接着,对支援装置1201所具备的各个构成进行说明。并且在图1中,以实线来表示支援装置1201所必需的功能块,以虚线来表示能够省略的功能块。
支援装置1201具备:收发部1202、请求接受部1203、模式管理部1204、向导画面生成部1205、代行画面生成部1206、画面输出控制部1207、输出部1208、输入部1209、用户输入接受部1210、处理决定部1211、向导GUI生成部1212、代行操作执行部1213、以及代行履历生成部1214。并且,在本实施方式所涉及的支援装置1201中,输入部1209与输出部1208作为输入输出部822而成为一体。输入输出部822具体而言是触摸显示屏等。本实施方式所涉及的支援装置1201向输入输出部822显示操作画面(代行操作画面),将支援用户对操作画面的触摸操作等作为输入来获得。
收发部1202是从被支援装置1101接收操作画面信息,并将向导GUI信息发送给被支援装置1101的通信界面,所述操作画面信息是用于确定被显示在被支援装置1101的操作画面的操作项目的信息。与收发部1106同样,作为通信媒体可以是无线,也可以是有线。例如可以考虑到有线或无线LAN、红外线、短距离无线通信等。
更具体而言,支援装置1201的收发部1202在接收来自被支援装置1101的开始支援请求时,将“支援ID”、“模式”、“操作画面信息”以及“被支援装置1101的ID”交给请求接受部1203。
并且,支援装置1201的收发部1202在从被支援装置1101接收正在进行支援的“支援ID”以及包含更新后的“操作画面信息”的继续支援请求时,将“支援ID”、“模式”、更新后的“操作画面信息”以及“被支援装置1101的ID”交给请求接受部1203。
请求接受部1203根据开始支援请求中包含的信息来判断模式的类别,在模式的类别被判断为是向导模式的情况下,使后述的向导画面生成部1205生成向导画面。并且,在模式的类别被判断为是代行操作模式的情况下,使后述的代行画面生成部1206生成代行画面。
更具体而言,请求接受部1203将“支援ID”、“模式”、“操作画面信息”以及“被支援装置1101的ID”设定到模式管理部1204。并且,在模式被判断为是向导模式的情况下,将“操作画面信息”交给向导画面生成部1205,并委托向导画面的生成。并且,在模式被判断为是代行操作模式的情况下,将“操作画面信息”交给代行画面生成部1206,并委托代行操作画面的生成。
模式管理部1204保持来自请求接受部1203的被设定的“支援ID”、“模式”、以及“被支援装置1101的ID”。
向导画面生成部1205根据从被支援装置1101获得的操作画面信息,生成作为包含操作项目的图像的向导画面。即,在向导画面包含有表示操作部件的图像,该操作部件分别与至少包含在操作画面信息的所有操作项目相对应。
更具体而言,向导画面生成部1205在由请求接受部1203指示生成向导画面时,利用从被支援装置1101接受的“操作画面信息”来生成向导画面。并且,委托画面输出控制部1207输出画面。
在此,“操作画面信息”的说明是以上述的被支援装置1101的请求发行部1105的构成来说明的。
并且,也可以是,向导画面生成部1205生成依照支援装置1201的画面分辨率、输入装置、用户来变更布局的向导画面。
代行画面生成部1206根据从被支援装置1101获得的操作画面信息,来生成作为与被支援装置的操作画面相对应的图像的代行画面。即,在代行画面中包含表示操作部件的图像,该操作部件分别与至少包含在操作画面信息中的所有的操作项目相对应。
更具体而言,代行画面生成部1206在由请求接受部1203指示生成代行操作画面时,利用从被支援装置1101接受的“操作画面信息”,生成代行操作画面。并且,委托画面输出控制部1207输出画面。
因此,也可以与向导画面同样,代行画面生成部1206生成依照支援装置1201的画面分辨率、输入装置、用户来变更布局的代行画面。
画面输出控制部1207将向导画面以及代行画面之中的、被委托的画面显示给输出部1208。
支援装置1201的输出部1208对从画面输出控制部1207发送来的向导画面以及代行画面中的某一个进行显示。
图7示出了由向导画面生成部1205生成的、输入输出部822所显示的向导画面的一个例子。
图7的(a)示出了与图6的(b)所示的被支援装置1101的操作画面相对应的向导画面的一个例子。图6的(a)虽然也是与被支援装置1101的操作画面相对应的向导画面的一个例子,不过图7的(a)所示的向导画面与图6的(a)所示的向导画面的键的形状等不同,这是因为在各个类别不同的支援装置进行显示的情况下,为了说明依赖于各个支援装置的向导画面的生成的缘故。
被配置在向导画面的操作项目与被配置在操作画面的操作项目一一对应。具体而言,被配置在图7的(a)的向导画面的“以手头的设备来看照片”键7003,与被配置在图6的(b)的操作画面的“以手头的设备来看照片”键5003相对应。同样,被配置在图7的(a)的向导画面的“用TV来看照片”键7004,与被配置在图6的(b)的操作画面的“用TV来看照片”键5004相对应,被配置在图7的(a)的向导画面的“以手头的设备来看录象节目”键7005,与被配置在图6的(b)的操作画面的“以手头的设备来看录象节目”键5005相对应。
在此,向导画面上的操作项目与操作画面上的操作项目的对应关系例如是通过事前设定操作项目ID(例如数字或记号等)来实现,所述操作项目ID是操作项目中所公用的标识符。更具体而言,利用被包含在从被支援装置1101获得的操作画面信息中的、表示各个操作项目的标识符,能够将支援用户所操作的操作项目通知给被支援装置1101。并且,被支援装置1101与支援装置1201只要是能够唯一识别操作项目的对应关系的信息,也可以使用上述的标识符以外的其他的信息。
即,被支援装置1101将预先保持的多个图像(表示操作项目的图标之中的、与上述的操作项目ID相对应的第一图像显示到操作画面上。同样,支援装置1201将预先保持的多个图像(表示操作项目的图像)之中的、与上述的操作项目ID相对应的第二图像显示到向导画面上。
并且,第一图像和第二图像可以是相同的图像,也可以是形状、大小、分辨率等不同的图像。据此,可以不依赖于被支援装置1101以及支援装置1201的设备,就能够显示操作画面以及向导画面。
例如,在支援装置1201的支援用户触摸作为向导画面上的操作项目的“用TV来看照片”键7004时,后述的向导GUI生成部1212与被触摸的操作项目相关联地生成“向导GUI”。包含用于确定被生成的“向导GUI”应该指导哪个操作项目的操作的信息(例如上述的标识符)的向导GUI信息,被发送到被支援装置1101,并由向导GUI重叠部1107被重叠到作为操作画面中所包含的操作项目的“用TV来看照片”键。上述的图6的(b)的操作画面是,作为操作画面中所包含的操作项目的“用TV来看照片”键5004上被重叠了“向导GUI”6002后的画面的一个例子。
图7的(b)所示的向导画面所示的例子是,被支援装置1101的被支援用户在触摸了图6的(b)所示的操作画面的“用TV来看照片”键5004时,接受被支援装置1101所发送的“操作画面的更新”通知,并由支援装置1201生成的向导画面。并且,图6的(c)虽然也是接受“操作画面的更新”通知,并由支援装置生成了向导画面的一个例子,不过,图7的(b)所示的向导画面、与图6的(c)所示的向导画面在键的形状等上不同,这是因为为了显示在类别各不相同的支援装置上,而用于说明依赖于各个支援装置的向导画面被生成的缘故。
在此,例如,在支援装置1201的用户触摸作为向导画面上的操作项目的“EFG3456”键7105时,后述的向导GUI生成部1212与被触摸的操作项目相关联地生成“向导GUI”。
包含用于确定被生成的“向导GUI”应该指导哪个操作项目的操作的信息的向导GUI信息,被发送到被支援装置1101,由向导GUI重叠部1107重叠到操作画面的“EFG3456”键。
图6的(d)所示的向导画面是在“EFG3456”键6105上重叠了向导GUI6102的一个例子。
接着,支援装置1201的用户接着触摸作为图7的(c)所示的向导画面上的操作项目的照片选择键7211、照片选择键7213、以及“决定”键7217时,后述的向导GUI生成部1212与被触摸的操作项目相关联地生成三个“向导GUI”。
用于确定被生成的三个“向导GUI”的向导GUI信息按照用户操作的顺序,在三个向导GUI中附加顺序信息,同时被发送给被支援装置1101。之后,向导GUI重叠部1107根据获得的向导GUI信息,将向导GUI6202至6204重叠到图6的(f)所示的操作画面的键之中的对应的键上。
再次参照图1,支援装置1201的输入部1209获得支援用户对向导画面进行的操作。更具体而言,识别来自用户的输入,并输入到用户输入接受部1210。输入部1209是将来自用户的输入转换为由支援装置1201进行处理而得到的电信号的输入界面。
输入部1209例如除了可以将触摸面板、遥控器、键盘等由支援用户的手指进行的输入操作转换为电信号以外,还可以将由麦克风等声音进行的输入操作转换为电信号。
支援装置1201的用户输入接受部1210从输入部1209接受用户输入,将用户输入通知给处理决定部1211。
支援装置1201的处理决定部1211在被通知有用户输入时,对被设定在模式管理部1204的模式进行确认,在被设定的模式为向导模式的情况下,委托向导GUI生成部1212生成“向导GUI”。即,处理决定部1211在模式的类别被判断为是向导模式的情况下,使向导GUI生成部生成向导GUI信息。
并且,在被设定到模式管理部1204模式为代行操作模式的情况下,处理决定部1211将“操作对象装置1301的ID”交给后述的代行操作执行部1213,并委托处理的执行。即,处理决定部1211在模式的类别被判断为是以代行操作模式的情况下,使代行操作执行部1213,将与由支援用户对代行画面进行操作的操作内容对应的操作信号发送给操作对象装置1301。
向导GUI生成部1212在向导画面生成向导GUI信息,该向导GUI信息是示出由支援用户操作的操作项目的信息。并且,在向导GUI信息被发送给被支援装置1101时,被支援装置1101将该信息视为是示出被显示在操作画面的操作项目之中的应该由被支援用户操作的操作项目的信息,将与此对应的向导GUI重叠到操作画面与以上所述相同。
更具体而言,在向导GUI生成部1212从处理决定部1211接受指示时,生成向导GUI信息,将“模式”=“向导模式”、向导GUI信息、以及“支援ID”交给收发部1202,并委托将包含这些的信号发送给被支援装置1101。
在此,向导GUI生成部1212在获得了支援用户对被配置在支援装置1201的向导画面的操作项目进行的输入操作(例如,触摸操作等)时,决定向导GUI的大小、形状、颜色以及配置。而且,通过对被决定了大小等的向导GUI与被视为输入操作的操作项目建立关联,来生成向导GUI信息。
并且,支援装置1201也可以将向导GUI显示到在输入输出部822所显示的向导画面。在这种情况下,向导GUI例如是用户在对向导画面上的某操作项目进行触摸操作时,将图像表现添加描绘到进行了触摸操作的操作项目,所述图像表现例如是,添加边框、涂颜色、以圆圈圈起操作项目等。
如以上所述,向导GUI信息是用于被支援装置1101的向导GUI重叠部1107将“向导GUI”重叠到“操作画面”的信息。具体而言,例如由被配置在画面上的GUI的大小、形状、颜色、位置信息等构成。
并且,被支援装置1101侧没有必要将配置在“操作画面”的“向导GUI”的大小、形状、位置,与在支援装置1201侧生成的“向导GUI”相同。例如,在被支援装置1101与支援装置1201的画面分辨率、操作部件的配置不同的情况下,向导GUI重叠部1107也可以按照被支援装置1101的画面以及操作部件的配置,来调整并重叠大小、形状以及配置,以便用户能够确认向导GUI所对应的操作项目。
代行操作执行部1213在模式的类别被判断为是代行操作模式的情况下,使代行履历生成部1214生成代行操作履历信息,该代行操作履历信息是支援用户操作代行画面的履历信息。并且,使收发部1202将代行操作履历信息发送给被支援装置1101。进一步,将作为用于操作外部的操作对象装置1301的信号的操作信号发送给操作对象装置1301。
更具体而言,代行操作执行部1213在从处理决定部1211接受指示时,将由处理决定部1211指示的处理的执行指示给操作对象装置1301。接着,向代行履历生成部1214指示代行操作履历信息的生成。
代行履历生成部1214生成代行操作履历信息,该代行操作履历信息是支援用户操作的代行画面的履历信息。
更具体而言,代行履历生成部1214在从代行操作执行部1213接受指示时,生成“代行操作履历信息”,将“模式”=“代行操作模式”、代行操作履历信息、以及“支援ID”交给收发部1202,并委托将这些信息发送给被支援装置1101。
以上对本发明的实施方式所涉及的支援装置1201进行了说明。
接着,对本发明的实施方式所涉及的设备间向导系统1001所具备的各个构成进行说明。
操作对象装置1301具备处理执行部1302。
处理执行部1302按照被支援装置1101的操作执行部1110、或者支援装置1201的代行操作执行部1213的请求,来执行处理。
在此,设备间向导系统1001的构成可以是图2所示的第一构成,即,在与被支援装置1101相同的终端上存在操作对象装置1301,也可以是图3所示的第二构成,即在与被支援装置1101不同的终端上存在操作对象装置1301。在存在于相同的终端上的情况下,不需要被支援装置1101与操作对象装置1301之间的网络连接。
并且,也可以是图4所示的第三构成,操作对象装置1301例如存在操作对象装置1301a以及操作对象装置1301b等两个以上,也可以存在于不同的终端。
作为第一构成的例子如图2所示,设想的情况是被支援用户220在作为被支援装置1101的平板电脑终端上,对被记录在平板电脑终端自身的照片的再生进行操作,支援用户222从作为支援装置1201的智能手机上来进行支援(进行向导或代行操作)。在这种情况下,被支援装置1101与操作对象装置1301被搭载于一个平板电脑终端。
作为第二构成的例子如图3所示,设想的情况是被支援用户在作为被支援装置1101的平板电脑终端上,视听被记录在作为操作对象装置1301的记录器的录象内容,针对该录象内容的视听操作,支援用户在作为支援装置1201的智能手机进行支援(进行向导或代行操作)。在这种情况下,被支援装置1101被搭载在平板电脑终端,操作对象装置1301被搭载在记录终端。
作为第三构成的例子如图4所示,设想的情况是,针对由被支援用户记录在作为操作对象装置1301的一方的记录器的录象内容,为了在作为操作对象装置1301的另一方的电视上来视听,从作为被支援装置1101的平板电脑进行控制电视的操作,支援用户从作为支援装置1201的智能手机进行支援(进行向导或代行操作)。在这种情况下,被支援装置1101被搭载在用于对电视进行控制的平板电脑,第一操作对象装置1301a被搭载在记录器,第二操作对象装置1301b被搭载在电视。
接着,利用流程图对本发明的实施方式中的设备间向导系统1001的处理流程的一个例子进行说明。
图8是以向导模式来进行工作时的、本发明的实施方式所涉及的被支援装置1101以及支援装置1201之间的时序图。
如图8所示,在被支援装置1101通过被支援用户220的输入操作,来获得以向导模式的支援请求时(S802),向支援装置1201发送开始支援请求(S804)。并且,被支援装置1101可以将操作画面信息等包含在开始支援请求中来发送,也可以对开始支援请求与操作画面信息等进行分别发送。
接着,支援装置1201将向导画面描绘到输入输出部822(S806)。
支援用户222针对向导画面,进行用于实现“被支援用户220想要进行的工作”的操作(S808)。
接着,支援装置1201从支援用户222对向导画面进行的操作中,生成向导GUI信息(S810)。被生成的向导GUI信息从支援装置1201被发送给被支援装置1101(S812)。
接着,被支援装置1101将被重叠了向导GUI的操作画面,显示到向导GUI信息所表示的操作项目(S814)。
接着,针对被重叠了向导GUI的操作画面,被支援用户220按照向导GUI进行操作(S816)。
接着,被支援装置1101向支援装置1201请求继续进行支援。此时,可以发送包含有由被支援用户220的操作而被更新的操作画面信息的支援的继续请求,也可以对支援的继续请求与被更新的操作画面信息分别进行发送(S818)。
之后,支援装置1201与步骤S806同样通过按照获得了的操作画面信息来描绘向导画面,从而更新向导画面(S820)。
之后,直到支援被中止反复同样的步骤。
并且,也可以是,处理决定部1104将以下的触发之中的至少一个作为契机,来中止支援,这些触发是指:
·由被支援用户220进行的规定的操作(例如对用于指示支援的中止的键进行触摸操作)
·从操作对象装置1301获得的规定的信号(例如通知照片的再生等被支援用户220所希望的处理已经结束的信号)的接收
·从支援装置1201发送的规定的信号(例如由支援用户222通知用于指示支援的中止的键被触摸的信号)的接收
·事前规定的时间(例如超时时间)的经过
具体而言,可以考虑到使向导GUI重叠部1107中止向导GUI的重叠,并将支援的中止请求发送给操作对象装置1301等。
以下对更详细的流程进行说明。
<向导模式被支援装置>
图9是对支援装置1201进行的开始支援请求的发送处理(图8的步骤S802以及步骤S804)的详细流程图。
更具体而言,图9是示出在本发明的实施方式中,被支援装置1101的被支援用户220请求以向导模式的支援时的被支援装置1101的处理的一个例子的流程图。
被支援用户220指定“模式=向导模式”和“支援用户=A某”,在向被支援装置1101进行请求支援的输入操作时,被支援装置1101的用户输入接受部1103从输入部1102接受用户的输入,并将用户输入通知给处理决定部1104(S8001)。
接着,处理决定部1104在输入为“支援请求”时,确定模式为“向导模式”。而且,处理决定部1104从支援用户222与支援装置1201事先对应起来的数据库,确定与作为支援用户的A某对应的支援装置(S8002)。之后,处理决定部1104将“模式=向导模式”、支援装置的ID交给请求发行部1105,并请求以向导模式的支援。在此,对于输入是支援请求还是操作请求的确定、以及在为支援请求的情况下,“模式”是“向导模式”还是“代行操作模式”的确定方法的一个例子,将在处理决定部1104的构成说明中记载。
接着,请求发行部1105在接受“向导模式”的支援请求时,将现状的操作画面的信息、模式的类别、以及支援设备的ID交给收发部1106,并向支援装置1201进行向导请求(S8003)。
并且,请求发行部1105在直到向导GUI重叠部1107根据来自支援装置1201的信息将向导GUI重叠到现状的操作画面为止的期间,或者直到解除“向导模式”的支援请求为止的期间,对处理决定部1104进行设定,从而不接受来自用户的操作请求(S8004)。
最后,被支援装置1101的收发部1106在从请求发行部1105接受指示时,将包含“模式=向导模式”、操作画面信息、以及被支援装置1101自身的ID的开始支援请求发送给支援装置1201(S8005)。
图10是由被支援装置1101进行的向导GUI的重叠处理(图8的步骤S814)的详细的流程图。
更具体而言,图10是示出在本发明的实施方式中,作为被支援装置1101对支援装置1201进行的支援请求的应答,从支援装置1201接受向导GUI的信息时的被支援装置1101的处理的一个例子的流程图。
首先,被支援装置1101的收发部1106从支援装置1201以“模式”=“向导模式”来接收向导GUI信息(S9001)。之后,收发部1106将向导GUI信息发送给向导GUI重叠部1107。
接着,向导GUI重叠部1107在从收发部1106接受向导GUI信息时,生成将以向导GUI信息确定的向导GUI重叠到操作项目后的操作画面的描绘信息,并委托画面输出控制部1108进行输出(S9002)。
接着,画面输出控制部1108在接受来自向导GUI重叠部1107的描绘的指示时,根据描绘信息来更新操作画面的描绘信息,并发送到输出部1109(S9003)。
最后,输出部1109显示从画面输出控制部1108输出的操作画面(S9004)。此时所显示的被重叠有向导GUI的操作画面例如是以上图6所示的画面。
图11是从被支援装置1101向支援装置1201的支援的继续请求处理(图8的步骤S816以及步骤S818)的详细的流程图。
更具体而言,图11是示出在本发明的实施方式中,被支援装置1101的被支援用户220在以向导模式来利用支援时,操作被重叠有向导GUI的操作画面之时的被支援装置1101的处理的一个例子的流程图。
首先,使用被支援装置1101的被支援用户220在以向导模式来利用支援时,在操作重叠了向导GUI的操作画面时,用户输入接受部1103从输入部1102获得用户进行的操作(S10001)。并且将来自用户的输入通知给处理决定部1104。
接着,处理决定部1104在执行向导模式下,获得向重叠了向导GUI的操作画面的操作请求时,将操作内容交给操作执行部1110,在向操作对象装置进行执行指示的同时,通过将操作画面已被更新之事通知给请求发行部1105,来更新操作画面信息(S10002)。
接着,请求发行部1105在从处理决定部1104通知来操作画面已被更新时,将被更新的操作画面信息交给收发部1106,并将通过向导模式来委托继续进行该支援的信号发送给支援装置1201(S10003)。并且,再次直到向导GUI比重叠到操作画面为止的期间、或者直到“向导模式”的支援请求被解除为止的期间,设定处理决定部1104,以便不接受来自用户的操作请求(S10004)。
<向导模式支援装置>
图12是由支援装置1201进行向导画面的描绘处理(图8的步骤S806)的详细的流程图。
更具体而言,图12是示出在本发明的实施方式中,支援装置1201在接受向导模式下的支援请求时的支援装置1201的处理的一个例子的流程图。
首先,支援装置1201的收发部1202从被支援装置1101,接收“模式”=“向导模式”、“操作画面信息”、“被支援装置1101的ID”所指定的开始支援请求(S11001)。之后,收发部1202发行“支援ID”,并发送到被支援装置1101(S11002)。并且,将接收的“支援ID”、“模式”、“操作画面信息”以及“被支援装置1101的ID”交给请求接受部1203,通过向导模式进行支援的请求(向导请求)(S11003)。
接着,请求接受部1203通过将“支援ID”、“模式”、“操作画面信息”以及“被支援装置1101的ID”记录到模式管理部1204,来进行设定(S11004)。并且,请求接受部1203将操作画面信息交给向导画面生成部1205,并委托向导画面的生成(S11005)。
接着,向导画面生成部1205在从请求接受部1203被指示生成向导画面时,利用从被支援装置1101接受的操作画面信息,生成向导画面的描绘信息(S11006),并委托画面输出控制部1207进行画面输出。
最后,画面输出控制部1207将用于输出部1208显示向导画面的描绘信息输出到输出部1208(S11007)。
图13是从支援装置1201向被支援装置1101的向导GUI信息的发送处理(图8的步骤S812)的详细的流程图。
更具体而言,图13是示出在本发明的实施方式中,针对支援装置1201输出的向导画面从用户接受向导输入时的支援装置1201的处理的一个例子的流程图。
首先,支援装置1201的用户输入接受部1210从输入部1209接受用户输入(S12001)。之后,用户输入接受部1210将用户输入通知给处理决定部1211。
接着,处理决定部1211在模式的类别为向导模式的情况下,委托向导GUI生成部1212生成向导GUI信息(S12002)。向导GUI生成部1212在从处理决定部1211接受指示时,生成向导GUI信息。
最后,向导GUI生成部1212将“模式”=“向导模式”、向导GUI信息、以及“支援ID”交给收发部1202,通过委托向被支援装置1101发送向导GUI,从而向导GUI信息等被发送到被支援装置1101(S12003)。
以上对向导模式中的被支援装置1101以及支援装置1201的处理的流程进行了说明。
接着,对代行操作模式中的被支援装置1101以及支援装置1201的处理的流程进行说明。
图14是以代行操作模式进行工作时的本发明的实施方式所涉及的被支援装置1101与支援装置1201、以及操作对象装置1301之间的时序图。
如图14所示,在被支援用户220以代行操作模式向被支援装置1101请求支援时(S1402),被支援装置1101将包含操作画面信息等的开始支援请求发送给支援装置1201(S1404)。
接着,支援装置1201根据接收的操作画面信息,通过使代行操作画面显示在输入输出部822来进行描绘(S1406)。
接着,支援用户222对代行操作画面进行如下的操作,该操作是为了将事先由被支援用户220传达来的“被支援用户220想要进行的工作”在被支援装置1101来实现的操作(S1408)。
接着,支援装置1201将用于使操作对象装置1301执行与支援用户222进行的操作相对应的处理的指示,发送给操作对象装置1301(S1410)。并且,支援装置1201将示出在步骤S1408支援用户222进行的操作的履历的代行操作履历信息,发送给被支援装置1101(S1412)。
之后,被支援装置1101为了使被支援用户220能够学习被支援装置1101的操作方法,从而记录接收的代行操作履历信息(S1414)。被记录的代行操作履历信息例如通过来自被支援用户220的操作,而在被支援装置1101被再生。
以下对详细的流程进行说明。
<代行操作模式-被支援装置>
图15是从被支援装置1101向支援装置1201的请求开始支援的发送处理(图14的步骤S1402以及步骤S1404)的详细的流程图。
更具体而言,图15是示出在本发明的实施方式中,被支援装置1101的被支援用户220请求以代行操作模式进行的支援时的被支援装置1101的处理的一个例子的流程图。
首先,在用户指定“模式”=“代行操作模式”和支援用户=“A某”并进行支援请求时,被支援装置1101的用户输入接受部1103从输入部1102获得来自用户的支援请求(S13001)。之后,输入部1102向处理决定部通知已从用户输入了支援请求。
接着,处理决定部1104对输入为“支援请求”、模式的类别为“代行操作模式”进行确定。并且,通过从数据库获得用于识别事先与支援用户相对应的支援装置的标识符,从而确定应该发送开始支援请求的支援装置1201(S13002)。
接着,处理决定部1104将确定的模式的类别(代行操作模式)和支援装置的ID交给请求发行部1105,并请求发行代行操作模式的开始支援请求(也称为代行操作请求)(S13003)。在此,对于输入是支援请求、还是被支援用户220自身对被支援装置1101进行操作的操作请求进行的确定、以及在为支援请求的情况下的“模式”以及支援装置的确定方法的一个例子,将在处理决定部1104的构成说明中记载。
接着,请求发行部1105在接受“代行操作模式”的支援请求时,在直到“代行操作模式”的支援请求被解除为止的期间,对处理决定部1104进行设定,以便不接受来自用户的操作请求(S13004)。并且,将现状的操作画面的信息、模式、支援设备的ID、以及“操作对象装置1301的ID”交给收发部1106,并发行对支援装置1201的代行操作模式的开始支援请求。
最后,被支援装置1101的收发部1106在从请求发行部1105发行了开始支援请求时,将“模式”=“代行操作模式”、“操作画面信息”、“被支援装置1101自身的ID”、以及“操作对象装置1301的ID”发送给支援装置1201,据此请求开始支援(S13005)。
图16是被支援装置1101所具备的代行履历记录部1111所进行的代行操作履历信息的记录处理(图14的步骤S1412以及步骤S1414)的详细的流程图。
更具体而言,图16是示出在本发明的实施方式中的作为被支援装置1101对支援装置1201进行的开始支援请求的应答,被支援装置1101从支援装置1201接受代行操作履历信息之时的被支援装置1101的处理的一个例子的流程图。
首先,被支援装置1101的收发部1106从支援装置1201获得“模式”=“代行操作模式”的代行操作履历信息、以及“支援ID”(S14001)。之后,收发部1106将获得的“模式”、代行操作履历信息、以及“支援ID”发送给代行履历记录部1111。
接着,代行履历记录部1111在从收发部1106发送了代行操作履历信息时,将代行操作履历信息与“支援ID”和“操作画面信息”对应起来记录(S14002)。
具体而言,代行操作履历信息中包含的信息是,示出被显示到支援装置1201的代行操作画面中包含的操作项目的每一个中的、支援用户222应该对哪一个以怎样的顺序来进行操作的信息。例如按每个操作项目分配有固有的标识符及其操作顺序等。并且,操作画面信息中包含的信息是,由支援用户222进行操作时,在代行操作画面应该显示哪个操作项目的信息。例如是被显示的操作项目的标识符的列表、显示区域、初始设定值等。
因此,被支援装置1101在从被支援用户220被指定了支援ID,并接受到再生代行操作履历信息的指示时,能够根据对应的代行操作履历信息和操作画面信息,将支援用户222在代行操作画面上进行的操作在被支援装置1101的操作画面上进行再现并显示。
<代行操作模式支援装置>
图17是在支援装置1201中直到显示代行操作画面为止的处理(图14的步骤步骤S1406)的详细的流程图。
更具体而言,图17是示出在本发明的实施方式中的支援装置1201接受了以代行操作模式进行支援请求时的支援装置1201的处理的一个例子的流程图。
首先,支援装置1201的收发部1202从被支援装置1101获得,“模式”=“代行操作模式”、“操作画面信息”、“被支援装置1101的ID”、“操作对象装置1301的ID”所指定的开始支援请求(S15001)。之后,收发部1202发行“支援ID”,并发送给被支援装置1101(S15002)。并且,收发部1202将“支援ID”、“模式”、“操作画面信息”、“被支援装置1101的ID”、以及“操作对象装置1301的ID”交给请求接受部1203,并进行代行操作请求(S15003)。
接着,请求接受部1203通过使模式管理部1204记录“支援ID”、“模式”、“操作画面信息”、“被支援装置1101的ID”、以及“操作对象装置1301的ID”来进行设定(S15004)。并且,将操作画面信息交给代行画面生成部1206,并委托代行操作画面的生成(S15005)。
接着,代行画面生成部1206在从请求接受部1203指示了代行操作画面的生成时,根据从被支援装置1101接受的操作画面信息,生成代行操作画面的描绘信息(S15006)。之后,代行画面生成部1206向画面输出控制部1207委托描绘信息的画面输出。
最后,画面输出控制部1207将代行操作画面显示给输出部1208(S15007)。
图18是由支援装置1201向被支援装置1101进行代行操作履历信息的发送处理(图14的步骤S1412)的详细的流程图。
更具体而言,图18是示出在本发明的实施方式中,针对支援装置1201输出的代行操作画面接受了来自支援用户222的代行操作的输入时,支援装置1201的处理的一个例子的流程图。
首先,支援装置1201的用户输入接受部1210从输入部1209获得用户输入(S16001)。之后,用户输入接受部1210将来自支援用户222的输入通知给处理决定部1211。
接着,处理决定部1211将“操作对象装置1301的ID”交给代行操作执行部1213(S16002),并委托与来自支援用户222的输入相对应的处理的执行。
接着,代行操作执行部1213在从处理决定部1211接受指示时,将用于指示被委托的处理的执行的信号发送给操作对象装置1301(S16003)。接着,代行操作执行部1213向代行履历生成部1214指示代行操作履历信息的生成。
接着,代行履历生成部1214在从代行操作执行部1213接受指示时,生成代行操作履历信息(S16004)。之后,代行履历生成部1214将“模式”=“代行操作模式”、“代行操作履历信息”、以及“支援ID”交给收发部1202,并委托向被支援装置1101的代行操作履历信息的发送。
最后,收发部1202将从代行履历生成部1214获得的代行操作履历信息等发送给被支援装置1101(S16005)。
通过以上的构成,本发明的实施方式所涉及的设备间向导系统1001通过执行以下的工作,从而能够针对利用被支援一方设备的且不熟悉家电设备的操作的用户,一边与支援设备的用户进行通信一边提供学习操作的机会,这些工作如下所示:
·能够选择“向导模式”与“代行操作模式”,在“向导模式”中通过支援一方设备的操作来生成向导GUI,并将向导GUI重叠到被支援一方设备,被支援一方设备通过被支援一方设备的用户的操作来执行处理;
·通过在设备间进行双方向的UI(用户界面)通信,从而能够逐步地一边确认向导,一边学习操作;以及
·在被支援设备与支援设备的画面分辨率或部件的大小、配置不同的情况下,将向导GUI与部件建立关联后设定,并与画面分辨率或备品的大小、配置相对应地进行变换并进行重叠,从而能够以操作部件为单位进行向导。
因此,能够提供一种被支援装置等,其能够在不妨碍被支援用户的学习机会的情况下,从支援用户接受不依存于显示设备的交互式的操作支援。
并且,在“代行操作模式”的情况下,支援一方设备替代被支援一方设备,通过直接控制DLNA2Box/3Box的控制对象的设备,从而能够减轻处理延迟。更具体而言,在通过作为以往的技术的远程桌面来支援远程设定的控制的情况下,存在的课题是支援一方设备为了操作作为远程设备的被支援一方设备,从而远程操作需要经由两个设备,这样就会增大处理的延迟。例如,被支援一方设备为具备DLNA(Digital Living Network Alliance:数字生活网络联盟)的控制功能(DMC;Digital Media Controller:数位媒体控制器)的平板电脑终端,通过该平板电脑终端,来选择被记录在作为DLNA的服务器(DMS;Digital Media Server:数字媒体服务器)的记录器的录象内容,在对作为DLNA的渲染器(DMR;Digital Media Renderer:数字媒体渲染器)的电视上的再生进行控制(3Box控制)的情况下会发生处理延迟的问题。
因此,在以“代行操作模式”来使用本实施方式所涉及的设备间向导系统1001的情况下,支援装置1201替代被支援装置1101,通过直接控制作为DLNA的2Box/3Box的控制对象的操作对象装置1301,从而能够减轻处理延迟。
并且,在本实施方式中,虽然将被支援装置1101所具备的通信界面作为了收发部1106,发送部以及接收部也可以分别作为构成要素来安装。同样,也可以取代将收发部1202视为支援装置1201所具备的通信界面,而将发送部以及接收部分别作为构成要素来安装。
并且,在本实施方式中虽然将输入部1102与输出部1109一体化来构成作为作为触摸显示屏等的输入输出部812的,不过输入部1102与输出部1109也可以分别作为界面来构成。例如,在输出部1109使用液晶显示器,在输入部1102使用鼠标或轨迹板等。同样,输出部1208与输入部1209也可以分别作为界面。例如,也可以在输出部1208使用液晶显示器,在输入部1209使用鼠标或轨迹板等。
并且,也可以是,向导GUI重叠部1107在向导GUI信息包含多个操作项目、与用于确定多个操作项目的每一个的操作顺序的信息的情况下,将与多个操作项目的每一个相对应的向导GUI和示出对应的操作顺序的图像一起重叠到操作画面。
以下参照图6的(e)以及图6的(f)来进行具体说明。
如以上所述,支援用户222在代行操作画面中,以键P001、键P003、“决定”键6207的顺序来触摸了的情况下,向导GUI信息中包含与这三个键操作相对应的操作项目、以及各自的操作顺序。
获得了这些的向导GUI重叠部1107将示出第一个应该被操作的图像(例如,显示为“1”的图像),重叠到操作画面中显示的键P001的左上,并且,也可以是作为表示圈起键P001的周围的框的图像,来显示向导GUI6202。同样,将示出第二个应该被操作的图像(例如显示为“2”的图像)重叠到操作画面中显示的键P003的左上,并且,也可以是作为表示圈起键P003的周围的框的图像,来显示向导GUI6203。而且,将示出第三个应该被操作的图像(例如,显示为“3”的图像)重叠到“决定”键的左上,并且,也可以是作为表示圈起“决定”键的周围的框的图像,来显示向导GUI6204。
并且,本实施方式所涉及的被支援装置1101以及支援装置1201即使在不具备以上所述的所有的构成要素的情况下也能够实现本发明的效果。
例如,也可以是,被支援用户220参照被显示在被支援装置1101的向导GUI,直接(即,从操作对象装置1301自身所具备的输入装置)对操作对象装置1301进行操作。在这种情况下即使被支援用户220不对被支援装置1101进行输入操作也能够实现本发明的效果,因此被支援装置1101也可以不具备输入部1102以及用户输入接受部1103。并且,由于被支援用户220直接对操作对象装置1301进行操作,因此也可以不具备操作执行部1110。并且,只要是被支援装置1101通常能够以向导模式或代行操作模式的某一个模式来进行工作,被支援装置1101也可以不具备处理决定部1104。在这种情况下,由于向输出部1109的输出为一个系统,因此被支援装置1101也可以不具备画面输出控制部1108。尤其是若通常以向导模式来进行工作,则被支援装置1101也可以不具备代行履历记录部1111。
并且,被支援装置1101也可以不具有代行操作模式,在时常以向导模式来进行工作的情况下,支援装置1201也可以时常仅以代行操作模式来进行工作。在这种情况下,支援装置1201即使不具备画面输出控制部1207、代行画面生成部1206、模式管理部1204、代行操作执行部1213、以及代行履历生成部1214,也能够同样实现本发明的效果。
并且,图1所示的支援装置或被支援装置的各自的功能块典型地可以作为集成电路的LSI来实现。这些可以分别作为一个芯片来构成,也可以是其中的一部分或全部被包含在一个芯片中。
具体而言,图1所示的被支援装置1101的功能块之中的用户输入接受部1103、处理决定部1104、请求发行部1105、收发部1106、向导GUI重叠部1107、画面输出控制部1108、以及操作执行部1110的一部分或全部也能够作为集成电路来实现。
同样,图1所示的支援装置1201的功能块之中的收发部1202、请求接受部1203、模式管理部1204、向导画面生成部1205、代行画面生成部1206、画面输出控制部1207、用户输入接受部1210、处理决定部1211、向导GUI生成部1212、代行履历生成部1214、以及代行操作执行部1213的一部分或全部也可以作为集成电路来实现。
在此,虽然例示了LSI,不过根据集成度的不同,也可以称为IC、系统LSI、超级LSI、极超级LSI。
并且,集成电路化的方法不仅限于LSI,也可以以专用电路或通用处理器来实现。在LSI制造后,也可以利用可编程的FPGA(Field ProgrammableGate Array:现场可编程门阵列)或利用能够将LSI内部的电路单元的连接以及设定重新构建的可重装处理器。
而且,随着半导体技术的进步或派生出的其他的技术,若出现了能够取代LSI的集成电路化的技术,当然也可以利用这些技术来对功能块进行集成化。生物技术的适用等也将成为可能。
并且,也可以是,用户交互作用装置的构成要素之中的仅存放数据的单元不被制成一个芯片,而是可以作为其他的构成。
并且,本发明不仅可以作为显示用装置或操作用装置来实现,而且可以作为将构成显示用装置或操作用装置的处理单元作为步骤的方法来实现。并且,本发明可以作为使计算机执行这些方法中所包含的步骤的程序来实现。而且,本发明可以作为存储了这些程序的CD-ROM等计算机可读取的记录介质来实现。
具体而言,执行在图1所示的被支援装置1101的功能块之中的用户输入接受部1103、处理决定部1104、请求发行部1105、收发部1106、向导GUI重叠部1107、画面输出控制部1108、以及操作执行部1110的一部分或全部的处理的程序,能够被存储在后述的ROM46、RAM48、或硬盘50等,并以CPU44来执行。
同样,执行图1所示的支援装置1201的功能块之中的收发部1202、请求接受部1203、模式管理部1204、向导画面生成部1205、代行画面生成部1206、画面输出控制部1207、用户输入接受部1210、处理决定部1211、向导GUI生成部1212、代行履历生成部1214、以及代行操作执行部1213的一部分或全部的处理的程序,能够被存储在后述的ROM46、RAM48、或硬盘50等,并能够以CPU44来执行。
并且,在本实施方式所说明的被支援装置1101以及支援装置1201能够由计算机来实现。图19是示出实现被支援装置1101以及支援装置1201的计算机系统的硬件构成的方框图。
被支援装置1101以及支援装置1201包括:计算机34、用于对计算机34发出指示的键盘36以及鼠标38、用于提示计算机34的运算结果等信息显示器32、用于读取在计算机34执行的程序的CD-ROM装置40以及通信调制解调器(未图示)。
作为被支援装置1101以及支援装置1201进行的处理的程序被存储在作为计算机能够读取的媒体的CD-ROM42,能够在CD-ROM装置40被读取。或者,通过计算机网络由通信调制解调器52读取。
计算机34包括:CPU(Central Processing Unit:中央处理器)44、ROM(Read Only Memory:只读存储器)46、RAM(Random Access Memory:随机存取存储器)48、硬盘50、通信调制解调器52、以及总线54。
CPU44通过CD-ROM装置40或者通信调制解调器52执行读取的程序。ROM46存储计算机34在工作时所需的程序或数据。RAM48存储程序执行时的参数等数据。硬盘50存储程序或数据等。通信调制解调器52经由计算机网络进行与其他的计算机的通信。总线54使CPU44、ROM46、RAM48、硬盘50、通信调制解调器52、显示器32、键盘36、鼠标38以及CD-ROM装置40相互连接。
而且,构成上述的各个装置的构成要素的一部分或全部可以由一个系统LSI(Large Scale Integration:大规模集成电路)构成。系统LSI是将多个构成部集成在一个芯片上而被制造的超多功能LSI,具体而言是包括微处理器、ROM、RAM等而被构成的计算机系统。RAM中记忆有计算机程序。微处理器通过按照计算机程序进行工作,系统LSI能够实现其功能。
而且,构成上述的各个装置的构成要素的一部分或全部可以由能够装卸于各个装置的IC卡或单体的模块构成。IC卡或模块是由微处理器、ROM、RAM等构成的计算机系统。IC卡或模块也可以包括上述的超多功能LSI。微处理器通过按照计算机程序进行工作,IC卡或模块能够实现其功能。该IC卡或模块可以具有抗篡改性。
并且,本发明也可以是以上所示的方法。并且,也可以作为使计算机执行这些方法的计算机程序来实现,也可以是由所述计算机程序构成的数字信号。
并且,本发明也可以是以上所示的方法。并且,也可以作为使计算机执行这些方法的计算机程序来实现,也可以是由所述计算机程序构成的数字信号。并且,本发明可以将上述的计算机程序或上述的数字信号记录到计算机可读取的记录介质,计算机可读取的记录介质例如是软盘、硬盘、CD-ROM、MO、DVD、DVD-ROM、DVD-RAM、BD(Blu-ray Disc(注册商标))、USB存储器、SD卡等存储器卡、以及半导体存储器等。并且,也可以作为被记录在这些记录介质中的上述的数字信号来实现。
并且,也可以是,本发明可以通过电通信电路、无线或有线通信电路、以因特网为代表的网络、以及数据广播等来传递上述的计算机程序或上述的数字信号。
并且,也可以是,本发明可以是具备微处理器和存储器的计算机系统,上述的存储器存储上述计算机程序,上述的微处理器按照上述的计算机程序来工作。
并且,也可以是,通过将上述的程序或上述的数字信号记录到所述记录介质并传送,或者将上述的程序或上述的数字信号通过所述网络等来传送,从而可以由独立的其它的计算机系统来执行。
而且,也可以是,对上述的实施方式以及变形例进行组合。
此次公开的实施方式均为示例,并非对本发明进行限制。本发明的范围不是上述的说明,而是权利要求所记载的范围,与权利要求的范围具有等同的含义以及范围内的所有变形均包含在本发明内。
本发明能够适用于被支援装置等,尤其能够适用于支援用户通过经由网络与被支援装置连接的支援装置,对操作被支援装置的被支援用户进行支援的设备间向导系统中的被支援装置等。
符号说明
32   显示器
34   计算机
36   键盘
38   鼠标
40   CD-ROM装置
42   CD-ROM
44   CPU
46   ROM
48   RAM
50   硬盘
52   通信调制解调器
54   总线
220  被支援用户
222  支援用户
812、822 输入输出部
1001 设备间向导系统
1101 被支援装置
1102、1209 输入部
1103、1210 用户输入接受部
1104、1211 处理决定部
1105 请求发行部
1106、1202 收发部
1107 向导GUI重叠部
1108、1207 画面输出控制部
1109、1208 输出部
1110 操作执行部
1111 代行履历记录部
1201 支援装置
1203 请求接受部
1204 模式管理部
1205 向导画面生成部
1206 代行画面生成部
1212 向导GUI生成部
1213 代行操作执行部
1214 代行履历生成部
1301、1301a、1301b 操作对象装置
1302 处理执行部
6002、6102、6202、6203、6204 向导GUI

Claims (18)

1.一种被支援装置,在设备间向导系统中,支援用户经由通过网络与所述被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该被支援装置具备:
输出部,显示操作画面,该操作画面是包含所述被支援装置的操作项目的图像;
请求发行部,发行开始支援请求,该开始支援请求是包含操作画面信息的信号,该操作画面信息是用于确定被显示在所述操作画面的所述操作项目的信息;
收发部,将所述开始支援请求发送给所述支援装置,从所述支援装置接收所述操作项目之中的、示出所述被支援用户应该操作的操作项目的向导GUI信息;以及
向导GUI重叠部,根据所述向导GUI信息,使向导GUI重叠到所述操作画面,所述向导GUI是用于将所述应该操作的操作项目指导给所述被支援用户的图像。
2.如权利要求1所述的被支援装置,
所述向导GUI重叠部,在所述向导GUI信息包含多个所述操作项目与用于确定该多个所述操作项目的每一个的操作顺序的信息的情况下,将与该多个所述操作项目的每一个对应的向导GUI与示出对应的操作顺序的图像一起重叠到所述操作画面。
3.如权利要求1所述的被支援装置,
所述向导GUI信息是示出所述支援装置所显示的向导画面中的由所述支援用户操作了的操作项目的信息。
4.如权利要求1所述的被支援装置,
该被支援装置还具备处理决定部,该处理决定部接受来自所述被支援用户的支援请求,
所述处理决定部,在从所述被支援用户接受了所述支援请求时,判断由所述被支援用户指定的操作支援的模式的类别,在判断为所述模式的类别为第一模式的情况下,且在所述收发部接收了所述向导GUI信息的情况下,使所述向导GUI重叠部将所述向导GUI重叠到所述操作画面,
所述请求发行部,发行所述开始支援请求,该开始支援请求包含有所述操作画面信息以及示出被判断的所述模式的类别的信息。
5.如权利要求4所述的被支援装置,
该被支援装置还具备代行履历记录部,该代行履历记录部用于记录代行操作履历信息,该代行操作履历信息是所述支援用户对所述支援装置所显示的所述操作项目进行操作的履历信息,
所述处理决定部,在所述模式的类别被判断为是与所述第一模式不同的第二模式的情况下,使所述代行履历记录部将从所述支援装置获得的所述代行操作履历信息与所述操作画面对应起来记录。
6.如权利要求1所述的被支援装置,
该被支援装置还具备操作执行部,该操作执行部将操作信号发送给所述操作对象装置,所述操作信号是用于对外部的操作对象装置进行操作的信号,
所述处理决定部,使所述操作执行部将与由所述被支援用户进行的所述操作画面的操作相对应的所述操作信号发送给所述操作对象装置,并与通过所述操作信号的所述操作对象装置的处理结果相对应地对所述操作画面进行更新,并且,使所述收发部将示出被更新的所述操作画面中所包含的操作项目的所述操作画面信息发送给所述支援装置。
7.如权利要求6所述的被支援装置,
所述处理决定部,至少以如下的情况之一作为契机,使所述向导GUI重叠部中止所述向导GUI的重叠,所述情况包括:由所述被支援用户进行的规定的操作、从所述操作对象装置获得的规定的信号的接收、从所述支援装置发送的规定的信号的接收、以及事先决定的时间的经过。
8.一种支援装置,在设备间向导系统中,支援用户经由通过网络与被支援装置连接的所述支援装置,对操作所述被支援装置的被支援用户进行支援,该支援装置具备:
收发部,从所述被支援装置接收操作画面信息,该操作画面信息是用于确定所述被支援装置的操作项目的信息;
向导画面生成部,根据所述操作画面信息,生成向导画面,该向导画面是包含所述操作项目的图像;
输出部,显示所述向导画面;
输入部,获得由支援用户对所述向导画面进行的操作;以及
向导GUI生成部,生成向导GUI信息,该向导GUI信息是示出所述向导画面中的由所述支援用户操作了的操作项目的信息,
所述收发部进一步将所述向导GUI信息发送给所述被支援装置。
9.如权利要求8所述的支援装置,
该支援装置还具备:
请求接受部,根据所述开始支援请求中包含的信息来判断所述模式的类别,在所述模式的类别被判断为是第一模式的情况下,使所述向导画面生成部生成所述向导画面;以及
处理决定部,在所述模式的类别被判断为是所述第一模式的情况下,使所述向导GUI生成部生成所述向导GUI信息。
10.如权利要求9所述的支援装置,
该支援装置还具备:
代行画面生成部,根据操作画面信息生成代行画面,该代行画面是与所述被支援装置的操作画面对应的图像,所述操作画面信息是用于确定被显示在所述被支援装置的操作画面的操作项目的信息;
代行履历生成部,生成代行操作履历信息,该代行操作履历信息是所述支援用户对所述代行画面进行操作的履历信息;以及
代行操作执行部,将操作信号发送给所述操作对象装置,所述操作信号是用于对外部的操作对象装置进行操作的信号,
所述请求接受部,在所述模式的类别被判断为是与所述第一模式不同的第二模式的情况下,使所述代行画面生成部生成所述代行画面,
所述处理决定部,在所述模式的类别被判断为是所述第二模式的情况下,使所述代行操作执行部将与由所述支援用户进行的所述代行画面的操作内容相对应的所述操作信号,发送给所述操作对象装置,
所述代行操作执行部,在所述模式的类别被判断为是所述第二模式的情况下,使所述代行履历生成部生成所述代行操作履历信息,使所述收发部将该代行操作履历信息发送给所述被支援装置。
11.一种设备间向导系统,由支援用户经由通过网络与被支援装置连接的支援装置,对为了从所述被支援装置对操作对象装置进行操作,而对操作所述被支援装置的被支援用户进行支援,该设备间向导系统具备:
所述被支援装置中的输出部,显示操作画面,该操作画面是包含所述被支援装置的操作项目的图像;
所述被支援装置中的请求发行部,发行开始支援请求,该开始支援请求是包含操作画面信息的信号,所述操作画面信息是用于对被显示在所述操作画面的所述操作项目进行确定的信息;
所述被支援装置中的发送部,将所述开始支援请求发送给所述支援装置;
所述支援装置中的接收部,从所述被支援装置接收所述操作画面信息;
所述支援装置中的向导画面生成部,根据所述操作画面信息,生成向导画面,该向导画面是包含所述操作项目的图像;
所述支援装置中的输出部,显示所述向导画面;
所述支援装置中的输入部,获得由所述支援用户对所述向导画面进行的操作;
所述支援装置中的向导GUI生成部,生成向导GUI信息,该向导GUI信息是示出所述向导画面中的由所述支援用户操作了的所述操作项目的信息;
所述支援装置中的发送部,将所述向导GUI信息发送给所述被支援装置;
所述被支援装置中的接收部,接收所述向导GUI信息;以及
所述被支援装置中的向导GUI重叠部,根据所述向导GUI信息,使向导GUI重叠到所述操作画面,该向导GUI是用于将应该操作的所述操作项目指导给所述被支援用户的图像。
12.如权利要求11所述的设备间向导系统,
用于确定所述操作项目的信息是用于识别包含操作项目的图像的标识符,
所述被支援装置的输出部,将所述被支援装置所保持的图像之中的、由所述标识符识别的第一图像,作为包含所述操作项目的图像来显示到操作画面,
所述支援装置的输出部,将所述支援装置所保持的图像之中的、由所述标识符识别的第二图像,作为包含所述操作项目的图像来显示到向导画面。
13.一种被支援方法,是通过被支援装置的设备间向导系统中的被支援方法,支援用户经由通过网络与所述被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该被支援方法包括:
输出步骤,将包含操作项目的操作画面显示到所述被支援装置;
请求发行步骤,发行开始支援请求,该开始支援请求是包含操作画面信息的信号,所述操作画面信息是用于确定被显示在所述操作画面的所述操作项目的信息;
发送步骤,将所述开始支援请求发送给所述支援装置;
接收步骤,从所述支援装置接收向导GUI信息,该向导GUI信息示出所述操作项目之中的所述被支援用户应该操作的操作项目;以及
向导GUI重叠步骤,使向导GUI重叠到所述操作画面,该向导GUI是用于将由所述向导GUI信息示出的操作项目指导给所述被支援用户的图像。
14.一种记录介质,记录程序,以便使计算机作为设备间向导系统中的被支援装置来工作,在该设备间向导系统中,支援用户经由通过网络与所述被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该记录介质中记录的程序使所述计算机执行以下的步骤:
输出步骤,将包含操作项目的操作画面显示到所述被支援装置;
请求发行步骤,发行开始支援请求,该开始支援请求是包含操作画面信息的信号,所述操作画面信息是用于确定被显示在所述操作画面的所述操作项目的信息;
发送步骤,将所述开始支援请求发送给所述支援装置;
接收步骤,从所述支援装置接收向导GUI信息,该向导GUI信息示出所述操作项目之中的所述被支援用户应该操作的操作项目;以及
向导GUI重叠步骤,使向导GUI重叠到所述操作画面,该向导GUI是用于将由所述向导GUI信息示出的操作项目指导给所述被支援用户的图像。
15.一种集成电路,被搭载在具备输出部的非支援装置,所述输出部在设备间向导系统中显示作为包含操作项目的图像的操作画面,并且在该设备间向导系统中,支援用户经由通过网络与所述被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该集成电路包括:
请求发行部,发行开始支援请求,该开始支援请求是包含操作画面信息的信号,该操作画面信息是用于确定被显示在所述操作画面的所述操作项目的信息;
收发部,将所述开始支援请求发送给所述支援装置,从所述支援装置接收所述操作项目之中的、示出所述被支援用户应该操作的操作项目的向导GUI信息;以及
向导GUI重叠部,根据所述向导GUI信息将向导GUI重叠到所述操作画面,该向导GUI是用于将所述应该操作的操作项目指导给所述被支援用户的图像。
16.一种由支援装置进行的支援方法,在设备间向导系统中,支援用户经由通过网络与被支援装置连接的所述支援装置,对操作所述被支援装置的被支援用户进行支援,该被支援方法包括:
接收步骤,从所述支援装置接收操作画面信息,该操作画面信息是用于确定被显示在所述被支援装置的操作画面的操作项目的信息;
向导画面生成步骤,根据所述操作画面信息,生成向导画面,该向导画面是与所述被支援装置的操作画面对应的操作画面;
输出步骤,显示所述向导画面;
输入步骤,获得支援用户对所述向导画面进行的操作;
向导GUI生成步骤,生成向导GUI信息,该向导GUI信息是用于确定由所述支援用户操作的所述向导画面中所包含的所述操作项目的信息;以及
发送步骤,将所述向导GUI信息发送给所述被支援装置。
17.一种记录介质,记录程序,以便使计算机作为设备间向导系统中的支援装置来工作,在该设备间向导系统中,支援用户经由通过网络与被支援装置连接的所述支援装置,对操作所述被支援装置的被支援用户进行支援,该记录介质中记录的程序使所述计算机执行以下的步骤:
接收步骤,从所述支援装置接收操作画面信息,该操作画面信息是用于确定被显示在所述被支援装置的操作画面的操作项目的信息;
向导画面生成步骤,根据所述操作画面信息,来生成向导画面,该向导画面是与所述被支援装置的操作画面对应的操作画面;
输出步骤,显示所述向导画面;
输入步骤,获得支援用户对所述向导画面进行的操作;
向导GUI生成步骤,生成向导GUI信息,该向导GUI信息是用于确定由所述支援用户操作的所述向导画面中包含的所述操作项目的信息;以及
发送步骤,将所述向导GUI信息发送给所述被支援装置。
18.一种集成电路,被搭载在具备输出部和输入部的支援装置,所述输出部显示向导画面,所述输入部获得支援用户对所述向导画面进行的操作,在设备间向导系统中,支援用户经由通过网络与被支援装置连接的支援装置,对操作所述被支援装置的被支援用户进行支援,该集成电路包括:
收发部,从所述被支援装置接收操作画面信息,该操作画面信息是用于确定所述被支援装置的操作项目的信息;
向导画面生成部,根据所述操作画面信息,生成向导画面,该向导画面是包含所述操作项目的图像;以及
向导GUI生成部,生成向导GUI信息,该向导GUI信息是示出所述向导画面中的由所述支援用户操作了的所述操作项目的信息,
所述收发部进一步将所述向导GUI信息发送给所述被支援装置。
CN201280026411.7A 2011-06-07 2012-05-31 被支援装置、支援装置、设备间向导系统、记录介质、以及集成电路 Expired - Fee Related CN103748541B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011-127666 2011-06-07
JP2011127666 2011-06-07
PCT/JP2012/003570 WO2012169157A1 (ja) 2011-06-07 2012-05-31 被サポート装置、サポート装置、機器間ガイドシステム、記録媒体、及び集積回路

Publications (2)

Publication Number Publication Date
CN103748541A true CN103748541A (zh) 2014-04-23
CN103748541B CN103748541B (zh) 2016-10-12

Family

ID=47295744

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280026411.7A Expired - Fee Related CN103748541B (zh) 2011-06-07 2012-05-31 被支援装置、支援装置、设备间向导系统、记录介质、以及集成电路

Country Status (4)

Country Link
US (1) US20140101546A1 (zh)
JP (1) JPWO2012169157A1 (zh)
CN (1) CN103748541B (zh)
WO (1) WO2012169157A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105279367A (zh) * 2014-07-15 2016-01-27 富士胶片株式会社 诊疗支援装置、诊疗支援装置的工作方法及诊疗支援系统
CN107305480A (zh) * 2016-04-20 2017-10-31 富士施乐株式会社 指令装置、处理装置、处理系统和方法
CN108319875A (zh) * 2017-01-16 2018-07-24 欧姆龙株式会社 传感器支援系统、终端、传感器以及传感器支援方法

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ITTO20120744A1 (it) * 2012-08-29 2014-03-01 Inst Rundfunktechnik Gmbh Bereitstellung von applikationen auf mehreren elektronischen geraeten
JP6057128B2 (ja) * 2013-02-28 2017-01-11 カシオ計算機株式会社 情報管理装置、情報管理システム及びプログラム
JP6261183B2 (ja) * 2013-04-22 2018-01-17 株式会社ハート・オーガナイゼーション 医用画像データ情報交換システム
JP2014219867A (ja) 2013-05-09 2014-11-20 コニカミノルタ株式会社 画像形成装置、画像形成装置が操作方法を案内する方法、プログラム、および、システム
JP6060807B2 (ja) * 2013-05-13 2017-01-18 コニカミノルタ株式会社 操作支援システム、電子機器、表示方法、および制御プログラム
WO2014192162A1 (ja) * 2013-05-31 2014-12-04 富士通株式会社 情報処理装置、リモート操作制御方法及びリモート操作制御プログラム
JP6020383B2 (ja) * 2013-08-09 2016-11-02 株式会社島津製作所 表示・実行操作補助プログラム
JP6015637B2 (ja) * 2013-11-29 2016-10-26 コニカミノルタ株式会社 情報処理装置、情報処理装置を制御するための方法、および、当該方法をコンピュータに実行させるためのプログラム
KR20150115365A (ko) * 2014-04-04 2015-10-14 삼성전자주식회사 전자장치에서 사용자 입력에 대응한 사용자 인터페이스 제공 방법 및 장치
EP3201858A4 (en) * 2014-09-29 2018-03-28 Hewlett-Packard Development Company, L.P. Providing technical support to a user via a wearable computing device
JP6460011B2 (ja) * 2016-03-01 2019-01-30 京セラドキュメントソリューションズ株式会社 情報処理装置及びプログラム
KR20200109467A (ko) * 2019-03-13 2020-09-23 삼성전자주식회사 전자 장치 및 그 제어 방법
JP7180622B2 (ja) * 2019-09-12 2022-11-30 カシオ計算機株式会社 情報処理装置、情報処理方法及び情報処理プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007253648A (ja) * 2006-03-20 2007-10-04 Toyota Motor Corp 入力支援システムおよびそのシステムを構成する車載端末装置
US20090164899A1 (en) * 2007-12-21 2009-06-25 Brian Hernacki Providing Image-Based Guidance for Remote Assistance
CN101964798A (zh) * 2010-10-15 2011-02-02 德讯科技股份有限公司 基于远程桌面协议的多图形协议统一代理系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09128310A (ja) * 1995-11-06 1997-05-16 Hitachi Ltd 情報共有装置および情報共有方法
JP2000231625A (ja) * 1999-02-12 2000-08-22 Sanyo Electric Co Ltd 指示情報伝達装置
JP2006350681A (ja) * 2005-06-16 2006-12-28 Toshiba Corp プラント監視制御装置の操作手順支援システム
US20090063175A1 (en) * 2007-08-31 2009-03-05 Jason Hibbets Methods and systems for providing multiple support options

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007253648A (ja) * 2006-03-20 2007-10-04 Toyota Motor Corp 入力支援システムおよびそのシステムを構成する車載端末装置
US20090164899A1 (en) * 2007-12-21 2009-06-25 Brian Hernacki Providing Image-Based Guidance for Remote Assistance
CN101964798A (zh) * 2010-10-15 2011-02-02 德讯科技股份有限公司 基于远程桌面协议的多图形协议统一代理系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105279367A (zh) * 2014-07-15 2016-01-27 富士胶片株式会社 诊疗支援装置、诊疗支援装置的工作方法及诊疗支援系统
CN107305480A (zh) * 2016-04-20 2017-10-31 富士施乐株式会社 指令装置、处理装置、处理系统和方法
CN108319875A (zh) * 2017-01-16 2018-07-24 欧姆龙株式会社 传感器支援系统、终端、传感器以及传感器支援方法
CN108319875B (zh) * 2017-01-16 2021-07-16 欧姆龙株式会社 传感器支援系统、终端、传感器以及传感器支援方法

Also Published As

Publication number Publication date
CN103748541B (zh) 2016-10-12
WO2012169157A1 (ja) 2012-12-13
JPWO2012169157A1 (ja) 2015-02-23
US20140101546A1 (en) 2014-04-10

Similar Documents

Publication Publication Date Title
CN103748541A (zh) 被支援装置、支援装置、设备间向导系统、记录介质、以及集成电路
CN105573516B (zh) 多操作系统输入装置
CN103064535B (zh) 触控笔、触控输入系统及更改触控操作特性的方法
WO2007024271A1 (en) Mobile communication terminal with virtual remote control
CN103873908A (zh) 显示装置、遥控装置及使用所述装置提供用户界面的方法
CN103339607A (zh) 利用单个手势输入来锁定和解锁多个操作系统环境的方法和设备
CN101582053A (zh) 将用户界面推到远程设备
CN103425481A (zh) 向菜单项和动作动态分配快捷方式
US20160006971A1 (en) Display apparatus and controlling method thereof
CN104423922A (zh) 图像显示装置和数据传送方法
CN107209678A (zh) 用于移动设备的自适应克隆的系统和方法
CN108885479A (zh) 对外部具有触摸功能的显示设备的触摸输入支持
CN103576988A (zh) 图像处理设备、图像处理系统和图像处理方法
US20140164186A1 (en) Method for providing application information and mobile terminal thereof
TW201740286A (zh) 一種資料共用系統及方法
KR20110020178A (ko) 애플리케이션 다운로드 서비스방법, 애플리케이션 제공 서비스방법, 및 이를 적용한 사용자 단말기
US20150187186A1 (en) Wifi Landing Page for Remote Control of Digital Signs
CN102970475A (zh) 信息处理设备、信息处理方法、程序、以及信息处理系统
CN109976605B (zh) 班牌内容显示方法、装置及存储介质
CN103428550A (zh) 对象选择方法及终端
KR20180090053A (ko) 서비스를 제공하는 서버 및 그 서버의 동작 방법
CN107924297A (zh) 用于处理信息的系统、方法和信息处理装置
KR101199384B1 (ko) 플러그 앤 플레이 기능을 구비한 이동 단말기 및 이를 위한방법
WO2014204216A1 (en) Method for managing media contents and apparatus for the same
CN101278555B (zh) 用于提供画中画功能的显示设备和方法以及信息处理设备和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MATSUSHITA ELECTRIC (AMERICA) INTELLECTUAL PROPERT

Free format text: FORMER OWNER: MATSUSHITA ELECTRIC INDUSTRIAL CO, LTD.

Effective date: 20141009

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20141009

Address after: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Applicant after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Osaka Japan

Applicant before: Matsushita Electric Industrial Co.,Ltd.

CB02 Change of applicant information

Address after: Seaman Avenue Torrance in the United States of California No. 20000 room 200

Applicant after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Applicant before: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

COR Change of bibliographic data
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20161012

Termination date: 20200531