CN101542425A - 操作导向显示装置 - Google Patents

操作导向显示装置 Download PDF

Info

Publication number
CN101542425A
CN101542425A CNA2008800006049A CN200880000604A CN101542425A CN 101542425 A CN101542425 A CN 101542425A CN A2008800006049 A CNA2008800006049 A CN A2008800006049A CN 200880000604 A CN200880000604 A CN 200880000604A CN 101542425 A CN101542425 A CN 101542425A
Authority
CN
China
Prior art keywords
information
display message
input
symbolic
change rule
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2008800006049A
Other languages
English (en)
Other versions
CN101542425B (zh
Inventor
阿曾光洋
矢岛英明
秦秀彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN101542425A publication Critical patent/CN101542425A/zh
Application granted granted Critical
Publication of CN101542425B publication Critical patent/CN101542425B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G06F3/04895Guidance during keyboard input operation, e.g. prompting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0238Programmable keyboards
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供一种操作导向显示装置,提高用户使用的便利性。输入装置(101)被变更的情况下,显示信息变更规则提取部(106)提取功能显示信息变更规则,该功能显示信息变更规则显示所提取的导向显示信息。显示信息变更部(107)使被通知提取的导向显示信息中,有关与输入信息不一致的输入信息的操作辅助信息的显示规则无效。显示信息变更部(107)将无效化后的符号信息的操作辅助信息生成为,能够利用输入信息转换表中所定义的输入信息来进行操作的GUI,从而进行适当的操作导向显示。

Description

操作导向显示装置
技术领域
本发明涉及一种在用户能够边确认图形用户界面(GUI),边进行操作的电子设备中,对GUI的一部分进行操作导向的显示的操作导向显示装置。
背景技术
近年来,在电脑、工作站、移动电话、数字电视、数字影像记录装置等电子设备中,为了使用户能够直观并简单地利用电子设备所提供的功能,在连接到各种电子设备的显示装置(CRT、液晶监控器)上显示图形用户界面(GUI)。
GUI作为能够在构成电子设备的硬件(CPU、存储器或各种输入/出装置)上执行的软件,被进行了逻辑性的记述,作为向用户提供信息的方式,利用显示装置的画面上的图形显示。此外,GUI从电子设备所连接的键盘、鼠标、遥控器等输入装置接收输入信息(传感信号:Sensor Signal),根据该输入信息的类别来变更图形显示内容或呼出电子设备的功能。
通过利用这样的GUI,能够对多功能的电子设备进行操作。例如,有一种“导向信息显示”,使鼠标或键盘等输入装置的操作方法与该操作所执行的终端的功能相关联,而显示于显示装置的画面上。
导向信息显示的方法例如有,对能够判别用户可利用的输入装置的构成要素(例如特定的按键或按钮)的图像(模拟按键、按钮形状、位置等的图像)或文字信息进行显示,或通过操作所显示的输入装置,将能够利用哪一功能的信息显示于画面的一部分。通过这样的导向信息显示,用户通过视觉便能够识别各个按钮或按键被按下时而执行的功能或哪一按钮能够利用。
然而,这样的导向信息是作为以在特定的输入装置中使用为前提的软件被安装的,所以,当电子设备的构成被变更时,会出现导向信息显示中模拟输入装置的图像与实际的输入装置的构成(按钮或按键的形状、排列等)不相同的情况,从而不能发挥作为导向信息的作用。例如,作为电脑的输入装置使用键盘或鼠标的情况下,会有变更为按钮设置或按钮的个数不同的键盘或鼠标的情况。
为了解决上述问题,公开的现有技术是,即使键盘的功能键的排列因键盘类型而异,通过结合按键的设置来对用于辅助按键的输入操作的导向信息进行变更并显示,使实际按键的排列与导向显示一致,从而防止用户的错误操作(例如,参照专利文献1)。
结合图21及图22,对专利文献1所公开的现有技术的文字输入装置的动作进行说明。图21是示出现有技术的文字输入装置所使用的键盘的功能键的排列的图。图22是现有技术的文字输入装置中所显示的导向信息的一示例图。假设现有技术的文字输入装置中,图22(a)所示的导向显示2201A的显示状态是结合图21(a)所示的键盘2101A的功能键2102A的排列来进行显示的状态。假设在该状态下,现有的文字输入装置所使用的键盘从图21(a)所示的键盘2101A被变更为图21(b)所示的键盘2101B的情况。此时,现有的文字输入装置结合图21(b)所示的键盘2101B的功能键2102B的排列,将按键设置变更为图22(b)所示的导向显示2201B。
专利文献1:日本特开平8-272504号公报
然而,上述现有技术中可能存在的问题是:在设计GUI时所设想的按键个数不足或所设想的按键不存在的情况下,由于不能适当地变更导向信息,使用户不能够利用GUI设计者所提供的电子设备的功能。
具体而言,例如,在将GUI设计为:对键盘上的8个功能键分配8个功能,作为导向信息,说明按下各个功能键时哪个功能被执行的情况下,若是功能键为8个以上的键盘,那么使用上述现有技术,便能够根据按键的设置来变更导向信息显示。但是,当所连接的是功能键不足8个的键盘的情况下,由于分配到功能键的一部分功能不能作为导向信息而被适当地显示,从而使用户不能利用电子设备的相应功能。
因此,本发明的目的在于解决上述现有的问题,提供一种操作导向显示装置,即使在与GUI设计时的导向信息不一致的输入装置连接到电子设备的情况下,通过将与不能利用的输入信息相关联的导向信息用通过其他可利用的输入信息能够进行操作的GUI来代替显示,从而提高用户使用的便利性。
发明内容
本发明涉及一种输出与输入装置相对应的操作导向的操作导向显示装置。然后,为达到上述目的,本发明的操作导向显示装置具备:输入装置信息管理部,将经由输入装置输入的输入信息与唯一的符号信息建立一一对应关系,并作为输入信息转换表来管理;功能显示信息管理部,将符号信息与输入符号信息时所执行的规定的处理建立对应关系,并作为功能显示信息变更规则来管理;功能显示部,利用输入装置信息管理部所管理的输入信息转换表,将输入信息转换为符号信息,并按照与该转换后的符号信息相对应的功能显示信息变更规则,通过执行规定的处理来生成GUI,并输出该所生成的GUI;导向显示信息管理部,将用于生成操作辅助信息的信息作为导向显示信息来管理,其中,操作辅助信息与功能显示部所生成的GUI的显示状态相应;操作导向显示部,按照导向显示信息管理部所管理的导向显示信息,生成操作辅助信息,并输出该所生成的操作辅助信息;显示信息变更规则提取部,对输入信息转换表中所含有的符号信息、功能显示信息变更规则所含有的符号信息及导向显示信息所含有的符号信息进行比较,提取与不包含在输入信息转换表中的符号信息有关的功能显示信息变更规则和导向显示信息;显示信息变更部,利用输入信息转换表中所含有的符号信息,对显示信息变更规则提取部所提取的功能显示信息变更规则和导向显示信息进行变更。
显示信息变更部对功能显示信息变更规则提取部所提取的导向显示信息中,不包含在输入信息转换表中的符号信息的操作辅助信息的显示规则进行无效化变更,并变更功能显示信息变更规则,使该无效化了的符号信息的操作辅助信息生成为利用输入信息转换表中所含有的输入信息能够进行操作的GUI。
操作导向显示装置还可以具备显示信息存储部,存储导向显示信息和功能显示信息变更规则。该情况下,显示信息变更部能够在导向显示信息和功能显示信息变更规则中含有没有被定义在输入信息转换表中的符号信息的情况下,通过将符合该符号信息的位置置换为与没有被利用的输入信息相对应的符号信息,来变更导向显示信息和功能显示信息变更规则,并存入显示信息存储部。
此外,本发明还涉及一种服务器装置,与经由网络连接的终端装置共同构成操作导向显示系统,该操作导向系统输出与输入装置相对应的操作导向。本发明的服务器装置具备:功能显示信息管理部,将唯一的符号信息与输入唯一符号信息时所执行的规定的处理建立对应关系,并作为功能显示信息变更规则来管理;导向显示信息管理部,将用于生成操作辅助信息的信息作为导向显示信息来管理,其中,操作辅助信息与GUI的显示状态相应;显示信息变更规则提取部,在接收到输入信息转换表的情况下,对输入信息转换表中所含有的符号信息、功能显示信息变更规则所含有的符号信息及导向显示信息所含有的符号信息进行比较,提取与不包含在输入信息转换表中的符号信息有关的功能显示信息变更规则和导向显示信息,其中,输入信息转换表将经由输入装置输入的输入信息与唯一的符号信息建立了一一对应关系;显示信息变更部,利用输入信息转换表中所含有的符号信息,对显示信息变更规则提取部所提取的功能显示信息变更规则和导向显示信息进行变更;发送/接收部,经由网络,从终端装置接收输入信息转换表,并向终端装置发送经显示信息更新部所更新了的功能显示信息变更规则和导向显示信息。
此外,本发明还涉及一种终端装置,与经由网络连接的服务器装置共同构成操作导向显示系统,该操作导向系统输出与输入装置相对应的操作导向。然后,本发明的终端装置具备:输入装置信息管理部,将经由输入装置输入的输入信息与唯一的符号信息建立一一对应关系,并作为输入信息转换表来管理;显示信息存储部,存储功能显示信息变更规则和导向显示信息,其中,功能显示信息变更规则将符号信息与输入符号信息时所执行的规定的处理建立了对应关系而被管理,导向显示信息被管理为用于生成与功能显示部所生成的GUI的显示状态相应地被显示的操作辅助信息的信息;发送/接收部,在输入信息转换表被更新的情况下,经由网络,将该更新后的输入信息转换表发送至服务器装置,并从服务器装置接收与该更新后的输入信息转换表相对应的导向显示信息和功能显示信息更新规则;功能显示部,利用输入装置信息管理部所管理的输入信息转换表,将输入信息转换为符号信息,并按照与该转换后的符号信息相对应的功能显示信息变更规则,通过执行规定的处理来生成GUI,并输出该所生成的GUI;操作导向显示部,按照导向显示信息,生成操作辅助信息,并输出该所生成的操作辅助信息。
此外,本发明还涉及一种输出与输入装置相对应的操作导向的操作导向显示装置所执行的方法。然后,本发明的操作导向显示装置具备:输入装置信息管理部,将经由输入装置输入的输入信息与唯一的符号信息建立一一对应关系,并作为输入信息转换表来管理;功能显示信息管理部,将符号信息与输入符号信息时所执行的规定的处理建立对应关系,并作为功能显示信息变更规则来管理;导向显示信息管理部,将用于生成操作辅助信息的信息作为导向显示信息来管理,其中,操作辅助信息与GUI的显示状态相应;本发明的方法包括:利用输入信息转换表,将输入信息转换为符号信息,并按照与该转换后的符号信息相对应的功能显示信息变更规则,通过执行规定的处理来生成GUI,并输出该所生成的GUI的步骤;按照导向显示信息,生成操作辅助信息,并输出该所生成的操作辅助信息的步骤;对输入信息转换表中所含有的符号信息、功能显示信息变更规则所含有的符号信息及导向显示信息所含有的符号信息进行比较,提取与不包含在输入信息转换表中的符号信息有关的功能显示信息变更规则和导向显示信息的步骤;利用输入信息转换表中所含有的符号信息,对所提取的功能显示信息变更规则和导向显示信息进行变更的步骤。
此外,本发明还涉及一种输出与输入装置相对应的操作导向的操作导向显示装置的集成电路。然后,本发明的操作导向显示装置具备:输入装置信息管理部,将经由输入装置输入的输入信息与唯一的符号信息建立一一对应关系,并作为输入信息转换表来管理;功能显示信息管理部,将符号信息与输入符号信息时所执行的规定的处理建立对应关系,并作为功能显示信息变更规则来管理;导向显示信息管理部,将用于生成操作辅助信息的信息作为导向显示信息来管理,其中,操作辅助信息与GUI的显示状态相应;集成电路具备:功能显示部,利用输入装置信息管理部所管理的输入信息转换表,将输入信息转换为符号信息,并按照与该转换后的符号信息相对应的功能显示信息变更规则,通过执行规定的处理来生成GUI,并输出该所生成的GUI;操作导向显示部,按照导向显示信息管理部所管理的导向显示信息,生成操作辅助信息,并输出该所生成的操作辅助信息;显示信息变更规则提取部,对输入信息转换表中所含有的符号信息、功能显示信息变更规则所含有的符号信息及导向显示信息所含有的符号信息进行比较,提取与不包含在输入信息转换表中的符号信息有关的功能显示信息变更规则与导向显示信息;显示信息变更部,利用输入信息转换表中所含有的符号信息,对显示信息变更规则提取部所提取的功能显示信息变更规则和导向显示信息进行变更。
发明效果:根据本发明的操作导向显示装置,即使与GUI设计时的导向信息不一致的输入装置连接到电子设备的情况下,将与不能利用的输入信息相关联的导向信息用通过其他能够利用的输入信息能够操作的GUI来进行代替显示,从而能够提高用户使用的便利性。
附图说明
图1是示出包含本发明的第1实施方式所涉及的操作导向显示装置的电子设备的一结构例的块图。
图2是本发明的第1实施方式所涉及的输入信息转换表的一示例图。
图3是本发明的第1实施方式所涉及的功能显示信息变更规则301的一示例图。
图4A是本发明的第1实施方式所涉及的导向显示信息变更规则401的一示例图。
图4B是本发明的第1实施方式所涉及的导向显示模式402的一示例图。
图5是本发明的第1实施方式所涉及的操作导向显示装置的一动作例的流程图。
图6A是将本发明的第1实施方式所涉及的操作导向显示装置应用到移动电话A时的一示例图。
图6B是将本发明的第1实施方式所涉及的操作导向显示装置应用到移动电话B时的一示例图。
图7A是将本发明的第1实施方式所涉及的操作导向显示装置应用到移动电话A时的一示例图。
图7B是将本发明的第1实施方式所涉及的操作导向显示装置应用到移动电话B时的一示例图。
图8A是本发明的第1实施方式所涉及的功能显示信息变更规则801(变更前)的一示例图。
图8B是本发明的第1实施方式所涉及的功能显示信息变更规则802(变更后)的一示例图。
图9A是将本发明的第1实施方式所涉及的操作导向显示装置应用到录像机时的一示例图。
图9B是将本发明的第1实施方式所涉及的操作导向显示装置应用到移动电话时的一示例图。
图10是本发明的第2实施方式所涉及的操作导向显示装置的一结构例的块图。
图11是本发明的第2实施方式所涉及的操作导向显示装置的一动作例的流程图。
图12是本发明的第2实施方式所涉及的导向显示模式1201(变更后)的一示例图。
图13A是本发明的第2实施方式所涉及的功能显示信息变更规则1301(变更前)的一示例图。
图13B是本发明的第2实施方式所涉及的变更后的功能显示信息变更规则1302(变更后)的一示例图。
图14是将本发明的第2实施方式所涉及的操作导向显示装置应用到移动电话时的一示例图。
图15是本发明的第3实施方式所涉及的操作导向显示系统的一结构例的块图。
图16是本发明的第3实施方式所涉及的操作导向显示系统的终端装置的一动作例的流程图。
图17是本发明的第3实施方式所涉及的操作导向显示系统的服务器装置的一动作例的流程图。
图18是示出本发明的第3实施方式所涉及的显示信息变更部107的处理的一例的流程图。
图19A是本发明的第3实施方式所涉及的导向显示模式402(变更前)的一示例图。
图19B是本发明的第3实施方式所涉及的导向显示模式1901(变更前)的一示例图。
图20A是本发明的第3实施方式所涉及的功能显示信息变更规则801(变更前)的一示例图。
图20B是本发明的第3实施方式所涉及的功能显示信息变更规则2002(变更后)的一示例图。
图21是示出现有技术的文字输入装置中所使用的键盘的功能键的排列的图。
图22是现有技术的文字输入装置中所显示的导向信息的一示例图。
标记说明
101输入装置
102功能显示部
103显示装置
104输入装置信息管理部
105功能显示信息管理部
106显示信息变更规则提取部
107显示信息变更部
108导向显示信息管理部
109操作导向显示部
301功能显示信息变更规则
401导向显示信息变更规则
402导向显示模式
501清单式GUI显示
502导向信息
503,504移动电话的输入装置即键盘的一部分
701功能显示部所显示的GUI
702操作导向显示部所显示的GUI
703功能显示部所显示的GUI按钮
704操作导向显示部所显示的GUI
801显示信息变更规则(变更前)
802显示信息变更规则(变更后)
901遥控器的显示装置的一部分
902,904功能显示部所显示的GUI
903,906操作导向显示部所显示的GUI
905功能显示部所显示的GUI按钮
具体实施方式
以下,参照附图,对本发明的各个实施方式进行说明。
(第1实施方式)
图1是示出包含本发明的第1实施方式所涉及的操作导向显示装置的电子设备的一结构例的块图。图1中,电子设备包括:输入装置101、操作导向显示装置及显示装置103。操作导向显示装置包括:功能显示部102、输入装置信息管理部104、功能显示信息管理部105、显示信息变更规则提取部106、显示信息变更部107、导向显示信息管理部108及操作导向显示部109。
输入装置101是电脑或移动电话的键盘、电视遥控器等的按钮、传声器、加速度传感器、角速度传感器等,用于接收来自用户、应用程序的输入操作,例如,按下按钮的输入信号、传声器的声音输入信号、或加速度传感器或角速度传感器等电子设备的倾斜或旋转等输入信号,并将所获得的各种传感器信息作为输入信息输出。
输入装置信息管理部104将来自输入装置101的输入信息与按照事先规定的规则所决定的唯一的符号信息建立一一对应关系来进行管理。该符号信息与输入信息的对应关系作为输入信息转换表而被保存。输入信息转换表在输入装置101的构成通过连接新的输入装置101或将已连接的输入装置101拆卸等而被变更的情况下,根据变更的内容被进行更新。在此假设输入装置信息管理部104根据各种输入装置101来管理输入信息转换表。
此外,输入装置信息管理部104还能够将多个输入装置101的对应关系作为1个输入信息转换表来管理。例如,在已经连接有键盘和鼠标的情况下新连接遥控器时,输入信息转换表的管理对象除键盘和鼠标的信息外,还包括遥控器的信息。之后将结合附图对输入信息转换表进行详细说明。
显示装置103具备液晶显示器或CRT显示器等画面,根据功能显示部102或操作导向显示部109的指示,在画面上显示图形用户界面(GUI)。
功能显示部102利用功能显示信息管理部105所管理的功能显示信息变更规则,生成显示装置103要显示的GUI。在功能显示部102中所生成的GUI能够按照用户对输入装置101的输入操作,按照预先规定的处理规则(功能显示信息变更规则),变更画面上的GUI的显示内容或执行规定了的功能。之后将结合附图对功能显示信息变更规则进行详细说明。
功能显示部102为了执行与用户的输入操作类别相应的处理,需要判别来自输入装置101的输入信息。为了判别来自该输入装置101的输入信息,功能显示部102利用符号信息,该符号信息的记述形式与输入装置信息管理部104所管理的输入信息转换表中所定义的符号信息的记述形式相同。
具体而言,功能显示部102接收用户操作产生的、来自输入装置101的输入信息,利用输入装置信息管理部104所管理的输入信息转换表,将输入信息转换为符号信息。然后,从功能显示信息管理部105中提取与转换后的符号信息相对应的功能显示信息变更规则,并执行所提取的规则中记述的处理。此外,通过执行该所提取的规则中记述的处理,画面上所显示的GUI的显示状态被变更的情况下,对操作导向显示部109发行通知变更后的显示状态的显示状态变更通知。
功能显示信息管理部105将符号信息与输入该符号信息时的功能呼出处理建立对应关系,并作为功能显示信息变更规则来管理。在某GUI显示期间执行操作时,根据该操作所对应的符号信息,便能够唯一地决定所要执行的功能呼出处理。之后将结合附图对功能显示信息变更规则进行详细说明。
操作导向显示部109接收来自功能显示部102的显示状态变更通知,生成与被通知的显示状态相应的辅助信息,并显示于显示装置103上。该操作导向显示部109所生成的辅助信息是指导用户应该怎样利用输入装置101来操作功能显示部102所生成的GUI的导向信息,显示模拟输入装置101的构成(例如,按钮或按键的设置)的图像,并显示文字或图标等信息,以使用户能够判别操作方法。为了生成这样的导向信息,操作导向显示部109参照导向显示信息管理部108所管理的导向显示信息。此外,操作导向显示部109决定各个按钮或文字列的具体显示位置或显示尺寸,使导向显示的各个构成要素能够结合显示模式的定义,显示于预先规定导向显示区域。
导向显示信息管理部108管理导向显示信息。导向显示信息包括:导向显示信息变更规则和导向显示模式。导向显示信息变更规则是表示操作导向显示部109从功能显示部102接收到显示状态变更通知时的处理规则。此外,导向显示模式是表示按钮或按键的图像数据或文字列和其设置信息组合的集合,根据1个显示模式能够生成一次画面上所显示的导向信息。
显示信息变更规则提取部106,检测出输入装置101被变更,对输入装置信息管理部104所管理的输入信息转换表所定义的符号信息、功能显示信息管理部105所管理的功能显示信息变更规则、以及导向显示信息管理部108所管理的导向显示信息进行比较。然后,提取利用输入装置信息管理部104所管理的输入信息转换表中没有被定义的符号信息的功能显示信息变更规则和导向显示信息,并通知显示信息变更部107。
显示信息变更部107对所提取的导向显示信息进行变更,以使显示信息变更规则提取部106所提取的导向显示信息中,与不符合输入装置101的任何输入信息的操作辅助信息有关的显示规则无效,并存入导向显示信息管理部108。此外,显示信息变更部107将功能显示信息变更规则重新存入功能显示信息管理部105,其中,功能显示信息变更规则能够将与无效化后的符号有关的操作辅助信息生成为利用输入装置101所产生的任意的输入信息能够进行操作的GUI。
通过上述构成,操作导向显示装置在与GUI设计时的导向信息不一致的输入装置101连接到电子设备的情况下,根据输入装置101的构成信息来判别输入信息是否可以利用,从而用通过其他可利用的输入信息能够进行操作的GUI来代替显示与不能够利用的输入信息建立了关系的导向信息。
图2是输入装置信息管理部104所管理的输入信息转换表的一示例图。图2的示例中,输入信息转换表包括传感信息列、符号信息及设置信息。传感信息列表示编码后的输入装置101的输入信号。符号信息是用于将来自输入装置101的输入信号(传感信息列所记载的符号)转换为预先规定的符号的信息。
例如,输入装置101的输入信号通过32比特符号0x00000016而获得的情况下,能够判别是具有符号“RIGHT”的输入信号。通过将“RIGHT”预先规定为表示“右方向”的符号,便能够将输入信息转换表定义为,将具有上下左右键等十字键的键盘或遥控器的右键的输入信号转换为“RIGHT”。或者,将输入装置101利用各种传感信息检测出输入装置101向右方向移动时的输入信号转换为“RIGHT”。
此外,输入信息转换表中还能够管理输入装置101的构成信息。例如,图2的输入信息转换表的设置信息列中管理有:输入装置101是如键盘或遥控器那样具有按钮形式的输入方式的情况下,表示按钮的物理设置的信息。图2中,符号信息“RIGHT”的设置信息“1:00010”表示:符合输入装置101的符号“RIGHT”的按钮,在用户从正面看输入装置101的情况下,设置于信息“1:”所表示的位于第2段,信息“00010”所表示的位于右边第2个位置。同样地,符合图2的符号“F1”的按钮表示:设置于第1段即“0:”的左边第1个即“10000”。根据该排列信息,能够获得各个按钮的设置信息。
该输入装置信息管理部104所管理的输入信息转换表由于是根据每个输入装置101来进行管理的,所以,例如在输入装置101的构成被变更的情况下,便根据变更内容而被变更。具体而言,在除了连接有键盘或鼠标外,还连接了遥控器的情况下,输入装置信息管理部104中除了键盘或鼠标的输入信息转换表以外,还管理有遥控器用的输入信息转换表。
图3是功能显示信息管理部105所管理的功能显示信息变更规则的一示例图。功能显示部102利用该功能显示信息变更规则301来显示表示操作导向的GUI。功能显示信息变更规则301的“显示状态”列是表示显示装置103的画面上所显示的GUI的显示状态的状态参数,接着的“输入条件”列和“功能呼出处理”列表示:当画面上所显示的GUI的显示状态是“显示状态”列所示的状态的情况下,当输入装置101通知“输入条件”列所示的输入信息时,执行“功能呼出处理”列所记载的处理。
具体而言,“显示状态”列为S1的情况下的功能显示信息变更规则表示:当输入装置101通知具有符号F0的输入信息时,执行功能“Function A”,并执行显示装置103的画面上所要显示的GUI生成处理“Create GUI ofS2”,并将显示状态迁移到S10。
图4A、4B是导向显示信息管理部108所管理的导向显示信息的一示例图。该例子中,导向显示信息包括图4A所示的导向显示信息变更规则401及图4B所示的导向显示模式402。
导向显示信息变更规则401表示:操作导向显示部109从功能显示部102接收到显示状态变更通知时的处理规则。该导向显示信息变更规则401中,“描绘条件”列表示:操作导向显示部109以功能显示部102所通知的显示状态(S1、S2、……)为条件,按照所通知的每个显示状态,执行“导向显示处理”列的操作的处理。具体而言,在从功能显示部102接收到表示向S2的状态迁移的显示状态变更通知的情况下,显示“Pattern 2”所示的显示状态的导向信息。
这里,“Pattern 2”中所显示的导向显示模式被定义为操作导向显示信息管理部108所管理的导向显示模式402中的一个,并被定义在导向显示模式402的“模式名称”列中。例如,导向显示模式402的“Pattern 2”中定义:在按钮式的图像数据上显示X1所表示的文字列,接着,在示为箭头的图像数据上显示X2所示的文字列,最后,在按钮式的图像数据上显示X3所示的文字列。此外,根据导向显示模式402的“显示位置”列所记载的符号信息,获得输入装置管理部104中所管理的输入信息转换表(图2)的“设置信息”,从而获得输入装置101的按钮或按键等的相对位置,输入装置101的按钮或按键用各个符号而被赋予了含义。由此来决定上述图像数据及文字数据的显示位置。
导向显示模式的定义中,重要的是定义构成导向显示模式的要素间的关系。例如,作为要素间的关系,重要的是将表示在按钮图像上显示文字列X1的关系,或表示在显示按钮图像后显示箭头图像的关系定义为符号间的相对位置关系。并且,示为X1、X2、X3等的文字列在功能显示部102向导向显示信息变更规则通知显示状态变更通知时,显示状态也一起被通知。
图5是本发明的第1实施方式所涉及的操作导向显示装置的一动作例的流程图。结合图5,对输入装置101被变更后的操作导向显示装置的动作进行说明。假设向具备操作导向显示装置的电子设备输入电源完成启动处理后,操作导向显示装置开始动作。
如图5所示,显示信息变更规则提取部106判断输入装置101的输入方式是否被变更(步骤S601),当检测出已被变更的情况下(步骤S601“是”),进入步骤S602的处理。例如,显示信息变更规则提取部106在输入装置101的输入方式被变更的情况下,通过接收初始化通知能够判断输入装置101的输入方式是否被变更。
显示信息变更规则提取部106从输入装置信息管理部104获取与新的输入装置101相对应的输入信息转换表(参照图2)(步骤S602),对被定义在所获得的输入信息转换表中的“符号信息”,以及导向显示信息管理部108中所储存的导向显示信息(图4A、4B)进行比较,判断是否存在包含没有被定义在输入信息转换表中的符号信息的导向显示信息(步骤S603)。显示信息变更规则提取部106在存在包含没有被定义在输入信息转换表中的符号信息的导向显示信息的情况下(步骤S603“是”),提取该导向显示信息(步骤S604)。
显示信息变更规则提取部106判断功能显示信息管理部105中所储存的功能显示信息变更规则中,是否存在显示所提取的导向显示信息的功能显示信息变更规则(图3)(步骤S605)。在存在显示所提取的导向显示信息的功能显示信息变更规则的情况下,显示信息变更规则提取部106提取该功能显示信息变更规则(步骤S606)。
当所提取的导向显示信息不存在的情况下(步骤S603“否”),或所提取的功能显示信息变更规则不存在的情况下(步骤S606“否”),由于所有导向显示信息所要利用的输入信息被定义在输入信息转换表中,所以显示信息变更规则提取部106判断不用更新功能显示信息变更规则,结束处理。
另一方面,当所提取的功能显示信息变更规则存在的情况下(步骤S605“是”),显示信息变更规则提取部106向显示信息变更部107通知所提取的导向显示信息(图4A、4B)和功能显示信息变更规则(图3)。显示信息变更部107对操作辅助信息是所通知的导向显示信息中,与没有被定义在输入信息转换表(图2)的符号信息有关的操作辅助信息的显示规则进行无效化变更,并对导向显示信息管理部108中所存储的导向显示信息进行更新(步骤S607)。
显示信息变更部107对无效化后的符号信息的操作辅助信息进行变更,使其生成为利用输入信息转换表中所定义的输入信息能够进行操作的GUI,并对功能显示信息管理部105中所储存的功能显示信息变更规则(图3)进行更新(步骤S608),结束处理。
根据上述构成,在与GUI设计时的导向信息不一致的输入装置101连接到电子设备的情况下,根据输入装置101的构成信息判断输入信息是否可以利用,用通过其他能够利用的输入信息而能够进行操作的GUI来代替显示与不能够利用的输入信息建立了关系的导向信息。
图6A、6B是将本发明的第1实施方式所涉及的操作导向显示装置应用到移动电话时的一示例图。作为说明背景,移动电话A与移动电话B具备本发明的第1实施方式所涉及的操作导向显示装置,本发明的第1实施方式所涉及的操作导向显示装置被作为GUI显示程序的一部分。此外,移动电话B的设计为能够利用移动电话A的GUI显示程序。
图6A及图6B中,移动电话A与移动电话B的显示装置的画面包括两个区域,即:区域501,显示有关移动电话的操作中的功能的画面显示的内容;及区域502,显示用于用户进行操作的导向信息。即,区域501中显示用于选择移动电话的功能的清单式GUI。区域502中显示导向信息,该导向信息作为补充信息,补充怎样利用移动电话的输入装置即键盘的一部分503、504来操作该清单式GUI。
图6A及图6B中,区域501的清单式GUI是功能显示部102利用功能显示信息管理部105所管理的显示信息更新规则而生成的,显示装置103上的画面所显示的GUI。此外,区域502的导向信息是操作导向显示部109利用导向显示信息管理部108所管理的导向显示信息而生成的,显示于显示装置103的画面上的导向信息。
根据本实施方式所涉及的操作导向显示装置,在移动电话A与移动电话B的输入装置的构成不同的情况下,根据其构成,区域502的导向信息的显示会被变更,但在图6A及图6B中,移动电话A与移动电话B中显示的区域502的导向信息相同。
这是因为,图6A及图6B中,对区域501的清单式GUI进行显示的功能显示信息变更规则与对区域502的导向信息进行显示的导向显示信息都只利用的是不依赖于输入装置的构成差异的符号。具体而言,区域502的导向信息中,由于在移动电话A的键盘的一部分即按钮设置503或移动电话B的键盘的一部分即按钮设置504中,不仅显示模拟移动电话A及移动电话B所共有的F1、F2、F0、RIGHT、LEFT、UP、DOWN按钮的图像数据,同时显示有“返回”、“决定”、“功能”等文字列,所以显示相同的导向信息。
图7A示出与图6A所示的移动电话A不同的导向显示,图7B示出与图6B所示的移动电话B不同的导向显示。省略说明图7A及图7B中,已在图6A及图6B中作过说明的构成。
图7A及图7B中,移动电话A的显示装置的画面包括两个区域,即:区域701,显示有关移动电话A的操作中的功能的画面显示内容;及区域702,显示导向信息。而移动电话B的显示装置的画面包括三个区域,即,区域701,显示有关移动电话A的操作中的功能的画面显示内容;区域704,显示导向信息;及区域703,显示追加的导向信息。
图7A及图7B中,区域701的GUI显示是功能显示部102利用功能显示信息管理部105所管理的显示信息变更规则(图3)而生成的,显示装置103上的画面所显示的GUI。此外,区域702、704的导向信息是操作导向显示部109利用导向显示信息管理部108所管理的导向显示信息(图4A、4B)而生成的,显示于显示装置103的画面上的导向信息。
其中,移动电话B的区域704的导向信息是操作导向显示部109利用显示信息变更部107变更后的导向显示信息而显示的,显示信息变更部107变更后的导向显示信息是显示信息变更部107结合移动电话B的输入装置的构成差异,对结合移动电话A的构成而设计的导向显示信息进行变更而获得的。
此外,移动电话B的区域703的GUI显示是:为了将移动电话A中通过F3、F4按钮来呼出“前一页“、“后一页”的功能使用到不具有F3、F4按钮的移动电话B中,功能显示部102将“前一页“、“后一页”的功能作为能够执行的GUI按钮来进行显示的GUI显示。用于显示该GUI按钮的功能显示信息变更规则是显示信息变更部107结合移动电话B与移动电话A的输入装置的差异而生成,并储存于功能显示信息管理部105。具体而言,“前一页“、“后一页”功能可以通过鼠标的点击处理来进行选择,或通过与操作区域701(操作对象的移动(例如从相片1移动到相片2)及决定)的输入操作相同的操作来实现。
以下对图7B的生成GUI显示的操作进行详细说明。在此,具有根据移动电话A的输入装置101的构成而设计的功能显示信息变更规则及导向显示信息的移动电话B,通过本发明所涉及的操作导向显示装置,结合移动电话B的输入装置101的构成进行功能显示信息变更规则及导向显示信息的变更。
首先,移动电话B启动时,步骤S601中,显示信息变更规则提取部106检测出移动电话B的输入装置101的初始化(即,输入装置被变更),进入步骤S602的处理。
步骤S602中,显示信息变更规则提取部106从输入装置信息管理部104获取与移动电话B的输入装置101相对应的输入信息转换表。这里假设图2中所示的输入信息转换表是与移动电话B的输入装置101相对应的输入信息转换表。
接着,获取了图2所示的输入信息转换表的显示信息变更规则提取部106在步骤S603与步骤S604中,对定义在所获得的输入信息转换表中的符号信息和导向显示信息管理部108中所储存的导向显示信息进行比较,并提取含有没有被定义在输入信息转换表中的符号信息的导向显示信息。接着,步骤S605与步骤S606中,显示信息变更规则提取部106提取显示所提取的导向显示信息的功能显示信息变更规则,进入步骤S607的处理。
这里对所要提取的导向显示信息及功能显示信息变更规则进行详细说明。首先,假设导向显示信息管理部108中所储存的导向显示信息包含两个:图4A所示的导向显示信息变更规则401和图4B所示的导向显示模式402。显示信息变更规则提取部106对输入信息转换表(图2)的“符号信息”和导向显示模式402(图4B)的“显示位置”所示的符号信息进行比较,检测出导向显示模式“Pattern 10”,并提取利用导向显示模式“Pattern10”的导向显示信息变更规则“State==S10”,来作为利用输入信息转换表中没有被定义的符号信息F3、F4的导向显示信息。
接着,若功能显示信息管理部105所管理的功能显示信息变更规则是图8A所示的变更前的功能显示信息变更规则801,则提取图8A的Rb和Rc,来作为利用F3、F4的符号的功能显示信息变更规则。
最后,利用所提取的导向显示信息变更规则,从图4A、图4B、图8A、图8B中S1、S2、……等所示的“显示状态”中,提取使显示状态迁移到S10的功能显示信息变更规则(图8B的Ra),来作为显示导向信息的功能显示信息变更规则。
通过上述处理,显示信息变更规则提取部106提取图4A、4B中有关“Pattern 10”的导向信息显示变更规则以及图8A、8B中的显示信息变更规则(Ra、Rb、Rc),进入步骤S607的处理。
步骤S607中,显示信息变更部107从在步骤S604中提取的导向显示模式“Pattern 10”中,提取除去了F3、F4的符号并利用F0、F1、F2的“Pattern2”,将利用“Pattern 10”的导向显示信息变更规则中的“导向显示处理”列从“Draw Guidance with Pattern 10”变更为“Draw Guidance with Pattern2”,并将变更后的导向显示信息存入导向显示信息管理部108,进入步S608的处理。
此外,在导向显示模式402中不存在利用F0、F1、F2的“Pattern 2”的情况下,显示信息变更部107既可以将导向显示模式“Pattern 10”更新为除去F3、F4的符号的、新的显示模式“Pattern 10”,也可以追加利用了F0、F1、F2的“Pattern 11”来作为新的显示模式。
接着,步骤S608中,显示信息变更部107对功能显示信息变更规则进行变更,如图8B的功能显示信息变更规则802(变更后)的Rd所示,使对步骤S606中所提取的功能显示信息变更规则(图8A的Ra)生成执行移动电话的“Next Page”或“Previous Page”等功能的GUI按钮,并存入功能显示信息管理部105,结束处理。此时,操作GUI按钮时所执行的“NextPage”或“Previous Page”功能参照了所提取的Rb、Rc的功能显示信息变更规则,与Rb、Rc所执行的“Call Function[Next Page]”、“Call Function[Previous Page]”功能相同。
由此,只要事先向移动电话A记述功能显示变更规则,在开发移动电话B时不用再设计该功能显示变更规则,而通过本实施方式所涉及的操作导向显示装置,便能够自动生成符合移动电话B的输入装置的操作导向显示,从而能够降低GUI设计的开发成本。
此外,即使在电子设备的输入装置的构成被变更的情况下,根据各个输入装置可以利用的输入信息,将有关不能够利用的输入信息的导向信息作为直接能操作的GUI(例如,通过鼠标的点击处理而能够进行选择的GUI按钮)来进行代替显示。
图9A、9B是将本发明的第1实施方式所涉及的操作导向显示装置应用到录像机与移动电话B时的一示例图。图9A、9B中示出显示“影像的录像数据一览显示画面”的录像机和移动电话B。录像机和移动电话B分别具有录像数据一览显示程序,该程序包含本实施方式所涉及的操作导向显示装置。该录像数据一览显示程序的设计以利用遥控器来操作为前提。
图9A、9B中,显示录像数据一览的GUI902、904是功能显示部102根据功能显示信息管理部105所管理的功能显示信息变更规则而生成的GUI。此外,导向信息显示903是操作导向显示部109利用导向显示信息管理部108所管理的导向显示信息而生成的,是结合录像遥控器的输入装置的构成901,向用户说明其操作方法的辅助信息。
用移动电话B来显示这样的录像数据一览显示程序时,本实施方式所涉及的操作导向显示装置通过图5的流程图中所说明的处理,结合没有录像遥控器的按钮A、B的、移动电话B的输入装置的构成504,生成区域905所示的按钮式GUI(前一页、后一页)。
因此,移动电话B的用户通过上下左右键、决定键等来操作所生成的区域905的按钮式GUI,从而在没有录像遥控器的按钮A、B的移动电话B中也能够利用移动至“前一页”、移动至“后一页”的功能。
此外,图9A、9B的录像数据一览显示程序既可以预先保存在录像机或移动电话B中,也可以在录像机与移动电话B连接到网络的状态下,移动电话B从录像机或网络上所设置的服务器等下载显示录像机的录像数据的程序。
由此,本发明所涉及的操作导向显示装置通过显示信息变更部107利用新的输入装置101的输入信息,将由于输入装置101的构成变更而无效的功能显示信息变更规则变更为有效的功能显示信息变更规则,从而在变更后的输入装置中也能够进行适当的操作导向显示。
此外,本发明不仅适用于电脑的键盘,在使用时下多种多样的输入装置(例如,鼠标、移动电话的按键输入、电视机的遥控器、或应用了振动传感器、陀螺传感器(Gyro-Sensor)等特殊输入装置)等情况下,尽管其形状、按钮的设置、个数、使用用途等多种多样,本发明也能够结合这些输入装置来变更导向显示。
(第2实施方式)
图10是本发明的第2实施方式所涉及的操作导向显示装置的一结构例的块图。图10中,与第1实施方式所涉及的操作导向显示装置的构成不同的是,第2实施方式所涉及的操作导向显示装置具备显示信息存储部1001。显示信息存储部1001储存导向显示信息和功能显示信息变更规则。
第2实施方式所涉及的操作导向显示装置在输入装置变更时执行图5所示的步骤S601~S606的操作,用户进行输入操作时执行之后的操作。
以下对第2实施方式所涉及的操作导向显示装置在用户进行输入操作时的动作进行详细说明。图11是本发明的第2实施方式所涉及的操作导向显示装置的一动作例的流程图。
如图11所示,用户进行输入操作时,显示信息变更规则提取部106判断,以迁移后的显示状态为描绘条件的导向显示信息规则中,是否存在不符合任何输入信息的导向显示模式(步骤S1101)。显示信息变更规则提取部106根据图4B所示的导向显示模式402的“显示位置”中所示的符号信息是否被定义在图2所示的输入信息转换表中,来判断是否存在不符合任何输入信息的导向显示模式。该示例中,“显示位置”的F3、F4的符号信息没有被定义在输入信息转换表中的“Pattern 10”符合该情况。
显示信息变更规则提取部106判断,迁移后的显示状态中,是否存在不符合任何输入信息的功能显示信息变更规则(步骤S1102)。不符合任何输入信息的功能显示信息变更规则根据是否定义了迁移后的显示状态10来判断。具体而言,在图13A的功能显示信息变更规则1301(变更前)中,“显示状态”中S10所定义的规则符合该情况。
显示信息变更规则提取部106提取必要数目的、迁移后的显示状态中没有被利用的输入信息(步骤S1103)。迁移后的显示状态中没有被利用的输入信息是指:图2的输入信息转换表中所定义的符号信息中,没有被记述在功能显示信息变更规则(图13B)的“输入条件”中的符号信息,该功能显示信息变更规则的“显示状态”是迁移后的显示状态S10。必要数目是指:步骤S1101中所提取的导向显示模式“Pattern 10”的“显示模式”中,图2中不存在的符号信息数目。即,F3、F4两个。在此,按顺序提取NUM1、NUM2。
显示信息变更部107将导向显示信息与功能显示信息变更规则中,利用与任何输入信息不一致的输入信息的位置变更为利用步骤S1103中所提取的输入信息,并存入显示信息存储部1101(步骤S1104)。即,显示信息变更部107把在步骤S1101、S1102中被判定为不符合任何输入信息的导向显示信息和功能显示信息变更规则中的,F3、F4的符号信息所定义的记述置换为步骤S1103中所提取的输入信息(NUM1、NUM2),并将变更后的导向显示模式1201(参照图12)和变更后的功能显示信息变更规则1302(参照图13B)存入显示信息存储部1001。
功能显示部102与操作导向显示部109分别从导向显示信息管理部108和功能显示信息管理部105获取最新的导向显示信息(参照图4A及图12)和功能显示信息更新规则(参照图13B)(步骤S1105)。
步骤S1101及步骤S1102中判断为“NO”的情况下,显示信息变更部107将迁移后的显示状态所需要的导向显示信息和功能显示信息变更规则存入显示信息存储部1001(步骤S1106)。
图14是示出在移动电话B中显示通过图9A所示的遥控器来进行操作的“影像的录像数据一览显示画面”的图。图14的移动电话B的画面是用户在图8A所示的功能显示信息变更规则801(变更前)的显示状态下按下F0键后,显示状态S10下的画面。与图9A所示的画面不同的是:由于移动电话B中不存在F3、F4键,所以在区域1401的“操作导向显示部所显示的GUI部”中成为,将显示状态10中没有被利用的NUM1、NUM2键分配给用于呼出“前一页”和“后一页”功能的按键的导向显示。区域1401是操作导向显示部109基于显示信息存储部1001中所储存的、图12的导向显示模式1201(变更后)的“Pattern 10”而生成,并显示于显示装置103。
(第3实施方式)
图15是本发明的第3实施方式所涉及的操作导向显示系统的一结构例的块图。图15中,第3实施方式所涉及的操作导向显示系统是将第1实施方式所涉及的操作导向显示装置的功能通过经由网络而连接的终端装置与服务器装置来实现。
终端装置具备:输入装置101、功能显示部102、显示装置103、输入装置信息管理部104、操作导向显示部109、显示信息存储部1501及终端方发送/接收部1502。此外,终端装置不一定要具备输入装置101及输入装置103。该情况下,终端装置可以使用连接于外部的输入装置101和显示装置103。显示信息存储部1501储存功能显示信息变更规则和导向显示信息。终端方发送/接收部1502具有经由网络收发各种信息的功能。功能显示部102与操作导向显示部109基于显示信息存储部1501中所储存的功能显示信息变更规则和导向显示信息,显示用户进行终端操作时的GUI。
服务器装置具备:功能显示信息管理部105、显示信息变更规则提取部106、显示信息变更部107、导向显示信息管理部108及服务器方发送/接收部1503。服务器方发送/接收部1503具有经由网络收发各种信息的功能。在第1实施方式中,显示信息变更部107所变更的显示信息(功能显示信息变更规则及导向显示信息)分别储存在功能显示信息管理部105与导向显示信息管理部108中。而在第3实施方式所涉及的操作导向显示系统中,服务器方发送/接收部1503将变更后的显示信息(功能显示信息变更规则及导向显示信息)发送至终端方发送/接收部1502,终端方发送/接收部1502将所接收到的显示信息存入显示信息存储部1501。
接着,将本发明的第3实施方式所涉及的操作导向显示系统的操作分为终端装置和服务器装置来进行说明。图16是本发明的第3实施方式所涉及的操作导向显示系统的终端装置的一动作例的流程图。如图16所示,输入装置信息管理部104在输入装置101被变更时(步骤S1601),从输入装置101获取与变更后的输入装置101相对应的输入信息转换表(图2),并进行登录。接着,经由终端方发送/接收部1502,将所登录的输入信息转换表发送至服务器装置(步骤S1602)。然后,终端方发送/接收部1502从服务器装置接收到符合新输入装置的显示信息(导向显示信息及功能显示信息变更规则),并存入显示信息存储部1501(步骤S1603)。
图17是本发明的第3实施方式所涉及的操作导向显示系统的服务器装置的一动作例的流程图。如图17所示,服务器方发送/接收部1503从终端方发送/接收部1502接收到新连接的输入装置101的输入信息转换表(图2)时,开始步骤S1701的处理。
如图17所示,显示信息变更规则提取部106接收到输入信息转换表(图2)时,对被定义在所获得的输入信息转换表中的符号信息,以及导向显示信息管理部108中所储存的导向显示信息进行比较,判断是否存在包含没被定义在输入信息转换表中的符号信息的导向显示信息(步骤S1701)。显示信息变更规则提取部106在存在包含没有被定义在输入信息转换表中的符号信息的导向显示信息的情况下(步骤S1701“是”),提取该导向显示信息(步骤S1702)。
显示信息变更规则提取部106判断功能显示信息管理部105中所储存的功能显示信息变更规则中,是否存在显示所提取的导向显示信息的功能显示信息变更规则(步骤S1703)。在存在显示所提取的导向显示信息的功能显示信息变更规则的情况下,显示信息变更规则提取部106提取该功能显示信息变更规则(步骤S1704)。
当所提取的导向显示信息不存在的情况下(步骤S1701“否”),或所提取的功能显示信息变更规则不存在的情况下(步骤S1703“否”),由于所有导向显示信息所要利用的输入信息被定义在输入信息转换表中,所以显示信息变更规则提取部106判断不用更新功能显示信息变更规则,结束处理。
当所提取的功能显示信息变更规则存在的情况下(步骤S1703“是”),显示信息变更规则提取部106向显示信息变更部107通知所提取的导向显示信息和功能显示信息变更规则。显示信息变更部107对操作辅助信息的显示规则进行无效化变更,并对导向显示信息管理部108中所储存的导向显示信息进行更新(步骤S1705),其中,操作辅助信息是所通知的导向显示信息中,有关没有被定义在输入信息转换表的符号信息。
显示信息变更规则提取部106从功能显示信息变更规则中提取与无效化后的导向显示信息相关联的规则(步骤S1706)。以下将结合图18,对步骤S1706进行详细说明。
显示信息变更部107将所提取的功能显示变更规则中通过任何输入信息都不能执行的功能呼出处理变更为作为能够执行的GUI而显示的功能显示变更规则,并存入功能显示信息管理部105(步骤S1707)。
显示信息变更部107分别从导向显示信息管理部108与功能显示信息管理部105获取最新的导向显示信息和功能显示信息更新规则,并且,服务器方发送/接收部1503将最新的显示信息发送至终端装置,结束服务器方的处理(步骤S1708)。接着,回到终端方处理的步骤S1603。
图18是示出本发明的第3实施方式所涉及的显示信息变更部107的处理的一例的流程图。如图18所示,显示信息变更部107提取含有无效化后的导向显示模式的“模式名称”的导向显示信息变更规则(步骤S1801)。这里,无效化后的导向显示模式是指图19B所示的、含有“Pattern 10”的、变更后的导向显示模式。此外,含有“Pattern 10”的导向显示信息变更规则是指,图4A所示的导向显示信息变更规则401中描绘条件为“State==S10”的规则。
接着,显示信息变更部107对所提取的导向显示信息变更规则的“描绘条件”与功能显示信息变更规则的“显示状态”一致的功能显示信息变更规则进行提取(步骤S1802)。这里,提取图20A所示的变更前的功能显示信息变更规则801的Rb、Rc,作为描绘条件S10与“显示状态”一致的功能信息变更规则。
接着,显示信息变更部107提取功能显示信息变更规则,该功能显示信息变更规则定义了使显示状态迁移到前一步骤中所提取的功能显示信息变更规则的“显示状态”的功能呼出处理(步骤S1803)。这里,从图20A所示的变更前的功能显示信息变更规则801中提取功能呼出处理中记述为“Change State to S10”的功能显示信息变更规则。
如上所述,由通过网络来连接的终端装置和服务器装置来实现操作导向显示装置的功能,能够降低对终端装置的处理能力要求或存储容量。
此外,现在利用JAVA(注册商标)语言等开发出各种能够应用于各种电子设备的、移植性高的GUI程序,然而这些GUI程序的导向信息是设想为特定的电子设备的输入装置来进行开发的(例如,移动电话的JAVA(注册商标)程序用于显示移动电话的键盘的导向),所以导向信息显示不能够根据各个电子设备的构成来进行变更,而根据本发明,GUI程序便能够根据各个电子设备的构成来变更导向信息显示。
此外,本发明的各个实施方式中,构成操作导向显示装置的各个功能块,典型地都通过在CPU上运作的程序来实现,但都分别可以通过包括部分或全部上述功能的集成电路LSI来实现。也可将它们个别地做成单芯片,或做成包含一部分或全部的单芯片。本发明中称为LSI,但根据集成度的不同,也可以称为IC、系统LSI、超级(super)LSI、特级(ultra)LSI。
此外,电路集成的方法不仅仅局限于LSI,也可以通过专用电路或通用处理器来实现。LSI制造后,也可以利用能够进行编程的现场可编程门阵列(Field Programmable Gate Array),或LSI内部的电路元件的连接或设定能够重构的可重构处理器。
此外,随着半导体技术的进步或派生出另外的技术,若出现了能够取代LSI的电路集成技术,理所当然,也可以应用该技术对功能块进行集成。也有可能应用到生物技术中。
(工业实用性)
本发明所涉及的操作导向显示装置适用于通过输入装置来进行输入操作的设备等,例如,移动电话、AV设备、家电设备等。

Claims (7)

1.一种操作导向显示装置,输出与输入装置相对应的操作导向,其特征在于,具备:
输入装置信息管理部,将经由所述输入装置输入的输入信息与唯一的符号信息建立一一对应关系,并作为输入信息转换表来管理;
功能显示信息管理部,将所述符号信息与输入所述符号信息时所执行的规定的处理建立对应关系,并作为功能显示信息变更规则来管理;
功能显示部,利用所述输入装置信息管理部所管理的所述输入信息转换表,将所述输入信息转换为符号信息,并按照与该转换后的符号信息相对应的所述功能显示信息变更规则,通过执行规定的处理来生成GUI,并输出该所生成的GUI;
导向显示信息管理部,将用于生成操作辅助信息的信息作为导向显示信息来管理,其中,所述操作辅助信息与所述功能显示部所生成的GUI的显示状态相应;
操作导向显示部,按照所述导向显示信息管理部所管理的导向显示信息,生成所述操作辅助信息,并输出该所生成的操作辅助信息;
显示信息变更规则提取部,对所述输入信息转换表所含有的符号信息、所述功能显示信息变更规则所含有的符号信息及所述导向显示信息所含有的符号信息进行比较,提取与不包含在所述输入信息转换表中的符号信息有关的所述功能显示信息变更规则和所述导向显示信息;
显示信息变更部,利用所述输入信息转换表中所含有的符号信息,对所述显示信息变更规则提取部所提取的所述功能显示信息变更规则和所述导向显示信息进行变更。
2.根据权利要求1所述的操作导向显示装置,其特征在于:
所述显示信息变更部对所述功能显示信息变更规则提取部所提取的所述导向显示信息中不包含在所述输入信息转换表中的符号信息的操作辅助信息的显示规则进行无效化变更,并变更所述功能显示信息变更规则,使该无效化了的符号信息的所述操作辅助信息生成为利用所述输入信息转换表中所含有的输入信息能够进行操作的GUI。
3.根据权利要求1所述的操作导向显示装置,其特征在于:
所述操作导向显示装置还具备,
显示信息存储部,存储所述导向显示信息和所述功能显示信息变更规则,
在所述导向显示信息和所述功能显示信息变更规则中含有没有被定义在所述输入信息转换表中的符号信息的情况下,所述显示信息变更部通过将符合该符号信息的位置置换为与没有被利用的输入信息相对应的符号信息,来变更所述导向显示信息和所述功能显示信息变更规则,并存入所述显示信息存储部。
4.一种服务器装置,与经由网络连接的终端装置共同构成输出与输入装置相对应的操作导向的操作导向显示系统,其特征在于:
所述服务器装置具备:
功能显示信息管理部,将唯一的符号信息与输入所述唯一的符号信息时所执行的规定的处理建立对应关系,并作为功能显示信息变更规则来管理;
导向显示信息管理部,将用于生成操作辅助信息的信息作为导向显示信息来管理,其中,所述操作辅助信息与GUI的显示状态相应;
显示信息变更规则提取部,在接收到输入信息转换表的情况下,对所述输入信息转换表中所含有的符号信息、所述功能显示信息变更规则所含有的符号信息及所述导向显示信息所含有的符号信息进行比较,提取与不包含在所述输入信息转换表中的符号信息有关的所述功能显示信息变更规则和所述导向显示信息,其中,所述输入信息转换表对经由所述输入装置输入的输入信息和所述唯一的符号信息建立了一一对应关系;
显示信息变更部,利用所述输入信息转换表中所含有的符号信息,对所述显示信息变更规则提取部所提取的所述功能显示信息变更规则和所述导向显示信息进行变更;
发送/接收部,经由所述网络,从所述终端装置接收所述输入信息转换表,并向所述终端装置发送经所述显示信息更新部更新了的所述功能显示信息变更规则和所述导向显示信息。
5.一种终端装置,与经由网络连接的服务器装置共同构成输出与输入装置相对应的操作导向的操作导向显示系统,其特征在于,
所述终端装置具备:
输入装置信息管理部,将经由所述输入装置输入的输入信息与唯一的符号信息建立一一对应关系,并作为输入信息转换表来管理;
显示信息存储部,存储功能显示信息变更规则和导向显示信息,其中,所述功能显示信息变更规则将所述符号信息与输入所述符号信息时所执行的规定的处理建立了对应关系而被管理,所述导向显示信息被管理为用于生成与GUI的显示状态相应地被显示的操作辅助信息的信息;
发送/接收部,在所述输入信息转换表被更新的情况下,经由所述网络,将该更新后的输入信息转换表发送至所述服务器装置,并从所述服务器装置接收与该更新后的输入信息转换表相对应的所述导向显示信息和所述功能显示更新规则;
功能显示部,利用所述输入装置信息管理部所管理的所述输入信息转换表,将所述输入信息转换为符号信息,并按照与该转换后的符号信息相对应的所述功能显示信息变更规则,通过执行规定的处理来生成GUI,并输出该所生成的GUI;
操作导向显示部,按照所述导向显示信息,生成所述操作辅助信息,并输出该所生成的操作辅助信息。
6.一种操作导向显示装置所执行的方法,所述操作导向显示装置输出与输入装置相对应的操作导向,其特征在于,
所述操作导向显示装置具备:
输入装置信息管理部,将经由所述输入装置输入的输入信息与唯一的符号信息建立一一对应关系,并作为输入信息转换表来管理;
功能显示信息管理部,将所述符号信息与输入所述符号信息时所执行的规定处理建立对应关系,并作为功能显示信息变更规则来管理;
导向显示信息管理部,将用于生成操作辅助信息的信息作为导向显示信息来管理,其中,所述操作辅助信息与GUI的显示状态相应;
所述方法包括:
利用所述输入信息转换表,将所述输入信息转换为符号信息,并按照与该转换后的符号信息相对应的所述功能显示信息变更规则,通过执行规定的处理来生成GUI,并输出该所生成的GUI的步骤;
按照所述导向显示信息,生成所述操作辅助信息,并输出该所生成的操作辅助信息的步骤;
对所述输入信息转换表中所含有的符号信息、所述功能显示信息变更规则所含有的符号信息及所述导向显示信息所含有的符号信息进行比较,提取与不包含在所述输入信息转换表中的符号信息有关的所述功能显示信息变更规则和所述导向显示信息的步骤;
利用所述输入信息转换表中所含有的符号信息,对所述所提取的所述功能显示信息变更规则和所述导向显示信息进行变更的步骤。
7.一种操作导向显示装置的集成电路,所述操作导向显示装置输出与输入装置相对应的操作导向,其特征在于,
所述操作导向显示置具备:
输入装置信息管理部,将经由所述输入装置输入的输入信息与唯一的符号信息建立一一对应关系,并作为输入信息转换表来管理;
功能显示信息管理部,将所述符号信息与输入所述符号信息时所执行的规定的处理建立对应关系,并作为功能显示信息变更规则来管理;
导向显示信息管理部,将用于生成操作辅助信息的信息作为导向显示信息来管理,其中,所述操作辅助信息与GUI的显示状态相应;
所述集成电路具备:
功能显示部,利用所述输入装置信息管理部所管理的所述输入信息转换表,将所述输入信息转换为符号信息,并按照与该转换后的符号信息相对应的所述功能显示信息变更规则,通过执行规定的处理来生成GUI,并输出该所生成的GUI;
操作导向显示部,按照所述导向显示信息管理部所管理的导向显示信息,生成所述操作辅助信息,并输出该所生成的操作辅助信息;
显示信息变更规则提取部,对所述输入信息转换表中所含有的符号信息、所述功能显示信息变更规则所含有的符号信息及所述导向显示信息所含有的符号信息进行比较,提取与不包含在所述输入信息转换表中的符号信息有关的所述功能显示信息变更规则和所述导向显示信息;
显示信息变更部,利用所述输入信息转换表中所含有的符号信息,对所述显示信息变更规则提取部所提取的所述功能显示信息变更规则和所述导向显示信息进行变更。
CN2008800006049A 2007-06-28 2008-06-17 操作导向显示装置 Expired - Fee Related CN101542425B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2007169931 2007-06-28
JP169931/2007 2007-06-28
PCT/JP2008/001562 WO2009001524A1 (ja) 2007-06-28 2008-06-17 操作ガイダンス表示装置

Publications (2)

Publication Number Publication Date
CN101542425A true CN101542425A (zh) 2009-09-23
CN101542425B CN101542425B (zh) 2012-07-04

Family

ID=40185351

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008800006049A Expired - Fee Related CN101542425B (zh) 2007-06-28 2008-06-17 操作导向显示装置

Country Status (4)

Country Link
US (1) US20100017711A1 (zh)
JP (1) JP5328639B2 (zh)
CN (1) CN101542425B (zh)
WO (1) WO2009001524A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05146035A (ja) * 1991-11-18 1993-06-11 Hitachi Ltd ガス絶縁機器
JP4710930B2 (ja) * 2008-06-20 2011-06-29 コニカミノルタビジネステクノロジーズ株式会社 データ処理装置、データ処理方法およびデータ処理プログラム
ES2818348T3 (es) * 2008-08-07 2021-04-12 Mitsubishi Electric Corp Dispositivo de circuito integrado de semiconductores, dispositivo de control de aparato de instalación y dispositivo de visualización de estado del aparato
BRPI1001245A2 (pt) * 2010-01-06 2019-09-24 Toshiba Kk dispositivo de entrada de caracteres e método de introdução de caracteres
US10438259B1 (en) 2013-12-09 2019-10-08 Amazon Technologies, Inc. Propagating and presenting user specific information
US10410170B1 (en) 2014-06-18 2019-09-10 Amazon Technologies, Inc. Propagating and expiring presentation information
CN104035677B (zh) * 2014-06-30 2017-11-10 百度在线网络技术(北京)有限公司 提示信息的显示方法和装置
US9779554B2 (en) * 2015-04-10 2017-10-03 Sony Interactive Entertainment Inc. Filtering and parental control methods for restricting visual activity on a head mounted display
JP6467732B1 (ja) * 2018-02-23 2019-02-13 靖彦 佐竹 鍵盤入力電子機器の入力方式

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001245370A (ja) * 2000-03-01 2001-09-07 Minolta Co Ltd 操作装置
JP2001337779A (ja) * 2000-05-30 2001-12-07 Funai Electric Co Ltd 情報処理装置
JP2003143670A (ja) * 2001-10-31 2003-05-16 Sony Corp リモートコントロールシステム、電子機器、及びプログラム
JP2004295730A (ja) * 2003-03-28 2004-10-21 Mitsubishi Electric Corp 情報端末並びにその入力処理方法をコンピュータに実行させるプログラム
JP3931986B2 (ja) * 2003-09-30 2007-06-20 日本電気株式会社 リモコンの設定システム及び設定方法
JP2005115691A (ja) * 2003-10-08 2005-04-28 Toshiba Tec Corp 情報処理装置
JP2005269438A (ja) * 2004-03-19 2005-09-29 Pioneer Electronic Corp リモコン装置及び電子機器の遠隔制御システム
JP4315134B2 (ja) * 2005-07-06 2009-08-19 セイコーエプソン株式会社 電子機器

Also Published As

Publication number Publication date
CN101542425B (zh) 2012-07-04
JPWO2009001524A1 (ja) 2010-08-26
WO2009001524A1 (ja) 2008-12-31
US20100017711A1 (en) 2010-01-21
JP5328639B2 (ja) 2013-10-30

Similar Documents

Publication Publication Date Title
CN101542425B (zh) 操作导向显示装置
CN100440161C (zh) 信息显示设备和信息显示方法
CN1849578B (zh) 通过屏幕拼合在两个计算机之间产生对象处理平台
US6542165B1 (en) System, apparatus and method of relating annotation data to an application window
JP5747229B2 (ja) 点検支援システム
CN103345303B (zh) 一种用智能移动设备全替代鼠标键盘的系统及实现方法
US20050114475A1 (en) System and method for collaborative development environments
CN102725727A (zh) 用于在外围计算机装置上提供应用程序接口部分的方法和设备
CN101714060A (zh) 配置便携式终端的空闲屏幕的方法和设备
CN103218387A (zh) 用于在便携式终端中综合管理内容的方法和设备
CN100549937C (zh) 信息处理装置与信息处理方法
CN107113468A (zh) 基于显示设备的自动主屏确定
CN106970720A (zh) 一种虚拟仿真器及单机多鼠标独立并行操控方法
JP2014164560A (ja) 動的マニュアル作成装置及びその方法並びにコンピュータプログラム
CN101137080A (zh) 用于便携式电子装置的远程管理系统和方法
US7154478B2 (en) Terminal and method for remotely controlling device using the same
JP5039868B2 (ja) ウェブ管理装置、ウェブ管理方法、ウェブ管理プログラム、そのプログラムを記録するコンピュータ読み取り可能な記録媒体、及びウェブシステム
JP4148721B2 (ja) 会議支援用共用端末、情報処理プログラム、記憶媒体、情報処理方法及び会議支援システム
JP5042257B2 (ja) 情報処理システム、情報処理装置、情報処理方法、制御プログラム、記録媒体
JP2008097384A (ja) 履歴情報表示装置および方法
CN101650649A (zh) 查看帮助文件的系统及查看帮助文件的方法
JP2010003020A (ja) 情報処理装置、情報処理システムおよび情報処理方法
JP5634592B1 (ja) 点検支援システム
CN107995966A (zh) 一种数据输入方法、装置及设备
CN1333311C (zh) 在生产、装配、服务或维护中自动处理数据的系统与方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120704

Termination date: 20130617