CN100545795C - 图形用户界面装置、操作输入处理方法以及双向通信设备 - Google Patents

Abstract

本文公开了一种图形用户界面装置，包括：显示单元，用于显示图形用户界面的一个部分；操作输入单元，用于接收用户操作；以及控制单元，用于按照用户操作，进行与所述部分对应的处理，其中，控制单元响应于用户操作，有选择地进行改变被指示的部分和选择被指示的部分中的一个操作，并且，当选择了一个部分时，控制单元进行与所选择的部分对应的处理。

Description

图形用户界面装置、操作输入处理方法以及双向通信设备

相关申请的交叉引用

本发明包含与于2005年8月11日在日本专利局提交的日本专利申请JP 2005-233587有关的主题，这里通过引用并入其全部内容。

技术领域

本发明涉及图形用户界面装置、操作输入处理方法和双向通信设备。具体地说，本发明进行如下操作，响应于用户操作，只改变图形用户界面的可选择部分并且选择可选择部分，并且，当选择了一个部分时，进行与所选择的部分对应的处理，由此使得能够，例如，在使用指向(pointing)装置的情况下或使用键盘的情况下，利用公共图形用户界面进行双向通信。

背景技术

使得能够在经由网络将在彼此相距很远的两个地点中的每个地点拍摄的图像发送到另一个地点并显示该图像，来观看另一个人的面容的同时，进行双向通信的系统，例如，视频会议系统正在普及。

例如，如在日本专利No.2001-331429中所公开的，这种视频会议系统使用了图形用户界面，在会议开始之前，该图形用户界面显示两种图标，一种图标示出了在本人的会议室(第一会议室)以及另一人的会议室(第二会议室)中的会议参加者的个人信息，而另一种图标示出了在本人的会议室以及所述另一人的会议室中的设备。

发明内容

当使用图形用户界面时，将指向装置、键盘，和功能与指向装置和键盘相似的遥控装置等用作用户操作输入单元。

当使用键盘时，可以输入与键盘操作对应的信息，例如，字符、数字或符号等。还可以按照键盘操作来在屏面上移动光标，并且指示或选择图形用户界面的希望的部分。另一方面，当使用指向装置时，尽管可以在屏面上移动指针，并且指示或选择图形用户界面的希望的部分，但是，不能从指向装置直接输入字符、数字或符号等。

因此，当使指向装置和键盘可用时，将假定使用键盘的图形用户界面和假定使用指向装置的图形用户界面彼此分开提供。此外，假定使用指向装置和键盘两者，则将图形用户界面配置为，要通过指向装置操作的部分和要通过键盘操作的部分的混合。

但是，当将假定使用键盘的图形用户界面和假定使用指向装置的图形用户界面彼此分开提供时，用于设计图形用户界面的工时数以及成本等增加。如果要通过指向装置操作的部分和要通过键盘操作的部分彼此混合，则当只使用指向装置和键盘中的一个时，无法对某些部分进行操作。

因此，本发明提供了一种图形用户界面装置、操作输入处理方法以及双向通信设备，使得当使用指向装置和键盘中任一个时，能够以相似方式对图形用户界面的多个部分进行操作。

根据本发明的一个方面，提供一种图形用户界面装置，包括：显示单元，用于显示图形用户界面的一个部分；操作输入单元，用于接收用户操作；以及控制单元，用于按照所述用户操作，执行与所述部分对应的处理；其中，所述控制单元响应于所述用户操作，有选择地进行改变被指示的部分和选择被指示的部分中的一个操作，并且，当选择了一个被指示的部分时，所述控制单元进行与所选择的部分对应的处理，并且，其中所述控制单元将所述部分的状态限制于仅与改变所述被指示的部分和选择所述被指示的部分对应的状态，而使得除了改变和选择以外的用户操作失效。

根据本发明的一个方面，提供一种图形用户界面装置中的操作输入处理方法，所述界面装置包括：显示单元，用于显示图形用户界面的一个部分；操作输入单元，用于接收用户操作；以及控制单元，用于按照所述用户操作，执行与所述部分对应的处理，所述操作输入处理方法包括以下步骤：所述控制单元响应于所述用户操作，有选择地进行改变被指示的部分和选择被指示的部分中的一个操作；并且当选择了一个被指示的部分时，所述控制单元进行与所选择的部分对应的处理，其中所述控制单元将所述部分的状态限制于仅与改变所述被指示的部分和选择所述被指示的部分对应的状态，而使得除了改变和选择以外的用户操作失效。

根据本发明的一个方面，提供一种双向通信设备，包括：摄像单元；通信单元，用于将通过由所述摄像单元进行摄像所获得的视频信号发送到与所述双向通信设备的用户进行通信的另一人，并且，接收来自所述另一人的视频信号；显示单元，用于根据所述视频信号显示图像；操作输入单元，用于接收用户操作；以及控制单元；其中，在所述显示单元上显示有图形用户界面的一个部分，并且所述控制单元响应于所述用户操作，有选择地进行改变被指示的部分和选择被指示的部分中的一个操作，并且，当选择了一个被指示的部分时，所述控制单元进行与所选择的部分对应的处理，并且，所述控制单元将所述部分的状态限制于仅与改变所述被指示的部分和选择所述被指示的部分对应的状态，而使得除了改变和选择以外的用户操作失效。

在根据本发明的实施例的图形用户界面装置、操作输入处理方法以及双向通信设备中，响应于用户操作，有选择地进行改变被指示的部分和选择被指示的部分中的一个，并且进行与所选择的部分对应的处理。多个部分的状态局限于只与改变被指示的部分和选择被指示的部分对应的状态。与该部分对应的处理不需要除了改变和选择以外的用户操作。

根据本发明的实施例，响应于用户操作，有选择地进行改变被指示的部分和选择被指示的部分这两项操作中的一项，并且进行与所选择的部分对应的处理。因此，当将指向装置和键盘中任一个用作用于接收用户操作的操作输入单元时，可以相似方式对图形用户界面的多个部分进行操作，并且由此可以容易地对双向通信设备进行操作或设置。此外，由于不必单独提供假定使用指向装置的图形用户界面和假定使用键盘的图形用户界面，因此可以有效地进行图形用户界面设计。

当结合以示例方式例示了本发明的优选实施例的附图时，根据以下描述，本发明的上述和其他特性和优点将变得显而易见。

附图说明

图1示出了双向通信设备的外观；

图2示出了双向通信设备的配置；

图3示出了遥控装置；

图4示出了图形用户界面屏面；

图5A到5D用于帮助说明使用指向装置时的操作；

图6A到6F用于帮助说明使用键盘时的操作；

图7A到7D用于帮助说明使用指向装置时的菜单选择操作；

图8A到8D用于帮助说明使用键盘时的菜单选择操作；并且

图9示出了通话屏面。

具体实施方式

以下将参照附图，对本发明的实施例进行描述。图1为在用于进行双向通信的系统(例如视频会议系统)中使用的双向通信设备10的正视图。

在双向通信设备10中，将摄像单元11、显示单元12、麦克风13和扬声器14等提供为相互结合成一体。此外，尽管图中没有示出，但是在双向通信设备10的外壳中还包括编解码器和通信单元等。该双向通信设备10允许利用图形用户界面，进行操作改变和各种设置等。

图2示出了双向通信设备10的配置。利用CMOS摄像元件或CCD摄像元件等构成摄像单元11。摄像单元11生成所拍摄图像的视频信号SVcam，然后，将视频信号SVcam提供给A/D转换器单元21。另外，摄像单元11具有摄像方向改变功能和变焦(zoom)功能，以便根据来自下文将描述的控制单元50的控制信号CT，进行俯仰(tilting)操作、摇摄(panning)操作和变焦比改变操作。

A/D转换器单元21将视频信号SVcam转换成数字视频信号DVcam。然后，A/D转换器单元21将视频信号DVcam提供给视频编解码器23和缩放器(scaler)/OSD(On-Screen Display，屏上显示)单元24。视频编解码器23通过对视频信号DVcam进行编码(压缩)，生成经视频编码的传输信号NTv。然后，视频编解码器23将经视频编码的传输信号NTv提供给通信单元40。此外，视频编解码器23对从通信单元40提供的经视频编码的接收信号NRv进行解码(解压缩)。视频编解码器23将通过解码得到的视频信号DVr提供给捕捉单元25和显示驱动单元28。

缩放器/OSD单元24根据来自下文将要描述的控制单元50的控制信号CT进行如下处理：根据视频信号DVcam和存储在下文将要描述的图像存储器单元26中的静止图像，改变图像尺寸的处理；以及，根据字符信息和颜色信息，生成图像的处理。此外，当需要时，根据来自下文将要描述的控制单元50的控制信号CT，缩放器/OSD单元24例如通过使用生成的图像、基于视频信号的图像、静止图像和改变过尺寸的图像等，生成顶屏面(top screen)、地址簿屏面、各种菜单屏面，以及利用所显示通信的另一端处的人的图像而进行通信时的通信屏面。此外，缩放器/OSD单元24将诸如菜单屏面等的各种屏面的视频信号DVm提供给显示驱动单元28。

捕捉单元25捕捉从视频编解码器23提供的视频信号DVr，生成静止图像信号DVs，并且将静止图像信号DVs提供给图像存储器单元26。图像存储器单元26具有存储大量静止图像信号的容量。图像存储单元26存储从捕捉单元25提供的静止图像信号DVs。另外，图像存储器单元26将存储在其中的静止图像信号DVs提供给缩放器/OSD单元24。

输入终端15用于输入由计算机装置等(没有示出)生成的图像。从计算机装置等输入到输入终端15的视频信号DVp被提供给输入图像处理单元27和显示驱动单元28。

输入图像处理单元27与通信单元40连接。输入图像处理单元27将来自输入终端15的视频信号DVp提供给通信单元40。此外，输入图像处理单元27根据从输入终端15提供的视频信号DVp或从通信单元40提供的视频信号DVq，生成新的视频信号DVn。然后，输入图像处理单元27将视频信号DVn提供给显示驱动单元28。

显示驱动单元28根据从控制单元50提供的控制信号CT，在从视频编解码器23提供的视频信号DVr、从缩放器/OSD单元24提供的视频信号DVm、从输入终端15提供的视频信号DVp和从输入图像处理单元27提供的视频信号DVn中，选择一个或多个视频信号。显示驱动单元28根据所选择的视频信号生成驱动信号DR。然后，显示驱动单元28将驱动信号DR提供给显示单元12。此外，当需要时，显示驱动单元例如根据所选择的视频信号，改变图像的尺寸。

利用液晶显示元件、等离子显示板或阴极射线管等构成显示单元12。显示单元12根据提供给它的驱动信号DR，进行显示操作。显示单元12根据来自控制单元50的指令，显示图像。

麦克风13将生成的音频信号SAmic提供给A/D转换器单元31。A/D转换器单元31将音频信号SAmic转换成数字音频信号DAmic。然后，A/D转换器单元31将音频信号DAmic经由回波消除器(echocanceller)32提供给音频编解码器33。音频编解码器33通过对所提供的音频信号DAmic进行编码(压缩)，生成经音频编码的传输信号NTa。然后，音频编解码器33将经音频编码的传输信号NTa提供给通信单元40。另外，音频编解码器33对从通信单元40提供的经音频编码的接收信号NRa进行解码(解压缩)。音频编解码器33将通过解码获得的音频信号DAr经由回波消除器32，提供给D/A转换器单元34。D/A转换器单元34将所提供的音频信号DAr转换成模拟音频信号SAout。然后，D/A转换器单元34将音频信号SAout提供给扬声器14。扬声器14根据音频信号SAout输出音频。

通信单元40连接到网络90。通信单元40将从视频编解码器23和音频编编解码器33提供的信号以及从输入图像处理单元27提供的信号提供给在另一端的希望的人的双向通信设备。此外，通信单元40将目标为本设备的、经视频编码的接收信号NRv提供给视频编解码器23，并且，将目标为本设备的、经音频编码的接收信号NRa提供给音频编解码器33。

控制单元50与操作输入单元51、存储器单元52以及外部存储器接口单元53连接。操作输入单元51接收用户的操作。利用指向装置或键盘等构成操作输入单元51。当使用具有指向装置或键盘等的功能的遥控装置60时，操作输入单元51配备有用于接收来自遥控装置60的控制信号的接收单元。操作输入单元51按照指向装置或键盘等的操作，或者根据由接收单元接收的控制信号，生成操作信号PS。操作输入单元51将操作信号PS提供给控制单元50。

存储器单元52由可重写非易失存储器构成。存储器单元52存储与在另一端处的要与其举行会议的人有关的其他端个人信息。

外部存储器接口单元53使诸如存储卡等的记录介质(没有示出)能够被连接到双向通信设备10。当其他端个人信息和静止图像被登记在记录介质上，并且，记录介质被装入外部存储器接口单元53中时，能够与在另一端的、没有在存储器单元52中登记的人举行私人会议。还可以发送私人静止图像。此外，通过在记录介质上存储新程序，能够对双向通信设备10的功能进行更新或扩展。

控制单元50利用由操作输入单元51生成的操作信号PS、登记在存储器单元52中的其他端个人信息以及存储在装入外部存储器接口单元53中的记录介质上的信息等，生成控制信号CT。控制单元50利用控制信号CT对每个部分进行控制，从而与在另一端处的希望的人进行视频会议。

此外，控制单元50使用登记在存储器单元52中的和登记在装入外部存储器接口单元53中的记录介质上的其他端个人信息，以及存储在图像存储器单元26中的静止图像。另外，控制单元50对缩放器/OSD单元24和显示驱动单元28的操作进行控制，从而在显示单元12上显示图形用户界面的多个部分。此外，控制单元50响应于由操作输入单元51接收的用户操作，指示并选择一个部分，使得能够在双向通信设备10中进行操作改变和各种设置等，由此形成图形用户界面。

当上述的遥控装置60具有例如键盘功能时，遥控装置60至少具有用于通过移动光标来改变被指示的部分的光标移动键和用于对由光标指示的部分进行选择的确定键。图3示出了遥控装置60的外观。顺便提及，图3表示了遥控装置60具有用于沿上、下、左、右方向移动光标的光标移动键61和用于对由光标指示的部分进行选择的确定键62的情况。该遥控装置60具有无线电发送单元63，用于利用红外线等发送表示被操作的键的控制信号。顺便提及，光标移动键61包括向上光标移动键61a、向左光标移动键61b、向下光标移动键61c和向右光标移动键61d。

在如此构成的双向通信设备10的图形用户界面中，响应于用户操作，有选择地进行改变被指示的部分的操作和选择被指示的部分的操作中的一项操作，并且，能够在使用指向装置和使用键盘的情况中的任一情况下，进行一个部分的操作。

此外，在双向通信设备10中，各个部分的状态局限于仅与改变被指示的部分和选择被指示的部分对应的状态。例如，各个部分的状态局限于标准、对准(focus-in)、按压和选择的状态。标准代表指示之前的状态。对准代表被指针或光标指示的状态。按压表示进行选择操作。选择代表进行选择操作之后的、被选择的状态。通过这样对多个部分的状态进行限制，可以正确地进行改变被指示的部分和选择被指示的部分这两项操作中的一项操作，并且，即使当在键盘上进行，例如，输入字符、数字或符号的操作时，也可以使该操作失效。

此外，当失效状态，即，一部分是失效的并且因此该部分不能被指示的状态，被提供为该部分的状态时，能够防止对该失效部分进行指示和选择。

图4示出了显示在显示单元12上的图形用户界面屏面。在图形用户界面屏面上使用了多个部分。以下将对每个所显示的部分进行描述。

单触式拨号列表(one-touch dialing list)121使登记在其中的其他人能够容易地开始与另一个已登记的人举行会议。在图4中，为每个组提供了六个显示框P1到P6。例如，将其他人的缩略图图像显示在显示框中，从而能够从单触式拨号列表121中容易地选择希望的人。

组选择按钮122用于对于每个组改变显示在单触式拨号列表121中的其他人的列表。

地址簿按钮123用于在显示单元12的屏面上，显示按照姓名的顺序或地址的顺序等示出了所登记的其他人的列表的地址簿屏面，以使得可以容易地对希望的人进行选择。

呼出和呼入历史按钮124用于显示呼出和呼入等的通信日志。

号码输入区域125用于当另一人没有登记在地址簿中时，直接输入所述另一人的连接目的地信息(例如，电话号码、IP地址等)。在这种情况下，当输入另一人的连接目的地信息时，如以后所描述的，使用软键盘。

拨号按钮126利用在号码输入区域125中输入的连接目的地信息开始连接。

菜单条显示按钮127用于显示设置菜单。设置菜单例如包括：呼出设置菜单，用于对诸如在呼出时使用的线路以及压缩系统等属性进行设置；呼入设置菜单，用于对在呼入时进行自动响应还是手动响应的属性进行设置；一般设置菜单，用于对本人的姓名、日期和时间进行设置；音频设置菜单；以及网络设置菜单。

视频显示区域128在没有与另一个人进行连接时，显示本人的被拍摄图像。视频显示区域128在建立了与另一人的连接之后，显示另一人的被拍摄图像。

系统状态指示器129显示关于双向通信设备10的连接目的地的信息以及关于记录介质等的装入状态的信息等。

以下将单独对利用指向装置进行操作时的操作以及利用键盘进行操作时的操作进行描述。顺便提及，描述是在如下假定下进行的，即，当使用指向装置时，指针表示屏面上的位置，而当使用键盘时，光标表示屏面上的位置。

在使用指向装置的情况下，当如图5A所示，进行用户操作，将指针Po放置在单触式拨号列表121的区域中的一个位置处并且将指针Po设置在对准状态时，即，当进行用户操作以指示单触式拨号列表121时，如图5B所示，控制单元50形成弹出显示131，其中示出了关于登记在单触式拨号列表中的其他人的信息。在弹出显示131中，显示所记录的其他人的姓名和连接目的地，作为关于其他人的信息。

此后，当进行用户操作，以利用指针Po指示弹出显示131中的关于希望的人的信息时，控制单元50形成对于被指示的人的弹出菜单显示132，并使只有在弹出菜单显示132之内的项能够被指示，并且，将其它按钮等设置为失效状态，以禁止所述其它按钮等被指示。

弹出菜单132具有呼叫按钮132a、单触式编辑按钮132b和单触式删除按钮132c。呼叫按钮132a利用为其形成了弹出菜单显示132的其他人的连接目的地信息开始连接。单触式编辑按钮132b用于编辑关于为其形成了弹出菜单显示132的其他人的信息。当选择了单触式编辑按钮132b时，控制单元50显示用于对关于其他人的信息进行编辑的屏面(没有示出)，以允许在下文将描述的软键盘上进行信息的修改、添加或删除。顺便提及，当对信息进行编辑时，还可以按照与信息编辑互锁的方式，对地址簿中的信息进行修改，以保持信息的一致性。单触式删除按钮132c用于从单触式拨号列表121中删除为其形成了弹出菜单显示132的所述另一人。

当在呼叫按钮132a被指示的状态下，按下指向装置的操作键时，即，当选择了被指示的呼叫按钮132a时，控制单元50确定进行呼叫操作，并且，进行用于启动要与为其形成了弹出菜单显示132的其他人进行连接的处理。当在连接之后提供了其他人的视频信号时，控制单元50在视频显示区域128中显示其他人的被拍摄图像。

当在号码输入区域125被指示的状态下按下指向装置的操作键时，即，当选择了被指示的号码输入区域125时，控制单元50显示如图5C所示的软键盘141。软键盘141例如可以在假名输入屏面与字母数字/符号输入屏面之间切换。通过将指针Po对准希望的字符或符号的位置并按下操作键，可以输入指针Po所对准的字符或符号。

当在完成了利用软键盘输入另一人的连接目的地信息之后，进行指示和选择拨号按钮126的操作时，控制单元50利用在号码输入区域125中输入的连接目的地信息，进行连接开始处理。

当在视频显示区域128被指示的状态下按下指向装置的操作键时，即，当选择了被指示的视频显示区域128时，控制单元50显示如图5D所示的摄像机调节框显示151，以允许利用该显示对摄像单元11的摄像方向和视角进行调节。当进行指示、然后选择在摄像机调节框显示151中提供的向上显示151a的用户操作时，控制单元50对摄像单元11进行控制，以进行用于向上改变摄像方向的俯仰操作。当进行指示、然后选择向下显示151c的用户操作时，控制单元50对摄像单元11进行控制，以进行用于向下改变摄像方向的俯仰操作。

当进行指示、然后选择在摄像机调节框显示151中提供的向左显示151b的用户操作时，控制单元50对摄像单元11进行控制，以进行用于向左改变摄像方向的摇摄操作。当进行指示、然后选择向右显示151d的用户操作时，控制单元50对摄像单元11进行控制，以进行用于向右改变摄像方向的摇摄操作。

摄像机调节框显示151还包括变焦调节显示。当进行指示、然后选择在变焦调节显示中的宽显示(wide display)151e的用户操作时，控制单元50对摄像单元11进行控制，以减小变焦倍数并由此增大视角。当进行指示、然后选择远显示(tele display)151f的用户操作时，控制单元50对摄像单元11进行控制，以增大放大倍数并由此显示被放大的对象。顺便提及，显示151g表示放大位置。

由此，通过按照用户操作移动指针Po，改变被指示的部分，然后通过操作指示装置的键选择被指示的部分，可以对双向通信设备10进行操作或设置。

以下将对使用键盘，如上述的具有键盘功能的遥控装置60时的操作进行描述。例如，如图6A所示，在第一个顶屏面上，将光标Ks放在地址簿按钮123的位置处。

当操作向左光标移动键61b时，如图6B所示，控制单元50将光标Ks从地址簿按钮123移动到单触式拨号列表121，以指示单触式拨号列表121。此后，当操作确认键62时，控制单元50形成示出了关于在单触式按钮列表中登记的其他人的信息的弹出显示131。当在形成弹出显示131的同时操作了向上光标移动键61a或向下光标移动键61c时，控制单元50顺序地改变所登记的其他人并指示所登记的其他人。如图6C所示，控制单元50形成用于被指示的其他人的弹出菜单显示132。此外，控制单元50使得只能对在弹出菜单显示内的项进行指示，并且将其它按钮等设置在失效状态，以禁止所述其它按钮等被指示。

当在形成弹出显示131的同时操作了向左光标移动键61b或向右光标移动键61d时，控制单元50按照用户操作使光标Ks移动，以顺序或循环地改变并指示呼叫按钮132a、单触式编辑按钮132b或单触式删除按钮132c。当在呼叫按钮132a被指示的状态下操作确认键62时，即当选择了被指示的呼叫按钮132a时，控制单元50确定进行呼叫操作，并且进行启动要与为其形成了弹出菜单显示132的其他人进行连接的处理。当在连接之后提供了其他人的视频信号时，控制单元50在视频显示区域128中显示其他人的被拍摄图像。

当在光标Ks位于图6A所示的地址簿按钮的位置的同时操作向右光标移动键61d时，控制单元50将光标Ks移到号码输入区域125，以指示图6D所示的号码输入区域125。然后，当在号码输入区域125被指示的状态下操作确认键62时，即，当选择了被指示的号码输入区域125时，控制单元50显示如图6E所示的软键盘141。软键盘141例如可以在假名输入屏面与字母数字/符号输入屏面之间切换。通过将光标Ks移动到希望的字符或符号等的位置并操作确认键，可以输入由光标Ks指示的字符或符号等。然后，结束对软键盘的操作。

当在完成了利用软键盘输入另一个人的连接目的地信息之后，进行指示和选择拨号按钮126的操作时，控制单元50利用在号码输入区域125中输入的连接目的地信息，进行连接开始处理。

当在光标Ks位于图6A所示的地址簿按钮的位置的同时操作向上光标移动键61a时，控制单元50显示如图6F所示的摄像机调节框显示151，并且利用光标Ks指示摄像机调节框显示151。此外，当在摄像机调节框显示151被指示的状态下操作确认键62时，即，当选择了被指示的摄像机调节框显示151时，控制单元50使得能够利用摄像机调节框显示151，对摄像单元11的摄像方向和视角进行调节。在这种情况下，当选择了摄像机调节框显示151时，光标Ks被放在例如向上显示151a、向左显示151b、向下显示151c和向右显示151d中的一个的位置处。此外，允许按照对光标移动键61的键的操作，指示向上显示151a、向左显示151b、向下显示151c、向右显示151d、宽显示151e以及远显示151f中的一个。

当在遥控装置60上进行指示、然后选择在摄像机调节框显示151中提供的向上显示151a的用户操作时，控制单元50对摄像单元11进行控制，以进行用于向上改变摄像方向的俯仰操作。当在遥控装置60上进行指示、然后选择向下显示151c的用户操作时，控制单元50对摄像单元11进行控制，以进行用于向下改变摄像方向的俯仰操作。

当在遥控装置60上进行指示、然后选择在摄像机调节框显示151中提供的向左显示151b的用户操作时，控制单元50对摄像单元11进行控制，以进行用于向左改变摄像方向的摇摄操作。当在遥控装置60上进行指示、然后选择向右显示151d的用户操作时，控制单元50对摄像单元11进行控制，以进行用于向右改变摄像方向的摇摄操作。

此外，当在遥控装置60上进行指示、然后选择宽显示151e的用户操作时，控制单元50对摄像单元11进行控制，以减小放大倍数并由此增大视角。当在遥控装置60上进行指示、然后选择远显示151f的用户操作时，控制单元50对摄像单元11进行控制，以增大放大倍数并由此显示被放大的对象。

由此，通过按照光标移动键61的用户操作移动光标Ks，改变被指示的部分，然后通过确认键62选择被指示的部分，可以对双向通信设备10进行操作或设置。

能够利用指向装置和键盘中任一个进行的操作不限于如图5A到5D和图6A到6F所示的、利用地址簿与希望的另一人进行双向通信的操作。以下将对作为能够利用指向装置和键盘中任一个进行的操作的菜单选择操作进行描述。

图7A、7B、7C和7D示出了利用指向装置的菜单选择操作。在使用指向装置的情况下，当将指针Po放在菜单条显示按钮127的区域中的位置处并且被设置在对准状态，而后进行按压操作时，即，当进行了对菜单条显示按钮127进行选择的用户操作时，控制单元50形成菜单条显示200代替单触式拨号列表121，如图7A所示。

菜单条显示200包括摄像机控制按钮201、状况和信息按钮202、静止图像按钮203、记录介质装入显示204以及设置按钮205。摄像机控制按钮201用于显示如图5D所示的摄像机调节框显示151等，以便能够通过利用这个显示对摄像单元11的摄像方向和视角进行调节。状况和信息按钮202用于显示关于双向通信设备10的信息以及通信期间的线路状况等。静止图像按钮203用于将通信期间的图像作为静止图像存储在装入外部存储器接口单元53中的记录介质上，并且显示存储在记录介质上的静止图像。记录介质装入显示204使得能够确定记录介质是否被装入外部存储器接口单元53。设置按钮205用于进行双向通信设备10的各种设置、用于通信的设置以及屏面显示设置等。

当进行如图7B所示的用于将指针Po放在菜单条显示200的位置处的用户操作时，控制单元50形成对摄像机控制按钮201、状况和信息按钮202、静止图像按钮203、记录介质装入显示204和设置按钮205的功能进行描述的弹出显示210。

此后，当进行用户操作以将指针Po放在弹出显示210中的多个按钮中的一个按钮的位置处并且将指针Po设为对准状态时，即，当进行用户操作以通过指针Po指示按钮中的一个时，控制单元50形成用于被指示的按钮的弹出菜单显示，并且，使得仅在弹出菜单显示内的项能够被指示，并将其它按钮等设置为失效状态，以禁止所述其它按钮等被指示。例如，当设置按钮205被指示时，如图7C所示，形成用于设置按钮205的弹出菜单显示220，并且将其它按钮等设置为失效状态。

弹出菜单显示220包括呼入设置按钮221、装置设置按钮222、音频设置按钮223、网络设置按钮224、通信模式设置按钮225、管理员设置按钮226以及显示设置按钮227。呼入设置按钮221用于对呼入时的操作进行设置。装置设置按钮222用于进行时间设置和用于指示器显示等的装置相关设置。音频设置按钮223用于进行用于麦克风等的音频相关设置。网络设置按钮224用于进行网络相关设置以及与如SIP(Session Initiation Protocol，会话发起协议)的呼叫控制协议有关的设置等。通信模式设置按钮225用于选择用于视频和音频的压缩系统。当对局限于管理员的设置项进行设置时，使用管理员设置按钮226。显示设置按钮227用于对图像质量和显示模式进行设置。

例如，当指针Po被放在弹出菜单显示220中的装置设置按钮222的位置处并且被设置为对准状态，并且，此后进行了按压操作时，即，当进行了选择装置设置按钮222的用户操作时，控制单元50形成如图7D所示的装置设置菜单显示230，以允许进行关于各个项的设置。

由此，通过按照用户操作移动指针Po，改变被指示的部分，然后通过操作指示装置的键，来选择被指示的部分，可以对双向通信设备10进行各种设置。

以下将参照图8A、8B、8C和8D，对使用键盘的菜单选择操作进行描述。例如，在第一顶屏面上，将光标Ks放在地址簿按钮123的位置处。当操作向下光标移动键61c时，控制单元50将光标Ks从地址簿按钮123移动到菜单条显示按钮127，以指示菜单条显示按钮127。此后，当操作确认键62时，如图8A所示，控制单元50确定进行了选择菜单条显示按钮127的用户操作，并且形成菜单条显示200代替单触式拨号列表121。

当在形成菜单条显示200的同时操作向上光标移动键61a时，如图8B所示，控制单元50将光标Ks移动到菜单条显示200内的位置，并且，形成并显示描述按钮的功能的弹出显示210。此外，控制单元50按照向上光标移动键61a或向下光标移动键61c的操作，依次改变和指示在菜单条显示200内提供的按钮和显示。

当在将光标Ks放在希望的按钮的位置之后又经过了预定时间时，或者，当光标Ks被放在希望的按钮的位置并操作了确认键62时，控制单元50形成用于光标Ks所定位的按钮的弹出菜单显示。例如，当光标Ks处在设置按钮205的位置时，与图7C的情况相同，控制单元50形成用于设置按钮205的弹出菜单显示220。当在形成了弹出菜单显示220的同时操作了向右光标移动键61d时，与图7C的情况相同控制单元50将光标Ks移动到弹出菜单显示220中的例如第一呼入设置按钮221的位置。

当利用位于弹出菜单显示220中的光标Ks对向上光标移动键61a或向下光标移动键61c进行操作时，控制单元50按照用户操作移动光标Ks，顺序地并且循环地改变和指示在弹出菜单显示220内的按钮。

当在将光标Ks定位于装置设置按钮222的同时操作确认键62时，即，当在通过光标Ks指示装置设置按钮222的同时进行选择装置设置按钮222的操作时，控制单元50形成如图8D所示的装置设置菜单显示230，以允许对各个项进行设置。

由此，由于菜单条显示200、弹出菜单显示220以及装置设置菜单显示230等被分级显示，因此，可以在不在屏面上占用很大面积的情况下，有效地进行各种操作和设置。

在如上所述利用指向装置或键盘进行了操作和设置之后，在与希望的其他人进行双向通信的同时，在显示单元12上显示例如图9所示的通话屏面。顺便提及，图9示出显示了菜单条显示200的状态。

通话屏面包括多个显示屏面。母屏面300显示本人图像、另一人的图像、记录在记录介质上的静止图像、从所述另一人发送的静止图像等中的一个图像。另选地，以可变方式显示这些图像。例如，子屏面310形成与母屏面300的屏面显示不同的屏面显示。顺便提及，图9示出了作为母屏面300的静止图像301，并且示出了作为子屏面310显示的本人图像311和另一个人的图像312。将上述的摄像机调节框显示与本人图像311一起显示，从而可以在拍摄本人图像的同时，对摄像方向进行调节。

通话屏面还包括断开连接按钮321、麦克风开关按钮322、记录介质显示323、通信质量显示324、麦克风电平显示325以及通话经过时间显示326。断开连接按钮321用于结束通话。麦克风开关按钮322用于将麦克风功能改变到开状态或关状态。记录介质装入显示323与上述记录介质装入显示204相似。通话经过时间显示326表示通话经过的时间。

通信质量显示324使得能够确定通信质量状态。通信单元40例如对分组差错率进行测量。通信单元40将测量结果提供给显示驱动单元28或控制单元50，用于对通信质量显示324进行显示控制。通信质量显示324是被分为例如红色条、黄色条和绿色条的条形显示。当分组差错率良好时，显示所有红色条、黄色条和绿色条。当分组差错率变差时，显示的条数减少；例如，显示红色条和绿色条。当分组差错率进一步变差时，仅显示红色条。当分组差错率再进一步变差时，不显示条。由此，按照通信质量状态，对所显示的条的数目和颜色进行控制，从而可以容易地确定通信质量状态。

麦克风电平显示325表示当麦克风功能处在开状态时，麦克风信号的电平。利用这个麦克风电平显示325，使得到麦克风13的距离增大或减小，或者调节麦克风信号的增益，以便获得合适的麦克风信号电平。由此，可以将具有合适信号电平的音频信号发送到另一个人的目的地。顺便提及，也可以利用指向装置和键盘等指示或选择通话屏面的断开连接按钮321和麦克风开关按钮322。顺便提及，通话屏面包括屏面布局设置按钮207，用于对菜单条显示200中的屏面布局进行设置。

在利用地址簿来与希望的其他人进行双向通信的操作以及菜单选择操作中，在屏面上显示的单触式拨号列表121、弹出菜单显示132和220、菜单条显示200以及弹出显示210等被透明地显示。这样的透明显示使得即使当显示单触式拨号列表121、弹出菜单显示132和220、菜单条显示200以及弹出显示210等时，也能够分辨下一层中的屏面。

如上所述，当响应于用户操作，有选择地进行改变被指示的部分和选择被指示的部分中的一项时，即使在使用指向装置或键盘中任一个的情况下，也能够以相似方式对图形用户界面的该部分进行操作，并且，由此能够容易地对双向通信设备进行操作或设置。此外，由于不必将使用指向装置时的图形用户界面和使用键盘时的图形用户界面彼此分开提供，因此可以有效地进行图形用户界面设计，并且，因此可以防止设计周期延长和设计工时数的增加。另外，这使得可以低成本提供双向通信设备。

注意，在上述的图形用户界面中使用的部分、对这些部分的布置以及当操作指针Po或光标Ks时进行的操作是例示性的，并且当然不限于上述形式。

本领域的技术人员应该理解，可以根据设计需要和其它因素，进行各种修改、组合、次组合以及替换，只要它们在所附权利要求及其等同物的范围内即可。

Claims (3)

1.一种图形用户界面装置，包括：

显示单元，用于显示图形用户界面的一个部分；

操作输入单元，用于接收用户操作；以及

控制单元，用于按照所述用户操作，执行与所述部分对应的处理；

其中，所述控制单元响应于所述用户操作，有选择地进行改变被指示的部分和选择被指示的部分中的一个操作，并且，当选择了一个被指示的部分时，所述控制单元进行与所选择的部分对应的处理，

并且，其中所述控制单元将所述部分的状态限制于仅与改变所述被指示的部分和选择所述被指示的部分对应的状态，而使得除了改变和选择以外的用户操作失效。

2.一种图形用户界面装置中的操作输入处理方法，所述界面装置包括：

显示单元，用于显示图形用户界面的一个部分；

操作输入单元，用于接收用户操作；以及

控制单元，用于按照所述用户操作，执行与所述部分对应的处理，

所述操作输入处理方法包括以下步骤：

所述控制单元响应于所述用户操作，有选择地进行改变被指示的部分和选择被指示的部分中的一个操作；并且

当选择了一个被指示的部分时，所述控制单元进行与所选择的部分对应的处理，

其中所述控制单元将所述部分的状态限制于仅与改变所述被指示的部分和选择所述被指示的部分对应的状态，而使得除了改变和选择以外的用户操作失效。

3.一种双向通信设备，包括：

摄像单元；

通信单元，用于将通过由所述摄像单元进行摄像所获得的视频信号发送到与所述双向通信设备的用户进行通信的另一人，并且，接收来自所述另一人的视频信号；

显示单元，用于根据所述视频信号显示图像；

操作输入单元，用于接收用户操作；以及

控制单元；

其中，在所述显示单元上显示有图形用户界面的一个部分，并且

所述控制单元响应于所述用户操作，有选择地进行改变被指示的部分和选择被指示的部分中的一个操作，并且，当选择了一个被指示的部分时，所述控制单元进行与所选择的部分对应的处理，

并且，所述控制单元将所述部分的状态限制于仅与改变所述被指示的部分和选择所述被指示的部分对应的状态，而使得除了改变和选择以外的用户操作失效。

Images