CN102150119B - 信息处理设备 - Google Patents

信息处理设备 Download PDF

Info

Publication number
CN102150119B
CN102150119B CN200980135023.0A CN200980135023A CN102150119B CN 102150119 B CN102150119 B CN 102150119B CN 200980135023 A CN200980135023 A CN 200980135023A CN 102150119 B CN102150119 B CN 102150119B
Authority
CN
China
Prior art keywords
object images
value
coordinate
window
operating
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200980135023.0A
Other languages
English (en)
Other versions
CN102150119A (zh
Inventor
村上圭一
神谷大
恩田靖
加纳出亚
山田和宏
桥田直树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Docomo Inc
Original Assignee
NTT Docomo Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Docomo Inc filed Critical NTT Docomo Inc
Publication of CN102150119A publication Critical patent/CN102150119A/zh
Application granted granted Critical
Publication of CN102150119B publication Critical patent/CN102150119B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G06F3/04895Guidance during keyboard input operation, e.g. prompting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G06F3/04892Arrangements for controlling cursor position based on codes indicative of cursor displacements from one discrete location to another, e.g. using cursor control keys associated to different directions or using the tab key
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/08Cursor circuits
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports

Abstract

根据本发明的信息处理设备,如果对象操作方向是“右”,则在与右方向交叉的坐标轴中,指定与显示了被选中窗口Wa的区域的坐标(Yamin至Yamax)之间的区域和显示了未被选中窗口Wb1和Wb2的区域的坐标(Y1min至Y1max和Y2min至Y2max)之间的区域中的每个都交叠的范围,并基于交叠范围来确定随后可选择的窗口。该信息处理设备在随后可选择的窗口与被选中窗口Wa之间的位置处并且还在交叠显示随后可选择的窗口的区域以及显示窗口Wa的区域的范围内显示引导图像,以引导对象操作方向。

Description

信息处理设备
技术领域
本发明涉及GUI(图形用户界面)。
背景技术
目前存在两种用于选择屏幕上显示的多个图像(例如,窗口和图标)中的任意一个的方法;一种是使用允许选择任意位置的诸如鼠标的输入装置的方法,另一种是使用指示预定操作方向的诸如箭头键的操作键的方法。使用后一种方法,尽管可选择位置是受限的,但操作简单,且不需要输入装置。当采用这种方法时,通常,图像排布在适合于利用操作键来执行操作的操作方向上。例如,如果使用箭头键,图像规则地排布(网格模式或线模式等),从而能通过在右、左、上、下4个方向(或4个方向之外的方向)中的一个上的操作来选择所有图像(例如,参见专利文献1)。
专利文献1:JP-A-2006-113714(图5、图7等)
发明内容
发明要解决的问题
图像不一定是完全对应于操作键的操作方向而对齐排布的。例如,如果我们描述某个图像位于用作基准的特定位置的“右边”,则当广义地解释该描述“右边”时,该图像实际上可位于“右上”(斜右上)或位于“右下”(斜右下)。因此,在一个图像被显示在基准位置处、其它图像分别显示在该图像的“右上”和“右下”的情况下,如果执行指示被选中图像“右边”的操作,则可能同时选择了其它图像。在这种情况下,如果随后选择了图像,而没有应用任何判断标准来区分可选择的图像,则用户可能被阻止执行适当的操作。
本发明的目的是在可选择位置限于位于预定方向上的位置并且在被视为位于该预定方向上的位置处显示了两个或更多个图像的情况下,使用户更容易地识别随后被选择的窗口。
解决问题的手段
本发明在一个实施方式中提供了一种信息处理设备,所述信息处理设备包括:第一显示装置,其用于在显示器的显示区中显示待选择的多个对象图像;选择装置,其用于从显示在所述显示区中的所述多个对象图像中选择单个对象图像;接收装置,其用于接收操作方向的指示;转换(transition)装置,在所述接收装置接收到所述操作方向的指示时,如果从由所述选择装置选择的对象图像看去,所述多个对象图像中的至少一个其它图像显示在与所述操作方向相对应的方向上,则该转换装置将所述选择装置的选择对象移动到所述至少一个其它图像中的一个;以及第二显示装置,其用于在由所述选择装置选择的对象图像和能够通过所述转换装置移动选择对象而选择的另一对象图像之间显示引导图像(guide image),以引导指示所述移动的操作方向,其中,所述转换装置包括:坐标识别装置,其用于在所述显示区中定义了与所述操作方向交叉的坐标轴的情况下,识别显示了所述多个对象图像中的每一个的区域的两端在该坐标轴中的坐标;范围指定装置,其用于在与所述操作方向相对应的方向上显示了两个或更多个其它对象图像的情况下,对于所述两个或更多个其它对象图像中的每一个,指定与由所述坐标识别装置识别的所述两个或更多个其它对象图像中的每一个的两端的坐标之间的区域和由所述坐标识别装置识别的由所述选择装置选择的对象图像的两端的坐标之间的区域二者都交叠的范围;以及确定装置,其用于基于由所述范围指定装置指定的范围来确定能通过所述移动而选择的另一对象图像,并且所述转换装置响应于所述接收单元接收到所述操作方向,将所述选择装置的选择对象移动到由所述确定装置确定的所述另一对象图像。
在优选实施方式中,所述确定装置在所述两个或更多个其它对象图像中确定由所述指定装置指定的范围较大的对象图像。
另选地,所述确定装置在所述两个或更多个其它对象图像中确定由所述范围指定装置指定的范围相对于由所述坐标识别装置识别的两端的坐标之间的区域的比值较大的对象图像。
在另一优选实施方式中,所述转换装置包括:距离测量装置,其用于测量由所述选择装置选择的对象图像与所述两个或更多个其它对象图像中的每一个之间的距离,并且所述确定装置基于由所述范围指定装置指定的范围以及由所述距离测量装置测量的距离来确定能通过所述移动而选择的另一对象图像。
另一方面,根据本发明的一种程序具有使计算机用作信息处理设备的特征。可经由诸如互联网之类的网络将根据本发明的程序下载到计算机中,并安装在其中,从而能使用该程序。本发明可提供存储该程序的记录介质,例如光盘。
发明效果
根据本发明,在可选择位置限于位于预定方向上的位置并且在被视为位于该预定方向上的位置处显示了两个或更多个图像的情况下,将用户直观地识别出位于该方向上的图像确定为能随后被选择的图像,并且在所确定的图像附近显示引导图像。因此,能够使用户更容易地识别随后被选择的图像。
附图说明
图1是示出通信终端设备的硬件构造的框图。
图2是示出通信终端设备的逻辑构造的图。
图3是示出由通信终端设备提供的功能的功能框图。
图4是示出窗口和引导图像的显示外观的示例的图。
图5是示出窗口和引导图像的显示外观的示例的图。
图6是描述与操作方向相对应的方向上的范围的图。
图7是示出从多个未被选中窗口当中确定单个要选择的候选窗口的处理的流程图。
图8是描述交叠范围的图。
图9是示出当接收到改变被选中窗口的指令时所执行的处理的流程图。
图10是描述引导图像的显示位置的图。
图11是描述引导图像的显示位置的图。
图12是描述在操作方向包括“右上”方向的情况下指定交叠范围的方法的图。
图13是示出被选中窗口的显示外观示例的图。
附图标记描述 
10:通信终端设备,11:控制单元,12:无线通信单元,13:显示单元,14:操作单元,210:图像显示单元,211:窗口显示单元,212:引导图像显示单元,220:选择单元,230:接收单元,240:转换单元。 
具体实施方式
图1是示出根据本发明实施方式的通信终端设备的物理构造的框图。如图所示,通信终端设备10包括控制单元11、无线通信单元12、显示单元13和操作单元14。应该注意,根据本实施方式的通信终端设备10是具有诸如麦克风和扬声器的用于输入和输出语音的装置(未示出)的移动电话。
控制单元11包括CPU(中央处理单元)11a、ROM(只读存储器)11b、RAM(随机存取存储器)11c和EEPROM(电可擦除可编程ROM)11d,CPU 11a执行ROM 11b或EEPROM 11d中存储的程序,同时使用RAM 11c作为工作区,从而控制通信终端设备10的各单元的操作。无线通信单元12包括天线12a,并与预定移动通信网络进行无线数据通信。显示单元13包括液晶显示器和液晶驱动电路,并基于从控制单元11提供的显示数据在预定显示区中显示图像。操作单元14包括多个键,并将对应于用户按压操作的操作信息提供给控制单元11。操作单元14包括用于选择窗口的键(在下文中称为“方向键”)。通过操作该方向键,用户能够选择窗口。应该注意,在本实施方式中,方向键是借以选择左、右、上、下4个方向中的一个的箭头键;然而,方向键可以是可借以选择4个方向之外的诸如斜方向(右上或左下)的方向的键。这里所称的键可以是所谓的硬按钮,或设置在液晶显示器上的触摸传感器。
应该注意,在本实施方式中,显示单元13包括矩形显示区。矩形包括在左右方向上延伸的短边,和在上下方向上延伸的长边。在下面的描述中,使用笛卡尔坐标来定义显示区中的位置,其中左右方向被定义为X轴,上下方向被定义为Y轴。坐标原点可定义在任意位置。
ROM 11b预存储了一些程序。在下文中,这些程序将被称作“预装程序”。预装程序包括多任务操作系统(在下文中称为“多任务OS”)、JavaTM平台和原生应用(native application)。多任务OS是支持实现多个任务伪并行运行所需的功能(例如,虚拟内存空间分配)的操作系统。Java平台是根据CDC(连接设备配置)描述的一组程序,CDC是用于在安装了多任务OS的通信终端设备10中实现Java运行时环境(JavaRuntime Environment)140(后面描述)的配置。原生应用是用于实现通信终端设备10的诸如电话呼叫之类的基本功能的程序。
EEPROM 11d包括用于存储Java应用的Java应用存储区。Java应用包括JAR(Java归档)文件,该文件是描述Java运行时环境中的过程的实体(substance)程序、运 行实体程序时使用的图像文件或音频文件、以及描述JAR文件的安装和启动的特性的ADF(应用描述符文件)的组合。Java应用由内容提供商或运营商制备,存储在外部服务器设备中,并可根据通信终端设备10的请求从服务器设备下载。
图2是示出通过通信终端设备10的控制单元11执行存储在ROM 11b和EEPROM 11d中的程序实现的单元的逻辑构造的图。如图所示,在执行程序的通信终端设备10中,原生应用112和Java运行时环境113实现在OS 111中,并且第一存储部114和第二存储部115固定在EEPROM 11d中。
通过使用存储在ROM 11b中的Java平台来实现Java运行时环境113。Java运行时环境113包括类库116、JVM(Java虚拟机)117和JAM(Java应用管理器)118。类库116是具有特定功能的程序模块(类)组合的文件。JVM 117是针对上面描述的CDC而优化的Java运行时环境,具有解释并执行作为Java应用而提供的比特码的功能。JAM 118具有管理Java应用的下载、安装、启动和结束的功能。
第一存储部114是用于存储在JAM 118的控制下所下载的Java应用的区域,每个Java应用都包括JAR文件和ADF。第二存储部115是为每个安装的Java应用提供单个存储区的区域,用于在应用结束之后存储Java应用运行期间所生成的数据。仅当Java应用运行时才能重写分配给Java应用的存储区中的特定Java应用的数据;因此,另一Java应用不能重写数据。
本实施方式的Java应用包括用于显示多个窗口的应用。用于显示多个窗口的Java应用包括“列表显示应用”和“微件”(widget)。列表显示应用是用于在显示单元13的显示区上显示一个或多个窗口并控制显示外观的应用。“微件”是在列表显示应用显示窗口的条件下实现预定功能的应用。
本实施方式的“窗口”指的是显示单元13的显示区的分配给微件的一部分,它被显示为能与显示区中的另一部分中的图像区分开的图像。为窗口分配标识信息,以标识各窗口。窗口的形状和大小(面积)根据微件来确定,并可改变。窗口是本发明的“对象图像”的示例。
在本实施方式中,出现了多个微件,各微件实现了不同的功能。微件例如包括通过在窗口中显示时钟图像来显示时间和日期的微件(在下文中称为“时钟微件”)、在窗口中显示用户输入的字符作为备忘录的微件(在下文中称为“备忘录微件”)或播放视频或音乐的微件(在下文中称为“播放微件”)。并且,微件可包括在预定时刻经 由无线通信单元12来获取诸如天气预报之类的信息并显示所获取的信息的微件。
前面是根据本实施方式的通信终端设备10的构造的描述。对于该构造,通信终端设备10根据用户输入的请求来执行多个应用。根据本实施方式的通信终端设备10通过显示微件的窗口来实现多窗口系统。即,当通信终端设备10在显示多个窗口时,运行了列表显示应用。用户能够通过操作操作单元14的方向键从多个窗口中选择一个,或改变已选择的窗口。在下面的描述中,为方便说明,已选择的窗口将称为“被选中窗口”,未选择的窗口将称为“未被选中窗口”。应该注意,在本实施方式中,对某个窗口的“选择”意味着向该窗口提供输入焦点。
通信终端设备10将与已被用户选择的窗口相对应的微件置于该微件执行与窗口未被选择时所执行的操作不同的操作的状态。即,各微件能够根据与该微件相对应的窗口是否被选择而执行不同的操作。例如,时钟微件能够在对应的窗口未被选择时执行显示日期和时间的操作,并且能够在对应的窗口被选择时执行改变日期和时间或窗口外观(例如,颜色)的操作。备忘录微件能够在对应的窗口未被选择时执行显示字符的操作,并且能够在对应的窗口被选择时执行改变(编辑)字符的操作。播放微件能够在对应的窗口未被选择时执行播放视频或音乐的操作,并且能够在对应的窗口被选择时执行控制音量、或暂停或快进视频或音乐的操作。根据用户进行的操作来执行这些操作。例如,当用户进行设置时钟的操作时,相应地改变时间。
图3是示出当显示了多个窗口时由通信终端设备10的控制单元11提供的功能的功能框图。如图所示,通信终端设备10的控制单元11通过执行所存储的程序来实现与图像显示单元210、选择单元220、接收单元230和转换(transition)单元240相对应的功能。
图像显示单元210具有在显示单元13上显示图像的功能。图像显示单元210包括窗口显示单元211和引导图像显示单元212。窗口显示单元211具有控制窗口显示的功能。如果显示了多个窗口,则窗口显示单元211按照使被选中窗口和未被选中窗口能互相区分开的方式显示它们。引导图像显示单元212具有显示用于引导能将选择移动至的窗口的图像(在下文中称为“引导图像”)的功能,该窗口即通过给定操作可改变为被选中窗口的未被选中窗口。这里所称的移动意味着将选择对象从一个窗口变为另一窗口。引导图像优选为允许用户直观地理解指示的操作方向的图像;例如,引导图像是表示箭头的图像。应该注意,与本发明的选择图像不同,引导图像不是选 择的对象。
选择单元220具有从显示在显示单元13上的窗口中选择单个窗口并将该窗口设置为被选中窗口的功能。如果在显示单元13上仅显示了单个窗口,则选择单元220将该窗口设置为被选中窗口。如果在显示单元13上显示了多个窗口,则选择单元220根据预定规则来选择单个窗口。选择单元220可将其微件最近被执行的窗口设置为被选中窗口,或可根据用户对方向键的操作来确定被选中窗口。选择单元220选择的结果反映在图像显示单元210所显示的图像中。
接收单元230具有接收改变被选中窗口的指令的功能。在本实施方式中,在特定窗口被选择的状态下,根据用户操作方向键来选择任意操作方向而输入的指令来改变被选中窗口。获取了关于操作的操作信息时,接收单元230将获取的操作信息提供给转换单元240。
转换单元240具有根据接收单元230接收的指令来移动被选中窗口的功能。转换单元240识别接收单元230接收的指令所指示的操作方向。如果从被选中窗口看去,在该操作方向上显示了未被选中窗口,则转换单元240确定将该未被选中窗口变为被选中窗口。转换单元240确定的结果被提供到选择单元220,然后反映在由图像显示单元210显示的图像中。
图4和图5是示出窗口和引导图像的显示外观的示例的图。这些图示出了Wa是被选中窗口的情况。图像显示单元210在作为被选中窗口的窗口Wa周围显示了框F,以区分被选中窗口与未被选中窗口(Wb1至Wb4)。应该注意,区分被选中窗口与未被选中窗口的方法不限于此示例,可利用使被选中窗口闪烁的方法,或使未被选中窗口显现为半透明的方法。
如果从被选中窗口看去,在与操作方向相对应的方向上显示了未被选中窗口,则图像显示单元210还显示指示各操作方向的引导图像。例如,在图4中,窗口Wa“右边”、“左边”、“上边”、“下边”存在未被选中窗口;相应地,显示了指示这4个方向的引导图像Gu、Gd、Gl、Gr。在图5中,因为窗口Wa“下边”没有未被选中窗口,所以没有显示指示该操作方向的引导图像。在下面的描述中,位于由引导图像指示的方向上的未被选中窗口被称为“供选择的候选窗口”。换句话说,在特定窗口是被选中窗口的情况下,要选择的候选窗口是如果随后指示操作方向则可以是被选中窗口的未被选中窗口,即,随后可改变为被选中窗口的未被选中窗口。
从被选中窗口看去“与操作方向相对应的方向”指的是被视为操作方向的方向。例如,这里所称的操作方向“右边”将包括“右上”和“右下”。
图6是描述与根据本发明的操作方向相对应的方向上的范围的图。例如,被视为位于“右边”的窗口是至少部分位于图中所示的区域Ar内的窗口。通过识别显示被选中窗口Wa的区域的X轴和Y轴的最大值和最小值来定义区域Ar。区域Ar是X轴坐标大于等于“Xmax”、Y轴坐标大于等于“Ymin”且小于等于“Ymax”的区域。
类似地,如果X轴坐标大于等于“Xmin”且小于等于“Xmax”、Y轴坐标大于等于“Ymax”的区域被定义为区域Au,则位于窗口Wa“上边”的窗口至少部分地包括在区域Au中。同样地,位于窗口Wa“左边”的窗口至少部分地包括在区域Al中,位于窗口Wa“下边”的窗口至少部分地包括在区域Ad中。相应地,图6所示的窗口Wb1是位于被选中窗口Wa“上边”的未被选中窗口,图6所示的窗口Wb2是位于被选中窗口Wa“右边”的未被选中窗口。
当如上所述扩展被视为操作方向的方向范围时,多个未被选中窗口可包括在该范围中。通信终端设备10具有从多个未被选中窗口中确定单个未被选中窗口所应用的判断标准,从而在这种情况下如果指示存在多个窗口的操作方向,则单个未被选中窗口成为要选择的候选窗口。
图7是示出从多个未被选中窗口中确定要选择的候选窗口的处理的流程图。通信终端设备10对于各个操作方向执行该处理。即,通信终端设备10对于右、左、上、下4个方向中的每一个执行该处理。
应该注意,在本实施方式中,在转换单元240的移动操作之前执行该处理。这是因为,如果还未确定要选择的候选窗口,则不能在合适的位置处显示引导图像。并且,通过在移动操作之前执行处理,能够比接收到移动指令之后执行处理的情况更快地完成移动操作。
控制单元11首先确定在与对象操作方向(右、左、上、下中的任一个)相对应的方向上是否存在多个未被选中窗口(步骤S11)。如果在与对象操作方向相对应的方向上没有显示多个未被选中窗口,则由于要选择的候选窗口是唯一确定的,或不存在要选择的候选窗口,故不需要本处理。相应地,如果在与对象操作方向相对应的方向上没有显示多个未被选中窗口,则控制单元11结束本处理。
如果在与对象操作方向相对应的方向上显示了多个未被选中窗口,则控制单元 11识别显示了被选中窗口和未被选中窗口的区域,还识别在与对象操作方向正交的方向上每个被指定区域的两端的坐标(步骤S12、S13)。如果对象操作方向是“右”,即,在X轴方向上,则控制单元11识别各窗口的顶端和底端的Y轴坐标。识别的坐标是与图6所示的“Ymin”和“Ymax”相对应的坐标。应该注意,因为步骤S12中的处理和步骤S13中的处理的区别仅在于坐标识别的对象,即,对象窗口是被选中窗口还是未被选中窗口,所以可按相反顺序来执行处理。
一旦识别出以上窗口中的每个的两端的坐标,控制单元11就针对各个未被选中窗口,指定与步骤S12中识别的被选中窗口两端的坐标之间的区域和步骤S13中识别的未被选中窗口两端的坐标之间的区域二者都交叠的范围(步骤S14)。
图8是描述步骤S14中的处理的图。在图中,“Yamax”是显示被选中窗口Wa的区域在Y轴方向上的最大值,“Yamin”是该区域的最小值。类似地,“Y1max”是显示未被选中窗口Wb1的区域在Y轴方向上的最大值,“Y1min”是该区域的最小值。“Y2max”是显示未被选中窗口Wb2的区域在Y轴方向上的最大值,“Y2min”是该区域的最小值。在这种情况下,“Yamax-Y1min”定义了与被选中窗口Wa两端的坐标之间的区域和未被选中窗口Wb1两端的坐标之间的区域二者都交叠的范围。类似地,“Y2max-Yamin”定义了与被选中窗口Wa两端的坐标之间的区域和未被选中窗口Wb2两端的坐标之间的区域二者都交叠的范围。
当在步骤S14中指定了交叠范围时,控制单元11执行处理,以基于指定的交叠范围来确定要选择的候选窗口(步骤S15)。在下文中,该处理称为“确定处理”。在确定处理中,基于步骤S14中指定的交叠范围来确定要选择的候选窗口。例如,在确定处理中,可基于交叠范围的大小确定要选择的候选窗口,或可基于交叠范围相对于步骤S13中识别的各未被选中窗口两端的坐标之间的区域的比值进行确定。参照图8,在前一情况下,比较区域“Yamax-Y1min”的大小和区域“Y2max-Yamin”的大小。在前一情况下,控制单元11将具有较大交叠范围的未被选中窗口(在图中是未被选中窗口Wb1)确定为要选择的候选窗口。另一发明,再次参照图8,在后一情况下,比较比值“(Yamax-Y1min)/(Y1max-Y1min)”和比值“(Y2max-Yamin)/(Y2max-Y2min)。在后一情况下,控制单元11将具有较大交叠范围比值的未被选中窗口(在图中是未被选中窗口Wb2)确定为要选择的候选窗口。
图9是示出当接收到改变被选中窗口的指令时执行的处理的流程图。当接收到该 指令时,控制单元11获取与改变被选中窗口的指令相对应的操作信息(步骤S21),并识别该操作信息所指示的操作方向(步骤S22)。控制单元11确定在识别的操作方向上是否显示了要选择的候选窗口(步骤S23)。如果在识别的操作方向上没有显示要选择的候选窗口,则控制单元11结束处理而不改变被选中窗口。
如果在步骤S22中识别的操作方向上显示了要选择的候选窗口显示,则控制单元11识别该要选择的候选窗口的标识信息(步骤S24)。控制单元11将该标识信息所标识的要选择的候选窗口设置为新的被选中窗口,并使该变化反映在显示单元13显示的内容中(步骤S25)。在该步骤中,改变引导图像的位置、表示被选中窗口的图像(例如,图4所示的框F)的位置等。因此,在该步骤中同样执行了图7所示的处理。
引导图像显示在被选中窗口与要选择的候选窗口之间的合适位置处。例如,按下面描述的那样来确定引导图像的显示位置。
图10和图11是描述引导图像的显示位置的图。当显示引导图像Gr时,控制单元11使用上面的步骤S14中指定的交叠范围。因此,在根据该示例确定引导图像的显示位置的情况下,即使在与上面的步骤S11中的对象操作方向相对应的方向上显示了单个未被选中窗口,控制单元11也获取相对于该操作方向的坐标(步骤S12和S13)。
控制单元11指定与识别的被选中窗口两端的坐标之间的区域和识别的要选择的候选窗口两端的坐标之间的区域二者都交叠的范围,并将交叠范围的中点确定为引导图像Gr的显示位置。通过该确定,确定了与操作方向正交的轴向上的坐标。与操作方向平行的轴向上的坐标可以是被选中窗口与要选择的候选窗口之间的中点,或可以是更接近任意窗口的位置。在图10中,窗口Wb1是右边的要选择的候选窗口。在图11中,窗口Wb2是右边的要选择的候选窗口。如图所示,基于要选择的候选窗口相对于被选中窗口的显示位置来改变引导图像Gr的显示位置。
如上所述,根据本实施方式的通信终端设备10,引导图像指示了哪个被选中窗口是要选择的候选窗口;因此,如果在被视为操作方向的方向范围上显示了多个窗口,则能够使用户更容易地识别随后可变为被选中窗口的窗口。
此外,如果在被视为操作方向的方向范围内显示了多个未被选中窗口,则通信终端设备10基于上述“交叠范围”或“比值”来确定要选择的候选窗口。当狭义地解释操作方向时,具有较大“交叠范围”或较大“比值”的窗口可以被认为更适合于操 作方向。例如,当窗口是矩形或正方形时,与其它窗口相比,具有较大“交叠范围”的窗口具有较接近在对象操作方向上从被选中窗口中心延伸的直线的边。与其它窗口相比,具有较大“比值”的窗口的中心较接近在对象操作方向上从被选中窗口中心延伸的直线。用户认为这种窗口更“适合于操作方向”。因此,根据本实施方式的通信终端设备10,能够将用户直观地识别出位于对象操作方向上的窗口确定为要选择的候选窗口。
变型例
可在不同于以上实施方式的实施方式中实现本发明。例如,可在下面描述的实施方式中实现本发明。应该注意,下面的变型例可互相结合。
(1)变型例1
在本发明中,当确定要选择的候选窗口(换句话说,随后可选择的对象图像)时,除了上述“交叠范围”和“比值”之外,还可考虑被选中窗口与未被选中窗口之间的“距离”。“距离”可以是连接被选中窗口中心与未被选中窗口中心的直线的长度,或另选地,可以是连接显示被选中窗口的区域中的任意位置与显示未被选中窗口的区域中的任意位置的直线中的最短直线的长度。
在以上实施方式应用于该变型例的情况下,控制单元11用下面的方式来测量距离,并基于测量的距离和上述交叠范围(或其比值)来确定要选择的候选窗口。当结合使用距离和交叠范围时,控制单元11可利用多种方法。例如,如果存在多个具有最大交叠范围的未被选中窗口,则控制单元11可从未被选中窗口中选择所测量距离较短的未被选中窗口作为要选择的候选窗口,或另选地,可计算根据交叠范围大小的分数(数值),以及根据测量距离的分数,并基于组合的分数来确定要选择的候选窗口。
(2)变型例2
本发明提及的“操作方向”不限于上述右、左、上、下4个方向,而是可包括多于4个或少于4个方向。例如,操作方向可包括3个方向或8个方向。例如,如果使用所谓的数字键盘代替方向键,可由“2”、“4”、“6”、“8”4个键指示右、左、上、下操作方向,并且可由“1”、“3”、“7”、“9”4个键指示斜操作方向。
图12是描述用于在操作方向包括“右上”情况下指定交叠范围的方法的图。“右上”指的是图中所示的箭头Aur指示的方向。在图中,窗口Wa是被选中窗口,窗口 Wb1和Wb2是未被选中窗口。
在操作方向包括这种方向的情况下,控制单元11在显示区中定义与操作方向正交的坐标轴,识别被选中窗口和未被选中窗口中每个的两端在坐标轴上的坐标,并用与以上实施方式相同的方式来指定交叠范围。在图12中,坐标a1和a2是窗口Wa两端的坐标,坐标b11和b12是窗口Wb1两端的坐标,坐标ba21和b22是窗口Wb2两端的坐标。在这种情况下,箭头Ab1指示的范围(a1至b12)是窗口Wb1的交叠范围,箭头Ab2指示的范围(b21至a2)是窗口Wb2的交叠范围。
在本发明中,为指定交叠范围而定义的坐标轴优选是与操作方向正交的方向,即,相对于操作方向成90度的方向;然而,只要是与操作方向相交叉的方向即可。相应地,坐标轴不必是相对于操作方向精确地成90度的方向,而是允许有偏差。在以上实施方式和此实施方式中,认为“正交”包括基本上视为正交的范围。
(3)变型例3
在本发明中,当窗口被选择时,窗口可以有多个显示外观。在这种情况下,可用逐步的方式通过预定操作来改变这多个显示外观。
图13是示出被选中窗口的显示外观的图。在图13(a)中,被选中窗口Wa与未被选中窗口Wb1至Wb3一起显示。在图13(b)中,仅显示了放大的被选中窗口Wa。例如,如果如图13(a)所示的那样来显示窗口,并且各窗口太小而不能识别其内容,则可显示如图13(b)所示的放大窗口。
另选地,可在显示了图13(a)所示的画面之后,通过预定操作来显示图13(b)所示的放大窗口。在这种情况下,被选中窗口的显示外观包括两个阶段:图13(a)所示的阶段;以及图13(b)所示的阶段。在用逐步方式改变被选中窗口的显示外观的情况下,对于被选中窗口的各显示阶段,微件能够执行不同的处理。例如,上面的时钟微件可在未被选择期间内用预定显示外观来显示时间和日期,而在图13(a)所示的阶段内用不同于未被选择期间的显示外观来显示时间和日期,并可在图13(b)所示的阶段中执行改变时间和日期或显示外观的处理。在这种情况下,未被选择期间可仅显示时间,而日期和星期几可在被选择期间内与时间一起显示。
(4)变型例4
根据本发明的窗口不仅可以是以上实施方式中的分配给“微件”的显示区,还可以是分配给诸如原生应用的另一应用的显示区。并且,微件不仅可以是Java应用, 还可以是另一应用。并且,在通过执行列表显示应用(其是Java应用)来实现多个窗口显示的以上实施方式中,可通过诸如OS的另一应用来实现多个窗口显示。
并且,微件可经由无线通信单元12之外的装置来获取信息。例如,如果根据本发明的信息处理设备具有所谓的IC标签,则微件可获取该IC标签中存储的信息。另选地,如果根据本发明的信息处理设备具有GPS(全球定位系统)定位功能,则微件可使用该定位功能来获取位置信息(维度和经度,或到给定点的距离)。
(5)变型例5
如果根据本发明的“对象图像”是将要由用户操作选择的图像,则它不必是窗口。根据本发明的“对象图像”是显示在显示区的特定范围中的、能由用户选择的任意图像。例如,它可以是图标。并且,根据本发明的“对象图像”不限于静止图像或运动图像,而是包括字符和符号。
(6)变型例6
在以上实施方式中,可认为控制单元11对应于根据本发明的信息处理设备,或者可认为通信终端设备10对应于信息处理设备。当认为通信终端设备10对应于信息处理设备时,由控制单元11和操作单元14之间的协作来实现转换装置和接收装置。根据本发明的操作不仅可以是键的按压,还可以是语音指令识别。
在以上实施方式中,本发明应用于移动电话。然而,本发明可应用于另一电子设备。本发明可应用于诸如PDA(个人数字助理)的通信终端设备、或诸如相机、便携式音乐播放器、或便携式游戏设备的信息处理设备。本发明特别适合于用于选择位置的指示方向受限的情况,例如使用箭头键的情况。
可通过程序集合或多个硬件资源的协作实现由通信终端设备10实现的图3所示的功能。例如,可由不同的程序执行对应于图像显示单元210、选择单元220和接收单元230的操作,以及对应于转换单元240的操作。另选地,可由不同的硬件资源来执行这些操作。

Claims (2)

1.一种信息处理设备,该信息处理设备包括:
第一显示装置,其用于在显示器的显示区中显示待选择的多个对象图像;
选择装置,其用于从显示在所述显示区中的所述多个对象图像中选择一个对象图像;
接收装置,其用于接收操作方向的指示;
转换装置,在所述接收装置接收到所述操作方向的指示时,如果从由所述选择装置选择的对象图像看去,所述多个对象图像中的至少一个其它图像显示在与所述操作方向相对应的方向上,则该转换装置将所述选择装置的选择对象移动到所述至少一个其它图像中的一个;以及
第二显示装置,其用于在由所述选择装置选择的对象图像和能够通过所述转换装置移动选择对象而选择的另一对象图像之间显示引导图像,以引导指示所述移动的操作方向,其中,
所述转换装置包括:
坐标识别装置,其用于在所述显示区中定义了与所述操作方向交叉的坐标轴的情况下,识别显示了所述多个对象图像中的每一个的区域的两端在该坐标轴上的坐标;
范围指定装置,其用于在与所述操作方向相对应的方向上显示了两个或更多个其它对象图像的情况下,对于所述两个或更多个其它对象图像中的每一个,
指定所述坐标识别装置针对所述两个或更多个其它对象图像中的每一个识别的两端的坐标之间的区域与所述坐标识别装置针对由所述选择装置选择的对象图像识别的两端的坐标之间的区域交叠的范围,
确定装置,其用于在所述两个或更多个其它对象图像中确定由所述范围指定装置指定的范围相对于由所述坐标识别装置识别的两端的坐标之间的区域的比值较大的对象图像,并且
所述转换装置响应于所述接收单元接收到所述操作方向,将所述选择装置的选择对象移动到由所述确定装置确定的所述另一对象图像,
其中,所述转换装置还包括:距离测量装置,其用于测量由所述选择装置选择的对象图像与所述两个或更多个其它对象图像中的每一个之间的距离,并且
所述确定装置计算根据由所述范围指定装置指定的范围的分数和根据由所述距离测量装置测量的距离的分数,并且基于所述分数的组合从所述两个或更多个其它对象图像中确定能通过所述移动而选择的另一对象图像,
其中,所述比值是所指定的范围的坐标轴中的最大值和最小值之差与针对所述两个或更多个其它对象图像中的每一个所识别的坐标的最大值和最小值之差的比值,
其中,所述范围是第一值和第二值之差,所述第一值是针对选择的对象图像所识别的坐标的最大值,所述第二值是针对所述两个或更多个其它对象图像中的第一对象图像所识别的坐标的最小值;或者所述范围是第三值和第四值之差,所述第三值是针对选择的目标对象所识别的坐标的最小值,所述第四值是针对所述两个或更多个其它对象图像中的第二对象图像所识别的坐标的最大值,
所述比值是所述第一值和所述第二值之差与所述第二值和第五值之差的比值,所述第五值是针对所述第一对象图像所识别的坐标的最大值,或者所述比值是所述第三值和所述第四值之差与所述第四值和第六值之差的比值,所述第六值是针对所述第二对象图像所识别的坐标的最小值。
2.一种信息处理方法,该方法包括以下步骤:
第一显示步骤,在显示器的显示区中显示待选择的多个对象图像;
选择步骤,从显示在所述显示区中的所述多个对象图像中选择一个对象图像;
接收步骤,接收操作方向的指示;
移动步骤,在接收到所述操作方向的指示时,如果从由所述选择步骤选择的对象图像看去,所述多个对象图像中的至少一个其它图像显示在与所述操作方向相对应的方向上,则将所述选择步骤的选择对象移动到所述至少一个其它图像中的一个;以及
第二显示步骤,在选择的对象图像和能够通过所述选择对象的移动而选择的另一对象图像之间显示引导图像,以引导指示所述移动的操作方向,其中,
所述移动步骤包括:
坐标识别步骤,在所述显示区中定义了与所述操作方向交叉的坐标轴的情况下,识别显示了所述多个对象图像中的每一个的区域的两端在该坐标轴上的坐标;
范围指定步骤,在与所述操作方向相对应的方向上显示了两个或更多个其它对象图像的情况下,对于所述两个或更多个其它对象图像中的每一个,指定针对所述两个或更多个其它对象图像中的每一个识别的两端的坐标之间的区域与所述坐标识别步骤针对由所述选择步骤选择的对象图像识别的两端的坐标之间的区域交叠的范围;以及
确定步骤,在所述两个或更多个其它对象图像中确定由所述范围指定步骤指定的范围相对于由所述坐标识别步骤识别的两端的坐标之间的区域的比值较大的对象图像,并且
在所述移动步骤中,响应于接收到所述操作方向,将选择对象移动到在所述确定步骤中确定的所述另一对象图像,
其中,所述移动步骤还包括:距离测量步骤,测量由所述选择步骤选择的对象图像与所述两个或更多个其它对象图像中的每一个之间的距离,并且
在所述确定步骤中,计算根据由所述范围指定步骤指定的范围的分数和根据由所述距离测量步骤测量的距离的分数,并且基于所述分数的组合从所述两个或更多个其它对象图像中确定能通过所述移动而选择的另一对象图像,
其中,所述比值是所指定的范围的坐标轴中的最大值和最小值之差与针对所述两个或更多个其它对象图像中的每一个所识别的坐标的最大值和最小值之差的比值,
其中,所述范围是第一值和第二值之差,所述第一值是针对选择的对象图像所识别的坐标的最大值,所述第二值是针对所述两个或更多个其它对象图像中的第一对象图像所识别的坐标的最小值;或者所述范围是第三值和第四值之差,所述第三值是针对选择的目标对象所识别的坐标的最小值,所述第四值是针对所述两个或更多个其它对象图像中的第二对象图像所识别的坐标的最大值,
所述比值是所述第一值和所述第二值之差与所述第二值和第五值之差的比值,所述第五值是针对所述第一对象图像所识别的坐标的最大值,或者所述比值是所述第三值和所述第四值之差与所述第四值和第六值之差的比值,所述第六值是针对所述第二对象图像所识别的坐标的最小值。
CN200980135023.0A 2008-09-08 2009-09-08 信息处理设备 Expired - Fee Related CN102150119B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008230221A JP5185745B2 (ja) 2008-09-08 2008-09-08 情報処理装置及びプログラム
JP2008-230221 2008-09-08
PCT/JP2009/065679 WO2010027088A1 (ja) 2008-09-08 2009-09-08 情報処理装置及びプログラム

Publications (2)

Publication Number Publication Date
CN102150119A CN102150119A (zh) 2011-08-10
CN102150119B true CN102150119B (zh) 2015-06-17

Family

ID=41797250

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200980135023.0A Expired - Fee Related CN102150119B (zh) 2008-09-08 2009-09-08 信息处理设备

Country Status (5)

Country Link
US (1) US8843833B2 (zh)
EP (1) EP2328071B1 (zh)
JP (1) JP5185745B2 (zh)
CN (1) CN102150119B (zh)
WO (1) WO2010027088A1 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4976353B2 (ja) * 2008-09-08 2012-07-18 株式会社エヌ・ティ・ティ・ドコモ 情報処理装置及びプログラム
USD686637S1 (en) * 2009-03-11 2013-07-23 Apple Inc. Display screen or portion thereof with icon
US10068157B2 (en) 2012-05-10 2018-09-04 Apple Inc. Automatic detection of noteworthy locations
CN104571786B (zh) * 2013-10-25 2018-09-14 富泰华工业(深圳)有限公司 具有动态拼图界面的电子装置及其控制方法与系统
CN106068209B (zh) * 2014-04-03 2019-03-15 歌乐株式会社 车载信息装置
KR101617216B1 (ko) * 2014-05-07 2016-05-02 삼성전자 주식회사 디스플레이장치 및 영상의 오브젝트 하이라이트를 표시하는 방법
USD826979S1 (en) * 2017-04-03 2018-08-28 Google Llc Display screen with animated graphical user interface
JP2018195025A (ja) * 2017-05-16 2018-12-06 富士通株式会社 情報処理装置、情報処理システム、及び情報処理方法
USD829759S1 (en) * 2017-10-03 2018-10-02 Google Llc Display screen with graphical user interface
USD854562S1 (en) * 2017-10-13 2019-07-23 Facebook, Inc. Display screen with graphical user interface for games in messaging applications
USD862511S1 (en) * 2017-11-02 2019-10-08 Google Llc Display screen or portion thereof with transitional graphical user interface
USD875759S1 (en) 2018-05-12 2020-02-18 Canva Pty Ltd. Display screen or portion thereof with a graphical user interface
USD875761S1 (en) * 2018-05-12 2020-02-18 Canva Pty Ltd. Display screen or portion thereof with a graphical user interface
CN111596812B (zh) * 2019-02-21 2023-04-18 阿里巴巴集团控股有限公司 信息显示方法、设备及存储介质
CN111343409B (zh) * 2020-02-13 2021-12-28 北京翼鸥教育科技有限公司 多个视频窗口动态排布的发起、同步方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0623872A1 (en) * 1993-04-28 1994-11-09 Nec Corporation Apparatus for processing information by executing an operation selected from data processing operations in accordance with a co-ordinate value
JP2003330592A (ja) * 2002-05-10 2003-11-21 Sony Corp 表示制御装置および方法、記録媒体、並びにプログラム
CN1933883A (zh) * 2004-03-22 2007-03-21 任天堂株式会社 游戏装置、游戏程序、存储游戏程序的存储介质以及游戏控制方法
JP5150903B2 (ja) * 2010-07-22 2013-02-27 日本通信電材株式会社 光モジュール

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2951454B2 (ja) * 1991-11-26 1999-09-20 株式会社ピーエフユー カーソル移動処理方式
US5510811A (en) 1992-11-25 1996-04-23 Microsoft Corporation Apparatus and method for controlling cursor movement
WO1999010798A1 (en) 1997-08-28 1999-03-04 Thomson Consumer Electronics, Inc. System and method for navigating within a display having different display sections
US7055108B2 (en) 2001-07-13 2006-05-30 Wind River Systems, Inc. Directional focus manager
JP2006113714A (ja) 2004-10-13 2006-04-27 Matsushita Electric Ind Co Ltd Guiによる情報選択装置
JP4176741B2 (ja) * 2005-05-25 2008-11-05 株式会社スクウェア・エニックス 移動先情報設定装置及び方法、プログラム、並びに記録媒体
JP4137952B2 (ja) * 2006-05-01 2008-08-20 ソニー・エリクソン・モバイルコミュニケーションズ株式会社 情報処理装置、情報処理方法、情報処理プログラム、及び携帯端末装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0623872A1 (en) * 1993-04-28 1994-11-09 Nec Corporation Apparatus for processing information by executing an operation selected from data processing operations in accordance with a co-ordinate value
JP2003330592A (ja) * 2002-05-10 2003-11-21 Sony Corp 表示制御装置および方法、記録媒体、並びにプログラム
CN1933883A (zh) * 2004-03-22 2007-03-21 任天堂株式会社 游戏装置、游戏程序、存储游戏程序的存储介质以及游戏控制方法
JP5150903B2 (ja) * 2010-07-22 2013-02-27 日本通信電材株式会社 光モジュール

Also Published As

Publication number Publication date
EP2328071A4 (en) 2014-04-09
CN102150119A (zh) 2011-08-10
EP2328071A1 (en) 2011-06-01
EP2328071B1 (en) 2016-10-26
US8843833B2 (en) 2014-09-23
JP2010066831A (ja) 2010-03-25
WO2010027088A1 (ja) 2010-03-11
JP5185745B2 (ja) 2013-04-17
US20110167389A1 (en) 2011-07-07

Similar Documents

Publication Publication Date Title
CN102150119B (zh) 信息处理设备
US9154578B2 (en) Display device with scaling of selected object images
JP5253936B2 (ja) 情報処理装置及びプログラム
US20100269060A1 (en) Navigating A Plurality Of Instantiated Virtual Desktops
US20110035663A1 (en) User interface method used in web browsing, electronic device for performing the same and computer readable recording medium thereof
EP2328070B1 (en) Information processing device and program
EP2234011A1 (en) Information processing apparatus and program
JP5100616B2 (ja) 情報処理装置及びプログラム
EP2230587B1 (en) Information processing device and program
CN102144211B (zh) 信息处理设备和方法
KR100644643B1 (ko) 포커싱 영역 확대 처리 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150617

Termination date: 20190908