CN103336648A - 信息处理设备、信息处理方法以及计算机程序 - Google Patents

信息处理设备、信息处理方法以及计算机程序 Download PDF

Info

Publication number
CN103336648A
CN103336648A CN2013100608968A CN201310060896A CN103336648A CN 103336648 A CN103336648 A CN 103336648A CN 2013100608968 A CN2013100608968 A CN 2013100608968A CN 201310060896 A CN201310060896 A CN 201310060896A CN 103336648 A CN103336648 A CN 103336648A
Authority
CN
China
Prior art keywords
operational zone
alternative
viewing area
messaging device
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2013100608968A
Other languages
English (en)
Inventor
市川清人
朝川智
U·蒂普罗费欧
山田敬一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN103336648A publication Critical patent/CN103336648A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/12Use of codes for handling textual entities
    • G06F40/14Tree-structured documents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/957Browsing optimisation, e.g. caching or content distillation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请涉及一种信息处理设备、信息处理方法以及计算机程序。提供了一种信息处理设备,包括:可选择部分分析单元,分析显示单元的显示区中显示的网页中的可选择部分;和布局处理单元,将所述可选择部分作为选择对象重排在操作区中。

Description

信息处理设备、信息处理方法以及计算机程序
技术领域
本公开涉及提供高可操作性的界面的信息处理设备、信息处理方法以及计算机程序。
背景技术
与使用现有界面进行的操作相比,用户使用如在日本特开专利公报No.2011-209787中描述的手势来操作设备、GUI等更加直观。
发明内容
然而,如果被操作对象远离用户或者如果被操作对象较小,需要进行难以利用手势的精确操作。还存在如下情况:由于环境因素等,对手势的识别准确度劣化,导致不能进行正确的操作。此外,在诸如当用户在网站上的选择区中点击小链接时或者当在可操作部分相隔很近的区域中进行操作时的情况下,用户有时会操作不希望的部分。
如果按此方式不能进行正确的操作,那么用户不得不重复该操作好几次,直到可以完成该操作,这会减小用户使用设备的动机。如果使用诸如手的手势的大运动来进行操作,那么还对用户存在身体要求,这会导致用户的手臂疲劳。因此,需要一种允许在不需要精确的操作的情况下容易地进行选择操作的新界面。
根据本公开的一个实施例,提供了一种信息处理设备,包括:可选择部分分析单元,分析显示单元的显示区中显示的网页中的可选择部分;布局处理单元,将所述可选择部分作为选择对象重排在操作区中。
此外,根据本公开的一个实施例,提供了一种信息处理方法,包括:分析显示单元的显示区中显示的网页中的可选择部分;和将所述可选择部分作为选择对象重排在操作区中。
此外,根据本公开的一个实施例,提供了一种使计算机充当包括以下单元的信息处理设备的计算机程序:可选择部分分析单元,分析显示单元的显示区中显示的网页中的可选择部分;和布局处理单元,将所述可选择部分作为选择对象重排在操作区中。
如上所述,根据本公开的实施例,可以实现一种允许在不需要精确的操作的情况下容易地进行选择的新界面。
附图说明
图1是示出根据本公开第一实施例的信息处理设备的总体结构的框图;
图2是示出根据第一实施例的信息处理设备的数据处理单元的结构的框图;
图3是示出根据第一实施例的信息处理设备执行的操作区布局处理的流程图;
图4是说明根据第一实施例的信息处理设备布局的操作区的示例的图;
图5是说明图4所示的操作区中的示例操作的图;
图6是说明图4所示的操作区的另一示例布置的图;
图7是说明操作手势的示例的图;
图8是说明包括由光标指示的位置的区域被放大显示为操作区的情况的图;
图9是说明包括由光标指示的位置的区域被放大显示为操作区的另一示例情况的图;
图10是说明手势感测区的图;
图11是说明小尺寸终端上布局的操作区的示例的图;
图12是说明小尺寸终端上布局的操作区的另一示例的图;
图13是说明对音乐重放应用的操作画面布局的操作区的另一示例的图;
图14是说明对音乐重放应用的操作画面布局的操作区的另一示例的图;以及
图15是示出根据本实施例的信息处理设备的示例硬件结构的框图。
具体实施方式
以下,参照附图详细描述本公开的优选实施例。注意,在本说明书和附图中,用相同的标号表示具有基本相同的功能和结构的结构要素,并略去对这些结构要素的重复说明。
按下述顺序给出以下说明。
1.信息处理设备的结构
2.操作区的布局处理
2-1.网页上的操作区的布局处理
2-2.操作区的变型
3.示例硬件结构
1.信息处理设备的结构
首先,参照图1和2说明根据本公开的第一实施例的信息处理设备的总体结构。图1是示出根据本实施例的信息处理设备100的总体结构的框图。图2是示出根据本实施例的信息处理设备100的数据处理单元160的结构的框图。
根据本实施例的信息处理设备100是利用主要涉及手势但是根据应用也可以是音频输入(如语音)等的操作输入信息,对网站、诸如视频或音乐的内容等进行操作的设备。如图1所示,信息处理设备100包括内容输入单元110、图像/音频输入单元120、图像/音频分析单元130、手势输入单元140、手势分析单元150、数据处理单元160、图像输出单元170以及音频输出单元180。
内容输入单元110是向其输入作为操作对象的内容的接口。内容输入单元110接收从连接到信息处理设备100的设备等输入的诸如图像和音乐的网页或内容,并将这种网页或内容输出到数据处理单元160。
图像/音频输入单元120使得能够通过音频或图像对从内容输入单元110输入的内容进行操作输入。图像/音频输入单元120根据应用,接收诸如音频操作(例如,语音操作)或者触摸或接近图像显示表面的操作的操作输入,并将操作输入信息输出到图像/音频分析单元130。
图像/音频分析单元130基于从图像/音频输入单元120输入的操作输入信息,分析用户执行的操作内容。如果操作输入信息例如是语音,那么图像/音频分析单元130通过语音分析来分析用户表示的操作内容。如果操作输入信息是用户触摸或接近图像显示表面的操作的操作输入信息,那么图像/音频分析单元130指定图像显示画面上的触摸或接近位置,并将相应位置处显示的部分指定为操作对象。按此方式,通过根据从用户输入的操作输入信息分析操作内容,图像/音频分析单元130将分析结果输出到数据处理单元160。
手势输入单元140获得用户作出的手势,作为操作输入信息。手势输入单元140可以是拾取用户作出的手势的图像的图像拾取装置,或者可以是能够识别用户的身体的作出操作的部位的空间位置的传感器。手势输入单元140将所获得的操作输入信息输出到手势分析单元150。
手势分析单元150基于从手势输入单元140输入的操作输入信息,分析用户执行的操作的内容。更具体来说,手势分析单元150根据用户的作出操作输入的部位的位置变化来分析运动等,并指定用户表示的操作的内容。通过根据从用户输入的操作输入信息分析操作的内容,手势分析单元150将分析结果输出到数据处理单元160。
数据处理单元160基于从图像/音频分析单元130和/或手势分析单元150输入的分析结果,对从内容输入单元110输入的内容执行显示处理。在使用手势或触摸操作的系统中,如果操作对象远离用户并且/或者较小,那么需要精确的操作。还存在如下情况:由于环境因素等,对手势的识别准确度劣化,导致难以执行正确的操作。
因此,根据本实施例的数据处理单元160增大后述图像输出单元170上显示的内容中包括的可选择对象的大小,并将所述可选择对象重排在用户进行操作输入的操作区中,使得用户可以容易地选择这种对象。这样,可以改进操作困难的内容的可操作性。更具体来说,如图2所示,数据处理单元160包括操作区显示判定单元162、可选择部分分析单元164以及布局处理单元166。
操作区显示判定单元162判定是否将图像输出单元170上显示的内容中包括的可选择部分重排在与通常显示内容的显示区不同的操作区中。作为一个示例,如果在显示区中显示的内容中存在可选择部分,操作区显示判定单元162可以将这种可选择部分重排并显示在操作区中。作为备选方案,如果可选择部分集中在内容中或者如果可选择部分的字符大小等于或小于指定的大小,那么操作区显示判定单元162可以将这种可选择部分重排并显示在操作区中。当决定显示操作区时,操作区显示判定单元162指示可选择部分分析单元164执行指定要重排在操作区中的可选择部分的处理。
可选择部分分析单元164指定内容中包括的可选择部分中的要重排在操作区中的可选择部分。可选择部分分析单元164分析内容的组成并提取可选择部分。可选择部分分析单元164然后将与所提取的可选择部分有关的信息输出到布局处理单元166。
布局处理单元166将可选择部分分析单元164提取的可选择部分重排并显示在图像输出单元170上的操作区中。布局处理单元166将内容的可选择部分部署在操作区中,使得可选择部分比显示区中显示的原始可选择部分要大,因此更容易通过用户作出的手势、触摸操作等来操作。稍后在本说明书中将详细描述操作区中的可选择部分的重排处理。通过对重排在操作区中的选择对象进行操作输入,用户可以执行选择显示在显示区中的内容的可选择部分的操作。
在这种时候,布局处理单元166可以产生表示操作区中选择的选择对象与显示区中显示的内容的可选择部分之间的对应关系的显示。作为示出这种对应关系的显示,作为可设想的示例,可以用相同类型的图框围绕操作区中选择的选择对象和显示区中显示的内容的对应可选择部分,或者使用相同的颜色显示选择对象和可选择部分。布局处理单元166从图像/音频分析单元130或手势分析单元150获得用户作出的操作的内容。如果用户选择的位置在操作区的内部,那么布局处理单元166产生示出操作区中选择的选择对象与内容的对应可选择部分之间的对应关系的显示。这样,用户容易识别内容的哪个部分对应于操作区中所选择的部分。
布局处理单元166将所生成的操作区的布局信息、操作区中选择的选择对象与显示区中的对应可选择部分的对应关系信息等输出到图像输出单元170,以显示这种信息。如果所显示的内容还包括音频信息,那么布局处理单元166将音频信息输出到音频输出单元180。
图像输出单元170是基于从布局处理单元166输入的布局信息、对应关系信息等执行显示的显示单元。作为图像输出单元170,作为一个示例,可以使用液晶显示器或有机EL显示器。
音频输出单元180输出从布局处理单元166输入的音频信息。作为音频输出单元180,作为一个示例,可以使用诸如扬声器的音频输出设备。
2.操作区的布局处理
2-1.网页上的操作区的布局处理
为了使得更容易选择图像输出单元170的显示区中显示的内容中包括的可选择部分,根据本实施例的信息处理设备100将这种可选择部分作为选择对象重排在操作区中。现在将参照图3到7描述根据本实施例的信息处理设备100执行的操作区布局处理。图3是示出根据本实施例的信息处理设备100执行的操作区布局处理的流程图。图4是说明根据本实施例的信息处理设备100布局的操作区的示例的图。图5是说明图4所示的操作区中的示例操作的图。图6是说明图4所示的操作区的另一示例布置的图。图7是说明操作手势的一个示例的图。
如图3所示,根据本实施例的信息处理设备100执行的操作区布局处理以从图像输出单元170获得表示要输出到图像输出单元170的内容的内容数据开始(S100)。当获得了内容数据时,内容输入单元110将内容数据输出到数据处理单元160。
接着,数据处理单元160通过操作区显示判定单元162分析在所获得的内容数据中是否包括可选择部分(S110)。在步骤S110中,分析内容数据以判定是否要将显示区中显示的内容中包括的可选择部分重排在与显示区不同的操作区中。基于该分析结果,操作区显示判定单元162判定是否执行将内容中包括的可选择部分重排在操作区中的布局处理(S120)。
作为示例,可以根据显示区中显示的内容中是否存在可选择部分、内容中是否有集中的可选择部分、或者可选择部分的字符大小是否等于或小于指定大小,来执行步骤S120中的判定。例如,如果在内容中存在可选择部分,那么可以执行后述步骤S130、S140中的处理,并将这种可选择部分重排并显示在操作区中。如果在显示区中显示的内容中,指定面积中的可选择部分的数量是指定数量或更大的数量,那么可以判定存在集中的可选择部分并且要将这种可选择部分重排并显示在操作区中。作为替换方式,如果内容中的可选择部分的字符大小等于或小于指定大小,那么可以将可选择部分重排并显示在操作区中。
即,当判定难以使用手势、触摸操作等选择内容中包括的可选择部分时,操作区显示判定单元162将可选择部分重排在操作区中,以使得用户更容易执行选择操作。如果在步骤S120中决定显示操作区并重排内容的可选择部分,那么可选择部分分析单元164指定要重排在操作区中的可选择部分(S130)。可选择部分是具有来自内容的源数据的链接的链接部分,并且可选择部分分析单元164通过提取这种链接部分来获得要重排在操作区中的可选择部分。
作为一个示例,如图4所示,作为内容的一个示例的网页显示在图像输出单元170的图像显示屏幕200上。图像显示屏幕200包括如通常那样显示内容的显示区210和将内容中包括的可选择部分重排并显示为选择对象的操作区220。在图4所示的示例中,将显示区210和操作区220设置在图像输出单元170的同一屏幕上。这样,用户更容易同时查看显示区210和操作区220并且更容易识别操作区220中的操作与显示区210中的操作位置之间的对应关系。注意,还可以仅当在步骤S120中作出了显示操作区220的决定时才显示操作区220,而当未作出这种决定时在图像输出单元170的图像显示屏幕200上仅显示显示区210。
作为一个示例,图4所示的显示区210中显示的网页包括到“SiteMap”和“Group Link”的链接部分212A,和到“Contact/Support”,“Technical Information”等的链接部分212B。此外,网页包括到“ProductInformation”,“Games”,“Movies”,“Music”等的链接部分212C,以及作为一个示例的显示有在链接部分212B、212A中选择的项目的详细信息显示区212D。详细信息显示区212D中显示的信息也可以包括链接到其他网页的链接部分。在步骤S130中,从源数据提取诸如所示出的示例的网页中的这种链接部分。
如果在步骤S130中指定了可选择部分,那么布局处理单元166将可选择部分作为选择对象重排在操作区220中(S140)。如图4所示,例如,将从内容指定的候选选择部分重排并作为操作区220中的选择对象222显示在一条线上(在此,一列)。此时,通过使操作区220中的选择对象222的大小大于显示区210中的相应可选择部分的大小,放大了识别操作的区域,并且用户变得可以在不进行精确的操作输入的情况下选择所需可选择部分。
当从显示区210提取的可选择部分的数量较大时,选择对象222的数量会存在相应的增加,因而如果操作区220中的选择对象222的大小增大,不可能将所有选择对象222都显示在操作区220中。在此情况下,如图4所示,例如,按指定大小显示要显示在操作区220中的多个选择对象222中的仅一些选择对象。为了显示不适合在操作区220中的选择对象222,在操作区220中设置滚动按钮224a,224b,从而通过按压这些按钮,用户可以按指定方向滚动布置在操作区220中的列中的选择对象222。这样,即使在内容中包括很多数量的可选择部分,也可以在操作区220中以可选择的方式显示与可选择部分对应的每个选择对象。
一旦在步骤S140中决定了操作区220的布局,布局处理单元166就在图像输出单元170上显示操作区220(S150)。这样,如图4所示,例如,在显示区210中如通常那样显示内容,并且还在操作区220中作为选择对象222显示内容中包括的可选择部分。可以通过用于操作这种信息的光标230来操作图像显示屏幕200中显示的信息,并且可以通过用户的手势或图像显示屏幕200上的触摸操作来移动光标230。用户可以移动光标230并直接操作显示区210上显示的可选择部分,或者可以通过操作操作区220中的选择对象222来操作显示区210中显示的内容。
在此,当用光标230操作了操作区220中的选择对象222时,布局处理单元166执行示出所选择的选择对象222与内容中的对应可选择部分之间的对应关系的对应显示处理。如图4所示,例如,对应显示可以将相同类型的图框225、215附加到当前用光标230选择的选择对象222和与这种对象对应的可选择部分,并且/或者可以按相同的方式突出显示所选择的选择对象222和可选择部分两者。通过执行这种对应显示,用户可以容易地识别在操作区220中正在操作内容的哪个部分,这改进了对操作区220的可操作性。
如图5所示,例如,假设对应显示从图4的其中选择了“Movies”选择对象222的状态变化到选择“Internet”选择对象222的状态。当这样时,跟随当前选择的选择对象222的变化,显示区210中显示的内容中的对应可选择部分的对应显示(图框225、215)的位置也变化。
至此完成了根据本实施例的信息处理设备100执行的操作区布局处理的描述。按此方式,图像显示屏幕200设置有显示诸如网页的内容的显示区210和其中内容中的可选择部分被重排为选择对象222的操作区220。这样,通过将选择对象222的大小设定为大于可选择部分的大小,可以促进对难以操作的操作对象的操作。
注意,尽管在图4的示例中将操作区220设置在图像显示屏幕200的右边缘,但是本公开并不限于该示例。作为一个示例,如图6所示,操作区220可以设置在屏幕的左边缘。可以在考虑用户在图像显示屏幕200上的用户容易操作的位置处的支配手的情况下设置操作区220的显示位置。
此外,当如图4所示将选择对象222重排在操作区220中的一列中时,在对选择对象222进行选择操作之后,可以根据用户输入的下一操作输入执行随后的处理。作为一个示例,如图7所示,以当前选择的选择对象222(位于中央的单元)为标准定义8个径向方向。在此情况下,如果检测到作出手势的手、触摸图像显示屏幕200的手指等从当前选择的选择对象222起沿这些方向中的一个移动了,那么数据处理单元160执行根据这种方向的移动分配的处理。作为一个示例,在图7中,如果用户从当前选择的选择对象222的位置起沿(朝着图中的右侧的)四个方向移动了,那么可以执行与当前选择的选择对象222相关的处理。这样,用户可以在对选择对象222进行了选择操作之后执行与选择对象222相关的处理,这改进了用户的可操作性。
注意,作为在对选择对象222的选择操作之后使得执行下一处理的操作,除了图7中的示例以外,还可以通过语音指示下一处理或者通过改变作出手势的手的形状来指示下一处理。作为替换方案,可以通过将光标230放置在当前选择的选择对象222上指定时间或者更长的时间,作出长按操作,来指示下一处理。
2-2.操作区的变型
操作区的布局可以是除图4所示的以外的布局。经受操作的内容也可以是除网页以外的内容。现在将参照图8至14描述各种内容的操作区的变型。
(1)可选择部分的放大显示
首先,如果内容是网站,那么作为与图4不同的操作区的变型,可以将包括光标230所指示的位置的区域放大并将这种放大部分显示为操作区240。作为一个示例,在图8中的上部,在图像输出单元170的图像显示屏幕200上设置如通常那样显示网站的显示区210。当将光标230放置在显示区210中的网页的可选择部分上时,布局处理单元166原样放大光标230的位置周围的可选择部分的区域,并在显示区210上作为操作区240显示这种放大部分。将操作区240中的每个可选择部分设定为选择对象242。
将操作区240显示在放大前的原始区旁边。这样,用户可以容易地查看放大前的原始内容和操作区240中的选择对象242。用户还可以在显示区210中执行操作,然后通过手势连续地在操作区240中执行操作,这改进了可操作性。此外,通过用相同类型的图框等围绕操作区240和显示区210中的放大前的原始部分,可以清楚地示出操作区240与显示区210的这种部分之间的对应关系。
当用光标230选择了操作区240中的一个选择对象242时,与显示区210对应的可选择部分被选中。此时,如图8的下部所示,一旦选中了操作区240中的选择对象242,就执行示出这种选择对象242与对应于这种选择对象242的显示区210中的可选择部分之间的对应关系的对应显示处理。如在图8中的下部所示,例如,对应显示可以用相同类型的图框245、215围绕用光标230当前选择的选中对象242和与其对应的可选择部分,或者可以用相同类型的突出显示来显示这两者。通过按此方式执行对应显示,用户可以容易地识别正在操作操作区240中的哪部分内容,这使得可以改进操作区240中的可操作性。
除了如图8所示的网页的结构以外,还可以按与诸如图9所示的图像显示屏幕300相同的方式来布局操作区320。即,当在显示区310中显示新闻列表时,例如,将包括用图标330表示的位置的区域放大显示为操作区320。此时,将操作区320显示在放大的原始区域旁边。这样,由于在操作区320中放大显示在显示区310中选择区较小的新闻列表中的各个项目,因此放大了选择区,这方便了对所需项目的选择操作。
此时,按与图8所示相同的方式,可以通过用相同类型的图框等围绕操作区320和放大的对应原始部分,可以表示这两者之间的对应关系。如果用光标330选择了操作区320中的一个选择对象,那么可以执行对应显示,以示出所选择的选择对象与对应于该对象的显示区310的可选择部分之间的对应关系。这样,用户可以容易地识别正在操作操作区320中的哪个部分的内容,这使得可以改进操作区320中的可操作性。
注意,通过如图8和9所示将显示区的一部分放大显示为操作区,可以如上所述地执行显示区中的操作,然后连续地通过手势执行操作区中的操作。此外,通过增大操作区中的每个选择对象的选择区域,也放大了识别手势的感测区域,这使得即使如图10所示操作不精确时也可以识别手势操作。
(2)应用于小尺寸终端
从可操作性的观点来看,预期主要当在电视机、桌面计算机的显示器或大屏幕上显示内容时,使用如图4所示的操作区220。不过,还可以在诸如移动电话、智能电话或平板计算机之类的小尺寸终端上以相同的方式通过将显示区中显示的内容中的可选择部分重排成操作区中的选择对象,来改进可操作性。由于对于小尺寸终端来说图像输出单元170的显示区较小,因此设置操作区是尤其有效的。
作为一个示例,当在智能电话上对内容进行操作时,如图11所示,在图像显示屏幕400上显示如通常那样显示诸如网页的内容的显示区410,和将显示区410的可选择部分重排成选择对象的操作区420。按与图3中的处理相同的方式,在显示区410中指定可选择部分,并将所述可选择部分作为选择对象重排成操作区420中的一条线。这样,从可操作性的观点来看,可以将操作区420设置在屏幕的下部,并且可以将选择对象排列成水平的一行。即,对于诸如图11所示的终端,可以在考虑用户保持终端时的操作便利的情况下,通过将操作区420设置在屏幕的下部,来改进可操作性。
如果从显示区410提取的可选择部分的数量较大,并且不可能将所有这种部分都显示为操作区420中的指定大小或更大的选择对象,那么可以在操作区420中设置滚动按钮424a,424b。通过按压这些滚动按钮424a,424b,用户可以按指定方向滚动布置在操作区420中的行中的选择对象。这样,即使在内容中包括很多数量的可选择部分,也可以在操作区420中以可选择的方式显示与可选择部分对应的每个选择对象。
此外,一旦用光标430选择了操作区420中的选择对象,就可以执行示出所选择的选择对象与显示区410中的对应可选择部分之间的对应关系的对应显示(图框425、415)。这样,用户可以容易地识别正在操作操作区420中的哪部分内容,这使得可以改进操作区420中的可操作性。
作为替换方案,如图12所示,还可以通过将包括光标430所示的位置的区域放大显示为操作区440,在智能电话上对内容进行操作。作为一个示例,如图12所示,在图像输出单元170的图像显示屏幕400上设置如通常那样显示网页的显示区410。当将光标430放置在显示区410中的网页的可选择部分上时,布局处理单元166原样放大光标430的位置附近区域的可选择部分,并在显示区410上作为操作区440显示这种放大部分。这样,操作区440中的各个可选择部分变成选择对象。
作为一个示例,按与图8相同的方式,将操作区440显示在放大前的原始区旁边。这样,用户可以容易地同时查看放大前的原始内容和操作区440中的选择对象。还变得可以在显示区410中执行操作,然后通过手势连续地在操作区440中执行操作,这改进了可操作性。此外,通过用相同类型的图框等围绕操作区440和显示区410中的放大前的原始部分,可以清楚地示出操作区440与显示区410的这种部分之间的对应关系。
此外,当用光标430选择了操作区440中的选择对象时,显示区410中的对应可选择部分被选中。此时,执行示出所选择的选择对象与显示区410中的对应可选择部分之间的对应关系的对应显示处理。例如,对应显示可以将相同类型的图框附加到用光标430当前选择的选择对象和与该对象对应的可选择部分,或者可以用相同方式突出显示所选择的对象和可选择部分。通过执行这种对应显示,用户可以容易地识别正在操作操作区440中的哪部分内容,这改进了操作区440的可操作性。
(3)替换应用
如上所述,尽管描述了当操作诸如网页的内容时通过与显示区一起显示操作区来改进可操作性的情况,但是根据本实施例的信息处理设备100执行的布局处理还可以应用于其他应用。作为另一示例,可以在重放音乐数据的音乐重放应用中使用本实施例。图13示出了音乐重放应用的操作画面500的一个示例。在操作画面500中,显示有显示音乐数据列表的显示区510和将显示区510的可选择部分重排成选择对象的操作区520。在显示区510中的列表中显示有音乐唱片集中包括的歌曲的音轨数量、歌曲标题、艺术家姓名、唱片集名等,并且可以对从列表中选择的歌曲执行诸如重放的操作。这样,由于显示区410上选择歌曲的选择区较小,因此用户很容易作出错误的操作,导致操作困难。因此,使用根据本实施例的信息处理设备100,将列表中的各个歌曲设定为可选择部分,并将这些歌曲重排为操作区520中的选择对象522。
如图13所示,例如,可以将显示音轨数量和标题的选择对象522重排成操作区520中的一列。如果显示区510中显示的歌曲数量很大并且不可能将所有歌曲显示为操作区520中的指定大小或更大的选择对象522,那么可以在操作区520中设置滚动按钮524a,524b。通过按压这些滚动按钮524a,524b,用户可以按指定方向滚动布置在操作区520中的列中的选择对象522。这样,即使存在很多歌曲,也可以在操作区520中以可选择的方式显示与各首歌曲对应的所有选择对象522。
一旦选择了操作区520中的选择对象522,就可以执行示出所选择的选择对象522与显示区510中的对应可选择部分之间的对应关系的对应显示(图框525、515)。这样,用户可以容易地识别正在操作操作区520中的哪部分内容,这使得可以改进操作区520中的可操作性。
作为替换方案,如图14所示,还可以将包括光标530所示的位置的区域放大显示为操作区540。在图像输出单元170显示的图像显示画面500上设置如通常那样显示歌曲列表的显示区510。当将光标530放置在显示区510中的歌曲列表的可选择部分上时,布局处理单元166原样放大光标530的位置附近的可选择部分,并在显示区510上作为操作区540显示这种放大部分。这样,操作区540中的各个可选择部分变成选择对象。
作为一个示例,按与图8相同的方式,将操作区540显示在放大前的原始区旁边。这样,用户可以容易地同时查看放大前的原始内容和操作区540中的选择对象。还变得可以在显示区510中执行操作,然后通过手势连续地在操作区540中执行操作,这改进了可操作性。此外,通过用相同类型的图框等围绕操作区540和显示区510中的放大前的原始部分,可以清楚地示出操作区540与显示区510的这种部分之间的对应关系。
此外,当用光标530选择了操作区540中的选择对象时,显示区510中的对应可选择部分被选中。此时,执行示出所选择的选择对象与显示区510中的对应可选择部分之间的对应关系的对应显示处理。例如,对应显示可以将相同类型的图框附加到用光标530当前选择的选择对象和与该对象对应的可选择部分,或者可以用相同方式突出显示所选择的对象和可选择部分。利用这种对应显示,用户可以容易地识别正在操作操作区540中的歌曲列表中的哪部分,这改进了操作区540的可操作性。
至此完成了对根据本实施例的信息处理设备100的结构和这种信息处理设备100执行的操作区布局处理的描述。作为一个示例,信息处理设备100从显示区中显示的诸如网页的内容提取可以经受手势操作(即,可以被选择)的可选择部分,并将这种可选择部分作为要经受手势操作的新选择对象布局在操作区中。这样,通过显示比显示区中显示的可选择部分大的选择对象,放大了选择区域,用户变得可以在不进行精确的操作的情况下容易地选择所需可选择部分。此外,还按可理解的方式同时显示在操作区中选择的选择对象与显示区中显示的原始网页之间的对应关系。还可以执行示出这种对应关系的对应显示。这样,可以进一步改进可操作性。
3.示例硬件结构
可以用硬件也可以用软件执行根据本实施例的信息处理设备100的处理。在后一情况下,信息处理设备100可以如图15所示的那样构成。现在将参照图15说明根据本实施例的信息处理设备100的示例硬件结构。
如上所述,根据本实施例的信息处理设备100可以用诸如计算机的处理设备来实现。如图15所示,信息处理设备100包括CPU(中央处理器)901、ROM(只读存储器)902、RAM(随机存取存储器)903以及主机总线904a。信息处理设备100还包括桥接器904、外部总线904b、接口905、输入装置906、输出装置907、存储装置(HDD)908、驱动器909、连接端口911以及通信装置913。
CPU901充当计算处理设备和控制设备,并根据各种程序控制信息处理设备100内部的总体操作。CPU901可以是微处理器。ROM902存储CPU901使用的程序、计算参数等。RAM903临时存储CPU901执行的程序、在这种执行过程中根据需要改变的参数等。这些部件通过由CPU总线等构成的主机总线904a相互连接。
主机总线904a通过桥接器904连接到作为PCI(外围组件互连/接口)总线等的外部总线904b。注意,主机总线904a、桥接器904以及外部总线904b不必分开构成,可以使用单条总线实现这些功能。
输入装置906包括诸如鼠标、键盘、触摸面板、按钮、麦克风、开关、控制杆之类的输入装置,其使得用户能够输入信息,还包括基于用户进行的输入生成输入信号并将输入信号输出到CPU901等的输入控制电路。例如,输出装置907包括诸如液晶显示器(LCD)装置、OLED(有机发光二极管)装置、或灯之类的显示装置,和/或诸如扬声器的音频输出装置。
存储装置908是信息处理设备100的存储单元的一个示例并且是存储数据的装置。存储装置908可以包括存储介质、将数据记录在存储介质上的记录装置、从存储介质读取数据的读取装置、以及删除存储介质上记录的数据的删除装置。存储装置908由HDD(硬盘驱动器)等构成。这种存储装置908驱动硬盘并存储由CPU901执行的程序和/或各种数据。
驱动器908是存储介质的读取器/写入器,并嵌入在信息处理设备100中或者外部附接到信息处理设备100。驱动器909读取记录在诸如磁盘、光盘、磁光盘或半导体存储器之类的已经装载的可移动记录介质上的信息,并将这种信息输出到RAM903。
连接端口911是连接到外部装置的接口,并且是用于能够例如使用USB(通用串行总线)进行数据传送的外部装置的连接端口。通信装置913是由用于连接到通信网络10的通信装置等构成的通信接口。此外,通信装置913可以是兼容无线LAN(局域网)的通信装置、兼容无线USB的通信装置,或者使用线路执行通信的有线通信装置。
尽管以上参照附图详细描述了本公开的优选实施例,但是本公开的技术范围并不限于这些实施例。本领域的技术人员应明白,根据设计要求和其他因素,可以作出各种修改、组合、子组合和变更,只要它们在所附权利要求或其等同物的范围之内即可。
注意,尽管在上述实施例中,根据用户用他/她的手指等触摸了操作区的操作位置来决定显示成图像输出单元170的操作区中的选择对象的可选择部分,但是本公开并不限于该示例。例如,图像/音频输入单元120和/或手势输入单元140能够识别输入物体接近了图像显示屏幕的位置。在这种情况下,布局处理单元166可以将输入物体接近了图像输出单元170的显示区的位置附近存在的可选择部分作为选择对象重排在操作区中。如果接近屏幕的输入对象的位置移动,那么操作区中显示的选择对象随输入对象的这种移动而改变。这样,以更快的定时将用户要操作的显示区中的可选择部分显示在操作区中,这使得可以进一步改进可操作性。
此外,本技术也可以如下构成。
(1)一种信息处理设备,包括:
可选择部分分析单元,分析显示单元的显示区中显示的网页中的可选择部分;和
布局处理单元,将所述可选择部分作为选择对象重排在操作区中。
(2)根据(1)所述的信息处理设备,
还包括操作分析单元,基于使用户能够进行操作输入的操作输入单元的输入结果,分析操作内容,
其中所述布局处理单元针对根据所述操作分析单元的分析结果选择的操作区中的选择对象和网页的对应可选择部分,显示对应显示,所述对应显示表示所述选择对象与所述可选择部分之间的对应关系。
(3)根据(2)所述的信息处理设备,
其中所述布局处理单元根据用户的操作输入,移动为所选择的选择对象和网页的对应可选择部分显示的对应显示。
(4)根据(3)所述的信息处理设备,
其中用户的操作输入是移动光标以在显示区和操作区中执行选择操作的操作,并且
根据随用户的操作输入而移动的光标的位置来移动所述对应显示。
(5)根据(4)所述的信息处理设备,
其中如果在用光标选择了操作区中的所述选择对象中的一个选择对象的状态下用户作出了指定的操作输入,那么执行与所述操作输入相关的处理。
(6)根据(1)至(5)中的任何一项所述的信息处理设备,
其中所述选择对象的大小大于网页中的所述可选择部分的大小。
(7)根据(1)至(6)中的任何一项所述的信息处理设备,
其中所述可选择部分分析单元在网页中的所述可选择部分的字符大小小于指定的大小时,使所述布局处理单元生成重排所述选择对象的操作区。
(8)根据(1)至(6)中的任何一项所述的信息处理设备,
其中所述可选择部分分析单元在显示区中的指定面积中存在至少指定数量的可选择部分时,使所述布局处理单元生成重排所述可选择部分的操作区。
(9)根据(1)至(8)中的任何一项所述的信息处理设备,
其中将所述显示区和所述操作区显示在同一画面上。
(10)根据(1)至(9)中的任何一项所述的信息处理设备,
其中所述布局处理单元邻近显示网页的所述显示区地显示所述操作区。
(11)根据(1)至(11)中的任何一项所述的信息处理设备,
其中将所述选择对象配置在所述操作区中的一条线上。
(12)根据(11)所述的信息处理设备,
其中当在所述操作区中不可能显示与所述显示区中的可选择部分对应的所有选择对象时,所述布局处理单元按可滚动的方式显示所述操作区中显示的所述选择对象,并且伴随对所述操作区中的选择对象的滚动,滚动所述显示区中的网页,从而在所述显示区中显示与所述操作区中显示的选择对象对应的可选择部分。
(13)根据(1)至(12)中的任何一项所述的信息处理设备,
其中所述布局处理单元根据用户进行操作输入而使用的输入物体的操作位置,决定所述操作区在所述显示单元上的显示位置。
(14)根据(1)至(13)中的任何一项所述的信息处理设备,
其中当作为使得用户能够进行操作输入的操作输入单元的输入结果而能够获得对所述显示单元的接近状态时,所述布局处理单元将输入物体接近所述显示单元的显示区的位置附近存在的可选择部分作为选择对象重排在所述操作区中。
本公开包含与于2012年3月7日在日本专利局提交的日本在先专利申请JP 2012-050276中公开的主题相关的主题,通过引用将其全部内容并入于此。

Claims (16)

1.一种信息处理设备,包括:
可选择部分分析单元,分析显示单元的显示区中显示的网页中的可选择部分;和
布局处理单元,将所述可选择部分作为选择对象重排在操作区中。
2.根据权利要求1所述的信息处理设备,
还包括操作分析单元,基于使用户能够进行操作输入的操作输入单元的输入结果,分析操作内容,
其中所述布局处理单元针对根据所述操作分析单元的分析结果选择的操作区中的选择对象和网页的对应可选择部分,显示对应显示,所述对应显示表示所述选择对象与所述可选择部分之间的对应关系。
3.根据权利要求2所述的信息处理设备,
其中所述布局处理单元根据用户的操作输入,移动针对所选择的选择对象和网页的对应可选择部分显示的对应显示。
4.根据权利要求3所述的信息处理设备,
其中用户的操作输入是移动光标以在显示区和操作区中执行选择操作的操作,并且
根据随用户的操作输入而移动的光标的位置来移动所述对应显示。
5.根据权利要求4所述的信息处理设备,
其中如果在用光标选择了操作区中的所述选择对象中的一个选择对象的状态下用户作出了指定的操作输入,那么执行与所述操作输入相关的处理。
6.根据权利要求1所述的信息处理设备,
其中所述选择对象的大小大于网页中的所述可选择部分的大小。
7.根据权利要求1所述的信息处理设备,
其中所述可选择部分分析单元在网页中的所述可选择部分的字符大小小于指定的大小时,使所述布局处理单元生成重排所述选择对象的操作区。
8.根据权利要求1所述的信息处理设备,
其中所述可选择部分分析单元在显示区中的指定面积中存在至少指定数量的可选择部分时,使所述布局处理单元生成重排所述可选择部分的操作区。
9.根据权利要求1所述的信息处理设备,
其中将所述显示区和所述操作区显示在同一画面上。
10.根据权利要求1所述的信息处理设备,
其中所述布局处理单元邻近显示网页的所述显示区地显示所述操作区。
11.根据权利要求1所述的信息处理设备,
其中在所述操作区中将所述选择对象配置在一条线上。
12.根据权利要求11所述的信息处理设备,
其中当在所述操作区中不可能显示与所述显示区中的可选择部分对应的所有选择对象时,所述布局处理单元按可滚动的方式显示所述操作区中显示的所述选择对象,并且伴随对所述操作区中的选择对象的滚动,滚动所述显示区中的网页,从而在所述显示区中显示与所述操作区中显示的选择对象对应的可选择部分。
13.根据权利要求1所述的信息处理设备,
其中所述布局处理单元根据用户进行操作输入而使用的输入物体的操作位置,决定所述操作区在所述显示单元上的显示位置。
14.根据权利要求1所述的信息处理设备,
其中当作为使得用户能够进行操作输入的操作输入单元的输入结果而能够获得对所述显示单元的接近状态时,所述布局处理单元将输入物体接近所述显示单元的显示区的位置附近存在的可选择部分作为选择对象重排在所述操作区中。
15.一种信息处理方法,包括:
分析显示单元的显示区中显示的网页中的可选择部分;和
将所述可选择部分作为选择对象重排在操作区中。
16.一种使计算机充当包括以下单元的信息处理设备的计算机程序:
可选择部分分析单元,分析显示单元的显示区中显示的网页中的可选择部分;和
布局处理单元,将所述可选择部分作为选择对象重排在操作区中。
CN2013100608968A 2012-03-07 2013-02-27 信息处理设备、信息处理方法以及计算机程序 Pending CN103336648A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012-050276 2012-03-07
JP2012050276A JP5987366B2 (ja) 2012-03-07 2012-03-07 情報処理装置、情報処理方法およびコンピュータプログラム

Publications (1)

Publication Number Publication Date
CN103336648A true CN103336648A (zh) 2013-10-02

Family

ID=49115181

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2013100608968A Pending CN103336648A (zh) 2012-03-07 2013-02-27 信息处理设备、信息处理方法以及计算机程序

Country Status (3)

Country Link
US (1) US20130238976A1 (zh)
JP (1) JP5987366B2 (zh)
CN (1) CN103336648A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104281392A (zh) * 2014-10-02 2015-01-14 刘健萍 一种控制屏幕指针移动的方法和装置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6236790B2 (ja) * 2013-02-04 2017-11-29 富士通株式会社 操作メニュー制御プログラム、操作メニュー制御装置、及び、操作メニュー制御方法
JP5776725B2 (ja) * 2013-05-14 2015-09-09 コニカミノルタ株式会社 画像処理連携システム、携帯端末装置、画像処理連携方法及び画像処理連携プログラム
US20150169153A1 (en) * 2013-12-17 2015-06-18 Lenovo (Singapore) Pte, Ltd. Enhancing a viewing area around a cursor
JP6175375B2 (ja) * 2014-01-30 2017-08-02 株式会社Nttドコモ 表示装置、表示方法及びプログラム
JP6762812B2 (ja) * 2016-09-05 2020-09-30 東芝テック株式会社 操作入力装置及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020143826A1 (en) * 2001-03-29 2002-10-03 International Business Machines Corporation Method, apparatus, and program for magnifying the text of a link while still retaining browser function in the magnified display
CN101093666A (zh) * 2006-06-19 2007-12-26 上海乐金广电电子有限公司 音频歌曲推荐方法
CN102193965A (zh) * 2010-03-03 2011-09-21 宏达国际电子股份有限公司 景点信息浏览方法、装置及系统

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1115817A (ja) * 1997-06-24 1999-01-22 Sharp Corp 情報表示装置
US6643824B1 (en) * 1999-01-15 2003-11-04 International Business Machines Corporation Touch screen region assist for hypertext links
JP2002149679A (ja) * 2000-11-10 2002-05-24 Newcom:Kk 文書閲覧システム、文書閲覧方法及び情報記録媒体
JP2004127171A (ja) * 2002-10-07 2004-04-22 Canon Inc ハイパーテキスト閲覧装置
US9607092B2 (en) * 2003-05-20 2017-03-28 Excalibur Ip, Llc Mapping method and system
US20060218004A1 (en) * 2005-03-23 2006-09-28 Dworkin Ross E On-line slide kit creation and collaboration system
KR100774927B1 (ko) * 2006-09-27 2007-11-09 엘지전자 주식회사 이동통신 단말기, 메뉴 및 아이템 선택방법
JP5189281B2 (ja) * 2006-12-06 2013-04-24 富士ゼロックス株式会社 表示制御装置および表示制御プログラム
JP2008305087A (ja) * 2007-06-06 2008-12-18 Toshiba Matsushita Display Technology Co Ltd 表示装置
US8671355B2 (en) * 2007-10-05 2014-03-11 Mapquest, Inc. Methods and systems for decluttering icons representing points of interest on a map
TW200923758A (en) * 2007-11-27 2009-06-01 Wistron Corp A key-in method and a content display method of an electronic device, and the application thereof
JP2010140199A (ja) * 2008-12-10 2010-06-24 Fujitsu Ltd 情報処理装置、表示変更方法及び表示変更プログラム
JP2011113312A (ja) * 2009-11-26 2011-06-09 Samsung Electronics Co Ltd コンテンツ表示装置及びコンテンツ表示方法
TWI455075B (zh) * 2010-03-03 2014-10-01 Htc Corp 景點資訊瀏覽方法、裝置、系統及電腦程式產品
JP5625599B2 (ja) * 2010-08-04 2014-11-19 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020143826A1 (en) * 2001-03-29 2002-10-03 International Business Machines Corporation Method, apparatus, and program for magnifying the text of a link while still retaining browser function in the magnified display
CN101093666A (zh) * 2006-06-19 2007-12-26 上海乐金广电电子有限公司 音频歌曲推荐方法
CN102193965A (zh) * 2010-03-03 2011-09-21 宏达国际电子股份有限公司 景点信息浏览方法、装置及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104281392A (zh) * 2014-10-02 2015-01-14 刘健萍 一种控制屏幕指针移动的方法和装置

Also Published As

Publication number Publication date
US20130238976A1 (en) 2013-09-12
JP5987366B2 (ja) 2016-09-07
JP2013186628A (ja) 2013-09-19

Similar Documents

Publication Publication Date Title
CN101727938B (zh) 信息处理装置、信息处理方法
CN103336648A (zh) 信息处理设备、信息处理方法以及计算机程序
US9754019B2 (en) Information processing device, information processing method and computer program for highlighting content in an electronic document
CN104978317B (zh) 网页生成方法及装置、网站生成方法及建站服务器
US20090289913A1 (en) Terminal having touchscreen and method for searching data thereof
US9542407B2 (en) Method and apparatus for media searching using a graphical user interface
JP5000776B1 (ja) 情報提供システム、情報提供システムの制御方法、情報提供装置、プログラム、及び情報記憶媒体
CN102707866A (zh) 用于导航基于层级式菜单的用户界面的方法和装置
US20160334988A1 (en) Display device and method for providing recommended characters from same
CN110012327B (zh) 电子设备、电子设备的控制方法和计算机可读记录介质
US20170083195A1 (en) Method and apparatus for performing url linkage function using the keypad
CN105824499A (zh) 一种窗口的控制方法及移动终端
JP6206202B2 (ja) 情報処理装置及び情報処理プログラム
CN106446180A (zh) 一种歌曲的识别方法及移动终端
US9542098B2 (en) Display control apparatus and method of controlling display control apparatus
JP6237135B2 (ja) 情報処理装置及び情報処理プログラム
CN104536674A (zh) 一种用于在移动设备中对网页执行操作的方法和装置
JP2018181294A (ja) カメラベースのグラフィカルユーザインタフェースを提供するための方法およびシステム、コンピュータシステム、プログラム
KR20150097250A (ko) 태그 정보를 이용한 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
CN105468254A (zh) 内容搜索设备和用于搜索内容的方法
CN109492165B (zh) 一种网络搜索方法及电子设备
JP6538291B1 (ja) 表示プログラム、情報処理装置及び表示方法
KR101374550B1 (ko) 이북 단말에서 탭 기반의 페이지 액세스 방법 및 이를 위한 컴퓨터로 판독가능한 기록매체
JP2013069007A (ja) 電子ブック処理装置、電子ブック処理方法、およびプログラム
JP2024135739A (ja) 表示装置、表示方法、表示プログラム、表示システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20131002