CN104081335A - 信息处理设备、信息处理方法和程序 - Google Patents

信息处理设备、信息处理方法和程序 Download PDF

Info

Publication number
CN104081335A
CN104081335A CN201380006749.0A CN201380006749A CN104081335A CN 104081335 A CN104081335 A CN 104081335A CN 201380006749 A CN201380006749 A CN 201380006749A CN 104081335 A CN104081335 A CN 104081335A
Authority
CN
China
Prior art keywords
content screen
screen
signal conditioning
notification voice
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380006749.0A
Other languages
English (en)
Inventor
宫沢悠介
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN104081335A publication Critical patent/CN104081335A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Stereophonic System (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

提供有一种信息处理设备，该信息处理设备包括：显示控制单元，其被配置为发起内容屏幕的选择性显示；以及声音输出控制单元，其被配置为：生成与当前未显示的第一内容屏幕关联的通知声音的定位信息，以及在第二内容屏幕正在被显示的同时，发起根据定位信息的通知声音对用户的输出。

Description

信息处理设备、信息处理方法和程序
技术领域
本公开涉及一种信息处理设备、信息处理方法和程序。
背景技术
近年来，随着信息处理技术的发展，用户处理信息的量增加了。至少出于该原因，如何提取用户所需的信息以及如何将信息呈现给用户的问题已经成为越来越受关注的事情。
使用屏幕显示的呈现方法已经被广泛用作为信息呈现方法。提出有根据用户使用的设备中的变化以及要提供的信息的变化来使用屏幕显示呈现信息的方法。然而，即使使用屏幕显示呈现信息也存在限制。因此，提出了使用声音呈现信息的方法。
例如，日本专利申请公报2008-151766A号公开了这样的方法：基于从设备的当前位置到预先设定的位置的距离和方向输出具有方向性的声音数据。利用该设备，可以仅使用听觉来进行方向指示。
参考文献列表
专利文献
PTL1：JP2008-151766A
发明内容
技术问题
仍然期望提供将信息更有用地呈现给用户的方式。因此，本公开提出了生成通知声音的定位信息作为使用声音提供信息的情况的示例，其中，该通知声音告知与当前显示屏幕之外的信息关联的通知信息。
问题的解决方案
根据本公开实施例，提供有一种信息处理装置，包括：显示控制单元，其被配置为发起内容屏幕的选择性显示；以及声音输出控制单元，其被配置为：生成与当前未显示的第一内容屏幕关联的通知声音的定位信息，以及在第二内容屏幕正在被显示的同时，发起根据定位信息的通知声音对用户的输出。
根据这种配置，当声音输出控制单元发起通知声音的输出时，第一内容屏幕可能未被显示。此外，声音输出控制单元可以进一步被配置为发起具有方向性的通知声音的输出，该方向性将用于使得当前显示能够从第二内容屏幕变化到第一内容屏幕的操作方向传达给用户。
此外，根据本公开实施例，提供有一种信息处理装置，包括：显示单元，其被配置为在其上选择性地显示内容屏幕；声音输出控制单元，其被配置为生成与当前未被显示单元显示的第一内容屏幕关联的通知声音的定位信息；以及声音输出单元，其被配置为在显示单元在其上显示第二内容屏幕的同时，根据定位信息将通知声音输出给用户。
再此外，根据本公开实施例，提供有一种信息处理方法，包括：生成与当前未显示的第一内容屏幕关联的通知声音的定位信息；以及当正在向用户显示第二内容屏幕时，根据定位信息将通知声音输出给用户。
根据本公开实施例，提供有一种包括有程序的非暂态计算机可读介质，当程序被计算机执行时使计算机执行方法，方法包括：生成与当前未显示的第一内容屏幕关联的通知声音的定位信息；以及在正在向用户显示第二内容屏幕的同时，根据定位信息将通知声音输出给用户。
根据本公开实施例，提供有一种信息处理设备，包括：操作方向获取单元，其从第一屏幕获取操作方向，从该操作方向显示与通知声音关联的第二屏幕；以及定位信息生成单元，其根据操作方向生成指示通知声音的声音源位置的定位信息。
根据这种配置，可以生成与显示与通知声音关联的第二屏幕的操作方向相符的通知声音的定位信息。因此，听到根据定位信息输出的通知声音的用户可以识别第二屏幕从其显示的操作方向。
此外，根据本公开实施例，提供一种信息处理方法，包括：从第一屏幕获取操作方向，从该操作方向显示与通知声音关联的第二屏幕；以及根据操作方向生成指示通知声音的声音源位置的定位信息。
此外，根据本公开实施例，提供一种使计算机作用为信息处理设备的程序，该信息处理设备包括：操作方向获取单元，其从第一屏幕获取操作方向，从该操作方向显示与通知声音关联的第二屏幕；以及定位信息生成单元，其根据操作方向生成指示通知声音的声音源位置的定位信息。
公开的效果
根据上述本公开，可以通过生成通知声音的定位信息将信息高效地传达给用户，其中，通知声音告知与当前显示屏幕之外的信息关联的通知信息。
附图说明
图1是示出在根据本公开实施例的信息处理设备中安装的功能的概述的说明图。
图2是示出根据本公开实施例的信息处理设备的功能配置的框图。
图3是用于描述根据本公开实施例的信息处理设备的通知操作的流程图。
图4是例示根据本公开实施例的信息处理设备的第一通知示例的说明图。
图5是例示在根据本公开实施例的信息处理设备的第一通知示例中进行滚动操作的状态的说明图。
图6是例示根据本公开实施例的信息处理设备的第二通知示例的说明图。
图7是例示根据本公开实施例的信息处理设备的第三通知示例的说明图。
图8是例示在根据本公开实施例的信息处理设备的第四通知示例中生成通知屏幕的说明图。
图9是例示用于图8中的通知屏幕的操作的说明图。
图10是例示在根据本公开实施例的信息处理设备的第四通知示例中对生成通知屏幕的位置的限制的说明图。
图11是例示用于图10中示出的通知屏幕的操作的说明图。
图12是例示指引信息连同在根据本公开实施例的信息处理设备的第四通知示例中的通知声音一起显示的修改示例的说明图。
图13是示出根据本公开实施例的信息处理设备的硬件配置的框图。
图14是示出相关技术中的警报通知方法的示例的说明图。
图15是示出相关技术中的警报通知方法的另一示例的说明图。
具体实施方式
在下文中，将参考附图详细描述本公开实施例。请注意：在本说明书及附图中，用相同的附图标记表示具有基本相同的功能和结构的结构元件，并且省略对这些结构元件的重复说明。
现在，将以下面的顺序进行描述。
1.概述
2.功能配置
3.通知操作
4.第一通知示例(来自主屏幕上的应用程序的通知)
5.第二通知示例(屏幕移动方向的通知)
6.第三通知示例(缓冲完成的通知)
7.第四通知示例(具有通知信息的应用程序的激活屏幕的生成)
8.硬件配置示例
<1.概述>
首先，将参考图1、图14及图15描述本公开中所提出的技术的概述。图1是示出在根据本公开实施例的信息处理设备中安装的功能的概述的说明图。图14是示出相关技术中的警报通知方法的示例的说明图。图15是示出相关技术中的警报通知方法的另一示例的说明图。
随着智能手机分布地越广泛，用户通过下载应用程序定制信息处理设备的功能变得越常见。此外，用于多任务兼容的设备已经广泛分布，并且可以同时激活多个功能。然而，显示器的显示区域受物理限制。由于这些原因，可以通过滚动或执行屏幕的转移(shift)操作来转移显示区域。
例如，提出了将由应用程序因某些原因而生成的通知信息告知给用户的各种方法。例如，如图14中所示，应用程序的图标大部分布置在智能手机的主屏幕上。在这种主屏幕上，可以通过在具有待告知信息的应用程序的图标上对通知信息的条数进行计数来将存在通知信息以及通知信息的条数告知给用户。
此外，图15例示当在当前所显示的屏幕之外的地方生成通知信息时将通知信息告知给用户的方法的示例。根据图15的方法，可以将包括通知信息的弹出窗口W显示在正在显示的屏幕上。弹出窗口W可以包括例如接收针对通知信息的活动的按钮。用户可以能够通过操作按钮来查明通知信息的详情。
然而，在图15例示的方法中，用户应当中止正在进行的操作。此外，存在在后台执行的处理被中断的情况。考虑到用户的操作性，对用户期望的操作的这种中断是不利的。因此，本公开提出了在不中断用户所期望的操作的情况下通过使用声音将通知信息提供给用户的方法。
例如，如图1所示，本公开使用具有方向性的声音将通知信息提供给用户。这里，当设定在位于当前显示的屏幕的右侧的屏幕上的图标的应用程序具有通知信息时，可以将通知声音设定为从右侧听到。利用此配置，用户可以基于通知声音的方向来查明用于获取通知信息的操作的方向。在下文中，将描述用于实现该功能的信息处理设备。
<2.功能配置>
在此处，将参考图2描述根据本公开实施例的信息处理设备10的功能配置。图2是例示根据本公开实施例的信息处理设备的功能配置的框图。
信息处理设备10可以是这样的信息处理设备，例如包括：包括智能手机的移动电话、PHS(个人手持电话系统)、便携式音乐再现设备、便携式视频处理设备、便携式游戏设备、成像设备、导航系统、PC(个人计算机)、家用视频处理设备(DVD刻录机、录像机等)、家用游戏设备、家用电器等。
信息处理设备10可以主要包括：操作单元105、操作信息获取单元110、显示单元115、显示控制单元120、声音输出单元125以及声音输出控制单元130。
(操作单元105)
操作单元105可以具有生成用于进行用户所期望的操作的输入信号的功能。操作单元105可以例如包括：用于由用户输入信息的输入部分，诸如触摸面板、鼠标、键盘、按钮、麦克风、开关、控制杆以及各种传感器，基于用户的输入生成并输出输入信号的输入控制电路等。例如，操作单元105可以通过检测用户在触摸面板上进行的操作来基于该操作生成并输出输入信号。此外，操作单元105可以基于由倾斜传感器获取的信息处理设备10的壳体的倾斜信息来生成并输出输入信号。
(操作信息获取单元110)
操作信息获取单元110可以具有获取由用户输入的操作信息的功能。例如，操作信息获取单元110可以获取从操作单元105输出的输入信号作为操作信息。信息处理设备10可以基于由操作信息获取单元110获取的操作信息来工作。请注意：操作信息获取单元110是下述操作方向获取单元的示例，该操作方向获取单元从第一屏幕获取操作方向，从该操作方向显示与通知声音关联的第二屏幕。
(显示单元115)
显示单元115是输出设备的示例，并且可以是显示设备，诸如液晶显示(LCD)设备或者有机EL(或OLED：有机发光二极管)显示设备。显示单元115可以根据显示控制单元120的控制来工作。
(显示控制单元120)
显示控制单元120可以具有控制显示屏幕要提供给用户的内容的功能。此外，显示控制单元120可以基于由操作信息获取单元110获取的操作信息来控制显示屏幕的内容。例如，显示控制单元120可以使显示屏幕根据由用户所进行的滚动操作来进行滚动。此外，显示控制单元120可以根据操作信息使显示屏幕放大、缩小或者进行屏幕转移。此外，显示控制单元120是生成单元的示例，该生成单元可以在检测到生成了通知信息时生成关于通知信息的屏幕。例如，在电子邮件应用程序中，当生成了告知接收到新的电子邮件的通知信息时，显示控制单元120可以使告知新电子邮件的通知屏幕激活以使得在用户从当前所显示的屏幕进行滚动操作时安排显示通知屏幕。请注意：在此情况下的通知屏幕可以是包括电子邮件的文本的文本显示屏幕，或者是所接收的电子邮件的列表屏幕。此外，如下面将要描述的那样，显示控制单元120可以是下述指引信息显示控制单元的示例，该指引信息显示控制单元使得显示指引信息，该指引信息指示操作方向，从该操作方向显示与通知信息关联的屏幕。此外，显示控制单元120是生成单元的示例，该生成单元在检测到生成了通知信息时生成与通知信息关联的第二屏幕。
(声音输出单元125)
声音输出单元125可以具有输出声音信号的功能。声音输出单元125例如可以是扬声器。此外，声音输出单元125可以是将声音信号输出至诸如耳机的声音输出设备的输出端子。声音输出单元125可以根据声音输出控制单130的控制来工作。请注意：此处所使用的声音输出设备可以根据声音的定位信息输出立体声。
(声音输出控制单元130)
声音输出控制单元130可以具有将声音输出给用户的功能。此外，声音输出控制单元130是可以生成指示声音源位置的定位信息的定位信息生成单元的示例。声音输出控制单元130可以根据显示与通知声音关联的第二屏幕的操作方向来生成定位信息，该定位信息指示来自第一屏幕的通知声音的声音源位置。在这种情况下，声音输出控制单元130可以根据第一屏幕与第二屏幕之间的距离来生成定位信息。第一屏幕例如可以是当前所显示的屏幕。第一屏幕与第二屏幕之间的距离可以在每次改变当前所显示的屏幕时变化。为此，声音输出控制单元130可以在每次当前所显示的屏幕改变时更新定位信息。声音输出控制单元130可以控制声音的输出，使得音量随着声音源位置的接近而增大。
声音输出控制单元130可以使通知声音的声音源位置几乎固定地位于与从其显示与通知声音关联的屏幕的操作方向相符的方向上。此外，与来自几乎固定位置的声音方向相比，人往往更容易感知声音源位置改变的声音方向。为此，例如在通知声音的声音源位置改变之后，声音输出控制单元130可以将到达点设定为与显示与通知声音关联的屏幕的操作方向相符的方向。例如，在当前所显示的屏幕中，当根据从右侧到左侧的滚动操作显示与通知声音关联的屏幕时，声音输出控制单元130可以生成通知声音的声音源位置固定至用户的右侧的定位信息。此外，在这种情况下，在通知声音的声音源位置改变之后，声音输出控制单元130可以生成定位信息以使得固定在用户的左侧。
此外，当显示屏幕的定向根据信息处理设备10的倾斜而改变时，声音输出控制单元130可以根据显示屏幕的定向的变化来改变通知声音的声音源位置。声音输出控制单元130可以是下述声学处理单元的示例，该声学处理单元实现了对通知声音的立体声处理。
下面将通过例示多个场景更详细地描述由声音输出控制单元130生成的定位信息。请注意：本文中的通知声音可以是例如告知接收到电子邮件的通知声音，但是不限于此。当将再现运动图像时使用的再现屏幕转移到运动图像的列表屏幕时，可以将运动图像的声音用作为用于告知转移的方向的通知声音。在此情况下，运动图像的声音也可以属于通知声音。
在上文中，示出了根据实施例的信息处理设备10的功能的示例。上述各个组成元件可以使用通用构件或电路来配置或者可以使用专用于各个组成元件的功能的硬件来配置。此外，可以通过从存储下述控制程序的存储介质诸如ROM(只读存储器)或RAM(随机存取存储器)中读取该控制程序并且通过解释该程序来实现各个组成元件的功能，该控制程序描述算术运算单元诸如CPU(中央处理单元)实现这些功能的步骤。因此，可以根据在实现本实施例时的技术的水平来适当地改变要使用的配置。
可以创建用于实现根据如上面所描述的实施例的信息处理设备10的功能中的每个功能的计算机程序并且将计算机程序安装在个人计算机等中。此外，也可以设置存储这样的计算机程序并且在计算机上可读的记录介质。记录介质诸如可以包括磁盘、光盘、磁光盘、快擦写存储器等。此外，在不使用记录介质的情况下，可以通过例如因特网传输计算机程序。
(3.通知操作)
接下来，将参考图3描述根据本公开实施例的信息处理设备的通知操作。图3是用于描述根据本公开实施例的信息处理设备的通知操作的流程图。
首先，信息处理设备10可以确定是否存在通知信息(S100)。例如，当设定为通过由在信息处理设备10内部工作的应用程序检测任何起因来将通知提供给用户时，信息处理设备10可以基于是否检测到通知的起因来确定是否存在通知信息。
当在步骤S100的确定中确定出存在通知信息时，声音输出控制单元130可以生成告知通知信息的通知声音的定位信息(S105)。然后，声音输出控制单元130基于所生成的定位信息输出通知声音(S107)。
接下来，显示控制单元120可以确定显示屏幕中是否存在变化(S110)。当此处确定出显示屏幕中存在变化时，声音输出控制单元130可以更新定位信息(S115)。另一方面，当在步骤S110的确定中确定出显示屏幕中不存在变化时，可以省略步骤S115的处理。
接下来，声音输出控制单元130可以确定是否经过了预定时间(S120)。此处所使用的预定时间可以是预先确定的作为输出通知声音所花费的时间。预定时间例如可以具有由用户在信息处理设备10中预先设定的值。或者，预定时间可以具有预先设定为应用程序的预定值的值。
当在步骤S120的确定中确定出经过了预定时间时，声音输出控制单元130可以停止输出通知声音(S125)，并且可以从步骤S100开始重复处理。另一方面，当在步骤S120的确定中确定出还未经过预定的时间时，处理可以返回至步骤S110，并且可以输出通知声音同时重复地更新定位信息，直到经过了预定时间为止。
如上所述，可以基于与通知信息关联的屏幕与当前所显示的屏幕之间的位置关系，将告知通知信息的通知声音输出为具有方向性的声音信号。利用本配置，用户可以根据听到通知声音的方向立即知道显示与通知信息关联的屏幕的操作方向。在下文中，将通过例示多个特定场景来描述信息处理设备10的通知操作。
<4.第一通知示例(来自主屏幕的应用程序的通知)>
接下来，将参考图4和图5描述根据本公开实施例的信息处理设备的第一通知示例。图4是例示根据本公开实施例的信息处理设备的第一通知示例的说明图。图5例示在根据本公开实施例的信息处理设备的第一通知示例中进行滚动操作的状态的说明图。
例如，将考虑主屏幕包括根据滚动操作来显示的屏幕SC1、屏幕SC2、屏幕SC3及屏幕SC4的四个屏幕的情况。当如图4中所示出的那样显示四个屏幕中的屏幕SC2并且检测到生成了由显示在屏幕SC4上的图标30指示的应用程序的通知信息时，声音输出控制单元130可以基于从当前所显示的屏幕SC2到显示屏幕SC4的操作方向，生成告知通知信息的通知声音的定位信息。在此情况下，声音输出控制单元130可以生成定位信息以使得从右侧听到通知声音。
此外，当检测到改变当前所显示的屏幕的显示状态的操作时，声音输出控制单元130可以根据该操作更新定位信息。例如，假设在图4所示出的状态中从右侧到左侧进行滚动操作，并且如图5所示，屏幕SC3成为当前所显示的屏幕。此时，声音输出控制单元130可以基于从当前所显示的屏幕SC3显示到与通知信息关联的屏幕SC4的操作方向以及屏幕SC3与屏幕SC4之间的距离来生成定位信息。在此情况下，可能期望设定控制以使图5所示出的状态中听到的通知声音高于图4所示出的状态中听到的通知声音。利用本配置，用户可以基于听到通知声音的方向知道显示与通知声音关联的屏幕SC4的操作方向。此外，用户可以根据通知声音的音量感知到从当前所显示的屏幕到与通知声音关联的屏幕的距离。
<5.第二通知示例(屏幕转移方向的通知)>
接下来，将参考图6描述根据本公开实施例的信息处理设备的第二通知示例。图6是例示根据本公开实施例的信息处理设备的第二通知示例的说明图。
这里，示出了当再现运动图像时在按了“返回”按钮之后屏幕转移到侧边方向的情况。在此情况下，声音输出控制单元130可以根据屏幕转移通过改变声音源的位置来提供声音的动画(animation)。此时，在用于再现运动图像的屏幕转移到右侧的同时，用户听到通知声音就像声音向右侧慢慢减弱一样。因此，可以将用于再现的屏幕转移的方向与返回按钮之间的位置关系指示给用户。在此情况下，例如，可以将运动图像的声音用作为通知声音。或者，可以将另一警报声音用作为通知声音。
<6.第三通知示例(缓冲完成的通知)>
接下来，将参考图7描述根据本公开实施例的信息处理设备的第三通知示例。图7是例示根据本公开实施例的信息处理设备的第三通知示例的说明图。
通知声音的动画可以用于通知完成了再现运动图像中的缓冲。例如，如图7所示，考虑到在运动图像屏幕SC21中运动图像由于运动图像的缓冲而处于不再再现的状态的情况。此时，当用户通过按“返回”按钮、进行滚动操作等使得显示运动图像列表屏幕SC22时，用户可以操作运动图像列表屏幕SC22。然后，当运动图像在缓冲之后处于再现的状态时，声音输出控制单元130可以输出通知声音，如同从转移运动图像再现屏幕SC21的方向听到通知声音一样。在此处，声音输出控制单元130可以控制通知声音的输出以使得从右侧听到通知声音。此处所使用的通知声音可以是警报声音或者是在运动图像再现屏幕SC21上的再现运动图像的声音。
因此，用户可以掌握缓冲的完成。此外，当可以使用滚动操作在运动图像再现屏幕SC21与运动图像列表屏幕SC22之间进行转移时，用户可以掌握(记起)滚动操作的方向。
<7.第四通知示例(生成具有通知信息的应用程序的激活屏幕)>
接下来，将参考图8至图12描述根据本公开实施例的信息处理设备的第四通知示例。图8是例示在根据本公开实施例的信息处理设备的第四通知示例中生成通知屏幕的说明图。图9是例示用于图8中的通知屏幕的操作的说明图。图10例示在根据本公开实施例的信息处理设备的第四通知示例中对通知屏幕的生成位置的限制的说明图。图11例示用于图10中示出的通知屏幕的操作的说明图。图12是例示指引信息连同在根据本公开实施例的信息处理设备的第四通知示例中的通知声音一起显示的修改示例的说明图。
上面所描述的第一通知示例至第三通知示例是来自从开始就激活的屏幕的警报通知的示例。在此处，将考虑来自未被激活的应用程序的通知的示例。当存在来自未被激活的应用程序的通知时，用户可以通过激活并自动布置关于通知的屏幕来使用不多的几个操作确定关于通知的信息。此时，不适时地显示通知以及关于通知的屏幕可能干扰用户操作。因此，在此处，可以以下述方式来布置屏幕，从当前所显示的屏幕显示由一步操作(例如，任何方向的滚动操作)激活的屏幕。
这里，用户可能不能感知到在自动布置的屏幕上应当以哪个方向进行操作。因此，根据本公开，用户可以基于告知自动布置的方向的通知声音的输出立即能够感知到操作方向。
如图8所示，运动图像再现屏幕m显示在状态1中。当此处发生了接收到电子邮件作为通知信息时，显示控制单元120可以如状态2中所示的那样在运动图像再现屏幕的上侧、下侧、右侧及左侧中的任意侧布置电子邮件显示屏幕。此时，声音输出控制单元130可以控制来自所布置的屏幕的具有方向性的通知声音的输出。请注意：在此处，状态2A、状态2B、状态2C及状态2D不加区分地统称为状态2。这同样应用于下文中。例如，在状态2A中，电子邮件显示屏幕布置在当前所显示的屏幕的右侧。此时，用户从右侧听到通知声音。此外，在状态2B中，电子邮件显示屏幕布置在当前所显示的屏幕的左侧。此时，用户从左侧听到通知声音。此外，在状态2C中，电子邮件显示屏幕布置在当前所显示的屏幕的下侧。此时，用户从下侧或后侧听到通知声音。此外，在状态2D中，电子邮件显示屏幕布置在当前所显示的屏幕的上侧。此时，用户从上侧或前侧听到通知声音。此处，可以将布置的屏幕设置成包括电子邮件的文本的显示屏幕，但是本技术不限于示例。关于通知的屏幕例如可以是电子邮件列表屏幕。
此外，如图9所示，当从状态2的屏幕进行滚动操作时，电子邮件显示屏幕可以如状态3中所示出的那样显示在显示单元115上。以此方式，可以通过自动布置关于通知的屏幕使用一步操作查明通知信息。此时，通过根据显示关于通知的屏幕的操作方向布置通知声音的声音源位置，用户可以感知布置有关于通知的屏幕的位置，并且可以根据通知声音的方向感知到显示屏幕的操作方向。
此外，显示控制单元120可以限制布置有关于通知的屏幕的位置。例如，当生成了通知信息时，显示控制单元120可以基于当生成通知信息时正在显示的屏幕所能够接受的操作方向，来限制关于通知的屏幕的位置。例如，参考图10，考虑了状态11中所显示的屏幕是在其上可以沿着上下方向进行滚动操作的屏幕的情况。
在此情况下，当显示控制单元120布置电子邮件显示屏幕以使得通过上下方向的滚动操作进行显示时，用户可能无意地使得显示了电子邮件显示屏幕。换言之，用户可能难以区分上下方向的滚动操作是设定在状态11中所显示的运动图像再现屏幕中的滚动操作或者是用于显示电子邮件显示屏幕的滚动操作。因此，显示控制单元120可以布置电子邮件显示屏幕以使得通过运动图像再现屏幕(状态12)中所接受的正交于上下方向的方向进行的操作来显示电子邮件显示屏幕。
如图11所示，仍然在状态12中显示的屏幕上，可以以下述方式显示电子邮件显示屏幕：用户根据听到通知声音的方向确定操作方向并且进行滚动操作(状态13)。
此外，除了通知声音之外，可以通过显示指引沿着预定方向的滚动操作的指引信息50来将显示通知信息的操作方向提供给用户。例如，如图12所示，假设用户在状态21中操作了地图应用程序。在此情况下，当生成了接收到电子邮件的通知信息时，显示控制单元120可以在当前所显示的屏幕的左侧布置电子邮件显示屏幕(状态22)。此时，声音输出控制单元130可以将通知声音的声音源位置设置在其左侧。此外，显示控制单元120可以使指引信息50以重叠的方式也显示在显示屏幕上。指引信息50可以例如是如图12所示的指示显示电子邮件屏幕的操作方向的箭头。当用户沿着由指引信息50指示的方向进行滚动操作时，可以显示电子邮件显示屏幕(状态24)。
<8.硬件配置示例>
接下来，将参考图13描述根据本公开实施例的信息处理设备的硬件配置示例。图13是示出根据本公开实施例的信息处理设备的硬件配置的框图。
此处，将描述信息处理设备10的配置的示例。参考图13，信息处理设备10例如可以包括电话网络天线817、电话处理单元819、GPS天线821、GPS处理单元823、Wi-Fi天线825、Wi-Fi处理单元827、地磁传感器829、加速度传感器831、陀螺仪传感器833、气动传感器835、成像单元837、CPU(中央处理单元)839、ROM(只读存储器)841、RAM(随机存取存储器)843、操作单元847、显示单元849、解码器851、扬声器853、编码器855、麦克风857、存储单元859及连接端口861。请注意：此处所示出的硬件配置是示例，并且可以省略组成元件的一部分。此外，毋庸置疑，还可以包括除了此处所示出的组成元件之外的组成元件。
(电话网络天线817)
电话网络天线817是具有无线连接到用于电话呼叫及通信的移动电话网络的功能的天线的示例。电话网络天线817可以将通过移动电话网络接收的呼叫信号提供至电话处理单元819。
(电话处理单元819)
电话处理单元819可以具有针对由电话网络天线817发送和接收的信息进行各种信号处理的功能。电话处理单元819可以针对声音信号进行各种信号处理，例如，通过麦克风857输入并且由编码器855编码，并且可以将信号提供至电话网络天线817。此外，电话处理单元819可以针对从电话网络天线817提供的声音信号进行各种信号处理并且可以将信号提供至解码器851。
(GPS天线821)
GPS天线821是可以从定位卫星接收信号的天线的示例。GPS天线821可以从多个GPS卫星接收GPS信号，并且可以将接收的GPS信号输入至GPS处理单元823。
(GPS处理单元823)
GPS处理单元823是可以基于从定位卫星接收的信号计算位置信息的计算单元的示例。GPS处理单元823可以基于从GPS天线821输入的多个GPS信号计算当前位置信息，并且输出所计算的位置信息。具体地，GPS处理单元823可以根据GPS卫星的轨道数据计算GPS卫星的位置中的每个GPS卫星的位置，并且可以基于每个GPS信号的发射时间与接收时间之间的时间差计算从每个GPS卫星到信息处理设备10的距离。然后，可以基于所计算的每个GPS卫星的位置以及从每个GPS卫星到信息处理设备10的距离计算当前三维位置。请注意：此处所使用的每个GPS卫星的轨道数据也可以包括在例如GPS信号中。或者，可以通过Wi-Fi天线825从外部服务器获取每个GPS卫星的轨道数据。
(Wi-Fi天线825)
Wi-Fi天线825可以是具有根据Wi-Fi的规格与例如无线LAN(局域网)通信网络进行发射和接收通信信号的功能的天线。Wi-Fi天线825可以将所接收的信号提供至Wi-Fi处理单元827。
(Wi-Fi处理单元827)
Wi-Fi处理单元827具有针对从Wi-Fi天线825提供的信号进行各种信号处理的功能。Wi-Fi处理单元827例如可以将根据模拟信号生成的数字信号提供至CPU839。
(地磁传感器829)
地磁传感器829可以是将地磁检测为电压值的传感器。地磁传感器829可以是检测沿着X轴方向、Y轴方向及Z轴方向中的每个方向的地磁的三维地磁传感器。地磁传感器829可以将所检测的地磁数据提供至CPU839。
(加速度传感器831)
加速度传感器831可以是将加速度检测为电压值的传感器。加速度传感器831可以是检测沿着X轴方向、Y轴方向及Z轴方向的每个加速度的三维加速度传感器。加速度传感器831可以将所检测的加速度数据提供至CPU839。
(陀螺仪传感器833)
陀螺仪传感器833可以是检测目标的角度及角速度的一种测量仪器。陀螺仪传感器833可以是将绕着X轴方向、Y轴方向及Z轴方向变化的旋转角的速度检测为电压值的三维陀螺仪传感器。陀螺仪传感器833可以将所检测的角速度数据提供至CPU839。
(气动传感器835)
气动传感器835可以是将周围环境气压检测为电压值的传感器。气动传感器835可以使用预定采样频率检测气压，并且将所检测的气压数据提供至CPU839。
(成像单元837)
成像单元837可以具有根据CPU839的控制通过透镜对静止图像或运动图像进行成像的功能。成像单元837可以使所拍摄的图像存储在存储单元859中。
(CPU839)
CPU839可以作用为算术处理单元和控制单元，并且可以根据各种程序控制移动终端30中的整体操作。此外，CPU839可以是微处理器。CPU839可以根据各种程序实现各种功能。
(ROM841、RAM843)
ROM841可以存储CPU839所使用的程序、算术运算参数等。RAM843可以暂时存储CPU839的执行中所使用的程序，执行中适当地变化的参数等。
(运算单元847)
运算单元847可以具有生成用于进行用户5所期望的操作的输入信号的功能。运算单元847可以例如包括：用于由用户5输入信息的输入部分，诸如触摸传感器、鼠标、按钮、麦克风、开关及操作杆；基于用户5的输入生成输入信号并且将信号输出至CPU839的输入控制电路等。
(显示单元849)
显示单元849是输出设备的示例并且可以是显示设备，诸如液晶显示(LCD)设备，以及有机EL(或OLED：有机发光二极管)显示设备。显示单元849可以通过显示屏幕将信息提供给用户5。
(解码器851、扬声器853)
解码器851可以具有根据CPU839的控制针对输入数据进行解码、模拟转移等的功能。解码器851可以对例如通过电话网络天线817和电话处理单元819输入的声音数据进行解码、模拟转移等，并且可以将声音信号输出至扬声器853。此外，解码器851可以对例如通过Wi-Fi天线825和Wi-Fi处理单元827输入的声音数据进行解码、模拟转移等，并且可以将声音信号输出至扬声器853。扬声器853可以基于从解码器851提供的声音信号输出声音。
(编码器855、麦克风857)
编码器855可以具有根据CPU839的控制对输入数据进行数字转移、编码等的功能。编码器855可以对从麦克风857输入的声音信号进行数字转移、编码等并且可以输出声音数据。麦克风857可以采集声音并且将声音输出为声音信号。
(存储单元859)
存储单元859可以是用于存储数据的设备，并且可以包括存储介质、在存储介质上记录数据的记录设备、从存储介质读取数据的读取设备、用于删除记录在存储介质上的删除设备等。作为此处的存储介质，可以使用例如非易失性存储器例如快擦写存储器、MRAM(磁阻效应随机存取存储器)、FeRAM(铁磁随机存取存储器)、PRAM(伪随机存取存储器)及EEPROM(电可擦可编程只读存储器)，磁记录介质例如HDD(硬盘驱动器)等。
(连接端口861)
连接端口861可以是用于连接到音频设备12的连接单元。此处，音频设备12例如可以是与信息处理设备10分离的头戴耳机或扬声器。信息处理设备10可以经由连接端口861从音频设备12输出声音信号。
在上文中，参考附图详细描述了本公开实施例，但是本公开的技术范围不限于上面所描述的实施例。本领域技术人员应当理解的是：取决于设计要求及其它因素可以发生各种变型、组合、子组合及变体，只要这些各种变型、组合、子组合及变体在所附权利要求及其等同方案的范围内，并且被认为属于本公开的范围即可。
例如，在上面所描述的实施例中，可以由多个信息处理设备对设置成在可以是便携式电子设备的信息处理设备10内进行的所有功能中的一些功能或所有功能进行分布式处理。可以根据在实现实施例时的技术的水平适当地改变用于执行本技术的功能的硬件配置。
此外，在本说明书中，流程图中所包括的步骤不仅可以包括沿着所描述的顺序以时间序列的方式进行的处理，还可以包括以并行的或以单独的方式执行的处理，而不必以时间序列的方式进行。此外，毋庸置疑，即使在以时间序列的方式所进行的步骤中，也可以适当地改变顺序。
此外，本技术也可以如下进行配置。
(1)一种信息处理装置，包括：
显示控制单元，其被配置为发起内容屏幕的选择性显示；以及
声音输出控制单元，其被配置为：生成与当前未显示的第一内容屏幕关联的通知声音的定位信息，以及在第二内容屏幕正在被显示的同时，发起根据该定位信息的通知声音对用户的输出。
(2)根据(1)所述的信息处理装置，其中，当声音输出控制单元发起通知声音的输出时，第一内容屏幕未被显示。
(3)根据(1)所述的信息处理装置，其中，声音输出控制单元进一步被配置为发起具有方向性的通知声音的输出，方向性将用于使得当前显示能够从第二内容屏幕变化到第一内容屏幕的操作方向传达给用户。
(4)根据(3)所述的信息处理装置，其中，显示控制单元进一步被配置为基于由用户发起的并且与操作方向相对应的滚动操作，发起当前显示从第二内容屏幕到第一内容屏幕的选择性变化。
(5)根据(1)所述的信息处理装置，其中，定位信息指示通知声音的声音源位置。
(6)根据(5)所述的信息处理装置，其中，当通知声音的声音源位置越接近所显示的第二内容屏幕时，通知声音的音量越高。
(7)根据(1)所述的信息处理装置，其中，声音输出控制单元进一步被配置为基于所显示的第二内容屏幕与未显示的第一内容屏幕之间的距离生成定位信息。
(8)根据(1)所述的信息处理装置，其中，声音输出控制单元进一步被配置为发起具有方向性的通知声音的输出，方向性将未显示的第一内容屏幕相对于当前显示的第二内容屏幕的相对位置传达给用户。
(9)根据(1)所述的信息处理装置，其中，第一内容屏幕与在信息处理装置中打开并激活的应用程序关联。
(10)根据(1)所述的信息处理装置，其中，在发生作为响应而生成通知声音的触发事件之前，第一内容屏幕在信息处理装置中打开并激活。
(11)根据(1)所述的信息处理装置，其中，在发生作为生成通知声音的根据的触发事件之后生成第一内容屏幕。
(12)根据(1)所述的信息处理装置，其中，声音输出控制单元进一步被配置为在当前显示从第二内容屏幕变化到第三内容屏幕时，生成与第一内容屏幕关联的通知声音的更新的定位信息。
(13)根据(1)所述的信息处理装置，其中，显示控制单元还被配置为发起指引信息的显示，指引信息指示用于发起第一内容屏幕的显示的操作方向。
(14)根据(1)所述的信息处理装置，还包括操作单元，其被配置为生成用于发起内容屏幕中所期望的内容屏幕的选择性显示的指令。
(15)根据(14)所述的信息处理装置，其中，操作控制单元包括被配置为从用户接收触摸输入的触摸面板。
(16)根据(14)所述的信息处理装置，其中，操作单元包括倾斜传感器，倾斜传感器被配置为获取里面安置有显示单元的壳体的倾斜信息。
(17)根据(16)所述的信息处理装置，其中，显示控制单元进一步被配置为基于所获取的倾斜信息发起内容屏幕的显示定向的改变。
(18)根据(17)所述的信息处理装置，其中，声音输出控制单元进一步被配置为当发起内容屏幕的显示定向的改变时，生成通知声音的更新的定位信息。
(19)根据(1)所述的信息处理装置，其中，第一内容屏幕相对于第二内容屏幕的相对位置被限制到从第二内容屏幕发出的所选择的方向。
(20)根据(19)所述的信息处理装置，其中，第一内容屏幕相对于第二内容屏幕的相对位置被限制为相对第二内容屏幕垂直位移的位置。
(21)根据(19)所述的信息处理装置，其中，第一内容屏幕相对于第二内容屏幕的相对位置被限制为相对第二内容屏幕水平位移的位置。
(22)一种信息处理装置，包括：
显示单元，其被配置为在其上选择性地显示内容屏幕；
声音输出控制单元，其被配置为生成与当前未被显示单元显示的第一内容屏幕关联的通知声音的定位信息；以及
声音输出单元，其被配置为在显示单元在其上显示第二内容屏幕的同时，根据定位信息将通知声音输出给用户。
(23)一种信息处理方法，包括：
生成与当前未显示的第一内容屏幕关联的通知声音的定位信息；以及
当正在向用户显示第二内容屏幕时，根据定位信息将通知声音输出给用户。
(24)根据(23)所述的信息处理方法，其中，以这样的方向性输出通知声音：该方向性将用于使显示能够从第二内容屏幕变化到第一内容屏幕的操作方向传达给用户。
(25)根据(23)所述的信息处理方法，其中，以这样的方向性输出通知声音：该方向性将未显示的第一内容屏幕相对于所显示的第二内容屏幕的相对位置传达给用户。
(26)根据(23)所述的信息处理方法，其中，在发生作为生成通知声音的根据的触发事件之后创建第一内容屏幕。
(27)一种包括有程序的非暂态计算机可读介质，当程序被计算机执行时使计算机执行方法，该方法包括：
生成与当前未显示的第一内容屏幕关联的通知声音的定位信息；以及
在正在向用户显示第二内容屏幕的同时，根据定位信息将通知声音输出给用户。
(28)一种信息处理设备，包括：
操作方向获取单元，其从第一屏幕获取显示与通知声音关联的第二屏幕的操作方向；以及
定位信息生成单元，其根据所述操作方向生成指示通知声音的声音源位置的定位信息。
(29)根据(28)的信息处理设备，其中，定位信息生成单元根据第一屏幕与第二屏幕之间的距离生成定位信息。
(30)根据(28)或(29)的信息处理设备，其中，定位信息生成单元使声音源位置随着时间变化，然后生成具有作为根据操作方向的位置的声音源位置的到达点的定位信息。
(31)根据(28)至(30)中任一项的信息处理设备，还包括：
倾斜信息获取单元，其获取信息处理设备的壳体的倾斜信息，
其中，定位信息生成单元生成定位信息，在定位信息中，基于倾斜信息改变声音源位置。
(32)根据(28)至(31)中任一项的信息处理设备，还包括：
生成单元，其在检测到生成了通知信息时生成第二屏幕，
其中，操作方向获取单元在生成了第二屏幕时确定操作方向，从该操作方向显示第二屏幕。
(33)根据(32)的信息处理设备，其中，操作方向获取单元基于沿其接受用于改变第一屏幕的显示状态的操作的方向来确定操作方向。
(34)根据(33)的信息处理设备，其中，操作方向获取单元将沿其不接受用于改变第一屏幕的显示状态的操作的方向设定为显示第二屏幕的操作方向。
(35)根据(32)至(34)中任一项的信息处理设备，还包括：
指引信息显示控制单元，其在操作方向获取单元确定操作方向时使得显示指示确定的操作方向的指引信息。
(36)根据(28)至(35)中任一项的信息处理设备，还包括：
声学处理单元，其基于定位信息对通知声音进行立体声处理。
(37)根据(29)的信息处理设备，还包括：
操作信息获取单元，其获取用于改变显示屏幕的显示状态的操作信息，
其中，当基于操作信息改变了第一屏幕与第二屏幕之间的距离时，定位信息生成单元随着距离的变化来改变声音源位置。
(38)根据(32)至(37)中任一项的信息处理设备，其中，
第二屏幕是具有通知信息的应用程序的激活屏幕，并且
通知声音是用于告知通知信息的声音。
(39)根据(28)至(31)中任一项的信息处理设备，其中，
第一屏幕是显示所布置的应用程序的图标的屏幕中当前所显示的屏幕，并且
第二屏幕是其上显示有具有通知信息的应用程序的图标的屏幕。
(40)一种信息处理方法，包括：
从第一屏幕获取操作方向，从该操作方向显示与通知声音关联的第二屏幕；以及
根据操作方向生成指示通知声音的声音源位置的定位信息。
(41)一种使计算机作用为信息处理设备的程序，该信息处理装置包括：
操作方向获取单元，其从第一屏幕获取操作方向，从该操作方向显示与通知声音关联的第二屏幕；以及
定位信息生成单元，其根据操作方向生成指示通知声音的声音源位置的定位信息。
本公开包含的主题涉及2012年2月3日提交至日本专利局的日本优先权专利申请JP 2012-021887中所公开的主题，其全部内容通过引用合并在本文中。

Claims (27)

1.一种信息处理装置，包括：
显示控制单元，其被配置为发起内容屏幕的选择性显示；以及
声音输出控制单元，其被配置为：生成与当前未显示的第一内容屏幕关联的通知声音的定位信息，以及在第二内容屏幕正在被显示的同时，发起根据所述定位信息的所述通知声音对用户的输出。
2.根据权利要求1所述的信息处理装置，其中，当所述声音输出控制单元发起所述通知声音的所述输出时，所述第一内容屏幕未被显示。
3.根据权利要求1所述的信息处理装置，其中，所述声音输出控制单元进一步被配置为发起具有方向性的所述通知声音的所述输出，所述方向性将用于使得当前显示能够从所述第二内容屏幕变化到所述第一内容屏幕的操作方向传达给所述用户。
4.根据权利要求3所述的信息处理装置，其中，所述显示控制单元进一步被配置为基于由所述用户发起的并且与所述操作方向相对应的滚动操作，发起当前显示从所述第二内容屏幕到所述第一内容屏幕的选择性变化。
5.根据权利要求1所述的信息处理装置，其中，所述定位信息指示所述通知声音的声音源位置。
6.根据权利要求5所述的信息处理装置，其中，当所述通知声音的所述声音源位置越接近所显示的所述第二内容屏幕时，所述通知声音的音量越高。
7.根据权利要求1所述的信息处理装置，其中，所述声音输出控制单元进一步被配置为基于所显示的所述第二内容屏幕与未显示的所述第一内容屏幕之间的距离生成所述定位信息。
8.根据权利要求1所述的信息处理装置，其中，所述声音输出控制单元进一步被配置为发起具有方向性的所述通知声音的输出，所述方向性将未显示的所述第一内容屏幕相对于当前显示的所述第二内容屏幕的相对位置传达给所述用户。
9.根据权利要求1所述的信息处理装置，其中，所述第一内容屏幕与在所述信息处理装置中打开并激活的应用程序关联。
10.根据权利要求1所述的信息处理装置，其中，在发生作为响应而生成所述通知声音的触发事件之前，所述第一内容屏幕在所述信息处理装置中打开并激活。
11.根据权利要求1所述的信息处理装置，其中，在发生作为生成所述通知声音的根据的触发事件之后生成所述第一内容屏幕。
12.根据权利要求1所述的信息处理装置，其中，所述声音输出控制单元进一步被配置为在当前显示从所述第二内容屏幕变化到第三内容屏幕时，生成与所述第一内容屏幕关联的所述通知声音的更新的定位信息。
13.根据权利要求1所述的信息处理装置，其中，所述显示控制单元还被配置为发起指引信息的显示，所述指引信息指示用于发起所述第一内容屏幕的显示的操作方向。
14.根据权利要求1所述的信息处理装置，还包括：操作单元，其被配置为生成用于发起所述内容屏幕中所期望的内容屏幕的选择性显示的指令。
15.根据权利要求14所述的信息处理装置，其中，所述操作控制单元包括被配置为从所述用户接收触摸输入的触摸面板。
16.根据权利要求14所述的信息处理装置，其中，所述操作单元包括倾斜传感器，所述倾斜传感器被配置为获取里面安置有所述显示单元的壳体的倾斜信息。
17.根据权利要求16所述的信息处理装置，其中，所述显示控制单元进一步被配置为基于所获取的所述倾斜信息发起所述内容屏幕的显示定向的改变。
18.根据权利要求17所述的信息处理装置，其中，所述声音输出控制单元进一步被配置为当发起所述内容屏幕的所述显示定向的改变时，生成所述通知声音的更新的定位信息。
19.根据权利要求1所述的信息处理装置，其中，所述第一内容屏幕相对于所述第二内容屏幕的相对位置被限制到从所述第二内容屏幕发出的所选择的方向。
20.根据权利要求19所述的信息处理装置，其中，所述第一内容屏幕相对于所述第二内容屏幕的所述相对位置被限制为相对所述第二内容屏幕垂直位移的位置。
21.根据权利要求19所述的信息处理装置，其中，所述第一内容屏幕相对于所述第二内容屏幕的所述相对位置被限制为相对所述第二内容屏幕水平位移的位置。
22.一种信息处理装置，包括：
显示单元，其被配置为在其上选择性地显示内容屏幕；
声音输出控制单元，其被配置为生成与当前未被所述显示单元显示的第一内容屏幕关联的通知声音的定位信息；以及
声音输出单元，其被配置为在所述显示单元在其上显示第二内容屏幕的同时，根据所述定位信息将所述通知声音输出给用户。
23.一种信息处理方法，包括：
生成与当前未显示的第一内容屏幕关联的通知声音的定位信息；以及
当正在向用户显示第二内容屏幕时，根据所述定位信息将所述通知声音输出给所述用户。
24.根据权利要求23所述的信息处理方法，其中，以这样的方向性输出所述通知声音：所述方向性将用于使显示能够从所述第二内容屏幕变化到所述第一内容屏幕的操作方向传达给所述用户。
25.根据权利要求23所述的信息处理方法，其中，以这样的方向性输出所述通知声音：所述方向性将未显示的所述第一内容屏幕相对于所显示的所述第二内容屏幕的相对位置传达给所述用户。
26.根据权利要求23所述的信息处理方法，其中，在发生作为生成所述通知声音的根据的触发事件之后创建所述第一内容屏幕。
27.一种包括有程序的非暂态计算机可读介质，当所述程序被计算机执行时使所述计算机执行方法，所述方法包括：
生成与当前未显示的第一内容屏幕关联的通知声音的定位信息；以及
在正在向用户显示第二内容屏幕的同时，根据所述定位信息将所述通知声音输出给所述用户。
CN201380006749.0A 2012-02-03 2013-01-23 信息处理设备、信息处理方法和程序 Pending CN104081335A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012021887A JP6065369B2 (ja) 2012-02-03 2012-02-03 情報処理装置、情報処理方法、及びプログラム
JP2012-021887 2012-02-03
PCT/JP2013/000312 WO2013114821A1 (en) 2012-02-03 2013-01-23 Information processing device, information processing method, and program

Publications (1)

Publication Number Publication Date
CN104081335A true CN104081335A (zh) 2014-10-01

Family

ID=47790415

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380006749.0A Pending CN104081335A (zh) 2012-02-03 2013-01-23 信息处理设备、信息处理方法和程序

Country Status (9)

Country Link
US (2) US10445059B2 (zh)
EP (1) EP2810155B1 (zh)
JP (1) JP6065369B2 (zh)
KR (1) KR20140130662A (zh)
CN (1) CN104081335A (zh)
BR (1) BR112014018422A8 (zh)
RU (1) RU2014131106A (zh)
TW (1) TW201346700A (zh)
WO (1) WO2013114821A1 (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107819966A (zh) * 2016-09-14 2018-03-20 富士施乐株式会社 处理装置和图像形成装置
CN108369492A (zh) * 2015-12-11 2018-08-03 索尼公司 信息处理装置、信息处理方法及程序
CN113157237A (zh) * 2018-09-26 2021-07-23 苹果公司 音频的空间管理
CN113162843A (zh) * 2017-09-29 2021-07-23 苹果公司 用于多用户通信会话的用户界面
US11770600B2 (en) 2021-09-24 2023-09-26 Apple Inc. Wide angle video conference
US11809784B2 (en) 2018-09-28 2023-11-07 Apple Inc. Audio assisted enrollment
US11822761B2 (en) 2021-05-15 2023-11-21 Apple Inc. Shared-content session user interfaces
US11849255B2 (en) 2018-05-07 2023-12-19 Apple Inc. Multi-participant live communication user interface
US11895391B2 (en) 2018-09-28 2024-02-06 Apple Inc. Capturing and displaying images with multiple focal planes
US11893214B2 (en) 2021-05-15 2024-02-06 Apple Inc. Real-time communication user interface
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10175848B2 (en) * 2009-02-09 2019-01-08 Nokia Technologies Oy Displaying a display portion including an icon enabling an item to be added to a list
JP6235842B2 (ja) * 2013-09-13 2017-11-22 任天堂株式会社 サーバ装置、情報処理プログラム、情報処理システム、および情報処理方法
USD768170S1 (en) * 2015-05-01 2016-10-04 Microsoft Corporation Display screen with graphical user interface
USD768171S1 (en) * 2015-05-01 2016-10-04 Microsoft Corporation Display screen with graphical user interface
JP6424745B2 (ja) * 2015-06-09 2018-11-21 株式会社リコー 画像形成装置、画像形成方法およびプログラム
USD785659S1 (en) * 2015-08-28 2017-05-02 S-Printing Solution Co., Ltd. Display screen or portion thereof with graphical user interface
JP6990991B2 (ja) * 2017-05-19 2022-01-12 ヤフー株式会社 情報表示プログラム、情報表示方法、及び情報表示装置
JP7180160B2 (ja) * 2018-07-17 2022-11-30 富士フイルムビジネスイノベーション株式会社 表示装置及びプログラム
US20230247380A1 (en) 2020-07-08 2023-08-03 Sony Group Corporation Information processing apparatus, information processing method, and sound output apparatus

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020175933A1 (en) * 2001-05-08 2002-11-28 Sami Ronkainen Method and arrangement for providing an expanded desktop
JP2005327054A (ja) * 2004-05-13 2005-11-24 Toshiba Corp 音声出力付き表示装置
CN1756173A (zh) * 2004-05-13 2006-04-05 索尼株式会社 音频信号传输系统及方法、服务器、终端设备和记录介质
US20060236255A1 (en) * 2005-04-18 2006-10-19 Microsoft Corporation Method and apparatus for providing audio output based on application window position
JP2008021186A (ja) * 2006-07-13 2008-01-31 Tamao Nagumo 音響による位置通知方法、および同方法を用いた情報処理システム
EP2251856A2 (en) * 2009-05-15 2010-11-17 LG Electronics Inc. Mobile terminal equipped with multi-view display and method of controlling the mobile terminal

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5946386A (en) * 1996-03-11 1999-08-31 Xantel Corporation Call management system with call control from user workstation computers
US5798922A (en) * 1997-01-24 1998-08-25 Sony Corporation Method and apparatus for electronically embedding directional cues in two channels of sound for interactive applications
US6330486B1 (en) * 1997-07-16 2001-12-11 Silicon Graphics, Inc. Acoustic perspective in a virtual three-dimensional environment
US6450411B1 (en) * 2001-02-02 2002-09-17 Logis-Tech Corporation Environmental stabilization system and method for maintenance and inventory
US6750706B2 (en) * 2001-06-11 2004-06-15 Matsushita Electric Industrial Co., Ltd. Control method and circuit for feedforward distortion compensation amplifier
US6850255B2 (en) * 2002-02-28 2005-02-01 James Edward Muschetto Method and apparatus for accessing information, computer programs and electronic communications across multiple computing devices using a graphical user interface
US7966184B2 (en) * 2006-03-06 2011-06-21 Audioeye, Inc. System and method for audible web site navigation
DE10338694B4 (de) * 2003-08-22 2005-08-25 Siemens Ag Wiedergabeeinrichtung, umfassend wenigstens einen Bildschirm zur Darstellung von Informationen
WO2006043721A1 (ja) * 2004-10-20 2006-04-27 Fujitsu Ten Limited 表示装置
US20070180379A1 (en) * 2006-02-02 2007-08-02 Jerold Osato Virtual desktop in handheld devices
US7620905B2 (en) * 2006-04-14 2009-11-17 International Business Machines Corporation System and method of windows management
US7844354B2 (en) * 2006-07-27 2010-11-30 International Business Machines Corporation Adjusting the volume of an audio element responsive to a user scrolling through a browser window
US8893038B2 (en) * 2006-10-03 2014-11-18 International Business Machines Corporation Graphical association of task bar entries with corresponding desktop locations
JP2008151766A (ja) 2006-11-22 2008-07-03 Matsushita Electric Ind Co Ltd 立体音響制御装置及び立体音響制御方法
US8601371B2 (en) * 2007-06-18 2013-12-03 Apple Inc. System and method for event-based rendering of visual effects
KR20090008045A (ko) * 2007-07-16 2009-01-21 삼성전자주식회사 디스플레이장치, 호스트 장치 및 그 제어방법
KR101716401B1 (ko) * 2008-01-30 2017-03-14 구글 인코포레이티드 모바일 디바이스 이벤트의 통지
US7552396B1 (en) * 2008-04-04 2009-06-23 International Business Machines Corporation Associating screen position with audio location to detect changes to the performance of an application
KR101517592B1 (ko) * 2008-11-11 2015-05-04 삼성전자 주식회사 고분해능을 가진 화면음원 위치장치 및 재생방법
US20110055703A1 (en) * 2009-09-03 2011-03-03 Niklas Lundback Spatial Apportioning of Audio in a Large Scale Multi-User, Multi-Touch System
US8499253B2 (en) * 2009-10-13 2013-07-30 Google Inc. Individualized tab audio controls
US20110316768A1 (en) * 2010-06-28 2011-12-29 Vizio, Inc. System, method and apparatus for speaker configuration
US8965014B2 (en) * 2010-08-31 2015-02-24 Cypress Semiconductor Corporation Adapting audio signals to a change in device orientation
WO2012169679A1 (ko) * 2011-06-10 2012-12-13 엘지전자 주식회사 디스플레이 장치, 디스플레이 장치의 제어 방법 및 디스플레이 장치의 음성인식 시스템
US8384726B1 (en) * 2011-08-31 2013-02-26 Google Inc. Selective rendering of off-screen content
EP2798451A1 (en) * 2011-12-28 2014-11-05 Nokia Corporation Provision of an open instance of an application
US8635021B2 (en) * 2012-05-04 2014-01-21 Google Inc. Indicators for off-screen content
US9389682B2 (en) * 2012-07-02 2016-07-12 Sony Interactive Entertainment Inc. Methods and systems for interaction with an expanded information space
US9535653B2 (en) * 2012-08-31 2017-01-03 Google Inc. Adjusting audio volume of multimedia when switching between multiple multimedia content
US9152211B2 (en) * 2012-10-30 2015-10-06 Google Technology Holdings LLC Electronic device with enhanced notifications
KR102160767B1 (ko) * 2013-06-20 2020-09-29 삼성전자주식회사 제스처를 감지하여 기능을 제어하는 휴대 단말 및 방법
US9037455B1 (en) * 2014-01-08 2015-05-19 Google Inc. Limiting notification interruptions

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020175933A1 (en) * 2001-05-08 2002-11-28 Sami Ronkainen Method and arrangement for providing an expanded desktop
JP2005327054A (ja) * 2004-05-13 2005-11-24 Toshiba Corp 音声出力付き表示装置
CN1756173A (zh) * 2004-05-13 2006-04-05 索尼株式会社 音频信号传输系统及方法、服务器、终端设备和记录介质
US20060236255A1 (en) * 2005-04-18 2006-10-19 Microsoft Corporation Method and apparatus for providing audio output based on application window position
JP2008021186A (ja) * 2006-07-13 2008-01-31 Tamao Nagumo 音響による位置通知方法、および同方法を用いた情報処理システム
EP2251856A2 (en) * 2009-05-15 2010-11-17 LG Electronics Inc. Mobile terminal equipped with multi-view display and method of controlling the mobile terminal

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108369492A (zh) * 2015-12-11 2018-08-03 索尼公司 信息处理装置、信息处理方法及程序
CN108369492B (zh) * 2015-12-11 2021-10-15 索尼公司 信息处理装置、信息处理方法及程序
CN107819966A (zh) * 2016-09-14 2018-03-20 富士施乐株式会社 处理装置和图像形成装置
CN107819966B (zh) * 2016-09-14 2021-10-22 富士胶片商业创新有限公司 处理装置和图像形成装置
CN113162843A (zh) * 2017-09-29 2021-07-23 苹果公司 用于多用户通信会话的用户界面
CN113162843B (zh) * 2017-09-29 2023-09-29 苹果公司 用于多用户通信会话的用户界面
US11849255B2 (en) 2018-05-07 2023-12-19 Apple Inc. Multi-participant live communication user interface
US11635938B2 (en) 2018-09-26 2023-04-25 Apple Inc. Spatial management of audio
US11429342B2 (en) 2018-09-26 2022-08-30 Apple Inc. Spatial management of audio
CN113157237B (zh) * 2018-09-26 2022-06-03 苹果公司 音频的空间管理
CN113157237A (zh) * 2018-09-26 2021-07-23 苹果公司 音频的空间管理
US11809784B2 (en) 2018-09-28 2023-11-07 Apple Inc. Audio assisted enrollment
US11895391B2 (en) 2018-09-28 2024-02-06 Apple Inc. Capturing and displaying images with multiple focal planes
US11822761B2 (en) 2021-05-15 2023-11-21 Apple Inc. Shared-content session user interfaces
US11893214B2 (en) 2021-05-15 2024-02-06 Apple Inc. Real-time communication user interface
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces
US11928303B2 (en) 2021-05-15 2024-03-12 Apple Inc. Shared-content session user interfaces
US11770600B2 (en) 2021-09-24 2023-09-26 Apple Inc. Wide angle video conference
US11812135B2 (en) 2021-09-24 2023-11-07 Apple Inc. Wide angle video conference

Also Published As

Publication number Publication date
BR112014018422A8 (pt) 2017-07-11
RU2014131106A (ru) 2016-02-10
JP6065369B2 (ja) 2017-01-25
US10445059B2 (en) 2019-10-15
BR112014018422A2 (zh) 2017-06-20
US20200050428A1 (en) 2020-02-13
EP2810155B1 (en) 2019-05-29
WO2013114821A1 (en) 2013-08-08
TW201346700A (zh) 2013-11-16
KR20140130662A (ko) 2014-11-11
US20140304604A1 (en) 2014-10-09
JP2013162284A (ja) 2013-08-19
EP2810155A1 (en) 2014-12-10

Similar Documents

Publication Publication Date Title
CN104081335A (zh) 信息处理设备、信息处理方法和程序
EP2796982B1 (en) Method and apparatus for providing a changed shortcut icon corresponding to a status thereof
CN105722009B (zh) 便携式装置和控制便携式装置的位置信息的方法
TWI410906B (zh) 使用擴增實境導航路徑之方法及使用該方法之行動終端機
EP2753065B1 (en) Method and apparatus for laying out image using image recognition
CN102566816B (zh) 移动终端
CN103312890B (zh) 移动终端
US9280882B2 (en) Terminal device for providing haptic effect using haptic engine and controlling method therefor
US20140225718A1 (en) Tactile Feedback in an Electronic Device
AU2014287980B2 (en) Portable device for providing combined UI component and method of controlling the same
CN108958635B (zh) 显示结束效果的移动设备及其控制方法
KR20150082824A (ko) 장치 제어 방법 및 제어 장치
EP2733595A2 (en) Method and apparatus for providing user interface through proximity touch input
CN102411436A (zh) 移动终端及其显示方法
KR102204141B1 (ko) 태스크를 리마인드하는 전자 장치 및 그 제어 방법
KR20140137848A (ko) 배터리 정보 제공 장치 및 방법과 사용자 단말
US20150026638A1 (en) Apparatus and method of controlling external input device, and computer-readable recording medium
KR20140089976A (ko) 라이브 박스를 관리하는 방법 및 장치
EP2778886A2 (en) Mobile device of executing action in display unchecking mode and method of controlling the same
KR20140109651A (ko) 메시지 처리 방법 및 이를 이용한 장치
EP2207014A2 (en) Method and Apparatus for Road Guidance Using Mobile Terminal
KR102065638B1 (ko) 이동통신 단말기의 알람 방법 및 장치
CN104023130B (zh) 位置提醒方法和装置
KR20160053597A (ko) 디바이스에 오브젝트를 디스플레이 하는 방법, 그 디바이스 및 기록매체
KR102011771B1 (ko) 사용자 인터페이스 제공 방법 및 그 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20141001