CN107924272A - 信息处理装置、信息处理方法和程序 - Google Patents

信息处理装置、信息处理方法和程序 Download PDF

Info

Publication number
CN107924272A
CN107924272A CN201680050045.7A CN201680050045A CN107924272A CN 107924272 A CN107924272 A CN 107924272A CN 201680050045 A CN201680050045 A CN 201680050045A CN 107924272 A CN107924272 A CN 107924272A
Authority
CN
China
Prior art keywords
display area
display
information processor
processing
present
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680050045.7A
Other languages
English (en)
Other versions
CN107924272B (zh
Inventor
池田拓也
井田健太郎
川名阳方
繁田脩
鈴木诚司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN107924272A publication Critical patent/CN107924272A/zh
Application granted granted Critical
Publication of CN107924272B publication Critical patent/CN107924272B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/48—Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus
    • G03B17/54—Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus with projector
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/14—Details
    • G03B21/145—Housing details, e.g. position adjustments thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03542—Light pens for emitting or receiving light
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G06F3/0386—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry for light pen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/3147—Multi-projection systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191—Testing thereof
    • H04N9/3194—Testing thereof including sensor feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/002—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/373—Details of the operation on graphic patterns for modifying the size of the graphic pattern

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

提供了一种信息处理装置，包括：处理单元，被配置为基于关于基于成为一个操作系统的操作的目标的显示区域而确定的确定区域是否包括响应于该操作而指向的指向位置的确定结果来执行切换处理，该切换处理是在用于基于该操作改变显示区域的位置或形状的显示控制模式和用于基于该操作执行与显示区域内的显示对象相对应的处理的执行模式之间进行切换的处理，其中显示区域指示在显示控制模式中显示区域的位置或形状改变时的单位。

Description

信息处理装置、信息处理方法和程序
技术领域
本公开涉及信息处理装置、信息处理方法和程序。
背景技术
已经开发了与可以改变投影方向的投影装置有关的技术。作为调整投影装置与旋转机构之间的位置关系以使图像的投影中心的位置与旋转机构的旋转中心的位置匹配的技术，例如存在以下专利文献1中所公开的技术。引用列表
专利文献
专利文献1：WO 2006/077665
发明内容
技术问题
例如，将假设如下情况：其中，可以包括各种显示对象(例如，与用户界面(UI)相关联的显示对象和与诸如图像(运动图像或静止图像)等内容相关联的显示对象)的显示区域被显示在空间内的各种位置(例如墙壁和天花板)处。在上述情况下，存在以下可能的情况：其中，“用户执行两种类型的操作，这两种操作是指定显示区域将被显示的位置的操作和关于显示区域内的显示对象的操作”。
这里，例如，用户可以通过分别利用两个不同的操作系统来执行两种类型的操作，这两种操作是指定显示区域将被显示的位置的操作和关于显示区域内的显示对象的操作，这两个不同的操作系统是用于执行指定显示区域将被显示的位置的操作的操作系统、以及用于执行关于显示区域内的显示对象的操作的操作系统。然而，在如上所述的用户使用两个不同的操作系统的情况下，由于使用不同的操作系统，用户的操作可能变得复杂，并且用户的可操作性可能降低。
本公开提出了新的和改进的信息处理装置、信息处理方法和程序，其可以实现用户的可操作性的提高。
问题的解决方案
根据本公开，提供了一种信息处理装置，包括：处理单元，被配置为基于关于基于成为一个操作系统的操作的目标的显示区域而确定的确定区域是否包括响应于该操作而指向的指向位置的确定结果，来在用于基于该操作改变显示区域的位置或形状的显示控制模式和用于基于该操作执行与显示区域内的显示对象相对应的处理的执行模式之间进行切换，其中显示区域指示在显示控制模式中显示区域的位置或形状改变时的单位。
此外，根据本公开，提供了一种由信息处理装置执行的信息处理方法，该方法包括：基于关于基于成为一个操作系统的操作的目标的显示区域而确定的确定区域是否包括响应于该操作而指向的指向位置的确定结果来执行处理的步骤，该处理是在用于基于该操作改变显示区域的位置或形状的显示控制模式和用于基于该操作执行与显示区域内的显示对象相对应的处理的执行模式之间进行切换的处理，其中显示区域指示在显示控制模式中显示区域的位置或形状改变时的单位。
此外，根据本公开，提供了一种使计算机实现基于关于基于成为一个操作系统的操作的目标的显示区域而确定的确定区域是否包括响应于该操作而指向的指向位置的确定结果来执行处理的功能，该处理是在用于基于该操作改变显示区域的位置或形状的显示控制模式和用于基于该操作执行与显示区域内的显示对象相对应的处理的执行模式之间进行切换的处理，其中显示区域指示在显示控制模式中显示区域的位置或形状改变时的单位。
本发明的有益效果
根据本公开，可以实现用户的可操作性的提高。
注意，上述效果不一定是限制性的。利用或代替上述效果，可以实现本说明书中描述的效果中的任何一个效果、或者可以从本说明书中理解的其他效果。
附图说明
图1是用于说明根据本实施例的信息处理方法的示例的说明图。
图2是用于说明根据本实施例的信息处理方法的示例的说明图。
图3是用于说明根据本实施例的信息处理方法的示例的说明图。
图4是用于说明根据本实施例的信息处理方法的示例的说明图。
图5是用于说明根据本实施例的信息处理方法的示例的说明图。
图6是示出与根据本实施例的信息处理方法相关联的处理的示例的流程图。
图7是用于说明根据本实施例的信息处理方法的示例的说明图。
图8是用于说明根据本实施例的信息处理方法的示例的说明图。
图9是用于说明根据本实施例的信息处理方法的示例的说明图。
图10是示出与根据本实施例的信息处理方法相关联的处理的示例的流程图。
图11是用于说明根据本实施例的信息处理方法的示例的说明图。
图12是用于说明根据本实施例的信息处理方法的示例的说明图。
图13是用于说明根据本实施例的信息处理方法的示例的说明图。
图14是用于说明根据本实施例的信息处理方法的示例的说明图。
图15是用于说明根据本实施例的信息处理方法的示例的说明图。
图16是示出根据本实施例的信息处理装置的配置的示例的框图。
图17是示出根据本实施例的信息处理装置的硬件配置的示例的说明图。
具体实施方式
在下文中，将参照附图详细描述本公开的优选实施例。注意，在本说明书和附图中，具有基本相同的功能和结构的结构元件用相同的附图标记表示，并且省略这些结构元件的重复说明。
此外，在下面的描述中，将按照以下顺序提供描述。
1.根据本实施例的信息处理方法
2.根据本实施例的信息处理装置
3.根据本实施例的程序
(根据本实施例的信息处理方法)
首先，将描述根据本实施例的信息处理方法。在下面的描述中，将使用根据本实施例的信息处理装置执行与根据本实施例的信息处理方法相关联的处理的示例来描述根据本实施例的信息处理方法。
[1]根据本实施例的与操作环境相关联的系统的示例
在描述根据本实施例的信息处理方法之前，将描述根据本实施例的与操作环境相关联的系统的示例。
图1是用于说明根据本实施例的信息处理方法的示例的说明图，并且示出了根据本实施例的与操作环境相关联的系统的示例。图1示出了一个示例，其中使用指向装置来执行指向操作的用户执行两种类型的操作，这两种类型的操作是指定投影在墙上等的显示区域AR1将被显示的位置的操作、以及关于显示区域AR1内的显示对象的操作。
图1中所示的系统包括投影装置10、红外摄像机12、致动装置14、红外鱼眼摄像机16和指向装置18。此外，尽管未在图1中示出，但图1中所示的系统包括根据本实施例的信息处理装置。
投影装置10的示例可以包括例如投影仪。在以下描述中，存在投影装置将被称为“投影仪”的情况。
作为观测红外光的成像装置的红外摄像机12观测投影装置10的投影方向(即显示区域AR1在空间中显示的方向)上的红外光。
此外，红外摄像机12例如具有两个红外摄像机并且用作深度传感器。例如，从捕获图像(其是从红外摄像机12中获取的)中获得的深度信息(指示红外摄像机12的观测结果的信息的示例)被用于例如对从投影装置10中投影的图像进行校正(例如，几何校正)。
致动装置14具有旋转机构，并改变投影装置10的投影方向和红外摄像机12的观测方向。致动装置14例如使用旋转机构改变摇摄方向、倾斜方向和转动方向中的一个或多个。此外，致动装置14还可以具有诸如电机和车轮之类的移动机构。
在图1所示的系统中，通过由致动装置14使投影装置10的投影方向在任意方向上改变，能够在空间内的任意位置显示显示区域AR1。
红外鱼眼摄像机16是观测红外光的鱼眼摄像机。
指向装置18是用户用于操作的操作装置的示例。指向装置18可以是专用于指向的装置，或者可以是可用于其他应用(例如，智能电话和遥控器)的通用装置。
指向装置18例如发射红外光并且根据用户利用红外光的操作来指向位置。此外，指向装置18还可以具有诸如多个按钮和触摸板之类的操作装置。
在下面的描述中，将描述指向装置18具有按钮A和按钮B的两个按钮的示例。此外，在以下描述中，假设通过用户按下按钮A来执行指向，并且由此从指向装置18发射红外光。此外，假设通过用户按下按钮B，选择存在于指向位置处的显示区域内的显示对象，或者执行与显示对象相对应的处理。
根据本实施例的信息处理装置使用例如指示红外摄像机12的观测结果的信息和指示红外鱼眼摄像机16的观测结果的信息来执行与根据本实施例的信息处理方法相关联的处理。此外，根据本实施例的信息处理装置还可以基于例如根据指向装置18的按钮的操作的操作信号来执行与根据本实施例的信息处理方法相关联的处理。
与根据本实施例的操作环境相关联的系统具有例如如图1所示的配置。
在图1所示的系统中，例如，通过由致动装置14将投影装置10的投影方向改变到任意位置，显示区域AR1被显示在空间内的任意位置处。此外，如图1中的系统所示，例如响应于使用指向装置18的用户操作而指向的指向位置P可以通过由红外摄像机12和红外鱼眼摄像机16观测的从指向装置18发出的红外光来获得，红外摄像机12观测在显示区域AR1被显示的方向上的红外光。
注意，根据本实施例的与操作环境相关联的系统不限于图1中所示的配置。
例如，图1所示的红外鱼眼摄像机16可以用能够广角观测红外光的装置来代替。
此外，在图1所示的系统中，虽然描述了通过观测从指向装置18发出的红外光来获得指向位置P的情况下的配置的示例，但是根据本实施例的与操作环境相关联的系统的配置不限于上述示例。
例如，根据本实施例的与操作环境相关联的系统可以采用以下配置：获得用户的手指指定的位置或者用户注视的位置作为指向位置P。
可以通过利用诸如利用捕获图像的手势检测技术之类的任意手势检测技术来获得由用户的手指指定的位置作为指向位置P。此外，例如，可以利用使用“瞳孔角膜反射法”之类的“角膜反射法”、“边缘反射法”、“在检测到脸部之后跟踪从眼睛、鼻子、嘴巴等获得的特征点的活动外观模型(AAM)”之类的任意注视检测技术，将用户的手指指定的位置作为指向位置P。
此外，根据本实施例的与操作环境相关联的系统可以采用其中通过观测例如作为可见光的发光二极管(LED)或激光获得指向位置P的配置。在通过观测作为可见光的LED或激光获得指向位置P的配置的情况下，在根据本实施例的与操作环境相关联的系统中，提供了可观测可见光的成像装置来替代红外摄像机12和红外鱼眼摄像机16。
此外，在图1所示的系统中，虽然已经描述了通过投影装置10的投影来显示显示区域的示例，但是根据本实施例的与操作环境相关联的系统可以采用以下配置：其中显示区域被显示在布置在空间内(例如墙壁和天花板)的显示装置的显示屏幕上。在显示区域被显示在布置在空间内的显示装置的显示屏幕上的配置的情况下，在根据本实施例的与操作环境相关联的系统中，不需要提供如图1所示的致动装置14和深度传感器。
此外，根据本实施例的与操作环境相关联的系统可以采用可以使用多个投影装置在空间内的所有方向上执行投影的配置。在使用多个投影装置在空间内的所有方向上执行投影的配置的情况下，在根据本实施例的与操作环境相关联的系统中，不需要提供如图1所示的驱动装置14。
而且，尽管在图1所示的系统中已经描述了其中红外摄像机12起到深度传感器的作用的示例，但是根据本实施例的与操作环境相关联的系统能够通过所提供的与可以获得深度的任意方案相关联的装置获得深度信息，任意方案例如是使用立体深度摄像机的方案、飞行时间(TOF)方案、以及投影红外激光图案的方案。
而且，尽管在图1所示的系统中已经描述了通过利用红外鱼眼摄像机16检测使用从指向装置18发出的红外光进行指示的示例，但是在根据本实施例的与操作环境相关联的系统中，不需要提供红外鱼眼摄像机16。在没有提供红外鱼眼摄像机16的配置的情况下，在根据本实施例的与操作环境相关联的系统中，利用例如能够检测指向装置18的姿态和运动的传感器(例如，指向装置18处提供的加速度传感器和陀螺仪传感器)来估计空间中的指向位置。
图2是用于说明根据本实施例的信息处理方法的示例的说明图，并且示出了利用在指向装置18处通过的传感器来估计空间中的指向位置的示例。
在利用在指向装置18处提供的传感器估计空间中的指向位置的情况下，根据本实施例的信息处理装置例如当基于从红外摄像机12获取的捕获图像(指示红外摄像机12的观测结果的信息的示例)在确定区域(其将稍后描述)内检测到指向位置时，将指向装置18处的红外光的发射方向保持为参考方向。
在不再检测到从红外摄像机12获取的捕获图像的指向位置的情况下，根据指向装置18处的红外光从参考方向到发射方向的相对变化来估计空间中的指向位置。例如，在图2所示的时间t2处的红外光的发射方向被保持在参考方向上的情况下，在时间t3处的指向位置是根据图2中所示的时间t3处从参考方向到红外光的发射方向的相对变化来估计的。
此外，根据本实施例的与操作环境相关联的系统可以采用“没有通过红外摄像机12的配置，并且通过利用红外鱼眼摄像机16来检测从指向装置18发出的红外光的指向”。
此外，与根据本实施例的操作环境相关联的系统可以采用“如下配置，其中从指向装置18发出两种波长的光，以及根据光的波长来区分用于改变显示区域将被显示的位置等的操作以及用于执行与显示区域内的显示对象相对应的处理的操作”。例如，在从指向装置18发出波长为a的红外光和波长为b(a≠b)的红外光的情况下，在根据本实施例的与操作环境相关联的系统中，通过采用其中红外摄像机12观测波长为a的红外光、并且红外鱼眼摄像机16观测波长为b的红外光的配置，可以根据光的波长来区分操作。注意，即使红外光被诸如可见光之类的具有其他波长的光替代，也可以以类似的方式根据光的波长来区分操作。
而且，尽管在图1所示的系统中已经描述了一个用户使用指向装置18执行操作的示例，在与根据本实施例的操作环境相关联的系统中，多个用户中的每一个都可以使用指向装置18执行操作。
在与根据本实施例的操作环境相关联的系统被多个用户使用的情况下，根据本实施例的信息处理装置执行与稍后将基于由每个用户执行的使用指向装置18的操作描述的根据本实施例的信息处理方法相关联的处理。
注意，在根据本实施例的与操作环境相关联的系统被多个用户使用的情况下，根据本实施例的信息处理装置也可以基于每个使用任意认证技术来认证的用户的认证结果、在与认证用户相对应的权限范围内执行处理。与认证相关联的处理可以由根据本实施例的信息处理装置执行，或者可以由根据本实施例的信息处理装置的外部装置执行。
下面将使用图1所示的系统的示例来描述与根据本实施例的信息处理方法相关联的处理。
[2]与根据本实施例的信息处理方法相关联的处理
如上所述，用户可以通过分别利用两个不同的操作系统来执行两种类型的操作，这两种操作是指定显示区域将被显示的位置的操作和关于显示区域内的显示对象的操作，这两个不同的操作系统是用于执行指定显示区域将被显示的位置的操作的操作系统、以及用于执行关于显示区域内的显示对象的操作的操作系统。然而，在如上所述的用户使用两个不同的操作系统的情况下，由于使用不同的操作系统，用户的操作可能变得复杂，并且用户的可操作性可能降低。
因此，根据本实施例的信息处理装置执行基于例如与在基于成为一个操作系统的操作的目标的显示区域所确定的确定区域中是否包括通过该操作所指向的位置有关的确定结果，来在显示控制模式和执行模式之间进行切换的处理(在本实施例中，在显示控制模式和执行模式之间进行切换的切换处理也被称为“选择处理”)。通过执行选择处理，根据本实施例的信息处理装置例如能够根据一个操作系统的操作实现基于操作来控制显示区域的显示，以及基于操作来执行与显示区域内的显示对象相对应的处理。
这里，根据本实施例的显示控制模式是用于基于一个操作系统的操作来控制显示区域的显示的处理模式。在根据本实施例的显示控制模式中执行处理的情况下，例如，可以基于一个操作系统的操作来实现显示区域的显示位置的改变。此外，在根据本实施例的显示控制模式中执行处理的情况下，例如，可以执行显示区域的大小的改变、旋转、以及诸如宽高比的改变之类的形状的改变。这里，显示区域可以是显示装置可以每次显示视频的边界区域的可显示区域(在显示装置是投影仪的情况下的可投影区域)，或者可以是设置在可显示区域内的区域，其被设置为在根据用户的操作执行移动、形状变化等时受影响的范围(单位)，并且其边界在视觉上被指示，或者可以是由预定的任务或应用程序应用用来处理数据的图形界面中的一个单位(所谓的窗口)。
此外，根据本实施例的执行模式是用于基于一个操作系统的操作执行与显示区域内的显示对象相对应的处理的处理模式。在根据本实施例的执行模式中执行处理的情况下，例如，与显示区域相关联的各种处理，诸如与显示区域内的UI相关联的处理、与图像的再现相关联的处理、以及与应用的执行相关联的处理响应于一个操作系统的操作来实现。注意，除了显示控制模式和执行模式以外，还可能有其他模式。
根据通过选择处理选择的显示控制模式的处理或根据通过选择处理选择的执行模式的处理可以例如由根据本实施例的信息处理装置执行，或者可以在根据本实施例的信息处理装置的外部装置处执行。在以下描述中，存在这样的情况，其中根据通过选择处理选择的显示控制模式的处理或者根据通过选择处理选择的执行模式的处理被统称为“根据所选择的模式的处理”。此外，在以下描述中，将主要描述作为根据本实施例的信息处理装置执行根据所选择的模式的处理的示例的情况。
此外，根据本实施例的确定区域是与显示区域对应的区域，其成为用于选择显示控制模式或执行模式的确定的基础。
根据本实施例的确定区域的示例可以包括例如与显示区域相同的区域。
此外，根据本实施例的确定区域可以是比显示区域大并且包括显示区域的区域。
图3是用于说明根据本实施例的信息处理方法的示例的说明图，并且示出了根据本实施例的确定区域的示例。
例如，如图3所示，在根据本实施例的包括显示区域并且大于显示区域的区域被设置为确定区域的情况下，即使指向位置在显示区域的末端周围频繁地改变，可以防止频繁执行显示控制模式和执行模式的设置。
具体而言，根据本实施例的信息处理装置基于响应于一个操作系统的操作而指向的指向位置与确定区域之间的位置关系来选择显示控制模式或执行模式。
根据本实施例的信息处理装置在指向位置被包括在确定区域中的情况下选择执行模式。此外，根据本实施例的信息处理装置在指向位置位于确定区域之外的情况下选择显示控制模式。
图4和图5是用于说明根据本实施例的信息处理方法的示例的说明图。图4示出了从红外摄像机12获取的捕获图像的示例，图5示出了从红外鱼眼摄像机16获取的捕获图像的示例。图4中所示的“AR2”表示确定区域的示例。
根据本实施例的信息处理装置基于例如“从红外摄像机12获取的捕获图像(指示红外摄像机12的观测结果的信息的示例)”或“从红外摄像机12获取的捕获图像和从红外鱼眼摄像机16获取的捕获图像(指示红外鱼眼摄像机16的观测结果的信息)”来指定指向位置和确定区域之间的位置关系。
根据本实施例的信息处理装置例如基于从红外摄像机12获取的捕获图像，在检测到指向位置位于确定区域AR2内的情况下(如图4中的P1所示)，选择执行模式。
此外，根据本实施例的信息处理装置例如基于从红外摄像机12获取的捕获图像，在检测到指向位置位于确定区域之外的情况下(如图4中的P2所示)来选择显示控制模式AR2。
在此，在指向位置位于确定区域AR2之外的情况下，有可能存在这样的情况：其中，在红外摄像机12处未观测到从指向装置18发出的红外光，即未从红外摄像机12获取的捕获图像中指定指向位置。即使在如上所述的从红外摄像机12获取的捕获图像中未指定指向位置的情况下，根据本实施例的信息处理装置也可以基于从红外鱼眼摄像机16获取的捕获图像在空间内指定指向位置，如图5中的P所示。
因此，根据本实施例的信息处理装置还可以在例如未从红外摄像机12获取的捕获图像中指定指向位置并且从红外鱼眼摄像机16获取的捕获图像中指定指向位置的情况下选择显示控制模式。
注意，根据本实施例的信息处理装置可以基于从指向装置18获取的操作信号来选择性地执行选择处理。
根据本实施例的信息处理装置执行选择处理，这通过例如从指向装置18获取指示按钮A被按下的操作信号(指示发出红外光的操作信号的示例)来触发。另外，根据本实施例的信息处理装置不执行选择处理，这通过例如从指向装置18获取指示按钮A未被按下的操作信号(指示未发出红外光的操作信号的示例)来触发。注意，不言而喻，在选择性地执行选择处理的情况下的处理的示例不限于上述示例。
通过根据本实施例的信息处理装置执行上述选择处理作为与根据本实施例的信息处理方法相关联的处理，显示控制模式或执行模式例如基于与使用指向装置18进行指示相关联的操作(一个操作系统的操作的示例)。
因此，用户可以通过例如使用指向装置18执行指向来改变显示区域将被显示的位置等，或者可以执行与显示区域内的显示对象相对应的处理。因此，通过根据本实施例的信息处理装置执行上述选择处理作为与根据本实施例的信息处理方法相关联的处理，可以实现用户的可操作性的提高。
图6是示出与根据本实施例的信息处理方法相关联的处理的示例的流程图。图6中示出的步骤S100至步骤S104和步骤S108对应于选择处理的示例。此外，图6中示出的步骤S106和S110中的处理对应于根据所选择的模式的处理的示例。
根据本实施例的信息处理装置确定是否检测到指向(S100)。根据本实施例的信息处理装置确定在基于例如“从红外摄像机12获取的捕获图像”或者从“从红外摄像机12获取的捕获图像和从红外鱼眼摄像机16获取的捕获图像”检测到指向位置的情况下检测到指向。此外，根据本实施例的信息处理装置还可以基于例如从指向装置18获取的操作信号来确定是否检测到指向。
在步骤S100中未确定检测到指向的情况下，根据本实施例的信息处理装置在确定检测到指向之前不进行处理。
此外，在步骤S100中确定检测到指向的情况下，根据本实施例的信息处理装置确定指向位置是否位于确定区域之外(S102)。例如，如上所述，根据本实施例的信息处理装置基于“从红外摄像机12获取的捕获图像”或者“从红外摄像机12获取的捕获图像和从红外鱼眼摄像机16获取的捕获图像”来确定指向位置是否位于确定区域之外。
在步骤S102中确定指向位置位于确定区域之外的情况下，根据本实施例的信息处理装置设置显示控制模式(S104)。
然后，根据本实施例的信息处理装置按照根据在步骤S104中设置的显示控制模式的处理(S106)来改变显示区域的显示。
根据本实施例的信息处理装置通过例如在与指向位置相对应的位置处显示显示区域来改变显示区域的显示。
根据本实施例的信息处理装置通过例如获得致动装置14的驱动方向以使得指向位置位于显示区域中的预定位置处，并且将包括控制命令的信号传送到致动装置14来驱动致动装置14。根据本实施例的信息处理装置例如经由通信单元(其将稍后描述)或所连接的通信装置将包括控制命令的信号传送到致动装置14。
这里，显示区域中的预定位置的示例可以包括例如显示区域的中心位置之类的任意设置位置。
此外，根据本实施例的信息处理装置通过例如基于从自红外摄像机12中获取的捕获图像获得的深度信息来校正要在空间投影的图像、并且将包括校正图像和控制命令的信号传送到投影装置10来使投影装置10投影图像。根据本实施例的信息处理装置经由例如通信单元(其将稍后描述)或所连接的通信装置将包括控制命令的信号传送到投影装置10。
通过根据本实施例的信息处理装置，例如如上所述地控制致动装置14和投影装置10，显示区域的显示被改变。
注意，显示区域的显示的改变的示例不限于上述示例。
例如，根据本实施例的信息处理装置可以在显示区域不能被显示在与指向位置相对应的位置的情况下，在能够显示显示区域的位置处显示显示区域。显示区域不能被显示在与指向位置相对应的位置处的情况的示例可以包括例如如下情况：其中，如果显示区域被显示在与指向位置相对应的位置处，则显示区域被显示在非平面部分上，以及包括例如如下情况：其中，如果显示区域被显示在与指向位置相对应的位置处，则显示区域的一部分包括凹面和凸面(其中如果显示区域被显示在与指向位置相对应的位置处，则显示区域位于多个平面上的情况)。
根据本实施例的信息处理装置通过例如移动显示区域或者减小显示区域的尺寸，或者通过移动显示区域并且减小显示区域的尺寸来在可以显示显示区域的位置处显示显示区域。
图7是用于说明根据本实施例的信息处理方法的示例的说明图，并且示出了显示区域被显示在可以显示显示区域的位置处的示例。
例如，如图7中的A所示，在如果显示区域被显示在与指向位置相对应的位置处，则显示区域的一部分包括凹面和凸面的情况下，根据本实施例的信息处理装置从除凹面和凸面之外的平面区域中搜索最大矩形区域。例如，根据本实施例的信息处理装置通过利用深度信息来搜索上述矩形区域。
然后，根据本实施例的信息处理装置在搜索到的矩形区域处显示显示区域，例如，如图7中的B所示。
再次参照图6，将描述与根据本实施例的信息处理方法相关联的处理的示例。在步骤S102中未确定指向位置位于确定区域之外的情况下，根据本实施例的信息处理装置设置执行模式(S108)。
然后，根据本实施例的信息处理装置按照根据在步骤S104中设置的执行模式的处理执行与包括在显示区域中的显示对象相对应的处理(S110)。
图8是用于说明根据本实施例的信息处理方法的示例的说明图，并且示出了在指向位置位于确定区域内的情况下的显示区域的显示的示例。图8示出了在显示区域中显示图标A、图标B和图标C的三个图标(显示对象的示例)的示例。
在指向位置位于确定区域内的情况下，根据本实施例的信息处理装置将光标显示在指向位置处，如图8所示。
此外，根据本实施例的信息处理装置例如基于从指向装置18获取的操作信号执行与对应于光标的位置(即，指向位置)的图标相关联的处理。例如，在光标位于图8所示的位置时，用户按下指向装置18的按钮B的情况下，根据本实施例的信息处理装置基于从指向装置18获取的操作信号执行与图标A相关联的处理。例如，根据本实施例的信息处理装置参考表(或数据库)指定与图标A相关联的处理并且执行指定处理，其中图标与指示诸如应用的执行之类的处理的数据相关联。
注意，不言而喻，步骤S110中的处理的示例不限于参考图8描述的示例。
根据本实施例的信息处理装置按照与根据本实施例的信息处理方法相关联的处理执行例如图6中所示的处理。
这里，通过例如图6所示的处理被执行，用户可以改变显示区域将被显示的位置等，或者可以通过例如使用指向装置18执行指向来执行与显示区域内的显示对象相对应的处理。因此，通过例如图6所示的处理被执行为与根据本实施例的信息处理方法相关联的处理，可以实现用户的可操作性的提高。
注意，不言而喻，与根据本实施例的信息处理方法相关联的处理不限于图6中所示的处理。
根据本实施例的信息处理装置例如按照与根据本实施例的信息处理方法相关联的处理执行“上述选择处理”或“上述选择处理和根据所选择的模式的上述处理”。
注意，与根据本实施例的信息处理方法相关联的处理不限于“上述选择处理”或“上述选择处理和根据所选择的模式的上述处理”。
例如，根据本实施例的信息处理装置可以进一步按照与根据本实施例的信息处理方法相关联的处理执行以下处理(I)至(III)中的一个或多个。
(I)在显示区域中显示与位于确定区域外的指向位置相对应的内容的情况下的处理
当在没有执行选择处理的情况下，指向位置从确定区域之外的位置变化到确定区域内的位置时，根据本实施例的信息处理装置在显示区域中显示与位于确定区域之外的指向位置相对应的内容。
这里，没有执行选择处理的情况的示例可以包括例如未检测到用于执行选择处理的触发器的情况、以及检测到与用于在显示区域中显示与位于显示区域之外的指向位置相对应的内容的操作相对应的操作信号的情况。
用于在显示区域中显示与位于确定区域之外的指向位置相对应的内容的操作的示例可以包括例如“在指向确定区域之外的位置的状态下按压指向装置18的按钮，并且在保持按压按钮的同时将指向位置移动到显示区域内(或在确定区域内)的位置的操作。此外，用于在显示区域中显示与位于确定区域之外的指向位置相对应的内容的操作的示例还可以包括在指向位置移动到显示区域内(或者确定区域内)的位置之后释放按钮的操作。在以下描述中，存在这样的情况，其中还包括上述释放按钮的操作的“用于在显示区域中显示与位于确定区域之外的指向位置相对应的内容的操作”被称为“拖放操作”。
图9是用于说明根据本实施例的信息处理方法的示例的说明图，并且示出了在显示区域中显示与位于确定区域之外的指向位置相对应的内容的情况的示例。
例如，如图9所示，如果用户执行“在房间内的壁橱(空间的示例)被指向的状态下按压指向装置18的按钮，并且在保持按压按钮的同时将指向位置移动到显示区域内的位置的操作”，根据本实施例的信息处理装置在显示区域中显示与壁橱相关的内容。图9示出了与时尚有关的信息作为与壁橱相关的内容被显示在显示区域中的示例。
在另一示例中，如果用户执行“在房间内的窗户(空间的示例)被指向的状态下执行按压指向装置18的按钮，并且在保持按压按钮的同时将指向位置移动到显示区域内的位置的操作”，则根据本实施例的信息处理装置在显示区域中显示与窗户有关的内容。作为与窗户有关的内容，例如，在显示区域中显示诸如天气预报之类的与天气有关的信息。
根据本实施例的信息处理装置例如通过利用指示哪种类型的对象位于空间内的哪个位置的数据来指定指向的对象。例如，可以从使用被称为同时定位和映射(SLAM)的技术获得的三维信息等中获得指示哪种类型的对象位于空间内的哪个位置的数据，SLAM通过利用从在空间中提供的成像装置获得的捕获图像和利用任意对象检测技术(诸如利用捕获图像的对象检测技术)获得的对象的检测结果来创建三维环境。注意，指示哪种类型的对象位于空间内的哪个位置的数据可以是利用任意技术生成的数据。
图10是示出与根据本实施例的信息处理方法相关联的处理的示例的流程图，并且示出了在显示区域中显示与位于确定区域之外的指向位置相对应的内容的情况下的处理的示例。
根据本实施例的信息处理装置确定是否固定显示区域的显示位置(S200)。例如，根据本实施例的信息处理装置在确定没有执行选择处理的情况下固定显示区域的显示位置。
在步骤S200中未确定显示区域的显示位置是固定的情况下，根据本实施例的信息处理装置结束图10所示的处理。在未确定显示区域的显示位置是固定的情况下，例如，如图6所示的处理被执行。
此外，在步骤S200中确定显示区域的显示位置是固定的情况下，根据本实施例的信息处理装置确定位于确定区域之外的位置是否被指向(S202)。在指向位置位于确定区域之外的情况下，根据本实施例的信息处理装置确定位于确定区域之外的位置被指向。
在步骤S202中未确定指向确定区域之外的位置的情况下，根据本实施例的信息处理装置例如重复从步骤S200开始的处理。
此外，在步骤S202中确定指向确定区域之外的位置的情况下，根据本实施例的信息处理装置例如确定是否对显示区域内的位置执行拖放操作(S204)。
在步骤S204中未确定对显示区域内的位置执行拖放操作的情况下，根据本实施例的信息处理装置例如重复从步骤S202开始的处理。
此外，在步骤S204中确定对显示区域内的位置执行拖放操作的情况下，根据本实施例的信息处理装置例如使得与指向对象相关的内容被显示在显示区域中(S206)。此外，在检测到关于显示区域的操作的情况下，根据本实施例的信息处理装置执行与在显示区域中显示的内容相对应的处理(S208)。
根据本实施例的信息处理装置按照在显示区域中显示与位于确定区域外的指向位置相对应的内容的处理执行例如图10中所示的处理。注意，不言而喻，在显示区域中显示与位于确定区域之外的指向位置相对应的内容的处理的示例不限于图10所示的示例。
(II)在存在多个显示区域的情况下的处理
例如，在空间内存在多个投影仪(图像投影装置的一个示例)的情况下，在空间中提供多个显示装置的情况下，在多个显示区域可以被显示在空间内提供的显示装置的显示屏幕等上的情况下，假设在空间内存在多个显示区域的情况。
在如上所述存在多个显示区域的情况下，根据本实施例的信息处理装置对在多个显示区域中选择的显示区域执行选择处理。此外，在存在多个显示区域的情况下，根据本实施例的信息处理装置还可以对在多个显示区域中选择的显示区域上执行上述处理(I)。
这里，根据本实施例的信息处理装置例如基于用户操作来选择显示区域。与选择显示区域有关的用户操作的示例可以包括指定投影仪、显示装置或显示区域的操作。对投影仪、显示装置或显示区域的指定例如通过以下方法来实现。注意，不言而喻，用于实现对投影仪、显示装置或显示区域的指定的示例不限于以下描述的示例。
-针对投影仪、显示装置或显示区域中的每一个，设置从指向装置18发出的光的波长，并且根据从指向装置18发出的光的波长来指定投影仪等。
-针对投影仪、显示装置或显示区域中的每一个，设置ID，并且根据从指向装置18或其他装置发送的ID来指定投影仪等。
-针对投影仪、显示装置或显示区域中的每一个，设置唯一的名称，并且根据通过利用任意语音识别技术识别的用户的语音来指定投影仪等。
此外，根据本实施例的信息处理装置可以自动地选择显示区域，而不需要与显示区域的选择相关的上述用户操作。注意，即使在可以自动选择显示区域的情况下，在检测到与选择显示区域有关的上述用户操作的情况下，根据本实施例的信息处理装置可以基于用户操作来选择显示区域。
例如，根据本实施例的信息处理装置在多个显示区域中选择其中确定区域中首先包括指向位置的显示区域。
此外，在将覆盖区域分配给多个显示区域中的每一个的情况下，根据本实施例的信息处理装置可以例如选择分配了包括指向位置的覆盖区域的显示区域。根据本实施例的覆盖区域的示例可以包括包含显示区域并且大于显示区域的区域，并且是与其他覆盖区域不重叠的区域。
此外，根据本实施例的信息处理装置还可以例如基于为多个显示区域中的每一个设置的优先级来选择显示区域。例如，根据本实施例的信息处理装置选择具有更高设置优先级的显示区域。此外，在存在具有相同优先级的多个显示区域的情况下，根据本实施例的信息处理装置在多个显示区域中选择确定区域中首先包括指向位置的显示区域。
这里，例如如下设置针对多个显示区域中的每一个的优先级。注意，根据本实施例的优先级的设置方法不限于以下描述的示例，并且可以使用可以设置优先级的任意方法来设置根据本实施例的优先级。
-投影装置的位置与指向装置18的位置之间的距离越近，设置的优先级越高。
-显示区域的位置与指向装置18的位置之间的距离越近，设置的优先级越高。
-显示区域的尺寸(例如，显示区域的投影尺寸)越大，设置的优先级越高。
-当投影显示区域时，为具有较高清晰度的显示区域设置较高的优先级。
-对针对即将执行的操作的显示区域设置较高的优先级。
根据本实施例的与优先级的设置相关联的处理可以由根据本实施例的信息处理装置来执行，或者可以由根据本实施例的信息处理装置的外部装置来执行。
根据本实施例的信息处理装置或外部装置利用可以指定(或估计)距离的任意技术(例如，利用距离传感器的检测数据的方法和利用捕获图像的方法)来指定一个位置与另一个位置之间的距离。此外，根据本实施例的信息处理装置或外部装置使用诸如利用投影装置10的控制参数等的方法的任意方法来指定当显示区域被投影时的显示区域的尺寸或清晰度。此外，根据本实施例的信息处理装置或外部装置通过例如管理针对即将在记录介质等中执行操作的显示区域的识别信息(例如，ID)来指定针对即将执行操作的显示区域。
图11是用于说明根据本实施例的信息处理方法的示例的说明图，并且示出了在存在多个显示区域的情况下用于选择显示区域的方法的示例。
在空间内存在多个投影仪的情况下，使用例如如图11所示的用于选择显示区域的方法来选择显示区域。
这里，当在空间内存在多个显示区域时，可能存在多个显示区域包括重叠区域的情况。
在如上所述的根据本实施例的信息处理装置自动选择显示区域的情况下，即使多个显示区域包括重叠区域，也选择一个显示区域。
此外，在根据本实施例的信息处理装置基于与显示区域的选择相关的上述用户操作来选择显示区域的情况下，根据本实施例的信息处理装置可以例如基于指示针对显示区域设置的显示区域的前后关系的信息来选择一个显示区域。
图12是用于说明根据本实施例的信息处理方法的示例的说明图。图12中的A示出了多个显示区域包括重叠区域并且重叠区域被指向的情况，图12中的B示出了指示显示的前后关系的信息的示例。
指示图12中的B所示的显示的前后关系的信息指示在前面显示由具有较小的数字的投影仪投影的显示区域。指示图12中的B所示的显示的前后关系的信息所指示的指示前后关系的数字对应于用于选择显示区域的优先级，并且根据本实施例的信息处理装置选择在前面显示的显示区域，其是具有较高优先级的显示区域。
例如，如图12中的A所示，在用户指向两个显示区域重叠的区域的情况下，根据本实施例的信息处理装置参考图12中的B所指示的指示显示的前后关系的信息选择从投影仪A投影的显示区域，其是被显示在前面的显示区域。
(III)通知控制处理
根据本实施例的信息处理装置可以通过例如执行如以下(A)至(C)中所述的通知控制处理来向用户执行反馈。
(A)通知控制处理的第一示例
根据本实施例的信息处理装置控制在选择处理中选择的模式(显示控制模式或执行模式。以下同样适用)的通知，即在选择处理中的选择结果的通知。
根据本实施例的信息处理装置通过例如改变显示区域的显示来对在选择处理中选择的模式(选择处理中的选择结果)进行视觉通知。根据本实施例的信息处理装置例如通过向投影装置10、显示装置等发送包括控制命令的信号，来对在选择处理中选择的模式进行视觉通知。
注意，根据本实施例的信息处理装置还可以通过从诸如扬声器之类的声音输出装置输出声音(包括音乐)来对在选择处理中选择的模式进行听觉通知。
图13是用于说明根据本实施例的信息处理方法的示例的说明图，并且示出了根据第一示例的通知控制处理的视觉反馈的示例。
根据本实施例的信息处理装置通过例如以下视觉反馈来对在选择处理中选择的模式进行视觉通知。注意，不言而喻，视觉反馈的示例不限于以下示例。
-通过改变显示区域的边界的颜色进行通知(图13中的A)
-通过选择性地将渐变效果添加到显示区域进行通知(图13中的B)
-通过改变整个显示区域的颜色或渗透率进行通知(图13中的C)
-通过改变显示区域的形状进行通知(图13中的D)
-通过改变光标的显示位置和形状来进行通知(例如，在执行模式中，光标显示在指向位置，并且在显示控制模式中，光标显示在对应于显示区域的移动方向的显示区域的末端部分，并且光标的形状被改变，图13中的E)
(B)通知控制处理的第二示例
根据本实施例的信息处理装置通知当前显示区域包括非平面区域，例如，显示区域显示在非平面部分，或者显示区域的一部分包括凹面和凸面。
图14是用于说明根据本实施例的信息处理方法的示例的说明图，并且示出了根据第二示例的通知控制处理的视觉反馈的示例。图14中的A示出了在未执行视觉反馈的情况下显示区域的显示的示例。此外，图14中的B到D示出了在执行视觉反馈的情况下显示区域的显示的示例。
根据本实施例的信息处理装置通过例如以下视觉反馈来做出关于当前显示区域包括非平面区域的视觉通知。请注意，视觉反馈的示例不限于以下示例。
-通过改变非平面区域的颜色和渗透率中的一者或二者进行通知(图14中的B)
-通过以线网格图案显示非平面区域以指示通过非平面部分失真的图像来进行通知(图14中的C)
-通过在可以显示显示区域的区域(例如，可以显示显示区域的平面区域)的方向上指示箭头来鼓励改变显示区域的显示位置来进行通知(图14中的C)
(C)通知控制处理的第三示例
例如，根据本实施例的信息处理装置做出关于无法检测指向位置的通知。
这里，无法检测指向位置的情况的示例可以包括，例如，在检测到用户执行指向的同时，无法从自红外鱼眼摄像机16中获取的捕获图像等中检测到指向位置的情况。
图15是用于说明根据本实施例的信息处理方法的示例的说明图，并且示出了根据第三示例的通知控制处理的视觉反馈的示例。图15中的A示出了在未执行视觉反馈的情况下显示区域的显示的示例。而且，图15中的B和C示出了在执行视觉反馈的情况下显示区域的显示的示例。
根据本实施例的信息处理装置通过例如以下的视觉反馈来做出关于无法检测指向位置的视觉通知。注意，不言而喻，视觉反馈的示例不限于以下示例。
-显示使用字符、图像等的警报(图15中的A)
-整个显示区域或显示区域的边界闪烁(图15中的B)
此外，根据本实施例的信息处理装置还可以做出关于无法检测指向位置的听觉通知。
[3]通过使用根据本实施例的信息处理方法提供的效果的示例
通过使用根据本实施例的信息处理方法，可以提供例如以下(a)至(e)中所述的效果。
(a)用户可以通过一个操作系统的操作动态地改变显示区域的显示。
(b)用户可以通过一个操作系统的操作来改变显示区域将被显示的位置等，或者可以执行与显示区域内的显示对象相对应的处理。
(c)用户可以通过一个操作系统的操作，在改变显示区域将被显示的位置等和执行与显示区域内的显示对象相对应的处理之间无缝地切换。因此，可以通过一个操作系统的操作来实现根据用户的条件的操作。
(d)通过(c)的上述效果，例如，可以提供“其中可以根据姿势以及用户在房间中的位置在最佳位置投影图像，并且用户可以使用最佳输入装置来操作图像中的内容的环境”。
(e)由于根据指向位置与确定区域的位置关系来选择显示控制模式或执行模式，所以用户能够无缝切换两种模式。因此，用户可以更直观地执行操作。
例如，根据本实施例的信息处理装置按照与根据本实施例的信息处理方法相关联的处理执行“上述选择处理”、或“上述选择处理、根据所选择的模式的上述处理、上述处理(I)、上述处理(II)和上述处理(III)中的一种或多种处理”。
注意，“上述选择处理”和“上述选择处理、根据所选择的模式的上述处理、上述处理(I)、上述处理(II)和上述处理(III)中的一种或多种处理”中的每一个是为了方便起见而根据与根据本实施例的信息处理方法相关联的处理划分的处理类型。因此，在与根据本实施例的信息处理方法相关联的处理中，例如，“上述选择处理、根据所选择的模式的上述处理、上述处理(I)、上述处理(II)和上述处理(III)中的一种或多种处理”可以被认为是一种类型的处理。此外，在与根据本实施例的信息处理方法相关联的处理中，例如，“上述选择处理、根据所选择的模式的上述处理、上述处理(I)、上述处理(II)和上述处理(III)中的一种或多种处理”中的每一个可以被认为是两种或更多种类型的处理(根据划分处理的任意方式)。
(根据本实施例的信息处理装置)
接下来将描述能够执行与根据本实施例的信息处理方法相关联的上述处理的根据本实施例的信息处理装置的配置的示例。
图16是示出根据本实施例的信息处理装置100的配置的示例的框图。信息处理装置100包括例如通信单元102和控制单元104。
此外，信息处理装置100可以包括例如只读存储器(ROM，未示出)、随机存取存储器(RAM，未示出)、存储单元(未示出)、可以由用户操作的操作单元(未示出)，在显示屏上显示各种屏幕的显示单元(未示出)等。信息处理装置100例如使用作为数据传输路径的总线来连接上述各个组件。
ROM(未示出)存储控制单元104要使用的诸如程序和操作参数之类的控制数据。RAM(未示出)临时存储要由控制单元104执行的程序。
作为在信息处理装置100处提供的存储装置的存储单元(未示出)例如存储与根据本实施例的信息处理方法相关联的数据，例如指示显示的前后关系的信息和各种数据，诸如各种应用。这里，存储单元(未示出)的示例可以包括例如诸如硬盘之类的磁记录介质、以及诸如闪存之类的非易失性存储器。此外，存储单元(未示出)可以从信息处理装置100拆卸。
操作单元(未示出)的示例可以包括稍后将描述的操作输入装置。此外，显示单元(未示出)的示例可以包括稍后将描述的显示装置。
[信息处理装置100的硬件配置示例]
图17是示出根据本实施例的信息处理装置100的硬件配置的示例的说明图。信息处理装置100包括例如MPU 150、ROM 152、RAM 154、记录介质156、输入/输出接口158、操作输入装置160、显示装置162和通信接口164。此外，信息处理装置100使用作为数据传输路径的总线166来连接各个组件。
MPU 150包括例如一个或多个处理器(包括诸如MPU之类的运算电路、各种处理电路等)，并且用作控制整个信息处理装置100的控制单元104。此外，MPU 150在信息处理装置100中起到例如稍后将描述的处理单元110的作用。注意，处理单元110可以包括专用(或通用)电路(例如，例如，与MPU 150分离的处理器)，其可以实现每个单元的处理。
ROM 152存储由MPU 150使用的诸如程序和操作参数等的控制数据。RAM 154临时存储要由MPU 150执行的程序等。
记录介质156用作存储单元(未示出)，并且例如存储与根据本实施例的信息处理方法相关联的数据，例如指示显示的前后关系的信息和各种数据，诸如各种应用。这里，记录介质156的示例可以包括例如诸如硬盘之类的磁记录介质、以及诸如闪存之类的非易失性存储器。此外，记录介质156可以从信息处理装置100拆卸。
输入输出接口158例如连接操作输入装置160和显示装置162。操作输入装置160用作操作单元(未示出)，并且显示装置162用作显示单元(未示出)。这里，输入/输出接口158的示例可以包括例如通用串行总线(USB)端子、数字视频接口(DVI)端子、高清晰度多媒体接口(HDMI)(注册商标)端子和各种处理电路。
此外，操作输入装置160例如被提供在信息处理装置100上，并且被连接到信息处理装置100内的输入/输出接口158。操作输入装置160的示例可以包括，例如，按钮、方向键、旋转选择器，例如微动拨号盘或其组合。
此外，显示装置162例如被提供在信息处理装置100上，并且被连接到信息处理装置100内的输入/输出接口158。显示装置162的示例可以包括例如液晶显示器、有机电致发光(EL)显示器和有机发光二极管(OLED)显示器。
注意，不言而喻，输入/输出接口158可以连接到外部装置，例如信息处理装置100的外部显示装置和外部操作输入装置(例如键盘和鼠标)。此外，显示装置162可以是能够执行显示并允许用户操作的装置，例如触摸面板。
作为在信息处理装置100处提供的通信装置的通信接口164用作通信单元102，用于经由网络(或直接)以无线或有线的方式执行与构成根据本实施例的与操作环境相关联的系统的装置(例如，投影装置10、红外摄像机12、致动装置14、红外鱼眼摄像机16和指向装置18)、以及诸如服务器之类的外部装置的通信。这里，通信接口164的示例可以包括例如通信天线和射频(RF)电路(无线通信)、IEEE 802.15.1端口和发送/接收电路(无线通信)、IEEE 802.11端口和发送/接收电路(无线通信)和局域网(LAN)端子和发送/接收电路(有线通信)。
信息处理装置100根据例如图17所示的配置执行与根据本实施例的信息处理方法相关联的处理。注意，根据本实施例的信息处理装置100的硬件配置不限于图17所示的配置。
例如，在信息处理装置100经由连接的外部通信装置执行与外部装置等的通信的情况下，信息处理装置100不必包括通信接口164。此外，通信接口164可以具有这样的配置，以便能够使用多种通信方案来执行与一个或多个外部装置等的通信。
此外，信息处理装置100可以例如采用不包括记录介质156、操作输入装置160和显示装置162的配置。
此外，在信息处理装置100是构成根据本实施例的与操作环境相关联的系统的装置的情况下，信息处理装置100可以例如包括用于实现装置的功能的组件。
此外，例如，可以将图17中所示的部分或全部组件(或根据修改的示例的组件)可以用一个或多个集成电路(IC)来实现。
再次参照图16，将描述信息处理装置100的配置的示例。作为在信息处理装置100处提供的通信装置的通信单元102经由网络(或直接)以无线或有线的方式执行与构成根据本实施例的与操作环境相关联的系统的装置、以及诸如服务器之类的外部装置的通信。此外，通信单元102的通信由例如控制单元104控制。
这里，虽然通信单元102的示例可以包括例如通信天线和RF电路、以及LAN端子和发送/接收电路，但是通信单元102的配置不限于上述示例。例如，通信单元102可以采用支持诸如USB端子和发送/接收电路之类的能够进行通信的任意标准的配置、以及能够经由网络与外部装置进行通信的任意配置。此外，通信单元102可以具有能够使用多种通信方案执行与一个或多个外部装置的通信的配置。
包括例如MPU的控制单元104起到控制整个信息处理装置100的作用。此外，控制单元104包括例如处理单元110，并起到引导与根据本实施例的信息处理方法相关联的处理的作用。
处理单元110起到引导与根据本实施例的信息处理方法相关联的处理的作用，并执行上述选择处理。此外，处理单元110还可以执行根据所选择的模式的上述处理、上述处理(I)、上述处理(II)和上述处理(III)中的一种或多种处理。
控制单元104例如包括处理单元110，从而引导与根据本实施例的信息处理方法相关联的处理(例如，“上述选择处理”或“上述选择处理、根据所选择的模式的上述处理、上述处理(I)、上述处理(II)和上述处理(III)中的一种或多种处理”)。
信息处理装置100例如根据图16所示的配置执行与根据本实施例的信息处理方法相关联的处理(例如，例如，“上述选择处理”或“上述选择处理、根据所选择的模式的上述处理、上述处理(I)、上述处理(II)和上述处理(III)中的一种或多种处理”)。
因此，信息处理装置100可以根据例如图16所示的配置实现用户的可操作性的提高。
此外，信息处理装置100可以提供由与如上所述的根据例如图16所示的配置来执行的根据本实施例的信息处理方法相关联的处理提供的效果。
注意，根据本实施例的信息处理装置的配置不限于图16中所示的配置。
例如，根据本实施例的信息处理装置可以包括图16中所示的处理单元110，其与控制单元104分离(例如，用独立的处理电路实现处理单元110)。
此外，如上所述，“上述选择处理”和“上述选择处理、根据所选择的模式的上述处理、上述处理(I)、上述处理(II)和上述处理(III)中的一种或多种处理”中的每一个是为了方便起见而根据与根据本实施例的信息处理方法相关联的处理划分的处理类型。因此，用于实现与根据本实施例的信息处理方法相关联的处理的配置不限于图16中所示的配置，并且可以是根据划分与根据本实施例的信息处理方法相关联的处理的方式的配置。
此外，例如，在经由具有与通信单元102的功能和配置类似的功能和配置的外部通信装置执行与外部装置的通信的情况下，根据本实施例的信息处理装置不必包括通信单元102。
虽然以上使用信息处理装置的示例描述了本实施例，但是本实施例不限于这样的实施例。本实施例可以应用于能够执行与根据本实施例的信息处理方法相关联的处理的各种装置，例如，诸如个人计算机(PC)和服务器之类的计算机、诸如移动电话和智能电话之类的通信装置、以及平板式装置。此外，本实施例可以是构成根据本实施例的与操作环境相关联的系统的装置，例如投影装置10、红外摄像机12、致动装置14、红外鱼眼摄像机16以及指向装置18。另外，本实施例还可以应用于例如可以被并入到如上所述的装置中的处理IC。
此外，根据本实施例的信息处理装置可以应用于假定利用例如云计算连接到网络(或者各个装置之间进行通信)的信息处理系统。其中执行与根据本实施例的信息处理方法相关联的处理的信息处理系统的示例可以包括例如“下述系统：其中，由执行根据本实施例的选择处理的一个装置选择显示控制模式或执行模式，并且由执行根据本实施例的根据所选择的模式的处理的其他装置切换和执行对显示区域将被显示的位置等的改变以及对与显示区域内的显示对象相对应的处理的执行”。
(根据本实施例的程序)
通过由计算机处的处理器等执行用于使得计算机用作根据本实施例的信息处理装置的程序(例如，能够执行与根据本实施例的信息处理方法相关联的处理(例如，“上述选择处理”或“上述选择处理、根据所选择的模式的上述处理、上述处理(I)、上述处理(II)和上述处理(III)中的一种或多种处理”)的程序)，可以实现用户的可操作性的提高。
此外，当通过计算机中的处理器等执行使得计算机用作根据本实施例的信息处理装置的程序时，可以提供通过上述与根据本实施例的信息处理方法有关的处理提供的效果。
以上参照附图描述了本公开的优选实施例，而本公开不限于上述示例。本领域技术人员可以在所附权利要求的范围内找到各种变化和修改，并且应该理解，它们将自然地落入本公开的技术范围内。
例如，如上所述，提供了使得计算机用作根据本实施例的信息处理装置的程序(计算机程序)，但是本实施例可以进一步提供一种记录介质，其中上述程序一起存储。
上述配置表示本实施例的示例，当然涉及本公开的技术范围。
注意，上述效果不一定是限制性的。利用或代替上述效果，可以实现本说明书中描述的效果中的任何一种效果或者可以从本说明书中理解的其他效果。
另外，本技术也可以按如下配置。
(1)一种信息处理装置，包括：
处理单元，被配置为基于关于基于成为一个操作系统的操作的目标的显示区域而确定的确定区域是否包括响应于所述操作而指向的指向位置的确定结果来执行切换处理，所述切换处理是在用于基于所述操作改变所述显示区域的位置或形状的显示控制模式和用于基于所述操作执行与所述显示区域内的显示对象相对应的处理的执行模式之间进行切换的处理，
其中所述显示区域指示在所述显示控制模式中所述显示区域的位置或形状改变时的单位。
(2)根据(1)所述的信息处理装置，其中所述处理单元：
在所述指向位置被包括在所述确定区域中的情况下选择所述执行模式，以及
在所述指向位置位于所述确定区域外的情况下选择所述显示控制模式。
(3)根据(1)或(2)所述的信息处理装置，其中所述确定区域是比所述显示区域大并且包括所述显示区域的区域。
(4)根据(1)或(2)所述的信息处理装置，其中所述确定区域是与所述显示区域相同的区域。
(5)根据(1)或(2)所述的信息处理装置，其中所述显示区域是可显示区域，所述可显示区域是显示所述显示区域的显示装置每次能够显示视频的边界区域。
(6)根据(1)-(5)中任一项所述的信息处理装置，其中所述处理单元还根据在所述切换处理中切换的所述显示控制模式来执行处理或根据在所述切换处理中切换的所述执行模式来执行处理。
(7)根据(6)所述的信息处理装置，其中，在选择了所述显示控制模式的情况下，所述处理单元在与所述指向位置相对应的位置处显示所述显示区域。
(8)根据(7)所述的信息处理装置，其中，在所述处理单元不能够使得所述显示区域被显示在与所述指向位置相对应的位置处的情况下，所述处理单元使得所述显示区域被显示在所述显示区域能够被显示在的位置。
(9)根据(1)-(8)中任一项所述的信息处理装置，其中，当在不执行切换处理的情况下，所述指向位置从所述确定区域之外的位置改变到所述确定区域之内的位置时，所述处理单元使得与位于所述确定区域之外的所述指向位置相对应的内容被显示在所述显示区域中。
(10)根据(1)-(9)中任一项所述的信息处理装置，其中，在存在多个显示区域的情况下，所述处理单元对在所述多个显示区域中选择的显示区域执行切换处理。
(11)根据(10)所述的信息处理装置，其中所述处理单元基于用户操作来选择所述显示区域。
(12)根据(10)或(11)所述的信息处理装置，其中所述处理单元在所述多个显示区域中选择所述确定区域中首先包括所述指向位置的显示区域。
(13)根据(10)或(11)所述的信息处理装置，其中所述处理单元基于为所述多个显示区域中的每一个设置的优先级来选择所述显示区域。
(14)根据(13)所述的信息处理装置，其中所述处理单元设置所述优先级，并基于所设置的优先级来选择所述显示区域。
(15)根据(10)-(14)中任一项所述的信息处理装置，其中所述多个显示区域包括重叠区域。
(16)根据(1)-(15)中任一项所述的信息处理装置，其中所述处理单元还执行控制所述切换处理中的切换结果的通知的通知控制处理。
(17)根据(16)所述的信息处理装置，其中所述处理单元进行所述切换处理中的切换结果的视觉通知。
(18)一种由信息处理装置执行的信息处理方法，所述方法包括：
基于关于基于成为一个操作系统的操作的目标的显示区域而确定的确定区域是否包括响应于所述操作而指向的指向位置的确定结果来执行切换处理的步骤，所述切换处理是在用于基于所述操作改变所述显示区域的位置或形状的显示控制模式和用于基于所述操作执行与所述显示区域内的显示对象相对应的处理的执行模式之间进行切换的处理，
其中所述显示区域指示在所述显示控制模式中所述显示区域的位置或形状改变时的单位。
(19)一种程序，使得计算机实现基于关于基于成为一个操作系统的操作的目标的显示区域而确定的确定区域是否包括响应于所述操作而指向的指向位置的确定结果来执行切换处理的功能，所述切换处理是在用于基于所述操作改变所述显示区域的位置或形状的显示控制模式和用于基于所述操作执行与所述显示区域内的显示对象相对应的处理的执行模式之间进行切换的处理，
其中所述显示区域指示在所述显示控制模式中所述显示区域的位置或形状改变时的单位。
参考标记列表
100 信息处理装置
102 通信单元
104 控制单元
110 处理单元。

Claims (19)

1.一种信息处理装置，包括：
处理单元，被配置为基于关于基于成为一个操作系统的操作的目标的显示区域而确定的确定区域是否包括响应于所述操作而指向的指向位置的确定结果来执行切换处理，所述切换处理是在用于基于所述操作改变所述显示区域的位置或形状的显示控制模式和用于基于所述操作执行与所述显示区域内的显示对象相对应的处理的执行模式之间进行切换的处理，
其中所述显示区域指示在所述显示控制模式中所述显示区域的位置或形状改变时的单位。
2.根据权利要求1所述的信息处理装置，其中所述处理单元：
在所述指向位置被包括在所述确定区域中的情况下选择所述执行模式，以及
在所述指向位置位于所述确定区域之外的情况下选择所述显示控制模式。
3.根据权利要求2所述的信息处理装置，其中所述确定区域是比所述显示区域大并且包括所述显示区域的区域。
4.根据权利要求2所述的信息处理装置，其中所述确定区域是与所述显示区域相同的区域。
5.根据权利要求2所述的信息处理装置，其中所述显示区域是可显示区域，所述可显示区域是显示所述显示区域的显示装置每次能够显示视频的边界区域。
6.根据权利要求1所述的信息处理装置，其中所述处理单元还根据在所述切换处理中切换的所述显示控制模式来执行处理或根据在所述切换处理中切换的所述执行模式来执行处理。
7.根据权利要求6所述的信息处理装置，其中，在选择了所述显示控制模式的情况下，所述处理单元在与所述指向位置相对应的位置处显示所述显示区域。
8.根据权利要求7所述的信息处理装置，其中，在所述处理单元不能够使得所述显示区域被显示在与所述指向位置相对应的位置处的情况下，所述处理单元使得所述显示区域被显示在所述显示区域能够被显示在的位置。
9.根据权利要求1所述的信息处理装置，其中，当在不执行所述切换处理的情况下，所述指向位置从所述确定区域之外的位置改变到所述确定区域之内的位置时，所述处理单元使得与位于所述确定区域之外的所述指向位置相对应的内容被显示在所述显示区域中。
10.根据权利要求1所述的信息处理装置，其中，在存在多个所述显示区域的情况下，所述处理单元对在多个所述显示区域中选择的所述显示区域执行所述切换处理。
11.根据权利要求10所述的信息处理装置，其中所述处理单元基于用户操作来选择所述显示区域。
12.根据权利要求10所述的信息处理装置，其中所述处理单元在多个所述显示区域中选择所述确定区域中首先包括所述指向位置的所述显示区域。
13.根据权利要求10所述的信息处理装置，其中所述处理单元基于为多个所述显示区域中的每一个设置的优先级来选择所述显示区域。
14.根据权利要求13所述的信息处理装置，其中所述处理单元设置所述优先级，并基于所设置的优先级来选择所述显示区域。
15.根据权利要求10所述的信息处理装置，其中多个所述显示区域包括重叠区域。
16.根据权利要求1所述的信息处理装置，其中所述处理单元还执行用于控制所述切换处理中的切换结果的通知的通知控制处理。
17.根据权利要求16所述的信息处理装置，其中所述处理单元做出关于所述切换处理中的切换结果的视觉通知。
18.一种由信息处理装置执行的信息处理方法，所述方法包括：
基于关于基于成为一个操作系统的操作的目标的显示区域而确定的确定区域是否包括响应于所述操作而指向的指向位置的确定结果来执行切换处理的步骤，所述切换处理是在用于基于所述操作改变所述显示区域的位置或形状的显示控制模式和用于基于所述操作执行与所述显示区域内的显示对象相对应的处理的执行模式之间进行切换的处理，
其中所述显示区域指示在所述显示控制模式中所述显示区域的位置或形状改变时的单位。
19.一种程序，使得计算机实现基于关于基于成为一个操作系统的操作的目标的显示区域而确定的确定区域是否包括响应于所述操作而指向的指向位置的确定结果来执行切换处理的功能，所述切换处理是在用于基于所述操作改变所述显示区域的位置或形状的显示控制模式和用于基于所述操作执行与所述显示区域内的显示对象相对应的处理的执行模式之间进行切换的处理，
其中所述显示区域指示在所述显示控制模式中所述显示区域的位置或形状改变时的单位。
CN201680050045.7A 2015-09-08 2016-06-15 信息处理装置、信息处理方法和程序 Expired - Fee Related CN107924272B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015-176795 2015-09-08
JP2015176795A JP2017054251A (ja) 2015-09-08 2015-09-08 情報処理装置、情報処理方法、およびプログラム
PCT/JP2016/067798 WO2017043141A1 (ja) 2015-09-08 2016-06-15 情報処理装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
CN107924272A true CN107924272A (zh) 2018-04-17
CN107924272B CN107924272B (zh) 2021-09-03

Family

ID=58239486

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680050045.7A Expired - Fee Related CN107924272B (zh) 2015-09-08 2016-06-15 信息处理装置、信息处理方法和程序

Country Status (5)

Country Link
US (1) US10545644B2 (zh)
JP (1) JP2017054251A (zh)
CN (1) CN107924272B (zh)
DE (1) DE112016004057T5 (zh)
WO (1) WO2017043141A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI734024B (zh) * 2018-08-28 2021-07-21 財團法人工業技術研究院 指向判斷系統以及指向判斷方法
US11170212B2 (en) * 2018-09-28 2021-11-09 Apple Inc. Sensor fusion eye tracking
US12105899B1 (en) * 2023-06-27 2024-10-01 Acer Incorporated Method for estimating stylus position and stylus

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006077665A1 (ja) * 2005-01-20 2006-07-27 National University Corporation NARA Institute of Science and Technology 投影装置、投影装置の制御方法、複合投影システム、投影装置の制御プログラム、投影装置の制御プログラムが記録された記録媒体
US20120003533A1 (en) * 2008-05-29 2012-01-05 3M Innovative Properties Company Metal oxide negative electrodes for lithium-ion electrochemical cells and batteries
JP2012003533A (ja) * 2010-06-17 2012-01-05 Sony Corp ポインティングシステム、制御デバイス及び制御方法
US20130321261A1 (en) * 2012-05-30 2013-12-05 Kabushiki Kaisha Toshiba Recognition apparatus
CN103631483A (zh) * 2013-11-27 2014-03-12 华为技术有限公司 一种定位的方法及装置
US20140129948A1 (en) * 2012-11-08 2014-05-08 Bank Of America Corporation Method and apparatus for simultaneous display of information from multiple portable devices on a single screen
CN104049853A (zh) * 2013-03-11 2014-09-17 联想(北京)有限公司 一种信息处理方法及电子设备
CN104155838A (zh) * 2014-08-01 2014-11-19 苏州宝丽共创信息科技有限公司 一种应用于透明玻璃的多角度折射成像的投影组件
CN104185829A (zh) * 2012-03-27 2014-12-03 索尼公司 显示控制设备、显示控制方法和程序
CN104279979A (zh) * 2013-06-24 2015-01-14 罗伯特·博世有限公司 用于确定投影机的辐射区域中的手势的方法和装置
US20150049019A1 (en) * 2009-06-04 2015-02-19 Sony Corporation Control device, input device, control system, handheld device, and control method
CN104407698A (zh) * 2014-11-17 2015-03-11 联想(北京)有限公司 一种投影方法及电子设备
CN104423806A (zh) * 2013-09-10 2015-03-18 索尼公司 信息处理装置,信息处理方法和程序
US20150127976A1 (en) * 2013-11-05 2015-05-07 Telefonaktiebolaget L M Ericsson (Publ) Method and Apparatus for Failure Recovery in a Machine-to-Machine Network
CN104866079A (zh) * 2014-02-24 2015-08-26 联想(北京)有限公司 一种信息处理方法及电子设备

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11212724A (ja) 1998-01-21 1999-08-06 Toshiba Corp 画像投影方法ならびにシステム及び同方法がプログラムされ記録される記録媒体
JP5932082B2 (ja) 2015-03-04 2016-06-08 株式会社東芝 認識装置

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006077665A1 (ja) * 2005-01-20 2006-07-27 National University Corporation NARA Institute of Science and Technology 投影装置、投影装置の制御方法、複合投影システム、投影装置の制御プログラム、投影装置の制御プログラムが記録された記録媒体
US20120003533A1 (en) * 2008-05-29 2012-01-05 3M Innovative Properties Company Metal oxide negative electrodes for lithium-ion electrochemical cells and batteries
US20150049019A1 (en) * 2009-06-04 2015-02-19 Sony Corporation Control device, input device, control system, handheld device, and control method
JP2012003533A (ja) * 2010-06-17 2012-01-05 Sony Corp ポインティングシステム、制御デバイス及び制御方法
CN104185829A (zh) * 2012-03-27 2014-12-03 索尼公司 显示控制设备、显示控制方法和程序
US20130321261A1 (en) * 2012-05-30 2013-12-05 Kabushiki Kaisha Toshiba Recognition apparatus
US20140129948A1 (en) * 2012-11-08 2014-05-08 Bank Of America Corporation Method and apparatus for simultaneous display of information from multiple portable devices on a single screen
CN104049853A (zh) * 2013-03-11 2014-09-17 联想(北京)有限公司 一种信息处理方法及电子设备
CN104279979A (zh) * 2013-06-24 2015-01-14 罗伯特·博世有限公司 用于确定投影机的辐射区域中的手势的方法和装置
CN104423806A (zh) * 2013-09-10 2015-03-18 索尼公司 信息处理装置,信息处理方法和程序
US20150127976A1 (en) * 2013-11-05 2015-05-07 Telefonaktiebolaget L M Ericsson (Publ) Method and Apparatus for Failure Recovery in a Machine-to-Machine Network
CN103631483A (zh) * 2013-11-27 2014-03-12 华为技术有限公司 一种定位的方法及装置
CN104866079A (zh) * 2014-02-24 2015-08-26 联想(北京)有限公司 一种信息处理方法及电子设备
CN104155838A (zh) * 2014-08-01 2014-11-19 苏州宝丽共创信息科技有限公司 一种应用于透明玻璃的多角度折射成像的投影组件
CN104407698A (zh) * 2014-11-17 2015-03-11 联想(北京)有限公司 一种投影方法及电子设备

Also Published As

Publication number Publication date
US10545644B2 (en) 2020-01-28
DE112016004057T5 (de) 2018-06-07
JP2017054251A (ja) 2017-03-16
WO2017043141A1 (ja) 2017-03-16
US20180275854A1 (en) 2018-09-27
CN107924272B (zh) 2021-09-03

Similar Documents

Publication Publication Date Title
US10120635B2 (en) Configuration and operation of display devices including device management
CN107113226B (zh) 用于识别周边设备的电子装置及其方法
US10163335B2 (en) Display apparatus, system, and method for controlling an external device
CN105183408B (zh) 信息处理系统和显示控制方法
JP6199903B2 (ja) 光源のリモートコントロール
CN103731602B (zh) 多显示设备及其拍摄方法
EP3675488A1 (en) Method for recording video on the basis of a virtual reality application, terminal device, and storage medium
US10936141B2 (en) Information processing device and information processing method
US9652824B2 (en) Display system, display device, display terminal, display method of display terminal, and control program
WO2014193464A1 (en) Gesture manipulations for configuring system settings
KR20170107987A (ko) 정보 처리 장치, 정보 처리 방법, 프로그램 및 시스템
EP2840517A2 (en) Method and apparatus for managing images in electronic device
CN107924272A (zh) 信息处理装置、信息处理方法和程序
CN112825040A (zh) 用户界面的显示方法、装置、设备及存储介质
CN112381729B (zh) 图像处理方法、装置、终端及存储介质
AU2011305074A1 (en) Method and system for configuring a sequence of positions of a camera
CN104335151A (zh) 终端设备、显示控制方法和程序
US12062143B2 (en) Mobile device and mobile device control method
EP3842907A1 (en) Mobile device and control method for mobile device
JP5115496B2 (ja) コンテンツ遠隔操作システム及び遠隔操作端末
JP5229141B2 (ja) 表示制御装置および表示制御方法
KR101601763B1 (ko) 거치형 단말기에 대한 모션 제어 방법
TWI398774B (zh) 管理多台電腦的操作介面、操作方法及其程式產品
CN113010005A (zh) 用于设置虚拟对象在空间中的位置的方法和电子设备
US20150241957A1 (en) Control apparatus, information processing apparatus, control method, information processing method, information processing system and wearable device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210903

CF01 Termination of patent right due to non-payment of annual fee