CN105308549B - 信息处理装置、控制方法、程序和存储介质 - Google Patents

信息处理装置、控制方法、程序和存储介质 Download PDF

Info

Publication number
CN105308549B
CN105308549B CN201480035101.0A CN201480035101A CN105308549B CN 105308549 B CN105308549 B CN 105308549B CN 201480035101 A CN201480035101 A CN 201480035101A CN 105308549 B CN105308549 B CN 105308549B
Authority
CN
China
Prior art keywords
laser designator
laser
visible light
unit
irradiation position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201480035101.0A
Other languages
English (en)
Other versions
CN105308549A (zh
Inventor
成田智也
井上卓
萩原丈博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN105308549A publication Critical patent/CN105308549A/zh
Application granted granted Critical
Publication of CN105308549B publication Critical patent/CN105308549B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/18—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for optical projection, e.g. combination of mirror and condenser and objective
    • G02B27/20—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for optical projection, e.g. combination of mirror and condenser and objective for imaging minute objects, e.g. light-pointer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G06F3/0386—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry for light pen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0383—Remote input, i.e. interface arrangements in which the signals generated by a pointing device are transmitted to a PC at a remote location, e.g. to a PC in a LAN
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0384—Wireless input, i.e. hardware and software details of wireless interface arrangements for pointing devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

【问题】为了提供一种由此可以经由激光指示器的移动来以直观的方式对投影图像中的对象执行用户输入的信息处理装置、控制方法、程序和存储介质。【解决方案】一种信息处理装置，其设置有：识别单元，该识别单元识别激光指示器将激光照射到投影图像的照射位置；获取单元，该获取单元获取关于激光指示器的移动的移动信息；以及输出单元，该输出单元输出控制信号。根据移动信息，所述控制信号改变投影图像中所出现的并且与照射位置对应的对象被显示的方式。

Description

信息处理装置、控制方法、程序和存储介质
技术领域
本公开内容涉及信息处理装置、控制方法、程序以及存储介质。
背景技术
可以显示被投影在大尺寸屏幕上的图像的投影仪用于各种场合，例如用于公司中的会议或演示或者用于学校中的课堂。另外，在对投影仪所放大和投影的图像进行描述时使用在投影图像上投影激光的激光指示器是众所周知的。最近几年，如下已经提出了在投影仪的UI操作中使用具有用于投影激光的这种功能的激光指示器的技术。
例如，专利文献1公开了下述控制系统，该控制系统通过对捕获有投影图像表面的捕获图像数据与投影图像数据的差进行计算来识别激光指示器的移动，并且该控制系统执行与激光指示器的规定移动相关联的命令。具体地，在激光指示器所照射的指示器移动以形成向右箭头的情况下，这样的控制系统将执行控制以执行相关联的显示命令例如“进行到下一个幻灯片”。
另外，专利文献2提出了下述确定系统，该确定系统用于即使在屏幕安装位置的亮度改变的情况下也能正确地检测激光指示器在由投影仪投影的投影图像上的指示位置。具体地，这样的确定系统在开始投影之前设置指示器位置确定阈值，计算当前帧的捕获图像数据与前一帧的捕获图像数据之间的差的图像数据，并且将超过阈值的图像位置确定为激光指示器的照射位置。
引用文献列表
专利文献
专利文献1：JP2001-125738A
专利文献2：JP2008-15560A
发明内容
技术问题
然而，在上述专利文献1和专利文献2中，激光指示器的激光的照射位置的坐标仅基于所捕获的图像进行识别。为了对投影图像执行点击操作、拖动操作等，可能需要操作输入设备比如连接至向投影仪传送投影图像数据的计算机的鼠标，并且这在报告人(用户)站在屏幕附近执行描述的情况下将难以使用。另外，在计算机的显示屏幕的显示信号被发送至投影仪并且投影在投影仪上的情况下，当经由输入设备例如鼠标执行使光标在屏幕上移动的操作时，将发生处理延迟，并且用户可能需要通过允许延迟来执行操作。即，处理延迟是在下述处理中的每一者中所发生的处理延迟：输入设备例如鼠标中的检测处理、计算机中的内部处理以及到显示器的显示处理。
因此，本公开内容提出了能够通过移动激光指示器来直观地执行对投影图像内的对象的操作输入的新颖且改进的信息处理装置、控制方法、程序以及存储介质。
问题解决方案
根据本公开内容，提供了一种信息处理装置，该信息处理装置包括：识别单元，该识别单元识别激光指示器将激光照射到投影图像的照射位置；获取单元，该获取单元获取激光指示器的移动信息；以及输出单元，该输出单元输出控制信号，该控制信号用于使投影图像内与照射位置对应的对象的显示根据移动信息来改变。
根据本公开内容，提供了一种控制方法，包括：识别激光指示器将激光照射到投影图像的照射位置的步骤；获取激光指示器的移动信息的步骤；以及输出控制信号的步骤，该控制信号用于使投影图像内与照射位置对应的对象的显示根据移动信息来改变。
根据本公开内容，提供了一种程序，该程序用于使计算机用作：识别单元，该识别单元识别激光指示器将激光照射到投影图像的照射位置；获取单元，该获取单元获取激光指示器的移动信息；以及输出单元，该输出单元输出控制信号，该控制信号用于使投影图像内与照射位置对应的对象的显示根据移动信息来改变。
根据本公开内容，提供了一种存储有程序的存储介质，该程序使计算机用作：识别单元，该识别单元识别激光指示器将激光照射到投影图像的照射位置；获取单元，该获取单元获取激光指示器的移动信息；以及输出单元，该输出单元输出控制信号，该控制信号用于使投影图像内与照射位置对应的对象的显示根据移动信息来改变。
发明的有利效果
根据如上所述的本实施方式，能够通过移动激光指示器来直观地执行对投影图像内的对象的操作输入。
附图说明
[图1]图1是用于描述根据本公开内容的实施方式的操作系统的概要的图。
[图2]图2是用于描述根据本公开内容的实施方式的操作系统的第一系统配置示例的图。
[图3]图3是用于描述根据本公开内容的实施方式的操作系统的第二系统配置示例的图。
[图4]图4是用于描述根据本公开内容的实施方式的操作系统的第三系统配置示例的图。
[图5A]图5A是用于描述其中投影仪从PC接收用于投影的图像数据的情况的图。
[图5B]图5B是用于描述其中投影仪从网络上获取内容的情况的图。
[图6]图6是示出根据本实施方式的操作系统的内部配置的示例的框图。
[图7]图7是示出根据本实施方式的操作系统的操作处理的顺序图。
[图8A]图8A是用于描述基于绘制照射位置的圆的轨迹的操作输入的图。
[图8B]图8B是用于描述基于绘制照射位置的水平线的轨迹的操作输入的图。
[图8C]图8C是用于描述基于多个照射位置的扩大/缩小轨迹的操作输入的图。
[图8D]图8D是用于描述基于其中多个照射位置被旋转的轨迹的操作输入的图。
[图9]图9是用于描述根据本实施方式的激光指示器的移动方式的类型的图。
[图10]图10是用于描述使用翻滚旋转的移动的操作输入示例的图。
[图11]图11是用于描述使用前后垂直移动的移动的操作输入示例的图。
[图12]图12是用于描述使用左右平摇的移动的操作输入示例的图。
[图13]图13是用于描述其中通过使用多个激光指示器来执行3D对象的视点位置操作的情况的图。
[图14]图14是用于描述其中对通过间接连接多个刚体所形成的3D对象进行操作的情况的图。
[图15]图15是用于描述通过非可见光标记的操作输入的图。
[图16]图16是用于描述对多个激光指示器的每个照射位置的识别的图。
[图17]图17是用于描述根据本实施方式的操作系统的系统配置的变形例的图。
[图18]图18是示出根据本变形例的操作系统的内部配置的示例的框图。
[图19]图19是用于描述根据本实施方式的显示屏幕的正视图控制的图。
[图20]图20是用于描述投影颜色区域的控制的图。
[图21]图21是用于描述能够照射区域的图。
[图22]图22是用于描述滑入操作和滑出操作的图。
[图23]图23是用于描述用户信息的表示的图。
具体实施方式
在下文中，将参照附图对本公开内容的优选实施方式详细地进行描述。在说明书和附图中，具有基本相同的功能和结构的元件用相同的附图标记来表示，并且省略重复说明。
将按照以下顺序给出描述。
1.根据本公开内容的实施方式的操作系统的概要
2.系统配置示例
2-1.第一系统配置示例
2-2.第二系统配置示例
2-3.第三系统配置示例
3.内部配置和操作处理
3-1.内部配置
3-2.操作处理
4.通过激光指示器的操作输入示例
4-1.通过照射位置的轨迹的操作输入
4-2.对应于移动的操作输入
5.变形例
5-1.系统配置
5-2.内部配置
6.补充说明
7.总结
<<1.根据本公开内容的实施方式的操作系统的概要>>
首先，将通过参照图1对根据本公开内容的实施方式的操作系统的概要进行描述。如图1中所示，根据本公开内容的实施方式的操作系统包括：投影仪1、激光指示器2以及向投影仪1输出用于投影的内容的个人计算机(PC)3。用于投影的内容为图表、文本、其他类型的图形图像、地图、网站、3D对象等，并且所述用于投影的内容在下文中被称为用于投影的图像数据。
投影仪1根据来自PC 3的控制信号将从PC 3接收到的图像数据(显示信号)投影在滤色屏或墙壁(在下文中将使用屏幕S作为示例)上。例如，能够编辑操作的对象obj 1至obj3包括在投影于屏幕S上的投影图像中。
激光指示器2具有根据用户(报告人)对操作按钮20a的按压操作来照射可见光激光的功能。用户可以通过以下方式来执行演示同时执行指示：使用激光指示器2，在屏幕S上所投影的图像上照射激光，使照射位置P与描述位置匹配。
PC 3以电子方式生成用于投影的图像，通过有线/无线的方式将图像数据发送至投影仪1，并且执行投影控制。虽然在图1中示出了笔记本式PC作为示例，但是根据本实施方式的PC 3不限于笔记本式PC，并且可以是台式PC或网络(云)上的服务器。
(背景技术)
此处，如上所述，在上述专利文献1和专利文献2中，激光指示器的激光的照射位置的坐标仅基于捕获有投影图像的捕获图像进行识别。因此，无法通过使用激光指示器来对投影图像内能够编辑的对象obj 1至obj3执行操作输入，并且可能需要对PC 3的输入设备(鼠标、触摸垫、键盘等)进行操作来移动对象obj 1至obj 3。
因此，已经取得通过着眼于上述情况来创建根据本公开内容的实施方式中的每个实施方式的操作系统。根据本公开内容的实施方式中的每个实施方式的操作系统可以通过移动激光指示器来直观地执行对投影图像内的对象的操作输入。具体地，例如如图1中所示，通过按压激光指示器2的操作按钮20a来将要作为操作目标的对象确定为对象obj 1，并且此后，可以通过使激光指示器2旋转来对对象obj 1进行旋转操作。在下文中，将对根据本公开内容的实施方式的操作系统的系统配置示例具体地进行描述。
<<2.系统配置示例>>
<2-1.第一系统配置示例>
图2是用于描述根据本公开内容的实施方式的操作系统的第一系统配置示例的图。如图2中所示，第一系统配置示例由投影仪1、激光指示器2(根据本公开内容的信息处理装置)和PC 3形成。
根据本实施方式的投影仪1通过有线/无线的方式连接至PC 3，并且基于从PC 3接收到的用于投影的图像数据(显示信号)来将图像投影在屏幕S上。另外，投影仪1具有可见光成像单元13v，该可见光成像单元13v用于对激光指示器2的可见光激光V在投影图像上的照射位置P进行识别。可见光成像单元13v可以内置在投影仪1中或者可以被附接在外部。
另外，通过被设置在投影仪1中，可见光成像单元13v可以自动地执行对作为成像目标的投影图像的范围的校准。具体地，可见光成像单元13v可以结合投影仪1的投影方向来改变成像范围或成像方向。注意，通过使可见光成像单元13v捕获与投影图像的范围相比更宽范围的区域，到在投影图像的范围以外(屏幕的外侧)的范围的激光照射也可以用于UI操作。
激光指示器2根据激光指示器2中所设置的操作按钮20a的按压来照射人眼可见的可见光射线的激光V。激光指示器2用于用户通过激光V指示投影图像上的任意位置。具体地，在操作按钮20a已经被半按下(照射指示操作的示例)的情况下，激光指示器2照射激光V。注意，除了可见光射线的激光V，根据本实施方式的激光指示器2可以照射可见光的标记图像(在下文中也被称为可见光标记)。可见光标记例如为任意形状(十字形或心形等)或者嵌入有诸如用户ID的信息的一维/二维条形码。另外，可见光标记不限于静止图像并且可以是其中颜色或形状变化的移动图像。
另外，在操作按钮20a被完全按下(确定操作的示例)的情况下，激光指示器2在继续照射激光V的同时通过无线通信向投影仪1发送示出检测到确定操作的信息(在下文中也被称为确定操作信息)。在此，操作按钮20a的完全按下操作是用于将投影图像内的对象确定为操作目标的确定操作的示例。用户在他或她的手中握持激光指示器2并且面对屏幕，通过半按下操作按钮20a来照射激光V，并且在照射位置P与来自投影图像内的对象中的任意对象匹配时通过完全按下操作按钮20a来将该照射位置P确定为操作目标。
另外，通过使激光指示器2移动，用户可以对所确定的对象执行直观的操作输入。具体地，通过使激光指示器2相对于屏幕S的投影图像在垂直/水平移动、旋转移动或者平摇方向/俯仰方向移动，用户可以对投影图象内的对象执行与激光指示器2的移动对应的操作输入。例如，如图1中所示，通过使激光指示器2旋转，可以对被确定为操作目标的对象obj1进行旋转操作。激光指示器2的这样的移动信息通过设置在激光指示器2中的各种类型的传感器比如陀螺仪传感器、加速度传感器和地磁传感器来检测，并且通过无线通信被发送至投影仪1。
激光指示器2所照射的激光V通过设置在投影仪1中的可见光成像单元13v来捕获，并且照射位置P的位置坐标在投影仪1中被识别。另外，当确定操作信息已经从激光指示器2发送之后，投影仪1将投影图像内的位于照射位置P的坐标位置处的对象确定为操作目标。
另外，投影仪1从激光指示器2接收激光指示器2的移动信息。然后，投影仪1向PC 3发送(输出)控制信号(在下文中也被称为指示器信息)，该控制信号用于使被确定为操作目标的对象的显示根据从激光指示器2接收到的移动信息来改变。
PC 3根据从投影仪1接收到的控制信号(指示器信息)来执行对对象的显示改变处理，并且PC 3在执行之后向投影仪1发送图像数据。
以这种方式，根据图2所示的第一系统配置示例，能够使用激光指示器2对投影图像内的任意对象进行与激光指示器2的移动对应的直观操作输入。
<2-2.第二系统配置示例>
接下来，将通过参照图3对根据本公开内容的实施方式的操作系统的第二系统配置示例进行描述。图3是用于描述根据本公开内容的实施方式的操作系统的第二系统配置示例的图。如图3中所示，操作系统的第二系统配置由投影仪1b(根据本公开内容的信息处理装置)、激光指示器2b和PC 3形成。
此处，虽然在上述第一系统配置示例中针对其中从激光指示器2照射可见光激光V的情况作出描述，但从根据本实施方式的激光指示器2所照射的激光不限于可见光，并且例如可以照射非可见光激光。
例如，如图3中所示，激光指示器2b根据对操作按钮20a的操作来照射可见光激光V以及人眼不可见的非可见光激光N例如红外光射线。具体地，例如，在操作按钮20a被半按下的情况下，照射可见光激光V，而在操作按钮20a被进一步按下的情况下(在完全按下的情况下)，在继续可见光激光Ⅴ的照射的同时照射非可见光激光N。
在这种情况下，报告人或观众在视觉上识别可见光激光V所指示的照射位置Pv，而投影仪1b基于非可见光捕获图像来识别非可见光激光N所指示的照射位置Pn，在该非可见光捕获的图像中，投影图像通过设置在投影仪1b中的非可见光成像单元13n来捕获。注意，非可见光激光N的照射位置Pn被定位在与激光V的照射位置Pv的相同位置处或者被定位在激光V的照射位置Pv的附近。
以这种方式，根据第二系统配置示例，投影仪1b(根据本公开内容的信息处理装置)可以识别从激光指示器2b照射的非可见光激光N的照射位置Pn。
另外，在第二系统配置示例中，类似于第一系统配置示例，激光指示器2b所检测的确定操作信息(例如，操作按钮20a的完全按下操作信息)被发送至投影仪1b。投影仪1b在接收到该确定操作信息时将投影图像上由激光N所指示的对象(投影图像内的位于照射位置Pn的坐标位置处的对象)确定为操作目标对象。
另外，类似于第一系统配置示例，激光指示器2b向投影仪1b执行与移动信息(垂直/水平移动、旋转移动或者俯仰/平摇操作)有关的发送，该移动信息由设置在激光指示器2b中的陀螺仪传感器等来检测。
然后，类似于包括在第一系统配置示例中的投影仪1，投影仪1b向PC 3发送(输出)控制信号(指示器信息)，该控制信号(指示器信息)用于使被确定为操作目标的对象的显示根据从激光指示器2b接收到的移动信息来改变。
以这种方式，在图3所示的第二系统配置示例中，能够使用激光指示器2b对投影图像内的任意对象进行与激光指示器2b的移动对应的直观操作输入，该激光指示器2b照射非可见光激光N。
<2-3.第三系统配置示例>
接下来，将通过参照图4对根据本公开内容的实施方式的操作系统的第三系统配置示例进行描述。图4是用于描述根据本公开内容的实施方式的操作系统的第三系统配置示例的图。如图4中所示，操作系统的第三系统配置由投影仪1c(根据本公开内容的信息处理装置)、激光指示器2c和PC 3形成。
此处，在上述第一系统配置示例和第二系统配置示例中，虽然投影仪1和投影仪1b通过无线通信来接收(获取)激光指示器2和激光指示器2b的移动信息，但根据本实施方式的移动信息的获取方法不限于此，并且可以例如基于从激光指示器2b照射的非可见光标记M来执行该获取。
如图4中所示，例如，激光指示器2c根据对操作按钮20a的操作来照射可见光激光V以及人眼不可见的非可见光标记M例如红外光射线。具体地，例如，在操作按钮20a被半按下的情况下，照射可见光激光V，而在操作按钮20a被进一步按下的情况下(在完全按下的情况下)，在继续可见光激光Ⅴ的照射的同时照射非可见光标记M。
在这种情况下，报告人或观众在视觉上识别可见光激光V所指示的照射位置P，而投影仪基于非可见光捕获图像来识别非可见光标记M的位置坐标(照射位置)，在该非可见光捕获的图像中，投影图像通过设置在投影仪1c中的非可见光成像单元13n来捕获。注意，非可见光标记M的照射位置被定位在与激光V的照射位置P的相同位置处或者被定位在激光V的照射位置P的附近。
另外，非可见光标记M是具有一定区域的图像，例如任意形状(十字形、心形等)或者嵌入有诸如用户ID的信息的一维/二维条形码。通过分析非可见光标记M的形状、大小、倾斜度或扭曲等，投影仪1c可以识别激光指示器2c的面对投影图像的位置，并且通过对非可见光标记M的形状、大小或扭曲等的进一步变化进行连续地分析，可以获取激光指示器2c的移动信息。注意，非可见光标记M并不限于静止图像，并且可以是其中颜色或形状变化的移动图像。
另外，在第三系统配置示例中，类似于第一系统配置示例和第二系统配置示例，激光指示器2c所检测的确定操作信息(例如，操作按钮20a的完全按下操作信息)被发送至投影仪1c。投影仪1c在接收到该确定操作信息时将投影图像上由非可见光标记M所指示的对象确定为操作目标对象。
然后，类似于包括在第一系统配置示例和第二系统配置示例中的投影仪1和投影仪1b，投影仪1c向PC 3发送(输出)控制信号(指示器信息)，该控制信号(指示器信息)用于使被确定为操作目标的对象的显示根据激光指示器2c的移动信息来改变。
以这种方式，在图4所示的第三系统配置示例中，能够使用激光指示器2c对投影图像内的任意对象进行与激光指示器2c的移动对应的直观操作输入，该激光指示器2b照射非可见光标记M。
至此，已经对根据本实施方式的操作系统的第一系统配置示例至第三系统配置示例进行了描述。在下文中，在可能不需要分别地描述投影仪1至投影仪1c的情况下，将它们统称为投影仪1。另外，类似地，在可能不需要单独地描述激光指示器2至激光指示器2c的情况下，将它们统称为激光指示器2。
根据本实施方式的激光指示器2的操作单元不限于如图2至图4中所示的可以通过一个操作钮20a来检测多个阶段的用户操作(半按下、完全按下)的配置，而可以是例如通过多个按钮来检测多个阶段的用户操作的配置。例如，激光指示器2的壳体上表面和下表面上分别设置操作按钮，并且在上表面的操作按钮被按下的情况下，检测到第一阶段的用户操作(对应于上述半按下操作)，而在下表面的操作按钮也被进一步按下的情况下，检测到第二阶段的用户操作(对应于上述完全按下操作)。以这种方式，激光指示器2可以检测在以下阶段处的两个阶段的用户操作：一个按钮被按下的阶段(第一阶段)以及两个按钮同时被按下的阶段(第二阶段)。
另外，设置在激光指示器2中的操作单元不限于通过物理结构实现的按钮，而可以通过检测手指的接触/接近的传感器来实现。例如，在激光指示器2的壳体上表面上设置触摸面板作为操作单元，并且激光指示器2基于手指的接触/接近的检测结果、根据接触的频率(敲击频率)等来检测多个阶段的用户操作。
另外，根据本实施方式的激光指示器2的形状不限于图2至图4B中所示的长方体形状，而是可以是例如其中在端部处设置有照射单元的指示棒形状等。
另外，如图5A中所示，在上述第一系统配置示例至第三系统配置示例中，用于投影的图像数据(显示信号)被从PC 3发送至投影仪1，并且指示器信息(控制信号)被从投影仪1发送至PC 3。此外，在PC 3中，显示控制处理根据指示器信息来执行，并且执行之后的图像数据(显示信号)被发送至投影仪1。
因此，根据本实施方式的操作系统的配置不限于在图5A中所示的示例，而可以是如图5B中所示的下述配置：其中包括上述PC 3的功能的投影仪1'例如从网络(云)上的内容服务器4获取内容数据(照片、移动图像、游戏、网站等)。在这种情况下，则投影仪1'基于所获取的内容数据来生成显示信号(用于投影的图像数据)，并且执行投影控制。另外，投影仪1'根据指示器信息来执行显示控制处理，并且对执行之后的图像数据进行投影。
<<3.内部配置和操作处理>>
接下来，将通过参照图6和图7对根据本实施方式的操作系统的内部配置和操作处理进行描述。
<3-1.内部配置>
图6是示出根据本实施方式的操作系统的内部配置的示例的框图。
(投影仪1)
如图6中所示，投影仪1具有投影图像接收单元10、图像投影单元11、成像单元13、位置识别单元14、信息获取单元15以及指示器信息输出单元16。
投影图像接收单元10通过有线/无线的方式从PC 3接收用于投影的图像数据，并且将接收到的图像数据输出至图像投影单元11。
图像投影单元11将从图像投影单元10发送的图像数据图像投影(投影)在图像投影屏幕或墙壁上。
成像单元13捕获被投影在屏幕S上的投影图像，并且将所捕获的图像输出至位置识别单元14。成像单元13通过非可见光成像单元13n例如红外光射线相机或紫外光射线相机或者可见光成像单元13v来实现，该非可见光成像单元13n执行非可见光(不可见光)成像，该可见光成像单元13v执行可见光成像。
位置识别单元14用作下述识别单元，该识别单元基于捕获有投影图像的可见光/非可见光捕获图像对由激光指示器2照射至投影图像的可见光激光V的照射位置Pv、非可见光激光N的照射位置Pn或者非可见光标记M的坐标位置进行识别。例如，位置识别单元14通过检测图像投影单元11所投影的图像与捕获有投影图像的可见光/非可见光捕获图像之间的差来检测照射位置(位置坐标)。另外，位置识别单元14可以通过将以下两个图像之间的差添加到分析中来提高准确性：当前所投影的图像之前的帧的可见光/非可见光捕获图像；当前所投影的图像的可见光/非可见光捕获图像。位置识别单元14将所识别的照射位置信息(位置坐标信息)输出至指示器信息输出单元16。
信息获取单元15具有以无线的方式从激光指示器2接收确定操作信息和/或移动信息的功能。虽然投影仪1与激光指示器2之间的无线通信的系统没有特别地限制，但数据的发送和接收例如通过Wi-Fi(注册商标)、蓝牙(注册商标)等来执行。
注意，在图4所示的第三系统配置示例中，信息获取单元15通过对非可见光成像单元13n所捕获的非可见光捕获图像进行分析来根据非可见光标记M的形状、尺寸、倾斜度或扭曲等获取激光指示器2的移动信息。
信息获取单元15将所获取的确定操作信息和移动信息输出至指示器信息输出单元16。
指示器信息输出单元16基于从信息获取单元15输出的确定信息以及从位置识别单元14输出的照射位置信息来确定要作为从图像投影单元11所投影的投影图像内的操作目标的对象。然后，指示器信息输出单元16检测下述控制信号作为指示器信息并且通过有线/无线的方式将该指示器信息发送(输出)至PC 3，所述控制信号用于使上述所确定的对象的显示根据从信息获取单元15输出的移动信息来改变。
(激光指示器2)
如图6中所示，激光指示器2具有操作单元20、可见光激光照射单元21、非可见光照射单元22、发送单元23以及姿势检测传感器24。
操作单元20具有检测多个阶段的用户操作的功能，并且操作单元20通过单个/多个操作按钮或者触摸面板来实现。例如，在检测到第一阶段的用户操作(具体地，操作按钮20a的半按下操作)的情况下，操作单元20向可见光激光照射单元21输出已经检测到照射指示操作。另外，在检测到第二阶段的用户操作(具体地，操作按钮20a的完全按下操作)的情况下，操作单元20向非可见光照射单元22和发送单元23输出已经检测到确定操作。
可见光激光照射单元21具有下述功能：在在操作单元20中检测到第一阶段的用户操作(照射指示操作)的情况下，该可见光激光照射单元21照射可见光激光V。另外，在操作单元20中检测到第二阶段的用户操作(确定操作)的情况下，可见光激光照射单元21的激光V的照射还连续地执行。
非可见光照射单元22具有下述功能：在操作单元20中检测到第二阶段的用户操作(确定操作)的情况下，非可见光照射单元22照射非可见光激光N或者非可见光标记M(也被称为非可见光图像)。由非可见光照射单元22照射的非可见光被照射在与由可见光激光照射单元21照射的可见光激光V的照射位置Pv相同的位置处或者所述照射位置的附近。
注意，在操作单元20中检测到第一阶段的用户操作(照射指示操作)的情况下，根据本实施方式的非可见光照射单元22可以通过嵌入有诸如用户ID的信息的一维/二维条形码来照射非可见光标记M。
发送单元23具有下述功能：在操作单元20中检测到第二阶段的用户操作(确定操作)的情况下，发送单元23以无线的方式向投影仪1发送确定操作信息。另外，在检测到第二阶段的用户操作(确定操作)时(例如，在操作按钮20a被完全按下时)，发送单元23以无线的方式连续地向投影仪1发送从姿势检测传感器24输出的检测结果作为移动信息。
姿势检测传感器24是对激光指示器2的姿势信息进行检测的检测单元，并且姿势检测传感器24通过例如陀螺仪传感器、加速度传感器或地磁传感器等来实现。以这种方式，激光指示器2可以获取其自身的上下移动和左右移动、旋转移动或者朝平摇/俯仰方向的移动(移动信息)。姿势检测传感器24的检测结果被输出至发送单元23。
(PC 3)
如图6中所示，PC 3具有控制单元30、图像输出单元31以及操作输入单元32。
控制单元30具有控制PC 3的配置中的每个配置的功能。具体地，例如，控制单元30根据操作输入单元32所检测的操作输入信息(包括从投影仪1发送的指示器信息)来执行显示控制处理，并且控制单元30将执行之后的图像数据从图像输出单元31输出(发送)至投影仪1。具体地，控制单元30使投影图像内被确定为操作目标的对象的显示根据激光指示器2的移动信息(上下移动和左右移动、旋转移动、朝平摇/俯仰方向的移动)来改变。例如，在移动信息示出其中激光指示器2相对于投影图像向右旋转的移动的情况下，控制单元30执行处理以类似地使投影图像内所确定的对象向右旋转。
操作输入单元32具有从连接至PC 3的键盘或鼠标等接受用户操作输入(操作输入信息)的功能。另外，操作输入单元32还用作从投影仪1接收指示器信息(控制信号)作为操作输入信息的接收单元。操作输入单元32将所接受的操作输入信息输出至控制单元30。
图像输出单元31具有通过有线/无线的方式向投影仪1发送用于投影的图像数据的功能。用于投影的图像数据的发送可以连续地被执行。
通过上述配置，在根据本实施方式的操作系统中，用户可以通过使用激光指示器2对投影图象内的对象执行与激光指示器2的移动对应的直观操作输入。
<3-2.操作处理>
接下来，将对根据本实施方式的操作系统的操作处理进行描述。此处，将作为示例对来自根据本实施方式的操作系统的上述第一系统配置示例至第三系统配置示例当中的第一系统配置示例中的操作处理进行描述。
图7是示出根据本实施方式的操作系统的操作处理的顺序图。如图7中所示，首先，在步骤S103中，激光指示器2a与投影仪1a自动地或手动地进行配对(连接设置)。
接下来，在步骤S106中，PC 3与投影仪1通过有线/无线的方式进行连接。连接方法在本公开内容中不具体限定。
接下来，在步骤S109中，PC 3的图像输出单元31向投影仪1发送用于投影的图像数据。
接下来，在步骤S112中，投影仪1a的图像投影单元111将通过投影图像接收单元10从投影仪1a所接收的投影图像投影在屏幕S上。
接下来，在步骤S115中，投影仪1a开始可见光成像单元13v的可见光成像，该可见光成像将投影图像的范围设定为目标。
另一方面，在步骤S118和步骤S121中，激光指示器2a根据用户操作来照射激光V。具体地，例如，在操作按钮20a被半按下的情况下，激光指示器2a通过可见光激光照射单元21照射激光V。以这种方式，用户(报告人)可以向观众执行描述，同时通过激光V指示投影图像内的任意位置。
接下来，在步骤S124中，投影仪1a的位置识别单元14基于可见光成像单元13v所捕获的可见光捕获图像来识别激光V的照射位置P(坐标位置)。
接下来，在步骤S127中，激光指示器2a通过操作单元20来检测确定操作(例如，操作按钮20a的完全按下操作)。
继续，在步骤S130中，激光指示器2a以无线的方式向投影仪1a发送操作单元20所检测的确定操作信息(确定命令)。
接下来，在步骤S131中，在接收到来自激光指示器2a的确定操作信息时，投影仪1a的指示器信息输出单元16确定投影图像内位于位置识别单元14所识别的照射位置P的坐标位置处的对象作为操作目标。
另一方面，在步骤S133中，激光指示器2a通过姿势检测传感器24检测激光指示器2a的姿势。具体地，通过姿势检测传感器24检测激光指示器2a的方向和倾斜度或角速度等。
接下来，在步骤S135中，激光指示器2a的发送单元23将姿势检测传感器24的检测结果连续地发送至投影仪1a作为激光指示器2a的移动信息。注意，发送单元23可以在确定操作继续被操作单元20检测的同时连续地发送激光指示器2a的移动信息。
接下来，在步骤S136中，投影仪1a的指示器信息输出单元16检测到指示器信息(控制信号)，该指示器信息(控制信号)用于使由上述S131所确定的对象的显示根据信息获取单元15从激光指示器2a接收的移动信息来改变。
继续，在步骤S139中，投影仪1a的指示器信息输出单元16将所检测的指示器信息发送至PC 3。
接下来，在步骤S142中，PC 3的控制单元30根据操作输入单元32从投影仪1a接收的指示器信息来执行显示控制处理。
然后，在步骤S145中，PC 3的图像输出单元31将显示控制处理执行之后(在根据指示器信息处理之后)的用于投影的图像发送至投影仪1a。
从这里开始，重复在S112至S145中所示的上述处理。至此，通过参照图7对根据本实施方式的操作系统的操作处理的示例进行了具体描述。
<<4.通过激光指示器的操作输入示例>>
继续，通过包括具体示例来对在根据本实施方式的发送系统中使用激光指示器2的直观操作输入进行描述。此处，作为示例，将对来自根据本实施方式的操作系统的上述第一系统配置示例至第三系统配置示例当中的第一系统配置示例中的激光指示器2a的操作输入的具体示例进行描述。
<4-1.通过照射位置的轨迹的操作输入>
在根据本实施方式的操作系统中，除了与激光指示器2的上述移动信息对应的操作输入以外，还能够执行基于照射位置P的轨迹的操作输入。投影仪1a基于可见光成像单元13所捕获的可见光捕获图像、通过对照射位置P的位置改变进行识别来获悉照射位置P的轨迹，并且输出与绘制规定轨迹的手势相关联的指示命令作为指示器信息。在下文中，将参照图8进行描述。
图8是示出基于照射位置P的轨迹的操作输入的具体示例的图。如图8A中所示，例如，在跟踪到在其上激光指示器2a所照射的激光V的照射位置P绘制圆的轨迹的情况下，投影仪1a输出确定命令作为指示器信息。
另外，如图8B中所示，在跟踪到在其上激光指示器2a所照射的激光V的照射位置P水平地绘制线的轨迹的情况下，投影仪1a输出取消或删除命令作为指示器信息。
另外，如图8C中所示，在跟踪到两个激光指示器2a-R和2a-L的照射位置Pr和Pl的扩大(照射位置Pr和Pl分开)轨迹或者缩小(照射位置Pr和Pl靠近)轨迹的情况下，则投影仪1a输出放大命令或缩小命令作为指示器信息。
另外，如图8D中所示，在跟踪到两个激光指示器2a-R和2a-L的照射位置Pr和Pl以相互面对的位置关系原样旋转的轨迹的情况下，投影仪1a输出旋转命令作为指示器信息。
<4-2.对应于移动的操作输入>
接下来，将通过参照图9至图14来对使用激光指示器2a的移动(移动信息)的直观操作输入进行具体描述。
图9是用于描述根据本实施方式的激光指示器2a的移动方式的类型的图。激光指示器2a的移动方式通常具有关于六种类型的轴的移动/旋转的自由度。
具体地，如在图9的顶部所示的，包括在x方向上的平移的左右水平移动、在y方向上的平移的上下水平移动以及在z方向上的平移的前后垂直移动，以及如在图9的底部所示的，包括上下俯仰移动(在垂直方向上摆动)、左右平摇移动(在水平方向上摆动)以及旋转移动。
在本操作系统中，执行下述显示控制处理：使在投影图像内所确定的对象根据这种六种自由度的移动来移动(使在投影图像内所确定的对象的显示发生改变)。例如，通过使激光指示器2a如图9的顶部所示在x方向、y方向和z方向上平移，对象也在x方向、y方向和z方向上平移。另外，根据使激光指示器2a如图9的底部所示上下俯仰的移动，对象围绕x轴旋转(前倾)，根据使得左右平摇的移动，对象围绕y轴旋转(偏转)；以及根据旋转移动，对象围绕z轴旋转(滚动)。
以这种方式，例如，还能够在3D CAD或者3D CG建模软件中执行视点控制。另外，在具有两个自由度的输入设备例如鼠标中，将存在下述复杂的操作：可能需要通过GUI按钮的按压状态、键盘操作或鼠标按钮等来执行模式——例如相对于xy方向/yz方向/xz方向进行平移、偏转前倾旋转或者滚动旋转——的切换。然而，根据本实施方式的操作系统，能够无模式地并且无缝地执行这些视点位置操作。
在下文中，通过包括具体示例来对使用激光指示器2a的六个自由度移动的操作输入示例进行描述。
(滚动旋转)
图10是用于描述使用滚动(roll)旋转移动的操作输入示例的图。如在图10的左侧所示的，用户通过半按下激光指示器2a的操作按钮20a来使激光V照射，并且将照射位置P与屏幕S上所投影的图像内的任意对象(obj)进行匹配。之后，用户通过全按下激光指示器2a的操作按钮20a来将对象(obj)确定为操作目标，并且在操作按钮20a被完全按下的状态下使激光指示器2a旋转(围绕z轴滚动地旋转)。此时，来自激光指示器2a的移动信息(倾斜度或角速度)被发送至投影仪1a，然后投影仪1a向PC 3发送控制信号(指示器信息)，该控制信号(指示器信息)用于使被确定为操作目标的对象的显示根据激光指示器2a的移动信息来改变。PC 3根据指示器信息执行显示控制，以便使被确定为操作目标的对象旋转，以与激光指示器2a的旋转相匹配。然后，PC 3将用于使对象旋转的显示控制投影图像发送至投影仪1a，投影仪1a将所发送的投影图像投影在屏幕S上。
以这种方式，如图在10的右侧所示，对象(obj)根据激光指示器2a的滚动旋转而围绕z轴旋转。
(前后垂直移动)
图11是用于描述使用前后垂直移动的移动的操作输入示例的图。如图11中所示，用户通过半按下激光指示器2a的操作按钮20a来使激光V照射，并且将照射位置P与屏幕S上所投影的图像内的任意对象(例如，地图图像)进行匹配。
然后，用户通过全按下激光指示器2a的操作按钮20a来将对象(obj)确定为操作目标，并且在操作按钮20a完全按下的状态下使激光指示器2a关于屏幕S在前后垂直方向上移动(使在z轴方向上平移)。此时，来自激光指示器2a的移动信息(加速度或方向)被发送至投影仪1a，然后投影仪1a向PC 3发送控制信号(指示器信息)，该控制信号(指示器信息)用于使被确定为操作目标的对象的显示根据激光指示器2a的移动信息来改变。PC 3根据指示器信息执行显示控制以便对被确定为操作目标的对象进行放大/缩小，以与激光指示器2a的前后垂直移动相匹配。然后，PC 3将用于放大/缩小了对象的显示控制投影图像发送至投影仪1a，投影仪1a将所发送的投影图像投影在屏幕S上。
以这种方式，如图11中所示，例如，当使激光指示器2a在垂直方向上向后移动时，地图图像(对象)被缩减显示(缩小)，并且当使激光指示器2a在垂直方向上向前移动时，地图图像(对象)被扩大显示(放大)。
(平摇移动)
图12是用于描述使用用于左右平摇的移动的操作输入示例的图。如在图12的左侧所示的，用户通过半按下激光指示器2a的操作按钮20a来使激光V照射，并且将照射位置P与屏幕S上所投影的图像内的任意对象(例如，3D对象)进行匹配。
然后，用户通过全按下激光指示器2a的操作按钮20a来将对象(obj)确定为操作目标，并且在操作按钮20a被完全按下的状态下使激光指示器2a执行相对于屏幕S在左右水平方向上的平摇移动(左右摆动)。此时，来自激光指示器2a的移动信息(加速度或方向)被发送至投影仪1a，并且投影仪1a向PC 3发送控制信号(指示器信息)，该控制信号(指示器信息)用于使被确定为操作目标的对象的显示根据激光指示器2a的移动信息来改变。PC 3根据指示器信息执行显示控制以便使被确定为操作目标的对象围绕y轴旋转(偏转)，以与激光指示器2a的平摇移动相匹配。然后，PC 3将其中对象被偏转控制的投影图像发送至投影仪1a，投影仪1a将所发送的投影图像投影在屏幕S上。
以这种方式，如在图12的右侧所示的，例如，当使激光指示器2a执行平摇移动时，3D对象围绕y轴方向进行旋转(偏转)。
(通过多个激光指示器2a进行的操作输入)
在根据本实施方式的操作系统中，还能够通过同时使用多个激光指示器2a来执行操作输入。在下文中，将通过参照图13和图14进行描述。
图13是用于描述其中通过使用多个激光指示器2a来执行3D对象(刚体)的视点位置操作的情况的图。如在图13的左侧所示的，用户通过在双手中握持多个激光指示器2a-R和2a-L并且半按下相应的操作按钮20a来使激光V照射，并且将照射位置Pr和Pl与屏幕S上所投影的图像内的任意对象(例如，3D对象)进行匹配。
然后，用户通过全按下激光指示器2a-R和2a-L的操作按钮20a来确定要作为操作目标的对象(obj)，并且在操作按钮20a被完全按下的状态下使激光指示器2a-R和2a-L执行关于屏幕S在左右水平方向上的平摇移动(使得左右摆动)。此时，投影仪1a基于投影图像的可见光捕获图像来分别识别激光指示器2a-R和2a-L的照射位置Pr和Pl中的每个照射位置的坐标位置，并且将照射位置Pr和Pl停留在其两端的3D对象确定为操作目标。
另外，来自激光指示器2a-R和2a-L的移动信息(加速度或方向)被发送至投影仪1a。投影仪1a向PC 3发送控制信号(指示器信息)，该控制信号(指示器信息)用于使被确定为操作目标的对象的显示根据激光指示器2a-R和2a-L的移动信息来改变。
PC 3根据指示器信息执行显示控制以便使被确定为操作目标的对象围绕y轴进行旋转(偏转)，以与激光指示器2a的平摇移动相匹配。然后，PC 3将其中对象被偏转控制的投影图像发送至投影仪1a，投影仪1a将所发送的投影图像投影在屏幕S上。
以这种方式，如在图13的右侧所示的，通过使激光指示器2a-R和2a-L执行平摇移动，通过从多个激光指示器2a-R和2a-L照射的激光Ⅴ的照射位置Pr和Pl所停留的3D对象能够围绕y轴方向进行旋转。
在图13中所示的上述示例中，虽然被确定为操作目标的3D对象由一个刚体形成，但根据本实施方式的操作目标不限于图13中所示的示例，而可以是例如通过间接连接多个刚体而形成的3D对象。下面，将参照图14进行具体描述。
图14是用于描述其中对通过间接连接多个刚体而形成的3D对象进行操作的情况的图。如在图14的顶部所示的，用户通过在双手中握持多个激光指示器2a-R和2a-L并且半按下相应的操作按钮20a来使激光V照射，并且将照射位置Pr和Pl与屏幕S上所投影的图像内的任意对象(例如，3D对象)进行匹配。具体地，用户将照射位置Pr与刚体G1与刚体G2之间的形成3D物体(obj)的间接部进行匹配，或者将照射位置Pr与间接连接至刚体G1的刚体G2进行匹配。
然后，用户通过全按下激光指示器2a-R和2a-L的操作按钮20a来确定要作为操作目标的对象(照射位置Pr所指示的刚体G2)，并且在操作按钮20a被完全压下的状态下使激光指示器2a-L在水平方向上移动。此时，投影仪1a基于投影图像的可见光捕获图像来分别识别激光指示器2a-R和2a-L的照射位置Pr和Pl中的每个照射位置的坐标位置。
另外，来自激光指示器2a-R和2a-L的移动信息(加速度或方向)被发送至投影仪1a。投影仪1a向PC 3发送控制信号(指示器信息)，该控制信号(指示器信息)用于使照射位置Pr所指示的刚体G2根据激光指示器2a-R的移动信息在照射位置P1所指示的间接部处进行弯曲。
PC 3根据指示器信息执行显示控制以便使被确定为操作目标的3D对象的刚体G2在所指示的间接部处进行弯曲，以与激光指示器2a的水平移动相匹配。然后，PC 3将被控制成使刚体G2在规定间接部处弯曲的投影图像显示发送至投影仪1a，并且投影仪1a将所发送的投影图像投影在屏幕S上。
以这种方式，如在图14的底部所示的，在由多个刚体所形成的3D对象中，在激光指示器2a-L的照射位置P1所指示的3D对象的间接部处，连接至该间接部的刚体G2能够根据激光指示器2a-R的移动进行移动。
(通过非可见光标记M进行的操作输入)
如参照图4所描述的，在由第三系统配置所形成的操作系统中，在投影仪1c中经由非可见光标记M来获取激光指示器2c的移动信息。此处，将通过参照图15来描述通过非可见光标记M进行的操作输入。
例如，如在图15的顶部所示的，从激光指示器2c照射的非可见光标记M与激光指示器2c的旋转相同地旋转。执行对照射有非可见光标记M的投影图像的非可见光成像的投影仪1c能够通过分析非可见光捕获图像来分析该非可见光标记M的倾斜度，并且投影仪1c能够根据非可见光标记M的倾斜度来获取激光指示器2c的移动信息(旋转移动)。
另外，如在图15的中间部分中所示的，从激光指示器2c照射的非可见光标记M的尺寸随着激光指示器2c远离屏幕S而变大。执行对照射有非可见光标记M的投影图像的非可见光成像的投影仪1c能够通过分析非可见光捕获图像来分析该非可见光标记M的大小，并且投影仪1c能够根据非可见光标记M的尺寸的改变来获取激光指示器2c的移动信息(垂直移动)。
另外，如在图15的底部所示的，从激光指示器2c照射的非可见光标记M的形状随着激光指示器2c关于屏幕S的对角地移动而扭曲。执行对照射有非可见光标记M的投影图像的非可见光成像的投影仪1c能够通过分析非可见光捕获图像来分析该非可见光标记M的形状，并且投影仪1c能够根据非可见光标记M的形状的改变(扭曲)来获取激光指示器2c的移动信息(平摇/俯仰移动)。
至此，已经对通过非可见光标记M进行的操作输入进行了描述。注意，虽然从激光指示器2c照射的非可见光标记M的示例是如在15图中所示的二维条形码，但诸如赛博(cyber)码的图像识别技术例如可以用于这样的二维条形码的分析。另外，在上述示例中，虽然使用了非可见光标记M，但在由参照图3所描述的系统配置所形成的上述操作系统中，也可以类似地具有通过可见光标记进行的操作输入。
(由多个用户进行的照射输入)
根据本实施方式的操作系统还能够接受通过多个用户中的每个用户进行的独立操作输入。以下，将通过参照图16进行描述。
图16是用于描述对多个激光指示器2c的照射位置的每个照射位置进行识别的图。如图16中所示，在从激光指示器2c-1至2c-3中的每个激光指示器照射的非可见光标记M1至M3的形状或颜色相互不同的情况下，投影仪1c可以基于非可见光标记M1至M3的形状或颜色来执行识别，并且可以指定激光指示器2c中的每个激光指示器的轨迹。注意，非可见光标记M3具有并行照射的多个非可见光激光。
另外，非可见光标记M可以不是仅具有不同的形状或颜色，而是可以被设置成能够嵌入用户ID的二维条形码(图16中所示的非可见光标记M4)。以这种方式，可以避免由于许多用户同时照射而引起的干扰，使得能够稳健地进行识别。
另外，投影仪1c还能够根据如非可见光标记M1至M3中所示的不同的形状或颜色或者基于从非可见光标记M4读出的用户ID来执行激光指示器2c-1至2c-4的操作员(用户)的指定。在每个用户可以被指定的情况下，投影仪1c可以执行优先权的设定，例如哪个用户的操作要优先进行。例如，投影仪1c按优先权接受特定用户的操作，优先考虑首先开始照射的用户，优先考虑在固定时间期间开始照射的特定用户；或者通过优先考虑其他用户的中断的观望获胜系统来移动优先权。具体地，在多个操作正在竞争以大幅改变所有成员正在浏览的状态比如通过按钮按下进行投影图像的屏幕转变或者整个屏幕的滚动的情况下，通过根据上述优先级系统中的任意优先级系统接受操作来提高在由多个用户进行操作时的便利性。
<<5.变形例>>
继续，将通过参照图17和图18来对根据本实施方式的操作系统的系统配置的变形例进行描述。在上述第一系统配置示例至第三系统配置示例中，可见光/非可见光成像是由设置在投影仪1中的成像单元13针对投影在屏幕S上的图像(投影图像)而执行的，并且照射位置P基于所捕获的图像而被识别。
然而，根据本公开内容的操作系统的系统配置示例不限于上述第一系统配置至第三系统配置，而可以是下述系统：该系统包括例如在激光指示器2侧的成像单元，针对投影图像执行非可见光成像，并且基于这样的非可见光捕获图像来识别照射位置P。另外，通过仅当按下操作按钮20a时执行非可见光成像，激光指示器2侧的成像单元能够避免功耗的浪费。
<5-1.系统配置>
图17是用于描述根据本实施方式的操作系统的系统配置的变形例的图。如图17中所示，根据本变形例的系统配置由投影仪1d(根据本公开内容的信息处理装置)、激光指示器2d和PC 3形成。
投影仪1d通过有线/无线的方式连接至PC 3，从PC 3接收用于投影的图像数据，并且将接收到的用于投影的图像数据投影至屏幕S上。另外，根据本实施方式的投影仪1d投影叠加在屏幕S(图像投影区域)上的非可见光例如红外光射线的坐标规定地图(也被称为坐标识别图像)Q。非可见光的坐标规定地图Q可以位于包括图像投影区域的范围中。另外，投影仪1d可以在屏幕S上主要投影一种类型的坐标规定地图Q，或者可以在屏幕S上的一些位置处扩散投影不同类型的坐标规定地图Q。通过投影多个不同的坐标规定地图Q，在整个屏幕S未进入设置在激光指示器2d中的成像单元的视角的情况下，照射位置可以被指定在局部视角处。
激光指示器2d根据操作按钮20a的按下状态来执行可见光射线的激光V的照射。具体地，例如，激光指示器2d在操作按钮20a被半按下的情况下照射可见光的激光V，而在操作按钮20a被完全按下的情况下继续激光V的照射。
另外，在操作按钮20a被完全按下的情况下，根据本实施方式的激光指示器2d针对包括激光V的照射位置P的范围来执行非可见光成像。另外，激光指示器2d识别非可见光捕获图像中所包括的坐标规定地图Q'，并且读出坐标规定地图Q'的坐标规定信息以及大小、倾斜度或扭曲等。然后，激光指示器2d通过无线通信将所读出的信息(在下文中也被称为读取信息)发送至投影仪1d。
已经从激光指示器2d接收到确定操作信息和读取信息的投影仪1d基于读取信息来识别激光指示器2d的照射位置P，并且确定要作为操作目标的对象。另外，投影仪1d基于读取信息所示出的非可见光成像地图Q'的大小、倾斜度或扭曲等来获取激光指示器2d的移动(移动信息)。
然后，投影仪1c检测控制信号(指示器信息)并且将其发送至PC 3，该控制信号(指示器信息)用于对所确定的对象执行与激光指示器2d的移动信息对应的显示改变。
PC 3根据所发送的指示器信息来执行显示控制处理，并且将执行之后的用于投影的图像数据发送至投影仪1d。
以这种方式，按照根据本变形例的操作系统、通过投影叠加在来自投影仪1d的投影图像上的非可见光坐标规定地图并且在激光指示器2d侧执行非可见光成像，照射位置P由激光指示器2d基于该非可见光捕获图像进行识别。
<5-2.内部配置>
继续，将通过参照图18来对包括在根据本实施方式的操作系统中的每个装置的内部配置进行具体描述。图18是示出根据本变形例的操作系统的内部配置的示例的框图。在下文中，将对配置中的每个配置进行具体描述。注意，由于上面已经参照图6对PC 3的内部配置进行了描述，所以在此将省略对其的描述。
(投影仪1d)
投影仪1d具有投影图像接收单元10、图像投影单元11、非可见光图像生成单元17、非可见光投影单元18、信息获取单元15d、位置识别单元14d和指示器信息输出单元16。
由于上面已经参照图6对投影图像接收单元10和图像投影单元11进行了描述，所以在此将省略对其的描述。
非可见光图像生成单元17生成非可见光的坐标规定地图Q，在该坐标规定地图Q中嵌入有在激光指示器2d识别照射位置P时使用的坐标规定信息。
非可见光投影单元18投影叠加在屏幕S的投影图像上的由非可见光图像生成单元17所生成的非可见光的坐标规定地图Q。注意，非可见光投影单元18和图像投影单元11的投影可以被设置成相同的光源通过不同滤光器的投影。
信息获取单元15d与激光指示器2d进行无线通信，并且从激光指示器2d接收确定操作信息和读取信息。
位置识别单元14d基于以下来识别照激光指示器2d的照射位置P(坐标位置)：非可见光图像生成单元17所创建的坐标规定地图Q；以及从非可见光捕获坐标规定地图Q'读出的、包含在信息获取单元15d所接收的读取信息中的坐标规定信息。例如，位置识别单元14d将坐标规定地图Q与坐标规定信息所示出的坐标规定地图Q'进行比较，并且指定坐标规定地图Q'在坐标规定地图Q中的位置。然后，位置识别单元14d识别坐标规定地图Q'的中心位置作为激光指示器2d的照射位置P(坐标位置)。
在信息获取单元15d接收到确定操作信息时，指示器信息输出单元16将投影图像内的与位置识别单元14d所识别的照射位置P的位置对应的对象确定为操作目标。然后，指示器信息输出单元16检测控制信号(指示器信息)并且通过有线/无线的方式将所检测的指示器信息发送至PC 3，该控制信号(指示器信息)用于使所确定的对象的显示根据信息获取单元15d所接收的读取信息示出的激光指示器2d的移动(移动信息)来改变。
(激光指示器2d)
如图18中所示，激光指示器2d具有操作单元20、可见光激光照射单元21、非可见光成像单元25、信息读取单元26、发送单元23和姿势检测传感器24。
可见光激光照射单元21具有下述功能：在操作单元20中检测到第一阶段的用户操作(照射指示操作)的情况下，该可见光激光照射单元21照射可见光激光V。具体地，例如，在操作按钮20a被半按下的情况下，可见光激光照射单元21照射激光V。
非可见光成像单元25具有下述功能：在操作单元20中检测到第二阶段的用户操作(确定操作)的情况下，该非可见光成像单元25针对包括激光V所照射的位置(照射位置P)的范围来执行非可见光成像。例如，在操作按钮20a被完全按下的情况下，非可见光成像单元25执行非可见光成像。
信息读取单元26基于非可见光捕获图像来识别坐标规定地图Q'，并且读出坐标规定地图Q'的坐标规定信息以及大小、倾斜度或扭曲等。
发送单元23通过无线通信将以下信息发送至投影仪1d：信息读取单元26所读出的信息(读取信息)；以及操作单元20检测到的示出第二阶段的用户操作的信息(确定操作信息)。另外，发送单元23在第二阶段的用户操作(确定操作)正在被检测到(例如，在操作按钮20a被完全按下时)的同时将从姿势检测传感器24输出的检测结果连续地无线发送至投影仪1d作为移动信息。
由于上面已经参照图6对姿势检测传感器24进行了描述，在此将省略对其的描述。
如上所述，在根据本变形例的操作系统中，非可见光成像单元25设置在激光指示器2d中，并且在激光指示器2d中执行对投影图像的非可见光成像。另外，投影仪1d可以接收在激光指示器2d侧从非可见光捕获坐标规定地图Q'中读出的坐标规定信息，并且可以基于该坐标规定信息来识别激光指示器2d的照射位置P。另外，投影仪1d可以根据非可见光捕获坐标规定地图Q'的大小、倾斜度或扭曲等来获取激光指示器2d的移动(移动信息)。
<<6.补充说明>>
继续，将针对根据本实施方式的操作系统作出补充说明。
<6-1.显示屏幕的正视图控制>
根据本实施方式的投影仪1能够基于移动信息和从激光指示器2照射的激光的方向来估计激光指示器2相对于屏幕S的相对位置。
在这种情况下，例如，通过假设操作者(用户)出现在激光指示器2的估计位置处，投影仪1通过检测来向PC 3输出用于使显示屏幕(投影图像内的对象)被正视图显示以便用户容易观看的控制信号。特别地，如图19的左侧所示，通过操作激光指示器2来执行演示的用户通常在相对于屏幕S以较小的角度照射激光V的同时进行浏览，而在这样的情况下，对角扭曲地观察到的显示屏幕(obj)可能需要在他或她的头脑内被正确地识别。
因此，投影仪1通过检测来向PC 3输出使显示屏幕(obj)在用户方向上正视图显示的控制信号，PC 3根据该控制信号来执行显示控制处理，将执行之后的图像数据发送至投影仪1，然后投影被执行。以这种方式，如在图19的右侧所示，执行显示控制以使得显示屏幕(obj)对用户而言是正视图(在基于激光V被照射的方向等估计的激光指示器2的相对位置处)。
以这种方式，通过执行显示控制以便使相对于用户而言是正视图，可以减轻用户的浏览负担。另外，通过针对与照射位置P的坐标位置对应地定位的每个屏幕项执行正视图显示控制，用户可以有选择地识别屏幕项。另外，特别是示出哪些屏幕项要朝向哪些人来显示。另外，由于形成屏幕项等的按钮的区域被确保用于操作者，所以可以避免在相对于屏幕S从较小的角度进行操作的情况下操作感的劣化。
<6-2.投影颜色区域的控制>
在投影仪1的投影图像的亮度较高的情况下或者在从激光指示器2照射的可见光激光V被定位在类似颜色的显示区域处的情况下，激光指示器2的轨迹将变得难以在视觉上识别。因此，如图20中所示，在当在屏幕S上检测到激光指示器2的照射位置P时，根据本实施方式的投影仪1和PC 3执行显示控制，例如使照射位置P附近的显示区域变暗或者降低颜色的饱和度。以这种方式，可以避免激光指示器2的轨迹变得难以在视觉上识别。
<6-3.照射区域的控制>
在根据本实施方式的操作系统中，来自激光指示器2的激光的照射区域可以被限制于屏幕S上。例如，由于如上所述的根据本实施方式的投影仪1可以识别激光指示器2的照射位置P的坐标位置，所以在照射位置P从屏幕S移除的情况下，以无线的方式向激光指示器2无线发送使激光的照射停止的控制信号。以这种方式，激光指示器2在照射位置P从屏幕S移除的情况下自动停止激光的照射。
另外，在当投影仪1检测到在激光指示器2与屏幕S之间存在人的情况下，投影仪1以无线的方式向激光指示器2发送用于使激光的照射停止的控制信号。以这种方式，由于在从激光指示器2照射的激光被错误地转向人时自动停止激光的照射，所以安全性得以保持。在下文中，将参照图21具体地进行描述。
图21是用于描述能够照射区域的图。对于能够照射区域，在投影仪1中基于例如由设置在投影仪1中的成像单元所捕获的包括视角内的投影图像的捕获图像执行面部识别等，做出关于屏幕S附近是否存在人的判定，以及将其中不存在人的部分设置为能够照射区域D。
因此，如图21中所示，例如，在激光指示器2与屏幕S之间检测到人5的情况下，投影仪1将屏幕S内去除与人5对应的区域的区域设置为能够照射区域D。然后，如在图21的顶部所示，投影仪1使在照射位置P被定位在能够照射区域D内的情况下照射继续。另外，如图21的左下角所示，在根据激光指示器2的移动以及照射位置P的轨迹判定照射位置P从屏幕S上的能够照射区域D移除的情况下，投影仪1以无线的方式向激光指示器2发送用于使激光的照射停止的控制信号。以这种方式，激光指示器2能够在激光的照射从能够照射区域D移除时自动地停止激光的照射。
另外，如图21右下角所示，在根据激光指示器2的移动以及照射位置P的轨迹判定照射位置P到屏幕S以外的情况下，投影仪1以无线的方式向激光指示器2发送用于使激光的照射停止的控制信号。以这种方式，激光指示器2能够在激光的照射离开屏幕S时自动地停止激光的照射。
<6-4.使用屏幕S外部进行的操作输入>
至此，虽然已经针对通过激光指示器2在屏幕S的范围内照射激光V或非可见光标记M等而执行的操作输入进行了描述，但根据本实施方式的操作系统的操作输入的范围不限于在屏幕S的范围内。
例如，在设置在投影仪1中的成像单元13的视角还包括屏幕S的周围的情况下，在屏幕S(或者一组屏幕范围)外部的照射位置P的位置坐标同样能够被识别，例如在图22左侧所示。以这种方式，投影仪1能够对应于手势操作例如其中照射位置P从屏幕外部移动至屏幕内的滑动或者其中照射位置P从屏幕内移动至屏幕外部的滑动。
在这种情况下，在照射位置P指向屏幕S外部能够被检测到的位置时，示出可以进行滑动操作的指示器40被显示(投影)在屏幕S上，如在图22的左侧所示。另外，当滑动操作实际被执行时，诸如显示菜单的操作被激活，例如如在图22的右侧所示。
另外，根据本实施方式的操作系统可能不仅包括滑动操作，而且还对应于各种手势操作，例如在屏幕S的外部绘制圆。另外，对应于屏幕S外部的可能手势操作的导向显示被显示(投影)在屏幕S内的边缘上(靠近在屏幕S外部的照射位置P的位置)。
<6-5.操作者信息的显示>
根据本实施方式的操作系统能够使激光指示器2的操作者信息(用户信息)显示(投影)在照射位置P的附近。具体地，投影仪1和PC 3基于从激光指示器2接收的信息或者从激光指示器2照射的一维/二维条形码的非可见光/可见光标记的分析结果来识别激光指示器2，并且获取用户信息。
然后，投影仪1可以使示出用户信息的图像44显示(投影)叠加在激光指示器2的照射位置P的附近，并可以使观看屏幕S的浏览者等容易获悉谁正在执行照射。
另外，投影仪1可以投影示出能够对投影图像进行操作输入的信息的光标45，可以强调激光指示器2的照射位置P，以及可以使操作状态易于理解。
<<7.总结>>
如上所述，在根据本实施方式的操作系统中，可以通过移动激光指示器2来直观地执行对投影图像内的对象的操作输入。通过第一阶段的操作(例如，操作按钮20a的半按下)来开始激光V的照射，以及根据第二阶段的继续操作(例如，操作按钮20a的完全按下)来确定操作目标对象。另外，通过在继续第二阶段的操作的同时使激光指示器2执行上下、左右、前后或平摇/俯仰移动或者旋转移动，还可以直观地执行用于使所确定的对象的显示以类似的方式改变的操作输入。
另外，由于与一般的电波相比激光的照射距离很长，所以对于诸如在较宽位置处从一定距离来对大尺寸的投影图像执行操作的情况也是有用的。
如上已经参照附图对本公开内容的优选实施方式进行了描述，然而本发明不限于上述示例。本领域的技术人员在所附权利要求的范围内可以找到各种更改方案和修改方案，并且应当理解，它们将自然地落入本发明的技术范围内。
例如，可以创建用于使内置在投影仪1、激光指示器2和PC 3中的诸如CPU、ROM和RAM的硬件呈现上述投影仪1、激光指示器2和PC3的功能的计算机程序。另外，还提供了能够由计算机读取的在其上存储有该计算机程序的存储介质。
另外，本技术还可以如下进行配置。
(1)一种信息处理装置，包括：
识别单元，所述识别单元识别激光指示器将激光照射到投影图像的照射位置；
获取单元，所述获取单元获取所述激光指示器的移动信息；以及
输出单元，所述输出单元输出控制信号，所述控制信号用于使投影图像内与所述照射位置对应的对象的显示根据所述移动信息来改变。
(2)根据(1)所述的信息处理装置，
其中，所述输出单元在接收到所述激光指示器中所设置的操作单元中所检测出的确定操作信息时，将与所述照射位置对应地定位的对象确定为操作目标对象。
(3)根据(2)所述的信息处理装置，还包括：
接收单元，所述接收单元从所述激光指示器接收表示所述确定操作的信息。
(4)根据(1)至(3)中的任意一项所述的信息处理装置，
其中，所述识别单元识别从所述激光指示器照射的可见光激光的照射位置或者非可见光激光的照射位置。
(5)根据(1)至(3)中的任意一项所述的信息处理装置，
其中，所述识别单元将从所述激光指示器照射的可见光标记的位置坐标或者非可见光标记的位置坐标识别为所述激光的照射位置。
(6)根据(5)所述的信息处理装置，
其中，所述可见光标记或者所述非可见光标记为图形或者一维或二维条形码。
(7)根据(5)或(6)所述的信息处理装置，
其中，所述获取单元基于所述可见光标记或者所述非可见光标记的大小、倾斜度和扭曲中的至少一个来获取所述激光指示器的移动信息。
(8)根据(1)至(7)中的任意一项所述的信息处理装置，
其中，所述移动信息为示出了所述激光指示器相对于所述投影图像的垂直/水平方向的移动、旋转移动或者平摇/俯仰移动的信息。
(9)根据(1)至(8)中的任意一项所述的信息处理装置，
其中，所述获取单元从所述激光指示器接收所述移动信息。
(10)根据(1)所述的信息处理装置，
其中，所述识别单元基于非可见光捕获图像来识别所述激光指示器将激光照射到所述投影图像的照射位置，在所述非可见光捕获图像中，被投影并且叠加在所述投影图像上的非可见光坐标识别图像通过设置在所述激光指示器中的非可见光成像单元来捕获。
(11)根据(1)至(10)中的任意一项所述的信息处理装置，
其中，所述识别单元基于下述信息来确认并且识别多个激光指示器的每个照射位置：从多个激光指示器照射到所述投影图像上的每个可见光标记/非可见光标记的形状或者颜色；或者嵌入在标记中的用户ID。
(12)一种控制方法，包括：
识别激光指示器将激光照射到投影图像的照射位置的步骤；
获取所述激光指示器的移动信息的步骤；以及
输出控制信号的步骤，所述控制信号用于使投影图像内与所述照射位置对应的对象的显示根据所述移动信息来改变。
(13)一种程序，所述程序用于使计算机用作：
识别单元，所述识别单元识别激光指示器将激光照射到投影图像的照射位置；
获取单元，所述获取单元获取所述激光指示器的移动信息；以及
输出单元，所述输出单元输出控制信号，所述控制信号用于使投影图像内与所述照射位置对应的对象的显示根据所述移动信息来改变。
(14)一种存储有程序的存储介质，所述程序使计算机用作：
识别单元，所述识别单元识别激光指示器将激光照射到投影图像的照射位置；
获取单元，所述获取单元获取所述激光指示器的移动信息；以及
输出单元，所述输出单元输出控制信号，所述控制信号用于使投影图像内与所述照射位置对应的对象的显示根据所述移动信息来改变。
附图标记
1、1a至1d 投影仪
2、2d至2d 激光指示器
3 PC
10 投影图像接收单元
11 图像投影单元
13 成像单元
13v 可见光成像单元
13n 非可见光成像单元
14、14d 位置识别单元
15、15d 信息获取单元
16 指示器信息输出单元
17 非可见光图像生成单元
18 非可见光投影单元
20 操作单元
20a 操作按钮
21 可见光激光照射单元
23 发送单元
24 姿势检测传感器
25 非可见光成像单元
26 信息读取单元
30 控制单元
31 图像输出单元
32 操作输入单元

Claims (11)

1.一种信息处理装置，包括：
识别单元，所述识别单元识别激光指示器将激光照射到投影图像的照射位置；
获取单元，所述获取单元获取所述激光指示器的移动信息；以及
输出单元，所述输出单元输出控制信号，所述控制信号用于使投影图像内与所述照射位置对应的对象的显示根据所述移动信息来改变，
其中，所述识别单元将从所述激光指示器照射的可见光标记的位置坐标或者非可见光标记的位置坐标识别为所述激光的照射位置，
其中，所述获取单元基于所述可见光标记或者所述非可见光标记的大小、倾斜度和扭曲中的至少一个来获取所述激光指示器的移动信息。
2.根据权利要求1所述的信息处理装置，
其中，所述输出单元在接收到所述激光指示器中所设置的操作单元中所检测出的确定操作信息时，将与所述照射位置对应地定位的对象确定为操作目标对象。
3.根据权利要求2所述的信息处理装置，还包括：
接收单元，所述接收单元从所述激光指示器接收表示所述确定操作的信息。
4.根据权利要求1所述的信息处理装置，
其中，所述识别单元识别从所述激光指示器照射的可见光激光的照射位置或者非可见光激光的照射位置。
5.根据权利要求1所述的信息处理装置，
其中，所述可见光标记或者所述非可见光标记为图形或者一维或二维条形码。
6.根据权利要求1所述的信息处理装置，
其中，所述移动信息为示出了所述激光指示器相对于所述投影图像的垂直/水平方向的移动、旋转移动或者平摇/俯仰移动的信息。
7.根据权利要求1所述的信息处理装置，
其中，所述获取单元从所述激光指示器接收所述移动信息。
8.根据权利要求1所述的信息处理装置，
其中，所述识别单元基于非可见光捕获图像来识别所述激光指示器将激光照射到所述投影图像的照射位置，在所述非可见光捕获图像中，被投影并且叠加在所述投影图像上的非可见光坐标识别图像通过设置在所述激光指示器中的非可见光成像单元来捕获。
9.根据权利要求1所述的信息处理装置，
其中，所述识别单元基于下述信息来确认并且识别多个激光指示器的每个照射位置：从多个激光指示器照射到所述投影图像上的每个可见光标记/非可见光标记的形状或者颜色；或者嵌入在标记中的用户ID。
10.一种控制方法，包括：
识别激光指示器将激光照射到投影图像的照射位置的步骤；
获取所述激光指示器的移动信息的步骤；以及
输出控制信号的步骤，所述控制信号用于使投影图像内与所述照射位置对应的对象的显示根据所述移动信息来改变，
其中，将从所述激光指示器照射的可见光标记的位置坐标或者非可见光标记的位置坐标识别为所述激光的照射位置，
其中，基于所述可见光标记或者所述非可见光标记的大小、倾斜度和扭曲中的至少一个来获取所述激光指示器的移动信息。
11.一种存储有程序的存储介质，所述程序使计算机用作：
识别单元，所述识别单元识别激光指示器将激光照射到投影图像的照射位置；
获取单元，所述获取单元获取所述激光指示器的移动信息；以及
输出单元，所述输出单元输出控制信号，所述控制信号用于使投影图像内与所述照射位置对应的对象的显示根据所述移动信息来改变，
其中，所述识别单元将从所述激光指示器照射的可见光标记的位置坐标或者非可见光标记的位置坐标识别为所述激光的照射位置，
其中，所述获取单元基于所述可见光标记或者所述非可见光标记的大小、倾斜度和扭曲中的至少一个来获取所述激光指示器的移动信息。
CN201480035101.0A 2013-06-26 2014-03-31 信息处理装置、控制方法、程序和存储介质 Expired - Fee Related CN105308549B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013-133891 2013-06-26
JP2013133891 2013-06-26
PCT/JP2014/059530 WO2014208168A1 (ja) 2013-06-26 2014-03-31 情報処理装置、制御方法、プログラム、および記憶媒体

Publications (2)

Publication Number Publication Date
CN105308549A CN105308549A (zh) 2016-02-03
CN105308549B true CN105308549B (zh) 2018-08-21

Family

ID=52141522

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480035101.0A Expired - Fee Related CN105308549B (zh) 2013-06-26 2014-03-31 信息处理装置、控制方法、程序和存储介质

Country Status (5)

Country Link
US (1) US11029766B2 (zh)
EP (1) EP3015961B1 (zh)
JP (1) JP6372487B2 (zh)
CN (1) CN105308549B (zh)
WO (1) WO2014208168A1 (zh)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104602094B (zh) * 2014-12-26 2018-06-01 联想(北京)有限公司 信息处理方法及电子设备
CN104667526A (zh) * 2015-01-21 2015-06-03 深圳华侨城文化旅游科技有限公司 一种基于红外激光的射击点识别系统及方法
JP2017021237A (ja) * 2015-07-13 2017-01-26 キヤノン株式会社 画像投影装置、画像投影システム、表示装置、および、表示システム
JP6719768B2 (ja) * 2016-02-29 2020-07-08 国立大学法人東京工業大学 多重情報表示システム及びこれに用いる照光装置
US10347002B2 (en) * 2016-07-01 2019-07-09 Guangdong Virtual Reality Technology Co., Ltd. Electronic tracking device, electronic tracking system and electronic tracking method
JP2018005806A (ja) * 2016-07-08 2018-01-11 株式会社スクウェア・エニックス 位置特定プログラム、コンピュータ装置、位置特定方法、及び、位置特定システム
US11269480B2 (en) * 2016-08-23 2022-03-08 Reavire, Inc. Controlling objects using virtual rays
GB2557285A (en) * 2016-12-05 2018-06-20 Meiban Int Pte Ltd Smart working professional ring
JP2019078845A (ja) * 2017-10-23 2019-05-23 セイコーエプソン株式会社 プロジェクターおよびプロジェクターの制御方法
EP3518222B1 (en) * 2018-01-30 2020-08-19 Alexander Swatek Laser pointer
WO2019188046A1 (ja) * 2018-03-26 2019-10-03 富士フイルム株式会社 投影システム、投影制御装置、投影制御方法、投影制御プログラム
JP2021165865A (ja) * 2018-07-03 2021-10-14 ソニーグループ株式会社 情報処理装置、情報処理方法、及び、記録媒体
CN113287370A (zh) * 2019-01-18 2021-08-20 株式会社半导体能源研究所 显示系统、显示装置、发光装置
CN110297550B (zh) * 2019-06-28 2023-05-16 北京百度网讯科技有限公司 一种标注显示方法、装置、投屏设备、终端和存储介质
CN112328158A (zh) * 2020-07-23 2021-02-05 深圳Tcl新技术有限公司 交互方法、显示装置、发射装置、交互系统及存储介质
CN112365828B (zh) * 2020-11-09 2024-03-12 深圳Tcl新技术有限公司 智能调整显示效果的方法、装置、设备及介质
CN112860083B (zh) * 2021-01-08 2023-01-24 深圳市华星光电半导体显示技术有限公司 激光笔光源定位方法及显示装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102591488A (zh) * 2010-11-30 2012-07-18 意法半导体(R&D)有限公司 改进的输入设备和相关联的方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5712658A (en) * 1993-12-28 1998-01-27 Hitachi, Ltd. Information presentation apparatus and information display apparatus
US6346933B1 (en) 1999-09-21 2002-02-12 Seiko Epson Corporation Interactive display presentation system
JP3770308B2 (ja) * 2000-07-31 2006-04-26 セイコーエプソン株式会社 光ポインタ
US6910778B2 (en) * 2001-09-28 2005-06-28 Fujinon Corporation Presentation system using laser pointer
US6764185B1 (en) * 2003-08-07 2004-07-20 Mitsubishi Electric Research Laboratories, Inc. Projector as an input and output device
US7683881B2 (en) * 2004-05-24 2010-03-23 Keytec, Inc. Visual input pointing device for interactive display system
US7284866B2 (en) * 2005-01-05 2007-10-23 Nokia Corporation Stabilized image projecting device
US7486274B2 (en) * 2005-08-18 2009-02-03 Mitsubishi Electric Research Laboratories, Inc. Method for stabilizing and precisely locating pointers generated by handheld direct pointing devices
US7852315B2 (en) * 2006-04-07 2010-12-14 Microsoft Corporation Camera and acceleration based interface for presentations
JP4715653B2 (ja) 2006-06-30 2011-07-06 カシオ計算機株式会社 レーザポインタ位置判定システムおよびレーザポインタ位置判定方法
US20110102315A1 (en) * 2008-06-19 2011-05-05 Koninklijke Philips Electronics N.V. Remote control pointing technology
JP2010072977A (ja) * 2008-09-19 2010-04-02 Sony Corp 画像表示装置および位置検出方法
JP5279482B2 (ja) * 2008-12-25 2013-09-04 キヤノン株式会社 画像処理装置、方法及びプログラム
US8217997B2 (en) * 2010-03-16 2012-07-10 Interphase Corporation Interactive display system
US20110230238A1 (en) * 2010-03-17 2011-09-22 Sony Ericsson Mobile Communications Ab Pointer device to navigate a projected user interface
JP2012053545A (ja) 2010-08-31 2012-03-15 Canon Inc 画像処理システムおよびその制御方法
WO2012102690A1 (en) * 2011-01-28 2012-08-02 Hewlett-Packard Development Company, L.P. Filter
US8446364B2 (en) * 2011-03-04 2013-05-21 Interphase Corporation Visual pairing in an interactive display system
US9733713B2 (en) * 2012-12-26 2017-08-15 Futurewei Technologies, Inc. Laser beam based gesture control interface for mobile devices
EP3011415B1 (en) * 2013-06-19 2018-12-05 Nokia Technologies Oy Electronic-scribed input

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102591488A (zh) * 2010-11-30 2012-07-18 意法半导体(R&D)有限公司 改进的输入设备和相关联的方法

Also Published As

Publication number Publication date
CN105308549A (zh) 2016-02-03
US20160370883A1 (en) 2016-12-22
EP3015961A1 (en) 2016-05-04
JPWO2014208168A1 (ja) 2017-02-23
WO2014208168A1 (ja) 2014-12-31
EP3015961B1 (en) 2021-07-14
EP3015961A4 (en) 2017-02-22
JP6372487B2 (ja) 2018-08-15
US11029766B2 (en) 2021-06-08

Similar Documents

Publication Publication Date Title
CN105308549B (zh) 信息处理装置、控制方法、程序和存储介质
US10642371B2 (en) Sessionless pointing user interface
US20210181857A1 (en) Systems and Methods of Creating a Realistic Displacement of a Virtual Object in Virtual Reality/Augmented Reality Environments
US10331731B2 (en) Method and apparatus for identifying input features for later recognition
CN106020436A (zh) 图像分析装置及图像分析方法
JP5762892B2 (ja) 情報表示システム、情報表示方法、及び情報表示用プログラム
CN105593786B (zh) 对象位置确定
JP6625801B2 (ja) 画像処理装置、画像処理方法、及びプログラム
CN106662926A (zh) 普适计算环境中的姿势交互的系统和方法
CN104423578B (zh) 交互式输入系统和方法
CN104281276B (zh) 信息处理装置、操作输入检测方法、程序和存储介质
KR102163742B1 (ko) 전자 장치 및 그 동작 방법
CN109583263A (zh) 结合扩增实境的身体信息分析装置及其眉型预览方法
CN110189398A (zh) 基于室内图像的户型图生成方法、装置、设备和存储介质
JP6498802B1 (ja) 生体情報解析装置及びその顔型のシミュレーション方法
CN109213363A (zh) 预测指示器触摸位置或确定3d空间中指向的系统和方法
CN105874409A (zh) 信息处理系统、信息处理方法及程序
US20210287330A1 (en) Information processing system, method of information processing, and program
CN104811639B (zh) 信息处理方法及电子设备
KR101609861B1 (ko) 사용자 동작에 기초한 입력 제어 시스템 및 방법
US12014008B2 (en) Information processing apparatus, information processing method, and program
JP2022113580A (ja) 検出装置、検出方法、及び、プログラム
JP2022113575A (ja) 情報処理装置、情報処理方法、及び、プログラム
RU2429549C1 (ru) Способ многопользовательского дистанционного управления компьютером для графических приложений
CN103902035B (zh) 三维互动装置及其操控方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180821

CF01 Termination of patent right due to non-payment of annual fee