CN105388686A - 移动装置和使用移动装置投射图像的方法 - Google Patents

Abstract

提供了移动装置和使用移动装置投射图像的方法。该方法包括：将呈现正在移动装置上重放或访问的内容的整个图像之中的、移动装置上显示的图像区确定为投影图像；投射投影图像和布置在投影图像上的指针；通过检测移动装置的移动，改变整个图像中的投影图像。

Description

移动装置和使用移动装置投射图像的方法

本申请要求于2014年9月1日在韩国知识产权局提交并且被分派序列号10-2014-0115474的韩国专利申请的权益，该申请的全部公开通过引用全部包含于此。

技术领域

本公开涉及移动装置和使用移动装置投射图像的方法。更具体地，本公开涉及移动装置，该移动装置能够投射呈现正在移动装置上重放或访问的内容的整个图像之中的、用户想要观看的区域的图像并且能够直观改变和操纵投影图像。

背景技术

随着移动装置的功能变得更多样化，已经实现了具有复杂功能(诸如，拍照、录像、播放音乐或视频文件、玩游戏、接收广播节目等)的终端。现在，还可使用移动装置执行直到最近才能够使用大尺寸投影仪的图像投影功能。

当使用移动装置投射图像时，用户可将图像投射到所需点，而不受空间限制。然而，当使用移动装置提供图像投影功能时，用于控制投影图像的界面受到限制。

因此，需要能够投射呈现正在移动装置上重放或访问的内容的整个图像之中的、用户想要观看的区域的图像并且能够直观改变和操纵投影图像的移动装置和使用移动装置投射图像的方法。

以上信息只是作为背景信息提供的，有助于理解本公开。关于以上任何内容是否可被应用作为针对本公开的现有技术，并没有进行确定，并且没有进行断定。

发明内容

本公开的各方面将解决至少上述问题和/或缺点并且提供至少下述优点。因此，本公开的一方面提供了能够投射呈现正在移动装置上重放或访问的内容的整个图像之中的、用户想要观看的区域的图像并且能够直观改变和操纵投影图像的移动装置和使用移动装置投影图像的方法。

按照本公开的一方面，提供了一种使用移动装置投影图像的方法。该方法包括：将呈现正在移动装置上重放或访问的内容的整个图像之中的、移动装置上显示的图像区确定为投影图像；投射投影图像和布置在投影图像上的指针；通过检测移动装置的移动，改变整个图像中的投影图像。

按照本公开的另一方面，提供了一种移动装置。该移动装置包括：显示单元，被配置为显示正在移动装置上重放或访问的内容；移动检测器，被配置为检测移动装置的移动；图像处理器，被配置为将呈现正在移动装置上重放或访问的内容的整个图像之中的、移动装置上显示的图像区确定为投影图像，并且根据移动装置的移动，改变整个图像内的投影图像；投影仪，被配置为投射投影图像和布置在投影图像上的指针。

根据下面结合附图公开了本公开的各种实施例的具体实施方式，对于本领域的技术人员而言，本公开的其它方面、优点和突出特征将变得清楚。

附图说明

通过下面结合附图进行的描述，本公开的某些实施例的以上和其它方面、特征和优点将更清楚，其中：

图1A和图1B是示意性示出根据本公开的实施例的使用移动装置投射图像的方法的概念示图；

图2是根据本公开的实施例的改变使用移动装置投射到物体上的图像的方法的流程图；

图3示出根据本公开的实施例的使用移动装置投射到物体上的投影图像和布置在投影图像上的指针；

图4是示出根据本公开的实施例的投射投影图像和布置在投影图像上的指针的移动装置的框图；

图5是根据本公开的实施例的使用移动装置基于用户输入改变指针在投影图像上的位置的方法的流程图；

图6是示出根据本公开的实施例的基于用户输入的指针在投影图像上的位置改变的视图；

图7是示出根据本公开的实施例的基于用户输入改变指针在投影图像上的位置的移动装置的框图；

图8是根据本公开的实施例的通过移动移动装置改变指针在投影图像上的位置的方法的流程图；

图9A和图9B是示出根据本公开的实施例的通过移动移动装置改变指针位置的方法的示图；

图10A、图10B和图10C示出根据本公开的实施例的分别相对于x轴、y轴和z轴旋转的移动装置；

图11A和图11B是示出根据本公开的实施例的当移动装置移动时指针位置随着投影图像的改变而改变的示图；

图12A、图12B、图13A和图13B是示出根据本公开的实施例的使用移动装置校正投影图像的失真的方法的示图。

在整个附图中，将理解的是，类似的参考标号是指类似的部件、组件和结构。

具体实施方式

参照附图提供下面的描述，以有助于全面理解由权利要求书及其等同物限定的本公开的各种实施例。该描述包括各种有助于进行理解的具体细节，但这些将不被视为只是示例性的。因此，本领域的普通技术人员将认识到，可在不脱离本公开的范围和精神的情况下，进行本文中描述的各种实施例的变化和修改。另外，为了清晰且简明起见，可省略对熟知功能和构造的描述。

下面的描述和权利要求书中使用的术语和词语不限于文献中的含义，而只是被发明人用来使人对本公开有清楚和一致的理解。因此，本领域的技术人员应该清楚，下面对本公开的各种实施例的描述只是出于例证目的提供的，而不是出于限制所附权利要求书及其等同物所限定的本公开的目的提供的。

要理解，单数形式包括复数指称，除非上下文另外明确指示。因此，例如，对“组件表面”的引用包括对一个或更多个这样的表面的引用。

术语“基本上”意味着，不需要精确实现所述的特征、参数或值，而是包括例如容差、测量误差、测量精度限制和本领域的技术人员已知的其它因素的偏差或变化可出现的量不排除预期要提供特征的效果。

在整个说明书中，还将理解，当元件被称为“连接到”另一个元件时，它可直接连接到另一个元件，或者它可电连接到其它元件并且可存在中间元件。另外，当部件“包括”元件时，除非进行与之相反的特别描述，否则该部件还可包括其它元件，并不排除其它元件。

图1A和图1B是示意性示出根据本公开的实施例的使用移动装置投射图像的方法的概念示图。

参照图1A和图1B，根据本公开的实施例的移动装置100可将能使用移动装置100进行渲染的图像的一部分或整个图像投射到物体5上。例如，移动装置100可投射呈现正在移动装置100上重放或访问的内容的整个图像10之中的、移动装置100上显示的图像区20a。能使用移动装置100进行渲染的图像包括示出移动装置100上执行的功能和应用执行画面等的图像、图像内容的重放画面、广播画面等。

参照图1A，移动装置100上访问的网页的图像的局部区域可被投射到物体5上。例如，当如图1B中所示移动装置100显示网页的一部分时，移动装置100可将正被访问的网页的整个区域之中的、移动装置100的屏幕上显示的网页的一部分投射到物体5上。物体5是指上面可呈现投影图像的表面，包括例如墙壁、滚动屏幕、白板等。物体5可具有诸如平面表面或弯曲表面的各种形式。

同时，根据本公开的实施例，当移动装置100移动时，移动装置100上显示的图像可根据移动装置100的移动方向而改变。根据本实施例的移动装置100可根据移动装置100的移动方向，改变整个图像10之中的、移动装置10上正在显示的图像区。例如，如图1A中所示，根据移动装置100的移动，将显示的图像区可从第一投影图像20a变成第二投影图像20b。移动装置100的移动示例可包括移动装置100的位置值的改变或者移动装置100相对于预设旋转轴的倾斜度值的改变。

例如，如图1A中所示，移动装置100可通过将目前正在访问的网页之中的、移动装置100的屏幕上显示的第一区投射到物体5上，产生第一投影图像20a。如果移动装置100的投射方向变成指向左上侧，则屏幕上显示的第一投影图像20a可改变，如图1A中所示。为了使移动装置100的移动和投影图像彼此对应，移动装置100可投射存在于屏幕上显示的第一区的左上端的图像区，从而产生第二投影图像20b。

图2是根据本公开的实施例的改变使用移动装置投射到物体上的图像的方法的流程图。

参照图2，在操作210中，移动装置100可将呈现正在移动装置100上重放或访问的内容的整个图像10之中的、移动装置100上显示的图像区确定为第一投影图像20a。

当移动装置100上正在访问网络浏览器时，移动装置100的屏幕上可显示用户选择的网页。移动装置100可将其屏幕上显示的网页确定为第一投影图像20a。

同时，用户可不仅确定移动装置100的屏幕上显示的图像的类型，而且可确定所述图像的大小。例如，用户可放大或缩小移动装置100的屏幕上显示的网页。当移动装置100的屏幕上显示的网页被放大时，在移动装置100的屏幕上只显示被放大网页的一部分。在这种情况下，移动装置100可将其屏幕上显示的网页的一部分确定为投影图像。

在操作220中，移动装置100可将第一投影图像20a和位于第一投影图像20a上的指针投射到物体5上。例如，移动装置100可将操作210中确定的第一投影图像20a投射到墙壁表面上。如果移动装置100的屏幕上显示的图像是被放大网页的一部分，则被放大网页的这部分可被投射到墙壁的对应部分上。

另外，移动装置100可将指针与第一投影图像20a一起投射。

根据本公开的实施例，指针执行指示第一投影图像20a上的某个点的功能。例如，可使用指针吸引正在观看第一投影图像20a的用户的注意。

根据本公开的实施例，指针可用作用于选择将要被输入命令的点的光标。例如，通过使用指针，用户可进入命令可被输入网站的登录窗口或搜索窗口的模式，或者输入用于选择网站的某个对象的信号。

在物体5上可浏览指针连同第一投影图像20a。指针可具有诸如箭头、圆形、矩形、三角形等各种形状。根据本公开的实施例，根据用户的选择，或者根据移动装置100的控制，可改变指针的形状。例如，移动装置100可基于移动装置100的状态或模式，改变指针的形状。

根据本公开的实施例，可基于预设的参考点，确定位于第一投影图像上的指针的位置。例如，如果用户将投影图像的中心设置为参考点，则移动装置100可将指针定位在投影图像的中心，并且可将指针位于在其上的投影图像投射到物体5上。根据本公开的本实施例，如果指针被预设成布置在投影图像的中心，则根据移动装置100的移动而投射到物体5上的图像从第一投影图像20a变成第二投影图像20b，并且指针还可从第一投影图像20a的中心移动到第二投影图像20b的中心。因此，通过移动移动装置100，用户可改变投影图像，另外，同时，可直观地改变整个图像10之中指针所处的位置。

以下，将参照图3描述移动装置100投射到物体5上的投影图像和布置在投影图像上的指针。

在操作230中，移动装置100检测其自身的移动，以改变整个图像之中的投影图像。当移动装置100移动时，移动装置100的位置和倾斜度可改变。根据本公开的实施例，移动装置100的位置值可基于移动装置100的坐标值来确定，该坐标值是根据移动装置100的水平和垂直移动而改变的。另外，根据本公开的实施例，移动装置100的倾斜度可基于移动装置100的旋转角度值来确定，该旋转角度值基于三维轴空间指示相对于各轴的移动装置100旋转程度。以下，将参照图9和图10对此进行描述。

移动装置100可检测其自身的移动并且可基于根据移动而改变的其位置值和倾斜度值来改变投影图像。例如，当移动装置100在移动装置100的屏幕上的网页整个区域之中的第一图像区被投射到物体5上成为投影图像之后已移动时，移动装置100可基于根据其移动而改变的其位置值和倾斜度值来改变第一投影图像20a。当移动装置100已移动时，移动装置100可检测其改变后的位置值和改变后的倾斜度值并且确定与改变后的位置值和改变后的倾斜度值对应的第二投影图像20b。例如，当移动装置100检测到自身相对于当前投射方向向左移动时，移动装置100可将位于第一投影图像20a左侧的图像确定为第二投影图像20b。

如果移动装置100将屏幕上显示的整个图像之中的部分图像投射到物体5上，则用户可通过移动移动装置100来改变投影图像。

图3示出根据本公开的实施例的使用移动装置投射到物体上的投影图像和布置在投影图像上的指针。

参照图3，移动装置100可将网页的整个图像之中的、其屏幕上显示的部分图像确定为投影图像20。移动装置100可将投影图像20投射到物体5上。

另外，移动装置100可基于投影图像20的预设参考点105将指针25与投影图像20一起布置。例如，移动装置100可将其屏幕中心确定为参考点105。移动装置100可将指针25布置在投影图像20上与参考点105对应的位置。

根据本公开的实施例，用户可改变指针25在当前投影图像20中的位置。以下，将参照图5至图11描述改变指针25的位置的方法。

图4是示出根据本公开的实施例的投射投影图像和布置在投影图像上的指针的移动装置的框图。

参照图4，只示出与本实施例相关的移动装置100的元件。因此，对于与本实施例相关的领域中的普通技术人员而言将显而易见的是，还可包括除了图4中示出的元件外的通用元件。

参照图4，移动装置100可包括图像处理器110、投影仪120、显示单元130和移动检测器140。

显示单元130显示正在移动装置100上重放或访问的内容。显示单元130在移动装置100的屏幕上显示基于从图像处理器110输出的图像数据的内容的图像。

图像处理器110可将呈现正在移动装置100上重放或访问的内容的整个图像10之中的、移动装置100上显示的图像区确定为投影图像。图像处理器110可确定整个图像之中的将在显示单元130上显示的部分区域，以产生将被输出到显示单元130的图像数据，并且将图像数据输出到显示单元130。另外，将在显示单元130上显示的部分区域被确定为投影图像。

另外，图像处理器110可检测移动装置100的移动，以改变整个图像之中的投影图像。

移动检测器140可检测移动装置100的移动，以得到移动装置100的位置值和倾斜度值。移动检测器140将移动装置100的位置值和倾斜度值输出到图像处理器110。例如，移动检测器140可在检测到移动装置100移动之后，输出移动装置100的位置值和倾斜度值的改变。

移动检测器140可包括地磁传感器、加速度传感器和陀螺仪中的至少一个，但不限于此。本领域的普通技术人员将根据各个传感器的名称直观地推断这些传感器的功能，因此将省略对其的描述。

另外，图像处理器110可执行将投影图像投射到物体5上所需的控制，并且当检测到移动装置100的移动时，图像处理器110执行基于移动装置100的改变后的位置值或改变后的倾斜度值来更新图像数据所需的控制。例如，图像处理器110基于移动装置100的改变后的位置值和改变后的倾斜度值和没有改变的投影图像20a来改变投射到物体5上的图像。

同时，当移动装置100移动时，根据改变后的投影图像20b设置的指针的位置也可根据图像处理器110检测到的移动装置100的位置值和倾斜度值的改变而改变。

投影仪120可将投影图像和布置在投影图像上的指针投射到物体5上。根据本公开的实施例，可基于预设的参考点来确定布置在投影图像上的指针的位置。例如，当用户将投影图像的中心设置为参考点时，投影仪120可将指针定位在投影图像的中心并且可将指针布置在其上的投影图像投射到物体5上。

当投影图像根据移动装置100的移动而改变时，投影仪120可从图像处理器110接收改变后的投影图像，以将改变后的投影图像投射到物体5上。

图5是根据本公开的实施例的使用移动装置基于用户输入改变指针在投影图像上的位置的方法的流程图。

参照图5，在操作510中，移动装置100可将呈现正在移动装置100上重放或访问的内容的整个图像10之中的、移动装置100上显示的图像区确定为投影图像20。移动装置100上显示的图像区可以是移动装置100的屏幕上显示的图像区。移动装置100的屏幕上显示的图像区可指示整个图像的一部分或实际整个图像。另外，显示的图像可以是通过扩大整个图像的部分区域而得到的图像。

同时，操作510可对应于图2的操作210。

在操作520中，移动装置100可将投影图像和布置在投影图像上的指针投射到物体5上。另外，移动装置100可将指针与投影图像一起投射。可基于预设的参考点来确定布置在投影图像上的指针的位置。

同时，操作520可对应于图2的操作220。

在操作530中，移动装置100可基于得到的用户输入，改变指针在投影图像上的位置。移动装置100可接收用于将指针移动到投影图像中包括的某个点的用户输入。用户输入可包括关于指针改变后的位置的信息。例如，用户输入可包括关于移动位置值的信息，该信息指示指针将相对于投影图像上的指针目前的位置在x轴或y轴方向上移动多少。

移动装置100可在投影图像上的由得到的用户输入指示的指针改变后的位置处显示指针。例如，如果用户在触摸移动装置100的屏幕的同时，沿意图指针移动的方向拖拽指针，则移动装置100可将指针显示为根据用户拖拽指针的方向移动。显示指针的方法不限于此。

下文中，以下，将参照图6描述基于对移动装置100的用户输入将指针的位置移动到某个点的方法。

图6是示出根据本公开的实施例的基于用户输入的指针在投影图像上的位置改变的视图。

参照图6，移动装置100可通过将呈现正在重放或访问的内容的整个图像之中的、其屏幕上显示的图像区投射到物体5上，产生投影图像20。指针25可显示在投影图像20上的与预设的移动装置100的屏幕上的参考点35对应的位置处。

同时，移动装置100可得到输入到其屏幕的用户输入。用户可通过使用输入仪器(诸如，触摸笔或手指)来触摸移动装置100的屏幕，以将关于指针将在投影图像20上移动所到达的指针位置的信息输入到移动装置100。然而，用户还可通过移动与移动装置100相距预设距离内的输入仪器或手指，将关于指针25将在投影图像上移动到达的位置的信息输入到移动装置100。

参照图6，移动装置100可基于用户输入，将布置在投影图像20中心的指针25移动到投影图像20的右上端。例如，在触摸屏幕上的某个点35的同时，当接收到指示将指针25拖拽到右上端的用户输入时，移动装置100可将指针25从预设点35向着右上端移动。

根据本公开的实施例的移动装置100可在投影图像20上显示指针25并且可显示基于用户输入而移动的指针25的位置的改变。因此，用户可从通过正在移动装置100上重放或访问的内容而提供的服务之中，选择所需的服务。

图7是示出根据本公开的实施例的基于用户输入改变指针在投影图像上的位置的移动装置的框图。

参照图7，只示出与本实施例相关的移动装置100的元件。因此，对于与本实施例相关的领域中的普通技术人员而言将显而易见的是，还可包括除了图7中示出的元件外的通用元件。

参照图7，移动装置100可包括图像处理器110、投影仪120、显示单元130、移动检测器140和用户输入单元150。

图像处理器110可将呈现正在移动装置100上重放或访问的内容的整个图像10之中的、移动装置100上显示的图像区确定为投影图像20。

图像处理器110可基于移动装置100的屏幕上预设的参考点来确定布置在投影图像20上的指针25的位置。指针25执行指示投影图像20上的某个点的功能。例如，图像处理器110可确定将整个图像之中的、移动装置100的屏幕上显示的图像确定为投影图像，并且可确定参考点处于屏幕上显示的图像的中心。图像处理器110可将指针25布置在投影图像20的中心，使得指针25对应于确定的参考点。

同时，布置在投影图像20上的指针25可基于用户输入在投影图像20内移动。用户输入可包括关于指针25改变后的位置的信息。随后，以下将参照用户输入单元150，描述指针25基于用户输入进行的移动和关于指针25改变后的位置的信息。

投影仪120可将投影图像20和布置在投影图像20上的指针25投射到物体5上。

当投影图像20根据移动装置100的移动而改变时，投影仪120可从图像处理器110接收改变后的投影图像并且将改变后的投影图像投射到物体5上。投影仪120可包括：光源(未示出)，发出将用于投射的光；光调制单元(未示出)，根据图像信号，调制从光源入射的光；透镜单元(未示出)，将从光调制单元入射的光投射到屏幕上。光调制单元可包括例如阴极射线管(CRT)或发光二极管(LED)。

用户输入单元150接收用户输入。用户输入单元150可由组合各种键而形成的键盘或触摸屏形成，可通过这些键输入各种数字、字母或符号和各种用户命令。用户输入单元150可根据本公开的实施例，将请求指针位置改变的用户输入发送到图像处理器110。

同时，用户输入单元150可得到用于初始化移动装置100所确定的投影图像20a和20b的命令。当移动装置100接收到用于初始化使用移动装置100确定的投影图像的命令时，用户输入单元150可将用户输入发送到图像处理器110。图像处理器110可基于用户输入，重新确定处于初始化位置的投影图像。

图8是根据本公开的实施例的通过移动移动装置改变指针在投影图像上的位置的方法的流程图。

参照图8，在操作810中，移动装置100可将呈现正在移动装置100上重放或访问的内容的整个图像10之中的、移动装置100上显示的图像区确定为投影图像20。移动装置100上显示的图像区可以是移动装置100的屏幕上显示的图像区。可不仅根据图像类型还根据图像大小来不同地确定移动装置100的屏幕上显示的图像区。

同时，操作810可对应于图2的操作210。

在操作820中，移动装置100可将投影图像和布置在投影图像上的指针投射到物体5上。另外，移动装置100可将指针与投影图像一起投射。可基于预设的参考点来确定布置在投影图像上的指针的位置。

同时，操作820可对应于图2的操作220。

在操作830中，移动装置100可检测其倾斜度或位置的改变。

移动终端100可通过使用移动装置100中包括的地磁传感器、加速度传感器和陀螺仪中的至少一个来检测移动装置100的倾斜度或位置的改变。

用户可通过移动移动装置100来改变投射到物体5上的投影图像20a。如果移动装置100的倾斜度或位置的改变超过预设的临界值，则移动装置100可确定用户为了改变投影图像20a已经移动了移动装置100。根据本公开的实施例，如果移动装置100的倾斜度或位置的改变被保持预设的时间段或更长时间，则移动装置100可确定用户为了改变投影图像20a已经移动了移动装置100。

在操作840中，移动装置100可检测其倾斜度或位置的变化。

例如，如果移动装置100的倾斜度或位置的变化超过预设的临界值并且被保持预设的时间段或更长时间，则移动装置100可检测其倾斜度或位置的变化。

根据本公开的实施例，如果预设的时间段内检测到的移动装置100的倾斜度或位置的变化超过预设的临界值，则移动装置100可初始化其位置信息或倾斜度信息。当产生改变后的投影图像20b时，如果移动装置100的移动量大，则很有可能在改变后的投影图像20b中出现失真。因此，在这种情况下，可通过初始化移动装置100被移动到达的位置处的移动装置100的位置信息或倾斜度信息来确定新投影图像。

在操作850中，移动装置100可基于检测到的其倾斜度或位置的变化，重新确定投影图像。

通过使用移动装置的倾斜度或位置的变化，移动装置100可重新确定呈现正在移动装置100上访问或重放的内容的整个图像之中的新投影图像。例如，移动装置100可重新确定第二投影图像，第二投影图像从移动装置100移动之前被投射的第一投影图像移动了整个图像内的与检测到的倾斜度或位置的变化对应的区域的量。

同时，移动装置100可设置指针25，使得指针25一直处于投影图像20内的同一位置。例如，移动装置100可设置指针25，使得指针25一直处于投影图像20的中点。如果呈现正在移动装置100上重放或访问的内容的整个图像之中存在将使用指针25选择的特定点，则用户可移动移动装置100，使得指针25对应于特定点。

当根据移动装置100的移动重新确定投影图像20，根据本公开的实施例的移动装置100可校正投影图像20的失真。如果移动装置100的倾斜度值改变，则投射到物体5上的图像可由于投影图像20的伸展等而失真。以下，将参照图12A、图12B、图13A和图13B描述使用移动装置100校正失真的方法。

在操作860中，移动装置100可投射重新确定的投影图像和布置在重新确定的投影图像上的指针。

同时，如果重新确定的投影图像没有在预设时间段内投射到物体5上，则移动装置100可初始化重新确定的投影图像并且确定在移动装置100被移动到达的位置处的新投影图像。移动装置100可基于使用相机拍摄的物体5的图像，确定重新确定的投影图像是否在预设的时间段内投射到物体5上。

图9A和图9B是示出根据本公开的实施例的通过移动移动装置改变指针位置的方法的示图。

参照图9A和图9B，根据本公开的实施例的移动装置100可将指针25布置在被投射到物体5上的投影图像20上的预设特定点。因此，用户可移动移动装置100，以使用指针25指明呈现正在被访问或重放的内容的整个图像之中的、用户期望的图像区。

参照图9A，将投影图像20相对于物体5垂直投射的移动装置100的位置值可根据用户输入沿水平方向或垂直方向改变，或者移动装置100的倾斜度值可相对于x轴、y轴和z轴中的一个而改变。如果移动装置100的位置值或倾斜度值改变，则从整个图像之中选择的投影图像也可改变。

图9A示出世界坐标系，世界坐标系示出了由于移动装置100移动而导致的指针25改变后的位置。另外，图9B示出模型坐标系，模型坐标系示出了由于移动装置100移动而导致的指针25改变后的位置。移动装置100可执行以下等式1或6中表达的转换过程，以基于移动装置100的改变后的位置值或改变后的倾斜度值将指针25布置在投影图像20上。

在以下的等式1中，通过使用移动装置100相对于x轴、y轴和z轴旋转的旋转角，可得到移动装置100相对于x轴、y轴和z轴的倾斜度值Rr、Ry和Rp。

$R_r=\left[\begin{array}{cccc}cos\left(roll\right)& -\sin \left(roll\right)& 0& 0\\ \sin \left(roll\right)& \cos \left(roll\right)& 0& 0\\ 0& 0& 1& 0\\ 0& 0& 0& 1\end{array}\right]$

$R_y=\left[\begin{array}{cccc}cos\left(yaw\right)& 0& \sin \left(yaw\right)& 0\\ 0& 1& 0& 0\\ -\sin \left(yaw\right)& 0& cos\left(yaw\right)& 0\\ 0& 0& 0& 1\end{array}\right]$

$R_p=\left[\begin{array}{cccc}1& 0& 0& 0\\ 0& cos\left(pitch\right)& -\sin \left(pitch\right)& 0\\ 0& \sin \left(pitch\right)& \cos \left(pitch\right)& 0\\ 0& 0& 0& 1\end{array}\right]$

…等式1

在等式1中，roll、yaw和pitch代表移动装置100分别相对于x轴、y轴和z轴旋转的旋转角度值。

图10A、图10B和图10C示出根据本公开的实施例的分别相对于x轴、y轴和z轴旋转的移动装置。

参照图10A，示出相对于x轴旋转的移动装置100。相对于x轴旋转的移动装置100的角度值对应于等式1中表达的roll。

参照图10B，示出相对于y轴旋转的移动装置100。相对于y轴旋转的移动装置100的角度值对应于等式1中表达的yaw。

参照图10C，示出相对于z轴旋转的移动装置100。相对于z轴旋转的移动装置100的角度值被称为pitch。

同时，移动装置100可基于得自等式1的移动装置100的倾斜度值并且基于以下的等式2和3，得到相对于物体5产生投影图像的过程中使用的变换矩阵M。

$T=\left[\begin{array}{cccc}1& 0& 0& 0\\ 0& 1& 0& 0\\ 0& 0& 1& Dist\\ 0& 0& 0& 1\end{array}\right]$

…等式2

O＝R_y*R_p*R_r

M＝O^-1*T

…等式3

在等式2中，Dist代表移动装置100和投影图像20之前的距离，O代表包括关于移动装置100的倾斜度值的信息的矩阵，M代表包括关于产生投影图像20所需的变换值的信息的变换矩阵。

同时，当确定投影图像20中需要的变换值时，可基于变换值执行将指针25布置在投影图像20上的计算。可基于以下的等式4确定指针的位置。

0＜＜ε＜Dist

$T_c=\left[\begin{array}{cccc}1& 0& 0& 0\\ 0& 1& 0& 0\\ 0& 0& 1& Dist-\mathrm{\ϵ}\\ 0& 0& 0& 1\end{array}\right]$

M_c＝O*T_c

PP_c＝M_c*P

…等式4

在等式4中，X和Y可分别是之前在投影图像20中设置的移动装置100和指针25之间的水平距离和垂直距离。另外，在等式4中，T_c代表指针25的变换矩阵，M_c代表用于将投影图像转换成虚拟世界坐标的模型矩阵。可通过将变换矩阵乘以移动装置100的倾斜度值来得到模型矩阵。

同时，移动装置100可通过将模型矩阵乘以投射矩阵P，得到用于将指针25布置在投影图像20上的最终矩阵变换值PPc。以下，将参照图11描述关于投射矩阵P的公式。

同时，以下的等式5和6用于确定当根据移动装置100的移动重新确定投影图像20时改变的指针25的位置。

$c^{\′}=M^{-1}*\left[\begin{array}{c}0\\ 0\\ 0\\ 1\end{array}\right]$

$T_{CS}=\left[\begin{array}{cccc}1& 0& 0& X\\ 0& 1& 0& Y\\ 0& 0& 1& Dist-\mathrm{\ϵ}\\ 0& 0& 0& 1\end{array}\right]$

$pw=T_{CS}*\left[\begin{array}{c}0\\ 0\\ 0\\ 1\end{array}\right]$

…等式5

p^t＝M^-1*pw

v＝p′-c′

$t=-\frac{\[\begin{array}{cccc}0& 0& 1& 0\end{array}\]*p^{\′}}{\[\begin{array}{cccc}0& 0& 1& 0\end{array}\]*v}$

p″＝p′+(v*t)

p_x＝[1000]*p″

p_y＝[0100]*p″

…等式6

在等式5中，c′代表模型坐标系中的相机坐标。T_CS代表包括关于从移动装置100到处于改变后位置的指针25的预设位置的距离的信息的变换矩阵，并且pw代表全球坐标系中的非旋转平面上的指针25的坐标。

移动装置100可基于等式5，得到全球坐标系中的从在移动装置100移动之前确定的投影图像20改变的指针25的位置信息。

同时，移动装置100可基于等式6，得到全球坐标系中的从在移动装置100移动之前确定的投影图像20改变的指针25的位置信息。在等式6中，p′代表模型坐标系中的非旋转平面上的指针25的坐标，v代表移动装置100的相机和投影图像上的指针25之间的距离，P″代表改变后的投影图像上的指针25的位置。

图11A和图11B是示出根据本公开的实施例的当移动装置移动时指针位置随着投影图像的改变而改变的示图。

参照图11A，示出在移动装置100移动之前产生的投影图像20a。这里，指针25a的位置可布置在投影图像20a的中心，对应于预设的参考点。

参照图11B，示出在移动装置100移动之后产生的改变后的投影图像20b。指针25b的位置可位于改变后的投影图像20b的中心，对应于预设的参考点。预设的参考点可包括关于指针25b的相对位置值的信息，以每当投影图像20a改变时将指针25b布置在相对于改变后的投影图像20b固定的位置处。

同时，另外在改变后的投影图像20b中，指针25b必须像预设一样布置在投影图像20b的中心，因此，指针25b的位置根据改变后的投影图像20b而改变。

图12A、图12B、图13A和图13B是示出根据本公开的实施例的使用移动装置校正投影图像的失真的方法的示图。

参照图12A、图12B、图13A和图13B，移动装置100可校正当从移动装置100投影图像所对应的移动装置100的倾斜度值或位置值改变时产生的投影图像20的失真。例如，如果移动装置100的倾斜度或位置改变，则投影图像可能不从移动装置100垂直投射到物体5上。在这种情况下，投射到物体5上的图像会伸展，从而造成失真。

根据本公开的实施例的移动装置100可测量其移动量，以预测从移动装置100改变后的位置没有失真地投射的图像的图像区。

图12A示出在移动装置100执行校正之前的投影图像20a。当移动装置100移动以相对于x轴旋转时，移动装置100的倾斜度改变，并且投射到物体5上的投影图像20a可伸展。

移动装置100可基于关于移动装置100移动量的信息，例如，基于移动装置100的位置变化或角度变化，预测在某个位置处将没有失真地形成的投影图像。例如，当假设移动装置100位于与改变后的投影图像将位于的投射点垂直的方向上时，移动装置100可预测将产生的投影图像并且可将预测的投影图像投射到物体上。

图12B示出由于移动装置100的移动而导致的失真被校正的投影图像20b。

参照图12B，将失真的投影图像20a校正为像是通过在与投射点垂直的位置处使用移动装置100投射产生的投影图像一样。

另外，当图13A中示出的并且使用移动装置100产生的投影图像20a失真时，如参照图12A和图12B描述地，可基于关于移动装置100移动量的信息(例如，移动装置100的位置变化或角度变化)在对应位置预测没有失真地产生的投影图像。例如，当假设移动装置100位于与改变后的投影图像将位于的投射点垂直的方向上时，移动装置100可预测将产生的投影图像并且可将预测的投影图像投射到物体上。

同时，可使用以下的等式7至9对投影图像执行校正。等式7和8是用于投射移动装置100的屏幕上显示的图像区的变换公式，等式9是用于校正投影图像的失真的变换公式。

$\begin{array}{ccc}f>Dist+1*sin\left(\frac{HAOV}{2}\right)& \mathrm{\Λ}& f>Dist+1*sin\left(\frac{VAOV}{2}\right)\end{array}$

$\begin{array}{ccc}0\&le;n<cos\left(\frac{HAOV}{2}\right)Dist& \mathrm{\&Lambda;}& 0\&le;n<cos\left(\frac{VAOV}{2}\right)Dist\end{array}$

0＜Dist＜f

t＝Dist*tg(HAOV/2)

b＝-Dist*tg(HAOV/2)

r＝Dist*tg(VAOV/2)

l＝-Dist*tg(VAOV/2)

…等式7

$A=\frac{r+l}{r-l}$

$B=\frac{t+b}{t-b}$

$C=-\frac{f+n}{f-n}$

$D=-\frac{2fn}{f-n}$

$E=\frac{2n}{t-b}$

$F=\frac{2n}{r-l}$

$P=\left[\begin{array}{cccc}F& 0& A& 0\\ 0& E& B& 0\\ 0& 0& C& D\\ 0& 0& -1& 0\end{array}\right]$

PP＝M*P

…等式8

$LeftUpperCorner\&lsqb;x,y,z,v\&rsqb;=PP*\left[\begin{array}{c}-1\\ 1\\ 0\\ 1\end{array}\right]$

$RightUpperCorner\&lsqb;x,y,z,v\&rsqb;=PP*\left[\begin{array}{c}1\\ 1\\ 0\\ 1\end{array}\right]$

$LeftBottomCorner\&lsqb;x,y,z,v\&rsqb;=PP*\left[\begin{array}{c}-1\\ -1\\ 0\\ 1\end{array}\right]$

$RightBottomCorner\&lsqb;x,y,z,v\&rsqb;=PP*\left[\begin{array}{c}1\\ -1\\ 0\\ 1\end{array}\right]$

…等式9

在等式7和8中，f代表最大视点距离，n代表最小视点距离，Dist代表移动装置100和使用移动装置100投射的投影图像之间的距离，t、b、r和l代表从图像的中心分别到上边缘、下边缘、左边缘和右边缘的距离。在等式7中，VAOV和HAOV分别代表垂直视角和水平视角。

基于根据上述等式3推导出的模型矩阵M和包括移动装置100的旋转信息的倾斜度值P，确定投射在物体5上的投影图像20a的变换公式。

同时，被投射的投影图像20a可能失真，因此，移动装置100必须能够校正失真。可通过基于移动装置100的移动量预测投影图像20将被投射到物体5上的哪个位置并且安装程序来校正失真，通过该程序，可校正投影图像20a的顶点坐标处由于移动装置100的移动而导致的投影图像20a的失真。

本公开的某些方面还可被实施为非暂态计算机可读记录介质上的计算机可读代码。非暂态计算机可读记录介质是可存储此后可供计算机系统读取的数据的任何数据存储装置。非暂态计算机可读记录介质的示例包括只读存储器(ROM)、随机存取存储器(RAM)、紧凑盘-ROM(CD-ROM)、磁带、软盘和光学数据存储装置。非暂态计算机可读记录介质还可分布于联网的计算机系统，使得计算机可读代码被存储并且以分布方式执行。另外，本公开所属领域的编程技术人员容易理解用于实现本公开的功能程序、代码和代码段。

此时，应该注意，如上所述的本公开的各种实施例通常涉及处理输入数据并且在一定程度上产生输出数据。这个输入数据处理和输出数据产生可用硬件或软件与硬件的组合来实现。例如，可在移动装置或用于实现与如上所述本公开的各种实施例关联的功能的类似或相关电路中采用特定电子组件。可供选择地，按照存储的指令进行操作的一个或多个处理器可实现与如上所述的本公开的各种实施例关联的功能。如果是这种情况，则在本公开的范围内的是，这些指令可被存储到一个或多个非暂态处理器可读介质上。处理器可读介质的示例包括ROM、RAM、CD-ROM、磁带、软盘和光学数据存储装置。处理器可读介质还可分布于联网的计算机系统，使得指令以分布方式存储和执行。另外，本公开所属领域的编程技术人员可容易地理解用于实现本公开的功能计算机程序、指令和指令段。

本文中引用的包括出版物、专利申请和专利的所有参考文献特此以引用方式并入，所述并入与每个参考文献被独立和具体地指示，从而以引用方式并入并且其全部内容在本文中阐述程度相同。

本公开可依据功能块组件和各种处理操作进行描述。这种功能块可通过被配置为执行特定功能的任何数量的硬件和/或软件组件来实现。例如，本公开可采用各种集成电路(IC)组件，例如，存储器元件、处理元件、逻辑元件、查询表等，这些IC组件可在一个或多个微处理器或其它控制装置的控制下执行各种功能。类似地，在使用软件编程或软件元件实现元件的情况下，本公开可用任何编程或脚本语言(诸如，C、C++、Java、汇编语言等)实现，其中，用数据结构、对象、过程、程序或其它编程要素的任何组合来实现各种算法。可用在一个或多个处理器上执行的算法来实现功能方面。此外，本公开可根据用于电子构造、信号处理和/或控制、数据处理等的相关技术来采用任何数量的技术。词语“机构”、“元件”、“装置”和“构造”被广义使用并且不限于机械或物理实施方式，但可包括软件程序结合处理器等。

本文中示出和描述的特定实现方式是本公开的例证性示例并且不旨在以任何方式另外限制本公开的范围。为了简明的缘故，相关技术的电子器件、控制系统、软件开发和系统的其它功能方面(和系统的个体操作组件中的组件)可不进行详细描述。此外，呈现的各个附图中示出的连接线或连接器旨在表现各种元件之间的功能关系和/或物理或逻辑联接。应该注意，在实际装置中可存在许多替代形式或额外的功能关系、物理连接或逻辑连接。此外，没有项或组件是实践本公开必需的，除非元件被具体描述为“必要”或“关键”的。

应该注意，本文中描述的本公开的各种实施例应该只被视为是描述性含义，而不是出于限制的目的。各实施例内的特征或方面的描述通常应该被视为可用于本公开的其它实施例中的其它类似特征或方面。

虽然已经参照本公开的各种实施例示出和描述了本公开，但本领域的技术人员应该理解，在不脱离所附权利要求书及其等同物限定的本公开的精神和范围内，可在本文中进行形式和细节上的各种变化。

Claims (14)

1.一种通过使用移动装置投射图像的方法，所述方法包括：

将呈现正在移动装置上重放或访问的内容的整个图像之中的、显示在移动装置上的图像区确定为投影图像；

投射投影图像和布置在投影图像上的指针；

通过检测移动装置的移动，改变所述整个图像中的投影图像。

2.根据权利要求1所述的方法，其中，改变投影图像的步骤包括：基于用户输入来改变指针在投影图像上的位置。

3.根据权利要求1所述的方法，其中，改变投影图像的步骤包括：

检测移动装置的倾斜度改变；

检测移动装置的倾斜度变化量；

基于检测到的移动装置的倾斜度变化量，重新确定投影图像；

投射重新确定的投影图像和布置在重新确定的投影图像上的指针。

4.根据权利要求1所述的方法，其中，改变投影图像的步骤包括：

基于移动装置的倾斜度变化量，预测投影图像的失真；

校正预测的投影图像的失真。

5.根据权利要求1所述的方法，其中，改变投影图像的步骤包括：

检测移动装置的位置改变；

检测移动装置的位置变化量；

基于检测到的移动装置的位置变化量，重新确定投影图像；

投射重新确定的投影图像和布置在重新确定的投影图像上的指针。

6.根据权利要求1所述的方法，还包括：

基于用户输入，初始化移动装置的位置信息；

基于初始化的位置信息，重新确定投影图像。

7.根据权利要求1所述的方法，还包括：如果在预设的时间段内重新确定的投影图像未被投射，则初始化重新确定的投影图像。

8.一种移动装置，包括：

显示单元，被配置为显示正在移动装置上重放或访问的内容；

移动检测器，被配置为检测移动装置的移动；

图像处理器，被配置为：

将呈现正在移动装置上重放或访问的内容的整个图像之中的、显示在移动装置上的图像区确定为投影图像；

根据移动装置的移动，改变整个图像内的投影图像；

投影仪，被配置为投射投影图像和布置在投影图像上的指针。

9.根据权利要求8所述的移动装置，还包括：用户输入单元，用户输入通过用户输入单元被接收，

其中，图像处理器还被配置为：基于获取的触摸输入，改变指针在投影图像上的位置。

10.根据权利要求8所述的移动装置，

其中，图像处理器还被配置为：

检测移动装置的倾斜度改变；

检测移动装置的倾斜度变化量；

基于检测到的移动装置的倾斜度变化量，重新确定投影图像，

其中，投影仪还被配置为投射重新确定的投影图像和布置在重新确定的投影图像上的指针。

11.根据权利要求8所述的移动装置，其中，图像处理器还被配置为：

根据移动装置的倾斜度改变，预测投影图像的失真，

校正预测的投影图像的失真。

12.根据权利要求8所述的移动装置，

其中，图像处理器还被配置为：

检测移动装置的位置改变；

检测移动装置的位置变化量；

基于检测到的移动装置的位置变化量，重新确定投影图像，

其中，投影仪还被配置为投射重新确定的投影图像和布置在重新确定的投影图像上的指针。

13.根据权利要求8所述的移动装置，其中，图像处理器还被配置为：

基于用户输入，初始化移动装置的位置信息，

基于初始化的移动装置的位置信息，重新确定投影图像。

14.根据权利要求8所述的移动装置，其中，图像处理器还被配置为：如果在预设的时间段内重新确定的投影图像未被投射，则初始化重新确定的投影图像。