CN1941847A - 用于手持终端的图形信号显示装置和方法 - Google Patents
用于手持终端的图形信号显示装置和方法 Download PDFInfo
- Publication number
- CN1941847A CN1941847A CNA2006101100727A CN200610110072A CN1941847A CN 1941847 A CN1941847 A CN 1941847A CN A2006101100727 A CNA2006101100727 A CN A2006101100727A CN 200610110072 A CN200610110072 A CN 200610110072A CN 1941847 A CN1941847 A CN 1941847A
- Authority
- CN
- China
- Prior art keywords
- image
- datum target
- shooting
- determined
- portable terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
- G06F1/1686—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
- G06F3/0317—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
- G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
- G06F2200/163—Indexing scheme relating to constructional details of the computer
- G06F2200/1637—Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
- Editing Of Facsimile Originals (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种方法和装置,其中如果在屏幕上显示图形信号,则根据手持终端的运动在手持终端的屏幕上移动并显示该图形信号,一体地设置在该手持终端中的照相机拍摄预定的目标。从通过该照相机拍摄的图像中提取该目标的特征点,并且使用该特征点来检测该照相机的运动。根据所检测的目标的运动来移动、放大、缩小或者旋转该图形信号以便在该屏幕上显示。据此,可以仅简单地通过该手持终端的运动而滚动、放大、缩小或者旋转该图形信号,从而消除每当用户意欲显示图形信号时用户需操纵该图形信号的不便。
Description
交叉引用
本申请基于和要求来自于2005年9月29日申请的在先韩国专利申请No.10-2005-0091246优先权的权益,其整个内容作为参考资料结合在此。
技术领域
本文件涉及用于手持终端的图形信号显示装置和方法。尤其是,本发明涉及用于手持终端的图形信号显示装置和方法,其被配置去根据其移动而滚动、放大、缩小或者旋转由各种的手持终端包括移动通信终端和个人数字助理(PDA)显示在屏幕上的3D(三维的)图形信号、网页文本和各种各样的图形信号。
背景技术
随着在信息通信领域发展的巨大步幅,通信环境近来已经遇到急剧的变化。尤其地,使用便于手提的移动终端,诸如手持移动电话和PDA已经大为增加。此外,伴随着手持移动终端使用的增加,用于为用户提供便利的各种各样新的有用的功能已经得到普及,并且正在进行这些功能的开发。
手持终端除了电话通信之外还可以用于游戏、消息的发送和接收、包括数据存储的各种各样的文本服务、气象信息和股票信息的接收。此外,手持终端可以一体地装备有用于拍摄预定目标的照相机,并且该拍摄的目标可以经由屏幕观看和检查。随着该手持终端的带宽扩展,手持终端可以无线地连接到该因特网来获得大量的信息,并且可以实时获得的信息量已经显著地增加。
由于手持终端的接收功能是多样化的,显示在手持终端的屏幕上的图形也已经多样化。但是,由于手持终端必须方便手持的限制,其上显示预定的图形信号的手持终端的屏幕的大小被限制在至多几英寸。
如果图形信号的显示大小大于屏幕的尺寸,其几乎不可能在一个屏幕上显示全部图形信号。针对这个问题,在屏幕的适当的位置上,诸如在常规的手持终端中的该屏幕的右侧或者下侧,可以显示滚动条。用户利用键盘或者触笔去水平地左右移动和垂直地上下移动该滚动条,从而使得手持终端能够左、右、上或下移动显示在屏幕上的该图形信号。但是,在常规方法中存在缺点,即,用户必须通过键盘或者触笔调整滚动条,从而给用户增加了不便,并使得利用相关功能麻烦。
因此,存在对无需用户调整滚动条就可以左、右、上或下移动显示在手持终端的屏幕上的图形信号的方法和装置的需要。本发明针对这些和其他的需要。
发明内容
本发明的特点和优点将在随后的描述中阐述,并且从该描述中在某种程度上将是清晰可见的,或者可以通过实践本发明获悉。通过尤其在著述的说明书和此处的权利要求以及所附的附图中指出的结构,可以实现和获得本发明的目的和其他的优点。
本发明的一个目的是提供一种用于手持终端的图形信号显示装置和方法,其配置来响应该手持终端的运动,自动地滚动、放大、缩小、旋转或者移动显示在该手持终端的屏幕上的图形信号。本发明的另一个目的是提供一种用于手持终端的图形信号显示装置和方法,其配置来使用一体地安装在该手持终端上的照相机拍摄目标,基于该拍摄的目标的运动检测该手持终端的运动,并且使得能够对于显示在该手持终端的屏幕上的图形信号进行诸如滚动、放大、缩小、旋转或者移动的功能。
如果图形信号显示在本发明的屏幕上,照相机被用来对目标拍摄。从由该照相机拍摄的图像中提取该目标的特征点,并通过使用该提取的特征点检测该目标的运动。目标运动的检测指的是对该目标向左、向右、向上和向下运动的检测,以及移动的距离、拉近和放大率的检测、拉远和缩小率的检测,以及该目标向左、向右、向上和向下旋转以及旋转角的检测。如果检测到该目标的运动,响应所检测的目标的运动将显示在屏幕上的图形信号移动、放大、缩小或者旋转。
在本发明的一个方面中,提供了一种用于在便携式终端的显示屏幕上显示图像的方法。该方法包括:跟踪基准目标,确定在该基准目标和该便携式终端之间相对运动中的变化,和根据该确定的在相对运动中的变化,改变该图像在屏幕上的显示,该图像与基准目标无关。
本发明构思,该图像或者是存储在该便携式终端中,或者是从该便携式终端外的实体下载的。本发明进一步构思,确定在相对运动中的变化包括:生成该基准目标的当前基准图像,从当前基准图像中提取至少一个特征点,和将先前基准图像的至少一个特征点与该提取的当前基准图像的至少一个特征点比较。
本发明构思,确定在相对运动中的变化进一步包括:确定拍摄的基准目标已经移动的方向和拍摄的基准目标已经移动的距离,拍摄的基准目标已经旋转的方向和拍摄的基准目标的旋转角,拍摄的基准目标更靠近于该便携式终端和当前基准图像的放大率,和/或拍摄的基准目标更远离该便携式终端和当前基准图像的缩小率。本发明进一步构思,改变图像在屏幕上的显示包括:在显示屏幕上将图像移动所确定的该拍摄的基准目标已经移动了的距离那么多,和根据所确定的该拍摄的基准目标已经移动的方向在显示屏幕上移动图像。
本发明构思,改变图像在屏幕上的显示包括:根据所确定的当前基准图像的放大率或者所确定的当前基准图像的缩小率,放大显示屏幕上的图像或者缩小显示屏幕上的图像。本发明进一步构思,改变图像在屏幕上的显示包括:如果拍摄基准目标的照相机和显示屏幕是在该便携式终端的相同平面上,那么如果确定拍摄的基准目标更靠近于该便携式终端,则根据所确定的当前基准图像的放大率放大在显示屏幕上的该图像,而如果确定拍摄的基准目标更远离该便携式终端,则根据所确定的当前基准图像的缩小率缩小显示屏幕上的图像;以及如果拍摄基准目标的照相机和显示屏幕是在该便携式终端的相反的平面上,那么如果确定拍摄的基准目标更靠近于该便携式终端,则根据所确定的当前基准图像的放大率缩小显示屏幕上的图像,而如果确定拍摄的基准目标更远离该便携式终端,则根据所确定的当前基准图像的缩小率放大显示屏幕上的图像。
本发明构思,改变图像在屏幕上的显示包括:以与所确定的拍摄的基准目标已经旋转的方向相同的方向,或者以与所确定的拍摄的基准目标已经旋转的方向相反的方向,旋转该图像,该图像被根据拍摄的基准目标的确定的旋转角来旋转。本发明进一步构思,改变图像在屏幕上的显示包括:如果拍摄基准目标的照相机和显示屏幕是在该便携式终端的相同的平面上,则以与所确定的拍摄的基准目标已经旋转的方向相同的方向旋转该图像,而如果拍摄基准目标的照相机和显示屏幕是在该便携式终端相反的平面上,则以与所确定的拍摄的基准目标已经旋转的方向相反的方向旋转该图像。优选的,该图像是3维图像,根据所确定的在相对运动中的变化使其在屏幕上旋转。
在本发明的另一个方面中,提供了一种在便携式终端的显示屏幕上显示图像的方法。该方法包括:通过拍摄和生成面部的当前基准图像来跟踪用户面部的运动,通过从该用户面部的当前基准图像中提取至少一个特征点,确定在该用户面部的运动的变化,并且将用户面部的先前基准图像的至少一个特征点与提取的该用户面部的当前基准图像的至少一个特征点比较,和根据确定的用户面部的运动的变化,改变图像在屏幕上的显示,其中显示的图像与用户的面部无关。本发明构思,确定在该用户面部的运动的变化包括:提取对应于用户的眼睛、用户的鼻子或者用户的嘴巴的至少一个特征点。
在本发明的另一个方面中,提供了一种在便携式终端的显示屏幕上显示图像的装置。该装置包括适用于跟踪基准目标的跟踪单元;适用于在显示屏幕上显示图像的图形单元,该图像与基准目标无关;适用于确定在该基准目标和该便携式终端之间的相对运动的变化的检测器单元;和适用于控制该图形单元使得图像在该屏幕上的显示被根据所确定的相对运动的变化而改变的控制器。
本发明构思,该图形单元进一步适用于显示存储在该便携式终端中的图像,或者从该便携式终端外的实体下载的图像。本发明进一步构思,该跟踪单元包括照相机,并且进一步适用于拍摄基准目标以及生成该基准目标的当前标准图像。
本发明构思,该检测器进一步适用于从当前基准图像中提取至少一个特征点,和将先前基准图像的至少一个特征点与所提取的当前基准图像的至少一个特征点比较,以确定在该基准目标和该便携式终端之间的相对运动的变化。本发明进一步构思,该检测器进一步适用于确定拍摄的基准目标已经移动的方向和拍摄的基准目标已经移动的距离,拍摄的基准目标已经旋转的方向和拍摄的基准目标的旋转角,拍摄的基准目标更靠近于该便携式终端和当前基准图像的放大率,和/或拍摄的基准目标更远离该便携式终端和当前基准图像的缩小率。
本发明构思,该控制器进一步适用于控制该图形单元将图像在显示屏幕上移动所确定的该拍摄的基准目标已经移动了的距离那么多,和根据所确定的该拍摄的基准目标已经移动的方向在显示屏幕上移动该图像。本发明进一步构思,该控制器进一步适用于根据所确定的当前基准图像的放大率或者所确定的当前基准图像的缩小率,控制图形单元在显示屏幕上放大图像或者在显示屏幕上缩小图像。优选的,该控制器进一步适用于控制图形单元以与所确定的拍摄的基准目标已经旋转的方向相同的方向,或者以与所确定的拍摄的基准目标已经旋转的方向相反的方向,来旋转该图像,该图像被根据所确定的拍摄的基准目标的旋转角旋转。
本发明的附加的特点和优点将在随后的描述中阐述,并且从该描述中在某种程度上将是清晰可见的,或者可以通过实践本发明获悉。应该明白,本发明上文的概述和下面的详细说明是示范性和说明性的,并且意在提供对如权利要求的本发明的进一步说明。从以下参考附图对实施例的详细说明中,对本领域技术人员来说,本发明的这些和其他的实施例也将容易地变得显而易见,本发明不限于所公开的任何特定的实施例。
附图说明
本申请包括附图以提供对本发明进一步的理解,并且其被结合进和构成本说明书的一部分,其举例说明本发明的实施例,并且与说明书一起可以起解释本发明原理的作用。在不同的附图中,根据一个或多个实施例,由相同的附图标记表示的本发明的特点、单元和方面表示相同、等效或者类似的特点、单元或者方面。
图1是举例说明根据本发明的显示装置结构的方框图;
图2是举例说明根据本发明的显示方法的流程图;
图3是举例说明根据本发明用于确定目标运动的方法的流程图;以及
图4是举例说明根据本发明用于响应目标的运动在屏幕上显示图形信号的方法的流程图。
具体实施方式
本发明涉及用于自动地向左、向右、向上或者向下移动显示在手持终端的屏幕上的图形信号的方法和装置。虽然相对于手持终端举例说明了本发明,但是本发明构思,可以在任何希望自动地移动在显示设备上的图形图像的时候使用本发明。
图1是举例说明根据本发明的显示装置结构的方框图。照相机100一体地安装在手持终端中,并且拍摄目标。在本发明中假设该照相机100布置在与安装在该手持终端中的屏幕相同的平面上。
运动检测器检测由该照相机100拍摄的目标的运动。该运动检测器110包括特征点提取器111、缓冲器113和特征点比较器115。
该特征点提取器111从由该照相机100拍摄的目标的图像中提取多个特征点。例如,如果由该照相机100拍摄的目标是人的面部,该特征点提取器111可以提取与人面部的眼睛、鼻子和嘴巴相关的特征点。此外,如果由该照相机100拍摄的该目标不是人的面部而是另一个目标,那么可以提取该目标的特征点,诸如角落部分或者亮和暗边醒目地明显的部分。
缓冲器113存储由特征点提取器111提取的图像的特征点。特征点比较器115将存储在缓冲器113中的先前图像的特征点与由特征点提取器111提取的当前图像的特征点的位置进行比较,并且根据该比较结果确定该目标的运动。
换句话说,特征点比较器115将先前图像的特征点与当前图像的特征点比较,以确定目标的运动方向和运动距离、该目标的拉近和放大率、该目标的拉远和缩小率、以及该目标的旋转方向和旋转距离。由该特征点比较器115确定的该运动对应于该照相机100的运动,使得先前图像的特征点和当前图像的特征点可以被比较,以确定该照相机100的运动方向和运动距离、该照相机100的拉近和放大率、该照相机100的拉远和缩小率、以及该照相机100的旋转方向和旋转距离。
控制器120控制照相机100以拍摄目标。该控制器120根据通过该运动检测器110的特征点比较器115确定的该目标的运动控制图形信号在屏幕上的显示。例如,该控制器120根据通过该特征点比较器115确定的该目标的运动方向和运动距离,以及拉近和放大率、拉远和缩小率,和该目标的旋转方向和旋转距离,通过移动、放大、缩小或者旋转该图形信号来控制该图形信号的显示。
图形单元130图形处理各种各样的图形信号,包括存储在该手持终端之内或者经由因特网下载的三维图像、游戏和网页文本,并且将信号输出给显示单元140以在该屏幕上显示。此外,该图形单元130移动、放大、缩小或者旋转显示在该显示单元140的屏幕上的图形信号,并且在该屏幕上显示该图形信号。
图形单元130处理存储在该手持终端之内的图形信号。图形单元130还可以处理从该手持终端外接收的图形信号。
处理图形信号包括放大或者缩小以符合该显示单元140的屏幕大小,以及适合屏幕分辨率的处理。由该图形单元130处理的该图形信号输出给该显示单元140,并且显示在屏幕上。
当在该屏幕上显示预定的图形信号时,该控制器120驱动照相机100。照相机100在控制器120的控制之下拍摄目标,并且将该拍摄的目标的图像输出给该运动检测器110的特征点提取器111。
特征点提取器111从该目标的图像中提取特征点。例如,如果目标是人的面部,那么可以提取对应于眼睛、鼻子和嘴巴的特征点。如果拍摄了面部之外的目标,那么可以提取该目标的特征点,诸如角落部分或者醒目地辨别亮和暗边的部分。由于目标的特征点的提取是公知的技术,在这里省略了对其详细的描述。
由特征点提取器111提取的特征点存储在缓冲器113中,并且特征点提取器111重复地提取相继的图像的特征点。缓冲器113存储由照相机100拍摄的先前图像的特征点,并且然后特征点提取器111提取由照相机100拍摄的当前图像的特征点。
存储在缓冲器113中的先前图像的特征点和由该特征点提取器111提取的当前图像的特征点被输入到特征点比较器115。特征点比较器115将从缓冲器113输入的先前图像的特征点的位置与来自特征点提取器111的当前图像的特征点的位置进行比较。此外,特征点提取器111检测该特征点的位置变化作为比较的结果,并且将所检测的变化输入到控制器120。
例如,如果用户握住手持终端,并且向左或者向右移动该终端,那么由照相机100拍摄的目标被向左或者向右移动以向左或者向右移动特征点。如果该特征点被向左或者向右移动,特征点比较器115确定该目标已经被向左或者向右移动,并且检测向左或者向右移动的距离。
如果该手持终端向上或者向下移动,由该照相机100拍摄的目标被向上或者向下移动,来向上或者向下移动特征点。如果特征点被向上或者向下移动,那么特征点比较器115确定该目标已经向上或者向下移动,并且检测向上或者向下移动的距离。
如果该手持终端被朝向该目标推进或者该照相机100被拉近,由照相机100拍摄的目标被放大,以完全地扩大在特征点之间的间隙。如果在特征点之间的间隙被完全地扩大,则特征点比较器115确定已经发生该目标的拉近,并且检测该目标的放大率。
如果该手持终端被远离该目标移动或者该照相机100被拉远,那么由照相机100拍摄的目标被缩小,以缩小在该特征点之间的间隙。特征点比较器115确定已经发生该目标的拉远,并且检测目标的缩小率。
如果该手持终端被水平地旋转,那么特征点的垂直宽度没有变化,仅仅水平宽度变化。此外,根据该手持终端的水平旋转,产生位于左侧的特征点的水平宽度变化和位于右侧的特征点的水平宽度变化之间的差,并且该差是基于位于中间的特征点的。特征点比较器115基于左侧特征点的水平宽度变化和右侧特征点的水平宽度变化来确定水平旋转方向,并且如果存在特征点的水平宽度变化,则检测旋转角。
如果该手持终端被垂直地旋转,仅仅存在特征点的垂直宽度的变化,而不存在水平宽度变化。此外,根据该手持终端的垂直旋转,产生位于上侧的特征点的垂直宽度变化和位于下侧的特征点的垂直宽度变化之间的差,并且该差是基于位于中间的特征点的。特征点比较器115基于上侧特征点的垂直宽度变化和下侧特征点的垂直宽度变化来确定垂直旋转方向,并且如果存在特征点的垂直宽度变化,则检测旋转角。
由特征点比较器115确定的目标的运动,例如该照相机的运动,被输入到控制器120。控制器120响应由特征点比较器115确定的该目标的运动控制图形单元130,使得响应该目标的运动,图形单元130滚动、放大、缩小或者旋转该图形信号,并且在显示单元140的屏幕上显示该图形信号。
图2是举例说明根据本发明的显示方法的流程图。参考图2,存储在手持终端中的或者从该终端外下载的图形信号被输入并且由图形单元130处理,并且显示在显示单元140的屏幕上(S200)。
可以响应用户的操纵输入图形信号。例如,可以输入各种图形信号,该信号包括从因特网下载到该手持终端的网页文本、三维图像、游戏或者由用户借助于照相机拍摄并且存储在手持终端中的数字图片。
如果通过该图形单元130在该显示单元140的屏幕上显示图形信号,则控制器120控制照相机100拍摄目标(S202)。由该照相机100拍摄的该目标不限于特定的目标,而是可以从拍摄的图像中提取特征点的任何目标。
所拍摄的目标的图像被输入到特征点提取器111。随着目标的图像的输入,特征点提取器111从该目标的输入图像中提取特征点,并且该提取的特征点被重复地存储在缓冲器113中(S204)。相继地,由照相机100拍摄的先前图像的特征点被存储在该缓冲器113中,并且由该照相机拍摄的当前图像的特征点被存储在特征点提取器111中。
特征点比较器115将存储在该缓冲器113中的先前图像的特征点与从该特征点提取器111输出的当前图像的特征点比较(S206)。特征点比较器115基于特征点的比较确定由照相机100拍摄的目标的运动(S208),并且基于该确定的运动输出信号到控制器120。
控制器120基于从特征点比较器115输出的信号确定目标的运动,例如,该照相机的运动,并且响应所确定的运动控制图形单元130,以便移动显示在显示单元140的屏幕上的图形信号(S210)。如图3中所示,该目标运动的确定(S208)是以这样的方式进行的,即,特征点比较器115将存储在缓冲器130中的先前图像的特征点位置与由特征点提取器111输出的当前图像的特征点位置比较(S300)。
如果确定特征点的位置已经移动(S302),则特征点比较器115确定特征点已经移动的方向和移动的距离(S304)。如果确定特征点的位置已经增加(S306),则特征点比较器115确定已经发生拉近,并且基于该拉近确定放大率(S308)。如果确定特征点的位置已经减少(S310),特征点比较器115确定已经发生拉远,并且基于该拉远确定缩小率(S312)。
如果其确定存在特征点的水平宽度变化(S314),则特征点比较器115基于相对于目标的水平旋转位于左侧的特征点的水平宽度变化和位于右侧的特征点的水平宽度变化,来确定目标向左旋转或者向右旋转和旋转角(S316)。如果确定存在特征点的垂直宽度变化(S318),则特征点比较器115基于相对于该目标的垂直旋转位于上侧的特征点的垂直宽度变化和位于下侧的特征点的垂直宽度变化,来确定确定目标向上旋转或者向下旋转和旋转角(S320)。
如上所述,如由特征点比较器115确定的目标运动,例如,照相机100的运动被输入到控制器120。控制器120响应所确定的目标运动控制图形单元130,以调整图形信号的显示。
再次参考图2,执行图形信号的显示(S210),使得控制器120响应由特征点比较器115确定的该运动来控制图形单元130,以控制图形信号的显示。换句话说,并且如在图4中举例说明的,如果特征点比较器115确定目标运动(S400),则控制器120通过图形单元130控制显示在显示单元140的屏幕上的图形信号,使得该图形信号的显示滚动所确定的该目标已经移动的距离那么多,并且以所确定的目标运动的相反方向滚动(S402)。
例如,如果照相机100拍摄的目标在向上的方向移动,显示在该屏幕上的图形信号被向下滚动,使得该图形信号的上部显示在该屏幕上。如果该目标在向下的方向移动,显示在该屏幕上的该图形信号被向上地滚动,使得该图形信号的下部显示在该屏幕上。如果该目标向左移动,显示在该屏幕上的该图形信号被向右滚动,使得该图形信号的左侧部分显示在该屏幕上。如果该目标向右移动,显示在该屏幕上的该图形信号被向左滚动,使得该图形信号的右侧部分显示在该屏幕上。
如果特征点比较器115确定该目标已经被拉近(S404),控制器120通过图形单元130以该目标的放大率那么多来放大显示在屏幕上的图形信号(S406)。如果特征点比较器115确定目标已经被拉远(S408),控制器120通过图形单元130以该目标的缩小率那么多来缩小显示在屏幕上的图形信号(S410)。
如果特征点比较器115确定目标已经水平地旋转(S412),控制器120控制该图形单元130来以该目标的旋转角那么多以水平旋转的方向在屏幕上显示图形信号(S414)。如果特征点比较器115确定目标已经垂直地旋转(S416),控制器120控制图形单元130来以该目标的旋转角那么多以垂直旋转的方向在该屏幕上显示该图形信号(S418)。
应当注意到,已经对于屏幕和照相机100放置在相同的平面上的手持终端描述了本发明。因此,如在此处描述的,根据照相机和屏幕安装在相同的平面上情况来移动在屏幕上显示的图形信号。
但是,该照相机可以在手持终端上旋转,或者该照相机可以安排在与屏幕相反的表面上。如果屏幕和照相机100安装在相反的平面上,以如在此处描述的相反的方式移动图形信号。
例如,将该图形信号在与目标运动的方向相同的方向上滚动该运动距离那么多。如果该目标已经被拉近,则以差不多该放大率放大的形式显示该图形信号,而如果目标已经被拉远,则以差不多该缩小率缩小的形式显示该图形信号。如果拍摄的目标已经向左旋转,将图形信号向右旋转以显示,而如果目标已经向右旋转,则将图形信号向左旋转以显示。如果目标已经向上旋转,则将图形信号向下旋转以显示,而如果目标已经向下旋转,则将图形信号向上旋转以显示。
如从上文中清晰可见的,如果在根据本发明的一体地装备有照相机的手持终端中在屏幕上显示图形信号,则检测由该照相机拍摄的目标的运动,根据所检测的目标的运动将显示在该屏幕上的图形信号自动地滚动、放大、缩小、旋转、或者垂直地或者水平地移动。此外,如果在屏幕上显示三维图形信号,当用户握着该手持式终端时,响应由照相机拍摄的目标的旋转,将该三维图形信号旋转以显示。
因此,根据本发明的用于手持式终端的该图形信号显示装置和方法具有这样的优点,即,减少了用户的不便,并且如果图形信号的显示大小大于屏幕的大小,不必经常地使用键盘或者触笔调整图形信号。本发明的另一个优点是,如果要显示三维图形信号,无需用户单独操纵,就可以根据拍摄的目标的运动旋转和观看该三维图形信号。
上述内容包括本发明的例子。当然,不可能为描述本发明而说明各种部件或者方法的每一可能的组合,但是,本领域普通技术人员可以认识到,本发明的许多另外的组合和置换是可允许的。
因此,本发明意欲包含落在所附的权利要求的精神和范围内的所有这些替换、改进和变化。此外,对于曾经在详细描述或者权利要求中使用的术语“包含”的范围,这样的术语意欲是以类似于术语“包括”的方式包含的,如同当在权利要求中采用“包括”作为过渡的词语的时候“包括”被解释的。
由于本发明可以以若干形式实施而不脱离其精神或者基本的特征,故而还应该明白,除非另作说明,以上描述的实施例不受任何上文描述的细节的限制,而是应该在所附的权利要求中限定的其精神和范围之内广泛地解释。因此,落在该权利要求的边界内或者这样的边界的等价内的所有的变化和改进因此为所附的权利要求所包含。
上述的实施例和优点仅仅是示范性的,并且不应理解为限制本发明。当前的教导可以容易地应用于其他类型的装置。本发明的描述意图是说明性的,而不是限制权利要求的范围。对于那些本领域技术人员来说许多的替换、修改和变化将是显而易见的。在那些权利要求中,装置加功能项意图是覆盖在此处描述的执行列举的功能结构,以及不仅结构上的等效,而且等效的结构。
Claims (20)
1.一种用于在便携式终端的显示屏幕上显示图像的方法,该方法包括:
跟踪基准目标;
确定在该基准目标和该便携式终端之间的相对运动中的变化;和
根据该确定的在相对运动中的变化,改变图像在屏幕上的显示,该图像与该基准目标无关。
2.根据权利要求1的方法,其中该图像是存储在该便携式终端中的和从该便携式终端外的实体下载的中的一种。
3.根据权利要求1的方法,其中确定在相对运动中的变化包括:
生成该基准目标的当前基准图像;
从当前基准图像中提取至少一个特征点;和
将先前基准图像的至少一个特征点与所提取的当前基准图像的至少一个特征点比较。
4.根据权利要求3的方法,其中确定在相对运动中的变化进一步包括确定以下的至少一个:
该拍摄的基准目标已经移动的方向和该拍摄的基准目标已经移动的距离;
该拍摄的基准目标已经旋转的方向和该拍摄的基准目标的旋转角;
该拍摄的基准目标更靠近于该便携式终端和该当前基准图像的放大率;和
该拍摄的基准目标更远离该便携式终端和该当前基准图像的缩小率。
5.根据权利要求4的方法,其中改变图像在屏幕上的显示包括:
将该图像在显示屏幕上移动所确定的该拍摄的基准目标已经移动了的距离那么多;和
根据所确定的该拍摄的基准目标已经移动的方向在显示屏幕上移动该图像。
6.根据权利要求4的方法,其中改变图像在屏幕上的显示包括:根据所确定的当前基准图像的放大率和所确定的当前基准图像的缩小率之一,进行在该显示屏幕上放大该图像和在该显示屏幕上缩小该图像之一。
7.根据权利要求6的方法,其中改变图像在屏幕上的显示包括:
如果拍摄该基准目标的照相机和该显示屏幕是在该便携式终端的相同的平面上,那么如果确定该拍摄的基准目标更靠近于该便携式终端,则根据所确定的当前基准图像的放大率放大在该显示屏幕上的图像,而如果确定该拍摄的基准目标更远离该便携式终端,则根据所确定的当前基准图像的缩小率缩小在该显示屏幕上的图像;和
如果拍摄该基准目标的照相机和该显示屏幕是在该便携式终端的相反的平面上,那么如果确定该拍摄的基准目标更靠近于该便携式终端,则根据所确定的当前基准图像的放大率缩小在该显示屏幕上的图像,而如果确定该拍摄的基准目标更远离该便携式终端,则根据所确定的当前基准图像的缩小率放大在该显示屏幕上的图像。
8.根据权利要求4的方法,其中改变图像在屏幕的显示包括:在与所确定的该拍摄的基准目标已经旋转的方向相同的方向,和在与所确定的该拍摄的基准目标已经旋转的方向相反的方向之一上,旋转该图像,该图像被根据所确定的该拍摄的基准目标的旋转角来旋转。
9.根据权利要求8的方法,其中改变图像在屏幕上的显示包括:如果拍摄该基准目标的照相机和该显示屏幕是在该便携式终端的相同的平面上,则以与所确定的该拍摄的基准目标已经旋转的方向相同的方向旋转该图像,而如果拍摄该基准目标的该照相机和该显示屏幕是在该便携式终端相反的平面上,则以与所确定的该拍摄的基准目标已经旋转的方向相反的方向旋转该图像。
10.根据权利要求1的方法,其中该图像是3维的图像,根据所确定的在相对运动中的变化使其在屏幕上旋转。
11.一种用于在便携式终端的显示屏幕上显示图像的方法,该方法包括:
通过拍摄和生成用户面部的当前基准图像来跟踪面部的运动;
通过从用户面部的当前基准图像中提取至少一个特征点,确定在用户面部的运动中的变化,并且将用户面部的先前基准图像的至少一个特征点与所提取的该用户面部的当前基准图像的至少一个特征点比较;和
根据所确定的在用户面部的运动中的变化,改变图像在屏幕上的显示,
其中所显示的图像与用户的面部无关。
12.根据权利要求11的方法,其中确定在用户面部的运动中的变化包括提取对应于用户的眼睛、用户的鼻子和用户的嘴巴之一的至少一个特征点。
13.一种用于在便携式终端的显示屏幕上显示图像的装置,该装置包括:
跟踪单元,其适用于跟踪基准目标;
图形单元,其适用于在该显示屏幕上显示图像,该图像与该基准目标无关;
检测器单元,其适用于确定在该基准目标和该便携式终端之间的相对运动中变化;和
控制器,其适用于控制该图形单元使得该图像在该屏幕上的显示根据所确定的在相对运动中的变化而改变。
14.根据权利要求13的装置,其中该图形单元进一步适用于显示存储在该便携式终端中的图像和从该便携式终端外的实体下载的图像的一种。
15.根据权利要求13的装置,其中该跟踪单元包括照相机,并且进一步适用于:
拍摄该基准目标;和
生成该基准目标的当前基准图像。
16.根据权利要求15的装置,其中该检测器进一步适用于:
从当前的基准图像中提取至少一个特征点;和
将先前基准图像的至少一个特征点与所提取的当前基准图像的至少一个特征点比较,以确定在该基准目标和该便携式终端之间的相对运动中的变化。
17.根据权利要求16的装置,其中该检测器进一步适用于确定以下的至少一个:
该拍摄的基准目标已经移动的方向和该拍摄的基准目标已经移动的距离;
该拍摄的基准目标已经旋转的方向和该拍摄的基准目标的旋转角;
该拍摄的基准目标更靠近于该便携式终端和该当前基准图像的放大率;和
该拍摄的基准目标更远离该便携式终端和该当前基准图像的缩小率。
18.根据权利要求17的装置,其中该控制器进一步适用于控制该图形单元:
将图像在该显示屏幕上移动所确定的该拍摄的基准目标已经移动了的距离那么多;和
根据所确定的该拍摄的基准目标已经移动的方向,在该显示屏幕上移动该图像。
19.根据权利要求17的装置,其中该控制器进一步适用于根据所确定的当前基准图像的放大率和所确定的当前基准图像的缩小率的一个,控制该图形单元进行在该显示屏幕上放大该图像和在该显示屏幕上缩小该图像的一种。
20.根据权利要求17的装置,其中该控制器进一步适用于控制该图形单元来以与所确定的该拍摄的基准目标已经旋转的方向相同的方向,和以与所确定的该拍摄的基准目标已经旋转的方向相反的方向之一来旋转该图像,该图像被根据所确定的该拍摄的基准目标的旋转角旋转。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020050091246A KR100643470B1 (ko) | 2005-09-29 | 2005-09-29 | 휴대용 단말기의 그래픽 신호 표시장치 및 방법 |
KR1020050091246 | 2005-09-29 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN1941847A true CN1941847A (zh) | 2007-04-04 |
Family
ID=37507585
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2006101100727A Pending CN1941847A (zh) | 2005-09-29 | 2006-07-31 | 用于手持终端的图形信号显示装置和方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20070070037A1 (zh) |
EP (1) | EP1770487A2 (zh) |
JP (1) | JP2007095030A (zh) |
KR (1) | KR100643470B1 (zh) |
CN (1) | CN1941847A (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102067067A (zh) * | 2008-06-24 | 2011-05-18 | 韩国电子通信研究院 | 参考姿势数据的注册方法、移动终端的驱动方法及其移动终端 |
CN102089738A (zh) * | 2008-06-11 | 2011-06-08 | 诺基亚公司 | 用于用户界面控制的相机姿态 |
CN102411456A (zh) * | 2010-09-21 | 2012-04-11 | 深圳富泰宏精密工业有限公司 | 可携式装置感应控制系统及方法 |
CN102725713A (zh) * | 2009-11-02 | 2012-10-10 | 索尼计算机娱乐公司 | 操作输入设备 |
CN102750077A (zh) * | 2011-01-31 | 2012-10-24 | 手持产品公司 | 可操作用于显示电子记录的终端 |
CN102055897B (zh) * | 2009-11-02 | 2013-01-23 | 华晶科技股份有限公司 | 摄像追踪方法 |
CN103019543A (zh) * | 2012-11-28 | 2013-04-03 | 北京百度网讯科技有限公司 | 用于移动终端的视图缩放方法和装置 |
CN101753999B (zh) * | 2008-12-04 | 2013-08-14 | 索尼株式会社 | 图像处理设备和方法、图像处理系统和图像处理程序 |
CN103733605A (zh) * | 2011-07-01 | 2014-04-16 | 英特尔公司 | 针对改进的可用性的智能手持设备中的自适应文本字体和图像调节 |
CN104635932A (zh) * | 2009-10-13 | 2015-05-20 | 华为终端有限公司 | 一种调节显示内容的方法和设备 |
CN111835972A (zh) * | 2020-07-21 | 2020-10-27 | 维沃移动通信(杭州)有限公司 | 拍摄方法、装置和电子设备 |
CN112689221A (zh) * | 2020-12-18 | 2021-04-20 | Oppo广东移动通信有限公司 | 录音方法、录音装置、电子设备及计算机可读存储介质 |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100556856B1 (ko) * | 2003-06-14 | 2006-03-10 | 엘지전자 주식회사 | 이동통신 단말기에서 화면 제어 방법 및 장치 |
KR100764698B1 (ko) * | 2006-08-07 | 2007-10-08 | 삼성전자주식회사 | 카메라 영상의 패턴인식과 해석에 의한 휴대 단말기의사용자 인터페이스 제어 방법 및 그 단말기 |
US7952596B2 (en) * | 2008-02-11 | 2011-05-31 | Sony Ericsson Mobile Communications Ab | Electronic devices that pan/zoom displayed sub-area within video frames in response to movement therein |
GB2458881A (en) * | 2008-03-19 | 2009-10-07 | Robert William Albert Dobson | Interface control using motion of a mobile device |
JP5077956B2 (ja) * | 2008-04-23 | 2012-11-21 | Kddi株式会社 | 情報端末装置 |
JP2009294728A (ja) | 2008-06-02 | 2009-12-17 | Sony Ericsson Mobilecommunications Japan Inc | 表示処理装置、表示処理方法、表示処理プログラム、及び携帯端末装置 |
JP5182202B2 (ja) * | 2009-04-14 | 2013-04-17 | ソニー株式会社 | 情報処理装置、情報処理方法及び情報処理プログラム |
KR101624505B1 (ko) * | 2009-09-24 | 2016-05-26 | 삼성전자주식회사 | 3-d 포인팅 감지 장치 및 방법 |
KR101643606B1 (ko) * | 2009-12-11 | 2016-07-29 | 삼성전자주식회사 | 동영상 촬영 장치에서의 움직임 가이드 제공 방법 및 그 장치 |
KR101364571B1 (ko) * | 2010-10-06 | 2014-02-26 | 한국전자통신연구원 | 영상 기반의 손 검출 장치 및 그 방법 |
US20120194415A1 (en) * | 2011-01-31 | 2012-08-02 | Honeywell International Inc. | Displaying an image |
US9189072B2 (en) * | 2011-02-08 | 2015-11-17 | Lg Electronics Inc. | Display device and control method thereof |
US9407824B2 (en) * | 2012-11-01 | 2016-08-02 | Google Inc. | Multi-directional content capture on mobile devices |
CN103331506B (zh) * | 2013-07-23 | 2015-02-04 | 唐山开元焊接自动化技术研究所有限公司 | 一种使用手持式终端检测自动化焊接装备的检测方法 |
US10042078B2 (en) * | 2015-02-27 | 2018-08-07 | The United States of America, as Represented by the Secretary of Homeland Security | System and method for viewing images on a portable image viewing device related to image screening |
CN105630162A (zh) * | 2015-12-21 | 2016-06-01 | 魅族科技(中国)有限公司 | 一种控制软键盘的方法以及终端 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020024506A1 (en) * | 1999-11-09 | 2002-02-28 | Flack James F. | Motion detection and tracking system to control navigation and display of object viewers |
JP4144555B2 (ja) * | 2003-06-09 | 2008-09-03 | カシオ計算機株式会社 | 電子機器、表示制御方法及びプログラム |
-
2005
- 2005-09-29 KR KR1020050091246A patent/KR100643470B1/ko not_active IP Right Cessation
-
2006
- 2006-05-31 EP EP06011239A patent/EP1770487A2/en not_active Withdrawn
- 2006-06-01 US US11/421,695 patent/US20070070037A1/en not_active Abandoned
- 2006-06-27 JP JP2006177021A patent/JP2007095030A/ja active Pending
- 2006-07-31 CN CNA2006101100727A patent/CN1941847A/zh active Pending
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102089738A (zh) * | 2008-06-11 | 2011-06-08 | 诺基亚公司 | 用于用户界面控制的相机姿态 |
CN102067067A (zh) * | 2008-06-24 | 2011-05-18 | 韩国电子通信研究院 | 参考姿势数据的注册方法、移动终端的驱动方法及其移动终端 |
CN101753999B (zh) * | 2008-12-04 | 2013-08-14 | 索尼株式会社 | 图像处理设备和方法、图像处理系统和图像处理程序 |
CN104635932A (zh) * | 2009-10-13 | 2015-05-20 | 华为终端有限公司 | 一种调节显示内容的方法和设备 |
CN102725713A (zh) * | 2009-11-02 | 2012-10-10 | 索尼计算机娱乐公司 | 操作输入设备 |
CN102055897B (zh) * | 2009-11-02 | 2013-01-23 | 华晶科技股份有限公司 | 摄像追踪方法 |
CN102411456A (zh) * | 2010-09-21 | 2012-04-11 | 深圳富泰宏精密工业有限公司 | 可携式装置感应控制系统及方法 |
CN102411456B (zh) * | 2010-09-21 | 2016-02-17 | 深圳富泰宏精密工业有限公司 | 可携式装置感应控制系统及方法 |
CN102750077A (zh) * | 2011-01-31 | 2012-10-24 | 手持产品公司 | 可操作用于显示电子记录的终端 |
CN103733605A (zh) * | 2011-07-01 | 2014-04-16 | 英特尔公司 | 针对改进的可用性的智能手持设备中的自适应文本字体和图像调节 |
CN103019543A (zh) * | 2012-11-28 | 2013-04-03 | 北京百度网讯科技有限公司 | 用于移动终端的视图缩放方法和装置 |
CN111835972A (zh) * | 2020-07-21 | 2020-10-27 | 维沃移动通信(杭州)有限公司 | 拍摄方法、装置和电子设备 |
CN112689221A (zh) * | 2020-12-18 | 2021-04-20 | Oppo广东移动通信有限公司 | 录音方法、录音装置、电子设备及计算机可读存储介质 |
CN112689221B (zh) * | 2020-12-18 | 2023-05-30 | Oppo广东移动通信有限公司 | 录音方法、录音装置、电子设备及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP2007095030A (ja) | 2007-04-12 |
EP1770487A2 (en) | 2007-04-04 |
US20070070037A1 (en) | 2007-03-29 |
KR100643470B1 (ko) | 2006-11-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1941847A (zh) | 用于手持终端的图形信号显示装置和方法 | |
US9998651B2 (en) | Image processing apparatus and image processing method | |
JP4494196B2 (ja) | 画像表示装置 | |
US20100058254A1 (en) | Information Processing Apparatus and Information Processing Method | |
US8400490B2 (en) | Framing an object for video conference | |
US20120032988A1 (en) | Display control apparatus that displays list of images onto display unit, display control method, and storage medium storing control program therefor | |
EP3163349B1 (en) | Imaging device | |
CN102045429B (zh) | 一种调节显示内容的方法和设备 | |
US20080118162A1 (en) | Text Detection on Mobile Communications Devices | |
CN104111778B (zh) | 图片显示方法和装置 | |
CN1361466A (zh) | 应用图像传感器的电子设备 | |
CN102006413A (zh) | 显示控制装置及显示控制方法 | |
US20110102466A1 (en) | System and method for zooming images | |
US20150002698A1 (en) | Inclination angle compensation system and method for picture | |
CN103019537A (zh) | 一种图像预览方法及装置 | |
CN101984651A (zh) | 图像稳定系统、显示装置及稳定图像的方法 | |
US20160292873A1 (en) | Image capturing apparatus and method for obtaining depth information of field thereof | |
CN214847678U (zh) | 支持补偿显示器的屏幕移动的电子设备 | |
JP4779524B2 (ja) | 画像処理装置および方法、並びにプログラム | |
US20110148934A1 (en) | Method and Apparatus for Adjusting Position of an Information Item | |
JP5482327B2 (ja) | 撮像装置、撮像方法および撮像プログラム | |
EP2428884A2 (en) | Method, software, and apparatus for displaying data objects | |
CN201928352U (zh) | 图像稳定系统及显示装置 | |
CN201260200Y (zh) | 具自动翻页功能的数字摄影装置 | |
CN104635932A (zh) | 一种调节显示内容的方法和设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20070404 |