CN101398711A - 手持摄影机的光标定位方法 - Google Patents

手持摄影机的光标定位方法 Download PDF

Info

Publication number
CN101398711A
CN101398711A CNA2007101517994A CN200710151799A CN101398711A CN 101398711 A CN101398711 A CN 101398711A CN A2007101517994 A CNA2007101517994 A CN A2007101517994A CN 200710151799 A CN200710151799 A CN 200710151799A CN 101398711 A CN101398711 A CN 101398711A
Authority
CN
China
Prior art keywords
image
hand
cursor
camera
characteristic point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2007101517994A
Other languages
English (en)
Inventor
陈志宏
何建璋
林远彬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Association Between Hair Technology Co Ltd
Shirong Science & Technology Co Ltd
Original Assignee
Association Between Hair Technology Co Ltd
Shirong Science & Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Association Between Hair Technology Co Ltd, Shirong Science & Technology Co Ltd filed Critical Association Between Hair Technology Co Ltd
Priority to CNA2007101517994A priority Critical patent/CN101398711A/zh
Priority to EP07023577A priority patent/EP2042970A1/en
Publication of CN101398711A publication Critical patent/CN101398711A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种手持摄影机的光标定位方法，借由附加于手持装置的摄影机拍摄连续影像以感测手持装置的运动，而使计算机画面中光标产生相对位移，主要在手持装置(如镭射指引器)内设置摄影机，以拍摄现场场景的连续影像，并将该影像数据实时传递至计算机，计算机在第N影像中选取最明显的特征点，并记录其在影像中的位置，再在第(N+1)影像中搜寻该特征点，若有觅得相同特征点，即以该特征点在两影像中的位置变化，而判别手持装置的运动，进而使光标产生相对位移；而当在第(N+1)影像中无法觅得第N影像中的相同特征点时，即放弃该特征点，而在该第(N+1)影像中重新选取特征点，再在第(N+2)影像中对比该新特征点。

Description

手持摄影机的光标定位方法
技术领域
本发明与计算机的光标定位有关，特别与以影像对比方式感测手部运动的光标定位技术有关。
背景技术
个人计算机早已全面采用图形使用者接口(GUI，Graphical User Interface)的操作系统，在该种使用者接口中，主要借由光标的移动以进行各项操作，而光标通常以鼠标控制其移动。
一般鼠标必须在固定的平面(通常为桌面)上使用，但在某些特定场合中确有无法使用鼠标的困扰，例如在进行演示的场合中，主讲人通常通过笔记型计算机操作演示软件(如PowerPoint)播放投影片，主讲人通常持用镭射指引器(laser pointer)在讲台上讲解投影片的内容，难以直接操作播放投影片的计算机，在多数情况下，主讲人需通过另一位人员操作该计算机，但此种不仅需要主讲人与计算机操作者全程不断地以手势、姿势(如点头)或言语协调投影片档案的操作，除跳页的例行性操作以外，主讲人难以指挥计算机操作者进行需以光标点选的操作，例如在投影片中点选超级链接(hyperlink)功能，或选取部分文字使其以反白呈现等等。
目前市面上虽已有结合镭射指引器与摇动控制式鼠标的产品，可令主讲者所手持的镭射指引器也具有光标控制功能，该种摇动控制鼠标虽不需借由固定平面来操作，但其因是利用加速度计感应手部的运动，而每一个操作者的手部运动模式都大不相同，故加速度计的灵敏度设定难以符合所有操作者的手部运动模式，且其所感应的为加速度而非速度，也难以完全对应地反应手部的动作。更严重的，由于手持装置(镭射指引器)在三维空间下自由运动，其立体性的运动也难以正确地转化为光标在二维平面的移动，造成使用者对于光标移动方向的控制上产生极大的困难。因此该类采用加速度感应的光标定位产品难以精确地控制光标的移动，经常发生移动过度、移动不足及方向失准的情况，有必要再加以进一步改良。
发明内容
有鉴于此，本发明的主要目的，在于提供一种手持摄影机的光标定位方法，其可供使用者在三维空间中以手部运动控制光标移动，使手部的动作可精确地反应在光标的移动上，使光标的移动更为精确。
为达成上述目的，本发明的技术方案是这样实现的：
一种手持摄影机的游标光标定位方法，包括：
a、以手持摄影机拍摄连续影像；
b、自该连续影像中的第N影像中选取特征点；
c、自在该第N影像后的第(N+1)影像中搜寻相同的特征点；
d、当有觅得相同特征点时，计算该特征点在该第N影像及第(N+1)影像中的位置变化；
e、依据该特征点的位置变化量而改变光标的位置；
f、当未在该第(N+1)影像中觅得相同特征点时，即在该第(N+1)影像中重新选取特征点；
g、在步骤f之后，以N＝N+1重复步骤c～f。
本发明以自由摄影机拍摄定置物，以侦测使用者的手部运动，进而控制光标的位移，可完全避免公知加速度感应方式所产生定位不准的困扰，本发明以二维影像中特征点的移动作为光标在二维画面中的位移依据，使光标的定位更为精准。
附图说明
图1为本发明的手持摄影机的立体示意图；
图2为本发明的整体系统连接框图；
图3为本发明的光标定位方法流程图；
图4为本发明在拍摄影像中所选取的特征点在两连续影像中的相对位置变化示意图；
图5为光标在显示器画面中的位移示意图。
附图标记说明：
A      特征点         1      手持摄影机
11     壳体           12     数字摄影机
13     镭射指引器     14     按键
2      计算机主机     3      显示器
S1～S7 步骤           31，32 光标
41     第一影像       42     第二影像
具体实施方式
现就本发明的较佳实施例，配合附图，详细说明如后。
首先请参阅图1，其为本发明的手持摄影机的立体示意图，该手持摄影机1为将数字摄影机12装设在适于手持的壳体11内，该壳体11较佳可为长形体，特别较佳地可与镭射指引器13装设在同一壳体11内，并令该镭射指引器13的发光体与该数字摄影机12的镜头都位于壳体11的同一端面上，如此可使手持摄影机1兼具有镭射指引的功能，更有利于使用者的操作，但该数字摄影机12与镭射指引器13仅共同装设在同一壳体11内，两者独立运作与控制。该壳体11的表面另设有复数按键14，以供使用者进行操作。
续请参阅图2，手持摄影机1电连接于计算机主机2，以作为该计算机主机2的输入装置，且该计算机主机2另电连接作为输出装置的显示器3，手持摄影机1与计算机主机2之间可采用有线或无线方式连接，有线连接较佳可用通用序列总线(USB)接口，无线连接则可较佳地选用蓝牙(Bluetooth)接口，但并不以此为限，本领域技术人员另也可选用其它适合的有线或无线通讯接口。通过该通讯接口，手持摄影机1将其所摄得的数字化影像数据传送至计算机主机2，由计算机主机2借由对该连续影像的判别，计算出使用者对手持摄影机1的动作，进而使显示器3上的光标产生相对位移。
续请参阅图3，其为本发明的光标定位方法流程图，步骤S1：首先以手持摄影机1拍摄现场场景的连续影像，该连续影像为使用者持用手持摄影机1所随机拍摄，不限定方向及目标，影像内容也无任何限制，例如位于现场的人物、桌椅、门窗、布幔、窗帘、墙角、壁画、盆景等等；步骤S2：接着，自第N影像中选取特征点，如自该连续影像的任一静态第一影像中选取一个或一个以上的特征点，该特征点可为单一像素或复数个相邻像素的组合，特征点选取于该影像中对比(contrast)或亮度(brightness)最强的一个或复数个区块，特征点选取完成后，即记录该特征点的图像及其在影像中的位置；步骤S3：然后，自第(N+1)影像中搜寻相同的特征点，例如在紧接在第一影像之后的第二影像中搜寻相同的特征点；步骤S4：是否有觅得相同特征点？当有至少一个相同特征点出现在第二影像中时，执行步骤S5：计算该特征点在第N及第(N+1)影像中的位置变化，例如计算该特征点在第一影像及第二影像中的位置变化，该特征点的位置变化代表手持摄影机1有所移动，因而造成特征点在影像中的移动；步骤S6：最后依据该位置变化而改变光标位置，例如依据该特征点的位置变化而改变显示器3画面中的光标位置，此光标位置改变包括方向及距离等两个基本因子。而在步骤S4中，当因使用者对手持摄影机1的动作过于剧烈或所选取的特征点并非定置物，而无法在第二影像中觅得相同的特征点时，执行步骤S7：N＝N+1，即放弃原在第一影像中所选取的特征点，而将该第二影像作为参考影像，在该第二影像中另行选取新特征点，并在第三影像中搜寻相同特征点，即重复步骤S2至S4，直至觅得相同特征点再执行步骤S5及S6。
图4所示为同一特征点在两影像中位置变化关系示意图，实线框为第一影像41，虚线框为第二影像42，A点为在第一影像41中所选取的特征点，A点在第一影像的直角坐标为(x1，y1)，因手持摄影机1的移动，使得A点在第二影像42中的坐标变为(x2，y2)，故A点的位移量为((x1-x2)，(y1-y2))，其中x轴分量为负值时，表示手持摄影机1向左方移动(如图4所示)，若x轴分量为正值时表示向右移动；y轴分量为正值时表示向上移动(如图4所示)，y轴分量为负值时表示向下移动，故在图4所示的状态，表示手持摄影机1向左上方移动。
在计算出手持摄影机1的移动量后，即可使显示器3画面中的光标产生对应的位移，如图5所示，假设光标31为原始位置，也即在图4中的第一影像41所在时点的位置，因在第二影像42中侦测出手持摄影机1向左上方移动((x1-x2)，(y1-y2))的距离，故光标即对应移动至32所示的位置，图中所示虽是以拍摄影像第一影像41、第二影像42与显示器3画面为1∶1的对应关系，但光标在显示器3画面中位移量仍可依实际需要而改用其它比例关系，即光标在显示器3画面中的位移量也可为(a(x1-x2)，a(y1-y2))，a即为比例数，可为大于零的任何数值，可视手持摄影机1与主要场景(背景)的距离，以及使用者个人的动作习惯而加以调整。
如前所述，本发明以自由摄影机拍摄定置物，以侦测使用者的手部运动，进而控制光标的位移，可完全避免公知加速度感应方式所产生定位不准的困扰，本发明以二维影像中特征点的移动作为光标在二维画面中的位移依据，使光标的定位更为精准。
以上所述仅为本发明的较佳实施例的具体说明，非用以局限本发明的专利范围，所有运用本发明技术思想的等效变换，均应属专利保护范围内。

Claims (5)

1、一种手持摄影机的光标定位方法，其特征在于，包括：
a、以手持摄影机拍摄连续影像；
b、自该连续影像中的第N影像中选取特征点；
c、自在该第N影像后的第(N+1)影像中搜寻相同的特征点；
d、当有觅得相同特征点时，计算该特征点在该第N影像及第(N+1)影像中的位置变化；
e、依据该特征点的位置变化量而改变光标的位置；
f、当未在该第(N+1)影像中觅得相同特征点时，即在该第(N+1)影像中重新选取特征点；
g、在步骤f之后，以N＝N+1重复步骤c～f。
2、如权利要求1所述的手持摄影机的光标定位方法，其特征在于，所述步骤b中所选取的该特征点为一个。
3、如权利要求1所述的光标定位方法，其特征在于，所述步骤b中所选取的该特征点为一个或一个以上。
4、如权利要求1所述的手持摄影机的光标定位方法，其特征在于，所述特征点选取影像中对比或亮度最强的区块。
5、如权利要求1所述的手持摄影机的光标定位方法，其特征在于，所述手持摄影机为设在长形壳体内的数字摄影机。
CNA2007101517994A 2007-09-29 2007-09-29 手持摄影机的光标定位方法 Pending CN101398711A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CNA2007101517994A CN101398711A (zh) 2007-09-29 2007-09-29 手持摄影机的光标定位方法
EP07023577A EP2042970A1 (en) 2007-09-29 2007-12-05 Cursor positioning method by a handheld camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNA2007101517994A CN101398711A (zh) 2007-09-29 2007-09-29 手持摄影机的光标定位方法

Publications (1)

Publication Number Publication Date
CN101398711A true CN101398711A (zh) 2009-04-01

Family

ID=39817055

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2007101517994A Pending CN101398711A (zh) 2007-09-29 2007-09-29 手持摄影机的光标定位方法

Country Status (2)

Country Link
EP (1) EP2042970A1 (zh)
CN (1) CN101398711A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103533242A (zh) * 2013-10-15 2014-01-22 中国科学院深圳先进技术研究院 在失焦视频中提取与跟踪光标点的方法及系统
CN103677314A (zh) * 2012-09-18 2014-03-26 原相科技股份有限公司 电子系统及其指向装置与追踪影像的方法
TWI461969B (zh) * 2012-09-04 2014-11-21 Pixart Imaging Inc 電子系統及其指向裝置與方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5786804A (en) * 1995-10-06 1998-07-28 Hewlett-Packard Company Method and system for tracking attitude
US6727885B1 (en) * 1999-09-07 2004-04-27 Nikon Corporation Graphical user interface and position or attitude detector
JP2004318823A (ja) * 2003-03-28 2004-11-11 Seiko Epson Corp 情報表示システム、情報処理装置、ポインティング装置および情報表示システムにおけるポインタマーク表示方法
CN100565438C (zh) * 2005-07-11 2009-12-02 皇家飞利浦电子股份有限公司 控制在命令区域上控制点位置的方法和系统

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI461969B (zh) * 2012-09-04 2014-11-21 Pixart Imaging Inc 電子系統及其指向裝置與方法
US9104249B2 (en) 2012-09-04 2015-08-11 Pixart Imaging Inc. Electronic system with pointing device and method thereof
CN103677314A (zh) * 2012-09-18 2014-03-26 原相科技股份有限公司 电子系统及其指向装置与追踪影像的方法
CN103677314B (zh) * 2012-09-18 2017-06-13 原相科技股份有限公司 电子系统及其指向装置与追踪影像的方法
CN103533242A (zh) * 2013-10-15 2014-01-22 中国科学院深圳先进技术研究院 在失焦视频中提取与跟踪光标点的方法及系统
CN103533242B (zh) * 2013-10-15 2016-08-10 中国科学院深圳先进技术研究院 在失焦视频中提取与跟踪光标点的方法及系统

Also Published As

Publication number Publication date
EP2042970A1 (en) 2009-04-01
EP2042970A8 (en) 2009-06-24

Similar Documents

Publication Publication Date Title
US7142191B2 (en) Image information displaying device
US8994644B2 (en) Viewing images with tilt control on a hand-held device
US20120139907A1 (en) 3 dimensional (3d) display system of responding to user motion and user interface for the 3d display system
KR100671585B1 (ko) 디스플레이 장치에서의 정보 브라우징 방법 및 장치
US9703446B2 (en) Zooming user interface frames embedded image frame sequence
TWI544447B (zh) 擴增實境的方法及系統
Baillot et al. Authoring of physical models using mobile computers
CN102566902A (zh) 使用对象的移动来选择项的装置和方法
RU2606214C2 (ru) Устройство управления, система формирования изображений, способ управления и носитель записи
CN103197833A (zh) 在图像显示设备中对应用布局进行缩放的装置和方法
CN105637559A (zh) 使用深度传感器的结构建模
KR20080104100A (ko) 카메라와 마크 출력에의한 포인팅 장치
KR20120082360A (ko) 전자 기기 및 기억 매체
US20170268871A1 (en) Three-dimensional measurement system and three-dimensional measurement method
CN104081307A (zh) 图像处理装置、图像处理方法和程序
EP3489627A1 (en) True to size 3d-model conglomeration
JP2009278456A (ja) 映像表示装置
KR20150019370A (ko) 휴대 장치에서 3차원 방식의 페이지 탐색 방법 및 이를 위한 휴대 장치
CN101398711A (zh) 手持摄影机的光标定位方法
JP2003131655A (ja) グラフ表示装置、およびプログラム
CN104994272A (zh) 一种移动终端及其实现图像扫描的方法
WO2006097722A2 (en) Interface control
US20090079691A1 (en) Cursor positioning method by a handheld camera
JPH07160412A (ja) 指示位置検出方法
JP2010185962A (ja) 情報表示装置及び情報表示方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: LIAN FA SCIENCE CO., LTD.

Free format text: FORMER OWNER: RONG SCIENCE + TECHNOLOGY CO., LTD.

Effective date: 20090508

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20090508

Address after: Taiwan, China

Applicant after: Lian hair Technology Co. Ltd.

Address before: TaiWan, China

Applicant before: Polytron Technologies Inc

Co-applicant before: Lian hair Technology Co. Ltd.

C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20090401