JP5055156B2 - 制御装置および方法 - Google Patents
制御装置および方法 Download PDFInfo
- Publication number
- JP5055156B2 JP5055156B2 JP2008027415A JP2008027415A JP5055156B2 JP 5055156 B2 JP5055156 B2 JP 5055156B2 JP 2008027415 A JP2008027415 A JP 2008027415A JP 2008027415 A JP2008027415 A JP 2008027415A JP 5055156 B2 JP5055156 B2 JP 5055156B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- specific point
- control
- image
- pointing device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
Description
(a)動画像を記録するとともに、正の整数であるN個の画像フレームを生成するステップと、
(b)前記ポインティングデバイスの特徴に基づいて、前記ポインティングデバイスが対応するポインティングデバイス画像を、各々の画像フレームからそれぞれ抽出するステップと、
(c)各々の画像フレームにおける前記ポインティングデバイス画像の特定点をそれぞれ計算して、第1の特定点情報組を生成するステップと、
(d)所定条件および前記第1の特定点情報組に基づいて、移動軌跡を生成するステップと、
(e)前記移動軌跡を分析するとともに、制御信号を生成するステップと、
(f)前記制御信号に基づいて前記物体を制御するステップと、を含んでいる。
さらに、ステップ(e)が、前記移動軌跡を分析して、方向情報、強さ情報および回転角度情報を生成するとともに、前記方向情報、前記強さ情報、前記回転角度情報および分類器に基づいて、前記制御信号を生成する、制御方法であってもよい。前記第1の特定点情報組は、隣接する第2の特定点と、第3の特定点とを含み、前記所定条件とは、前記第2の特定点と前記第3の特定点との差が所定値を超えないとき、前記移動軌跡は前記第3の特定点を含んでいる。
本発明の長所および技術的思想は、以下の発明の詳細な説明および図面により、より一層の理解が得られる。
11:画像取得モジュール
13:分離モジュール
15:測位モジュール
17:構築モジュール
19:処理モジュール
112:振動吸収モジュール
3:携帯電話機
31:撮像モジュール
33:画面
35:レーシングカーのグラフィック
37:ポインティングデバイス
L1:第1の位置
L2:第2の位置
L3:第3の位置
L4:第4の位置
L5:第5の位置
L6:第6の位置
S71〜S99:ステップ
Claims (19)
- 表示装置が表示する物体を、使用者がポインティングデバイス(pointing device)で制御するための制御装置(control apparatus)であって、
動画像(video sequence)を記録するとともに、正の整数であるN個の画像フレーム(image frame)を生成する画像取得モジュールと、
前記ポインティングデバイスの特徴に基づいて、前記ポインティングデバイスが対応するポインティングデバイス画像を、各々の画像フレームからそれぞれ抽出する分離モジュールと、
各々の画像フレームにおける前記ポインティングデバイス画像の特定点をそれぞれ計算して、第1の特定点情報組を生成する測位モジュールと、
所定条件および前記第1の特定点情報組に基づいて、移動軌跡を生成する構築モジュールと、
前記移動軌跡を分析するとともに、制御信号を生成して、前記制御信号に基づいて前記物体を制御する処理モジュールと、を備えた制御装置において、
前記処理モジュールが、前記移動軌跡を分析して、方向情報、強さ情報および回転角度情報を生成するとともに、前記方向情報、前記強さ情報、前記回転角度情報および分類器(classifier)に基づいて、前記制御信号を生成し、
前記第1の特定点情報組は、隣接する第2の特定点と、第3の特定点とを含み、前記所定条件とは、前記第2の特定点と前記第3の特定点との差が所定値を超えないとき、前記移動軌跡は前記第3の特定点を含む、ことを特徴とする制御装置。 - 前記ポインティングデバイス画像の前記特定点が、前記ポインティングデバイス画像の中心点である、ことを特徴とする請求項1に記載の制御装置。
- 前記処理モジュールが、前記制御信号に基づいて、前記物体への三次元空間の制御を行う、ことを特徴とする請求項1に記載の制御装置。
- 前記画像取得モジュールが、更に、
前記動画像の所定の干渉要素を除去し、前記N個の画像フレームを生成する振動吸収モジュールを備えた、ことを特徴とする請求項1に記載の制御装置。 - 前記振動吸収モジュールが、ファジー/スムージングの画像処理演算法を用いて前記動画像を処理し、前記所定の干渉要素を除去する、ことを特徴とする請求項4に記載の制御装置。
- 前記画像取得モジュールが、動画撮影機またはカメラを更に備えた、ことを特徴とする請求項1に記載の制御装置。
- 前記特徴が、前記ポインティングデバイスの色である、ことを特徴とする請求項1に記載の制御装置。
- 前記構築モジュールが、前記第1の特定点情報組に基づいて、前記移動軌跡がすでに終了しているか否かを判断し、もし終了していると判断した場合には、前記移動軌跡を前記処理モジュールに送信する、ことを特徴とする請求項1に記載の制御装置。
- 前記方向情報が、上向き情報、下向き情報、左向き情報および右向き情報である、ことを特徴とする請求項1に記載の制御装置。
- 前記回転角度情報が、時計回り回転角度情報および逆時計回り回転角度情報である、ことを特徴とする請求項1に記載の制御装置。
- 表示装置が表示する物体を、使用者がポインティングデバイス(pointing device)で制御するための制御方法であって、
(a)動画像(video sequence)を記録するとともに、正の整数であるN個の画像フレーム(image frame)を生成するステップと、
(b)前記ポインティングデバイスの特徴に基づいて、前記ポインティングデバイスが対応するポインティングデバイス画像を、各々の画像フレームからそれぞれ抽出するステップと、
(c)各々の画像フレームにおける前記ポインティングデバイス画像の特定点をそれぞれ計算して、第1の特定点情報組を生成するステップと、
(d)所定条件および前記第1の特定点情報組に基づいて、移動軌跡を生成するステップと、
(e)前記移動軌跡を分析するとともに、制御信号を生成するステップと、
(f)前記制御信号に基づいて前記物体を制御するステップと、を含み、
ステップ(e)が、前記移動軌跡を分析して、方向情報、強さ情報および回転角度情報を生成するとともに、前記方向情報、前記強さ情報、前記回転角度情報および分類器(classifier)に基づいて、前記制御信号を生成し、
前記第1の特定点情報組は、隣接する第2の特定点と、第3の特定点とを含み、前記所定条件とは、前記第2の特定点と前記第3の特定点との差が所定値を超えないとき、前記移動軌跡は前記第3の特定点を含む、ことを特徴とする制御方法。 - 前記ポインティングデバイス画像の前記特定点が、前記ポインティングデバイス画像の中心点である、ことを特徴とする請求項11に記載の制御方法。
- 前記ステップ(f)が、前記制御信号に基づいて、前記物体への三次元空間の制御を行う、ことを特徴とする請求項11に記載の制御方法。
- ステップ(a)が更に、
(a1) 前記動画像の所定の干渉要素を除去し、前記N個の画像フレームを生成するステップ、を含む、ことを特徴とする請求項11に記載の制御方法。 - ステップ(a1)が、ファジー/スムージングの画像処理演算法を用いて前記動画像を処理し、前記所定の干渉要素を除去する、ことを特徴とする請求項14に記載の制御方法。
- 前記特徴が、前記ポインティングデバイスの色である、ことを特徴とする請求項11に記載の制御方法。
- ステップ(d)が更に、
(d1) 前記第1の特定点情報組に基づいて、前記移動軌跡がすでに終了しているか否かを判断し、もし終了していると判断した場合には、ステップ(e)を実行するステップ、を含む、ことを特徴とする請求項11に記載の制御方法。 - 前記方向情報が、上向き情報、下向き情報、左向き情報および右向き情報である、ことを特徴とする請求項11に記載の制御方法。
- 前記回転角度情報が、時計回り回転角度情報および逆時計回り回転角度情報である、ことを特徴とする請求項11に記載の制御方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW096131340 | 2007-08-24 | ||
TW096131340A TW200910147A (en) | 2007-08-24 | 2007-08-24 | Control apparatus and method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009054131A JP2009054131A (ja) | 2009-03-12 |
JP5055156B2 true JP5055156B2 (ja) | 2012-10-24 |
Family
ID=40381694
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008027415A Expired - Fee Related JP5055156B2 (ja) | 2007-08-24 | 2008-02-07 | 制御装置および方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US8363011B2 (ja) |
JP (1) | JP5055156B2 (ja) |
TW (1) | TW200910147A (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8165423B2 (en) * | 2009-12-30 | 2012-04-24 | Hon Hai Precision Industry Co., Ltd. | Portable device having vibration reduction function and vibration reduction methode thereof |
TWI476640B (zh) | 2012-09-28 | 2015-03-11 | Ind Tech Res Inst | 時間資料序列的平滑化方法與裝置 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0769185B2 (ja) * | 1990-09-13 | 1995-07-26 | 山武ハネウエル株式会社 | データスムージング方法及び装置 |
US6757557B1 (en) * | 1992-08-14 | 2004-06-29 | British Telecommunications | Position location system |
US6501515B1 (en) * | 1998-10-13 | 2002-12-31 | Sony Corporation | Remote control system |
US6587574B1 (en) * | 1999-01-28 | 2003-07-01 | Koninklijke Philips Electronics N.V. | System and method for representing trajectories of moving objects for content-based indexing and retrieval of visual animated data |
US6844871B1 (en) * | 1999-11-05 | 2005-01-18 | Microsoft Corporation | Method and apparatus for computer input using six degrees of freedom |
US6847354B2 (en) * | 2000-03-23 | 2005-01-25 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Three dimensional interactive display |
KR100415266B1 (ko) * | 2000-05-11 | 2004-01-16 | 가부시끼가이샤 도시바 | 물체영역정보 기술방법과 물체영역정보 생성장치 및 기록매체 |
US6943774B2 (en) * | 2001-04-02 | 2005-09-13 | Matsushita Electric Industrial Co., Ltd. | Portable communication terminal, information display device, control input device and control input method |
US20030109322A1 (en) * | 2001-06-11 | 2003-06-12 | Funk Conley Jack | Interactive method and apparatus for tracking and analyzing a golf swing in a limited space with swing position recognition and reinforcement |
JP2003228458A (ja) * | 2002-02-05 | 2003-08-15 | Takenaka Komuten Co Ltd | 指示動作認識装置及び方法 |
JP2004062565A (ja) * | 2002-07-30 | 2004-02-26 | Canon Inc | 画像処理装置及び方法並びにプログラム記憶媒体 |
KR100575906B1 (ko) * | 2002-10-25 | 2006-05-02 | 미츠비시 후소 트럭 앤드 버스 코포레이션 | 핸드 패턴 스위치 장치 |
US7400344B2 (en) * | 2002-12-19 | 2008-07-15 | Hitachi Kokusai Electric Inc. | Object tracking method and object tracking apparatus |
JP2004258837A (ja) * | 2003-02-25 | 2004-09-16 | Nippon Hoso Kyokai <Nhk> | カーソル操作装置、その方法およびそのプログラム |
IL161002A0 (en) * | 2004-03-22 | 2004-08-31 | Itay Katz | Virtual video keyboard system |
JP4563723B2 (ja) * | 2004-05-10 | 2010-10-13 | 株式会社竹中工務店 | 指示動作認識装置及び指示動作認識プログラム |
US7379047B2 (en) * | 2004-06-30 | 2008-05-27 | Microsoft Corporation | Using a physical object to control an attribute of an interactive display application |
US7366540B2 (en) * | 2004-08-23 | 2008-04-29 | Siemens Communications, Inc. | Hand-held communication device as pointing device |
JP2007042020A (ja) * | 2005-08-05 | 2007-02-15 | Nec Corp | 携帯端末及びプログラム |
-
2007
- 2007-08-24 TW TW096131340A patent/TW200910147A/zh unknown
-
2008
- 2008-02-07 JP JP2008027415A patent/JP5055156B2/ja not_active Expired - Fee Related
- 2008-07-11 US US12/171,599 patent/US8363011B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20090051652A1 (en) | 2009-02-26 |
TW200910147A (en) | 2009-03-01 |
US8363011B2 (en) | 2013-01-29 |
JP2009054131A (ja) | 2009-03-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101198925B (zh) | 用于触敏输入设备的手势 | |
US8749497B2 (en) | Multi-touch shape drawing | |
KR102342267B1 (ko) | 휴대 장치 및 휴대 장치의 화면 변경방법 | |
JP6046729B2 (ja) | 全方向ジェスチャー入力 | |
CN108885521B (zh) | 跨环境共享 | |
TWI428798B (zh) | Information processing devices, information processing methods and program products | |
US9791918B2 (en) | Breath-sensitive digital interface | |
EP2717120B1 (en) | Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications | |
CN102214040B (zh) | 用于多状态触摸屏设备的多模式触摸屏用户界面 | |
Harrison et al. | Using shear as a supplemental two-dimensional input channel for rich touchscreen interaction | |
US20070061126A1 (en) | System for and method of emulating electronic input devices | |
KR101247991B1 (ko) | 사용자 인터페이스 제어를 위한 카메라 제스처들 | |
US20070222746A1 (en) | Gestural input for navigation and manipulation in virtual space | |
CN103365595A (zh) | 用于触敏输入设备的手势 | |
US20140055386A1 (en) | Touch and non touch based interaction of a user with a device | |
JP2010176332A (ja) | 情報処理装置、情報処理方法およびプログラム | |
CN107003804B (zh) | 为提供原型设计工具的方法、系统及可进行非暂时性的计算机解读的记录媒介 | |
CN107577415A (zh) | 触摸操作响应方法及装置 | |
TW201430623A (zh) | 電子裝置及人機交互方法 | |
CN107608550A (zh) | 触摸操作响应方法及装置 | |
US20090283341A1 (en) | Input device and control method thereof | |
CN107608551A (zh) | 触摸操作响应方法及装置 | |
JP5055156B2 (ja) | 制御装置および方法 | |
KR101436588B1 (ko) | 멀티 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치 | |
Tsuchida et al. | TetraForce: a magnetic-based interface enabling pressure force and shear force input applied to front and back of a smartphone |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100830 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100907 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101207 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20110920 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120104 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20120425 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120703 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120730 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5055156 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150803 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |