JP4730059B2 - ビデオストリームにおけるユーザー・アクションを検出するためのシステムおよびコンピュータ・プログラム - Google Patents
ビデオストリームにおけるユーザー・アクションを検出するためのシステムおよびコンピュータ・プログラム Download PDFInfo
- Publication number
- JP4730059B2 JP4730059B2 JP2005311795A JP2005311795A JP4730059B2 JP 4730059 B2 JP4730059 B2 JP 4730059B2 JP 2005311795 A JP2005311795 A JP 2005311795A JP 2005311795 A JP2005311795 A JP 2005311795A JP 4730059 B2 JP4730059 B2 JP 4730059B2
- Authority
- JP
- Japan
- Prior art keywords
- input signal
- video
- pointing indicator
- video input
- requested command
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000009471 action Effects 0.000 title claims description 31
- 238000004590 computer program Methods 0.000 title claims description 15
- 238000001514 detection method Methods 0.000 claims description 23
- 230000008859 change Effects 0.000 claims description 11
- 238000012545 processing Methods 0.000 claims description 6
- 238000005070 sampling Methods 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 2
- 230000001502 supplementing effect Effects 0.000 claims 2
- 238000000034 method Methods 0.000 description 22
- 230000008569 process Effects 0.000 description 19
- 230000006399 behavior Effects 0.000 description 13
- 230000003993 interaction Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012508 change request Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006266 hibernation Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6581—Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Digital Computer Display Output (AREA)
Description
115 プロキシ
120 ディスプレイ装置
202 プロセッサ
204 バス
206 メモリ
208 ストレージ装置
210 キーボード
212 グラフィクスアダプタ
214 ポインティングデバイス
215 スピーカ
216 ネットワークアダプタ
218 ディスプレイ
305 ビデオキャプチャモジュール
310 画像サンプリングモジュール
315 レコーディングモジュール
320 アクション検出モジュール
325 変更モジュール
330 プレゼンテーションストレージ
340 入力/出力モジュール
Claims (23)
- コンピュータシステムから、複数のフレームで構成され、連続するフレームの各々にポインティングインジケータを含むビデオ入力信号を受信するように構成されたビデオキャプチャモジュールと、
前記ビデオ入力信号から複数のフレームを抽出するように構成された画像サンプリングモジュールと、
前記複数のフレーム内におけるポインティングインジケータの位置の各々を判定するように構成された画像処理モジュールと、
前記ポインティングインジケータの位置の変化に基づいて、要求されたコマンドを判定するように構成されたアクション検出モジュールと、
前記要求されたコマンドに従って、前記ビデオ入力信号を変更して、該ビデオ入力信号に応じたビデオ出力を表示するためのビデオ出力装置へ出力するように構成された出力モジュールと、
を具備するビデオストリームにおけるユーザー・アクションを検出するシステム。 - 前記アクション検出モジュールは、要求されたコマンドを判定するときに、1つのフレームの特定の領域におけるポインティングインジケータの配置を検出する請求項1に記載のシステム。
- 前記アクション検出モジュールは、要求されたコマンドを判定するときに、ポインティングインジケータの振動運動を検出する請求項1に記載のシステム。
- 前記アクション検出モジュールは、前記要求されたコマンドを判定するときに、前記複数のフレームにおけるアイコン上でのポインティングインジケータの配置を検出する請求項1に記載のシステム。
- 前記アクション検出モジュールは、前記要求されたコマンドを判定するときに、ポインティングインジケータの挙動を検出する請求項1に記載のシステム。
- 前記アクション検出モジュールは、前記要求されたコマンドを判定するときに、アイコンのまわりでのポインティングインジケータの取り囲み運動を検出する請求項1に記載のシステム。
- 前記要求されたコマンドは、1つのフレームの一部分の拡大を含む請求項1〜請求項6のいずれか1項に記載のシステム。
- 前記要求されたコマンドは、単一のフレームが継続的に出力される一時停止操作を含む請求項1〜請求項6のいずれか1項に記載のシステム。
- 前記要求されたコマンドは、入力信号にオーバレイを補充することを含む請求項1〜請求項6のいずれか1項に記載のシステム。
- 前記要求されたコマンドに従って、受信されたビデオ入力信号または変更されたビデオ入力信号のレコーディングを開始するレコーディングモジュールを更に具備する請求項1〜請求項9のいずれか1項に記載のシステム。
- 前記レコーディングモジュールは、前記要求されたコマンドに従って、受信されたビデオ入力信号または変更されたビデオ入力信号のレコーディングを停止する請求項10に記載のシステム。
- 前記ポインティングインジケータは、マウス矢印を含む請求項1〜請求項11のいずれか1項に記載のシステム。
- コンピュータを、
コンピュータシステムから、複数のフレームで構成され、連続するフレームの各々にポインティングインジケータを含むビデオ入力信号を受信する手段、
前記ビデオ入力信号から複数のフレームを抽出する手段、
前記複数のフレーム内におけるポインティングインジケータの位置の各々を判定する手段、
前記ポインティングインジケータの位置の変化に基づいて、要求されたコマンドを判定する手段、及び
前記要求されたコマンドに従って、前記ビデオ入力信号を変更して、該ビデオ入力信号に応じたビデオ出力を表示するためのビデオ出力装置へ出力する手段
として機能させるためのビデオストリームにおけるユーザー・アクションを検出するためのコンピュータ・プログラム。 - 前記要求されたコマンドを判定する手段は、前記複数のフレームにおけるアイコン上のポインティングインジケータの配置を検出する請求項13に記載のコンピュータ・プログラム。
- 前記ポインティングインジケータの位置の変化は、1つのフレームの特定の領域におけるポインティングインジケータの配置を含む請求項13に記載のコンピュータ・プログラム。
- 前記ポインティングインジケータの位置の変化は、ポインティングインジケータの振動運動を含む請求項13に記載のコンピュータ・プログラム。
- 前記要求されたコマンドを判定する手段は、ポインティングインジケータの挙動を検出する請求項13に記載のコンピュータ・プログラム。
- 前記要求されたコマンドを判定する手段は、アイコンのまわりでのポインティングインジケータの取り囲み運動を検出する請求項13に記載のコンピュータ・プログラム。
- 前記要求されたコマンドは、1つのフレームの一部分の拡大を含む請求項13〜請求項18のいずれか1項に記載のコンピュータ・プログラム。
- 前記要求されたコマンドは、単一のフレームが継続的に出力される一時停止操作を含む請求項13〜請求項18のいずれか1項に記載のコンピュータ・プログラム。
- 前記要求されたコマンドは、入力信号にオーバレイを補充することを含む請求項13〜請求項18のいずれか1項に記載のコンピュータ・プログラム。
- 前記コンピュータを、さらに、前記要求されたコマンドに従って、受信されたビデオ入力信号または変更されたビデオ入力信号のレコーディングを開始するレコーディング手段として機能させるための請求項13〜請求項18のいずれか1項に記載のコンピュータ・プログラム。
- 前記レコーディング手段は、前記要求されたコマンドに従って、受信されたビデオ入力信号または変更されたビデオ入力信号のレコーディングを停止する請求項22に記載のコンピュータ・プログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US10/973,198 US8117544B2 (en) | 2004-10-26 | 2004-10-26 | System and method for detecting user actions in a video stream |
US10/973,198 | 2004-10-26 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006127519A JP2006127519A (ja) | 2006-05-18 |
JP4730059B2 true JP4730059B2 (ja) | 2011-07-20 |
Family
ID=36207392
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005311795A Expired - Fee Related JP4730059B2 (ja) | 2004-10-26 | 2005-10-26 | ビデオストリームにおけるユーザー・アクションを検出するためのシステムおよびコンピュータ・プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US8117544B2 (ja) |
JP (1) | JP4730059B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010061433A (ja) * | 2008-09-04 | 2010-03-18 | Casio Comput Co Ltd | 投影装置、投影方法及びプログラム |
US9179096B2 (en) | 2013-10-11 | 2015-11-03 | Fuji Xerox Co., Ltd. | Systems and methods for real-time efficient navigation of video streams |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05224863A (ja) * | 1992-02-10 | 1993-09-03 | Hitachi Ltd | マルチウインドウ動画表示装置 |
JP2000222130A (ja) * | 1999-02-02 | 2000-08-11 | Toshiba Corp | 入力装置および方法および記憶媒体 |
JP2001125738A (ja) * | 1999-09-21 | 2001-05-11 | Seiko Epson Corp | プレゼンテーション制御システム及びその制御方法 |
JP2002132438A (ja) * | 2000-10-27 | 2002-05-10 | Sharp Corp | 手書入力装置および方法、ならびに手書入力プログラムが記録されたコンピュータで読取可能な記録媒体 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5594469A (en) * | 1995-02-21 | 1997-01-14 | Mitsubishi Electric Information Technology Center America Inc. | Hand gesture machine control system |
US5900872A (en) * | 1995-05-05 | 1999-05-04 | Apple Computer, Inc. | Method and apparatus for controlling the tracking of movable control elements in a graphical user interface |
US5708845A (en) * | 1995-09-29 | 1998-01-13 | Wistendahl; Douglass A. | System for mapping hot spots in media content for interactive digital media program |
US20010012025A1 (en) * | 1998-03-20 | 2001-08-09 | Toshiba America Information Systems, Inc. | Display scrolling system using pointing device |
JP3804302B2 (ja) * | 1998-11-11 | 2006-08-02 | セイコーエプソン株式会社 | 表示装置及び情報記録媒体 |
CN100505076C (zh) * | 1999-03-30 | 2009-06-24 | 提维股份有限公司 | 多媒体可视的播放进度指示系统 |
KR20030017997A (ko) * | 2001-04-17 | 2003-03-04 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 이미지 시퀀스 내의 위치를 선택하기 위한 방법 및 시스템 |
JP4667639B2 (ja) * | 2001-05-10 | 2011-04-13 | パナソニック株式会社 | 映像プロクシサーバ |
JP3738843B2 (ja) * | 2002-06-11 | 2006-01-25 | ソニー株式会社 | 画像検出装置、画像検出方法および画像検出プログラム |
US20040021684A1 (en) * | 2002-07-23 | 2004-02-05 | Dominick B. Millner | Method and system for an interactive video system |
US20040233233A1 (en) * | 2003-05-21 | 2004-11-25 | Salkind Carole T. | System and method for embedding interactive items in video and playing same in an interactive environment |
US7623722B2 (en) * | 2003-10-24 | 2009-11-24 | Eastman Kodak Company | Animated display for image manipulation and correction of digital image |
US7954129B2 (en) * | 2004-09-24 | 2011-05-31 | Smartvue Corporation | Wireless video surveillance system and method with remote viewing |
US20060095867A1 (en) * | 2004-11-04 | 2006-05-04 | International Business Machines Corporation | Cursor locator on a display device |
-
2004
- 2004-10-26 US US10/973,198 patent/US8117544B2/en not_active Expired - Fee Related
-
2005
- 2005-10-26 JP JP2005311795A patent/JP4730059B2/ja not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05224863A (ja) * | 1992-02-10 | 1993-09-03 | Hitachi Ltd | マルチウインドウ動画表示装置 |
JP2000222130A (ja) * | 1999-02-02 | 2000-08-11 | Toshiba Corp | 入力装置および方法および記憶媒体 |
JP2001125738A (ja) * | 1999-09-21 | 2001-05-11 | Seiko Epson Corp | プレゼンテーション制御システム及びその制御方法 |
JP2002132438A (ja) * | 2000-10-27 | 2002-05-10 | Sharp Corp | 手書入力装置および方法、ならびに手書入力プログラムが記録されたコンピュータで読取可能な記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
US8117544B2 (en) | 2012-02-14 |
JP2006127519A (ja) | 2006-05-18 |
US20060090134A1 (en) | 2006-04-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6774886B2 (en) | Display system, cursor position indication method, and recording medium | |
JP2005509973A (ja) | ジェスチャに基づくユーザインタフェース用の方法及び装置 | |
JP2013529802A (ja) | コンテンツジェスチャー | |
US9544556B2 (en) | Projection control apparatus and projection control method | |
JP2009098774A (ja) | 人物追跡システム及び人物追跡方法及び人物追跡プログラム | |
US20030052859A1 (en) | Laser and digital camera computer pointer device system | |
US20090066664A1 (en) | Touch screen and display method thereof | |
WO2019104476A1 (zh) | 一种监护仪及其显示屏幕切换方法 | |
US20130342448A1 (en) | Information processing apparatus, information processing method, and program product | |
US20090219290A1 (en) | Image display processing appartus, image display processing method, and recording medium | |
JP4730059B2 (ja) | ビデオストリームにおけるユーザー・アクションを検出するためのシステムおよびコンピュータ・プログラム | |
JP2006004093A (ja) | 切替装置 | |
US20170038947A1 (en) | Zooming and panning within a user interface | |
US20090235169A1 (en) | Digital video record device with touch-panel human machine interface | |
JP3804302B2 (ja) | 表示装置及び情報記録媒体 | |
US11009991B2 (en) | Display control apparatus and control method for the display control apparatus | |
JP7106346B2 (ja) | 情報処理装置及び情報処理プログラム | |
US9483125B2 (en) | Position information obtaining device and method, and image display system | |
US10455145B2 (en) | Control apparatus and control method | |
JPH0643851A (ja) | 画像表示装置 | |
JPH11212724A (ja) | 画像投影方法ならびにシステム及び同方法がプログラムされ記録される記録媒体 | |
US20150253948A1 (en) | Non-transitory computer readable medium storing an application program | |
US20190121534A1 (en) | Non-transitory computer-readable recording medium, information control method, and terminal device | |
JP2009163500A (ja) | タッチパネルシステム | |
JP2015527659A (ja) | プレゼンテーションを強化するための方法、サーバ、およびポインティング・デバイス |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080924 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100909 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100921 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101116 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110322 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110404 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140428 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4730059 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |