JP5928757B2 - 情報処理装置 - Google Patents
情報処理装置 Download PDFInfo
- Publication number
- JP5928757B2 JP5928757B2 JP2014545643A JP2014545643A JP5928757B2 JP 5928757 B2 JP5928757 B2 JP 5928757B2 JP 2014545643 A JP2014545643 A JP 2014545643A JP 2014545643 A JP2014545643 A JP 2014545643A JP 5928757 B2 JP5928757 B2 JP 5928757B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- area
- face
- operation area
- detection object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
- G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/107—Static hand or arm
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
Description
PPx=(DPx/OAw)・PAw
PPy=(DPy/OAh)・PAh
操作受付部54は、このX座標PPx及びY座標PPyを、指定位置PPの情報として表示画像生成部56に対して出力する。なお、基準画像Ic1がステレオカメラ16からユーザを見る方向で撮像された画像であるのに対して、表示画像はその逆向きにユーザによって観覧される。そのため、指定可能領域PA内の位置座標と操作領域OAの位置座標との対応関係は左右反転させる必要がある。具体的に、操作領域OAのX座標DPxが操作領域OAの左上隅を原点、向かって右方向を正方向として表される場合、指定位置PPのX座標PPxは、指定可能領域PAの右上隅を原点、向かって左方向を正方向として表される。
Claims (9)
- 第1ユーザ及び第2ユーザの顔を含む撮像画像を取得する撮像画像取得部と、
前記撮像画像に含まれる前記第1ユーザ及び第2ユーザそれぞれの顔の位置を特定する顔位置特定部と、
表示装置の画面に設定される指定可能領域に対応付けられる、前記第1ユーザの顔の位置に応じて決まる第1操作領域、及び、前記指定可能領域に対応付けられる、前記第2ユーザの顔の位置に応じて決まる第2操作領域を、それぞれ前記撮像画像内に設定する操作領域設定部と、
前記第1操作領域から第1検出対象物を検出し、当該検出した第1検出対象物の前記第1操作領域内における相対位置に対応する前記指定可能領域内の位置を、前記第1ユーザが指定する位置として受け付け、前記第2操作領域から第2検出対象物を検出し、当該検出した第2検出対象物の前記第2操作領域内における相対位置に対応する前記指定可能領域内の位置を、前記第2ユーザが指定する位置として受け付ける操作受付部と、を含み、
前記第1検出対象物の前記第1操作領域内における相対位置と前記第2検出対象物の前記第2操作領域内における相対位置とが同じである場合は、前記第1ユーザが指定する位置として前記操作受付部が受け付ける画面内の位置と前記第2ユーザが指定する位置として前記操作受付部が受け付ける画面内の位置とは同じとなる、
ことを特徴とする情報処理装置。 - 請求項1に記載の情報処理装置において、
前記撮像画像内にオブジェクトを配置して表示画像を生成し、表示装置の画面に表示させる表示画像生成部をさらに含み、
前記表示画像生成部は、前記オブジェクトの配置位置を、前記撮像画像に含まれる検出対象物の位置に基づいて特定される、当該撮像画像に含まれる当該検出対象物を動かしているユーザの顔の位置に応じて決定する
ことを特徴とする情報処理装置。 - 請求項2に記載の情報処理装置において、
前記操作受付部は、前記検出対象物として発光部を備えたコントローラを検出し、
前記表示画像生成部は、前記オブジェクトの配置位置を、前記撮像画像に含まれる、特定の色で発光している前記発光部の位置に基づいて特定される、当該撮像画像に含まれる、当該発光部を備える前記コントローラを操作するユーザの顔の位置に応じて決定する
ことを特徴とする情報処理装置。 - 請求項1に記載の情報処理装置において、
前記操作受付部は、前記第1操作領域内から、前記第1ユーザの手を前記第1検出対象物として検出し、前記第2操作領域内から、前記第2ユーザの手を前記第2検出対象物として検出する
ことを特徴とする情報処理装置。 - 請求項4に記載の情報処理装置において、
前記撮像画像取得部は、ステレオカメラによって撮像された二つの撮像画像を取得し、当該二つの撮像画像に基づいて前記ステレオカメラから被写体までの距離分布を示す距離分布データを生成し、
前記操作受付部は、前記第1操作領域内において最も前記ステレオカメラの近くにある被写体の位置を、前記第1ユーザの手の位置として検出し、前記第2操作領域内において最も前記ステレオカメラの近くにある被写体の位置を、前記第2ユーザの手の位置として検出する
ことを特徴とする情報処理装置。 - 請求項1に記載の情報処理装置において、
前記操作受付部は、前記第1操作領域内から、前記第1ユーザが手で把持しているコントローラを前記第1検出対象物として検出し、前記第2操作領域内から、前記第2ユーザが手で把持しているコントローラを前記第2検出対象物として検出する
ことを特徴とする情報処理装置。 - ユーザからの操作入力に応じた処理を実行する情報処理装置の制御方法であって、
第1ユーザ及び第2ユーザの顔を含む撮像画像を取得するステップと、
前記撮像画像に含まれる前記第1ユーザ及び第2ユーザそれぞれの顔の位置を特定するステップと、
表示装置の画面に設定される指定可能領域に対応付けられる、前記第1ユーザの顔の位置に応じて決まる第1操作領域、及び、前記指定可能領域に対応付けられる、前記第2ユーザの顔の位置に応じて決まる第2操作領域を、それぞれ前記撮像画像内に設定するステップと、
前記第1操作領域から第1検出対象物を検出し、当該検出した第1検出対象物の前記第1操作領域内における相対位置に対応する前記指定可能領域内の位置を、前記第1ユーザが指定する位置として受け付け、前記第2操作領域から第2検出対象物を検出し、当該検出した第2検出対象物の前記第2操作領域内における相対位置に対応する前記指定可能領域内の位置を、前記第2ユーザが指定する位置として受け付けるステップと、を含み、
前記第1検出対象物の前記第1操作領域内における相対位置と前記第2検出対象物の前記第2操作領域内における相対位置とが同じである場合は、前記第1ユーザが指定する位置として受け付ける画面内の位置と前記第2ユーザが指定する位置として受け付ける画面内の位置とは同じとなる、
ことを特徴とする情報処理装置の制御方法。 - 第1ユーザ及び第2ユーザの顔を含む撮像画像を取得する撮像画像取得部、
前記撮像画像に含まれる前記第1ユーザ及び第2ユーザそれぞれの顔の位置を特定する顔位置特定部、
表示装置の画面に設定される指定可能領域に対応付けられる、前記第1ユーザの顔の位置に応じて決まる第1操作領域、及び、前記指定可能領域に対応付けられる、前記第2ユーザの顔の位置に応じて決まる第2操作領域を、それぞれ前記撮像画像内に設定する操作領域設定部、及び、
前記第1操作領域から第1検出対象物を検出し、当該検出した第1検出対象物の前記第1操作領域内における相対位置に対応する前記指定可能領域内の位置を、前記第1ユーザが指定する位置として受け付け、前記第2操作領域から第2検出対象物を検出し、当該検出した第2検出対象物の前記第2操作領域内における相対位置に対応する前記指定可能領域内の位置を、前記第2ユーザが指定する位置として受け付ける操作受付部、としてコンピュータを機能させ、
前記第1検出対象物の前記第1操作領域内における相対位置と前記第2検出対象物の前記第2操作領域内における相対位置とが同じである場合は、前記第1ユーザが指定する位置として前記操作受付部が受け付ける画面内の位置と前記第2ユーザが指定する位置として前記操作受付部が受け付ける画面内の位置とは同じとなる、
ことを特徴とするプログラム。 - 請求項8に記載のプログラムを格納した、コンピュータ読み取り可能な情報記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012244920 | 2012-11-06 | ||
JP2012244920 | 2012-11-06 | ||
PCT/JP2013/078791 WO2014073384A1 (ja) | 2012-11-06 | 2013-10-24 | 情報処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP5928757B2 true JP5928757B2 (ja) | 2016-06-01 |
JPWO2014073384A1 JPWO2014073384A1 (ja) | 2016-09-08 |
Family
ID=50684495
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014545643A Active JP5928757B2 (ja) | 2012-11-06 | 2013-10-24 | 情報処理装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9672413B2 (ja) |
EP (1) | EP2919099B1 (ja) |
JP (1) | JP5928757B2 (ja) |
CN (1) | CN104781762A (ja) |
WO (1) | WO2014073384A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103489107B (zh) * | 2013-08-16 | 2015-11-25 | 北京京东尚科信息技术有限公司 | 一种制作虚拟试衣模特图像的方法和装置 |
US10489949B2 (en) * | 2015-01-06 | 2019-11-26 | Sony Corporation | Effect generation device and effect generation method |
CN205375273U (zh) * | 2015-11-24 | 2016-07-06 | 深圳市爱坤电子科技有限公司 | 基于无线2.4g可拆装游戏手柄的平板电脑 |
US10902243B2 (en) * | 2016-10-25 | 2021-01-26 | Deep North, Inc. | Vision based target tracking that distinguishes facial feature targets |
KR20200066962A (ko) * | 2018-12-03 | 2020-06-11 | 삼성전자주식회사 | 사용자의 움직임에 기반하여 콘텐트를 제공하기 위한 전자 장치 및 방법 |
CN110008802B (zh) * | 2018-12-04 | 2023-08-29 | 创新先进技术有限公司 | 从多个脸部中选择目标脸部及脸部识别比对方法、装置 |
CN113486715A (zh) * | 2021-06-04 | 2021-10-08 | 广州图匠数据科技有限公司 | 图像翻拍识别方法、智能终端以及计算机存储介质 |
WO2024072310A1 (en) * | 2022-09-30 | 2024-04-04 | Flatfrog Laboratories Ab | An interaction system |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005216061A (ja) * | 2004-01-30 | 2005-08-11 | Sony Computer Entertainment Inc | 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス |
WO2007013652A1 (ja) * | 2005-07-29 | 2007-02-01 | Pioneer Corporation | 画像表示制御装置、画像表示装置、遠隔操作器、画像表示システム |
JP2010531520A (ja) * | 2007-08-16 | 2010-09-24 | 株式会社ソニー・コンピュータエンタテインメント | 傾斜角情報と結合したビデオ入力を用いたオブジェクト検出 |
JP2011054118A (ja) * | 2009-09-04 | 2011-03-17 | Sony Corp | 表示制御装置、表示制御方法及び表示制御プログラム |
JP2011081453A (ja) * | 2009-10-02 | 2011-04-21 | Toshiba Corp | 映像再生装置及び映像再生方法 |
JP2011175617A (ja) * | 2010-01-29 | 2011-09-08 | Shimane Prefecture | 画像認識装置および操作判定方法並びにプログラム |
JP2011243031A (ja) * | 2010-05-19 | 2011-12-01 | Canon Inc | ジェスチャ認識装置及びジェスチャ認識方法 |
WO2012014590A1 (ja) * | 2010-07-28 | 2012-02-02 | パイオニア株式会社 | 映像処理装置及び方法 |
WO2012039140A1 (ja) * | 2010-09-22 | 2012-03-29 | 島根県 | 操作入力装置および方法ならびにプログラム |
JP2013250882A (ja) * | 2012-06-01 | 2013-12-12 | Sharp Corp | 注目位置検出装置、注目位置検出方法、及び注目位置検出プログラム |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5829390B2 (ja) * | 2010-09-07 | 2015-12-09 | ソニー株式会社 | 情報処理装置、および情報処理方法 |
JP5598232B2 (ja) * | 2010-10-04 | 2014-10-01 | ソニー株式会社 | 情報処理装置、情報処理システムおよび情報処理方法 |
-
2013
- 2013-10-24 WO PCT/JP2013/078791 patent/WO2014073384A1/ja active Application Filing
- 2013-10-24 US US14/438,405 patent/US9672413B2/en active Active
- 2013-10-24 CN CN201380057981.7A patent/CN104781762A/zh active Pending
- 2013-10-24 EP EP13852882.3A patent/EP2919099B1/en active Active
- 2013-10-24 JP JP2014545643A patent/JP5928757B2/ja active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005216061A (ja) * | 2004-01-30 | 2005-08-11 | Sony Computer Entertainment Inc | 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス |
WO2007013652A1 (ja) * | 2005-07-29 | 2007-02-01 | Pioneer Corporation | 画像表示制御装置、画像表示装置、遠隔操作器、画像表示システム |
JP2010531520A (ja) * | 2007-08-16 | 2010-09-24 | 株式会社ソニー・コンピュータエンタテインメント | 傾斜角情報と結合したビデオ入力を用いたオブジェクト検出 |
JP2011054118A (ja) * | 2009-09-04 | 2011-03-17 | Sony Corp | 表示制御装置、表示制御方法及び表示制御プログラム |
JP2011081453A (ja) * | 2009-10-02 | 2011-04-21 | Toshiba Corp | 映像再生装置及び映像再生方法 |
JP2011175617A (ja) * | 2010-01-29 | 2011-09-08 | Shimane Prefecture | 画像認識装置および操作判定方法並びにプログラム |
JP2011243031A (ja) * | 2010-05-19 | 2011-12-01 | Canon Inc | ジェスチャ認識装置及びジェスチャ認識方法 |
WO2012014590A1 (ja) * | 2010-07-28 | 2012-02-02 | パイオニア株式会社 | 映像処理装置及び方法 |
WO2012039140A1 (ja) * | 2010-09-22 | 2012-03-29 | 島根県 | 操作入力装置および方法ならびにプログラム |
JP2013250882A (ja) * | 2012-06-01 | 2013-12-12 | Sharp Corp | 注目位置検出装置、注目位置検出方法、及び注目位置検出プログラム |
Also Published As
Publication number | Publication date |
---|---|
US20150278583A1 (en) | 2015-10-01 |
JPWO2014073384A1 (ja) | 2016-09-08 |
EP2919099A4 (en) | 2016-06-22 |
CN104781762A (zh) | 2015-07-15 |
EP2919099A1 (en) | 2015-09-16 |
US9672413B2 (en) | 2017-06-06 |
EP2919099B1 (en) | 2020-04-15 |
WO2014073384A1 (ja) | 2014-05-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5928757B2 (ja) | 情報処理装置 | |
JP6158406B2 (ja) | 携帯デバイスによるインタラクティブアプリケーションのビデオキャプチャを可能とするためのシステム | |
JP5654430B2 (ja) | 家庭用ゲームシステムにおいて実行中のゲーム又はアプリケーションをリアルタイムに記録又は変更するための携帯型ゲーム装置の使用 | |
KR101154636B1 (ko) | 표시 장치, 게임 시스템 및 게임 처리 방법 | |
JP5039808B2 (ja) | ゲーム装置、ゲーム装置の制御方法、及びプログラム | |
TWI434717B (zh) | 顯示裝置、遊戲系統及遊戲處理方法 | |
US10994200B2 (en) | Information processing apparatus, information processing system, information processing method, program and information recording medium | |
JP6532393B2 (ja) | 表示制御装置及び表示制御方法 | |
US8884987B2 (en) | Storage medium having stored thereon display control program, display control apparatus, display control system, and display control method for setting and controlling display of a virtual object using a real world image | |
JP5800526B2 (ja) | ゲーム装置、ゲームプログラム、ゲームシステム、およびゲーム処理方法 | |
JP2011210019A (ja) | プログラム、情報記憶媒体及び画像生成装置 | |
JP5756299B2 (ja) | ゲームシステム、ゲーム装置、ゲームプログラム、およびゲーム処理方法 | |
KR20210031894A (ko) | 정보 처리 장치, 정보 처리 방법 및 프로그램 | |
US20180321817A1 (en) | Information processing method, computer and program | |
JP5829040B2 (ja) | ゲームシステム、ゲーム装置、ゲームプログラム、および画像生成方法 | |
JPWO2012001754A1 (ja) | ゲーム装置、ゲーム制御方法、及びゲーム制御プログラム | |
US20130040737A1 (en) | Input device, system and method | |
JP5757741B2 (ja) | ゲームシステム、ゲーム装置、ゲームプログラム、およびゲーム処理方法 | |
JP2023099570A (ja) | プログラム、およびシステム | |
KR102538480B1 (ko) | 프로그램이 기록된 컴퓨터 판독가능 기록 매체, 정보 처리 방법 및, 정보 처리 장치 | |
KR101203787B1 (ko) | 영상인식 기반 인터페이스를 사용하는 콘텐츠 제작 방법 및 시스템 | |
JP2013090941A (ja) | 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法 | |
JP2012148144A (ja) | ゲームプログラム、ゲーム装置、およびゲームシステム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160315 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160412 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5928757 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |