JP2016218758A5 - - Google Patents

Download PDF

Info

Publication number
JP2016218758A5
JP2016218758A5 JP2015103183A JP2015103183A JP2016218758A5 JP 2016218758 A5 JP2016218758 A5 JP 2016218758A5 JP 2015103183 A JP2015103183 A JP 2015103183A JP 2015103183 A JP2015103183 A JP 2015103183A JP 2016218758 A5 JP2016218758 A5 JP 2016218758A5
Authority
JP
Japan
Prior art keywords
image
information processing
stereo
amount
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015103183A
Other languages
English (en)
Other versions
JP6345627B2 (ja
JP2016218758A (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from JP2015103183A external-priority patent/JP6345627B2/ja
Priority to JP2015103183A priority Critical patent/JP6345627B2/ja
Priority to CN201680027680.3A priority patent/CN107960123A/zh
Priority to EP16796424.6A priority patent/EP3299937B1/en
Priority to US15/567,774 priority patent/US10638120B2/en
Priority to PCT/JP2016/064314 priority patent/WO2016186031A1/ja
Publication of JP2016218758A publication Critical patent/JP2016218758A/ja
Publication of JP2016218758A5 publication Critical patent/JP2016218758A5/ja
Publication of JP6345627B2 publication Critical patent/JP6345627B2/ja
Application granted granted Critical
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (9)

  1. ステレオカメラが撮影した画像から対象物の位置情報を取得し情報処理を行う情報処理装置であって、
    前記ステレオカメラが左右の視点から撮影したステレオ画像から対象物の像を検出し、その結果に基づき、前記情報処理に用いる当該対象物の位置情報を取得する対象物検出部と、
    前記対象物検出部による前記位置情報の取得処理と並行して、前記対象物の像の検出結果に基づき、前記ステレオ画像の上下方向の位置ずれ量を監視し、当該位置ずれ量が所定の条件を満たしたときカメラキャリブレーションが必要であると判定するキャリブレーション判定部と、
    カメラキャリブレーションが必要と判定された際、その旨の情報を出力する出力データ生成部と、
    を備えることを特徴とする情報処理装置。
  2. 前記キャリブレーション判定部は、前記ステレオカメラが撮影している動画のうち複数フレーム分のステレオ画像の上下方向の位置ずれ量を蓄積して記録し、それに基づきカメラキャリブレーションの要、不要の判定に用いる有効な位置ずれ量を決定することを特徴とする請求項1に記載の情報処理装置。
  3. 前記キャリブレーション判定部は、前記対象物検出部による対象物の像の検出結果に基づき、前記上下方向の位置ずれ量の蓄積の開始および終了の少なくともいずれかのタイミングを決定することを特徴とする請求項に記載の情報処理装置。
  4. 前記対象物検出部は、前記対象物として、所定の配置で物体表面に設けた複数のマーカーの像を検出し、
    前記キャリブレーション判定部は、前記対象物検出部が検出したマーカーの像の数に基づき、前記上下方向の位置ずれ量の蓄積の開始および終了のタイミングを決定することを特徴とする請求項に記載の情報処理装置。
  5. 前記キャリブレーション判定部は、前記複数フレーム分のステレオ画像において検出された、対応する対象物の像の位置座標の上下方向の差分値を対象物ごとに取得していき、差分値ごとにその頻度を表した情報に基づき、前記有効な位置ずれ量を決定することを特徴とする請求項からのいずれかに記載の情報処理装置。
  6. 前記キャリブレーション判定部は、前記対象物検出部による各フレームにおける対象物の像の検出結果に基づき、前記差分値ごとに加算する頻度に重み付けを行うことを特徴とする請求項に記載の情報処理装置。
  7. ステレオカメラが撮影した画像から対象物の位置情報を取得し情報処理を行う情報処理装置が行う情報処理方法であって、
    前記ステレオカメラが左右の視点から撮影したステレオ画像から対象物の像を検出し、その結果に基づき、前記情報処理に用いる当該対象物の位置情報を取得するステップと、
    前記位置情報を取得するステップと並行して、前記対象物の像の検出結果に基づき、前記ステレオ画像の上下方向の位置ずれ量を監視し、当該位置ずれ量が所定の条件を満たしたときカメラキャリブレーションが必要であると判定するステップと、
    カメラキャリブレーションが必要と判定された際、その旨の情報を出力するステップと、
    を含むことを特徴とする情報処理方法。
  8. ステレオカメラが撮影した画像から対象物の位置情報を取得し情報処理を行うコンピュータに、
    前記ステレオカメラが左右の視点から撮影したステレオ画像から対象物の像を検出し、その結果に基づき、前記情報処理に用いる当該対象物の位置情報を取得する機能と、
    前記位置情報の取得処理と並行して、前記対象物の像の検出結果に基づき、前記ステレオ画像の上下方向の位置ずれ量を監視し、当該位置ずれ量が所定の条件を満たしたときカメラキャリブレーションが必要であると判定する機能と、
    カメラキャリブレーションが必要と判定された際、その旨の情報を出力する機能と、
    を実現させることを特徴とするコンピュータプログラム。
  9. ステレオカメラが撮影した画像から対象物の位置情報を取得し情報処理を行うコンピュータに、
    前記ステレオカメラが左右の視点から撮影したステレオ画像から対象物の像を検出し、その結果に基づき、前記情報処理に用いる当該対象物の位置情報を取得する機能と、
    前記位置情報の取得処理と並行して、前記対象物の像の検出結果に基づき、前記ステレオ画像の上下方向の位置ずれ量を監視し、当該位置ずれ量が所定の条件を満たしたときカメラキャリブレーションが必要であると判定する機能と、
    カメラキャリブレーションが必要と判定された際、その旨の情報を出力する機能と、
    を実現させるコンピュータプログラムを記録したことを特徴とする、コンピュータにて読み取り可能な記録媒体。
JP2015103183A 2015-05-20 2015-05-20 情報処理装置および情報処理方法 Active JP6345627B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2015103183A JP6345627B2 (ja) 2015-05-20 2015-05-20 情報処理装置および情報処理方法
PCT/JP2016/064314 WO2016186031A1 (ja) 2015-05-20 2016-05-13 情報処理装置および情報処理方法
EP16796424.6A EP3299937B1 (en) 2015-05-20 2016-05-13 Information processing device and information processing method
US15/567,774 US10638120B2 (en) 2015-05-20 2016-05-13 Information processing device and information processing method for stereoscopic image calibration
CN201680027680.3A CN107960123A (zh) 2015-05-20 2016-05-13 信息处理设备和信息处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015103183A JP6345627B2 (ja) 2015-05-20 2015-05-20 情報処理装置および情報処理方法

Publications (3)

Publication Number Publication Date
JP2016218758A JP2016218758A (ja) 2016-12-22
JP2016218758A5 true JP2016218758A5 (ja) 2017-06-29
JP6345627B2 JP6345627B2 (ja) 2018-06-20

Family

ID=57320223

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015103183A Active JP6345627B2 (ja) 2015-05-20 2015-05-20 情報処理装置および情報処理方法

Country Status (5)

Country Link
US (1) US10638120B2 (ja)
EP (1) EP3299937B1 (ja)
JP (1) JP6345627B2 (ja)
CN (1) CN107960123A (ja)
WO (1) WO2016186031A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6707022B2 (ja) * 2016-12-26 2020-06-10 日立オートモティブシステムズ株式会社 ステレオカメラ
JP7330159B2 (ja) * 2017-07-20 2023-08-21 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置および位置情報取得方法
CN110135861B (zh) * 2019-04-24 2024-03-05 平安科技(深圳)有限公司 信息通知方法、装置、计算机设备及存储介质
US11190755B2 (en) * 2019-06-12 2021-11-30 Sony Interactive Entertainment Inc. Asymmetric arrangement of left and right displays to improve image quality for a stereoscopic head-mounted display (HMD)
WO2023095717A1 (ja) * 2021-11-25 2023-06-01 ソニーグループ株式会社 表示装置、表示方法及び表示プログラム
GB2614326A (en) * 2021-12-31 2023-07-05 Sony Interactive Entertainment Europe Ltd Apparatus and method for virtual reality
JP2024082479A (ja) * 2022-12-08 2024-06-20 日立Astemo株式会社 画像処理装置及び画像処理方法

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU751852B2 (en) 1998-05-19 2002-08-29 Sony Interactive Entertainment Inc. Image processing apparatus and method, and providing medium
US7236199B2 (en) * 2003-07-07 2007-06-26 Toshikazu Hori Multi-tap camera
JP4957134B2 (ja) * 2006-09-12 2012-06-20 株式会社日立製作所 距離計測装置
US8781151B2 (en) * 2006-09-28 2014-07-15 Sony Computer Entertainment Inc. Object detection using video input combined with tilt angle information
US20080117290A1 (en) * 2006-10-18 2008-05-22 Mgc Works, Inc. Apparatus, system and method for generating stereoscopic images and correcting for vertical parallax
US8286196B2 (en) * 2007-05-03 2012-10-09 Apple Inc. Parallel runtime execution on multiple processors
CN102043673B (zh) * 2009-10-21 2015-06-03 Sap欧洲公司 并行处理中执行任务的节点数量的优化选择系统及方法
JP5214811B2 (ja) * 2009-11-13 2013-06-19 富士フイルム株式会社 測距装置、測距方法、測距プログラムおよび測距システムならびに撮像装置
US8669990B2 (en) * 2009-12-31 2014-03-11 Intel Corporation Sharing resources between a CPU and GPU
JP5898842B2 (ja) * 2010-01-14 2016-04-06 任天堂株式会社 携帯型情報処理装置、携帯型ゲーム装置
US9106909B2 (en) * 2010-04-20 2015-08-11 Hewlett-Packard Development Company, L.P. Stereo vision viewing systems
US8602887B2 (en) * 2010-06-03 2013-12-10 Microsoft Corporation Synthesis of information from multiple audiovisual sources
JP5440461B2 (ja) * 2010-09-13 2014-03-12 株式会社リコー 校正装置、距離計測システム、校正方法および校正プログラム
JP5870510B2 (ja) 2010-09-14 2016-03-01 株式会社リコー ステレオカメラ装置、校正方法およびプログラム
JP5481337B2 (ja) * 2010-09-24 2014-04-23 株式会社東芝 画像処理装置
JP5785732B2 (ja) * 2011-02-24 2015-09-30 任天堂株式会社 情報処理プログラム、撮像装置、撮像方法及び撮像システム
US9188973B2 (en) * 2011-07-08 2015-11-17 Restoration Robotics, Inc. Calibration and transformation of a camera system's coordinate system
CN103907340B (zh) * 2011-11-07 2017-03-29 索尼电脑娱乐公司 图像生成装置和图像生成方法
US9503703B1 (en) * 2012-10-05 2016-11-22 Amazon Technologies, Inc. Approaches for rectifying stereo cameras
CN103792667B (zh) * 2012-10-30 2016-06-01 财团法人工业技术研究院 立体摄像装置、自动校正装置与校正方法
JP2014138331A (ja) * 2013-01-17 2014-07-28 Ricoh Co Ltd 撮影装置及びプログラム
JP6210748B2 (ja) * 2013-06-17 2017-10-11 キヤノン株式会社 三次元位置計測装置、及び三次元位置計測装置のキャリブレーションずれ判定方法
EP3197156A4 (en) * 2014-07-28 2018-03-21 Olympus Corporation Control device for stereoscopic viewing device, stereoscopic viewing system, and control method for stereoscopic viewing device
US20170070731A1 (en) * 2015-09-04 2017-03-09 Apple Inc. Single And Multi-Camera Calibration

Similar Documents

Publication Publication Date Title
JP2016218758A5 (ja)
JP2008286756A5 (ja)
JP2016538601A5 (ja)
JP2014132488A5 (ja)
JP2014197378A5 (ja)
JP2014241578A5 (ja)
JP2013185832A5 (ja)
WO2013119408A3 (en) Method and system for automatic 3-d image creation
JP2013225946A5 (ja)
JP2013239119A5 (ja)
RU2014137121A (ru) Способ управления в системе захвата изображения, устройство управления и машиночитаемый носитель данных
EP2945118A3 (en) Stereo source image calibration method and apparatus
EP3177040A3 (en) Information processing apparatus, information processing method, and program
JP2016134803A5 (ja) 画像処理装置、情報処理方法、プログラム及び記録媒体
JP2015090298A5 (ja)
JP2016201668A5 (ja)
JP2011134012A5 (ja)
JP2013254480A5 (ja)
JP2015103104A5 (ja)
JP2013161405A5 (ja) 被写体判定装置、被写体判定方法及びプログラム
JP2015106290A5 (ja)
JP2016066182A5 (ja)
JP2016220198A5 (ja)
WO2015016292A3 (en) Image processing apparatus and image processing method
JP2013219675A5 (ja)