JP2020010301A5 - 情報処理装置、情報処理方法及びプログラム - Google Patents

情報処理装置、情報処理方法及びプログラム Download PDF

Info

Publication number
JP2020010301A5
JP2020010301A5 JP2018132639A JP2018132639A JP2020010301A5 JP 2020010301 A5 JP2020010301 A5 JP 2020010301A5 JP 2018132639 A JP2018132639 A JP 2018132639A JP 2018132639 A JP2018132639 A JP 2018132639A JP 2020010301 A5 JP2020010301 A5 JP 2020010301A5
Authority
JP
Japan
Prior art keywords
virtual viewpoint
information processing
reproduction speed
information
reproduction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018132639A
Other languages
English (en)
Other versions
JP7170441B2 (ja
JP2020010301A (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from JP2018132639A external-priority patent/JP7170441B2/ja
Priority to JP2018132639A priority Critical patent/JP7170441B2/ja
Priority to KR1020217000304A priority patent/KR102500615B1/ko
Priority to PCT/JP2019/016562 priority patent/WO2020012748A1/ja
Priority to CN201980055528.XA priority patent/CN112640472B/zh
Priority to EP19835094.4A priority patent/EP3823287A4/en
Publication of JP2020010301A publication Critical patent/JP2020010301A/ja
Priority to US17/133,770 priority patent/US11368666B2/en
Publication of JP2020010301A5 publication Critical patent/JP2020010301A5/ja
Publication of JP7170441B2 publication Critical patent/JP7170441B2/ja
Application granted granted Critical
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

上記の目的を達成する本発明に係る情報処理装置は、
複数の撮影画像に基づく仮想視点画像の再生速度を決定する決定手段と、
前記決定手段により決定された再生速度での前記仮想視点画像の再生中におけるユーザ操作に応じた入力を受け付ける受付手段と、
前記受付手段により受け付けられた入力に基づいて前記仮想視点画像に対応する仮想視点を変化させる制御を行う制御手段であって、第1再生速度での前記仮想視点画像の再生中における特定のユーザ操作に応じた入力が受け付けられたことに応じて変化する前記仮想視点の変化速度が、前記第1再生速度よりも速い第2再生速度での前記仮想視点画像の再生中における前記特定のユーザ操作に応じた入力が受け付けられたことに応じて変化する前記仮想視点の変化速度よりも遅くなるように制御する制御手段とを有することを特徴とする。

本発明は、情報処理装置、情報処理方法及びプログラムに関するものである。

Claims (19)

  1. 複数の撮影画像に基づく仮想視点画像の再生速度を決定する決定手段と、
    前記決定手段により決定された再生速度での前記仮想視点画像の再生中におけるユーザ操作に応じた入力を受け付ける受付手段と、
    前記受付手段により受け付けられた入力に基づいて前記仮想視点画像に対応する仮想視点を変化させる制御を行う制御手段であって、第1再生速度での前記仮想視点画像の再生中における特定のユーザ操作に応じた入力が受け付けられたことに応じて変化する前記仮想視点の変化速度が、前記第1再生速度よりも速い第2再生速度での前記仮想視点画像の再生中における前記特定のユーザ操作に応じた入力が受け付けられたことに応じて変化する前記仮想視点の変化速度よりも遅くなるように制御する制御手段とを有することを特徴とする情報処理装置。
  2. 前記制御手段による制御に応じた仮想視点の経時的な変化を表す視点情報を生成する視点情報生成手段と、
    前記決定手段により決定された再生速度とは異なる再生速度で再生される仮想視点画像を、前記視点情報生成手段により生成された視点情報と前記複数の撮影画像とに基づいて生成する画像生成手段とを有することを特徴とする請求項1に記載の情報処理装置。
  3. 前記制御手段による制御に応じた仮想視点の変化を表す視点情報を生成する視点情報生成手段と、
    前記視点情報生成手段により生成された視点情報を、前記複数の撮影画像に基づいて仮想視点画像を生成する画像生成装置へ出力する出力手段とを有することを特徴とする請求項1に記載の情報処理装置。
  4. 前記出力手段は、前記画像生成装置により生成される仮想視点画像の再生速度を示す情報を出力することを特徴とする請求項3に記載の情報処理装置。
  5. 前記決定手段により決定される再生速度と前記出力手段により出力される情報が示す再生速度とは異なることを特徴とする請求項4に記載の情報処理装置。
  6. 前記決定手段は、ユーザによる指定操作に基づいて前記仮想視点画像の再生速度を決定することを特徴とする請求項1乃至5の何れか1項に記載の情報処理装置。
  7. 前記決定手段は、前記複数の撮影画像の少なくとも何れかに含まれるオブジェクトの動きに基づいて前記仮想視点画像の再生速度を決定することを特徴とする請求項1乃至5の何れか1項に記載の情報処理装置。
  8. 前記制御手段は、前記決定手段により決定された再生速度に基づいて前記仮想視点の変化速度の上限を決定することを特徴とする請求項1乃至7の何れか1項に記載の情報処理装置。
  9. 前記制御手段は、前記決定手段により決定された再生速度に基づいてユーザ操作に応じた前記仮想視点の変化の感度を決定することを特徴とする請求項1乃至7の何れか1項に記載の情報処理装置。
  10. 前記制御手段は、前記受付手段により受け付けられた入力に基づいて前記仮想視点の位置と向きと画角との少なくとも何れかを変化させることを特徴とする請求項1乃至9の何れか1項に記載の情報処理装置。
  11. 前記決定手段は、仮想視点画像の再生中に仮想視点の移動軌跡を示すカメラパスを作成するカメラパス作成モードでの当該仮想視点の再生速度を決定することを特徴とする請求項1乃至10の何れか1項に記載の情報処理装置。
  12. 複数の撮影画像に基づく仮想視点画像の再生速度を決定する決定手段と、
    前記仮想視点画像の再生中におけるユーザ操作に応じた入力を受け付ける受付手段と、
    前記受付手段により受け付けられた入力に基づいて前記仮想視点画像に対応する仮想視点を変化させる制御手段であって、前記決定手段により決定された再生速度と前記入力とに基づいて決まる速さで前記仮想視点を変化させる制御手段とを有することを特徴とする情報処理装置。
  13. 前記制御手段は、前記決定手段により決定された再生速度に基づいて前記仮想視点の変化速度の上限を決定することを特徴とする請求項12に記載の情報処理装置。
  14. 前記制御手段は、前記決定手段により決定された再生速度に基づいてユーザ操作に応じた前記仮想視点の変化の感度を決定することを特徴とする請求項12に記載の情報処理装置。
  15. 複数の撮影画像に基づく仮想視点画像の再生速度を決定する決定工程と、
    前記決定工程により決定された再生速度での前記仮想視点画像の再生中におけるユーザ操作に応じた入力を受け付ける受付工程と、
    前記受付工程により受け付けられた入力に基づいて前記仮想視点画像に対応する仮想視点を変化させる制御を行う制御工程であって、第1再生速度での前記仮想視点画像の再生中における特定のユーザ操作に応じた入力が受け付けられたことに応じて変化する前記仮想視点の変化速度が、前記第1再生速度よりも速い第2再生速度での前記仮想視点画像の再生中における前記特定のユーザ操作に応じた入力が受け付けられたことに応じて変化する前記仮想視点の変化速度よりも遅くなるように制御する制御工程とを有することを特徴とする情報処理方法。
  16. 前記制御工程における制御に応じた仮想視点の経時的な変化を表す視点情報を生成する視点情報生成工程と、
    前記決定工程において決定された再生速度とは異なる再生速度で再生される仮想視点画像を、前記視点情報生成工程において生成された視点情報と前記複数の撮影画像とに基づいて生成する画像生成工程とを有することを特徴とする請求項15に記載の情報処理方法。
  17. 前記制御工程は、前記決定工程において決定された再生速度に基づいて前記仮想視点の変化速度の上限を決定することを特徴とする請求項15又は16に記載の情報処理方法。
  18. 前記制御工程は、前記決定工程において決定された再生速度に基づいてユーザ操作に応じた前記仮想視点の変化の感度を決定することを特徴とする請求項15又は16に記載の情報処理方法。
  19. コンピュータを、請求項1乃至14の何れか1項に記載の情報処理装置として機能させるためのプログラム。
JP2018132639A 2018-07-12 2018-07-12 情報処理装置、情報処理方法及びプログラム Active JP7170441B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2018132639A JP7170441B2 (ja) 2018-07-12 2018-07-12 情報処理装置、情報処理方法及びプログラム
EP19835094.4A EP3823287A4 (en) 2018-07-12 2019-04-18 INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD AND PROGRAM
PCT/JP2019/016562 WO2020012748A1 (ja) 2018-07-12 2019-04-18 情報処理装置、情報処理方法及びプログラム
CN201980055528.XA CN112640472B (zh) 2018-07-12 2019-04-18 信息处理设备、信息处理方法和存储介质
KR1020217000304A KR102500615B1 (ko) 2018-07-12 2019-04-18 정보 처리장치, 정보 처리방법 및 프로그램
US17/133,770 US11368666B2 (en) 2018-07-12 2020-12-24 Information processing apparatus, information processing method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018132639A JP7170441B2 (ja) 2018-07-12 2018-07-12 情報処理装置、情報処理方法及びプログラム

Publications (3)

Publication Number Publication Date
JP2020010301A JP2020010301A (ja) 2020-01-16
JP2020010301A5 true JP2020010301A5 (ja) 2021-08-26
JP7170441B2 JP7170441B2 (ja) 2022-11-14

Family

ID=69142314

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018132639A Active JP7170441B2 (ja) 2018-07-12 2018-07-12 情報処理装置、情報処理方法及びプログラム

Country Status (6)

Country Link
US (1) US11368666B2 (ja)
EP (1) EP3823287A4 (ja)
JP (1) JP7170441B2 (ja)
KR (1) KR102500615B1 (ja)
CN (1) CN112640472B (ja)
WO (1) WO2020012748A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7418101B2 (ja) * 2019-07-26 2024-01-19 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
EP4113453A4 (en) * 2020-03-30 2023-08-30 Sony Group Corporation INFORMATION PROCESSING DEVICE, IMAGE PROCESSING SYSTEM AND INFORMATION PROCESSING METHOD
JP7451291B2 (ja) 2020-05-14 2024-03-18 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
JP2022032483A (ja) 2020-08-12 2022-02-25 キヤノン株式会社 画像処理装置、画像処理方法、およびプログラム
WO2022124047A1 (ja) * 2020-12-07 2022-06-16 ソニーグループ株式会社 情報処理装置、情報処理システム及び情報処理方法
US11941729B2 (en) 2020-12-11 2024-03-26 Canon Kabushiki Kaisha Image processing apparatus, method for controlling image processing apparatus, and storage medium

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101066550B1 (ko) * 2008-08-11 2011-09-21 한국전자통신연구원 가상시점 영상 생성방법 및 그 장치
WO2011052064A1 (ja) * 2009-10-30 2011-05-05 キヤノン株式会社 情報処理装置および方法
EP2413286A1 (en) * 2010-07-29 2012-02-01 LiberoVision AG Image processing method and device for instant replay
KR101665049B1 (ko) * 2010-08-11 2016-10-11 삼성전자주식회사 영상 처리 장치 및 방법
JP2012109719A (ja) 2010-11-16 2012-06-07 Canon Inc 映像処理装置及びその制御方法
US10600245B1 (en) * 2014-05-28 2020-03-24 Lucasfilm Entertainment Company Ltd. Navigating a virtual environment of a media content item
EP2960864B1 (en) * 2014-06-23 2018-12-05 Harman Becker Automotive Systems GmbH Device and method for processing a stream of video data
US20170256283A1 (en) * 2014-09-08 2017-09-07 Sony Corporation Information processing device and information processing method
US10230866B1 (en) * 2015-09-30 2019-03-12 Amazon Technologies, Inc. Video ingestion and clip creation
JP6613774B2 (ja) * 2015-09-30 2019-12-04 アイシン精機株式会社 周辺監視装置
JP6482498B2 (ja) * 2016-05-25 2019-03-13 キヤノン株式会社 制御装置、制御方法、及び、プログラム
FR3052949B1 (fr) * 2016-06-17 2019-11-08 Alexandre Courtes Procede et systeme de prise de vues a l'aide d'un capteur virtuel
JP6742869B2 (ja) 2016-09-15 2020-08-19 キヤノン株式会社 画像処理装置および画像処理方法
US10754529B2 (en) * 2016-10-28 2020-08-25 Adobe Inc. Facilitating editing of virtual-reality content using a virtual-reality headset
JP6539253B2 (ja) 2016-12-06 2019-07-03 キヤノン株式会社 情報処理装置、その制御方法、およびプログラム
JP6840562B2 (ja) 2017-02-15 2021-03-10 キヤノン株式会社 光走査装置及び画像形成装置
JP2018182428A (ja) * 2017-04-06 2018-11-15 株式会社フューチャリズムワークス 映像配信装置、映像配信システム及び映像配信方法
WO2018199052A1 (ja) * 2017-04-25 2018-11-01 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 画像表示方法及び画像表示装置
DE102017125544B3 (de) * 2017-05-15 2018-06-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Verarbeitungsverfahren und Verarbeitungssystem für Videodaten
US10360727B2 (en) * 2017-08-02 2019-07-23 Omnivor, Inc. Methods for streaming visible blocks of volumetric video
CN110999309A (zh) * 2017-08-07 2020-04-10 夏普株式会社 生成装置、再现装置、生成方法、再现方法、控制程序、记录介质
CN108289220B (zh) * 2018-01-15 2020-11-27 深圳市奥拓电子股份有限公司 虚拟图像处理方法、图像处理系统及存储介质
JP7051457B2 (ja) 2018-01-17 2022-04-11 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
JP7330683B2 (ja) 2018-11-06 2023-08-22 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム

Similar Documents

Publication Publication Date Title
JP2020010301A5 (ja) 情報処理装置、情報処理方法及びプログラム
JP7457082B2 (ja) 反応型映像生成方法及び生成プログラム
JP6742869B2 (ja) 画像処理装置および画像処理方法
US10076840B2 (en) Information processing apparatus, information processing method, and program
JP7497458B2 (ja) ジェスチャ制御電子装置の制御表示ゲインを調整するための方法および装置
EP3343515A1 (en) Setting apparatus to set movement path of virtual viewpoint, setting method, and program
JP2016511487A5 (ja)
JP2012151706A5 (ja)
JP2010016649A5 (ja)
JP2016158021A5 (ja)
JP2018045608A5 (ja)
JP2020042665A5 (ja) 情報処理装置、情報処理方法及びプログラム
CN104980722B (zh) 一种数据处理方法、装置以及电子设备
JP2018191051A5 (ja)
JP2015050735A5 (ja) 情報処理装置及びその制御方法、並びにプログラム
KR102224420B1 (ko) 모바일 컴퓨팅 디바이스들에 의해 주석달린 비디오 콘텐츠를 디스플레이하기 위한 시스템들 및 방법들
JP2017515345A (ja) 一連の画像からベース画像と再配置されるオブジェクトとを合成する画像生成
JP7125983B2 (ja) 実物体の相互作用的な3d表現を作成および表示するためのシステムおよび方法
JP2019051297A5 (ja) プログラム及び情報処理装置
JP2020035176A5 (ja)
WO2019033556A1 (zh) 一种虚拟直播游戏的方法、电子设备及存储介质
JP2017123589A (ja) 情報処理装置、情報処理方法および映像投影システム
US20220291819A1 (en) Systems and methods for navigating content
JP2019061549A5 (ja) 情報処理装置、制御方法及びコンピュータプログラム
JP6201501B2 (ja) 動画編集装置、動画編集方法およびプログラム