JP2018113616A5 - - Google Patents

Download PDF

Info

Publication number
JP2018113616A5
JP2018113616A5 JP2017003423A JP2017003423A JP2018113616A5 JP 2018113616 A5 JP2018113616 A5 JP 2018113616A5 JP 2017003423 A JP2017003423 A JP 2017003423A JP 2017003423 A JP2017003423 A JP 2017003423A JP 2018113616 A5 JP2018113616 A5 JP 2018113616A5
Authority
JP
Japan
Prior art keywords
arrangement
information processing
video
processing apparatus
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017003423A
Other languages
English (en)
Other versions
JP2018113616A (ja
JP6812803B2 (ja
Filing date
Publication date
Priority claimed from JP2017003423A external-priority patent/JP6812803B2/ja
Priority to JP2017003423A priority Critical patent/JP6812803B2/ja
Application filed filed Critical
Priority to US15/840,742 priority patent/US10356382B2/en
Priority to CN201810011539.5A priority patent/CN108304063B/zh
Priority to EP18161210.2A priority patent/EP3383036A3/en
Publication of JP2018113616A publication Critical patent/JP2018113616A/ja
Priority to US16/444,122 priority patent/US10516870B2/en
Publication of JP2018113616A5 publication Critical patent/JP2018113616A5/ja
Publication of JP6812803B2 publication Critical patent/JP6812803B2/ja
Application granted granted Critical
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (20)

  1. デプス情報を有する映像に対応する仮想空間における、第1のユーザに対応する第1のオブジェクトと第2のユーザに対応する第2のオブジェクトとの配置を、前記映像の再生に応じて第1の配置から第2の配置に変更する変更部、
    を備える、情報処理装置。
  2. 前記変更部は、前記第1のオブジェクトと前記第2のオブジェクトとの配置を、前記映像の再生に応じた前記デプス情報の変化に応じて前記第1の配置から前記第2の配置に変更する、請求項1に記載の情報処理装置。
  3. 前記デプス情報は、前記映像の再生タイミングごとの、前記映像の記録時の視点の周囲のデプス値を示す、請求項2に記載の情報処理装置。
  4. 前記情報処理装置は、前記映像の再生タイミングごとの、前記映像の記録時の視点の周囲の空き空間の情報を前記デプス情報に基づいて特定する特定部をさらに備え、
    前記変更部は、前記第1のオブジェクトと前記第2のオブジェクトとの配置を、前記映像の再生に応じた前記空き空間の情報の変化に応じて前記第1の配置から前記第2の配置に変更する、請求項3に記載の情報処理装置。
  5. 前記第1のオブジェクトおよび前記第2のオブジェクトは三次元の仮想オブジェクトであり、
    前記変更部は、さらに、前記第1のオブジェクトのサイズおよび前記第2のオブジェクトのサイズに応じて、前記第1のオブジェクトと前記第2のオブジェクトとの配置を前記第1の配置から前記第2の配置に変更する、請求項4に記載の情報処理装置。
  6. 前記第1の配置は、前記第1のオブジェクトと前記第2のオブジェクトとの第1の隊列に対応し、
    前記第2の配置は、前記第1のオブジェクトと前記第2のオブジェクトとの第2の隊列に対応し、
    前記特定部は、前記映像の再生タイミングごとに、当該再生タイミングに対応する前記空き空間の情報が示す空間内に前記第1の隊列が収まるか否かをさらに判定し、
    前記空間内に前記第1の隊列が収まらないと判定された際には、前記変更部は、前記第1のオブジェクトと前記第2のオブジェクトとの配置を前記第1の配置から前記第2の配置に変更する、請求項5に記載の情報処理装置。
  7. 前記第2の配置に対応する前記第1のオブジェクトと前記第2のオブジェクトとの配置方向と、前記第1の配置に対応する前記第1のオブジェクトと前記第2のオブジェクトとの配置方向とは異なる、請求項6に記載の情報処理装置。
  8. 前記第2の配置に対応する前記第1のオブジェクトの向きと、前記第1の配置に対応する前記第1のオブジェクトの向きとは異なる、請求項6または7に記載の情報処理装置。
  9. 現在の再生タイミングに対応する前記空き空間の情報が示す空間内に、現在の前記第1のオブジェクトと前記第2のオブジェクトとの隊列が収まらないと判定される度に、前記変更部は、前記第1のオブジェクトと前記第2のオブジェクトとの隊列が前記空間内に収まるように、前記第1のオブジェクトと前記第2のオブジェクトとの隊列を逐次変更する、請求項6〜8のいずれか一項に記載の情報処理装置。
  10. 前記第1のユーザおよび前記第2のユーザを含む複数のユーザは、前記映像を視聴するユーザであり、
    前記変更部は、さらに、前記複数のユーザの各々に対応するオブジェクトのうち前記仮想空間内に配置されるオブジェクトの数を、前記映像の再生に応じた前記デプス情報の変化に応じて変更する、請求項3〜9のいずれか一項に記載の情報処理装置。
  11. 前記複数のユーザの各々に対応するオブジェクトは、三次元の仮想オブジェクトであり、
    前記情報処理装置は、前記映像の再生タイミングごとの、前記映像の記録時の視点の周囲の空き空間の情報を前記デプス情報に基づいて特定する特定部をさらに備え、
    前記変更部は、前記複数のユーザの各々に対応するオブジェクトのサイズと、前記映像の再生に応じた前記空き空間の情報の変化とに応じて、前記仮想空間内に配置されるオブジェクトの数を変更する、請求項10に記載の情報処理装置。
  12. 前記変更部は、さらに、前記仮想空間内に配置される複数のオブジェクトの表示態様を前記複数のユーザの数に応じて変更する、請求項10または11に記載の情報処理装置。
  13. 前記変更部は、さらに、前記第1のオブジェクトまたは前記第2のオブジェクトの表示態様を、前記映像の再生に応じた前記デプス情報の変化に応じて変更する、請求項3〜12のいずれか一項に記載の情報処理装置。
  14. 前記変更部は、さらに、前記仮想空間における前記第1のオブジェクトの配置を、前記第1のユーザが位置する第1の実空間における前記第1のユーザの移動の認識結果に基づいて変更するとともに、前記仮想空間における前記第2のオブジェクトの配置を、前記第2のユーザが位置する第2の実空間における前記第2のユーザの移動の認識結果に基づいて変更する、請求項3〜13のいずれか一項に記載の情報処理装置。
  15. 前記映像と、シーン変化のタイミングを示す情報とが関連付けられており、
    前記情報処理装置は、前記シーン変化のタイミングを前記映像の再生に応じて特定する特定部をさらに備え、
    前記シーン変化のタイミングが特定された場合には、前記変更部は、前記仮想空間における前記第1のオブジェクトと前記第2のオブジェクトとの配置を前記第1の配置から前記第2の配置に変更する、請求項1に記載の情報処理装置。
  16. 前記第2の配置は、前記シーン変化のタイミングに関連付けられている設定情報が示す、前記第1のオブジェクトと前記第2のオブジェクトとの配置である、請求項15に記載の情報処理装置。
  17. 前記映像は、第1の映像であり、
    前記情報処理装置は、前記仮想空間における前記第1のオブジェクトおよび前記第2のオブジェクトの配置と前記第1の映像とに応じた第2の映像を第1の表示部および第2の表示部に表示させる表示制御部をさらに備える、請求項3〜16のいずれか一項に記載の情報処理装置。
  18. 前記第1のオブジェクトおよび前記第2のオブジェクトの配置が前記変更部により変更される度に、前記表示制御部は、変更後の前記第1のオブジェクトおよび前記第2のオブジェクトの配置に応じた前記第2の映像を前記第1の表示部および前記第2の表示部に表示させる、請求項17に記載の情報処理装置。
  19. デプス情報を有する映像に対応する仮想空間における、第1のユーザに対応する第1のオブジェクトと第2のユーザに対応する第2のオブジェクトとの配置を、前記映像の再生に応じて第1の配置から第2の配置にプロセッサが変更すること、
    を含む、情報処理方法。
  20. コンピュータを、
    デプス情報を有する映像に対応する仮想空間における、第1のユーザに対応する第1のオブジェクトと第2のユーザに対応する第2のオブジェクトとの配置を、前記映像の再生に応じて第1の配置から第2の配置に変更する変更部、
    として機能させるための、プログラム。
JP2017003423A 2017-01-12 2017-01-12 情報処理装置、情報処理方法、およびプログラム Active JP6812803B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2017003423A JP6812803B2 (ja) 2017-01-12 2017-01-12 情報処理装置、情報処理方法、およびプログラム
US15/840,742 US10356382B2 (en) 2017-01-12 2017-12-13 Information processing device, information processing method, and program
CN201810011539.5A CN108304063B (zh) 2017-01-12 2018-01-05 信息处理装置、信息处理方法和计算机可读介质
EP18161210.2A EP3383036A3 (en) 2017-01-12 2018-03-12 Information processing device, information processing method, and program
US16/444,122 US10516870B2 (en) 2017-01-12 2019-06-18 Information processing device, information processing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017003423A JP6812803B2 (ja) 2017-01-12 2017-01-12 情報処理装置、情報処理方法、およびプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020209641A Division JP7044149B2 (ja) 2020-12-17 2020-12-17 情報処理装置、情報処理方法、およびプログラム

Publications (3)

Publication Number Publication Date
JP2018113616A JP2018113616A (ja) 2018-07-19
JP2018113616A5 true JP2018113616A5 (ja) 2020-02-13
JP6812803B2 JP6812803B2 (ja) 2021-01-13

Family

ID=61691224

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017003423A Active JP6812803B2 (ja) 2017-01-12 2017-01-12 情報処理装置、情報処理方法、およびプログラム

Country Status (4)

Country Link
US (2) US10356382B2 (ja)
EP (1) EP3383036A3 (ja)
JP (1) JP6812803B2 (ja)
CN (1) CN108304063B (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10607654B2 (en) * 2017-02-09 2020-03-31 Verizon Patent And Licensing Inc. Using sharding to generate virtual reality content
US10916066B2 (en) * 2018-04-20 2021-02-09 Edx Technologies, Inc. Methods of virtual model modification
CN109857249A (zh) * 2019-01-09 2019-06-07 重庆爱奇艺智能科技有限公司 一种用于生成虚拟化身形象的方法与装置
WO2020159891A1 (en) * 2019-01-28 2020-08-06 Lecamus Russell Custom generated real-time media on demand
EP3923267A4 (en) 2019-02-08 2022-04-13 Sony Group Corporation REPRODUCTION DEVICE, REPRODUCTION METHOD AND PROGRAM
JP6900419B2 (ja) * 2019-04-10 2021-07-07 グリー株式会社 動画配信システム、動画配信方法および動画配信プログラム
JP2021018474A (ja) * 2019-07-17 2021-02-15 株式会社デンソー 情報処理システム
KR20190095184A (ko) * 2019-07-25 2019-08-14 엘지전자 주식회사 멀티미디어 디바이스 및 그 제어 방법
JP7392377B2 (ja) 2019-10-10 2023-12-06 沖電気工業株式会社 機器、情報処理方法、プログラム、情報処理システムおよび情報処理システムの方法
CN111510671A (zh) * 2020-03-13 2020-08-07 海信集团有限公司 一种监控视频调取显示的方法及智能终端
US11907412B2 (en) * 2020-09-28 2024-02-20 International Business Machines Corporation Contextual spectator inclusion in a virtual reality experience
JPWO2022201509A1 (ja) * 2021-03-26 2022-09-29

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3594181B2 (ja) * 2000-01-27 2004-11-24 株式会社ナムコ ゲーム装置及び当該ゲーム制御方法、記録媒体
US7925703B2 (en) * 2000-12-26 2011-04-12 Numedeon, Inc. Graphical interactive interface for immersive online communities
US20030117397A1 (en) * 2001-12-21 2003-06-26 Hubrecht Alain Yves Nestor Systems and methods for generating virtual reality (VR) file(s) for complex virtual environments
GB2404546B (en) * 2003-07-25 2005-12-14 Purple Interactive Ltd A method of organising and displaying material content on a display to a viewer
JP4307310B2 (ja) * 2004-03-31 2009-08-05 任天堂株式会社 ゲーム装置及びゲームプログラム
JP4546151B2 (ja) * 2004-05-26 2010-09-15 株式会社日立製作所 音声コミュニケーション・システム
US8588465B2 (en) 2009-01-30 2013-11-19 Microsoft Corporation Visual target tracking
US8267781B2 (en) * 2009-01-30 2012-09-18 Microsoft Corporation Visual target tracking
US8942428B2 (en) * 2009-05-01 2015-01-27 Microsoft Corporation Isolate extraneous motions
KR101671900B1 (ko) * 2009-05-08 2016-11-03 삼성전자주식회사 가상 세계에서의 객체를 제어하는 시스템, 방법 및 기록 매체
US20100306716A1 (en) * 2009-05-29 2010-12-02 Microsoft Corporation Extending standard gestures
US8284157B2 (en) * 2010-01-15 2012-10-09 Microsoft Corporation Directed performance in motion capture system
US8334842B2 (en) * 2010-01-15 2012-12-18 Microsoft Corporation Recognizing user intent in motion capture system
WO2012135545A1 (en) * 2011-03-29 2012-10-04 Qualcomm Incorporated Modular mobile connected pico projectors for a local multi-user collaboration
US8823699B2 (en) * 2011-05-16 2014-09-02 International Business Machines Corporation Getting snapshots in immersible 3D scene recording in virtual world
JP5891131B2 (ja) 2012-07-11 2016-03-22 株式会社ソニー・コンピュータエンタテインメント 画像生成装置および画像生成方法
KR102021857B1 (ko) * 2013-07-23 2019-09-17 엘지전자 주식회사 이동 단말기 및 그의 파노라마 촬영방법
US9787895B2 (en) 2014-02-17 2017-10-10 Sony Corporation Information processing device, information processing method, and program for generating circumferential captured images
US10203762B2 (en) * 2014-03-11 2019-02-12 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
US9226090B1 (en) * 2014-06-23 2015-12-29 Glen A. Norris Sound localization for an electronic call
US10248285B2 (en) * 2014-09-10 2019-04-02 Utherverse Digital Inc. Immersive displays
US20160150212A1 (en) 2014-11-26 2016-05-26 Sony Corporation Live selective adaptive bandwidth
JP5869712B1 (ja) * 2015-04-08 2016-02-24 株式会社コロプラ 没入型仮想空間に実空間のユーザの周辺環境を提示するためのヘッドマウント・ディスプレイ・システムおよびコンピュータ・プログラム
US9704298B2 (en) * 2015-06-23 2017-07-11 Paofit Holdings Pte Ltd. Systems and methods for generating 360 degree mixed reality environments
JP2018010788A (ja) * 2016-07-13 2018-01-18 オムロン株式会社 多光軸光電センサ
CN106249882B (zh) * 2016-07-26 2022-07-12 华为技术有限公司 一种应用于vr设备的手势操控方法与装置
US10699461B2 (en) * 2016-12-20 2020-06-30 Sony Interactive Entertainment LLC Telepresence of multiple users in interactive virtual space

Similar Documents

Publication Publication Date Title
JP2018113616A5 (ja)
US11810226B2 (en) Systems and methods for utilizing a living entity as a marker for augmented reality content
CN106462233B (zh) 用于显示设备观看者视线吸引的方法和设备
US20150309310A1 (en) Head mounted display device displaying thumbnail image and method of controlling therefor
CN106331877B (zh) 弹幕播放方法及装置
US10055888B2 (en) Producing and consuming metadata within multi-dimensional data
US9934823B1 (en) Direction indicators for panoramic images
CN109246463B (zh) 用于显示弹幕的方法和装置
WO2018086224A1 (zh) 一种虚拟现实场景的生成方法、设备及虚拟现实系统
US9824723B1 (en) Direction indicators for panoramic images
CN109154862B (zh) 用于处理虚拟现实内容的装置、方法和计算机可读介质
US20160227868A1 (en) Removable face shield for augmented reality device
JP2019220783A5 (ja) 情報処理装置、情報処理方法及びプログラム
JP2015231114A (ja) 映像表示装置
JPWO2017037952A1 (ja) プログラム、記録媒体、コンテンツ提供装置及び制御方法
CN112823528B (zh) 信息处理装置、信息处理方法和信息处理程序
US20220277520A1 (en) Information processing apparatus, information processing method, and storage medium
CN105320280A (zh) 一种信息处理方法和电子设备
US11918928B2 (en) Virtual presentation of a playset
JP2012141753A5 (ja)
CN105630170B (zh) 一种信息处理方法及电子设备
EP3553629B1 (en) Rendering a message within a volumetric data
JP2013143758A5 (ja)
JP2018109937A5 (ja)
US12001644B2 (en) Method and apparatus for adding interactive objects to a virtual reality environment