JP2017201742A5 - - Google Patents

Download PDF

Info

Publication number
JP2017201742A5
JP2017201742A5 JP2016092622A JP2016092622A JP2017201742A5 JP 2017201742 A5 JP2017201742 A5 JP 2017201742A5 JP 2016092622 A JP2016092622 A JP 2016092622A JP 2016092622 A JP2016092622 A JP 2016092622A JP 2017201742 A5 JP2017201742 A5 JP 2017201742A5
Authority
JP
Japan
Prior art keywords
image data
image
head
mounted display
line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016092622A
Other languages
Japanese (ja)
Other versions
JP2017201742A (en
JP6580516B2 (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2016092622A priority Critical patent/JP6580516B2/en
Priority claimed from JP2016092622A external-priority patent/JP6580516B2/en
Priority to PCT/JP2017/006941 priority patent/WO2017183292A1/en
Publication of JP2017201742A publication Critical patent/JP2017201742A/en
Publication of JP2017201742A5 publication Critical patent/JP2017201742A5/ja
Application granted granted Critical
Publication of JP6580516B2 publication Critical patent/JP6580516B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (6)

処理装置であって、
第1ユーザの頭部に装着された第1ヘッドマウントディスプレイの姿勢に応じて視線方向を動かすカメラにより撮影され、ネットワーク経由で第1ヘッドマウントディスプレイに送信されるとともに、当該処理装置にも送信される画像データであって、視線方向を示すベクトル情報を付加された画像データを記録する記録部と、
第2ユーザの頭部に装着された第2ヘッドマウントディスプレイの姿勢を検出した姿勢情報を取得する取得部と、
姿勢情報から、仮想カメラの視線方向を決定する視線方向決定部と、
仮想カメラの視線方向と、前記記録部に記録された画像データに付加されたベクトル情報とにもとづいて、第2ユーザに提供する画像データを決定する画像決定部と、
前記画像決定部が決定した画像データを第2ヘッドマウントディスプレイに提供する提供部と、
を備えることを特徴とする処理装置。
A processing device comprising:
The image is taken by a camera that changes the line-of-sight direction according to the posture of the first head mounted display mounted on the head of the first user , transmitted to the first head mounted display via the network, and also transmitted to the processing device. A recording unit for recording image data to which vector information indicating a line-of-sight direction is added;
An acquisition unit for acquiring posture information obtained by detecting the posture of the second head mounted display mounted on the head of the second user;
A line-of-sight direction determining unit that determines the line-of-sight direction of the virtual camera from the posture information;
An image determination unit that determines image data to be provided to the second user based on the line-of-sight direction of the virtual camera and the vector information added to the image data recorded in the recording unit;
A providing unit for providing the image data determined by the image determining unit to the second head mounted display;
A processing apparatus comprising:
前記画像決定部は、仮想カメラの視線方向に対応するベクトル情報を付加された画像データを、提供する画像データとして決定する、
ことを特徴とする請求項1に記載の処理装置。
The image determination unit determines image data to which vector information corresponding to the line-of-sight direction of the virtual camera is added as provided image data.
The processing apparatus according to claim 1.
前記画像決定部は、前記記録部に記録された複数の画像データを用いて、仮想カメラにより撮影される画像を合成して画像データを生成する、
ことを特徴とする請求項1に記載の処理装置。
The image determination unit generates image data by combining images captured by a virtual camera using a plurality of image data recorded in the recording unit.
The processing apparatus according to claim 1.
画像データには、撮影開始点からの経過時間を示す撮影時間情報が付加されており、
前記画像決定部は、複数の画像データのうち重複する部分については、遅い撮影時間情報をもつ画像データを用いて、合成画像を生成する、
ことを特徴とする請求項3に記載の処理装置。
Shooting time information indicating the elapsed time from the shooting start point is added to the image data,
The image determination unit generates a composite image using image data having slow shooting time information for overlapping portions of a plurality of image data.
The processing apparatus according to claim 3.
処理装置において、
第1ユーザの頭部に装着された第1ヘッドマウントディスプレイの姿勢に応じて視線方向を動かすカメラにより撮影され、ネットワーク経由で第1ヘッドマウントディスプレイに送信されるとともに、当該処理装置にも送信される画像データであって、視線方向を示すベクトル情報を付加された画像データを記録した記録部から、画像データを読み出して、第2ユーザに提供する画像を決定する方法であって、
第2ユーザの頭部に装着された第2ヘッドマウントディスプレイの姿勢を検出した姿勢情報を取得するステップと、
姿勢情報から、仮想カメラの視線方向を決定するステップと、
仮想カメラの視線方向と、記録部に記録された画像データに付加されたベクトル情報とにもとづいて、第2ユーザに提供する画像データを決定するステップと、
画像データを第2ヘッドマウントディスプレイに提供するステップと、
を備えることを特徴とする画像決定方法。
In the processing device,
The image is taken by a camera that changes the line-of-sight direction according to the posture of the first head mounted display mounted on the head of the first user , transmitted to the first head mounted display via the network, and also transmitted to the processing device. A method of reading image data from a recording unit that records image data to which vector information indicating a line-of-sight direction is added, and determining an image to be provided to a second user,
Obtaining posture information that detects the posture of the second head mounted display mounted on the head of the second user;
Determining the viewing direction of the virtual camera from the posture information;
Determining image data to be provided to the second user based on the viewing direction of the virtual camera and the vector information added to the image data recorded in the recording unit;
Providing image data to a second head mounted display;
An image determination method comprising:
コンピュータに、
第1ユーザの頭部に装着された第1ヘッドマウントディスプレイの姿勢に応じて視線方向を動かすカメラにより撮影され、ネットワーク経由で第1ヘッドマウントディスプレイに送信されるとともに、当該処理装置にも送信される画像データであって、視線方向を示すベクトル情報を付加された画像データを記録した記録部から、画像データを読み出して、第2ユーザに提供する画像を決定する機能を実現させるためのプログラムであって、
第2ユーザの頭部に装着された第2ヘッドマウントディスプレイの姿勢を検出した姿勢情報を取得する機能と、
姿勢情報から、仮想カメラの視線方向を決定する機能と、
仮想カメラの視線方向と、記録部に記録された画像データに付加されたベクトル情報とにもとづいて、第2ユーザに提供する画像データを決定する機能と、
画像データを第2ヘッドマウントディスプレイに提供する機能と、
を実現させるためのプログラム。
On the computer,
The image is taken by a camera that changes the line-of-sight direction according to the posture of the first head mounted display mounted on the head of the first user , transmitted to the first head mounted display via the network, and also transmitted to the processing device. A program for realizing a function of reading out image data from a recording unit that records image data to which vector information indicating a line-of-sight direction is added and determining an image to be provided to the second user. There,
A function of acquiring posture information obtained by detecting the posture of the second head mounted display attached to the head of the second user;
A function to determine the viewing direction of the virtual camera from the posture information;
A function of determining image data to be provided to the second user based on the line-of-sight direction of the virtual camera and the vector information added to the image data recorded in the recording unit;
Providing image data to the second head-mounted display;
A program to realize
JP2016092622A 2016-04-20 2016-05-02 Processing apparatus and image determination method Active JP6580516B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016092622A JP6580516B2 (en) 2016-05-02 2016-05-02 Processing apparatus and image determination method
PCT/JP2017/006941 WO2017183292A1 (en) 2016-04-20 2017-02-23 Processing device and image determination method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016092622A JP6580516B2 (en) 2016-05-02 2016-05-02 Processing apparatus and image determination method

Publications (3)

Publication Number Publication Date
JP2017201742A JP2017201742A (en) 2017-11-09
JP2017201742A5 true JP2017201742A5 (en) 2018-06-28
JP6580516B2 JP6580516B2 (en) 2019-09-25

Family

ID=60264882

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016092622A Active JP6580516B2 (en) 2016-04-20 2016-05-02 Processing apparatus and image determination method

Country Status (1)

Country Link
JP (1) JP6580516B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020109926A (en) * 2019-01-07 2020-07-16 株式会社オリィ研究所 Robot control device, robot control method, robot control program, and robot control system
JP7346983B2 (en) * 2019-07-31 2023-09-20 株式会社リコー Display terminal, remote control system, display control method and program
JP6801136B1 (en) * 2020-05-14 2020-12-16 エヌ・ティ・ティ・コミュニケーションズ株式会社 Remote control system and its remote work equipment, video processing equipment and programs
CN112073864B (en) * 2020-09-07 2022-06-24 声威士通讯(深圳)有限公司 Acoustic noise reduction device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4148671B2 (en) * 2001-11-06 2008-09-10 ソニー株式会社 Display image control processing apparatus, moving image information transmission / reception system, display image control processing method, moving image information transmission / reception method, and computer program
JP4321128B2 (en) * 2003-06-12 2009-08-26 株式会社デンソー Image server, image collection device, and image display terminal
JP5891131B2 (en) * 2012-07-11 2016-03-22 株式会社ソニー・コンピュータエンタテインメント Image generating apparatus and image generating method
JP2015231106A (en) * 2014-06-04 2015-12-21 三菱電機株式会社 Device and system for head-mounted display

Similar Documents

Publication Publication Date Title
JP6559316B2 (en) Method and apparatus for generating haptic feedback based on analysis of video content
JP6213146B2 (en) Information processing apparatus, recording medium, and information processing method
JP2017507400A5 (en)
JP2015503399A5 (en)
WO2017028498A1 (en) 3d scenario display method and apparatus
EP2441504A3 (en) Storage medium recording image processing program, image processing device, image processing system and image processing method
JP2013179397A5 (en)
JP2017518658A5 (en)
JP2014132488A5 (en)
JP2017201742A5 (en)
JP2016514865A5 (en)
JP2012054754A5 (en)
JP2012208719A5 (en)
JP2011015256A5 (en)
JP2010063067A5 (en)
JP2020086983A5 (en)
JP2014225727A5 (en)
JP2013149242A5 (en)
JP2016083225A5 (en)
JP2017130793A5 (en)
WO2019015249A1 (en) Virtual-reality-based image display method and apparatus, and virtual reality helmet device
JP2009128969A5 (en)
JP2016207004A5 (en)
JP2013101524A5 (en)
JP2015023416A5 (en) Information processing apparatus, control method therefor, program, and storage medium