JP2020150289A5 - - Google Patents

Download PDF

Info

Publication number
JP2020150289A5
JP2020150289A5 JP2019043388A JP2019043388A JP2020150289A5 JP 2020150289 A5 JP2020150289 A5 JP 2020150289A5 JP 2019043388 A JP2019043388 A JP 2019043388A JP 2019043388 A JP2019043388 A JP 2019043388A JP 2020150289 A5 JP2020150289 A5 JP 2020150289A5
Authority
JP
Japan
Prior art keywords
video
data
unit
performer
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019043388A
Other languages
Japanese (ja)
Other versions
JP2020150289A (en
JP7313847B2 (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2019043388A priority Critical patent/JP7313847B2/en
Priority claimed from JP2019043388A external-priority patent/JP7313847B2/en
Publication of JP2020150289A publication Critical patent/JP2020150289A/en
Publication of JP2020150289A5 publication Critical patent/JP2020150289A5/ja
Priority to JP2023113436A priority patent/JP2023153790A/en
Application granted granted Critical
Publication of JP7313847B2 publication Critical patent/JP7313847B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (9)

管理装置と、少なくとも１以上の撮影装置と、を備え、
前記管理装置は、
演者のフィル信号とキー信号とを含む拡張現実用映像データ及び音声データを含むコンテンツデータを記憶する記憶部と、
前記コンテンツデータの使用を許可する撮影装置に、前記コンテンツデータを送信するコンテンツデータ管理部と、
前記撮影装置から送信される記録画像を保存し、保存場所を示す保存場所情報を前記撮影装置に送信する保存部と、
を備え、
前記撮影装置は、
ユーザを撮影するカメラと、
表示部と、
前記管理装置から受信したコンテンツデータを記憶する記憶部と、
前記コンテンツデータを用いたコンテンツのコンテンツ一覧を表示し、前記コンテンツ一覧から、ユーザが希望するコンテンツの選択を受け付けるコンテンツ選択部と、
ユーザにより選択されたコンテンツのコンテンツデータの前記拡張現実用映像データのキー信号を用いて、前記演者のフィル信号と前記カメラが撮影したユーザの撮影映像とを合成し、前記ユーザと前記演者とを含む合成映像を生成し、前記合成映像を前記表示部に表示し、かつ、前記合成映像の少なくとも一部を記録画像として記録する映像合成部と、
前記ユーザにより選択されたコンテンツのコンテンツデータの音声データを用いて、前記表示部に表示される合成映像に同期して前記演者の音声を出力する音声出力部と、
前記記録画像を、前記管理装置に送信する送信部と、
前記保存場所情報を受信し、前記保存場所を示す情報を前記表示部に表示する保存場所提示部と、
を備える
撮影システム。 It is equipped with a management device and at least one imaging device.
The management device is
A storage unit that stores content data including augmented reality video data and audio data including the performer's fill signal and key signal, and
A content data management unit that transmits the content data to a shooting device that permits the use of the content data, and
A storage unit that stores recorded images transmitted from the imaging device and transmits storage location information indicating the storage location to the imaging device.
Equipped with
The photographing device is
A camera that shoots the user and
Display and
A storage unit that stores content data received from the management device,
A content selection unit that displays a content list of contents using the content data and accepts the selection of the content desired by the user from the content list.
Using the key signal of the augmented reality video data of the content data of the content selected by the user , the fill signal of the performer and the captured video of the user taken by the camera are combined , and the user and the performer are combined. A video compositing unit that generates a composite video including the composite video, displays the composite video on the display unit, and records at least a part of the composite video as a recorded image.
Using the audio data of the content data of the content selected by the user, the audio output unit that outputs the audio of the performer in synchronization with the synthetic video displayed on the display unit, and the audio output unit.
A transmission unit that transmits the recorded image to the management device,
A storage location presentation unit that receives the storage location information and displays information indicating the storage location on the display unit.
A shooting system equipped with. 前記映像合成部は、前記合成映像を生成する際に、前記フィル信号の演者の領域と前記撮影映像のユーザの領域とが重なる領域については、撮影空間において前方に位置する領域の映像を優先的に合成する、 When generating the composite video, the video compositing unit gives priority to the video in the region located in front of the shooting space in the region where the region of the performer of the fill signal and the region of the user of the shot video overlap. Synthesize to
請求項１に記載の撮影システム。The photographing system according to claim 1. 前記演者を撮影するカメラと、
前記カメラで撮影された演者の撮影映像から、前記演者の拡張現実用映像データを生成する拡張現実用映像データ生成部と、
前記演者の音声を取得するマイクと、
前記マイクで取得された前記演者の音声から、音声データを生成する音声データ生成部と、
前記拡張現実用映像データ及び音声データを少なくとも含むライブコンテンツデータを、前記管理装置に送信する送信部と、
を備える演者撮影装置を備え、
前記管理装置は、前記ライブコンテンツデータを受信し、少なくとも１以上の前記撮影装置に前記ライブコンテンツデータをライブ配信するライブ配信部を備え、
前記撮影装置は、前記ライブコンテンツデータを受信する受信部を備え、
前記撮影装置の前記映像合成部は、前記ライブコンテンツデータの拡張現実用映像データと、前記カメラが撮影したユーザの撮影映像とを合成して合成映像を生成し、前記合成映像を前記表示部に表示し、かつ、前記合成映像の少なくとも一部を記録画像として記録し、
前記撮影装置の前記音声出力部は、前記ライブコンテンツデータの音声データを用いて、前記表示部に表示される合成映像に同期して前記演者の音声を出力する
請求項１又は請求項２に記載の撮影システム。 A camera that shoots the performer,
An augmented reality video data generation unit that generates augmented reality video data for the performer from the video shot by the performer taken by the camera.
With a microphone that acquires the voice of the performer,
A voice data generation unit that generates voice data from the voice of the performer acquired by the microphone, and
A transmission unit that transmits live content data including at least augmented reality video data and audio data to the management device.
Equipped with a performer shooting device
The management device includes a live distribution unit that receives the live content data and performs live distribution of the live content data to at least one or more shooting devices.
The photographing device includes a receiving unit for receiving the live content data.
The video compositing unit of the shooting device synthesizes the augmented reality video data of the live content data and the video shot by the user shot by the camera to generate a composite video, and the composite video is displayed on the display unit. Display and record at least a part of the composite video as a recorded image.
The first or second aspect of the present invention, wherein the audio output unit of the photographing device uses the audio data of the live content data to output the audio of the performer in synchronization with the synthetic video displayed on the display unit. Shooting system. 前記管理装置は、
広告用のサイネージデータを記憶する記憶部と、
前記サイネージデータを、前記管理装置に送信する送信部と、
を備え、
前記撮影装置は、
前記管理装置から受信したサイネージデータを記憶する記憶部と、
ユーザによるコンテンツの選択を所定時間受け付けなかった場合、前記サイネージデータを用いて、前記表示部に広告を表示するサイネージ制御部と、
を備える
請求項１から請求項３のいずれかに記載の撮影システム。 The management device is
A storage unit that stores signage data for advertising,
A transmission unit that transmits the signage data to the management device,
Equipped with
The photographing device is
A storage unit that stores signage data received from the management device,
When the user does not accept the selection of the content for a predetermined time, the signage control unit that displays the advertisement on the display unit using the signage data and the signage control unit.
The photographing system according to any one of claims 1 to 3 . ユーザを撮影するカメラと、
表示部と、
コンテンツを管理する管理装置から、演者のフィル信号とキー信号とを含む拡張現実用映像データ及び音声データを含むコンテンツデータを受信する受信部と、
前記受信したコンテンツデータを記憶する記憶部と、
前記コンテンツデータを用いたコンテンツのコンテンツ一覧を表示し、前記コンテンツ一覧から、ユーザが希望するコンテンツの選択を受け付けるコンテンツ選択部と、
ユーザにより選択されたコンテンツのコンテンツデータの前記拡張現実用映像データのキー信号を用いて、前記演者のフィル信号と前記カメラが撮影したユーザの撮影映像とを合成し、前記ユーザと前記演者とを含む合成映像を生成し、前記合成映像を前記表示部に表示し、かつ、前記合成映像の少なくとも一部を記録画像として記録する映像合成部と、
前記ユーザにより選択されたコンテンツのコンテンツデータの音声データを用いて、前記表示部に表示される合成映像に同期して前記演者の音声を出力する音声出力部と、
前記記録画像を、保存のために前記管理装置に送信する送信部と、
前記記録画像の保存場所を示す保存場所情報を、前記管理装置から受信し、前記保存場所を示す情報を前記表示部に表示する保存場所提示部と、
を備える撮影装置。 A camera that shoots the user and
Display and
A receiver that receives content data including augmented reality video data and audio data including the performer's fill signal and key signal from a management device that manages the content.
A storage unit that stores the received content data, and
A content selection unit that displays a content list of contents using the content data and accepts the selection of the content desired by the user from the content list.
Using the key signal of the augmented reality video data of the content data of the content selected by the user , the fill signal of the performer and the captured video of the user taken by the camera are combined , and the user and the performer are combined. A video compositing unit that generates a composite video including the composite video, displays the composite video on the display unit, and records at least a part of the composite video as a recorded image.
Using the audio data of the content data of the content selected by the user, the audio output unit that outputs the audio of the performer in synchronization with the synthetic video displayed on the display unit, and the audio output unit.
A transmission unit that transmits the recorded image to the management device for storage,
A storage location presentation unit that receives storage location information indicating the storage location of the recorded image from the management device and displays information indicating the storage location on the display unit.
A shooting device equipped with. 前記映像合成部は、前記合成映像を生成する際に、前記フィル信号の演者の領域と前記撮影映像のユーザの領域とが重なる領域については、撮影空間において前方に位置する領域の映像を優先的に合成する、 When generating the composite video, the video compositing unit gives priority to the video in the region located in front of the shooting space in the region where the region of the performer of the fill signal and the region of the user of the shot video overlap. Synthesize to
請求項５に記載の撮影装置。The photographing apparatus according to claim 5. 演者を撮影したライブ映像から生成された前記演者の拡張現実用映像データと、前記演者の音声から生成された音声データとを少なくとも含むライブコンテンツデータを、前記管理装置から受信する受信部を備え、
前記映像合成部は、前記ライブコンテンツデータの拡張現実用映像データと、前記カメラが撮影したユーザの撮影映像とを合成して合成映像を生成し、前記合成映像を前記表示部に表示し、かつ、前記合成映像の少なくとも一部を記録画像として記録し、
前記音声出力部は、前記ライブコンテンツデータの音声データを用いて、前記表示部に表示される合成映像に同期して前記演者の音声を出力する
請求項５又は請求項６に記載の撮影装置。 A receiver is provided for receiving live content data including at least the augmented reality video data of the performer generated from the live video of the performer and the audio data generated from the audio of the performer from the management device.
The video compositing unit synthesizes the augmented reality video data of the live content data and the video captured by the user taken by the camera to generate a composite video, displays the composite video on the display unit, and displays the composite video. , At least a part of the composite video is recorded as a recorded image,
The imaging device according to claim 5 or 6 , wherein the audio output unit uses the audio data of the live content data to output the audio of the performer in synchronization with the synthetic video displayed on the display unit. 前記管理装置から受信した広告用のサイネージデータを記憶する記憶部と、
ユーザによるコンテンツの選択を所定時間受け付けなかった場合、前記サイネージデータを用いて、前記表示部に広告を表示するサイネージ制御部と、
を備える
請求項５から請求項７のいずれかに記載の撮影装置。 A storage unit that stores signage data for advertising received from the management device, and
When the user does not accept the selection of the content for a predetermined time, the signage control unit that displays the advertisement on the display unit using the signage data and the signage control unit.
The photographing apparatus according to any one of claims 5 to 7 . 管理装置と、少なくとも１以上の撮影装置と、を備える撮影システムにおける撮影方法であって、
前記管理装置は、演者のフィル信号とキー信号とを含む拡張現実用映像データ及び音声データを含むコンテンツデータを、前記コンテンツデータの使用を許可する撮影装置に送信し、
前記撮影装置は、前記管理装置からコンテンツデータを受信し、受信したコンテンツデータを記憶し、
前記撮影装置は、前記コンテンツデータを用いたコンテンツのコンテンツ一覧を表示し、前記コンテンツ一覧から、ユーザが希望するコンテンツの選択を受け付け、
前記撮影装置は、ユーザにより選択されたコンテンツのコンテンツデータの前記拡張現実用映像データのキー信号を用いて、前記演者のフィル信号と前記カメラが撮影したユーザの撮影映像とを合成し、前記ユーザと前記演者とを含む合成映像を生成し、前記合成映像を、前記撮影装置の表示部に表示し、
前記撮影装置は、前記ユーザにより選択されたコンテンツのコンテンツデータの音声データを用いて、前記表示部に表示される合成映像に同期して前記演者の音声を出力し、
前記撮影装置は、前記合成映像の少なくとも一部を記録画像として記録し、
前記撮影装置は、前記記録画像を、前記管理装置に送信し、
前記管理装置は、前記撮影装置から送信される記録画像を保存し、保存場所を示す保存場所情報を前記撮影装置に送信し、
前記撮影装置は、前記保存場所情報を受信し、前記保存場所を示す情報を前記表示部に表示する
撮影方法。 A shooting method in a shooting system including a management device and at least one shooting device.
The management device transmits content data including augmented reality video data and audio data including a performer's fill signal and a key signal to a photographing device that permits the use of the content data.
The photographing device receives content data from the management device, stores the received content data, and receives the content data.
The photographing device displays a content list of contents using the content data, and accepts selection of the content desired by the user from the content list.
The photographing device synthesizes the fill signal of the performer and the photographed image of the user photographed by the camera by using the key signal of the augmented reality video data of the content data of the content selected by the user, and the user . A composite video including the performer and the performer is generated, and the composite video is displayed on the display unit of the photographing device.
The photographing device uses the audio data of the content data of the content selected by the user to output the audio of the performer in synchronization with the synthetic video displayed on the display unit.
The photographing device records at least a part of the composite image as a recorded image, and records the composite image.
The photographing device transmits the recorded image to the management device.
The management device stores the recorded image transmitted from the photographing device, and transmits the storage location information indicating the storage location to the photographing device.
The photographing device receives the storage location information and displays information indicating the storage location on the display unit.
JP2019043388A 2019-03-11 2019-03-11 Photography system, photography device, management device and photography method Active JP7313847B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019043388A JP7313847B2 (en) 2019-03-11 2019-03-11 Photography system, photography device, management device and photography method
JP2023113436A JP2023153790A (en) 2019-03-11 2023-07-11 program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019043388A JP7313847B2 (en) 2019-03-11 2019-03-11 Photography system, photography device, management device and photography method

Related Child Applications (2)

Application Number Title Priority Date Filing Date
JP2020175829A Division JP6849851B2 (en) 2020-10-20 2020-10-20 Shooting system, shooting device and user shooting method
JP2023113436A Division JP2023153790A (en) 2019-03-11 2023-07-11 program

Publications (3)

Publication Number Publication Date
JP2020150289A JP2020150289A (en) 2020-09-17
JP2020150289A5 true JP2020150289A5 (en) 2022-03-18
JP7313847B2 JP7313847B2 (en) 2023-07-25

Family

ID=72430874

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019043388A Active JP7313847B2 (en) 2019-03-11 2019-03-11 Photography system, photography device, management device and photography method
JP2023113436A Pending JP2023153790A (en) 2019-03-11 2023-07-11 program

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023113436A Pending JP2023153790A (en) 2019-03-11 2023-07-11 program

Country Status (1)

Country Link
JP (2) JP7313847B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7332562B2 (en) * 2019-04-26 2023-08-23 株式会社コロプラ Program, method, and information terminal

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2759126B8 (en) 2011-09-18 2021-03-31 Touchtunes Music Corporation Digital jukebox device with karaoke and/or photo booth features, and associated methods
JP5964722B2 (en) 2012-10-26 2016-08-03 株式会社エクシング Karaoke system
JP6075356B2 (en) 2014-11-10 2017-02-08 カシオ計算機株式会社 Image processing apparatus, image processing method, and program

Similar Documents

Publication Publication Date Title
CN106331732A (en) Method for generating panoramic content, method for displaying panoramic content and corresponding devices
US10205969B2 (en) 360 degree space image reproduction method and system therefor
JP6012342B2 (en) Playback device and playback device control method
JP6739611B1 (en) Class system, viewing terminal, information processing method and program
KR100901111B1 (en) Live-Image Providing System Using Contents of 3D Virtual Space
US11508127B2 (en) Capturing augmented reality on a head mounted display
JP2018191186A5 (en)
JP2023115088A (en) Image file generator, method for generating image file, image generator, method for generating image, image generation system, and program
JP2023153790A5 (en)
JP2020150289A5 (en)
JP6454883B1 (en) Content distribution system, content distribution method, and content distribution program
JP2023153790A (en) program
JP2021086606A (en) Class system, viewing terminal, information processing method, and program
KR20130067855A (en) Apparatus and method for providing virtual 3d contents animation where view selection is possible
JP6677079B2 (en) Music generation device and program
JP5074537B2 (en) Presentation recording device
JP3520318B2 (en) Video composition arithmetic processing apparatus, method and system thereof
EP3956891A1 (en) Method for assisting the acquisition of media content at a scene
KR101700421B1 (en) Image recording for launch vehicle and exhibition system
KR100671147B1 (en) Apparatus for experiencing famous scene and Method thereof
JP2019146148A (en) Content distribution system, content distribution method, and content distribution program
JP4423416B2 (en) Video composition processing system
KR102258495B1 (en) Sharing system of star's image and method of the same
CN114554232B (en) Naked eye 3D-based mixed reality live broadcast method and system
JP6909903B1 (en) Image management device, image management system and image management method