JP7608845B2 - 端末装置、配信システム及び配信方法 - Google Patents

端末装置、配信システム及び配信方法 Download PDF

Info

Publication number
JP7608845B2
JP7608845B2 JP2021010205A JP2021010205A JP7608845B2 JP 7608845 B2 JP7608845 B2 JP 7608845B2 JP 2021010205 A JP2021010205 A JP 2021010205A JP 2021010205 A JP2021010205 A JP 2021010205A JP 7608845 B2 JP7608845 B2 JP 7608845B2
Authority
JP
Japan
Prior art keywords
excitement
information
vehicle
superimposed
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021010205A
Other languages
English (en)
Other versions
JP2022114077A (ja
Inventor
寛鳳 新田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Priority to JP2021010205A priority Critical patent/JP7608845B2/ja
Priority to PCT/JP2021/032073 priority patent/WO2022162990A1/ja
Priority to CN202180079871.5A priority patent/CN116547745A/zh
Publication of JP2022114077A publication Critical patent/JP2022114077A/ja
Priority to US18/196,504 priority patent/US20230283833A1/en
Application granted granted Critical
Publication of JP7608845B2 publication Critical patent/JP7608845B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/10—Speech classification or search using distance or distortion measures between unknown speech and reference templates
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/251—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/252—Processing of multiple end-users' preferences to derive collaborative data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2668—Creating a channel for a dedicated end-user group, e.g. insertion of targeted commercials based on end-user profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4668—Learning process for intelligent management, e.g. learning user preferences for recommending movies for recommending content, e.g. movies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Remote Sensing (AREA)
  • Environmental Sciences (AREA)
  • Environmental & Geological Engineering (AREA)
  • Emergency Management (AREA)
  • Ecology (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computing Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Description

本発明は、端末装置、配信システム及び配信方法に関する。
特許文献１には、会場と視聴者が一体となるためのビジネスモデルが記載されている。特許文献１のビジネスモデルは、テレビ上、あるいはＷｅｂ上で放送されているスポーツやコンサートの視聴者が、リモコンやパソコン、携帯電話などの端末を用いて行ったリアクションを、インターネットを通じてリアルタイムに収集し、同じくリアルタイムにイベント会場に歓声やグラフなどの形をとって反映させている。
特許文献２には、動画表示システムが記載されている。特許文献２の動画表示システムは、ライブ動画サーバから取得したライブ画像表示手段にライブ画像を表示させ、閲覧者に現実味のある動画を視聴させている。
特許文献３には、ドライブイン・ビデオシアターが記載されている。特許文献３のドライブイン・ビデオシアターは、自動車に乗ったままで室内に入り、面倒な手続きもなく、又他人と顔を会わすこともなく、自由な気分でプライバシーを守りながら映画を観ることができる。
特開２００５－３３９４７９号公報 特開２００３－０４６９７４号公報 特開平７－２３３６５１号公報
現在、コロナウイルスの拡大により、音楽ライブ・フェスティバルなどの様々なイベントが中止されている。密を避けるため、ネット上における音楽ライブの生配信が増加している。特許文献１及び２のように、ネット上での動画では、臨場感や一体感を十分に得るまでには至っていない。また、特許文献３のように、自動車に乗ったままでのドライブイン・ビデオシアターでは、観客の反応が反映しておらず、臨場感や一体感を得ることは困難である。
本発明は、このような問題点を解決するためになされたものであり、他人と一定の距離を保ったまま、音楽ライブ等の臨場感や一体感を向上させることができる端末装置、配信システム及び配信方法を提供することを目的とする。
そこで、本発明は、会場において車両に乗車したままコンテンツを鑑賞する乗員の音声情報及び映像情報、並びに、前記車両の状態を示す車両情報のうち、少なくともいずれかの情報を検出する情報検出部と、前記情報に応じて生成された前記乗員の盛り上がりの度合いを前記会場における複数の前記車両について集計する配信装置に対して、前記情報を送信する情報送信部と、前記配信装置によって集計された前記盛り上がり度合いに基づいて、前記配信装置によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳した前記コンテンツの音源及び前記コンテンツの映像を、前記配信装置から受信する情報受信部と、受信した、前記コンテンツの音源及び前記コンテンツの映像のうち、少なくともいずれかを出力する重畳出力部と、を備え、前記会場に駐車した前記車両の配置情報に基づいて、前記盛り上がり度合いの大きい前記乗員が位置する盛り上がり領域が前記配信装置によって特定され、前記重畳出力部は、前記車両と前記盛り上がり領域との位置関係に応じて、前記乗員に対して、前記盛り上がり領域の方向から前記重畳音が聞こえる、及び、前記盛り上がり領域の方向に前記重畳映像が見える、のうち少なくともいずれかになるように前記重畳音及び前記重畳映像を出力する端末装置を提供する。
また、本発明は、会場において車両に乗車したままコンテンツを鑑賞する乗員の音声情報及び映像情報、並びに、前記車両の状態を示す車両情報のうち、少なくともいずれかの情報を検出する情報検出部と、前記情報に応じて前記乗員の盛り上がりの度合いを生成する盛り上がり度合い生成部と、前記盛り上がり度合いを前記会場における複数の前記車両について集計する配信装置に対して、生成された前記盛り上がり度合いを送信する情報送信部と、前記配信装置によって前記集計された前記盛り上がり度合いに基づいて生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳した前記コンテンツの音源及び前記コンテンツの映像を、前記配信装置から受信する情報受信部と、受信した、前記コンテンツの音源及び前記コンテンツの映像のうち、少なくともいずれかを出力する重畳出力部と、を備え、前記会場に駐車した前記車両の配置情報に基づいて、前記盛り上がり度合いの大きい前記乗員が位置する盛り上がり領域が前記配信装置によって特定され、前記重畳出力部は、前記車両と前記盛り上がり領域との位置関係に応じて、前記乗員に対して、前記盛り上がり領域の方向から前記重畳音が聞こえる、及び、前記盛り上がり領域の方向に前記重畳映像が見える、のうち少なくともいずれかになるように前記重畳音及び前記重畳映像を出力する端末装置を提供する。
さらに、本発明は、複数の車両が駐車した会場における各車両に配置され、前記車両に乗車したままコンテンツを鑑賞する乗員の音声情報及び映像情報、並びに、前記車両の状態を示す車両情報のうち、少なくともいずれかの情報を検出する情報検出部を有する端末装置と、前記情報に応じて生成された前記乗員の盛り上がりの度合いを前記複数の車両について集計するとともに、前記会場に駐車した前記車両の配置情報に基づいて、前記盛り上がり度合いの大きい前記乗員が位置する盛り上がり領域を特定する盛り上がり度合い集計部を有する配信装置と、を備え、前記配信装置は、集計された前記各車両の前記盛り上がり度合いに基づいて生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳した前記コンテンツの音源及び前記コンテンツの映像を各端末装置に配信する配信部をさらに有し、前記各端末装置は、前記各車両と前記盛り上がり領域との位置関係に応じて、前記各車両の前記乗員に対して、前記盛り上がり領域の方向から所定の重畳音が聞こえる、及び、前記盛り上がり領域の方向に所定の重畳映像が見える、のうち少なくともいずれかになるように、前記重畳音及び前記重畳映像を出力する重畳出力部をさらに有する配信システムを提供する。
また、本発明は、会場において車両に乗車したままコンテンツを鑑賞する乗員の音声情報及び映像情報、並びに、前記車両の状態を示す車両情報のうち、少なくともいずれかの情報を検出する情報検出ステップと、前記情報に応じて生成された前記乗員の盛り上がりの度合いを前記会場における複数の前記車両について集計する配信装置に対して、前記情報を送信する送信ステップと、前記配信装置によって集計された前記盛り上がり度合いに基づいて、前記配信装置によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳した前記コンテンツの音源及び前記コンテンツの映像のうち、少なくともいずれかを出力する重畳出力ステップと、を備え、前記重畳出力ステップにおいて、前記会場に駐車した前記車両の配置情報に基づいて、前記盛り上がり度合いの大きい前記乗員が位置する盛り上がり領域が前記配信装置によって特定され、前記車両と前記盛り上がり領域との位置関係に応じて、前記乗員に対して、前記盛り上がり領域の方向から前記重畳音が聞こえる、及び、前記盛り上がり領域の方向に前記重畳映像が見える、のうち少なくともいずれかになるように前記重畳音及び前記重畳映像を出力する配信方法を提供する。
本発明により、他人と一定の距離を保ったまま、音楽ライブ等の臨場感や一体感を向上させることができる端末装置、配信システム及び配信方法を提供することができる。
実施形態１に係る配信システムを例示した概略図である。 実施形態１に係る端末装置を例示した図である。 実施形態１に係る端末装置を例示したブロック図である。 実施形態１に係る別の端末装置を例示したブロックである。 実施形態１に係る配信装置を例示したブロック図である。 実施形態１に係る別の配信装置を例示したブロック図である。 実施形態１に係る配信システムの配信方法を例示したシーケンス図である。 実施形態１に係る別の配信システムの配信方法を例示したシーケンス図である。 実施形態１に係る端末装置の配信方法を例示したフローチャート図である。 実施形態１に係る別の端末装置の配信方法を例示したフローチャート図である。 実施形態１に係る配信装置の配信方法を例示したフローチャート図である。 実施形態１に係る別の配信装置の配信方法を例示したフローチャート図である。 実施形態１に係る電子チケットを例示した図である。 実施形態１に係る駐車場の案内図を例示した図である。
以下、図面を参照して本発明の実施の形態について説明する。各図面において、同一又は対応する要素には同一の符号が付されており、説明の明確化のため、必要に応じて重複説明は省略される。また、図面が煩雑にならないように、いくつかの符号は省略されている。
（実施形態１）
実施形態１に係る配信システムを説明する。図１は、実施形態１に係る配信システムを例示した概略図である。図１に示すように、配信システム１は、例えば、ライブ会場５０等の会場で使用される。以下では、会場の例として、ライブ会場５０を用いて説明する。配信システム１は、複数の端末装置１０、及び、配信装置２０を備えている。端末装置１０は、複数の車両６０が駐車したライブ会場５０における各車両６０に配置されている。配信装置２０は、ライブの演奏等のコンテンツを配信する。以下では、コンテンツの例として、ライブを用いて説明する。端末装置１０は、ライブの演奏等を受信し、受信した演奏等を出力する。以下で、＜ライブ会場＞、＜端末装置＞及び＜配信装置＞の各構成を説明し、その後、＜配信方法＞を説明する。
＜ライブ会場＞
ライブ会場５０は、例えば、車両６０を駐車させて音楽ライブを楽しむドライブイン音楽ライブ・フェスティバルの会場である。なお、ライブ会場５０は、車両６０を駐車させて行われるものであれば、ドライブイン音楽ライブ・フェスティバルの会場に限らない。例えば、ライブは、音楽等の演奏に限らず、演劇、ダンス等の演技、格闘技、テニス等のスポーツ、講演、演説等でもよく、ライブ会場５０は、これらが行われる会場でもよい。このように、ライブ会場５０等の会場は、車両６０の乗員が車両６０に乗車したままライブ等のコンテンツを鑑賞することができる。ライブ会場５０は、ステージ５１、駐車場５２、及び、会場設備５３を有している。
ステージ５１は、駐車場５２の近傍に設けられている。例えば、ステージ５１は、駐車場５２に隣接して設けられている。図では、一方側にステージ５１、他方側に駐車場５２が設けられているが、ステージ５１の周囲を駐車場５２が取り囲んでもよいし、ステージ５１が駐車場５２を取り囲んでもよい。
ステージ５１上において、実演者は、ライブを実演する。例えば、アーティスト等の実演者は、ステージ５１上において、楽曲を披露する等により音楽等を演奏する。なお、ステージ５１上において、実演者は、演劇、ダンス等の演技を行ってもよいし、格闘技、テニス等のスポーツを行ってもよいし、講演、演説等を行ってもよい。また、ステージ５１に、大型のスクリーンまたは表示装置が設けられ、ライブの動画が投影または表示されてもよい。
駐車場５２は、ステージ５１の近傍に設けられている。例えば、駐車場５２は、ステージ５１に隣接して設けられている。駐車場５２には、複数の車両６０が駐車している。複数の車両６０は、図のように、マトリックス状の配置で駐車してもよいし、不規則な配置で駐車してもよい。駐車した車両６０には乗員が乗っている。乗員は、一人でもよいし、複数人でもよい。乗員は、ライブ会場５０において車両６０に乗車したままライブを観ることができる。
会場設備５３は、例えば、会場マイク、会場スピーカ、会場照明機器、及び、会場カメラ等を含む。
会場マイクは、ステージ５１に配置されている。複数の会場マイクがステージ５１に配置されてもよい。会場マイクは、実演者が発声する声、実演者が演奏する音楽を集音する。会場マイクは、駐車場５２に配置されてもよい。複数の会場マイクが駐車場５２に配置されてもよい。会場マイクは、車両のクラクション等の音を集音してもよい。
会場スピーカは、ステージ５１に配置されている。複数の会場スピーカがステージ５１に配置されてもよい。会場スピーカは、実演者が発声する声及び実演者が演奏する音楽の音量を増幅して出力する。会場スピーカは、駐車場５２に配置されてもよい。複数の会場スピーカが駐車場５２に配置されてもよい。
会場照明機器は、ステージ５１に配置されている。複数の会場照明機器がステージ５１に配置されてもよい。会場照明機器は、ステージ５１上の実演者を照明する。会場照明機器は、駐車場５２に配置されてもよい。複数の会場照明機器が駐車場５２に配置されてもよい。
会場カメラは、ステージ５１及びステージ５１上で実演する実演者を撮像する。複数の会場カメラがステージ５１及び実演者を撮像してもよい。会場カメラは、駐車場５２及び駐車場５２に駐車した車両６０を撮像してもよい。複数の会場カメラが駐車場５２及び車両６０を撮像してもよい。
＜端末装置＞
図２は、実施形態１に係る端末装置１０を例示した図である。図２に示すように、端末装置１０は、乗員６１が乗車した車両６０の室内に配置されている。端末装置１０は、例えば、ドライブレコーダ１０Ｄに設けられてもよいし、カーナビゲーション１０Ｃに設けられてもよいし、スマートフォン、タブレット等の携帯端末１０Ｍに設けられてもよい。よって、ドライブレコーダ１０Ｄ、カーナビゲーション１０Ｃ、携帯端末１０Ｍは、端末装置１０を含んでもよい。また、ドライブレコーダ１０Ｄ、カーナビゲーション１０Ｃ、携帯端末１０Ｍが端末装置１０であるということもできる。
図３は、実施形態１に係る端末装置１０を例示したブロック図である。図３に示すように、端末装置１０は、情報検出部１１と、情報送信部１２と、情報受信部１３と、重畳出力部１４とを備えている。
情報検出部１１は、端末マイク３１、端末カメラ３２及び端末センサ３３の少なくともいずれかと、有線または無線の通信回線で接続されている。端末マイク３１及び端末カメラ３２は、ドライブレコーダ１０Ｄ、カーナビゲーション１０Ｃ及び携帯端末１０Ｍ等に内蔵のマイク及びカメラでもよいし、車載可能なマイク及びカメラであれば、個別に外付けされたマイク及びカメラでもよい。
端末マイク３１は、車両６０に乗車したままライブを観る乗員６１の音声情報を検出する。音声情報は、例えば、車両６０の乗員６１の音声を含む。音声情報は、乗員６１の音声の大きさ、音声の高低、音声の長さ等を含んでもよい。また、音声情報は、乗員６１の掛声、歌声、指笛、笑い声、つぶやき、拍手等の音声を含んでもよい。乗員６１の掛声としては、ライブの実演者の名前を呼ぶ声、「イェーイ！」、「オォォー！」、「アンコール！」等が挙げられる。乗員６１の音声情報の検出手段は、乗員６１の映像情報から乗員６１が発話していることを認識して、乗員６１の音声と認識してもよい。
端末カメラ３２は、車両６０に乗車したままライブを観る乗員６１の映像情報を検出する。映像情報は、乗員の体の動きの映像を含む。映像情報は、例えば、車両６０の乗員６１が片手を挙げる動作、両手を挙げる動作、こぶしを突き上げる動作、バンザイをする動作、手を振る動作、頭を左右に揺らす動作、口を開ける動作、涙を拭く動作等の映像を含む。
端末センサ３３は、車両６０の状態を示す車両情報を検出する。車両情報は、例えば、車両６０のクラクション、ライトのパッシング、ステアリングの操舵情報を含む。車両情報は、エンジン、ブレーキ、アクセル、ハンドル等の駆動機構、ライト、方向指示器等の灯火機構、Ｇセンサによる車両の揺れの検出機構、エアコンディショナ、メータ類等の室内機構の各種状態を含んでもよい。端末センサ３３は、車載ネットワークのＣＡＮ（Ｃｏｎｔｒｏｌｌｅｒ Ａｒｅａ Ｎｅｔｗｏｒｋ）を介して車両情報を検出してもよい。
情報検出部１１は、端末マイク３１、端末カメラ３２及び端末センサ３３を介して、ライブ会場５０において車両６０に乗車したままライブ等のコンテンツを鑑賞する乗員６１の音声情報及び映像情報、並びに、車両６０の状態を示す車両情報のうち、少なくともいずれかの情報を検出する。
情報送信部１２は、配信装置２０と、例えば、Ｗｉ－Ｆｉ等の無線の通信回線で接続されている。情報送信部１２は、配信装置２０に対して、検出した音声情報、映像情報及び車両情報のうち、少なくともいずれかの情報を送信する。配信装置２０は、情報送信部１２によって送信された情報に基づいて、所定の重畳音及び所定の重畳映像を生成する。例えば、配信装置２０は、記憶装置等に記憶された音及び映像から、所定の重畳音及び所定の重畳映像を生成する。
所定の重畳音は、例えば、歓声を含む。なお、所定の重畳音は、歓声に限らず、ライブの実演者の名前を呼ぶ声、指笛、笑い声、多数人で合唱された歌声のうち少なくともいずれかを含んでもよい。また、所定の重畳音は、実際の歓声を反映させたものでもよいし、予め準備されたものでもよい。
所定の重畳映像は、観客が手を振る映像、観客がこぶしを突き上げる映像、観客が頭を左右に揺らす映像でもよいし、スポットライト、フラッシュライト、ペンライト等が点滅及び回転する映像でもよいし、紙吹雪が舞う映像でもよい。所定の重畳映像は、実写されたものでもよいし、コンピュータグラフィックスで作製されたものでもよく、予め準備されたものでもよい。
情報受信部１３は、配信装置２０と無線の通信回線で接続されている。情報受信部１３は、配信装置２０によって生成された所定の重畳音及び所定の重畳映像を、配信装置２０から受信する。情報受信部１３は、配信装置２０からライブの音源及びライブの映像を受信してもよい。情報受信部１３は、所定の重畳音及び所定の重畳映像を、ライブの音源及びライブの映像に重畳して受信してもよい。
このようにして、情報受信部１３は、情報送信部１２が送信した情報に基づいて、配信装置２０によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを、ライブの音源及びライブの映像のうち、少なくともいずれかに重畳されて、配信装置２０から受信する。すなわち、情報受信部１３は、配信装置２０によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳したコンテンツの音源及びコンテンツの映像を、配信装置２０から受信する。
重畳出力部１４は、端末スピーカ３４及び端末表示部３５の少なくともいずれかと、有線または無線の通信回線で接続されている。端末スピーカ３４及び端末表示部３５は、ドライブレコーダ１０Ｄ、カーナビゲーション１０Ｃ及び携帯端末１０Ｍ等に内蔵のスピーカ及び表示部でもよいし、車載可能なスピーカ及び表示部であれば、個別に外付けされたスピーカ及び表示部でもよい。
端末スピーカ３４は、配信装置２０から受信したライブの音源を出力する。端末スピーカ３４は、配信装置２０から受信した所定の重畳音を出力する。端末スピーカ３４は、情報受信部１３が配信装置２０から受信した、配信装置２０によって生成された所定の重畳音を重畳したコンテンツの音源を出力する。なお、端末スピーカ３４は、ＦＭ放送を介してライブの音源を出力してもよい。その場合には、所定の重畳音をＦＭ放送に重畳させて出力する。
端末表示部３５は、例えば、ディスプレイ、投影機等である。ディスプレイは、例えば、液晶画面である。ディスプレイは、ドライブレコーダ１０Ｄ、カーナビゲーション１０Ｃ及び携帯端末１０Ｍに設けられたディスプレイでもよいし、ヘッドアップディスプレイ（ＨＵＤ）でもよい。投影機は、例えば、フロントウィンドウ、サイドウィンドウ等に投影する。
端末表示部３５は、配信装置２０から受信したライブの映像を出力する。端末表示部３５は、配信装置２０から受信した所定の重畳映像を出力する。端末表示部３５は、情報受信部１３が配信装置２０から受信した、配信装置２０によって生成された所定の重畳映像を重畳したコンテンツの映像を出力する。
このようにして、重畳出力部１４は、配信装置２０から受信した、所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを、重畳したコンテンツの音源及びコンテンツの映像のうち、少なくともいずれかを出力する。
図４は、実施形態１に係る別の端末装置１０ａを例示したブロックである。図４に示すように、端末装置１０ａは、情報検出部１１が検出した情報に応じて乗員の盛り上がりの度合いを生成する盛り上がり度合い生成部２２を備えてもよい。盛り上がり度合い生成部２２については後述する。端末装置１０ａの情報送信部１２は、生成した盛り上がり度合いを配信装置２０ａに対して送信してもよい。端末装置１０ａにおける盛り上がり度合い生成部２２及び情報送信部１２以外は、端末装置１０と同様である。
＜配信装置＞
配信装置２０は、例えば、ライブ会場５０に配置されている。配信装置２０は、端末装置１０と無線の通信回線で接続されている。また、配信装置２０は、会場設備５３と有線又は無線の通信回線で接続されている。なお、配信装置２０は、ライブ会場５０に配置されたものに限らず、会場設備５３に有線又は無線の通信回線で接続された所定の場所に配置されてもよいし、会場設備５３に有線又は無線の通信回線で接続されたクラウド上に配置されてもよい。配信装置２０は、ライブ会場５０に駐車した複数の車両６０とインターネットを介して接続されてもよい。
図５は、実施形態１に係る配信装置２０を例示したブロック図である。図５に示すように、配信装置２０は、情報受信部２１と、盛り上がり度合い生成部２２と、盛り上がり度合い集計部２３と、配信部２４と、を備えている。
情報受信部２１は、端末装置１０の情報送信部１２と無線の通信回線で接続されている。情報受信部２１は、情報送信部１２から音声情報、映像情報及び車両情報のうち、少なくともいずれかの情報を受信する。
盛り上がり度合い生成部２２は、受信した音声情報、映像情報及び車両情報のうち、少なくともいずれかの情報に応じて乗員６１の盛り上がりの度合いを生成する。
盛り上がり度合いは、乗員６１がどの程度盛り上がっているかを示す指標である。例えば、盛り上がり度合い生成部２２は、音声情報から盛り上がり度合いを生成する。盛り上がり度合い生成部２２は、乗員６１が発する音量に応じて、盛り上がり度合いを生成してもよい。乗員６１が発する音量が大きいほど、盛り上がり度合いを大きくしてもよい。また、乗員６１が発する音程の高さが高いほど、盛り上がり度合いを大きくしてもよい。さらに、乗員が発する音声の長さが長いほど、盛り上がり度合いを大きくしてもよい。乗員６１が発する特定の言葉に応じて、盛り上がり度合いを生成してもよい。
例えば、乗員６１が「実演者の名前」「エイ」「最高」等を発声したときは、盛り上がり度合いを大きくしてもよい。また、これらの言葉を発した回数に応じて盛り上がり度合いを大きくしてもよい。また、乗員６１の指笛、笑い声、多数人で合唱された歌声がある場合には、盛り上がり度合いを大きくしてもよい。
盛り上がり度合い生成部２２は、映像情報から盛り上がり度合いを生成してもよい。盛り上がり度合い生成部２２は、乗員６１の体の動きに応じて、盛り上がり度合いを生成してもよい。例えば、乗員６１の体の動きが大きいほど、盛り上がり度合いを大きくしてもよい。また、乗員６１の体の動きが速いほど、盛り上がり度合いを大きくしてもよい。さらに、こぶしを突き上げる、頭を左右に振る等の特定の動作の場合に、盛り上がり度合いを大きくしてもよい。また、これらの動作を行った回数に応じて盛り上がり度合いを大きくしてもよい。
盛り上がり度合い生成部２２は、車両情報から盛り上がり度合いを生成してもよい。盛り上がり度合い生成部２２は、クラクション、ライトのパッシング及びステアリング操作等の動作に応じて、盛り上がり度合いを生成してもよい。クラクションを鳴らす回数及びライトのパッシングの回数が大きいほど、盛り上がり度合いを大きくしてもよい。ハンドルを操作する回数が大きいほど、盛り上がり度合いを大きくしてもよい。
盛り上がり度合い集計部２３は、ライブ会場５０における複数の車両６０の乗員６１の盛り上がり度合いをそれぞれ集計する。具体的には、盛り上がり度合い集計部２３は、音声情報、映像情報及び車両情報のうち、少なくともいずれかの情報に応じて生成された乗員の盛り上がりの度合いをライブ会場５０における複数の車両６０について集計する。また、盛り上がり度合い集計部２３は、ライブ会場５０に駐車した車両６０の配置情報に基づいて、盛り上がり度合いの大きい乗員６１が位置する盛り上がり領域を特定する。
例えば、図１に示すように、駐車場５２の中央に配置された車両６０Ｃから見て、右側ＲＳよりも左側ＬＳの方に多くの盛り上がり度合いの大きい乗員６１が位置している場合には、盛り上がり度合い集計部２３は、左側ＬＳの領域を、盛り上がり領域６２として特定する。
配信部２４は、集計した盛り上がり度合いに応じた所定の重畳音及び所定の重畳映像を、それぞれの車両６０に配信する。また、配信部２４は、ライブの音源及びライブの映像を車両６０に配信してもよい。よって、配信部２４は、盛り上がり度合いに応じた所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを、ライブの音源及びライブの映像のうち、少なくともいずれかに重畳させて、それぞれの車両６０に配信してもよい。すなわち、配信部２４は、集計された各車両６０の盛り上がり度合いに基づいて生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳したライブの音源及びライブの映像を各端末装置１０に配信する。これを受けて、端末装置１０の情報受信部１３は、配信装置２０によって集計された盛り上がり度合いに基づいて、配信装置２０によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳したライブの音源及びライブの映像を、配信装置２０から受信する。そして、端末装置１０の重畳出力部１４は、情報受信部１３が受信した、配信装置２０によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳したライブの音源及びライブの映像のうち、少なくともいずれかを出力する。
配信部２４は、それぞれの車両６０と盛り上がり領域６２との位置関係に応じて、それぞれの車両６０の乗員６１に対して、盛り上がり領域６２の方向から重畳音が聞こえる、及び、盛り上がり領域６２の方向に重畳映像が見える、のうち少なくともいずれかになるように、それぞれの車両６０に重畳音及び重畳映像を配信してもよい。これを受けて、各端末装置１０の重畳出力部１４は、車両６０と盛り上がり領域６２との位置関係に応じて、各車両６０の乗員６１に対して、盛り上がり領域６２の方向から重畳音が聞こえる、及び、盛り上がり領域６２の方向に重畳映像が見える、のうち少なくともいずれかになるように、重畳音及び重畳映像を出力する。
例えば、図１に示すように、配信部２４は、車両６０Ｃと盛り上がり領域６２との位置関係に応じて、車両６０Ｃの乗員６１に対して、左側ＬＳの方向から歓声が聞こえるように重畳音を重畳したライブの音源を配信する。これにより、重畳出力部１４は、左側ＬＳの方向から歓声が聞こえるように重畳音を重畳したライブの音源を出力する。また、配信部２４は、左側ＬＳの方向に観客の突き上げたこぶしやペンライトが見えるように重畳映像を重畳したライブの映像を配信する。これにより、重畳出力部１４は、左側ＬＳの方向に観客の突き上げたこぶしやペンライトが見えるように重畳映像を重畳したライブの映像を出力する。
また、配信部２４は、駐車場５２の後方に配置された車両６０Ｂと盛り上がり領域６２との位置関係に応じて、車両６０Ｂの乗員６１に対して、前方から歓声が聞こえるように重畳音を重畳したライブの音源を配信する。これにより、重畳出力部１４は、前方から歓声が聞こえるように重畳音を重畳したライブの音源を出力する。また、配信部２４は、前方に観客の突き上げたこぶしやペンライトが見えるように重畳映像を重畳したライブの映像を配信する。これにより、重畳出力部１４は、前方に観客の突き上げたこぶしやペンライトが見えるように重畳映像を重畳したライブの映像を出力する。
図６は、実施形態１に係る別の配信装置２０ａを例示したブロック図である。図４に示すように、端末装置１０ａが盛り上がり度合い生成部２２を備える場合には、図６に示すように、配信装置２０ａは、盛り上がり度合い生成部２２を備えなくてもよい。その場合には、配信装置２０ａの情報受信部２１は、端末装置１０ａの盛り上がり度合い生成部２２が生成した盛り上がり度合いを端末装置１０ａから受信する。配信装置２０ａにおける盛り上がり度合い生成部２２及び情報受信部２１以外は、配信装置２０と同様である。
以上、説明したように、本実施形態の配信システム１は、車両６０に乗車したままライブ会場５０においてライブを観る乗員６１の音声情報及び映像情報、並びに、車両６０の状態を示す車両情報のうち、少なくともいずれかの情報を検出する。そして、配信システム１は、音声情報、映像情報及び車両情報に応じて乗員６１の盛り上がりの度合いを生成し、ライブ会場５０における複数の車両６０の盛り上がり度合いをそれぞれ集計する。集計した盛り上がり度合いに応じた所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを、ライブの音源及びライブの映像のうち、少なくともいずれかに重畳させる。これにより、車両６０の乗員６１は、所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳したライブの音源及びライブの映像を鑑賞することができる。
＜配信方法＞
次に、配信システム１の動作として、配信方法を説明する。図７は、実施形態１に係る配信システム１の配信方法を例示したシーケンス図である。
図７のステップＳ１１に示すように、端末装置１０は、音声情報、映像情報及び車両情報を検出する。具体的には、端末装置１０の情報検出部１１は、ライブ会場５０において車両６０に乗車したままライブを観る乗員６１の音声情報、映像情報及び車両情報のうち、少なくともいずれかの情報を検出する。
次に、ステップＳ１２に示すように、端末装置１０は、音声情報、映像情報及び車両情報を配信装置２０に送信する。具体的には、端末装置１０の情報送信部１２は、配信装置２０の情報受信部２１に対して、検出した音声情報、映像情報及び車両情報のうち、少なくともいずれかの情報を送信する。
次に、ステップＳ１３に示すように、配信装置２０は、音声情報、映像情報及び車両情報を受信する。具体的には、配信装置２０の情報受信部２１は、端末装置１０から送信された音声情報、映像情報及び車両情報のうち、少なくともいずれかの情報を受信する。
次に、ステップＳ１４に示すように、配信装置２０は、盛り上がり度合いを生成する。具体的には、配信装置２０の盛り上がり度合い生成部２２は、音声情報、映像情報及び車両情報のうち、少なくともいずれかに応じて車両６０の乗員６１の盛り上がりの度合いを生成する。
次に、ステップＳ１５に示すように、配信装置２０は、盛り上がり度合いを集計する。具体的には、配信装置２０の盛り上がり度合い集計部２３は、ライブ会場５０における複数の車両６０の乗員６１の盛り上がり度合いをそれぞれ集計する。なお、ステップＳ１５において、盛り上がり度合い集計部２３は、ライブ会場５０に駐車した車両６０の配置情報に基づいて、盛り上がり度合いの大きい乗員６１が位置する盛り上がり領域６２を特定してもよい。
次に、ステップＳ１６に示すように、配信装置２０は、所定の重畳音及び所定の重畳映像を重畳したライブの音源及びライブの映像を配信する。具体的には、配信装置２０の配信部２４は、集計した盛り上がり度合いに基づいて、所定の重畳音及び所定の重畳映像を生成し、生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳したライブの音源及びライブの映像を、それぞれの車両６０に配信する。なお、ステップＳ１６において、配信部２４は、それぞれの車両６０と盛り上がり領域６２との位置関係に応じて、それぞれの車両６０の乗員６１に対して、盛り上がり領域６２の方向から重畳音が聞こえる、及び、盛り上がり領域６２の方向に重畳映像が見える、のうち少なくともいずれかになるように、それぞれの車両６０に、所定の重畳音及び所定の重畳映像を配信してもよい。
次に、ステップＳ１７に示すように、端末装置１０は、所定の重畳音及び所定の重畳映像を重畳したライブの音源及びライブの映像を受信する。具体的には、端末装置１０の情報受信部１３は、配信部２４によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳したライブの音源及びライブの映像を配信装置２０から受信する。
次に、ステップＳ１８に示すように、端末装置１０は、所定の重畳音及び所定の重畳映像を重畳したライブの音源及びライブの映像を出力する。具体的には、端末装置１０の重畳出力部１４は、受信した所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳したライブの音源及びライブの映像のうち、少なくともいずれかを出力する。
図８は、実施形態１に係る別の配信システムの配信方法を例示したシーケンス図である。端末装置１０ａ及び配信装置２０ａを備えた別の配信システムにおいて、端末装置１０ａは、盛り上がり度合い生成部２２を有している。この場合には、配信装置２０ａは、盛り上がり度合い生成部２２を有していなくてもよい。したがって、図８のステップＳ１２ａに示すように、端末装置１０ａの盛り上がり度合い生成部２２は、情報検出部１１が検出した情報に応じて、盛り上がり度合いを生成する。そして、ステップＳ１３ａに示すように、端末装置１０ａの情報送信部１２は、生成した盛り上がり度合いを配信装置２０ａに対して送信する。そうすると、ステップＳ１４ａに示すように、配信装置２０ａの情報受信部２１は、送信された盛り上がり度合いを受信する。これ以外の端末装置１０ａ及び配信装置２０ａの動作は、端末装置１０及び配信装置２０の動作と同様である。
このように、本実施形態の配信方法は、車両６０に乗車したままライブ会場においてライブを観る乗員６１の音声情報及び映像情報、並びに、車両６０の状態を示す車両情報のうち、少なくともいずれかの情報を検出する。そして、音声情報、映像情報及び車両情報に応じて乗員６１の盛り上がりの度合いを生成し、ライブ会場５０における複数の車両６０の盛り上がり度合いをそれぞれ集計する配信装置２０に対して、検出した情報を送信する。集計した盛り上がり度合いに基づいて、配信装置２０によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳したライブの音源及びライブの映像のうち、少なくともいずれかを出力する。重畳したライブの音源及びライブの映像のうち、少なくともいずれかを出力する際に、ライブ会場５０に駐車した車両６０の配置情報に基づいて、盛り上がり度合いの大きい乗員６１が位置する盛り上がり領域６２が配信装置２０によって特定されてもよい。その場合には、車両６０と盛り上がり領域６２との位置関係に応じて、乗員６１に対して、盛り上がり領域６２の方向から重畳音が聞こえる、及び、盛り上がり領域６２の方向に重畳映像が見える、のうち少なくともいずれかになるように重畳音及び重畳映像を出力する。
図９は、実施形態１に係る端末装置１０の配信方法を例示したフローチャート図である。図９に示すように、端末装置１０の配信方法は、情報検出ステップＳ２１、情報送信ステップＳ２２、情報受信ステップＳ２３及び重畳出力ステップＳ２４を有している。
まず、情報検出ステップＳ２１において、端末装置１０の情報検出部１１は、ライブ会場５０において車両６０に乗車したままライブを観る乗員６１の音声情報、映像情報及び車両情報のうち、少なくともいずれかの情報を検出する。
次に、情報送信ステップＳ２２において、端末装置１０の情報送信部１２は、配信装置２０に対して、検出した音声情報、映像情報及び車両情報のうち、少なくともいずれかの情報を送信する。
次に、情報受信ステップＳ２３において、端末装置１０の情報受信部１３は、配信装置２０から送信された所定の重畳音及び所定の重畳映像が重畳したライブの音源及びライブの映像を受信する。具体的には、情報受信部１３は、配信装置２０によって集計された盛り上がり度合いに基づいて、配信装置２０によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳したライブの音源及びライブの映像を受信する。
次に、重畳出力ステップＳ２４において、端末装置１０の重畳出力部１４は、受信した所定の重畳音及び所定の重畳映像が重畳したライブの音源及びライブの映像を出力する。具体的には、重畳出力部１４は、配信装置２０によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳したライブの音源及びライブの映像を出力する。なお、重畳出力ステップＳ２４において、ライブ会場５０に駐車した車両６０の配置情報に基づいて、盛り上がり度合いの大きい乗員６１が位置する盛り上がり領域６２が配信装置２０によって特定されてもよい。そして、車両６０と盛り上がり領域６２との位置関係に応じて、乗員６１に対して、盛り上がり領域６２の方向から重畳音が聞こえる、及び、盛り上がり領域６２の方向に重畳映像が見える、のうち少なくともいずれかになるように重畳音及び重畳映像を出力してもよい。このようにして、端末装置１０は、ライブを受信し出力する。
図１０は、実施形態１に係る別の端末装置１０ａの配信方法を例示したフローチャート図である。図１０のステップＳ２１ａに示すように、端末装置１０ａは、盛り上がり度合い生成部２２を有し、検出した情報に応じて盛り上がり度合いを生成してもよい。その場合には、情報送信ステップＳ２２において、端末装置１０ａの情報送信部１２は、生成した盛り上がり度合いを配信装置２０ａに対して送信する。これ以外の端末装置１０ａの動作は、端末装置１０の動作と同様である。
図１１は、実施形態１に係る配信装置２０の配信方法を例示したフローチャート図である。図１１に示すように、配信装置２０の配信方法は、情報受信ステップＳ３１、盛り上がり度合い生成ステップＳ３２、盛り上がり度合い集計ステップＳ３３及び配信ステップＳ３４を有している。
まず、情報受信ステップＳ３１において、配信装置２０の情報受信部２１は、ライブ会場５０において車両６０に乗車したままライブを観る乗員６１の音声情報、映像情報及び車両情報のうち、少なくともいずれかの情報を端末装置１０から受信する。
次に、盛り上がり度合い生成ステップＳ３２において、配信装置２０の盛り上がり度合い生成部２２は、音声情報、映像情報及び車両情報のうち、少なくともいずれかに応じて乗員６１の盛り上がりの度合いを生成する。
次に、盛り上がり度合い集計ステップＳ３３において、配信装置２０の盛り上がり度合い集計部２３は、ライブ会場５０における複数の車両６０の乗員６１の盛り上がり度合いをそれぞれ集計する。盛り上がり度合い集計ステップＳ３３において、ライブ会場５０に駐車した車両６０の配置情報に基づいて、盛り上がり度合いの大きい乗員６１が位置する盛り上がり領域６２を特定してもよい。
次に、配信ステップＳ３４において、配信装置２０の配信部２４は、集計した盛り上がり度合いに応じた所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを、ライブの音源及びライブの映像のうち、少なくともいずれかに重畳させて、それぞれの車両６０に配信する。すなわち、配信部２４は、盛り上がり度合い集計部２３によって集計された盛り上がり度合いに基づいて、所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを生成する。そして、配信部２４は、生成した所定の重畳音及び所定の重畳映像を重畳したライブの音源及びライブの映像をそれぞれの車両６０に配信する。配信ステップＳ３４において、それぞれの車両６０と盛り上がり領域６２との位置関係に応じて、それぞれの車両６０の乗員６１に対して、盛り上がり領域の方向から重畳音が聞こえるように、ライブの音源に重畳させて配信してもよい。また、それぞれの車両６０の乗員６１に対して、盛り上がり領域の方向に重畳映像が見えるように、ライブの映像に重畳させて配信してもよい。
図１２は、実施形態１に係る別の配信装置２０ａの配信方法を例示したフローチャート図である。図１２にしめすように、別の配信装置２０ａは、盛り上がり度合い生成ステップを有していなくてもよい。この場合には、情報受信ステップＳ３１において、配信装置２０ａの情報受信部２１は、端末装置１０ａから、盛り上がり度合いを受信する。これ以外の配信装置２０ａの動作は、配信装置２０の動作と同様である。
次に、本実施形態の効果を説明する。本実施形態の配信システム１は、ライブ会場５０等の会場において車両６０に乗車したままライブ等のコンテンツを鑑賞する乗員６１の盛り上がり度合いに応じた所定の重畳音及び所定の重畳映像を、ライブの音源及びライブの映像に重畳させる。よって、車両６０の乗員６１は、他人との一定の距離を保ったまま、音楽ライブ等の臨場感や一体感を向上させることができる。
配信システム１は、車両６０に乗車したままライブ等のコンテンツを鑑賞する乗員６１の音声情報、映像情報及び車両情報に応じて乗員６１の盛り上がりの度合いを生成する。よって、乗員６１の盛り上がり度合いを的確に把握することができる。また、配信システム１は、ライブ会場５０における複数の車両６０の乗員６１の盛り上がり度合いをそれぞれ集計するので、他の車両６０に対する乗員６１の盛り上がり度合いを的確に把握することができる。よって、ライブ会場５０における盛り上がり領域６２を的確に把握することができる。
車両６０の乗員６１に対して、盛り上がり領域６２の方向から重畳音が聞こえるように、重畳音を車両６０に配信する。また、車両６０の乗員６１に対して、盛り上がり領域６２の方向に重畳映像が見えるように、重畳映像を車両６０に配信する。よって、臨場感を向上させることができる。また、盛り上がり領域６２と自車との位置関係に応じた盛り上がり度合いを表現することができ、盛り上がりの指向性を感じて臨場感を向上させることができる。
配信装置２０は、ライブを観る乗員６１の盛り上がり度合いに応じて、ライブ会場５０全体にフィードバックしてもよい。例えば、配信装置２０は、盛り上がり度合いに応じた所定の重畳音及び所定の重畳映像を、会場設備５３の会場スピーカ、会場照明機器、スクリーン及び表示装置に出力させてもよい。これによっても、音楽ライブ等の臨場感や一体感を向上させることができる。
次に、配信装置２０の盛り上がり度合い集計部２３が複数の車両６０の配置位置を取得する方法を説明する。図１３は、実施形態１に係る電子チケットを例示した図である。図１４は、実施形態１に係る駐車場５２の案内図を例示した図である。図１３及び図１４に示すように、例えば、車両６０の乗員６１は、スマートフォン等の携帯端末１０Ｍの表示画面に表示される電子チケットにより、車両６０の駐車位置を通知される。また、乗員６１は、表示画面に表示される案内図にしたがって駐車位置に車両６０を駐車させる。配信装置２０は、このような車両６０の駐車位置の情報を取得する。これにより、配信装置２０の盛り上がり度合い集計部２３は、複数の車両６０の配置位置を集計に用いることができる。
なお、電子チケット及び案内図は、携帯端末１０Ｍに限らず、カーナビゲーション１０Ｃ及びドライブレコーダ１０Ｄに表示されてもよい。
（実施形態２）
次に、実施形態２に係る配信システムを説明する。前述の実施形態１では、配信装置２０の配信部２４は、所定の重畳音及び所定の重畳映像を重畳したライブの音源及びライブの映像を端末装置１０に配信したが、本実施形態では、配信装置２０の配信部２４は、集計した盛り上がり度合いと、ライブの音源及びライブの映像とを端末装置１０に配信する。一方、端末装置１０の情報受信部１３は、集計した盛り上がり度合いと、ライブの音源及びライブの映像とを配信装置２０から受信する。そして、端末装置１０の重畳出力部１４は、集計した盛り上がり度合いに応じた所定の重畳音及び所定の重畳映像を、ライブの音源及びライブの映像に重畳させて出力する。
このように、実施形態１では、配信装置２０の配信部２４が、ライブの音源及びライブの映像に、所定の重畳音及び所定の重畳映像を重畳させたが、実施形態２では、端末装置１０の重畳出力部１４が、ライブの音源及びライブの映像に、所定の重畳音及び所定の重畳映像を重畳させる。本実施形態では、端末装置１０は、所定の重畳音及び所定の重畳映像を生成してもよい。例えば、端末装置１０は、記憶装置に記憶された音及び映像から、所定の重畳音及び所定の重畳映像を生成してもよい。
本実施形態でも、車両６０の乗員６１は、他人との一定の距離を保ったまま、音楽ライブ等の臨場感や一体感を向上させることができる。これ以外の構成、動作及び効果は、実施形態１の記載に含まれている。
なお、本発明は上記実施形態１及び２に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。例えば、実施形態１及び２の各構成を組み合わせたものも、実施形態の技術的思想の範囲内である。また、下記に示す配信装置、端末装置、配信方法及び配信プログラムも、実施形態の技術思想の範囲内である。
（付記１）
ライブ会場において車両に乗車したままライブを観る乗員の音声情報及び映像情報、並びに、前記車両の状態を示す車両情報のうち、少なくともいずれかの情報を受信する情報受信部と、
受信した前記情報に応じて前記乗員の盛り上がりの度合いを生成する盛り上がり度合い生成部と、
前記ライブ会場における複数の前記車両の前記乗員の前記盛り上がり度合いをそれぞれ集計する盛り上がり度合い集計部と、
集計した前記盛り上がり度合いに応じた所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを、前記ライブの音源及び前記ライブの映像のうち、少なくともいずれかに重畳させて、それぞれの前記車両に配信する配信部と、
を備えた配信装置。
（付記２）
前記盛り上がり度合い集計部は、前記ライブ会場に駐車した前記車両の配置情報に基づいて、前記盛り上がり度合いの大きい前記乗員が位置する盛り上がり領域を特定し、
前記配信部は、それぞれの前記車両と前記盛り上がり領域との位置関係に応じて、それぞれの前記車両の前記乗員に対して、前記盛り上がり領域の方向から前記重畳音が聞こえる、及び、前記盛り上がり領域の方向に前記重畳映像が見える、のうち少なくともいずれかになるように、それぞれの前記車両に前記重畳音及び前記重畳映像を配信する、
付記１に記載の配信装置。
（付記３）
ライブ会場において車両に乗車したままライブを観る乗員の音声情報及び映像情報、並びに、前記車両の状態を示す車両情報のうち、少なくともいずれかの情報を受信する情報受信ステップと、
受信した前記情報に応じて前記乗員の盛り上がりの度合いを生成する盛り上がり度合い生成ステップと、
前記ライブ会場における複数の前記車両の前記乗員の前記盛り上がり度合いをそれぞれ集計する盛り上がり度合い集計ステップと、
集計した前記盛り上がり度合いに応じた所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを、前記ライブの音源及び前記ライブの映像のうち、少なくともいずれかに重畳させて、それぞれの前記車両に配信する配信ステップと、
を備えた配信装置の配信方法。
１ 配信システム
１０、１０ａ 端末装置
１０Ｃ カーナビゲーション
１０Ｄ ドライブレコーダ
１０Ｍ 携帯端末
１１ 情報検出部
１２ 情報送信部
１３ 情報受信部
１４ 重畳出力部
２０、２０ａ 配信装置
２１ 情報受信部
２２ 盛り上がり度合い生成部
２３ 盛り上がり度合い集計部
２４ 配信部
３１ 端末マイク
３２ 端末カメラ
３３ 端末センサ
３４ 端末スピーカ
３５ 端末表示部
５０ ライブ会場
５１ ステージ
５２ 駐車場
５３ 会場設備
６０、６０Ｂ、６０Ｃ 車両
６１ 乗員
６２ 盛り上がり領域

Claims (5)

  1. 会場において車両に乗車したままコンテンツを鑑賞する乗員の音声情報及び映像情報、並びに、前記車両の状態を示す車両情報のうち、少なくともいずれかの情報を検出する情報検出部と、
    前記情報に応じて生成された前記乗員の盛り上がりの度合いを前記会場における複数の前記車両について集計する配信装置に対して、前記情報を送信する情報送信部と、
    前記配信装置によって集計された前記盛り上がり度合いに基づいて、前記配信装置によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳した前記コンテンツの音源及び前記コンテンツの映像を、前記配信装置から受信する情報受信部と、
    受信した、前記コンテンツの音源及び前記コンテンツの映像のうち、少なくともいずれかを出力する重畳出力部と、
    を備え、
    前記会場に駐車した前記車両の配置情報に基づいて、前記盛り上がり度合いの大きい前記乗員が位置する盛り上がり領域が前記配信装置によって特定され、
    前記重畳出力部は、前記車両と前記盛り上がり領域との位置関係に応じて、前記乗員に対して、前記盛り上がり領域の方向から前記重畳音が聞こえる、及び、前記盛り上がり領域の方向に前記重畳映像が見える、のうち少なくともいずれかになるように前記重畳音及び前記重畳映像を出力する、
    端末装置。
  2. 会場において車両に乗車したままコンテンツを鑑賞する乗員の音声情報及び映像情報、並びに、前記車両の状態を示す車両情報のうち、少なくともいずれかの情報を検出する情報検出部と、
    前記情報に応じて前記乗員の盛り上がりの度合いを生成する盛り上がり度合い生成部と、
    前記盛り上がり度合いを前記会場における複数の前記車両について集計する配信装置に対して、生成された前記盛り上がり度合いを送信する情報送信部と、
    前記配信装置によって、前記集計された前記盛り上がり度合いに基づいて生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳した前記コンテンツの音源及び前記コンテンツの映像を、前記配信装置から受信する情報受信部と、
    受信した、前記コンテンツの音源及び前記コンテンツの映像のうち、少なくともいずれかを出力する重畳出力部と、
    を備え、
    前記会場に駐車した前記車両の配置情報に基づいて、前記盛り上がり度合いの大きい前記乗員が位置する盛り上がり領域が前記配信装置によって特定され、
    前記重畳出力部は、前記車両と前記盛り上がり領域との位置関係に応じて、前記乗員に対して、前記盛り上がり領域の方向から前記重畳音が聞こえる、及び、前記盛り上がり領域の方向に前記重畳映像が見える、のうち少なくともいずれかになるように前記重畳音及び前記重畳映像を出力する、
    端末装置。
  3. 前記所定の重畳音は、歓声、前記コンテンツの実演者の名前を呼ぶ声、指笛、笑い声、多数人で合唱された歌声のうち少なくともいずれかを含む、
    請求項１または２に記載の端末装置。
  4. 複数の車両が駐車した会場における各車両に配置され、前記車両に乗車したままコンテンツを鑑賞する乗員の音声情報及び映像情報、並びに、前記車両の状態を示す車両情報のうち、少なくともいずれかの情報を検出する情報検出部を有する端末装置と、
    前記情報に応じて生成された前記乗員の盛り上がりの度合いを前記複数の車両について集計するとともに、前記会場に駐車した前記車両の配置情報に基づいて、前記盛り上がり度合いの大きい前記乗員が位置する盛り上がり領域を特定する盛り上がり度合い集計部を有する配信装置と、
    を備え、
    前記配信装置は、集計された前記各車両の前記盛り上がり度合いに基づいて生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳した前記コンテンツの音源及び前記コンテンツの映像を各端末装置に配信する配信部をさらに有し、
    前記各端末装置は、前記各車両と前記盛り上がり領域との位置関係に応じて、前記各車両の前記乗員に対して、前記盛り上がり領域の方向から所定の重畳音が聞こえる、及び、前記盛り上がり領域の方向に所定の重畳映像が見える、のうち少なくともいずれかになるように、前記重畳音及び前記重畳映像を出力する重畳出力部をさらに有する、
    配信システム。
  5. 会場において車両に乗車したままコンテンツを鑑賞する乗員の音声情報及び映像情報、並びに、前記車両の状態を示す車両情報のうち、少なくともいずれかの情報を検出する情報検出ステップと、
    前記情報に応じて生成された前記乗員の盛り上がりの度合いを前記会場における複数の前記車両について集計する配信装置に対して、前記情報を送信する送信ステップと、
    前記配信装置によって集計された前記盛り上がり度合いに基づいて、前記配信装置によって生成された所定の重畳音及び所定の重畳映像のうち、少なくともいずれかを重畳した前記コンテンツの音源及び前記コンテンツの映像のうち、少なくともいずれかを出力する重畳出力ステップと、
    を備え、
    前記重畳出力ステップにおいて、
    前記会場に駐車した前記車両の配置情報に基づいて、前記盛り上がり度合いの大きい前記乗員が位置する盛り上がり領域が前記配信装置によって特定され、
    前記車両と前記盛り上がり領域との位置関係に応じて、前記乗員に対して、前記盛り上がり領域の方向から前記重畳音が聞こえる、及び、前記盛り上がり領域の方向に前記重畳映像が見える、のうち少なくともいずれかになるように前記重畳音及び前記重畳映像を出力する、
    配信方法。
JP2021010205A 2021-01-26 2021-01-26 端末装置、配信システム及び配信方法 Active JP7608845B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2021010205A JP7608845B2 (ja) 2021-01-26 2021-01-26 端末装置、配信システム及び配信方法
PCT/JP2021/032073 WO2022162990A1 (ja) 2021-01-26 2021-09-01 端末装置、配信システム及び配信方法
CN202180079871.5A CN116547745A (zh) 2021-01-26 2021-09-01 终端装置、分发系统以及分发方法
US18/196,504 US20230283833A1 (en) 2021-01-26 2023-05-12 Terminal apparatus, delivery system, and delivery method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021010205A JP7608845B2 (ja) 2021-01-26 2021-01-26 端末装置、配信システム及び配信方法

Publications (2)

Publication Number Publication Date
JP2022114077A JP2022114077A (ja) 2022-08-05
JP7608845B2 true JP7608845B2 (ja) 2025-01-07

Family

ID=82654382

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021010205A Active JP7608845B2 (ja) 2021-01-26 2021-01-26 端末装置、配信システム及び配信方法

Country Status (4)

Country Link
US (1) US20230283833A1 (ja)
JP (1) JP7608845B2 (ja)
CN (1) CN116547745A (ja)
WO (1) WO2022162990A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024047816A1 (ja) * 2022-08-31 2024-03-07 日本電信電話株式会社 映像関連音再生方法、映像関連音再生装置及び映像関連音再生プログラム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080127574A1 (en) 2006-12-04 2008-06-05 Yi Chol H Shopping mall with vehicle-accessible entertainment area, and methods of operating same
JP2020156109A (ja) 2014-07-18 2020-09-24 ソニー株式会社 情報処理装置、情報処理方法、プログラム、および情報処理システム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080127574A1 (en) 2006-12-04 2008-06-05 Yi Chol H Shopping mall with vehicle-accessible entertainment area, and methods of operating same
JP2020156109A (ja) 2014-07-18 2020-09-24 ソニー株式会社 情報処理装置、情報処理方法、プログラム、および情報処理システム

Also Published As

Publication number Publication date
CN116547745A (zh) 2023-08-04
JP2022114077A (ja) 2022-08-05
WO2022162990A1 (ja) 2022-08-04
US20230283833A1 (en) 2023-09-07

Similar Documents

Publication Publication Date Title
US8753166B2 (en) Audio animation system
US20130013089A1 (en) Stage production system, subsystem for controlling production, operation method and program thereof
JP2024019661A (ja) 情報処理装置、情報処理方法および情報処理プログラム
CN103581288A (zh) 移动物体、系统和存储介质
US20110304735A1 (en) Method for Producing a Live Interactive Visual Immersion Entertainment Show
JP7505491B2 (ja) 情報処理装置、情報処理方法及びプログラム
CN112929610B (zh) 一种基于音视频的低成本虚拟现实车展辅助系统
JP7608845B2 (ja) 端末装置、配信システム及び配信方法
WO2012022361A1 (en) Method for providing multimedia data to a user
WO2022004103A1 (ja) 演出効果制御方法、端末装置の動作方法、演出効果制御システムおよび端末装置
JP6951610B1 (ja) 音声処理システム、音声処理装置、音声処理方法、及び音声処理プログラム
JP6153149B1 (ja) バス
JP7442979B2 (ja) カラオケシステム
WO2018008434A1 (ja) 演奏上演装置
CN108564394B (zh) 一种有声广告投放方法和终端
JP2016213667A (ja) 感覚提示装置
KR101809617B1 (ko) 마이콘서트시스템
WO2021242325A1 (en) Interactive remote audience projection system
Harju Audio Augmented Reality: Concepts, Technologies and Narratives
JP3899326B2 (ja) 鉄道車両用映像装置及び鉄道車両
CN220483200U (zh) 三维立体声车载音响
JP2002027453A (ja) コンサート臨場感補助システム
KR20240110689A (ko) 가상체험 콘서트 시스템 및 방법
Ozawa et al. Instantaneous evaluation of the sense of presence in audio-visual content
US20250008195A1 (en) Information processing apparatus, information processing method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231228

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20241119

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20241202

R150 Certificate of patent or registration of utility model

Ref document number: 7608845

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150