JPWO2019059325A1 - 映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム - Google Patents
映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム Download PDFInfo
- Publication number
- JPWO2019059325A1 JPWO2019059325A1 JP2019512929A JP2019512929A JPWO2019059325A1 JP WO2019059325 A1 JPWO2019059325 A1 JP WO2019059325A1 JP 2019512929 A JP2019512929 A JP 2019512929A JP 2019512929 A JP2019512929 A JP 2019512929A JP WO2019059325 A1 JPWO2019059325 A1 JP WO2019059325A1
- Authority
- JP
- Japan
- Prior art keywords
- data
- image data
- still image
- unit
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 27
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 title 1
- 238000004891 communication Methods 0.000 claims abstract description 72
- 230000010365 information processing Effects 0.000 claims abstract description 59
- 230000008859 change Effects 0.000 claims abstract description 21
- 238000003384 imaging method Methods 0.000 claims description 99
- 230000006870 function Effects 0.000 claims description 33
- 230000033001 locomotion Effects 0.000 claims description 10
- 239000000284 extract Substances 0.000 claims description 4
- 230000015654 memory Effects 0.000 abstract description 19
- 230000005540 biological transmission Effects 0.000 description 73
- 238000010586 diagram Methods 0.000 description 32
- 230000008569 process Effects 0.000 description 14
- 238000012545 processing Methods 0.000 description 14
- 238000012546 transfer Methods 0.000 description 8
- 230000001276 controlling effect Effects 0.000 description 3
- 230000011218 segmentation Effects 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000002716 delivery method Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19654—Details concerning communication with a camera
- G08B13/19656—Network used to communicate with a camera, e.g. WAN, LAN, Internet
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
- G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Databases & Information Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Educational Technology (AREA)
- Educational Administration (AREA)
- Business, Economics & Management (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Image Processing (AREA)
- Information Transfer Between Computers (AREA)
Abstract
Description
図1に示すように、映像配信システム1は、被写体Oを取り囲むように配置された複数の携帯端末10(撮像部)と、携帯端末10により撮像した撮像データを配信する映像配信装置20と、映像配信装置20からの映像を表示する表示モニタ36を有する情報処理端末30(表示装置)と、を備えている。
なお、以下の説明では、動画データとしてMPEGデータを扱い、静止画データとしてJPEGデータを扱う例を示すが、動画データおよび静止画データのフォーマットは任意に変更することができる。
このバレットタイム撮影では、画像処理によって、被写体Oの動きをスローモーションにしたり、カメラワークが高速で移動する映像を撮影したりすることができる。映像配信装置20は、変速再生するための画像処理部(不図示)を備えてもよい。画像処理部は、例えば、スロー再生、速度アップをすることができる。なお、このような画像処理部を、映像配信装置20ではなく、情報処理端末30が備えていてもよい。
映像配信装置20は、情報処理端末30に対して映像配信システム1のサービスを提供するための装置である。映像配信装置20は、例えば、いわゆるサーバ装置やコンピュータ(例えば、デスクトップ、ラップトップ、タブレットなど)である。図2は、映像配信装置20の構成ブロック図である。
すなわち、取得部21は、複数の携帯端末10が被写体Oをそれぞれ撮像することにより得られる複数の動画を、通信ネットワークを介して携帯端末10それぞれから取得する。取得部21が取得した動画は、記憶部25に記憶される。
取得部21は、動画データの取得に際して、ROM26に記憶されたデータ取得プログラムを実行する。
データ生成部22は、静止画データの生成に際して、ROM26に記憶されたデータ生成プログラムを実行する。データ生成プログラムは、MPEGデコードモジュール29を用いて、記憶部25に記憶された動画データを解凍し、静止画データの集合としたうえで、記憶部25に再度保存する。この際、各静止画データは、それぞれが撮像されたタイミングを示す時間データと関連付けて保存される。静止画データの生成においては、必要に応じて、生成した静止画データの一部をRAM27に保存してもよい。
この場合には、タッチする部分の左右方向の中央部からの距離が近い場合に、画面の回転角を小さくし、タッチする部分の左右方向の中央部からの距離が近い場合に画面の回転を小さくしてもよい。
本実施形態では、位置データとは、被写体Oを撮像した撮像方向を示す方向データである。
情報処理端末30は、例えばユーザ40が所有するスマートフォンやタブレット等の端末装置であり、選択部24から送信される静止画データを受信して、HTMLデータとして表示する。図3は、情報処理端末30の構成ブロック図である。
フラッシュメモリ34は、映像配信装置20から送信された静止画データからHTMLデータを生成して解析、実行するWEBブラウザと、タッチパネル制御フォームウェアと、を備えている。
また、CPU33は、ウェブブラウザからアクセスされたウェブページ(HTMLデータ)に対して、逐次静止画の内容を時系列に沿って変更することで、ユーザ40に疑似的動画を提供する。このウェブページでは図10に示すように、情報処理端末30の表示モニタ上において、ユーザ40が被写体Oを見たい方向から見えるようになっている。
JavaScript内の関数を用いて、静止画データを選択する周波数を設定することで、精度よく静止画データを要求することができる。なお、制御プログラムに使用する言語としては、JavaScript以外の言語であってもよい。
要求部は、映像配信装置20における映像配信装置20から受信した静止画データを、JPEGデコードモジュール39を用いてデコードし、描画LSI35に転送する。
本実施形態では、操作認識部38は、表示モニタ36の表面に指が触れた状態でユーザ40が指を滑らせるスワイプ操作を、方向指定操作として認識する。
複数の携帯端末10には、それぞれを識別する識別番号(A〜L)が付与されている。識別番号を把握することで、ユーザは、被写体Oを撮像する方向を特定することができる。このため、本実施形態では、この識別番号を情報処理端末30が映像配信装置20に対して指定する方向データとして扱う。
なお、方向データとしては、被写体Oを撮像する方向が特定できる情報であれば、携帯端末10の識別番号の他、携帯端末10が配置された位置を示す座標情報や、上面視で被写体Oを通る所定の基準線からの角度等で表現される情報であってもよい。
そして、静止画を選択部24が選択する過程において、ユーザ40のスワイプ操作により指定値受付部23が方向指定値を受付けると、図6の表に示すように、選択部24は、当該方向指定値を受付けた時に対応する静止画データの時間データ(t=5p)を基準にして、スワイプ操作における方向指定値の変化量に基づいて、対応する静止画データ(C005〜K005)を選択する。
なお、前述の説明では、選択部24が方向指定値を受付けた時に対応する静止画データの時間データ(t=5p)を基準にして、当該静止画データと同じ時間データを選択するという態様について説明しているがこのような態様に限られない。
一方、選択部24は、単位時間当たりの方向指定値の変化量が閾値以上の場合には、方向データが間欠的につながるように、静止画データを選択する。ここで、「間欠的に」とは、連続的に並ぶ方向データに対して、一部のデータのみを取得することを意味している。
一方、情報処理端末30は、方向指定操作がされていない時には、該方向指定操作の完了位置に対応する方向指定値の静止画データを、時系列順に順次受信して表示することにより、完了位置に対応する方向からの疑似的動画を表示する。
そして、本実施形態では、TDがTFよりも短いので、描画部による描画が終わった際に、常に描画部が、次に描画をするべき静止画データの転送を待っている状態を実現することができる。これにより、円滑に静止画データを再生することができる。
まず、複数の携帯端末10それぞれが、動画データを撮影する(S1)。次に、映像配信装置20における取得部21が、複数の動画データを取得する取得ステップ(S2)を実行する。
次に、指定値受付ステップで受付けた位置指定値に基づいて、選択部24が静止画データを選択し、通信ネットワークを介して情報処理端末30に送信する選択ステップ(S6)を実行する。
まず、情報処理端末30の操作認識部38が、操作認識ステップ(S110)として、ユーザのスワイプ操作を認識する。操作認識部38は、スワイプ操作から方向指定値を特定する。
要求ステップは、映像配信装置20における前述した指定値受付ステップ(図8:S5)と対応している。
描画部による描画動作が完了すると(S131のYes)、ユーザ40は、所望する方向から被写体Oを撮像した静止画データを、連続的な疑似的動画として情報処理端末30の表示モニタ36で閲覧することができる。
これにより、ユーザ40の方向指定操作における操作量が大きくなり、操作量と対応するように並ぶ方向データの数量が多くなった場合であっても、映像配信装置20と、情報処理端末30と、の間で通信するデータ量が大きくなるのを確実に抑えることができる。
例えば、上記実施形態では、撮像部として、携帯端末10が有するカメラである構成を示したが、このような態様に限られない、撮像部としては、一眼レフやデジタルカメラなどであってもよい。
また、上記実施形態におけるバレットタイム撮影では、複数の携帯端末10が、被写体Oに対して同一高さの平面において、円周状に配置されている構成を示したが、このような態様に限られない。複数の高さに平面を設定し、それぞれの高さの平面において、カメラグループを構成し、このカメラグループをまたぐように、選択部24が静止画データを選択してもよい。これにより、被写体Oに対して、3次元的に見る方向を選択することができる。
例えば方向指定値が変化していく過程において、選択部24は、該当する時間データに相当する静止画データ、およびその静止画データの後に続く静止画データを、任意の複数フレーム分選択してもよい。この場合には、任意の複数フレーム分の静止画データを、ひとつのファイルとして扱ってもよい。
すわなち、このように間欠的に静止画データを選択する処理を、映像配信装置20側で行わずに、情報処理端末30側で行ってもよい。
この場合には、例えば、情報処理端末30のうち、操作認識部38が認識した方向指定操作における操作量が閾値以上の場合に、要求部が、表示モニタ36に表示させる静止画データを、選択部24に対して間欠的に要求する構成としてもよい。
図11は、動画配信システム100の構成例を示す図である。
複数の撮像装置110と、サーバ130と、情報端末120とは、通信ネットワークNを介して接続される。
具体的な構成例として、撮像装置110は、撮像部111と、第1通信部112と、第1制御部113と、を備える。
第1通信部112は、撮像部111で生成された動画データをサーバ130に送信する。
第1制御部113は、撮像部111及び第1通信部112を制御する。第1制御部113は、撮像部111で生成された動画データに対して、適宜、画像処理を行う。この画像処理には、一例として、動画データに対して撮像時刻のデータを加える処理が含まれていてもよい。また、画像処理には、一例として、動画データに対して、撮像装置110を識別するための識別データを加える処理が含まれていてもよい。
図12は、複数の撮像装置110の配置について説明するための図である。ここで、図12(A)は第1の配置例について説明するための図、図12(B)は第2の配置例について説明するための図である。
図12(A)に示すように、複数の撮像装置110は、被写体obを取り囲むように配置される。又は、図12(B)に示すように、複数の撮像装置110は、一列に配置される。なお、複数の撮像装置110の配置は、図12に示す例に限定されることはない。
具体的な構成例として、情報端末120は、第2通信部121と、表示部122と、第2制御部123と、を備える。
第2通信部121は、サーバ130から送信された分割データを受信する。第2通信部121は、データ送信要求情報、切替要求情報及び送信停止要求情報をサーバ130に送信する。
切替要求情報は、サーバ130から情報端末120に送信されている、1の撮像装置110で生成された動画データに基づく分割データを、1の撮像装置110を除く他の撮像装置110で生成された他の動画データに基づく他の分割データに切り替えて、他の分割データをサーバ130から情報端末120に送信するように要求する情報信号である。
送信停止要求情報は、サーバ130から情報端末120に送信されている分割データの送信停止を要求する情報信号である。
第3通信部131は、複数の撮像装置110及び情報端末120と、通信ネットワークNを介して通信を行う。第3通信部131は、複数の撮像装置110それぞれから送信された動画データを受信する。第3通信部131は、情報端末120から送信された、データ送信要求情報、切替要求情報及び送信停止要求情報を受信する。第3通信部131は、記憶部132に記憶される分割データを情報端末120に送信する。
図13(A)に示すように、動画データD1は、複数のフレームF1,F2,F3…から構成される。
なお、第3制御部133は、単数枚分割データを構成するフレームを削除してもよい。例えば、第3制御部133は、後述するように送信停止要求が有った場合、単数枚分割データを送信する。第3制御部133は、送信した単数枚分割データ(フレーム)に関してのログ情報を記憶し、所定期間毎にログ情報を解析して、単数枚分割データの使用頻度が閾値よりも低い場合には、使用頻度の低い単数枚分割データ(フレーム)を削除してもよい。
ここで、図13(C)の例で説明したものと同様に、第3制御部133は、使用頻度の低い単数枚分割データ(フレーム)を削除してもよい。
第3制御部133は、第3通信部131でデータ送信要求情報を受信した場合、複数の撮像装置110のうちいずれか1の撮像装置110で生成された動画データを分割データの単位で記憶部132から読み出すように制御する。読み出される分割データは、予め設定された撮像装置110で生成された動画データに基づく分割データである。又は、読み出される分割データは、情報端末120において撮像装置110が選択されて、その選択された情報がデータ送信要求情報に付加された場合、選択された撮像装置110で生成された動画データに基づく分割データである。さらに、読み出される分割データは、情報端末120に置いて撮影時刻又は再生時間等の時間が指定され、時間指定の情報がデータ送信要求情報に付加された場合、動画データに付加された時刻情報に基づいて、時間指定に対応する時刻情報が付加された分割データである。
さらに、第3制御部133は、データ送信要求情報で要求された分割データに後続する分割データを時系列順に記憶部132から読み出すよう制御すると共に、読み出した分割データを時系列順に情報端末120に送信するよう第3通信部131を制御する。第3制御部133は、情報端末120からの次のデータ送信要求情報がなくとも後続する分割データを記憶部132から読み出して送信する。
なお、実施形態によって、動画データAを分割して得られる分割データと、動画データBを分割して得られる分割データとは、異なる撮影時刻に撮影されたものであってもよい。
又は、図14(C)に一例を示すように、第3制御部133は、動画データAに基づく分割データD2−A1,D2−A2を順次送信した後、切替要求信号Sを受け付けた場合、時間的に分割データD2−A2と同じタイミングとなる、分割データD2−B2を記憶部132から読み出す。さらに、第3制御部133は、分割データD2−B2から時間的に後になる分割データD2−B3,D2−B4…を記憶部132から順次読み出す。
情報端末120は、他の分割データを受信すると、他の分割データに基づく動画を表示部122に表示する。
図15は、動画配信方法について説明するためのフローチャートである。である。
図16は、サーバの動作について説明するためのフローチャートである。
動画配信装置としてのサーバ130は、動画データが1以上のフレームに分割された分割データの単位で時系列順に記憶される記憶部132と、外部の情報端末120からデータ送信要求情報を受信すると共に、分割データを情報端末120に送信する第3通信部131と、第3通信部131が受信したデータ送信要求情報(要求情報)に基づいて分割データを記憶部132から読み出し、読み出した分割データを情報端末120に送信するよう第3通信部131を制御する第3制御部133と、を備える構成である。
また、サーバ130は、情報端末120に分割データの形式で保存又は分割データの形式にアクセスさせることができるので、他の分割データに容易に切り替えることができる。すなわち、サーバ130は、1の撮像装置110で撮像された動画から他の撮像装置で撮像された画像にシームレスに切り替えることができる。
なお、従来では、通常の動画を情報端末に送信する場合、ファイル容量がある程度大きく、及び、撮像装置の数が多いほど、前もって情報端末の記憶部にデータを読み込んでおく必要があるが、実際はこれが難しい。また、ローカルディスクから動画を読み込む場合、情報端末は、読み込みに時間がかかり、動画の読み込み後も切替の時間までシークする必要があるために、シームレスな切替が困難となる。
分割データが送信される情報端末120では、単数枚分割データが配されることにより、例えば、1の分割データに基づいて表示される動画から、他の分割データに基づいて表示される動画データに切り替えるのが、容易になる。
分割データが送信される情報端末120では、単数枚分割データが複数配されることにより、例えば、1の分割データに基づいて表示される動画から、他の分割データに基づいて表示される動画データに切り替えるのが、より容易になる。
これにより、情報端末120は、単数枚分割データを受信するため、単数枚分割データに基づく画像の確認が動画に比べて容易になる。さらに情報端末120は、その後に、切替要求情報を送信することに基づいて他の分割データを受信した場合でも、情報端末120上の画像の切り替えが容易になる。
動画配信システムのサーバ130は、分割データを送信する場合、通信ネットワークにかかる負荷を従来に比べて小さくすることができる。また、動画配信システムの情報端末120では、データ受信の負荷を小さくすることができる。
動画配信方法は、動画データを分割データの単位で記憶部132に記憶し、その分割データの単位で送信する。分割データの単位とすることによりデータが圧縮され、ファイルサイズを小さくすることができる。
動画配信プログラムは、動画データを分割データの単位で記憶部132に記憶し、その分割データの単位で送信する。分割データの単位とすることによりデータが圧縮され、ファイルサイズを小さくすることができる。
第3制御部133は、分割データを情報端末120に送信している場合に、情報端末120から切替要求があると、切替要求があったタイミングで、1の分割データをさらに複数の分割データに分割してもよい。一例として、第3制御部133は、6枚のフレームで構成された分割データCを情報端末120に送信している場合に、切替要求があると、記憶部132に記憶される分割データCを、時系列順に前半の3枚のフレームで構成された分割データC1と、時系列順に後半の3枚のフレームで構成された分割データC2とに分割してもよい。なお、フレーム数は、上記一例に限定されることはない。また、同一の動画データを分割データの単位で複数回送信している場合、同じタイミングで複数回の切替要求が有ると、切替要求があったタイミングに対応する1の分割データを複数の分割データに分割してもよい。
10 携帯端末
20 映像配信装置
21 取得部
22 データ生成部
23 指定値受付部
24 選択部
25 記憶部
30 情報処理端末
33 CPU(要求部)
35 描画LSI(描画部)
38 操作認識部
40 ユーザ
O 被写体
100 動画配信システム
110 撮像装置
120 情報端末
130 サーバ
Claims (10)
- 異なる地点で撮像した複数の動画データを取得する取得部と、
前記取得部が取得した前記複数の動画データそれぞれについて、所定の時間ごとのフレームを静止画として抽出して静止画データを生成するデータ生成部と、
前記静止画データを、前記複数の動画データそれぞれにおける被写体を撮像した撮像位置を示す位置データ、および前記静止画データが撮像された時間データと関連付けて記憶する記憶部と、
ユーザが見たい前記静止画データにおける前記位置データを指定する位置指定値を受け付ける指定値受付部と、
前記指定値受付部が受付けた前記位置指定値に基づいて、前記時間データに沿って前記静止画データを選択し、通信ネットワークを介して外部の表示装置に送信する選択部と、を備え、
前記選択部は、前記指定値受付部が前記位置指定値を受付けない場合には、既に指定されている前記位置指定値に対応する前記静止画データを選択するとともに、
前記指定値受付部が前記位置指定値を受付けた場合には、当該位置指定値を受付けた時に対応する静止画データの時間データを基準にして、当該位置指定値の変化に基づいて、対応する前記静止画データを選択する映像配信装置。 - 前記選択部は、前記時間データを基準にする際に、その瞬間において選択されている位置データに対応する前記静止画データを、最初に選択することを特徴とする請求項1に記載の映像配信装置。
- 前記取得部は、被写体をそれぞれ異なる方向から撮像した複数の動画データを取得し、
前記位置データは、前記被写体を撮像した方向を特定可能な情報を示す方向データであり、
前記指定値受付部は、ユーザが見たい前記静止画データにおける前記方向データを指定する方向指定値を、前記位置指定値として受付けることを特徴とする請求項1又は2に記載の映像配信装置。 - 前記請求項3に記載の映像配信装置と、
被写体を取り囲むように配置され、前記被写体をそれぞれ異なる方向から撮像するカメラを有するとともに撮像により得られる動画の録画機能を有し、録画された前記動画を通信ネットワークに送出し、かつ複数の撮像部を構成する複数の携帯端末と、を備え、
前記取得部は、前記携帯端末が前記被写体をそれぞれ撮像することにより得られる複数の前記動画を、前記通信ネットワークを介して前記携帯端末それぞれから取得することを特徴とする映像配信システム。 - 前記映像配信装置から送信された前記静止画データを受信して表示する表示モニタと、
前記表示モニタの前方におけるユーザの指の動きを、前記方向指定値を選択する方向指定操作として認識して、ユーザの指の移動量を前記方向指定値として認識する操作認識部と、を有し、前記表示装置を構成する情報処理端末を更に備え、
前記情報処理端末は、前記選択部から受信する前記静止画データにより、前記方向指定操作中は、該方向指定操作に基づき変化する前記方向指定値における前記被写体の静止画データを表示するとともに、
前記方向指定操作がされていない時には、該方向指定操作の完了位置に対応する方向指定値の静止画データを、時系列順に順次受信して表示することにより、前記完了位置に対応する方向からの疑似的動画を表示することを特徴とする請求項4に記載の映像配信システム。 - 前記操作認識部は、前記表示モニタの表面に指が触れた状態でユーザが指を滑らせるスワイプ操作を、前記方向指定操作として認識することを特徴とする請求項5に記載の映像配信システム。
- 前記選択部は、前記指定値受付部が前記方向指定値を受付ける場合において、
単位時間当たりの前記方向指定値の変化量が閾値未満の場合には、前記方向データが連続的につながるように、前記静止画データを選択するとともに、
単位時間当たりの前記方向指定値の変化量が閾値以上の場合には、前記方向データが間欠的につながるように、前記静止画データを選択することを特徴とする請求項6に記載の映像配信システム。 - 前記情報処理端末は、前記方向指定値に基づいて、前記表示モニタに表示させる前記静止画データを、前記選択部に対して要求する要求部と、
前記表示モニタに、HTML(Hyper Text Markup Language)データを用いて、前記要求部が取得した前記静止画データを描画する描画部と、を備え、
前記描画部が前記静止画データを前記表示モニタに描画する時間TFは、前記要求部が前記静止画データを前記選択部から取得して、前記描画部に転送する時間TDよりも短いことを特徴とする請求項7に記載の映像配信システム。 - コンピュータが、
異なる地点で撮像した複数の動画データを取得する取得ステップと、
前記取得ステップで取得した前記複数の動画データそれぞれについて、所定の時間ごとのフレームを静止画として抽出して静止画データを生成するデータ生成ステップと、
前記静止画データを、前記複数の動画データそれぞれにおける被写体を撮像した撮像位置を示す位置データ、および前記静止画データが撮像された時間データと関連付けて記憶する記憶ステップと、
ユーザが前記被写体を見るための位置を指定する位置指定値を受け付ける指定値受付ステップと、
前記指定値受付ステップで受付けた前記位置指定値に基づいて、前記時間データに沿って前記静止画データを選択し、通信ネットワークを介して外部の表示装置に送信する選択ステップと、を実行し、
前記選択ステップでは、前記指定値受付ステップで前記位置指定値を受付けない場合には、既に指定されている前記位置指定値に対応する前記静止画データを選択するとともに、
前記指定値受付ステップで前記位置指定値を受付けた場合には、当該位置指定値を受付けた時に対応する静止画データの時間データを基準にして、当該位置指定値の変化に基づいて、対応する前記静止画データを選択する映像配信方法。 - コンピュータに、
異なる地点で撮像した複数の動画データを取得する取得機能と、
前記取得機能が取得した前記複数の動画データそれぞれについて、所定の時間ごとのフレームを静止画として抽出して静止画データを生成するデータ生成機能と、
前記静止画データを、前記複数の動画データそれぞれにおける被写体を撮像した撮像位置を示す位置データ、および前記静止画データが撮像された時間データと関連付けて記憶する記憶機能と、
ユーザが前記被写体を見るための位置を指定する位置指定値を受け付ける指定値受付機能と、
前記指定値受付機能が受付けた前記位置指定値に基づいて、前記時間データに沿って前記静止画データを選択し、通信ネットワークを介して外部の表示装置に送信する選択機能と、を実現させ、
前記選択機能では、前記指定値受付機能において前記位置指定値を受付けない場合には、既に指定されている前記位置指定値に対応する前記静止画データを選択するとともに、
前記指定値受付機能において位置指定値を受付けた場合には、当該位置指定値を受付けた時に対応する静止画データの時間データを基準にして、当該位置指定値の変化に基づいて、対応する前記静止画データを選択する映像配信プログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017180411 | 2017-09-20 | ||
JP2017180411 | 2017-09-20 | ||
PCT/JP2018/034937 WO2019059325A1 (ja) | 2017-09-20 | 2018-09-20 | 映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019143055A Division JP7123405B2 (ja) | 2017-09-20 | 2019-08-02 | 映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6568670B1 JP6568670B1 (ja) | 2019-08-28 |
JPWO2019059325A1 true JPWO2019059325A1 (ja) | 2019-11-14 |
Family
ID=65720515
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019512929A Active JP6568670B1 (ja) | 2017-09-20 | 2018-09-20 | 映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム |
JP2019143055A Active JP7123405B2 (ja) | 2017-09-20 | 2019-08-02 | 映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム |
JP2021070467A Active JP7253279B2 (ja) | 2017-09-20 | 2021-04-19 | 映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム |
JP2023043289A Pending JP2023063607A (ja) | 2017-09-20 | 2023-03-17 | 映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム |
Family Applications After (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019143055A Active JP7123405B2 (ja) | 2017-09-20 | 2019-08-02 | 映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム |
JP2021070467A Active JP7253279B2 (ja) | 2017-09-20 | 2021-04-19 | 映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム |
JP2023043289A Pending JP2023063607A (ja) | 2017-09-20 | 2023-03-17 | 映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム |
Country Status (11)
Country | Link |
---|---|
US (3) | US10417744B2 (ja) |
EP (1) | EP3687181A4 (ja) |
JP (4) | JP6568670B1 (ja) |
KR (2) | KR102461037B1 (ja) |
CN (3) | CN109525771B (ja) |
AU (1) | AU2018338407B2 (ja) |
BR (1) | BR112020005589A2 (ja) |
CA (1) | CA3076320A1 (ja) |
GB (1) | GB2587043B (ja) |
IL (1) | IL273453B2 (ja) |
WO (1) | WO2019059325A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9332285B1 (en) * | 2014-05-28 | 2016-05-03 | Lucasfilm Entertainment Company Ltd. | Switching modes of a media content item |
US10417744B2 (en) | 2017-09-20 | 2019-09-17 | Amatelus Inc. | Video distribution device, video distribution system, video distribution method, and video distribution program |
US20210409613A1 (en) * | 2018-12-21 | 2021-12-30 | Sony Group Corporation | Information processing device, information processing method, program, and information processing system |
JP6571859B1 (ja) * | 2018-12-26 | 2019-09-04 | Amatelus株式会社 | 映像配信装置、映像配信システム、映像配信方法及び映像配信プログラム |
US20230394629A1 (en) * | 2020-10-26 | 2023-12-07 | Jun Min HAN | Reproduction method for image |
KR102281128B1 (ko) * | 2020-10-26 | 2021-07-26 | 한창엽 | 영상의 재생 방법 |
CN113507582A (zh) * | 2021-07-14 | 2021-10-15 | 北京洞微科技发展有限公司 | 一种轨道表观影像数据分析的新方法 |
KR102595431B1 (ko) * | 2021-07-16 | 2023-10-27 | 서울사이버대학교 산학협력단 | 실감형 영상 콘텐츠 제작 및 배포 시스템 및 방법 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7113971B1 (en) * | 1996-08-05 | 2006-09-26 | Canon Kabushiki Kaisha | Communication method and apparatus, server and client on network, and program codes realizing communication thereof |
US6233428B1 (en) * | 1997-09-17 | 2001-05-15 | Bruce Fryer | System and method for distribution of child care training materials and remote monitoring of child care centers |
JP2004053616A (ja) | 2002-05-28 | 2004-02-19 | Sony Corp | 撮影システム、複数の撮像装置の支持装置、並びに複数の撮像装置の配置調整方法 |
GB2414190B (en) * | 2004-03-26 | 2007-03-07 | Sumitomo Rubber Ind | Golf swing diagnosing system |
JP4587166B2 (ja) * | 2004-09-14 | 2010-11-24 | キヤノン株式会社 | 移動体追跡システム、撮影装置及び撮影方法 |
US9189070B2 (en) * | 2010-09-24 | 2015-11-17 | Sharp Kabushiki Kaisha | Content display device, content display method, portable terminal, program, and recording medium |
JP5096628B1 (ja) * | 2011-09-29 | 2012-12-12 | 徹平 江里口 | 動画像表示装置、動画像表示方法、プログラムおよび動画像処理表示システム |
CN104036536B (zh) * | 2013-03-07 | 2018-06-15 | 腾讯科技(深圳)有限公司 | 一种定格动画的生成方法和装置 |
US9462301B2 (en) * | 2013-03-15 | 2016-10-04 | Google Inc. | Generating videos with multiple viewpoints |
JP2015005823A (ja) | 2013-06-19 | 2015-01-08 | パナソニック株式会社 | 画像処理装置およびデジタルミラーシステム |
CN103823877A (zh) * | 2014-02-28 | 2014-05-28 | 胡勇建 | 实物展示方法、实物展示系统及对应的图片获取装置 |
JP6238134B2 (ja) | 2014-03-17 | 2017-11-29 | カシオ計算機株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN104601978A (zh) * | 2015-01-06 | 2015-05-06 | 北京中科广视科技有限公司 | 自由视点图像的获取系统与方法 |
WO2016208102A1 (ja) | 2015-06-25 | 2016-12-29 | パナソニックIpマネジメント株式会社 | 映像同期装置及び映像同期方法 |
WO2017038541A1 (ja) * | 2015-09-03 | 2017-03-09 | ソニー株式会社 | 映像処理装置、映像処理方法、及び、プログラム |
US10206645B2 (en) * | 2015-09-18 | 2019-02-19 | General Electric Company | Multi-perspective interventional imaging using a single imaging system |
JP7021842B2 (ja) | 2015-11-13 | 2022-02-17 | パナソニック ネットソリューションズ株式会社 | 映像配信システム及び映像配信方法 |
CN106909263A (zh) * | 2015-12-22 | 2017-06-30 | 王骁勇 | 三维图像的交互展示方法及系统 |
JP6778912B2 (ja) | 2016-02-03 | 2020-11-04 | パナソニックIpマネジメント株式会社 | 映像表示方法及び映像表示装置 |
WO2017134706A1 (ja) | 2016-02-03 | 2017-08-10 | パナソニックIpマネジメント株式会社 | 映像表示方法及び映像表示装置 |
JP6957215B2 (ja) * | 2017-06-06 | 2021-11-02 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
US10417744B2 (en) | 2017-09-20 | 2019-09-17 | Amatelus Inc. | Video distribution device, video distribution system, video distribution method, and video distribution program |
-
2018
- 2018-04-27 US US15/964,700 patent/US10417744B2/en active Active
- 2018-05-09 CN CN201810438148.1A patent/CN109525771B/zh active Active
- 2018-06-29 KR KR1020180075444A patent/KR102461037B1/ko active IP Right Grant
- 2018-09-20 CN CN201880073931.0A patent/CN111357296B/zh active Active
- 2018-09-20 AU AU2018338407A patent/AU2018338407B2/en active Active
- 2018-09-20 US US16/649,357 patent/US11113787B2/en active Active
- 2018-09-20 EP EP18858483.3A patent/EP3687181A4/en active Pending
- 2018-09-20 CN CN202211424750.2A patent/CN115942044A/zh active Pending
- 2018-09-20 CA CA3076320A patent/CA3076320A1/en active Pending
- 2018-09-20 BR BR112020005589-1A patent/BR112020005589A2/pt not_active Application Discontinuation
- 2018-09-20 JP JP2019512929A patent/JP6568670B1/ja active Active
- 2018-09-20 WO PCT/JP2018/034937 patent/WO2019059325A1/ja unknown
- 2018-09-20 GB GB2004134.9A patent/GB2587043B/en active Active
- 2018-09-20 KR KR1020207011036A patent/KR102511407B1/ko active IP Right Grant
-
2019
- 2019-08-02 JP JP2019143055A patent/JP7123405B2/ja active Active
-
2020
- 2020-03-19 IL IL273453A patent/IL273453B2/en unknown
-
2021
- 2021-04-19 JP JP2021070467A patent/JP7253279B2/ja active Active
- 2021-09-02 US US17/465,156 patent/US11562466B2/en active Active
-
2023
- 2023-03-17 JP JP2023043289A patent/JP2023063607A/ja active Pending
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6568670B1 (ja) | 映像配信装置、映像配信システム、映像配信方法並びに映像配信プログラム | |
US10447874B2 (en) | Display control device and display control method for automatic display of an image | |
JP5942933B2 (ja) | 端末装置、及びプログラム | |
JP6409107B1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP6178705B2 (ja) | 映像配信システム、映像配信装置及び映像配信プログラム | |
KR20170137634A (ko) | 통신장치, 통신 제어방법 및 통신 시스템 | |
US20220050869A1 (en) | Video delivery device, video delivery system, video delivery method and video delivery program | |
JP2017123503A (ja) | 映像配信装置、映像配信方法及びコンピュータプログラム | |
JP7249637B2 (ja) | 映像配信装置、映像配信システム、映像配信方法及び映像配信プログラム | |
WO2023093344A1 (zh) | 图像显示方法、装置、存储介质及电子设备 | |
JP6600399B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP5942932B2 (ja) | 端末装置、及びプログラム | |
WO2023103875A1 (zh) | 自由视角视频的视角切换方法、装置及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190306 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190306 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20190306 |
|
AA64 | Notification of invalidation of claim of internal priority (with term) |
Free format text: JAPANESE INTERMEDIATE CODE: A241764 Effective date: 20190319 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190328 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20190417 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190423 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190618 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190625 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190709 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190723 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190802 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6568670 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |