JP7111288B2 - ビデオ処理方法、装置および記憶媒体 - Google Patents
ビデオ処理方法、装置および記憶媒体 Download PDFInfo
- Publication number
- JP7111288B2 JP7111288B2 JP2019572744A JP2019572744A JP7111288B2 JP 7111288 B2 JP7111288 B2 JP 7111288B2 JP 2019572744 A JP2019572744 A JP 2019572744A JP 2019572744 A JP2019572744 A JP 2019572744A JP 7111288 B2 JP7111288 B2 JP 7111288B2
- Authority
- JP
- Japan
- Prior art keywords
- thumbnail
- video
- keyframe
- video stream
- scene
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims description 15
- 238000000034 method Methods 0.000 claims description 26
- 238000009877 rendering Methods 0.000 claims description 18
- 238000012545 processing Methods 0.000 claims description 15
- 230000003190 augmentative effect Effects 0.000 claims description 12
- 238000004364 calculation method Methods 0.000 claims description 9
- 230000008569 process Effects 0.000 claims description 8
- 238000013139 quantization Methods 0.000 claims description 8
- 239000011521 glass Substances 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 238000000605 extraction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000010205 computational analysis Methods 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8549—Creating video summaries, e.g. movie trailer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/147—Scene change detection
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Computer Graphics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Television Signal Processing For Recording (AREA)
- Information Transfer Between Computers (AREA)
- User Interface Of Digital Computer (AREA)
Description
閲覧待ちの1つまたは複数のビデオストリームまたはビデオストリームのキーフレームを選定する選定指令を受信することと、
前記選定指令に基づき、前記ビデオストリームが生成したビデオストリームサムネイルまたは前記キーフレームが生成したキーフレームサムネイルをシーンサムネイルにセットして画面レイアウトストリームを生成することと、
仮想現実/拡張現実(Virtual Reality/Augmented Reality、VR/AR)インタフェースにおいて前記画面レイアウトストリームを表示させることと、を含み、
前記ビデオストリームは、1つまたは複数であり、1つまたは複数の端末から得られ、
前記シーンサムネイルは、前記VR/ARインタフェースにおいて表示されたシーンに基づいて生成されるものである、ビデオ処理方法が提供される。
閲覧待ちのビデオストリームまたはビデオストリームのキーフレームを選定する選定指令を受信するように構成される第1の受信モジュールと、
前記選定指令に基づき、前記ビデオストリームが生成したビデオストリームサムネイルまたは前記キーフレームが生成したキーフレームサムネイルをシーンサムネイルにセットして画面レイアウトストリームを生成するように構成される第1の生成モジュールと、
VR/ARインタフェースにおいて前記画面レイアウトストリームを表示させるように構成される表示モジュールと、含み、
前記ビデオストリームは、1つまたは複数であり、1つまたは複数の端末から得られ、
前記シーンサムネイルは、前記VR/ARインタフェースにおいて表示されたシーンに基づいて生成されるものである、ビデオ処理装置がさらに提供される。
1つまたは複数のビデオストリームに基づいてビデオストリームサムネイルを生成するように構成される第2の生成モジュール、或いは、
1つまたは複数のビデオストリームのキーフレームを取得し、前記1つまたは複数のビデオストリームのキーフレームに基づいてキーフレームサムネイルを生成するように構成される取得モジュールをさらに含み、
1つのビデオストリームは、1つのビデオストリームサムネイルを生成し、
1つのビデオストリームのキーフレームは、1つのキーフレームサムネイルを生成する。
前記シーンサムネイルを選定する選定指令を受信するように構成される第2の受信モジュールと、
前記選定指令に基づいて前記シーンサムネイルを所定の倍数に拡大し、前記VR/ARインタフェースにおいて表示させるように構成される拡大モジュールと、をさらに含む。
VR/ARカメラで、ジェスチャーにより所定の方向に沿って形成された仮想ボックスを採集するように構成される採集モジュールと、
計算によって前記仮想ボックスの前記VR/ARインタフェースにおける座標およびサイズを得るように構成される計算モジュールと、
前記VR/ARインタフェースにおいて前記仮想ボックスにより標識された仮想テレビをレンダリングするように構成されるレンダリングモジュールと、をさらに含む。
VR/ARカメラからフィードバックされたユーザの現在の視線方向およびリアルタイム画面のレイアウト情報を受信するように構成される第3の受信モジュールと、
前記レイアウト情報に基づき、前記1つまたは複数のビデオストリームのうち、各ビデオストリームにおける解像度、フレームレート、およびコードレートのうちの少なくとも1つのパラメータを調整するように構成される調整モジュールと、をさらに含む。
閲覧待ちの1つまたは複数のビデオストリームまたはビデオストリームのキーフレームを選定する選定指令を受信するステップS102と、
前記選定指令に基づき、前記ビデオストリームが生成したビデオストリームサムネイルまたは前記キーフレームが生成したキーフレームサムネイルをシーンサムネイルにセットして画面レイアウトストリームを生成するステップS104と、
前記VR/ARインタフェースにおいて前記画面レイアウトストリームを表示させるステップS106と、を含み、
前記ビデオストリームは、1つまたは複数であり、1つまたは複数の端末から得られ、
前記シーンサムネイルはVR/ARインタフェースに表示されたシーンに基づいて生成される。
1つまたは複数のビデオストリームに基づいてビデオストリームサムネイルを生成すること、或いは、
1つまたは複数のビデオストリームのキーフレームを取得し、前記1つまたは複数のビデオストリームのキーフレームに基づいてキーフレームサムネイルを生成すること、をさらに含み、
1つのビデオストリームは、1つのビデオストリームサムネイルを生成し、
1つのビデオストリームのキーフレームは、1つのキーフレームサムネイルを生成する。
前記選定指令に基づいて前記ビデオストリームサムネイルまたは前記キーフレームサムネイルの大きさを調整することと、
仮想テレビのタイプを選択し、前記仮想テレビを前記シーンサムネイルにレンダリングすることと、
前記シーンサムネイルの前記VR/ARインタフェースにおける座標に基づき、1つまたは複数のビデオストリーム、および前記仮想テレビを前記VR/ARインタフェースにレンダリングし、前記シーンサムネイルを更新することと、を含む。
VR/ARカメラで、ジェスチャーにより所定の方向に沿って形成された仮想ボックスを採集することと、
計算によって前記仮想ボックスの前記VR/ARインタフェースにおける座標およびサイズを得ることと、
前記VR/ARインタフェースにおいて前記仮想ボックスにより標識された仮想テレビをレンダリングすることと、をさらに含む。
VR/ARカメラからフィードバックされたユーザの現在の視線方向およびリアルタイム画面のレイアウト情報を受信することと、
前記レイアウト情報に基づき、前記1つまたは複数のビデオストリームのうち、各ビデオストリームにおける解像度、フレームレート、およびコードレートのうちの少なくとも1つのパラメータを調整することと、をさらに含む。
ネットワーク機器は、端末がリアルタイムにフィードバックするレイアウト情報に基づき、各ビデオストリームの解像度、フレームレート、コードレートなどのパラメータを調整し、非注目画面の帯域幅を低下させ、注目画面の帯域幅を向上させることである。
各端末は、会議に参与してビデオストリームをサーバーに送信し、サーバーは、各ビデオストリームのコードストリームにインスタントデコードリフレッシュ(Instantaneous Decoding Refresh、IDR)フレームが存在するか否かを検出し、現在のビデオストリームに新たなIDRフレームが存在すれば、サーバーは、当該IDRフレームをデコードし、縮小させて現在のビデオストリームのサムネイルを得るステップ401と、
現在の端末は、サーバーにメッセージを送信し、サーバーからすべての端末のビデオストリームサムネイルを取得したいステップ402と、
サーバーは、すべての端末におけるビデオストリームのサムネイルを一定の順番で配列しレイアウトして1つの大きいサムネイル画面を形成した後、符号化して端末に送信するステップ403と、
現在の端末T3は、受信しデコードしてサムネイル画面を得た後、サムネイル画面における各サブ画面をトリミングし、各ビデオストリームが対応するサムネイルを得るステップ404と、
現在のVR/ARメガネにおいて表示されたシーンを縮小させてシーンサムネイルを生成するステップ405と、
各ビデオストリームが対応するサムネイルを適当な形態でレイアウトインタフェースに表示させながら、シーンサムネイルをレイアウトインタフェースに表示させるステップ406と、
ユーザは、ハンドルまたはジェスチャーなどの形態で操作し、選択したビデオストリームサムネイルをシーンサムネイルにセットして当該ビデオストリーム画面を見たいことを示し、対応する位置に表示させるステップ407と、
ユーザは、シーンサムネイルのレイアウトを確定した後、システムは、VR/ARインタフェースにおける対応するビデオストリームの位置に表示するステップ408と、
ユーザは、最終の多重画面レイアウトを確定した後、システムは、ユーザが選択したビデオストリームの番号、表示したい位置、サイズなどの情報をサーバーにフィードバックし、サーバーは、上述した情報に基づいて帯域幅を動的に調整し、対応するコードストリームを現在の端末に転送するステップ409と、を含む。
すべてのビデオストリーム画面をローカルで取得するステップ501と、
システムは、ローカルで受信されたすべてのビデオストリーム画面を縮小させて各ビデオストリームのサムネイルを得るステップ502と、
現在のVR/ARメガネにおいて表示されたシーンを縮小させてシーンサムネイルを生成するステップ503と、
各ビデオストリームが対応するサムネイルを適当な形態でレイアウトインタフェースに表示させながら、シーンサムネイルをレイアウトインタフェースに表示させるステップ504と、
ユーザは、ハンドルまたはジェスチャーなどの形態で操作し、選択したビデオストリームサムネイルをシーンサムネイルにセットして当該ビデオストリーム画面を見たいことを示し、対応する位置に表示させるステップ505と、
ユーザは、シーンサムネイルのレイアウトを確定した後、システムは、VR/ARインタフェースにおける対応するビデオストリームの位置に表示するステップ506と、
ユーザは、最終の多重画面レイアウトを確定した後、システムは、ユーザが選択したビデオストリームの番号、表示したい位置、サイズなどの情報をサーバーにフィードバックし、サーバーは、上述した情報に基づいて帯域幅を動的に調整し、対応するコードストリームを現在の端末に転送するステップ507と、を含む。
受信されたあるビデオストリームをローカルで取得するステップ601と、
システムは、現在のVR/ARメガネにおいて表示されたシーンを縮小させてシーンサムネイルを生成するステップ602と、
システムは、当該1つのビデオストリームの歴史キーフレームキューから、一定の数のキーフレームを抽出してサムネイルを生成し、適当な形態でレイアウトインタフェースに表示させるステップ603と、
ユーザは、ハンドルまたはジェスチャーなどの形態で操作し、選択したキーフレームサムネイルをシーンサムネイルにセットして当該キーフレーム画面を見たいことを示し、対応する位置に表示させるステップ604と、
システムは、ユーザが設定したキーフレームのレイアウトに基づき、VR/ARインタフェースにおける対応する位置に、選定されたキーフレーム画面を表示させるステップ605と、を含む。
システムは、現在のVR/ARメガネにおいて表示されたシーンを縮小させてシーンサムネイルを生成するステップ701と、
システムは、当該1つのビデオストリームの歴史キーフレームキューから、一定の数のキーフレームを抽出してサムネイルを生成し、適当な形態でレイアウトインタフェースに表示させ、例えば、ビデオストリーム1のキーフレームキューから幾つかのキーフレームを抽出してビデオストリーム1のキーフレームサムネイルを生成し、レイアウトインタフェースに表示させるステップ702と、
ユーザは、ハンドルまたはジェスチャーなどの形態で操作し、選択したキーフレームサムネイルをシーンサムネイルにセットして当該キーフレーム画面を見たいことを示し、対応する位置に表示するステップ703と、
ステップ702~703を繰り返し、ユーザは、他のビデオストリームのキーフレームサムネイルをシーンサムネイルにセットするステップ704と、
システムは、ユーザが設定したキーフレームのレイアウトに基づき、VR/ARインタフェースにおける対応する位置に、選定されたキーフレーム画面を表示させるステップ705と、を含む。
全VR視野における3Dシーンサムネイルを、一定の割合でユーザのVR視野における真正面であるがユーザの視線を影響しない位置に表示させるステップ801と、
ユーザは、シーンサムネイルを選定し、サムネイルを操作しやすいサイズまでに拡大し、レイアウトインタフェースに表示させるステップ802と、
ユーザは、上述した方法に応じて、ビデオストリームサムネイルを取得するステップ803と、
ユーザは、見たいビデオストリームのサムネイルをシーンサムネイルにおける適当な位置にドラッグするステップ804と、
ユーザは、シーンサムネイルの参照物に基づき、ビデオストリームサムネイルの位置およびサイズを調整し、当該ビデオストリームを放送する仮想テレビのタイプ(例えば、平面テレビ、曲面テレビなどである。図10は、仮想テレビの例であり、2つの曲面テレビおよび1つの平面テレビを含む。)を選択するステップ805と、
ユーザが見たいすべてのビデオストリームをシーンサムネイルにドラッグして調整を完了したまで、ユーザは、上述したステップ803~805を繰り返し、調整完了を確定するステップ806と、
シーンサムネイルを更新し、仮想テレビをシーンサムネイルにレンダリングするステップ807と、
システムは、シーンサムネイルとVR視野の座標関係に基づき、ビデオストリームおよび仮想テレビをVR視野にレンダリングするステップ808と、
シーンサムネイルを更新し縮小させ、ユーザの視線を影響しない位置にリアルタイム表示させるステップ809と、を含む。
ユーザは、ジェスチャーによって空中で1つのボックスを描き、ARメガネのカメラは、ユーザの動作を採集するステップ901と、
ARメガネは、計算分析により、AR座標系に対するユーザが描いたボックスの座標およびサイズを得、ARメガネにおいて当該ボックスにより標識された1つの仮想テレビをレンダリングするステップ902と、
ユーザは、上述した方法に応じて、1つのビデオストリームのサムネイルを選択するステップ903と、
ユーザは、見たいビデオストリームのサムネイルを仮想テレビにドラッグするステップ904と、
ユーザは、ビデオストリームのサムネイルのサイズおよび位置を調整し、仮想テレビのタイプを選択する(例えば、平面テレビ、曲面テレビなどである。図10は、本発明の実施例に係る仮想現実インタフェースにおける仮想テレビの模式図であり、図10に示すように、2つの曲面テレビと、1つの平面テレビとが含まれる。)ステップ905と、
ユーザが見たいすべてのビデオストリームに対してサイズおよび位置を調整したまで、ユーザは、上述したステップ901~905を繰り返し、調整完了を確定するステップ906と、
ARメガネは、仮想テレビの座標およびサイズに基づいてユーザが選択したビデオストリームをレンダリングし放送するステップ907と、を含む。
閲覧待ちのビデオストリームまたはビデオストリームのキーフレームを選定する選定指令を受信するように構成される第1の受信モジュール112と、
前記選定指令に基づき、前記ビデオストリームが生成したビデオストリームサムネイルまたは前記キーフレームが生成したキーフレームサムネイルをシーンサムネイルにセットして画面レイアウトストリームを生成するように構成される第1の生成モジュール114と、
VR/ARインタフェースにおいて前記画面レイアウトストリームを表示させるように構成される表示モジュール116と、を含み、
前記ビデオストリームは、1つまたは複数であり、1つまたは複数の端末から得られ、
前記シーンサムネイルは、前記VR/ARインタフェースにおいて表示されたシーンに基づいて生成される。
1つまたは複数のビデオストリームに基づいてビデオストリームサムネイルを生成するように構成される第2の生成モジュール、或いは、
1つまたは複数のビデオストリームのキーフレームを取得し、前記1つまたは複数のビデオストリームのキーフレームに基づいてキーフレームサムネイルを生成するように構成される取得モジュールをさらに含み、
1つのビデオストリームは、1つのビデオストリームサムネイルを生成し、
1つのビデオストリームのキーフレームは、1つのキーフレームサムネイルを生成する。
前記1つまたは複数のビデオストリームのキーフレームは、前記ネットワーク機器が前記1つまたは複数のビデオストリームをデコードする過程中において、収集されたコードワード情報および量子化パラメータ情報に基づいて生成し保存したキーフレームである。
前記シーンサムネイルを選定する選定指令を受信するように構成される第2の受信モジュールと、
前記選定指令に基づいて前記シーンサムネイルを所定の倍数に拡大し、前記VR/ARインタフェースにおいて表示させるように構成される拡大モジュールと、をさらに含む。
VR/ARカメラで、ジェスチャーにより所定の方向に沿って形成された仮想ボックスを採集するように構成される採集モジュールと、
計算によって前記仮想ボックスの前記VR/ARインタフェースにおける座標およびサイズを得るように構成される計算モジュールと、
前記VR/ARインタフェースにおいて前記仮想ボックスにより標識された仮想テレビをレンダリングするように構成されるレンダリングモジュールと、をさらに含む。
VR/ARカメラからフィードバックされたユーザの現在の視線方向およびリアルタイム画面のレイアウト情報を受信するように構成される第3の受信モジュールと、
前記レイアウト情報に基づき、前記1つまたは複数のビデオストリームのうち、各ビデオストリームにおける解像度、フレームレート、およびコードレートのうちの少なくとも1つのパラメータを調整するように構成される調整モジュールと、をさらに含む。
Claims (10)
- 1つまたは複数のビデオストリームに基づいてビデオストリームサムネイルを生成すること、或いは、1つまたは複数のビデオストリームのキーフレームを取得し、前記1つまたは複数のビデオストリームのキーフレームに基づいてキーフレームサムネイルを生成することと、
閲覧待ちの1つまたは複数のビデオストリームまたはビデオストリームのキーフレームを、対応するビデオストリームサムネイル又はキーフレームサムネイルをユーザがドラッグすることにより、選定する第1の選定指令を受信することと、
前記第1の選定指令に基づき、前記ビデオストリームから生成したビデオストリームサムネイルまたは前記キーフレームから生成したキーフレームサムネイルをシーンサムネイルにセットして画面レイアウトストリームを生成することと、
仮想現実/拡張現実(VR/AR)インタフェースにおいて前記画面レイアウトストリームを表示させることと、を含み、
前記ビデオストリームは、1つまたは複数であり、1つまたは複数の端末から得られ、
前記シーンサムネイルは、前記VR/ARインタフェースにおいて表示されたシーンに基づいて生成されるものであり、
1つのビデオストリームは、1つのビデオストリームサムネイルを生成し、
1つのビデオストリームのキーフレームは、1つのキーフレームサムネイルを生成し、
記第1の選定指令に基づき、前記ビデオストリームから生成したビデオストリームサムネイルまたは前記キーフレームから生成したキーフレームサムネイルをシーンサムネイルにセットして画面レイアウトストリームを生成する前に、
前記シーンサムネイルを選定する第2の選定指令を受信することと、
前記シーンサムネイルを選定する第2の選定指令に基づいて前記シーンサムネイルを所定の倍数に拡大し、前記VR/ARインタフェースにおいて表示させることと、をさらに含み、
前記第1の選定指令に基づき、前記ビデオストリームから生成したビデオストリームサムネイルまたは前記キーフレームから生成したキーフレームサムネイルをシーンサムネイルにセットして画面レイアウトストリームを生成することは、
前記第1の選定指令に基づいて前記ビデオストリームサムネイルまたは前記キーフレームサムネイルの大きさを調整することと、
仮想テレビのタイプを選択し、前記仮想テレビを前記シーンサムネイルにレンダリングすることと、
前記シーンサムネイルの前記VR/ARインタフェースにおける座標に基づき、前記第1の選定指令により選定した1つまたは複数のビデオストリームを、前記仮想テレビ上に、前記仮想テレビの座標及びサイズに基づいて、前記VR/ARインタフェースにレンダリングし、前記シーンサムネイルを更新することと、を含む、
ビデオ処理方法。 - 1つまたは複数のビデオストリームのキーフレームを取得することは、
ネットワーク機器において予め設定されたキーフレームキューから前記1つまたは複数のビデオストリームのキーフレームを取得することを含み、
前記1つまたは複数のビデオストリームのキーフレームは、前記ネットワーク機器が前記1つまたは複数のビデオストリームをデコードする過程中において、収集されたコードワード情報および量子化パラメータ情報に基づいて生成し保存したキーフレームである、請求項1に記載のビデオ処理方法。 - 前記第1の選定指令に基づき、前記ビデオストリームから生成したビデオストリームサムネイルまたは前記キーフレームから生成したキーフレームサムネイルをシーンサムネイルにセットして画面レイアウトストリームを生成する前に、前記ビデオ処理方法は、
VR/ARカメラで、ジェスチャーにより所定の方向に沿って形成された仮想ボックスを採集することと、
計算によって前記仮想ボックスの前記VR/ARインタフェースにおける座標およびサイズを得ることと、
前記VR/ARインタフェースにおいて前記仮想ボックスにより標識された仮想テレビをレンダリングすることと、をさらに含む、請求項1に記載のビデオ処理方法。 - 前記ビデオ処理方法は、
VR/ARカメラからフィードバックされたユーザの現在の視線方向およびリアルタイム画面のレイアウト情報を受信することと、
前記レイアウト情報に基づき、前記1つまたは複数のビデオストリームのうち、各ビデオストリームにおける解像度、フレームレート、およびコードレートのうちの少なくとも1つのパラメータを調整することと、をさらに含む、請求項1~3のいずれか一項に記載のビデオ処理方法。 - 仮想現実/拡張現実(VR/AR)機器に適用されるビデオ処理装置であって、
閲覧待ちの1つ又は複数のビデオストリームまたはビデオストリームのキーフレームを、対応するビデオストリームサムネイル又はキーフレームサムネイルをユーザがドラッグすることにより、選定する第1の選定指令を受信するように構成される第1の受信モジュールと、
前記第1の選定指令に基づき、前記ビデオストリームから生成したビデオストリームサムネイルまたは前記キーフレームから生成したキーフレームサムネイルをシーンサムネイルにセットして画面レイアウトストリームを生成するように構成される第1の生成モジュールと、
VR/ARインタフェースにおいて前記画面レイアウトストリームを表示させるように構成される表示モジュールと、
1つまたは複数のビデオストリームに基づいてビデオストリームサムネイルを生成するように構成される第2の生成モジュール、或いは、1つまたは複数のビデオストリームのキーフレームを取得し、前記1つまたは複数のビデオストリームのキーフレームに基づいてキーフレームサムネイルを生成するように構成される取得モジュールと、
前記シーンサムネイルを選定する第2の選定指令を受信するように構成される第2の受信モジュールと、
前記シーンサムネイルを選定する第2の選定指令に基づいて前記シーンサムネイルを所定の倍数に拡大し、前記VR/ARインタフェースにおいて表示させるように構成される拡大モジュールと、
を含み、
前記ビデオストリームは、1つまたは複数であり、1つまたは複数の端末から得られ、
前記シーンサムネイルは、前記VR/ARインタフェースにおいて表示されたシーンに基づいて生成されるものであり、
1つのビデオストリームは、1つのビデオストリームサムネイルを生成し、
1つのビデオストリームのキーフレームは、1つのキーフレームサムネイルを生成し、
前記第1の生成モジュールは、さらに、
前記第1の選定指令に基づいて前記ビデオストリームサムネイルまたは前記キーフレームサムネイルの大きさを調整し、
仮想テレビのタイプを選択し、前記仮想テレビを前記シーンサムネイルにレンダリングし、
前記シーンサムネイルの前記VR/ARインタフェースにおける座標に基づき、前記第1の選定指令により選定した1つまたは複数のビデオストリームを、前記仮想テレビ上に、前記仮想テレビの座標及びサイズに基づいて、前記VR/ARインタフェースにレンダリングし、前記シーンサムネイルを更新するように構成される、
ビデオ処理装置。 - 前記取得モジュールは、さらに、ネットワーク機器において予め設定されたキーフレームキューから前記1つまたは複数のビデオストリームのキーフレームを取得するように構成され、
前記1つまたは複数のビデオストリームのキーフレームは、前記ネットワーク機器が前記1つまたは複数のビデオストリームをデコードする過程中において、収集されたコードワード情報および量子化パラメータ情報に基づいて生成し保存したキーフレームである、請求項5に記載のビデオ処理装置。 - 前記ビデオ処理装置は、
VR/ARカメラで、ジェスチャーにより所定の方向に沿って形成された仮想ボックスを採集するように構成される採集モジュールと、
計算によって前記仮想ボックスの前記VR/ARインタフェースにおける座標およびサイズを得るように構成される計算モジュールと、
前記VR/ARインタフェースにおいて前記仮想ボックスにより標識された仮想テレビをレンダリングするように構成されるレンダリングモジュールと、をさらに含む、請求項5に記載のビデオ処理装置。 - 前記ビデオ処理装置は、
VR/ARカメラからフィードバックされたユーザの現在の視線方向およびリアルタイム画面のレイアウト情報を受信するように構成される第3の受信モジュールと、
前記レイアウト情報に基づき、前記1つまたは複数のビデオストリームのうち、各ビデオストリームにおける解像度、フレームレート、およびコードレートのうちの少なくとも1つのパラメータを調整するように構成される調整モジュールと、をさらに含む、請求項5~7のいずれか一項に記載のビデオ処理装置。 - 記憶されたプログラムを含むコンピュータ可読記憶媒体であって、
プロセッサにより前記プログラムを実行すると、請求項1~4のいずれか一項に記載のビデオ処理方法を実行する、コンピュータ可読記憶媒体。 - プログラムを実行するために用いられるプロセッサであって、
前記プログラムを実行すると、請求項1~4のいずれか一項に記載のビデオ処理方法を実行する、プロセッサ。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710829230.2 | 2017-09-14 | ||
CN201710829230.2A CN109511004B (zh) | 2017-09-14 | 2017-09-14 | 一种视频处理方法及装置 |
PCT/CN2018/100979 WO2019052306A1 (zh) | 2017-09-14 | 2018-08-17 | 一种视频处理方法、装置和存储介质 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2020527883A JP2020527883A (ja) | 2020-09-10 |
JP2020527883A5 JP2020527883A5 (ja) | 2021-07-26 |
JP7111288B2 true JP7111288B2 (ja) | 2022-08-02 |
Family
ID=65723904
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019572744A Active JP7111288B2 (ja) | 2017-09-14 | 2018-08-17 | ビデオ処理方法、装置および記憶媒体 |
Country Status (6)
Country | Link |
---|---|
US (1) | US11582506B2 (ja) |
EP (1) | EP3684062A4 (ja) |
JP (1) | JP7111288B2 (ja) |
KR (1) | KR102309318B1 (ja) |
CN (1) | CN109511004B (ja) |
WO (1) | WO2019052306A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110366024A (zh) | 2019-07-01 | 2019-10-22 | 北京达佳互联信息技术有限公司 | 一种播放视频的方法及装置 |
CN110989840B (zh) * | 2019-12-03 | 2023-07-25 | 成都纵横自动化技术股份有限公司 | 数据处理方法、前端设备、后端设备及地理信息系统 |
CN114415907B (zh) * | 2022-01-21 | 2023-08-18 | 腾讯科技(深圳)有限公司 | 媒体资源显示方法、装置、设备及存储介质 |
CN115086758A (zh) * | 2022-05-09 | 2022-09-20 | 全芯(佛山)科技有限公司 | 一种视频封面的生成方法及终端 |
CN114615458B (zh) * | 2022-05-10 | 2022-07-19 | 全时云商务服务股份有限公司 | 一种云会议中实时合屏快速出图的方法、装置、存储介质和服务器 |
CN114979732B (zh) * | 2022-05-12 | 2023-10-20 | 咪咕数字传媒有限公司 | 视频流的推送方法、装置、电子设备和介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030197785A1 (en) | 2000-05-18 | 2003-10-23 | Patrick White | Multiple camera video system which displays selected images |
JP2010278824A (ja) | 2009-05-29 | 2010-12-09 | Seiko Epson Corp | 画像表示システム、画像表示装置、および画像表示方法 |
JP2011217098A (ja) | 2010-03-31 | 2011-10-27 | Ns Solutions Corp | 情報処理システム、会議管理装置、情報処理方法、会議管理装置の制御方法及びプログラム |
US20130263056A1 (en) | 2012-04-03 | 2013-10-03 | Samsung Electronics Co., Ltd. | Image reproduction apparatus and method for simultaneously displaying multiple moving-image thumbnails |
JP2015076875A (ja) | 2013-10-11 | 2015-04-20 | 富士ゼロックス株式会社 | 映像ストリームをナビゲートするシステム、方法及びプログラム |
US20150221345A1 (en) | 2012-12-17 | 2015-08-06 | Bo Zhao | Embedding thumbnail information into video streams |
WO2016103115A1 (en) | 2014-12-22 | 2016-06-30 | International Business Machines Corporation | Selectively pairing application presented in virtual space with physical display |
JP2017511615A (ja) | 2013-11-27 | 2017-04-20 | ウルトラデント プロダクツ インク. | 物理的場所間のビデオ対話 |
Family Cites Families (51)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100505858C (zh) * | 2004-05-13 | 2009-06-24 | 索尼株式会社 | 图像数据处理装置和图像数据处理方法 |
US20080111822A1 (en) * | 2006-09-22 | 2008-05-15 | Yahoo, Inc.! | Method and system for presenting video |
US8713439B2 (en) * | 2006-12-15 | 2014-04-29 | Yahoo! Inc. | Systems and methods for providing a video playlist |
KR20080092501A (ko) * | 2007-04-12 | 2008-10-16 | 엘지전자 주식회사 | 모바일 서비스 데이터 수신 장치 및 제어 방법 |
US20090207316A1 (en) | 2008-02-19 | 2009-08-20 | Sorenson Media, Inc. | Methods for summarizing and auditing the content of digital video |
NO331338B1 (no) * | 2009-06-24 | 2011-11-28 | Cisco Systems Int Sarl | Fremgangsmate og anordning for endring av en videokonferanse-layout |
JP5493531B2 (ja) * | 2009-07-17 | 2014-05-14 | 三菱電機株式会社 | 映像音声記録再生装置および映像音声記録再生方法 |
US9659313B2 (en) * | 2010-09-27 | 2017-05-23 | Unisys Corporation | Systems and methods for managing interactive features associated with multimedia content |
US9363579B2 (en) | 2010-12-22 | 2016-06-07 | Google Inc. | Video player with assisted seek |
CN102332001B (zh) * | 2011-07-26 | 2013-06-26 | 深圳万兴信息科技股份有限公司 | 一种视频缩略图生成方法及装置 |
CN102364960B (zh) * | 2011-11-04 | 2015-05-27 | 播思通讯技术(北京)有限公司 | 移动数字电视画中画和频道缩略图的播放方法及移动终端 |
EP2680615B1 (en) * | 2012-06-25 | 2018-08-08 | LG Electronics Inc. | Mobile terminal and audio zooming method thereof |
WO2014031899A1 (en) * | 2012-08-22 | 2014-02-27 | Goldrun Corporation | Augmented reality virtual content platform apparatuses, methods and systems |
KR101472015B1 (ko) | 2012-11-01 | 2014-12-12 | 주식회사 케이티 | 컨텐츠의 재생을 제어하는 제어 장치 및 방법 |
CN102981616B (zh) * | 2012-11-06 | 2017-09-22 | 中兴通讯股份有限公司 | 增强现实中对象的识别方法及系统和计算机 |
US10905943B2 (en) * | 2013-06-07 | 2021-02-02 | Sony Interactive Entertainment LLC | Systems and methods for reducing hops associated with a head mounted system |
US10408613B2 (en) * | 2013-07-12 | 2019-09-10 | Magic Leap, Inc. | Method and system for rendering virtual content |
CN104378578A (zh) * | 2013-08-15 | 2015-02-25 | 中兴通讯股份有限公司 | 一种切换视频源的方法及装置、显示装置 |
US9454289B2 (en) * | 2013-12-03 | 2016-09-27 | Google Inc. | Dyanmic thumbnail representation for a video playlist |
CN103970894B (zh) * | 2014-05-27 | 2017-04-05 | 合一网络技术(北京)有限公司 | 自适应调整的界面流式布局显示的方法和系统 |
JP6326996B2 (ja) * | 2014-06-13 | 2018-05-23 | 富士通株式会社 | 端末装置、情報処理システム、及び表示制御プログラム |
CN115359567A (zh) * | 2014-06-14 | 2022-11-18 | 奇跃公司 | 用于产生虚拟和增强现实的方法和系统 |
US20170280098A1 (en) * | 2014-09-26 | 2017-09-28 | Intel Corporation | Techniques for enhancing user experience in video conferencing |
CN104618788B (zh) * | 2014-12-29 | 2018-08-07 | 北京奇艺世纪科技有限公司 | 一种显示视频信息的方法及装置 |
US9767613B1 (en) * | 2015-01-23 | 2017-09-19 | Leap Motion, Inc. | Systems and method of interacting with a virtual object |
GB2536025B (en) * | 2015-03-05 | 2021-03-03 | Nokia Technologies Oy | Video streaming method |
US10417832B2 (en) * | 2015-03-11 | 2019-09-17 | Facebook Technologies, Llc | Display device supporting configurable resolution regions |
KR102304023B1 (ko) * | 2015-04-03 | 2021-09-24 | 한국과학기술원 | 증강현실 기반 인터렉티브 저작 서비스 제공 시스템 |
CN104765156B (zh) * | 2015-04-22 | 2017-11-21 | 京东方科技集团股份有限公司 | 一种三维显示装置和三维显示方法 |
CN104915374A (zh) * | 2015-04-27 | 2015-09-16 | 厦门理工学院 | 一种旅游景区360度全景构建系统及方法 |
CN104918095A (zh) * | 2015-05-19 | 2015-09-16 | 乐视致新电子科技(天津)有限公司 | 多媒体流数据预览展示方法及装置 |
CN105549934A (zh) * | 2015-12-16 | 2016-05-04 | 广东威创视讯科技股份有限公司 | 显示界面控制方法和系统 |
CN105898342A (zh) * | 2015-12-30 | 2016-08-24 | 乐视致新电子科技(天津)有限公司 | 一种视频的多点同屏播放方法及系统 |
CN106993152B (zh) * | 2016-01-21 | 2019-11-08 | 杭州海康威视数字技术股份有限公司 | 三维监控系统及其快速部署方法 |
CN106249879A (zh) * | 2016-07-19 | 2016-12-21 | 深圳市金立通信设备有限公司 | 一种虚拟现实图像的显示方法及终端 |
CN106293395A (zh) * | 2016-08-03 | 2017-01-04 | 深圳市金立通信设备有限公司 | 一种虚拟现实眼镜及其界面交互方法 |
US10330935B2 (en) * | 2016-09-22 | 2019-06-25 | Apple Inc. | Predictive, foveated virtual reality system |
CN107888987B (zh) * | 2016-09-29 | 2019-12-06 | 华为技术有限公司 | 一种全景视频播放方法及装置 |
CN106527709B (zh) * | 2016-10-28 | 2020-10-02 | Tcl移动通信科技(宁波)有限公司 | 一种虚拟场景调整方法及头戴式智能设备 |
CN106534963A (zh) * | 2016-11-24 | 2017-03-22 | 北京小米移动软件有限公司 | 直播处理方法、装置及终端 |
CN106713964A (zh) * | 2016-12-05 | 2017-05-24 | 乐视控股(北京)有限公司 | 一种生成视频摘要视点图的方法及装置 |
CN106875244A (zh) * | 2016-12-19 | 2017-06-20 | 乐视控股(北京)有限公司 | 一种虚拟现实购物方法、装置和电子设备 |
US11176712B2 (en) * | 2017-01-18 | 2021-11-16 | Pcms Holdings, Inc. | System and method for selecting scenes for browsing histories in augmented reality interfaces |
EP3603058B1 (en) * | 2017-03-22 | 2024-07-03 | Magic Leap, Inc. | Depth based foveated rendering for display systems |
CN106980379B (zh) * | 2017-03-30 | 2020-05-19 | 联想(北京)有限公司 | 一种显示方法及终端 |
CN107040794A (zh) * | 2017-04-26 | 2017-08-11 | 盯盯拍(深圳)技术股份有限公司 | 视频播放方法、服务器、虚拟现实设备以及全景虚拟现实播放系统 |
CN107018386A (zh) * | 2017-06-08 | 2017-08-04 | 柳州智视科技有限公司 | 一种视频流多分辨率观测系统 |
CN107147882A (zh) * | 2017-06-08 | 2017-09-08 | 柳州智视科技有限公司 | 一种自动实时跟踪目标对象的多分辨率观测系统 |
US10687119B2 (en) * | 2017-06-27 | 2020-06-16 | Samsung Electronics Co., Ltd | System for providing multiple virtual reality views |
US10754496B2 (en) * | 2017-08-24 | 2020-08-25 | Microsoft Technology Licensing, Llc | Virtual reality input |
US10437328B2 (en) * | 2017-09-27 | 2019-10-08 | Igt | Gaze detection using secondary input |
-
2017
- 2017-09-14 CN CN201710829230.2A patent/CN109511004B/zh active Active
-
2018
- 2018-08-17 KR KR1020207000333A patent/KR102309318B1/ko active IP Right Grant
- 2018-08-17 EP EP18855912.4A patent/EP3684062A4/en active Pending
- 2018-08-17 WO PCT/CN2018/100979 patent/WO2019052306A1/zh unknown
- 2018-08-17 JP JP2019572744A patent/JP7111288B2/ja active Active
- 2018-08-17 US US16/627,923 patent/US11582506B2/en active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030197785A1 (en) | 2000-05-18 | 2003-10-23 | Patrick White | Multiple camera video system which displays selected images |
JP2010278824A (ja) | 2009-05-29 | 2010-12-09 | Seiko Epson Corp | 画像表示システム、画像表示装置、および画像表示方法 |
JP2011217098A (ja) | 2010-03-31 | 2011-10-27 | Ns Solutions Corp | 情報処理システム、会議管理装置、情報処理方法、会議管理装置の制御方法及びプログラム |
US20130263056A1 (en) | 2012-04-03 | 2013-10-03 | Samsung Electronics Co., Ltd. | Image reproduction apparatus and method for simultaneously displaying multiple moving-image thumbnails |
US20150221345A1 (en) | 2012-12-17 | 2015-08-06 | Bo Zhao | Embedding thumbnail information into video streams |
JP2015076875A (ja) | 2013-10-11 | 2015-04-20 | 富士ゼロックス株式会社 | 映像ストリームをナビゲートするシステム、方法及びプログラム |
JP2017511615A (ja) | 2013-11-27 | 2017-04-20 | ウルトラデント プロダクツ インク. | 物理的場所間のビデオ対話 |
WO2016103115A1 (en) | 2014-12-22 | 2016-06-30 | International Business Machines Corporation | Selectively pairing application presented in virtual space with physical display |
Also Published As
Publication number | Publication date |
---|---|
EP3684062A4 (en) | 2021-01-27 |
KR20200014415A (ko) | 2020-02-10 |
US20210152876A1 (en) | 2021-05-20 |
WO2019052306A1 (zh) | 2019-03-21 |
CN109511004A (zh) | 2019-03-22 |
EP3684062A1 (en) | 2020-07-22 |
US11582506B2 (en) | 2023-02-14 |
KR102309318B1 (ko) | 2021-10-06 |
JP2020527883A (ja) | 2020-09-10 |
CN109511004B (zh) | 2023-09-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7111288B2 (ja) | ビデオ処理方法、装置および記憶媒体 | |
CN113347405B (zh) | 缩放相关的方法和装置 | |
US9965026B2 (en) | Interactive video display method, device, and system | |
JP2020527883A5 (ja) | ||
CN109792562B (zh) | 视频数据的基于内容的流分割 | |
WO2017096817A1 (zh) | 一种多机位视频同步播放的实现方法及装置 | |
CA2800078C (en) | Video conference control method and conference terminal | |
US9049341B2 (en) | Method and apparatus for video resource management in video conference | |
CN107615338A (zh) | 用于生成和使用降低分辨率图像并且/或者将这样的图像传送到重放或内容分发设备的方法和装置 | |
CN106210858B (zh) | 一种终端界面的切换方法及装置 | |
CN113064684B (zh) | 一种虚拟现实设备及vr场景截屏方法 | |
KR102069930B1 (ko) | 이머전 통신 클라이언트, 서버 및 컨텐츠 뷰를 획득하는 방법 | |
JP6241802B1 (ja) | 映像配信システム、ユーザ端末装置および映像配信方法 | |
CN104469398B (zh) | 一种网络视频画面处理方法及装置 | |
WO2014000428A1 (zh) | 可视通话的数据处理方法、终端和系统 | |
KR20180026216A (ko) | 디스플레이 장치 및 이의 제어 방법 | |
WO2019000896A1 (zh) | 一种直播列表浏览交互方法及装置 | |
CN111757137A (zh) | 一种基于单镜头直播视频的多路特写播放方法及装置 | |
CN110709839A (zh) | 用于呈现媒体内容预览的方法、系统和介质 | |
CN114286077A (zh) | 一种虚拟现实设备及vr场景图像显示方法 | |
Seo et al. | Immersive panorama TV service system | |
CN111586465B (zh) | 直播间的操作交互方法、装置、设备及存储介质 | |
CN117478931A (zh) | 信息显示方法、装置、电子设备及存储介质 | |
CN114466207A (zh) | 直播控制方法及计算机存储介质 | |
JP2023173764A (ja) | 情報処理装置、情報処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210309 |
|
A524 | Written submission of copy of amendment under article 19 pct |
Free format text: JAPANESE INTERMEDIATE CODE: A524 Effective date: 20210608 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220215 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220621 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220706 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7111288 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |