JP2022501902A - 画像処理方法、装置、システム、ネットワーク機器、端末及びコンピュータプログラム - Google Patents
画像処理方法、装置、システム、ネットワーク機器、端末及びコンピュータプログラム Download PDFInfo
- Publication number
- JP2022501902A JP2022501902A JP2021515166A JP2021515166A JP2022501902A JP 2022501902 A JP2022501902 A JP 2022501902A JP 2021515166 A JP2021515166 A JP 2021515166A JP 2021515166 A JP2021515166 A JP 2021515166A JP 2022501902 A JP2022501902 A JP 2022501902A
- Authority
- JP
- Japan
- Prior art keywords
- image processing
- image
- interest
- instruction information
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 55
- 238000004590 computer program Methods 0.000 title claims description 16
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 55
- 238000003786 synthesis reaction Methods 0.000 claims abstract description 55
- 238000000034 method Methods 0.000 claims abstract description 49
- 238000012545 processing Methods 0.000 claims description 32
- 239000002131 composite material Substances 0.000 claims description 25
- 238000004891 communication Methods 0.000 claims description 19
- 230000004927 fusion Effects 0.000 claims description 13
- 239000000203 mixture Substances 0.000 claims description 12
- 238000004458 analytical method Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 abstract description 16
- 230000008569 process Effects 0.000 abstract description 14
- 238000005516 engineering process Methods 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 230000004044 response Effects 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 238000007500 overflow downdraw method Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/167—Position within a video image, e.g. region of interest [ROI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234345—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440245—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
本発明は、2018年9月19日に中国特許局に提出された、出願番号が201811095593.9、発明名称が「画像処理方法、装置、システム、ネットワーク機器、端末及び記憶媒体」である中国特許出願の優先権を主張し、該出願の全内容が引用により本発明に組み込まれている。
ビデオ画像における関心領域間の合成表示方式を指示するための合成指示情報を取得するステップと、
前記合成指示情報に基づいて前記ビデオ画像のメディアストリームを生成するステップと、を含む画像処理方法を提供する。
ビデオ画像のビデオストリーム及び記述データを受信するステップと、
前記記述データを解析して関心領域の合成指示情報を得るステップと、
前記合成指示情報に応じて、前記ビデオストリームにおける関心領域画像の合成再生表示を制御するステップと、を含む画像処理方法をさらに提供する。
ネットワーク側はビデオ画像における各前記関心領域の合成表示方式を指示するための合成指示情報を取得し、前記合成指示情報に基づいて前記ビデオ画像のメディアストリームを生成し、メディアストリームをターゲットノードに送信するステップと、
前記ターゲットノードは前記メディアストリームを受信し、前記メディアストリームを解析して関心領域の合成指示情報を得て、前記合成指示情報に応じて前記メディアストリームにおけるビデオストリームの再生表示を制御するステップと、を含む画像処理方法をさらに提供する。
ビデオ画像における各前記関心領域の合成表示方式を指示するための合成指示情報を取得することに用いられる取得モジュールと、
前記合成指示情報に基づいて前記ビデオ画像のメディアストリームを生成することに用いられる処理モジュールと、を含む画像処理装置をさらに提供する。
ビデオ画像のビデオストリーム及び記述データを受信することに用いられる受信モジュールと、
前記記述データを解析して関心領域の合成指示情報を得ることに用いられる解析モジュールと、
前記合成指示情報に応じて、前記ビデオストリームにおける関心領域画像の合成再生表示を制御することに用いられる制御モジュールと、を含む画像処理装置をさらに提供する。
前記第1通信バスは、第1プロセッサと第1メモリとの接続通信を実現することに用いられ、
前記第1プロセッサは、第1メモリに記憶されている1つ又は複数のコンピュータプログラムを実行して、前記いずれかに記載の画像処理方法のステップを実現することに用いられるネットワーク機器をさらに提供する。
前記第2通信バスは、第2プロセッサと第2メモリとの接続通信を実現することに用いられ、
前記第2プロセッサは、第2メモリに記憶されている1つ又は複数のコンピュータプログラムを実行して、前記画像処理方法のステップを実現することに用いられる端末をさらに提供する。
ビデオ画像に複数のROIが存在する場合に、ユーザーが複数のROIを同時に視聴するニーズを満たすように符号化を行うために、本発明の実施例は画像処理方法を提供し、主にネットワーク側機器、エンコーダー等に応用され、サーバ、基地局等の機器を含むが、これらに限定されず、図1に示すように、以下のステップS101〜S102を含む。
関心領域を接合表示することを指示するための第1指示情報、関心領域を融合表示することを指示するための第2指示情報、関心領域を入れ子表示することを指示するための第3指示情報、関心領域をズーム表示することを指示するための第4指示情報、関心領域を回転表示することを指示するための第5指示情報、及び関心領域を切り取り表示することを指示するための第6指示情報のうちの少なくとも1種を含む。
version:バージョン情報;
length:長さ情報;
roi_num:含まれる関心領域の数;
(roi_position_x,roi_position_y,roi_position_z):ビデオ画像における関心領域の座標情報;
roi_width:関心領域の幅;
roi_height:関心領域の高さ;
roi_quality:関心領域品質情報;
relation_type:関心領域の合成指示情報であり、0は接合、1は入れ子、2は融合である;
(roi_new_position_x,roi_new_position_y,roi_new_position_z):関心領域の新画像における座標情報;
scale:関心領域のズーム率;
rotation:関心領域の回転角度;
flip:関心領域の反転であり、0は水平反転、1は垂直反転である;
alpha_flag:透明チャンネル識別子であり、0は透明チャンネル情報無し、1は透明チャンネル情報有りである;
alpha_info():透明チャンネル情報と関心領域とを組み合わせて(切り取り)新たな画像を生成する;
filter_info():relation_typeが融合方式である場合、融合領域のフィルタリング方式、例えば平均値、中央値等を指すことができる;
user_data():ユーザー情報。
roi_num:含まれる関心領域の数;
(roi_pos_x,roi_pos_y):スライスグループ(Slice Group)又はタイルTileにおける関心領域の座標情報;
roi_width:関心領域の幅;
roi_height:関心領域の高さ;
roi_quality:関心領域品質情報;
relation_type:関心領域の関連関係であり、0は接合、1は入れ子、2は融合である;
(roi_new_pos_x,roi_new_pos_y):新画像における関心領域の座標情報;
scale:関心領域のズーム率;
rotation:関心領域の回転角度;
flip:関心領域の反転であり、0は水平反転、1は垂直反転である;
alpha_flag:透明チャンネル識別子であり、0は透明チャンネル情報無し、1は透明チャンネル情報有りである;
alpha_info():透明チャンネル情報と関心領域とを組み合わせて新たな画像を生成する;
filter_info():relation_typeが融合方式である場合、融合領域のフィルタリング方式、例えば平均値、中央値等を指すことができる。
本発明の実施例は、実施例1をもとに、画像処理方法を提供し、主に端末、デコーダー等に適用され、携帯電話、パーソナルコンピュータ等を含むが、これらに限定されない。図15に示すように、該画像処理方法は以下のステップS151〜S153を含む。
本発明の実施例は、実施例1及び/又は実施例2をもとに、画像処理方法を提供し、主にネットワーク側及び端末側を含むシステムに適用され、図16に示すように、該画像処理方法は主に以下のステップS161〜S166を含む。
本発明の実施例は、実施例1をもとに、実施例1に記載の画像処理方法のステップを実現することに用いられる画像処理装置を提供する。図17に示すように、該画像処理装置は、
ビデオ画像における各前記関心領域の合成表示方式を指示するための合成指示情報を取得することに用いられる取得モジュール171と、合成指示情報に基づいてビデオ画像のメディアストリームを生成することに用いられる処理モジュール172と、を含む。画像処理方法の具体的なステップは実施例1の説明を参照でき、ここでは詳細説明をしない。
本発明の実施例は、実施例2をもとに、実施例2に記載の画像処理方法のステップを実現することに用いられる画像処理装置を提供する。図18に示すように、該画像処理装置は、
ビデオ画像のビデオストリーム及び記述データを受信することに用いられる受信モジュール181と、
記述データを解析して関心領域の合成指示情報を得ることに用いられる解析モジュール182と、
合成指示情報に応じてビデオストリームにおける関心領域画像の再生表示を制御することに用いられる制御モジュール183と、を含む。
本発明の実施例は、実施例3をもとに、画像処理システムを提供し、図19に示すように、実施例4に記載の画像処理装置191及び実施例5に記載の画像処理装置192を含む。該画像処理システムは実施例3に記載の画像処理方法を実現することに用いられる。
本発明の実施例は、実施例1をもとに、ネットワーク機器を提供し、図20に示すように、第1プロセッサ201、第1メモリ202及び第1通信バス203を含み、
第1通信バス203は第1プロセッサ201と第1メモリ202との接続通信を実現することに用いられ、
前記第1プロセッサ201は、第1メモリ202に記憶されている1つ又は複数のコンピュータプログラムを実行して、実施例1に記載の画像処理方法のステップを実現することに用いられる。具体的には、実施例1の説明を参照でき、ここでは詳細説明をしない。
本発明の実施例は、実施例2をもとに、端末を提供し、図21に示すように、第2プロセッサ211、第2メモリ212及び第2通信バス213を含み、
そのうち、第2通信バス213は第2プロセッサ211と第2メモリ212との接続通信を実現することに用いられ、
前記第2プロセッサ211は、第2メモリ212に記憶されている1つ又は複数のコンピュータプログラムを実行して、実施例2に記載の画像処理方法のステップを実現することに用いられる。具体的には、実施例2の説明を参照でき、ここでは詳細説明をしない。
本発明の実施例は、実施例1、2をもとに、記憶媒体を提供し、該記憶媒体はコンピュータ読み取り可能な記憶媒体であってもよく、1つ又は複数のコンピュータプログラムが記憶されており、前記1つ又は複数のコンピュータプログラムが1つ又は複数のプロセッサにより実行されると、実施例1又は実施例2に記載の画像処理方法のステップを実現する。
本発明の実施例に係る画像処理方法、装置、システム、ネットワーク機器、端末及び記憶媒体は、ビデオ画像における関心領域間の合成表示方式を指示するための合成指示情報を取得し、前記合成指示情報に基づいて前記ビデオ画像のメディアストリームを生成し、即ち、該合成指示情報をビデオ画像のコードストリームに書き込むことによって、複数(少なくとも2つ)のROIが存在する場合におけるビデオ画像の符号化プロセスを実現し、ビデオ再生時、該合成指示情報に基づいて各ROIの合成表示再生を制御することによって、ユーザーが複数のROIを同時に視聴するニーズを満たすことができ、いくつかの実施プロセスでは、上記技術効果を実現できるが、これらに限定されない。
Claims (21)
- 画像処理方法であって、
ビデオ画像における関心領域間の合成表示方式を指示するための合成指示情報を取得するステップと、
前記合成指示情報に基づいて前記ビデオ画像のメディアストリームを生成するステップと、を含むことを特徴とする画像処理方法。 - 各前記関心領域の特徴情報を取得するステップをさらに含み、
前記合成指示情報に基づいて前記ビデオ画像のメディアストリームを生成する前記ステップは、前記合成指示情報及び前記特徴情報に基づいて、前記ビデオ画像のメディアストリームを生成するステップを含むことを特徴とする請求項1に記載の画像処理方法。 - 前記合成指示情報は、前記関心領域を接合表示することを指示するための第1指示情報、前記関心領域を融合表示することを指示するための第2指示情報、前記関心領域を入れ子表示することを指示するための第3指示情報、前記関心領域をズーム表示することを指示するための第4指示情報、前記関心領域を回転表示することを指示するための第5指示情報、及び前記関心領域を切り取り表示することを指示するための第6指示情報のうちの少なくとも1種を含むことを特徴とする請求項1に記載の画像処理方法。
- 前記特徴情報は位置情報及び/又は符号化品質指示情報を含み、前記位置情報は前記関心領域の特定位置の座標情報、及び前記関心領域の長さ値と幅値を含むことを特徴とする請求項2に記載の画像処理方法。
- 前記メディアストリームは記述データを含み、前記合成指示情報及び前記特徴情報に基づいて、前記ビデオ画像のメディアストリームを生成する前記ステップは、
前記合成指示情報及び前記特徴情報を前記記述データに書き込んで前記メディアストリームを生成するステップを含むことを特徴とする請求項2に記載の画像処理方法。 - 前記記述データは、付加拡張情報、ビデオユーザビリティ情報、システム層メディア属性記述単位のうちの少なくとも1種を含むことを特徴とする請求項5に記載の画像処理方法。
- 前記メディアストリームはビデオストリームをさらに含み、前記画像処理方法は、
前記ビデオ画像の前記関心領域を取得し、同一画像フレーム中の各前記関心領域の関連画像を少なくとも1つのスライス単位に画定して独立符号化を行い、前記ビデオ画像の第1ビデオストリームを生成するステップをさらに含むことを特徴とする請求項5に記載の画像処理方法。 - 各前記関連画像を前記合成指示情報に応じて合成したものを処理すべき画像フレームとし、前記処理すべき画像フレームを少なくとも1つのスライス単位に画定して符号化を行い、前記関心領域の第2ビデオストリームを生成するステップをさらに含むことを特徴とする請求項7に記載の画像処理方法。
- メディアストリームを記憶する、又はターゲットノードに送信するステップをさらに含むことを特徴とする請求項8に記載の画像処理方法。
- 前記メディアストリームをターゲットノードに送信する前記ステップの前に、前記ターゲットノードからの前記ビデオ画像の取得要求を受信するステップをさらに含むことを特徴とする請求項9に記載の画像処理方法。
- 前記メディアストリームをターゲットノードに送信する前記ステップは、前記取得要求から取得コンテンツを指示する識別情報を解析し、前記識別情報に応じて前記メディアストリームを前記ターゲットノードに送信するステップを含むことを特徴とする請求項10に記載の画像処理方法。
- 前記識別情報に応じて前記メディアストリームを前記ターゲットノードに送信する前記ステップは、
前記識別情報が第1識別子である場合、前記第1ビデオストリーム及び前記記述データを前記ターゲットノードに送信するステップと、
前記識別情報が第2識別子である場合、前記第1ビデオストリームにおける関心領域のスライス単位及び前記記述データを抽出し、前記ターゲットノードに送信するステップと、
前記識別情報が第3識別子である場合、前記第2ビデオストリーム及び前記記述データを前記ターゲットノードに送信するステップと、を含むことを特徴とする請求項11に記載の画像処理方法。 - 前記ビデオ画像はパノラマビデオ画像であることを特徴とする請求項1−12のいずれか一項に記載の画像処理方法。
- 画像処理方法であって、
ビデオ画像のビデオストリーム及び記述データを受信するステップと、
前記記述データを解析して関心領域の合成指示情報を得るステップと、
前記合成指示情報に応じて、前記ビデオストリームにおける関心領域画像の合成再生表示を制御するステップと、を含むことを特徴とする画像処理方法。 - 画像処理方法であって、
ネットワーク側はビデオ画像における各前記関心領域の合成表示方式を指示するための合成指示情報を取得し、前記合成指示情報に基づいて前記ビデオ画像のメディアストリームを生成し、メディアストリームをターゲットノードに送信するステップと、
前記ターゲットノードは前記メディアストリームを受信し、前記メディアストリームを解析して関心領域の合成指示情報を得て、前記合成指示情報に応じて前記メディアストリームにおけるビデオストリームの再生表示を制御するステップと、を含むことを特徴とする画像処理方法。 - 画像処理装置であって、
ビデオ画像における各前記関心領域の合成表示方式を指示するための合成指示情報を取得することに用いられる取得モジュールと、
前記合成指示情報に基づいて前記ビデオ画像のメディアストリームを生成することに用いられる処理モジュールと、を含むことを特徴とする画像処理装置。 - 画像処理装置であって、
ビデオ画像のビデオストリーム及び記述データを受信することに用いられる受信モジュールと、
前記記述データを解析して関心領域の合成指示情報を得ることに用いられる解析モジュールと、
前記合成指示情報に応じて、前記ビデオストリームにおける関心領域画像の合成再生表示を制御することに用いられる制御モジュールと、を含むことを特徴とする画像処理装置。 - 請求項16に記載の画像処理装置及び請求項17に記載の画像処理装置を含むことを特徴とする画像処理システム。
- ネットワーク機器であって、第1プロセッサ、第1メモリ及び第1通信バスを含み、
前記第1通信バスは第1プロセッサと第1メモリとの接続通信を実現することに用いられ、
前記第1プロセッサは、第1メモリに記憶されている1つ又は複数のコンピュータプログラムを実行して、請求項1〜13のいずれか1項に記載の画像処理方法のステップを実現することに用いられることを特徴とするネットワーク機器。 - 端末であって、第2プロセッサ、第2メモリ及び第2通信バスを含み、
前記第2通信バスは第2プロセッサと第2メモリとの接続通信を実現することに用いられ、
前記第2プロセッサは第2メモリに記憶されている1つ又は複数のコンピュータプログラムを実行して、請求項14に記載の画像処理方法のステップを実現することに用いられることを特徴とする端末。 - 記憶媒体であって、1つ又は複数のプロセッサにより実行されると、請求項1〜13のいずれか1項、又は請求項14に記載の画像処理方法のステップを実現する1つ又は複数のコンピュータプログラムが記憶されていることを特徴とする記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811095593.9 | 2018-09-19 | ||
CN201811095593.9A CN110933461B (zh) | 2018-09-19 | 2018-09-19 | 图像处理方法、装置、系统、网络设备、终端及存储介质 |
PCT/CN2019/097355 WO2020057249A1 (zh) | 2018-09-19 | 2019-07-23 | 图像处理方法、装置、系统、网络设备、终端及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022501902A true JP2022501902A (ja) | 2022-01-06 |
JP7425788B2 JP7425788B2 (ja) | 2024-01-31 |
Family
ID=69856069
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021515166A Active JP7425788B2 (ja) | 2018-09-19 | 2019-07-23 | 画像処理方法、装置、システム、ネットワーク機器、端末及びコンピュータプログラム |
Country Status (6)
Country | Link |
---|---|
US (1) | US20220053127A1 (ja) |
EP (1) | EP3855750A4 (ja) |
JP (1) | JP7425788B2 (ja) |
KR (1) | KR102649812B1 (ja) |
CN (2) | CN110933461B (ja) |
WO (1) | WO2020057249A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113965749A (zh) * | 2020-12-14 | 2022-01-21 | 深圳市云数链科技有限公司 | 静态摄像机视频传输方法及系统 |
CN113206853B (zh) * | 2021-05-08 | 2022-07-29 | 杭州当虹科技股份有限公司 | 一种视频批改结果保存改进方法 |
CN113573059B (zh) * | 2021-09-23 | 2022-03-01 | 中兴通讯股份有限公司 | 图像显示方法、装置、存储介质及电子装置 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000165641A (ja) | 1998-11-24 | 2000-06-16 | Matsushita Electric Ind Co Ltd | 画像処理方法,画像処理装置およびデータ記憶媒体 |
JP2006352539A (ja) * | 2005-06-16 | 2006-12-28 | Sharp Corp | 広視野映像システム |
KR101255226B1 (ko) | 2005-09-26 | 2013-04-16 | 한국과학기술원 | 스케일러블 비디오 코딩에서 다중 roi 설정, 복원을위한 장치 및 방법 |
US9691098B2 (en) * | 2006-07-07 | 2017-06-27 | Joseph R. Dollens | Method and system for managing and displaying product images with cloud computing |
CN1889686A (zh) * | 2006-07-14 | 2007-01-03 | 北京时越网络技术有限公司 | 一种同时显示多路视频信息的方法 |
JP5194679B2 (ja) * | 2007-09-26 | 2013-05-08 | 日産自動車株式会社 | 車両用周辺監視装置および映像表示方法 |
KR101176065B1 (ko) * | 2008-12-22 | 2012-08-24 | 한국전자통신연구원 | 스테레오스코픽 영상에 관한 데이터를 전송하는 방법, 스테레오스코픽 영상을 재생하는 방법, 및 스테레오스코픽 영상 데이터의 파일 생성 방법 |
CN101521745B (zh) * | 2009-04-14 | 2011-04-13 | 王广生 | 一组多镜头光心重合式全方位摄像装置及全景摄像、转播的方法 |
US20120140067A1 (en) * | 2010-12-07 | 2012-06-07 | Scott Crossen | High Definition Imaging Over Legacy Surveillance and Lower Bandwidth Systems |
JP5870835B2 (ja) | 2012-04-27 | 2016-03-01 | 富士通株式会社 | 動画像処理装置、動画像処理方法および動画像処理プログラム |
US9827487B2 (en) * | 2012-05-14 | 2017-11-28 | Sphero, Inc. | Interactive augmented reality using a self-propelled device |
US9497405B2 (en) * | 2012-07-17 | 2016-11-15 | Nec Display Solutions, Ltd. | Display device for displaying videos side by side without overlapping each other and method for the same |
JP6141084B2 (ja) * | 2013-04-19 | 2017-06-07 | キヤノン株式会社 | 撮像装置 |
US10397666B2 (en) | 2014-06-27 | 2019-08-27 | Koninklijke Kpn N.V. | Determining a region of interest on the basis of a HEVC-tiled video stream |
JP2016048839A (ja) | 2014-08-27 | 2016-04-07 | 株式会社小糸製作所 | 電子制御ユニットおよび車両用映像システム |
CN105578204B (zh) * | 2014-10-14 | 2020-10-30 | 海信视像科技股份有限公司 | 一种多视频数据显示的方法及装置 |
CN106331732B (zh) * | 2016-09-26 | 2019-11-12 | 北京疯景科技有限公司 | 生成、展现全景内容的方法及装置 |
CN108322727A (zh) * | 2018-02-28 | 2018-07-24 | 北京搜狐新媒体信息技术有限公司 | 一种全景视频传输方法及装置 |
-
2018
- 2018-09-19 CN CN201811095593.9A patent/CN110933461B/zh active Active
- 2018-09-19 CN CN202310035569.0A patent/CN115883882A/zh active Pending
-
2019
- 2019-07-23 US US17/276,572 patent/US20220053127A1/en active Pending
- 2019-07-23 WO PCT/CN2019/097355 patent/WO2020057249A1/zh unknown
- 2019-07-23 KR KR1020217011376A patent/KR102649812B1/ko active IP Right Grant
- 2019-07-23 EP EP19862435.5A patent/EP3855750A4/en active Pending
- 2019-07-23 JP JP2021515166A patent/JP7425788B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
KR102649812B1 (ko) | 2024-03-21 |
US20220053127A1 (en) | 2022-02-17 |
EP3855750A4 (en) | 2021-10-20 |
JP7425788B2 (ja) | 2024-01-31 |
CN115883882A (zh) | 2023-03-31 |
CN110933461B (zh) | 2022-12-30 |
EP3855750A1 (en) | 2021-07-28 |
WO2020057249A1 (zh) | 2020-03-26 |
CN110933461A (zh) | 2020-03-27 |
KR20210059759A (ko) | 2021-05-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10880535B2 (en) | Method for transmitting 360 video, method for receiving 360 video, apparatus for transmitting 360 video, and apparatus for receiving 360 video | |
JP7399224B2 (ja) | メディアコンテンツを送信するための方法、装置及びコンピュータプログラム | |
CN109983500B (zh) | 重新投影全景视频图片的平板投影以通过应用进行渲染 | |
US11917221B2 (en) | Encoding device and method, reproduction device and method, and program | |
CN108271044B (zh) | 一种信息的处理方法及装置 | |
US20190373245A1 (en) | 360 video transmission method, 360 video reception method, 360 video transmission device, and 360 video reception device | |
CN108965929B (zh) | 一种视频信息的呈现方法、呈现视频信息的客户端和装置 | |
KR20190094451A (ko) | 360 비디오 시스템에서 오버레이 처리 방법 및 그 장치 | |
US20200389640A1 (en) | Method and device for transmitting 360-degree video by using metadata related to hotspot and roi | |
CN110100435B (zh) | 生成装置、识别信息生成方法、再现装置和图像再现方法 | |
US10757463B2 (en) | Information processing apparatus and information processing method | |
US20180176650A1 (en) | Information processing apparatus and information processing method | |
US10873737B1 (en) | VR device and control method for the same | |
JP7425788B2 (ja) | 画像処理方法、装置、システム、ネットワーク機器、端末及びコンピュータプログラム | |
US11979544B2 (en) | 360 video transmission method, 360 video reception method, 360 video transmission apparatus, and 360 video reception apparatus | |
CA3018600C (en) | Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices | |
WO2019007120A1 (zh) | 一种媒体数据的处理方法和装置 | |
TW201841499A (zh) | 用於軌道合成的方法以及裝置 | |
US20220217314A1 (en) | Method for transmitting 360 video, method for receiving 360 video, 360 video transmitting device, and 360 video receiving device | |
Seo et al. | Bandwidth-Efficient Transmission Method for User View-Oriented Video Services | |
CN108271084B (zh) | 一种信息的处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210322 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220715 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230830 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230912 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231211 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240119 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7425788 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |