JP7163285B2 - 映像送信装置および映像受信装置 - Google Patents

映像送信装置および映像受信装置 Download PDF

Info

Publication number
JP7163285B2
JP7163285B2 JP2019523413A JP2019523413A JP7163285B2 JP 7163285 B2 JP7163285 B2 JP 7163285B2 JP 2019523413 A JP2019523413 A JP 2019523413A JP 2019523413 A JP2019523413 A JP 2019523413A JP 7163285 B2 JP7163285 B2 JP 7163285B2
Authority
JP
Japan
Prior art keywords
roi
image
image data
unit
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019523413A
Other languages
English (en)
Other versions
JPWO2018225449A1 (ja
Inventor
直樹 吉持
達也 杉岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Semiconductor Solutions Corp
Original Assignee
Sony Semiconductor Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Semiconductor Solutions Corp filed Critical Sony Semiconductor Solutions Corp
Publication of JPWO2018225449A1 publication Critical patent/JPWO2018225449A1/ja
Application granted granted Critical
Publication of JP7163285B2 publication Critical patent/JP7163285B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347—Demultiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605—Creation or processing of packetized elementary streams [PES]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4343—Extraction or processing of packetized elementary streams [PES]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/665—Control of cameras or camera modules involving internal camera communication with the image sensor, e.g. synchronising or multiplexing SSIS control signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/9201—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving the multiplexing of an additional signal and the video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Communication Control (AREA)

Description

本開示は、映像送信装置および映像受信装置に関する。
近年、データ量の大きなデータを大量に送信する用途が増えてきている。伝送システムに大きな負荷がかかりやすく、最悪の場合には、伝送システムがダウンし、データ伝送が行えなくなるおそれがある。
従来では、伝送システムのダウンを避けるために、例えば、撮影した画像を全て送信するのではなく、撮影対象の物体を特定し、特定した物体を切り出した一部の画像だけを送信することが行われている。なお、撮影した画像から一部の画像を切り出すことについては、例えば、下記の特許文献に記載されている。
特開２０１６－２０１７５６号公報 特開２０１４－３９２１９号公報 特開２０１３－１６４８３４号公報 特開２０１２－２０９８３１号公報
ところで、イメージセンサからアプリケーションプロセッサへの伝送に用いられる方式として、ＭＩＰＩ(Mobile Industry Processor Interface) ＣＳＩ（Camera Serial Interface）－２、ＭＩＰＩ ＣＳＩ－３などが用いられることがある。また、アプリケーションプロセッサからディスプレイへの伝送に用いられる方式として、ＭＩＰＩ ＤＳＩ（Display Serial Interface）などが用いられることがある。これらの方式を用いて、撮像画像から切り出した一部の領域（ＲＯＩ（Region Of Interest））を伝送しようとした場合、様々な制約により、ＲＯＩの伝送が容易ではないことがある。従って、様々な制約の下でも、ＲＯＩの伝送を行うことの可能な映像送信装置および映像受信装置を提供することが望ましい。
本開示の一実施形態に係る第１の映像送信装置は、画像におけるＲＯＩの画像データをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出するとともに、ＲＯＩについての情報をＥｍｂｅｄｄｅｄＤａｔａで送出する送信部を備えている。ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａとは、装置間で伝送される主要なデータ（アプリケーションデータ）を指している。ＥｍｂｅｄｄｅｄＤａｔａとは、画像データフレームのヘッダもしくはフッタに埋め込むことの可能な追加情報を指している。
本開示の一実施形態に係る第１の映像送信装置では、画像におけるＲＯＩの画像データがＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出されるとともに、ＲＯＩについての情報がＥｍｂｅｄｄｅｄＤａｔａで送出される。これにより、映像送信装置から送出された伝送信号を受信した装置において、伝送信号から、ＲＯＩの画像データを容易に抽出することができる。
本開示の一実施形態に係る第２の映像送信装置は、画像における各ＲＯＩについての情報に基づいて、２以上のＲＯＩ同士が重なり合う重なり領域を検出する検出部を備えている。第２の映像送信装置は、さらに、画像における複数のＲＯＩの第１画像データにおいて重なり領域の第２画像データが重複して含まれないように、複数の第１画像データから第２画像データを割愛したものである複数の第３画像データをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出する送信部を備えている。この送信部は、さらに、画像における各ＲＯＩについての情報をＥｍｂｅｄｄｅｄＤａｔａで送出する。
本開示の一実施形態に係る第２の映像送信装置では、複数の第３画像データがＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出されるとともに、画像における各ＲＯＩについての情報がＥｍｂｅｄｄｅｄＤａｔａで送出される。これにより、映像送信装置から送出された伝送信号を受信した装置において、伝送信号から、ＲＯＩの画像データを容易に抽出することができる。
本開示の一実施形態に係る映像受信装置は、画像におけるＲＯＩの画像データをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含むとともに、ＲＯＩについての情報をＥｍｂｅｄｄｅｄＤａｔａに含む伝送信号を受信する受信部を備えている。この映像受信装置は、さらに、受信部で受信した伝送信号に含まれるＥｍｂｅｄｄｅｄＤａｔａから、ＲＯＩについての情報を抽出するとともに、抽出した情報に基づいて、受信部で受信した伝送信号に含まれるＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａから、ＲＯＩの画像データを抽出する情報処理部を備えている。
本開示の一実施形態に係る映像受信装置では、受信部で受信した伝送信号に含まれるＥｍｂｅｄｄｅｄＤａｔａから、ＲＯＩについての情報が抽出されるとともに、抽出したＲＯＩについての情報に基づいて、受信部で受信した伝送信号に含まれるＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａから、ＲＯＩの画像データが抽出される。これにより、伝送信号から、ＲＯＩの画像データを容易に抽出することができる。
本開示の一実施形態に係る第１および第２の映像送信装置ならびに映像受信装置によれば、映像送信装置から送出された伝送信号を受信した装置において、伝送信号から、ＲＯＩの画像データを容易に抽出することができるようにしたので、様々な制約の下でも、ＲＯＩの伝送を行うことができる。なお、本開示の効果は、ここに記載された効果に必ずしも限定されず、本明細書中に記載されたいずれの効果であってもよい。
映像伝送システムの概略構成例を表す図である。 図１の映像送信装置の概略構成例を表す図である。 撮像画像に２つのＲＯＩが含まれているときの、伝送データの生成手順の一例を表す図である。 パケットヘッダの構成例を表す図である。 伝送データの構成例を表す図である。 伝送データの構成例を表す図である。 ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａの構成例を表す図である。 図１の映像受信装置の概略構成例を表す図である。 伝送データに２つの画像が含まれているときの、撮像画像に含まれる２つのＲＯＩ画像の生成手順の一例を表す図である。 図１の映像受信装置の概略構成の一変形例を表す図である。 １ラインの構成の一変形例を表す図である。 １ラインの構成の一変形例を表す図である。 図１の映像送信装置の概略構成の一変形例を表す図である。 伝送データの構成例を表す図である。
以下、本開示を実施するための形態について、図面を参照して詳細に説明する。以下の説明は本開示の一具体例であって、本開示は以下の態様に限定されるものではない。
＜実施の形態＞
[構成]
近年、スマートフォンなどの携帯デバイスやカメラデバイスなどでは、扱う画像データの大容量化が進み、デバイス内または異なるデバイス間でのデータ伝送に高速化、かつ低消費電力化が求められている。このような要求に応えるため、携帯デバイスやカメラデバイス向けの接続インタフェースとして、ＭＩＰＩアライアンスが策定したＣ－ＰＨＹ規格やＤ－ＰＨＹ規格といった高速インタフェース規格の標準化が進められている。Ｃ－ＰＨＹ規格やＤ－ＰＨＹ規格は、通信プロトコルの物理層（physical layer：ＰＨＹ）のインタフェース規格である。また、Ｃ－ＰＨＹ規格やＤ－ＰＨＹ規格の上位プロトコル・レイヤとして、携帯デバイスのディスプレイ向けのＤＳＩや、カメラデバイス向けのＣＳＩが存在する。
本開示の一実施形態に係る映像伝送システム１は、ＭＩＰＩ ＣＳＩ－２規格、ＭＩＰＩ ＣＳＩ－３規格、もしくは、ＭＩＰＩ ＤＳＩ規格で信号を送受信するシステムである。図１は、本実施の形態に係る映像伝送システム１の概要を表したものである。映像伝送システム１は、データ信号、クロック信号および制御信号の伝送に適用されるものであり、映像送信装置１００および映像受信装置２００を備えている。映像伝送システム１は、映像送信装置１００と映像受信装置２００とに跨がって、例えば画像データ等のデータ信号を伝送するデータレーンＤＬと、クロック信号を伝送するクロックレーンＣＬと、制御信号を伝送するカメラ制御インタフェースＣＣＩとを備えている。図１には、１つのデータレーンＤＬが設けられている例が示されているが、複数のデータレーンＤＬが設けられていてもよい。カメラ制御インタフェースＣＣＩは、Ｉ2Ｃ（Inter-Integrated Circuit）規格と互換性を有する双方向制御インタフェースである。
映像送信装置１００は、ＭＩＰＩ ＣＳＩ－２規格、ＭＩＰＩ ＣＳＩ－３規格、もしくは、ＭＩＰＩ ＤＳＩ規格で信号を送出する装置である。ＣＳＩトランスミッタ１００Ａと、ＣＣＩスレーブ１００Ｂとを有している。映像受信装置２００は、ＣＳＩレシーバ２００Ａと、ＣＣＩマスター２００Ｂとを有している。クロックレーンＣＬにおいて、ＣＳＩトランスミッタ１００ＡとＣＳＩレシーバ２００Ａとの間は、クロック信号線で接続されている。データレーンＤＬにおいて、ＣＳＩトランスミッタ１００ＡとＣＳＩレシーバ２００Ａとの間は、クロック信号線で接続されている。カメラ制御インタフェースＣＣＩにおいて、ＣＣＩスレーブ１００ＢとＣＣＩマスター２００Ｂとの間は、制御信号線で接続されている。
ＣＳＩトランスミッタ１００Ａは、クロック信号として差動のクロック信号を生成し、クロック信号線に出力する差動信号送信回路である。ＣＳＩトランスミッタ１００Ａは、さらに、データ信号として差動のデータ信号を生成し、データ信号線に出力する差動信号送信回路でもある。ＣＳＩレシーバ２００Ａは、クロック信号として差動のクロック信号を、クロック信号線を介して受信し、受信した差動のクロック信号に対して所定の処理を行う差動信号受信回路である。ＣＳＩレシーバ２００Ａは、さらに、データ信号として差動のデータ信号を、データ信号線を介して受信し、受信した差動のデータ信号に対して所定の処理を行う差動信号受信回路でもある。
（映像送信装置１００）
図２は、映像送信装置１００の構成の一例を表したものである。映像送信装置１００は、ＣＳＩトランスミッタ１００Ａの一具体例に相当する。映像送信装置１００は、例えば、撮像部１１０、画像処理部１２０，１３０および送信部１４０を備えている。映像送信装置１００は、撮像部１１０で得られた撮像画像１１１に対して所定の処理を行うことにより生成した伝送データ１４７Ａを、データレーンＤＬを介して映像受信装置２００に送信する。図３は、伝送データ１４７Ａの生成手順の一例したものである。
撮像部１１０は、例えば、光学レンズなどを通して得られた光学的な画像信号を画像データに変換する。撮像部１１０は、例えば、例えばＣＣＤ（Charge Coupled Device）イメージセンサやＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサを含んで構成されている。撮像部１１０は、アナログ－デジタル変換回路を有しており、アナログの画像データをデジタルの画像データに変換する。変換した後のデータ形式は、各画素の色を輝度成分Ｙおよび色差成分Ｃｂ，Ｃｒで表現するＹＣｂＣｒ形式であってもよいし、ＲＧＢ形式などであってもよい。撮像部１１０は、撮像により得られた撮像画像１１１（デジタルの画像データ）を画像処理部１２０に出力する。
画像処理部１２０は、撮像部１１０から入力された撮像画像１１１に対して所定の処理を行う回路である。画像処理部１２０は、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、撮像部１１０から入力された撮像画像１１１に対して所定の処理を行う。これにより、画像処理部１２０は、種々のデータ（１２０Ａ，１２０Ｂ，１２０Ｃ）を生成し、送信部１４０に出力する。画像処理部１３０は、撮像部１１０から入力された撮像画像１１１に対して所定の処理を行う回路である。画像処理部１３０は、通常画像の出力を指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、撮像部１１０から入力された撮像画像１１１に対して所定の処理を行う。これにより、画像処理部１３０は、画像データ１３０Ａを生成し、送信部１４０に出力する。
画像処理部１３０は、例えば、エンコード部１３１を有している。エンコード部１３１は、撮像画像１１１をエンコードして圧縮像データ１３０Ａを生成する。画像処理部１３０は、例えば、圧縮像データ１３０Ａの形式として、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）規格に準拠した圧縮形式等により撮像画像１１１を圧縮する。
画像処理部１２０は、例えば、ＲＯＩ切り出し部１２１、ＲＯＩ解析部１２２、重なり検出部１２３、優先度設定部１２４、エンコード部１２５および画像処理制御部１２６を有している。
ＲＯＩ切り出し部１２１は、撮像部１１０から入力された撮像画像１１１に含まれる撮影対象の１または複数の物体を特定し、特定した物体ごとに注目領域ＲＯＩを設定する。注目領域ＲＯＩは、例えば、特定した物体を含む方形状の領域である。ＲＯＩ切り出し部１２１は、撮像画像１１１から、各注目領域ＲＯＩの画像（例えば図３中のＲＯＩ画像１１２）を切り出す。ＲＯＩ切り出し部１２１は、さらに、設定した注目領域ＲＯＩごとに、識別子として領域番号を付与する。ＲＯＩ切り出し部１２１は、例えば、撮像画像１１１において、２つの注目領域ＲＯＩを設定した場合には、一方の注目領域ＲＯＩ（例えば図３中の注目領域ＲＯＩ１）に対して、領域番号１を付与し、他方の注目領域ＲＯＩ（例えば図３中の注目領域ＲＯＩ２）に対して、領域番号２を付与する。ＲＯＩ切り出し部１２１は、例えば、付与した識別子（領域番号）を記憶部に格納する。ＲＯＩ切り出し部１２１は、例えば、撮像画像１１１から切り出した各ＲＯＩ画像１１２を記憶部に格納する。ＲＯＩ切り出し部１２１は、さらに、例えば、各注目領域ＲＯＩに付与した識別子（領域番号）を、ＲＯＩ画像１１２と関連づけて、記憶部に格納する。
ＲＯＩ解析部１２２は、注目領域ＲＯＩごとに、撮像画像１１１における注目領域ＲＯＩの位置情報１１３を導出する。位置情報１１３は、例えば、注目領域ＲＯＩの左上端座標（Ｘａ，Ｙａ）と、注目領域ＲＯＩのＸ軸方向の長さと、注目領域ＲＯＩのＹ軸方向の長さとによって構成されている。注目領域ＲＯＩのＸ軸方向の長さは、例えば、注目領域ＲＯＩのＸ軸方向の物理領域長さＸＬａである。注目領域ＲＯＩのＹ軸方向の長さは、例えば、注目領域ＲＯＩのＹ軸方向の物理領域長さＹＬａである。物理領域長さとは、注目領域ＲＯＩの物理的な長さ（データ長）を指している。位置情報１１３において、注目領域ＲＯＩの左上端とは異なる位置の座標が含まれていてもよい。ＲＯＩ解析部１２２は、例えば、導出した位置情報１１３を記憶部に格納する。ＲＯＩ解析部１２２は、例えば、注目領域ＲＯＩに対して付与された識別子（領域番号）と関連づけて、記憶部に格納する。
ＲＯＩ解析部１２２は、注目領域ＲＯＩごとに、位置情報１１３として、さらに、例えば、注目領域ＲＯＩのＸ軸方向の出力領域長さＸＬｃや、注目領域ＲＯＩのＹ軸方向の出力領域長さＹＬｃを導出してもよい。出力領域長さとは、例えば、注目領域ＲＯＩに対して間引き処理や画素加算などによる解像度変更がなされた後の注目領域ＲＯＩの物理的な長さ（データ長）である。ＲＯＩ解析部１２２は、例えば、注目領域ＲＯＩごとに、位置情報１１３の他に、例えば、センシングインフォメーション、露光情報、ゲイン情報、ＡＤ（Analog-Digital）語長、画像フォーマットなどを導出し、記憶部に格納してもよい。
センシングインフォメーションとは、注目領域ＲＯＩに含まれる物体についての演算内容や、ＲＯＩ画像１１２に対する後段信号処理のための補足情報などを指している。露光情報とは、注目領域ＲＯＩの露光時間を指している。ゲイン情報とは、注目領域ＲＯＩのゲイン情報を指している。ＡＤ語長とは、注目領域ＲＯＩ内でＡＤ変換された１画素あたりのデータの語長を指している。画像フォーマットとは、注目領域ＲＯＩの画像のフォーマットを指している。ＲＯＩ解析部１２２は、例えば、撮像画像１１１に含まれる注目領域ＲＯＩの数（ＲＯＩ数）を導出し、記憶部に格納してもよい。
重なり検出部１２３は、撮像画像１１１において、撮影対象の複数の物体が特定されたときには、撮像画像１１１における複数の注目領域ＲＯＩの位置情報１１３に基づいて、２以上の注目領域ＲＯＩ同士が重なり合う重なり領域（ＲＯＯ（Region Of Overlap））を検出する。つまり、重なり検出部１２３は、重なり領域ＲＯＯごとに、撮像画像１１１における重なり領域ＲＯＯの位置情報１１４を導出する。重なり検出部１２３は、例えば、導出した位置情報１１４を記憶部に格納する。重なり検出部１２３は、例えば、導出した位置情報１１４を重なり領域ＲＯＯと対応付けて、記憶部に格納する。重なり領域ＲＯＯは、例えば、互いに重なり合う２以上の注目領域ＲＯＩにおいて最も小さな注目領域ＲＯＩと同じ大きさか、それよりも小さな方形状の領域である。位置情報１１４は、例えば、重なり領域ＲＯＯの左上端座標（Ｘｂ，Ｙｂ）と、重なり領域ＲＯＯのＸ軸方向の長さと、重なり領域ＲＯＯのＹ軸方向の長さとによって構成されている。重なり領域ＲＯＯのＸ軸方向の長さは、例えば、物理領域長さＸＬｂである。重なり領域ＲＯＯのＹ軸方向の長さは、例えば、物理領域長さＹＬｂである。位置情報１１４において、重なり領域ＲＯＯの左上端とは異なる位置の座標が含まれていてもよい。
優先度設定部１２４は、撮像画像１１１において、注目領域ＲＯＩごとに優先度１１５を付与する。優先度設定部１２４は、例えば、付与した優先度１１５を記憶部に格納する。優先度設定部１２４は、例えば、付与した優先度１１５を注目領域ＲＯＩと対応付けて、記憶部に格納する。優先度設定部１２４は、注目領域ＲＯＩごとに付与されている領域番号とは別に、優先度１１５を注目領域ＲＯＩごとに付与してもよいし、注目領域ＲＯＩごとに付与されている領域番号を、優先度１１５の代わりとしてもよい。優先度設定部１２４は、例えば、優先度１１５を注目領域ＲＯＩと関連付けて、記憶部に格納してもよいし、注目領域ＲＯＩごとに付与されている領域番号を注目領域ＲＯＩと関連付けて、記憶部に格納してもよい。
優先度１１５は、各注目領域ＲＯＩの識別子であり、撮像画像１１１における複数の注目領域ＲＯＩのいずれに対して重なり領域ＲＯＯの割愛が行われたかを判別することの可能な判別情報である。優先度設定部１２４は、例えば、それぞれが重なり領域ＲＯＯを含む２つの注目領域ＲＯＩにおいて、一方の注目領域ＲＯＩに対して優先度１１５として１を付与し、他方の注目領域ＲＯＩに対して優先度１１５として２を付与する。この場合には、後述の伝送画像１１６の作成に際して、優先度１１５の数値が大きい方の注目領域ＲＯＩに対して、重なり領域ＲＯＯの割愛が行われる。なお、優先度設定部１２４は、注目領域ＲＯＩごとに付与されている領域番号と同じ番号を、注目領域ＲＯＩに対して優先度１１５として付与してもよい。優先度設定部１２４は、例えば、各注目領域ＲＯＩに付与した優先度１１５を、ＲＯＩ画像１１２と関連づけて、記憶部に格納する。
エンコード部１２５は、各伝送画像１１６を、エンコードして圧縮像データ１２０Ａを生成する。エンコード部１２５は、例えば、圧縮像データ１２０Ａの形式として、ＪＰＥＧ規格に準拠した圧縮形式等により各伝送画像１１６を圧縮する。エンコード部１２５は、上記の圧縮処理を行う前に、各伝送画像１１６を生成する。エンコード部１２５は、撮像画像１１１から得られた複数のＲＯＩ画像１１２において重なり領域ＲＯＯの画像１１８が重複して含まれないように、撮像画像１１１から得られた複数のＲＯＩ画像１１２から画像１１８を割愛したものである複数の伝送画像１１６を生成する。
エンコード部１２５は、例えば、注目領域ＲＯＩごとに付与されている優先度１１５に基づいて、複数のＲＯＩ画像１１２のいずれに対して画像１１８の割愛を行うかを決定する。なお、エンコード部１２５は、例えば、注目領域ＲＯＩごとに付与されている領域番号を優先度１１５として用いることにより、複数のＲＯＩ画像１１２のいずれに対して画像１１８の割愛を行うかを決定してもよい。エンコード部１２５は、上記のようにして特定されたＲＯＩ画像１１２において画像１１８を割愛したものを、伝送画像１１６（例えば図３の伝送画像１１６ａ２）とする。エンコード部１２５は、重なり領域ＲＯＯを含まないＲＯＩ画像１１２や、上記の決定により画像１１８が割愛されないこととなったＲＯＩ画像１１２については、ＲＯＩ画像１１２そのものを伝送画像１１６（例えば図３の伝送画像１１６ａ１）とする。
画像処理制御部１２６は、ＲＯＩ情報１２０Ｂおよびフレーム情報１２０Ｃを生成し、送信部１４０に送信する。ＲＯＩ情報１２０Ｂは、例えば、各位置情報１１３を含んでいる。ＲＯＩ情報１２０Ｂは、さらに、例えば、各注目領域ＲＯＩのデータタイプ、撮像画像１１１に含まれる注目領域ＲＯＩの数、各注目領域ＲＯＩの領域番号（もしくは優先度１１５）、各注目領域ＲＯＩのデータ長、および各注目領域ＲＯＩの画像フォーマットのうち少なくとも１つを含んでいる。フレーム情報１２０Ｃは、例えば、フレームごとに付与されるバーチャルチャネルの番号、各注目領域ＲＯＩのデータタイプ、ラインごとのＰａｙｌｏａｄ長などを含んでいる。データタイプには、例えば、ＹＵＶデータ、ＲＧＢデータまたはＲＡＷデータなどが含まれている。データタイプには、さらに、例えば、ＲＯＩ形式のデータまたは通常形式のデータなどが含まれている。Ｐａｙｌｏａｄ長は、例えば、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄに含まれるピクセル数であり、例えば、注目領域ＲＯＩごとのピクセル数である。ここで、Ｐａｙｌｏａｄとは、映像送信装置１００および映像受信装置２００の間で伝送される主要なデータ（アプリケーションデータ）を指している。ＬｏｎｇＰａｃｋｅｔとは、パケットヘッドＰＨとパケットフッタＰＦとの間に配置されるパケットを指している。
送信部１４０は、画像処理部１２０，１３０から入力された種々のデータ（１２０Ａ，１２０Ｂ，１２０Ｃ，１３０Ａ）に基づいて伝送データ１４７Ａを生成し、送出する回路である。送信部１４０は、撮像画像１１１における各注目領域ＲＯＩについてのＲＯＩ情報１２０ＢをＥｍｂｅｄｄｅｄＤａｔａで送出する。送信部１４０は、さらに、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）をＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出する。このとき、送信部１４０は、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）を互いに共通のバーチャルチャネルで送出する。また、送信部１４０は、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）を画像データフレームによって送出するとともに、各注目領域ＲＯＩについてのＲＯＩ情報１２０Ｂを画像データフレームのヘッダで送出する。送信部１４０は、また、通常画像の出力を指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、通常の画像データ（圧縮像データ１３０Ａ）をＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出する。
送信部１４０は、例えば、ＬＩＮＫ制御部１４１、ＥＣＣ生成部１４２、ＰＨ生成部１４３、ＥＢＤバッファ１４４、ＲＯＩデータバッファ１４５、通常画像データバッファ１４６および合成部１４７を有している。ＬＩＮＫ制御部１４１、ＥＣＣ生成部１４２、ＰＨ生成部１４３、ＥＢＤバッファ１４４およびＲＯＩデータバッファ１４５は、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、合成部１４７への出力を行う。通常画像データバッファ１４６は、通常画像の出力を指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、合成部１４７への出力を行う。
なお、ＲＯＩデータバッファ１４５が、通常画像データバッファ１４６を兼ねていてもよい。この場合、送信部１４０は、ＲＯＩデータバッファ１４５および通常画像データバッファ１４６のそれぞれの出力端と、合成部１４７の入力端との間に、ＲＯＩデータバッファ１４５および通常画像データバッファ１４６のいずれかの出力を選択するセレクタを有していてもよい。
ＬＩＮＫ制御部１４１は、例えば、フレーム情報１２０ＣをラインごとにＥＣＣ生成部１４２およびＰＨ生成部１４３に出力する。ＥＣＣ生成部１４２は、例えば、フレーム情報１２０Ｃにおける１ラインのデータ（例えば、バーチャルチャネルの番号、各注目領域ＲＯＩのデータタイプ、ラインごとのＰａｙｌｏａｄ長など）に基づいて、そのラインの誤り訂正符号を生成する。ＥＣＣ生成部１４２は、例えば、生成した誤り訂正符号をＰＨ生成部１４３に出力する。ＰＨ生成部１４３は、例えば、フレーム情報１２０Ｃと、ＥＣＣ生成部１４２で生成された誤り訂正符号とを用いて、１ラインごとにパケットヘッダＰＨを生成する。このとき、パケットヘッダＰＨは、例えば、図４に示したように、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａのパケットヘッダである。このパケットヘッダＰＨには、例えば、ＤＩ、ＷＣおよびＥＣＣが含まれている。ＷＣは、映像受信装置２００に対してパケットの終わりをワード数で示すための領域である。ＷＣには、例えば、Ｐａｙｌｏａｄ長が含まれており、例えば、注目領域ＲＯＩごとのピクセル数が含まれている。ＥＣＣは、ビットエラーを修正するための値を格納する領域である。ＥＣＣには、誤り訂正符号が含まれている。ＤＩは、データ識別子を格納する領域である。ＤＩには、ＶＣ（バーチャルチャネル）の番号およびＤａｔａＴｙｐｅ（各注目領域ＲＯＩのデータタイプ）が含まれている。ＶＣ（バーチャルチャネル）は、パケットのフロー制御のために導入された概念であり、同一のリンクを共用する複数の独立したデータストリームをサポートするためのメカニズムである。ＰＨ生成部１４３は、生成したパケットヘッダＰＨを合成部１４７に出力する。
ＥＢＤバッファ１４４は、ＲＯＩ情報１２０Ｂを一次的に格納し、所定のタイミングでＲＯＩ情報１２０ＢをＥｍｂｅｄｄｅｄＤａｔａとして合成部１４７に出力する。ＥｍｂｅｄｄｅｄＤａｔａとは、画像データフレーム（後述の図５参照）のヘッダもしくはフッタに埋め込むことの可能な追加情報を指している。ＥｍｂｅｄｄｅｄＤａｔａには、例えば、ＲＯＩ情報１２０Ｂが含まれている。
ＲＯＩデータバッファ１４５は、圧縮像データ１２０Ａを一次的に格納し、所定のタイミングで圧縮像データ１２０ＡをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａとして合成部１４７に出力する。ＲＯＩデータバッファ１４５は、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、圧縮像データ１２０ＡをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａとして合成部１４７に出力する。通常画像データバッファ１４６は、圧縮像データ１３０Ａを一次的に格納し、所定のタイミングで圧縮像データ１３０ＡをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａとして合成部１４７に出力する。通常画像データバッファ１４６は、通常画像の出力を指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、圧縮像データ１３０ＡをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａとして合成部１４７に出力する。
合成部１４７は、通常画像の出力を指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、入力されたデータ（圧縮像データ１３０Ａ）に基づいて、伝送データ１４７Ａを生成する。合成部１４７は、生成した伝送データ１４７Ａを、データレーンＤＬを介して映像受信装置２００に出力する。一方、合成部１４７は、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、入力された各種データ（パケットヘッダＰＨ、ＲＯＩ情報１２０Ｂ、および圧縮像データ１２０Ａ）に基づいて、伝送データ１４７Ａを生成する。合成部１４７は、生成した伝送データ１４７Ａを、データレーンＤＬを介して映像受信装置２００に出力する。つまり、合成部１４７は、ＤａｔａＴｙｐｅ（各注目領域ＲＯＩのデータタイプ）をＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａのパケットヘッダＰＨに含めて送出する。また、合成部１４７は、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）を互いに共通のバーチャルチャネルで送出する。
伝送データ１４７Ａは、例えば、図５に示したような画像データフレームによって構成されている。画像データフレームは、通常、ヘッダ領域、パケット領域、およびフッタ領域を有している。図５では、便宜的に、フッタ領域の記載が省略されている。伝送データ１４７Ａのフレームヘッダ領域Ｒ１には、ＥｍｂｅｄｄｅｄＤａｔａが含まれている。このとき、ＥｍｂｅｄｄｅｄＤａｔａには、ＲＯＩ情報１２０Ｂが含まれている。図５において、伝送データ１４７Ａのパケット領域Ｒ２には、１ラインごとに、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａが含まれており、さらに、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａを挟み込む位置にパケットヘッダＰＨおよびパケットフッタＰＦが含まれている。さらに、パケットヘッダＰＨとパケットフッタＰＦを挟み込む位置にローパワーモードＬＰが含まれている。
このとき、パケットヘッダＰＨには、例えば、ＤＩ、ＷＣおよびＥＣＣが含まれている。ＷＣには、例えば、Ｐａｙｌｏａｄ長が含まれており、例えば、注目領域ＲＯＩごとのピクセル数が含まれている。ＥＣＣには、誤り訂正符号が含まれている。ＤＩには、ＶＣ（バーチャルチャネルの番号）およびＤａｔａＴｙｐｅ（各注目領域ＲＯＩのデータタイプ）が含まれている。本実施の形態では、各ラインのＶＣには、互いに共通のバーチャルチャネルの番号が付与されている。また、図５において、伝送データ１４７Ａのパケット領域Ｒ２には、圧縮像データ１４７Ｂが含まれている。圧縮像データ１４７Ｂは、１つの圧縮像データ１２０Ａ、もしくは複数の圧縮像データ１２０Ａによって構成されている。ここで、図５において、パケットヘッダＰＨ寄りのパケット群には、例えば、図３中の伝送画像１１６ａ１の圧縮像データ１２０Ａ（１２０Ａ１）が含まれており、パケットヘッダＰＨから離れたパケット群には、例えば、図３中の伝送画像１１６ａ２の圧縮像データ１２０Ａ（１２０Ａ２）が含まれている。これら２つの圧縮像データ１２０Ａ１，１２０Ａ２によって圧縮像データ１４７Ｂが構成されている。各ラインのＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａには、圧縮像データ１４７Ｂにおける１ライン分のピクセルデータが含まれている。
図６は、伝送データ１４７Ａの構成例を表したものである。伝送データ１４７Ａは、例えば、フレームヘッダ領域Ｒ１およびパケット領域Ｒ２を含んでいる。なお、図６には、フレームヘッダ領域Ｒ１の中身が詳細に例示されている。また、図６では、ローパワーモードＬＰが省略されている。
フレームヘッダ領域Ｒ１には、例えば、伝送データ１４７Ａの識別子としてのフレーム番号Ｆ１が含まれている。フレームヘッダ領域Ｒ１は、パケット領域Ｒ２に含まれる圧縮像データ１４７Ｂについての情報を含んでいる。フレームヘッダ領域Ｒ１は、例えば、圧縮像データ１４７Ｂに含まれる圧縮像データ１２０Ａの数（ＲＯＩ数）と、圧縮像データ１４７Ｂに含まれる各圧縮像データ１２０Ａに対応するＲＯＩ画像１１２についての情報（ＲＯＩ情報１２０Ｂ）とを含んでいる。
合成部１４７は、例えば、伝送データ１４７Ａのパケット領域Ｒ２において、圧縮像データ１４７Ｂを、圧縮像データ１２０Ａの画素行ごとに分けて配置する。従って、伝送データ１４７Ａのパケット領域Ｒ２には、重なり領域ＲＯＯの画像１１８に対応する圧縮像データが重複して含まれていない。また、合成部１４７は、例えば、伝送データ１４７Ａのパケット領域Ｒ２において、撮像画像１１１のうち各伝送画像１１６と対応しない画素行を割愛している。従って、伝送データ１４７Ａのパケット領域Ｒ２には、撮像画像１１１のうち各伝送画像１１６に対応しない画素行は含まれていない。なお、図６のパケット領域Ｒ２において、破線で囲んだ箇所が、重なり領域ＲＯＯの画像１１８の圧縮像データに相当する。
パケットヘッダＰＨ寄りのパケット群（例えば図６中の１（ｎ））と、パケットヘッダＰＨから離れたパケット群（例えば図６中の２（１））との境界は、パケットヘッダＰＨ寄りのパケット群（例えば図６中の１（ｎ））の圧縮像データに対応するＲＯＩ画像１１２の物理領域長さＸＬａ１によって特定される。パケットヘッダＰＨ寄りのパケット群（例えば図６中の１（ｎ））に含まれる重なり領域ＲＯＯの画像１１８に対応する圧縮像データにおいて、パケットの開始位置は、パケットヘッダＰＨから離れたパケット群（例えば図６中の２（１））に対応するＲＯＩ画像１１２の物理領域長さＸＬａ２によって特定される。
合成部１４７は、例えば、伝送データ１４７Ａのパケット領域Ｒ２において、１ラインごとに、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａを生成する際に、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに、例えば、圧縮像データ１４７Ｂにおける１ライン分のピクセルデータの他に、例えば、図７に示したように、ＲＯＩ情報１２０Ｂを含めてもよい。つまり、合成部１４７は、ＲＯＩ情報１２０ＢをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含めて送出してもよい。このとき、ＲＯＩ情報１２０Ｂは、例えば、図７（Ａ）～図７（Ｋ）に示したように、撮像画像１１１に含まれる注目領域ＲＯＩの数（ＲＯＩ数）、各注目領域ＲＯＩの領域番号（もしくは優先度１１５）、各注目領域ＲＯＩのデータ長、および各注目領域ＲＯＩの画像フォーマットのうち少なくとも１つを含んでいる。ＲＯＩ情報１２０Ｂは、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａにおいて、パケットヘッダＰＨ側の端部（つまり、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａの先頭）に配置されることが好ましい。
（映像受信装置２００）
次に、映像受信装置２００について説明する。図８は、映像受信装置２００の構成の一例を表したものである。図９は、映像受信装置２００におけるＲＯＩ画像２２３Ａの生成手順の一例を表したものである。映像受信装置２００は、映像送信装置１００と共通の規格（例えば、ＭＩＰＩ ＣＳＩ－２規格、ＭＩＰＩ ＣＳＩ－３規格、もしくは、ＭＩＰＩＤＳＩ規格）で信号を受信する装置である。映像受信装置２００は、例えば、受信部２１０および情報処理部２２０を有している。受信部２１０は、映像送信装置１００から出力された伝送データ１４７Ａを、データレーンＤＬを介して受信し、受信した伝送データ１４７Ａに対して所定の処理を行うことにより、種々のデータ（２１４Ａ，２１５Ａ，２１５Ｂ）を生成し、情報処理部２２０に出力する回路である。情報処理部２２０は、受信部２１０から受信した種々のデータ（２１４Ａ，２１５Ａ）に基づいて、ＲＯＩ画像２２３Ａを生成したり、受信部２１０から受信したデータ（２１５Ｂ）に基づいて、通常画像２２４Ａを生成したりする回路である。
受信部２１０は、例えば、ヘッダ分離部２１１、ヘッダ解釈部２１２、Ｐａｙｌｏａｄ分離部２１３、ＥＢＤ解釈部２１４およびＲＯＩデータ分離部２１５を有している。
ヘッダ分離部２１１は、伝送データ１４７Ａを、データレーンＤＬを介して映像送信装置１００から受信する。つまり、ヘッダ分離部２１１は、撮像画像１１１における各注目領域ＲＯＩについてのＲＯＩ情報１２０ＢをＥｍｂｅｄｄｅｄＤａｔａに含むとともに、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）をＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含む伝送データ１４７Ａを受信する。ヘッダ分離部２１１は、受信した伝送データ１４７Ａをフレームヘッダ領域Ｒ１とパケット領域Ｒ２とに分離する。ヘッダ解釈部２１２は、フレームヘッダ領域Ｒ１に含まれるデータ（具体的にはＥｍｂｅｄｄｅｄＤａｔａ）に基づいて、パケット領域Ｒ２に含まれるＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａの位置を特定する。Ｐａｙｌｏａｄ分離部２１３は、ヘッダ解釈部２１２によって特定されたＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａの位置に基づいて、パケット領域Ｒ２に含まれるＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａを、パケット領域Ｒ２から分離する。
ＥＢＤ解釈部２１４は、ＥｍｂｅｄｄｅｄＤａｔａをＥＢＤデータ２１４Ａとして、情報処理部２２０に出力する。ＥＢＤ解釈部２１４は、さらに、ＥｍｂｅｄｄｅｄＤａｔａに含まれるデータタイプから、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含まれる画像データがＲＯＩの伝送画像データ１１６の圧縮像データ１２０Ａであるか、または、通常画像データの圧縮像データ１３０Ａであるか判別する。ＥＢＤ解釈部２１４は、判別結果をＲＯＩデータ分離部２１５に出力する。
ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含まれる画像データがＲＯＩの伝送画像データ１１６の圧縮像データ１２０Ａである場合、ＲＯＩデータ分離部２１５は、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａをＰａｙｌｏａｄＤａｔａ２１５Ａとして、情報処理部２２０（具体的にはＲＯＩデコード部２２２）に出力する。ＰａｙｌｏａｄＤａｔａに含まれる画像データが通常画像データの圧縮像データ１３０Ａである場合、ＲＯＩデータ分離部２１５は、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａをＰａｙｌｏａｄＤａｔａ２１５Ｂとして、情報処理部２２０（具体的には通常画像デコード部２２４）に出力する。ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａにＲＯＩ情報１２０Ｂが含まれている場合には、ＰａｙｌｏａｄＤａｔａ２１５Ａは、ＲＯＩ情報１２０Ｂと、圧縮像データ１４７Ｂのうち１ライン分のピクセルデータとを含んでいる。
情報処理部２２０は、ＥＢＤデータ２１４Ａに含まれるＥｍｂｅｄｄｅｄＤａｔａから、ＲＯＩ情報１２０Ｂを抽出する。情報処理部２２０は、情報抽出部２２１で抽出したＲＯＩ情報１２０Ｂに基づいて、受信部２１０で受信した伝送データ１４７Ａに含まれるＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａから、撮像画像１１１における各注目領域ＲＯＩの画像（ＲＯＩ画像１１２）を抽出する。情報処理部２２０は、例えば、情報抽出部２２１、ＲＯＩデコード部２２２、ＲＯＩ画像生成部２２３および通常画像デコード部２２４を有している。
通常画像デコード部２２４は、ＰａｙｌｏａｄＤａｔａ２１５Ｂをデコードし、通常画像２２４Ａを生成する。ＲＯＩデコード部２２２は、ＰａｙｌｏａｄＤａｔａ２１５Ａに含まれる圧縮像データ１４７Ｂをデコードし、画像データ２２２Ａを生成する。この画像データ２２２Ａは、１または複数の伝送画像１１６によって構成されている。
情報抽出部２２１は、ＥＢＤデータ２１４Ａに含まれるＥｍｂｅｄｄｅｄＤａｔａから、ＲＯＩ情報１２０Ｂを抽出する。情報抽出部２２１は、例えば、ＥＢＤデータ２１４Ａに含まれるＥｍｂｅｄｄｅｄＤａｔａから、例えば、撮像画像１１１に含まれる注目領域ＲＯＩの数、各注目領域ＲＯＩの領域番号（もしくは優先度１１５）、各注目領域ＲＯＩのデータ長、および各注目領域ＲＯＩの画像フォーマットを抽出する。つまり、伝送データ１４７Ａは、当該伝送データ１４７Ａから得られる複数の伝送画像１１６のいずれに対して重なり領域ＲＯＯの画像１１８の割愛が行われたかを判別することの可能な判別情報として、各伝送画像１１６に対応する注目領域ＲＯＩの領域番号（もしくは優先度１１５）を含んでいる。
ＲＯＩ画像生成部２２３は、情報抽出部２２１で得られたＲＯＩ情報１２０Ｂに基づいて、２以上の注目領域ＲＯＩ同士が重なり合う重なり領域ＲＯＯを検出する。
情報抽出部２２１が、例えば、ＥＢＤデータ２１４Ａに含まれるＥｍｂｅｄｄｅｄＤａｔａから、ＲＯＩ画像１１２ａ１に対応する注目領域ＲＯＩの座標（例えば左上端座標（Ｘａ１，Ｙａ１））、長さ（例えば物理領域長さＸＬａ１，ＹＬａ１）および領域番号１（もしくは優先度１１５（＝１））を抽出する。情報抽出部２２１が、さらに、例えば、ＥＢＤデータ２１４Ａに含まれるＥｍｂｅｄｄｅｄＤａｔａから、ＲＯＩ画像１１２ａ２に対応する注目領域ＲＯＩの座標（例えば左上端座標（Ｘａ２，Ｙａ２））、長さ（例えば物理領域長さＸＬａ２，ＹＬａ２）および領域番号２（もしくは優先度１１５（＝２））を抽出する。
このとき、ＲＯＩ画像生成部２２３は、抽出したこれらの情報（以下、「抽出情報２２１Ａ」と称する。）に基づいて、重なり領域ＲＯＯの位置情報１１４を導出する。ＲＯＩ画像生成部２２３は、上記の重なり領域ＲＯＯの位置情報１１４として、例えば、重なり領域ＲＯＯの座標（例えば左上端座標（Ｘｂ１，Ｙｂ１））および長さ（例えば物理領域長さＸＬｂ１，ＹＬｂ１）を導出する。
なお、ＲＯＩ画像生成部２２３は、ＥＢＤデータ２１４Ａに含まれるＥｍｂｅｄｄｅｄＤａｔａからＲＯＩ情報１２０Ｂを取得する代わりに、ＰａｙｌｏａｄＤａｔａ２１５ＡからＲＯＩ情報１２０Ｂを取得してもよい。この場合、ＲＯＩ画像生成部２２３は、ＰａｙｌｏａｄＤａｔａ２１５Ａに含まれるＲＯＩ情報１２０Ｂに基づいて、２以上の注目領域ＲＯＩ同士が重なり合う重なり領域ＲＯＯを検出してもよい。また、ＲＯＩ画像生成部２２３は、ＰａｙｌｏａｄＤａｔａ２１５Ａに含まれるＲＯＩ情報１２０Ｂから、抽出情報２２１Ａを抽出してもよく、そのようにして抽出した抽出情報２２１Ａに基づいて、重なり領域ＲＯＯの位置情報１１４を導出してもよい。
ＲＯＩ画像生成部２２３は、さらに、画像データ２２２Ａと、抽出情報２２１Ａと、重なり領域ＲＯＯの位置情報１１４とに基づいて、撮像画像１１１における各注目領域ＲＯＩの画像（ＲＯＩ画像１１２ａ１，１１２ａ２）を生成する。ＲＯＩ画像生成部２２３は、生成した画像をＲＯＩ画像２２３Ａとして出力する。
[手順]
次に、図３、図９を参考にして、映像伝送システム１におけるデータ伝送の手順の一例について説明する。
まず、撮像部１１０は、撮像により得られた撮像画像１１１（デジタルの画像データ）を画像処理部１２０に出力する。ＲＯＩ切り出し部１２１は、撮像部１１０から入力された撮像画像１１１に含まれる２つの注目領域ＲＯＩ１，ＲＯＩ２を特定する。ＲＯＩ切り出し部１２１は、撮像画像１１１から、各注目領域ＲＯＩ１，ＲＯＩ２の画像（ＲＯＩ画像１１２ａ１，１１２ａ２）を切り出す。ＲＯＩ切り出し部１２１は、注目領域ＲＯＩ１に対して識別子として領域番号１を付与し、注目領域ＲＯＩ２に対して識別子として領域番号２を付与する。
ＲＯＩ解析部１２２は、注目領域ＲＯＩごとに、撮像画像１１１における注目領域ＲＯＩの位置情報１１３を導出する。ＲＯＩ解析部１２２は、注目領域ＲＯＩ１に基づいて、注目領域ＲＯＩ１の左上端座標（Ｘａ１，Ｙａ１）と、注目領域ＲＯＩ１のＸ軸方向の長さ（ＸＬａ１）と、注目領域ＲＯＩ１のＹ軸方向の長さ（ＹＬａ１）とを導出する。ＲＯＩ解析部１２２は、注目領域ＲＯＩ２に基づいて、注目領域ＲＯＩ２の左上端座標（Ｘａ２，Ｙａ２）と、注目領域ＲＯＩ２のＸ軸方向の長さ（ＸＬａ２）と、注目領域ＲＯＩ２のＹ軸方向の長さ（ＹＬａ２）とを導出する。
重なり検出部１２３は、撮像画像１１１における２つの注目領域ＲＯＩ１，ＲＯＩ２の位置情報１１３に基づいて、２つの注目領域ＲＯＩ１，ＲＯＩ２同士が重なり合う重なり領域ＲＯＯを検出する。つまり、重なり検出部１２３は、撮像画像１１１における重なり領域ＲＯＯの位置情報１１４を導出する。重なり検出部１２３は、撮像画像１１１における重なり領域ＲＯＯの位置情報１１４として、重なり領域ＲＯＯの左上端座標（Ｘｂ１，Ｙｂ１）と、重なり領域ＲＯＯのＸ軸方向の長さ（ＸＬｂ１）と、重なり領域ＲＯＯのＹ軸方向の長さ（ＹＬｂ１）とを導出する。
優先度設定部１２４は、２つの注目領域ＲＯＩ１，ＲＯＩ２において、一方の注目領域ＲＯＩ１に対して優先度１１５として１を付与し、他方の注目領域ＲＯＩ２に対して優先度１１５として２を付与する。
エンコード部１２５は、２つの注目領域ＲＯＩ１，ＲＯＩ２において重なり領域ＲＯＯの画像１１８が重複して含まれないように、撮像画像１１１から得られた２つのＲＯＩ画像１１２ａ１，１１２ａ２から画像１１８を割愛したものである２つの伝送画像１１６ａ１，１１６ａ２を生成する。
エンコード部１２５は、２つの注目領域ＲＯＩ１，ＲＯＩ２の領域番号（もしくは優先度１１５）に基づいて、２つのＲＯＩ画像１１２ａ１，１１２ａ２のいずれに対して画像１１８の割愛を行うかを決定する。エンコード部１２５は、２つの注目領域ＲＯＩ１，ＲＯＩ２において、領域番号（もしくは優先度１１５）の大きい方である注目領域ＲＯＩ２に対応するＲＯＩ画像１１２ａ２に対して画像１１８の割愛を行い、これにより、伝送画像１１６ａ２を生成する。エンコード部１２５は、２つの注目領域ＲＯＩ１，ＲＯＩ２において、領域番号（もしくは優先度１１５）の小さな方である注目領域ＲＯＩ１に対応するＲＯＩ画像１１２ａ１については、ＲＯＩ画像１１２ａ１そのものを伝送画像１１６ａ１とする。
画像処理制御部１２６は、ＲＯＩ情報１２０Ｂおよびフレーム情報１２０Ｃを生成し、送信部１４０に送信する。送信部１４０は、画像処理部１２０，１３０から入力された種々のデータ（１２０Ａ，１２０Ｂ，１２０Ｃ，１３０Ａ）に基づいて伝送データ１４７Ａを生成する。送信部１４０は、生成した伝送データ１４７Ａを、データレーンＤＬを介して映像受信装置２００に送出する。
受信部２１０は、映像送信装置１００から出力された伝送データ１４７Ａを、データレーンＤＬを介して受信する。受信部２１０は、受信した伝送データ１４７Ａに対して所定の処理を行うことにより、ＥＢＤデータ２１４ＡおよびＰａｙｌｏａｄＤａｔａ２１５Ａを生成し、情報処理部２２０に出力する。
情報抽出部２２１は、ＥＢＤデータ２１４Ａに含まれるＥｍｂｅｄｄｅｄＤａｔａから、ＲＯＩ情報１２０Ｂを抽出する。情報抽出部２２１は、ＥＢＤデータ２１４Ａに含まれるＥｍｂｅｄｄｅｄＤａｔａから、ＲＯＩ画像１１２ａ１に対応する注目領域ＲＯＩの座標（例えば左上端座標（Ｘａ１，Ｙａ１））、長さ（例えば物理領域長さＸＬａ１，ＹＬａ１）および領域番号１（もしくは優先度１１５（＝１））を抽出する。情報抽出部２２１は、さらに、ＲＯＩ画像１１２ａ２に対応する注目領域ＲＯＩの座標（例えば左上端座標（Ｘａ２，Ｙａ２））、長さ（例えば物理領域長さＸＬａ２，ＹＬａ２）および領域番号２（もしくは優先度１１５（＝２））を抽出する。ＲＯＩデコード部２２２は、ＰａｙｌｏａｄＤａｔａ２１５Ａに含まれる圧縮像データ１４７Ｂをデコードし、画像データ２２２Ａを生成する。
ＲＯＩ画像生成部２２３は、抽出したこれらの情報（抽出情報２２１Ａ）に基づいて、重なり領域ＲＯＯの位置情報１１４を導出する。ＲＯＩ画像生成部２２３は、上記の重なり領域ＲＯＯの位置情報１１４として、例えば、重なり領域ＲＯＯの座標（例えば左上端座標（Ｘｂ１，Ｙｂ１））および長さ（例えば物理領域長さＸＬｂ１，ＹＬｂ１）を導出する。ＲＯＩ画像生成部２２３は、さらに、画像データ２２２Ａと、抽出情報２２１Ａと、重なり領域ＲＯＯの位置情報１１４とに基づいて、撮像画像１１１における各注目領域ＲＯＩの画像（ＲＯＩ画像１１２ａ１，１１２ａ２）を生成する。
[効果]
次に、本実施の形態に係る映像伝送システム１の効果について説明する。
近年、データ量の大きなデータを大量に送信する用途が増えてきている。伝送システムに大きな負荷がかかりやすく、最悪の場合には、伝送システムがダウンし、データ伝送が行えなくなるおそれがある。
従来では、伝送システムのダウンを避けるために、例えば、撮影した画像を全て送信するのではなく、撮影対象の物体を特定し、特定した物体を切り出した一部の画像だけを送信することが行われている。
ところで、イメージセンサからアプリケーションプロセッサへの伝送に用いられる方式として、ＭＩＰＩ ＣＳＩ－２が用いられることがある。この方式を用いてＲＯＩを伝送しようとした場合、様々な制約により、ＲＯＩの伝送が容易ではないことがある。
一方、本実施の形態では、撮像画像１１１における各注目領域ＲＯＩについてのＲＯＩ情報１２０ＢがＥｍｂｅｄｄｅｄＤａｔａで送出されるとともに、各注目領域ＲＯＩの画像データがＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出される。これにより、映像送信装置１００から送出された伝送データ１４７Ａを受信した装置（映像受信装置２００）において、伝送データ１４７Ａから、各注目領域ＲＯＩの画像データ（ＲＯＩ画像１１２）を容易に抽出することができる。その結果、様々な制約の下でも、注目領域ＲＯＩの伝送を行うことができる。
また、本実施の形態では、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）が互いに共通のバーチャルチャネルで送出される。これにより、同一パケットの中で複数のＲＯＩ画像１１２を送ることができるので、複数のＲＯＩ画像１１２を送る間に、ＬＰモードに入る必要がなく、高い伝送効率を得ることができる。
また、本実施の形態では、各注目領域ＲＯＩのデータタイプがＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａのパケットヘッダＰＨに含めて送出される。これにより、ＥｍｂｅｄｄｅｄＤａｔａにアクセスしなくても、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａのパケットヘッダＰＨにアクセスするだけで、各注目領域ＲＯＩのデータタイプが得られる。これにより、映像受信装置２００における処理速度を速くすることができるので、高い伝送効率を得ることができる。
また、本実施の形態において、ＲＯＩ情報１２０ＢがＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含めて送出される場合には、ＥｍｂｅｄｄｅｄＤａｔａにアクセスしなくても、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａにアクセスするだけで、ＲＯＩ情報１２０Ｂが得られる。これにより、映像受信装置２００における処理速度を速くすることができるので、高い伝送効率を得ることができる。
また、本実施の形態では、伝送データ１４７Ａに含まれるＥｍｂｅｄｄｅｄＤａｔａから、各注目領域ＲＯＩについてのＲＯＩ情報１２０Ｂが抽出されるとともに、抽出されたＲＯＩ情報１２０Ｂに基づいて、伝送データ１４７Ａに含まれるＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａから、各注目領域ＲＯＩの画像（ＲＯＩ画像１１２）が抽出される。これにより、伝送データ１４７Ａから、各注目領域ＲＯＩの画像（ＲＯＩ画像１１２）を容易に抽出することができる。その結果、様々な制約の下でも、注目領域ＲＯＩの伝送を行うことができる。
＜２．変形例＞
[変形例Ａ]
図１０は、上記実施の形態の映像通信システム１に搭載された映像送信装置１００の構成の一変形例を表したものである。本変形例に係る映像送信装置１００では、ＲＯＩデータ分離部２１５が省略されており、Ｐａｙｌｏａｄ分離部２１３がＰａｙｌｏａｄＤａｔａ２１５ＡまたはＰａｙｌｏａｄＤａｔａ２１５Ｂを出力する。
本変形例において、Ｐａｙｌｏａｄ分離部２１３は、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａのパケットヘッダＰＨに含まれるＤａｔａＴｙｐｅ（各注目領域ＲＯＩのデータタイプ）から、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含まれる画像データがＲＯＩの伝送画像データ１１６の圧縮像データ１２０Ａであるか、または、通常画像データの圧縮像データ１３０Ａであるか判別する。その結果、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含まれる画像データがＲＯＩの伝送画像データ１１６の圧縮像データ１２０Ａである場合には、Ｐａｙｌｏａｄ分離部２１３は、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａをＰａｙｌｏａｄＤａｔａ２１５Ａとして、情報処理部２２０（具体的にはＲＯＩデコード部２２２）に出力する。ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含まれる画像データが通常画像データの圧縮像データ１３０Ａである場合、Ｐａｙｌｏａｄ分離部２１３は、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａをＰａｙｌｏａｄＤａｔａ２１５Ｂとして、情報処理部２２０（具体的には通常画像デコード部２２４）に出力する。
本変形例では、ＥｍｂｅｄｄｅｄＤａｔａにアクセスしなくても、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａのパケットヘッダＰＨにアクセスするだけで、各注目領域ＲＯＩのデータタイプを判別することができる。これにより、映像受信装置２００における処理速度を速くすることができるので、高い伝送効率を得ることができる。
[変形例Ｂ]
上記実施の形態の映像通信システム１において、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａのパケットヘッダＰＨに、ＤａｔａＴｙｐｅ（各注目領域ＲＯＩのデータタイプ）が含まれていなくてもよい。このようにした場合であっても、ＥｍｂｅｄｄｅｄＤａｔａに含まれるデータタイプから、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含まれる画像データが注目領域ＲＯＩの伝送画像データ１１６の圧縮像データ１２０Ａであるか、または、通常画像データの圧縮像データ１３０Ａであるか判別することができる。これにより、パケットヘッダＰＨのデータサイズが小さくなるので、伝送容量を少なくすることができる。
[変形例Ｃ]
上記実施の形態の映像通信システム１では、合成部１４７は、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）を互いに共通のバーチャルチャネルで送出していた。しかし、合成部１４７は、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）を互いに異なるバーチャルチャネルで送出してもよい。ただし、その場合には、例えば、図１１に示したように、対応する注目領域ＲＯＩが互いに異なる２つのＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａ同士の間に、ローパワーモードＬＰが含まれることになる。
ところで、対応する注目領域ＲＯＩが互いに異なる２つのＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａ同士の間に、ローパワーモードＬＰが含まれるということは、対応する注目領域ＲＯＩが互いに異なる２つのＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａ同士を分離する処理が不要であることを意味する。従って、本変形例では、その分離処理に要する処理時間をなくすことができる。
[変形例Ｄ]
上記実施の形態の映像通信システム１では、合成部１４７は、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに、圧縮像データ１４７Ｂにおける１ライン分のピクセルデータの他に、ＲＯＩ情報１２０Ｂを含めている場合があった。しかし、上記実施の形態の映像通信システム１において、合成部１４７は、例えば、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａの手前に設けられた１または複数のショートパケットのデータフィールド（ＳｈｏｒｔＰａｃｋｔのＤａｔａＦｉｅｌｄ）ＳＰに、ＲＯＩ情報１２０Ｂを含めて送出してもよい。合成部１４７は、例えば、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａの手前に設けられた１または複数のショートパケットのデータフィールドＳＰに、撮像画像１１１に含まれる注目領域ＲＯＩの数（ＲＯＩ数）、各注目領域ＲＯＩの領域番号（もしくは優先度１１５）、各注目領域ＲＯＩのデータ長、および各注目領域ＲＯＩの画像フォーマットのうち少なくとも１つを含めて送出してもよい。合成部１４７は、例えば、図１２に示したように、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａの手前に設けられた１または複数のショートパケットのデータフィールドＳＰに、撮像画像１１１に含まれる注目領域ＲＯＩの数（ＲＯＩ数）、各注目領域ＲＯＩの領域番号（もしくは優先度１１５）、各注目領域ＲＯＩのデータ長、および各注目領域ＲＯＩの画像フォーマットを含めて送出してもよい。
本変形例では、ＥｍｂｅｄｄｅｄＤａｔａにアクセスしなくても、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａの手前に設けられた１または複数のショートパケットのデータフィールドＳＰにアクセスするだけで、ＲＯＩ情報１２０Ｂを取得することができる。これにより、映像受信装置２００における処理速度を速くすることができるので、高い伝送効率を得ることができる。
[変形例Ｅ]
上記実施の形態の映像通信システム１およびその変形例（変形例Ａ～Ｄ）では、複数のＲＯＩ画像１１２から画像１１８が割愛された複数の伝送画像１１６に対応する圧縮像データ１４７Ｂを用いて伝送データ１２０Ａが生成されていた。しかし、上記実施の形態の映像通信システム１およびその変形例（変形例Ａ～Ｄ）において、複数の注目領域ＲＯＩの画像（ＲＯＩ画像１１２）において重なり領域ＲＯＯの画像１１８が存在するか否かに拘わらず、伝送データ１２０Ａに、各ＲＯＩ画像１１２に対応する圧縮像データ１４７Ｂを用いて伝送データ１２０Ａが生成されていてもよい。つまり、上記実施の形態の映像通信システム１およびその変形例（変形例Ａ～Ｄ）において、圧縮像データ１４７Ｂが、各ＲＯＩ画像１１２に対応する圧縮像データ１２０Ａによって構成されている。
このようにした場合、例えば、図１３に示したように、画像処理部１２０において、ＲＯＩ解析部１２２、重なり検出部１２３および優先度設定部１２４を省略することが可能である。このように、画像処理部１２０において、ＲＯＩ解析部１２２、重なり検出部１２３および優先度設定部１２４を省略した場合であっても、上記実施の形態の映像通信システム１およびその変形例（変形例Ａ～Ｄ）と同様、送信部１４０は、撮像画像１１１における各注目領域ＲＯＩについてのＲＯＩ情報１２０ＢをＥｍｂｅｄｄｅｄＤａｔａで送出する。送信部１４０は、さらに、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）をＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出する。また、送信部１４０は、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）を画像データフレームによって送出するとともに、各注目領域ＲＯＩについてのＲＯＩ情報１２０Ｂを画像データフレームのヘッダで送出する。これにより、映像送信装置１００から送出された伝送データ１４７Ａを受信した装置（映像受信装置２００）において、伝送データ１４７Ａから、各注目領域ＲＯＩの画像データ（ＲＯＩ画像１１２）を容易に抽出することができる。その結果、様々な制約の下でも、注目領域ＲＯＩの伝送を行うことができる。
また、本変形例において、送信部１４０は、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）を互いに共通のバーチャルチャネルで送出する場合には、同一パケットの中で複数のＲＯＩ画像１１２を送ることができる。これにより、複数のＲＯＩ画像１１２を送る間に、ＬＰモードに入る必要がないので、高い伝送効率を得ることができる。
また、本変形例において、送信部１４０は、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）を互いに異なるバーチャルチャネルで送出する場合には、対応する注目領域ＲＯＩが互いに異なる２つのＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａ同士を分離する処理が不要となる。従って、本変形例では、その分離処理に要する処理時間をなくすことができる。
また、本変形例において、送信部１４０は、各注目領域ＲＯＩのデータタイプをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａのパケットヘッダＰＨに含めて送出する場合には、ＥｍｂｅｄｄｅｄＤａｔａにアクセスしなくても、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａのパケットヘッダＰＨにアクセスするだけで、各注目領域ＲＯＩのデータタイプが得られる。これにより、映像受信装置２００における処理速度を速くすることができるので、高い伝送効率を得ることができる。
また、本変形例において、送信部１４０は、ＲＯＩ情報１２０ＢをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含めて送出する場合には、ＥｍｂｅｄｄｅｄＤａｔａにアクセスしなくても、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａにアクセスするだけで、ＲＯＩ情報１２０Ｂが得られる。これにより、映像受信装置２００における処理速度を速くすることができるので、高い伝送効率を得ることができる。
また、本変形例において、送信部１４０は、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａの手前に設けられた１または複数のショートパケットのデータフィールドＳＰに、ＲＯＩ情報１２０Ｂを含めて送出する場合には、ＥｍｂｅｄｄｅｄＤａｔａにアクセスしなくても、ＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａの手前に設けられた１または複数のショートパケットのデータフィールドＳＰにアクセスするだけで、ＲＯＩ情報１２０Ｂを取得することができる。これにより、映像受信装置２００における処理速度を速くすることができるので、高い伝送効率を得ることができる。
また、本変形例において、送信部１４０は、伝送データ１４７Ａに含まれるＥｍｂｅｄｄｅｄＤａｔａから、各注目領域ＲＯＩについてのＲＯＩ情報１２０Ｂを抽出するとともに、抽出したＲＯＩ情報１２０Ｂに基づいて、伝送データ１４７Ａに含まれるＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａから、各注目領域ＲＯＩの画像（ＲＯＩ画像１１２）を抽出する場合には、伝送データ１４７Ａから、各注目領域ＲＯＩの画像（ＲＯＩ画像１１２）を容易に抽出することができる。その結果、様々な制約の下でも、注目領域ＲＯＩの伝送を行うことができる。
[変形例Ｆ]
上記実施の形態の映像通信システム１およびその変形例（変形例Ａ～Ｅ）では、送信部１４０が、各注目領域ＲＯＩについてのＲＯＩ情報１２０Ｂを画像データフレームのヘッダ（フレームヘッダ領域Ｒ１）で送出していた。しかし、上記実施の形態の映像通信システム１およびその変形例（変形例Ａ～Ｅ）において、送信部１４０は、各注目領域ＲＯＩについてのＲＯＩ情報１２０Ｂを画像データフレームのフッタ（フレームフッタ領域Ｒ３）で送出してもよい。例えば、図１４に示したように、送信部１４０は、撮像画像１１１における各注目領域ＲＯＩについてのＲＯＩ情報１２０ＢをＥｍｂｅｄｄｅｄＤａｔａで送出する際に、ＲＯＩ情報１２０Ｂをフレームフッタ領域Ｒ３で送出してもよい。なお、図１４では、便宜的に、ヘッダ領域Ｒ１の記載が省略されている。本変形例のようにした場合であっても、様々な制約の下でも、注目領域ＲＯＩの伝送を行うことができる。
[変形例Ｇ]
上記実施の形態の映像通信システム１およびその変形例（変形例Ａ～Ｆ）では、画像データフレームは、フレームヘッダ領域Ｒ１、パケット領域Ｒ２およびフレームフッタＲ３を含んでいた。しかし、上記実施の形態の映像通信システム１およびその変形例（変形例Ａ～Ｅ）において、画像データフレームは、フレームフッタＲ３を含んでいなくてもよい。また、上記変形例Ｆにおいて、画像データフレームは、フレームヘッダ領域Ｒ１を含んでいなくてもよい。
以上、実施の形態およびその変形例を挙げて本開示を説明したが、本開示は上記実施の形態等に限定されるものではなく、種々変形が可能である。なお、本明細書中に記載された効果は、あくまで例示である。本開示の効果は、本明細書中に記載された効果に限定されるものではない。本開示が、本明細書中に記載された効果以外の効果を持っていてもよい。
また、例えば、本開示は以下のような構成を取ることができる。
（１）
画像におけるＲＯＩ（Region Of Interest）の画像データをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出するとともに、前記ＲＯＩについての情報をＥｍｂｅｄｄｅｄＤａｔａで送出する送信部を備えた
映像送信装置。
（２）
前記送信部は、各前記ＲＯＩの前記画像データを互いに異なるバーチャルチャネルで送出する
（１）に記載の映像送信装置。
（３）
前記送信部は、各前記ＲＯＩの前記画像データを互いに共通のバーチャルチャネルで送出する
（１）に記載の映像送信装置。
（４）
前記送信部は、各前記ＲＯＩのデータタイプを前記ＰａｙｌｏａｄＤａｔａのパケットヘッダに含めて送出する
（３）に記載の映像送信装置。
（５）
前記送信部は、前記画像に含まれる前記ＲＯＩの数、各前記ＲＯＩの領域番号、各前記ＲＯＩのデータ長、および各前記ＲＯＩの画像フォーマットのうち少なくとも１つを前記ＰａｙｌｏａｄＤａｔａに含めて送出する
（３）に記載の映像送信装置。
（６）
前記送信部は、前記画像に含まれる前記ＲＯＩの数、各前記ＲＯＩの領域番号、各前記ＲＯＩのデータ長、および各前記ＲＯＩの画像フォーマットのうち少なくとも１つを、ＳｈｏｒｔＰａｃｋｅｔに含めて送出する
（３）に記載の映像送信装置。
（７）
前記送信部は、前記ＲＯＩの前記画像データを画像データフレームによって送出するとともに、前記ＲＯＩについての情報を前記画像データフレームのヘッダもしくはフッタで送出する
（１）ないし（６）のいずれか１つに記載の映像送信装置。
（８）
前記送信部は、ＭＩＰＩ(Mobile Industry Processor Interface) ＣＳＩ（Camera Serial Interface）－２規格、ＭＩＰＩ ＣＳＩ－３規格、もしくは、ＭＩＰＩ ＤＳＩ（Display Serial Interface）規格で信号を送出する
（１）ないし（７）のいずれか１つに記載の映像送信装置。
（９）
画像における各ＲＯＩ（Region Of Interest）についての情報に基づいて、２以上の前記ＲＯＩ同士が重なり合う重なり領域を検出する検出部と、
前記画像における複数の前記ＲＯＩの第１画像データにおいて前記重なり領域の第２画像データが重複して含まれないように、複数の前記第１画像データから前記第２画像データを割愛したものである複数の第３画像データをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出するとともに、前記画像における各前記ＲＯＩについての情報をＥｍｂｅｄｄｅｄＤａｔａで送出する送信部と
を備えた 映像送信装置。
（１０）
前記送信部は、各前記ＲＯＩの前記画像データを互いに異なるバーチャルチャネルで送出する
（９）に記載の映像送信装置。
（１１）
前記送信部は、各前記ＲＯＩの前記画像データを互いに共通のバーチャルチャネルで送出する
（９）に記載の映像送信装置。
（１２）
前記送信部は、各前記ＲＯＩのデータタイプを前記ＰａｙｌｏａｄＤａｔａのパケットヘッダに含めて送出する
（１１）に記載の映像送信装置。
（１３）
前記送信部は、前記画像に含まれる前記ＲＯＩの数、各前記ＲＯＩの領域番号、各前記ＲＯＩのデータ長、および各前記ＲＯＩの画像フォーマットのうち少なくとも１つを前記ＰａｙｌｏａｄＤａｔａに含めて送出する
（１１）に記載の映像送信装置。
（１４）
前記送信部は、前記画像に含まれる前記ＲＯＩの数、各前記ＲＯＩの領域番号、各前記ＲＯＩのデータ長、および各前記ＲＯＩの画像フォーマットのうち少なくとも１つを、ＳｈｏｒｔＰａｃｋｅｔのＤａｔａＦｉｅｌｄに含めて送出する
（１１）に記載の映像送信装置。
（１５）
前記送信部は、前記ＲＯＩの前記第３画像データを画像データフレームによって送出するとともに、前記ＲＯＩについての情報を前記画像データフレームのヘッダもしくはフッタで送出する
（９）ないし（１４）のいずれか１つに記載の映像送信装置。
（１６）
前記送信部は、ＭＩＰＩ(Mobile Industry Processor Interface) ＣＳＩ（Camera Serial Interface）－２規格、ＭＩＰＩ ＣＳＩ－３規格、もしくは、ＭＩＰＩ ＤＳＩ（Display Serial Interface）規格で信号を送出する
（９）ないし（１５）のいずれか１つに記載の映像送信装置。
（１７）
画像におけるＲＯＩ（Region Of Interest）の画像データをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含むとともに、前記ＲＯＩについての情報をＥｍｂｅｄｄｅｄＤａｔａに含む伝送信号を受信する受信部と、
前記受信部で受信した前記伝送信号に含まれる前記ＥｍｂｅｄｄｅｄＤａｔａから、前記ＲＯＩについての情報を抽出するとともに、抽出した前記情報に基づいて、前記受信部で受信した前記伝送信号に含まれる前記ＰａｙｌｏａｄＤａｔａから、前記ＲＯＩの画像データを抽出する情報処理部と
を備えた
映像受信装置。
（１８）
前記情報処理部は、抽出した前記情報に基づいて、２以上の前記ＲＯＩ同士が重なり合う重なり領域を検出し、抽出した前記情報と、検出した前記重なり領域の情報とに基づいて、前記受信部で受信した前記伝送信号に含まれる前記ＰａｙｌｏａｄＤａｔａから、各前記ＲＯＩの画像データを抽出する
（１７）に記載の映像受信装置。
（１９）
前記受信部は、ＭＩＰＩ(Mobile Industry Processor Interface) ＣＳＩ（Camera Serial Interface）－２規格、ＭＩＰＩ ＣＳＩ－３規格、もしくは、ＭＩＰＩ ＤＳＩ（Display Serial Interface）規格で信号を受信する
（１７）または（１８）に記載の映像受信装置。
本出願は、日本国特許庁において２０１７年６月９日に出願された日本特許出願番号第２０１７－１１４６９０号を基礎として優先権を主張するものであり、この出願のすべての内容を参照によって本出願に援用する。
当業者であれば、設計上の要件や他の要因に応じて、種々の修正、コンビネーション、サブコンビネーション、および変更を想到し得るが、それらは添付の請求の範囲やその均等物の範囲に含まれるものであることが理解される。

Claims (19)

  1. 画像におけるＲＯＩ（Region Of Interest）の画像データをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出するとともに、前記ＲＯＩについての情報をＥｍｂｅｄｄｅｄＤａｔａで送出する送信部を備えた
    映像送信装置。
  2. 前記送信部は、各前記ＲＯＩの前記画像データを互いに異なるバーチャルチャネルで送出する
    請求項１に記載の映像送信装置。
  3. 前記送信部は、各前記ＲＯＩの前記画像データを互いに共通のバーチャルチャネルで送出する
    請求項１に記載の映像送信装置。
  4. 前記送信部は、各前記ＲＯＩのデータタイプを前記ＰａｙｌｏａｄＤａｔａのパケットヘッダに含めて送出する
    請求項３に記載の映像送信装置。
  5. 前記送信部は、前記画像に含まれる前記ＲＯＩの数、各前記ＲＯＩの領域番号、各前記ＲＯＩのデータ長、および各前記ＲＯＩの画像フォーマットのうち少なくとも１つを前記ＰａｙｌｏａｄＤａｔａに含めて送出する
    請求項３に記載の映像送信装置。
  6. 前記送信部は、前記画像に含まれる前記ＲＯＩの数、各前記ＲＯＩの領域番号、各前記ＲＯＩのデータ長、および各前記ＲＯＩの画像フォーマットのうち少なくとも１つを、ＳｈｏｒｔＰａｃｋｅｔに含めて送出する
    請求項３に記載の映像送信装置。
  7. 前記送信部は、前記ＲＯＩの前記画像データを画像データフレームによって送出するとともに、前記ＲＯＩについての情報を前記画像データフレームのヘッダもしくはフッタで送出する
    請求項１に記載の映像送信装置。
  8. 前記送信部は、ＭＩＰＩ(Mobile Industry Processor Interface) ＣＳＩ（Camera Ser ial Interface）－２規格、ＭＩＰＩ ＣＳＩ－３規格、もしくは、ＭＩＰＩ ＤＳＩ（Display Serial Interface）規格で信号を送出する
    請求項１に記載の映像送信装置。
  9. 画像における各ＲＯＩ（Region Of Interest）についての情報に基づいて、２以上の前記ＲＯＩ同士が重なり合う重なり領域を検出する検出部と、
    前記画像における複数の前記ＲＯＩの第１画像データにおいて前記重なり領域の第２画像データが重複して含まれないように、複数の前記第１画像データから前記第２画像データを割愛したものである複数の第３画像データをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａで送出するとともに、前記画像における各前記ＲＯＩについての情報をＥｍｂｅｄｄｅｄＤａｔａで送出する送信部と
    を備えた
    映像送信装置。
  10. 前記送信部は、各前記ＲＯＩを互いに異なるバーチャルチャネルで送出する
    請求項９に記載の映像送信装置。
  11. 前記送信部は、各前記ＲＯＩを互いに共通のバーチャルチャネルで送出する
    請求項９に記載の映像送信装置。
  12. 前記送信部は、各前記ＲＯＩのデータタイプを前記ＰａｙｌｏａｄＤａｔａのパケットヘッダに含めて送出する
    請求項１１に記載の映像送信装置。
  13. 前記送信部は、前記画像に含まれる前記ＲＯＩの数、各前記ＲＯＩの領域番号、各前記ＲＯＩのデータ長、および各前記ＲＯＩの画像フォーマットのうち少なくとも１つを前記ＰａｙｌｏａｄＤａｔａに含めて送出する
    請求項１１に記載の映像送信装置。
  14. 前記送信部は、前記画像に含まれる前記ＲＯＩの数、各前記ＲＯＩの領域番号、各前記ＲＯＩのデータ長、および各前記ＲＯＩの画像フォーマットのうち少なくとも１つを、ＳｈｏｒｔＰａｃｋｅｔのＤａｔａＦｉｅｌｄに含めて送出する
    請求項１１に記載の映像送信装置。
  15. 前記送信部は、前記ＲＯＩの前記第３画像データを画像データフレームによって送出するとともに、前記ＲＯＩについての情報を前記画像データフレームのヘッダもしくはフッタで送出する
    請求項９に記載の映像送信装置。
  16. 前記送信部は、ＭＩＰＩ(Mobile Industry Processor Interface) ＣＳＩ（Camera Ser ial Interface）－２規格、ＭＩＰＩ ＣＳＩ－３規格、もしくは、ＭＩＰＩ ＤＳＩ（Display Serial Interface）規格で信号を送出する
    請求項９に記載の映像送信装置。
  17. 画像におけるＲＯＩ（Region Of Interest）の画像データをＬｏｎｇＰａｃｋｅｔのＰａｙｌｏａｄＤａｔａに含むとともに、前記ＲＯＩについての情報をＥｍｂｅｄｄｅｄＤａｔａに含む伝送信号を受信する受信部と、
    前記受信部で受信した前記伝送信号に含まれる前記ＥｍｂｅｄｄｅｄＤａｔａから、前記ＲＯＩについての情報を抽出するとともに、抽出した前記情報に基づいて、前記受信部で受信した前記伝送信号に含まれる前記ＰａｙｌｏａｄＤａｔａから、前記ＲＯＩの画像データを抽出する情報処理部と
    を備えた
    映像受信装置。
  18. 前記情報処理部は、抽出した前記情報に基づいて、２以上の前記ＲＯＩ同士が重なり合う重なり領域を検出し、抽出した前記情報と、検出した前記重なり領域の情報とに基づいて、前記受信部で受信した前記伝送信号に含まれる前記ＰａｙｌｏａｄＤａｔａから、各前記ＲＯＩの画像データを抽出する
    請求項１７に記載の映像受信装置。
  19. 前記受信部は、ＭＩＰＩ(Mobile Industry Processor Interface) ＣＳＩ（Camera Ser ial Interface）－２規格、ＭＩＰＩ ＣＳＩ－３規格、もしくは、ＭＩＰＩ ＤＳＩ（Display Serial Interface）規格で信号を受信する
    請求項１７に記載の映像受信装置。
JP2019523413A 2017-06-09 2018-05-11 映像送信装置および映像受信装置 Active JP7163285B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017114690 2017-06-09
JP2017114690 2017-06-09
PCT/JP2018/018349 WO2018225449A1 (ja) 2017-06-09 2018-05-11 映像送信装置および映像受信装置

Publications (2)

Publication Number Publication Date
JPWO2018225449A1 JPWO2018225449A1 (ja) 2020-04-09
JP7163285B2 true JP7163285B2 (ja) 2022-10-31

Family

ID=64567136

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019523413A Active JP7163285B2 (ja) 2017-06-09 2018-05-11 映像送信装置および映像受信装置

Country Status (9)

Country Link
US (1) US20200186841A1 (ja)
EP (1) EP3637784A4 (ja)
JP (1) JP7163285B2 (ja)
KR (2) KR102509132B1 (ja)
CN (1) CN110710222A (ja)
BR (1) BR112019025471A2 (ja)
SG (1) SG11201910049VA (ja)
TW (1) TWI829638B (ja)
WO (1) WO2018225449A1 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210096090A (ko) * 2018-12-06 2021-08-04 소니 세미컨덕터 솔루션즈 가부시키가이샤 수신 장치 및 송신 장치
JP2020188323A (ja) * 2019-05-10 2020-11-19 ソニーセミコンダクタソリューションズ株式会社 撮像装置および撮像方法
EP3993435A4 (en) * 2019-06-28 2022-08-31 Sony Semiconductor Solutions Corporation SENDING DEVICE, RECEIVING DEVICE, AND TRANSMISSION SYSTEM
CN114009007A (zh) 2019-06-28 2022-02-01 索尼半导体解决方案公司 发送装置、接收装置和传输系统
TW202110184A (zh) * 2019-07-30 2021-03-01 日商索尼半導體解決方案公司 發送裝置、接收裝置、及通訊系統
WO2021039012A1 (ja) * 2019-08-30 2021-03-04 ソニー株式会社 撮像装置、データ伝送システム、及びデータ伝送方法
US20220279110A1 (en) * 2019-08-30 2022-09-01 Sony Group Corporation Imaging device, processing device, data transmission system, and data transmission method
JPWO2021100627A1 (ja) * 2019-11-20 2021-05-27
CN115362688A (zh) * 2020-03-25 2022-11-18 索尼半导体解决方案公司 接收装置和传输系统
US11900572B2 (en) * 2020-03-31 2024-02-13 Sony Semiconductor Solutions Corporation Transmission device, reception device, and transmission system
WO2022050057A1 (ja) * 2020-09-01 2022-03-10 ソニーセミコンダクタソリューションズ株式会社 情報処理装置、移動体装置、および通信システム
CN114245030A (zh) * 2021-12-20 2022-03-25 北京镁伽科技有限公司 上位机显示测试图像的方法、装置及图像信号发生器

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012120159A (ja) 2010-11-12 2012-06-21 Sony Corp 送信装置、送信方法、受信装置、受信方法、およびプログラム
JP2013501473A (ja) 2009-08-06 2013-01-10 クゥアルコム・インコーポレイテッド ワイヤレス・ディスプレイ・プロトコルに従ってビデオデータを準備すること
JP2016103808A (ja) 2014-11-28 2016-06-02 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102271249B (zh) * 2005-09-26 2014-04-09 韩国电子通信研究院 用于可伸缩视频的感兴趣区域信息设置方法和解析方法
US20090097704A1 (en) * 2007-10-10 2009-04-16 Micron Technology, Inc. On-chip camera system for multiple object tracking and identification
JP2012209831A (ja) 2011-03-30 2012-10-25 Panasonic Corp 画像データ制御装置
JP2013121032A (ja) * 2011-12-07 2013-06-17 Sony Corp 画像処理装置および方法
JP2013164834A (ja) 2012-01-13 2013-08-22 Sony Corp 画像処理装置および方法、並びにプログラム
CN103260081B (zh) * 2012-02-21 2016-08-10 中国移动通信集团公司 一种视频图像缩放处理方法及装置
JP6295951B2 (ja) * 2012-06-25 2018-03-20 ソニー株式会社 画像復号装置及び画像復号方法
JP5700703B2 (ja) 2012-08-20 2015-04-15 日本電信電話株式会社 映像復号装置、映像送受信システム、映像復号方法及び映像送受信方法
CN104885456A (zh) * 2012-09-18 2015-09-02 Vid拓展公司 使用图块和图块组的感兴趣区域视频编码
CN109068136B (zh) * 2012-12-18 2022-07-19 索尼公司 图像处理装置和图像处理方法、计算机可读存储介质
EP3562170A1 (en) * 2013-07-29 2019-10-30 Koninklijke KPN N.V. Providing tile video streams to a client
CN106031180A (zh) * 2014-02-18 2016-10-12 Lg电子株式会社 收发用于全景服务的广播信号的方法和设备
JP6440747B2 (ja) * 2014-06-27 2018-12-19 コニンクリーケ・ケイピーエヌ・ナムローゼ・フェンノートシャップ Ｈｅｖｃでタイル化されたビデオ・ストリームに基づく関心領域の決定
CN105320270B (zh) * 2014-07-18 2018-12-28 宏达国际电子股份有限公司 用于执行脸部追踪功能的方法及其电子装置
US11205305B2 (en) * 2014-09-22 2021-12-21 Samsung Electronics Company, Ltd. Presentation of three-dimensional video
JP6604019B2 (ja) 2015-04-14 2019-11-13 ソニー株式会社 画像処理装置、画像処理方法、および画像処理システム
KR102511705B1 (ko) * 2015-11-16 2023-03-20 삼성전자주식회사 비디오 인코딩 방법, 이를 수행하는 비디오 인코더 및 이를 포함하는 전자 시스템
JP6646433B2 (ja) 2015-12-21 2020-02-14 太平洋セメント株式会社 複合構造体
JP6936018B2 (ja) * 2017-02-21 2021-09-15 ソニーセミコンダクタソリューションズ株式会社 映像送信装置および映像受信装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013501473A (ja) 2009-08-06 2013-01-10 クゥアルコム・インコーポレイテッド ワイヤレス・ディスプレイ・プロトコルに従ってビデオデータを準備すること
JP2012120159A (ja) 2010-11-12 2012-06-21 Sony Corp 送信装置、送信方法、受信装置、受信方法、およびプログラム
JP2016103808A (ja) 2014-11-28 2016-06-02 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム

Also Published As

Publication number Publication date
JPWO2018225449A1 (ja) 2020-04-09
SG11201910049VA (en) 2019-11-28
KR102636747B1 (ko) 2024-02-15
KR102509132B1 (ko) 2023-03-13
EP3637784A4 (en) 2020-04-22
BR112019025471A2 (pt) 2020-06-23
KR20230036167A (ko) 2023-03-14
EP3637784A1 (en) 2020-04-15
CN110710222A (zh) 2020-01-17
TWI829638B (zh) 2024-01-21
TW201904281A (zh) 2019-01-16
KR20200016229A (ko) 2020-02-14
US20200186841A1 (en) 2020-06-11
WO2018225449A1 (ja) 2018-12-13

Similar Documents

Publication Publication Date Title
JP7163285B2 (ja) 映像送信装置および映像受信装置
KR102593633B1 (ko) 영상 송신 장치 및 영상 수신 장치
TWI783075B (zh) 傳輸裝置
WO2020261816A1 (ja) 送信装置、受信装置及び伝送システム
WO2019092952A1 (ja) 送信装置
EP3993392A1 (en) Transmission device, reception device, and transport system
WO2021020224A1 (ja) 送信装置、受信装置、及び通信システム
EP3993390A1 (en) Transmission device, reception device, and communication system
JP7450704B2 (ja) 送信装置、受信装置及び伝送システム
EP3993389A1 (en) Transmission device, reception device, and transport system
US20230129052A1 (en) Reception device and transmission system
CN113170029A (zh) 图像处理装置和图像处理方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210329

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210329

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220405

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220606

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220920

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221019

R150 Certificate of patent or registration of utility model

Ref document number: 7163285

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150