JP6244642B2 - 符号化装置、復号化装置、符号化方法、復号化方法およびプログラム - Google Patents

符号化装置、復号化装置、符号化方法、復号化方法およびプログラム Download PDF

Info

Publication number
JP6244642B2
JP6244642B2 JP2013082332A JP2013082332A JP6244642B2 JP 6244642 B2 JP6244642 B2 JP 6244642B2 JP 2013082332 A JP2013082332 A JP 2013082332A JP 2013082332 A JP2013082332 A JP 2013082332A JP 6244642 B2 JP6244642 B2 JP 6244642B2
Authority
JP
Japan
Prior art keywords
encoding
value
internal clock
unit
decoding unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013082332A
Other languages
English (en)
Other versions
JP2014207498A (ja
Inventor
井原　範幸
範幸 井原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2013082332A priority Critical patent/JP6244642B2/ja
Priority to US14/242,426 priority patent/US9948940B2/en
Publication of JP2014207498A publication Critical patent/JP2014207498A/ja
Application granted granted Critical
Publication of JP6244642B2 publication Critical patent/JP6244642B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/439—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using cascaded computational arrangements for performing a single operation, e.g. filtering

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は、符号化装置、復号化装置、符号化方法、復号化方法およびプログラムに関する。
現在、例えばデジタルシネマで用いられている４Ｋ２Ｋサイズ（ハイビジョン（登録商標）、解像度１９２０×１０８０の４倍）や、スーパーハイビジョンサイズ（ハイビジョンの１６倍）の映像を１台で圧縮／伝送が可能なコーデックは少なく、高価である。このため、４Ｋ２Ｋサイズやスーパーハイビジョンサイズの映像（以下、超高精細映像という）の伝送を行う場合、映像を４分割または１６分割し、安価なハイビジョン用コーデックを複数台用いて伝送したいという要求がある。さらに、このような超高精細映像の伝送を、回線コストの安いＩｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ（ＩＰ）ネットワークを利用して実現したいという要望がある。また同様な分割伝送として、３Ｄｉｆｉｎｉｔｉｏｎ（３Ｄ）映像における左右の映像を、各々ハイビジョンで伝送したいといった要望も上がっている。
複数台の装置を用いた伝送の場合には、デコーダは、受信した各々のエンコーダの映像の再生すべきフレームの同期を合わせて再生する必要がある。しかしながら、単純に映像を分割して複数のエンコーダで映像／音声を圧縮し、ＩＰネットワークで伝送を行い、デコーダが出力映像を合成するだけでは、分割映像のデコーダの出力を、同一タイミングに合わせることができない。各々のエンコーダ・デコーダの符号化・復号化遅延やネットワークの伝送遅延が異なるためである。このため、各符号化装置から出力された分割映像に対応するデータを１ストリームにまとめて伝送し、受信側で分解することで、伝送による遅延を全てのエンコーダ−デコーダ間で同一にする技術が知られている。（例えば、特許文献１〜３参照）
別の技術として、例えば、複数の符号化装置で構成される符号化システムと、符号化システムから伝送された画像データを復号して一画面の画像データを表示する複数の復号装置を備えた復号システムとを備えた符号化復号システムが知られている。このような符号化復号システムでは、符号化システムが、一画面の画像データから符号化装置の数に分割された複数の画像データを当該複数の符号装置で各々符号化して復号システムに伝送する。複数の符号化装置の各々は、分割された画像データを各符号化装置でキャプチャした時刻を示すＳＴＣカウンタの値に、各符号化装置による符号化時に最大生じるであろう符号化遅延時間を加算した時刻を算出する。複数の復号装置は、符号化装置で算出された時刻に、ストリーム揺らぎおよび復号遅延時間の最大であろう値を加算した時刻を算出し、算出された時刻に、画像データを合成する合成部に出力する。このような方法により、高解像度の動画像信号を正しく表示することを目指している。（例えば、特許文献４参照）。
特開平１１−２３９３４７号公報 特開平１０−２３４０４３号公報 特開平８−７９７０１号公報 特開２００８−１６６８６２号公報
例えば、放送業界で広く使用されているＤｉｇｉｔａｌ Ｖｉｄｅｏ Ｂｒｏａｄｃａｓｔｉｎｇ−Ａｓｙｎｃｈｒｏｎｏｕｓ Ｓｅｒｉａｌ Ｉｎｔｅｒｆａｃｅ（ＤＶＢ−ＡＳＩ）の出力を１ストリームにまとめる場合、以下のような手順で伝送が行われる。すなわち、各エンコーダからＤＶＢ−ＡＳＩで出力したものを１ストリームにまとめてＩＰネットワークで伝送し、受信側でＤＶＢ−ＡＳＩに分解する。
具体的には、各エンコーダからＤＶＢ−ＡＳＩで出力し、各Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ（ＴＳ）ストリームをＭｕｌｔｉｐｌｅｘ（ＭＵＸ）装置で１つのＴＳストリームに多重し、ＤＶＢ−ＡＳＩで出力する。そして、ＤＶＢ−ＡＳＩ−ＩＰ変換装置で、ＴＳストリームをＩＰネットワークで伝送し、ＩＰ−ＤＶＢ−ＡＳＩ変換装置でＩＰネットワーク上のＴＳストリームを受信しＤＶＢ−ＡＳＩで出力する。さらに、Ｄｅｍｕｌｔｉｐｌｅｘ（ＤＥＭＵＸ）装置で個々のＴＳストリームに分解し、各デコーダに入力する。
このように、ＤＶＢ−ＡＳＩで伝送する場合と比較して、ＭＵＸ装置、ＤＶＢ−ＡＳＩ−ＩＰ変換装置、ＩＰ−ＤＶＢ−ＡＳＩ変換装置、ＤＥＭＵＸ装置といった装置が余分に必要となり高価なシステムとなる。
また、最大生じるであろう遅延時間を予測する例において、特に、ＩＰネットワークで伝送を行うような場合には、予測を超える遅延時間が生じる可能性を考慮する必要がある。予測を超える遅延時間が生じた場合には、上記のような従来の技術では、同期の取れた正しい画像が表示できない場合がある。
そこで、ひとつの側面によれば、変換装置のような装置を必要とせずに、安価なＩＰネットワークで同期のとれた分割映像をリアルタイムで伝送することを目的とする。
ひとつの態様である符号化装置は、動画像である撮像画像を分割して得られる複数の分割画像のそれぞれを符号化する複数の符号化部として、一つの主符号化部と少なくとも一つの従符号化部とを有している。主符号化部及び従符号化部の各々は、撮像画像についての垂直同期信号のタイミングに同期している内部クロックを生成し、複数の分割画像の中の一つの分割画像を符号化して得られた符号化画像と、複数の分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける内部クロックの値に符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を、符号化画像を復号する復号化装置へ送信する。従符号化部は、更に、分割元の撮像画像についての垂直同期信号のタイミングにおける従符号化部自身の内部クロックの値である従符号化部基準クロック値を、主符号化部へ送信する。主符号化部は、更に、従符号化部基準クロック値を従符号化部から受信し、分割元の撮像画像についての垂直同期信号のタイミングにおける主符号化部自身の内部クロックの値である主符号化部基準クロック値と、従符号化部から受信した従符号化部基準クロック値とを含む基準クロックデータを復号化装置へ送信する。
別の態様である復号化装置は、動画像である撮像画像を分割して得られる複数の分割画像の中の互いに異なる一つの分割画像の符号化画像をそれぞれ復号化する複数の復号化部として、主復号化部と少なくとも一つの従復号化部とを有する。主復号化部及び従復号化部の各々は、符号化画像を符号化した符号化装置から、一つの分割画像を符号化した符号化画像と、撮像画像についての垂直同期信号のタイミングに同期しているクロックの値であって一つの分割画像と対応する分割画像の時刻情報と、一つの分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける該クロックの値に符号化装置での符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を時系列に受信し、時系列に受信した符号化情報に含まれる復号基準時刻情報に基づいて、垂直同期信号のタイミングに同期している内部クロックを生成する。また、従復号化部は、更に、所定のタイミングにおける従復号化部自身の内部クロックの値である初期内部クロック値を主復号化部へ送信する。また、主復号化部は、更に、撮像画像についての垂直同期信号のタイミングに同期している内部クロックであって互いに異なる一つの分割画像の符号化を個々に行った複数の符号化部の各々についての該内部クロックの値であって、分割元の撮像画像についての垂直同期信号のタイミングにおける該値である基準クロック値を、複数の符号化部の各々について含む基準クロックデータを符号化装置から受信し、初期内部クロック値を従復号化部から受信し、所定のタイミングにおける主復号化部自身の内部クロックの値である初期内部クロック値を取得し、一つの分割画像についての符号化を行った符号化部についての基準クロック値と、該一つの分割画像についての符号化情報を受信した主復号化部若しくは従復号化部についての初期内部クロック値との差を、複数の分割画像の各々について算出し、複数の分割画像の各々について算出された当該差のうち値が最大であるものの算出に用いた初期内部クロック値を、主復号化部及び従復号化部のうち当該初期内部クロック値が当該所定のタイミングにおける自身の内部クロックの値であるものについての、符号化装置から受信した符号化情報に含まれている符号化画像の再生タイミングを示す設定内部クロック値として設定すると共に、設定内部クロック値である当該差の算出に用いた基準クロック値を設定内部クロック値ではない当該差の算出に用いた基準クロック値の各々から減じた値に設定内部クロック値を加算して得られる値の各々を、主復号化部及び従復号化部のうち設定内部クロック値が設定されなかった残りの復号化部についての設定内部クロック値として各々設定し、主復号化部が符号化装置から受信した符号化情報に含まれている符号化画像を復号化して得られる元の分割画像を、主復号化部についての設定内部クロック値により示される再生タイミングで再生し、従復号化部についての設定内部クロック値を従復号化部へ送信する。また、従復号化部は、更に、主復号化部から送信された設定内部クロック値を受信し、従復号化部が符号化装置から受信した符号化情報に含まれている符号化画像を復号化して得られる元の分割画像を、受信した設定内部クロック値により示される再生タイミングで再生する。
なお、上述した態様に係る符号化装置による上記動作に対応する符号化方法、または、上述した態様に係る復号化装置による上記動作に対応する復号化方法であっても、上述した態様に係る装置と同様の作用効果を奏するので、前述した課題が解決される。
さらに、上述した態様に係る方法をコンピュータに行わせるためのプログラムであっても、このプログラムを当該コンピュータによって実行させることにより、上述した態様に係る方法と同様の作用効果を奏するので、前述した課題が解決される。
上述した態様の符号化装置、復号化装置、符号化方法、復号化方法およびプログラムによれば、変換装置のような装置を必要とせずに、安価なＩＰネットワークで同期のとれた分割映像をリアルタイムで伝送できる。
第１の実施の形態による映像伝送システムの構成を示す図である。 第１の実施の形態による映像伝送システムの動作の概念を示す図である。 第１の実施の形態によるエンコーダのハードウエア構成の一例を示すブロック図である。 第１の実施の形態によるエンコーダの機能の一例を示すブロック図である。 第１の実施の形態によるエンコーダの機能の一例を示すブロック図である。 第１の実施の形態によるデコーダのハードウエア構成の一例を示すブロック図である。 第１の実施の形態によるデコーダのハードウエア構成の一例を示すブロック図である。 第１の実施の形態によるデコーダの機能の一例を示すブロック図である。 第１の実施の形態によるデコーダの機能の一例を示すブロック図である。 第１の実施の形態によるＴＳストリームを概念的に示す図である。 第１の実施の形態によるＴＳストリームの、ＩＰネットワークで通信された後の状態の一例を示す概念図である。 第１の実施の形態によるエンコーダの動作を示すフローチャートである。 第１の実施の形態によるエンコーダの動作を示すフローチャートである。 第１の実施の形態によるデコーダの動作を示すフローチャートである。 第１の実施の形態によるデコーダの動作を示すフローチャートである。 第１の実施の形態によるデコーダの動作を示すフローチャートである。 第１の実施の形態によるデコーダの動作を示すフローチャートである。 第２の実施の形態による映像伝送システムの構成を示す図である。 第２の実施の形態によるエンコーダの機能ブロックの一例を示す図である。 第２の実施の形態によるデコーダの機能ブロックの一例を示す図である。 第２の実施の形態によるデコーダの機能ブロックの一例を示す図である。 第２の実施の形態によるＴＳストリームを概念的に示す図である。 第２の実施の形態によるエンコーダの動作を示すフローチャートである。 第２の実施の形態によるデコーダの動作を示すフローチャートである。 第２の実施の形態によるデコーダの動作を示すフローチャートである。 第２の実施の形態によるデコーダの動作を示すフローチャートである。 第２の実施の形態によるデコーダの動作を示すフローチャートである。 標準的なコンピュータのハードウエア構成の一例を示すブロック図である。
（第１の実施の形態）
以下、第１の実施の形態を図面に基づいて説明する。以下、映像信号とは、カメラから出力される映像及び音声を含む信号、または、表示装置に入力される映像及び音声を含む信号であり、映像情報、音声情報とは、映像信号から分離されるそれぞれ映像部分、音声部分に相当する情報であるとする。ピクチャデータとは、映像情報から符号化された１ピクチャ（１画像）に相当する情報であり、符号化ピクチャとは、ピクチャデータに後述するＰｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ（ＰＴＳ）値を付加した情報であるとする。符号化音声は、音声情報を圧縮符号化した情報であるとする。ストリームとは、複数の符号化ピクチャが連続した情報、符号化音声、および復号の際の基準時刻となるＰｒｏｇｒａｍ Ｃｌｏｃｋ Ｒｅｆｅｒｅｎｃｅ（ＰＣＲ）を含む情報であるとする。
図１は、第１の実施の形態による映像伝送システム１の構成を示す図、図２は、映像伝送システム１の動作の概念を示す図である。図１に示すように、映像伝送システム１は、カメラ９が接続された符号化装置３と、表示装置１１が接続された復号化装置５とが、ＩＰネットワーク７を介して接続されたシステムである。
映像伝送システム１は、４Ｋ２Ｋサイズの映像、スーパーハイビジョン等の４Ｋ２Ｋサイズ以上の超高精細映像や、３Ｄの映像を分割して符号化し、リアルタイムでＩＰネットワーク７を用いて伝送し、復号化装置で同期を合わせて再生するシステムである。このようなシステムにおいて、放送業界で使用可能な正確なレートで、１つの映像を分割して複数のエンコーダ・デコーダで伝送するためには、以下のようなことが必要である。すなわち、放送業界で広く使用されている正確な表示クロックも伝送できる映像／音声多重化方式を用いて伝送する必要がある。本実施の形態においては、例えばＭｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ２−Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ（ＭＰＥＧ２−ＴＳ）方式を用いて伝送する。
本実施の形態による符号化装置３は、４つのエンコーダ３１〜３７および、ＨＵＢ３９を有している。図１、図２に示すように、エンコーダ３１〜３７は、元映像２０を４分割した分割映像２２〜２８をそれぞれ符号化してストリームとして出力する符号化装置である。本実施の形態においては、エンコーダ３１〜３７は、映像／音声をＨ．２６４、ＭＰＥＧ２等／ＭＰＥＧ１−Ｌａｙｅｒ２、Ａｄｖａｎｃｅｄ Ａｕｄｉｏ Ｃｏｄｉｎｇ（ＡＡＣ）、Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ（ＨＥ）−ＡＡＣ等で圧縮する。さらに、エンコーダ３１〜３７は、圧縮したデータを例えばＭＰＥＧ２−ＴＳ方式を用いて伝送する。ＨＵＢ３９は、複数のケーブルを集約して情報伝達を行う装置である。カメラ９は、例えば４Ｋ２Ｋの映像信号を複数の分割映像に分割して出力する撮影装置である。
各エンコーダ３１〜３７は、１台のカメラ９に接続されており、カメラ９で４分割された映像信号をそれぞれ取得する。エンコーダ３１〜３７は、一台のカメラ９に同期して符号化を行うため、符号化される各ピクチャの垂直同期信号（Ｖｓｙｎｃ）のタイミングは一致している。単純に各エンコーダ３１〜３７に分割映像２２〜２８を入力して符号化を行った場合、エンコーダ３１〜３７が取込む垂直同期信号が同期しているため、各エンコーダ３１〜３７のＳｙｓｔｅｍ Ｔｉｍｅ Ｃｌｏｃｋ（ＳＴＣ）の進みは一致する。しかし、ＳＴＣの初期値は異なるためＳＴＣ値はバラバラとなり、各エンコーダ３１〜３７で符号化された同一の元映像２０の分割映像２２〜２８に基づくピクチャに付加されるＰＴＳの値も、後述するようにバラバラとなる。
そこで、本実施の形態においては、エンコーダ３１〜３７のうちの１つは、主符号化装置（マスタエンコーダ）として機能させ、他の３つは、従符号化装置として機能させる。従符号化装置は、主符号化装置に、例えば、分割映像に対応する各ピクチャの垂直同期信号の立ち上がりまたは立ち下り（以下、垂直同期信号のタイミングという）のＳＴＣ値を通知する。主符号化装置は、取得したＳＴＣ値に基づき、一画面の撮像画像を分割した複数の分割映像を識別するためのＳＴＣデータを生成する。ＳＴＣデータの詳細は後述する。どの分割映像２２〜２８を符号化するエンコーダ３１〜３７を主符号化装置とするかは限定されないが、以下の例ではエンコーダ３１を主符号化装置として説明する。
１台の主符号化装置として、エンコーダ３１が決定されている場合、エンコーダ３１は、Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ（ＬＡＮ）１２１を介してエンコーダ３３〜３７から垂直同期信号のタイミングのＳＴＣ値を取得する。エンコーダ３３〜３７は、撮像画像を分割して得られる分割映像に対応する垂直同期信号のＳＴＣ値を、エンコーダ３１に通知する。
本実施の形態による復号化装置５は、４つのデコーダ５１〜５７、分配器５９、およびＨＵＢ６１を有している。図１、図２に示すように、復号化装置５は、符号化装置３により符号化されて、ＩＰネットワーク７を介して伝送された情報を復号化し、分割映像４２〜４８を表示することにより再生映像４０を再生するための復号化装置である。分配器５９は、デコーダ５１から取得したクロック（Ｇｅｎｅｒａｔｏｒ Ｌｏｃｋ：ＧＥＮＬＯＣＫ）を、デコーダ５３〜５７に分配する装置である。ＨＵＢ６１は、複数のケーブルを集約して情報伝達を行う装置である。表示装置１１は、復号化装置５で復号化された分割映像４２〜４８を合成して表示する装置である。
デコーダ５１〜５７のうちの一つは、主復号化装置（マスタデコーダ）として機能し、他の３つは、従復号化装置として機能する。主復号化装置は、主符号化装置で符号化された映像を復号化するとともに、従復号化装置に映像を再生するタイミングを指示するデコーダである。従復号化装置に関しては、どの従符号化装置が出力した符号化ピクチャをどの従復号化装置が復号化するかは、互いに限定されない。以下の例では、デコーダ５１を主復号化装置として説明する。
以下、図３から図７を参照しながらエンコーダ３１〜３７の構成について説明する。図３は、エンコーダ３１〜３７のハードウエア構成の一例を示す図である。エンコーダ３１〜３７は、受信装置７０、Ｐｈａｓｅ Ｌｏｃｋｅｄ Ｌｏｏｐ（ＰＬＬ）７２、符号化部７４、メモリ８２、Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ（ＣＰＵ）８４、ＬＡＮ制御部８６を有している。
符号化部７４は、映像部７６、音声部７８、多重化装置８０を有している。受信装置７０は、カメラ９から出力される、例えば、Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ−Ｓｅｒｉａｌ Ｄｉｇｉｔａｌ Ｉｎｔｅｒｆａｃｅ（ＨＤ−ＳＤＩ）方式の映像信号１００を受信する。符号化部７４は、受信した映像信号を符号化する。このとき、映像部７６は、映像信号の中の映像情報を符号化し、音声部７８は、音声情報を符号化する。多重化装置８０は、符号化された映像及び音声を多重化してストリームを生成する装置である。メモリ８２は、生成されたストリームが一時的に保持される記憶装置である。ＣＰＵ８４は、符号化部７４から出力され、メモリ８２を経由したストリームをＬＡＮ制御部８６を介してＬＡＮ１２１に出力する。ＰＬＬ７２はエンコーダ３１〜３７に入力される映像信号から符号化部７４の動作クロックを生成する。
図４は、エンコーダ３１の機能を示すブロック図である。エンコーダ３１は、本実施の形態においては、主符号化装置となる。図４に示すように、エンコーダ３１は、映像取込部１０１、映像符号化部１０３、音声取込部１０５、音声符号化部１０７、映像／音声多重部１０９の機能を有している。さらに、エンコーダ３１は、垂直同期信号取込部１１１、ＳＴＣ読出部１１３、ＳＴＣクロック生成部１１５、ＰＣＲクロック生成部１１７、送信部１１９、ＳＴＣデータ生成部１２３、受信部１２５の機能を有している。
映像取込部１０１は、例えば、ＨＤ−ＳＤＩ方式の映像信号のうちの映像部分（映像情報）を取得する。このとき、映像取込部１０１は、垂直同期信号毎に、映像情報を取得する。すなわち、エンコーダ３１の映像取込部１０１は、分割映像２２を後述する垂直同期信号毎に取り込み、分割映像２２を取り込んだ時の例えば垂直同期信号のタイミングのＳＴＣ値をＰＴＳ値として保存する。
映像符号化部１０３は、映像取込部１０１が取得した映像情報をピクチャデータに符号化する。映像符号化部１０３は、例えば、ＭＰＥＧ２の規格に応じて、映像情報を符号化して符号化ピクチャを生成する。このとき、映像符号化部１０３は、各ピクチャデータに、復号化装置５での再生時刻を示す値として保存したＰＴＳ値を付加して、符号化ピクチャを生成する。
音声取込部１０５は、カメラ９から、例えば、ＨＤ−ＳＤＩ方式の映像信号のうちの音声部分（音声情報）を取得する。音声符号化部１０７は、音声取込部１０５が取得した音声情報を符号化して符号化音声を生成する。このとき、音声符号化部１０７は、例えば、ＡＡＣ、ＨＥ−ＡＡＣ等の規格に応じて音声情報を符号化する。
垂直同期信号取込部１１１は、カメラ９の映像信号から垂直同期信号（Ｖｓｙｎｃ）を取得し、映像取込部１０１、ＳＴＣ読出部１１３に出力するとともに、垂直同期信号の周期を計測する。ＳＴＣクロック生成部１１５は、映像信号１００の垂直同期信号に同期したクロックを、エンコーダ３１における基準となるクロックとして生成し、映像取込部１０１、音声取込部１０５、ＳＴＣ読出部１１３、ＰＣＲクロック生成部１１７に出力する。ＳＴＣは、Ｈ．２６４やＭＰＥＧ２の映像符号化で、各符号化装置、復号化装置において符号化や再生の基準となるクロックである。
ＰＣＲクロック生成部１１７は、ＳＴＣ値に、エンコードの処理遅延時間を加算してＰＣＲを生成する。映像／音声多重部１０９は、符号化された映像、音声、および生成されたＰＣＲの多重化を行い、符号化ピクチャが時系列に含まれたＴＳストリームを生成する。
一方、ＳＴＣ読出部１１３は、例えば垂直同期信号取込部１１１が垂直同期信号を取得した時刻にＳＴＣ値を読み出す。また、ＳＴＣ読出部１１３は、取得したＳＴＣ値に垂直同期信号取込部１１１が計測した垂直同期信号の周期を加算することにより、次の垂直同期信号のＳＴＣ値を計算する。受信部１２５は、例えばＬＡＮ１２１を介して、従符号化装置となるエンコーダ３３〜３７から、例えば、分割映像２４〜２８に応じた垂直同期信号のタイミングのＳＴＣ値を取得する。ＳＴＣデータ生成部１２３は、ＳＴＣ読出部１１３で取得されたエンコーダ３１自身のＳＴＣ値、およびエンコーダ３３〜３７から取得したそれぞれのＳＴＣ値に基づき、ＳＴＣデータを生成する。以下、ＳＴＣデータに含まれるＳＴＣ値を、基準ＳＴＣ値という。送信部１１９は、生成されたＴＳストリームおよびＳＴＣデータを、ＬＡＮ１２１、ＨＵＢ３９を介してＩＰネットワーク７に送信する。
図５は、エンコーダ３３〜３７の機能ブロック図である。エンコーダ３３〜３７は、互いに同一の機能ブロック図で表される。図５において、エンコーダ３１と同一の構成には、同一の符号を付し、詳細説明を省略する。図５に示すように、エンコーダ３３〜３７は、エンコーダ３１と同様に、映像取込部１０１、映像符号化部１０３、音声取込部１０５、音声符号化部１０７、映像／音声多重部１０９の機能を有している。さらに、エンコーダ３３〜３７は、エンコーダ３１と同様に、垂直同期信号取込部１１１、ＳＴＣ読出部１１３、ＳＴＣクロック生成部１１５、ＰＣＲクロック生成部１１７、送信部１１９の機能を有している。
映像取込部１０１は、カメラ９からの分割映像２４〜２８を垂直同期信号毎に取り込み、取り込んだ時のＳＴＣ値をＰＴＳ値として保存する。このとき、上述のように、ＳＴＣクロック生成部１１５が生成するＳＴＣは、必ずしも他のエンコーダ３１〜３７とは一致していない。映像符号化部１０３、音声取込部１０５、音声符号化部１０７、映像／音声多重部１０９、垂直同期信号取込部１１１、ＳＴＣ読出部１１３などの動作は、エンコーダ３１と同様である。エンコーダ３３〜３７は、ＳＴＣ読出部１１３が読み出したＳＴＣ値を、送信部１１９、ＬＡＮ１２１を介してエンコーダ３１に送信する。エンコーダ３３〜３７は、符号化された映像、音声、および生成されたＰＣＲの多重化を行い、符号化ピクチャが時系列に含まれたＴＳストリームを出力する。
以上のようにエンコーダ３１〜３７を構成することにより、ＩＰネットワーク７を介して送信される元映像２０に基づくストリームは、分割映像２２〜２８をそれぞれ符号化した、４つの別々のストリームとなる。さらに、エンコーダ３１は、元映像２０の分割映像２２〜２８に対応する４つの基準ＳＴＣ値を含むＳＴＣデータを生成し送信する。
なお、図４、図５にそれぞれ示したエンコーダ３１〜３７が備える機能に対応する各構成要素は、それぞれ別個に形成される回路でもよい。あるいはこれらの構成要素の一部若しくは全部を実現するための集積された集積回路としてエンコーダ３１〜３７の各々が実装されてもよい。更に、これらの各構成要素は、エンコーダ３１〜３７の各々が有する演算処理装置上で実行されるプログラムにより実現される、機能モジュールであってもよい。
続いて、本実施の形態によるデコーダについて説明する。本実施の形態においては、デコーダ５１〜５７のなかから、デコーダ５１が主復号化装置として決定されており、デコーダ５１〜５７の映像再生のタイミングを同期させるように構成されている。また、デコーダ５１は、主符号化装置から送信されたデータを受信する。
図６は、本実施の形態によるデコーダ５１のハードウエア構成の一例を示すブロック図、図７は、本実施の形態によるデコーダ５３〜５７のハードウエア構成の一例示すブロック図である。
図６に示すようにデコーダ５１は、ＬＡＮ制御部１５３、メモリ１５５、ＣＰＵ１５７、復号部１５９、ＰＬＬ１６７、映像出力部１６９、ＧＥＮＬＯＣＫ出力部１７１を有している。復号部１５９は、分離装置１６１、映像部１６３、音声部１６５を有している。
ＬＡＮ制御部１５３は、デコーダ５３〜５７、分配器５９などとの間のＬＡＮ１２１による通信を制御する。メモリ１５５は、ＬＡＮ１２１を介して受信した、符号化された映像のストリーム等を保持する記憶装置である。ＣＰＵ１５７は、メモリ１５５からのデータの転送等を制御する演算処理装置である。
復号部１５９は、ＬＡＮ１２１を介して取得した、符号化された映像のストリームを復号化する。このとき、分離装置１６１は、受信したストリームから映像部分、音声部分、およびＰＣＲを分離する。映像部１６３は、映像部分の情報を復号化する。音声部１６５は、音声部分の情報を復号化する。
ＰＬＬ１６７は、分離装置１６１で分離されたＰＣＲに基づき、復号部１５９の動作クロックを生成する。映像出力部１６９は、復号化された映像及び音声の情報を出力する。ＧＥＮＬＯＣＫ出力部１７１は、ＰＬＬ１６７に基づきＧＥＮＬＯＣＫ信号２３１を生成し、分配器５９にＧＥＮＬＯＣＫ信号２３１を出力する。
デコーダ５１は、ＬＡＮ制御部１５３を介して符号化された映像のストリームを取り込み、ＣＰＵ１５７は、取込んだストリームをメモリ１５５を経由して復号部１５９に入力する。復号部１５９においては、分離装置１６１が、入力されたストリームを映像部分と音声部分に分離し、それぞれ映像部１６３、音声部１６５に出力する。また、分離装置１６１は、入力されたストリームからＰＣＲを分離し、ＰＬＬ１６７は、ＰＣＲに基づき復号部１５９の動作クロックを生成する。映像部１６３、音声部１６５で復号された例えばＨＤ−ＳＤＩ方式の映像信号２３５は、映像出力部１６９から出力される。また、デコーダ５１は、ＧＥＮＬＯＣＫ出力部１７１により、ＧＥＮＬＯＣＫ信号２３１を分配器５９へ出力する。
図７に示すようにデコーダ５３〜５７において、デコーダ５１と同様の構成については、同一番号を付し、詳細説明を省略する。デコーダ５３〜５７は、デコーダ５１と同様に、ＬＡＮ制御部１５３、メモリ１５５、ＣＰＵ１５７、復号部１５９、ＰＬＬ１６７、映像出力部１６９を有している。復号部１５９は、分離装置１６１、映像部１６３、音声部１６５を有している。デコーダ５３〜５７は、デコーダ５１のＧＥＮＬＯＣＫ出力部１７１に代えて、ＧＥＮＬＯＣＫ入力部１７３を有している。
デコーダ５３〜５７では、ＧＥＮＬＯＣＫ入力部１７３が、分配器５９からのＧＥＮＬＯＣＫ信号２３１を取得し、ＰＬＬ１６７は、ＧＥＮＬＯＣＫ信号２３１に基づきクロックを生成する。他の構成についてはデコーダ５１と同様である。
次に、図８、図９を参照しながら、本実施の形態によるデコーダ５１〜５７の機能について説明する。図８は、デコーダ５１の機能を示すブロック図、図９は、デコーダ５３〜５７の機能を示すブロック図である。上記のように、本実施の形態において、エンコーダ３１〜３７の４台のエンコーダのＴＳストリームは別々のＴＳストリームで送信されるため、デコーダには個々のＴＳストリームが異なる時刻で到着する。よって、復号化装置５が、同期を行わずに単純にデコーダ５１〜５７で受信したＴＳストリームを再生した場合、分割画面毎に異なる映像を再生することになる。さらに本実施の形態においては、それぞれのＴＳストリームに含まれる一画面分の撮影映像を分割して得られる分割映像に付されているＰＴＳ値が統一されていない。そこで、デコーダ側では、ＳＴＣデータを参照することにより、元映像２０を分割した映像を特定するとともに、分割映像を再生する時刻を設定する。
以下、図８を参照しながら、デコーダ５１の機能について説明する。図８に示すように、デコーダ５１は、受信部２０１、受信バッファ部２０３、映像／音声分離部２０５、映像復号化部２０７、音声復号化部２０９、映像表示部２１１、音声表示部２１３の機能を有している。また、デコーダ５１は、ＰＣＲクロック取得部２１５、ＳＴＣクロック生成部２１７、垂直同期信号生成部２１９、ＳＴＣ計算部２２１、ＳＴＣ設定部２２３、ＳＴＣ読出部２２５、送信部２２７の機能を有している。
受信部２０１は、元映像２０が分割されて符号化され、エンコーダ３１からＩＰネットワーク７を介して送信された、例えばＴＳストリーム、およびＳＴＣデータを受信する。受信バッファ部２０３は、受信した情報を一時的に格納することにより、ＩＰネットワーク７の揺らぎの平滑化を行う。映像／音声分離部２０５は、受信したＴＳストリームから、映像部分、音声部分およびＰＣＲを分離する。映像／音声分離部２０５は、分離したＰＣＲをＰＣＲクロック取得部２１５に出力するとともに、分離した符号化ピクチャ、符号化音声をそれぞれ映像復号化部２０７、音声復号化部２０９に出力する。
ＰＣＲクロック取得部２１５は、分離されたＰＣＲを取得し、ＳＴＣクロック生成部２１７に出力する。ＳＴＣクロック生成部２１７は、取得したＰＣＲ、ＳＴＣに基づき、ＳＴＣクロックを生成する。このとき、ＳＴＣクロック生成部２１７は、次の垂直同期信号のＳＴＣ値が設定されると、設定されたＳＴＣ値に同期したＳＴＣクロックを生成する。ＳＴＣクロック生成部２１７は、生成されたＳＴＣクロックを、映像表示部２１１、音声表示部２１３、垂直同期信号生成部２１９に出力する。垂直同期信号生成部２１９は、生成されたＳＴＣクロックを用いて垂直同期信号を生成するとともに、ＧＥＮＬＯＣＫ信号２３１として分配器５９に出力し、ＧＥＮＬＯＣＫ信号２３１においても生成された垂直同期信号を出力させる。ＧＥＮＬＯＣＫ信号２３１は、デコーダ５１〜５７を同期させるための信号である。
ＳＴＣ読出部２２５は、垂直同期信号生成部２１９から垂直同期信号を取得して、ＳＴＣクロック生成部２１７で生成されたクロックを参照することにより、次のピクチャに対応する垂直同期信号のタイミングのＳＴＣ値を読み出す。読み出されたＳＴＣ値を、以下、デコーダ５１の初期ＳＴＣ値という。
ＳＴＣ計算部２２１は、受信部２０１で受信されたＳＴＣデータに含まれた基準ＳＴＣ値に対応するピクチャの次のピクチャの垂直同期信号のタイミングのＳＴＣ値の送信を、送信部２２７を介してデコーダ５３〜５７に要求する。要求したＳＴＣ値を、それぞれのデコーダ５３〜５７での初期ＳＴＣ値という。受信部２０１は、デコーダ５３〜５７から、それぞれの初期ＳＴＣ値をそれぞれ取得し、ＳＴＣ計算部２２１に出力する。
ＳＴＣ計算部２２１は、ＳＴＣデータに含まれるエンコーダ３１〜３７における基準ＳＴＣ値と、ＳＴＣ読出部２２５で取得した自身の初期ＳＴＣ値を含む、次のピクチャに対応する各デコーダ５１〜５７の初期ＳＴＣ値との差の最大値を抽出する。抽出した最大値に対応する初期ＳＴＣ値を、最大ＳＴＣ値という。
ＳＴＣ計算部２２１は、求めた最大ＳＴＣ値を、対応するデコーダにおける次のピクチャの垂直同期信号のタイミングの設定ＳＴＣ値とする。また、求めた最大ＳＴＣ値に対応する基準ＳＴＣ値をその他の基準ＳＴＣ値から減じた値を、最大ＳＴＣ値に加算し、その他のデコーダに設定するＳＴＣ値を算出する。算出されるＳＴＣ値を、各デコーダの設定ＳＴＣ値という。
ＳＴＣ計算部２２１は、算出したデコーダ５１に対応する設定ＳＴＣ値をＳＴＣ設定部２２３に出力する。また、ＳＴＣ計算部２２１は、算出したデコーダ５３〜５７に対応するそれぞれの設定ＳＴＣ値を、送信部２２７を介してデコーダ５３〜５７にそれぞれ通知する。ＳＴＣ設定部２２３は、計算されたＳＴＣ値をＳＴＣクロック生成部２１７に通知する。
映像復号化部２０７は、映像を復号化し、映像表示部２１１に出力する。音声復号化部２０９は、音声を復号化し、音声表示部２１３に出力する。映像表示部２１１は、復号化した映像情報をＳＴＣおよびＰＴＳに基づき出力し、音声表示部２１３は、復号化した音声情報を出力する。映像情報及び音声情報は、垂直同期信号生成部２１９が出力する垂直同期信号に応じて映像信号２３５として出力され、表示装置１１に分割映像４２を表示させる。
以下、図９を参照しながら、デコーダ５３〜５７の機能について説明する。デコーダ５１と同一の構成には、同一の符号を付し、詳細説明を省略する。図９に示すように、デコーダ５３〜５７は、デコーダ５１と同様に、受信部２０１、受信バッファ部２０３、映像／音声分離部２０５、映像復号化部２０７、音声復号化部２０９、映像表示部２１１、音声表示部２１３を有している。また、デコーダ５３〜５７は、ＰＣＲクロック取得部２１５、ＧＥＮＬＯＣＫクロック生成部２３７、クロック選択部２３９、ＳＴＣクロック生成部２４１、垂直同期信号生成部２４３、ＳＴＣ設定部２４５、ＳＴＣ読出部２４７、送信部２４９を有している。
ＰＣＲクロック取得部２１５は、ＴＳストリーム受信開始時には、デコーダ５１と同様に、映像／音声分離部２０５が分離したＰＣＲを取得する。クロック選択部２３９は、ＰＣＲクロック取得部２１５と、ＧＥＮＬＯＣＫクロック生成部２３７のいずれをＳＴＣクロック生成部２４１に接続させるかを切り換えることにより、ＳＴＣクロックの基準になるクロックを切り換える。クロック選択部２３９は、ＴＳストリーム受信開始時は、デコーダ５１と同様に、ＰＣＲクロック取得部２１５が取得したＰＣＲクロックからＳＴＣクロックを生成するよう、ＰＣＲクロック取得部２１５をＳＴＣクロック生成部２４１に接続する。デコーダ５１から、次の垂直同期信号のＳＴＣ値が通知されると、クロック選択部２３９は、ＧＥＮＬＯＣＫクロック生成部２３７をＳＴＣクロック生成部２４１に接続する。ＧＥＮＬＯＣＫクロック生成部２３７は、分配器５９からＧＥＮＬＯＣＫ信号２３１を取得する。
ＳＴＣクロック生成部２４１は、クロック選択部２３９を介して入力されるクロックに基づきＳＴＣクロックを生成する。垂直同期信号生成部２４３は、ＰＣＲクロック取得部２１５がＳＴＣクロック生成部２４１に接続されている場合には、デコーダ５１と同様に、ＳＴＣクロックを用いて垂直同期信号生成部２４３で垂直同期信号を生成する。垂直同期信号生成部２４３は、ＧＥＮＬＯＣＫクロック生成部２３７がＳＴＣクロック生成部２４１に接続されている場合には、ＧＥＮＬＯＣＫ信号２３１により垂直同期信号を生成する。生成された垂直同期信号に基づき、映像情報、音声情報は表示装置１１に出力される。
ＳＴＣ読出部２４７は、ＳＴＣクロック生成部２４１でＳＴＣクロック生成が開始された後、デコーダ５１から要求された基準ＳＴＣ値に対応するピクチャの次のピクチャの垂直同期信号のタイミングでの初期ＳＴＣ値を読み出す。また、ＳＴＣ読出部２４７は、送信部２４９及びＬＡＮ２００を介して、読み出した初期ＳＴＣ値をデコーダ５１に通知する。
受信部２０１は、エンコーダからのＴＳストリームを受信するとともに、デコーダ５１から、次の垂直同期信号の設定ＳＴＣ値を受信し、ＳＴＣ設定部２４５に通知する。ＳＴＣ設定部２４５は、受信した設定ＳＴＣ値をＳＴＣクロック生成部２４１に通知することにより、自身のＳＴＣ値を、デコーダ５１から通知された設定ＳＴＣ値に設定する。このように設定されたＳＴＣ値、垂直同期信号に基づき、デコーダ５３〜５７は、映像信号２３５を出力し、表示装置１１に分割映像４４〜４８を表示させる。
なお、図７、図８にそれぞれ示したデコーダ５１〜５７が備える機能に対応する各構成要素は、それぞれ別個に形成される回路でもよい。あるいはこれらの構成要素の一部若しくは全部を実現するための集積された集積回路としてデコーダ５１〜５７の各々が実装されてもよい。更に、これらの各構成要素は、デコーダ５１〜５７の各々が有する演算処理装置上で実行されるプログラムにより実現される、機能モジュールであってもよい。
続いて、上記符号化装置３により生成されるストリームの概念を、図１０、図１１を参照しながら説明する。図１０は、上記のようなエンコーダ３１〜３７によるＴＳストリーム３５０、３６０、３７０、３８０（まとめてＴＳストリーム３５０〜３８０という）およびＳＴＣデータ３５５、３５９、・・・（以下、まとめてＳＴＣデータ３５１ともいう）を概念的に示す図である。図１０に示すように、エンコーダ３１〜３７は、カメラ９から取得した分割映像の映像信号を符号化し、ＴＳストリーム３５０〜３８０を生成する。例えばＴＳストリーム３５０は、符号化ピクチャ３５２、符号化ピクチャ３５６などを有している。例えばＴＳストリーム３６０は、符号化ピクチャ３６２、符号化ピクチャ３６６などを有している。
このとき、例えば、符号化ピクチャ３５２は、符号化ピクチャ３６２と同一の元映像２０を分割した分割映像２２、２４を符号化したものであるが、添付されているＰＴＳ３５３、ＰＴＳ３６３は、それぞれＰＴＳ（１、１）、ＰＴＳ（２、１）、ＰＴＳ（３、１）、ＰＴＳ（４、１）と異なる値となっている。
ＳＴＣデータ３５５は、符号化ピクチャ３５２に加えて、エンコーダ３１から出力される。ＳＴＣデータ３５５は、例えば元映像２０を分割した分割映像２２〜２８の垂直同期信号に対応する基準ＳＴＣ値として、ＳＴＣ（１、１）、ＳＴＣ（２、１）、ＳＴＣ（３、１）、ＳＴＣ（４、１）を有している。なお、ＰＴＳ（１、１）、ＰＴＳ（２、１）、ＰＴＳ（３、１）、ＰＴＳ（４、１）は、例えば、互いに、ＳＴＣ（１、１）、ＳＴＣ（２、１）、ＳＴＣ（３、１）、ＳＴＣ（４、１）と同じ差分を有する値となっている。
ＩＰネットワーク７を介してＴＳストリーム３５０〜３８０が送信されると、送信による遅延時間が一定でないため、デコーダ５１〜５７への到着時刻はそれぞれ異なる。このため、ＳＴＣデータに含まれる基準ＳＴＣ値、および、デコーダ５１〜５７の初期ＳＴＣ値に基づき、設定ＳＴＣ値を調整する。
図１１は、デコーダ５１〜５７におけるＴＳストリーム３５０〜３８０、およびＳＴＣデータ３５１を概念的に示す図である。図１２に示すように、デコーダ５１〜５７は、エンコーダ３１〜３７から、ＴＳストリーム３５０〜３８０、およびＳＴＣデータ３５１を受信する。デコーダ５１は、デコーダ５３〜５７に、分配器５９を介してＧＥＮＬＯＣＫ信号２３１を供給する。
このとき、例えば、符号化ピクチャ３５２は、符号化ピクチャ３６２と同一の元映像２０を分割した分割映像２２、２４を符号化したものであるが、添付されているＰＴＳ３５３、ＰＴＳ３６３は、それぞれＰＴＳ（１、１）、ＰＴＳ（２、１）、ＰＴＳ（３、１）、ＰＴＳ（４、１）と異なる値となっている。
ＳＴＣデータ３５５は、符号化ピクチャ３５２に加えて、エンコーダ３１から出力される。ＳＴＣデータ３５５は、例えば元映像２０を分割した分割映像２２〜２８の垂直同期信号に対応する基準ＳＴＣ値として、ＳＴＣ（１、１）、ＳＴＣ（２、１）、ＳＴＣ（３、１）、ＳＴＣ（４、１）を有している。ＳＴＣデータ３５５として、例えば、ＳＴＣ（１、１）＝０、ＳＴＣ（２、１）＝１０、ＳＴＣ（３、１）＝２０、ＳＴＣ（４、１）＝５が通知されているとする。なお、ＰＴＳ（１、１）、ＰＴＳ（２、１）、ＰＴＳ（３、１）、ＰＴＳ（４、１）は、例えば、互いに、ＳＴＣ（１、１）、ＳＴＣ（２、１）、ＳＴＣ（３、１）、ＳＴＣ（４、１）と同じ差分を有する値となっている。
矢印３９３は、デコーダ５１が、ＳＴＣデータに含まれる基準ＳＴＣ値に対応する初期ＳＴＣ値を、デコーダ５３〜５７に要求することを示している。矢印３９５は、デコーダ５３〜５７が、次の垂直同期信号のタイミングのＳＴＣ値を算出して、デコーダ５１に通知することを示している。例えば、図示のように、初期ＳＴＣ値は、デコーダ５１〜５７の順に、「１０」、「２５」、「２７」、「２３」であるとする。なお、初期ＳＴＣ値に添えて、括弧内にＳＴＣデータ３５５における基準ＳＴＣ値の一例を示している。
矢印３９７は、デコーダ５１が、基準ＳＴＣ値および初期ＳＴＣ値に基づき算出した設定ＳＴＣ値を、デコーダ５３〜５７に通知することを示している。図１０の例では、基準ＳＴＣ値を考慮した初期ＳＴＣ値の最大値はデコーダ５７における「２３」となる。よって、デコーダ５１〜５７の設定ＳＴＣ値は、「１８」、「２８」、「３８」、「２３」となる。
以上のように構成された符号化装置３、復号化装置５の動作を、フローチャートを参照しながら説明する。まず、図１２、図１３を参照しながら、本実施の形態による符号化装置３の動作について説明する。図１２は、エンコーダ３１の動作を示すフローチャート、図１３は、エンコーダ３３〜３７の動作を示すフローチャートである。
図１２に示すように、エンコーダ３１は、カメラ９から取得した映像信号において、まず、垂直同期信号のタイミングを検出し（Ｓ４０１）、検出時のＳＴＣ値を取得する（Ｓ４０２）。エンコーダ３１は、エンコーダ３３〜３７で取得された垂直同期信号のタイミングでのＳＴＣ値を受信する（Ｓ４０３）。エンコーダ３１は、取得したそれぞれのＳＴＣ値をＳＴＣデータ３５１として、デコーダ５１に通知する（Ｓ４０４）。また、エンコーダ３１は、映像信号の符号化を行い、例えばＴＳストリーム３５０およびＳＴＣデータ３５１を出力するとともに、Ｓ４０１に戻って処理を繰り返す。
図１３に示すように、エンコーダ３３〜３７は、垂直同期信号のタイミングを検出し（Ｓ４１１）、エンコーダ３１に通知し（Ｓ４１２）、映像信号の符号化を行い、例えばＴＳストリーム３６０〜３８０を出力するとともに、Ｓ４１１に戻って処理を繰り返す。
次に、デコーダ５１〜５７の再生開始動作について説明する。図１４、図１５は、デコーダ５１の再生開始動作を示すフローチャート、図１６、図１７は、デコーダ５３〜５７の再生開始動作を示すフローチャートである。
図１４に示すように、デコーダ５１の受信部２０１は、例えばＴＳストリーム３５０の受信を開始する（Ｓ５０１）。受信バッファ部２０３が一時的に保持したＴＳストリーム３５０から、映像／音声分離部２０５は、映像／音声／ＰＣＲを分離する。ＰＣＲクロック取得部２１５は、映像／音声分離部２０５からＰＣＲを取得し、ＳＴＣクロック生成部２１７に出力する。ＳＴＣクロック生成部２１７は、ＰＣＲに同期したＳＴＣクロックを生成する（Ｓ５０２）。
デコーダ５１は、エンコーダ３１からＳＴＣデータを取得するまで判別を繰り返す（Ｓ５０３：ＮＯ）。デコーダ５１は、ＳＴＣデータを取得すると（Ｓ５０３：ＹＥＳ）、デコーダ５３〜５７が同様に、ＰＣＲに同期したＳＴＣクロックの生成を完了するのを待つ（Ｓ５０４）。
デコーダ５１のＳＴＣ読出部２２５は、自身の次の垂直同期信号のＳＴＣ値（初期ＳＴＣ値）を取得するとともに、送信部２２７を介してデコーダ５３〜５７に、それぞれの初期ＳＴＣ値を要求する（Ｓ５０５）。デコーダ５１は、次の垂直同期信号が取得されるまでに、デコーダ５３〜５７の次の垂直同期信号のＳＴＣ値である初期ＳＴＣ値が、受信部２０１において受信されたか否かを判別する（Ｓ５０６）。初期ＳＴＣ値が受信されていない場合には（Ｓ５０６：ＮＯ）、デコーダ５１は、初期ＳＴＣ値が受信できていないデコーダ５３〜５７に、初期ＳＴＣ値を再度要求する（Ｓ５０７）。デコーダ５１は、次の垂直同期信号が取得されるまでに、再度要求したデコーダ５３〜５７からの初期ＳＴＣ値が、受信部２０１において受信されたか否かを判別する（Ｓ５０８）。
再度要求した初期ＳＴＣ値が受信されない場合には（Ｓ５０８：ＮＯ）、デコーダ５１は、Ｓ５０６に戻って処理を繰り返す。再度要求した初期ＳＴＣ値が受信されると（Ｓ５０８：ＹＥＳ）、図１５の処理に進む。
図１５に示すように、デコーダ５１は、ＳＴＣ計算部２２１において、各デコーダ５１〜５７の初期ＳＴＣ値と、基準ＳＴＣ値との差分が最大の初期ＳＴＣ値を、最大ＳＴＣ値とする（Ｓ５１１）。
デコーダ５１は、計算された最大ＳＴＣ値を、ＳＴＣ設定部２２３を介して、対応するデコーダの次の垂直同期信号のＳＴＣ値として設定する（Ｓ５１２）。デコーダ５１は、最大ＳＴＣ値に、最大ＳＴＣ値に対応する基準ＳＴＣ値をその他の基準ＳＴＣ値から減じた値を、最大ＳＴＣ値に加算して、その他のデコーダの設定ＳＴＣ値を算出する。デコーダ５１は、送信部２２７を介してデコーダ５３〜５７に、設定ＳＴＣ値を通知してＳＴＣ値を変更させる。また、デコーダ５１は、クロック選択部２３９がＳＴＣクロック生成部２４１とＧＥＮＬＯＣＫクロック生成部２３７とを接続させることを要求する（Ｓ５１３）。これによりデコーダ５３〜５７は、ＧＥＮＬＯＣＫ信号２３１に基づく動作となり、デコーダ５１〜５７の垂直同期信号、およびＳＴＣクロックの同期をとることができる。
デコーダ５１は、次の垂直同期信号のＳＴＣ値の時刻までに、デコーダ５３〜５７において設定ＳＴＣ値の設定が完了したか否か判別する（Ｓ５１４）。完了していない場合には（Ｓ５１４：ＮＯ）、デコーダ５１は、送信部２２７を介して、設定完了していないデコーダ５３〜５７に、次の垂直同期信号のＳＴＣ値の設定を要求する。また、デコーダ５１は、設定完了していないデコーダ５３〜５７に、クロック選択部２３９がＳＴＣクロック生成部２４１とＧＥＮＬＯＣＫクロック生成部２３７とを接続させることを要求する（Ｓ５１５）。デコーダ５１は、全てのデコーダ５３〜５７が、ＳＴＣ値の設定及びクロック選択部２３９の切替を完了したか否か判別し（Ｓ５１６）、完了していない場合には（Ｓ５１６：ＮＯ）、Ｓ５１５の要求を繰り返す。完了した場合には、デコーダ５１は、デコーダ５３〜５７に、分割映像４４〜４８の表示開始を要求する（Ｓ５１７）。また、デコーダ５１は、映像復号化部２０７で復号化した映像、及び音声復号化部２０９で復号化した音声を、それぞれ映像表示部２１１、音声表示部２１３を介して映像信号２３５として出力し、表示装置１１に分割映像４２の表示を開始させる（Ｓ５１８）。
図１６に示すように、デコーダ５３〜５７の受信部２０１は、それぞれ例えばＴＳストリーム３６０〜３８０の受信を開始する（Ｓ５２１）。受信バッファ部２０３が一時的に保持したＴＳストリーム３６０〜３８０から、映像／音声分離部２０５が、映像／音声／ＰＣＲを分離する。ＰＣＲクロック取得部２１５は、映像／音声分離部２０５からＰＣＲを取得する。このとき、クロック選択部２３９は、ＰＣＲクロック取得部２１５とＳＴＣクロック生成部２４１とを接続させている状態であるため、ＳＴＣクロック生成部２１７は、ＰＣＲに同期したＳＴＣクロックを生成する（Ｓ５２２）。
デコーダ５３〜５７は、デコーダ５１が、デコーダ５１の送信部２２７及びデコーダ５３〜５７の受信部２０１を介して、次の垂直同期信号のＳＴＣ値（初期ＳＴＣ値）を要求するまで待機する。デコーダ５３〜５７は、初期ＳＴＣ値の要求が受信されない場合には（Ｓ５２３：ＮＯ）、Ｓ５２３の処理を繰り返す。
初期ＳＴＣ値の要求が受信された場合には（Ｓ５２３：ＹＥＳ）、デコーダ５３〜５７は、ＳＴＣ読出部２４７が読み出した初期ＳＴＣ値をデコーダ５１に返信する（Ｓ５２４）。
デコーダ５３〜５７は、デコーダ５１が、デコーダ５１の送信部２２７及びデコーダ５３〜５７の受信部２０１を介して、設定ＳＴＣ値と、ＧＥＮＬＯＣＫ信号２３１に基づく動作の指示を受信するまで待機する（Ｓ５２５：ＮＯ）。デコーダ５３〜５７は、設定ＳＴＣ値と、ＧＥＮＬＯＣＫ信号２３１に基づく動作の指示を受信すると（Ｓ５２５：ＹＥＳ）、図１７の処理に進む。
図１７に示すように、クロック選択部２３９は、ＧＥＮＬＯＣＫクロック生成部２３７とＳＴＣクロック生成部２４１とを接続させる。また、ＳＴＣクロック生成部２４１は、垂直同期信号生成部２４３に通知された次の垂直同期信号のＳＴＣ値を設定し、送信部２４９を介して、変更完了をデコーダ５１に通知する（Ｓ５３１）。
デコーダ５３〜５７は、デコーダ５１から、分割映像４４〜４８の表示開始の指示を受信するまで待機する（Ｓ５３２）。指示を受信するまで判別を繰り返し（Ｓ５３３：ＮＯ）、指示を受信すると（Ｓ５３３：ＹＥＳ）、デコーダ５３〜５７は、映像復号化部２０７で復号化した映像情報、及び音声復号化部２０９で復号化した音声情報を、それぞれの映像表示部２１１、音声表示部２１３を介して映像信号２３５として出力する。これにより、表示装置１１に分割映像４４〜４８を表示させる（Ｓ５３４）。
以上説明したように、第１の実施の形態による映像伝送システム１によれば、エンコーダ３１がＳＴＣデータをデコーダ５１に送信する。これにより、デコーダ５１は、エンコーダ３１〜３７の基準ＳＴＣ値を取得する。また、デコーダ５１は、デコーダ５３〜５７から、それぞれの初期ＳＴＣ値を取得する。デコーダ５１は、取得した初期ＳＴＣ値と基準ＳＴＣ値との差の最大値に対応する初期ＳＴＣ値を、対応するデコーダの設定ＳＴＣ値とする。また、デコーダ５１は、上記最大値に対応する設定ＳＴＣ値に、上記最大値に対応する初期ＳＴＣ値から、各デコーダ５３〜５７の初期ＳＴＣ値を減じた値を加算し、各デコーダ５３〜５７の設定ＳＴＣ値とする。
以上のように、デコーダ５１は、エンコーダ３１〜３７の同一の垂直同期信号でのＳＴＣ値の差分、およびＩＰネットワークによる遅延を考慮して、デコーダ５１〜５７において同一のタイミングとなる設定ＳＴＣ値を算出することができる。すなわち、複数のピクチャの初期ＳＴＣ値に応じた実時間が他のピクチャの初期ＳＴＣ値に応じた実時間よりも遅い初期ＳＴＣ値に基づき複数の分割映像を再生する。このとき、ＳＴＣデータにより、元映像の一画面分を分割した分割映像を識別することができる。よって、映像伝送システム１によれば、ＩＰネットワークを介して、元映像の一画面分を分割して伝送し、復号して再生することが可能である。
このとき、符号化装置３側では、符号化ピクチャ３５２に付加するＰＴＳ３５３を各エンコーダ３１〜３７で合わせる必要がない。よって、基準ＳＴＣ値を、エンコーダ３３〜３７がエンコーダ３１に通知する一方向の通信を行えばよく、ＰＴＳ３５３を合わせるためのエンコーダ３１〜３７同士の双方向の通信は必要ない。
（第２の実施の形態）
以下、図面を参照しながら、第２の実施の形態による映像伝送システム６００について説明する。第１の実施の形態による映像伝送システム１と同様の構成および動作については、同一符号を付し、詳細説明を省略する。
図１８は、第２の実施の形態による映像伝送システム６００の構成を示す図である。第２の実施の形態による映像伝送システム６００は、カメラ９が接続された符号化装置６０３と、表示装置１１が接続された復号化装置６０５とが、ＩＰネットワーク７を介して接続されたシステムである。
映像伝送システム６００は、映像伝送システム１と同様、元映像の一画面分を分割して符号化し、リアルタイムでＩＰネットワーク７を用いて伝送し、復号化装置で同期を合わせて再生するシステムである。
本実施の形態による符号化装置６０３は、タイムコードインサータ６０２、４つのエンコーダ６３１〜６３７および、ＨＵＢ３９を有している。エンコーダ６３１〜６３７は、エンコーダ３１〜３７と同様、元映像２０を４分割した分割映像２２〜２８に含まれる複数のピクチャをそれぞれ符号化してストリームとして出力する符号化装置である。本実施の形態においては、エンコーダ６３１〜６３７は、互いに同様の構成を有する。
タイムコードインサータ６０２は、映像信号にタイムコードを入れる装置である。例えば、ＨＤ−ＳＤＩ規格では、ＨＤ−ＳＤＩ方式の映像信号の補助データとして、タイムコード（Ｖｅｒｔｉｃａｌ Ｉｎｔｅｒｖａｌ Ｔｉｍｅ Ｃｏｄｅ：ＶＩＴＣ）を伝送することが可能である。本実施の形態においては、カメラ９にＶＩＴＣの出力機能があればそれが用いられ、無い場合は、図１８に示すように、エンコーダ６３１〜６３７のＨＤ−ＳＤＩ入力の前段にタイムコードインサータを入れる。タイムコードインサータ６０２は、例えば、元映像２０のブラックバースト信号等所定の信号に同期した時刻を取得して出力する。
本実施の形態による復号化装置６０５は、４つのデコーダ６５１〜６５７、分配器５９、およびＨＵＢ６１を有している。図１８に示すように、復号化装置６０５は、符号化装置６０３により符号化されて、ＩＰネットワーク７を介して伝送された情報を復号化し、分割映像４２〜４８を表示することにより再生映像４０を再生するための復号化装置である。デコーダ６５３〜６５７は、互いに同様の構成である。
なお、第２の実施の形態によるエンコーダ６３１〜６３７、デコーダ６５１〜６５７のハードウエア構成はそれぞれ、例えば、第１の実施の形態によるエンコーダ３１〜３７、デコーダ５１〜５７と同様の構成とすることができる。
図１９は、エンコーダ６３１〜６３７の機能を示すブロック図である。図１９に示すように、エンコーダ６３１〜６３７は、エンコーダ３１と同様に、映像取込部１０１、映像符号化部１０３、音声取込部１０５、音声符号化部１０７、映像／音声多重部１０９の機能を有している。さらに、エンコーダ６３１〜６３７は、垂直同期信号取込部１１１、ＳＴＣクロック生成部１１５、ＰＣＲクロック生成部１１７、送信部１１９、ＳＴＣデータ生成部１２３、受信部１２５の機能を有している。さらに、エンコーダ６３１〜６３７は、タイムコード取込部６１３を有している。
タイムコード取込部６１３は、カメラ９により出力されたＨＤ−ＳＤＩ方式の映像信号から所定の信号に応じたタイミングの時刻を読み取り、映像／音声多重部１０９に出力する。読み取られた時刻は、ＰＴＳ値とともにタイムコードとして、符号化ピクチャ３５２等と多重化して伝送される。タイムコードについては後述する。本実施の形態においては、エンコーダ６３１〜６３７は、相互に通信は行わない。
以上のようにエンコーダ６３１〜６３７を構成することにより、ＩＰネットワーク７を介して送信される元映像２０に基づくストリームは、例えば、分割映像２２〜２８をそれぞれ符号化した、４つの別々のストリームとなる。このように、エンコーダ６３１〜６３７は、符号化された映像、音声、および生成されたＰＣＲの多重化を行い、タイムコードおよび符号化ピクチャが時系列に含まれたＴＳストリームをそれぞれ出力する。
次に、図２０、図２１を参照しながら、本実施の形態によるデコーダ６５１〜６５７の機能について説明する。図２０は、デコーダ６５１の機能を示すブロック図、図２１は、デコーダ６５３〜６５７の機能を示すブロック図である。上記のように、本実施の形態において、エンコーダ６３１〜６３７の４台のエンコーダのＴＳストリームは別々のＴＳストリームで送信されるため、デコーダには個々のＴＳストリームが異なる時刻で到着する。よって、復号化装置６０５が、同期を行わずに単純にデコーダ６５１〜６５７で受信したＴＳストリームを再生した場合、分割画面毎に異なる映像を再生することになる。そこで、デコーダ６５１〜６５７は、例えば以下のような構成とする。
図２０に示すように、デコーダ６５１は、受信部２０１、受信バッファ部２０３、映像／音声分離部２０５、映像復号化部２０７、音声復号化部２０９、映像表示部２１１、音声表示部２１３の機能を有している。また、デコーダ６５１は、ＰＣＲクロック取得部２１５、ＳＴＣクロック生成部２１７、垂直同期信号生成部２１９、ＳＴＣ計算部２２１、ＳＴＣ設定部２２３、ＳＴＣ読出部２２５、送信部２２７の機能を有している。
デコーダ６５１は、さらに、タイムコード取得部６８３を有している。タイムコード取得部６８３は、映像／音声分離部２０５の出力側に設けられ、映像部分の情報からタイムコードを取り出す。また、タイムコード取得部６８３は、取得したタイムコードに含まれるタイムコードデータと同一のタイムコードデータに対応するＰＴＳ値、および対応するピクチャの次のピクチャに対応するＳＴＣ値の送信を、デコーダ６５３〜６５７に要求する。
第１の実施の形態においては、デコーダ５１は、ＳＴＣデータに基づき基準ＳＴＣ値を算出したが、第２の実施の形態においては、デコーダ６５１は、タイムコードに含まれるＰＴＳ値を用いて基準ＳＴＣ値を算出する。算出する基準ＳＴＣ値は、ＰＴＳ値そのものでもよいし、一画面分の撮像画像を分割して得られる分割映像に対応する値のうちの一つを参照値とする相対的な値でもよい。
デコーダ６５１では、受信部２０１は、タイムコード６４０等に含まれる、同一のタイムコードに対応する各デコーダ６５３〜６５７のＰＴＳ値を受信する。また、受信部２０１は、タイムコードデータに対応するピクチャの次のピクチャの各デコーダ６５３〜６５７における初期ＳＴＣ値を受信する。
ＳＴＣ読出部２２５は、タイムコードデータに対応するピクチャの次のピクチャに対応する初期ＳＴＣ値を読み出す。ＳＴＣ計算部２２１は、タイムコード取得部６８３で取得した自身のタイムコードに含まれるＰＴＳ値を基準ＳＴＣ値に設定する。また、ＳＴＣ計算部２２１は、各デコーダ６５１〜６５７の基準ＳＴＣ値と、次のピクチャに対応する初期ＳＴＣ値との差である、最大値ＳＴＣ値を抽出する。
ＳＴＣ計算部２２１は、求めた最大ＳＴＣ値を、対応するデコーダにおける次のピクチャの垂直同期信号のタイミングの設定ＳＴＣ値とする。また、ＳＴＣ計算部２２１は、求めた最大ＳＴＣ値に対応する基準ＳＴＣ値をその他の基準ＳＴＣ値から減じた値を、最大ＳＴＣ値に加算し、その他のデコーダに設定する設定ＳＴＣ値を算出する。
ＳＴＣ計算部２２１は、算出したデコーダ６５１に対応する設定ＳＴＣ値をＳＴＣ設定部２２３に出力する。また、ＳＴＣ計算部２２１は、算出したデコーダ６５３〜６５７に対応する設定ＳＴＣ値を、送信部２２７を介してデコーダ６５３〜６５７にそれぞれ通知する。ＳＴＣ設定部２２３は、計算されたＳＴＣ値をＳＴＣクロック生成部２１７に通知する。これにより、映像情報及び音声情報は、垂直同期信号生成部２１９が出力する垂直同期信号に応じて映像信号２３５として出力され、表示装置１１に分割映像４２を表示させる。
以下、図２１を参照しながら、デコーダ６５３〜６５７の機能について説明する。図２１に示すように、デコーダ６５３〜６５７は、デコーダ６５１と同様に、受信部２０１、受信バッファ部２０３、映像／音声分離部２０５、映像復号化部２０７、音声復号化部２０９、映像表示部２１１、音声表示部２１３を有している。また、デコーダ６５３〜６５７は、ＰＣＲクロック取得部２１５、ＧＥＮＬＯＣＫクロック生成部２３７、クロック選択部２３９、ＳＴＣクロック生成部２４１、垂直同期信号生成部２４３、ＳＴＣ設定部２４５、ＳＴＣ読出部２４７、送信部２４９を有している。
さらに、デコーダ６５３〜６５７は、タイムコード取得部６８３を有している。タイムコード取得部６８３は、映像／音声分離部２０５の出力側に設けられ、映像情報からタイムコードを取り出す。また、タイムコード取得部６８３は、デコーダ６５１に要求されたタイムコードを含む分割映像２４〜２８に対応するＰＴＳ値、およびＳＴＣ読出部２２５が読み出した次のピクチャのＳＴＣ値を、送信部２４９を介してデコーダ６５１に送信する。
このように構成されたデコーダ６５３〜６５７は、デコーダ６５１に設定されたＳＴＣ値、垂直同期信号に基づき、映像信号２３５を出力し、表示装置１１に分割映像４４〜４８を表示させる。
図２２は、第２の実施の形態によるピクチャ送信を概念的に示す図である。図２２は、上記のようなエンコーダ６３１〜６３７によるＴＳストリーム３５０、３６０、３７０、３８０（まとめてＴＳストリーム３５０〜３８０という）を概念的に示している。また、図２２は、タイムコードデータ６４０、６６０、６６２、６６４（以下、まとめてタイムコードデータ６４０等ともいう）を概念的に示している。
図２２に示すように、エンコーダ６３１〜６３７は、カメラ９から取得した分割映像の映像信号を符号化し、ＴＳストリーム３５０〜３８０を生成する。このとき、例えばタイムコードデータ６４６は、ＰＴＳ６４２、およびタイムコード６４４を有している。ＰＴＳ値６４２は、対応する符号化ピクチャのＰＴＳ値と同一の情報である。タイムコード６４４は、例えばカメラ９から出力された映像信号のＢｌａｃｋ Ｂｕｒｓｔ信号に応じた時刻を示す情報とすることができる。なお、タイムコード６４４は、同一画面の符号化ピクチャ同士では同一の値となっている。
ＩＰネットワーク７を介してＴＳストリーム３５０〜３８０が送信されると、送信による遅延時間が一定でないため、デコーダ６５１〜６５７への到着時刻はそれぞれ異なる。このため、タイムコード６４４に基づき、同一の元映像２０を分割した分割映像２２〜２８を識別し、識別された符号化ピクチャ３５２に対応するＰＴＳ値６４２に基づき基準ＳＴＣ値を算出する。本実施の形態においては、ＰＴＳ値を、基準ＳＴＣ値とすることができる。初期ＳＴＣ値を取得し、設定ＳＴＣ値を調整する処理は、第１の実施の形態と同様である。
以上のように構成された映像伝送システム６００の動作を、フローチャートを参照しながら説明する。図２３は、エンコーダ６３１〜６３７の動作を示すフローチャートである。本実施の形態においては、エンコーダ３１〜３７は同一の構成および動作を有する。本実施の形態においては、符号化装置６０３は、第１の実施の形態におけるＳＴＣデータに代えて、タイムコードデータ６４０等を生成し、復号化装置６０５に送信する。それ以外の第２の実施の形態によるエンコーダ６３１〜６３７の動作は、第１の実施の形態によるエンコーダ３１と同様の動作である。
図２３に示すように、エンコーダ６３１〜６３７は、タイムコード取込部６１３で、タイムコードデータ６４０等より、ＰＴＳ値６４２、タイムコード６４４等を取得する（Ｓ６９１）。映像取込部１０１は、垂直同期信号のタイミングでＰＴＳ値を取得する（Ｓ６９２）。映像／音声多重部１０９は、タイムコードデータ６４０と、ＰＴＳ値を含むＴＳストリーム３５０を出力する（Ｓ６９３）。
次に、図２４〜図２７を参照しながら、本実施の形態による復号化装置６０５の動作について説明する。図２４、図２５は、デコーダ６５１の動作を示すフローチャート、図２６、図２７は、デコーダ６５３〜６５７の動作を示すフローチャートである。
図２４に示すように、デコーダ６５１の受信部２０１は、例えばＴＳストリーム３５０の受信を開始する（Ｓ７０１）。受信バッファ部２０３が一時的に保持したＴＳストリーム３５０から、映像／音声分離部２０５は、映像／音声／ＰＣＲを分離する。ＰＣＲクロック取得部２１５は、映像／音声分離部２０５からＰＣＲを取得し、ＳＴＣクロック生成部２１７に出力する。ＳＴＣクロック生成部２１７は、ＰＣＲに同期したＳＴＣクロックを生成する（Ｓ７０２）。
デコーダ６５１は、自身のタイムコードデータ６４０等を取得するとともに、デコーダ６５３〜６５７に、タイムコードデータ６４０等を要求する（Ｓ７０３）。デコーダ６５１は、デコーダ６５３〜６５７からタイムコードデータ６４０等を取得したか否か判別する（Ｓ７０４）。取得していない場合には（Ｓ７０４：ＮＯ）、デコーダ６５１は、処理を７０３に戻す。デコーダ６５１はタイムコードデータ６４０等を取得すると（Ｓ７０４：ＹＥＳ）、デコーダ６５３〜６５７が同様に、ＰＣＲに同期したＳＴＣクロックの生成を完了するのを待つ（Ｓ７０５）。
デコーダ６５１は、自身の次の垂直同期信号のＳＴＣ値（初期ＳＴＣ値）を取得するとともに、送信部２２７を介してデコーダ６５３〜６５７に、次の垂直同期信号のＳＴＣ値を要求する（Ｓ７０６）。デコーダ６５１は、次の垂直同期信号が取得されるまでに、デコーダ６５３〜６５７の次の垂直同期信号のＳＴＣ値である初期ＳＴＣ値が、受信部２０１において受信されたか否かを判別する（Ｓ７０７）。初期ＳＴＣ値が受信されていない場合には（Ｓ７０７：ＮＯ）、デコーダ６５１は、初期ＳＴＣ値が受信できていないデコーダ６５３〜６５７に、初期ＳＴＣ値を再度要求する（Ｓ７０８）。デコーダ６５１は、次の垂直同期信号が取得されるまでに、再度要求したデコーダ６５３〜６５７からの初期ＳＴＣ値が、受信部２０１において受信されたか否かを判別する（Ｓ７０９）。
再度要求した初期ＳＴＣ値が受信されない場合には（Ｓ７０９：ＮＯ）、デコーダ６５１は、Ｓ７０８に戻って処理を繰り返す。再度要求した初期ＳＴＣ値が受信されると（Ｓ７０８：ＹＥＳ）、図２５の処理に進む。
図２５に示すように、デコーダ６５１は、ＳＴＣ計算部２２１において、各デコーダ６５１〜６５７の初期ＳＴＣ値と、基準ＳＴＣ値との差分が最大の初期ＳＴＣ値を、最大ＳＴＣ値とする（Ｓ７１１）。基準ＳＴＣ値としては、ＰＴＳ値同士の差分を用いることもできる。
デコーダ６５１は、計算された最大ＳＴＣ値を、ＳＴＣ設定部２２３を介して、対応するデコーダの次の垂直同期信号のＳＴＣ値として設定する（Ｓ７１２）。デコーダ６５１は、最大ＳＴＣ値に、最大ＳＴＣ値に対応する基準ＳＴＣ値をその他の基準ＳＴＣ値から減じた値を、最大ＳＴＣ値に加算して、その他のデコーダの設定ＳＴＣ値を算出する。デコーダ６５１は、送信部２２７を介してデコーダ６５３〜６５７に、それぞれの設定ＳＴＣ値を通知してＳＴＣ値を変更させる。また、デコーダ６５１は、クロック選択部２３９がＳＴＣクロック生成部２４１とＧＥＮＬＯＣＫクロック生成部２３７とを接続させることを要求する（Ｓ７１３）。これによりデコーダ６５３〜６５７は、ＧＥＮＬＯＣＫ信号２３１に基づく動作となり、デコーダ６５１〜６５７の垂直同期信号、およびＳＴＣクロックの同期をとることができる。
デコーダ６５１は、次の垂直同期信号のＳＴＣ値の時刻までに、デコーダ６５３〜６５７において設定ＳＴＣ値の設定が完了したか否か判別する（Ｓ７１４）。完了していない場合には（Ｓ７１４：ＮＯ）、デコーダ６５１は、送信部２２７を介して、設定完了していないデコーダ６５３〜６５７に、次の垂直同期信号のＳＴＣ値の設定を要求する。また、デコーダ６５１は、設定完了していないデコーダ６５３〜６５７に、クロック選択部２３９がＳＴＣクロック生成部２４１とＧＥＮＬＯＣＫクロック生成部２３７とを接続させることを要求する（Ｓ７１５）。デコーダ６５１は、全てのデコーダ６５３〜６５７が、ＳＴＣ値の設定及びクロック選択部２３９の切替を完了したか否か判別し（Ｓ７１６）、完了していない場合には（Ｓ７１６：ＮＯ）、Ｓ７１５の要求を繰り返す。完了した場合には、デコーダ６５１は、デコーダ６５３〜６５７に、分割映像４４〜４８の表示開始を要求する（Ｓ７１７）。また、デコーダ６５１は、映像復号化部２０７で復号化した映像、及び音声復号化部２０９で復号化した音声を、それぞれ映像表示部２１１、音声表示部２１３を介して映像信号２３５として出力し、表示装置１１に分割映像４２の表示を開始させる（Ｓ７１８）。
図２６に示すように、デコーダ６５３〜６５７の受信部２０１は、それぞれ例えばＴＳストリーム３６０〜３８０の受信を開始する（Ｓ７２１）。デコーダ６５３〜６５７は、デコーダ６５１から、タイムコードデータの要求を受信するまで判別を繰り返し（Ｓ７２２：ＮＯ）、要求を受信すると（Ｓ７２２：ＹＥＳ）、タイムコードデータを通知する（Ｓ７２３）。
受信バッファ部２０３が一時的に保持したＴＳストリーム３６０〜３８０から、映像／音声分離部２０５が、映像／音声／ＰＣＲを分離する。ＰＣＲクロック取得部２１５は、映像／音声分離部２０５からＰＣＲを取得する。このとき、クロック選択部２３９は、ＰＣＲクロック取得部２１５とＳＴＣクロック生成部２４１とを接続させている状態であるため、ＳＴＣクロック生成部２１７は、ＰＣＲに同期したＳＴＣクロックを生成する（Ｓ７２４）。
デコーダ６５３〜６５７は、デコーダ６５１が、デコーダ６５１の送信部２２７及びデコーダ６５３〜６５７の受信部２０１を介して、次の垂直同期信号のＳＴＣ値（初期ＳＴＣ値）を要求するまで待機する。デコーダ６５３〜６５７は、初期ＳＴＣ値の要求が受信されない場合には（Ｓ７２５：ＮＯ）、Ｓ７２５の処理を繰り返す。
初期ＳＴＣ値の要求が受信された場合には（Ｓ７２５：ＹＥＳ）、デコーダ６５３〜６５７は、ＳＴＣ読出部２４７が読み出して計算した、初期ＳＴＣ値をデコーダ６５１に返信する（Ｓ７２６）。
図２７に示すように、続いてデコーダ６５３〜６５７は、デコーダ６５１が、デコーダ６５１の送信部２２７及びデコーダ６５３〜６５７の受信部２０１を介して、設定ＳＴＣ値と、ＧＥＮＬＯＣＫ信号２３１に基づく動作の指示を受信するまで待機する（Ｓ７３１：ＮＯ）。デコーダ６５３〜６５７は、設定ＳＴＣ値と、ＧＥＮＬＯＣＫ信号２３１に基づく動作の指示を受信すると（Ｓ７３１：ＹＥＳ）、Ｓ７３２に処理を進める。クロック選択部２３９は、ＧＥＮＬＯＣＫクロック生成部２３７とＳＴＣクロック生成部２４１とを接続させる。また、ＳＴＣクロック生成部２４１は、垂直同期信号生成部２４３に通知された次の垂直同期信号のＳＴＣ値を設定し、送信部２４９を介して、変更完了をデコーダ６５１に通知する（Ｓ７３２）。
デコーダ６５３〜６５７は、デコーダ６５１から、分割映像４４〜４８の表示開始の指示を受信するまで待機する（Ｓ７３３）。指示を受信するまで判別を繰り返し（Ｓ７３４：ＮＯ）、指示を受信すると（Ｓ７３４：ＹＥＳ）、デコーダ６５３〜６５７は、映像復号化部２０７で復号化した映像情報、及び音声復号化部２０９で復号化した音声情報を、それぞれの映像表示部２１１、音声表示部２１３を介して映像信号２３５として出力する。これにより、表示装置１１に分割映像４４〜４８を表示させる（Ｓ７３５）。
以上説明したように、第２の実施の形態による映像伝送システム６００によれば、エンコーダ６３１〜６３７は、タイムコードデータ６４０等をデコーダ６５１〜６５７に送信する。このとき、どのデコーダ６５１〜６５７がどのエンコーダ６３１〜６３７からのストリームを受信するかは限定されない。デコーダ６５１は、他のデコーダ６５３〜６５７から、タイムコード６４４が同一のタイムコードデータのＰＴＳ値を取得し、エンコーダ６３１〜６３７の基準ＳＴＣ値を算出する。また、デコーダ６５１は、デコーダ６５３〜６５７から、それぞれの初期ＳＴＣ値を取得する。デコーダ６５１は、取得した初期ＳＴＣ値と基準ＳＴＣ値との差の最大値に対応する初期ＳＴＣ値を、対応するデコーダの設定ＳＴＣ値とする。また、デコーダ６５１は、上記最大値に対応する設定ＳＴＣ値に、上記最大値に対応する初期ＳＴＣ値から、各デコーダ６５３〜６５７の初期ＳＴＣ値を減じた値を加算し、各デコーダ６５３〜６５７の設定ＳＴＣ値とする。
以上のように、デコーダ６５１は、エンコーダ６３１〜６３７の同一の垂直同期信号でのＳＴＣ値の差分、およびＩＰネットワークによる遅延を考慮して、デコーダ６５１〜６５７において同一のタイミングとなる設定ＳＴＣ値を算出することができる。このとき、タイムコードデータ６４０により、元映像の一画面分を分割した複数のピクチャを識別することができる。よって、映像伝送システム６００によれば、ＩＰネットワークを介して、元映像の一画面分を分割して伝送し、復号して再生することが可能である。
このとき、符号化装置６０３側では、符号化ピクチャ３５２に付加するＰＴＳ３５３を各エンコーダ６３１〜６３７で合わせる必要がない。また、それぞれの符号化ピクチャにタイムコードデータ６４０等を付加するので、エンコーダ６３１〜６３７同士の通信は必要ない。よって、エンコーダ６３１〜６３７同士の通信により符号化装置６０３における情報処理量を増加させることがない。
上記第１および第２の実施の形態において、エンコーダ３１は、符号化部、または主符号化部の一例であり、エンコーダ３３〜３７は、符号化部、または従符号化部の一例である。デコーダ５１、６５１は、復号化部、または主復号化部の一例であり、デコーダ５３〜５７、６５３〜６５７は、復号化部、または従復号化部の一例である。
映像取込部１０１は、画像入力部の一例であり、ＳＴＣデータ生成部１２３は、時刻情報取得部の一例であり、映像／音声多重部１０９は、符号化部の一例である。ＳＴＣ読出部１１３は、時刻情報取得送信部の一例である。受信部２０１は、符号化情報取得部の一例であり、ＳＴＣ読出部２２５は、主再生時刻計算部の一例であり、ＳＴＣ計算部２２１は、再生時刻設定部の一例である。送信部２２７は、再生時刻通知部の一例であり、映像表示部２１１、音声表示部２１３は、再生部の一例である。
ＳＴＣ設定部２４５は、従再生時刻設定部の一例であり、ＳＴＣ読出部２４７は、従再生時刻計算部の一例であり、送信部２４９は、再生時刻通知部の一例である。タイムコード取得部６８３は、識別情報取得部の一例である。
なお、本発明は、以上に述べた実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の構成または実施形態を採ることができる。例えば、設定ＳＴＣ値の計算方法は、必ずしも上記に限定されない。第１の実施の形態においては、初期ＳＴＣ値と基準ＳＴＣ値との差の最大値を求めたが、例えば、基準ＳＴＣ値のいずれかを参照値として定め、参照値に対する差と、対応する初期ＳＴＣ値との差の最大値を求める等、同一の結果を得られる他の計算方法を用いてもよい。
エンコーダ３１〜３７、デコーダ５１〜５７、エンコーダ６３１〜６３７、デコーダ６５１〜６５７を、標準的な構成を備えるコンピュータで実現することも可能である。ここで、上記第１または第２の実施の形態による符号化または復号化の動作をコンピュータに行わせるために共通に適用されるコンピュータの例について説明する。
図２８は、標準的なコンピュータのハードウエア構成の一例を示すブロック図である。図２８に示すように、コンピュータ８００は、ＣＰＵ８０２、メモリ８０４、入力装置８０６、出力装置８０８、外部記憶装置８１２、媒体駆動装置８１４、ネットワーク接続装置等がバス８１０を介して接続されている。
ＣＰＵ８０２は、コンピュータ８００全体の動作を制御する演算処理装置である。メモリ８０４は、コンピュータ８００の動作を制御するプログラムを予め記憶したり、プログラムを実行する際に必要に応じて作業領域として使用したりするための記憶部である。メモリ８０４は、例えばＲａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ（ＲＡＭ）、Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ（ＲＯＭ）等である。入力装置８０６は、コンピュータの使用者により操作されると、その操作内容に対応付けられている使用者からの各種情報の入力を取得し、取得した入力情報をＣＰＵ８０２に送付する装置であり、例えばキーボード装置、マウス装置などである。出力装置８０８は、コンピュータ８００による処理結果を出力する装置であり、表示装置などが含まれる。例えば表示装置は、ＣＰＵ８０２により送付される表示データに応じてテキストや画像を表示する。
外部記憶装置８１２は、例えば、ハードディスクなどの記憶装置であり、ＣＰＵ８０２により実行される各種制御プログラムや、取得したデータ等を記憶しておく装置である。媒体駆動装置８１４は、可搬記録媒体８１６に書き込みおよび読み出しを行うための装置である。ＣＰＵ８０２は、可搬記録媒体８１６に記録されている所定の制御プログラムを、記録媒体駆動装置８１４を介して読み出して実行することによって、各種の制御処理を行うようにすることもできる。可搬記録媒体８１６は、例えばＣｏｍｐａｃｔ Ｄｉｓｃ（ＣＤ）−ＲＯＭ、Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ（ＤＶＤ）、Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ（ＵＳＢ）メモリ等である。ネットワーク接続装置８１８は、有線または無線により外部との間で行われる各種データの授受の管理を行うインタフェース装置である。バス８１０は、上記各装置等を互いに接続し、データのやり取りを行う通信経路である。
上記第１または第２の実施の形態による符号化または復号化をコンピュータに実行させるプログラムは、例えば外部記憶装置８１２に記憶させる。ＣＰＵ８０２は、外部記憶装置８１２からプログラムを読み出し、コンピュータ８００に符号化または復号化の動作を行なわせる。このとき、まず、符号化または復号化の処理をＣＰＵ８０２に行わせるための制御プログラムを作成して外部記憶装置８１２に記憶させておく。そして、入力装置８０６から所定の指示をＣＰＵ８０２に与えて、この制御プログラムを外部記憶装置８１２から読み出させて実行させるようにする。また、このプログラムは、可搬記録媒体８１６に記憶するようにしてもよい。
以上の実施形態に関し、さらに以下の付記を開示する。
（付記１）
撮像画像を分割して得られる複数の分割画像のそれぞれを符号化する複数の符号化部を有し、
前記複数の符号化部のそれぞれは、
前記複数の画像の中の一つの画像を符号化した符号化画像と、前記一つの画像と対応する時刻情報とを含む符号化情報を送信し、
前記複数の符号化部のいずれか少なくとも一つは、
前記撮像画像を分割して得られる複数の画像を互いに識別するための識別情報を前記符号化画像とともに送信する
ことを特徴とする符号化装置。
（付記２）
前記送信は、ＩＰネットワークを介して行なわれることを特徴とする付記１に記載の符号化装置。
（付記３）
前記複数の符号化部は、一つの主符号化部と少なくとも一つの従符号化部と、
を有し、
前記主符号化部は、
撮像画像を分割して得られる複数の画像のうちの一つの画像が時系列に入力される画像入力部と、
入力された前記一つの画像に対応する時刻情報を取得するとともに、前記従符号化部から前記複数の画像のうちの前記一つの画像以外の画像にそれぞれ対応する時刻情報を取得する時刻情報取得部と、
前記一つの画像を符号化した符号化画像と、前記撮像画像を分割して得られる複数の画像のそれぞれに対応する前記時刻情報を備えた識別情報とを含む符号化情報を生成する符号化部と、
前記符号化情報を時系列に送信する送信部と、
を有し、
前記従符号化部は、
前記撮像画像を分割して得られる複数の画像のうちの前記一つの画像以外の画像が時系列に入力される画像入力部と、
前記一つの画像以外の画像に対応する時刻情報を前記主符号化部に送信する時刻情報送信部と、
前記一つの画像以外の画像を符号化した符号化画像と前記一つの画像以外の画像に対応する前記時刻情報とを含む符号化情報を生成する符号化部と、
前記符号化情報を時系列に送信する送信部と、
を有することを特徴とする付記１または付記２に記載の符号化装置。
（付記４）
前記撮像画像を分割して得られる所定の信号が取得された時刻を取得する時刻取得部、
をさらに有し、
前記識別情報は、前記時刻取得部より取得される前記時刻を含むことを特徴とする付記１または付記２に記載の符号化装置。
（付記５）
撮像画像を分割して得られる複数の画像の中の互いに異なる一つの画像の符号化画像をそれぞれ復号化する複数の復号化部を有し、
複数の前記復号化部のそれぞれは、
前記一つの画像を符号化した符号化画像と、前記一つの画像のそれぞれと対応する時刻情報と、前記一つの画像を互いに識別するための識別情報とを含む符号化情報を時系列に受信し、
前記時刻情報に基づき前記一つの画像の次の画像を再生すると予定される再生予定時刻を算出し、
前記一つの画像の次の画像を再生する再生時刻に基づき、前記符号化画像が復号化された前記画像を再生し、
複数の前記復号化部のいずれか一つの復号化部は、
前記一つの復号化部以外の前記復号化部で受信された前記撮像画像を分割して得られる画像に対応する時刻情報と、算出された再生予定時刻を前記識別情報に基づき取得し
複数の前記画像の前記再生予定時刻に応じた実時間が他の画像の前記再生予定時刻に応じた実時間よりも遅い再生予定時刻に基づき複数の前記画像毎の前記再生時刻を算出し、
前記一つの復号化部以外の前記復号化部に複数の前記画像毎の前記再生時刻を出力する
ことを特徴とする復号化装置。
（付記６）
前記複数の復号化部は、主復号化部と少なくとも一つの従復号化部と、
を有し、
前記主復号化部は、
撮像画像を分割して得られる複数の画像のうちの一つの画像を符号化した符号化画像と、前記画像のそれぞれと対応する複数の時刻情報を備えた前記識別情報とを含む符号化情報を主符号化部から時系列に取得する符号化情報取得部と、
前記時刻情報に基づき前記一つの画像の次の画像を再生すると予定される主再生時刻を計算する主再生時刻計算部と、
前記少なくとも一つの従復号化部から前記撮像画像を分割して得られる複数の画像のうちの前記一つの画像以外の画像の次の画像を再生すると予定される従再生時刻を前記時刻情報に基づき識別して取得する従再生時刻取得部と、
前記主再生時刻または少なくとも一つの前記従再生時刻と、それぞれに対応する前記時刻情報との差の最大値、および前記最大値に対応する時刻情報と前記最大値に対応する時刻情報以外の前記それぞれに対応する前記時刻情報との差に基づき、取得された前記撮像画像を分割して得られる複数の画像の次の複数の画像を再生する複数の再生時刻をそれぞれ算出するとともに、算出された前記主復号化部自身の再生時刻を、次の前記画像を再生する再生時刻として設定する再生時刻設定部と、
算出した前記再生時刻を前記少なくとも一つの従復号化部のそれぞれに通知する再生時刻通知部と、
設定された前記再生時刻に基づき、前記符号化画像が復号化された前記画像を再生する再生部と、
を有し、
前記従復号化部は、
前記撮像画像を分割して得られる複数の画像のうち、前記主復号化部が復号化する画像以外の互いに異なる画像を符号化した符号化画像と、前記互いに異なる画像と対応する時刻情報と、を含む符号化情報を時系列に取得する符号化情報取得部と、
前記従復号化部において取得された、前記時刻情報に対応する前記画像の次の画像を再生すると予定される従再生時刻を計算する従再生時刻計算部と、
前記従再生時刻を前記主復号化部に通知する従再生時刻通知部と、
前記主復号化部から、前記次の画像の再生時刻を取得する再生時刻取得部と、
前記再生時刻に基づき、復号化された前記画像を再生する再生部と、
を有することを特徴とする付記５に記載の復号化装置。
（付記７）
前記複数の復号化部は、主復号化部と少なくとも一つの従復号化部と、
を有し、
前記主復号化部は、
撮像画像を分割して得られる複数の画像のうちの一つの画像を符号化した符号化画像と、前記一つの画像と対応する時刻情報と、前記撮像画像を分割して得られる所定の信号に基づき前記符号化の前に取得された時刻を備えた前記識別情報とを含む符号化情報を時系列に取得する符号化情報取得部と、
前記符号化情報から前記識別情報を取得する識別情報取得部と、
前記時刻情報に基づき前記一つの画像の次の画像を再生すると予定される主再生時刻を計算する主再生時刻計算部と、
前記識別情報に基づき、前記少なくとも一つの従復号化部から前記撮像画像を分割して得られる複数の画像のうちの前記一つの画像以外の互いに異なる画像の前記時刻情報と、前記互いに異なる画像の次の画像を再生する従再生時刻とを取得するとともに、前記主再生時刻または少なくとも一つの前記従再生時刻と、それぞれに対応する前記時刻情報との差の最大値、および前記最大値に対応する時刻情報と前記最大値に対応する時刻情報以外の前記それぞれに対応する前記時刻情報との差に基づき、取得された前記撮像画像を分割して得られる複数の画像の次の複数の画像を再生する複数の再生時刻をそれぞれ算出する再生時刻算出部と、
算出した前記主復号化部自身の再生時刻を、次の前記画像を再生する再生時刻として設定する再生時刻設定部と、
算出した前記再生時刻を前記少なくとも一つの従復号化部のそれぞれに通知する再生時刻通知部と、
設定された前記再生時刻に基づき、前記符号化画像が復号化された前記画像を再生する再生部と、
を有し、
前記従復号化部は、
前記撮像画像を分割して得られる複数の画像のうち、前記主復号化部が復号化する画像以外の互いに異なる画像のいずれかを符号化した符号化画像と、符号化された前記画像と対応する時刻情報と、前記撮影画像に含まれる所定の信号に基づき前記符号化の前に取得された前記時刻を備えた前記識別情報と、を含む符号化情報を時系列に取得する符号化情報取得部と、
前記符号化情報から前記識別情報を取得する識別情報取得部と、
前記従復号化部において取得された、前記時刻情報に対応する前記画像の次の画像を再生すると予定される従再生時刻を計算する従再生時刻計算部と、
前記従再生時刻および前記時刻情報を前記主復号化部に通知する従再生時刻通知部と、
前記主復号化部から、前記次の画像の再生時刻を取得して設定する再生時刻設定部と、
前記再生時刻に基づき、前記符号化画像が復号化された前記画像を再生する再生部と、
を有することを特徴とする付記５に記載の復号化装置。
（付記８）
撮像画像を分割して得られる複数の画像をそれぞれ符号化する符号化方法であって、
前記画像の中の互いに異なる一つの画像をそれぞれ符号化する複数の符号化部はそれぞれ、
前記複数の画像の中の一つの画像を符号化した符号化画像と、前記一つの画像と対応する時刻情報とを含む符号化情報を送信し、
複数の前記符号化部のいずれか少なくとも一つは、
前記撮像画像を分割して得られる複数の画像を互いに識別するための識別情報を前記符号化画像とともに送信する
ことを特徴とする符号化方法。
（付記９）
前記送信は、ＩＰネットワークを介して行なわれることを特徴とする付記８に記載の符号化方法。
（付記１０）
前記符号化は、一つの主符号化部と少なくとも一つの従符号化部とにより実行され、
前記主符号化部は、
撮像画像を分割して得られる複数の画像のうちの一つの画像が時系列に入力され、
入力された前記一つの画像に対応する時刻情報を取得するとともに、前記従符号化部から前記複数の画像のうちの前記一つの画像以外の画像にそれぞれ対応する時刻情報を取得し、
前記一つの画像を符号化した符号化画像と、前記撮像画像を分割して得られる複数の画像のそれぞれに対応する前記時刻情報を備えた識別情報とを含む符号化情報を生成して時系列に送信し、
前記従符号化部は、
前記撮像画像を分割して得られる複数の画像のうちの前記一つの画像以外の画像が時系列に入力されて、前記一つの画像以外の画像に対応する時刻情報を前記主符号化部に送信し、
前記一つの画像以外の画像を符号化した符号化画像と前記一つの画像以外の画像に対応する前記時刻情報とを含む符号化情報を生成する符号化部と、
前記符号化情報を時系列に送信することを特徴とする付記８または付記９に記載の符号化方法。
（付記１１）
さらに、前記撮像画像を分割して得られる所定の信号が取得された時刻を取得し、
前記識別情報は、前記時刻を含むことを特徴とする付記８または付記９に記載の符号化方法。
（付記１２）
撮像画像を分割して得られる複数の画像の中の互いに異なる一つの画像の符号化画像をそれぞれ復号化する復号化方法であって、
撮像画像を分割して得られる複数の画像の中の互いに異なる一つの画像の符号化画像をそれぞれ復号化する複数の復号化部のそれぞれは、
前記一つの画像を符号化した符号化画像と、前記一つの画像のそれぞれと対応する時刻情報と、前記一つの画像を互いに識別するための識別情報とを含む符号化情報を時系列に受信し、
前記時刻情報に基づき前記一つの画像の次の画像を再生すると予定される再生予定時刻を算出し、
前記一つの画像の次の画像を再生する再生時刻に基づき、前記符号化画像が復号化された前記画像を再生し、
複数の前記復号化部のいずれか一つは、
前記一つの復号化部以外の前記復号化部で受信された前記撮像画像を分割して得られる画像に対応する時刻情報と、算出された再生予定時刻を前記識別情報に基づき取得し
複数の前記画像の前記再生予定時刻に応じた実時間が他の画像の前記再生予定時刻に応じた実時間よりも遅い再生予定時刻に基づき複数の前記画像毎の前記再生時刻を算出し、
前記一つの復号化部以外の前記復号化部に複数の前記画像毎の前記再生時刻を出力する
ことを特徴とする復号化方法。
（付記１３）
前記複数の復号化方法は、主復号化部と少なくとも一つの従復号化部とにより実行され、
前記主復号化部は、
撮像画像を分割して得られる複数の画像のうちの一つの画像を符号化した符号化画像と、前記画像のそれぞれと対応する複数の時刻情報を備えた前記識別情報とを含む符号化情報を主符号化部から時系列に取得し、
前記時刻情報に基づき前記一つの画像の次の画像を再生すると予定される主再生時刻を計算し、
前記少なくとも一つの従復号化部から前記撮像画像を分割して得られる複数の画像のうちの前記一つの画像以外の画像の次の画像を再生すると予定される従再生時刻を前記時刻情報に基づき識別して取得し、
前記主再生時刻または少なくとも一つの前記従再生時刻と、それぞれに対応する前記時刻情報との差の最大値、および前記最大値に対応する時刻情報と前記最大値に対応する時刻情報以外の前記それぞれに対応する前記時刻情報との差に基づき、取得された前記撮像画像を分割して得られる複数の画像の次の複数の画像を再生する複数の再生時刻をそれぞれ算出し、
算出された前記主復号化部自身の再生時刻を、次の前記画像を再生する再生時刻として設定し、
算出した前記再生時刻を前記少なくとも一つの従復号化部のそれぞれに通知し、
設定された前記再生時刻及び前記時刻情報に基づき、前記符号化画像が復号化された前記画像を再生し、
前記従復号化部は、
前記撮像画像を分割して得られる複数の画像のうち、前記主復号化部が復号化する画像以外の互いに異なる画像を符号化した符号化画像と、前記互いに異なる画像と対応する時刻情報と、を含む符号化情報を時系列に取得し、
前記従復号化部において取得された、前記時刻情報に対応する前記画像の次の画像を再生すると予定される従再生時刻を計算するするとともに、前記従再生時刻を前記主復号化部に通知し、
前記主復号化部から、前記次の画像の再生時刻を取得し、
前記再生時刻に基づき、前記符号化画像が復号化された前記画像を再生する
ことを特徴とする付記１２に記載の復号化方法。
（付記１４）
前記復号化方法は、主復号化部と少なくとも一つの従復号化部とにより実行され、
前記主復号化部は、
撮像画像を分割して得られる複数の画像のうちの一つの画像を符号化した符号化画像と、前記一つの画像と対応する時刻情報と、前記撮像画像を分割して得られる所定の信号に基づき前記符号化の前に取得された時刻を備えた前記識別情報とを含む符号化情報を時系列に取得し、
前記符号化情報から前記識別情報を取得し、
前記時刻情報に基づき前記一つの画像の次の画像を再生すると予定される主再生時刻を計算し、
前記識別情報に基づき、前記少なくとも一つの従復号化部から前記撮像画像を分割して得られる複数の画像のうちの前記一つの画像以外の互いに異なる画像の前記時刻情報と、前記互いに異なる画像の次の画像を再生する従再生時刻とを取得するとともに、前記主再生時刻または少なくとも一つの前記従再生時刻と、それぞれに対応する前記時刻情報との差の最大値、および前記最大値に対応する時刻情報と前記最大値に対応する時刻情報以外の前記それぞれに対応する前記時刻情報との差に基づき、取得された前記撮像画像を分割して得られる複数の画像の次の複数の画像を再生する複数の再生時刻をそれぞれ算出し、
算出した前記主復号化部自身の再生時刻を、次の前記画像を再生する再生時刻として設定し、
算出した前記再生時刻を前記少なくとも一つの従復号化部のそれぞれに通知し、
設定された前記再生時刻に基づき、前記符号化画像が復号化された前記画像を再生し
前記従復号化部は、
前記撮像画像を分割して得られる複数の画像のうち、前記主復号化部が復号化する画像以外の互いに異なる画像のいずれかを符号化した符号化画像と、符号化された前記画像と対応する時刻情報と、前記撮影画像に含まれる所定の信号に基づき前記符号化の前に取得された前記時刻を備えた前記識別情報と、を含む符号化情報を時系列に取得し、
前記符号化情報から前記識別情報を取得し、
前記従復号化部において取得された、前記時刻情報に対応する前記画像の次の画像を再生すると予定される従再生時刻を計算して、前記従再生時刻および前記時刻情報を前記主復号化部に通知し、
前記主復号化部から、前記次の画像の再生時刻を取得して設定し、
前記再生時刻に基づき、前記符号化画像が復号化された前記画像を再生する
ことを特徴とする付記１２に記載の復号化方法。
（付記１５）
撮像画像を分割して得られる複数の画像をそれぞれ符号化する処理において、
前記画像の中の互いに異なる一つの画像をそれぞれ符号化する複数の符号化部はそれぞれ、
前記複数の画像の中の一つの画像を符号化した符号化画像と、前記一つの画像と対応する時刻情報とを含む符号化情報を送信し、
複数の前記符号化部のいずれか少なくとも一つは、
前記撮影画像に含まれる複数の画像を互いに識別するための識別情報を前記符号化画像とともに送信する
処理をコンピュータに実行させるプログラム。
（付記１６）
前記送信は、ＩＰネットワークを介して行なわれることを特徴とする付記１５に記載のプログラム。
（付記１７）
撮像画像を分割して得られる複数の画像の中の互いに異なる一つの画像の符号化画像をそれぞれ復号化する処理において、
前記一つの画像を符号化した符号化画像と、前記一つの画像のそれぞれと対応する時刻情報と、前記一つの画像を互いに識別するための識別情報とを含む符号化情報を時系列に受信し、
前記時刻情報に基づき前記一つの画像の次の画像を再生すると予定される再生予定時刻を算出し、
前記一つの画像の次の画像を再生する再生時刻に基づき、前記符号化画像が復号化された前記画像を再生し、
前記撮像画像を分割して得られる複数の画像の中のいずれか一つを復号化する処理においては、
前記一つの復号化部以外の前記復号化部で受信された前記撮像画像を分割して得られる画像に対応する時刻情報と、算出された再生予定時刻を前記識別情報に基づき取得し
複数の前記画像の前記再生予定時刻に応じた実時間が他の画像の前記再生予定時刻に応じた実時間よりも遅い再生予定時刻に基づき複数の前記画像毎の前記再生時刻を算出し、
前記一つの復号化部以外の前記復号化部に複数の前記画像毎の前記再生時刻を出力する
処理をコンピュータに実行させるプログラム
１ 映像伝送システム
３ 符号化装置
５ 復号化装置
７ ＩＰネットワーク
９ カメラ
１１ 表示装置
２０ 元映像
２２〜２８ 分割映像
３１ エンコーダ
３３〜３７ エンコーダ
３９ ＨＵＢ
５１ デコーダ
５３〜５７ デコーダ
５９ 分配器
６１ ＨＵＢ
４０ 再生映像
４２〜４８ 分割映像
７０ 受信装置
７２ ＰＬＬ
７４ 符号化部
７６ 映像部
７８ 音声部
８０ 多重化装置
８２ メモリ
８４ ＣＰＵ
８６ ＬＡＮ制御部
１０１ 映像取込部
１０３ 映像符号化部
１０５ 音声取込部
１０７ 音声符号化部
１０９ 映像／音声多重部
１１１ 垂直同期信号取込部
１１３ ＳＴＣ読出部
１１５ ＳＴＣクロック生成部
１１７ ＰＣＲクロック生成部
１１９ 送信部
１２１ ＬＡＮ
１２３ ＳＴＣデータ生成部
１２５ 受信部
１２７ ＳＴＣデータ
１５３ ＬＡＮ制御部
１５５ メモリ
１５７ ＣＰＵ
１５９ 復号部
１６１ 分離装置
１６３ 映像部
１６５ 音声部
１６７ ＰＬＬ
１６９ 映像出力部
１７１ ＧＥＮＬＯＣＫ出力部
１７３ ＧＥＮＬＯＣＫ入力部
２０１ 受信部
２０３ 受信バッファ部
２０５ 映像／音声分離部
２０７ 映像復号化部
２０９ 音声復号化部
２１１ 映像表示部
２１３ 音声表示部
２１５ ＰＣＲクロック取得部
２１７ ＳＴＣクロック生成部
２１９ 垂直同期信号生成部
２２１ ＳＴＣ計算部
２２３ ＳＴＣ設定部
２２５ ＳＴＣ読出部
２２７ 送信部
２３１ ＧＥＮＬＯＣＫ信号
２３５ 映像信号
２３７ ＧＥＮＬＯＣＫクロック生成部
２３９ クロック選択部
２４１ ＳＴＣクロック生成部
２４３ 垂直同期信号生成部
２４５ ＳＴＣ設定部
２４７ ＳＴＣ読出部
２４９ 送信部

Claims (13)

  1. 動画像である撮像画像を分割して得られる複数の分割画像のそれぞれを符号化する複数の符号化部として、一つの主符号化部と少なくとも一つの従符号化部とを有し、
    前記主符号化部及び前記従符号化部の各々は、
    前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックを生成し、
    前記複数の分割画像の中の一つの分割画像を符号化して得られた符号化画像と、前記複数の分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける前記内部クロックの値に前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を、前記符号化画像を復号する復号化装置へ送信し、
    前記従符号化部は、更に、前記分割元の撮像画像についての垂直同期信号のタイミングにおける前記従符号化部自身の前記内部クロックの値である従符号化部基準クロック値を、前記主符号化部へ送信し、
    前記主符号化部は、更に、
    前記従符号化部基準クロック値を前記従符号化部から受信し、
    前記分割元の撮像画像についての垂直同期信号のタイミングにおける前記主符号化部自身の前記内部クロックの値である主符号化部基準クロック値と、前記従符号化部から受信した前記従符号化部基準クロック値とを含む基準クロックデータを前記復号化装置へ送信する
    ことを特徴とする符号化装置。
  2. 前記符号化情報の前記復号化装置への送信及び前記基準クロックデータの前記復号化装置への送信は、ＩＰネットワークを介して行なわれることを特徴とする請求項１に記載の符号化装置。
  3. 動画像である撮像画像を分割して得られる複数の分割画像の中の互いに異なる一つの分割画像の符号化画像をそれぞれ復号化する複数の復号化部として、主復号化部と少なくとも一つの従復号化部とを有し、
    前記主復号化部及び前記従復号化部の各々は、
    前記符号化画像を符号化した符号化装置から、前記一つの分割画像を符号化した符号化画像と、前記撮像画像についての垂直同期信号のタイミングに同期しているクロックの値であって前記一つの分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける該クロックの値に前記符号化装置での前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を時系列に受信し、
    時系列に受信した前記符号化情報に含まれる前記復号基準時刻情報に基づいて、前記垂直同期信号のタイミングに同期している内部クロックを生成し、
    前記従復号化部は、更に、所定のタイミングにおける前記従復号化部自身の内部クロックの値である初期内部クロック値を前記主復号化部へ送信し、
    前記主復号化部は、更に、
    前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックであって前記互いに異なる一つの分割画像の符号化を個々に行った複数の符号化部の各々についての該内部クロックの値であって、前記分割元の撮像画像についての垂直同期信号のタイミングにおける該値である基準クロック値を、前記複数の符号化部の各々について含む基準クロックデータを前記符号化装置から受信し、
    前記初期内部クロック値を前記従復号化部から受信し、
    前記所定のタイミングにおける前記主復号化部自身の内部クロックの値である初期内部クロック値を取得し、
    前記一つの分割画像についての前記符号化を行った前記符号化部についての前記基準クロック値と、該一つの分割画像についての前記符号化情報を受信した前記主復号化部若しくは前記従復号化部についての前記初期内部クロック値との差を、前記複数の分割画像の各々について算出し、
    前記複数の分割画像の各々について算出された前記差のうち値が最大であるものの算出に用いた前記初期内部クロック値を、前記主復号化部及び前記従復号化部のうち該初期内部クロック値が前記所定のタイミングにおける自身の内部クロックの値であるものについての、前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像の再生タイミングを示す設定内部クロック値として設定すると共に、前記設定内部クロック値である前記差の算出に用いた前記基準クロック値を前記設定内部クロック値ではない前記差の算出に用いた前記基準クロック値の各々から減じた値に前記設定内部クロック値を加算して得られる値の各々を、前記主復号化部及び前記従復号化部のうち前記設定内部クロック値が設定されなかった残りの復号化部についての前記設定内部クロック値として各々設定し、
    前記主復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、前記主復号化部についての前記設定内部クロック値により示される再生タイミングで再生し、
    前記従復号化部についての前記設定内部クロック値を前記従復号化部へ送信し、
    前記従復号化部は、更に、
    前記主復号化部から送信された前記設定内部クロック値を受信し、
    前記従復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、受信した前記設定内部クロック値により示される再生タイミングで再生する、
    ことを特徴とする復号化装置。
  4. 動画像である撮像画像を分割して得られる複数の分割画像のそれぞれを符号化する複数の符号化部として、一つの主符号化部と少なくとも一つの従符号化部とを有する符号化装置が行う符号化方法であって、
    前記主符号化部及び前記従符号化部の各々が、
    前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックを生成し、
    前記複数の分割画像の中の一つの分割画像を符号化して得られた符号化画像と、前記複数の分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける前記内部クロックの値に前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を、前記符号化画像を復号する復号化装置へ送信し、
    前記従符号化部が、更に、前記分割元の撮像画像についての垂直同期信号のタイミングにおける前記従符号化部自身の前記内部クロックの値である従符号化部基準クロック値を、前記主符号化部へ送信し、
    前記主符号化部が、更に、
    前記従符号化部基準クロック値を前記従符号化部から受信し、
    前記分割元の撮像画像についての垂直同期信号のタイミングにおける前記主符号化部自身の前記内部クロックの値である主符号化部基準クロック値と、前記従符号化部から受信した前記従符号化部基準クロック値とを含む基準クロックデータを前記復号化装置へ送信する
    ことを特徴とする符号化方法。
  5. 動画像である撮像画像を分割して得られる複数の分割画像の中の互いに異なる一つの分割画像の符号化画像をそれぞれ復号化する複数の復号化部として、主復号化部と少なくとも一つの従復号化部とを有する復号化装置が行う復号化方法であって、
    前記主復号化部及び前記従復号化部の各々が、
    前記符号化画像を符号化した符号化装置から、前記一つの分割画像を符号化した符号化画像と、前記撮像画像についての垂直同期信号のタイミングに同期しているクロックの値であって前記一つの分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける該クロックの値に前記符号化装置での前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を時系列に受信し、
    時系列に受信した前記符号化情報に含まれる前記復号基準時刻情報に基づいて、前記垂直同期信号のタイミングに同期している内部クロックを生成し、
    前記従復号化部が、更に、所定のタイミングにおける前記従復号化部自身の内部クロックの値である初期内部クロック値を前記主復号化部へ送信し、
    前記主復号化部が、更に、
    前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックであって前記互いに異なる一つの分割画像の符号化を個々に行った複数の符号化部の各々についての該内部クロックの値であって、前記分割元の撮像画像についての垂直同期信号のタイミングにおける該値である基準クロック値を、前記複数の符号化部の各々について含む基準クロックデータを前記符号化装置から受信し、
    前記初期内部クロック値を前記従復号化部から受信し、
    前記所定のタイミングにおける前記主復号化部自身の内部クロックの値である初期内部クロック値を取得し、
    前記一つの分割画像についての前記符号化を行った前記符号化部についての前記基準クロック値と、該一つの分割画像についての前記符号化情報を受信した前記主復号化部若しくは前記従復号化部についての前記初期内部クロック値との差を、前記複数の分割画像の各々について算出し、
    前記複数の分割画像の各々について算出された前記差のうち値が最大であるものの算出に用いた前記初期内部クロック値を、前記主復号化部及び前記従復号化部のうち該初期内部クロック値が前記所定のタイミングにおける自身の内部クロックの値であるものについての、前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像の再生タイミングを示す設定内部クロック値として設定すると共に、前記設定内部クロック値である前記差の算出に用いた前記基準クロック値を前記設定内部クロック値ではない前記差の算出に用いた前記基準クロック値の各々から減じた値に前記設定内部クロック値を加算して得られる値の各々を、前記主復号化部及び前記従復号化部のうち前記設定内部クロック値が設定されなかった残りの復号化部についての前記設定内部クロック値として各々設定し、
    前記主復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、前記主復号化部についての前記設定内部クロック値により示される再生タイミングで再生し、
    前記従復号化部についての前記設定内部クロック値を前記従復号化部へ送信し、
    前記従復号化部が、更に、
    前記主復号化部から送信された前記設定内部クロック値を受信し、
    前記従復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、受信した前記設定内部クロック値により示される再生タイミングで再生する、
    ことを特徴とする復号化方法。
  6. 動画像である撮像画像を分割して得られる複数の分割画像のそれぞれを符号化する複数の符号化部として、一つの主符号化部と少なくとも一つの従符号化部とを有する符号化装置としてコンピュータを機能させるプログラムであって、
    前記主符号化部及び前記従符号化部の各々として、
    前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックを生成し、
    前記複数の分割画像の中の一つの分割画像を符号化して得られた符号化画像と、前記複数の分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける前記内部クロックの値に前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を、前記符号化画像を復号する復号化装置へ送信する
    処理を前記コンピュータに実行させ、
    前記従符号化部として、更に、前記分割元の撮像画像についての垂直同期信号のタイミングにおける前記従符号化部自身の前記内部クロックの値である従符号化部基準クロック値を、前記主符号化部へ送信する処理を前記コンピュータに実行させ、
    前記主符号化部として、更に、
    前記従符号化部基準クロック値を前記従符号化部から受信し、
    前記の分割元の撮影画像についての垂直同期信号のタイミングにおける前記主符号化部自身の前記内部クロックの値である主符号化部基準クロック値と、前記従符号化部から受信した前記従符号化部基準クロック値とを含む基準クロックデータを前記復号化装置へ送信する
    処理を前記コンピュータに実行させる、
    プログラム。
  7. 動画像である撮像画像を分割して得られる複数の分割画像の中の互いに異なる一つの分割画像の符号化画像をそれぞれ復号化する複数の復号化部として、主復号化部と少なくとも一つの従復号化部とを有する復号化装置としてコンピュータを機能させるプログラムであって、
    前記主復号化部及び前記従復号化部の各々として、
    前記符号化画像を符号化した符号化装置から、前記一つの分割画像を符号化した符号化画像と、前記撮像画像についての垂直同期信号のタイミングに同期しているクロックの値であって前記一つの分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける該クロックの値に前記符号化装置での前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を時系列に受信し、
    時系列に受信した前記符号化情報に含まれる前記復号基準時刻情報に基づいて、前記垂直同期信号のタイミングに同期している内部クロックを生成する
    処理を前記コンピュータに実行させ、
    前記従復号化部として、更に、所定のタイミングにおける前記従復号化部自身の内部クロックの値である初期内部クロック値を前記主復号化部へ送信する処理を前記コンピュータに実行させ、
    前記主復号化部として、更に、
    前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックであって前記互いに異なる一つの分割画像の符号化を個々に行った複数の符号化部の各々についての該内部クロックの値であって、前記分割元の撮像画像についての垂直同期信号のタイミングにおける該値である基準クロック値を、前記複数の符号化部の各々について含む基準クロックデータを前記符号化装置から受信し、
    前記初期内部クロック値を前記従復号化部から受信し、
    前記所定のタイミングにおける前記主復号化部自身の内部クロックの値である初期内部クロック値を取得し、
    前記一つの分割画像についての前記符号化を行った前記符号化部についての前記基準クロック値と、該一つの分割画像についての前記符号化情報を受信した前記主復号化部若しくは前記従復号化部についての前記初期内部クロック値との差を、前記複数の分割画像の各々について算出し、
    前記複数の分割画像の各々について算出された前記差のうち値が最大であるものの算出に用いた前記初期内部クロック値を、前記主復号化部及び前記従復号化部のうち該初期内部クロック値が前記所定のタイミングにおける自身の内部クロックの値であるものについての、前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像の再生タイミングを示す設定内部クロック値として設定すると共に、前記設定内部クロック値である前記差の算出に用いた前記基準クロック値を前記設定内部クロック値ではない前記差の算出に用いた前記基準クロック値の各々から減じた値に前記設定内部クロック値を加算して得られる値の各々を、前記主復号化部及び前記従復号化部のうち前記設定内部クロック値が設定されなかった残りの復号化部についての前記設定内部クロック値として各々設定し、
    前記主復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、前記主復号化部についての前記設定内部クロック値により示される再生タイミングで再生し、
    前記従復号化部についての前記設定内部クロック値を前記従復号化部へ送信する
    処理を前記コンピュータに実行させ、
    前記従復号化部として、更に、
    前記主復号化部から送信された前記設定内部クロック値を受信し、
    前記従復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、受信した前記設定内部クロック値により示される再生タイミングで再生する
    処理を前記コンピュータに実行させる、
    プログラム。
  8. 動画像である撮像画像を分割して得られる複数の分割画像のそれぞれを符号化する複数の符号化部を有し、
    前記符号化部の各々は、
    前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックを生成し、
    前記複数の分割画像の中の一つの分割画像を符号化して得られた符号化画像と、前記複数の分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける前記内部クロックの値に前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を、前記符号化画像を復号する復号化装置へ送信し、
    前記撮像画像に付されているタイムコードと、前記分割元の撮像画像についての垂直同期信号のタイミングにおける前記符号化部自身の前記内部クロックの値である基準クロック値とを含むタイムコードデータを、前記復号化装置へ送信する、
    ことを特徴とする符号化装置。
  9. 動画像である撮像画像を分割して得られる複数の分割画像の中の互いに異なる一つの分割画像の符号化画像をそれぞれ復号化する複数の復号化部として、主復号化部と少なくとも一つの従復号化部とを有し、
    前記主復号化部及び前記従復号化部の各々は、
    前記符号化画像を符号化した符号化装置から、前記一つの分割画像を符号化した符号化画像と、前記撮像画像についての垂直同期信号のタイミングに同期しているクロックの値であって前記一つの分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける該クロックの値に前記符号化装置での前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を時系列に受信し、
    前記撮像画像に付されているタイムコードと、前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックであって前記互いに異なる一つの分割画像の符号化を個々に行った複数の符号化部の各々についての該内部クロックの値であって、前記分割元の撮像画像についての垂直同期信号のタイミングにおける該値である基準クロック値とを含む、前記複数の符号化部の各々についてのタイムコードデータを、前記複数の符号化部を有している前記符号化装置から受信し、
    時系列に受信した前記符号化情報に含まれる前記復号基準時刻情報に基づいて、前記垂直同期信号のタイミングに同期している内部クロックを生成し、
    前記従復号化部は、更に、所定のタイミングにおける前記従復号化部自身の内部クロックの値である初期内部クロック値と、前記符号化装置から受信した前記タイムコードデータとを前記主復号化部へ送信し、
    前記主復号化部は、更に、
    前記初期内部クロック値と前記タイムコードデータとを前記従復号化部から受信し、
    前記所定のタイミングにおける前記主復号化部自身の内部クロックの値である初期内部クロック値を取得し、
    前記タイムコードが同一である前記タイムコードデータの各々に含まれている前記基準クロック値を用いて、前記一つの分割画像についての前記符号化を行った前記符号化部についての前記基準クロック値と、該一つの分割画像についての前記符号化情報を受信した前記主復号化部若しくは前記従復号化部についての前記初期内部クロック値との差を、前記複数の分割画像の各々について算出し、
    前記複数の分割画像の各々について算出された前記差のうち値が最大であるものの算出に用いた前記初期内部クロック値を、前記主復号化部及び前記従復号化部のうち該初期内部クロック値が前記所定のタイミングにおける自身の内部クロックの値であるものについての、前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像の再生タイミングを示す設定内部クロック値として設定すると共に、前記設定内部クロック値である前記差の算出に用いた前記基準クロック値を前記設定内部クロック値ではない前記差の算出に用いた前記基準クロック値の各々から減じた値に前記設定内部クロック値を加算して得られる値の各々を、前記主復号化部及び前記従復号化部のうち前記設定内部クロック値が設定されなかった残りの復号化部についての前記設定内部クロック値として各々設定し、
    前記主復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、前記主復号化部についての前記設定内部クロック値により示される再生タイミングで再生し、
    前記従復号化部についての前記設定内部クロック値を前記従復号化部へ送信し、
    前記従復号化部は、更に、
    前記主復号化部から送信された前記設定内部クロック値を受信し、
    前記従復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、受信した前記設定内部クロック値により示される再生タイミングで再生する、
    ことを特徴とする復号化装置。
  10. 動画像である撮像画像を分割して得られる複数の分割画像のそれぞれを符号化する複数の符号化部を有する符号化装置が行う符号化方法であって、
    前記符号化部の各々が、
    前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックを生成し、
    前記複数の分割画像の中の一つの分割画像を符号化して得られた符号化画像と、前記複数の分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける前記内部クロックの値に前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を、前記符号化画像を復号する復号化装置へ送信し、
    前記撮像画像に付されているタイムコードと、前記分割元の撮像画像についての垂直同期信号のタイミングにおける前記符号化部自身の前記内部クロックの値である基準クロック値とを含むタイムコードデータを、前記復号化装置へ送信する、
    ことを特徴とする符号化方法。
  11. 動画像である撮像画像を分割して得られる複数の分割画像の中の互いに異なる一つの分割画像の符号化画像をそれぞれ復号化する複数の復号化部として、主復号化部と少なくとも一つの従復号化部とを有する復号化装置が行う復号化方法であって、
    前記主復号化部及び前記従復号化部の各々が、
    前記符号化画像を符号化した符号化装置から、前記一つの分割画像を符号化した符号化画像と、前記撮像画像についての垂直同期信号のタイミングに同期しているクロックの値であって前記一つの分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける該クロックの値に前記符号化装置での前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を時系列に受信し、
    前記撮像画像に付されているタイムコードと、前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックであって前記互いに異なる一つの分割画像の符号化を個々に行った複数の符号化部の各々についての該内部クロックの値であって、前記分割元の撮像画像についての垂直同期信号のタイミングにおける該値である基準クロック値とを含む、前記複数の符号化部の各々についてのタイムコードデータを、前記複数の符号化部を有している前記符号化装置から受信し、
    時系列に受信した前記符号化情報に含まれる前記復号基準時刻情報に基づいて、前記垂直同期信号のタイミングに同期している内部クロックを生成し、
    前記従復号化部が、更に、所定のタイミングにおける前記従復号化部自身の内部クロックの値である初期内部クロック値と、前記符号化装置から受信した前記タイムコードデータとを前記主復号化部へ送信し、
    前記主復号化部が、更に、
    前記初期内部クロック値と前記タイムコードデータとを前記従復号化部から受信し、
    前記所定のタイミングにおける前記主復号化部自身の内部クロックの値である初期内部クロック値を取得し、
    前記タイムコードが同一である前記タイムコードデータの各々に含まれている前記基準クロック値を用いて、前記一つの分割画像についての前記符号化を行った前記符号化部についての前記基準クロック値と、該一つの分割画像についての前記符号化情報を受信した前記主復号化部若しくは前記従復号化部についての前記初期内部クロック値との差を、前記複数の分割画像の各々について算出し、
    前記複数の分割画像の各々について算出された前記差のうち値が最大であるものの算出に用いた前記初期内部クロック値を、前記主復号化部及び前記従復号化部のうち該初期内部クロック値が前記所定のタイミングにおける自身の内部クロックの値であるものについての、前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像の再生タイミングを示す設定内部クロック値として設定すると共に、前記設定内部クロック値である前記差の算出に用いた前記基準クロック値を前記設定内部クロック値ではない前記差の算出に用いた前記基準クロック値の各々から減じた値に前記設定内部クロック値を加算して得られる値の各々を、前記主復号化部及び前記従復号化部のうち前記設定内部クロック値が設定されなかった残りの復号化部についての前記設定内部クロック値として各々設定し、
    前記主復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、前記主復号化部についての前記設定内部クロック値により示される再生タイミングで再生し、
    前記従復号化部についての前記設定内部クロック値を前記従復号化部へ送信し、
    前記従復号化部が、更に、
    前記主復号化部から送信された前記設定内部クロック値を受信し、
    前記従復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、受信した前記設定内部クロック値により示される再生タイミングで再生する、
    ことを特徴とする復号化方法。
  12. 動画像である撮像画像を分割して得られる複数の分割画像のそれぞれを符号化する複数の符号化部を有する符号化装置としてコンピュータを機能させるプログラムであって、
    前記符号化部の各々として、
    前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックを生成し、
    前記複数の分割画像の中の一つの分割画像を符号化して得られた符号化画像と、前記複数の分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける前記内部クロックの値に前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を、前記符号化画像を復号する復号化装置へ送信し、
    前記撮像画像に付されているタイムコードと、前記分割元の撮像画像についての垂直同期信号のタイミングにおける前記符号化部自身の前記内部クロックの値である基準クロック値とを含むタイムコードデータを、前記復号化装置へ送信する、
    処理を前記コンピュータに実行させる
    プログラム。
  13. 動画像である撮像画像を分割して得られる複数の分割画像の中の互いに異なる一つの分割画像の符号化画像をそれぞれ復号化する複数の復号化部として、主復号化部と少なくとも一つの従復号化部とを有する復号化装置としてコンピュータを機能させるプログラムであって、
    前記主復号化部及び前記従復号化部の各々として、
    前記符号化画像を符号化した符号化装置から、前記一つの分割画像を符号化した符号化画像と、前記撮像画像についての垂直同期信号のタイミングに同期しているクロックの値であって前記一つの分割画像の分割元の撮像画像についての垂直同期信号のタイミングにおける該クロックの値に前記符号化装置での前記符号化の処理遅延時間を加算した復号基準時刻情報とを含む符号化情報を時系列に受信し、
    前記撮像画像に付されているタイムコードと、前記撮像画像についての垂直同期信号のタイミングに同期している内部クロックであって前記互いに異なる一つの分割画像の符号化を個々に行った複数の符号化部の各々についての該内部クロックの値であって、前記分割元の撮像画像についての垂直同期信号のタイミングにおける該値である基準クロック値とを含む、前記複数の符号化部の各々についてのタイムコードデータを、前記複数の符号化部を有している前記符号化装置から受信し、
    時系列に受信した前記符号化情報に含まれる前記復号基準時刻情報に基づいて、前記垂直同期信号のタイミングに同期している内部クロックを生成する
    処理を前記コンピュータに実行させ、
    前記従復号化部として、更に、所定のタイミングにおける前記従復号化部自身の内部クロックの値である初期内部クロック値と、前記符号化装置から受信した前記タイムコードデータとを前記主復号化部へ送信する処理を前記コンピュータに実行させ、
    前記主復号化部として、更に、
    前記初期内部クロック値と前記タイムコードデータとを前記従復号化部から受信し、
    前記所定のタイミングにおける前記主復号化部自身の内部クロックの値である初期内部クロック値を取得し、
    前記タイムコードが同一である前記タイムコードデータの各々に含まれている前記基準クロック値を用いて、前記一つの分割画像についての前記符号化を行った前記符号化部についての前記基準クロック値と、該一つの分割画像についての前記符号化情報を受信した前記主復号化部若しくは前記従復号化部についての前記初期内部クロック値との差を、前記複数の分割画像の各々について算出し、
    前記複数の分割画像の各々について算出された前記差のうち値が最大であるものの算出に用いた前記初期内部クロック値を、前記主復号化部及び前記従復号化部のうち該初期内部クロック値が前記所定のタイミングにおける自身の内部クロックの値であるものについての、前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像の再生タイミングを示す設定内部クロック値として設定すると共に、前記設定内部クロック値である前記差の算出に用いた前記基準クロック値を前記設定内部クロック値ではない前記差の算出に用いた前記基準クロック値の各々から減じた値に前記設定内部クロック値を加算して得られる値の各々を、前記主復号化部及び前記従復号化部のうち前記設定内部クロック値が設定されなかった残りの復号化部についての前記設定内部クロック値として各々設定し、
    前記主復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、前記主復号化部についての前記設定内部クロック値により示される再生タイミングで再生し、
    前記従復号化部についての前記設定内部クロック値を前記従復号化部へ送信する
    処理を前記コンピュータに実行させ、
    前記従復号化部として、更に、
    前記主復号化部から送信された前記設定内部クロック値を受信し、
    前記従復号化部が前記符号化装置から受信した前記符号化情報に含まれている前記符号化画像を復号化して得られる元の分割画像を、受信した前記設定内部クロック値により示される再生タイミングで再生する、
    処理を前記コンピュータに実行させる
    プログラム。
JP2013082332A 2013-04-10 2013-04-10 符号化装置、復号化装置、符号化方法、復号化方法およびプログラム Active JP6244642B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2013082332A JP6244642B2 (ja) 2013-04-10 2013-04-10 符号化装置、復号化装置、符号化方法、復号化方法およびプログラム
US14/242,426 US9948940B2 (en) 2013-04-10 2014-04-01 Encoding apparatus, decoding apparatus, encoding method, and decoding method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013082332A JP6244642B2 (ja) 2013-04-10 2013-04-10 符号化装置、復号化装置、符号化方法、復号化方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2014207498A JP2014207498A (ja) 2014-10-30
JP6244642B2 true JP6244642B2 (ja) 2017-12-13

Family

ID=51686793

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013082332A Active JP6244642B2 (ja) 2013-04-10 2013-04-10 符号化装置、復号化装置、符号化方法、復号化方法およびプログラム

Country Status (2)

Country Link
US (1) US9948940B2 (ja)
JP (1) JP6244642B2 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9929824B2 (en) 2015-01-26 2018-03-27 Timecode Systems Limited Networked programmable master clock base stations
US10742733B2 (en) 2015-10-12 2020-08-11 Timecode Systems Limited Synchronizing data between media devices
US9866732B2 (en) * 2015-10-12 2018-01-09 Timecode Systems Limited Synchronizing data between personal and timecode devices
US10063637B2 (en) 2015-10-12 2018-08-28 Timecode Systems Limited Synchronizing data between personal and timecode devices
US10021465B2 (en) 2015-10-12 2018-07-10 Timecode Systems Limited Synchronizing media devices
JP7183304B6 (ja) 2018-05-25 2022-12-20 ライン プラス コーポレーション 複数のチャネルを利用して動的ビットレートのビデオを配信および再生する方法およびシステム
JP2021190868A (ja) * 2020-05-29 2021-12-13 キヤノン株式会社 映像同期装置、映像同期装置の制御方法及びプログラム
JP6948043B1 (ja) * 2020-08-05 2021-10-13 株式会社Ｍｅｄｉ Ｐｌｕｓ 医療映像システム及び医療映像処理装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3237806B2 (ja) 1994-09-06 2001-12-10 日本電信電話株式会社 画面分割映像符号化復号化装置
JPH08116534A (ja) * 1994-10-18 1996-05-07 Seiko Epson Corp 画像データ符号化装置およびその方法並びに画像データ復号化装置およびその方法
JPH10234043A (ja) 1997-02-20 1998-09-02 Toshiba Corp 動画像符号化／復号化装置
JPH11239347A (ja) 1998-02-23 1999-08-31 Victor Co Of Japan Ltd 画像データ符号化装置及び画像データ符号化方法
JP4427827B2 (ja) * 1998-07-15 2010-03-10 ソニー株式会社 データ処理方法、データ処理装置及び記録媒体
JP2002125203A (ja) * 2000-10-12 2002-04-26 Mitsubishi Electric Corp メディア符号器及びメディア復号器
US7593580B2 (en) * 2003-07-14 2009-09-22 Texas Instruments Incorporated Video encoding using parallel processors
EP1626579A1 (en) 2004-08-11 2006-02-15 Thomson Licensing Device pairing
JP2006211617A (ja) * 2005-01-31 2006-08-10 Toshiba Corp 動画像符号化装置・復号化装置及び符号化ストリーム生成方法
JP4607856B2 (ja) 2006-12-26 2011-01-05 富士通株式会社 符号化復号システム及び符号化復号方法
EP2211553A4 (en) * 2007-11-13 2011-02-02 Fujitsu Ltd CODIER AND DECODER
JP5068282B2 (ja) * 2009-06-01 2012-11-07 日本電信電話株式会社 映像伝送装置及び方法
JP5537293B2 (ja) * 2009-07-03 2014-07-02 パナソニック株式会社 画像符号化装置及び画像復号化装置
EP2330824A1 (en) * 2009-11-27 2011-06-08 Thomson Licensing Local statistical multiplexing of video streams over internet protocol
JP4893849B2 (ja) 2010-09-13 2012-03-07 富士通株式会社 画像処理システム
WO2012048928A1 (en) * 2010-10-15 2012-04-19 Cinemo Gmbh Distributed playback architecture
WO2013083840A1 (en) * 2011-12-09 2013-06-13 Cinemo Gmbh Media playback component comprising playback queue and queue bypass
WO2013140485A1 (ja) * 2012-03-17 2013-09-26 富士通株式会社 符号化装置、復号化装置、符号化方法および復号化方法

Also Published As

Publication number Publication date
US20140307805A1 (en) 2014-10-16
US9948940B2 (en) 2018-04-17
JP2014207498A (ja) 2014-10-30

Similar Documents

Publication Publication Date Title
JP6244642B2 (ja) 符号化装置、復号化装置、符号化方法、復号化方法およびプログラム
JP5761446B2 (ja) 符号化装置、復号化装置、符号化方法および復号化方法
JP4702402B2 (ja) 信号送信装置、信号送信方法、信号受信装置及び信号受信方法
JP6184408B2 (ja) 受信装置及びその受信方法
JP4607856B2 (ja) 符号化復号システム及び符号化復号方法
JPH11205696A (ja) 映像伝送装置及び映像伝送方法
JP2010148089A (ja) 映像分割基盤超高解像度ビデオ符号化および復号化装置、およびその制御方法
KR20130099723A (ko) 초고화질 영상 컨텐츠 편집 및 재생을 위한 입출력 시스템
EP2276192A2 (en) Method and apparatus for transmitting/receiving multi - channel audio signals using super frame
JP5106039B2 (ja) 画像音声同期再生装置
KR20080051041A (ko) 전송 효율을 높이기 위한 다시점 파노라믹 콘텐츠 송/수신시스템 및 그 방법
US9866898B2 (en) Elementary stream multiplexing method, multiplexing system, encoding or decoding method and apparatus
JP4893849B2 (ja) 画像処理システム
JP6717670B2 (ja) タイムコード送信装置、タイムコード受信装置、映像信号送信装置及び映像信号受信装置
JP2017017511A (ja) 情報処理方法及び動画データ送信システム
KR20100030574A (ko) 영상 기록 재생 장치
JP2005328280A (ja) データ処理装置
JP6360281B2 (ja) 同期情報生成装置およびそのプログラム、同期データ再生装置およびそのプログラム
JP2010141498A (ja) 映像受信装置及び映像送信装置
JP2010028642A (ja) 画像伝送システム
JP5741064B2 (ja) 映像音声処理装置および映像音声処理方法
JP5444040B2 (ja) 画像符号化装置及び画像伝送システム
JP2007201797A (ja) 伝送システム及び映像出力方法
JP2016012831A (ja) 映像音声信号送信装置、受信装置及び方法
JP2001119702A (ja) 映像信号受信装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160113

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161201

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161206

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170203

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170328

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170526

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170725

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170920

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171017

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171030

R150 Certificate of patent or registration of utility model

Ref document number: 6244642

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150