JP2002290969A - 同期制御装置 - Google Patents
同期制御装置Info
- Publication number
- JP2002290969A JP2002290969A JP2001086580A JP2001086580A JP2002290969A JP 2002290969 A JP2002290969 A JP 2002290969A JP 2001086580 A JP2001086580 A JP 2001086580A JP 2001086580 A JP2001086580 A JP 2001086580A JP 2002290969 A JP2002290969 A JP 2002290969A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- encoding
- detecting
- image
- control device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Synchronisation In Digital Transmission Systems (AREA)
Abstract
影響を低コストで軽減する同期制御装置を提供する。 【解決手段】 遅延計測器19は、制御器16から符号
化開始信号が入力されると計測を開始し、有効データ検
出器17から検出信号が入力されると計測を終了する。
遅延計測器19の計測値は可変遅延回路18に供給さ
れ、可変遅延回路18は、その計測値に応じて遅延時間
を設定する。音声符号化器14によって符号化された音
声信号は、設定された遅延時間だけ遅延されて多重化器
20に入力される。
Description
声のようなデータの入力信号を符号化して多重伝送する
符号化装置の同期制御装置に関するものである。
して多重伝送する場合、受信側で分離及び復号化処理し
た後に再生する際に、同期がとられた画像信号及び音声
信号を出力する必要がある。その理由は、復号された画
像信号と音声信号との間に時間差が生じると、受信側で
違和感が発生するからである。
に、画像信号が入力部1を通じて入力される画像符号化
器2と、画像信号と同期をとった音声信号が入力部3を
通じて入力される音声符号化器4と、入力部5を通じて
同期信号が入力される制御器6と、遅延回路7と、多重
化器8と、多重化器からの出力を伝送路に出力する出力
部9とを具える。
符号化し、符号化した画像信号を多重化器8に出力す
る。音声符号化器4は、入力された音声信号を符号化す
る。符号化された音声信号は、符号化された画像信号と
同期をとるために、遅延回路7に入力され、所定時間遅
延された後に多重化器8に入力される。
音声信号を多重化し、伝送路に応じたフォーマットに変
換した後に、多重化された画像信号及び音声信号を出力
部9を通じて伝送路に出力する。制御器6は、符号化開
始信号を画像符号化器2及び音声符号化器4に供給す
る。
MPEG(Moving Picture ExpertsGroup)方式が提案さ
れている。MPEG方式では、入力する動画像に対し
て、Iピクチャ(フレーム内符号化画像)、Pピクチャ
(順方向予測画像)及びBピクチャ(双方向予測画像)
の3種類の符号化画像を出力する。また、MPEG方式
では、タイムスタンプという出力タイミング情報を使用
している。タイムスタンプとしては、プレゼンテーショ
ンタイムスタンプと、デコーディングタイムスタンプと
がある。
ロックがプレゼンテーションタイムスタンプに一致する
と、画像信号又は音声信号を再生し及び出力する。シス
テムタイムクロックは、MPEGで定義された基準とな
る時刻情報である。デコーディングタイムスタンプは、
Iピクチャ、Pピクチャ及びBピクチャの復号順序及び
再生出力順序の相違に対応するために設けられる。プレ
ゼンテーションタイムスタンプがデコーディングタイム
スタンプと一致する場合、タイムスタンプとしてプレゼ
ンテーションタイムスタンプのみを付加する。
entary Stream)パケットのように複数のパケットを可変
長の長さでパケット化して、ビデオストリームにタイム
スタンプを付加している。一般に、符号化された画像信
号及び音声信号には、対応するタイムスタンプがそれぞ
れ付加される。そのようなタイムスタンプは、画像信号
及び音声信号とともにアクセスユニットを基準として付
加される。音声信号のアクセスユニットの場合、シンク
ワード(オーディオストリーム内の一定ワードごとに存
在するコード)部分を基準にしてタイムスタンプが付加
され、画像信号のアクセスユニットの場合、ピクチャス
タートコード(ビデオストリーム内にあるピクチャの区
分を示すコード)部分を基準にしてタイムスタンプが付
加される。
及びデコーディングタイムスタンプは、PESパケット
のヘッダ内に付加される。この場合、PESパケットの
実効パケットデータであるペイロード中に出現するPE
Sパケットのヘッダの直後のアクセスユニットを基準に
して、プレゼンテーションタイムスタンプ及びデコーデ
ィングタイムスタンプの値が算出される。
来の同期制御装置の場合、遅延回路7の遅延時間が一定
である。したがって、画像符号化器2の処理時間が符号
化パラメータの変化などに起因して変動した場合、遅延
回路7が正確かつ高精度に追従できないので、受信側の
復号化器で再生したときに画像信号と音声信号との間に
時間差が生じ、受信側で違和感が発生する。
することができるが、放送システムのように受信側の個
数が送信側の個数に比べて著しく多い場合には、受信側
で対応するとコスト的に高くなる。
テムの場合、符号化されたフレーム内画像及び予測画像
が混在して出力され、図4に示す構成の同期制御装置で
は、受信側の復号化器で再生したときの画像信号と音声
信号との時間差が顕著になる。
と音声信号との間の時間差の影響を低コストで軽減する
同期制御装置を提供することである。
置は、第1信号を符号化する手段と、その第1信号と同
期をとるとともに前記第1信号よりも符号化速度が速い
第2信号を符号化する手段と、前記第1信号と前記第2
信号との同期をとった信号に基づいて、前記第1信号を
符号化する手段及び前記第2信号を符号化する手段の符
号化を開始させる信号を発生させる手段と、前記第1信
号の符号化を検出する信号を発生させる手段と、前記符
号化を開始させる信号と前記第1信号を符号化を検出す
る信号との位相差を検出する手段と、符号化された前記
第2信号を、その位相差に基づいた遅延時間だけ遅延さ
せる手段とを具えることを特徴とするものである。
を、符号化の開始時と第1信号の符号化の検出時との差
に基づいた遅延時間だけ遅延させているので、第1信号
と第2信号との位相差が大幅に小さくなる。その結果、
受信側における画像信号のような第1信号と音声信号の
ような第2信号との間の時間差の影響が大幅に軽減す
る。なお、本発明による同期制御装置を、送信側で比較
的少数の回路によって構成することができるので、コス
ト的に高くなるおそれはない。
号を符号化する手段と、その第1信号よりも符号化速度
が速く、かつ、前記第1信号と同期がとられた第2信号
を符号化する手段と、前記第1信号と前記第2信号との
同期をとった信号に基づいて、前記第1信号を符号化す
る手段及び前記第2信号を符号化する手段の符号化を開
始させる信号を発生させる手段と、前記第1信号の符号
化を検出する信号を発生させる手段と、前記符号化を開
始させる信号と前記第1信号の符号化を検出する信号と
の位相差を検出する手段と、符号化された前記第1及び
第2信号の出力タイミングを前記位相差に基づいて補正
して、前記第1及び第2信号を多重化する手段とを具え
ることを特徴とするものである。
2信号の出力タイミングを位相差に基づいて補正して、
第1及び第2信号を多重化しているので、第1信号と第
2信号との位相差が大幅に小さくなる。その結果、受信
側における画像信号のような第1信号と音声信号のよう
な第2信号との間の時間差の影響が大幅に軽減する。本
発明による他の同期制御装置も、送信側で比較的少数の
回路によって構成することができるので、コスト的に高
くなるおそれはない。
記符号化を開始させる信号によって計測を開始するとと
もに、前記第1信号の符号化を検出する信号によって計
測を終了する手段を有する。
たフレーム内画像及び予測画像が混在して出力されるM
PEGの場合にも有効である。また、前記第1信号を画
像信号とし、前記第2信号を音声信号又は文字信号(例
えば、文字スーパー、字幕)とすることができる。
の形態を、図面を参照して詳細に説明する。図1は、本
発明による同期制御装置の第1の実施の形態を示す図で
ある。本実施の形態では、符号化方式としてMPEG方
式に適用し、第1信号として画像信号を使用し、第2信
号として音声信号を使用し、これら画像信号及び音声信
号を多重化して出力する場合について説明する。
1を通じて入力される画像符号化器12と、画像信号と
同期をとった音声信号が入力部13を通じて入力される
音声符号化器14と、入力部15を通じて同期信号が入
力される制御器16と、有効データ検出器17と、可変
遅延回路18と、遅延計測器19と、多重化器20と、
多重化器からの出力を伝送路に出力する出力部21とを
具える。
13にそれぞれ入力される前に互いに同期がとられてい
る。画像符号化器12によって符号化された画像信号
は、有効データ検出器17及び多重化器20に入力され
る。
像信号の有効データを検出するものであり、有効データ
を検出すると、遅延計測器19に検出信号を出力する。
有効データを、例えばMPEG2のSHC(Sequence He
ader Code: 0x000001B3)から始まるデータとする。SH
Cは、規格でMPEG2ビデオストリームの開始信号と
して定められる32ビット長のユニークな符号語であ
る。すなわち、開始符号以外の意味で現れることはな
い。このユニークコードを1バイトずつ比較して検出す
る。
声信号は、可変遅延回路18に入力される。画像信号と
音声信号との同期をとった同期信号が、入力部15を通
じて制御器16に入力される。制御器16は、符号化開
始信号を画像符号化器12、遅延計測器19及び音声符
号化器14に出力し、計測用クロック(フレーム)信号
を遅延計測器19に出力する。
されると計測を開始し、検出信号が入力されると計測を
終了する。なお、計測の際には計測用クロック信号を使
用する。計測用クロック信号としては、同期信号に基づ
いて発生したクロック信号を使用するが、遅延時間が数
フレームに及ぶ場合にはフレームパルス信号を使用して
もよい。遅延計測器19の計測値に音声符号化器14で
の処理時間を減算した値を、制御値として可変遅延回路
18に供給され、可変遅延回路18は、その制御値に応
じて遅延時間を設定する。または、計測値を可変遅延回
路18に供給して、可変遅延回路18内で音声符号化器
14の処理時間を減算した値を、遅延時間として設定し
てもよい。
回路18からの出力は、多重化器20で多重化され、伝
送路に応じたフォーマットに変換した後に、多重化され
た画像信号及び音声信号を出力部21を通じて伝送路に
出力される。
ャートを用いて更に詳しく説明する。図2において、入
力同期信号としてフレームパルス信号を使用する。すな
わち、入力同期信号は、2フィールドに1回のパルス信
号となる。符号化開始信号は、任意のタイミングで出力
される。
って符号化処理を開始するが、フレーム内符号化やフレ
ーム間符号化のために、有効な符号化画像をすぐに得る
ことができない。また、符号化パラメータの設定によっ
ても有効な画像をすぐに得ることができない。図2の場
合には、有効データが2フレーム遅れて出力されること
を示している。
像信号が有効となったタイミングでパルスを出力する。
MPEG2方式の場合、SHCを検出したときが有効デ
ータとなる。遅延計測器19は、符号化開始信号が出力
された瞬時から有効データが出力された瞬時までの区間
Tdに音声符号化処理時間Daを減じた値、すなわち
(Td−Da)を、可変遅延回路18に供給する。
の実施の形態を示す図である。図3において、図1と同
一構成のパーツについては同一符号を付す。本実施の形
態では、可変遅延回路18(図1)の代わりに、遅延回
路7(図4)と同一構成の遅延回路22を設ける。
力及び遅延回路22の出力だけでなく、遅延計測器19
の出力も入力される。MPEG方式などのように、プレ
ゼンテーションタイムスタンプやデコーディングタイム
スタンプと称する時刻情報を多重化して伝送する場合、
遅延計測器19によって得られた遅延量をプレゼンテー
ションタイムスタンプやデコーディングタイムスタンプ
に加算することによって、これらプレゼンテーションタ
イムスタンプやデコーディングタイムスタンプが補正さ
れ、補正したプレゼンテーションタイムスタンプやデコ
ーディングタイムスタンプを、新たな時刻情報として多
重化する。
のではなく、幾多の変更及び変形が可能である。例え
ば、上記実施の形態では符号化方式としてMPEG方式
に適用した場合について説明したが、本発明を、MPE
G方式以外の他の任意の符号化方式に適用することもで
きる。
ともに第2信号として音声信号を用いる場合について説
明したが、第1信号と第2信号のそれ以外の組合せにつ
いても適用することができ、例えば、第1信号として画
像信号を用いるとともに第2信号として文字信号を用い
ることもできる。
態を示す図である。
る。
態を示す図である。
Claims (5)
- 【請求項1】 第1信号を符号化する手段と、 その第1信号と同期をとるとともに前記第1信号よりも
符号化速度が速い第2信号を符号化する手段と、 前記第1信号と前記第2信号との同期をとった信号に基
づいて、前記第1信号を符号化する手段及び前記第2信
号を符号化する手段の符号化を開始させる信号を発生さ
せる手段と、 前記第1信号の符号化を検出する信号を発生させる手段
と、 前記符号化を開始させる信号と前記第1信号を符号化を
検出する信号との位相差を検出する手段と、 符号化された前記第2信号を、その位相差に基づいた遅
延時間だけ遅延させる手段とを具えることを特徴とする
同期制御装置。 - 【請求項2】 第1信号を符号化する手段と、 その第1信号よりも符号化速度が速く、かつ、前記第1
信号と同期がとられた第2信号を符号化する手段と、 前記第1信号と前記第2信号との同期をとった信号に基
づいて、前記第1信号を符号化する手段及び前記第2信
号を符号化する手段の符号化を開始させる信号を発生さ
せる手段と、 前記第1信号の符号化を検出する信号を発生させる手段
と、 前記符号化を開始させる信号と前記第1信号の符号化を
検出する信号との位相差を検出する手段と、 符号化された前記第1及び第2信号の出力タイミングを
前記位相差に基づいて補正して、前記第1及び第2信号
を多重化する手段とを具えることを特徴とする同期制御
装置。 - 【請求項3】 前記位相差を検出する手段が、 前記符号化を開始させる信号によって計測を開始すると
ともに、前記第1信号の符号化を検出する信号によって
計測を終了する手段を有することを特徴とする請求項1
又は2記載の同期制御装置。 - 【請求項4】 前記符号化の方式をMPEG方式とした
ことを特徴とする請求項1から3のうちのいずれか1項
に記載の同期制御装置。 - 【請求項5】 前記第1信号を画像信号とし、前記第2
信号を音声信号又は文字信号としたことを特徴とする請
求項1から4のうちのいずれか1項に記載の同期制御装
置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001086580A JP3958531B2 (ja) | 2001-03-26 | 2001-03-26 | 同期制御装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001086580A JP3958531B2 (ja) | 2001-03-26 | 2001-03-26 | 同期制御装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2002290969A true JP2002290969A (ja) | 2002-10-04 |
JP3958531B2 JP3958531B2 (ja) | 2007-08-15 |
Family
ID=18941938
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001086580A Expired - Fee Related JP3958531B2 (ja) | 2001-03-26 | 2001-03-26 | 同期制御装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3958531B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008054159A (ja) * | 2006-08-28 | 2008-03-06 | Matsushita Electric Ind Co Ltd | 映像音声多重化装置 |
JP2009253744A (ja) * | 2008-04-08 | 2009-10-29 | Mitsubishi Electric Corp | 符号化装置、復号装置及び映像音声伝送システム |
US8229000B2 (en) | 2005-10-12 | 2012-07-24 | Nec Corporation | Moving image conversion method, moving image conversion apparatus, moving image conversion system, and server apparatus, and program |
JP2014138269A (ja) * | 2013-01-16 | 2014-07-28 | Fujitsu Ltd | 動画像多重化装置及び動画像多重化方法、ならびに多重化動画像復号装置及び多重化動画像復号方法 |
-
2001
- 2001-03-26 JP JP2001086580A patent/JP3958531B2/ja not_active Expired - Fee Related
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8229000B2 (en) | 2005-10-12 | 2012-07-24 | Nec Corporation | Moving image conversion method, moving image conversion apparatus, moving image conversion system, and server apparatus, and program |
JP2008054159A (ja) * | 2006-08-28 | 2008-03-06 | Matsushita Electric Ind Co Ltd | 映像音声多重化装置 |
JP2009253744A (ja) * | 2008-04-08 | 2009-10-29 | Mitsubishi Electric Corp | 符号化装置、復号装置及び映像音声伝送システム |
JP2014138269A (ja) * | 2013-01-16 | 2014-07-28 | Fujitsu Ltd | 動画像多重化装置及び動画像多重化方法、ならびに多重化動画像復号装置及び多重化動画像復号方法 |
Also Published As
Publication number | Publication date |
---|---|
JP3958531B2 (ja) | 2007-08-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3976759B2 (ja) | 音声信号と映像信号を同期させる装置 | |
JP3932059B2 (ja) | 信号処理装置 | |
JP4481444B2 (ja) | 画像符号化装置 | |
JP2001358685A (ja) | 同期装置および同期方法 | |
JP3644995B2 (ja) | 符号化伝送方式におけるタイムスタンプ値演算方法 | |
US6233695B1 (en) | Data transmission control system in set top box | |
JP4903930B2 (ja) | 信号処理装置 | |
JP3958531B2 (ja) | 同期制御装置 | |
JP3893643B2 (ja) | 信号多重化方法およびそれを用いた伝送信号生成装置 | |
KR20000055875A (ko) | 디지털 방송 수신기의 오디오/비디오 신호 동기화 방법 | |
JP2002176643A (ja) | 映像・音声復号処理における映像・音声の同期再生方式 | |
JP2004015553A (ja) | 同期制御方法と装置およびそれを用いた同期再生装置およびテレビジョン受信装置 | |
US7903774B2 (en) | Method for creating a system clock in a receiver device and corresponding receiver device | |
KR20030082117A (ko) | 디지털 방송 수신기에서의 오디오/비디오 립 싱크 제어 방법 | |
KR100240331B1 (ko) | 디코더 시스템의 비디오/오디오 동기화 장치 | |
JP3744514B2 (ja) | データ伝送装置 | |
KR0154005B1 (ko) | 시스템 부호화기를 위한 재생시간정보 발생장치 | |
JPH11262001A (ja) | 符号化伝送方式におけるタイムスタンプ値演算方法 | |
JP2001111610A (ja) | 情報データ伝送システムの受信装置 | |
JP2010141498A (ja) | 映像受信装置及び映像送信装置 | |
KR0138123B1 (ko) | 엠피이지-2(mpeg-2) 시스템에서 타임 스템프를 코팅하는 장치 | |
JPH11261545A (ja) | 映像・音声信号伝送システム | |
JP2010028642A (ja) | 画像伝送システム | |
JP2005027006A (ja) | データ伝送装置 | |
JP2000049726A (ja) | 多重化装置及び方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20041202 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20061031 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061207 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070109 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070208 |
|
A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20070328 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070417 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070510 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100518 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130518 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130518 Year of fee payment: 6 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |