JP4197641B2 - 画像符号化方法 - Google Patents

Description

本発明は、プログレッシブ画像を符号化する画像符号化方法に関し、特に原画像が映画信号である部分およびＮＴＳＣ信号である部分の少なくとも一方を含むプログレッシブ画像信号を符号化する画像符号化方法に関する。

近年、音声、画像、およびその他の画素値等の情報を統合的に扱うマルチメディア時代を迎え、従来からの情報メディア、つまり新聞、雑誌、テレビ、ラジオ、電話等の情報を人に伝達する手段がマルチメディアの対象として取り上げられるようになってきた。一般に、マルチメディアとは、文字だけでなく、図形、音声、特に画像等を同時に関連づけて表すことをいうが、上記従来の情報メディアをマルチメディアの対象とするには、その情報をディジタル形式として表すことが必須条件となる。

ところが、上記各情報メディアの持つ情報量をディジタル情報量として見積もってみると、文字の場合１文字当たりの情報量は１〜２バイトであるのに対し、音声の場合１秒当たり６４Ｋｂｉｔｓ（電話品質）、さらに動画については１秒当たり１００Ｍｂｉｔｓ（現行テレビ受信品質）以上の情報量が必要となり、上記情報メディアでその膨大な情報をディジタル形式でそのまま扱うことは現実的では無い。例えば、テレビ電話は、６４Ｋｂｉｔ／ｓ〜１．５Ｍｂｉｔｓ／ｓの伝送速度を持つサービス総合ディジタル網（ＩＳＤＮ：Ｉｎｔｅｇｒａｔｅｄ Ｓｅｒｖｉｃｅｓ Ｄｉｇｉｔａｌ Ｎｅｔｗｏｒｋ）によってすでに実用化されているが、テレビカメラにより撮影された映像の情報をそのままＩＳＤＮで送ることは不可能である。

そこで、必要となってくるのが情報の圧縮技術であり、例えば、テレビ電話の場合、ＩＴＵ−Ｔ（国際電気通信連合 電気通信標準化部門）で国際標準化されたＨ．２６１やＨ．２６３規格の動画圧縮技術が用いられている。また、ＭＰＥＧ−１規格の情報圧縮技術によると、通常の音楽用ＣＤ（コンパクト・ディスク）に音声情報とともに画像情報を入れることも可能となる。

ここで、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）とは、動画像信号圧縮の国際規格であり、ＭＰＥＧ−１は、動画像信号を１．５Ｍｂｐｓまで、つまりテレビ信号の情報を約１００分の１にまで圧縮する規格である。また、ＭＰＥＧ−１規格を対象とする伝送速度が主として約１．５Ｍｂｐｓに制限されていることから、さらなる高画質化の要求をみたすべく規格化されたＭＰＥＧ−２では、動画像信号が２〜１５Ｍｂｐｓに圧縮される。さらに現状では、ＭＰＥＧ−１、ＭＰＥＧ−２と標準化を進めてきた作業グループ（ＩＳＯ／ＩＥＣ ＪＴＣ１／ＳＣ２９／ＷＧ１１）によって、ＭＰＥＧ−１、ＭＰＥＧ−２を上回る圧縮率を達成し、更に物体単位で符号化・復号化・操作を可能とし、マルチメディア時代に必要な新しい機能を実現するＭＰＥＧ−４が規格化された。ＭＰＥＧ−４では、当初、低ビットレートの符号化方法の標準化を目指して進められたが、現在はインタレース画像も含む高ビットレートも含む、より汎用的な符号化に拡張されている。

動画圧縮技術を用いたサービスの一つとして、現在、地上波ディジタルテレビ放送の準備が進められている。このサービスでは、家庭用ＴＶなどの固定受信端末向けの高品位放送だけでなく、携帯受信端末向けの簡易動画放送も予定されている。携帯受信端末向け放送の運用ガイドラインでは、ＱＶＧＡ（横３２０画素、高さ２４０画素）サイズのプログレッシブ画像を、１５フレーム／秒以下のサンプリングレートで符号化し放送することが定められている。

プログレッシブ画像を符号化・伝送するサービスとしては、インターネットを利用した動画像ストリーミングや動画像データのダウンロードなども考えられる。
これらのプログレッシブ画像符号化を行うサービスにおいて、過去のテレビ放送や固定受信端末向け放送のコンテンツを再利用するためには、ＮＴＳＣ信号などのインタレース画像信号からプログレッシブ画像信号を生成する必要がある。図１７は、ＮＴＳＣ信号からプログレッシブ画像信号へ変換する一例である。図中の丸付き数字は、原画像であるＮＴＳＣ信号のフレーム番号を表している。ＮＴＳＣ信号は、例えば一方のフィールド画像をサイズ変換することにより、３０フレーム／秒のプログレッシブ画像に変換することができる。

図１８は、プログレッシブ画像を符号化する従来の画像符号化装置の一例を表すブロック図である。この画像符号化装置は、インタレース画像信号のコンテンツを再利用する場合、画像符号化装置の外部で予めプログレッシブ画像へ変換してからプログレッシブ画像信号１０１として画像符号化装置へ入力する構成としている。図１８における従来の画像符号化装置は、第１の所定のサンプリングレート、例えば３０フレーム／秒で入力されたプログレッシブ画像信号１０１を、一定間隔でサンプリングしなおして第２の所定のサンプリングレート、例えば１５フレーム／秒に変換するサンプリング変換器１０２ｂと、第２の所定のサンプリングレートに変換された画像信号８０１を符号化し画像符号化データを出力する画像符号化器１０４を有している。この従来の画像符号化装置は、サンプリング変換器１０２ｂがプログレッシブ画像信号１０１を一定のフレーム間隔でサンプリングして第２の所定のサンプリングレートへ変換し、画像符号化器１０４がサンプリング変換後のプログレッシブ画像信号８０１を符号化して、画像符号化データ８０２を出力している。

ところが、過去のテレビ放送や固定受信端末向け放送のコンテンツには、原画像がＮＴＳＣ信号の部分、すなわち元々３０フレーム／秒のＮＴＳＣ信号で作成された部分（以下、非テレシネ画像と呼ぶ）と、原画像が映画信号の部分、すなわち元々２４フレーム／秒の映画信号で作成された部分（以下、テレシネ画像と呼ぶ）とが混在している場合がある。

テレシネ画像部分は、テレビで放送するために２４フレーム／秒の映画信号から３０フレーム／秒のＮＴＳＣ信号へ変換（以下、テレシネ変換と呼ぶ）されている。図１９は、映画信号をテレシネ画像信号（インタレース）へ、さらにテレシネ画像信号をプログレッシブ画像信号へ変換する一例である。図中の丸付き数字は、原画像である映画信号のフレーム番号を表している。テレシネ変換は、元の映画信号のフレームに対応するフィールドを３、２、３、２のリズムで繰り返すことにより、図１９に示すようなテレシネ画像へ変換する。このようなテレシネ画像から、一方のフィールド、例えばトップフィールドを元にプログレッシブ画像へ変換すると、図１９に示すように周期的に同じ絵柄（フレーム）を繰り返すことになる。このようにして生成されたプログレッシブ画像を３０フレーム／秒で再生した場合、見かけ上のフレーム表示速度の揺らぎがテレシネ画像に比べて大きくなり、動きに違和感が生じてしまう。また、２フレーム間隔でサンプリングして１５フレーム／秒で再生した場合、見かけ上のフレーム表示速度の揺らぎが一層大きくなり、動きの違和感はさらに大きくなる。

よって、このようなプログレッシブ画像信号を、図１８における従来の画像符号化装置で符号化すると、動きに違和感がある画像符号化データとなってしまう。
また、従来の画像符号化装置には、テレシネ画像と非テレシネ画像が混在するインタレース画像データを入力し、テレシネ画像部分には逆テレシネ変換を施し、フィールドの繰返しを表すフラグを用いるなどしてインタレース画像信号として符号化しているものもある（例えば、特許文献１参照）。
特開平１１−２５２５１３号公報（第５−１９頁、第２図）

しかしながら、特許文献１における従来の符号化方法は入力画像信号をインタレース画像信号として符号化する方法であるため、プログレッシブ画像信号の符号化には適用できないという問題がある。
また、上記のように、図１８における従来の符号化装置は、常に同じサンプリングレートで符号化を行うため、原画像が映画信号とＮＴＳＣ信号である部分が混在する入力画像信号をプログレッシブ画像信号として符号化すると、動きに違和感が生じてしまうという問題がある。

そこで、本発明は上記の事情に鑑みてなされたものであり、原画像が映画信号とＮＴＳＣ信号とである部分が混在する入力画像信号を、動きの違和感を解消或いは抑制するようにプログレッシブ画像として効率よく符号化することができる画像符号化方法を提供することを目的とする。

上記目的を達成するため、本発明に係る画像符号化方法は、原画像が映画信号である部分およびテレビ放送用のＮＴＳＣ信号である部分の少なくとも一方を含むプログレッシブ画像信号を符号化する画像符号化方法であって、前記プログレッシブ画像信号の原画像が映画信号である部分に対しては第１の方法で、前記プログレッシブ画像信号の原画像がＮＴＳＣ信号である部分に対しては第２の方法でサンプリングを行うサンプリングステップと、前記サンプリングステップによりサンプリングされたフレームを符号化する符号化ステップとを含むことを特徴とする。

これによって、原画像が映画信号である部分とＮＴＳＣ信号である部分とが混在するプログレッシブ画像の符号化において、それぞれの原画像に適したサンプリングの方法、例えば原画像に適したサンプリングレート、或いはサンプリングのリズムでサンプリングした後、符号化することができるので、動きの違和感を解消或いは抑制することができる。
ここで、前記プログレッシブ画像信号の原画像が映画信号である部分は、原画像である前記映画信号をＮＴＳＣ信号に変換された後、前記ＮＴＳＣ信号をプログレッシブ画像信号に変換された、所定フレームごとに同一フレームを２フレーム連続して含む信号であり、前記第１の方法では、前記２フレームのうち１フレームを取り除き、等間隔のサンプリングを行ってもよい。

なお、同一フレームとは、原画像が同一のフレームであるフレームのことを示している。
また、前記第１の方法では、１秒あたりのフレーム数が２４の約数となる等間隔のサンプリングを行うことが好ましい。
これによって、原画像が映画信号である部分とＮＴＳＣ信号である部分とが混在するプログレッシブ画像の符号化において、原画像が映画信号である部分を原画像のサンプリングレートの約数で符号化することができるので、見かけ上の表示速度の揺らぎを無くすことができ、動きの違和感を解消或いは抑制することができる。

また、前記プログレッシブ画像信号の原画像が映画信号である部分は、原画像である前記映画信号をＮＴＳＣ信号に変換された後、前記ＮＴＳＣ信号をプログレッシブ画像信号に変換された、所定フレームごとに同一フレームを２フレーム連続して含む信号であり、
前記第１の方法では、前記同一フレームに基づいてフレーム間隔が所定の不等間隔となるようにサンプリングを行ってもよい。

これによって、原画像が映画信号である部分とＮＴＳＣ信号である部分とが混在するプログレッシブ画像の符号化において、原画像が映画信号である部分について見かけ上の表示速度の揺らぎを抑制することができるので、動きの違和感を解消或いは抑制することができる。また、簡単なサンプリング処理で動きの違和感を解消或いは抑制を実現することができる。

また、前記画像符号化方法は、さらに、前記プログレッシブ画像信号に基づいて前記プログレッシブ画像信号の各フレームの原画像が映画信号であるかＮＴＳＣ信号であるかを検出する原画像判定ステップを含んでもよい。
これによって、原画像が映画信号である部分とＮＴＳＣ信号である部分とが混在するプログレッシブ画像の符号化において、入力されたプログレッシブ画像信号からこのプログレッシブ画像信号の原画像が映画信号であるかＮＴＳＣ信号であるかを示すテレシネ変換情報を検出することができるので、ユーザがテレシネ変換情報を用意する必要が無く、ユーザの作業を軽減できる。

なお、本発明は、このような画像符号化方法として実現することができるだけでなく、このような画像符号化方法が含む特徴的なステップを手段として備える画像符号化装置として実現することもできる。また、それらのステップをコンピュータに実行させるプログラムとして実現したり、前記画像符号化方法により生成された画像符号化データとして実現したりすることもできる。そして、そのようなプログラムおよび画像符号化データは、ＣＤ−ＲＯＭ等の記録媒体やインターネット等の伝送媒体を介して配信することができるのは言うまでもない。

本発明に係る画像符号化方法によれば、原画像が映画信号である部分とＮＴＳＣ信号である部分とが混在するプログレッシブ画像の符号化において、それぞれの原画像に適したサンプリングの方法でサンプリングした後、符号化することができるので、動きの違和感を解消或いは抑制することができる。
よって、本発明により、原画像が映画信号である部分とＮＴＳＣ信号である部分とが混在するプログレッシブ画像を、動きの違和感を解消或いは抑制して符号化することが可能となり、原画像が映画信号である部分とＮＴＳＣ信号である部分とが混在するプログレッシブ画像を符号化する機会が増加してきた今日における実用的価値は極めて高い。

本発明の実施の形態について、図面を参照しながら詳細に説明する。
（実施の形態１）
本発明の実施の形態１について、図１から図４を用いて説明する。
図１は、本発明に係る実施の形態１における画像符号化装置の構成を示すブロック図である。

本実施の形態１の画像符号化装置は、符号化対象フレームのサンプリングを外部からの信号に応じて切替え可能とし、原画像が映画信号である部分とＮＴＳＣ信号である部分が混在するプログレッシブ画像に対して、それぞれの部分に適したサンプリングで符号化できる構成としたものである。
図１８に示す従来の画像符号化装置とは、サンプリング変換器１０２ａが、テレシネ変換情報１０６に応じてプログレッシブ画像信号１０１のサンプリングを変換している点が異なる。テレシネ変換情報１０６は、本実施の形態１の画像符号化装置の外部から入力される情報であり、プログレッシブ画像信号１０１の各フレームに対応する原画像のテレシネ変換状況を表す情報である。具体的には、プログレッシブ画像信号１０１の各フレームの原画像が映画信号であるかＮＴＳＣ信号であるかを示すテレシネ識別信号と、繰り返しているフレームであるか否かを示すフレーム繰返し信号とを有する情報である。その他の構成、動作については、図１８の従来の画像符号化装置と同様であるので、ここではサンプリング変換器１０２ａについてのみ説明する。

サンプリング変換器１０２ａは、テレシネ変換情報１０６のテレシネ識別信号がテレシネ画像を示している時には、ＮＴＳＣ信号をプログレッシブ画像表示するのに適した第１のサンプリングレート（例えば３００００／１００１フレーム／秒）で入力されるプログレッシブ画像信号１０１を、テレシネ変換情報１０６のフレーム繰返し信号に応じて映画信号をプログレッシブ画像表示するのに適した第２のサンプリングレート（例えば２４０００／１００１フレーム／秒）に変換する。一方、テレシネ変換情報１０６が非テレシネ画像を示している時には、サンプリング変換器１０２ａは、第１のサンプリングレートで入力されるプログレッシブ画像信号１０１を、ＮＴＳＣ信号をプログレッシブ画像表示するのに適した第３のサンプリングレート（例えば３００００／１００１フレーム／秒）に変換し、サンプリング変換後のプログレッシブ画像信号１０３を出力する。

図２は、本実施の形態１におけるサンプリング変換器１０２ａの構成の一例を示す図である。
図２の例において、サンプリング変換器１０２ａは、遅延器１〜遅延器４とスイッチ２０５、２０６とを備えている。テレシネ変換情報１０６のテレシネ識別信号がテレシネ画像を示している場合、スイッチ２０５は、テレシネ変換情報１０６のフレーム繰返し信号が繰返しを示している時に遅延器１を選択し、以降フレーム毎に遅延器１、遅延器２、遅延器３、遅延器４、グラウンド出力２０７の順に切替えを行い、入力されたプログレッシブ画像信号１０１をフレーム毎に出力する。このとき、スイッチ２０６は、テレシネ変換情報１０６のフレーム繰返し信号が繰返しを示している時にスイッチ２０５と同期して遅延器１を選択し、以降スイッチ２０５の切替えタイミングより遅延するサンプリング変換後のフレーム時間間隔毎に遅延器１、遅延器２、遅延器３、遅延器４の順に切替えを行い、サンプリング変換後のプログレッシブ画像信号１０３を出力する。

一方、テレシネ変換情報１０６のテレシネ識別信号が非テレシネ画像を示している場合、スイッチ２０５は、入力されたプログレッシブ画像信号１０１を遅延器１へ出力する。このとき、スイッチ２０６は、遅延器１の出力をサンプリング変換後のプログレッシブ画像信号１０３として出力する。なお、このときスイッチ２０５およびスイッチ２０６は、遅延器１以外であっても同じ遅延器を選択して継続して使用すればよい。

図３は、原画像がテレシネ画像である場合の、図２のサンプリング変換器１０２ａによるサンプリング変換の概念を表す図である。図３において、遅延１〜４はそれぞれ遅延器１〜遅延器４によって生じる遅延を表している。遅延１をΔｔ１秒として、遅延ｋの大きさΔｔｋを、Δｔｋ＝Δｔ１＋（ｋ−１）×（１／ＯＦＲ−１／ＩＦＲ）とすると、サンプリング変換後の各フレームの時間間隔が一定とすることができる。ここで、ｋは１〜４の整数、ＯＦＲはサンプリング変換後のサンプリングレート（単位：フレーム／秒）、ＩＦＲはサンプリング変換前のサンプリングレート（単位：フレーム／秒）を表すものとする。

なお、入力となるプログレッシブ画像信号の原画像には、常に映画信号とＮＴＳＣ信号が混在している必要は無く、どちらか一方のみで構成されている原画像から変換したプログレッシブ画像が入力画像であっても実施可能である。
また、上記Δｔ１の大きさは、０秒であっても構わない。
また、上記の説明では、サンプリング変換器１０２ａにおいて、テレシネ変換情報１０６に応じて２４０００／１００１フレーム／秒或いは３００００／１００１フレーム／秒に変換する例を説明したが、必ずしもこれらのサンプリングレートに変換する必要は無く、画像符号化データ１０５の情報量を削減するためにフレーム間引きを行い、２４０００／（１００１×ｎ）フレーム／秒或いは３００００／（１００１×ｎ）フレーム／秒（ｎは２以上の整数）としても構わない。

また、第１から第３のサンプリングレートは、上記の値に限定されるものではなく、例えば、第１のサンプリングレートが３０フレーム／秒、第２のサンプリングレートが２４／ｍフレーム／秒、第３のサンプリングレートが３０／ｍフレーム／秒（ｍは１以上の整数）であっても実現可能である。
また、本実施の形態１では、サンプリング変換器１０２ａより出力されるサンプリング変換後のプログレッシブ画像信号１０３は、入力されるプログレッシブ画像信号１０１の原画像が映画信号である部分とＮＴＳＣ信号である部分とにおいて、サンプリングレートが相違することになるが、特に問題となるものではない。画像符号化器１０４がサンプリング変換後のプログレッシブ画像信号１０３を符号化する際に、サンプリングレートを示す情報は、例えばＭＰＥＧ−４を用いて符号化するのであれば、図４に示すようにＶＯＬ（Ｖｉｓｕａｌ Ｏｂｊｅｃｔ Ｌａｙｅｒ）に含まれるＶＯＬヘッダ内のＶＯＰ（Ｖｉｄｅｏ Ｏｂｊｅｃｔ Ｐｌａｎｅ）タイムインクリメントレゾリューション（ＶＯＰＴＩＲ）に記載される。なお、ＶＯＬはＶＯ（Ｖｉｄｅｏ Ｏｂｊｅｃｔ）に、そしてＶＯは全体の動画シーケンスであるＶＯＳ（Ｖｉｓｕａｌ Ｏｂｊｅｃｔ Ｓｅｑｕｅｎｃｅ）に含まれる。

以上のようにして、本実施の形態１の画像符号化装置によれば、原画像が映画信号である部分とＮＴＳＣ信号である部分が混在するプログレッシブ画像信号であっても、外部から与えられるテレシネ変換情報１０６に応じて、原画像が映画信号の部分については原画像である映画信号のサンプリングレートの約数、具体的には２４０００／（１００１×ｎ）フレーム／秒或いは２４／ｍフレーム／秒（ｎ、ｍは１以上の整数）で符号化でき、原画像がＮＴＳＣ信号の部分については非テレシネ素材をプログレッシブ画像表示するのに適したサンプリングレート、具体的には３００００／（１００１×ｎ）フレーム／秒或いは３０／ｍフレーム／秒（ｎ、ｍは１以上の整数）で符号化できるようにサンプリングを切替え可能であるので、動きの違和感を解消或いは抑制することができる。

（実施の形態２）
本発明の実施の形態２について、図５から図８を用いて説明する。
本実施の形態２の画像符号化装置は、本発明の実施の形態１の画像符号化装置のサンプリング変換器を、選択的なフレームのサンプリングによるサンプリング変換器に置き換えたものであり、原画像が映画信号である部分とＮＴＳＣ信号である部分が混在するプログレッシブ画像信号に対して、それぞれの部分に適したサンプリングのリズムで符号化できる構成としたものである。

図５は、本実施の形態２におけるサンプリング変換器１０２ａの構成の一例を示す図である。本実施の形態２における画像符号化装置は、本発明の実施の形態１のサンプリング変換器１０２ａの構成を図５に示す構成に置き換えたものである。その他の構成は、本発明の実施の形態１と同様であるので、ここでは本実施の形態におけるサンプリング変換器１０２ａの動作についてのみ説明する。

本実施の形態２におけるサンプリング変換器１０２ａは、テレシネ変換情報１０６のテレシネ識別信号がテレシネ画像を示していれば、ＮＴＳＣ信号をプログレッシブ画像表示するのに適した第１のサンプリングレート（例えば３００００／１００１フレーム／秒）で入力されるプログレッシブ画像信号１０１を、テレシネ変換情報１０６のフレーム繰返し信号に応じて、映画信号を表示するのに適したフレーム間隔が不均等な第１のリズムを用いたサンプリングにより、第２のサンプリングレート（例えば２４０００／２００２フレーム／秒）に変換し、テレシネ変換情報１０６が非テレシネ画像を示していれば、第１のサンプリングレートで入力されるプログレッシブ画像信号１０１を、ＮＴＳＣ信号をプログレッシブ画像表示するのに適した第２のリズムを用いたサンプリングにより、第３のサンプリングレート（例えば３００００／２００２フレーム／秒）に変換し、サンプリング変換後のプログレッシブ画像信号１０３を出力する。

本実施の形態２におけるサンプリング変換器１０２ａの一例を、図５、図６を用いて具体的に説明する。図６は、原画像がテレシネ画像である場合の、図５のサンプリング変換器１０２ａによるサンプリング変換の概念を表す図である。

図５において、スイッチ４０１は、テレシネ変換情報１０６のテレシネ識別信号がテレシネ画像を示していれば、テレシネ変換情報１０６のフレーム繰返し信号が繰返しを示している時に、入力されたプログレッシブ画像信号１０１の１フレーム（図６に示す例ではフレーム番号１のフレームのうち表示順で後のフレーム）をサンプリング変換後のプログレッシブ画像信号１０３として出力し、次フレーム（フレーム番号２のフレーム）はグラウンド出力４０２に切替えを行い、その次フレーム（フレーム番号３のフレーム）はプログレッシブ画像信号１０３として出力するというように２フレーム間隔で、その後３フレーム間隔、２フレーム間隔、３フレーム間隔のリズムでプログレッシブ画像信号１０１のフレームをサンプリングし、サンプリング変換後のプログレッシブ画像信号１０３として出力する。すなわち、図６に示すようにフレーム番号１、３、５、７、９のフレームがサンプリングされ、サンプリング変換後のプログレッシブ画像信号１０３として出力される。このように不均等なサンプリングをおこなうことにより、均等なサンプリングを行う場合に比べて、見かけ上のフレーム更新速度の揺らぎを抑制することができる。

一方、テレシネ変換情報１０６のテレシネ識別信号が非テレシネ画像を示している時には、スイッチ４０１は、フレームごとに切替えを行い、入力されたプログレッシブ画像信号１０１を２フレーム間隔のリズムでプログレッシブ画像信号１０１のフレームをサンプリングし、サンプリング変換後のプログレッシブ画像信号１０３として出力する。

なお、本実施の形態において、テレシネ変換情報１０６のテレシネ識別信号がテレシネ画像を示している場合に、サンプリング変換器１０２ａが行うサンプリング変換は、図６に示す例に限られるものではなく、例えば図７、図８に示すような２つのパターンでサンプリング変換を行っても構わない。まず、図７に示すパターンでは、スイッチ４０１は、テレシネ変換情報１０６のフレーム繰返し信号が繰返しを示している時に、入力されたプログレッシブ画像信号１０１の１フレーム（図７に示すフレーム番号１のフレームのうち表示順で前のフレーム）をサンプリング変換後のプログレッシブ画像信号１０３として出力し、次フレーム（フレーム番号１のフレームのうち表示順で後のフレーム）およびその次フレーム（フレーム番号２のフレーム）はグラウンド出力４０２に切替えを行い、その次フレーム（フレーム番号３のフレーム）はプログレッシブ画像信号１０３として出力するというように３フレーム間隔で、その後２フレーム間隔、３フレーム間隔、２フレーム間隔のリズムでプログレッシブ画像信号１０１のフレームをサンプリングし、サンプリング変換後のプログレッシブ画像信号１０３として出力する。すなわち、図７に示すようにフレーム番号１、３、５、７、９のフレームがサンプリングされ、サンプリング変換後のプログレッシブ画像信号１０３として出力される。

また、図８に示すパターンでは、スイッチ４０１は、テレシネ変換情報１０６のフレーム繰返し信号が繰返しを示している時に、入力されたプログレッシブ画像信号１０１の１フレーム（図８に示すフレーム番号１のフレームのうち表示順で後のフレーム）はグラウンド出力４０２に切替えを行い、次フレーム（フレーム番号２のフレーム）はプログレッシブ画像信号１０３として出力し、その次フレーム（フレーム番号３のフレーム）はグラウンド出力４０２に切替えを行い、その次フレーム（フレーム番号４のフレーム）はプログレッシブ画像信号１０３として出力するというように２フレーム間隔で、その後３フレーム間隔、２フレーム間隔、３フレーム間隔のリズムでプログレッシブ画像信号１０１のフレームをサンプリングし、サンプリング変換後のプログレッシブ画像信号１０３として出力する。すなわち、図８に示すようにフレーム番号２、４、６、８のフレームがサンプリングされ、サンプリング変換後のプログレッシブ画像信号１０３として出力される。

また、入力となるプログレッシブ画像信号の原画像には、常に映画信号とＮＴＳＣ信号が混在している必要は無く、どちらか一方のみで構成されている原画像から変換したプログレッシブ画像が入力画像であっても実施可能である。
また、第１から第３のサンプリングレートは、上記の値に限定されるものではなく、例えば、第１のサンプリングレートが３０フレーム／秒、第２のサンプリングレートが１２フレーム／秒、第３のサンプリングレートが１５フレーム／秒であっても実現可能である。

以上のようにして、本実施の形態２の画像符号化装置によれば、原画像が映画信号である部分とＮＴＳＣ信号である部分が混在するプログレッシブ画像信号であっても、外部から与えられるテレシネ変換情報１０６に応じて、原画像が映画信号の部分については映画信号を表示するのに適したサンプリングのリズム、具体的には２フレーム間隔、３フレーム間隔のサンプリングのリズムで符号化でき、原画像がＮＴＳＣ信号の部分については非テレシネ素材をプログレッシブ画像表示するのに適したサンプリングのリズム、具体的には２フレーム間隔のサンプリングのリズムで符号化できるようにサンプリングのリズムを切替え可能であるので、動きの違和感を解消或いは抑制することができる。

また、本実施の形態では、サンプリング変換前後において時間関係を変更していないので、例えば原画像が映画信号である部分とＮＴＳＣ信号である部分かを示すテレシネ変換情報１０６が誤っていたとしても、動きの違和感を抑制することができる。
また、本実施の形態では、画像符号化器１０４がサンプリング変換後のプログレッシブ画像信号１０３を符号化する際に、例えばＭＰＥＧ−４を用いて符号化するのであれば、同じＶＯＰタイムインクリメントレゾリューションでフレームの時刻を表現できるので、ＶＯＰタイムインクリメントレゾリューションの情報を変更する必要がなく、処理を簡略化することができる。

（実施の形態３）
本発明の実施の形態３について、図９から図１１を用いて説明する。
本実施の形態３の画像符号化装置は、本発明の実施の形態１或いは２の画像符号化装置にテレシネ画像判定手段を加えた構成としたものであり、原画像が映画信号である部分とＮＴＳＣ信号である部分が混在するプログレッシブ画像信号入力から、テレシネ変換情報１０６を検出することができる構成としたものである。

図９は、本発明に係る実施の形態３における画像符号化装置の構成を示すブロック図である。
本実施の形態３における画像符号化装置は、本発明の実施の形態１或いは２の画像符号化装置に、遅延器６０１とテレシネ画像判定器６０３とを加えて備えており、その他の構成は本発明の実施の形態１或いは２の画像符号化装置と同様であるので、ここでは遅延器６０１とテレシネ画像判定器６０３の動作についてのみ説明する。

図９に示す本実施の形態３の画像符号化装置において、テレシネ画像判定器６０３は、入力されたプログレッシブ画像信号１０１と、遅延器６０１によって１フレーム遅延されたプログレッシブ画像信号６０２に基づいて、原画像が映画信号の部分であるかＮＴＳＣ信号の部分であるかを判定し、原画像がテレシネ画像であると判定した場合は、プログレッシブ画像信号１０１と１フレーム遅延されたプログレッシブ画像信号６０２が一致するか否かを判定し、判定結果をテレシネ変換情報１０６として出力する。サンプリング変換器１０２ａには、本発明の実施の形態１或いは２の画像符号化装置とは異なり、１フレーム遅延されたプログレッシブ画像信号６０２がプログレッシブ画像信号１０１の代わりに入力される。

本実施の形態３におけるテレシネ画像判定器６０３の一例を、図１０を用いて具体的に説明する。
図１０の画像符号化装置は、図９の画像符号化装置におけるテレシネ画像判定器６０３を、具体的な構成の一例に置き換えたものである。図１０において、類似度計算器７０１は、入力されたプログレッシブ画像信号１０１と、遅延器６０１により１フレーム遅延されたプログレッシブ画像信号６０２とから、２つの連続するフレームの類似度７０２を計算する。一致検出器７０３は、類似度７０２に基づき２つの連続するフレームが一致するか（繰り返しているか）否かを判定し、一致信号７０４を出力する。テレシネ画像検出器７０５は、一致信号７０４が一致を示す周期と、原画像が映画信号であることを示す周期（例えば、３０フレームのプログレッシブ画像の場合５フレーム）が一致しているか否かを評価し、一致していれば映画信号と判断し、一致していなければＮＴＳＣ信号と判断する。テレシネ画像検出器７０５は、上記判断結果と一致信号７０４をテレシネ変換情報１０６として出力する。

このように構成されたテレシネ画像判定器６０３の動作について説明する。図１１はテレシネ画像判定器６０３の動作を示すフローチャートである。
類似度計算器７０１は、入力されたプログレッシブ画像信号１０１のフレームと、遅延器６０１により１フレーム遅延されたプログレッシブ画像信号６０２のフレームとの２つの連続するフレームの類似度７０２を計算し、一致検出器７０３へ出力する（ステップＳ１０１）。ここで、類似度計算器７０１は、２つのフレームの画素値について差分絶対値和、差分２乗和、差分分散などを用いて２つのフレームの類似度を計算する。次に、一致検出器７０３は、入力された類似度７０２に基づいて２つの連続するフレームが一致するか（繰り返しているか）否かを判定する（ステップＳ１０２）。ここで、一致検出器７０３は、類似度７０２と所定の閾値とを大小比較することで一致判定を行う。この判定の結果、２つの連続するフレームが一致する場合（ステップＳ１０２でＹＥＳ）には、一致検出器７０３は一致信号７０４を“Ｈｉ”として出力する（ステップＳ１０３）。一方、２つの連続するフレームが一致しない場合（ステップＳ１０２でＮＯ）には、一致検出器７０３は一致信号７０４を“Ｌｏｗ”として出力する（ステップＳ１０４）。

次に、テレシネ画像検出器７０５は、一致信号７０４の一致を示す“Ｈｉ”が現れる周期と、原画像が映画信号であることを示す周期（例えば、３０フレームのプログレッシブ画像の場合５フレーム）が一致しているか否かを判定する（ステップＳ１０５）。この判定の結果、周期が一致していれば（ステップＳ１０５でＹＥＳ）、映画信号と判定する（ステップＳ１０６）。一方、周期が一致していなければ（ステップＳ１０５でＮＯ）、ＮＴＳＣ信号と判定する（ステップＳ１０７）。そして、テレシネ画像検出器７０５は、上記判定結果と一致信号７０４とをテレシネ変換情報１０６として出力する（ステップＳ１０８）。

なお、入力となるプログレッシブ画像信号の原画像には、常に映画信号とＮＴＳＣ信号が混在している必要は無く、どちらか一方のみで構成されている原画像から変換したプログレッシブ画像が入力画像であっても実施可能である。

また、類似度計算器７０１は、２つのフレームの画素値について差分絶対値和、差分２乗和、差分分散などを用いて２つのフレームの類似度を計算するとしたが、２つのフレームの類似度を表す指標であれば他の指標でも実現可能である。また、一致検出器７０３は、類似度７０２と所定の閾値とを大小比較することで一致判定を行うとしたが、類似度７０２から２つのフレームの一致を判定できる方法であれば他の方法でも実現可能である。

以上のようにして、本実施の形態３の画像符号化装置によれば、入力されたプログレッシブ画像からテレシネ変換情報を生成可能となり、原画像が映画信号である部分とＮＴＳＣ信号である部分が混在するプログレッシブ画像信号のみに基づき、原画像が映画信号の部分については映画信号を表示するのに適したサンプリングレート或いはサンプリングのリズムで符号化でき、原画像がＮＴＳＣ信号の部分についてはＮＴＳＣ信号をプログレッシブ画像表示するのに適したサンプリングレート或いはサンプリングのリズムで符号化できるように切替え可能であるので、動きの違和感を解消或いは抑制することができる。

（実施の形態４）
さらに、上記各実施の形態で示した画像符号化方法を実現するためのプログラムを、フレキシブルディスク等の記録媒体に記録するようにすることにより、上記各実施の形態で示した処理を、独立したコンピュータシステムにおいて簡単に実施することが可能となる。

図１２は、上記各実施の形態の画像符号化方法を、フレキシブルディスク等の記録媒体に記録されたプログラムを用いて、コンピュータシステムにより実施する場合の説明図である。
図１２（ｂ）は、フレキシブルディスクの正面からみた外観、断面構造、及びフレキシブルディスクを示し、図１２（ａ）は、記録媒体本体であるフレキシブルディスクの物理フォーマットの例を示している。フレキシブルディスクＦＤはケースＦ内に内蔵され、該ディスクの表面には、同心円状に外周からは内周に向かって複数のトラックＴｒが形成され、各トラックは角度方向に１６のセクタＳｅに分割されている。従って、上記プログラムを格納したフレキシブルディスクでは、上記フレキシブルディスクＦＤ上に割り当てられた領域に、上記プログラムが記録されている。

また、図１２（ｃ）は、フレキシブルディスクＦＤに上記プログラムの記録再生を行うための構成を示す。画像符号化方法を実現する上記プログラムをフレキシブルディスクＦＤに記録する場合は、コンピュータシステムＣｓから上記プログラムをフレキシブルディスクドライブＦＤＤを介して書き込む。また、フレキシブルディスク内のプログラムにより画像符号化方法を実現する上記画像符号化方法をコンピュータシステム中に構築する場合は、フレキシブルディスクドライブによりプログラムをフレキシブルディスクから読み出し、コンピュータシステムに転送する。

なお、上記説明では、記録媒体としてフレキシブルディスクを用いて説明を行ったが、光ディスクを用いても同様に行うことができる。また、記録媒体はこれに限らず、ＩＣカード、ＲＯＭカセット等、プログラムを記録できるものであれば同様に実施することができる。
さらにここで、上記各実施の形態で示した画像符号化方法の応用例とそれを用いたシステムを説明する。

図１３は、コンテンツ配信サービスを実現するコンテンツ供給システムex１００の全体構成を示すブロック図である。通信サービスの提供エリアを所望の大きさに分割し、各セル内にそれぞれ固定無線局である基地局ex１０７〜ex１１０が設置されている。
このコンテンツ供給システムex１００は、例えば、インターネットex１０１にインターネットサービスプロバイダex１０２および電話網ex１０４、および基地局ex１０７〜ex１１０を介して、コンピュータex１１１、ＰＤＡ（personal digital assistant）ex１１２、カメラex１１３、携帯電話ex１１４、カメラ付きの携帯電話ｅｘ１１５などの各機器が接続される。

しかし、コンテンツ供給システムex１００は図１３のような組合せに限定されず、いずれかを組み合わせて接続するようにしてもよい。また、固定無線局である基地局ex１０７〜ex１１０を介さずに、各機器が電話網ex１０４に直接接続されてもよい。
カメラex１１３はデジタルビデオカメラ等の動画撮影が可能な機器である。また、携帯電話は、ＰＤＣ（Personal Digital Communications）方式、ＣＤＭＡ（Code Division Multiple Access）方式、Ｗ−ＣＤＭＡ（Wideband-Code Division Multiple Access）方式、若しくはＧＳＭ（Global System for Mobile Communications）方式の携帯電話機、またはＰＨＳ（Personal Handyphone System）等であり、いずれでも構わない。

また、ストリーミングサーバex１０３は、カメラex１１３から基地局ex１０９、電話網ex１０４を通じて接続されており、カメラex１１３を用いてユーザが送信する符号化処理されたデータに基づいたライブ配信等が可能になる。撮影したデータの符号化処理はカメラex１１３で行っても、データの送信処理をするサーバ等で行ってもよい。また、カメラex１１６で撮影した動画データはコンピュータex１１１を介してストリーミングサーバex１０３に送信されてもよい。カメラex１１６はデジタルカメラ等の静止画、動画が撮影可能な機器である。この場合、動画データの符号化はカメラex１１６で行ってもコンピュータex１１１で行ってもどちらでもよい。また、符号化処理はコンピュータex１１１やカメラex１１６が有するＬＳＩex１１７において処理することになる。なお、動画像符号化・復号化用のソフトウェアをコンピュータex１１１等で読み取り可能な記録媒体である何らかの蓄積メディア（ＣＤ−ＲＯＭ、フレキシブルディスク、ハードディスクなど）に組み込んでもよい。さらに、カメラ付きの携帯電話ex１１５で動画データを送信してもよい。このときの動画データは携帯電話ex１１５が有するＬＳＩで符号化処理されたデータである。

このコンテンツ供給システムex１００では、ユーザがカメラex１１３、カメラex１１６等で撮影しているコンテンツ（例えば、音楽ライブを撮影した映像等）を上記実施の形態同様に符号化処理してストリーミングサーバex１０３に送信する一方で、ストリーミングサーバex１０３は要求のあったクライアントに対して上記コンテンツデータをストリーム配信する。クライアントとしては、上記符号化処理されたデータを復号化することが可能な、コンピュータex１１１、ＰＤＡex１１２、カメラex１１３、携帯電話ex１１４等がある。このようにすることでコンテンツ供給システムex１００は、符号化されたデータをクライアントにおいて受信して再生することができ、さらにクライアントにおいてリアルタイムで受信して復号化し、再生することにより、個人放送をも実現可能になるシステムである。

このシステムを構成する各機器の符号化、復号化には上記各実施の形態で示した画像符号化装置を用いるようにすればよい。
その一例として携帯電話について説明する。
図１４は、上記実施の形態で説明した画像符号化方法を用いた携帯電話ex１１５を示す図である。携帯電話ex１１５は、基地局ex１１０との間で電波を送受信するためのアンテナex２０１、ＣＣＤカメラ等の映像、静止画を撮ることが可能なカメラ部ex２０３、カメラ部ex２０３で撮影した映像、アンテナex２０１で受信した映像等が復号化されたデータを表示する液晶ディスプレイ等の表示部ex２０２、操作キーｅｘ２０４群から構成される本体部、音声出力をするためのスピーカ等の音声出力部ex２０８、音声入力をするためのマイク等の音声入力部ex２０５、撮影した動画もしくは静止画のデータ、受信したメールのデータ、動画のデータもしくは静止画のデータ等、符号化されたデータまたは復号化されたデータを保存するための記録メディアex２０７、携帯電話ex１１５に記録メディアex２０７を装着可能とするためのスロット部ex２０６を有している。記録メディアex２０７はＳＤカード等のプラスチックケース内に電気的に書換えや消去が可能な不揮発性メモリであるＥＥＰＲＯＭ（Electrically Erasable and Programmable Read Only Memory）の一種であるフラッシュメモリ素子を格納したものである。

さらに、携帯電話ex１１５について図１５を用いて説明する。携帯電話ex１１５は表示部ex２０２及び操作キーｅｘ２０４を備えた本体部の各部を統括的に制御するようになされた主制御部ex３１１に対して、電源回路部ex３１０、操作入力制御部ex３０４、画像符号化部ex３１２、カメラインターフェース部ex３０３、ＬＣＤ（Liquid Crystal Display）制御部ex３０２、画像復号化部ex３０９、多重分離部ex３０８、記録再生部ex３０７、変復調回路部ex３０６及び音声処理部ex３０５が同期バスex３１３を介して互いに接続されている。

電源回路部ex３１０は、ユーザの操作により終話及び電源キーがオン状態にされると、バッテリパックから各部に対して電力を供給することによりカメラ付ディジタル携帯電話ex１１５を動作可能な状態に起動する。
携帯電話ex１１５は、ＣＰＵ、ＲＯＭ及びＲＡＭ等でなる主制御部ex３１１の制御に基づいて、音声通話モード時に音声入力部ex２０５で集音した音声信号を音声処理部ex３０５によってディジタル音声データに変換し、これを変復調回路部ex３０６でスペクトラム拡散処理し、送受信回路部ex３０１でディジタルアナログ変換処理及び周波数変換処理を施した後にアンテナex２０１を介して送信する。また携帯電話機ex１１５は、音声通話モード時にアンテナex２０１で受信した受信データを増幅して周波数変換処理及びアナログディジタル変換処理を施し、変復調回路部ex３０６でスペクトラム逆拡散処理し、音声処理部ex３０５によってアナログ音声データに変換した後、これを音声出力部ex２０８を介して出力する。

さらに、データ通信モード時に電子メールを送信する場合、本体部の操作キーｅｘ２０４の操作によって入力された電子メールのテキストデータは操作入力制御部ex３０４を介して主制御部ex３１１に送出される。主制御部ex３１１は、テキストデータを変復調回路部ex３０６でスペクトラム拡散処理し、送受信回路部ex３０１でディジタルアナログ変換処理及び周波数変換処理を施した後にアンテナex２０１を介して基地局ex１１０へ送信する。

データ通信モード時に画像データを送信する場合、カメラ部ex２０３で撮像された画像データをカメラインターフェース部ex３０３を介して画像符号化部ex３１２に供給する。また、画像データを送信しない場合には、カメラ部ex２０３で撮像した画像データをカメラインターフェース部ex３０３及びＬＣＤ制御部ex３０２を介して表示部ex２０２に直接表示することも可能である。

画像符号化部ex３１２は、本願発明で説明した画像符号化装置を備えた構成であり、カメラ部ex２０３から供給された画像データを上記実施の形態で示した画像符号化装置に用いた符号化方法によって圧縮符号化することにより符号化画像データに変換し、これを多重分離部ex３０８に送出する。また、このとき同時に携帯電話機ex１１５は、カメラ部ex２０３で撮像中に音声入力部ex２０５で集音した音声を音声処理部ex３０５を介してディジタルの音声データとして多重分離部ex３０８に送出する。

多重分離部ex３０８は、画像符号化部ex３１２から供給された符号化画像データと音声処理部ex３０５から供給された音声データとを所定の方式で多重化し、その結果得られる多重化データを変復調回路部ex３０６でスペクトラム拡散処理し、送受信回路部ex３０１でディジタルアナログ変換処理及び周波数変換処理を施した後にアンテナex２０１を介して送信する。

データ通信モード時にホームページ等にリンクされた動画像ファイルのデータを受信する場合、アンテナex２０１を介して基地局ex１１０から受信した受信データを変復調回路部ex３０６でスペクトラム逆拡散処理し、その結果得られる多重化データを多重分離部ex３０８に送出する。
また、アンテナex２０１を介して受信された多重化データを復号化するには、多重分離部ex３０８は、多重化データを分離することにより画像データのビットストリームと音声データのビットストリームとに分け、同期バスex３１３を介して当該符号化画像データを画像復号化部ex３０９に供給すると共に当該音声データを音声処理部ex３０５に供給する。

次に、画像復号化部ex３０９は、画像データのビットストリームを上記実施の形態で示した符号化方法に対応した復号化方法で復号化することにより再生動画像データを生成し、これをＬＣＤ制御部ex３０２を介して表示部ex２０２に供給し、これにより、例えばホームページにリンクされた動画像ファイルに含まれる動画データが表示される。このとき同時に音声処理部ex３０５は、音声データをアナログ音声データに変換した後、これを音声出力部ex２０８に供給し、これにより、例えばホームページにリンクされた動画像ファイルに含まる音声データが再生される。

なお、上記システムの例に限られず、最近は衛星、地上波によるディジタル放送が話題となっており、図１６に示すようにディジタル放送用システムにも上記実施の形態の画像符号化装置を組み込むことができる。具体的には、放送局ex４０９では映像情報のビットストリームが電波を介して通信または放送衛星ex４１０に伝送される。これを受けた放送衛星ex４１０は、放送用の電波を発信し、この電波を衛星放送受信設備をもつ家庭のアンテナex４０６で受信し、テレビ（受信機）ex４０１またはセットトップボックス（ＳＴＢ）ex４０７などの装置によりビットストリームを復号化してこれを再生する。また、記録媒体であるCDやDVD等の蓄積メディアex４０２に記録したビットストリームを読み取り、復号化する再生装置ex４０３にも画像復号化装置を実装することが可能である。この場合、再生された映像信号はモニタex４０４に表示される。また、ケーブルテレビ用のケーブルex４０５または衛星／地上波放送のアンテナex４０６に接続されたセットトップボックスex４０７内に画像復号化装置を実装し、これをテレビのモニタex４０８で再生する構成も考えられる。このときセットトップボックスではなく、テレビ内に画像復号化装置を組み込んでも良い。また、アンテナex４１１を有する車ex４１２で衛星ex４１０からまたは基地局ex１０７等から信号を受信し、車ex４１２が有するカーナビゲーションex４１３等の表示装置に動画を再生することも可能である。

更に、画像信号を上記実施の形態で示した画像符号化装置で符号化し、記録媒体に記録することもできる。具体例としては、DVDディスクｅｘ４２１に画像信号を記録するDVDレコーダや、ハードディスクに記録するディスクレコーダなどのレコーダｅx４２０がある。更にSDカードｅｘ４２２に記録することもできる。レコーダｅｘ４２０が画像復号化装置を備えていれば、DVDディスクｅｘ４２１やSDカードｅｘ４２２に記録した画像信号を再生し、モニタｅｘ４０８で表示することができる。

なお、カーナビゲーションex４１３の構成は例えば図１５に示す構成のうち、カメラ部ex２０３とカメラインターフェース部ex３０３、画像符号化部ｅｘ３１２を除いた構成が考えられ、同様なことがコンピュータex１１１やテレビ（受信機）ex４０１等でも考えられる。
また、上記携帯電話ex１１４等の端末は、符号化器・復号化器を両方持つ送受信型の端末の他に、符号化器のみの送信端末、復号化器のみの受信端末の３通りの実装形式が考えられる。

このように、上記実施の形態で示した画像符号化方法を上述したいずれの機器・システムに用いることは可能であり、そうすることで、上記実施の形態で説明した効果を得ることができる。
また、本発明はかかる上記実施形態に限定されるものではなく、本発明の範囲を逸脱することなく種々の変形または修正が可能である。

以上のように、本発明に係る画像符号化方法は、例えば携帯電話、ＤＶＤ装置、およびパーソナルコンピュータ等で、原画像が映画信号である部分およびＮＴＳＣ信号である部分の少なくとも一方を含むプログレッシブ画像信号を符号化するための方法として有用である。

本発明の実施の形態１における画像符号化装置の構成を示すブロック図である。 本発明の実施の形態１におけるサンプリング変換器のブロック図である。 本発明の実施の形態１におけるサンプリング変換処理の説明図である。 ＭＰＥＧ−４で符号化されたビットストリームの構成の概略を示す図である。 本発明の実施の形態２におけるサンプリング変換器のブロック図である。 本発明の実施の形態２におけるサンプリング変換処理の一例を示す説明図である。 本発明の実施の形態２における他のパターンのサンプリング変換処理の説明図である。 本発明の実施の形態２における他のパターンのサンプリング変換処理の説明図である。 本発明の実施の形態３における画像符号化装置のブロック図である。 本発明の実施の形態３における画像符号化装置のブロック図である。 本発明の実施の形態３におけるテレシネ画像判定器の動作を示すフローチャートである。 各実施の形態の画像符号化方法をコンピュータシステムにより実現するためのプログラムを格納するための記録媒体についての説明図であり、(a) 記録媒体本体であるフレキシブルディスクの物理フォーマットの例を示した説明図、(b) フレキシブルディスクの正面からみた外観、断面構造、及びフレキシブルディスクを示した説明図、(c) フレキシブルディスクＦＤに上記プログラムの記録再生を行うための構成を示した説明図である。 コンテンツ配信サービスを実現するコンテンツ供給システムの全体構成を示すブロック図である。 携帯電話の一例を示す図である。 携帯電話の内部構成を示すブロック図である。 ディジタル放送用システムの全体構成を示すブロック図である。 非テレシネ画像信号をプログレッシブ画像信号に変換する処理の説明図である。 従来の画像符号化装置の構成を示すブロック図である。 テレシネ画像信号をプログレッシブ画像信号に変換する処理の説明図である。

符号の説明

１０１ プログレッシブ画像信号
１０２ａ，１０２ｂ サンプリング変換器
１０３ サンプリング変換後のプログレッシブ画像信号
１０４ 画像符号化器
１０５ 画像符号化データ
１０６ テレシネ変換情報
２０５，２０６，４０１ スイッチ
２０７，４０２ グラウンド出力
６０１ 遅延器
６０２ １フレーム遅延されたプログレッシブ画像信号
６０３ テレシネ画像判定器
７０１ 類似度計算器
７０２ 類似度
７０３ 一致検出器
７０４ 一致信号
７０５ テレシネ画像検出器
Ｃｓ コンピュータシステム
ＦＤ フレキシブルディスク
ＦＤＤ フレキシブルディスクドライブ

Claims (7)

1. 原画像が映画信号である部分およびテレビ放送用のＮＴＳＣ信号である部分を含むプログレッシブ画像信号を符号化する画像符号化方法であって、
   前記プログレッシブ画像信号の原画像が映画信号である部分は、原画像である前記映画信号をＮＴＳＣ信号に変換された後、前記ＮＴＳＣ信号をプログレッシブ画像信号に変換された、所定フレームごとに同一フレームを２フレーム連続して含む信号であり、
   前記画像符号化方法は、
   前記プログレッシブ画像信号の原画像が映画信号である部分に対しては、２フレーム毎に１フレームの割合、次に３フレーム毎に１フレームの割合で抽出し、以降これらの割合での抽出を繰り返すことで、前記映画信号を構成するフレーム列が時間的に等間隔に間引かれたものに相当するフレーム列を生成する第１の方法で、前記プログレッシブ画像信号の原画像がＮＴＳＣ信号である部分に対しては、２フレーム毎に１フレームの割合で抽出を繰り返すことで、前記ＮＴＳＣ信号を構成するフレーム列が時間的に等間隔に間引かれたものに相当するフレーム列を生成する第２の方法でサンプリングを行うサンプリングステップと、
   前記サンプリングステップによりサンプリングされたフレームを符号化する符号化ステップと
   を含むことを特徴とする画像符号化方法。
2. 前記プログレッシブ画像信号のうちの原画像が映画信号である部分は、５フレームごとに連続する同一内容の２フレームを含み、
   前記サンプリングステップでは、
   前記２フレーム毎に１フレームの割合で抽出するときには、連続する同一内容の２フレームからいずれかを抽出し、
   前記３フレーム毎に１フレームの割合で抽出するときには、前記連続する同一内容の２フレームに続く３フレームから、時間的に真ん中に位置するフレームを抽出する
   ことを特徴とする請求項１記載の画像符号化方法。
3. 前記プログレッシブ画像信号のうちの原画像が映画信号である部分は、５フレームごとに連続する同一内容の２フレームを含み、
   前記サンプリングステップでは、
   前記２フレーム毎に１フレームの割合で抽出するときには、連続する同一内容の２フレームからなる第１の連続フレーム群に続く２フレームから、先のフレームを抽出し、
   前記３フレーム毎に１フレームの割合で抽出するときには、前記第１の連続フレーム群の後に連続する同一内容の２フレームからなる第２の連続フレーム群と、前記第２の連続フレーム群の直前に位置するフレームとから、前記第２の連続フレーム群の直前に位置する前記フレームを抽出する
   ことを特徴とする請求項１記載の画像符号化方法。
4. 前記サンプリングステップでは、入力される前記プログレッシブ画像信号の原画像が映画信号であるかＮＴＳＣ信号であるかを示すテレシネ変換情報に基づいて、前記第１または第２の方法でのサンプリングを切替える
   ことを特徴とする請求項１から請求項３のいずれか一項に記載の画像符号化方法。
5. 前記画像符号化方法は、さらに、前記プログレッシブ画像信号に基づいて前記プログレッシブ画像信号の各フレームの原画像が映画信号であるかＮＴＳＣ信号であるかを検出する原画像判定ステップを含む
   ことを特徴とする請求項１から請求項３のいずれか１項に記載の画像符号化方法。
6. 原画像が映画信号である部分およびテレビ放送用のＮＴＳＣ信号である部分の少なくとも一方を含むプログレッシブ画像信号を符号化する画像符号化装置であって、
   前記プログレッシブ画像信号の原画像が映画信号である部分は、原画像である前記映画信号をＮＴＳＣ信号に変換された後、前記ＮＴＳＣ信号をプログレッシブ画像信号に変換された、所定フレームごとに同一フレームを２フレーム連続して含む信号であり、
   前記画像符号化装置は、
   前記プログレッシブ画像信号の原画像が映画信号である部分に対しては、２フレーム毎に１フレームの割合、次に３フレーム毎に１フレームの割合で抽出し、以降これらの割合での抽出を繰り返すことで、前記映画信号を構成するフレーム列が時間的に等間隔に間引かれたものに相当するフレーム列を生成する第１の方法で、前記プログレッシブ画像信号の原画像がＮＴＳＣ信号である部分に対しては、２フレーム毎に１フレームの割合で抽出を繰り返すことで、前記ＮＴＳＣ信号を構成するフレーム列が時間的に等間隔に間引かれたものに相当するフレーム列を生成する第２の方法でサンプリングを行うサンプリング変換手段と、
   前記サンプリング変換手段により出力された信号を符号化する画像符号化手段と
   を備えることを特徴とする画像符号化装置。
7. 原画像が映画信号である部分およびテレビ放送用のＮＴＳＣ信号である部分の少なくとも一方を含むプログレッシブ画像信号を符号化するためのプログラムであって、
   前記プログレッシブ画像信号の原画像が映画信号である部分は、原画像である前記映画信号をＮＴＳＣ信号に変換された後、前記ＮＴＳＣ信号をプログレッシブ画像信号に変換された、所定フレームごとに同一フレームを２フレーム連続して含む信号であり、
   前記プログラムは、
   前記プログレッシブ画像信号の原画像が映画信号である部分に対しては、２フレーム毎に１フレームの割合、次に３フレーム毎に１フレームの割合で抽出し、以降これらの割合での抽出を繰り返すことで、前記映画信号を構成するフレーム列が時間的に等間隔に間引かれたものに相当するフレーム列を生成する第１の方法で、前記プログレッシブ画像信号の原画像がＮＴＳＣ信号である部分に対しては、２フレーム毎に１フレームの割合で抽出を繰り返すことで、前記ＮＴＳＣ信号を構成するフレーム列が時間的に等間隔に間引かれたものに相当するフレーム列を生成する第２の方法でサンプリングを行うサンプリングステップと、
   前記サンプリングステップによりサンプリングされたフレームを符号化する符号化ステップと
   をコンピュータに実行させることを特徴とするプログラム。

Images