JP2008177757A - 情報処理装置およびデコード制御方法 - Google Patents

Abstract

【課題】動画像ストリームのデコードをスムーズに実行することを可能とした情報処理装置を提供する。
【解決手段】ビデオ再生アプリケーション２０１のモード検出モジュール２１１は、デコード実行モジュール２１３によってデコードされた画像がどのような状況下で表示されているのかをＯＳ１００に問い合わせて検出する。モード検出モジュール２１１が、全画面表示される状況を検出した場合、デコード制御モジュール２１２は、本来のフレームレートを維持しながらデコードする通常デコード処理を選択するようにデコード実行モジュール２１３を駆動制御する。一方、モード検出モジュール２１１が、縮小表示される状況を検出した場合、デコード制御モジュール２１２は、フレームレートを低下させながらデコードする簡略化デコード処理を選択するようにデコード実行モジュール２１３を駆動制御する。
【選択図】図３

Description

この発明は、例えば映像コンテンツの鑑賞、文書作成、Ｗｅｂページの閲覧等の複数の作業を並行して行うことを可能とするいわゆるマルチウィンドウ機能を有するパーソナルコンピュータ等に適用して好適な動画像ストリームのデコード制御技術に関する。

近年、ノートブックタイプやデスクトップタイプ等、様々なタイプのパーソナルコンピュータが広く普及している。この種のパーソナルコンピュータでは、１つの表示画面上に独立した表示領域を複数確保することのできるいわゆるマルチウインドウ機能を備えることが一般的である。つまり、複数の画像が同時に表示可能となっている。そのため、状況に応じて各画像を表示制御する手法がこれまでも種々提案されている（例えば特許文献１等参照）。
特開２００１−１７５２３９号公報

最近では、ＤＶＤ（Digital Versatile Disc）プレーヤやテレビジョン装置のようなオーディオ・ビデオ（ＡＶ）機器と同様のＡＶ機能を備えたパーソナルコンピュータも普及し始めている。この種のパーソナルコンピュータでは、圧縮符号化された動画像ストリームをソフトウェアによってデコードするソフトウェアデコーダが用いられている。

このソフトウェアデコーダがデコードする動画像ストリームも、マルチウインドウ機能を備えるパーソナルコンピュータにおいては、複数の画像の中の１つに過ぎず、他の画像と同時に表示される可能性がある。一方、このソフトウェアデコーダがパーソナルコンピュータに与える負荷は非常に大きい。従って、例えば表示領域が小さい等、動画像ストリームの表示状況に応じて、当該動画像ストリームのデコード処理量を低減する仕組みをもつことが望ましい。

この発明は、このような事情を考慮してなされたものであり、動画像ストリームのデコードをスムーズに実行することを可能とした情報処理装置およびデコード制御方法を提供することを目的とする。

この目的を達成するために、本発明の情報処理装置は、第１の表示モードと第２の表示モードとを備えた情報処理装置において、圧縮符号化された動画像ストリームに対して、第１のデコード処理または前記第１のデコード処理によって生成される動画像よりも低いフレームレートの動画像を生成する第２のデコード処理を施すデコード手段と、前記デコード手段がデコード中の動画像ストリ−ムが前記第１の表示モードまたは前記第２の表示モードのいずれのモードで表示されているのかを検出する検出手段と、前記検出手段の検出結果に基づき、前記第１のデコード処理および前記第２のデコード処理のいずれを選択するのかを前記デコード手段に指示する制御手段と、を具備することを特徴とする。

また、本発明の情報処理装置は、プログレッシブ方式の表示装置を介して表示を行う、第１の表示モードと第２の表示モードとを備えた情報処理装置において、トップフィールドとボトムフィールドとを含むインタレース方式で圧縮符号化された動画像ストリームに対して、前記トップフィールドの画像および前記ボトムフィールドの画像の両方から動画像を生成する第１のデコード処理または前記トップフィールドの画像または前記ボトムフィールドの画像の一方から動画像を生成する第２のデコード処理を施すデコード手段と、前記デコード手段がデコード中の動画像ストリ−ムが前記第１の表示モードまたは前記第２の表示モードのいずれのモードで表示されているのかを検出する検出手段と、前記検出手段の検出結果に基づき、前記第１のデコード処理および前記第２のデコード処理のいずれを選択するのかを前記デコード手段に指示する制御手段と、を具備することを特徴とする。

この発明によれば、動画像ストリームのデコードをスムーズに実行することを可能とした情報処理装置およびデコード制御方法を提供することができる。

以下、図面を参照して本発明の一実施形態を説明する。

図１は、ディスプレイユニットを開いた状態における本実施形態の情報処理装置を正面側から見た斜視図である。この情報処理装置は、バッテリ駆動可能な携帯型のノートブック型パーソナルコンピュータ１として実現されている。

本コンピュータ１は、コンピュータ本体２と表示パネル３とから構成される。表示パネル３には、ＬＣＤ（Liquid Crystal Display）１５から構成される表示装置が組み込まれており、その表示画面は表示パネル３のほぼ中央に位置されている。

表示パネル３はコンピュータ本体２に支持され、このコンピュータ本体２に対してコンピュータ本体２の上面が露出される開放位置とコンピュータ本体２の上面を覆う閉塞位置との間を回動自由に取り付けられている。コンピュータ本体２は薄い箱形の筐体を有しており、その上面にはキーボード２５やタッチパッド２６等が配置されている。

図２は、本コンピュータ１のシステム構成を示す図である。図２に示すように、本コンピュータ１は、ＣＰＵ１１、ノースブリッジ１２、主メモリ１３、グラフィックスアクセラレータ１４、ＶＲＡＭ１４Ａ、サウスブリッジ１６、ＢＩＯＳ−ＲＯＭ１７、ＨＤＤ１８、ＨＤ ＤＶＤ１９、サウンドコントローラ２０、スピーカ２１、アナログＴＶチューナ２２、デジタルＴＶチューナ２３、エンベデッドコントローラ／キーボードコントローラ（ＥＣ／ＫＢＣ）２４、電源回路２７、バッテリ２８、ネットワークコントローラ２９等を備えている。

ＣＰＵ１１は、本コンピュータ１内の各部の動作を制御するプロセッサである。ＣＰＵ１１は、ＨＤＤ１８から主メモリ１３にロードされるオペレーティングシステム（ＯＳ）１００や、このＯＳ１００の制御下で動作する、ユーティリティを含む各種アプリケーションプログラムを実行する。この各種アプリケーションプログラムの中には、ビデオ再生アプリケーション２０１が含まれている。

ビデオ再生アプリケーション２０１は、圧縮符号化された動画像データをデコードおよび再生するためのソフトウェアである。ビデオ再生アプリケーション２０１は、例えばデジタルＴＶ放送チューナ２３によって受信されたデジタルＴＶ放送番組やＨＤ ＤＶＤ１９から読み出されるＨＤ（High Definition）規格のビデオコンテンツ等の圧縮符号化された動画像ストリームをデコードする機能を有している。ビデオ再生アプリケーション２０１がデコードした動画像データは、グラフィックスアクセラレータ１４のＶＲＡＭ１４Ａに順次書き込まれることで、ＬＣＤ１５に表示される。

また、ＣＰＵ１１は、ＢＩＯＳ−ＲＯＭ１７に格納されたＢＩＯＳも実行する。ＢＩＯＳは、ハードウェア制御のためのプログラムである。

ノースブリッジ１２は、ＣＰＵ１１のローカルバスとサウスブリッジ１６との間を接続するブリッジデバイスである。ノースブリッジ１２は、バスを介してグラフィックスアクセラレータ１４との通信を実行する機能を有しており、また、主メモリ１３をアクセス制御するメモリコントローラも内蔵されている。グラフィックスアクセラレータ１４は、本コンピュータのディスプレイモニタとして使用されるＬＣＤ１５を制御する表示コントローラである。グラフィックスアクセラレータ１４は、ＶＲＡＭ１４Ａに書き込まれた画像データからＬＣＤ１５に送出すべき表示信号を生成する。

サウスブリッジ１６は、ＰＣＩバスおよびＬＰＣバス上の各種デバイスを制御するコントローラである。また、このサウスブリッジ１６には、ＢＩＯＳ−ＲＯＭ１７、ＨＤＤ１８、ＨＤ ＤＶＤ１９、サウンドコントローラ２０、アナログＴＶチューナ２２、デジタルＴＶチューナ等が直接的に接続され、これらを制御する機能も有している。

ＨＤＤ１８は、各種ソフトウェア及びデータを格納する記憶装置である。ＨＤ ＤＶＤ１９は、ビデオコンテンツが格納されたＨＤ ＤＶＤなどの記憶メディアを駆動するためのドライブユニットである。サウンドコントローラ２０は、スピーカ２１を制御する音源コントローラである。アナログＴＶチューナ２２およびデジタルＴＶチューナ２３は、アナログＴＶ放送番組やデジタルＴＶ放送番組のような放送番組データを外部から受信するための受信装置である。

ＥＣ／ＫＢＣ２４は、電力管理のためのエンベデッドコントローラと、キーボード２５およびタッチパッド２６を制御するためのキーボードコントローラとが集積された１チップマイクロコンピュータである。ＥＣ／ＫＢＣ２４は、電源回路２７と協働して、バッテリ２８または外部ＡＣ電源からの電力を各部に供給制御する。そして、ネットワークコントローラ２９は、例えばインターネットなどの外部ネットワークとの通信を実行する通信装置である。

図３は、ビデオ再生アプリケーション２０１の機能ブロックを示す図である。各種アプリケーションプログラムの中の１つであるビデオ再生アプリケーション２０１は、前述のように、ＯＳ１００の配下で動作する。そして、図２に示すように、このビデオ再生アプリケーション２０１は、モード検出モジュール２１１、デコード制御モジュール２１２およびデコード実行モジュール２１３を備えている。

デコード実行モジュール２１３は、圧縮符号化された動画像ストリームに対してデコード処理を施すデコーダである。モード検出モジュール２１１は、デコード実行モジュール２１３によってデコードされた画像がどのような状況下で表示されているのかを検出するモジュールである。ここで、図４乃至図６を参照して、本コンピュータ１が備える画像表示機能について説明する。

本コンピュータ１は、画像を表示する際のモードとして、１つの画像を表示画面全体に表示するフルスクリーンモードと、複数の画像を表示画面上に同時に表示するウィンドウモードおよびＰｉｎＰ（ピクチャインピクチャ）モードとを有している。図４に、フルスクリーンモードでの画像表示例を示す。

図４に示すように、フルスクリーンモードでは、１つの画像ａがＬＣＤ１５の表示画面全体に表示される。また、図５は、ウィンドウモードでの画像表示例を示す図である。図５に示すように、ウィンドウモードでは、複数の画像ｂ１，ｂ２が、ＬＣＤ１５の表示画面上に論理的に確保されたそれぞれの表示領域（ウィンドウ）内に縮小表示される。さらに、図６は、ＰｉｎＰモードでの画像表示例を示す図である。図６に示すように、ＰｉｎＰモードでは、ある画像ｃ１がＬＣＤ１５の表示画面全体に表示され、これに重ね合わせるように、別の画像ｃ２が縮小表示される。ここでは、このＰｉｎＰモードにおける画像ｃ１をメイン画像、画像ｃ２をサブ画像と称することとする。即ち、モード検出モジュール２１１は、デコード実行モジュール２１３によってデコードされた画像がフルスクリーンモード、ウィンドウモードまたはＰｉｎＰモードのいずれのモードで表示されているのかをＯＳ１００に対する問い合わせによって検出する。また、モード検出モジュール２１１は、ＰｉｎＰモード時、メイン画像またはサブ画像のいずれとして表示されているのかを併せて検出する。

このモード検出モジュール２１１による検出結果は、デコード制御モジュール２１２に通知される。そして、デコード制御モジュール２１２は、このモード検出モジュール２１１による検出結果に基づき、圧縮符号化された動画像ストリームに対してデコード処理を施すデコード実行モジュール２１３を駆動制御する。より具体的には、デコード実行モジュール２１３によってデコードされた画像が縮小表示される場合、つまりウィンドウモードまたはＰｉｎＰモードのサブ画像として解像度を落として表示される場合、そのフレームレートを低下させるように駆動制御する。換言すれば、フルスクリーンモードまたはＰｉｎＰモードのメイン画像として表示される場合、本来のフレームレートを維持させるように駆動制御する。

そのために、デコード実行モジュール２１３は、通常デコード処理と簡略化デコード処理との２つのデコード処理を排他選択的に実行できるようになっている。簡略化デコード処理が、前述のフレームレートを低下させるためのものであり、デコード制御モジュール２１２は、例えばフルスクリーンモード時には通常デコード処理を選択するようにデコード実行モジュール２１３に指示し、また、例えばウィンドウモード時には簡略化デコード処理を選択するようにデコード実行モジュール２１３に指示する。ここで、デコード実行モジュール２１３が簡略化デコード処理においてフレームレートを低下させるための第１の原理を図７を参照して説明する。

圧縮符号化された動画像ストリームは、他フレームを参照しないでデコード可能なＩピクチャ、１つの他フレームを参照するＰピクチャ、２つ以上の他フレームを参照するＢピクチャを含んでなる。いま、図７（Ａ）に示すように動画像ストリームが入力されたと想定すると、例えばフルスクリーンモード時の通常デコード処理では、図７（Ｂ）に示すように、Ｉピクチャ（Ｉｎ）、Ｐピクチャ（Ｐｎ）およびＢピクチャ（Ｂｎ）のすべてをデコードする。一方、例えばウィンドウモード時の簡略化デコード処理では、図７（Ｃ）に示すように、Ｉピクチャ（Ｉｎ）およびＰピクチャ（Ｐｎ）のみをデコードする。即ち、簡略化デコード処理時には、Ｂピクチャ分のデコード負荷を軽減する。この際、当該Ｂピクチャの欠落分だけフレームレートが低下することになるが、ウィンドウモードまたはＰｉｎＰモードのサブ画像として解像度を落として表示される場合のみ実施されるように制御されるので、ユーザに違和感を与えること等がほとんどない。

なお、図７（Ｃ）には、Ｂピクチャのデコードを省略させる例を示したが、仕様によっては、ＰピクチャおよびＢピクチャの２種類のピクチャのデコードを省略するように変更しても良い。また、デコード実行モジュール２１３が、Ｂピクチャのみの省略、ＰピクチャおよびＢピクチャの省略、のいずれにも対応できるようにしておき、例えばモード検出モジュール２１１にさらにウィンドウモード時のウィンドウサイズを検出させ、そのサイズに応じて、デコード制御モジュール２１２が、Ｂピクチャのみの省略→ＰピクチャおよびＢピクチャの省略、と多段階に駆動制御するように変更することも有効である。

また、前述したように、本コンピュータ１は、表示装置として、プログレッシブ方式のＬＣＤ１５を具備している。そこで、次に、この点に着目した、デコード実行モジュール２１３が簡略化デコード処理においてフレームレートを低下させるための第２の原理を図８を参照して説明する。

図８（Ａ）に示すような、トップフィールド（Ｔｎ）とボトムフィールド（Ｂｎ）とを含むインタレース方式で圧縮符号化された動画像ストリームが入力された場合、これをそのままＬＣＤ１５に表示すると、コーミングノイズが発生してしまうため、デインタレース処理が必要となる。しかしながら、その画像をウィンドウモードまたはＰｉｎＰモードのサブ画像として解像度を落として表示する場合には、図８（Ｂ）に示すように、例えばトップフィールドのみから当該解像度を落とした縮小画像を生成することで、ボトムフィールド分のデコード負荷を軽減することに加え、さらに、デインタレース処理をも省略することを可能とする。この際も、ボトムフィールドの欠落分だけフレームレートが低下することになるが、ウィンドウモードまたはＰｉｎＰモードのサブ画像として解像度を落として表示される場合のみ実施されるように制御されるので、ユーザに違和感を与えること等がほとんどない。なお、図８（Ｂ）には、トップフィールドのみから画像を生成する例を示したが、これに限らず、ボトムフィールドのみから画像を生成するように変更することも当然に可能である。

図９は、本コンピュータ１が実行する圧縮符号化された動画像ストリームのデコード制御手順を示すフローチャートである。

ビデオ再生アプリケーション２０１のモード検出モジュール２１１は、デコード実行モジュール２１３によってデコードされた画像がどのような状況下で表示されているのかをＯＳ１００に問い合わせて検出する（ステップＡ１）。

モード検出モジュール２１１が、フルスクリーンモードまたはＰｉｎＰモードのメイン画像として表示されている、即ち全画面表示される状況を検出した場合（ステップＡ２のＹＥＳ）、デコード制御モジュール２１２は、本来のフレームレートを維持しながらデコードする通常デコード処理を選択するようにデコード実行モジュール２１３を駆動制御する（ステップＡ３）。

一方、モード検出モジュール２１１が、ウィンドウモードまたはＰｉｎＰモードのサブ画像として表示されている、即ち縮小表示される状況を検出した場合（ステップＡ２のＮＯ）、デコード制御モジュール２１２は、フレームレートを低下させながらデコードする簡略化デコード処理を選択するようにデコード実行モジュール２１３を駆動制御する（ステップＡ４）。

このように、本コンピュータ１によれば、動画像ストリームの表示状況に応じて、当該動画像ストリームのデコード処理量を低減する仕組みをもつことにより、動画像ストリームのデコードをスムーズに実行することを可能とする。

なお、本発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に構成要素を適宜組み合わせてもよい。

この発明の実施形態に係る情報処理装置の正面側から見た斜視図 同実施形態の情報処理装置のシステム構成を示す図 同実施形態の情報処理装置上で動作するビデオ再生アプリケーションの機能ブロックを示す図 同実施形態の情報処理装置が備える画像表示機能を説明する第１の図（フルスクリーンモード） 同実施形態の情報処理装置が備える画像表示機能を説明する第２の図（ウィンドウモード） 同実施形態の情報処理装置が備える画像表示機能を説明する第３の図（ＰｉｎＰモード） 同実施形態の情報処理装置上で動作するデコード実行モジュールが簡略化デコード処理においてフレームレートを低下させる第１の原理を説明するための図。 同実施形態の情報処理装置上で動作するデコード実行モジュールが簡略化デコード処理においてフレームレートを低下させる第２の原理を説明するための図。 同実施形態の情報処理装置が実行する圧縮符号化された動画像ストリームのデコード制御手順を示すフローチャート

符号の説明

１…情報処理装置、２…コンピュータ本体、３…表示パネル、１１…ＣＰＵ、１２…ノースブリッジ、１３…主メモリ、１４…グラフィックスアクセラレータ、１４Ａ…ＶＲＡＭ、１５…ＬＣＤ、１６…サウスブリッジ、１７…ＢＩＯＳ−ＲＯＭ、１８…ＨＤＤ、１９…ＨＤ ＤＶＤ、２０…サウンドコントローラ、２１…スピーカ、２２…アナログＴＶチューナ、２３…デジタルＴＶチューナ、２４…エンベデッドコントローラ／キーボードコントローラ（ＥＣ／ＫＢＣ）、２５…キーボード、２６…タッチパッド、２７…電源回路、２８…バッテリ、２９…ネットワークコントローラ、１００…オペレーティングシステム（ＯＳ）、２０１…ビデオ再生アプリケーション、２１１…モード検出モジュール、２１２…デコード制御モジュール、２１３…デコード実行モジュール。

Claims (10)

1. 第１の表示モードと第２の表示モードとを備えた情報処理装置において、
   圧縮符号化された動画像ストリームに対して、第１のデコード処理または前記第１のデコード処理によって生成される動画像よりも低いフレームレートの動画像を生成する第２のデコード処理を施すデコード手段と、
   前記デコード手段がデコード中の動画像ストリ−ムが前記第１の表示モードまたは前記第２の表示モードのいずれのモードで表示されているのかを検出する検出手段と、
   前記検出手段の検出結果に基づき、前記第１のデコード処理および前記第２のデコード処理のいずれを選択するのかを前記デコード手段に指示する制御手段と、
   を具備することを特徴とする情報処理装置。
2. 前記第１の表示モードは、１つの画像を表示画面全体に表示するモード、前記第２の表示モードは、複数の画像を表示画面上に同時に表示するモードであり、
   前記制御手段は、前記検出手段が前記第２の表示モードで表示されていることを検出した場合、前記第２のデコード処理を選択する旨を前記デコード手段に指示することを特徴とする請求項１記載の情報処理装置。
3. 前記第２の表示モードは、表示画面全体に配置した第１の画像上に縮小した第２の画像を重畳させて２つの画像を同時に表示するモードであり、
   前記検出手段は、前記第２の表示モード時、前記第１の画像または前記第２の画像のいずれとして表示されているのかをさらに検出し、
   前記制御手段は、前記検出手段が前記第２の表示モードの前記第２の画像として表示されていることを検出した場合、前記第２のデコード処理を選択する旨を前記デコード手段に指示することを特徴とする請求項２記載の情報処理装置。
4. 前記第２のデコード処理は、動画像ストリーム中の他の画像を参照する画像のデコードを省略するものであることを特徴とする請求項１記載の情報処理装置。
5. 前記第２のデコード処理は、動画像ストリーム中の２以上の他の画像を参照する画像のデコードを省略するものであることを特徴とする請求項１記載の情報処理装置。
6. プログレッシブ方式の表示装置を介して表示を行う、第１の表示モードと第２の表示モードとを備えた情報処理装置において、
   トップフィールドとボトムフィールドとを含むインタレース方式で圧縮符号化された動画像ストリームに対して、前記トップフィールドの画像および前記ボトムフィールドの画像の両方から動画像を生成する第１のデコード処理または前記トップフィールドの画像または前記ボトムフィールドの画像の一方から動画像を生成する第２のデコード処理を施すデコード手段と、
   前記デコード手段がデコード中の動画像ストリ−ムが前記第１の表示モードまたは前記第２の表示モードのいずれのモードで表示されているのかを検出する検出手段と、
   前記検出手段の検出結果に基づき、前記第１のデコード処理および前記第２のデコード処理のいずれを選択するのかを前記デコード手段に指示する制御手段と、
   を具備することを特徴とする情報処理装置。
7. 前記第１の表示モードは、１つの画像を表示画面全体に表示するモード、前記第２の表示モードは、複数の画像を表示画面上に同時に表示するモードであり、
   前記制御手段は、前記検出手段が前記第２の表示モードで表示されていることを検出した場合、前記第２のデコード処理を選択する旨を前記デコード手段に指示することを特徴とする請求項６記載の情報処理装置。
8. 前記第２の表示モードは、表示画面全体に配置した第１の画像上に縮小した第２の画像を重畳させて２つの画像を同時に表示するモードであり、
   前記検出手段は、前記第２の表示モード時、前記第１の画像または前記第２の画像のいずれとして表示されているのかをさらに検出し、
   前記制御手段は、前記検出手段が前記第２の表示モードの前記第２の画像として表示されていることを検出した場合、前記第２のデコード処理を選択する旨を前記デコード手段に指示することを特徴とする請求項７記載の情報処理装置。
9. １つの画像を表示画面全体に表示する第１の表示モードと、複数の画像を表示画面上に同時に表示する第２の表示モードとを備えた情報処理装置のデコード制御方法であって、
   デコード中の動画像ストリ−ムが前記第１の表示モードまたは前記第２の表示モードのいずれのモードで表示されているのかを検出し、
   前記第１の表示モードで表示されている場合、圧縮符号化された動画像ストリームに対して、動画像ストリーム中のすべての画像をデコードする第１のデコード処理を施し、前記第２の表示モードで表示されている場合、動画像ストリーム中の所定数以上の他の画像を参照する画像のデコードを省略する第２のデコード処理を施す、
   ことを特徴とするデコード制御方法。
10. プログレッシブ方式の表示装置を介して表示を行う、１つの画像を表示画面全体に表示する第１の表示モードと、複数の画像を表示画面上に同時に表示する第２の表示モードとを備えた情報処理装置のデコード制御方法であって、
    デコード中の動画像ストリ−ムが前記第１の表示モードまたは前記第２の表示モードのいずれのモードで表示されているのかを検出し、
    前記第１の表示モードで表示されている場合、トップフィールドとボトムフィールドとを含むインタレース方式で圧縮符号化された動画像ストリームに対して、前記トップフィールドの画像および前記ボトムフィールドの画像の両方から動画像を生成する第１のデコード処理を施し、前記第２の表示モードで表示されている場合、前記トップフィールドの画像または前記ボトムフィールドの画像の一方から動画像を生成する第２のデコード処理を施す、
    ことを特徴とするデコード制御方法。

Images