JP6151010B2 - 情報処理装置および表示制御方法 - Google Patents

Description

本発明の実施形態は、情報処理装置および表示制御方法に関する。

グラフィック画像の色画像情報と当該グラフィック画像の透明度を表すα情報とを含むフォーマットのグラフィックデータを用いて、グラフィック画像を、ビデオ画像などに合成する技術が用いられている。グラフィックスデータを用いたグラフィック画像とビデオ画像との合成処理は、一般的に、一つのＳｏＣ（System on a chip）で行われるため、α情報を含むグラフィックスデータがＳｏＣの外部に出力されることはない。

仮に、ＨＤＭＩ（High Definition Multimedia Interface）やDisplay Portなどのα情報を伝送できない汎用インターフェースを介してＳｏＣと外部装置とが接続されている場合に、ＳｏＣから汎用インターフェースを介して外部装置にα情報を含むグラフィックデータを出力したとしても、α情報を外部装置に伝送することはできない。

特開２００６−１９１２４０号公報

しかしながら、ビデオ画像の高解像度化（例えば、４Ｋ２Ｋ、８Ｋ４Ｋなど）に伴い、ビデオ画像のビデオデータの容量が大きくなり、一つのＳｏＣにおいて、グラフィックデータおよびビデオデータの取得に加えて、グラフィック画像とビデオ画像とを合成する処理を行うことが困難になってきている。

本発明は、上記に鑑みてなされたものであって、α情報を含むグラフィックデータを出力する情報処理装置と、グラフィックデータが含むα情報に基づいてグラフィック画像のビデオ画像への重ね合わせを行う外部機器とが、汎用インターフェースを介して接続されている場合に、α情報に従ってグラフィック画像とビデオ画像との重ね合わせを可能とする情報処理装置および表示制御方法を提供することを目的とする。

実施形態の情報処理装置は、画像の色画像情報および前記画像の透明度を表すα情報を含む元画像データをインターフェースを介して外部機器に出力する情報処理装置であって、出力部を備える。出力部は、複数系統のインターフェースを介して、元画像データに含まれる色画像情報を含む第１画像データおよび元画像データに含まれるα情報を色画像情報として含む第２画像データを同期して外部機器に出力する。

図１は、本実施形態にかかるテレビジョン放送表示装置の主要な信号処理系を示すブロック図である。 図２は、本実施形態にかかるテレビジョン放送表示装置の特徴的な信号処理系を示すブロック図である。 図３は、従来の情報処理装置からのＲＧＢＡデータの出力処理を説明するための図である。 図４は、本実施形態にかかる制御部においてＲＧＢＡデータを出力する処理の流れを示すフローチャートである。 図５は、本実施形態にかかる制御部においてＲＧＢＡデータの出力処理を説明するための図である。 図６は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の流れを示すフローチャートである。 図７は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する例を示す図である。 図８は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の流れを示すフローチャートである。 図９は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する例を示す図である。 図１０は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の流れを示すフローチャートである。 図１１は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の例を示す図である。 図１２は、本実施形態にかかる画像データ伝送システムの構成を示すブロック図である。 図１３は、本実施形態にかかるテレビジョン放送表示装置の特徴的な信号処理系を示すブロック図である。 図１４は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の流れを示すフローチャートである。 図１５は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の例を示す図である。

本実施形態では、画像の色画像情報および当該画像の透明度を表すα情報を含む元画像データをＨＤＭＩやDisplay Port等のインターフェースを介して外部機器に出力する情報処理装置を備えたテレビジョン放送表示装置に適用した例について説明する。

（第１の実施形態）
まず、本実施形態にかかるテレビジョン放送表示装置１００のハードウェア構成について説明する。図１は、本実施形態にかかるテレビジョン放送表示装置の主要な信号処理系を示すブロック図である。

ＢＳ／ＣＳデジタル放送受信用のアンテナ１２１で受信した衛星デジタルテレビジョン放送信号は、入力端子２０１を介して、放送入力部２０２が備える衛星デジタル放送用のチューナ２０２ａに供給される。

チューナ２０２ａは、制御部２０５からの制御信号により所望のチャンネルの放送信号を選局し、この選局された放送信号をＰＳＫ（Phase Shift Keying）復調器２０２ｂに出力する。

放送入力部２０２が備えるＰＳＫ復調器２０２ｂは、制御部２０５からの制御信号により、チューナ２０２ａで選局された放送信号を復調し、所望の番組を含んだトランスポートストリーム（ＴＳ）を得て、ＴＳ復号器２０２ｃに出力する。

放送入力部２０２が備えるＴＳ復号器２０２ｃは、制御部２０５からの制御信号によりトランスポートストリーム（ＴＳ）多重化された信号のＴＳ復号処理を行い、所望の番組のデジタルの映像信号および音声信号をデパケットすることにより得たＰＥＳ（Packetized Elementary Stream）を映像音声信号処理部２０６内のＳＴＤバッファ（図示しない）へ出力する。また、ＴＳ復号器２０２ｃは、デジタル放送により送られているセクション情報を映像音声信号処理部２０６内のセクション処理部（図示しない）へ出力する。

地上波放送受信用のアンテナ１２２で受信した地上デジタルテレビジョン放送信号は、入力端子２０３を介して、放送入力部２０２が備える地上デジタル放送用のチューナ２０４ａに供給される。

チューナ２０４ａは、制御部２０５からの制御信号により所望のチャンネルの放送信号を選局可能とする。チューナ２０４ａは、放送信号をＯＦＤＭ（Orthogonal Frequency Division Multiplexing）復調器２０４ｂに出力する。

放送入力部２０２が備えるＯＦＤＭ復調器２０４ｂは、制御部２０５からの制御信号により、チューナ２０４ａで選局された放送信号を復調し、所望の番組を含んだトランスポートストリームを得て、ＴＳ復号器２０４ｃに出力する。

放送入力部２０２が備えるＴＳ復号器２０４ｃは、制御部２０５からの制御信号によりトランスポートストリーム（ＴＳ）多重化された信号のＴＳ復号処理を行い、所望の番組のデジタルの映像信号および音声信号をデパケットすることにより得たＰＥＳを映像音声信号処理部２０６内のＳＴＤバッファへ出力する。また、ＴＳ復号器２０４ｃは、デジタル放送により送られているセクション情報を映像音声信号処理部２０６内のセクション処理部（図示しない）へ出力する。

映像音声信号処理部２０６は、テレビ視聴時には、ＴＳ復号器２０２ｃおよびＴＳ復号器２０４ｃからそれぞれ供給されたデジタルの映像信号および音声信号に対して、選択的に所定のデジタル信号処理を施し、バックエンド処理部２０７および音声処理部２０８に出力する。また、映像音声信号処理部２０６は、番組録画時には、ＴＳ復号器２０２ｃおよびＴＳ復号器２０４ｃからそれぞれ供給されたデジタルの映像信号および音声信号に対して、選択的に所定のデジタル信号処理を施した信号を、制御部２０５を介して丸録り録画用記憶装置（例えば、ＨＤＤ：Hard Disk Drive）２７１および外部記憶装置２２６に記録している。

なお、本実施形態にかかる丸録りとは、ユーザにより選択された番組コンテンツ単位で録画する予約録画と異なり、ユーザの見逃しを防止するために、各放送チャンネルについて、所定時間帯（一日中を含む）に放送された番組コンテンツ全てを録画する手法とする。なお、録画する時間帯は、放送チャンネル毎に異ならせても良い。

また、映像音声信号処理部２０６は、録画番組再生時には、制御部２０５を介して丸録り録画用記憶装置２７１または外部記憶装置２２６から読み出された録画番組のデータ（映像信号および音声信号）に対して、所定のデジタル信号処理を施し、バックエンド処理部２０７および音声処理部２０８に出力する。

映像音声信号処理部２０６が備えるセクション処理部（図示しない）は、ＴＳ復号器２０２ｃ（２０４ｃ）から入力されたセクション情報の中から、番組を取得するための各種データや電子番組ガイド（ＥＰＧ）情報、番組属性情報（番組ジャンル等）、字幕情報等（サービス情報、ＳＩやＰＳＩ）を制御部２０５へ出力する。

図１に示す、チューナ２０２ａ、ＰＳＫ復調器２０２ｂ、ＴＳ復号器２０２ｃ、チューナ２０４ａ、ＯＦＤＭ復調器２０４ｂ、ＴＳ復号器２０４ｃは、丸録り機能に必要な数以上の系統を備えている。例えば、テレビジョン放送表示装置１００が、在京地上波キー局を全て記録できる装置の場合、チューナ２０４ａ、ＯＦＤＭ復調器２０４ｂ、ＴＳ復号器２０４ｃを７系統以上備えている。

制御部２０５には、映像音声信号処理部２０６から、番組を取得するための各種データ（Ｂ−ＣＡＳデスクランブル用の鍵情報等）や電子番組ガイド（ＥＰＧ）情報、番組属性情報（番組ジャンル等）、字幕情報等（サービス情報、ＳＩやＰＳＩ）が入力されている。制御部２０５は、これら入力された情報からＥＰＧ情報や字幕情報等を表示するため画像情報を生成し、生成した画像情報をバックエンド処理部２０７へ出力する。

また、制御部２０５は、番組録画および番組予約録画を制御する機能を有し、番組予約受付時には、表示部２１４にＥＰＧ情報を表示するための画像情報を生成し、生成した画像情報をバックエンド処理部２０７へ出力するとともに、操作部２２０またはリモートコントローラ２２１を介したユーザ入力により予約内容を所定の記憶手段に設定する。そして、制御部２０５は、設定された時刻に予約番組を録画するようチューナ２０２ａ，２０４ａ、ＰＳＫ復調器２０２ｂ、ＯＦＤＭ復調器２０４ｂ、ＴＳ復号器２０２ｃ，２０４ｃおよび信号処理部２０６を制御する。

また、テレビジョン放送表示装置１００は、丸録り録画機能で録画可能な全チャンネルの番組を自動録画する場合、予約とは別に設定された時間帯に各デバイスを制御し録画を行う。

ＯＳＤ（On Screen Display）信号生成部２０９は、各種情報を設定するための設定画面を表示するための画像情報（ＯＳＤ信号）を生成して、生成した画像情報をバックエンド処理部２０７に出力する。

バックエンド処理部２０７は、映像音声信号処理部２０６から出力されたデジタルの映像信号、ＯＳＤ信号生成部２０９で生成されるＯＳＤ信号および制御部２０５により生成された画像情報を映像処理部２１０に出力する。また、バックエンド処理部２０７は、映像音声信号処理部２０６から出力されたデジタルの映像信号と、ＯＳＤ信号生成部２０９で生成されるＯＳＤ信号と、制御部２０５により生成された画像情報と、を合成して映像処理部２１０へ出力する機能を有する。

バックエンド処理部２０７から出力されたデジタルの映像信号は、映像処理部２１０に供給される。映像処理部２１０は、入力されたデジタルの映像信号を、表示部２１４または出力端子２１１を介して接続された外部機器で表示可能なフォーマットのアナログ映像信号に変換した後、出力端子２１１または表示部２１４に出力して映像表示させる。

音声処理部２０８は、入力されたデジタルの音声信号を、スピーカ２１３で再生可能なフォーマットのアナログ音声信号に変換した後、出力端子２１２を介して接続された外部機器またはスピーカ２１３に出力して音声再生させる。

本実施形態にかかるテレビジョン放送表示装置１００は、上記した各種の動作が制御部２０５によって統括的に制御されている。制御部２０５は、ＣＰＵ（Central Processing Unit）等を内蔵しており、操作部２２０からの操作情報を受け、またはリモートコントローラ２２１から送出された操作情報を、受光部２２２を介して受信し、その操作内容が反映されるように各部をそれぞれ制御している。

制御部２０５は、ＣＰＵが実行する制御プログラムを格納したＲＯＭ（Read Only Memory）２０５ａと、当該ＣＰＵに作業エリアを提供するＲＡＭ（Random Access Memory）２０５ｂと、各種の設定情報および制御情報等が格納される不揮発性メモリ２０５ｃとを利用している。

また、制御部２０５は、カードＩ／Ｆ（Interface）２２３を介して、メモリカード２２４が装着可能なカードホルダ２２５に接続されている。これによって、制御部２０５は、カードホルダ２２５に装着されたメモリカード２２４と、カードＩ／Ｆ２２３を介して情報伝送することができる。

また、制御部２０５は、通信Ｉ／Ｆ２２９を介して第１のＬＡＮ端子２３０に接続されている。これにより、制御部２０５は、第１のＬＡＮ端子２３０に接続されたＬＡＮ対応の機器と、通信Ｉ／Ｆ２２９を介して情報伝送することができる。

また、制御部２０５は、通信Ｉ／Ｆ２３１を介して第２のＬＡＮ端子２３２に接続されている。これにより、制御部２０５は、第２のＬＡＮ端子２３２に接続されたＬＡＮ対応の各種機器と、通信Ｉ／Ｆ２３１を介して情報伝送することができる。

また、制御部２０５は、ＵＳＢ Ｉ／Ｆ２３３を介してＵＳＢ端子２３４に接続されている。これにより、制御部２０５は、ＵＳＢ端子２３４に接続された各種機器（例えば、外部記憶装置２２６）と、ＵＳＢ Ｉ／Ｆ２３３を介して情報伝送することができる。

次に、本実施形態にかかるテレビジョン放送表示装置１００の特徴的なハードウェア構成について説明する。図２は、本実施形態にかかるテレビジョン放送表示装置の特徴的な信号処理系を示すブロック図である。

本実施形態にかかるテレビジョン放送表示装置１００においては、制御部２０５、映像音声信号処理部２０６、ＯＳＤ信号生成部２０９およびバックエンド処理部２０７それぞれが独立した半導体チップ（ＳｏＣ）により構成されている。そして、制御部２０５、映像音声信号処理部２０６およびＯＳＤ信号生成部２０９と、バックエンド信号処理部２０７とは、ＨＤＭＩやDisplay Port等の汎用のインターフェース２０４を介して接続されている。

このように、制御部２０５、映像音声信号処理部２０６、ＯＳＤ信号生成部２０９およびバックエンド処理部２０７をそれぞれ独立した半導体チップによって構成することにより、制御部２０５、映像音声信号処理部２０６、ＯＳＤ信号生成部２０９およびバックエンド処理部２０７それぞれの機能を一つの半導体チップに実装したＳｏＣを用いることによる回路規模の大型化やコストの増大を防止することができる。

映像音声信号処理部２０６は、テレビ視聴時には、放送入力部２０２が備えるＴＳ復号機２０２ｃおよびＴＳ復号機２０４ｃからそれぞれ供給されたデジタルの映像信号に対して、選択的に所定のデジタル信号処理を施して、表示対象の映像信号に基づく第１画像３０１を構成する各画素のＹＵＶ（またはＲＧＢ）値を表す色画像情報および当該第１画像３０１を構成する各画素の透明度を表すα情報を含む形式（フォーマット）のＹＵＶＡ（またはＲＧＢＡ）データ（元画像データ）に変換し、インターフェース２０４を介してバックエンド処理部２０７に出力する。すなわち、映像音声信号処理部２０６は、第１画像３０１を表す色画像情報および当該第１画像３０１の透明度を表すα情報を含む元画像データをバックエンド信号処理部２０７（外部機器の一例）に出力する情報処理装置の一例である。

また、映像音声信号処理部２０６は、録画番組再生時も同様に、制御部２０５を介して丸録り録画用記憶装置２７１または外部記憶装置２２６から読み出された録画番組のデータ（映像信号）に対して、所定のデジタル信号処理を施して、録画番組のデータに基づく第１画像３０１を構成する各画素のＹＵＶ（またはＲＧＢ）値を表す色画像情報および当該第１画像３０１を構成する各画素の透明度を表すα情報を含む形式（フォーマット）のＹＵＶＡ（またはＲＧＢＡ）データ（元画像データ）に変換し、インターフェース２０４を介してバックエンド処理部２０７に出力する。

制御部２０５は、ＥＰＧ情報や字幕情報等を表示するために生成した画像情報に基づく第２画像３０２を構成する各画素のＲＧＢ値を表す色画像情報および第２画像３０２を構成する各画素の透明度を表すα情報を含む形式（フォーマット）のＲＧＢＡデータ（元画像データ）に変換し、インターフェース２０４を介してバックエンド処理部２０７に出力する。すなわち、制御部２０５は、第２画像３０２を表す色画像情報および当該第２画像３０２の透明度を表すα情報を含む元画像データをバックエンド信号処理部２０７に出力する情報処理装置の一例である。

ＯＳＤ信号生成部２０９は、各種情報を設定するための設定画面を表示するためのＯＳＤ信号に対して、所定のデジタル信号処理を施して、ＯＳＤ信号に基づく第３画像３０３を構成する各画素のＲＧＢ値を表す色画像情報および第３画像３０３を構成する各画素の透明度を表すα情報を含む形式（フォーマット）のＲＧＢＡデータ（元画像データ）に変換し、インターフェース２０４を介してバックエンド処理部２０７に出力する。すなわち、ＯＳＤ信号生成部２０９は、第３画像３０３を表す色画像情報および当該第３画像３０３の透明度を表すα情報を含む元画像データをバックエンド信号処理部２０７に出力する情報処理装置の一例である。

本実施形態では、映像音声信号処理部２０６、制御部２０５およびＯＳＤ信号生成部２０９は、OpenGLに従って、ＹＵＶＡ（またはＲＧＢＡ）データの出力処理を行うものとするが、これに限定するものではなく、例えば、DirectXなどの他の一般的なＡＰＩ（Application Programming Interface）によって、ＹＵＶＡ（またはＲＧＢＡ）データの出力処理を行っても良い。

バックエンド処理部２０７は、映像音声信号処理部２０６、制御部２０５およびＯＳＤ信号生成部２０９それぞれから出力されたＹＵＶＡ（またはＲＧＢＡ）データに含まれる色画像情報およびα情報に従って、第１画像３０１と第２画像３０２と第３画像３０３とを重ね合わせた合成画像３０４を生成する外部機器の一例である。そして、バックエンド処理部２０７は、生成した合成画像３０４を、映像処理部２１０（図１参照）およびＬＶＤＳ（Low Voltage Differential Signaling）等のインターフェース２１５を介して表示部２１４または出力端子２１１（図１参照）に出力して映像表示させる。

次に、図３〜図５を用いて、映像音声信号処理部２０６、制御部２０５およびＯＳＤ信号生成部２０９においてＹＵＶＡ（ＲＧＢＡ）データを出力する処理について詳細に説明する。図３は、従来の情報処理装置からのＲＧＢＡデータの出力処理を説明するための図である。図４は、本実施形態にかかる制御部においてＲＧＢＡデータを出力する処理の流れを示すフローチャートである。図５は、本実施形態にかかる制御部においてＲＧＢＡデータの出力処理を説明するための図である。なお、以下の説明では、制御部２０５からのＲＧＢＡデータの出力処理について説明するが、映像音声信号処理部２０６およびＯＳＤ信号生成部２０９からも同様にしてＹＵＶＡ（またはＲＧＢＡ）データが出力される。

ＨＤＭＩやDisplay Port等の汎用のインターフェースを介して外部機器と接続された従来の情報処理装置においては、表示対象のグラフィクスオブジェクトのＲＧＢＡデータを出力する場合、図３に示すように、まず、当該情報処理装置が備えるＶＲＡＭ（Video RAM）等の記憶装置に、ＲＧＢＡデータを描画するための記憶領域（以下、オンスクリーンサーフェースという）を確保するとともに、確保したオンスクリーンサーフェースの予め設定された領域に対してＲＧＢＡデータを描画する。

情報処理装置におけるＲＧＢＡデータの出力処理がOpenGLに従って実行される場合には、情報処理装置は、表示対象のグラックスオブジェクトのＲＧＢＡデータを、α情報を含めた形式のままオンスクリーンサーフェースに描画することができる。次いで、情報処理装置は、図３に示すように、オンスクリーンサーフェースに描画したグラフィクスオブジェクトのＲＧＢＡデータを、汎用のインターフェースを介して外部機器に出力する。その際、汎用のインターフェースにおいては、α情報を伝送することができないため、情報処理装置から出力されたＲＧＢＡデータは、ＨＤＭＩやDisplay PortやＤＶＩ（Digital Visual Interface）等で伝送可能な形式、すなわちα情報を含まない形式のＲＧＢデータとなって外部機器に出力される。

一方、本実施形態にかかる制御部２０５は、表示対象のグラフィクスオブジェクトであるＲＧＢＡデータを出力する場合、図５に示すように、まず、制御部２０５が備えるＶＲＡＭ等の記憶装置に、オンスクリーンサーフェース以外の記憶領域（以下、オフスクリーンサーフェースという）を確保し、確保したオフスクリーンサーフェースに対して元画像データの一例であるＲＧＢＡデータ（以下、元ＲＧＢＡデータという）を描画する（ステップＳ４０１）。本実施形態では、制御部２０５は、ＲＧＢＡデータの出力処理がOpenGLに従って実行されるため、フレームバッファオブジェクトを用いることにより、オフスクリーンサーフェースに対して、α情報を含む形式の元ＲＧＢＡデータを描画する。

次いで、制御部２０５は、図５に示すように、オフスクリーンサーフェースに描画した元ＲＧＢＡデータをオンスクリーンサーフェースに描画する際に、元ＲＧＢＡデータからα情報を分離する（ステップＳ４０２）。次に、制御部２０５は、記憶装置にオンスクリーンサーフェースを確保するとともに、分離したα情報を色画像情報として含めたＲＧＢＡデータを、オンスクリーンサーフェースに対して描画する（ステップＳ４０３）。

そして、制御部２０５は、図５に示すように、オンスクリーンサーフェースに描画されたＲＧＢＡデータを、インターフェース２０４を介してバックエンド処理部２０７に出力する（ステップＳ４０４）。つまり、制御部２０５は、表示対象のグラフィックオブジェクトの元ＲＧＢＡデータ（元画像データの一例）に含まれるα情報を色画像情報として、インターフェース２０４を介してバックエンド処理部２０７に出力する出力部の一例として機能する。

これにより、ＨＤＭＩやDisplay Port等やＤＶＩ等の汎用のインターフェース２０４を介して、バックエンド処理部２０７に対してα情報を出力することできるので、バックエンド処理部２０７においてα情報に従った合成画像３０４の生成することができる。

バックエンド処理部２０７では、制御部２０５から出力されたＲＧＢＡデータに含まれる色画像情報と当該色画像情報として含まれるα情報とから、α情報を含む形式の元ＲＧＢＡデータを復元する。そして、バックエンド処理部２０７は、復元した元ＲＧＢＡデータに含まれるα情報に従って、復元した元ＲＧＢＡデータに含まれる色画像情報に基づく第２画像と、他の画像（第１画像３０１、第３画像３０３）と、を重ね合わせた合成画像３０４を生成し、生成した合成画像３０４を表示部２１４または出力端子２１１に出力する。本実施形態では、バックエンド処理部２０７は、３つの画像３０１〜３０３を重ね合わせた合成画像３０４を生成しているが、複数の画像を重ね合わせた合成画像３０４を生成するものであれば良い。

次に、図６〜１１を用いて、元画像データに含まれるα情報をインターフェース２０４を介してバックエンド処理部２０７に出力する方法の具体例について説明する。

図６は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の流れを示すフローチャートである。図７は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する例を示す図である。制御部２０５は、図７に示すように、まず、オフスクリーンサーフェースを確保し、確保したオフスクリーンサーフェースに対して元ＲＧＢＡデータ（元画像データの一例）を描画する（ステップＳ６０１）。

次いで、制御部２０５は、図７に示すように、オフスクリーンサーフェースに描画された元ＲＧＢＡデータに含まれるα情報（Ａ＝α）を不透明であることを表す値（Ａ＝１．０）とした第１ＲＧＢＡデータ（元画像データに含まれる色画像情報を含む第１画像データの一例）を生成する（ステップＳ６０２）。さらに、制御部２０５は、図７に示すように、オフスクリーンサーフェースに描画された元ＲＧＢＡデータに含まれるα情報（Ａ＝α）を色画像情報（Ｂ＝α）とした第２ＲＧＢＡデータ（元画像データに含まれるα情報を色画像情報として含めた第２画像データの一例）を生成する（ステップＳ６０３）。

例えば、制御部２０５は、元ＲＧＢＡデータに含まれるα情報（Ａ＝α）を色画像情報（Ｂ＝α）とし、かつ他の色画像情報を色画像情報（Ｒ＝０，Ｇ＝０）とした第２ＲＧＢＡデータを生成する。本実施形態では、制御部２０５は、元ＲＧＢＡデータに含まれるα情報（Ａ＝α）をＢの色画像情報とした第２ＲＧＢＡデータを生成しているが、元ＲＧＢＡデータに含まれるα情報を、ＲＧＢの色画像情報のいずれかとした第２ＲＧＢＡデータを生成するものであれば良い。

次に、制御部２０５は、図７に示すように、当該制御部２０５が有する記憶装置に、２つのオンスクリーンサーフェースを確保し、確保した２つのオンスクリーンサーフェースそれぞれに、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを描画する（ステップＳ６０４）。本実施形態では、制御部２０５は、当該制御部２０５が備えるＧＰＵ（Graphic Processing Unit）がシェーダプログラムなどを用いて、オフスクリーンサーフェースからオンスクリーンサーフェースに第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを描画する処理を実行する。

そして、制御部２０５は、図７に示すように、複数系統（本実施形態では、２系統）のインターフェース２０４を介して、２つのオンスクリーンサーフェースに描画された第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを同期してバックエンド処理部２０７に出力する（ステップＳ６０５）。第１ＲＧＢＡデータおよび第２ＲＧＢＡデータが同期して出力されるため、バックエンド処理部２０７は、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータが入力された際に、当該第１ＲＧＢＡデータおよび第２ＲＧＢＡデータから容易に元ＲＧＢＡデータを復元することができる。

制御部２０５は、バックエンド処理部２０７に出力する元ＲＧＢＡデータが動画像（第２画像３０２）を構成する各フレームのＲＧＢＡデータである場合、動画像を構成するフレーム毎に、元ＲＧＢＡデータから、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを生成して、バックエンド処理部２０７に出力する。

図８は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の流れを示すフローチャートである。図９は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する例を示す図である。制御部２０５は、図８および図９に示すように、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを生成する処理（ステップＳ６０１〜ステップＳ６０３）は、図６および図７に示す処理と同様である。

制御部２０５は、図９に示すように、オンスクリーンサーフェースを縦方向若しくは横方向に２分割し、分割したオンスクリーンサーフェースのいずれか一方に、第１ＲＧＢＡデータを圧縮して描画し、分割したオンスクリーンサーフェースの他方に、第２ＲＧＢＡデータを圧縮して描画する（ステップＳ８０１）。

具体的には、制御部２０５は、オンスクリーンサーフェースを縦方向に分割した場合、第１ＲＧＢＡデータに含まれる色画像情報および第２ＲＧＢＡデータに含まれる色画像情報それぞれの横方向の解像度を落とすことにより、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを圧縮する。一方、制御部２０５は、オンスクリーンサーフェースを横方向に分割した場合、第１ＲＧＢＡデータに含まれる色画像情報および第２ＲＧＢＡデータに含まれる色画像情報それぞれの縦方向の解像度を落とすことにより、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを圧縮する。

オンスクリーンサーフェースに描画可能な画像の縦方向または横方向への解像度が、オフスクリーンサーフェースに描画可能な画像の解像度の２倍である場合には、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを圧縮することなく、オンスクリーンサーフェースに描画することができる。すなわち、制御部２０５は、オンスクリーンサーフェースに描画可能な画像の縦方向または横方向への解像度に応じて、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを圧縮すれば良い。

次いで、制御部２０５は、図９に示すように、オンスクリーンサーフェースに描画された第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを一つの画像データとしてインターフェース２０４を介してバックエンド処理部２０７に出力する（ステップＳ８０２）。バックエンド処理部２０７は、制御部２０５から出力された一つの画像データに基づく画像を上下または左右に分割した２つの画像から、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを復元するとともに、復元した第１ＲＧＢＡデータおよび第２ＲＧＢＡデータからα情報を含む元ＲＧＢＡデータを復元する。

図１０は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の流れを示すフローチャートである。図１１は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の例を示す図である。制御部２０５は、図１０に示すように、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを生成する処理（ステップＳ６０１〜ステップＳ６０３）は、図６に示す処理と同様である。

制御部２０５は、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを交互にオンスクリーンサーフェースに対して描画する。本実施形態では、制御部２０５は、表示部２１４のフレームレートで、オンスクリーンサーフェースに描画するデータを、第１ＲＧＢＡデータまたは第２ＲＧＢＡデータにシーケンシャルに切り替える（ステップＳ１００１）。例えば、制御部２０５は、表示部２１４に表示される合成画像３０４（動画像）のフレームが偶数フレームである場合には、第１ＲＧＢＡデータをオンスクリーンサーフェースに描画する。一方、制御部２０５は、表示部２１４に表示される合成画像３０４（動画像）のフレームが奇数フレームである場合には、第２ＲＧＢＡデータをオンスクリーンサーフェースに描画する。

次いで、制御部２０５は、オンスクリーンサーフェースに描画されたデータをインターフェース２０４を介してバックエンド処理部２０７に出力することにより、第１ＲＧＢＡデータまたは第２ＲＧＢＡデータを交互に出力する（ステップＳ１００２）。本実施形態では、制御部２０５は、オンスクリーンサーフェースへの一のデータの描画が完了するまで、新たなデータの描画を禁止することにより、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを交互に出力する。

本実施形態では、制御部２０５は、表示部２１４のフレームレートで、インターフェースを介してバックエンド処理部２０７に出力するデータを、第１ＲＧＢＡデータまたは第２ＲＧＢＡデータに切り替えているが、第１ＲＧＢＡデータおよび第２ＲＧＢＡデータを順次切り替えて出力するものであれば良く、例えば、表示部２１４の垂直同期信号（Ｖｓｙｎｃ）に同期して、インターフェース２０４を介してバックエンド処理部２０７に出力するデータを、第１ＲＧＢＡデータまたは第２ＲＧＢＡデータに切り替えても良い。

本実施形態では、制御部２０５が、元画像データに含まれるα情報を色画像情報として、インターフェース２０４を介してバックエンド処理部２０７に出力する例について説明したが、例えば、元画像データに基づく画像のステンシル情報を、色画像情報として、インターフェース２０４を介してバックエンド処理部２０７に出力することも可能である。

また、制御部２０５は、元画像データに基づく画像の奥行き情報（デプスバッファ情報）を、色画像情報として、インターフェース２０４を介してバックエンド処理部２０７に出力することも可能である。その際、制御部２０５は、奥行き情報のデータ量が、色画像情報として出力可能なデータ量を超えた場合、奥行き情報の下位のビットを削除等して奥行き情報を圧縮して色画像情報として出力する。

このように、第１の実施形態にかかるテレビジョン放送表示装置１００によれば、α情報を含む元画像データを出力する情報処理装置（制御部２０５、映像音声信号処理部２０６、ＯＳＤ信号生成部２０９）と、元画像データに基づく画像を他の画像に重ね合わせる外部機器（バックエンド処理部２０７）とが、汎用のインターフェース２０４を介して接続されている場合でも、α情報を外部機器に伝送することができるので、α情報に従って元画像データに基づく画像と他の画像との重ね合わせが可能となる。

（第２の実施形態）
本実施形態は、元画像データを出力する情報処理装置がテレビジョン放送表示装置の外部に存在する例である。以下の説明では、第１の実施形態と異なる箇所について説明する。

図１２は、本実施形態にかかる画像データ伝送システムの構成を示すブロック図である。図１２に示すように、本実施形態にかかるテレビジョン放送表示装置１２００は、ＤＶＤ（Digital Versatile Disk）プレーヤ１２１０、ノートＰＣ（Personal Computer）１２２０などの外部機器をＨＤＭＩやDisplay Port等の汎用のインターフェース２０４を接続可能な複数の入力端子１２０２を備えている。

そして、本実施形態では、バックエンド処理部１２０１には、映像音声信号処理部２０６、制御部２０５およびＯＳＤ信号生成部２０９それぞれから出力されたＹＵＶＡ（またはＲＧＢＡ）データに加えて、入力端子１２０２を介してＤＶＤプレーヤ１２１０およびノートＰＣ１２２０等から出力されたＹＵＶＡ（ＲＧＢＡ）データが入力される。そして、バックエンド処理部１２０１は、ＤＶＤプレーヤ１２１０およびノートＰＣ１２２０等から出力されたＹＵＶＡ（ＲＧＢＡ）データについても、第１の実施形態と同様にして、当該ＹＵＶＡ（またはＲＧＢＡ）データに含まれる色画像情報およびα情報に従って、第１画像３０１と第２画像３０２と第３画像３０３とを重ね合わせた合成画像３０４を生成する。

また、入力端子１２０２にインターフェース２０４を介して接続されたＤＶＤプレーヤ１２１０およびノートＰＣ１２２０は、第１の実施形態にかかる映像音声信号処理部２０６、制御部２０５およびＯＳＤ信号生成部２０９と同様にして、ＹＵＶＡ（ＲＧＢＡ）データを出力する。

このように、第２の実施形態の画像データ伝送システムによれば、α情報を含む元画像データを出力する情報処理装置（ＤＶＤプレーヤ１２１０およびノートＰＣ１２２０等）がテレビジョン放送表示装置１２００の外部にある場合でも、α情報を外部機器に伝送することができるので、α情報に従って元画像データに基づく画像と他の画像との重ね合わせが可能となる。

（第３の実施形態）
本実施形態は、元画像データに含まれる各画素の色画像情報のうちα情報が透明を表す画素の色画像情報をクロマキーに置き換えて、インターフェースを介して外部機器に出力する例である。以下の説明では、第１の実施形態と異なる箇所について説明する。

図１３は、本実施形態にかかるテレビジョン放送表示装置の特徴的な信号処理系を示すブロック図である。図１４は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の流れを示すフローチャートである。図１５は、本実施形態にかかるテレビジョン放送表示装置においてα情報を外部機器に出力する処理の例を示す図である。なお、以下の説明では、制御部１３０３からのＲＧＢＡデータの出力処理について説明するが、映像音声信号処理部１３０２およびＯＳＤ信号生成部１３０４からも同様にしてＹＵＶＡ（ＲＧＢＡ）データが出力される。

本実施形態にかかるテレビジョン放送表示装置１３００の制御部１３０３は、表示対象のグラフィックオブジェクトの元ＲＧＢＡデータを出力する場合、図１５に示すように、まず、制御部１３０３が備えるＶＲＡＭ等の記憶装置に、オフスクリーンサーフェースを確保し、確保したオフスクリーンサーフェースに対して元ＲＧＢＡデータを描画する（ステップＳ１４０１）。本実施形態においても、制御部１３０３は、元ＲＧＢＡデータの出力処理がOpenGLに従って実行されるため、フレームバッファオブジェクトを用いることにより、オフスクリーンサーフェースに対して、α情報を含む形式の元ＲＧＢＡデータを描画する。

次いで、制御部１３０３は、図１５に示すように、オフスクリーンサーフェースに描画した元ＲＧＢＡデータに含まれる各画素の色画像情報のうちα情報が透明を表す画素の色画像情報をクロマキーに置き換える（ステップＳ１４０２）。本実施形態では、制御部１３０３は、オフスクリーンサーフェースに描画した元ＲＧＢＡデータに含まれる画素のうち、α情報が透明を表す画素の色画像情報をクロマキー（例えば、Ｒ＝０ｘ００，Ｇ＝０ｘ００，Ｂ＝０ｘ０３）に置き換える。

その際、制御部１３０３は、オフスクリーンサーフェースに描画した元ＲＧＢＡデータ（元画像データ）が含む各画素の色画像情報のうちクロマキーと同じ値を示しかつα情報が不透明を表す色画像情報を、当該色画像情報に近い色画像情報（言い換えると、当該色画像情報により表される色と同じ色と認識可能な色を表す色画像情報）に置き換える。本実施形態では、制御部１３０３は、ＲＧＢＡデータが含む各画素の色画像情報のうちクロマキーと同じ値（例えば、Ｒ＝０ｘ００，Ｇ＝０ｘ００，Ｂ＝０ｘ０３）を示しかつα情報が不透明を表す画素の色画像情報（すなわち、Ｒ＝０ｘ００，Ｇ＝０ｘ００，Ｂ＝０ｘ０３）を、当該色画像情報に近い色画像情報（例えば、Ｒ＝０ｘ００，Ｇ＝０ｘ００，Ｂ＝０ｘ０２）に置き換える。これにより、元画像データの一例である元ＲＧＢＡデータに含まれる各画素のうちクロマキーと同じ色画像情報を持つ画素が、クロマキーと判別されて透明な画素として表示されることを防止でき、かつ元画像データにおける色と略同じ色の画素として表示することができる。

次に、制御部１３０３は、図１５に示すように、記憶装置にオンスクリーンサーフェースを確保するとともに、透明の画素の色画像情報をクロマキーに置き換えたＲＧＢＡデータを、オンスクリーンサーフェースに対して描画する（ステップＳ１４０３）。そして、制御部１３０３は、図１５に示すように、オンスクリーンサーフェースに描画されたＲＧＢＡデータを、インターフェース２０４を介してバックエンド処理部１３０１に出力する（ステップＳ１４０４）。

バックエンド処理部１３０１は、制御部１３０３から出力されたＲＧＢＡデータに含まれるクロマキーに従って、制御部１３０３から出力されたＲＧＢＡデータに基づく第２画像３０２と、制御部１３０３と同様にして映像音声信号処理部２０６およびＯＳＤ信号生成部２０９から出力されたＲＧＢＡ（ＹＵＶＡ）データに基づく第１画像３０１および第２画像３０３とを重ね合わせた合成画像３０４を生成する。

このように、第３の実施形態にかかるテレビジョン放送表示装置１３００によれば、α情報を含む元画像データを出力する情報処理装置（制御部１３０３、映像音声信号処理部１３０２、ＯＳＤ信号生成部１３０４）と、元画像データに基づく画像を他の画像に重ね合わせる外部機器（バックエンド処理部１３０１）とが、汎用のインターフェース２０４を介して接続されている場合でも、元画像データを構成する画素のα情報をクロマキーを利用して外部機器に伝送することができるので、α情報に従って元画像データに基づく画像と他の画像との重ね合わせが可能となる。

以上説明したとおり、第１から第３の実施形態によれば、汎用のインターフェースを介して元画像データに含まれるα情報を伝送することができるので、α情報に従って元画像データに基づく画像と他の画像との重ね合わせを可能とする。

なお、本実施形態の情報処理装置（制御部２０５，１３０３、映像音声信号処理部２０６，１３０２、ＯＳＤ信号生成部２０９，１３０４）で実行されるプログラムは、ＲＯＭ等に予め組み込まれて提供される。

本実施形態の情報処理装置（制御部２０５，１３０３、映像音声信号処理部２０６，１３０２、ＯＳＤ信号生成部２０９，１３０４）で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。

さらに、本実施形態の情報処理装置（制御部２０５，１３０３、映像音声信号処理部２０６，１３０２、ＯＳＤ信号生成部２０９，１３０４）で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の情報処理装置（制御部２０５，１３０３、映像音声信号処理部２０６，１３０２、ＯＳＤ信号生成部２０９，１３０４）で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。

本実施形態の情報処理装置（制御部２０５，１３０３、映像音声信号処理部２０６，１３０２、ＯＳＤ信号生成部２０９，１３０４）で実行されるプログラムは、上述した出力部を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（プロセッサ）が上記ＲＯＭからプログラムを読み出して実行することにより上記出力部が主記憶装置上にロードされ、出力部が主記憶装置上に生成されるようになっている。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１００，１２００…テレビジョン放送表示装置、２０４…インターフェース、２０５，１３０３…制御部、２０６，１３０２…映像音声信号処理部、２０７，１３０１…バックエンド処理部、２０９，１３０４…ＯＳＤ信号生成部、１２１０…ＤＶＤプレーヤ、１２２０…ノートＰＣ。

Claims (7)

1. 画像の色画像情報および前記画像の透明度を表すα情報を含む元画像データをインターフェースを介して外部機器に出力する情報処理装置であって、
   複数系統の前記インターフェースを介して、前記元画像データに含まれる前記色画像情報を含む第１画像データおよび前記元画像データに含まれる前記α情報を前記色画像情報として含む第２画像データを同期して前記外部機器に出力する出力部、
   を備えた情報処理装置。
2. 画像の色画像情報および前記画像の透明度を表すα情報を含む元画像データをインターフェースを介して外部機器に出力する情報処理装置であって、
   前記元画像データに含まれる前記色画像情報を含む第１画像データおよび前記元画像データに含まれる前記α情報を前記色画像情報として含む第２画像データを圧縮して一の画像データとして前記インターフェースを介して前記外部機器に出力する出力部、
   を備えた情報処理装置。
3. 画像の色画像情報および前記画像の透明度を表すα情報を含む元画像データをインターフェースを介して外部機器に出力する情報処理装置であって、
   前記元画像データに含まれる前記色画像情報を含む第１画像データまたは前記元画像データに含まれる前記α情報を前記色画像情報として含む第２画像データを交互に前記インターフェースを介して前記外部機器に出力する出力部、
   を備えた情報処理装置。
4. 画像を構成する各画素の色画像情報および前記各画素の透明度を表すα情報を含む元画像データをインターフェースを介して外部機器に出力する情報処理装置であって、
   前記元画像データに含まれる前記各画素の前記色画像情報のうち前記α情報が透明を表す前記画素の前記色画像情報をクロマキーに置き換えて、前記インターフェースを介して前記外部機器に出力する出力部、
   を備えた情報処理装置。
5. 前記出力部は、前記元画像データが含む前記各画素の前記色画像情報のうち前記クロマキーと同じ値を示し前記α情報が不透明を表す前記色画像情報を、当該色画像情報に近い色画像情報に置き換えて、前記インターフェースを介して前記外部機器に出力する請求項４に記載の情報処理装置。
6. 画像の色画像情報および前記画像の透明度を表すα情報を含む元画像データをインターフェースを介して外部機器に出力する表示制御方法であって、
   複数系統の前記インターフェースを介して、前記元画像データに含まれる前記色画像情報を含む第１画像データおよび前記元画像データに含まれる前記α情報を前記色画像情報として含む第２画像データを同期して前記外部機器に出力する、
   ことを含む表示制御方法。
7. 画像の色画像情報および前記画像の透明度を表すα情報を含む元画像データをインターフェースを介して外部機器に出力する表示制御方法であって、
   前記元画像データに含まれる前記色画像情報を含む第１画像データおよび前記元画像データに含まれる前記α情報を前記色画像情報として含む第２画像データを圧縮して一の画像データとして前記インターフェースを介して前記外部機器に出力する、
   ことを含む表示制御方法。

Images