JP5039201B2

JP5039201B2 - 画像音声通話システム及び受信装置

Info

Publication number: JP5039201B2
Application number: JP2010293430A
Authority: JP
Inventors: 智剛井田
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 2010-12-28
Filing date: 2010-12-28
Publication date: 2012-10-03
Anticipated expiration: 2030-12-28
Also published as: JP2012142753A; US8587633B2; US20120162352A1

Description

本発明の実施形態は、少なくとも２つの３Ｄ表示可能なテレビ受信機間でネットワークを利用して３Ｄテレビ電話を実施可能とする画像音声通話システム及び受信装置に関する。

ネットワークとしてのインターネット系のテレビ電話サービスとして、Skype社が提供するP2P技術を利用した通話サービスがある。このサービスにより、カメラ付きパソコンで国内外亘り無料のテレビ電話が可能となっていて、今後とも利用者が増加する傾向にある。

一方、立体(以下、３Ｄ)表示を可能とするデジタルテレビ放送が開始されており、３Ｄ対応のデジタルテレビ受信機やパソコンも普及する傾向にある。以下、３Ｄの略記に伴い、通常の２次元表示を２Ｄ表示と略記する。

３Ｄ表示システムとしては、例えば、ウェブサーバーからの２Ｄ画像情報と３Ｄ画像情報を受信側のパソコンで切り換えて表示するシステムがあって、送信側で３Ｄと２Ｄとを識別する識別子を付加することによって、２Ｄと３Ｄが混在するコンテンツであっても、受信側では効率的に２Ｄ画像と３Ｄ画像を切り換えて表示することが可能である。

このような従来の３Ｄ表示システムは、受信側での技術であって、インターネット系の上記テレビ電話サービスを実施する際に、伝送先相手側テレビ受信機の状態が３Ｄ映像表示が可能か否かに応じて伝送元自分側テレビ受信機から前記伝送先相手側テレビ受信機に対してどのような映像を送り出すのが適切かについては考慮されていない。

特開２００５−１７５５６６号公報

そこで、本発明は、インターネットによるテレビ電話サービスを実施する際に、伝送先相手側テレビ受信機が３Ｄ映像表示が可能か否かの状態に応じて、伝送元自分側テレビ受信機から前記伝送先相手側テレビ受信機に適した２Ｄ又は３Ｄの映像を伝送することが可能な画像音声通話システム及び受信装置を提供することを目的とするものである。

本発明の実施形態の画像音声通話システムは、デジタル放送信号を受信し、復調された信号から２Ｄ又は３Ｄの映像信号を再生するデジタル放送受信部と、再生された２Ｄ又は３Ｄの映像信号をディスプレイ表示部に出力するための表示処理部と、テレビ電話用のカメラ撮像部と、前記カメラ撮像部で撮像された２Ｄ又は３Ｄの画像データを外部へ送信し、また外部からテレビ電話用の２Ｄ又は３Ｄの画像データを受信する通信部と、伝送先相手側機器が３Ｄ映像表示可能な状態かどうかをメタ情報として授受し、前記メタ情報に応じて２Ｄ又は３Ｄの画像データ或いはメッセージを該伝送先相手側機器に伝送するよう制御する制御部と、を具備し、前記制御部は、前記ディスプレイ表示部の表示画面を３Ｄ映像表示にするための設定又は３Ｄ映像表示と２Ｄ映像表示とを選択するためのメッセージを表示するための設定を行う表示設定部を備え、前記伝送先相手側機器から３Ｄ画像が入力されることを示す情報があった場合には、前記表示設定部の前記設定に従った表示を行うものである。

本発明の一実施形態の画像音声通話システムにおけるテレビ受信機を概略的に示すブロック図。制御部の１つの制御動作例を示すフローチャート。図２における「オフ」設定のときに表示されるメッセージ表示の画面例を示す図。図１における制御部のもう１つの制御動作例を示すフローチャート。図４における「メガネなし」のときに表示されるメッセージ表示の画面例を示す図。

以下、本発明の実施の形態について図面を参照して詳細に説明する。
図１は本発明の一実施形態の画像音声通話システムにおけるテレビ受信機を概略的を示すブロック図である。

図１は、デジタル放送受信用チューナーを搭載するテレビ受信機による画像音声通話システムにおける、一方の画像音声通話装置であるテレビ受信機の概略的な構成を示している。実際に相互に３Ｄ映像表示でテレビ電話するには、伝送元(又は伝送先)の自分側テレビ受信機と、伝送先(又は伝送元)の相手側テレビ受信機がともに３Ｄ表示可能な機器であることが必要となる。実際には、双方とも通常は２Ｄ表示を基準とし、必要に応じて表示設定を３Ｄ表示に変えて、或いは、受信される信号が３Ｄの信号であればこれを検出し３Ｄ表示に切り換えて３Ｄでテレビ電話することができる。

図１において、画像音声通話システム１００におけるテレビ受信機は、デジタル放送受信部１２０と、テレビ電話用とテレビ番組視聴用とを兼用するディスプレイ表示部１０６及びスピーカー１０８と、テレビ電話用のカメラ撮像部１１８及びマイク集音部１１９と、通信部としてのネットワーク接続用のＬＡＮ端子１１６又は無線ＬＡＮ送受信部１１７と、制御部１１０と、制御部(例えばＣＰＵ)と通信を行うためのバス１０９と、データ保存用のＲＡＭ１１１と、プログラム保存用のＲＯＭ１１２と、文字入力等を行うためのキーボード１１３と、操作手段としてのリモコン１１４と、リモコン受信部１１５と、メガネ検出部としての３Ｄメガネ検出部１２１とを備えている。

デジタル放送受信部１２０は、アンテナ１０１と、チューナー１０２と、信号処理部１０３と、映像処理部１０４と、表示処理部１０５と、音声処理部１０７と、これらの回路部を制御部１１０に接続するバス１０９とを備え、デジタル放送信号を受信し、復調された信号から２Ｄ又は３Ｄの映像信号及び音声信号を再生する。

ディスプレイ表示部１０６及びスピーカー１０８は、テレビ電話用とテレビ番組視聴用とを兼用するもので、再生された２Ｄ又は３Ｄの映像信号及び音声信号をそれぞれ出力する。

カメラ撮像部１１８及びマイク集音部１１９は、テレビ電話用に使用するもので、２個のカメラにより左右の視差をつけた左眼用及び右眼用の３Ｄ用信号と、マイクによる音声信号とを出力する。

ネットワーク接続用のＬＡＮ端子１１６又は無線ＬＡＮ送受信部１１７は、図示しないインターネットに接続する端子又は無線送受信部であって、前記カメラ撮像部及びマイク集音部からの２Ｄ又は３Ｄの画像及び音声データを外部へ送信し、また外部からの２Ｄ又は３Ｄの画像及び音声データを受信する。

制御部１１０は、例えばＣＰＵで構成され、伝送先相手側テレビ受信機が３Ｄ対応テレビ受像機かつまり３Ｄ映像表示可能な状態かどうかをメタ情報として授受し、テレビ電話を実施する際に、伝送先相手側テレビ受信機の３Ｄ映像表示が可能な状態か否かに応じて２Ｄ又は３Ｄの画像及び音声データ或いはメッセージを伝送先相手側テレビ受信機に伝送するよう制御する。

前記制御部１１０は、ディスプレイ表示部１０６の表示画面を３Ｄ映像表示にするか、２Ｄ映像表示にするか、２Ｄ又は３Ｄのどちらの映像表示にもせずメッセージ表示だけにするか、の何れか１つを選択するための設定を予め行う自動表示設定部１１０ａを備え、伝送先相手側テレビ受信機から３Ｄ画像が有るか否かの画像情報を取得し、３Ｄ画像有りの情報を得たとき、前記自動表示設定部１１０ａの前記設定に従った表示を行うよう制御する。

３Ｄメガネ検出部１２１は、例えば、３Ｄメガネに光反射体を付け、相手側テレビ受信機の表示面側(表示面は除く)の適宜の位置に発光ダイオードＬＥＤとフォトダイオードＰＤによる光検出手段を取り付けた構成とすることにより、ユーザーが３Ｄ視聴に適したテレビ画面と対面するほぼ正面に位置したときにＬＥＤからの発光を３Ｄメガネの光反射体に反射させそれをフォトダイオードＰＤで受光することによって相手側テレビ受信機が３Ｄ映像表示可能な状態に入ったことをメタ情報として送信元の自分側テレビ受信機に報知する。

以下に、より具体的に説明する。
アンテナ１０１で受信したＢＳ，ＣＳ，地上波等のデジタル放送は、チューナー１０２でユーザーが指示した視聴用のＣＨを選局し、復調された信号を信号処理部１０３で様々なデジタル信号として取り出し処理される。

その内、映像信号は映像処理部１０４で正しい画面サイズに調整され、表示処理部１０５でさらに文字情報等グラフィックが重ねられてディスプレイ表示部１０６にて画面表示され、ユーザーはテレビを視聴することができる。
また、音声信号は音声処理部１０７で音響処理して増幅され、スピーカー１０８で音声として出力され、ユーザーは視聴番組の音声を聴くことができる。

前記チューナー１０２，信号処理部１０３，映像処理部１０４，表示処理部１０５，音声処理部１０７といったデバイスは、ＩＩＣ−ＢＵＳといった通信ラインを介して制御部１１０でコントロールされており、データの授受を行っている。また、前記制御部１１０には他にＲＡＭ１１１、ＲＯＭ１１２、キーボード１１３、リモコン１１４から信号を受信するリモコン受信部１１５が接続されており、それぞれ信号やデータの授受を行っている。また、外部との通信としてＬＡＮ端子１１６や無線ＬＡＮ送受信部１１７があり、様々なデータを送受信する。

加えて、本実施形態では、制御部１１０に接続されたＲＯＭ１１２には、３Ｄ表示を可能とする３Ｄソフトウェア、インターネットによるテレビ電話を可能とする例えばSkypeによる通話サービス用ソフトウェアが格納されている。３Ｄテレビ電話を実施するためのカメラ撮像部１１８とマイク集音部１１９を有し、３Ｄ用に撮像及び集音した画像データ及び音声データをＬＡＮ端子１１６や無線ＬＡＮ送受信部１１７で外部に送受信する仕組みを備え、相手側テレビ受信機から送られてきた３Ｄテレビ電話による画像データと音声データを取得しディスプレイ表示部１０６で映像表示、スピーカー１０８で音声出力する構成としている。

さらに、伝送先相手側テレビ受信機が３Ｄ対応テレビで３Ｄ表示可能な状態で、しかもメガネを装着していることを相手側メガネ検出部１２１が検出しメタ情報として授受でき、その情報をもとに自分側テレビ受信機から相手側テレビ受信機へテレビ電話用の３Ｄ画像伝送を開始する。なお、相手側テレビ受信機のメガネ検出部としては、３Ｄメガネ検出部１２１のほかに、相手側カメラ撮像部１１８の撮像した映像に基づいて検出することも可能である。

次に、図２乃至図５を参照して、図１の画像音声通話装置としてのテレビ受信機を含む画像音声通話システムの動作について説明する。以下では、テレビ電話の動作を説明している。
図２は制御部の制御動作の一例を示すフローチャートである。例えば相手側からのコールに対して自分側リモコン１１４の受話ボタンを押したときからの動作を示している。

伝送先相手側テレビ受信機からテレビ電話の画像情報を取得した(ステップＳ1)ときに、まず、３Ｄ画像情報が有るか無いかを確認する(ステップＳ2)。ここで、ステップＳ1の画像情報とは、テレビ番組のための画像情報(テレビ番組自体は含まない)であって、相手側からの画像が３Ｄであるか否かの情報を意味している。ステップＳ2で、３Ｄ画像の情報が無ければ、ステップＳ4へ移行して２Ｄ映像で表示する。

また、ステップＳ2で、３Ｄ画像有りの情報を得たとき、ステップＳ3へ移行する。
ステップＳ3では、制御部１１０は、予めユーザーによって自動表示設定部１１０ａに対して設定された設定内容を参照して、３Ｄ映像が入力された時に自動表示設定を行う。

ここで、自動表示設定部１１０ａにおける設定について説明する。自動表示設定部１１０ａに予め設定できる自動表示設定の項目には３つあり、そのうちのどれか１つを選択して設定する。すなわち、(1)「２Ｄ」に設定、(2)「３Ｄ」に設定、(3)「オフ」(２Ｄ，３Ｄのどれも設定しない)に設定、３つである。

然るに、ステップＳ3において、(1)「２Ｄ」が設定されていれば、ステップＳ4へ移行して２Ｄ映像で表示する。(2)「３Ｄ」が設定されていれば、ステップＳ5へ移行して３Ｄ映像に切り換える。(3)「オフ」が設定されていれば、ステップＳ6へ移行してメッセージ表示だけにする。

図３は上記ステップＳ6で「オフ」設定のときに表示されるメッセージ表示の画面例を示している。
この画面例では、‘テレビ電話サービス’の下に、「３Ｄテレビ電話を受信しました。３Ｄテレビ電話を開始しますか？」の表示と共に、選択窓の表示が「２Ｄ」となって表示される。この状態で、リモコン１１４の決定(Enter)キーを押すとメッセージ表示画面から２Ｄ映像に変わって表示される。或いは、選択窓の左右の矢印にカーソルをポイントすることで、「２Ｄ」のほかに「３Ｄ」の選択肢が現れるので、「３Ｄ」を選択し、リモコン１１４の決定(Enter)キーを押すとメッセージ表示画面から３Ｄ映像に切り換わって表示される。なお、図３のメッセージ表示が画面上に表示されてから何もせず一定時間が経過すると、メッセージ表示画面から２Ｄ映像表示画面に変わる。従って、３Ｄ映像表示にしたいユーザーは、自分から３Ｄ表示に切り換えることが必要である。

図４は制御部の制御動作の一例を示すフローチャートである。例えば自分側からコールするに際して自分側リモコン１１４の送話ボタンを押したときからの動作を示している。
伝送先相手側テレビ受信機の情報を取得したときに(ステップＳ11)、まず、３Ｄ映像表示が可能か否かを確認する(ステップＳ12)。ステップＳ12で、３Ｄ映像表示が不可能であれば、ステップＳ14へ移行して相手側テレビ受信機へ２Ｄ画像を伝送する。このとき、伝送先相手側テレビ受信機からはカメラ撮像部１１８における２個のカメラのうちの１個のカメラの画像データのみを伝送先の相手側テレビ受信機へ送信すると同時に、マイク集音部１１９から音声データを伝送先の相手側テレビ受信機へ送信する。

そして、ステップＳ12で３Ｄ映像表示が可能であれば、ステップＳ13へ移行する。
ステップＳ13では、伝送先相手側テレビ受信機からのメタ情報により相手側ユーザーが３Ｄメガネを装着済みであるか否かを確認する。

ステップＳ13で、３Ｄメガネを装着済みであれば、ステップＳ15へ移行し、相手側テレビ受信機へ３Ｄ画像の伝送を開始する(ステップＳ15)。このとき、伝送先相手側テレビ受信機からはカメラ撮像部１１８における２個のカメラを使って右眼用と左眼用の画像データを伝送先の相手側テレビ受信機へ送信すると同時に、マイク集音部１１９から音声データを伝送先の相手側テレビ受信機へ送信する。
ステップＳ13で、３Ｄメガネを装着していなければステップＳ16へ移行し、相手側テレビ受信機へメッセージ表示だけを伝送する。

図５は上記ステップＳ16で「メガネなし」(メガネ非装着の意)のときに伝送先相手側テレビ受信機へ伝送されるメッセージ表示の画面例を示している。
この画面例では、‘テレビ電話サービス’の下に、「３Ｄメガネを装着すると、３Ｄ映像が表示されます。メガネの用意はできていますか？」の表示と共に、選択窓の表示が「後で」となって表示される。この「後で」とは、何らかの事情(例えば、今手が離せない、今メガネが見当たらない、或いは今３Ｄ映像を見たくないなど)で今しばらくは３Ｄ映像を見ないので、この「後で」の状態でリモコン１１４の決定(Enter)キーを押したり、又はその「後で」の状態のまま一定時間が経過すると、エラーになってしまう。

相手側ユーザーが図５の画面表示を見て、３Ｄ視聴可能な位置で３Ｄメガネを装着し、選択窓の左右の矢印にカーソルをポイントすると、「後で」のほかに「Ｙｅｓ」の選択肢が現れるので、「Ｙｅｓ」を選択し、リモコン１１４の決定(Enter)キーを押すと伝送元の自分側テレビ受信機から３Ｄ画像が送られて伝送先相手側テレビ受信機の表示画面は図５のメッセージ表示画面から３Ｄ映像に切り換わって表示される。

なお、自動表示設定は、テレビ電話用とテレビ番組視聴用とで同じものを共通に用いてもよいし、テレビ電話用設定とテレビ番組視聴用設定というように別々に設けてもよい。

本発明の実施形態によれば、インターネットによるテレビ電話サービスを実施する際に、伝送先相手側テレビ受信機の状態(３Ｄ映像表示が可能な状態か)に応じて伝送先相手側テレビ受信機に適した２Ｄ又は３Ｄの映像を伝送することが可能な画像音声通話システムを実現することが可能となる。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これらの実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１０６…ディスプレイ表示部、１０８…スピーカー、１０９…バス、１１０…制御部、１１４…リモコン(操作手段)、１１８…カメラ撮像部、１１９…マイク集音部、１１６…ＬＡＮ端子(通信部)、１１７…無線ＬＡＮ送受信部(通信部)、１２０…デジタル放送受信部、１２１…３Ｄメガネ検出部(メガネ検出部)。

Claims

デジタル放送信号を受信し、復調された信号から２Ｄ又は３Ｄの映像信号を再生するデジタル放送受信部と、
再生された２Ｄ又は３Ｄの映像信号をディスプレイ表示部に出力するための表示処理部と、
テレビ電話用のカメラ撮像部と、
前記カメラ撮像部で撮像された２Ｄ又は３Ｄの画像データを外部へ送信し、また外部からテレビ電話用の２Ｄ又は３Ｄの画像データを受信する通信部と、
伝送先相手側機器が３Ｄ映像表示可能な状態かどうかをメタ情報として授受し、前記メタ情報に応じて２Ｄ又は３Ｄの画像データ或いはメッセージを該伝送先相手側機器に伝送するよう制御する制御部と、
を具備し、
前記制御部は、前記ディスプレイ表示部の表示画面を３Ｄ映像表示にするための設定又は３Ｄ映像表示と２Ｄ映像表示とを選択するためのメッセージを表示するための設定を行う表示設定部を備え、前記伝送先相手側機器から３Ｄ画像が入力されることを示す情報があった場合には、前記表示設定部の前記設定に従った表示を行うことを特徴とする画像音声通話システム。
前記表示設定部は、前記伝送先相手側機器から３Ｄ画像が入力されることを示す情報があった場合に、前記ディスプレイ表示部の表示画面を２Ｄ映像表示にするための設定が可能であることを特徴とする請求項１に記載の画像音声通話システム。
デジタル放送信号を受信し、復調された信号から２Ｄ又は３Ｄの映像信号を再生するデジタル放送受信部と、
再生された２Ｄ又は３Ｄの映像信号をディスプレイ表示部に出力するための表示処理部と、
テレビ電話用のカメラ撮像部と、
前記カメラ撮像部で撮像された２Ｄ又は３Ｄの画像データを外部へ送信し、また外部からテレビ電話用の２Ｄ又は３Ｄの画像データを受信する通信部と、
伝送先相手側機器が３Ｄ映像表示可能な状態かどうかをメタ情報として授受し、前記メタ情報に応じて２Ｄ又は３Ｄの画像データ或いはメッセージを該伝送先相手側機器に伝送するよう制御する制御部と、
を具備し、
前記制御部は、前記伝送先相手側機器の視聴者が３Ｄメガネを装着していることを前記メタ情報として授受した場合に、３Ｄ画像を前記伝送先相手側機器へ伝送することを特徴とする画像音声通話システム。
前記制御部は、前記ディスプレイ表示部の表示画面を３Ｄ映像表示にするか、２Ｄ映像表示にするか、２Ｄ又は３Ｄのどちらの映像表示にするかの選択をするためのメッセージにするか、の何れか１つを選択するための設定を行う自動表示設定部を備え、前記伝送先相手側機器から３Ｄ画像が有るか否かの画像情報を取得し、３Ｄ画像有りの情報を得たとき、前記自動表示設定部の前記設定に従った表示を行うことを特徴とする請求項３に記載の画像音声通話システム。
放送信号を受信し、復調された信号から２Ｄ又は３Ｄの映像信号を再生する放送受信部と、
再生された２Ｄ又は３Ｄの映像信号をディスプレイに表示するよう制御する表示処理部と、
テレビ電話用のカメラ撮像部と、
前記カメラ撮像部で撮像された画像を外部の電子機器へ送信し、前記電子機器から送信されたテレビ電話用の画像を受信する通信部と、
前記通信部にて受信した前記テレビ電話用の画像を前記ディスプレイに自動的に３Ｄ映像表示にする設定と、３Ｄ映像表示と２Ｄ映像表示とのいずれかの映像表示を選択するためのメッセージを前記ディスプレイに表示する設定とのいずれかの設定を選択的にユーザに許可する設定手段と、
を備えることを特徴とする受信装置。
前記設定手段は、前記通信部にて受信した前記テレビ電話用の画像の信号に３Ｄ画像を示す情報がある場合に、前記設定手段の設定に従った表示を行うことを特徴とする請求項５に記載の受信装置。
前記設定手段は、前記通信部にて受信した前記テレビ電話用の画像を前記ディスプレイにて自動的に２Ｄ映像表示にする設定もユーザに許可することを特徴とする請求項５または６に記載の受信装置。
前記通信部は、前記外部の電子機器の視聴者が３Ｄメガネを装着していることを示す情報を前記通信部にて受信したことに基づいて、２Ｄ画像又は３Ｄ画像を選択的に前記外部の電子機器に送信することを特徴とする請求項５乃至７のいずれか１つに記載の受信装置。
前記通信部は、前記外部の電子機器が３Ｄ映像表示可能な状態かどうかをメタ情報として授受し、前記メタ情報に応じて２Ｄ又は３Ｄの画像データ或いはメッセージを該電子機器に伝送することを特徴とする請求項５乃至請求項８のいずれかに１つに記載の受信装置。