JP2007067740A

JP2007067740A - コンテンツ再生装置及びコンテンツ再生方法

Info

Publication number: JP2007067740A
Application number: JP2005250321A
Authority: JP
Inventors: Tetsujiro Kondo; 哲二郎近藤; Takeshi Tanaka; 剛田中
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2005-08-30
Filing date: 2005-08-30
Publication date: 2007-03-15
Anticipated expiration: 2025-08-30
Also published as: JP4802618B2

Abstract

【課題】複数画面に表示されたコンテンツを視聴者の意図を損なわずに容易に切り替えることができるコンテンツ再生装置及びコンテンツ再生方法を提供する。
【解決手段】複数のチャンネルのコンテンツデータを受信する受信部１１と、複数のコンテンツデータを記録する記録部１２と、複数の画面を有する表示部１３と、受信部１１及び／又は記録部１２から表示部１３の各画面に表示するコンテンツを切り替えるスイッチャー１４と、視聴者が注視する注視画面を検出する注視画面検出部１５と、視聴者の要求を指示するリモートコントローラ１６と、リモートコントローラ１６から視聴者の要求に応じた制御信号を受光する受光部１７と、受光部１７からの制御信号に応じて各構成部を制御する制御部１８とを備える。
【選択図】図１

Description

本発明は、例えば、テレビジョン放送等の複数のコンテンツを複数の画面に同時に表示するコンテンツ再生装置及びコンテンツ再生方法に関するものである。

近年、大容量のＨＤＤ（Hard Disk Drive）などにコンテンツデータを大量に蓄積することができる。また、多チャンネル化により、視聴可能なコンテンツが増大している。このため、大量に蓄積されたコンテンツ又は受信したコンテンツを複数の画面に同時に表示することができる表示装置は、複数の情報を一度に取得することができるため、大変利便性が高いものである。

特開２００１−７８１０２号公報

上述のような表示装置においてコンテンツを切り替える際、例えば、図８に示すように９つの画面に表示されている１ＣＨから９ＣＨまでのコンテンツを１０ＣＨから１８ＣＨまでのコンテンツに切り替えるようにリモートコントローラ等により指示すると、意に反してそれまで視聴していたコンテンツも切り替わってしまう。

また、例えば、図９に示すように９つの画面からコンテンツを切り替えようとする１つの画面を選択し、その画面のみコンテンツを切り替えた場合（例えば、特許文献１参照。）、リモートコントローラにより何回も画面を指定しなければならず、操作が面倒である。

本発明は、上記問題点を解消するためになされたものであり、複数画面に表示されたコンテンツを視聴者の意図を損なわずに容易に切り替えることができるコンテンツ再生装置及びコンテンツ再生方法を提供することを目的とする。

上述した課題を解決するために、本発明に係るコンテンツ再生装置は、複数の画面を有する表示手段を備え、当該表示手段に複数のコンテンツを再生するコンテンツ再生装置において、視聴者の注視点を検出し、上記複数の画面から注視画面を検出する注視画面検出手段と、上記注視画面検出手段における注視画面検出結果に基づいてコンテンツの切り替えを制御する切替制御手段とを備えることを特徴としている。

また、本発明に係るコンテンツ再生方法は、複数の画面を有する表示手段に複数のコンテンツを再生するコンテンツ再生方法において、視聴者の注視点を検出し、上記複数の画面から注視画面を検出する注視画面検出工程と、上記コンテンツの切り替え要求を指示する指示工程と、上記指示工程で指示された切り替え要求に応じて、上記注視画面検出工程で検出された所定時間内における各画面の注視回数を算出し、当該注視回数に応じて所定画面のコンテンツを切り替える切替工程とを備えることを特徴としている。

本発明によれば、視聴者が注視する注視画面を検出し、その注視画面の検出結果に基づいてコンテンツの切り替えを制御するようにしたため、複数画面に表示されたコンテンツを視聴者の意図を損なわずに容易に切り替えることができる。

以下、本発明の具体的な実施の形態について、図面を参照しながら詳細に説明する。図１は、本発明の一実施形態におけるコンテンツ再生装置を示すブロック図である。このコンテンツ再生装置１０は、複数のチャンネルのコンテンツデータを受信する受信部１１と、複数のコンテンツデータを記録する記録部１２と、複数の画面を有する表示部１３と、受信部１１及び／又は記録部１２から表示部１３の各画面に表示するコンテンツを切り替えるスイッチャー１４と、視聴者が注視する注視画面を検出する注視画面検出部１５と、視聴者の要求を指示するリモートコントローラ１６と、リモートコントローラ１６から視聴者の要求に応じた制御信号を受光する受光部１７と、受光部１７からの制御信号に応じて各構成部を制御する制御部１８とを備えて構成されている。

受信部１１は、所望のチャンネルの放送信号を受信するチューナを備えている。なお、異なるコンテンツを複数の画面に表示する場合、チューナは表示部１３が有する画面数分備えられることが好ましい。

記録部１２は、例えば、受信部１１で受信したチャンネルのコンテンツデータを記録するための大容量のＨＤＤ（Hard Disk Drive）を備えている。

表示部１３は、複数の画面１３_１〜画面１３_Ｎを有しており、複数のコンテンツを同時に表示する。なお、表示部１３は、１つのディスプレイ画面を複数の画面に分割した構成でもよく、複数のディスプレイ画面を用いた構成としてもよい。

スイッチャー１４は、受信部１１で選局されたチャンネルのコンテンツデータや記録部１２に記録されたコンテンツデータの中から表示部１３の各画面に表示するコンテンツの切り替えを行う。

注視画面検出部１５は、視聴者を撮像する撮像手段を備えている。この注視画面検出部１５は、後述するように取得した画像から、顔の向きや位置を検出し、視線の向きを検出し、注視点を検出する。そして、検出した注視点より注視画面を検出する。

リモートコントローラ１６は、視聴者によって操作され、視聴者の要求を指示する。例えば、コンテンツの切り替えを要求する場合、リモートコントローラ１５のチャンネル切替ボタンを押すことにより、切替制御信号が送信される。

受光部１７は、リモートコントローラ１６からの制御信号を受信する。

制御部１８は、リモートコントローラ１６を介した視聴者からの指示に応じて各部を制御する。例えば、コンテンツ切り替え指示が入力された場合、スイッチャー１４を注視画面検出部１５で検出された注視画面に基づいて制御する。すなわち、表示部１３の各画面に表示するコンテンツの切り替えを制御する。

このコンテンツ再生装置１０は、制御部１８がスイッチャー１４を制御し、受信部１１や記録部１２から入力されたコンテンツ画像を表示部１３の複数の画面に振り分けることによりコンテンツを同時に再生する。

図２は、上述したコンテンツ再生装置１０のコンテンツ切り替え動作を示すフローチャートである。

ステップＳ１において、注視画面検出部１５は、視聴者が注視している画面を検出する。ここで、ステップＳ１の注視画面検出動作を図３に示すフローチャートを用いて説明する。ステップＳ１０１において、注視画面検出部１５は、例えば、肌色、白目の白、黒目の黒等の色彩情報を用いて、両目の輪郭、両目の位置を検出し、さらに画像の輝度情報を用いて鼻孔の位置を検出し、顔の向き及び位置を検出する。

次に、ステップＳ１０２において、注視画面検出部１５は、両目の位置及び鼻孔の位置の幾何学的な位置関係に基づいて眼球の中心の位置及び半径を推定するとともに輝度情報を用いて瞳孔の位置を検出し、眼球の中心と瞳孔の中心を結ぶベクトルを算出することにより視線の向きを検出する。

そして、ステップＳ１０２で検出された視線の延長上の注視点を検出し（ステップＳ１０３）、その注視点が画面上にあるか否かを判別する（ステップＳ１０４）。

ステップＳ１０４において、検出した注視点が画面上である場合、注視画面検出部１５は、その注視点がある画面の番号を出力する。また、検出した注視点が画面上でない場合、注視画像検出処理を終了する。

この注視画面検出処理は、例えば、所定時間Ｔ１毎に行われている。そして、注視画面検出部１５から出力された注視画面番号は、タイムコードとともに制御部１８内のＲＡＭ（Random Access Memory）等のメモリに蓄積される（ステップＳ２）。

そして、制御部１８は、リモートコントローラ１６からコンテンツの切り替えコマンドの受信を待つ（ステップＳ３）。

ステップＳ３において、受光部１７を介してリモートコントローラ１６からコンテンツの切り替えコマンドを受信した場合、制御部１８は、ステップＳ２で蓄積された画面番号１〜画面番号Ｎまでの注視画面情報に基づいてステップＳ４〜ステップＳ１２の処理を行う。つまり、画面１からコンテンツを切り替えるか否かの判別処理を行い（ステップＳ４）、画面ｉ（１≦ｉ≦Ｎ）が表示部１３の画面数Ｎとなるまでコンテンツを切り替えるか否かの判別処理を行う。

ステップＳ５において、画面ｉ（１≦ｉ≦Ｎ）（Ｎは画面数）がＮ以下の場合、ステップＳ６に進み、図４に示すように、コンテンツの切り替えコマンドを受信した時刻ｔ_０から過去一定時間Ｔ２（Ｔ２＞Ｔ１）内の画面ｉの注視回数をカウントする。

ステップＳ７において、制御部１８は、各画面の注視回数の分布に基づいて閾値を決定する。

そして、制御部１８は、ステップＳ６でカウントした画面ｉの注視回数が閾値以下か否かを判別する（ステップＳ８）。なお、この判別は、例えば、図５に示すように画面ｉの画面注視時間に基づいて行ってもよい。また、この注視時間は、例えば画面をある時間注視した回数に基づいて算出しても、サンプリングされる注視点に基づいて算出してもよい。

ステップＳ８において、画面ｉの注視回数が閾値以下の場合、ステップＳ９に進み、画面ｉに表示するコンテンツをリストから決定する。例えば、図６に示すリストを用いてコンテンツを決定する場合、画面２及び画面４が注視回数が閾値以下であるとすると、画面１〜画面９にそれぞれ表示されたＮｏ．１〜Ｎｏ．９のコンテンツの内、画面２及び画面４に表示するコンテンツが切り替えられる。画面２及び画面４には、まだ表示されておらずリスト番号の小さいコンテンツが表示される。つまり、画面２にはＮｏ．１０のコンテンツ、画面４にはＮｏ．１１のコンテンツがそれぞれ表示される。なお、ステップＳ８において、画面ｉの注視回数が閾値より大きい場合には、ステップＳ１２に進む。

ステップＳ１０において、制御部１８は、ステップＳ９で決定したコンテンツの出力先をスイッチャー１４によって画面ｉに切り替える。そして、制御部１８は、画面ｉの注視画面情報をメモリから消去する（ステップＳ１１）。

ステップＳ１２において、制御部１８は、画面番号ｉをインクリメントする処理を行い、ステップＳ５に戻り、ｉ＞Ｎとなった場合、上述の切り替え処理を終了する。

このように複数の画面から視聴者の注視回数に基づいて画面を選択し、コンテンツを切り替えることにより、視聴者があまり注視しない画面、すなわち、あまり興味のないコンテンツのみを切り替えることができる。例えば、図７に示す９つの画面１３_１〜画面１３_９のうち画面１３_２及び画面１３_４の注視回数が閾値以下であった場合、コンテンツの切り替えコマンドを受信すると画面１３_２及び１３_４のコンテンツがそれぞれＨＤＤ２、ＣＨ９に切り替わる。一方、よく注視する画面のコンテンツは視聴者が興味をもって見続けたいコンテンツであり、コンテンツの切り替えが行なわれないため、意に反して見たいコンテンツが消えてしまうことがない。

また、視聴者は、リモートコントローラ１６で何回も画面を指定してコンテンツを切り替えることなく、切り替えボタンのみを選択すればよいため、非常に簡単にコンテンツの切り替えを行うことができる。

なお、実施の形態では、視聴者から受信したコンテンツの切り替えの指示に応じて、コンテンツを切り替えることとしたが、注視されていない画面のコンテンツを定期的に切り替えるようにしてもよい。例えば、ある時間における画面の注視回数が閾値以下の場合、その画面のコンテンツが自動的に切り替えられるようにすれば、視聴者は多くの情報を得ることができる。

また、機械的にリスト番号の次のコンテンツに切り替えるのではなく、視聴者の注視情報を取得、解析することにより、視聴者が同時に見るコンテンツの組み合わせを作成し、この組み合わせのリストに基づいてコンテンツを切り替えるようにしてもよい。例えば、最も注視回数及び／又は注視回数が多い画面に表示されたコンテンツと再生可能な他のコンテンツとの類似性を比較評価し、評価値が高い順番のコンテンツリストを作成し、その順番でコンテンツの表示を切り替えるようにしてもよい。このリストはＥＰＧ（Electronic Program Guide）等のメタデータを用いて作成することができる。そして、例えば、ジャンル、サブジャンル、タイトル、キーワードのうち一致するものが多いものを類似性の評価値の高いものとする。したがって、例えば、ある局のニュースが再生された画面を注視した場合、そのニュースとの類似性の評価値に基づいてコンテンツリストを作成し、そのコンテンツリストに基づいて切り替えを行えば、例えば、多くのニュースコンテンツを一度に見ることができ、多くの情報を得ることができる。また、例えば、ある人物の試合中継が再生された画面を注視し、その人物の過去の試合のコンテンツのリストに基づいて切り替えを行えば、その人物の現在と過去を容易に比較することができる。

本発明の一実施形態におけるコンテンツ再生装置を示すブロック図である。コンテンツ切り替え動作例を示すフローチャートである。注視画面検出動作例を示すフローチャートである。コンテンツの切り替えコマンドを受信した時刻からの過去一定時間を説明するための図である。切り替え画面の決定例を説明するための図である。コンテンツの再生リストの一例を示す図である。本発明の一実施形態におけるコンテンツの切り替えの一例を示す図である。従来におけるコンテンツの切り替えの一例を示す図である。従来におけるコンテンツの切り替えの一例を示す図である。

符号の説明

１０コンテンツ再生装置、１１受信部、１２記録部、１３表示部、１４スイッチャー、１５注視画面検出部、１６リモートコントローラ、１７受光部、１８制御部

Claims

複数の画面を有する表示手段を備え、当該表示手段に複数のコンテンツを再生するコンテンツ再生装置において、
視聴者の注視点を検出し、上記複数の画面から注視画面を検出する注視画面検出手段と、
上記注視画面検出手段における注視画面検出結果に基づいてコンテンツの切り替えを制御する切替制御手段と
を備えることを特徴とするコンテンツ再生装置。
上記コンテンツの切り替え要求を指示する指示手段を備え、
上記切替制御手段は、上記指示手段からの切り替え要求に応じてコンテンツの切り替えを制御することを特徴とする請求項１記載のコンテンツ再生装置。
上記切替制御手段は、各画面に再生されたコンテンツについて、上記切り替え要求から過去一定時間までの注視回数及び／又は注視時間と閾値とを比較し、上記注視回数及び／又は注視時間が上記閾値以下の画面のコンテンツを切り替え制御することを特徴とする請求項２記載のコンテンツ再生装置。
上記切替制御手段は、所定時間内における各画面の注視回数及び／又は注視時間に応じてコンテンツの切り替えを制御することを特徴とする請求項１記載のコンテンツ再生装置。
複数の画面を有する表示手段に複数のコンテンツを再生するコンテンツ再生方法において、
視聴者の注視点を検出し、上記複数の画面から注視画面を検出する注視画面検出工程と、
上記コンテンツの切り替え要求を指示する指示工程と、
上記指示工程で指示された切り替え要求に応じて、上記注視画面検出工程で検出された所定時間内における各画面の注視回数及び／又は注視時間を算出し、当該注視回数及び／又は注視時間に応じて所定画面のコンテンツを切り替える切替工程と
を有することを特徴とするコンテンツ再生方法。