JP2004064368A

JP2004064368A - 電子機器

Info

Publication number: JP2004064368A
Application number: JP2002219092A
Authority: JP
Inventors: Michio Yamashita; 山下　道生
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 2002-07-29
Filing date: 2002-07-29
Publication date: 2004-02-26

Abstract

【課題】本発明の目的は、テレビを視聴している人単位の視聴率を測定するシステムを提供することである。
【解決手段】表示装置（１００）に所定の映像を表示させる表示制御手段（２２０）と、カメラ（１１０）から撮影データを受け取り、この撮影データから人を検出する検出手段（２３０）と、この検出手段によって検出された人の数を前記所定の映像を観ている人の数として測定する測定手段（２４０）と、前記所定の映像を観ている人の数を測定した結果を他の電子機器（５００）に送信し、この他の電子機器が収集した視聴率を受信するインターフェース（２５０）とを備え、前記表示制御手段はこの受信した視聴率を前記表示装置に表示させることを特徴とする電子機器。
【選択図】　　　図１

Description

【０００１】
【発明の属する技術分野】
本発明は、表示装置を観ている人の数を測定する電子機器に関し、特に、テレビを視聴している人単位の視聴率を測定するシステムに関する。
【０００２】
【従来の技術】
テレビ放送などの放送番組がどれだけの人々によって視聴されたかを示す指標の一つとして、その番組の視聴率がある。番組を提供する放送局にとっては、視聴率の高い番組ほど、番組の途中で流すスポンサーの広告の効果が大きいことになり、広告料収入に与える影響は大きい。また、視聴者にとっては、人気が高い番組はどれかを知ることができ、視聴する番組を選択する判断材料の一つになる。
【０００３】
この視聴率測定方法の一例としては、特開２００２−１３５８０９号公報に記載されているように、アンテナによって受信された放送電波をデコードしてデジタルテレビに送信するセットトップボックスによって、現在テレビに送っている番組情報を回線を介して受信サーバに送っている。そして、受信サーバで各家庭のセットトップボックス（テレビ）毎の視聴データを集計することによって、視聴率を測定している。
【０００４】
【発明が解決しようとする課題】
しかし、このような従来の視聴率測定方法ではテレビに映像を表示している間は視聴しているとみなすことになり、実際に視聴しているかどうかは不明である。また、視聴率もセットトップボックス（テレビ）単位でしか測定できなかった。すなわち、一人の人が視聴しているのか、複数の人が視聴しているのかが不明であった。
【０００５】
本発明の目的は、表示装置を観ている人の数を測定する電子機器を提供することである。
【０００６】
【課題を解決するための手段】
第１の発明は、表示装置に所定の映像を表示させる表示制御手段と、カメラから撮影データを受け取り、この撮影データから人を検出する検出手段と、この検出手段によって検出された人の数を前記所定の映像を観ている人数として測定する測定手段とを備える電子機器である。
【０００７】
第２の発明は、表示装置に所定の映像を表示させる表示制御手段と、前記表示装置の前を撮影するカメラから撮影データを受け取り、この撮影データを元に前記所定の映像を観ている人がいるか否かを判断する判断手段と、前記判断手段によって前記所定の映像を観ていると判断された人の数を測定する測定手段とを備える電子機器である。
【０００８】
第３の発明は、表示装置に所定の映像を表示させる表示制御手段と、前記表示装置の前を撮影するカメラから撮影データを受け取り、この撮影データから顔領域データを抽出する顔領域抽出手段と、前記抽出した顔領域データから前記所定の映像を観ている人がいると認識する認識手段と、前記認識手段によって前記所定の映像を観ていると認識された人の数を測定する測定手段とを備える電子機器である。
【０００９】
第４の発明は、前記表示装置を観る人の顔データが予め登録されているデータベースをさらに備え、前記認識手段は、前記データベースを用いて、前記所定の映像を観ていると認識された人を特定することを特徴とする第３の発明記載の電子機器である。
【００１０】
第５の発明は、前記認識手段は、前記抽出した顔領域データから目の抽出を行うことによって、前記所定の映像を観ている人がいると認識することを特徴とする第３又は第４の発明記載の電子機器である。
【００１１】
第６の発明は、前記所定の映像を観ている人の数を測定した結果を他の電子機器に送信し、この他の電子機器が収集した視聴率を受信するインターフェースをさらに備え、前記表示制御手段は、この受信した視聴率を前記表示装置に表示させることを特徴とする第３乃至第５の発明記載の電子機器である。
【００１２】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照しながら説明する。
図１は、本発明の実施形態に係る視聴率測定システムの概略構成図である。放送局３００からの放送データは、まずホームサーバ２００の放送用インターフェース２１０に入り、表示制御装置２２０を介して、テレビ（表示装置）１００に表示され、ユーザが視聴することになる。そして、テレビ１００の表示画面と同じ方向に向いたカメラ１１０によって、表示装置の前を撮影することができ、すなわち、テレビ１００の表示画面の方を向いていると思われるユーザを撮影することができる。
【００１３】
（テレビを観ているか否かを推定する方法）
この撮影データを用いてホームサーバ２００の顔認識装置２３０で視聴者の認識を行う。以下撮影データから顔画像を認識する方法について図２を用いながら説明する。図２は顔認識装置２３０の概略構成図である。
【００１４】
顔領域抽出部６１０は、カメラ１１０から送られてきた撮影データから部分空間法を用いて不特定人物の顔領域を常時抽出し続ける。ここでは、予め登録された標準顔画像（顔全体テンプレート）を全画面に渡って移動させながら相関値を計算し、最も高い相関値を有する領域を顔領域とする。相関値が設定された閾値より低い場合は、顔が存在しないとする。すなわち、テレビはついているが、観ている人がいないと判断する。具体的には、最大相関値を「１００」とした場合、しきい値を「３０」に設定する。顔の向き変化に対応するために、複合類似度などにより複数の顔全体テンプレートを用いると、さらに安定に顔領域を抽出できる。
【００１５】
特徴点候補抽出部６２０では、顔領域抽出部６１０によって抽出された顔全体領域から分離度フィルタを用いて、黒目、鼻穴、口などの特徴点候補を抽出する。この分離度フィルタでは、円形または楕円形の内部領域と外部領域から構成されるマスクを用いる。そして、内部領域と外部領域との間で輝度などの画像特徴量がどの程度分離されているかの量、すなわち「分離度」は、多変量解析における線形判別式から定義され、０から１．０の範囲の値をとる。
【００１６】
例えば、マスクが円形の場合は黒目、鼻穴、口端などの円形状の特徴点にフィットする程に「１．０」に近い値が出力され、一方、対象領域の形状が円形から離れるに連れて出力値は低下してゆき、円形特徴がない領域ではほぼ「０」に近い値を出力する。また、マスク形状を円形から楕円に変えることで、目、眉、口全体領域の抽出も可能である。尚、鼻穴を特徴点として用いる場合には、カメラ１１０はテレビ１００のディスプレイ下部に設置しておくと、鼻穴を撮影しやすくなる。
【００１７】
この特徴点候補抽出部６２０で抽出された特徴点候補の中には、構造的に誤った特徴点を含む場合がある。そこで、特徴点セット候補選択部６３０では、顔の構造的な制約を用いて特徴点組合せ（セット）の候補を絞り込む。制約条件の一例としては、鼻穴の間の距離より黒目間の距離の方が長いなどがある。
【００１８】
次に、パターン評価部６４０において、顔領域から各特徴点の位置を基準にして代表的な特徴点のサイズ、例えば黒目のサイズに依存した大きさの矩形領域を切り出す。あるいは、先に抽出している大まかな顔領域のサイズを基準にしてもよい。この切り出された矩形領域と予め登録してある標準的な目、鼻、口領域などの部分テンプレートの類似度を計算する。部分テンプレートとしては、様々な人物の目、鼻、口領域画像の平均画像を用いることができる。あるいは、部分空間法や複合類似度法などを用いて効率良く複数のテンプレートを持てば、より安定に類似度を得ることができる。また、２つの目領域のパターン相関を計算して、特徴点の類似度にしても良い。
【００１９】
パターン評価部６４０は、このようにして求めた各特徴点に対する適合度の加重和を特徴点の組合せに対する整合度とする。これを全ての特徴点の組合せに対して求めて、最も高い整合度を有する特徴点の組合せ（セット）を正しい特徴点の組合せとして決定する。また、セットの中に、目が一つしかないと判断した場合にはユーザは横を向いていると、また、目がないと判断した場合にはユーザは寝ていると判断し、テレビはついているが、実際には観ていないと視聴者測定装置２４０へ伝える。すなわち、このパターン評価部６４０で、カメラ１１０から抽出した顔領域データをもとにして、テレビを観ている人であるか否かを推定することができる。
【００２０】
（テレビを観ていると推定した人物が誰であるかを識別する方法）
続いて、テレビを観ていると推定した人物が誰であるかを識別する方法について説明する。テレビを正規化生成部６５０は、この最終的に決定された正しい特徴点セットを基準にして、位置、サイズを正規化して正規化画像を得る。
【００２１】
類似度計算部６６０では、正規化生成部６５０で生成された正規化画像と、顔画像データベース６７０に予め登録されている各登録者の顔画像との類似度を計算し、類似度が高い人物を当人であると特定する。その際、複合類似度法を用いても良い。この複合類似度法を用いた場合には、例えば左右上下などの様々な向きから撮った複数枚の顔画像との比較によって、より正確に人物の識別処理が行われる。
【００２２】
上述した顔認識装置２３０によれば、カメラ１１０に映った人の中から、テレビを見ている人を識別することができる。尚、テレビを視聴している人は一人とは限らないので、顔領域抽出部６１０で抽出される顔領域データも複数の場合がある。この場合は、顔領域データ毎に人物の識別処理を行えばよい。
【００２３】
そして、この識別結果及び表示制御装置２２０から放送番組名を用いて、視聴者測定装置２４０では、予め登録してある人のうち何人が所定の放送番組を視聴しているのかを測定できる。この測定結果を通信用インターフェース２５０及びインターネット４００を介して視聴率収集サーバ５００へ提供することができる。
【００２４】
したがって、視聴率収集サーバ５００では、従来のテレビ単位での視聴率ではなく、視聴している人数を考慮した、いわば人単位の視聴率を収集することができる。
また、視聴者測定装置２４０には、顔認識装置２３０から視聴している人の識別情報が入ってくるので、放送番組を見ている人数だけでなく、ユーザが許可さえすれば、放送番組を見ているユーザの個人データまでも視聴率収集サーバ５００へ提供することも可能である。よって、視聴率収集サーバでは、年代別、性別毎などの細かい区分けに応じた視聴率を収集することもできる。
【００２５】
（視聴率収集サーバが集めた視聴率の表示方法）
一方、視聴率収集サーバ５００が収集した視聴率は、インターネット４００を経由して、通信用インターフェース２５０を介して表示制御装置２２０に入力される。表示制御装置２２０では、電子番組ガイドという形でテレビ１００に表示する。
【００２６】
これら一連の視聴率測定及び視聴率表示方法は、テレビを表示させると同時にカメラの撮影も開始するように設定しておけば、後はホームサーバ２００が自動的に行ってくれるので、ユーザは意識せずに、いわゆる人単位の視聴率をリアルタイムに測定及び表示してくれる。
【００２７】
上述した実施の形態は、本発明の好適な具体例であるから、技術的に好ましい種々の限定が付されているが、本発明の趣旨を逸脱しない範囲であれば、適宜組合わせ及び変更することができることはいうまでもない。例えば、ホームサーバ１００は各家庭毎に備え付けている必要はなく、集合住宅のような場合には一台のサーバであってもよい。この場合、放送局３００からの放送データを各家庭に配信して各家庭毎に視聴者数を測定すればよい。
【００２８】
【発明の効果】
上述したように本発明によれば、表示装置を観ている人の数を測定する電子機器を提供することができる。
【図面の簡単な説明】
【図１】本発明の実施形態に係る視聴率測定システムの概略構成図。
【図２】顔認識装置２３０の概略構成図。
【符号の説明】
１００　テレビ
１１０　カメラ
２００　ホームサーバ
２１０　放送用インターフェース
２２０　表示制御装置
２３０　顔認識装置
２４０　視聴者測定装置
２５０　通信用インターフェース
３００　放送局
４００　インターネット
５００　視聴率収集サーバ
６１０　顔領域抽出部
６２０　特徴点候補抽出部
６３０　特徴点セット候補選択部
６４０　パターン評価部
６５０　正規化生成部
６６０　類似度計算部
６７０　顔画像データベース

Claims

表示装置に所定の映像を表示させる表示制御手段と、
カメラから撮影データを受け取り、この撮影データから人を検出する検出手段と、
この検出手段によって検出された人の数を前記所定の映像を観ている人数として測定する測定手段とを備える電子機器。
表示装置に所定の映像を表示させる表示制御手段と、
前記表示装置の前を撮影するカメラから撮影データを受け取り、この撮影データを元に前記所定の映像を観ている人がいるか否かを判断する判断手段と、
前記判断手段によって前記所定の映像を観ていると判断された人の数を測定する測定手段とを備える電子機器。
表示装置に所定の映像を表示させる表示制御手段と、
前記表示装置の前を撮影するカメラから撮影データを受け取り、この撮影データから顔領域データを抽出する顔領域抽出手段と、
前記抽出した顔領域データから前記所定の映像を観ている人がいると認識する認識手段と、
前記認識手段によって前記所定の映像を観ていると認識された人の数を測定する測定手段とを備える電子機器。
前記表示装置を観る人の顔データが予め登録されているデータベースをさらに備え、
前記認識手段は、前記データベースを用いて、前記所定の映像を観ていると認識された人を特定することを特徴とする請求項３記載の電子機器。
前記認識手段は、前記抽出した顔領域データから目の抽出を行うことによって、前記所定の映像を観ている人がいると認識することを特徴とする請求項３又は４記載の電子機器。
前記所定の映像を観ている人の数を測定した結果を他の電子機器に送信し、この他の電子機器が収集した視聴率を受信するインターフェースをさらに備え、
前記表示制御手段は、この受信した視聴率を前記表示装置に表示させることを特徴とする請求項３乃至５記載の電子機器。