JP4879456B2 - 公衆ディスプレイ管理システム - Google Patents

Description

この発明は、駅前広場や大規模店舗に集う公衆に向けて大画面ディスプレイに広告や公報などの映像番組（音声付きも含む）を放映する公衆ディスプレイ管理システムに関し、とくに、表示出力した画像情報の内容と観者の関心度合との関係を探る技術に関する。

たとえば都会の駅前広場においては、多くの人々が行き交い、待ち合わせなどで多くの人がたたずんでいる。周辺のビルの壁面に大画面の公衆ディスプレイが設置されており、広場に集う人々に向けて広告などの映像番組がつぎつぎと放映されている。しばしの時間人々は公衆ディスプレイの表示をながめている。

こういった公衆ディスプレイを利用する広告主とっては、当然ながら、自分の広告が公衆にどのように関心を引くものなのかということが、きわめて重要な関心事である。同様に、公衆ディスプレイなる新規な広告媒体を提供する事業者にとっても、広告の訴求効果についての分析は重要な課題である。

新聞・雑誌・ラジオ・テレビなどの既存の広告媒体に関しては、広告効果に関する実証的な研究が古くから行われており、その研究成果が具体的な手法として広告戦略にフィードバックされている。しかしながら、駅前広場などに設置された公衆ディスプレイによる広告効果については、ほとんど研究されていないのが実情であり、その広告媒体としての性格から見て、既存の広告媒体に関する研究成果をそのまま当てはめることはできず、独自の分析手法が必要になるであろう。

この発明に係るシステムは、便宜的に分説すると、つぎの事項（Ａ）〜（Ｄ）により特定されるものである。
（Ａ）複数のカメラと、画像処理コンピュータを備え、広場にいる人々に向けて映像を映し出す公衆ディスプレイの観者を計測するシステムであること
（Ｂ）特定のカメラは、前記公衆ディスプレイの映像を見ている人々をその顔を正面から撮影するように設置されること
（Ｃ）他のカメラは、前記公衆ディスプレイの映像を見ている人々をその正面顔が写らない位置から撮影するように設置されること
（Ｄ）画像処理コンピュータは、各カメラの撮影画像を一斉にサンプリングし、各カメラのサンプリング画像から人間の目を含む顔要素を抽出して抽出個数を計数する処理を行い、前記特定のカメラから得たサンプリング画像中の顔要素の個数と、前記他のカメラから得たサンプリング画像中の顔要素の個数と、サンプリング時点を表現したタイミングデータとを対応付けして記録すること

以上のように基本構成される公衆ディスプレイ管理システムにおいて、以下の技術事項を適宜に選択的・組み合せ的に採用することができる。
（１）被写体分析手段は、画像情報のある区分の表示期間に複数回の処理を実行し、各回の処理で計数した観者人数の合計値を出力する。
（２）被写体分析手段は、カメラの映像出力を画像処理することで表示画像が見える範囲に居合わせた人数を推定し、記録手段は、推定した居合わせ人数も前記記録に対応付けて記録する。
（３）被写体分析手段は、画像情報のある区分の表示期間に複数回の処理を実行し、各回の処理で推定した居合わせ人数を出力する。
（４）被写体分析手段は、カメラの映像出力を画像処理することで表示画像を見ていない非観者と判定した人数を計数し、記録手段は、推定した非観者人数も前記記録に対応付けて記録する。
（５）被写体分析手段は、画像情報のある区分の表示期間に複数回の処理を実行し、各回の処理で推定した非観者人数を出力する。
（６）カメラは、公衆ディスプレイの画面側から観者の顔が写るように撮影する。
（７）公衆ディスプレイの観者の顔が写りにくい方向から居合わせ人物を撮影する第２のカメラを備える。

この発明に係るシステムにおいては、表示画像を見ている観者と判定した人数と、その観者人数を計数した期間に表示されていた画像情報の区分とが対応付けされて記録されるので、公衆ディスプレイによる広告効果を分析するのにきわめて有用な情報を提供することができる。

図１にこの発明に係る公衆ディスプレイ管理システムの概略構成を示している。ディスプレイ装置１は、数百インチ画面のフルカラーＬＥＤディスプレイ装置などであり、たとえば駅前ビルの壁面に設置されていて、駅前広場に集う公衆に向けて広告や公報の画像を表示する。ディスプレイ装置１には音響装置２も付属しており、音声付きの映像番組も出力される。

番組出力コンピュータ３は、番組データベース４に蓄積されている多数の映像番組（音声付きもある）と、放映スケジュールとを管理し、スケジュールに従って映像番組をつぎつぎとディスプレイ装置１（音響装置２）に送出して映像音響出力させる。

これらのシステム構成は一般的な公衆ディスプレイとほとんど変わりはない。この発明に係るシステムの特徴的な要素として、ディスプレイ装置１の画面を見ている人（観者）の数を計測するために、カメラ５ａ〜５ｄを備えているとともに、画像処理コンピュータ６を備えている。

カメラ５ａ〜５ｄは、ディスプレイ装置１の画面が見やすい場所（これを広場と称することにする）に存在する人々を撮影するように設置している。ただし、４台のカメラ５ａ〜５ｄの撮影方向は、つぎのように異なっている。
カメラ５ａは、ディスプレイ装置１の画面の側から広場の人々を撮影するように設置されており、ディスプレイ画面を見ている人の顔がほぼ正面からカメラ５ａで撮影されることになる。
カメラ５ｂは、広場を挟んでディスプレイ装置１の反対側から広場の人々を撮影するように設置されており、ディスプレイ画面を見ている人の後頭部がカメラ５ｂで撮影されることになる。
カメラ５ｃ（５ｄ）は、ディスプレイ装置１の方向を正面として、広場の右側（左側）から広場にいる人々を撮影するように設置されており、ディスプレイ画面を見ている人の横顔がカメラ５ｃ（５ｄ）で撮影されることになる。

カメラ５ａ〜５ｄによる撮影画像は、一定の周期で一斉にサンプリングされて画像処理コンピュータ６に取り込まれる。コンピュータ６は、各カメラ５ａ〜５ｄの画像データの中から同じ範囲（広場）の画像を切り出し、切り出した各画像に対してパターンマッチング処理などを施し、画像中の含まれる顔要素（目鼻口のパターンを識別できる）を抽出するとともに、顔要素の数を計数する。この処理は各カメラ５ａ〜５ｄの撮影画像ごとに行う。

カメラ５ａはディスプレイ画面の観者を正面から撮影するので、カメラ５ａの撮影画像に含まれる顔要素は観者のものである。したがって、これの撮影画像から抽出計数した顔要素の数は観者数に対応する。
カメラ５ｂはディスプレイ画面の観者を後から撮影するので、カメラ５ｂの撮影画像に含まれる顔要素は観者のものではない。したがって、これの撮影画像から抽出計数した顔要素の数は非観者数に対応する。
カメラ５ｃとカメラ５ｄはディスプレイ画面の観者を横から撮影するので、カメラ５ｃとカメラ５ｄの撮影画像に含まれる顔要素は観者のものではない。したがって、これらの撮影画像から抽出計数した顔要素の数は非観者数に対応する。

コンピュータ６は、４台のカメラ５ａ〜５ｄの撮影画像を同時にサンプリングして前記のように処理する。したがって、各サンプリング時点において、カメラ５ａの画像から計数した顔要素の数が観者数に対応し、他の３台のカメラ５ｂ・５ｃ・５ｄの各画像から計数した顔要素の数の合計値が非観者数に対応する。

コンピュータ６は、各サンプリング時点ごとに、その時点を直接または間接に表現したタイミングデータと、カメラ５ａの画像から求めた観者数と、３台のカメラ５ｂ・５ｃ・５ｄの各画像から求めた非観者数とを逐次記録していく。この時系列の記録情報（観者情報とする）は、逐次あるいは随時に、画像処理コンピュータ６から番組出力コンピュータ３に伝えられる。

番組出力コンピュータ３は、前述したように、放映スケジュールに従って映像番組をつぎつぎとディスプレイ装置１に送出する制御を行っている。この動作に伴ってコンピュータ３は、いつどういう番組を放映したのかという時系列の放映実績情報を記録している。 コンピュータ３において、自身が記録した放映実績情報と、画像処理コンピュータ６から伝えられる前記の観者情報とを時系列でつき合わせることで、いつ放映した・どのような内容の番組・観者数・非観者数という情報を把握することができ、その情報を適宜に編集したデータを任意の形態で出力することができる。

なお、１つの広告番組を放映している期間において、画像処理コンピュータ６による撮影画像のサンプリングと顔要素の抽出計数処理を複数回行い、１番組放映期間の観者の合計数と非観者の合計数とを記録するようにしても良い。この場合、同一人物を複数回カウントすることになるので、広場に存在する人々の実数とは異なった数値となるが、観者数と非観者数との比が意味を持つ情報となるので、この意味での情報の価値が向上する。

この発明の一実施例による公衆ディスプレイ管理システムの概略構成ブロック図である。

符号の説明

１ ディスプレイ装置
２ 音響装置
３ 番組出力コンピュータ
４ 番組データベース
５ａ〜５ｄ カメラ
６ 画像処理コンピュータ

Claims (3)

1. 第１〜第４カメラと、画像処理コンピュータを備え、広場にいる人々に向けて映像を映し出す公衆ディスプレイの観者を計測するシステムであって、
   第１カメラは、前記公衆ディスプレイの映像を見ている人々を正面から撮影する位置に設置され、
   第２カメラは、前記公衆ディスプレイの映像を見ている人々を後から撮影する位置に設置され、
   第３カメラは、前記公衆ディスプレイの映像を見ている人々を右横から撮影する位置に設置され、
   第４カメラは、前記公衆ディスプレイの映像を見ている人々を左横から撮影する位置に設置され、
   画像処理コンピュータは、第１〜第４カメラの撮影画像を一斉にサンプリングし、各カメラのサンプリング画像から人間の目を含む顔要素を抽出して抽出個数を計数する処理を行い、第１カメラのから得たサンプリング画像中の顔要素の個数と、第２〜第４カメラから得た各サンプリング画像中の顔要素の合計個数と、サンプリング時点を表現したタイミングデータとを対応付けして記録する
   システム。
2. 複数のカメラと、画像処理コンピュータを備え、広場にいる人々に向けて映像を映し出す公衆ディスプレイの観者を計測するシステムであって、
   特定のカメラは、前記公衆ディスプレイの映像を見ている人々をその顔を正面から撮影するように設置され、
   他のカメラは、前記公衆ディスプレイの映像を見ている人々をその正面顔が写らない位置から撮影するように設置され、
   画像処理コンピュータは、各カメラの撮影画像を一斉にサンプリングし、各カメラのサンプリング画像から人間の目を含む顔要素を抽出して抽出個数を計数する処理を行い、前記特定のカメラから得たサンプリング画像中の顔要素の個数と、前記他のカメラから得たサンプリング画像中の顔要素の個数と、サンプリング時点を表現したタイミングデータとを対応付けして記録する
   システム。
3. 複数のカメラと、画像処理コンピュータを用い、広場にいる人々に向けて映像を映し出す公衆ディスプレイの観者を計測する方法であって、
   特定のカメラは、前記公衆ディスプレイの映像を見ている人々をその顔を正面から撮影するように設置され、
   他のカメラは、前記公衆ディスプレイの映像を見ている人々をその正面顔が写らない位置から撮影するように設置され、
   画像処理コンピュータは、各カメラの撮影画像を一斉にサンプリングし、各カメラのサンプリング画像から人間の目を含む顔要素を抽出して抽出個数を計数する処理を行い、前記特定のカメラから得たサンプリング画像中の顔要素の個数と、前記他のカメラから得たサンプリング画像中の顔要素の個数と、サンプリング時点を表現したタイミングデータとを対応付けして記録する
   方法。

Images