JP2011123349A - 情報表示処理装置 - Google Patents

Abstract

【課題】移動している歩行者にとって視認し易い画像を生成する。
【解決手段】信号計測部２１は歩行者通路上の音響・振動センサから入力した音響・振動信号をサンプリングし、歩容計算部２３は信号計測部２１からの音響データに基づきターゲット歩行者の歩容データ、１表示周期先の視点位置、歩行タイミングを算出し、属性対応コンテンツ検索部２４は歩容データ、１表示周期先の視点位置、歩行タイミングに基づきターゲット歩行者の属性を判断して属性に対応する提供情報を取得し、表示フレーム作成部２５は歩行者の視点位置に対応した表示フレームを作成し、表示・歩行同期部２７は表示フレームを歩行タイミングで出力する。
【選択図】図２

Description

この発明は、例えば設置場所や接近する人に応じて情報を提供する情報表示処理装置に関するものである。

情報表示処理装置は、従来から屋外・店頭・公共空間・交通機関などに設置され、情報としての広告を表示して宣伝する目的で利用されており、例えば特許文献１には、より宣伝効果を高めるために歩行者の動きに連動した表示を行う構成が開示されている。特許文献１によれば、歩行者を撮影して画像を出力する撮像手段を備え、画像を解析して歩行者の位置を検出し、検出した歩行者の位置が所定量移動すると、現在表示している画像と予め設定された他の画像を合成して表示することで、表示内容を変化させて歩行者の興味を惹くようにしている。

特開２００２−１２３２３７号公報

しかしながら、従来の情報表示処理装置の構成は、例えば撮像手段のカメラで歩行者を撮影しており、近年のプライバシーを重視する傾向から歩行者がカメラを嫌悪して避けるという問題があった。また、従来の情報表示処理装置は、歩行者の位置が所定量移動した場合に、予め記憶した２つの画像を合成して表示するだけであり、移動している歩行者にとっては視認し難いという課題があった。

この発明は、上述した課題を解決するためになされたものであり、移動している歩行者にとって視認し易い表示フレームを生成する情報表示処理装置を提供することを目的とする。

この発明に係る情報表示処理装置は、歩行者通路上の音響・振動センサから入力した音響・振動信号をサンプリングした音響データを出力する信号計測部と、信号計測部からの音響データに基づいて歩容データを算出し、算出した歩容データに基づいて１表示周期先の歩行者の視点位置及び歩行者の歩行タイミングを算出する歩容計算部と、歩容計算部からの歩容データ、１表示周期先の歩行者の視点位置、歩行者の歩行タイミングに基づいて歩行者の属性を判断し、歩行者の属性に対応する提供情報を通信回線を介して取得する属性対応コンテンツ検索部と、歩容計算部からの歩容データ、１表示周期先の歩行者の視点位置、属性対応コンテンツ検索部からの提供情報に基づいて、歩行者の視点位置に対応した表示フレームを作成する表示フレーム作成部と、表示フレーム作成部からの表示フレームを歩行者の歩行タイミングで出力する表示・歩行同期部と、を備えたものである。

この発明に係る情報表示処理装置によれば、歩容計算部は信号計測部からの音響データに基づいてターゲットとする周波数帯域の音響データを抽出し、抽出した音響・振動信号に基づいて歩行者の歩容データ、歩行者の視点位置、歩行タイミングを算出し、属性対応コンテンツ検索部は歩行者の歩容データに基づいて歩行者の属性に対応する提供情報を取得し、表示フレーム作成部は歩容データ、歩行者の視点位置、提供情報に基づいて表示フレームを作成し、表示・歩行同期部は歩容データに基づいて歩行者の歩行タイミングで表示フレームを出力するように構成したことにより、音響・振動信号に基づいて歩行者の身体運動の状態を示す歩容データを算出し、歩容データに基づいて表示フレームを作成することができる。その結果、音響・振動信号に基づいて、移動している歩行者にとって視認し易く、高いアイキャッチ効果がある表示フレームを生成することができる。

この発明の実施の形態１による情報表示処理装置を用いた情報表示システムの構成を示す図である。 この発明の実施の形態１による情報表示処理装置の構成を示す図である。 この発明の実施の形態１による情報表示処理装置の歩容計算部の構成を示す図である。 この発明の実施の形態１による情報表示処理装置の歩容計算部の処理を示す図である。 この発明の実施の形態１による情報表示処理装置の処理動作を示すフローチャートである。 この発明の実施の形態１による情報表示処理装置が作成した表示フレームを示す図である。 この発明の実施の形態２による情報表示処理装置の構成を示す図である。 この発明の実施の形態２による情報表示処理装置が作成した表示フレームを示す図である。 この発明の実施の形態３による情報表示処理装置の構成を示す図である。 この発明の実施の形態３による情報表示処理装置が作成した表示フレームを示す図である。 この発明の実施の形態４による情報表示処理装置の歩容計算部の構成を示す図である。 この発明の実施の形態４による情報表示処理装置の処理を示すフローチャートである。

以下、この発明の実施の形態を、図面を参照しながら詳細に説明する。
実施の形態１．
図１は、情報表示処理装置を用いた情報表示システムの全体構成を示す図である。情報表示システム１は、図１に示すように音響・振動センサ１０、情報表示処理装置２０、表示・音響デバイス３０、インターネット４０で構成されており、情報表示処理装置２０は音響・振動センサ１０、表示・音響デバイス３０、インターネット４０及び図示しない管理センターと通信回線を介して接続されている。

音響・振動センサ１０は、歩行者通路上に設置され、設置された空間の音響、設置された場所の床面の振動を計測して、計測位置毎に音響・振動信号を出力する。音響・振動センサ１０は、例えばステレオマイク、振動板からの音響、振動を計測しており、表示・音響デバイス３０から所定の距離離れた歩行者通路上に、歩行者の通行方向に沿って設置されている。

音響・振動センサ１０は、音波が１／３０秒で進む距離として例えば１１ｍ離して設置されている。ここで１／３０秒は表示フレームの更新時間を示す最大リフレッシュレートであり、音響・振動センサ１０は、音波が１／３０秒で進む距離以上離して設置されることで、歩行者の足音による音響を重複して計測しないように配置されている。なお、音響・振動センサ１０を一つだけ設置する場合、例えば音響・振動センサ１０は表示・音響デバイス３０の正面から所定の距離離れた歩行者通路上に設置される。

情報表示処理装置２０は、入力した音響・振動信号に基づいて処理を行い、表示フレームと同期音を出力するよう機能する。情報表示処理装置２０は、音響・振動センサ１０が設置された歩行者通路上を歩行する歩行者の中からターゲットとする歩行者（以下、ターゲットと略記する）を抽出してターゲットの歩容データ、視点位置、歩行タイミングを算出する。また、情報表示処理装置２０は、ターゲットの歩容データに基づいて提供情報を取得し、ターゲットの歩容データと提供情報に基づいて表示フレームを作成し、表示フレームと同じタイミングで同期音を発生して出力する。情報表示処理装置２０の詳細な構成については後述する。

表示・音響デバイス３０は、情報表示処理装置２０から表示フレームと同期音を入力し、入力した表示フレームを画面に表示し、同期音をスピーカから出力する。

インターネット４０は通信回線を介して情報表示処理装置２０と接続しており、例えばインターネット４０上には提供情報の配信を行う情報提供サーバが設けられている。

情報表示処理装置２０の詳細な構成について説明する。図２は情報表示処理装置２０の構成を示す図である。情報表示処理装置２０は、図２に示すように信号計測部２１、歩容計算部２３、属性対応コンテンツ検索部２４、表示フレーム作成部２５、歩行同期音発生部２６、表示・歩行同期部２７で構成されている。

信号計測部２１は、上述した図１の音響・振動センサ１０から入力した計測位置毎の音響・振動信号にサンプリング処理を行い、音響データを出力するよう機能する。また、信号計測部２１は、上述した図１の音響・振動センサ１０から入力した計測位置毎の音響・振動信号の位相差を算出して出力するように機能する。

歩容計算部２３は、後述する構成により、信号計測部２１からの音響データに基づいて周波数スペクトルを計算し、周波数スペクトルの推移と信号の位相差に基づいてターゲットを抽出し、ターゲットの周波数帯域の音響データを抽出し、ターゲットの身体運動の状態を示す歩容データ、ターゲットの視点位置、ターゲットの歩行タイミングを算出して出力するように機能する。

ここで、歩容データは、歩行者の１分間あたりの歩数であるケーデンス、歩行者が歩いている方向、歩行者の位置、歩行者の歩幅、歩行者の身長など、ターゲットとした歩行者の身体運動の状態を示すデータである。なお、歩容計算部２３は、ターゲットを抽出できない場合、その旨を属性対応コンテンツ検索部２４と歩行同期音発生部２６に通知する。

属性対応コンテンツ検索部２４は、予めターゲットの音響データと歩容データに対応するターゲットの属性を設定して記憶すると共に、各属性に対応するキーワードを記憶しており、歩容計算部２３からのターゲットの音響データと歩容データに基づいてターゲットの属性を判断して、属性に対応するキーワードを検索条件とし、インターネット４０を検索して提供情報を取得する機能を有している。

属性対応コンテンツ検索部２４は、例えばターゲットの音響データが所定の高音域を示し、歩容データのケーデンスの値が大きい場合、ターゲットがハイヒールを履いており、早く歩いている若い女性であると判断し、若い女性に対応するキーワードを抽出する。属性対応コンテンツ検索部２４は、抽出したキーワードを検索条件としてインターネット４０で検索を行い、検索結果に基づいて提供情報を取得する。

なお、属性対応コンテンツ検索部２４は、歩容計算部２３からターゲットにする周波数帯域の音響・振動信号を抽出できない旨の通知を入力した場合、予め設定された提供情報もしくは予め設定されたキーワードによるインターネット４０検索で取得した提供情報を取得する。

表示フレーム作成部２５はモーションブラー計算部２５ａを備えており、モーションブラー計算部２５ａは、歩容計算部２３からの歩容データに基づいて、ターゲットの視点位置を認識し、ターゲットの視点位置の動きに応じたぶれの方向とぶれの量を計算するよう機能する。表示フレーム作成部２５は、モーションブラー計算部２５ａの算出したぶれの方向とぶれの量と属性対応コンテンツ検索部２４からの提供情報に基づいて、歩容データに対応した表示フレームを作成するよう機能する。

表示フレーム作成部２５は、提供情報に基づいて表示フレームを作成し、モーションブラー計算部２５ａで算出したターゲットの視点のぶれの方向とぶれの量に基づいて、表示フレームを構成する表示オブジェクトを移動させて、表示オブジェクトの位置を変えた表示フレームを出力する。表示フレーム作成部２５は、このような構成により、ターゲットとしての歩行者にとって見易く処理した表示フレームを作成する。

歩行同期音発生部２６は、表示フレーム作成部２５から表示フレームを出力するタイミングに合わせて同期音を生成して出力するよう機能する。また、歩行同期音発生部２６は、歩容計算部２３からターゲットを抽出できない旨の通知を入力した場合、表示フレーム作成部２５から表示フレームが出力されるかを監視し、表示フレームを出力するタイミングに合わせて同期音を生成して出力する。

表示・歩行同期部２７は、歩容計算部２３からの歩容データに基づいて、歩行同期音発生部２６からの表示フレームと同期音をターゲットの歩行タイミングに合わせて出力するよう機能する。

ここで、歩容計算部２３の詳細な構成について図３を用いて説明する。歩容計算部２３は、図３に示すように周波数スペクトル計算部１３２、ターゲット抽出部１３３、歩容データ算出部１３４、歩行者視点予測部１３５、歩行タイミング抽出部１３６で構成されている。

周波数スペクトル計算部１３２は、バンドパスフィルタによる処理とＦＦＴ（Fast Fourier Transform：高速フーリエ変換）処理を行うよう構成されている。周波数スペクトル計算部１３２は、予め代表的な靴による歩行音を計測して周波数を設定、記憶しており、バンドパスフィルタが設定された周波数の範囲に制限してノイズを低減させて音響データを出力する。周波数スペクトル計算部１３２は、バンドパスフィルタの処理により、公共空間に音響・振動センサ１０を設置した場合でも、雑踏のノイズと大量の歩行音が含まれる音響データから振動板を踏んだ歩行音の音響データを計測するようにしている。

また、周波数スペクトル計算部１３２は、例えばサンプリング周波数４８ｋＨｚ、窓を１／３０秒、１６００サンプルでＦＦＴ処理を行って周波数スペクトルを算出する。この処理の際、周波数スペクトル計算部１３２は、複数の音響データについて時系列に連続して計算処理を行って周波数スペクトルを算出する。

ターゲット抽出部１３３は、異なる計測位置毎の音響・振動信号の位相差と周波数スペクトル計算部１３２からの周波数スペクトルに基づいてターゲットとする周波数帯域の周波数スペクトルを抽出し、抽出した周波数スペクトルに基づいてターゲットの歩行タイミングデータを出力するよう機能する。ターゲット抽出部１３３は、例えば、音響・振動信号の位相差と周波数スペクトルに基づいて音響の発生位置を推計して算出する。ターゲット抽出部１３３は、算出した音響の発生位置を表示・音響デバイスに対する各歩行者の相対位置とし、各歩行者の相対位置に基づいて最も表示・音響デバイス３０に接近している歩行者をターゲットとして抽出し、ターゲットの周波数スペクトルの推移を歩行タイミングデータとして出力する。なお、ターゲット抽出部１３３は、ターゲットを抽出できない場合、ターゲットを抽出できない旨の通知を属性対応コンテンツ検索部２４と表示フレーム作成部２５へ出力する。

また、ターゲット抽出部１３３は、音響・振動センサ１０が１つのみ設置されている場合、周波数スペクトル計算部１３２からの周波数スペクトルに基づいて、周波数帯域毎の音響データの強さや時系列による音響データの変化を算出して比較し、比較結果に基づいて、例えば最も強い周波数帯域の音響データの推移を歩行タイミングデータを出力するように構成しても良い。

歩容データ算出部１３４は、歩容データを算出する機能を有している。歩容データ算出部１３４は、ターゲット抽出部１３３からの歩行タイミングデータに基づいて、信号が１分間に何回あるかを計算し、歩行者の１分間当たりの歩数を示すケーデンスを算出する。また、歩容データ算出部１３４は、算出したケーデンスと計測位置毎の音響・振動信号の位相差に基づいてターゲットの方向、ターゲットの位置、歩行者の歩幅、歩行者の身長を推計して算出するように構成されている。歩容データ算出部１３４は、上記のように算出したケーデンス、ターゲットの方向、ターゲットの位置、歩行者の歩幅、歩行者の身長を歩容データとして出力する。

歩行者視点予測部１３５は、歩容データ算出部１３４からの歩容データに基づいて、１表示周期先のターゲットの視点位置を推計して算出するように機能する。歩行者視点予測部１３５は、例えば１表示周期先として１／３０秒先のターゲットの視点位置又は視点方向を算出する。

歩行タイミング抽出部１３６は、ターゲット抽出部１３３からの歩行タイミングデータと歩容データ算出部１３４からの歩容データに基づいて、ターゲットが接地する歩行タイミングを抽出する機能を有する。歩行タイミング抽出部１３６は、例えば歩容データのケーデンスと歩行タイミングデータに基づいて、ターゲットが接地する歩行タイミングを抽出して出力する。

ここで、実施の形態１の情報表示処理装置２０の処理動作の一例について説明する。
図４（ａ）は、信号計測部２１が出力した音響データを示す音量・振動量−時間のグラフである。図４（ｂ）は、周波数スペクトル計算部１３２の処理により得られた周波数スペクトルを示す音量・振動量−周波数のグラフである。図４（ｃ）は、図４（ｂ）の低音域の周波数の周期を示しており、図４（ｄ）は、図４（ｂ）の中音域の周波数の周期を示しており、図４（ｅ）は、図４（ｂ）の高音域の周波数の周期を示しており、それぞれ音量・振動量−時間のグラフである。図５は、情報表示処理装置２０の処理動作を示すフローチャートである。図６は、歩行者の上下の動きに合わせて表示フレームのオブジェクトを移動させる表示を示している。

まず、周波数スペクトル及び歩容データの抽出方法について説明する。
信号計測部２１は、図５に示すように音響・振動センサ１０から音響・振動信号を入力し（ステップＳＴ１０１）、音響・振動信号をサンプリングして、例えば図４（ａ）に示すような波形の音響データを出力している（ステップＳＴ１０２）。

周波数スペクトル計算部１３２は、信号計測部２１から入力した音響データに対して、予め設定した周波数の範囲のバンドパスフィルタで音響データの周波数帯域を制限する処理を行ってノイズを低減させる。周波数スペクトル計算部１３２は、続いてサンプリング周波数４８ｋＨｚ、窓を１／３０秒、１６００サンプルでＦＦＴ処理を行って図４（ｂ）に示す周波数スペクトルを算出し、周波数スペクトルをターゲット抽出部１３３と歩容データ算出部１３４へ出力する（ステップＳＴ１０３）。周波数スペクトル計算部１３２は、複数の音響・振動データに対して時系列に連続して計算処理を行い、図４（ｃ）、図４（ｄ）、図４（ｅ）に示すように所定の周波数帯域毎に周期を検出する。

ターゲット抽出部１３３は、信号計測部２１からの計測位置毎の音響・振動信号の位相差と周波数スペクトル計算部１３２からの周波数スペクトルに基づいて、音響の発生位置を推計して算出する。ターゲット抽出部１３３は、算出した音響の発生位置を表示・音響デバイスに対する各歩行者の相対位置とし、各歩行者の相対位置に基づいて最も表示・音響デバイス３０に接近している歩行者をターゲットとして抽出し、ターゲットの周波数スペクトルの推移を歩行タイミングデータとして歩容データ算出部１３４と歩行タイミング抽出部１３６へ出力する（ステップＳＴ１０４）。

このとき、ターゲット抽出部１３３は、ターゲットを抽出できたか否かを判断し（ステップＳＴ１０５）、ターゲットを抽出できない場合（ステップＳＴ１０５“ＮＯ”）、ターゲットを抽出できない旨の通知を属性対応コンテンツ検索部２４と提供情報を表示フレーム作成部２５へ出力して、ステップＳＴ１１５へ進む。また、ターゲット抽出部１３３は、ターゲットを抽出できた場合（ステップＳＴ１０５“ＹＥＳ”）、ステップＳＴ１０６へ進む。

歩容データ算出部１３４は、ターゲット抽出部１３３から歩行タイミングデータを入力すると、ターゲット抽出部１３３から入力した歩行タイミングデータに基づいて、信号が１分間に何回あるかを計算し、歩行者の１分間当たりの歩数を示すケーデンスを算出する。また、歩容データ算出部１３４は、算出したケーデンスと信号計測部２１から入力した計測位置毎の音響・振動信号の位相差に基づいてターゲットの方向、ターゲットの位置、ターゲットの歩幅、ターゲットの身長を推計して算出するように構成されている。歩容データ算出部１３４は、算出したケーデンス、ターゲットの方向、ターゲットの位置、ターゲットの歩幅、ターゲットの身長を歩容データとして出力する（ステップＳＴ１０６）。

歩行者視点予測部１３５は、歩容データ算出部１３４から歩容データを入力すると、歩容データに基づいて、１表示周期先として１／３０秒先の歩行者の視点位置を推計して算出する（ステップＳＴ１０７）。

歩行タイミング抽出部１３６は、ターゲット抽出部１３３から入力した歩行タイミングデータと歩容データ算出部１３４から入力した歩容データに基づいて、ターゲットが接地する歩行タイミングを抽出して出力する（ステップＳＴ１０８）。

次に、歩行者の属性に対応する提供情報を取得する処理動作について説明する。
属性対応コンテンツ検索部２４は、歩容計算部２３からターゲットの音響・振動信号、容データを入力すると、ターゲットの音響・振動信号、歩容データに予め対応させた属性からターゲットの性別、年齢などを判断する（ステップＳＴ１０９）。

属性対応コンテンツ検索部２４は、歩行者の性別、年齢に基づいて、予め性別、年齢に対応させたキーワードを抽出し、抽出したキーワードを検索条件にしてインターネット４０を検索する。属性対応コンテンツ検索部２４は、検索結果に基づいて提供情報を作成し、作成した提供情報を表示フレーム作成部２５へ出力する（ステップＳＴ１１０）。

次に、表示フレームの変換処理について説明する。
図６において、歩行者２３２ａは表示・音響デバイス３０に向かって接近している。表示・音響デバイス３０には、表示オブジェクト２３１ａが表示されている。このとき、歩行者２３２は図６(ａ)、図６(ｂ)に示すように、視点の高さを変化させながら歩行している。

表示フレーム作成部２５は、歩行計算部２３から歩容データを連続して入力すると、モーションブラー計算部２５ａが歩容データの歩行者の視点位置に基づいて、歩行者の視点位置のぶれ方向、ぶれ量を算出する。表示フレーム作成部２５は、歩行者の視点位置のぶれ方向、ぶれ量と、歩行タイミング抽出部１３６からの歩行タイミングに基づいて、図６（ｂ）に示すようにターゲットの足が接地するタイミングで歩行者の視点位置が最も低くなる位置に表示オブジェクト２３１ｂを表示するよう表示フレームを作成し、歩行同期音発生部２６へ出力する（ステップＳＴ１１１）。

ステップＳＴ１１１において、モーションブラー計算部２５ａの処理動作により、ターゲットの視点位置の動きが視点２３２ａから視点２３２ｂへ移行する場合には、表示位置が表示オブジェクト２３１ａから表示オブジェクト２３１ｂへ下がる。また、ターゲットの視点位置の動きが視点２３２ｂから視点２３２ａへ移行する場合には、表示位置が表示オブジェクト２３１ｂから表示オブジェクト２３１ａへ上がる。視点の動きが早い場合にはぶれが大きく、視点の動きが遅い場合にはぶれが少ない。モーションブラー計算部２５ａは、このように表示フレームを補正処理することにより、ターゲットに見易い表示フレームを表示するようにしている。

歩行同期音発生部２６は、ステップＳＴ１１１で表示フレーム作成部２５から表示フレームを入力すると同期音を生成し、表示フレームと同期音を同じタイミングで表示・歩行同期部２７へ出力する（ステップＳＴ１１２）。

表示・歩行同期部２７は、ターゲット抽出部１３３から歩行タイミングを入力し、歩行同期音発生部２６から表示フレームと同期音を入力すると、表示フレームと同期音を歩行タイミングに合わせて表示・音響デバイス３０へ出力する（ステップＳＴ１１３）。

表示・音響デバイス３０は表示・歩行同期部２７から入力した表示フレームと同期音を画面とスピーカから出力して（ステップＳＴ１１４）、処理を終了する（エンド）。

属性対応コンテンツ検索部２４は、ステップＳＴ１０５“ＮＯ”の場合、ターゲット抽出部１３３からターゲットを抽出できない旨の通知を入力すると、予め設定された提供情報もしくは予め設定されたキーワードによるインターネット４０検索で取得した提供情報を取得し、表示フレーム作成部２５へ出力する（ステップＳＴ１１５）。

表示フレーム作成部２５は、ステップＳＴ１０５“ＮＯ”の場合、ターゲット抽出部１３３からターゲットを抽出できない旨の通知を入力し、ステップＳＴ１１５において、属性対応コンテンツ検索部２４から提供情報を入力すると、提供情報に基づいて表示フレームを作成し、歩行同期音発生部２６へ出力する（ステップＳＴ１１６）。

歩行同期音発生部２６は、ステップＳＴ１１６で表示フレーム作成部２５から表示フレームを入力すると同期音を生成し、表示フレームと同期音を同じタイミングで表示・音響デバイス３０へ出力する（ステップＳＴ１１７）。

表示・音響デバイス３０は表示・歩行同期部２７から入力した表示フレームと同期音を画面とスピーカから出力して（ステップＳＴ１１８）、処理を終了する（エンド）。

以上のように、実施の形態１によれば、信号計測部２１は歩行者通路上の音響・振動センサ１０から入力した音響・振動信号をサンプリングした音響データを出力し、歩容計算部２３は信号計測部２１からの音響データに基づいて歩容データを算出すると共に、算出した歩容データに基づいて１表示周期先のターゲットの視点位置及びターゲットの歩行タイミングを算出し、属性対応コンテンツ検索部２４は歩容計算部２３からの歩容データ、１表示周期先のターゲットの視点位置、ターゲットの歩行タイミングに基づいてターゲットの属性を判断し、ターゲットの属性に対応する提供情報を通信回線を介して取得し、表示フレーム作成部２５は歩容計算部２３からの歩容データ、１表示周期先のターゲットの視点位置、属性対応コンテンツ検索部２４からの提供情報に基づいて、ターゲットの視点位置に対応した表示フレームを作成し、表示・歩行同期部２７は表示フレーム作成部２５からの表示フレームをターゲットの歩行タイミングで出力するように構成したので、ターゲットの歩行音に基づいてターゲットの身体運動の状態を示す歩容データを算出することができ、歩容データに基づいて、提供情報を取得すると共に、ターゲットの動きに連動した表示フレームを作成することができる。その結果、歩行している歩行者にとって見易い表示フレームを表示することができ、アイキャッチ効果を高くすることができ、広告効果を向上させた新しい広告用ディスプレイとして、デジタルサイネージ分野で利用することができる。

また、実施の形態１によれば、信号計測部２１は歩行者通路上の複数の音響・振動センサ１０から入力した音響・振動信号をサンプリングした音響データを出力し、複数の音響・振動センサ１０の設置位置に振動板を配置したので、歩行者が多い場合や周囲の騒音が激しい場合でも、歩行者の発する音響・振動信号を抽出することができる。

また、実施の形態１によれば、歩容データ算出部１３４は複数の位置に設置された音響・振動センサ１０からの音響・振動信号の位相差に基づいて、音響・振動信号の発生源を推計するよう構成したので、ターゲットの方向と位置を算出することができる。

また、実施の形態１によれば、歩行者視点予測部１３５は歩容データ算出部１３４からのケーデンス、方向、位置、歩幅、身長に基づいてターゲットの視点位置を算出し、表示フレーム作成部２５は歩行者視点予測部１３５からのターゲットの視点位置に基づいてターゲットの視点位置の動きによるぶれの方向とぶれの量を算出して、算出したぶれの方向とぶれの量に基づいて表示フレームを作成するモーションブラー計算部２５ａを備えて構成したので、ターゲットが移動しながら見る表示フレームを見易くすることができる。

また、実施の形態１によれば、属性対応コンテンツ検索部２４は歩容計算部２３からの音響・振動信号と歩容データに基づいてターゲットの属性を判断し、属性に対応する情報を検索して取得するように構成したので、ターゲットに適した情報を提供することができる。

なお、実施の形態１における音響・振動信号の解析方法として、周波数と時間変化を局在化させる手段にＷｅｂｌｅｔ変換を用いる構成にしても良い。

実施の形態２．
実施の形態１においては、ターゲットの視点位置の動きに応じて表示フレームの表示オブジェクトの表示位置を上下に移動させる構成について説明したが、実施の形態２はターゲットの焦点調節を誘引して奥行感を感じさせる表示について説明する。

図７は、実施の形態２の情報表示処理装置２０の構成を示している。なお、実施の形態２の情報表示処理装置２０の構成は、上述した図２の表示フレーム作成部２５のモーションブラー計算部２５ａに替えて、アンシャープ度計算部２５ｂで構成したものであり、表示フレーム作成部２５以外の構成は上述した図２の構成と同様であるため、説明は省略する。

表示フレーム作成部２５は、図７に示すようにアンシャープ度計算部２５ｂを備えており、アンシャープ度計算部２５ｂは、歩容計算部２３からのターゲットの歩容データ、ターゲットの視点位置、ターゲットの歩行タイミングに基づいて、表示フレームを構成する表示オブジェクトのぼけ具合を示すアンシャープ度を計算するように機能している。表示フレーム作成部２５は、表示オブジェクトに対して歩行タイミングに合わせて順番にフォーカスを当て、フォーカスを当てた表示オブジェクト以外の表示オブジェクトをアンシャープ度に基づいてぼかすように処理して表示フレームを作成する。

次に、実施の形態２の情報表示処理装置２０の処理動作について説明する。図８は、実施の形態２の表示・音響デバイス３０に表示する表示フレームの一例を示している。表示フレームは奥行方向に５層のレイヤーとして独立した表示オブジェクト２３１ｃ，２３１ｄ，２３１ｅ，２３１ｆ，２３１ｇで構成されている。なお、情報表示処理装置２０の処理動作は上述した図５と略同様であるため、表示フレーム作成部２５以外の処理動作の説明は省略する。

表示フレーム作成部２５は、歩容計算部２３からターゲットの歩容データ、ターゲットの視点位置、ターゲットの歩行タイミングを入力すると、入力した歩行タイミングに合わせて、表示オブジェクト２３１ｃ，２３１ｄ，２３１ｅ，２３１ｆ，２３１ｇに順番にフォーカスを当てる。このとき、アンシャープ度計算部２５ｂが歩行者の視点位置に基づいてアンシャープ度を計算する。表示フレーム作成部２５は、例えば、表示オブジェクト２３１ｃにフォーカスを当てた場合、フォーカスをあてた表示オブジェクト２３１ｃ以外の表示オブジェクト２３１ｄ，２３１ｅ，２３１ｆ，２３１ｇをアンシャープ度に基づいてぼかすように処理して表示フレームを作成する（上述した図５のステップＳＴ１１１）。

以上のように、実施の形態２によれば、アンシャープ度計算部２５ｂは歩行タイミング抽出部１３６からの歩行タイミング及び歩行者視点予測部１３５からのターゲットの視点位置に基づいて前景と背景のぼかし具合を計算し、表示フレームを構成する表示オブジェクト２３１ｃ，２３１ｄ，２３１ｅ，２３１ｆ，２３１ｇをぼかすように構成したので、ターゲットの焦点調節を誘引して奥行感を発生させることができる。その結果、歩行している歩行者にとって見易い表示フレームを表示することができ、アイキャッチ効果を高くすることができ、広告効果を向上させた新しい広告用ディスプレイとして、デジタルサイネージ分野で利用することができる。

実施の形態３．
実施の形態２においては、表示オブジェクト２３１ｃ，２３１ｄ，２３１ｅ，２３１ｆ，２３１ｇに順番にフォーカスをあてた表示フレームを作成する構成について説明したが、実施の形態３は、ターゲットの視点位置に応じた運動視差画像の表示フレームを作成する構成について説明する。

図９は、実施の形態３の情報表示処理装置２０の構成を示している。なお、実施の形態３の情報表示処理装置２０の構成は、上述した図２の表示フレーム作成部２５のモーションブラー計算部２５ａに替えて、運動視差表示用オブジェクト計算部２５ｃで構成したものであり、表示フレーム作成部２５以外の構成は上述した図２の構成と同様であるため説明は省略する。

表示フレーム作成部２５は、図９に示すように運動視差表示用オブジェクト計算部２５ｃを備えており、運動視差表示用オブジェクト計算部２５ｃは、歩容計算部２３からのターゲットの歩容データ、ターゲットの視点位置、ターゲットの歩行タイミングに基づいて、表示フレームを構成する表示オブジェクトの運動視差効果を計算するように機能している。ここで、運動視差効果とは、例えばターゲットの視空間にある各表示オブジェクトの位置が一定方向に規則的に変化して見えるようにするための表示オブジェクトの位置を示している。

次に、実施の形態２の情報表示処理装置２０の処理動作について説明する。図１０は、実施の形態３の表示・音響デバイス３０に表示する表示フレームの一例を示している。表示フレームは上述した図１０の表示フレームと同様に、奥行方向に５層のレイヤーとして、独立した表示オブジェクト２３１ｃ，２３１ｄ，２３１ｅ，２３１ｆ，２３１ｇで構成されている。なお、情報表示処理装置２０の処理動作は上述した図５と略同様であるため、表示フレーム作成部２５以外の処理動作の説明は省略する。

表示フレーム作成部２５は、歩容計算部２３からターゲットの歩容データ、ターゲットの視点位置、ターゲットの歩行タイミングを入力すると、運動視差表示用オブジェクト計算部２５ｃが歩容データに含まれるターゲットの位置と、ターゲットの歩行タイミングに基づいて運動視差効果を計算する。表示フレーム作成部２５は、運動視差効果に基づいて表示フレームを構成する表示オブジェクト２３１ｃ，２３１ｄ，２３１ｅ，２３１ｆ，２３１ｇの位置を移動させ、ターゲットの位置に対応する運動視差表示用オブジェクト２３１ｃ´，２３１ｄ´，２３１ｅ´，２３１ｆ´，２３１ｇ´を生成して表示フレームを作成する（上述した図５のステップＳＴ１１１）。

図１０（ａ）においては、歩行者２３５ａが表示・音響デバイス３０の右方向を移動中である。歩行者２３５ａは表示・音響デバイス３０の正面方向に進み、図１０（ｂ）においては、表示・音響デバイス３０の正面に達している。図１０（ａ）では表示・音響デバイス１８の表示で鉄塔の右に満月が出ている。これに対し、表示・音響デバイス３０の正面から見た図１０（ｂ）では鉄塔の左に満月が出るように表示している。このように、運動視差表示用オブジェクト計算部２５ｃによって、ターゲットとしての歩行者が身体を移動させると，視空間にある対象相互の位置が一定方向に規則的に変化して見えるように表示フレームを処理して、歩行タイミングに合わせて奥行き感を出すようにしている。

以上のように、実施の形態３によれば、運動視差表示用オブジェクト計算部２５ｃは、歩容データ算出部１３４からのターゲットの位置と、歩行タイミング抽出部１３６からの歩行タイミングに基づいて運動視差効果を計算し、運動視差効果に基づいて運動視差表示用オブジェクト２３１ｃ´，２３１ｄ´，２３１ｅ´，２３１ｆ´，２３１ｇ´を生成して表示フレームを作成するよう構成したので、ターゲットから見る角度に応じた表示フレームを作成して奥行感を感じさせることができ、歩行者にとって見易い表示フレームにすることができる。

実施の形態４．
実施の形態１から実施の形態３においては、ターゲットの属性に対応した提供情報に基づいて表示フレームを作成する構成について説明したが、実施の形態４は異常に関する提供情報を取得して表示する構成について説明する。なお、歩容計算部２３以外の構成は上述した図１、図２の構成と同様であるため、同一の符号を付して説明を省略する。

図１１は、実施の形態４の歩容計算部２３の構成を示している。歩容計算部２３は、図１１に示すように、異常検知部１３１、周波数スペクトル計算部１３２、ターゲット抽出部１３３、歩容データ算出部１３４、歩行者視点予測部１３５、歩行タイミング抽出部１３６で構成されている。

異常検知部１３１は、音響・振動信号に基づいて異常の有無を監視し、異常を検知した場合、図示しない管理センターへ通知すると共に、異常に関する提供情報をインターネット４０から収集するよう機能する。異常検知部１３１は、例えば上述した図２に示す信号計測部２１から入力した音響・振動信号の値を解析し、ダイナミックレンジのオーバーフローがあれば異常値と判定して地震の発生を推定し、インターネット４０を介して管理センターへ通知すると共に、気象庁ホームページにアクセスして地震に関する提供情報（地震情報）を収集する。

周波数スペクトル計算部１３２は、バンドパスフィルタによる処理とＦＦＴ（Fast Fourier Transform：高速フーリエ変換）処理を行うよう構成されている。周波数スペクトル計算部１３２は、上述した図２に示す信号計測部２１から入力した音響データに対してバンドパスフィルタによる処理でノイズを減らし、例えばサンプリング周波数４８ｋＨｚ、窓を１／３０秒、１６００サンプルでＦＦＴ処理を行って周波数スペクトルを算出する。なお、周波数スペクトル計算部１３２は、複数の音響データについて時系列に連続して計算処理を行い周波数スペクトルを算出する。

ターゲット抽出部１３３は、異なる計測位置毎の音響・振動信号の位相差と周波数スペクトル計算部１３２からの周波数スペクトルに基づいてターゲットとする周波数帯域の周波数スペクトルを抽出し、抽出した周波数スペクトルに基づいてターゲットの歩行タイミングデータを出力するよう機能する。ターゲット抽出部１３３は、例えば、音響・振動信号の位相差と周波数スペクトルに基づいて音響の発生位置を推計して算出する。ターゲット抽出部１３３は、算出した音響の発生位置を表示・音響デバイスに対する各歩行者の相対位置とし、各歩行者の相対位置に基づいて最も表示・音響デバイス３０に接近している歩行者をターゲットとして抽出し、ターゲットの周波数スペクトルの推移を歩行タイミングデータとして出力する。なお、ターゲット抽出部１３３は、ターゲットを抽出できない場合、ターゲットを抽出できない旨の通知を属性対応コンテンツ検索部２４と表示フレーム作成部２５へ出力する。

また、ターゲット抽出部１３３は、音響・振動センサ１０が１つのみ設置されている場合、周波数スペクトル計算部１３２からの周波数スペクトルに基づいて、周波数帯域毎の音響データの強さや時系列による音響データの変化を算出して比較し、比較結果に基づいて、例えば最も強い周波数帯域の音響データの推移を歩行タイミングデータを出力するように構成しても良い。

歩容データ算出部１３４は、歩容データを算出する機能を有している。歩容データ算出部１３４は、ターゲット抽出部１３３からの歩行タイミングデータに基づいて、信号が１分間に何回あるかを計算し、ターゲットの１分間当たりの歩数を示すケーデンスを算出する。また、歩容データ算出部１３４は、算出したケーデンスと計測位置毎の音響・振動信号の位相差に基づいてターゲットの方向、ターゲットの位置、ターゲットの歩幅、ターゲットの身長を推計して算出するように構成されている。歩容データ算出部１３４は、上記のように算出したケーデンス、ターゲットの方向、ターゲットの位置、ターゲットの歩幅、ターゲットの身長を歩容データとして出力する。

歩行者視点予測部１３５は、歩容データ算出部１３４からの歩容データに基づいて、１表示周期先のターゲットの視点位置を推計して算出するように機能する。歩行者視点予測部１３５は、例えば１表示周期先として１／３０秒先のターゲットの視点位置又は視点方向を算出する。

歩行タイミング抽出部１３６は、ターゲット抽出部１３３からの歩行タイミングデータと歩容データ算出部１３４からの歩容データに基づいて、ターゲットが接地する歩行タイミングを抽出する機能を有する。歩行タイミング抽出部１３６は、例えば歩容データのケーデンスと歩行タイミングデータに基づいて、ターゲットが接地する歩行タイミングを抽出して出力する。

次に、実施の形態１の情報表示処理装置２０の処理動作の一例について説明する。図１２は、情報表示処理装置２０の処理動作を示すフローチャートである。まず、周波数スペクトル及び歩容データの抽出方法について説明する。

信号計測部２１は、図５に示すように音響・振動センサ１０から音響・振動信号を入力し（ステップＳＴ２０１）、音響・振動信号をサンプリングして、例えば図４（ａ）に示すような波形の音響データを出力している（ステップＳＴ２０２）。

異常検知部１３１は、信号計測部２１から音響・振動信号を入力すると、入力した音響・振動信号を解析し、音響・振動信号が異常値で無いかを監視し異常を検知したかを判定する（ステップＳＴ２０３）。異常検知部１３１は、ステップＳＴ２０３において異常を検知していないと判断した場合（ステップＳＴ２０３“ＮＯ”）、異常が無い旨を周波数スペクトル計算部１３２へ通知してステップＳＴ２０５へ進む。

異常検知部１３１は、ステップＳＴ２０３において、ダイナミックレンジ外のオーバーフローがあれば音響・振動信号を異常判定する（ステップＳＴ２０３“ＹＥＳ”）。異常検知部１３１は、音響・振動信号の異常値に基づいて異常の種別が例えば地震であると推定し、インターネット４０を介して図示しない管理センターへ地震発生通知を送信する。
また、異常検知部１３１は、気象庁ホームページにアクセスして地震に関する提供情報を収集し、地震発生通知と共に地震に関する提供情報を表示フレーム作成部２５へ通知する（ステップＳＴ２０４）。

周波数スペクトル計算部１３２は、信号計測部２１から入力した音響データに対して、予め設定した周波数の範囲のバンドパスフィルタで音響データの周波数帯域を制限する処理を行ってノイズを低減させる。周波数スペクトル計算部１３２は、続いてサンプリング周波数４８ｋＨｚ、窓を１／３０秒、１６００サンプルでＦＦＴ処理を行って図４（ｂ）に示す周波数スペクトルを算出し、周波数スペクトルをターゲット抽出部１３３と歩容データ算出部１３４へ出力する（ステップＳＴ２０５）。周波数スペクトル計算部１３２は、複数の音響・振動データに対して時系列に連続して計算処理を行い、図４（ｃ）、図４（ｄ）、図４（ｅ）に示すように所定の周波数帯域毎に周期を検出する。

ターゲット抽出部１３３は、信号計測部２１からの計測位置毎の音響・振動信号の位相差と周波数スペクトル計算部１３２からの周波数スペクトルに基づいて、音響の発生位置を推計して算出する。ターゲット抽出部１３３は、算出した音響の発生位置を表示・音響デバイスに対する各歩行者の相対位置とし、各歩行者の相対位置に基づいて最も表示・音響デバイス３０に接近している歩行者をターゲットとして抽出し、ターゲットの周波数スペクトルの推移を歩行タイミングデータとして歩容データ算出部１３４と歩行タイミング抽出部１３６へ出力する（ステップＳＴ２０６）。

このとき、ターゲット抽出部１３３は、ターゲットを抽出できたか否かを判断し（ステップＳＴ２０７）、ターゲットを抽出できない場合（ステップＳＴ２０７“ＮＯ”）、ターゲットを抽出できない旨の通知を属性対応コンテンツ検索部２４と提供情報を表示フレーム作成部２５へ出力して、ステップＳＴ２１８へ進む。また、ターゲット抽出部１３３は、ターゲットを抽出できた場合（ステップＳＴ２０７“ＹＥＳ”）、ステップＳＴ２０８へ進む。

歩容データ算出部１３４は、ステップＳＴ２０６でターゲット抽出部１３３から歩行タイミングデータを入力すると、ターゲット抽出部１３３から入力した歩行タイミングデータに基づいて、信号が１分間に何回あるかを計算し、ターゲットの１分間当たりの歩数を示すケーデンスを算出する。また、歩容データ算出部１３４は、算出したケーデンスと信号計測部２１から入力した計測位置毎の音響・振動信号の位相差に基づいてターゲットの方向、ターゲットの位置、ターゲットの歩幅、ターゲットの身長を推計して算出するように構成されている。歩容データ算出部１３４は、算出したケーデンス、ターゲットの方向、ターゲットの位置、ターゲットの歩幅、ターゲットの身長を歩容データとして出力する（ステップＳＴ２０８）。

歩行者視点予測部１３５は、歩容データ算出部１３４から歩容データを入力すると、歩容データに基づいて、１表示周期先として１／３０秒先のターゲットの視点位置を推計して算出する（ステップＳＴ２０９）。

歩行タイミング抽出部１３６は、ターゲット抽出部１３３から入力した歩行タイミングデータと歩容データ算出部１３４から入力した歩容データに基づいて、ターゲットが接地する歩行タイミングを抽出して出力する（ステップＳＴ２１０）。

属性対応コンテンツ検索部２４は、ステップＳＴ２０８からステップＳＴ２１０で歩容データ、視点位置、歩行タイミングを入力すると、異常検知部１３１からの地震に関する提供情報の有無を判定する（ステップＳＴ２１１）。属性対応コンテンツ検索部２４は、ステップＳＴ２１１において地震に関する提供情報があると判定した場合（ステップＳＴ２１１“ＮＯ”）、ステップＳＴ２１４へ進む。

属性対応コンテンツ検索部２４は、ステップＳＴ２１１において地震に関する提供情報がないと判定した場合（ステップＳＴ２１１“ＹＥＳ”）、歩容計算部２３からターゲットの音響・振動信号、歩容データを入力すると、ターゲットの音響・振動信号、歩容データに予め対応させた属性からターゲットの性別、年齢などを判断する（ステップＳＴ２１２）。

属性対応コンテンツ検索部２４は、ターゲットの性別、年齢に基づいて、予め性別、年齢に対応させたキーワードを抽出し、抽出したキーワードを検索条件にしてインターネット４０を検索する。属性対応コンテンツ検索部２４は、検索結果に基づいて提供情報を作成し、作成した提供情報を表示フレーム作成部２５へ出力する（ステップＳＴ２１３）。

表示フレーム作成部２５は、異常検知部１３１からの地震に関する提供情報又は属性対応コンテンツ検索部２４からの提供情報に基づいて、上述した図５のステップＳＴ１１１と同様に表示フレームを作成する（ステップＳＴ２１４）。以降、ステップＳＴ２１５からステップＳＴ２１７の処理は上述した図５のステップＳＴ１１２からステップＳＴ１１４の処理と同様であるため、説明を省略する。

属性対応コンテンツ検索部２４は、ステップＳＴ２０７“ＮＯ”において、ターゲット抽出部１３３からターゲットを抽出できない旨の通知を入力すると、異常検知部１３１からの地震に関する提供情報の有無を判定する（ステップＳＴ２１８）。属性対応コンテンツ検索部２４は、ステップＳＴ２１８において地震に関する提供情報があると判定した場合（ステップＳＴ２１８“ＮＯ”）、ステップＳＴ２２０へ進む。

属性対応コンテンツ検索部２４は、ステップＳＴ２１８において地震に関する提供情報がないと判定した場合（ステップＳＴ２１８“ＹＥＳ”）、予め設定された提供情報又は予め設定されたキーワードによるインターネット４０検索で取得した提供情報を取得する（ステップＳＴ２１９）。

表示フレーム作成部２５は、異常検知部１３１からの地震に関する提供情報又は属性対応コンテンツ検索部２４からの提供情報に基づいて、上述した図５のステップＳＴ１１６と同様に表示フレームを作成する（ステップＳＴ２２０）。以降、ステップＳＴ２２１、ステップＳＴ２２２の処理は上述した図５のステップＳＴ１１７、ステップＳＴ１１８の処理と同様であるため、説明を省略する。

以上のように、実施の形態４によれば、異常検知部１３１が音響・振動信号に応じて異常を検知して、インターネット４０を介して管理センターに通知することができると共に、異常に関する異常情報を取得するよう構成したので、異常が発生した際に歩行者へ異常情報を提供することができる。

なお、実施の形態１から実施の形態３においては、表示フレーム作成部２５がモーションブラー計算部２５ａ、アンシャープ度計算部２５ｂ、運動視差表示用オブジェクト計算部２５ｃのいずれかを備える構成について説明したが、表示フレーム作成部２５は、モーションブラー計算部２５ａ、アンシャープ度計算部２５ｂ、運動視差表示用オブジェクト計算部２５ｃで構成しており、図示しない操作部や制御部からの指示に従っていずれかを選択して情報表示処理を行うよう構成してもよい。

また、音響・振動センサ１０に替えて画像センサで構成してもよい。その場合、歩容計算部２３は、画像センサからの画像信号に基づいて歩容データを算出するように構成される。

１ 情報表示システム、１０ 音響・振動センサ、２０ 情報表示処理装置、３０ 表示・音響デバイス、４０ インターネット、２１ 信号計測部、２３ 歩容計算部、２４ 属性対応コンテンツ検索部、２５ 表示フレーム作成部、２５ａ モーションブラー計算部、２５ｂ アンシャープ度計算部、２５ｃ 運動視差表示用オブジェクト計算部、２６ 歩行同期音発生部、２７ 表示・歩行同期部、１３１ 異常検知部、１３２ 周波数スペクトル計算部、１３３ ターゲット抽出部、１３４ 歩容データ計算部、１３５ 歩行者視点予測部、１３６ 歩行タイミング抽出部、２３１ａ，２３１ｂ，２３１ｃ，２３１ｄ，２３１ｅ，２３１ｆ，２３１ｇ 画像、２３２，２３２ａ，２３２ｂ 歩行者。

Claims (9)

1. 歩行者通路上の音響・振動センサから入力した音響・振動信号をサンプリングした音響データを出力する信号計測部と、
   上記信号計測部からの音響データに基づいて歩容データを算出し、算出した歩容データに基づいて１表示周期先の歩行者の視点位置及び歩行者の歩行タイミングを算出する歩容計算部と、
   上記歩容計算部からの歩容データ、１表示周期先の歩行者の視点位置、歩行者の歩行タイミングに基づいて歩行者の属性を判断し、歩行者の属性に対応する提供情報を通信回線を介して取得する属性対応コンテンツ検索部と、
   上記歩容計算部からの歩容データ、１表示周期先の歩行者の視点位置、上記属性対応コンテンツ検索部からの提供情報に基づいて、歩行者の視点位置に対応した表示フレームを作成する表示フレーム作成部と、
   上記表示フレーム作成部からの表示フレームを上記歩行者の歩行タイミングで出力する表示・歩行同期部と、を備えた情報表示処理装置。
2. 上記信号計測部は、歩行者通路上の複数の音響・振動センサから入力した音響・振動信号をサンプリングした音響データを出力し、
   上記複数の音響・振動センサの設置される位置に振動板を配置したことを特徴とする請求項１記載の情報表示処理装置。
3. 上記信号計測部は、歩行者通路上の複数の音響・振動センサから入力した音響・振動信号をサンプリングした音響データと計測位置毎の音響・振動信号の位相差を出力し、
   上記歩容計算部は、上記音響データ、上記複数の音響・振動センサの設置位置、上記信号計測部からの音響・振動信号の位相差に基づいて、歩行者の方向及び歩行者の位置を算出することを特徴とする請求項１記載の情報表示処理装置。
4. 上記表示フレーム作成部は、上記歩容計算部から連続して入力した歩行者の視点位置に基づいて、歩行者の視点位置のぶれの方向とぶれの量を計算して表示フレームを作成するモーションブラー計算部を備えたことを特徴とする請求項１記載の情報表示処理装置。
5. 上記表示フレーム作成部は、上記歩容計算部からの歩行者の視点位置及び歩行タイミングに基づいて、表示フレームを構成する表示オブジェクトのぼけ具合を示すアンシャープ度を計算して表示フレームを作成するアンシャープ度計算部を備えたことを特徴とする請求項１記載の情報表示処理装置。
6. 上記表示フレーム作成部は、上記歩容計算部からの歩行者の視点位置及び歩行タイミングに基づいて、歩行者の位置に応じて変化する表示位置を示す運動視差効果を計算して表示フレームを作成する運動視差表示用オブジェクト計算部を備えたことを特徴とする請求項１記載の情報表示処理装置。
7. 上記信号計測部からの音響・振動信号に基づいて異常値を検知した場合、地震が発生したと判断して通信回線を介して地震に関する提供情報を取得する異常検知部を備え、
   上記表示フレーム作成部は、上記異常検知部からの提供情報に基づいて表示フレームを作成することを特徴とする請求項１から請求項６のうちのいずれか１項記載の情報表示処理装置。
8. 上記表示フレーム作成部から表示フレームを入力するタイミングに合わせて生成した同期音と上記表示フレームを出力する歩行同期音発生部を備えたことを特徴とする請求項１から請求項７のうちのいずれか１項記載の情報表示処理装置。
9. 歩行者通路上の画像センサから入力した画像信号をサンプリングした画像データを出力する信号計測部と、
   上記信号計測部からの画像データに基づいて歩容データを算出し、算出した歩容データに基づいて１表示周期先の歩行者の視点位置及び歩行者の歩行タイミングを算出する歩容計算部と、
   上記歩容計算部からの歩容データ、１表示周期先の歩行者の視点位置、歩行者の歩行タイミングに基づいて歩行者の属性を判断し、歩行者の属性に対応する提供情報を通信回線を介して取得する属性対応コンテンツ検索部と、
   上記歩容計算部からの歩容データ、１表示周期先の歩行者の視点位置、上記属性対応コンテンツ検索部からの提供情報に基づいて、歩行者の視点位置に対応した表示フレームを作成する表示フレーム作成部と、
   上記表示フレーム作成部からの表示フレームを上記歩行者の歩行タイミングで出力する表示・歩行同期部と、を備えた情報表示処理装置。

Images