JPH0822498A - 物品検索方法及び装置 - Google Patents

Abstract

(57)【要約】 【目的】 人間の購買行動をそのままシミュレーション
したシステムを実現する。 【構成】 蓄積部２３０は商品街等の仮想世界映像を格
納し、蓄積部２４０は各商店内の商品展示の実写映像を
格納し、蓄積部２５０は各商品の詳細情報を格納する。
処理部２３５は、蓄積部２３０の仮想世界映像を表示部
２６０に表示する。該表示される仮想世界は入力部２１
０からの操作入力に応じ変化していく。操作者が、該仮
想世界内である商店に入ると、処理部２４５は当該商店
内の商品展示映像を蓄積部２４０から読み出して表示部
２６０に表示する。該表示される商品展示映像も操作入
力に応じ変化する。操作者が商品展示映像上で商品を指
定すると、処理部２５５は、その詳細情報を蓄積部２５
０から読み出して表示する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、仮想三次元世界の映像
を用いた物品の検索方法及び装置に関する。

【０００２】

【従来の技術】従来技術による物品情報検索二、三の例
を図１０乃至図１２に示す。図１０は、メニューによる
検索方式で、まず店舗を選び（ステップ１０１０）、商
品群を体系化した商品品目、商品種別、商品タイプを各
選択し（ステップ１０２０〜１０４０）、次に商品素
材、商品の色柄およびサイズをメニューに従って選択し
ていき（ステップ１０５０〜１０７０）、最終的に商品
の静止画および商品の詳細情報を端末操作者に提供する
というものである。図１１は、商品一覧表示による方式
で、店舗一覧画面、商品一覧画面を順次表示し（ステッ
プ１１１０，１１２０）、該画面上でマウス等の入力機
器を使用して商品を選択することにより、（ステップ１
１３０）、最終的に商品の静止画および商品の詳細情報
を端末操作者に提供するというものである。図１２は、
ペーパメディアによる商品カタログをＣＤ−ＲＯＭ等の
磁気記録媒体で提供したマルチメディアによるカタログ
ショッピング方式で、ページをめくる感覚で画面を前進
・後退させて店舗、商品を選択していき（ステップ１２
１０〜１２４０）、気に入った商品があれば、商品をマ
ウス等の入力機器でクリックすることにより（ステップ
１２５０）、商品の詳細情報を参照するというものであ
る。

【０００３】上記従来技術のうち一例としてメニュー検
索方式による装置構成を図１３に示し、その処理フロー
チャートを図１４に示す。

【０００４】まず、操作者が電源を投入すると（ステッ
プ１４００）、映像・音声・文字表示部１３５０は初期
メニューを表示する（ステップ１４０１）。

【０００５】次に、操作者は、入力部１３１０を操作し
て、選択したメニューを入力する（ステップ１４０
２）。入力変換部１３２０は、選択されたメニューを処
理部１３３５が処理しやすい情報に変換するものであ
る。メニュー情報処理部１３３５は、選択したメニュー
内容を個別商品を指定するためのインデックス情報に変
換し、物品画像・音声・文字情報処理部１３４５に送出
する（ステップ１４０３〜１４０４）。と同時に、次メ
ニューをメニュー情報蓄積部１３３０から抽出して、表
示部１３５０に送出する（ステップ１４０５〜１４０
６）。映像・音声・文字表示部１３５０は前メニューを
刷新して次メニューを表示する（ステップ１４０７）。
ステップ１４０２〜１４０７を繰り返して、特定物品を
指定できるまでインデックス情報を蓄積する。

【０００６】インデックス情報が全て蓄積された時点
で、物品画像・音声・文字情報処理部１３４５は、イン
デックス情報の内容を全て満足する物品について、物品
画像・音声・文字情報蓄積部１３４０を検索し、該当す
る情報を抽出して、表示部１３５０に送出する（ステッ
プ１４０８〜１４１１）。映像・音声・文字情表示部１
３５０はメニュー画面を刷新して、この情報を表示する
（ステップ１４１２）。

【０００７】操作者は、他の物品の情報を見ない場合に
は操作を終了して電源を切断する（ステップ１４１３，
１４２３）。

【０００８】他の物品を続けて見る場合には、処理を続
行する旨の入力をして、最終メニューの表示に戻る（ス
テップ１４１３、１４１４）。操作者が最終メニューで
別のメニュー内容を選択すると、インデックス情報の該
当部分が最新の選択内容に更新される（ステップ１４１
５〜１４１８）。この最新のインデックス情報が探した
い別物品の検索条件として妥当であれば（ステップ１４
１９）、ステップ１４０９に戻り、これに基づいて再度
物品検索を行う。もし最終メニュー内で目的の物品に至
る検索ができない場合には、前メニューに戻る旨の入力
をすると、メニュー情報処理部１３３５はメニュー情報
蓄積部１３３０から前メニューを抽出して、表示部１３
５０に送出する（ステップ１４１９〜１４２１）。映像
・音声・文字表示部１３５０は前メニューを刷新して次
メニューを表示する（ステップ１４２２）。以下、操作
者は、ステップ１４１５〜１４２２を繰り返して、探し
たい印物品の検索条件を全て指定し、再度物品検索を行
う。

【０００９】

【発明が解決しようとする課題】ところで、従来のテキ
ストによるメニュー検索方式およびマルチメディアによ
る検索方式は、人間の購買行動に対応した作りになって
いない。つまり、施設のメニュー（または施設一覧）か
ら店舗を選択し、次に商品群を体系化（品目、カテゴリ
ー）したメニュー（または商品一覧）から商品を選択す
るといった複数のネスト構造による検索方式になってい
る。こういった検索方式では、端末操作者が一番みたい
商品の映像情報を見るのに複数の条件を選択する必要が
ある。また、現表示されている最下位の商品情報から店
舗を変えた商品検索を行う場合、最上位の施設メニュー
（または施設一覧）まで戻る必要があり、操作上の問題
となっている。

【００１０】本発明の目的は、特定物品が見つかるまで
店舗、店舗内を見て回るという、人間の購買行動をその
ままシミユレーションした物品検索方法及び装置を提供
することにある。

【００１１】

【課題を解決するための手段】本発明の物品検索方法
は、物品を展示する複数施設からなる場所の三次元仮想
世界映像と、各施設内の物品展示の実写映像と、各物品
の詳細情報とを記憶すると共に、前記三次元仮想世界映
像を表示し、該仮想世界映像内を移動することで特定の
施設を選択するステップと、前記選択された施設内の物
品展示実写映を表示して物品を選択するステップと、前
記選択された物品の詳細情報を出力するステップとを有
することを特徴とする。

【００１２】また、本発明の物品検索装置は、仮想世界
での物品を展示する複数施設からなる場所の三次元映像
情報を記憶する仮想世界映像蓄積部と、各施設の物品の
展示映像を実写映像として記憶する物品展示蓄積部と、
各物品の物品詳細情報を記憶する物品情報蓄積部と、前
記仮想世界の三次元映像、前記物品の展示映像及び前記
物品の物品詳細情報を表示する表示部と、前記仮想世界
と実写映像での移動を表す移動操作と動作の決定を表わ
す決定操作とを入力する入力部と、前記移動操作及び前
記決定操作に対応する移動操作信号及び決定操作信号を
作成し出力する入力変換部と、前記移動操作信号に基づ
いて前記仮想世界映像蓄積部から前記三次元映像を抽出
して表示部に表示し、前記決定操作信号に基づいて前記
仮想世界での所定の施設を特定する仮想世界情報処理部
と、前記仮想世界で特定された施設内の物品の展示映像
を前記物品展示映像蓄積部から抽出し、前記移動操作信
号に基づいて再生して表示部に表示し、前記決定操作信
号に基づいて物品を選択する物品展示映像処理部と、前
記物品展示映像処理部で選択された前記物品の物品情報
を前記物品情報蓄積部から抽出して表示部に出力する物
品情報処理部とを有することを特徴とする。

【００１３】

【作用】仮想世界の三次元映像はあらかじめコンピュー
タグラフィックより作成しておく。この三次元仮想世界
を利用することにより、操作者は、あたかも人間の購買
行動と同じ感覚で、様々な施設を見渡し、施設に近づ
き、施設を見比べることが容易に可能になる。また、施
設内の物品展示映像は実写映像で提供されるため、基本
的にビデオ再生時の操作（前進、後退など）でもって、
施設内の各商品を見渡し、気に入った商品があると、あ
たかも自分が商品に近づくように該商品を至近距離から
詳細に見ることができる。そして、目的の商品が見っか
ったなら、その詳細情報を出力することができる。

【００１４】

【実施例】以下、本発明の一実施例について図面により
説明する。

【００１５】図１に、本発明方法の一実施例における商
品検索の画面イメージを示す。まず、端末操作者は、コ
ンピュータグラフィックにより提供される仮想現実世界
のショッピングモールに入り、ショッピングモール内に
出店された各店舗を見渡す（ステップ１２０）。そし
て、端末操作者は、ショッピングモール内に出店されて
いる各店舗を見比べて気に入った店舗に入る（ステップ
１２０，１３０）。店舗に入ると実写映像にかわる。そ
こで、端末操作者は、実写映像で提供される各商品を見
渡し（ステップ１４０）、気に入った商品があると、あ
たかも自分が商品に近づくように商品を至近距離から詳
細に見る（ステップ１５０）。この場合の操作はビデオ
と基本的に同じである。最後に端末操作者は、気に入っ
た商品があると、ポインティングカーソルによりその商
品を特定すると、商品の詳細情報（素材、価格、サイ
ズ、色等）が表示される（ステップ１６０）。端末操作
者は、この詳細情報を参照して、商品をオーダエントリ
することが可能である。

【００１６】図２は、本発明方法を実現するための装置
構成の一実施例のブロック図を示したものである。本装
置は、映像・音声・文字情報の表示部２６０、移動・表
示画面上の部位の指定・各種コマンドを入力するための
入力部２１０、入力情報を各部が処理できる情報に変換
する入力変換部２２０、コンピュータグラフィックによ
りあらかじめ作成された仮想世界を構成するための情報
を記録した仮想世界映像蓄積部２３０、該蓄積部２３０
の情報を読み出して表示部２６０の画面に表示される仮
想世界の映像を生成する仮想世界情報処理部２３５、あ
らかじめ撮影しておいた各施設の物品展示映像のビデオ
映像を記録した施設内物品展示映像蓄積部２４０、物品
展示映像を選択して表示部２６０に送り、また、表示画
面上の部位と各物品を特定する商品コードの対応付けを
行う施設内物品展示映像処理部２４５、各物品の映像・
音声・文字情報を記録した映像・音声・文字情報蓄積部
２５０、物品画像・音声・文字情報を選択して表示部２
６０に送る物品画像・音声・文字情報処理部２５５から
成る。

【００１７】図２の動作を説明するためのフローチャー
トを図３および図４に示す。まず、操作者が電源を投入
すると（ステップ３００）、仮想世界情報処理部２３５
により、映像・音声・文字表示部２６０に仮想世界の映
像の初期状態、例えば仮想世界へのエントランス（入
口）の映像を表示する（ステップ３０１）。次に、操作
者は、入力部２１０を操作して仮想世界内での移動を入
力する（ステップ３０２）。入力変換部２２０は、これ
を仮想世界情報処理部２３５が処理できる情報に変換す
る。例えば、前進後退の入力は、操作者の仮想世界内で
の向きに対する縦方向の座標の数値変化に変換される
（ステップ３０３）。左右移動の入力は、操作者の仮想
世界内での向きに対する横方向の座標の数値変化に変換
される（ステップ３０５）。方向転換の入力は、操作者
の仮想世界内での向きそのものの変化つまり視野の回転
に変換される（ステップ３０４）。

【００１８】仮想世界情報処理部２３５は、上記の移動
情報に基づいて、操作者の仮想世界での位置および視野
をもとめ、視野に入る仮想世界情報の範囲を特定し、仮
想世界映像蓄積部２３０から該範囲内の仮想世界情報を
抽出する（ステップ３０６〜３０７）。続いて、この仮
想世界情報を表示画面上の二次元座標の情報に変換し、
映像情報として表示部２６０に送出する（ステップ３０
８〜３０９）。映像・音声・文字表示部２６０では、前
画面をクリアして、この仮想世界の映像情報を表示する
（ステップ３１０）。これらは、いわゆるバーチャル・
リアリティ・システムにおける操作・処理と基本的に同
様である。

【００１９】操作者は、移動の入力を繰り返して、仮想
世界内を移動する映像を見た後、特定の仮想世界内施設
に入る判断をする（ステップ３１１）。

【００２０】操作者が仮想世界内の移動入力によって特
定の施設の扉を通過すると、仮想世界情報処理部２３５
は、該通過した特定の扉の位置情報から、位置−施設対
応テーブルなどで対応する施設を特定し、施設ＩＤ情報
を施設内物品展示映像処理部２４５に送出する（ステッ
プ３１２〜３１４）。

【００２１】施設内物品展示映像処理部２４１では、上
記施設ＩＤ情報により、施設内物品展示映像蓄積部２４
０から当該する施設の物品展示映像情報を抽出し、表示
部２６０に送出する（ステップ３１５〜ステップ３１
６）。映像・音声・文字表示部２６０では前画面をクリ
アして、この映像情報を表示する（ステップ３１７）。

【００２２】上記表示された物品展示映像は、施設内
（店舗内）におかれた各物品を見て回っていく構成にな
っており（ビデオ映像）、操作者は、通常の再生表示に
より、施設内物品を順番に見ながら、同時に遠景に施設
内の他物品を見ることができる（ステップ３１８，３１
９）。一方、後ろ向き再生を指示することによって、前
の物品にもう一度戻ることもできる（ステップ３２
０）。これらの操作を繰り返し、適切な箇所で映像再生
を停止する（ステップ３２１）。

【００２３】この時に別の施設の物品に移りたい場合に
は（ステップ３２２）、操作者が施設を出る旨の入力を
すると（ステップ３３０）、処理部２４５から当該施設
のＩＤ情報が仮想世界情報処理部２３５に送出される
（ステップ３３１）。仮想世界情報処理部２３５は、該
ＩＤ情報を施設の扉前の位置座標情報に逆変換して（ス
テップ３３２）、ステップ３０５に戻る。この結果、施
設に入る前の仮想世界が表示され（ステップ３０６〜３
１０）、ステップ３１０で操作者が当該施設から出る向
きを指示することにより、ステップ３０２に戻る。これ
により、操作者は仮想世界内の別の施設をあらためて見
て回ることができる。

【００２４】一方、操作者が停止画面で映っている物品
のひとつを指定すると、施設内物品展示映像処理部２４
５は、指定した物品のＩＤ情報を物品画像・音声・文字
情報処理部２５５に送出する（ステップ３２２〜３２
５）。物品画像・音声・文字情報処理部２５５では、物
品画像・音声・文字情報蓄積部２５０から当該ＩＤ情報
に該当する物品画像・音声・文字情報を抽出し、表示部
２６０に送出する（ステップ３２６〜３２７）。映像・
音声・文字表示部２６０では前画面をクリアして、この
情報を表示し、音声を出力する（ステップ３２８）。こ
こで、音声は商品の紹介などである。

【００２５】次に、操作者は、他の物品を見ない場合に
は操作を終了して電源を切断する（ステップ３４０）。
また、他の物品を続けて見る場合には、展示映像に戻る
旨の入力をする（ステップ３２９）。また、当該施設か
ら出て別施設の物品を見る場合には、施設を出る旨の入
力をすると（ステップ３２９）、物品展示映像から施設
外に出る場合と同じ手順（ステップ３３０〜３３２）に
よって、仮想世界の映像に戻る。

【００２６】次に、図５乃至図９により、商品選択の実
施例を説明する。図５は、施設内物品展示映像蓄積部２
４０および物品画像・音声・文字情報蓄積部２５０に予
め登録しておく商品情報の設定手順を示したものであ
る。まず、商品を展示し撮影した店舗内映像ビデオをア
ナログからディジタルに変換して、施設内物品展示蓄積
部２４０に取り込む（ステップ５１０）。次に店舗内映
像を構成する１映像フレーム毎に、図６で示すような店
舗内の空間に仮想的に付与した店舗内空間アドレス（Ａ
００１，Ａ００２，…）について、該仮想的店舗内空間
アドレスと映像・音声・文字情報表示部２６０の物理画
面座標との対応テーブルを作成し、施設内物品展示映像
蓄積部２４５に登録する（ステップ５２０）。図７に、
画面座標位置／店舗内空間アドレス対応テーブルの例を
示す（表示装置の物理画面座標は６４０×４８０画素と
仮定）。最後に、図８に示すような店舗内空間アドレス
と物品を特定する店舗内空間アドレス／商品コード対応
テーブルを作成し、物品画像・音声・文字情報蓄積部２
５０に登録する（ステップ５３０）。

【００２７】図９は、商品の画像が施設内物品展示映像
蓄積部２４０から読み出され、商品が特定されるまでの
処理手順を示したものである。まず、施設内物品展示映
像処理部２４５では、表示部２６０に表示されている映
像フレームが何番目かをカウントする商品映像フレーム
カウンタを初期化し（ステップ９０１）、施設内物品展
示映像蓄積部２４０から商品映像フレームを読み出して
表示部２６０に送出すると共に（ステップ９０２）、商
品映像フレームカウンタを加算する（ステップ９０
３）。このステップ９０２，９０３の処理を入力部２１
０から割込を受け、且つ、入力部２１０からの信号がポ
インティングまたは商品検索を中止するボタンが押下さ
れるまで繰り返す（ステップ９０４，９０５，９０
６）。次に、ボタンが押下されると、物品画像・音声・
文字処理部２５５は、表示部２６０の画面物理座標と商
品映像フレームカウンタの値を施設内物品展示映像処理
部２４５から読込み（ステップ９０７）、図７に示した
画面座標／店舗内空間アドレス対応テーブルから店舗内
空間アドレスを検索し（ステップ９０８）、該店舗内空
間アドレスをキーとして、図８に示す店舗内空間アドレ
ス／商品コード対応テーブルより操作者が選択した商品
コードを特定し、商品の詳細情報を表示部２６０に表示
する（ステップ９０９）。

【００２８】以上、本発明の一実施例について説明した
が、図２の構成において、仮想世界映像蓄積部２３０と
は別に、例えばバックグランドミュージック記録部を設
け、仮想世界映像を表示中、表示部２６０にバックグラ
ンドミュージックを出力してもよい。さらに仮想世界映
像蓄積部２３０に、仮想世界の各場所毎のガイダンス音
声情報、その他の音声情報（例えばショッピング街のに
ぎわい）を記憶し、操作者の移動操作に応じて仮想世界
映像を抽出して表示する際、同時に当該仮想世界に対応
する音声情報を出力するようにしてもよい。同様のこと
は施設内物品展示映像蓄積部２４０の情報についても云
える。

【００２９】

【発明の効果】本発明によれば、人間の購買行動をその
ままシミュレーションしたシステムが実現できる。言い
換えれば実世界にある多数の店舗から人間が歩いて好み
の店舗を選択し、そこに多数展示してある商品から自分
の好みにあった商品を選択するような購買行動をコンピ
ユータグラフィックおよば商品展示を撮影した実写映像
を利用することにより、仮想のショッピング感覚を体験
することが可能になる。

【図面の簡単な説明】

【図１】本発明方法の一実施例になる商品検索イメージ
を示す図である。

【図２】本発明装置の一実施例になる構成図である。

【図３】図２の全体的動作を説明するためのフローチャ
ートである。

【図４】図３の続きのフローチャートである。

【図５】施設内物品展示映像蓄積部と物品情報蓄積部を
予め設定しておく商品情報の処理手順を示す図である。

【図６】商品を展示した店舗内に付与する店舗内空間ア
ドレスの構成図である。

【図７】表示装置の画面物理座標と店舗空間アドレスの
対応を取るためのテーブル構成図である。

【図８】店舗内空間アドレスと商品を特定するためのテ
ーブル構成図である。

【図９】商品映像が表示装置に表示され操作者が商品を
特定するまでの処理手順のフローチャートである。

【図１０】従来技術のメニュー検索による商品検索を示
す図である。

【図１１】従来技術の商品一覧による商品検索を示す図
である。

【図１２】従来技術の商品カタログ方式による商品検索
を示す図である。

【図１３】従来技術のメニュー方式を実現する構成図で
ある。

【図１４】従来技術のメニュー方式の処理フローチャー
トである。

【符号の説明】

２１０ 入力部 ２２０ 入力変換部 ２３０ 仮想世界映像蓄積部 ２３５ 仮想世界情報処理部 ２４０ 施設内物品展示映像蓄積部 ２４５ 施設内物品展示映像処理部 ２５０ 物品画像・音声・文字蓄積部 ２５５ 物品画像・音声・文字処理部 ２６０ 物品画像・音声・文字表示部

Claims (2)

【特許請求の範囲】
1. 【請求項１】 物品を展示する複数施設からなる場所の
   三次元仮想世界映像と、各施設内の物品展示の実写映像
   と、各物品の詳細情報とを記憶すると共に、 前記三次元仮想世界映像を表示し、該仮想世界映像内を
   移動することで特定の施設を選択するステップと、 前記選択された施設内の物品展示実写映を表示して物品
   を選択するステップと、 前記選択された物品の詳細情報を出力するステップと、 を有することを特徴とする物品検索方法。
2. 【請求項２】 仮想世界での物品を展示する複数施設か
   らなる場所の三次元映像情報を記憶する仮想世界映像蓄
   積部と、 各施設の物品の展示映像を実写映像として記憶する物品
   展示蓄積部と、 各物品の物品詳細情報を記憶する物品情報蓄積部と、 前記仮想世界の三次元映像、前記物品の展示映像及び前
   記物品の物品詳細情報を表示する表示部と、 前記仮想世界及び実写映像での移動を表す移動操作と動
   作の決定を表わす決定操作とを入力する入力部と、 前記移動操作及び前記決定操作に対応する移動操作信号
   及び決定操作信号を作成し出力する入力変換部と、 前記移動操作信号に基づいて前記仮想世界映像蓄積部か
   ら前記三次元映像を抽出して表示部に表示し、前記決定
   操作信号に基づいて前記仮想世界での所定の施設を特定
   する仮想世界情報処理部と、 前記仮想世界で特定された施設内の物品の展示映像を前
   記物品展示映像蓄積部から抽出し、前記移動操作信号に
   基づいて再生して表示部に表示し、前記決定操作信号に
   基づいて物品を選択する物品展示映像処理部と、 前記物品展示映像処理部で選択された前記物品の物品情
   報を前記物品情報蓄積部から抽出して表示部に出力する
   物品情報処理部と、 を有することを特徴とする物品検索装置。