JP2019095687A

JP2019095687A - 表示システム

Info

Publication number: JP2019095687A
Application number: JP2017226660A
Authority: JP
Inventors: 林　信二; Shinji Hayashi; 信二林
Original assignee: Kyocera Document Solutions Inc
Current assignee: Kyocera Document Solutions Inc
Priority date: 2017-11-27
Filing date: 2017-11-27
Publication date: 2019-06-20
Also published as: US20190164396A1

Abstract

【課題】床に指示マークを表示させる場合に、人やその他の障害物（遮蔽物）を考慮して適切に表示する技術を提供する。【解決手段】表示システム１は、天井９２に設置された複数のカーブミラー５０と、床９３に表示すべきナッジ６０を出力するレーザーポインター１１と、ナッジ６０を表示する領域の映像を取得する監視カメラ１２と、ナッジ６０の出力を制御する出力制御部２２と、監視カメラ１２の映像をもとに、ナッジ６０を出力する方向を決定する人物動作判別部２６と、を備え、レーザーポインター１１から出力されたナッジ６０は、カーブミラーによって反射してナッジ表示位置Ｐ１に表示される。これによって、カーブミラー５０で反射した映像を上方から床９３に投射できる。【選択図】図３

Description

本発明は、表示システムに係り、例えば、歩行者等に対して進行方向や停止位置を示す指示マーク（「表示マーク」とも言う）を表示する機能を備えた表示システムに関する。

商店での精算場所（例えばレジ）や建物への入館において人が並ぶ場合に、並ぶ場所や進行方向を指示する装置が知られている。例えば、商店において多数のレジがある場合に、空いているレジの場所を示すシステムが導入され、お客の円滑な誘導を実現している。

そのような技術として、例えば、セキュリティ認証を行って建物への入館する際に、認証対象となる歩行者に対し認証精度を上げるための指示・誘導を行い、円滑な案内を試みる技術がある（例えば特許文献１参照）。具体的には、歩行者の歩行状態を推定し、投影装置で、歩行指示（指示マーク）を床や道路に逐次的に表示する。

特開２００７−２４１５００号公報

ところで、特許文献１に開示の技術では、投影装置で床に歩行指示を表示させる場合に、歩行者自体やその他の障害物（遮蔽物）を考慮しておらず、適切に表示することができない場合があり別の技術が求められていた。

本発明はこのような状況に鑑みてなされたものであり、上記課題を解決できる技術を提供することを目的とする。

本発明の表示システムは、天井に設置された複数の反射手段と、床に表示すべき指示マークを出力する映像投射部と、前記指示マークを表示する領域の映像を取得する撮像手段と、前記指示マークの出力を制御する出力制御部と、前記撮像手段の映像をもとに、前記指示マークを出力する方向を決定する出力方向決定部と、を備え、前記映像投射部から出力された前記指示マークは、前記反射手段によって反射して、マーク表示位置に表示される。
また、前記出力方向決定部は、前記撮像手段の映像をもとに、前記指示マークの通過する経路に障害となるものが存在しない光路を出力方向として決定してもよい。
また、前記出力方向決定部は、光路選択時の優先度を、床に投射する際に垂直に近い光路を高く設定してもよい。
また、前記出力方向決定部は、前記指示マークの表示において、いずれの光路においても人が遮る場合には、前記指示マークを消してもよい。

本発明によると、床に指示マークを表示させる場合に、人やその他の障害物（遮蔽物）を考慮して適切に表示する技術を実現できる。

実施形態に係る、表示システムが設置された状態を示す図である。実施形態に係る、表示システムにより床にナッジを投射した状態を示す図である。実施形態に係る、表示システムの概略構成を示すブロック図である。実施形態に係る、床に投射されたナッジの表示切り替え処理を説明する図である。実施形態に係る、表示システムによるナッジの投射処理を示すフローチャートである。

以下、本発明を実施するための形態（以下、「実施形態」という）について図面を参照して説明する。

図１〜３を参照して、本実施形態の概要を説明する。図１は、店舗９１等に表示システム１を設置した状態を示す。図１（ａ）は設置箇所の平面図であり、図１（ｂ）は側面図である。図２は、床９３に表示される指示マーク（以下、「ナッジ６０」と称する）の具体的な例を示している。図３は表示システム１の概略構成を示すブロック図である。

図１及び図２に示す様に、表示システム１は、天井９２に設置された複数のカーブミラー５０（反射手段）と、入出力装置１０とを備える。また、図３に示すように、表示システム１は入出力装置１０を制御する制御装置２０を備える。

店舗９１の内部には、図２中で縦３列の棚８０（棚Ａ８１〜棚Ｃ８３）と、その前方（図２中では下側）のテーブル８５とが配置されている。ここでは、棚８０の間のスペースに人が並びテーブル８５へ向かって移動することを想定する。カーブミラー５０は、棚８０の上方部分には配置されず、棚８０が配置される位置と左右に隣接する位置上方の天井９２に配置される。棚８０の設置位置には、ナッジ６０が表示されることがなく、効率の観点から省かれている。当然に、天井９２の全面にカーブミラー５０が配置されてもよい。

入出力装置１０は、レーザーポインター１１と監視カメラ１２とを備える。入出力装置１０は、障害物の回避の観点から比較的高所、例えば、人の身長や棚８０等の設置物より高い位置に配置されることが好ましい。また、レーザーポインター１１と監視カメラ１２は、異なる位置に設置されてもよく、それらはそれぞれ複数台であってもよい。監視カメラ１２の数を増やすことで障害物の検知精度、光路ＰＯの確認精度を向上させることができる。

レーザーポインター１１は、カーブミラー５０に向けて映像を投射し反射させて床９３に指示マークであるナッジ６０を表示させる。レーザーポインター１１から出力された映像は、カーブミラー５０で反射してナッジ表示位置Ｐ１でナッジ６０として表示される。このとき、店舗９１の棚８０や人を避けることができる適切な光路ＰＯすなわち、適切なカーブミラー５０が投射方向として選択される。

レーザーポインター１１の出力態様は、単色でもよいし複数色でもよい。また、静止画像でもよいし動画像でもよい。線の場合には実線、破線でもよく、点滅等させてもよい。いずれにせよ、人が認知しやすい態様で出力される。

監視カメラ１２は、所定のナッジ表示位置Ｐ１にナッジ６０を適切に表示できるよう、店舗９１の人の動きや表示されたナッジ６０を撮影する。

ここで、図２（ａ）の例では、棚Ａ８１と棚Ｂ８２の間のスペース、及び棚Ｂ８２と棚Ｃ８３の間のスペースにナッジ６０が表示される。より具体的には、棚Ｂ８２と棚Ｃ８３の間のスペースには、棚Ｂ８２（棚Ｃ８３）の端部より若干前側位置から、後に向かって所定間隔で、長方形の内部に数字１を含むナッジ「１」６１ａ、長方形の内部に数字２を含むナッジ「２」６２ａ、長方形の内部に数字３を含むナッジ「３」６３ａが表示されている。さらに、ナッジ「１」６１ａの前方には、テーブル８５に向かうように指示する前方向矢印７１が表示されている。

また、棚Ａ８１と棚Ｂ８２の間のスペースには、棚Ａ８１（棚Ｂ８２）の端部より若干前側位置から、後に向かって所定間隔で、長方形の内部に数字１を含むナッジ「１」６１ｂ、長方形の内部に数字２を含むナッジ「２」６２ｂ、長方形の内部に数字３を含むナッジ「３」６３ｂ、及び長方形の内部に英語単語ＣＬＯＳＥＤを含む「閉鎖ナッジ」６９が表示されている。さらに、ナッジ「１」６１ｂの前方には、テーブル８５に向かうように指示する斜向矢印７２ａが表示されている。数字は列の先頭からの順番を示し、英単語は表示されているナッジ６０（ここでは閉鎖ナッジ６９）が人に伝達したい内容（ここでは列が閉鎖されており並ばないようにして欲しい旨の内容）を示している。閉鎖ナッジ６９が表示された場合には、所定時間後に店舗９１の管理者等が物理的に閉鎖するといったこともできる。

図２（ｂ）の例では、棚Ｂ８２と棚Ｃ８３の間のスペースにナッジ６０（ナッジ「１」６１ａ〜ナッジ「３」６３ａ）が表示されている。さらに、ナッジ「１」６１ａの前方には、テーブル８５に向かうように指示する前方向矢印７１及び斜向矢印７２ｂが表示されている。

ここで、棚８０とテーブル８５の間を人が横切る方向（矢印７３の方向）に移動した場合、前方向矢印７１や斜向矢印７２ｂのナッジ６０が消えてしまう。そこで、そのようは状況を事前に判断して、光路ＰＯを切り替えることで、ナッジ６０が床９３上から消えてしまうことを抑制する。また、ナッジ表示位置Ｐ１に人が停止した場合には、ナッジ６０を消したり、人の影になっていない部分のみを表示させるようにする。すなわち、表示システム１は、人の動きや位置に合わせてナッジ６０の表示態様を変更する。

つづいて、図３を参照して表示システム１の表示出力を制御する制御装置２０について説明する。制御装置２０は、主制御部２１と、出力制御部２２と、映像処理部２３と、表示部２４と、操作部２５とを備える。

主制御部２１は、制御装置２０の各要素を統括的に制御する。出力制御部２２は、レーザーポインター１１の動作を制御する。より具体的には、出力制御部２２は、床９３に表示されるナッジ６０や表示させる位置（すなわちナッジ表示位置Ｐ１）、映像を反射させるカーブミラー５０（すなわち、光路ＰＯ）を選択する。

映像処理部２３は、監視カメラ１２が撮影した映像を取得して、カーブミラー５０へ向けた映像出力を制御する。具体的には、映像処理部２３は、人物動作判別部２６と、ナッジ登録処理部２７とを備える。

人物動作判別部２６は、監視カメラ１２が撮影した映像を基に、映像中の人物の動きを判別し進行方向や停止位置、障害物の有無等を判断し、出力制御部２２に通知する。ここで、判断方法の例として、レーザーポインター１１と監視カメラ１２が同一場所に配置される場合には、（１）予め記録された床９３のパターンが読み取れるかどうかにより障害物があるかを判定する方法と、（２）表示しているナッジ６０を読み取ることができるか否かで判定する方法がある。出力制御部２２は、その判断結果の通知を受けて上述の様にレーザーポインター１１の出射動作を制御する。

ナッジ登録処理部２７は、ナッジ表示位置Ｐ１に表示するナッジ６０を登録し記録する。より具体的には、ナッジ登録処理部２７は、床９３のどの位置にどのようなナッジ６０をどのカーブミラー５０（すなわち光路ＰＯ）を用いて表示させるかを登録する。一つのナッジ表示位置Ｐ１に対して複数の光路ＰＯを用いることができる場合には、優先度を設定して登録する。

また、床９３に表示すべきナッジ６０が「点」映像ではなく、画像や所定の形状の場合、カーブミラー５０を経由することから出力映像に補正を施す必要がある。すなわち、床９３でナッジ６０が所望の形状に適切に表示されるように、出力制御部２２は、床９３での表示を想定した予め補正された出力映像をレーザーポインター１１から出力する。そのため、表示システム１の導入時において、床９３のナッジ表示位置Ｐ１にその場所で表示させるナッジ６０と同じ画像を置き、ナッジ登録処理部２７が監視カメラ１２の映像をもとに、どのように補正をするか、すなわちどのような映像を出力するかを決定し、記録部３０のナッジＤＢ３２と登録する。この登録の際に、表示するナッジ６０、出力する映像、出力方向（映像を反射させるカーブミラー５０）が関連付けられる。上述の様に複数の光路ＰＯから最適な光路ＰＯを選択する構成の場合には、それぞれの光路ＰＯについて登録される。

記録部３０は、ミラーＤＢ３１と、ナッジＤＢ３２とを備える。
ミラーＤＢ３１は、天井９２に設置されるカーブミラー５０の位置を三次元座標で登録する。この座標は、位置座標でもよいし、方向を示す座標でもよく、例えば、レーザーポインター１１の設置位置（映像の出射位置）を原点として設定される。ナッジＤＢ３２は、上述のように、表示するナッジ６０を、ナッジ表示位置Ｐ１、光路ＰＯ、出力映像とを関連付けて保持する。

表示部２４は、監視カメラ１２が撮影した撮影対象領域（ここでは店舗９１の内部）を表示する。操作部２５は、表示システム１に対するユーザー操作を受け、例えば、表示するナッジ６０を切り替えたりする。

以上の構成による表示システム１の動作例を図４の条件図及び図５のフローチャートを参照して説明する。レーザーポインター１１と監視カメラ１２は各１台とする。また、図４に示すように、光路ＰＯは、光路Ａ、光路Ｂ、光路Ｃの３通りである。光路Ａは、ナッジ表示位置Ｐ１（ナッジ６０）カメラの真上から即ち垂直に床９３に投射する。光路Ｂは図中で左から右へ向かって投射する。光路Ｃは図中で上から下へ向かって投射する。人Ｐ２が右から左へナッジ表示位置Ｐ１に向けて移動する。光路選択の順番として、垂直に入射する光路Ａが最も優先度が高く、次に光路Ｂ、最後に光路Ｃとする。ここでは、より垂直に近い投射角度の光路ＰＯに対して優先度を高く設定したが、これに限る趣旨では無く、例えば、人Ｐ２の動作から最も長く同一の光路ＰＯでナッジ６０を表示できるものが選択されてもよい。

レーザーポインター１１により床９３の上にナッジ６０を表示させると（Ｓ１０）、人物動作判別部２６は、監視カメラ１２の映像をもとに、人Ｐ２やその他の障害物の状況から光路Ａに障害物があるか否かを判断する（Ｓ１１）。障害物が無いと判断した場合（Ｓ１１のＮ）、人物動作判別部２６は光路Ａを選択する（Ｓ１２）。

光路Ａに障害物があると判断した場合（Ｓ１１のＹ）、人物動作判別部２６は、光路Ｂに障害物があるか否かを判断する（Ｓ１３）。障害物が無いと判断した場合（Ｓ１３のＮ）、人物動作判別部２６は光路Ｂを選択する（Ｓ１４）。

光路Ｂに障害物があると判断した場合（Ｓ１３のＹ）、人物動作判別部２６は、光路Ｃに障害物があるか否かを判断する（Ｓ１５）。障害物が無いと判断した場合（Ｓ１５のＮ）、人物動作判別部２６は光路Ｃを選択する（Ｓ１６）。

光路Ｃに障害物があると判断した場合（Ｓ１５のＹ）、人物動作判別部２６は、光路選択肢無しと判断し、Ｓ１０の処理に戻る。このとき、ナッジ６０をそのまま表示させてもよいし、ナッジ６０を消去してもよい。

光路選択がなされると（Ｓ１２、Ｓ１４、Ｓ１６）、出力制御部２２は、選択された光路ＰＯに関する通知を人物動作判別部２６から取得し、その光路ＰＯに基づきナッジ６０を床９３に表示させるようにレーザーポインター１１から映像を出力する（Ｓ１８）。

つづいて、出力制御部２２は、監視カメラ１２の映像を監視し、ナッジ表示位置Ｐ１に接近する人Ｐ２が存在するか否かを判断する（Ｓ１９）。接近する人Ｐ２が存在しないと判断した場合（Ｓ１９のＮ）、ナッジ６０の表示をそのままにして（Ｓ１８）、監視を継続する（Ｓ１９）。

接近する人Ｐ２が存在すると判断した場合（Ｓ１９のＹ）、人物動作判別部２６は人Ｐ２の移動する方向を検出し（Ｓ２０）、同一の光路ＰＯで最も長時間にわたりナッジ６０を表示できる光路ＰＯに切り替える（Ｓ２１）。出力制御部２２は、そこで切り替えるように選択された光路ＰＯに基づきレーザーポインター１１を制御してナッジ６０を表示させる（Ｓ２２）。

そして、ナッジ６０の表示を継続する場合は（Ｓ２３のＹ）、Ｓ１０の処理に戻り、表示を継続しない場合は（Ｓ２３のＮ）、当該フローによる動作は終了する。

ここで、上記の実施形態の主な特徴を纏めると次の通りである。
（１）本実施形態の表示システム１は、天井９２に設置された複数のカーブミラー５０（反射手段）と、床９３に表示すべきナッジ６０（指示マーク）を出力するレーザーポインター１１（映像投射部）と、ナッジ６０を表示する領域の映像を取得する監視カメラ１２（撮像手段）と、ナッジ６０の出力を制御する出力制御部２２と、監視カメラ１２の映像をもとに、ナッジ６０を出力する方向を決定する人物動作判別部２６（出力方向決定部）と、を備え、レーザーポインター１１から出力されたナッジ６０は、カーブミラーによって反射してナッジ表示位置Ｐ１に表示される。
これによって、カーブミラー５０で反射した映像を上方から床９３に投射できる。すなわち、ナッジ６０の表示において、障害物によって遮られることを回避できる。

（２）人物動作判別部２６は、監視カメラ１２の映像をもとに、ナッジ６０の通過する経路に障害となるものが存在しない光路ＰＯを出力方向として決定する。
これによって、ナッジ６０の表示において、障害物によって遮られることをより回避できる。

（３）人物動作判別部２６は、光路選択時の優先度を、床９３に投射する際に垂直に近い光路ＰＯを高く設定している。
このような構成によって、一つのナッジ６０の表示に複数の光路ＰＯが選択可能な場合において、垂直に近い光路ＰＯほど優先度を高くすることで、障害物（例えば人Ｐ２やその他の物体）の影響を効果的に排除できる。

（４）人物動作判別部２６は、ナッジ６０の表示において、いずれの光路ＰＯにおいても人Ｐ２が遮る場合には、ナッジ６０を消す。
これによって、無駄な表示を行うことを回避でき、また、人Ｐ２に不快感を与えることを避けることができる。

以上、本発明を実施形態をもとに説明した。この実施形態は例示であり、それらの各構成要素の組み合わせにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。例えば、反射手段としてカーブミラー５０を例示したが、これに限らず平板ミラーでもよい。また、反射手段の向きを変更可能とし、人Ｐ２の動きに応じて制御してもよい。

１表示システム
１０入出力装置
１１レーザーポインター
１２監視カメラ
２０制御装置
２１主制御部
２２出力制御部
２３映像処理部
２４表示部
２５操作部
２６人物動作判別部
２７ナッジ登録処理部
３０記録部
３１ミラーＤＢ
３２ナッジＤＢ
５０カーブミラー
６０ナッジ
６１ａ、６１ｂナッジ「１」
６２ａ、６２ｂナッジ「２」
６３ａ、６３ｂナッジ「３」
６９閉鎖ナッジ
７１前方向矢印
７２ａ、７２ｂ斜向矢印
８０棚
８１棚Ａ
８２棚Ｂ
８３棚Ｃ
８５テーブル
９１店舗
９２天井
９３床
ＰＯ光路
Ｐ１ナッジ表示位置
Ｐ２人

Claims

天井に設置された複数の反射手段と、
床に表示すべき指示マークを出力する映像投射部と、
前記指示マークを表示する領域の映像を取得する撮像手段と、
前記指示マークの出力を制御する出力制御部と、
前記撮像手段の映像をもとに、前記指示マークを出力する方向を決定する出力方向決定部と、
を備え、
前記映像投射部から出力された前記指示マークは、前記反射手段によって反射してマーク表示位置に表示されることを特徴とする表示システム。
前記出力方向決定部は、前記撮像手段の映像をもとに、前記指示マークの通過する経路に障害となるものが存在しない光路を出力方向として決定することを特徴とする請求項１に記載の表示システム。
前記出力方向決定部は、光路選択時の優先度を、床に投射する際に垂直に近い光路を高く設定していることを特徴とする請求項１または２に記載の表示システム。
前記出力方向決定部は、前記指示マークの表示において、いずれの光路においても人が遮る場合には、前記指示マークを消すことを特徴とする請求項１から３までのいずれかに記載の表示システム。