JPH05216888A - Visitor guiding system - Google Patents
Visitor guiding systemInfo
- Publication number
- JPH05216888A JPH05216888A JP4022195A JP2219592A JPH05216888A JP H05216888 A JPH05216888 A JP H05216888A JP 4022195 A JP4022195 A JP 4022195A JP 2219592 A JP2219592 A JP 2219592A JP H05216888 A JPH05216888 A JP H05216888A
- Authority
- JP
- Japan
- Prior art keywords
- visitor
- image
- image signal
- voice
- guiding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 claims abstract description 29
- 238000003384 imaging method Methods 0.000 abstract 1
- 238000000034 method Methods 0.000 description 24
- 238000010586 diagram Methods 0.000 description 8
- 230000008520 organization Effects 0.000 description 6
- 230000007257 malfunction Effects 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Landscapes
- Audible And Visible Signals (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Analysis (AREA)
Abstract
Description
【０００１】[0001]
【産業上の利用分野】本発明は、オフィスビル等の施設
において来訪者をＣＣＤカメラ等の撮像装置により察知
し、音声で挨拶を行い、来訪者が目的としている来訪先
の組織表や電話番号表を表示装置に表示して音声で電話
を掛けることを促す、受付担当者の代行を目的とした来
訪者案内システムに関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention detects a visitor at an office building or other facility with an image pickup device such as a CCD camera and greets by voice, and the visitor's intended organization table or telephone number. The present invention relates to a visitor guidance system for displaying a table on a display device and urging the user to make a voice call for the purpose of acting as a receptionist.
【０００２】[0002]
【従来の技術】従来赤外線センサや熱線センサを用いて
来訪者の有無を判断するシステムがあり、このようなシ
ステムと音声合成装置とを組み合わせて、来訪者があれ
ば音声により挨拶を行うシステムも考えられている。し
かし、このようなシステムでは来訪者と通行人との区別
は全くつかず、同システムに接近した人物に単に反応し
て、無意味な挨拶を行うなどの誤動作が頻繁にみられ
た。また、ＣＲＴとその上に設けられたタッチセンサー
との組合わせにより対話的にビルの内部を案内するシス
テムも存在する。しかし、このシステムは来訪者が能動
的に同システムの操作を全て行わなければならなかっ
た。2. Description of the Related Art Conventionally, there is a system for determining the presence or absence of a visitor by using an infrared sensor or a heat ray sensor, and there is also a system in which such a system is combined with a voice synthesizer to give a voice greeting when there is a visitor. It is considered. However, in such a system, there is no distinction between visitors and passersby, and malfunctions such as giving meaningless greetings were often seen simply by reacting to people approaching the system. There is also a system that interactively guides the inside of a building by combining a CRT and a touch sensor provided on the CRT. However, this system required the visitor to actively perform all operations of the system.
【０００３】[0003]
【発明が解決しようとする課題】以上のように従来のシ
ステムでは来訪者と通行人との区別がつかず誤動作する
ことが多く、あまり実用的なシステムではなかった。ま
た、特別なセンサーを持たないシステムでは来訪者がシ
ステムの操作を全て行う必要があり、その操作は煩わし
かった。As described above, the conventional system is not a practical system because it often fails to distinguish between a visitor and a passerby and malfunctions. Also, in a system that does not have a special sensor, it is necessary for the visitor to operate the system, which is cumbersome.
【０００４】本発明は、このような問題点を解決するた
めになされたものであり、来訪者のみに反応し、そし
て、音声で案内や操作の説明を行うことにより誤動作を
減少させ、また、来訪者に複雑な操作を行わせないよう
にした来訪者案内システムを提供することを目的とす
る。The present invention has been made in order to solve such a problem, responds only to the visitor, and reduces malfunctions by giving voice guidance and operation explanations. It is an object to provide a visitor guidance system that prevents visitors from performing complicated operations.
【０００５】[0005]
【課題を解決するための手段】本発明に係る来訪者案内
システムは、所定の位置を撮像する撮像手段と、撮像手
段からの出力信号をデジタル化し、所定に位置における
基準画像信号と時々刻々えられる画像信号とを蓄積する
画像メモリと、画像メモリの基準画像信号と時々刻々え
られる画像信号とに基づいて移動物体のみを抽出する画
像処理手段と、移動物体の中から来訪者を認識するエキ
スパートシステムと、被訪問者のデータベースを備え、
来訪者が認識されると、データベースに基づいて音声発
生手段の音声及び表示装置の表示と来訪者の指示入力と
により対話式に来訪者を案内する案内システムとを有す
る。A visitor guidance system according to the present invention digitizes an image pickup means for picking up an image of a predetermined position and an output signal from the image pickup means, and the reference image signal at the predetermined position is timed. An image memory for storing a stored image signal, an image processing means for extracting only a moving object based on a reference image signal of the image memory and an image signal which is timed, and an expert for recognizing a visitor from among the moving objects. It has a system and a database of visitors,
When the visitor is recognized, it has a guide system which interactively guides the visitor based on the database by displaying the voice of the voice generating means and the display of the display device and inputting the instruction of the visitor.
【０００６】[0006]
【作用】本発明においては、来訪者が例えば受付けの位
置に近付くと、撮像手段は来訪者を撮像しその画像信号
はデジタル信号に変換されて画像メモリに蓄積される。
そして、基準画像信号と現在の画像信号との例えば差を
求めて、移動物体があるかどうかの判断処理を行う。そ
して、その移動物体が来訪者に該当するかどうかをエキ
スパートシステムにより判断処理し、来訪者であると判
断された場合には被訪問者のデータベースに基づいて来
訪者との間で音声及び表示により対話式に来訪者を案内
する。In the present invention, when the visitor approaches the reception position, for example, the image pickup means images the visitor, and the image signal thereof is converted into a digital signal and stored in the image memory.
Then, for example, a difference between the reference image signal and the current image signal is obtained, and a determination process as to whether or not there is a moving object is performed. Then, whether or not the moving object corresponds to a visitor is processed by an expert system, and if it is determined that the visitor is a visitor, a voice and a display are made between the visitor and the visitor based on the database of the visitee. Guide visitors interactively.
【０００７】[0007]
【実施例】図１は本発明の一実施例に係る来訪者案内シ
ステムの構成を示すブロック図である。図において、１
はＣＣＤカメラであり、１又は複数台設置される。２は
画像メモリであり、ＣＣＤカメラ１から時々刻々えられ
る映像出力をデジタル化して蓄え、それを加工するため
のプラットホームとなる。３は知識処理ボードであり、
ここには画像メモリ２の内容から移動物体のみを抽出す
る画像処理手段を実現するための画像処理プログラム、
画像処理プログラムの処理結果として得られた移動物体
の中から同システムに接近する人物（来訪者）を判断す
るエキスパートシステム、エキスパートシステムと連動
し来訪者の目的としている被訪問者のデータベースを管
理するプログラム、エキスパートシステムと連動し案内
情報を音声合成ボード４に渡すための音声プログラム、
エキスパートシステムと連動し案内情報を文字情報とし
て表示装置に出力する表示プログラム等が格納されてお
り、これらのプログラムが演算実行され、本発明の各手
段が実現されている。４は音声プログラムの制御下で動
作する音声合成ボードである。５ａはデータバスであ
り、画像メモリ２、知識処理ボード３及び音声合成ボー
ド４を相互に接続している。６は表示プログラムの制御
下で動作するキー付き表示装置（以下単に表示装置とい
う）であり、データバス５ｂを介して知識処理ボード３
に接続されている。1 is a block diagram showing the structure of a visitor guidance system according to an embodiment of the present invention. In the figure, 1
Is a CCD camera, and one or more units are installed. Reference numeral 2 denotes an image memory, which serves as a platform for digitizing and storing the image output that is obtained from the CCD camera 1 every moment and processing it. 3 is a knowledge processing board,
Here, an image processing program for realizing an image processing means for extracting only a moving object from the contents of the image memory 2,
It manages the expert system that determines the person (visitor) who approaches the system from the moving objects obtained as the processing result of the image processing program, and the database of the visited person who is the purpose of the visitor in cooperation with the expert system. A voice program for passing guidance information to the voice synthesis board 4 in conjunction with the program and expert system,
A display program or the like that outputs guidance information as character information to a display device in cooperation with an expert system is stored, and these programs are arithmetically executed to realize each means of the present invention. Reference numeral 4 is a voice synthesis board that operates under the control of a voice program. A data bus 5a connects the image memory 2, the knowledge processing board 3, and the voice synthesis board 4 to each other. Reference numeral 6 denotes a key-equipped display device (hereinafter simply referred to as a display device) that operates under the control of a display program, and the knowledge processing board 3 is connected via a data bus 5b.
It is connected to the.
【０００８】次に、図１のシステムの動作説明をする。
まず、本実施例における移動物体の検出方法について説
明する。図２は移動物体の検出方法の詳細を示したフロ
ーチャートであり、以下この図に基づいて動作説明をす
る。Next, the operation of the system of FIG. 1 will be described.
First, a method of detecting a moving object in this embodiment will be described. FIG. 2 is a flowchart showing the details of the method of detecting a moving object, and the operation will be described below based on this figure.
【０００９】（Ａ）画像の取り込み 移動物体の検出においては、予め撮影された基準画像と
常時撮影している画像との差を求め、差画像に何かが映
り、それが時間と共に移動すればそれを人物もしくは何
かの物体であると判断する。従って、基準画像を取り込
んでおく必要がある。最初の基準画像はＣＣＤカメラ１
の視野に来訪者や移動物体が映っていない状態で撮影す
る。その後は設置されている環境に応じて定期的に撮影
する。ＣＣＤカメラ１で撮影した正常時の基準画像と、
それ以降順次撮影された入力画像とを画像メモリ２にそ
れぞれ一旦記憶した後、圧縮してから画像メモリ２又は
他のメモリ（図示せず）に記憶する。この圧縮に際して
は例えば画像メモリ２における１フレーム分のメモリを
適当な大きさに分割しその分割された各領域の平均値を
求める。このように画像データを圧縮することにより後
述のしきい値の算出やグループ化などの処理を高速に行
うことができる。(A) Image capture In detecting a moving object, if a difference between a previously captured reference image and an image that is constantly captured is found, and something appears in the difference image and it moves with time. Judge that it is a person or something. Therefore, it is necessary to capture the reference image. The first reference image is CCD camera 1
Take a picture with no visitors or moving objects in the field of view. After that, shoot regularly according to the environment in which it is installed. A reference image of a normal state taken by the CCD camera 1,
The input images sequentially captured thereafter are temporarily stored in the image memory 2 and then compressed and then stored in the image memory 2 or another memory (not shown). At the time of this compression, for example, the memory for one frame in the image memory 2 is divided into appropriate sizes, and the average value of each divided area is obtained. By compressing the image data in this way, it is possible to perform later-described threshold value calculation and grouping processing at high speed.
【００１０】（Ｂ）画像処理による移動物体の検出 知識処理ボード３は周期的（０．５から２秒間隔）にＣ
ＣＤカメラ１から新しい映像を画像メモリ２に入力し、
同画像と画像メモリ２の別の場所に格納された基準画像
との間で次の処理を施して移動物体の検出を行う。 （Ｂ１）基準画像と入力画像との引き算により差画像を
求める。そして、得られた差画像から、輝度のヒストグ
ラムを求めしきい値を見つける。この時しきい値は正の
輝度と負の輝度の両方を見つける。 図３はしきい値の求め方を示した図である。しきい値は
差画像の輝度とその頻度のヒストグラムにおいて相対輝
度０から出発して最初の谷間（ｐ，ｑ）を取ることによ
り求められる。 （Ｂ２）次に、画像（物体）の検出をする。これは、差
画像において正のしきい値以上の画素があるか、或いは
負のしきい値以下の画素があるかを検査して行う。も
し、なければ次のカメラ画像を入力する。正のしきい値
以上或いは負のしきい値以下の画素があれば、それらの
画素のつながりを調べグループ化する。(B) Detection of Moving Object by Image Processing The knowledge processing board 3 periodically (0.5 to 2 seconds) C
Input a new video from the CD camera 1 to the image memory 2,
The following processing is performed between the same image and a reference image stored in another place of the image memory 2 to detect a moving object. (B1) A difference image is obtained by subtracting the reference image and the input image. Then, a luminance histogram is obtained from the obtained difference image to find a threshold value. The threshold then finds both positive and negative intensities. FIG. 3 is a diagram showing how to obtain the threshold value. The threshold value is found by taking the first valley (p, q) starting from relative brightness 0 in the histogram of the brightness of the difference image and its frequency. (B2) Next, an image (object) is detected. This is done by inspecting the difference image for pixels above a positive threshold or below a negative threshold. If not, input the next camera image. If there are pixels that are greater than or equal to the positive threshold value and less than or equal to the negative threshold value, the connection of those pixels is checked and grouped.
【００１１】図４は画像の検出とグループ化の処理方法
を示したフローチャートである。差画像について走査を
開始する。走査は差画像の左上の画素から開始し、その
画素が、正のしきい値ｐ以上であるどうかを判断し、正
のしきい値以上でないと判断された場合には次に負のし
きい値ｑ以下であるかどうかを判断する。負のしきい値
以下でないと判断された場合には、最初に戻って差画像
の左上の右側に隣接する画素について上述の処理を繰り
返す。走査した画素が正のしきい値ｐ以上又は負のしき
い値ｑ以下のいずれかに該当した場合にはその座標に相
当するアドレスにｐ以上又はｑ以下であることを記憶し
ておく。次にその画素に近接する３画素について正のし
きい値ｐ以上又は負のしきい値ｑ以下のものがあるかど
うかを調べる。FIG. 4 is a flowchart showing a method of detecting and grouping images. Start scanning for the difference image. The scan starts from the upper left pixel of the difference image, determines if that pixel is greater than or equal to the positive threshold p, and if not less than or equal to the positive threshold, then the negative threshold. It is determined whether the value is equal to or less than q. If it is determined that it is not less than or equal to the negative threshold value, the process returns to the beginning and the above process is repeated for the pixel adjacent to the upper left right side of the difference image. When the scanned pixel corresponds to either the positive threshold value p or more or the negative threshold value q or less, it is stored in the address corresponding to the coordinates that it is p or more or q or less. Next, it is checked whether or not there are three pixels close to the pixel having a positive threshold value p or more or a negative threshold value q or less.
【００１２】図５は差画像の画素をグループ化する方法
を示した図である。例えば画素ｘ0について、その画素
の一つ手前の行に「１」、「２」及び「３」と記載され
ている３画素について正のしきい値ｐ以上又は負のしき
い値ｑ以下のものがあるかどうかを調べる。この画素ｘ
0 を走査しているときにはこの３画素についての走査は
終了しており、この３画素についてもそれぞれｐ以上若
しくはｑ以下又はそれ以外であることが記憶されている
ので、画素ｘ0 に隣接した３画素がそのいずれであるか
を調べることにより、該当する画素があるかどうかが容
易に判断できる。該当する画素がない場合には、ｘ0 を
新たなグループとして成立させ、その座標をメモリ１４
に格納する。該当する画素がある場合にはメモリ１４の
該当する画素と同じグループメモリにその座標を格納す
る。グループメモリに座標を格納する場合には「明（正
のしきい値）」及び「暗（負のしきい値）」に分けて格
納する。以上の処理を差画像の全ての画素について繰り
返す。FIG. 5 is a diagram showing a method of grouping pixels of a difference image. For example, with respect to the pixel x 0 , the positive threshold value p or more or the negative threshold value q or less for the three pixels described as “1”, “2”, and “3” in the row immediately before the pixel x 0 . Check if there is something. This pixel x
The scanning of the 3 pixels when scanning the 0 has been completed, since it has been stored for this three pixels also below or otherwise p more or q respectively, 3 adjacent to the pixel x 0 By checking which of the pixels, it can be easily determined whether or not there is a corresponding pixel. When there is no corresponding pixel, x 0 is established as a new group, and its coordinates are stored in the memory 14
To store. If there is a corresponding pixel, its coordinates are stored in the same group memory as the corresponding pixel in the memory 14. When the coordinates are stored in the group memory, they are divided into "bright (positive threshold value)" and "dark (negative threshold value)" and stored. The above process is repeated for all pixels of the difference image.
【００１３】図６はグループ化された画素の座標データ
の格納方法を示した図である。各グループ毎にそれぞれ
隣接した「明（正のしきい値）」及び「暗（負のしきい
値）」の画素のアドレスが格納されている。FIG. 6 is a diagram showing a method for storing coordinate data of grouped pixels. Addresses of adjacent "bright (positive threshold value)" and "dark (negative threshold value)" pixels are stored for each group.
【００１４】（Ｂ３）以上のようにして１台目のテレビ
カメラについての差画像についてのグループ化が終了す
ると、それぞれのグループについて重心、面積及び輝度
を求める。 （Ｂ４）上記の処理を全てのＣＣＤカメラ１からの画像
について繰り返す。(B3) When the grouping of the difference image of the first television camera is completed as described above, the center of gravity, the area and the brightness of each group are obtained. (B4) The above processing is repeated for the images from all CCD cameras 1.
【００１５】（Ｃ）エキスパートシステムによる近接物
体の判断 画像処理によって得られた結果に基づいて検出された物
体が近接してくるかどうかを判断するために、エキスパ
ートシステムの知識ベースには以下の知識が含まれてい
る。 （Ｃ１）時系列的に画像処理結果を調べ、検出物体が一
時的にある場所に存在した場合には、それは何かが原因
したノイズであると判断する。 （Ｃ２）同様に時系列的に画像処理結果が画面に対して
左右方向に移動する場合には、それはカメラに近接して
来ないので無視する。 （Ｃ３）画面に対して上下方向に移動する物体があれ
ば、それを詳しく調べてみる。調べた結果、物体の大き
さが変化しなければ、カメラの視野の上下を移動した何
か分からない物体であるとして無視する。調べた結果、
物体の大きさが徐々に大きくなる場合、それはカメラに
近づく物体であり、近接物体であると判断する。 （Ｃ４）また、カメラの設置条件の関係で画面に対して
物体の重心位置があまり変化しなくても、その大きさが
徐々に大きくなるものも近接物体であると判断する。(C) Judgment of Proximity Object by Expert System In order to judge whether or not the detected object comes close based on the result obtained by the image processing, the following knowledge is stored in the knowledge base of the expert system. It is included. (C1) The image processing result is examined in time series, and when the detected object is temporarily present at a certain place, it is determined that it is noise caused by something. (C2) Similarly, when the image processing result moves in the left-right direction with respect to the screen in time series, it is ignored because it does not come close to the camera. (C3) If there is an object that moves vertically with respect to the screen, check it in detail. As a result of the examination, if the size of the object does not change, it is ignored because it is an unknown object that has moved up and down the field of view of the camera. As a result of the investigation,
When the size of the object gradually increases, it is determined that the object approaches the camera and is a near object. (C4) Also, even if the position of the center of gravity of the object does not change much with respect to the screen due to the installation condition of the camera, it is determined that the object that gradually increases in size is a near object.
【００１６】次に図１の来訪者案内システムの全体の処
理について説明する。 （ａ）初期設定 この来訪者案内システムにおいては、様々なビルのロビ
ーを対象とすることが予想される。そのため、画像処理
方法やエキスパートシステムの知識ベースはあらゆる環
境に対応できるようにしておく必要がある。そこで、設
置される環境に合わせる目的で、画像処理のパラメータ
調整や知識ベースの内容をカスタマイズできるようにし
ておく。利用者は画像処理のパラメータや知識ベースを
直接的に調整するのではなく、表示装置に表示されたメ
ニューに対して、同システムが設置される環境を対話式
に入力するだけで、内部の調整を自動的に行ってくれる
ようにしておく。これは例えばエキスパートシステムの
一部に、パラメータのチューニングや環境別に用意され
た知識ベースを選択する知識を含ませておくことにより
実現できる。Next, the overall processing of the visitor guidance system of FIG. 1 will be described. (A) Initial setting In this visitor guidance system, it is expected that the lobby of various buildings will be targeted. Therefore, the image processing method and the knowledge base of the expert system need to be prepared for all environments. Therefore, the parameters of image processing and the contents of the knowledge base can be customized in order to match the installed environment. Instead of directly adjusting the image processing parameters and knowledge base, the user can interactively enter the environment in which the system will be installed in the menu displayed on the display device and adjust the internal adjustment. So that it will be done automatically. This can be realized, for example, by including, in a part of the expert system, parameter tuning and knowledge for selecting a knowledge base prepared for each environment.
【００１７】図７は初期設定時の処理を示すフローチャ
ートである。 （ａ１）まず、来訪者がいない状態の画像を入力する。 （ａ２）そして、その中から来訪者を判断するための監
視区域をモニターしながらカーソルスイッチにより設定
する。その際、ロビーの電話の位置も設定する。 （ａ３）次に、監視区域に対してどの方向から物体が侵
入してきたらそれを来訪者であると識別するかを設定す
る。 （ａ４）基準画像のデフォルムの更新時間を設定する。FIG. 7 is a flow chart showing the processing at the time of initial setting. (A1) First, an image with no visitors is input. (A2) Then, while monitoring the monitoring area for judging the visitor from among them, it is set by the cursor switch. At that time, the location of the telephone in the lobby is also set. (A3) Next, it is set from which direction an object enters the surveillance area and the object is identified as a visitor. (A4) Set the update time of the deformation of the reference image.
【００１８】（ａ５）監視区域の明るさから画像処理用
の諸パラメータをエキスパートシステムが決定する。 (1) 例えば差画像（現画像−基準画像）から来訪者を自
動認識するための二値化しきい値（これは自動的に決
定）の補正係数（経験値）を決定する。 (2) 監視区域の大きさから、処理速度の向上とノイズ除
去のための画像分解能（何ピクセル×何ピクセルを一つ
の処理単位にするか）を決定する。 (3) 光の変化具合（日光のみならば時間と共に明るさが
変化する。照明の有無等）の状態を指定し、画像のノー
マライズ（いつも明るさを一定に保って処理）の有無を
決定する。(4) 上記(3) に関連して誤動作防止のための
リトライ回数を決定する。(A5) The expert system determines various parameters for image processing from the brightness of the monitoring area. (1) For example, a correction coefficient (empirical value) of a binarization threshold value (which is automatically determined) for automatically recognizing a visitor from a difference image (current image-reference image) is determined. (2) From the size of the monitoring area, determine the image resolution (how many pixels x how many pixels are used as one processing unit) for improving the processing speed and removing noise. (3) Specify the state of light change (brightness changes with time if there is only sunlight. The presence or absence of lighting, etc.) and determine whether or not to normalize the image (processing always keep the brightness constant). .. (4) Determine the number of retries to prevent malfunction in relation to (3) above.
【００１９】（ｂ）来訪者の確認 図２のフローチャートにより説明した方法に基づいてＣ
ＣＤカメラ１に接近する物体を検出し、そして、エキス
パートシステムにより近接物体の中から来訪者を抽出す
る。(B) Confirmation of visitor C based on the method explained by the flowchart of FIG.
An object approaching the CD camera 1 is detected, and a visitor is extracted from the near objects by the expert system.
【００２０】（ｃ）来訪者に対する案内 図８〜図１１は来訪者に対する案内の処理を示したフロ
ーチャートである。 （ｃ１）エキスパートシステムは来訪者がＣＣＤカメラ
１の前に立ち止まったと判断したら、音声プログラムを
起動させて音声合成ボード４及びスピーカ７により音声
による挨拶を来訪者に対して行う。図８に示すように、
例えば「いらっしゃいませ。」「誰に御用でしょうか
？」と音声で案内する。 （ｃ２）そして「訪問者の組織か氏名を指定して下さ
い。」と組織で検索するか、氏名そのもので検索するか
のメッセージが表示装置６に表示される。なお、ここで
訪問者とは被訪問者を意味しており、厳密には両者は反
対の意味を持つが一般には被訪問者を訪問者という場合
が多いので、本実施例においてもそのように扱うものと
する。 （ｃ３）来訪者は何れかの検索方法をキーで指定する。(C) Guidance to Visitors FIG. 8 to FIG. 11 are flowcharts showing a guidance process for visitors. (C1) If the expert system determines that the visitor has stopped in front of the CCD camera 1, the expert system activates the voice program and gives a voice greeting to the visitor using the voice synthesis board 4 and the speaker 7. As shown in FIG.
For example, voice guidance such as "Welcome.""Who do you want to use?" (C2) Then, the message "Please specify the organization or name of the visitor." Is displayed on the display device 6 as to whether to search by organization or by name itself. Here, the term “visitor” means a person to be visited, and strictly speaking, the two have opposite meanings, but in general, the person to be visited is often referred to as a visitor. Shall be treated. (C3) The visitor specifies one of the search methods with a key.
【００２１】（ｃ４）組織により検索するとした場合に
は、「訪問者の組織名を指定して下さい。」と音声によ
り案内し、更に表示装置６に組織の一覧が表示される。
次に、来訪者は訪問者の属している組織名をキー入力に
より指定する。次に、「訪問者の氏名を指定して下さ
い。」と音声により案内し、表示装置６に該当する組織
の氏名の一覧を表示する。来訪者は氏名をキー入力によ
り指定する。 （ｃ５）一方、氏名により検索するとした場合には、
「訪問者の氏名を指定して下さい。」と音声により案内
し、表示装置に例えば会社の全て氏名の一覧を表示す
る。この場合には会社の規模にもよるが氏名の一覧は数
画面に亘る。来訪者は氏名をキー入力により指定する。 （ｃ６）被訪問者の指定が完了すると、「訪問者に電話
をつなぎますので受話器をお取り下さい。」と音声によ
り案内する。来訪者がその案内に従って受話器を取る
と、システムは受話器を取ったことを確認してから指定
された訪問者に電話をかける。(C4) When searching by organization, a voice guidance "Please specify the organization name of the visitor." Is displayed, and a list of organizations is displayed on the display device 6.
Next, the visitor specifies the name of the organization to which the visitor belongs by keying in. Then, a voice message "Please specify the name of the visitor." Is displayed, and a list of the names of the corresponding organizations is displayed on the display device 6. The visitor specifies the name by key input. (C5) On the other hand, if you search by name,
"Please specify the name of the visitor." Is displayed by voice and a list of all the names of the company is displayed on the display device. In this case, depending on the size of the company, the list of names covers several screens. The visitor specifies the name by key input. (C6) When the designation of the person to be visited is completed, a voice message is displayed saying, "I will connect the telephone to the visitor. Please pick up the handset." When a visitor picks up the handset as directed, the system confirms that the handset was picked up and then calls the designated visitor.
【００２２】（ｃ７）システムは一定時間内に電話が接
続できたかどうかを判断し、接続できなかった場合に
は、図１０に示すように、「受付け係を呼びますから少
々お待ち下さい。」と音声により案内し、システムは受
付け係を電話で呼び出す。この後は、来訪者と受付け係
のとの人間どうしのやり取りになるのでシステムは初期
状態（図８の来訪者を確認する処理）に戻る。 （ｃ８）一定時間内に電話が接続できた場合には、来訪
者は訪問者と電話で話すことができる。そして、話しが
終わって受話器が戻ると、システムは受話器が戻ったこ
とを確認する。なお、来訪者が電話を取ったり或いは戻
したりする動作の確認は、ＣＣＤカメラ１の視野に電話
が映るように予め設定されており、初期設定段階でカメ
ラ視野のどの位置に電話が存在するかも与えられてお
り、図２のフローチャートの処理を電話の存在する位置
付近のみに適用して行う。或いは電話器の出力を知識処
理ボード３に取り込ん上述の判断を行わせるようにして
もよい。(C7) The system judges whether or not the telephone can be connected within a certain time, and if the telephone cannot be connected, as shown in FIG. 10, "Please call the receptionist, please wait a moment." Guided by voice, the system calls the receptionist by telephone. After this, since the visitor and the receptionist interact with each other, the system returns to the initial state (the process of confirming the visitor in FIG. 8). (C8) If the telephone can be connected within a certain time, the visitor can talk to the visitor by telephone. Then, when talking is over and the handset returns, the system confirms that the handset has returned. It should be noted that the confirmation of the operation of the visitor picking up or returning the call is preset so that the call is reflected in the field of view of the CCD camera 1, and at which position in the field of view the camera exists in the initial setting stage. Given this, the processing of the flowchart of FIG. 2 is applied only to the vicinity of the location where the telephone is present. Alternatively, the output of the telephone may be taken into the knowledge processing board 3 and the above-mentioned judgment may be performed.
【００２３】（ｃ９）システムが受話器が戻ったことを
確認すると、「訪問者とコンタクトがとれましたか。」
と音声により案内した後に、表示装置に次のコンタクト
の状況の一覧を表示する。 １．コンタクトが取れてここで待っている。 ２．コンタクトが取れて、これから訪問者の所へ行く。 ３．コンタクトが取れなかった。 ４．コンタクトが取れなかったので帰る。 （ｃ１０）来報者はその一覧の内該当するコンタクト状
況をキーにより指定する。例えば上記の「１」のコンタ
クト状況を指定した場合には、図１０に示すように、
「暫くお待ち下さい。」と音声により案内する。この後
は、来訪者と訪問者との人間どうしのやり取りになるの
でシステムは初期状態に戻る。(C9) When the system confirms that the handset has returned, "Is the contact with the visitor successful?"
Then, a list of the status of the next contact is displayed on the display device. 1. I'm waiting for the contact. 2. I get a contact and go to the visitor's place. 3. I couldn't make contact. 4. I couldn't get the contact, so I'm leaving. (C10) The visitor designates the corresponding contact status in the list with a key. For example, when the contact status "1" is specified, as shown in FIG.
"Please wait for a while." After this, the system will return to its initial state, as there will be human interaction between visitors and visitors.
【００２４】（ｃ１１）上記の「２」のコンタクト状況
を指定した場合には、図１１に示すように、「訪問者の
所に案内しましようか。」と音声により案内し、表示装
置に次のようにメッセージを表示する。 ａ．案内する。 ｂ．案内しなくてよい。 来訪者は上記の内いずれかをキー入力により指定する。
上記の「ａ」を指定した場合には音声により訪問者の居
場所まで道順を案内する。そして、その案内をした後及
び上記「ｂ」を指定した後は、一連の案内が終了した旨
を音声で挨拶する。そして、システムは初期状態に戻
る。(C11) When the contact status of "2" is specified, as shown in FIG. 11, a voice message "Shall I guide the visitor?" Display a message like. a. invite. b. You don't have to show me. The visitor specifies one of the above by key input.
When the above "a" is designated, the route is guided to the visitor's whereabouts by voice. Then, after giving the guidance and after designating the above-mentioned "b", the user is greeted by voice that the series of the guidance is completed. Then, the system returns to the initial state.
【００２５】（ｃ１２）上記の「３」のコンタクト状況
を指定した場合には、図１０に示すように、「受付け係
り呼びますので少々お待ち下さい。」と音声により案内
し、その後システムは受付け係を電話で呼び出し、音声
によりそのことを来訪者に案内する。この後は、来訪者
と訪問者との人間どうしのやり取りになるのでシステム
は初期状態に戻る。 （ｃ１３）上記の「４」のコンタクト状況を指定した場
合には、図１１に示すように、「どうも申し訳ありませ
ん。またの訪問をお待ちしております。」と音声により
案内する。この後システムは初期状態に戻る。(C12) When the contact status of "3" above is designated, as shown in FIG. 10, a voice message "Please call the receptionist, please wait." Is called by telephone and the information is announced to the visitors by voice. After this, the system will return to its initial state, as there will be human interaction between visitors and visitors. (C13) When the contact status of "4" is specified, as shown in FIG. 11, a voice message "I'm sorry. We are waiting for another visit." After this, the system returns to the initial state.
【００２６】ところで、上述の実施例において電話が接
続されなかった場合（ｃ７）及びコンタクトが取れなか
った場合（ｃ１２）に受付け係に電話をする場合の例を
説明したが、その訪問者と仕事上特に関連する他の担当
者の氏名を予め登録しておいて、その担当者を紹介する
ために音声又は表示装置による表示により来訪者に質問
し、来訪者にそれを了解した場合に上記の処理（ｃ６）
に戻るように処理をするようにしてもよい。そして、そ
の場合にはその処理を何回か繰り返した後又は来訪者が
他の担当者を望まなかった場合には、受付け係を電話で
呼び出す。By the way, in the above-mentioned embodiment, an example of calling the receptionist when the telephone is not connected (c7) and when the contact cannot be made (c12) has been described. Above, if the name of another person in charge who is particularly related is registered in advance, ask the visitor by voice or display on the display device to introduce the person in charge, and if the visitor understands it, Processing (c6)
You may make it process so that it may return to. In that case, after repeating the process several times or when the visitor does not want another person in charge, the receptionist is called by telephone.
【００２７】[0027]
【発明の効果】以上のように本発明によれば、来訪者の
有無が確実に判断してから案内するようにしたので、誤
動作による無意味な案内を防ぐことができる。また、オ
フィスビル等で案内担当者を常に配置することなく来訪
者を案内することができるために、案内担当者の省力化
が図れる。As described above, according to the present invention, since it is decided that the presence or absence of a visitor is surely determined before the guidance, meaningless guidance due to a malfunction can be prevented. Further, since it is possible to guide the visitor in the office building or the like without always arranging the guide staff, it is possible to save the labor of the guide staff.
【図１】本発明の一実施例に係る来訪者案内システムの
構成を示すブロック図である。FIG. 1 is a block diagram showing a configuration of a visitor guidance system according to an embodiment of the present invention.
【図２】移動物体の検出方法を示したフローチャートで
ある。FIG. 2 is a flowchart showing a method of detecting a moving object.
【図３】差画像におけるしきい値の求め方を示した図で
ある。FIG. 3 is a diagram showing how to obtain a threshold value in a difference image.
【図４】差画像の画素の検出及びグループ化の処理方法
を示したフローチャートである。FIG. 4 is a flowchart showing a method of detecting and grouping pixels of a difference image.
【図５】差画像の画素をグループ化する方法を示した図
である。FIG. 5 is a diagram showing a method of grouping pixels of a difference image.
【図６】グループ化された画素の座標データの格納方法
を示した図である。FIG. 6 is a diagram showing a method of storing coordinate data of grouped pixels.
【図７】図１のシステムにおける初期設定の方法を示し
たフローチャートである。7 is a flowchart showing a method of initial setting in the system of FIG.
【図８】図１のシステムにおける来訪者に対する案内の
処理の一部を示したフローチャートである。8 is a flowchart showing a part of a process of guiding a visitor in the system of FIG.
【図９】図１のシステムにおける来訪者に対する案内の
処理の一部を示したフローチャートである。9 is a flowchart showing a part of a process of guiding a visitor in the system of FIG.
【図１０】図１のシステムにおける来訪者に対する案内
の処理の一部を示したフローチャートである。10 is a flowchart showing a part of a process of guiding a visitor in the system of FIG.
【図１１】図１のシステムにおける来訪者に対する案内
の処理の一部を示したフローチャートである。11 is a flowchart showing a part of a process of guiding a visitor in the system of FIG.
───────────────────────────────────────────────────── フロントページの続き (72)発明者 松本 憲洋 東京都千代田区丸の内一丁目１番２号 日 本鋼管株式会社内 ─────────────────────────────────────────────────── ─── Continued Front Page (72) Inventor Norihiro Matsumoto 1-2-1, Marunouchi, Chiyoda-ku, Tokyo Nihon Steel Pipe Co., Ltd.
Claims (1)
位置における基準画像信号と時々刻々えられる画像信号
とを蓄積する画像メモリと、 画像メモリの基準画像信号と時々刻々えられる画像信号
とに基づいて移動物体のみを抽出する画像処理手段と、 前記移動物体の中から来訪者を認識するエキスパートシ
ステムと、 被訪問者のデータベースを備え、来訪者が認識される
と、前記データベースに基づいて音声発生手段の音声及
び表示装置の表示と該来訪者の指示入力とにより対話式
に来訪者を案内するガイドシステムとを有することを特
徴とする来訪者案内システム。1. An image pickup means for picking up an image of a predetermined position, an image memory for digitizing an output signal from the image pickup means, and storing a reference image signal at the predetermined position and an image signal which is momentarily timed, and an image. An image processing means for extracting only a moving object based on a reference image signal of the memory and an image signal that is momentarily ticked, an expert system for recognizing a visitor from among the moving objects, and a database of a visitee, When a visitor is recognized, a guide system that interactively guides the visitor based on the voice of the voice generating means and the display of the display device based on the database and the instruction input of the visitor is provided. Visitor information system.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4022195A JPH05216888A (en) | 1992-02-07 | 1992-02-07 | Visitor guiding system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4022195A JPH05216888A (en) | 1992-02-07 | 1992-02-07 | Visitor guiding system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH05216888A true JPH05216888A (en) | 1993-08-27 |
Family
ID=12076020
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP4022195A Pending JPH05216888A (en) | 1992-02-07 | 1992-02-07 | Visitor guiding system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH05216888A (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007058375A (en) * | 2005-08-23 | 2007-03-08 | Seiko Epson Corp | Image recognition method, image recognition device and image-recognizing program |
| JP2016012921A (en) * | 2014-06-27 | 2016-01-21 | ハーマン インターナショナル インダストリーズ インコーポレイテッド | Do-not-disturb system and apparatus |
| CN113066212A (en) * | 2021-03-30 | 2021-07-02 | 中国长江电力股份有限公司 | Convenient and safe entrance informing system and method |
-
1992
- 1992-02-07 JP JP4022195A patent/JPH05216888A/en active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007058375A (en) * | 2005-08-23 | 2007-03-08 | Seiko Epson Corp | Image recognition method, image recognition device and image-recognizing program |
| JP2016012921A (en) * | 2014-06-27 | 2016-01-21 | ハーマン インターナショナル インダストリーズ インコーポレイテッド | Do-not-disturb system and apparatus |
| CN113066212A (en) * | 2021-03-30 | 2021-07-02 | 中国长江电力股份有限公司 | Convenient and safe entrance informing system and method |
| CN113066212B (en) * | 2021-03-30 | 2022-03-18 | 中国长江电力股份有限公司 | Convenient and safe entrance informing system and method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2018143550A1 (en) | Apparatus for notifying of expiration date of stored food by character reading artificial intelligence in refrigerator, and method therefor | |
| US8159537B2 (en) | Video surveillance equipment and video surveillance system | |
| US6816184B1 (en) | Method and apparatus for mapping a location from a video image to a map | |
| CN108960067B (en) | Real-time train driver action recognition system and method based on deep learning | |
| US20060045374A1 (en) | Method and apparatus for processing document image captured by camera | |
| JP2006197505A (en) | Camera controller, camera system, electronic conference system and camera control method | |
| JP2001302121A (en) | Elevator device | |
| US20090128652A1 (en) | Image processing apparatus | |
| US20040041905A1 (en) | Intruding-object detection apparatus | |
| JP2005092262A (en) | Face detecting device | |
| US20030095184A1 (en) | Electronic reception method | |
| JP3129595B2 (en) | Image processing device | |
| JPH05216888A (en) | Visitor guiding system | |
| JP2000092368A (en) | Camera controller and computer readable storage medium | |
| CN115240669A (en) | Voice interaction method and device, electronic equipment and storage medium | |
| CN114697603A (en) | Meeting place picture detection method and system for video conference | |
| JP2001148843A (en) | Image pickup device and criminal prevention system using the image pickup device | |
| JPH057363A (en) | Picture monitoring device | |
| JPH10149447A (en) | Gesture recognition method/device | |
| JP2000078564A (en) | System for tracing person on television camera monitor | |
| JPH02202275A (en) | Video conference system | |
| JP2662303B2 (en) | Elevator wait detector | |
| JPH08102926A (en) | Interactive system | |
| CN118042329B (en) | Multi-microphone array noise reduction method and system based on conference scene | |
| JPH04249990A (en) | Picture signal processing unit |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Year of fee payment: 11 Free format text: PAYMENT UNTIL: 20080620 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090620 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Year of fee payment: 13 Free format text: PAYMENT UNTIL: 20100620 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100620 Year of fee payment: 13 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100620 Year of fee payment: 13 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Year of fee payment: 13 Free format text: PAYMENT UNTIL: 20100620 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110620 Year of fee payment: 14 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120620 Year of fee payment: 15 |
|
| LAPS | Cancellation because of no payment of annual fees |