JP2002183180A - Information gathering and retrieval system - Google Patents
Information gathering and retrieval systemInfo
- Publication number
- JP2002183180A JP2002183180A JP2000404264A JP2000404264A JP2002183180A JP 2002183180 A JP2002183180 A JP 2002183180A JP 2000404264 A JP2000404264 A JP 2000404264A JP 2000404264 A JP2000404264 A JP 2000404264A JP 2002183180 A JP2002183180 A JP 2002183180A
- Authority
- JP
- Japan
- Prior art keywords
- information
- unit
- external sensor
- information collection
- sensor system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
【０００１】本発明は、カメラやマイク、ＧＰＳ（Ｇｌ
ｏｂａｌ ＰｏｓｉｔｉｏｎｉｎｇＳｙｓｔｅｍ）など
の外界センサと、外界センサからの情報を処理するため
の汎用情報処理部、およびＬＡＮ、携帯電話、ＰＨＳ
（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙ ｐｈｏｎｅ Ｓｙｓ
ｔｅｍ）など広域通信網にアクセス可能な通信部が適切
に配置され、上記外界センサと汎用情報処理部の機器構
成情報及び特性をＨＴＭＬ、ＸＭＬ等のデータベース記
述言語により記述された機器構成情報部を持つ外界セン
サシステムと、上記複数の外界センサシステムと広域通
信網を介して通信し、外界センサシステムからの処理結
果を処理したり、また逆に外界センサシステムへデータ
を送信したりする情報収集部、さらに上記情報収集部と
アクセスすることのできる端末からなり、外界センサシ
ステムから返された情報を情報収集部を介してデータベ
ースに収集し、それを顧客が端末を介して検索したり、
顧客が望む情報収集の手続きを外界センサシステムの汎
用情報処理部に転送し、新たな情報収集タスクを開始す
ることができる情報収集システムに関するものである。The present invention relates to a camera, a microphone, a GPS (Gl
obal Positioning System), a general-purpose information processing unit for processing information from the external sensor, a LAN, a mobile phone, and a PHS.
(Personal Handy phone Sys
communication section that can access a wide area communication network, such as an external communication sensor and a general-purpose information processing section. The device configuration information section describes the device configuration information and characteristics of the general-purpose information processing section in a database description language such as HTML or XML. An external sensor system, and an information collecting unit that communicates with the plurality of external sensor systems via a wide area communication network, processes a processing result from the external sensor system, and conversely transmits data to the external sensor system. Further comprising a terminal capable of accessing the information collecting unit, the information returned from the external sensor system is collected in the database through the information collecting unit, and the customer searches for it through the terminal,
The present invention relates to an information collection system that can transfer a procedure of information collection desired by a customer to a general-purpose information processing unit of an external sensor system and start a new information collection task.
【０００２】従来から、公衆電話回線や、携帯電話など
の無線通信網を用いた情報収集システムや、遠隔監視シ
ステムが活用されている。定点監視では、アメダス（地
域気象観測システム）等のシステムがある。また、移動
点監視では例えば特開２０００−２８６９８７のよう
に、センサでの感知に基づいて、携帯電話やＰＨＳ等の
移動体通信器により所定の情報を自動送信するものがあ
る。Conventionally, an information collection system and a remote monitoring system using a wireless communication network such as a public telephone line or a mobile phone have been used. For fixed point monitoring, there are systems such as AMeDAS (local meteorological observation system). Further, in the moving point monitoring, for example, as in Japanese Patent Application Laid-Open No. 2000-286987, predetermined information is automatically transmitted by a mobile communication device such as a mobile phone or a PHS based on sensing by a sensor.
【０００３】従来の監視、情報収集システムには以下に
挙げる問題点がある。The conventional monitoring and information collecting system has the following problems.
【０００４】１．汎用情報処理部を対象とせず、あくま
でもシステムが用意する専用センサ、および専用処理部
を用いる。したがって収集する情報の種類が増えるにと
もない確実にコストが上昇する。[0004] 1. Instead of targeting a general-purpose information processing unit, a dedicated sensor and a dedicated processing unit prepared by the system are used. Therefore, as the types of information to be collected increase, the cost surely increases.
【０００５】２．情報収集システム専用の外界センサ部
を用いるため、システムを構成した時点で外界センサ部
の機器構成が既知である。そのため、機器構成情報を各
センサに登録する必要が無い半面、専用の外界センサ以
外の外界センサを用いることができない。[0005] 2. Since an external sensor unit dedicated to the information collection system is used, the device configuration of the external sensor unit is already known at the time of configuring the system. Therefore, although it is not necessary to register the device configuration information in each sensor, an external sensor other than a dedicated external sensor cannot be used.
【０００６】３．特定の目的を達成するための専用情報
処理部を用いているため、収集する情報の種類を変更す
るためには、情報処理装置そのものを置換せねばなら
ず、システムの規模が大きくなるにともないコストが上
昇する。[0006] 3. Since a dedicated information processing unit is used to achieve a specific purpose, in order to change the type of information to be collected, the information processing device itself must be replaced, and the cost increases as the size of the system increases. Rises.
【０００７】４．センサ自体が、人または人型移動ロボ
ットのように常時移動することがないのでさまざまな情
報を収集する能力に欠ける[0007] 4. Lack of ability to collect various information because the sensor itself does not move constantly like a human or humanoid mobile robot
【０００８】５．人を対象とした従来のシステムでは、
人に情報を提供することに主眼が置かれ、積極的に人ま
たは人型移動ロボットから情報を収集するシステムは皆
無である。[0008] 5. In traditional systems for people,
There is no system that focuses on providing information to humans and actively collects information from humans or humanoid mobile robots.
【０００９】本発明の目的は前記諸問題を解決し、人ま
たは人型移動ロボットを介して汎用かつ広域の情報を収
集し、収集した情報を保存、検索するシステムを提供す
ることにある。An object of the present invention is to solve the above-mentioned problems and to provide a system for collecting general-purpose and wide-area information via a human or a humanoid mobile robot, and storing and retrieving the collected information.
【００１０】本発明の請求項１の外界センサ部は、可視
光をとらえるカメラや音声をとらえるマイク、地球上の
位置情報を検出するＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔ
ｉｏｎｉｎｇ Ｓｙｓｔｅｍ）などの外界センサからな
り、汎用情報処理部が外界センサからの情報を処理した
結果や、外界センサと汎用情報処理部の機器構成情報を
通信部を介して情報収集部に送信する。上記は全て人ま
たは人型移動ロボットの適切な位置に取り付けられる、
外界センサシステムであり、これにより人または人型移
動ロボットが移動可能な全ての場所に関するあらゆる情
報を収集するための手段が得られる。According to a first aspect of the present invention, an external sensor includes a camera for capturing visible light, a microphone for capturing voice, and a GPS (Global Position) for detecting positional information on the earth.
An external sensor such as an ioning system, and transmits the result of processing of information from the external sensor by the general-purpose information processing unit and device configuration information of the external sensor and the general-purpose information processing unit to the information collection unit via the communication unit. All of the above can be attached to the appropriate location of a human or humanoid mobile robot,
An external sensor system, which provides a means for gathering all information about all places where a person or a humanoid mobile robot can move.
【００１１】本発明の請求項２は、上記外界センサシス
テムを１つ以上の複数用いる。情報収集部は複数の外界
センサシステムから送信される情報収集処理結果を処理
し、データベースに蓄積する。顧客は通信網を介した端
末から情報収集部及びそのデータベースにアクセスし、
上記複数外界センサシステムから得た情報を検索するこ
とができる。また、顧客は上記端末から情報収集部に外
界センサシステムのもつ汎用情報処理部または情報収集
部が処理すべき情報収集処理手順を登録することができ
る。情報収集部は顧客が登録した情報収集処理手順を通
信網を介して適切な外界センサシステムの汎用情報処理
部に転送することができる。これにより新たな情報収集
タスクを開始させることができる。According to a second aspect of the present invention, one or more external environment sensor systems are used. The information collection unit processes information collection processing results transmitted from the plurality of external sensor systems and accumulates the results in a database. The customer accesses the information collection unit and its database from the terminal via the communication network,
Information obtained from the multiple external sensor system can be searched. Further, the customer can register, from the terminal, an information collection procedure to be processed by the general information processing unit or the information collection unit of the external sensor system in the information collection unit. The information collection unit can transfer the information collection processing procedure registered by the customer to an appropriate general-purpose information processing unit of an external sensor system via a communication network. Thus, a new information collection task can be started.
【００１２】本発明の請求項第１項の実施の形態につい
て、図１に基づいて説明する。本発明の外界センサシス
テムは、図１に示すように、外界センサ部（１）と、汎
用情報処理部（２）と、通信部（３）を人または人型移
動ロボット上の適切な位置に装備し、外界センサ部
（１）と汎用情報処理部（２）の機器構成情報を保持す
る機器構成情報部（４）を具備することを特徴とする。
以下、本発明の請求項１の外界センサシステムの各部に
ついて詳細に説明する。The first embodiment of the present invention will be described with reference to FIG. As shown in FIG. 1, the external sensor system of the present invention moves an external sensor unit (1), a general-purpose information processing unit (2), and a communication unit (3) to appropriate positions on a human or a humanoid mobile robot. It is equipped with a device configuration information unit (4) that is equipped and holds the device configuration information of the external sensor unit (1) and the general-purpose information processing unit (2).
Hereinafter, each part of the external sensor system according to claim 1 of the present invention will be described in detail.
【００１３】上記外界センサ部（１）は、センサ外部の
情報を取得するためのカメラやマイク、ＧＰＳ（Ｇｌｏ
ｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）等か
らなる。大きさは、人または人型移動ロボットに取り付
けても不具合とならない程度であればよい。電源は一般
的に、汎用情報処理部（２）を駆動する電源から供給さ
れる。The external sensor unit (1) includes a camera, a microphone, and a GPS (Global Positioning System) for acquiring information outside the sensor.
bal Positioning System). The size may be such that it does not cause a problem even when attached to a human or a humanoid mobile robot. Power is generally supplied from a power source that drives the general-purpose information processing unit (2).
【００１４】更に汎用情報処理部（２）は、上記外界セ
ンサ部（１）の出力を受取り、情報収集に必要な情報収
集処理手順（１４）（プログラムやスクリプト、マクロ
など）を実行するために必要である。汎用情報処理部
（２）には例えばウェアラブルコンピュータ等の、汎用
の情報収集処理手順（１４）を実行することができるも
のを用いる。Further, the general-purpose information processing section (2) receives the output of the external sensor section (1) and executes an information collection processing procedure (14) (program, script, macro, etc.) necessary for information collection. is necessary. A general-purpose information processing unit (2) that can execute a general-purpose information collection processing procedure (14), such as a wearable computer, is used.
【００１５】この汎用情報処理部（２）が実行する情報
収集処理手順（１４）の実施例を以下に示す。システム
がある特定の「絵」（１−１）とマッチする映像を収集
するタスクが与えられているとするとき、図３を基にこ
れを説明する。このとき汎用情報処理部（２）は外界セ
ンサ部（１）のカメラ（１−０）からの映像と、特定の
「絵」を相関のアルゴリズム（１−２）によりマッチン
グする。このとき機器構成情報部（４）からの（白黒／
カラー、焦点距離などの）情報を用いて、あらかじめカ
メラからどのような映像が得られるかを知ることができ
るので、カメラからの映像に最適な相関アルゴリズムを
選択することができる。上記相関のアルゴリズム（１−
２）によりマッチングし続け、類似度が一定の閾値を越
えたとき（１−３）の類似度及びカメラからの映像を通
信部（３）を介して外界センサシステム（１）外へ転送
する。これにより特定の「絵」（１−１）にマッチする
所望の画像をリアルタイムに取得できるようになる。An embodiment of the information collection processing procedure (14) executed by the general-purpose information processing section (2) will be described below. Assuming that the system is provided with a task of collecting images matching a specific “picture” (1-1), this will be described with reference to FIG. At this time, the general-purpose information processing unit (2) matches the video from the camera (1-0) of the external sensor unit (1) with a specific “picture” by a correlation algorithm (1-2). At this time, the (black / white /
Since it is possible to know in advance what kind of image is obtained from the camera using information (such as color and focal length), it is possible to select an optimal correlation algorithm for the image from the camera. The correlation algorithm (1-
Matching is continued by 2), and when the similarity exceeds a certain threshold, the similarity of (1-3) and the video from the camera are transferred to the outside of the external sensor system (1) via the communication unit (3). As a result, a desired image matching the specific “picture” (1-1) can be obtained in real time.
【００１６】さらに別の実施例として、犯罪者などの特
定の人物を捜し出すような場合、特定の人物の顔や服
装、身長など見掛けの特徴を指定してこれを検出する情
報収集処理手順（１４）を示す。これを図４を基に説明
する。まず指定された人物の特徴を、機器構成情報部
（４）の情報を基に補正し、補正情報（２−６）として
保存しておく。例えば、カメラ（１−０）から白黒映像
が得られるのであれば、与えられた顔画像から輝度信号
のみを取り出した白黒顔画像に変換し、機器構成情報の
中にカメラの高さが含まれておれば、例えば地面から高
さ１６０［ｃｍ］の位置にカメラがあるならば、人物の
身長から人物の見え方を推測することができる。それら
の補正情報をメモリ（２−１）に記憶しておく。このよ
うにあらかじめ人物の特徴を機器構成情報（４）を基に
補正することにより、より精度良く人物を発見すること
ができるようになる。As still another embodiment, when searching for a specific person such as a criminal, an information collection processing procedure (14) in which an apparent characteristic such as a face, clothes, and height of the specific person is designated and detected. ). This will be described with reference to FIG. First, the characteristics of the designated person are corrected based on the information in the device configuration information section (4) and stored as correction information (2-6). For example, if a black-and-white image can be obtained from the camera (1-0), it is converted into a black-and-white face image obtained by extracting only the luminance signal from the given face image, and the device configuration information includes the camera height. If the camera is located at a height of 160 [cm] from the ground, for example, the appearance of the person can be estimated from the height of the person. The correction information is stored in the memory (2-1). In this way, by correcting the characteristics of the person in advance based on the device configuration information (4), the person can be found more accurately.
【００１７】次に、カメラ（１−０）からの入力映像の
中から、人物の補正特徴（２−１）を基に人物領域を抽
出（２−２）し、抽出された領域中から、顔とマッチす
る領域を検出する。与えられた犯罪者の顔と上記顔領域
とを顔認識アルゴリズムによりマッチさせ、認識結果か
ら入力画像中に特定人物の顔が含まれると判断された時
点で、カメラ（１−０）からの入力画像、顔認識結果、
およびカメラ映像を得たときの外界センサシステム
（１）の地球上の位置を通信部（３）を介して外界セン
サシステム（１）外へ転送する。このシステムにより、
あらゆる場所、時間で自動的に特定人物を検出すること
ができる。これにより特定人物検出率が飛躍的に向上す
ることが期待できる。Next, a person area is extracted (2-2) from the input image from the camera (1-0) based on the correction characteristic (2-1) of the person, and from the extracted area, Detect an area that matches the face. The given criminal's face is matched with the above-mentioned face area by the face recognition algorithm, and when it is determined from the recognition result that the input image includes the face of the specific person, the input from the camera (1-0) is performed. Images, face recognition results,
And transmitting the position of the external sensor system (1) on the earth when the camera image is obtained to the outside of the external sensor system (1) via the communication unit (3). With this system,
A specific person can be automatically detected at any place and time. This can be expected to dramatically improve the specific person detection rate.
【００１８】さらに別の実施例として、犯罪者などの特
定の人物を捜し出すような場合、特定の人物の顔や服
装、身長など見掛けの特徴と、あらかじめ録音された声
などの音声特徴を指定してこれを検出する情報収集処理
手順（１４）を示す。これを図５を基に説明する。まず
指定された人物の特徴を、機器構成情報部（４）の情報
を基に補正しておく。例えば、カメラ（１−０）から白
黒映像が得られるのであれば、与えられた顔画像から輝
度信号のみを取り出した白黒顔画像に変換し、機器構成
情報の中にカメラの高さが含まれておれば、例えば地面
から高さ１６０［ｃｍ］の位置にカメラがあるならば、
人物の身長から人物の見え方を推測することができる。
さらに、外界センサ（１）のマイク（１−１０）の集音
特性から、上記人物の声をマイク（１−１０）でとらえ
たときの音声特性を推測することができる。それらの補
正情報をメモリ（３−１）に記憶しておく。このように
あらかじめ人物の特徴を機器構成情報（４）を基に補正
することにより、より精度良く人物を発見することがで
きるようになる。As yet another embodiment, when searching for a specific person such as a criminal, an apparent characteristic such as the face, clothes, and height of the specific person and a voice characteristic such as a voice recorded in advance are specified. The information collection processing procedure (14) for detecting this is shown below. This will be described with reference to FIG. First, the characteristics of the designated person are corrected based on the information in the device configuration information section (4). For example, if a black-and-white image can be obtained from the camera (1-0), it is converted into a black-and-white face image obtained by extracting only the luminance signal from the given face image, and the device configuration information includes the camera height. If, for example, there is a camera at a height of 160 [cm] from the ground,
The appearance of the person can be estimated from the height of the person.
Further, from the sound collection characteristics of the microphone (1-10) of the external sensor (1), it is possible to estimate the voice characteristics when the voice of the person is captured by the microphone (1-10). The correction information is stored in the memory (3-1). In this way, by correcting the characteristics of the person in advance based on the device configuration information (4), the person can be found more accurately.
【００１９】次に、カメラ（１−０）からの入力映像の
中から、人物の補正特徴（２−１）を基に人物領域を抽
出（２−２）し、抽出された領域中から、顔とマッチす
る領域を検出する。与えられた犯罪者の顔と上記顔領域
とを顔認識アルゴリズムによりマッチングする。さら
に、マイク（１−１０）からの音声と、補正特徴（３−
１）の音声特徴とを音声認識手法（３−２）で動的マッ
チング手法などを用いて比較、マッチングする。上記映
像および音声のマッチング結果から入力画像中に特定人
物の顔が含まれ、かつ特定人物の音声と一致すると判断
された時点で、カメラ（１−０）からの入力画像、マイ
ク（１−１０）からの音声、顔認識結果、音声マッチン
グ結果、およびカメラ映像を得たときの外界センサシス
テム（１）の地球上の位置（３−３）を通信部（３）を
介して外界センサシステム（１）外へ転送する。このシ
ステムにより、あらゆる場所、時間で自動的に特定人物
を検出することができる。これにより特定人物検出率が
飛躍的に向上すると期待できる。Next, a person area is extracted (2-2) from the input image from the camera (1-0) based on the correction characteristic (2-1) of the person, and from the extracted area, Detect an area that matches the face. The given criminal's face is matched with the face area by a face recognition algorithm. Further, the sound from the microphone (1-10) and the correction feature (3-
The voice feature of 1) is compared and matched by a voice recognition method (3-2) using a dynamic matching method or the like. When it is determined from the result of the video and audio matching that the input image includes the face of the specific person and matches the voice of the specific person, the input image from the camera (1-0) and the microphone (1-10) ), A face recognition result, a voice matching result, and a position (3-3) of the external sensor system (1) on the earth when the camera image is obtained via the communication unit (3). 1) Transfer outside. With this system, a specific person can be automatically detected at any place and time. This can be expected to dramatically improve the specific person detection rate.
【００２０】上記汎用情報処理部（２）の情報収集処理
手順（１４）はあくまでも例であり、その他さまざまな
手順を実行できる。この情報収集処理手順（１４）は集
中処理部（６）から通信部（３）を介して汎用情報処理
部（２）に転送され、無条件に実行されるか、もしくは
汎用処理部（２）または外界センサシステム装着者が許
可を出したもののみ実行される。The information collection processing procedure (14) of the general-purpose information processing section (2) is merely an example, and various other procedures can be executed. The information collection processing procedure (14) is transferred from the central processing unit (6) to the general-purpose information processing unit (2) via the communication unit (3), and is executed unconditionally or the general-purpose processing unit (2) Alternatively, only those for which the wearer of the external sensor system has given permission are executed.
【００２１】上記情報収集処理手順（１４）は、汎用情
報処理部（２）に実行させる代わりに、情報収集部（１
１）で実行することも可能である。その場合、外界セン
サシステムは外界センサ（１）から得られるセンサ情報
を広域通信網を介して情報収集部（１１）に転送し、こ
れを処理してもらうことができる。The information collection procedure (14) is performed by the information collection unit (1) instead of the general-purpose information processing unit (2).
It is also possible to execute in 1). In that case, the external sensor system can transfer the sensor information obtained from the external sensor (1) to the information collecting unit (11) via the wide area communication network, and have it processed.
【００２２】通信部（３）は、汎用情報処理部（２）と
情報収集部（１１）との通信を実現するために必要で、
人または人型移動ロボットに装着され、汎用情報処理部
（２）と適切に接続される。The communication unit (3) is necessary for realizing communication between the general-purpose information processing unit (2) and the information collection unit (11).
It is mounted on a human or humanoid mobile robot, and is appropriately connected to the general-purpose information processing unit (2).
【００２３】通信部（３）は、人または人型移動ロボッ
トの行動を妨げないように、通常は携帯電話やＰＨＳ等
普及型の無線通信装置を用いるのが適当であろう。もち
ろん通信部（３）は携帯電話やＰＨＳ以外でも可能であ
り、移動体（４）の移動範囲が海外に及ぶなど広域の場
合は衛星携帯電話などの装置を用いてもよいし、移動範
囲が限られている場合などは有線接続形態でも構わな
い。In general, it is appropriate to use a popular wireless communication device such as a mobile phone or a PHS so that the communication unit (3) does not hinder the action of a person or a humanoid mobile robot. Of course, the communication unit (3) can be other than a mobile phone or a PHS. If the moving range of the mobile unit (4) is a wide area such as abroad, a device such as a satellite mobile phone may be used. In a limited case, a wired connection may be used.
【００２４】機器構成情報部（４）は、外界センサシス
テム（１）および汎用情報処理部（２）がどのようなセ
ンサ特性を持つのか、どのような構成であるのか、どの
ような処理が可能なのかを明らかにするために必要な、
機器構成情報を提供する。The device configuration information section (4) can perform what kind of sensor characteristics, what kind of configuration, and what kind of processing the external sensor system (1) and the general-purpose information processing section (2) have. It is necessary to clarify what
Provide device configuration information.
【００２５】機器構成情報部（４）はＨＴＭＬやＸＭＬ
などのデータベース記述言語により記述された機器構成
及び特性情報を持ち、特定または不特定のホストからア
クセス可能である。The device configuration information section (4) is HTML or XML.
It has device configuration and characteristic information described in a database description language such as, and can be accessed from a specified or unspecified host.
【００２６】機器構成情報部（４）のもつ機器構成情報
は、例えば以下に挙げる項目 のうち、少なくとも１つ以上の情報を含む。The device configuration information of the device configuration information section (4) includes, for example, the following items: And at least one or more pieces of information.
【００２７】本発明の請求項第１の実施の形態例につい
て、図６に基づいて説明する。図６の例では、外界セン
サとしてカメラ（１−０）及びマイク（１−１０）が人
間の顔付近に装備される。カメラ（１−０）は人間が普
段装着する眼鏡とともに装着され、カメラ（１−０）の
視野は人間の視野に近い場所をとらえるように設計され
る。マイク（１−１０）は、装着者本人の声もとらえる
ことのできるように、口の近くに装備される。さらに、
通信部（３）は人間の行動の邪魔にならないように装着
される。これらと汎用情報処理部（２）とが適切に接続
され、汎用情報処理部（２）は人間の行動の邪魔になら
ないように例えば腰付近に装着される。この例では機器
構成情報（４）が汎用情報処理部（２）のメモリ内に保
存されているが、必ずしも汎用情報処理部（２）のメモ
リ内である必要はない。また、これらの機器を駆動する
ための電源（１−１１）も人間の行動を妨げない場所に
装着される。A first embodiment of the present invention will be described with reference to FIG. In the example of FIG. 6, a camera (1-0) and a microphone (1-10) are provided near the human face as external sensors. The camera (1-0) is worn together with spectacles that a human usually wears, and the field of view of the camera (1-0) is designed to capture a place close to the human field of view. The microphone (1-10) is equipped near the mouth so that the wearer can catch the voice of the wearer. further,
The communication unit (3) is mounted so as not to disturb human actions. These and the general-purpose information processing unit (2) are appropriately connected, and the general-purpose information processing unit (2) is mounted, for example, near the waist so as not to disturb human actions. In this example, the device configuration information (4) is stored in the memory of the general-purpose information processing unit (2), but is not necessarily stored in the memory of the general-purpose information processing unit (2). Also, a power supply (1-11) for driving these devices is mounted in a place where human behavior is not hindered.
【００２８】上記の実施の形態では、カメラ（１−０）
およびマイク（１−１０）が人間の顔付近に装着されて
いる。その装着位置の情報が機器構成情報（４）にＸＭ
Ｌにより記述される。また、ＧＰＳは装着されておら
ず、地球上の位置情報は機器構成情報（４）に記述され
ない。さらに、カメラの画像の種類、解像度、特性、装
着者の視野に近い等の構成、特性情報が機器構成情報
（４）にＸＭＬにより記述される。マイク（１−１０）
の集音特性として、装着者本人の声が最も大きく集音さ
れる可能性が高いので、その特性についても機器構成情
報（４）にＸＭＬにより記述される。In the above embodiment, the camera (1-0)
And a microphone (1-10) are mounted near a human face. The information of the mounting position is included in the device configuration information (4) as XM
L. Further, the GPS is not mounted, and the position information on the earth is not described in the device configuration information (4). Further, information such as the type of camera image, resolution, characteristics, and configuration close to the field of view of the wearer, and characteristic information are described in the device configuration information (4) in XML. Microphone (1-10)
Is likely to be the loudest to be picked up by the wearer, and this characteristic is also described in XML in the device configuration information (4).
【００２９】本発明の請求項第２の実施の形態につい
て、図２に基づいて説明する。本発明の請求項２の情報
収集検索システムは、本発明の請求項１の外界センサシ
ステムを１つ以上複数用いる。情報収集部（１１）は複
数の外界センサシステムから送信される情報を処理し、
データベース（１２）に蓄積する。顧客は情報収集部
（１１）にアクセスする端末（１３）から情報収集部
（１１）およびそのデータベース（１２）にアクセス
し、上記複数外界センサシステムから得た情報を検索す
ることができる。また、顧客は上記端末（１３）から情
報収集部（１１）に外界センサシステムのもつ汎用情報
処理部（２）または情報収集部（１１）が処理すべき手
続きを登録することができる。情報収集部（１１）は顧
客が登録した情報収集処理手順（１４）を情報収集部
（１１）で実行するか、あるいは通信網を介して適切な
外界センサシステムの汎用情報処理部（２）に転送する
ことができる。これにより新たな情報収集タスクを開始
させることができる。以下、本発明の請求項第２の情報
収集検索システムの各部について詳細に説明する。A second embodiment of the present invention will be described with reference to FIG. The information collection and retrieval system according to claim 2 of the present invention uses one or more external sensor systems according to claim 1 of the present invention. The information collection unit (11) processes information transmitted from the plurality of external sensor systems,
It is stored in the database (12). The customer can access the information collection unit (11) and its database (12) from the terminal (13) accessing the information collection unit (11), and can search for information obtained from the multiple external sensor system. Further, the customer can register a procedure to be processed by the general-purpose information processing unit (2) or the information collection unit (11) of the external sensor system from the terminal (13) to the information collection unit (11). The information collection unit (11) executes the information collection processing procedure (14) registered by the customer in the information collection unit (11) or sends it to the general-purpose information processing unit (2) of an appropriate external sensor system via a communication network. Can be transferred. Thus, a new information collection task can be started. Hereinafter, each unit of the information collection and retrieval system according to claim 2 of the present invention will be described in detail.
【００３０】情報収集部（１１）は複数の外界センサシ
ステムから送信される情報を処理し、データベース（１
２）に蓄積するため、かつ顧客に開放された端末（１
３）からの情報収集処理手順（１４）登録及び検索要求
を処理するために必要である。An information collecting unit (11) processes information transmitted from a plurality of external sensor systems, and stores the information in a database (1).
2) Terminals that accumulate and that are open to customers (1
Information collection processing procedure from (3) (14) Necessary for processing registration and search requests.
【００３１】情報収集部（１１）は通信網を介して本発
明の請求項１の外界センサシステムにアクセスし、顧客
から登録のあった情報収集処理手順（１４）を送信し、
上記外界センサシステムに情報収集を要求することがで
きる。The information collecting unit (11) accesses the external sensor system according to claim 1 of the present invention via a communication network, and transmits an information collecting processing procedure (14) registered by a customer.
The information collection can be requested from the external sensor system.
【００３２】さらに情報収集部（１１）は、本発明の請
求項１の各外界センサシステムの機器構成情報部（４）
の情報にアクセスし、データベースの内容を解析して例
えばカラー映像を横１０２４ピクセル、縦７６８ピクセ
ルの解像度で取得できるなど、特定の特性の外界センサ
を持つ外界センサシステムのみを対象に情報収集処理手
順（１４）を送信することも可能である。これにより、
情報収集タスクに有用なセンサシステムと無用なセンサ
システムを区別して、情報収集にかかるコストを最小と
することができる。Further, the information collecting unit (11) is a device configuration information unit (4) of each external sensor system according to claim 1 of the present invention.
The information collection process is performed only for an external sensor system having an external sensor having a specific characteristic, such as accessing the information of the database and analyzing the contents of the database to obtain a color image with a resolution of 1024 pixels horizontally and 768 pixels vertically, for example. It is also possible to transmit (14). This allows
A sensor system useful for the information collection task and a useless sensor system can be distinguished to minimize the cost of information collection.
【００３３】さらに情報収集部（１１）は、本発明の請
求項１の各外界センサシステムが特定の情報収集処理手
順（１４）によって得た複数の処理結果から最もマッチ
の値が高いものを選別して記憶しておくなどの追加処理
を行い、より高精度の情報収集のみを保存しておくこと
も可能である。Further, the information collecting section (11) selects the one having the highest match value from a plurality of processing results obtained by each of the external sensor systems according to claim 1 of the present invention in the specific information collecting processing procedure (14). It is also possible to perform additional processing such as storing the information and store only the more accurate information collection.
【００３４】さらに情報収集部（１１）は、本発明の請
求項１の各外界センサシステムが特定の情報収集処理手
順（１４）によって得た複数の処理結果をデータベース
（１２）に保存しておき、顧客から上記特定の情報収集
処理手順（１４）の情報収集処理結果（１５）の検索を
端末（１３）から要求されたときにデータベースから該
当する情報を引きだし、端末（１３）を経由して顧客に
提示することができる。Further, the information collecting unit (11) stores in the database (12) a plurality of processing results obtained by each of the external sensor systems according to the first aspect of the present invention in a specific information collecting processing procedure (14). When the customer requests the terminal (13) to search for the information collection processing result (15) of the specific information collection processing procedure (14), the corresponding information is retrieved from the database and passed through the terminal (13). Can be presented to customers.
【００３５】データベース（１２）は情報収集部（１
１）が収集した情報を保持するため、かつ顧客からの情
報収集処理手順（１４）を保持するために必要である。The database (12) has an information collecting unit (1).
1) is necessary to hold the collected information and to hold the information collection procedure (14) from the customer.
【００３６】端末（１３）は、顧客が情報収集部（１
１）およびデータベース（１２）にアクセスするために
必要である。本端末（１３）を経由して、顧客が望む情
報収集処理手順（１４）を情報収集部（１１）に送信
し、これをデータベース（１２）に登録することが可能
である。また、特定の情報収集処理手順（１４）から得
られた情報収集処理結果（１５）を、検索キーなどとと
もに検索する指示を情報収集部（１１）に送信し、検索
結果を閲覧することが可能である。The terminal (13) is connected to the information collection unit (1) by the customer.
1) and required to access the database (12). Via the terminal (13), the information collection procedure (14) desired by the customer is transmitted to the information collection unit (11), and can be registered in the database (12). Also, an instruction to search the information collection processing result (15) obtained from the specific information collection processing procedure (14) together with a search key or the like is transmitted to the information collection unit (11), and the search result can be browsed. It is.
【００３７】上記端末（１３）は、情報収集部（１１）
に直接接続されている必要は無い。例えば、広域通信網
を介して情報収集部（１１）にアクセスできる端末（１
３）であっても良い。The terminal (13) includes an information collecting unit (11)
It does not need to be directly connected to. For example, a terminal (1) that can access the information collecting unit (11) via a wide area communication network.
3).
【００３８】上記端末（１３）は、不特定多数のアクセ
スを禁止しなければならない場合には、一般的な個人認
証の手順を用いて、特定の人物からのアクセスに制限す
ることができる。When the terminal (13) has to prohibit an unspecified number of accesses, the terminal (13) can restrict access from a specific person by using a general personal authentication procedure.
【００３９】上記端末（１３）は、本発明請求項１の外
界センサシステムを一部に持つ人間装着型またはモバイ
ル端末であってもよい。つまり、装着者本人は最初に情
報収集処理部（１１）に情報検索要求を出す。そして、
装着者本人の外界センサシステムから得られる外界情報
を情報収集処理部（１１）に転送し、上記情報検索要求
に対する情報収集処理結果（１５）を得る。これは、情
報検索要求が複雑で、装着者本人の外界センサシステム
の持つ汎用情報処理部（２）では処理しきれない情報収
集処理手順（１４）を、情報収集部（１１）に代わりに
行ってもらうことと同じである。これにより、汎用情報
処理部（２）の処理能力が貧弱であっても、個人ベース
のさまざまな情報収集処理が可能となる。The terminal (13) may be a human-worn or mobile terminal partially having the external sensor system according to claim 1 of the present invention. That is, the wearer first issues an information search request to the information collection processing unit (11). And
The external information obtained from the external sensor system of the wearer is transferred to the information collection processing unit (11), and the information collection processing result (15) for the information search request is obtained. This is because, instead of the information collecting unit (11), the information collecting unit (11) performs an information collecting processing procedure (14) that the information retrieval request is complicated and cannot be processed by the general-purpose information processing unit (2) of the external sensor system of the wearer. It is the same as having one. Thereby, even if the processing capability of the general-purpose information processing unit (2) is poor, various personal-based information collection processes can be performed.
【００４０】本発明の請求項第２の実施例を図７に示
し、これを以下に説明する。まず、顧客から端末（１
３）を介してカラー情報を用いて人物を検索する要求
（Ａ）が、情報収集部（１１）にあったとする。上記要
求を実行するための適切な情報収集処理手順（１４）を
情報収集部（１１）が生成し、データベース（１２）に
格納する。FIG. 7 shows a second embodiment of the present invention, which will be described below. First, the customer receives a terminal (1
It is assumed that a request (A) for searching for a person using color information via 3) is received by the information collection unit (11). The information collection unit (11) generates an appropriate information collection processing procedure (14) for executing the above request, and stores it in the database (12).
【００４１】情報処理部（１１）は、アクセスし得る複
数の本発明の請求項第１の外界センサシステムに、適切
な広域通信網および通信部を用いてアクセスし、各外界
センサシステムがもつ機器構成情報部（４）から機器構
成情報（４−１）を送信するように指示する（Ｂ）。The information processing section (11) accesses a plurality of accessible external sensor systems according to the first aspect of the present invention by using an appropriate wide area communication network and communication section, and the equipment included in each external sensor system. An instruction is sent from the configuration information section (4) to transmit the device configuration information (4-1) (B).
【００４２】各外界センサシステムは各自の機器構成情
報（４−１）を適切な広域通信網および通信部を用いて
情報収集部（１１）に送信する（Ｃ）。Each external sensor system transmits its own device configuration information (4-1) to the information collecting unit (11) using an appropriate wide area communication network and communication unit (C).
【００４３】情報収集部（１１）は、上記により得られ
た機器構成情報からカラーカメラを装備している外界セ
ンサシステムのみを選択し、適切な広域通信網および通
信部を用いて上記検索要求（Ａ）を実行するための処理
手順を送信する（Ｄ）。The information collecting unit (11) selects only the external sensor system equipped with the color camera from the device configuration information obtained as described above, and uses the appropriate wide area network and communication unit to execute the search request (). A processing procedure for executing A) is transmitted (D).
【００４４】処理手順を受け取った外界センサシステム
は直ちに当該処理手順を実行し、処理手順によって得ら
れた結果を適切な広域通信網および通信部を用いて情報
収集部（１１）に返す（Ｅ）。上記結果は情報収集処理
結果（１５）としてデータベース（１２）に格納され
る。The external sensor system which has received the processing procedure immediately executes the processing procedure, and returns the result obtained by the processing procedure to the information collecting section (11) using an appropriate wide area communication network and communication section (E). . The result is stored in the database (12) as the information collection processing result (15).
【００４５】その後、顧客から端末（１３）を介して情
報収集処理結果（１５）の開示要求（Ｆ）が発生した場
合に、情報収集処理部（１１）がデータベース（１２）
から当該顧客の検索要求の処理結果に相当する情報収集
処理結果（１５）を取り出し、顧客に開示することがで
きる（Ｆ）。Thereafter, when a request for disclosure (F) of the information collection processing result (15) is issued from the customer via the terminal (13), the information collection processing unit (11) sets the database (12).
, An information collection processing result (15) corresponding to the processing result of the search request of the customer can be extracted and disclosed to the customer (F).
【００４６】この様に，本発明の請求項１における外界
センサシステムは汎用の情報処理部を対象としているた
め、 １．さまざまな種類の情報収集を可能とし、収集する情
報の種類にかかわらず外界情報を収集できる。As described above, the external sensor system according to claim 1 of the present invention is intended for a general-purpose information processing unit. Various types of information can be collected, and external information can be collected regardless of the type of information to be collected.
【００４７】本発明の請求項１における外界センサシス
テムは機器構成情報を持つことにより、 ２．さまざまな情報収集タスクに最適な外界センサシス
テムを選択、抽出するための情報を提供することができ
る。これにより、特殊な情報収集タスクにも速やかに対
応することができる。本発明の請求項２における情報収
集検索システムは、本発明の請求項１における外界セン
サシステムを用いているため、The external sensor system according to the first aspect of the present invention has device configuration information. It is possible to provide information for selecting and extracting an external sensor system most suitable for various information collection tasks. As a result, it is possible to quickly respond to a special information collection task. The information collection and retrieval system according to claim 2 of the present invention uses the external sensor system according to claim 1 of the present invention.
【００４８】３．情報収集部が情報収集に必要な外界セ
ンサシステムの数、位置等を動的に管理することによ
り、情報収集を行う外界センサシステムが不特定多数で
あってもよい。3. The information collection unit may dynamically manage the number, position, and the like of the external sensor systems required for information collection, so that the number of external sensor systems that collect information may be an unspecified number.
【００４９】さらに本発明の請求項２における情報収集
検索システムは、本発明の請求項１における複数の外界
センサシステムの持つ機器構成情報を解析することによ
り ４．特定のタスクを実行するために必要な特定の特性の
外界センサを持つ外界センサシステムのみを対象に情報
収集処理手順を送信し、上記タスクを実行することが可
能である。Further, the information collecting and retrieving system according to claim 2 of the present invention analyzes the device configuration information of the plurality of external sensor systems according to claim 1 of the present invention. It is possible to execute the task by transmitting an information collection procedure only to an external sensor system having an external sensor having a specific characteristic required to execute a specific task.
【００５０】本発明は、カメラやマイク、ＧＰＳ（Ｇｌ
ｏｂａｌ ＰｏｓｉｔｉｏｎｉｎｇＳｙｓｔｅｍ）など
の外界センサと、外界センサからの情報を処理するため
の汎用情報処理部、およびＬＡＮ、携帯電話、ＰＨＳ
（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙ ｐｈｏｎｅ Ｓｙｓ
ｔｅｍ）など広域通信網にアクセス可能な通信部が適切
に配置され、上記外界センサと汎用情報処理部の機器構
成情報及び特性をＨＴＭＬ、ＸＭＬ等のデータベース記
述言語により記述された機器構成情報部を持つ外界セン
サシステムと、上記複数の外界センサシステムと広域通
信網を介して通信し、外界センサシステムからの処理結
果を処理したり、また逆に外界センサシステムへデータ
を送信したりする情報収集部、さらに上記情報収集部と
アクセスすることのできる端末からなり、外界センサシ
ステムから返された情報を情報収集部を介してデータベ
ースに収集し、それを顧客が端末を介して検索したり、
顧客が望む情報収集の手続きを外界センサシステムの汎
用情報処理部に転送し、新たな情報収集タスクを開始す
ることができる情報収集システムに関するものである。The present invention relates to a camera, a microphone, a GPS (Gl
obal Positioning System), a general-purpose information processing unit for processing information from the external sensor, a LAN, a mobile phone, and a PHS.
(Personal Handy phone Sys
communication section that can access a wide area communication network, such as an external communication sensor and a general-purpose information processing section. The device configuration information section describes the device configuration information and characteristics of the general-purpose information processing section in a database description language such as HTML or XML. An external sensor system, and an information collecting unit that communicates with the plurality of external sensor systems via a wide area communication network, processes a processing result from the external sensor system, and conversely transmits data to the external sensor system. Further comprising a terminal capable of accessing the information collecting unit, the information returned from the external sensor system is collected in the database through the information collecting unit, and the customer searches for it through the terminal,
The present invention relates to an information collection system that can transfer a procedure of information collection desired by a customer to a general-purpose information processing unit of an external sensor system and start a new information collection task.
【００５１】従来から、公衆電話回線や、携帯電話など
の無線通信網を用いた情報収集システムや、遠隔監視シ
ステムが活用されている。定点監視では、アメダス（地
域気象観測システム）等のシステムがある。また、移動
点監視では例えば特開２０００−２８６９８７のよう
に、センサでの感知に基づいて、携帯電話やＰＨＳ等の
移動体通信器により所定の情報を自動送信するものがあ
る。Conventionally, an information collection system and a remote monitoring system using a wireless communication network such as a public telephone line or a mobile phone have been used. For fixed point monitoring, there are systems such as AMeDAS (local meteorological observation system). Further, in the moving point monitoring, for example, as in Japanese Patent Application Laid-Open No. 2000-286987, predetermined information is automatically transmitted by a mobile communication device such as a mobile phone or a PHS based on sensing by a sensor.
【００５２】この様に，本発明の請求項１における外界
センサシステムは汎用の情報処理部を対象としているた
め、 １．さまざまな種類の情報収集を可能とし、収集する情
報の種類にかかわらず外界情報を収集できる。As described above, the external sensor system according to claim 1 of the present invention is intended for a general-purpose information processing unit. Various types of information can be collected, and external information can be collected regardless of the type of information to be collected.
【００５３】本発明の請求項１における外界センサシス
テムは機器構成情報を持つことにより、 ２．さまざまな情報収集タスクに最適な外界センサシス
テムを選択、抽出するための情報を提供することができ
る。これにより、特殊な情報収集タスクにも速やかに対
応することができる。本発明の請求項２における情報収
集検索システムは、本発明の請求項１における外界セン
サシステムを用いているため、The external sensor system according to the first aspect of the present invention has device configuration information. It is possible to provide information for selecting and extracting an external sensor system most suitable for various information collection tasks. As a result, it is possible to quickly respond to a special information collection task. The information collection and retrieval system according to claim 2 of the present invention uses the external sensor system according to claim 1 of the present invention.
【００５４】３．情報収集部が情報収集に必要な外界セ
ンサシステムの数、位置等を動的に管理することによ
り、情報収集を行う外界センサシステムが不特定多数で
あってもよい。3. The information collection unit may dynamically manage the number, position, and the like of the external sensor systems required for information collection, so that the number of external sensor systems that collect information may be an unspecified number.
【００５５】さらに本発明の請求項２における情報収集
検索システムは、本発明の請求項１における複数の外界
センサシステムの持つ機器構成情報を解析することによ
り ４．特定のタスクを実行するために必要な特定の特性の
外界センサを持つ外界センサシステムのみを対象に情報
収集処理手順を送信し、上記タスクを実行することが可
能である。Further, the information collection and retrieval system according to claim 2 of the present invention analyzes the device configuration information of the plurality of external sensor systems according to claim 1 of the present invention. It is possible to execute the task by transmitting an information collection procedure only to an external sensor system having an external sensor having a specific characteristic required to execute a specific task.
【００５６】従来の監視、情報収集システムには以下に
挙げる問題点がある。The conventional monitoring and information collecting system has the following problems.
【００５７】１．汎用情報処理部を対象とせず、あくま
でもシステムが用意する専用センサ、および専用処理部
を用いる。したがって収集する情報の種類が増えるにと
もない確実にコストが上昇する。1. Instead of targeting a general-purpose information processing unit, a dedicated sensor and a dedicated processing unit prepared by the system are used. Therefore, as the types of information to be collected increase, the cost surely increases.
【００５８】２．情報収集システム専用の外界センサ部
を用いるため、システムを構成した時点で外界センサ部
の機器構成が既知である。そのため、機器構成情報を各
センサに登録する必要が無い半面、専用の外界センサ以
外の外界センサを用いることができない。2. Since an external sensor unit dedicated to the information collection system is used, the device configuration of the external sensor unit is already known at the time of configuring the system. Therefore, although it is not necessary to register the device configuration information in each sensor, an external sensor other than a dedicated external sensor cannot be used.
【００５９】３．特定の目的を達成するための専用情報
処理部を用いているため、収集する情報の種類を変更す
るためには、情報処理装置そのものを置換せねばなら
ず、システムの規模が大きくなるにともないコストが上
昇する。3. Since a dedicated information processing unit is used to achieve a specific purpose, in order to change the type of information to be collected, the information processing device itself must be replaced, and the cost increases as the size of the system increases. Rises.
【００６０】４．センサ自体が、人または人型移動ロボ
ットのように常時移動することがないのでさまざまな情
報を収集する能力に欠ける4. Lack of ability to collect various information because the sensor itself does not move constantly like a human or humanoid mobile robot
【００６１】５．人を対象とした従来のシステムでは、
人に情報を提供することに主眼が置かれ、積極的に人ま
たは人型移動ロボットから情報を収集するシステムは皆
無である。5. In traditional systems for people,
There is no system that focuses on providing information to humans and actively collects information from humans or humanoid mobile robots.
【００６２】本発明の目的は前記諸問題を解決し、人ま
たは人型移動ロボットを介して汎用かつ広域の情報を収
集し、収集した情報を保存、検索するシステムを提供す
ることにある。An object of the present invention is to solve the above-mentioned problems and to provide a system for collecting general-purpose and wide-area information via a human or a humanoid mobile robot, and storing and retrieving the collected information.
【００６３】本発明の請求項１の外界センサ部は、可視
光をとらえるカメラや音声をとらえるマイク、地球上の
位置情報を検出するＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔ
ｉｏｎｉｎｇ Ｓｙｓｔｅｍ）などの外界センサからな
り、汎用情報処理部が外界センサからの情報を処理した
結果や、外界センサと汎用情報処理部の機器構成情報を
通信部を介して情報収集部に送信する。上記は全て人ま
たは人型移動ロボットの適切な位置に取り付けられる、
外界センサシステムであり、これにより人または人型移
動ロボットが移動可能な全ての場所に関するあらゆる情
報を収集するための手段が得られる。The external field sensor according to the first aspect of the present invention includes a camera for capturing visible light, a microphone for capturing voice, and a GPS (Global Position) for detecting positional information on the earth.
An external sensor such as an ioning system, and transmits the result of processing of information from the external sensor by the general-purpose information processing unit and device configuration information of the external sensor and the general-purpose information processing unit to the information collection unit via the communication unit. All of the above can be attached to the appropriate location of a human or humanoid mobile robot,
An external sensor system, which provides a means for gathering all information about all places where a person or a humanoid mobile robot can move.
【００６４】本発明の請求項２は、上記外界センサシス
テムを１つ以上の複数用いる。情報収集部は複数の外界
センサシステムから送信される情報収集処理結果を処理
し、データベースに蓄積する。顧客は通信網を介した端
末から情報収集部及びそのデータベースにアクセスし、
上記複数外界センサシステムから得た情報を検索するこ
とができる。また、顧客は上記端末から情報収集部に外
界センサシステムのもつ汎用情報処理部または情報収集
部が処理すべき情報収集処理手順を登録することができ
る。情報収集部は顧客が登録した情報収集処理手順を通
信網を介して適切な外界センサシステムの汎用情報処理
部に転送することができる。これにより新たな情報収集
タスクを開始させることができる。According to a second aspect of the present invention, one or more external environment sensor systems are used. The information collection unit processes information collection processing results transmitted from the plurality of external sensor systems and accumulates the results in a database. The customer accesses the information collection unit and its database from the terminal via the communication network,
Information obtained from the multiple external sensor system can be searched. Further, the customer can register, from the terminal, an information collection procedure to be processed by the general information processing unit or the information collection unit of the external sensor system in the information collection unit. The information collection unit can transfer the information collection processing procedure registered by the customer to an appropriate general-purpose information processing unit of an external sensor system via a communication network. Thus, a new information collection task can be started.
【００６５】本発明の請求項第１項の実施の形態につい
て、図１に基づいて説明する。本発明の外界センサシス
テムは、図１に示すように、外界センサ部（１）と、汎
用情報処理部（２）と、通信部（３）を人または人型移
動ロボット上の適切な位置に装備し、外界センサ部
（１）と汎用情報処理部（２）の機器構成情報を保持す
る機器構成情報部（４）を具備することを特徴とする。
以下、本発明の請求項１の外界センサシステムの各部に
ついて詳細に説明する。The first embodiment of the present invention will be described with reference to FIG. As shown in FIG. 1, the external sensor system of the present invention moves an external sensor unit (1), a general-purpose information processing unit (2), and a communication unit (3) to appropriate positions on a human or a humanoid mobile robot. It is equipped with a device configuration information unit (4) that is equipped and holds the device configuration information of the external sensor unit (1) and the general-purpose information processing unit (2).
Hereinafter, each part of the external sensor system according to claim 1 of the present invention will be described in detail.
【００６６】上記外界センサ部（１）は、センサ外部の
情報を取得するためのカメラやマイク、ＧＰＳ（Ｇｌｏ
ｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）等か
らなる。大きさは、人または人型移動ロボットに取り付
けても不具合とならない程度であればよい。電源は一般
的に、汎用情報処理部（２）を駆動する電源から供給さ
れる。The external sensor (1) includes a camera, a microphone, and a GPS (global) for acquiring information outside the sensor.
bal Positioning System). The size may be such that it does not cause a problem even when attached to a human or a humanoid mobile robot. Power is generally supplied from a power source that drives the general-purpose information processing unit (2).
【００６７】更に汎用情報処理部（２）は、上記外界セ
ンサ部（１）の出力を受取り、情報収集に必要な情報収
集処理手順（１４）（プログラムやスクリプト、マクロ
など）を実行するために必要である。汎用情報処理部
（２）には例えばウェアラブルコンピュータ等の、汎用
の情報収集処理手順（１４）を実行することができるも
のを用いる。Further, the general-purpose information processing section (2) receives the output of the external sensor section (1) and executes an information collection processing procedure (14) (program, script, macro, etc.) necessary for information collection. is necessary. A general-purpose information processing unit (2) that can execute a general-purpose information collection processing procedure (14), such as a wearable computer, is used.
【００６８】この汎用情報処理部（２）が実行する情報
収集処理手順（１４）の実施例を以下に示す。システム
がある特定の「絵」（１−１）とマッチする映像を収集
するタスクが与えられているとするとき、図３を基にこ
れを説明する。このとき汎用情報処理部（２）は外界セ
ンサ部（１）のカメラ（１−０）からの映像と、特定の
「絵」を相関のアルゴリズム（１−２）によりマッチン
グする。このとき機器構成情報部（４）からの（白黒／
カラー、焦点距離などの）情報を用いて、あらかじめカ
メラからどのような映像が得られるかを知ることができ
るので、カメラからの映像に最適な相関アルゴリズムを
選択することができる。上記相関のアルゴリズム（１−
２）によりマッチングし続け、類似度が一定の閾値を越
えたとき（１−３）の類似度及びカメラからの映像を通
信部（３）を介して外界センサシステム（１）外へ転送
する。これにより特定の「絵」（１−１）にマッチする
所望の画像をリアルタイムに取得できるようになる。An embodiment of the information collection procedure (14) executed by the general-purpose information processing section (2) will be described below. Assuming that the system is provided with a task of collecting images matching a specific “picture” (1-1), this will be described with reference to FIG. At this time, the general-purpose information processing unit (2) matches the video from the camera (1-0) of the external sensor unit (1) with a specific “picture” by a correlation algorithm (1-2). At this time, the (black / white /
Since it is possible to know in advance what kind of image is obtained from the camera using information (such as color and focal length), it is possible to select an optimal correlation algorithm for the image from the camera. The correlation algorithm (1-
Matching is continued by 2), and when the similarity exceeds a certain threshold, the similarity of (1-3) and the video from the camera are transferred to the outside of the external sensor system (1) via the communication unit (3). As a result, a desired image matching the specific “picture” (1-1) can be obtained in real time.
【００６９】さらに別の実施例として、犯罪者などの特
定の人物を捜し出すような場合、特定の人物の顔や服
装、身長など見掛けの特徴を指定してこれを検出する情
報収集処理手順（１４）を示す。これを図４を基に説明
する。まず指定された人物の特徴を、機器構成情報部
（４）の情報を基に補正し、補正情報（２−６）として
保存しておく。例えば、カメラ（１−０）から白黒映像
が得られるのであれば、与えられた顔画像から輝度信号
のみを取り出した白黒顔画像に変換し、機器構成情報の
中にカメラの高さが含まれておれば、例えば地面から高
さ１６０［ｃｍ］の位置にカメラがあるならば、人物の
身長から人物の見え方を推測することができる。それら
の補正情報をメモリ（２−１）に記憶しておく。このよ
うにあらかじめ人物の特徴を機器構成情報（４）を基に
補正することにより、より精度良く人物を発見すること
ができるようになる。As yet another embodiment, when a specific person such as a criminal is searched for, an information collection procedure (14) in which an apparent characteristic such as a face, clothes, and height of the specific person is designated and detected. ). This will be described with reference to FIG. First, the characteristics of the designated person are corrected based on the information in the device configuration information section (4) and stored as correction information (2-6). For example, if a black-and-white image can be obtained from the camera (1-0), it is converted into a black-and-white face image obtained by extracting only the luminance signal from the given face image, and the device configuration information includes the camera height. If the camera is located at a height of 160 [cm] from the ground, for example, the appearance of the person can be estimated from the height of the person. The correction information is stored in the memory (2-1). In this way, by correcting the characteristics of the person in advance based on the device configuration information (4), the person can be found more accurately.
【００７０】次に、カメラ（１−０）からの入力映像の
中から、人物の補正特徴（２−１）を基に人物領域を抽
出（２−２）し、抽出された領域中から、顔とマッチす
る領域を検出する。与えられた犯罪者の顔と上記顔領域
とを顔認識アルゴリズムによりマッチさせ、認識結果か
ら入力画像中に特定人物の顔が含まれると判断された時
点で、カメラ（１−０）からの入力画像、顔認識結果、
およびカメラ映像を得たときの外界センサシステム
（１）の地球上の位置を通信部（３）を介して外界セン
サシステム（１）外へ転送する。このシステムにより、
あらゆる場所、時間で自動的に特定人物を検出すること
ができる。これにより特定人物検出率が飛躍的に向上す
ることが期待できる。Next, a person area is extracted (2-2) from the input image from the camera (1-0) based on the correction characteristic (2-1) of the person, and from the extracted area, Detect an area that matches the face. The given criminal's face is matched with the above-mentioned face area by the face recognition algorithm, and when it is determined from the recognition result that the input image includes the face of the specific person, the input from the camera (1-0) is performed. Images, face recognition results,
And transmitting the position of the external sensor system (1) on the earth when the camera image is obtained to the outside of the external sensor system (1) via the communication unit (3). With this system,
A specific person can be automatically detected at any place and time. This can be expected to dramatically improve the specific person detection rate.
【００７１】さらに別の実施例として、犯罪者などの特
定の人物を捜し出すような場合、特定の人物の顔や服
装、身長など見掛けの特徴と、あらかじめ録音された声
などの音声特徴を指定してこれを検出する情報収集処理
手順（１４）を示す。これを図５を基に説明する。まず
指定された人物の特徴を、機器構成情報部（４）の情報
を基に補正しておく。例えば、カメラ（１−０）から白
黒映像が得られるのであれば、与えられた顔画像から輝
度信号のみを取り出した白黒顔画像に変換し、機器構成
情報の中にカメラの高さが含まれておれば、例えば地面
から高さ１６０［ｃｍ］の位置にカメラがあるならば、
人物の身長から人物の見え方を推測することができる。
さらに、外界センサ（１）のマイク（１−１０）の集音
特性から、上記人物の声をマイク（１−１０）でとらえ
たときの音声特性を推測することができる。それらの補
正情報をメモリ（３−１）に記憶しておく。このように
あらかじめ人物の特徴を機器構成情報（４）を基に補正
することにより、より精度良く人物を発見することがで
きるようになる。As still another embodiment, when searching for a specific person such as a criminal, an apparent characteristic such as a face, clothes, and height of the specific person and a voice characteristic such as a voice recorded in advance are specified. The information collection processing procedure (14) for detecting this is shown below. This will be described with reference to FIG. First, the characteristics of the designated person are corrected based on the information in the device configuration information section (4). For example, if a black-and-white image can be obtained from the camera (1-0), it is converted into a black-and-white face image obtained by extracting only the luminance signal from the given face image, and the device configuration information includes the camera height. If, for example, there is a camera at a height of 160 [cm] from the ground,
The appearance of the person can be estimated from the height of the person.
Further, from the sound collection characteristics of the microphone (1-10) of the external sensor (1), it is possible to estimate the voice characteristics when the voice of the person is captured by the microphone (1-10). The correction information is stored in the memory (3-1). In this way, by correcting the characteristics of the person in advance based on the device configuration information (4), the person can be found more accurately.
【００７２】次に、カメラ（１−０）からの入力映像の
中から、人物の補正特徴（２−１）を基に人物領域を抽
出（２−２）し、抽出された領域中から、顔とマッチす
る領域を検出する。与えられた犯罪者の顔と上記顔領域
とを顔認識アルゴリズムによりマッチングする。さら
に、マイク（１−１０）からの音声と、補正特徴（３−
１）の音声特徴とを音声認識手法（３−２）で動的マッ
チング手法などを用いて比較、マッチングする。上記映
像および音声のマッチング結果から入力画像中に特定人
物の顔が含まれ、かつ特定人物の音声と一致すると判断
された時点で、カメラ（１−０）からの入力画像、マイ
ク（１−１０）からの音声、顔認識結果、音声マッチン
グ結果、およびカメラ映像を得たときの外界センサシス
テム（１）の地球上の位置（３−３）を通信部（３）を
介して外界センサシステム（１）外へ転送する。このシ
ステムにより、あらゆる場所、時間で自動的に特定人物
を検出することができる。これにより特定人物検出率が
飛躍的に向上すると期待できる。Next, a person area is extracted (2-2) from the input video from the camera (1-0) based on the correction characteristic (2-1) of the person, and from the extracted area, Detect an area that matches the face. The given criminal's face is matched with the face area by a face recognition algorithm. Further, the sound from the microphone (1-10) and the correction feature (3-
The voice feature of 1) is compared and matched by a voice recognition method (3-2) using a dynamic matching method or the like. When it is determined from the result of the video and audio matching that the input image includes the face of the specific person and matches the voice of the specific person, the input image from the camera (1-0) and the microphone (1-10) ), A face recognition result, a voice matching result, and a position (3-3) of the external sensor system (1) on the earth when the camera image is obtained via the communication unit (3). 1) Transfer outside. With this system, a specific person can be automatically detected at any place and time. This can be expected to dramatically improve the specific person detection rate.
【００７３】上記汎用情報処理部（２）の情報収集処理
手順（１４）はあくまでも例であり、その他さまざまな
手順を実行できる。この情報収集処理手順（１４）は集
中処理部（６）から通信部（３）を介して汎用情報処理
部（２）に転送され、無条件に実行されるか、もしくは
汎用処理部（２）または外界センサシステム装着者が許
可を出したもののみ実行される。The information collection procedure (14) of the general-purpose information processing section (2) is merely an example, and various other procedures can be executed. The information collection processing procedure (14) is transferred from the central processing unit (6) to the general-purpose information processing unit (2) via the communication unit (3), and is executed unconditionally or the general-purpose processing unit (2) Alternatively, only those for which the wearer of the external sensor system has given permission are executed.
【００７４】上記情報収集処理手順（１４）は、汎用情
報処理部（２）に実行させる代わりに、情報収集部（１
１）で実行することも可能である。その場合、外界セン
サシステムは外界センサ（１）から得られるセンサ情報
を広域通信網を介して情報収集部（１１）に転送し、こ
れを処理してもらうことができる。The information collection procedure (14) is executed by the information collection unit (1) instead of the general-purpose information processing unit (2).
It is also possible to execute in 1). In that case, the external sensor system can transfer the sensor information obtained from the external sensor (1) to the information collecting unit (11) via the wide area communication network, and have it processed.
【００７５】通信部（３）は、汎用情報処理部（２）と
情報収集部（１１）との通信を実現するために必要で、
人または人型移動ロボットに装着され、汎用情報処理部
（２）と適切に接続される。The communication unit (3) is necessary for realizing communication between the general-purpose information processing unit (2) and the information collection unit (11).
It is mounted on a human or humanoid mobile robot, and is appropriately connected to the general-purpose information processing unit (2).
【００７６】通信部（３）は、人または人型移動ロボッ
トの行動を妨げないように、通常は携帯電話やＰＨＳ等
普及型の無線通信装置を用いるのが適当であろう。もち
ろん通信部（３）は携帯電話やＰＨＳ以外でも可能であ
り、移動体（４）の移動範囲が海外に及ぶなど広域の場
合は衛星携帯電話などの装置を用いてもよいし、移動範
囲が限られている場合などは有線接続形態でも構わな
い。It is usually appropriate to use a popular wireless communication device such as a mobile phone or a PHS so that the communication section (3) does not hinder the action of a person or a humanoid mobile robot. Of course, the communication unit (3) can be other than a mobile phone or a PHS. If the moving range of the mobile unit (4) is a wide area such as abroad, a device such as a satellite mobile phone may be used. In a limited case, a wired connection may be used.
【００７７】機器構成情報部（４）は、外界センサシス
テム（１）および汎用情報処理部（２）がどのようなセ
ンサ特性を持つのか、どのような構成であるのか、どの
ような処理が可能なのかを明らかにするために必要な、
機器構成情報を提供する。The device configuration information section (4) can perform what kind of sensor characteristics, what kind of configuration the external sensor system (1) and the general purpose information processing section (2) have, and what kind of processing. It is necessary to clarify what
Provide device configuration information.
【００７８】機器構成情報部（４）はＨＴＭＬやＸＭＬ
などのデータベース記述言語により記述された機器構成
及び特性情報を持ち、特定または不特定のホストからア
クセス可能である。The device configuration information section (4) is HTML or XML.
It has device configuration and characteristic information described in a database description language such as, and can be accessed from a specified or unspecified host.
【００７９】機器構成情報部（４）のもつ機器構成情報
は、例えば以下に挙げる項目 のうち、少なくとも１つ以上の情報を含む。The device configuration information of the device configuration information section (4) includes, for example, the following items: And at least one or more pieces of information.
【００８０】本発明の請求項第１の実施の形態例につい
て、図６に基づいて説明する。図６の例では、外界セン
サとしてカメラ（１−０）及びマイク（１−１０）が人
間の顔付近に装備される。カメラ（１−０）は人間が普
段装着する眼鏡とともに装着され、カメラ（１−０）の
視野は人間の視野に近い場所をとらえるように設計され
る。マイク（１−１０）は、装着者本人の声もとらえる
ことのできるように、口の近くに装備される。さらに、
通信部（３）は人間の行動の邪魔にならないように装着
される。これらと汎用情報処理部（２）とが適切に接続
され、汎用情報処理部（２）は人間の行動の邪魔になら
ないように例えば腰付近に装着される。この例では機器
構成情報（４）が汎用情報処理部（２）のメモリ内に保
存されているが、必ずしも汎用情報処理部（２）のメモ
リ内である必要はない。また、これらの機器を駆動する
ための電源（１−１１）も人間の行動を妨げない場所に
装着される。A first embodiment of the present invention will be described with reference to FIG. In the example of FIG. 6, a camera (1-0) and a microphone (1-10) are provided near the human face as external sensors. The camera (1-0) is worn together with spectacles that a human usually wears, and the field of view of the camera (1-0) is designed to capture a place close to the human field of view. The microphone (1-10) is equipped near the mouth so that the wearer can catch the voice of the wearer. further,
The communication unit (3) is mounted so as not to disturb human actions. These and the general-purpose information processing unit (2) are appropriately connected, and the general-purpose information processing unit (2) is mounted, for example, near the waist so as not to disturb human actions. In this example, the device configuration information (4) is stored in the memory of the general-purpose information processing unit (2), but is not necessarily stored in the memory of the general-purpose information processing unit (2). Also, a power supply (1-11) for driving these devices is mounted in a place where human behavior is not hindered.
【００８１】上記の実施の形態では、カメラ（１−０）
およびマイク（１−１０）が人間の顔付近に装着されて
いる。その装着位置の情報が機器構成情報（４）にＸＭ
Ｌにより記述される。また、ＧＰＳは装着されておら
ず、地球上の位置情報は機器構成情報（４）に記述され
ない。さらに、カメラの画像の種類、解像度、特性、装
着者の視野に近い等の構成、特性情報が機器構成情報
（４）にＸＭＬにより記述される。マイク（１−１０）
の集音特性として、装着者本人の声が最も大きく集音さ
れる可能性が高いので、その特性についても機器構成情
報（４）にＸＭＬにより記述される。In the above embodiment, the camera (1-0)
And a microphone (1-10) are mounted near a human face. The information of the mounting position is included in the device configuration information (4) in XM format.
L. Further, the GPS is not mounted, and the position information on the earth is not described in the device configuration information (4). Further, information such as the type of camera image, resolution, characteristics, and configuration close to the field of view of the wearer, and characteristic information are described in the device configuration information (4) in XML. Microphone (1-10)
Is likely to be the loudest to be picked up by the wearer, and this characteristic is also described in XML in the device configuration information (4).
【００８２】本発明の請求項第２の実施の形態につい
て、図２に基づいて説明する。本発明の請求項２の情報
収集検索システムは、本発明の請求項１の外界センサシ
ステムを１つ以上複数用いる。情報収集部（１１）は複
数の外界センサシステムから送信される情報を処理し、
データベース（１２）に蓄積する。顧客は情報収集部
（１１）にアクセスする端末（１３）から情報収集部
（１１）およびそのデータベース（１２）にアクセス
し、上記複数外界センサシステムから得た情報を検索す
ることができる。また、顧客は上記端末（１３）から情
報収集部（１１）に外界センサシステムのもつ汎用情報
処理部（２）または情報収集部（１１）が処理すべき手
続きを登録することができる。情報収集部（１１）は顧
客が登録した情報収集処理手順（１４）を情報収集部
（１１）で実行するか、あるいは通信網を介して適切な
外界センサシステムの汎用情報処理部（２）に転送する
ことができる。これにより新たな情報収集タスクを開始
させることができる。以下、本発明の請求項第２の情報
収集検索システムの各部について詳細に説明する。A second embodiment of the present invention will be described with reference to FIG. The information collection and retrieval system according to claim 2 of the present invention uses one or more external sensor systems according to claim 1 of the present invention. The information collection unit (11) processes information transmitted from the plurality of external sensor systems,
It is stored in the database (12). The customer can access the information collection unit (11) and its database (12) from the terminal (13) accessing the information collection unit (11), and can search for information obtained from the multiple external sensor system. Further, the customer can register a procedure to be processed by the general-purpose information processing unit (2) or the information collection unit (11) of the external sensor system from the terminal (13) to the information collection unit (11). The information collection unit (11) executes the information collection processing procedure (14) registered by the customer in the information collection unit (11) or sends it to the general-purpose information processing unit (2) of an appropriate external sensor system via a communication network. Can be transferred. Thus, a new information collection task can be started. Hereinafter, each unit of the information collection and retrieval system according to claim 2 of the present invention will be described in detail.
【００８３】情報収集部（１１）は複数の外界センサシ
ステムから送信される情報を処理し、データベース（１
２）に蓄積するため、かつ顧客に開放された端末（１
３）からの情報収集処理手順（１４）登録及び検索要求
を処理するために必要である。The information collection unit (11) processes information transmitted from a plurality of external sensor systems and stores the information in a database (1).
2) Terminals that accumulate and that are open to customers (1
Information collection processing procedure from (3) (14) Necessary for processing registration and search requests.
【００８４】情報収集部（１１）は通信網を介して本発
明の請求項１の外界センサシステムにアクセスし、顧客
から登録のあった情報収集処理手順（１４）を送信し、
上記外界センサシステムに情報収集を要求することがで
きる。The information collecting unit (11) accesses the external sensor system according to claim 1 of the present invention via a communication network, and transmits an information collecting processing procedure (14) registered by a customer.
The information collection can be requested from the external sensor system.
【００８５】さらに情報収集部（１１）は、本発明の請
求項１の各外界センサシステムの機器構成情報部（４）
の情報にアクセスし、データベースの内容を解析して例
えばカラー映像を横１０２４ピクセル、縦７６８ピクセ
ルの解像度で取得できるなど、特定の特性の外界センサ
を持つ外界センサシステムのみを対象に情報収集処理手
順（１４）を送信することも可能である。これにより、
情報収集タスクに有用なセンサシステムと無用なセンサ
システムを区別して、情報収集にかかるコストを最小と
することができる。Further, the information collecting section (11) is a device configuration information section (4) of each external sensor system according to claim 1 of the present invention.
The information collection process is performed only for an external sensor system having an external sensor having a specific characteristic, such as accessing the information of the database and analyzing the contents of the database to obtain a color image with a resolution of 1024 pixels horizontally and 768 pixels vertically, for example. It is also possible to transmit (14). This allows
A sensor system useful for the information collection task and a useless sensor system can be distinguished to minimize the cost of information collection.
【００８６】さらに情報収集部（１１）は、本発明の請
求項１の各外界センサシステムが特定の情報収集処理手
順（１４）によって得た複数の処理結果から最もマッチ
の値が高いものを選別して記憶しておくなどの追加処理
を行い、より高精度の情報収集のみを保存しておくこと
も可能である。Further, the information collecting section (11) selects the one having the highest match value from a plurality of processing results obtained by each external sensor system according to claim 1 of the present invention in the specific information collecting processing procedure (14). It is also possible to perform additional processing such as storing the information and store only the more accurate information collection.
【００８７】さらに情報収集部（１１）は、本発明の請
求項１の各外界センサシステムが特定の情報収集処理手
順（１４）によって得た複数の処理結果をデータベース
（１２）に保存しておき、顧客から上記特定の情報収集
処理手順（１４）の情報収集処理結果（１５）の検索を
端末（１３）から要求されたときにデータベースから該
当する情報を引きだし、端末（１３）を経由して顧客に
提示することができる。Further, the information collecting unit (11) stores in the database (12) a plurality of processing results obtained by each of the external sensor systems according to the first aspect of the present invention in a specific information collecting processing procedure (14). When the customer requests the terminal (13) to search for the information collection processing result (15) of the specific information collection processing procedure (14), the corresponding information is retrieved from the database and passed through the terminal (13). Can be presented to customers.
【００８８】データベース（１２）は情報収集部（１
１）が収集した情報を保持するため、かつ顧客からの情
報収集処理手順（１４）を保持するために必要である。The database (12) has an information collecting unit (1).
1) is necessary to hold the collected information and to hold the information collection procedure (14) from the customer.
【００８９】端末（１３）は、顧客が情報収集部（１
１）およびデータベース（１２）にアクセスするために
必要である。本端末（１３）を経由して、顧客が望む情
報収集処理手順（１４）を情報収集部（１１）に送信
し、これをデータベース（１２）に登録することが可能
である。また、特定の情報収集処理手順（１４）から得
られた情報収集処理結果（１５）を、検索キーなどとと
もに検索する指示を情報収集部（１１）に送信し、検索
結果を閲覧することが可能である。The terminal (13) is connected to the information collection unit (1) by the customer.
1) and required to access the database (12). Via the terminal (13), the information collection procedure (14) desired by the customer is transmitted to the information collection unit (11), and can be registered in the database (12). Also, an instruction to search the information collection processing result (15) obtained from the specific information collection processing procedure (14) together with a search key or the like is transmitted to the information collection unit (11), and the search result can be browsed. It is.
【００９０】上記端末（１３）は、情報収集部（１１）
に直接接続されている必要は無い。例えば、広域通信網
を介して情報収集部（１１）にアクセスできる端末（１
３）であっても良い。The terminal (13) includes an information collecting unit (11)
It does not need to be directly connected to. For example, a terminal (1) that can access the information collecting unit (11) via a wide area communication network.
3).
【００９１】上記端末（１３）は、不特定多数のアクセ
スを禁止しなければならない場合には、一般的な個人認
証の手順を用いて、特定の人物からのアクセスに制限す
ることができる。When the terminal (13) has to prohibit an unspecified number of accesses, the terminal (13) can restrict access from a specific person by using a general personal authentication procedure.
【００９２】上記端末（１３）は、本発明請求項１の外
界センサシステムを一部に持つ人間装着型またはモバイ
ル端末であってもよい。つまり、装着者本人は最初に情
報収集処理部（１１）に情報検索要求を出す。そして、
装着者本人の外界センサシステムから得られる外界情報
を情報収集処理部（１１）に転送し、上記情報検索要求
に対する情報収集処理結果（１５）を得る。これは、情
報検索要求が複雑で、装着者本人の外界センサシステム
の持つ汎用情報処理部（２）では処理しきれない情報収
集処理手順（１４）を、情報収集部（１１）に代わりに
行ってもらうことと同じである。これにより、汎用情報
処理部（２）の処理能力が貧弱であっても、個人ベース
のさまざまな情報収集処理が可能となる。[0092] The terminal (13) may be a human-worn or mobile terminal partially having the external sensor system according to claim 1 of the present invention. That is, the wearer first issues an information search request to the information collection processing unit (11). And
The external information obtained from the external sensor system of the wearer is transferred to the information collection processing unit (11), and the information collection processing result (15) for the information search request is obtained. This is because, instead of the information collecting unit (11), the information collecting unit (11) performs an information collecting processing procedure (14) that the information retrieval request is complicated and cannot be processed by the general-purpose information processing unit (2) of the external sensor system of the wearer. It is the same as having one. Thereby, even if the processing capability of the general-purpose information processing unit (2) is poor, various personal-based information collection processes can be performed.
【００９３】本発明の請求項第２の実施例を図７に示
し、これを以下に説明する。まず、顧客から端末（１
３）を介してカラー情報を用いて人物を検索する要求
（Ａ）が、情報収集部（１１）にあったとする。上記要
求を実行するための適切な情報収集処理手順（１４）を
情報収集部（１１）が生成し、データベース（１２）に
格納する。FIG. 7 shows a second embodiment of the present invention, which will be described below. First, a customer receives a terminal (1
It is assumed that a request (A) for searching for a person using color information via 3) is received by the information collection unit (11). The information collection unit (11) generates an appropriate information collection processing procedure (14) for executing the above request, and stores it in the database (12).
【００９４】情報処理部（１１）は、アクセスし得る複
数の本発明の請求項第１の外界センサシステムに、適切
な広域通信網および通信部を用いてアクセスし、各外界
センサシステムがもつ機器構成情報部（４）から機器構
成情報（４−１）を送信するように指示する（Ｂ）。The information processing section (11) accesses a plurality of accessible external sensor systems according to the first aspect of the present invention using an appropriate wide area communication network and communication section, and the equipment included in each external sensor system. An instruction is sent from the configuration information section (4) to transmit the device configuration information (4-1) (B).
【００９５】各外界センサシステムは各自の機器構成情
報（４−１）を適切な広域通信網および通信部を用いて
情報収集部（１１）に送信する（Ｃ）。Each external sensor system transmits its own device configuration information (4-1) to the information collection unit (11) using an appropriate wide area communication network and communication unit (C).
【００９６】情報収集部（１１）は、上記により得られ
た機器構成情報からカラーカメラを装備している外界セ
ンサシステムのみを選択し、適切な広域通信網および通
信部を用いて上記検索要求（Ａ）を実行するための処理
手順を送信する（Ｄ）。The information collection unit (11) selects only the external sensor system equipped with the color camera from the device configuration information obtained as described above, and uses the appropriate wide area communication network and communication unit to make the search request (11). A processing procedure for executing A) is transmitted (D).
【００９７】処理手順を受け取った外界センサシステム
は直ちに当該処理手順を実行し、処理手順によって得ら
れた結果を適切な広域通信網および通信部を用いて情報
収集部（１１）に返す（Ｅ）。上記結果は情報収集処理
結果（１５）としてデータベース（１２）に格納され
る。The external sensor system that has received the processing procedure immediately executes the processing procedure, and returns the result obtained by the processing procedure to the information collection unit (11) using an appropriate wide area communication network and communication unit (E). . The result is stored in the database (12) as the information collection processing result (15).
【００９８】その後、顧客から端末（１３）を介して情
報収集処理結果（１５）の開示要求（Ｆ）が発生した場
合に、情報収集処理部（１１）がデータベース（１２）
から当該顧客の検索要求の処理結果に相当する情報収集
処理結果（１５）を取り出し、顧客に開示することがで
きる（Ｆ）。Thereafter, when a request for disclosure (F) of the information collection processing result (15) is issued from the customer via the terminal (13), the information collection processing unit (11) sets the database (12).
, An information collection processing result (15) corresponding to the processing result of the search request of the customer can be extracted and disclosed to the customer (F).
【図１】本発明の請求項第１の外界センサシステムの構
成図FIG. 1 is a configuration diagram of a first external sensor system according to the present invention;
【図２】本発明の請求項第２の情報収集検索システムの
構成図FIG. 2 is a configuration diagram of a second information collection and retrieval system according to the present invention;
【図３】本発明の請求項第１の汎用情報処理部（２）が
実行する情報収集処理手順（１４）の実施例１FIG. 3 is a first embodiment of an information collection processing procedure (14) executed by the first general-purpose information processing unit (2) of the present invention;
【図４】本発明の請求項第１の汎用情報処理部（２）が
実行する情報収集処理手順（１４）の実施例２FIG. 4 is a second embodiment of the information collection processing procedure (14) executed by the first general-purpose information processing section (2) of the present invention;
【図５】本発明の請求項第１の汎用情報処理部（２）が
実行する情報収集処理手順（１４）の実施例３FIG. 5 is a third embodiment of the information collection processing procedure (14) executed by the first general-purpose information processing unit (2) of the present invention;
【図６】本発明の請求項第１の実施の形態例FIG. 6 shows a first embodiment of the present invention.
【図７】本発明の請求項第２の実施例FIG. 7 shows a second embodiment of the present invention.
１ 外界センサ部 ２ 汎用情報処理部 ３ 通信部 ４ 機器構成情報部 １１ 情報収集部 １２ データベース １３ 端末 １４ 情報収集処理手段 １５ 情報収集処理結果 １−０ カメラ １−１ 絵 １−２ 相関計算 １−３ 類似度が一定以上かを判定する １−４ 通信部へ類似度及びカメラからの映像を転送 １−１０ マイク １−１１ 電源 ２−１ 補正特徴 ２−２ 人物領域抽出 ２−３ 顔認識 ２−４ マッチしたか判定する ２−５ 顔、閾値、及び地球上の発見位置を転送 ２−６ 補正情報 ３−１ 補正特徴 ３−２ 動的マッチングによる認識 ３−３ 顔画像、音声、閾値、及び地球上の発見位置を
転送 ４−１ 機器構成情報 Ａ カラー情報を用いて人物を検索する要求 Ｂ 外界センサシステムから機器構成情報（４−１）を
情報処理部（１１）へ送信する情報処理部（１１）から
の指示 Ｃ 外界センサシステムから機器構成情報（４−１）を
情報処理部（１１）へ送信 Ｄ 情報収集部（１１）から外界センサシステムへ、検
索要求（Ａ）を実行するための処理手順の送信 Ｅ 外界センサシステムから処理手順によって得られた
結果を情報収集部（１１）へ送信 Ｆ 顧客からの情報収集処理結果（１５）の開示要求及
びその開示Reference Signs List 1 external world sensor unit 2 general-purpose information processing unit 3 communication unit 4 device configuration information unit 11 information collection unit 12 database 13 terminal 14 information collection processing unit 15 information collection processing result 1-0 camera 1-1 picture 1-2 correlation calculation 1 3 Determine whether similarity is equal to or higher than a certain value 1-4 Transfer similarity and video from camera to communication unit 1-10 Microphone 1-11 Power supply 2-1 Correction feature 2-2 Extraction of person area 2-3 Face recognition 2 -4 Determine whether a match has occurred 2-5 Transfer face, threshold, and discovery position on the earth 2-6 Correction information 3-1 Correction features 3-2 Recognition by dynamic matching 3-3 Face image, voice, threshold, 4-1 Device configuration information A Request for searching for a person using color information B Information for transmitting device configuration information (4-1) from the external sensor system to the information processing unit (11) Instruction from processing unit (11) C Transmits device configuration information (4-1) from external sensor system to information processing unit (11) D Executes search request (A) from information collection unit (11) to external sensor system E Transmitting the result obtained by the processing procedure from the external sensor system to the information collection unit (11) F Requesting disclosure of the information collection processing result (15) from the customer and disclosure thereof
Claims (2)
情報を取得するセンサからなる外界センサ部（１）と、
外界センサ部（１）からの情報を処理する汎用情報処理
部（２）と、情報処理の結果を送信したり、システム外
部からデータやプログラムなどを受信するために、広域
通信網にアクセス可能な通信部（３）と、ＨＴＭＬやＸ
ＭＬ等のデータベース記述言語により記述された外界セ
ンサ部（１）及び汎用情報処理部（２）のハードウェア
構成及び特性を示す情報をもつ機器構成情報部（４）を
具備し、上記外界センサ部（１）と汎用情報処理部
（２）と通信部（３）を人または人型移動ロボットに装
備することを特徴とする外界センサシステム。An external field sensor unit (1) including a sensor for obtaining external information outside the system, such as a camera or a microphone,
A general-purpose information processing unit (2) that processes information from an external sensor unit (1), and is capable of accessing a wide area communication network to transmit information processing results and to receive data and programs from outside the system. Communication unit (3), HTML and X
An external sensor unit (1) described in a database description language such as ML and a device configuration information unit (4) having information indicating a hardware configuration and characteristics of a general-purpose information processing unit (2); An external sensor system comprising (1) a general-purpose information processing section (2) and a communication section (3) mounted on a human or humanoid mobile robot.
１つ以上用い、上記外界センサシステムと広域通信網を
介して通信し、上記外界センサシステムの機器構成情報
（４）及び外界センサの信号を受信したり、上記外界セ
ンサシステムの汎用情報処理部（２）で外界情報を処理
するためのプログラムを外界センサシステムに送信した
りして能動的に情報を収集するための情報収集部（１
１）、上記情報収集部（１１）が、顧客からの検索要求
及び収集した情報を蓄積するためのデータベース部（１
２）、また顧客からの検索要求を実行するための情報収
集処理手順（１４）、外界センサシステムの汎用情報処
理部（２）または情報収集部（１１）が上記情報収集処
理手順（１４）を実行して得られる情報収集処理結果
（１５）、上記データベース部（１２）にアクセスする
ための端末（１３）を具備し、上記情報収集処理手順
（１４）及び情報収集処理結果（１５）が上記データベ
ース部（１２）に格納されることを特徴とする情報収集
検索システム。2. An external sensor system according to claim 1, wherein at least one external sensor system communicates with the external sensor system via a wide area communication network, and the equipment configuration information (4) of the external sensor system and the external sensor. An information collection unit for actively collecting information by receiving a signal or transmitting a program for processing the outside world information to the general-purpose information processing unit (2) of the outside world sensor system to the outside world sensor system; 1
1) A database unit (1) for storing the search request from the customer and the collected information by the information collecting unit (11).
2) Also, an information collection processing procedure (14) for executing a search request from a customer, the general-purpose information processing unit (2) or the information collection unit (11) of the external sensor system performs the information collection processing procedure (14). An information collection processing result (15) obtained by execution, a terminal (13) for accessing the database unit (12) is provided, and the information collection processing procedure (14) and the information collection processing result (15) are An information collection and retrieval system stored in a database unit (12).
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000404264A JP2002183180A (en) | 2000-12-16 | 2000-12-16 | Information gathering and retrieval system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000404264A JP2002183180A (en) | 2000-12-16 | 2000-12-16 | Information gathering and retrieval system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2002183180A true JP2002183180A (en) | 2002-06-28 |
Family
ID=18868247
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000404264A Pending JP2002183180A (en) | 2000-12-16 | 2000-12-16 | Information gathering and retrieval system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2002183180A (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100685747B1 (en) | 2004-12-21 | 2007-02-22 | 한국전자통신연구원 | System and method for processing sensor data stream based on xml |
| CN103631221A (en) * | 2013-11-20 | 2014-03-12 | 华南理工大学广州学院 | Teleoperated service robot system |
| JP2020017301A (en) * | 2014-03-31 | 2020-01-30 | 日本電気株式会社 | Image processing method, image processing system, and image processing terminal |
-
2000
- 2000-12-16 JP JP2000404264A patent/JP2002183180A/en active Pending
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100685747B1 (en) | 2004-12-21 | 2007-02-22 | 한국전자통신연구원 | System and method for processing sensor data stream based on xml |
| CN103631221A (en) * | 2013-11-20 | 2014-03-12 | 华南理工大学广州学院 | Teleoperated service robot system |
| JP2020017301A (en) * | 2014-03-31 | 2020-01-30 | 日本電気株式会社 | Image processing method, image processing system, and image processing terminal |
| US11100691B2 (en) | 2014-03-31 | 2021-08-24 | Nec Corporation | Image processing system, image processing method and program, and device |
| JP7001086B2 (en) | 2014-03-31 | 2022-01-19 | 日本電気株式会社 | Video monitoring method, video monitoring system and video monitoring terminal |
| US11798211B2 (en) | 2014-03-31 | 2023-10-24 | Nec Corporation | Image processing system, image processing method and program, and device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5150067B2 (en) | Monitoring system, monitoring apparatus and monitoring method | |
| CN101093542B (en) | Inquiry system, imaging device, inquiry device, information processing method | |
| JP7405200B2 (en) | person detection system | |
| JPWO2018198373A1 (en) | Video surveillance system | |
| JP4229111B2 (en) | Inquiry system | |
| CN105809110A (en) | Behavior identification system and method based on wireless signal identity | |
| US20090244281A1 (en) | Monitoring apparatus and display processing method for the monitoring apparatus | |
| JPWO2014030407A1 (en) | Control device and storage medium | |
| CN104685861A (en) | Content acquisition device, portable device, server, information processing device and storage medium | |
| JP7192764B2 (en) | Information processing device, information processing method, and program | |
| CN111222373A (en) | Personnel behavior analysis method and device and electronic equipment | |
| JPWO2020136795A1 (en) | Information processing equipment, information processing methods, and programs | |
| JP2006134008A (en) | Business store system | |
| US20210264766A1 (en) | Anti-lost method and system for wearable terminal and wearable terminal | |
| JP2006093955A (en) | Video processing apparatus | |
| WO2024139874A1 (en) | Positioning method and system for wearable device, and storage medium | |
| JP5865584B2 (en) | Specific person detection system and detection method | |
| JP7435837B2 (en) | Information processing system, information processing device, information processing method, and program | |
| JP2002183180A (en) | Information gathering and retrieval system | |
| JP2021036646A (en) | Information collection system, camera terminal device, information collection method and information collection program | |
| JPH11134349A (en) | Environment adaptive type information presenting device and actual world database | |
| US20230050235A1 (en) | Surveillance system, surveillance apparatus, surveillance method, and non-transitorycomputer-readable storage medium | |
| JP6435640B2 (en) | Congestion degree estimation system | |
| CN108337361B (en) | Method and terminal for pre-judging behaviors through gyroscope sensor | |
| JP2006101028A (en) | Supervisory system |