JPH07141389A - 検索装置 - Google Patents

Abstract

(57)【要約】 【目的】文書やタイトルや内容ある検索式を思い出せな
い場合や、文書のタイトルや内容を自然言語でうまく表
現できない場合でも、文書を検索できる検索装置を提供
する。 【構成】文書データを記憶しておくための文書データ記
憶手段２と、文書データ記憶時等において上記文書と周
囲の状況とを関連づけた環境解析対象データを入力する
手段４と、この手段で入力されたデータを解析し、検索
キーとして利用し易い環境情報にして文書データに関連
させて格納する手段４，５，６と、環境情報を用いて文
書データ記憶手段２内の文書を検索するための検索手段
８，９とを備えている。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、検索装置に関する。

【０００２】

【従来の技術】従来の文書検索装置やワードプロセッサ
では、利用者が過去に検索した文書を再び得るために
は、検索した文書のタイトルまたは内容などを思い出し
て文書を呼び出すか、過去の検索に用いた検索式を思い
出すなどしてデータを検索する必要があった。このと
き、検索式は文字列で入力し、文書のタイトルまたは内
容などはそれらそのものを表す自然言語表現かそれらに
類似した自然言語表現を入力する必要があった。従っ
て、検索式や、文書のタイトルや内容を思い出せない場
合、あるいはそれらを文字列や自然言語表現で表せない
場合には検索することができなかった。

【０００３】

【発明が解決しようとする課題】上述したように、検索
式や、文書のタイトルや内容を思い出せない場合、ある
いはそれらを文字列や自然言語表現で表せない場合には
それらを検索し、抽出することができなかった。

【０００４】そこで、本願発明は検索式や、文書のタイ
トルや内容を思い出せない場合や、文書のタイトルや内
容を自然言語表現で表せない場合でも検索できるように
する検索装置を提供することを目的とする。

【０００５】

【課題を解決するための手段】本願第１の発明は、文書
等のデータを作成あるいは検索を行った際に、前記デー
タとこのデータの作成、検索を行った位置の位置情報と
を対応づけて記憶する手段と、この記憶手段に記憶され
た位置情報に基づいて所望のデータを抽出する手段とを
備えることを特徴とする検索装置であり、第２の発明
は、スケジュール項目を設定することにより、スケジュ
ール表を作成するスケジュール管理システムを用い、文
書等の記憶対象データと関連するスケジュール項目をス
ケジュール表から特定する手段と、この手段により特定
されたスケジュール項目と前記記憶対象データとを関連
づけて記憶する手段と、この手段に記憶されたデータを
前記スケジュール表のスケジュール項目を基づいて抽出
する手段とを備えることを特徴とする検索装置であり、
第３の発明は、文書等のデータを記憶する際に、このデ
ータの構造的特徴を示す情報を抽出する手段と、この手
段により抽出された構造的特徴を示す情報と上記データ
とを対応づけて記憶する手段と、この手段に記憶された
前記データを前記構造的特徴を示す情報を基に抽出する
手段とを備えることを特徴とする検索装置であり、第４
の発明は、文書等のデータを作成、記憶、検索し得る装
置と、この装置の所定位置に設置された画像入力装置と
を用い、前記データを入力し、記憶し、あるいは記憶さ
れたデータを検索する際の各々の動作を画像情報として
前記画像入力装置を介して入力し、この画像情報を前記
データとを各々対応づけて記憶する手段と、この手段に
記憶された画像情報を用いて所望のデータを抽出する手
段とを備えることを特徴とする検索装置であり、第５の
発明は、文書等のデータを作成する際に、前記データの
作成開始時刻あるいは作成終了時刻を検出する手段と、
この手段により検出された時刻と前記データとを対応づ
けて記憶する手段と、この手段に記憶された時刻に基づ
いて所望のデータを抽出する手段とを備えることを特徴
とする検索装置であり、第６の発明は、文書、音声等の
データを入力する際に、前記音声のデータから音声の特
徴的データを検出する手段と、この手段により検出され
た特徴的データと前記データと対応づけて記憶する手段
と、この手段に記憶された特徴的データを用いて所望の
データを抽出する手段とを備えることを特徴とする検索
装置である。

【０００６】

【作用】利用者が過去にデータを作成、検索等を行った
ときの状況・場面・環境等を表現する内容を入力し、こ
れを解析し、解析結果をデータと共に記憶する。したが
って、記憶した状況・場面・環境等を手がかりにして所
望のデータを検索するものである。

【０００７】

【実施例】具体的な実施例を説明する前に、本発明に係
る検索装置の基本的な思想および用語の定義等について
説明する。

【０００８】ワードプロセッサに代表されるように、今
日の多くの情報機器では、システムに入力したデータを
後に加工して再利用することが多い。しかし、入力した
データ数が増えてくる程、再利用したいときに必要なデ
ータを検索するのに手間がかかるという問題がある。

【０００９】本発明に係る検索装置は、検索の対象とな
るデータの検索キーとして、システムにデータを入力す
る際や、そのデータを加工・編集するときなど、該デー
タにアクセスする際（「システム利用時」と呼ぶ）のユ
ーザ自身やシステムあるいは周囲の状況を表す情報
（「環境情報」と呼ぶ）を利用するものであり、この環
境情報の抽出を半ば自動的に行うことを特徴としてい
る。

【００１０】従来、システムに既に入力されている多く
のデータの中から必要なものを検索する場合、データフ
ァイル名などのようにユーザがデータに意識的に付加す
るラベルがないか、または不適切なとき、データ生成時
刻などシステムによる自動付加の比較的簡単な物理的ラ
ベル類を補助的に検索キーとして使う以外にはなく、そ
の場合、多くの検索の実行では、その物理的ラベルから
検索対象への対応づけをユーザの記憶に頼る部分が大き
かった。

【００１１】しかし一方、人間が検索を必要とする場面
では、探したいデータを思い浮かべる際に、時刻のよう
な物理的ラベルからよりも、「…した頃の」，「…して
いる時に」，「…にいた時の」，「…と一緒にいた時
の」といったシステムにアクセスしていた時のユーザや
周囲の状況に関連づけている場合が多く、上記のような
物理的なラベルからの検索は不便な場合もあった。

【００１２】本発明に係る検索装置では、検索データに
アクセスしている時のユーザ、システムあるいは周囲の
状況を得ることのできる物理的なラベル・データを取り
込むデバイスを有し、これにより入力されるデータ
（「環境解析対象データ」と呼ぶ）を解析することによ
り、検索キーとしてより利用しやすい「環境情報」を検
索対象とするデータと関連づけて格納し、検索時に利用
することを特徴としている。

【００１３】以下、図面を参照しながら実施例を説明す
る。

【００１４】まず、システムの基本構成を図１に示す。

【００１５】このシステムは、検索対象データ入力部
１、検索対象データ記憶部２、検索対象データ出力部
３、環境解析対象データ入力部４、環境情報解析部５、
環境情報記憶部６、環境情報出力部７、検索キー入力部
８、検索部９から構成される。

【００１６】ここでいう検索対象データとは、図３に示
すように、計算機などにより実現されたシステムに入力
されたデータ一般をさす。例えば、キーボード、マウ
ス、ペンなどを利用して入力したテキスト、画像などか
らなる文書やデータファイル、イメージスキャナやカメ
ラを利用して入力した静止画、動画などの画像データ、
マイクロフォンを使って収録したり、電子的に合成した
音響データなど、システムに入力され、格納された後、
編集、加工や参照などの再利用可能なデータである。

【００１７】検索対象データ入力部１は、図２に示すよ
うに、これらの検索対象データを入力するための入力デ
バイスと、後の解析に必要な入力データに関する情報
（例えば入力デバイスが複数あるときは、デバイス識別
子、量子化ビッ数や標本化周波数など）を付加するデー
タ変換部から構成されている。

【００１８】検索対象データ記憶部２は、検索対象デー
タ入力部１から入力したこれら検索対象データを格納す
る。

【００１９】検索対象データ出力部３は、検索対象デー
タ記憶部２に格納されている検索対象データを取り出
し、ユーザに提示、出力する。ここで、提示、出力の様
式はアプリケーションに依存する。検索対象データとし
て文書や画像データを扱う場合は、ディスプレイへの表
示や印刷などを行う手段を持ち、また音響データを扱う
場合はスピーカなどへの再生出力を行う音響出力手段を
持つ。

【００２０】環境解析対象データは、図３に示すよう
に、解析により環境情報を取り出すもととなるデータで
あり、ユーザのシステム利用時に自動的にシステム内に
入力される。

【００２１】例えば、キーボード、マウス、ペンなどを
利用した入力操作の履歴、スキャナカメラなどを利用し
て入力した静止画、動画などの画像データ、マイクロフ
ォンを使って収録したり、電子的に合成した音響デー
タ、ＧＰＳや磁気センサなどの位置測定ディバイスを利
用した位置測定データ、温度，湿度，圧力センサによっ
て得た測定値データなどシステム利用時にユーザの様子
や外部状況を知るためのデータ、脈拍や血圧，体温，血
糖値などユーザの健康状態を示す測定値データなどがあ
げられる。

【００２２】この他システム利用時にユーザが検索に利
用されることを意図せずに行った入力も環境解析対象デ
ータとして利用できる。例えば、ワークステーションは
複数のユーザで利用することを前提としているため、シ
ステム利用の最初にユーザ名を入力する必要があるが、
これによりユーザＩＤが判明するため、誰がシステムを
利用したかが判る。

【００２３】また、ネットワーク上で結ばれた計算機の
識別子を取得することによって、どのシステムを使って
いたかが判る。システムの設置場所が固定されている場
合には、どこのシステムを利用していたかが判る。

【００２４】これらの誰が、どこで入力したデータかと
いう情報は、予定表や他の文書など、検索対象以外の入
力データを解析することによって得られる。検索対象デ
ータを環境解析対象データとして利用することも可能で
ある。

【００２５】環境解析対象データ入力部４は、これらの
環境解析対象データを入力するための入力デバイスと、
後の解析に必要な入力データに関する情報を付加するデ
ータ変換部とから構成されている。

【００２６】環境解析対象データには、どの検索対象デ
ータに対応するものかを示す対応情報が付加される。例
えば、検索対象データが時系列データであれば検索対象
データの入力時刻を対応情報として利用できる。即ち、
検索対象データと環境解析対象データの各々について、
入力された時刻を付加し、この時刻情報をもとに対応づ
けを行うことができる。

【００２７】また、検索対象データが時間的に変化する
データでない場合や変化が僅かである場合、環境解析対
象データが時間的に変化がない場合や変化が僅かである
場合は、データに識別子を付加しておき、これを対応情
報として利用できる。即ち、検索対象データと環境解析
対象データにデータ識別子をそれぞれ付加し、これをも
とに各々の対応するデータを同定することができる。

【００２８】環境解析対象データは、例えば、音声認識
による発話内容の抽出、音響特性によるシステム利用場
所の識別、話者認識による発話者の特定、画像認識によ
るシステム利用場所の特定、文書データのレイアウト解
析、スケジュールやデータへのアクセス情報の分析を行
うことにより、環境情報を得る。

【００２９】これらの検出、分析、認識などの解析は、
環境情報解析部５で行われる。解析は、環境解析対象デ
ータの形態によって異なり、複数の解析結果をさらに解
析し、構造化することにより、より高次の環境情報を得
ることができる。

【００３０】各々の環境解析対象データ毎に具体的な解
析内容、得られる環境情報については後述する個々の実
施例の中で説明する。

【００３１】これらの解析は、システム利用時に自動的
に行われることが望ましいが、解析の処理が複雑で実時
間性が確保できない場合には、ユーザがシステムを利用
していない時に実行してもよい。

【００３２】また、自動的な解析の誤りを修正したり、
ユーザが意図的に環境情報を付加したい場合は、解析結
果とマニュアルによる修正、追加を可能としてもよい。

【００３３】既述したように、環境解析対象データに
は、どの検索対象データに対応しているのかを示す対応
情報が付加されるが、解析によって得られる環境情報に
もどの環境解析対象データから得たかを示す対応情報が
付加される。勿論、この対応情報は、環境情報と環境解
析対象データとの間の対応づけを行うのではなく、環境
情報と検索対象データとの直接の対応づけを行うもので
あってもよい。この対応情報は、検索対象データと環境
解析対象データとの対応関係と同様に、データの時間的
変化が有意なものである場合には、検索対象データの入
力時刻を対応情報として用いることができるし、時間的
変化が特に意味を持たない場合は、データ識別子により
対応づけを行うことができる。

【００３４】また、得られた環境情報が、検索対象デー
タあるいは環境解析対象データの一部に対応するするも
のである場合には、全体のうちのどの部分に対応するか
を示すような対応情報を付加すればより正確かつ容易に
検索することができる。

【００３５】このような環境情報と検索対象データある
いは環境解析対象データ間の対応情報をたどることによ
り、環境情報を検索キーとして検索対象データを検索す
ることができる。

【００３６】さらに、環境情報がどのような解析を経て
得られたものであるか、あるいはどの程度の尤もらしさ
で得られたかを示す情報を環境情報に付加することもで
きる。この場合、同じような環境情報が複数の解析方法
によって得られている場合でも、どの環境情報が最も信
頼できるかを判断する材料として利用できる。

【００３７】ここでいう環境情報とは、図３に示すよう
に、システムを使って検索対象データをユーザが入力、
編集、あるいは検索、出力するときの、ユーザ自身ある
いは周囲の状況など（時刻、場所）に関する情報であ
り、単に物理的な時刻、場所だけでなく、ある人と一緒
にいたとき、ある会議に出席したとき、通勤の電車の中
で、自宅の居間でというように、「いついた所」「どこ
にいた時」「何をしていた時、所」「どうしていた時、
所」「誰といた時、所」など、検索をしようとするユー
ザにとって意味のある構造化された情報をさす。環境情
報を検索対象データとリンクすることにより、ユーザが
必要とする検索対象データを環境情報を検索キーとして
容易に捜し出すことができる。

【００３８】各々の環境情報は、「誰が検索対象データ
を入力したか」、「どこで検索対象データを入力した
か」、「どのように検索対象データを入力したか」、
「何故、検索データを入力したか」など、解析によって
得られるトピックに応じた識別子を具体的な解析結果に
付加することによって、環境情報の内容をユーザに提示
する場合にユーザに判り易く示すことができる。

【００３９】このような環境情報は、ユーザがシステム
を利用しているあいだ自動的に取り込まれる音、映像な
どの信号、位置などの測定値など、物理的なデータを解
析することにより得られる。このような、環境情報を得
るために解析を行う対象となるデータを、図３に示すよ
うに、環境解析対象データと呼ぶことにする。

【００４０】環境情報解析部５では、環境解析対象デー
タ入力部４よりシステムに入力した環境解析対象データ
を解析、構造化し、環境情報を生成する。

【００４１】環境情報記憶部６は、解析結果やその構造
化情報を含む環境情報を格納する。環境情報出力部７
は、環境情報記憶部に格納されている解析結果やその構
造化情報を含む環境情報を出力する。

【００４２】検索キー入力部８は、ユーザからの入力を
受け付けるキーボード、タッチパネル、ペン、マウスな
どの入力デバイスと、これを検索したい環境情報に変換
する環境情報変換部から構成される。

【００４３】検索部９は、検索キー入力部８によりユー
ザが指定する環境情報を環境情報記憶部６から検索し、
その環境情報とリンクされている検索対象データを取り
出す。

【００４４】また検索部９は、環境情報記憶部６に格納
されている環境情報や構造化情報をたどって、関連する
環境情報を取り出すこともできる。

【００４５】既存の、ワードプロセッサや電子出版シス
テムや録音・録画システムなどのマルチメディアデータ
の入出力アプリケーションは、単に、検索対象となるデ
ータの入出力や記憶をつかさどる機能を実現しているだ
けであり、図１の構成に対応させて表現した場合、この
うち検索対象データ入力部と検索対象データ記憶部およ
び検索対象データ出力部を備えているに過ぎない。

【００４６】本発明は、システムを利用してユーザが検
索対象データを操作していたときのユーザおよび周囲の
状況を表わす情報（環境情報）を検索対象データにリン
クさせ、環境情報を利用して検索対象データを探し出す
枠組みを提供するものである。さらに、基本的には環境
情報の生成をシステムが自動的に行う点が大きな特徴で
ある。

【００４７】つづいて、各部の詳細について述べる。

【００４８】・入力デバイスからのデータの入力 検索対象データ入力部１あるいは環境解析対象データ入
力部４の入力デバイスは、音響メディアあるいは映像メ
ディアなどの連続データ、ポインティング位置を示す入
力デバイスとシステムの相対位置データ、位置測定シス
テムを利用して得たシステム自体の絶対位置データなど
をシステムに取り込む。

【００４９】図２および図４に示される検索対象データ
入力部１あるいは環境解析対象データ入力部４のデータ
変換部では、これらの入力データをシステムで扱えるフ
ォーマットに変換する。たとえば、連続データは離散・
量子化したフォーマットで格納・処理される。

【００５０】ここで離散・量子化した検索対象データお
よび環境解析対象データには、その離散・量子化情報も
付加される。この離散・量子化情報は、検索対象データ
の全部または一部を再生出力する時に利用される。

【００５１】また、検索対象データあるいは環境解析対
象データと言う場合、変換された後のデータを指すこと
にする。

【００５２】・環境解析対象データとしての時間情報の
扱い 入力、編集、検索および出力など、検索対象データに対
する操作をイベントとしてとらえれば、それぞれのイベ
ントの生起時刻は、検索対象データに関する環境情報を
得るための解析対象として利用できる。すなわち、検索
対象データがシステムに入力された時刻を示す時間情報
等のイベント生起時刻系列は、環境解析対象データとし
て扱うことができる。これにより、検索対象データがい
つ操作されたか、検索対象データのある部分がいつ操作
されたかという情報が記録される。

【００５３】また、環境解析対象データについても同様
に、その入力時刻を示す時間情報を環境解析対象データ
として扱うことができる。

【００５４】このように、それぞれの入力データについ
て時間情報を持つことにより、それぞれの時間的な対応
をとることができる。検索対象データあるいはその一部
と環境解析対象データとの時間的なリンクを付けたり、
検索対象データに対する操作イベントと環境解析対象デ
ータのリンクを付けるときに利用できる。

【００５５】・検索対象データと環境解析対象データの
格納 検索対象データ記憶部２は検索対象データを、環境解析
対象データ記憶部６は環境解析対象データを、離散・量
子化情報などの付加情報とともに格納する。

【００５６】検索対象データあるいは環境解析対象デー
タの実体と付加情報は、たとえば、互いにリンクを張っ
ていてもよい。あるいは、検索対象データや環境解析対
象データの実体は一般に膨大な記憶容量を必要とするの
に対し、その付加情報は比較的に入力デバイス毎や入力
データ毎に共通した内容であることが多いので、検索対
象データや環境解析対象データごとにフレームを用意
し、フレームにはその実体を指すポインタと、付加情報
または付加情報の実体を指すポインタを持たせていても
よい。

【００５７】・環境解析のタイミング（環境情報解析部
５） 環境情報解析部５では、環境解析対象データを解析して
環境情報を得る。即ち、パラメータ抽出、パターン認識
・理解などにより環境情報を得る。

【００５８】環境解析対象データの解析は、図５に示す
ように、環境解析対象データが入力されるときに自動的
に行われる。上に述べたように、環境解析対象データ
は、ユーザがシステムを利用してユーザが検索対象デー
タを操作していたときに必ず入力される。したがって、
ユーザがシステムを利用しているあいだ、常に解析が行
われることになる。

【００５９】・環境情報の解析（環境情報解析部５） ここで抽出あるいは認識・理解して得られる情報は、直
接的ないしは間接的にユーザがシステムを利用している
ときのユーザ自身や周囲の状況を表わす情報である。

【００６０】たとえば、検索対象データを作成した場所
が自宅の居間であることを環境情報とする例について説
明する。この環境情報は、たとえばＧＰＳなどの位置測
定システムから送られてくる位置データ系列を環境解析
対象データとして、その位置データが自宅の居間である
ことを認識することにより得られる。使用場所を示す環
境情報は、ＧＰＳ以外の環境解析対象データからも得る
ことができ、その例を図６に示す。

【００６１】ところで、環境情報解析部５では、どの環
境情報を得たいのか、その環境情報はどの解析結果から
得られるのか、その解析結果はどの環境解析対象データ
からとの解析方法によって得られるのか、については自
動的な解析に先立って設定しておく必要がある。

【００６２】上の例で言えば、システムの利用場所に関
する環境情報として、自宅の居間であるとか、自分の仕
事場であるとかいった識別すべき使用場所、さらに、そ
の使用場所を識別するために解析対象データとしてＧＰ
Ｓ位置測定データを使うこと、その位置データ値と識別
すべき使用場所との対応などを、解析する前に設定して
おく必要がある。

【００６３】このうち、「ある環境情報を得るために
は、どの解析対象データに対してどのような解析方法で
解析すればよいか」については、応用場面やユーザにあ
まり依存しにくい部分であるので、解析に関するデフォ
ルトの知識としてシステムに持たせておいてもよい。図
６で言えば、使用場所を示す環境情報を得るためには、
残響データの残響パターンと周囲音データの周囲音パタ
ーンと、…などの解析を行えばよいということは、応用
によらずシステムが内蔵する予備知識として扱ってもよ
い。

【００６４】一方、「どの環境情報（のインスタンス）
を得たいのか、また、その環境情報（のインスタンス）
はどの解析結果から得られるのか」については、応用場
面やユーザに大きく依存する。すなわち、上の例で言え
ば、前者は、使用場所を示す環境情報として、自宅の居
間と仕事場と移動の車内の３種類を識別すればよい、と
いうように、何を識別するかに関する知識であって、後
者は、自宅の居間であると識別するのは、解析の結果ど
のような残響パターンか得られた時か、どのような周囲
音パターンが得られた時かなどのように、解析結果の理
解に関する知識であるが、これらはいずれも、応用やユ
ーザの要求に大きく依存する知識である。表２で言え
ば、解析結果から個々の環境情報を得る部分は、ユーザ
が解析に先立って設定しておく必要がある。

【００６５】具体的には、音・画像・位置・スケジュー
ル・アクセス情報などが考えられるが、この詳細につい
ては、後段で詳しく説明する。

【００６６】・検索のメカニズム また、それぞれ得られた解析結果には、環境解析対象デ
ータのどの部分を解析して得たか等の解析に関する情報
が付加される。これにより、得られた個々の環境情報と
環境解析対象データの全部または解析した部分との間を
リンク付けをする。既に述べたように、検索対象データ
と環境解析対象データの間には、互いにリンクがあるの
で、環境情報から検索対象データを検索することが可能
になる。

【００６７】検索の際には、検索対象データにリンクさ
れている環境情報からさがす。たとえば、利用場所、利
用時刻、利用状況などを示す環境情報が環境情報出力部
７を通じて表示され、これを参照しこの中から検索キー
として使う環境情報を選択する。

【００６８】検索キーとして使う環境情報は、検索キー
入力部８を介して指定する。検索部９は、指定された環
境情報を環境情報記憶部６の中で検索し、それにリンク
されている検索対象データが検索対象データ出力部３か
ら出力される。

【００６９】・環境情報への尤度の付加（環境情報解析
部５・環境情報出力部７） 解析結果の確からしさ（尤度）は解析方法に依存する。
また、同じ解析方法から得たものであっても、解析結果
ごとに尤度が異なる。

【００７０】したがって、上述の解析に関する情報とし
て、どの解析方法によって得たか、その解析方法によれ
ばどの程度確からしい解析結果であるかという情報を付
加しておく。

【００７１】この尤度は、ユーザが主観的に決めた値を
固定して使ってもよいし、システムが半自動的に設定し
てもよい。

【００７２】例えば、ある解析方法により得られた環境
情報を検索キーとして使う頻度が高いほど、その解析方
法の尤度は高く設定する。また、解析が何らかのパター
ン認識であれば、標準パターンとの類似度を尤度として
もよい。

【００７３】解析方法が複数あってそれぞれの方法で得
られた解析結果に矛盾がある場合、解析方法や解析結果
の尤度についての情報を参照することによって、検索対
象データを検索する際に、尤度の高いものを優先的に扱
い検索を効率的に進めることができる。また、多くの解
析方法から高い尤度で得られた環境情報を優先すること
も可能である。

【００７４】・解析結果の構造化（環境情報解析部５） 環境解析対象データとして、マルチメディアのデータが
利用できる場合には、最初にメディアごとに別個に解析
が行われる。

【００７５】ついで、得たい環境情報ごとに各メディア
の解析結果を構造化する。例えば、検索対象データをど
こで入力したかという利用場所に関する環境情報は、図
６に示したように、ＧＰＳ等の測位システムによっても
得られるほか、残響特性や周囲雑音等の音響データによ
る識別、画像によるシーン認識、スケジュールや日常行
動の履歴などのデータを参照して推定することも可能で
ある。これらの複数のメディアごとの利用場所に関する
解析結果は、同じ内容を意味する環境情報として構造化
される。

【００７６】・環境解析対象データとしての検索対象デ
ータの利用 ところで、これまでは検索対象データと環境解析対象デ
ータとは別個のデータとして説明してきたが、これらは
同一のデータであっても構わない。すなわち、検索対象
データをそのまま環境解析対象データとして利用して、
これを解析し環境情報を得てもよい。たとえば、マイク
ロフォンから入力した音声データを使い話者認識を行っ
た認識結果を環境情報として、ある特定の人の発話を再
生する場合、検索対象データも環境解析対象データも同
一の音声データである。

【００７７】このように、システム内部では同一のデー
タが、検索の観点からは検索対象であり、同時に、環境
の解析の観点からは解析対象であることも可能である。

【００７８】・環境解析対象データとしてのデバイス情
報の扱い システムは、検索対象データ入力部あるいは環境解析対
象データ入力部の入力デバイスを複数個備えることがで
きる。複数の入力デバイスが利用できる場合には、各入
力データがどのデバイスから入力されたかを示すデバイ
ス情報自体も環境解析対象データとすることができる。
例えば、音響メディアであるとか映像メディアであると
か、どこに設置されたデバイスから入力したデータか、
どこに向けられたマイクロフォンやカメラで取り込んだ
データか、などの情報からも環境情報を得ることができ
る。

【００７９】・デバイス情報による尤度の付加。

【００８０】デバイス毎に環境解析対象データの品質が
異なる場合は、デバイス情報を参照して尤度を変えるこ
とができる。

【００８１】つぎに、ユーザからの環境情報の入力を可
能とする環境情報入力部１０を備える例について図７を
用いて説明する。

【００８２】環境情報入力部１０は、ユーザからの入力
を受け付けるキーボード、タッチパネル、ペン、マウス
などの入力デバイスと、これを環境情報に変換する環境
情報変換部から構成される。

【００８３】一般に、自動解析によって得られた結果に
は誤りが含まれることが避けられず、これを修正せずに
利用すれば検索の効率が低下することもある。ユーザが
直接環境情報を入力することにより、システムによる解
析誤りを修正・削除したり、必要な環境情報を追加する
ことが可能となる。

【００８４】ここでいうユーザの入力できる環境情報
は、システムの解析結果やその構造化情報、あるいは尤
度を含んでいる。

【００８５】ユーザが直接入力した環境情報に高い尤度
を付加することも可能である。また、ユーザが解析結果
を削除する頻度が高い解析方法は、その解析方法の尤度
を下げたり、逆に修正を頻繁に繰り返し検索キーに使う
ような環境情報を多く得た解析方法は、ユーザが注意を
払っている解析結果が多いものと判断できるので、その
解析方法の尤度を高めることができる。

【００８６】つぎに、環境解析対象データを格納する、
環境解析対象データ記憶部を備える例について図８を用
いて説明する。

【００８７】環境解析対象データ記憶部１１は、環境解
析対象データ入力部４から入力される環境解析対象デー
タを格納する。ここに格納された環境解析対象データ
は、必要に応じて取り出され、環境情報解析部５におい
て解析、構造化が行われる。

【００８８】システムにいったん入力された環境解析対
象データの解析を行うことにより、ハードウェアの処理
能力に比較して複雑な解析をオフラインで行ったり、既
に得ている環境情報が十分でない場合に再解析すること
が可能になる。すなわち、環境情報を得るための環境解
析対象データの解析において、解析によって何を取り出
すか（解析結果）やどの様に解析するか（必要なパラメ
ータ設定を含む解析方法）はあらかじめ決めておく必要
があるが、検索時の目的によっては、既に得ている解析
結果や解析方法が十分でない場合もありうる。環境解析
対象データをシステム内部に記憶しておき、解析方法や
得たい解析結果を設定し直すことにより、必要に応じた
環境情報を得ることができる。

【００８９】次に、上述した具体例について詳しく説明
する。

【００９０】まず、第１の発明について説明する。第１
の発明は、文書等のデータを作成、検索を行った際に、
このデータのＩＤと、このデータの作成、検索を行った
位置の位置情報とを対応づけて記憶し、この位置情報で
所望のデータを抽出する検索装置に関してである。例え
ば、位置情報としては、ユーザの行動履歴を収集できる
ＧＰＳを用いたり、データの抽出は、地図、部屋の見取
り図の情報に基づいて行うものである。以下に、詳しく
説明する。 ・実施例１ 検索対象は文書（データ）として行う。

【００９１】本発明の文書検索装置は小型携帯型の装置
である。図９に、本発明の装置を構成するための機器の
構成を図示する。本発明に基づく制御や処理を行う中央
処理手段１０１、プログラム並びにデータを格納する半
導体メモリ、磁気ディスク、光ディスク、ＣＤーＲＯ
Ｍ、ＩＣカードなどの記憶手段１０２、検索結果の表示
や文書内容の表示を行うための液晶ディスプレイやプラ
ズマディスプレイなどの表示手段１０４、およびその制
御を行う表示コントローラ１０３、利用者の検索命令の
入力を行うキーボードやマウスなどの入力手段１０６、
およびその制御を行う入力コントローラ１０５、ＧＰＳ
アンテナ、赤外線受信機などの通信手段１０７からな
る。

【００９２】図１０に、本実施例の機能構成を図示す
る。本実施例は、文書データなどを格納しておく文書デ
ータ格納部２５、文書を検索するための検索命令を入力
するための入力部２０、検索命令に従って文書を検索す
るための検索部２３、検索結果を表示するための検索結
果表示部２２、計算機装置本体の存在する位置を計測す
るための位置測定部２４、計測された位置の情報と検索
された文書の名前などを格納しておく位置文書情報格納
部２６、計測された位置の情報と位置を表現する場所名
とを格納しておく場所名格納部２７、およびこれらの各
構成要素を制御するための制御部２１からなる。

【００９３】図１１に、文書データ格納部内の文書デー
タの形式とその一例を示す。文書データは、文書名とそ
の文書のデータが格納されているファイルの文書ＩＤと
の対からなる。図１１では、file8, file11, file23 な
どが文書ＩＤを表現している。また、文書名は例えばJI
S コードの順に並べられている。なお、文書データ格納
部は、図９の記憶手段１０２の上に実現されており、Ｃ
ＤーＲＯＭやＩＣカードなどの場合のように取り替えて
利用できるようにすることができる。

【００９４】まず、第一に特定の文書を検索した場合の
処理について述べ、第二に任意の場所の名前の設定につ
いて述べ、第三に場所名を用いて過去に閲覧、修正、作
成した文書を検索する処理について述べる。

【００９５】第一に、利用者がキーボードなどにより検
索したい文書の名前を入力部から入力し、図示しないウ
ィンドウ上の“検索”をマウスなどで指定するか、ある
いはキーボード上の“検索”キーを押下する。この場合
の制御部２１の処理の流れを図１２に示し、検索部２３
の処理の流れを図１３に示す。

【００９６】制御部２１は、“検索”が選択されると、
入力部２０から入力文字列を受け取り（処理４０１）、
検索部２３を起動し（処理４０２）、検索部に入力文字
列を転送する（処理４０３）。検索部２３は、制御部２
１から転送された入力文字列を用いて、文書データを検
索する（処理５０１）。該当する文書名が存在した場合
に、得られた文書ＩＤを制御部に転送する（処理５０
３）。制御部２１は、検索部２３から転送された文書名
と文書ＩＤを受けとり（処理４０４）、検索結果表示部
２２を起動し（処理４０５）、検索結果表示部２２に検
索結果を転送する（処理４０６）。検索結果表示部２２
は、検索結果表示部ウィンドウを生成し、当該ウィンド
ウに文書データの内容を表示する。利用者はこのように
して文書を閲覧することができる。なお、閲覧だけでな
く、文書の修正を行なえるようにすることは容易であ
る。

【００９７】一方、検索部２３は位置測定部２４を起動
する（処理５０４）。位置測定部２４は当該の計算機が
位置する地点の緯度と経度を算出し、算出した緯度と経
度からなる位置情報を検索部２３へ転送し、検索部２３
は当該の位置情報を受け取る（処理５０５）。位置計測
の方法については本発明の主旨ではなく、例えば測位衛
星を利用したＧＰＳ（グローバル・ポジショニング・シ
ステム）の方法（「カーナビゲーションシステム」山口
隆他、東芝レビュー、Vol.48, No.2、１９９３年）など
を用いればよい。ＧＰＳの場合には、測位衛星を利用で
きる野外で位置を計測することができる。

【００９８】検索部２３は、位置測定部２４から転送さ
れた位置情報と、検索された文書の文書ＩＤとを対応づ
けて位置文書情報格納部２６に格納する（処理５０
６）。図１４に、位置文書情報格納部２６内のデータ形
式とデータの一例を示す。ここでは、検索された文書の
文書ＩＤを格納したが、複数の文書が検索された場合な
どに、利用者が検索結果表示部において利用者が選択し
て内容を表示した文書のみの文書ＩＤを格納するように
することもできる。

【００９９】以上は、利用者が既存の文書を検索して閲
覧、修正する場合を説明したが、利用者は新規に文書を
入力作成してもよい。この場合、入力部は利用者の入力
を文書データ格納部２５の中に格納し、文書ＩＤと利用
者が設定した文書名を格納する。さらに、文書ＩＤを制
御部２１へ転送する。制御部２１は検索部２３を起動
し、文書ＩＤを転送する。検索部２３は、図１６に示す
ように、制御部から文書ＩＤを受け取り（処理１６０
１）、位置測定部２４を起動する（処理１６０２）。位
置測定部２４から位置情報を受け取る（処理１６０３）
と、位置情報と文書ＩＤを位置文書情報格納部２６に格
納する（処理１６０４）。

【０１００】第二に、利用者は、任意の場所で、当該の
場所を表現する名前を入力部２０から入力し、図示しな
いウィンドウ上の“場所登録”をマウスなどで指定する
か、あるいはキーボード上の“場所登録”キーを押下す
る。この場合の制御部の処理の流れを図１５に示し、位
置測定部の処理の流れを図１４に示す。

【０１０１】制御部は、“場所登録”が選択されると、
入力部２０から入力文字列を受け取り（処理７０１）、
位置測定部２４を起動し（処理７０２）、入力文字列を
位置測定部２４へ転送する（処理７０３）。

【０１０２】位置測定部２４は、転送された入力文字列
を受け取る（処理１４０１）。次に、当該の計算機が位
置する地点の緯度と経度を算出し（処理１４０２）、転
送された入力文字列と、算出した緯度と経度からなる位
置情報とを対応づけて場所名格納部２７に格納する（処
理１４０３）。図１６に、場所名格納部内のデータ形式
とデータの一例を示す。

【０１０３】第三に、利用者が任意の時間や場所で、図
示しないウィンドウ上の“場所検索”をマウスなどで指
定するか、あるいはキーボード上の“場所検索”キーを
押下する。

【０１０４】図１７に、この場合の制御部の処理の流れ
を示す。制御部２１は、検索結果表示部２２を起動する
（処理９０１）。図１８に、検索結果表示部２２の処理
の流れを示す。検索結果表示部２２は、場所名格納部２
７からすべての場所名を取り出し（処理１００１）、取
り出したすべての場所名を検索結果表示部用ウィンドウ
に表示し（処理１００２）、利用者が表示された場所名
の中からマウス等により場所名を選択するのを待つ（処
理１００３）。図１９に、検索結果表示部用ウィンドウ
における表示の一例を示す。図１９において、黒塗りの
部分は利用者が選択したことを示している。検索結果表
示部２２は、選択された場所名に対応する位置情報を場
所名格納部２７から取り出し（処理１００４）、取り出
した位置情報を制御部２１へ転送する（処理１００
５）。

【０１０５】制御部２１は、検索結果表示部２２から位
置情報を受け取る（処理９０２）と、検索部２３を起動
し（処理９０３）、検索部２３に位置情報を転送する
（処理９０４）。図２０に、検索部２３の処理の流れを
示す。検索部２３は、制御部２１から転送された位置情
報を用いて位置文書情報格納部２６を検索する（処理１
２０１）。

【０１０６】この検索処理の詳細を図２３に示す。図２
３に示すように、緯度と経度の一致は、完全一致ではな
く、所定の値の範囲内にあるかどうかで判定する。該当
する文書ＩＤが検索された場合、当該の位置文書情報中
の文書ＩＤを用いて文書データ格納部２５を検索する
（処理１２０３）。検索された文書名と文書ＩＤを制御
部に転送する（処理１２０４）。制御部２１は、転送さ
れた文書名と文書ＩＤを受けとり（処理９０５）、検索
結果表示部２２へ転送する（処理９０６）。

【０１０７】検索結果表示部２２は、制御部２１から文
書名と文書ＩＤを受けとり（処理１００６）、検索結果
表示部用ウィンドウに表示する（処理１００７）。文書
ＩＤが一つであれば、文書名と文書ＩＤの文書の内容を
表示し、文書ＩＤが複数であれば、図２１のように文書
名を一覧表示する。後者の場合、利用者は表示された文
書名から必要な文書名を選択することができる。検索結
果表示部は、利用者が選択した文書名に対応する文書Ｉ
Ｄの文書の内容を検索結果表示部用ウィンドウに表示す
る。

【０１０８】なお、図１９の表示の段階で、すべての場
所名について、それぞれに対応する文書名を同時にすべ
て表示するようにすることは可能である。具体的には、
利用者が選択した場所の位置情報だけではなく、場所名
格納部内のすべての場所名の位置情報について、図２０
の処理を行なえばよい。

【０１０９】また、次に説明するように、所定の条件
で、利用者が閲覧、修正、作成した文書や作成した文書
すべてについて当該文書の位置情報に対応する場所名が
設定されているか否かのチェックを行ない、対応する場
所名が設定されていない文書が存在する場合に、利用者
に場所名の登録を促すようにすることができる。この処
理について、図２５に制御部の処理の流れを示す。

【０１１０】制御部２１は、利用者が閲覧、修正、作成
した文書の数が所定の数を越えた場合に、検索結果表示
部２２を起動する（処理１７０２）。図２６に、検索結
果表示部２２の処理の流れを示す。検索結果表示部２２
は、場所名格納部２７のすべての位置情報を取り出し
（処理１８０１）、制御部２１へ転送する（処理１８０
２）。制御部２１は、検索結果表示部２２から位置情報
を受け取り（処理１７０３）、検索部２３を起動し（処
理１７０４）、当該の位置情報を転送する（処理１７０
５）。

【０１１１】図２７に示すように、検索部２３は制御部
２１から転送された位置情報を受け取り（処理１９０
１）、当該の位置情報で位置文書情報格納部２６を検索
する（処理１９０２）。位置文書情報格納部２６の位置
情報の中に、転送された位置情報，すなわち場所名が登
録されている位置情報から，所定の範囲内にない位置情
報がある場合に、当該の位置情報の文書ＩＤで文書デー
タ格納部２５を検索する（処理１９０４）。検索された
文書名と文書ＩＤ、および位置情報を制御部２１へ転送
する（処理１９０５）。

【０１１２】制御部２１は、検索部２３から転送された
文書名と文書ＩＤ、および位置情報を検索結果表示部２
２へ転送する（処理１７０６）。検索結果表示部２２
は、制御部２１から文書名と文書ＩＤ、および位置情報
を受け取り（処理１８０３）、当該の位置情報に最も近
い位置情報の場所名を場所名格納部２７から取り出し
（処理１８０４）、検索結果表示部用ウィンドウに、場
所名の登録を促すメッセージと、当該の文書名と場所名
格納部２７から取り出したそれに最も近い場所名を表示
する（処理１８０５）。

【０１１３】図３１に検索結果表示部用ウィンドウの表
示の一例を示す。利用者が場所名を入力した場合、入力
された場所名で場所名格納部２７を検索する（処理１８
０７）。一致する場所名がない場合、入力された場所名
と対応する文書の位置情報を場所名格納部２７に格納し
（処理１８０９）、表示している文書の中で、格納した
位置情報の所定の範囲に入らない位置情報の文書があれ
ば、さらに当該の文書の文書名と最も近い場所名を再表
示する（処理１８１１）。図３２に，図３１の表示に対
して利用者が場所名を登録した後の表示の例を示す．本
実施例では、位置計測の方法としてＧＰＳを用い緯度と
経度を測定しその情報を格納したが、位置測定の方法は
ＧＰＳに限らない．例えば，赤外線送受信機を用いるこ
ともできる。具体的には，例えば異なる敷地や構内のビ
ルや家屋、あるいは同一の敷地や構内の異なるビルや、
家屋、フロアにおいて、会議室や作業場など任意の場所
に、当該の場所に固有のビットパターンを発振する赤外
線送信機を設置する。この場合、本実施例における位置
測定手段には赤外線受信機を用い、緯度と経度を測定す
る代わりに赤外線送信機が発するビットパターンを受信
し、場所名や部屋名を設定すればよい。このようにし
て、本実施例と同様の処理を行なうことができる。

【０１１４】また、本実施例では検索の処理において、
表示された場所名を選択する方法を説明したが、場所名
を入力して検索してもよい。具体的には、場所名を入力
し、入力された場所名と場所名格納部２７内の場所名と
を照合し、一致する場所名が存在する場合に、当該の場
所名の緯度と経度の値で位置文書情報格納部２６を検索
し、所定の値の範囲内にある経度と緯度の値の文書ＩＤ
の文書を表示すればよい。

【０１１５】また、緯度と経度の値を入力して検索して
もよい。具体的には、緯度と経度の値を入力し、入力さ
れた緯度と経度の値で位置文書情報格納部２６を検索
し、所定の値の範囲内にある経度と緯度の値の文書ＩＤ
の文書を表示すればよい。このとき、入力された緯度と
経度の値で場所名格納部を検索し、所定の値の範囲内に
ある経度と緯度の値の場所名を同時に表示することもで
きる。

【０１１６】また、本実施例では場所名と文書名を記憶
し表示したが、同時に時刻も計測し、場所名、文書名と
時刻を組み合わせて格納してもよい。この場合、場所名
ごとに時刻とともに文書名を表示することができる。

【０１１７】本実施例では、文書の閲覧，修正，作成の
場合について説明したがそれらに限るものではない．例
えば，携帯電話機と組み合わせて，電話を使用した位置
の情報を格納し，どこでどこへあるいは誰と通話したか
を後で検索できるようにすることができる．また，電子
スチールカメラやビデオレコーダーなどと組み合わせ
て，写真やビデオを撮った位置の情報を格納し，どこで
何を撮影したかを後で検索できるようにすることができ
る．また，自動車などの乗り物や移動物に登載し，移動
中の位置の情報を格納し，どこを通ったかを後で検索で
きるようにすることができる． ・実施例２ 本実施例の機器構成は、図９と同じであるので説明を省
略する。図２８に、機能構成を示す。実施例１では、場
所名の登録は、文書の閲覧、修正、作成と独立であっ
た。本実施例では、利用者が文書を閲覧、修正、作成し
たときに、既に登録された場所名があるかを検査し、な
ければ場所名の登録を促す。

【０１１８】図２９に利用者が文書を閲覧、修正する場
合の検索部２３の処理の流れを示し、図３０に利用者が
文書を作成する場合の検索部の処理の流れを示す。図２
９に示すように、処理２１０７により既に登録された場
所名があるかを検査し、なければ処理２１０９等により
場所名の登録を促す。同様に、図３０に示すように、処
理２２０５により既に登録された場所名があるかを検査
し、なければ処理２２０７等により場所名の登録を促
す。 ・実施例３ 実施例１では，文書検索装置が位置を測定する手段を有
していたが，本実施例では，文書を閲覧，修正，作成す
る手段と情報を送信する手段を有する小型携帯型第一の
装置と、情報を受信する手段と検索を行なう手段を有す
る第二の装置からなる．本実施例の第一の装置と第二の
装置の機器構成は図９と同じである．ただし，通信手段
１０７は，第一の装置では赤外線送信機などであり，第
二の装置では赤外線受信機などである．図３３に、本実
施例の第一の装置の機能構成を図示する。第一の装置
は、文書データなどを格納しておく文書データ格納部２
５、文書を検索するための検索命令を入力する入力部２
０、検索命令に従って文書を検索するための検索部２
３、検索結果を表示するための検索結果表示部２２、時
刻を計時する計時部２９、時刻データおよび検索結果の
文書の文書ＩＤと文書名を格納する操作履歴格納部３
１、第一の装置の存在を通知するための通信部３０、操
作履歴格納部３１内のデータを出力するための出力部２
８、およびこれらの各構成要素を制御するための制御部
２１からなる。

【０１１９】図３４に、本実施例の第二の装置の機能構
成を図示する。第二の装置は、データの入力および文書
を検索するための検索命令を入力する入力部２０、検索
命令に従って検索するための検索部２３、検索結果を表
示するための検索結果表示部２２、第一の装置から送信
される情報を受信するための通信部３０、第一の装置か
ら送信された情報などを格納する位置操作情報格納部３
２、位置を表現する場所名を格納しておく場所名格納部
２７、およびこれらの各構成要素を制御するための制御
部２３からなる。

【０１２０】図３３における第一の装置の文書データ格
納部２５内のデータの形式は図１１と同じである。

【０１２１】図３３における第一の装置の制御部の処理
の流れは図１２と同じである。

【０１２２】図３５に、図３３における第一の装置の検
索部２３の処理の流れを図示する。検索部２３は、制御
部２１から転送された入力文字列を用いて、文書データ
を検索する（処理２７０１）。該当する文書名が存在し
た場合に、当該の文書の文書ＩＤを制御部２１に転送し
（処理２７０３）、計時部３０からその時の時刻のデー
タを受け取る（処理２７０４）。さらに、通信部３０を
起動し（処理２７０５）、通信部３０へ当該の時刻デー
タを転送する（処理２７０６）。起動された通信部３０
は、第一の装置を操作している利用者のユーザＩＤと転
送された時刻データを送信する。図３６に、通信部３０
が送信するデータの形式とその例を示す。検索部２３は
最後に、時刻データおよび検索された文書の文書ＩＤと
文書名を操作履歴格納部３１に格納する（処理２７０
７）。図２９に、操作履歴格納部３１内のデータの形式
とその例を示す。なお、ここでは、検索された文書の文
書ＩＤと文書名を格納したが、複数の文書が検索された
場合などに、利用者が検索結果表示部において利用者が
選択して内容を表示した文書のみの文書ＩＤを格納する
ようにすることもできる。

【０１２３】以上は、利用者が既存の文書を検索して閲
覧、修正する場合を説明したが、利用者は新規に文書を
入力作成してもよい。この場合、入力部は利用者の入力
を文書データ格納部２５の中に格納し、文書ＩＤと利用
者が設定した文書名を格納する。さらに、文書ＩＤを制
御部へ転送する。制御部２１は検索部２３を起動し、文
書ＩＤを転送する。検索部２３は、図３８に示すよう
に、制御部２１から文書ＩＤを受け取り（処理３００
１）、計時部２９から時刻データを受け取る（処理３０
０２）。さらに、通信部３０を起動し（処理３００
３）、通信部３０へ時刻データを転送する（処理３００
４）。最後に、時刻データおよび入力作成された文書の
文書ＩＤと文書名を操作履歴格納部３１に格納する（処
理３００５）。

【０１２４】第二の装置では、任意の第一の装置から送
信されたデータを受信した場合の処理と、場所名を用い
て過去に閲覧、修正、作成した文書を検索する処理を行
う。なお、第二の装置の通信部はそれぞれが設置されて
いる場所の場所ＩＤを付与されている。

【０１２５】任意の通信部ｉが任意の第一の装置が送信
したデータを受信すると、制御部２１は、受信したデー
タと通信部ｉ３０に付与されている場所ＩＤとを対にし
て位置操作情報格納部３２に格納する。図３９に、位置
操作情報格納部３２内のデータの形式と、当該の処理が
行われた直後のデータの例を＜例１＞に示す。＜例１＞
では、文書ＩＤと文書名はまだ設定されていない。後に
説明する処理で設定される。

【０１２６】次に、場所名を用いて文書を検索する処理
について説明する。利用者は、まず第一の装置の操作履
歴格納部３１内のデータを、第一の装置の出力部から第
二の装置の入力部２０へ入力する。具体的には、例えば
第一の装置の出力部と第二の装置の入力部をコードで接
続し、第二の装置の図示しないウィンドウ上の“操作履
歴入力”をマウスなどで指定するか、あるいはキーボー
ド上の“操作履歴入力”キーを押下する。このとき、コ
ードによる接続ではなく、光通信でもよい。第二の装置
の制御部２１は、“操作履歴入力”が選択されて、第一
の装置の操作履歴格納部３１内のデータが入力される
と、入力されたデータを検索部２３へ転送する。

【０１２７】検索部２３は、転送されたすべてのデータ
について、図４０の処理を行う。すなわち、転送された
第一の装置の操作履歴格納部３１のすべてのデータにつ
いて、第二の装置の位置操作情報格納部３２内のデータ
を検索し、ユーザＩＤと時刻が一致する場合に、当該の
操作履歴格納部３１のデータ内の文書ＩＤと文書名の並
びを当該の位置操作情報格納部３２内のデータに追加す
る。図３９の＜例２＞は、当該の処理が行われた直後の
データの例を示している。

【０１２８】次に利用者は、次に第二の装置の図示しな
いウィンドウ上の“場所検索”をマウスなどで指定する
か、あるいはキーボード上の“場所検索”キーを押下す
る。第二の装置の制御部２１は、“場所検索”が選択さ
れると、検索部２３を起動する。検索部２３は、位置操
作情報格納部３２から、利用者のユーザＩＤと一致する
データを取り出す。取り出したデータの場所ＩＤで、場
所名格納部２７を検索し、場所ＩＤを場所名格納部２７
に格納された場所名に置き換える。図４１に、場所名格
納部２７内のデータの形式とその例を示す。検索部２３
はそれらの検索結果を制御部２１へ転送する。制御部２
１は、検索結果表示部２２を起動し、当該の検索結果を
検索結果表示部２２へ転送する。検索結果表示部２２
は、当該の検索結果を検索結果表示部用ウィンドウに表
示する。図４２に、検索結果表示部用ウィンドウにおけ
る表示の一例を図示する。 ・実施例４ 実施例３では，第一の装置の通信手段は赤外線送信機な
どで送信するだけであり、第二の装置の通信手段は赤外
線受信機などで受信するだけであった。本実施例では，
第一の装置および第二の装置の通信手段は、赤外線送受
信機などであり送信と受信を行なう。

【０１２９】本実施例の第一の装置と第二の装置の機器
構成は図９と同じである．ただし、通信手段１０７は，
赤外線送受信機などである。

【０１３０】図４３に、本実施例の第一の装置の機能構
成を図示する。第一の装置は、文書データなどを格納し
ておく文書データ格納部２５、文書を検索するための検
索命令を入力する入力部２０、検索命令に従って文書を
検索するための検索部２３、検索結果を表示するための
検索結果表示部２２、時刻を計時する計時部２９、さら
に、時刻データ、場所ＩＤおよび検索結果の文書の文書
ＩＤと文書名を格納する操作履歴格納部３１、場所ＩＤ
に対応する場所名を格納しておく場所名格納部２７、第
一の装置の存在を第二の装置に通知し、第二の装置から
場所ＩＤを受信するための通信部３０、およびこれらの
各構成要素を制御するための制御部２１からなる。

【０１３１】図４４に、本実施例の第二の装置の機能構
成を図示する。第二の装置は、第一の装置から送信され
る情報を受信し、場所ＩＤを送信するための通信部３
０，受信したデータと場所ＩＤとを格納する送受信記憶
部３３、およびこれらの各構成要素を制御するための制
御部２１からなる。

【０１３２】図４３における第一の装置の文書データ格
納部２５内のデータの形式は図１１と同じである。

【０１３３】図４３における第一の装置の制御部２１の
処理の流れは図１２と同じである。図４５に、図４３に
おける第一の装置の検索部２３の処理の流れを図示す
る。検索部２３は、制御部から転送された入力文字列を
用いて、文書データを検索する（処理３７０１）。該当
する文書名が存在した場合に、当該の文書の文書ＩＤを
制御部２１に転送し（処理３７０３）、計時部２９から
その時の時刻のデータを受け取る（処理３７０４）。さ
らに、通信部３０を起動し（処理３７０５）、通信部３
０へ当該の時刻データを転送する（処理３７０６）。起
動された通信部は、第一の装置を操作している利用者の
ユーザＩＤと転送された時刻データを送信する。通信部
３０が送信するデータの形式とその例は図３６と同じで
ある。なお、図３６では、通信部３０が送信するデータ
はユーザＩＤと時刻データからなるが、ユーザＩＤの
み、時刻データのみ、あるいは他のデータでもよい。要
するに、第一の装置の存在を第二の装置に通知できれば
よい。

【０１３４】通信部３０は、さらに第二の装置の通信部
３０から送信される場所ＩＤを受信し、検索部２３へ転
送する。検索部２３は、転送された場所ＩＤを受け取る
（処理３７０７）。検索部２３は最後に、場所ＩＤを、
時刻データおよび検索された文書の文書ＩＤと文書名と
ともに操作履歴格納部３１に格納する（処理３７０
８）。図４６に、操作履歴格納部３１内のデータの形式
とその例を示す。なお、ここでは、検索された文書の文
書ＩＤと文書名を格納したが、複数の文書が検索された
場合などに、利用者が検索結果表示部において利用者が
選択して内容を表示した文書のみの文書ＩＤを格納する
ようにすることもできる。

【０１３５】以上は、利用者が既存の文書を検索して閲
覧、修正する場合を説明したが、利用者は新規に文書を
入力作成してもよい。この場合、入力部は利用者の入力
を文書データ格納部２５の中に格納し、文書ＩＤと利用
者が設定した文書名を格納する。さらに、文書ＩＤを制
御部２１へ転送する。制御部２１は検索部２３を起動
し、文書ＩＤを転送する。検索部２３は、図４７に示す
ように、制御部２１から文書ＩＤを受け取り（処理３９
０１）、計時部２９から時刻データを受け取る（処理３
９０２）。さらに、通信部３０を起動し（処理３９０
３）、通信部３０へ時刻データを転送する（処理３９０
４）。起動された通信部３０は、第一の装置を操作して
いる利用者のユーザＩＤと転送された時刻データを送信
し、さらに第二の装置の通信部３０から送信される場所
ＩＤを受信し検索部２３へ転送する。検索部２３は、転
送された場所ＩＤを受け取る（処理３９０５）。検索部
２３は最後に、場所ＩＤを、時刻データおよび入力作成
された文書の文書ＩＤと文書名とともに操作履歴格納部
３１に格納する（処理３９０６）。

【０１３６】第二の装置の通信部３０はそれぞれが設置
されている場所の場所ＩＤを付与されている。第二の装
置の任意の通信部ｉ３０が任意の第一の装置が送信した
データを受信すると、制御部２１は、受信したデータと
通信部ｉ３０に付与されている場所ＩＤとを送受信記憶
部３３に格納し、通信部ｉ３０から場所ＩＤを送信す
る。

【０１３７】次に、場所名を用いて文書を検索する処理
について説明する。利用者は、第一の装置の図示しない
ウィンドウ上の“場所検索”をマウスなどで指定する
か、あるいはキーボード上の“場所検索”キーを押下す
る。第一の装置の制御部２１は、“場所検索”が選択さ
れると、検索部２３を起動する。検索部２３は、位置操
作情報格納部３２からデータを取り出す。取り出したデ
ータの場所ＩＤで、場所名格納部２７を検索し、場所Ｉ
Ｄを場所名格納部２７に格納された場所名に置き換え
る。場所名格納部２７内のデータの形式とその例は図４
１と同じである。検索部２３はそれらの検索結果を制御
部２１へ転送する。制御部２１は、検索結果表示部２２
を起動し、当該の検索結果を検索結果表示部２２へ転送
する。検索結果表示部２２は、当該の検索結果を検索結
果表示部用ウィンドウに表示する。第一の装置の検索結
果表示部用ウィンドウにおける表示の一例は図４２と同
じである。

【０１３８】本実施例では、時刻を計測し、時刻デー
タ、場所ＩＤ、および文書の文書ＩＤと文書名を記憶、
表示したが、時刻を計測せず、場所ＩＤおよび文書の文
書ＩＤと文書名のみを記憶、表示してもよい。

【０１３９】また、第一の装置と第二の装置とで場所Ｉ
Ｄを送受信したが、場所名を送受信するようにしてもよ
い。この場合には、場所名格納部２７は必要でない。 ・実施例５ 実施例３では，第一の装置の赤外線送信機などの通信手
段により送信を行ない、第二の装置の赤外線受信機など
の通信手段３０により受信を行なった。本実施例では，
逆に第一の装置が赤外線受信機などの通信手段３０によ
り受信を行ない、第二の装置が赤外線送信機などの通信
手段３０により送信を行なう。

【０１４０】本実施例の第一の装置と第二の装置の機器
構成は図９と同じである．ただし、通信手段１０７は，
第一の装置では赤外線受信機などであり，第二の装置で
は赤外線送信機などである．本実施例の第一の装置の機
能構成は実施例４の図４３と同じである．ただし、通信
部３０は、第二の装置から場所ＩＤを受信することのみ
を行なう。

【０１４１】図４８に、本実施例の第二の装置の機能構
成を図示する。第二の装置は、場所ＩＤを送信するため
の通信部３０，送信した場所ＩＤを格納する送信記憶部
３３およびこれらの各構成要素を制御するための制御部
２１からなる。

【０１４２】第一の装置の文書データ格納部２５内のデ
ータの形式は図１１と同じである。第一の装置の制御部
２１の処理の流れは図１２と同じである。

【０１４３】第一の装置の検索部２３の処理の流れは、
実施例４における第一の装置の検索部２３の処理の流れ
と同じである。ただし、第二の装置の通信部は常にまた
は一定間隔で場所ＩＤを送信しており、図４５の処理３
７０６および図４７の処理３９０４の処理は行なわな
い。

【０１４４】その他、第一の装置の文書データ格納部２
５内のデータの形式や、第一の装置の制御部２１の処理
の流れ、操作履歴格納部３１内のデータの形式、場所名
格納部２７内のデータの形式などは実施例４と同じであ
る。 ・実施例６ 実施例１から実施例５までは、過去に閲覧、修正、作成
した文書について位置の情報により、任意の場所で当該
の文書を検索できるようにした。また、実施例１、実施
例２、実施例４および実施例５では、計算機が計算機自
身の位置を知ることができた。

【０１４５】本実施例では，計算機の位置の情報と、過
去に閲覧、修正、または作成した文書の位置の情報とを
照合し、一致した位置の情報の文書を表示する。

【０１４６】実施例１と実施例２に対応する実施例の検
索部２３の処理の流れを図４９に示す。

【０１４７】実施例４と実施例５に対応する本実施例の
検索部２３の処理の流れを図５０に示す。図５０におい
ては、場所ＩＤだけでなく、一日の時刻を照合すること
によって、例えば、同じ会議室で午前と午後で異なる会
議が行われる場合にそれぞれに該当する議事録を開くこ
とができる。なお、さらに曜日を記憶し照合するように
拡張することは容易である。

【０１４８】その他、制御部２１の処理の流れや、各デ
ータの形式などはそれぞれ実施例１、実施例２、実施例
４および実施例５と同じであるので、ここでの説明は省
略する。 ・実施例７ 実施例１において図１１と図１３に示した検索結果表示
部２２の表示および実施例３において図３４に示した検
索結果表示部２２の表示では、場所の情報については場
所の名称を表示するのみであった。本実施例では、場所
の名称だけではなく、画像を表示する。

【０１４９】本実施例の機能構成は実施例１の図１０と
同じであり、検索結果表示部２２は地図データベースを
有する。検索結果表示部２２の処理の流れは図１０と同
じである。図５１に、図１０における処理１００２の表
示処理の詳細を示す。図５２に、検索結果表示部用ウィ
ンドウの表示の一例を図示する。図５２の(a) は日本地
図を表示した例であり、(b) は世界地図を表示した例で
ある。ここで、検索結果表示部２２は、検索結果表示部
用ウィンドウのＸ座標とＹ座標が経度と緯度に対応する
ように表示している。さらに、図５３に、図５２(a) に
おいて「研究所（神戸）」が選択された後の表示の例を
図示する。その他の処理などについては、実施例１と同
じであるのでここでの説明は省略する。なお、実施例１
と同様にして、図５２の表示の段階で、すべての場所名
の位置に、それぞれに対応する文書名を同時に表示する
ようにすることは可能である。また、いずれの場合も、
文書名を所定の数だけ表示し、所定の数を越える文書が
存在する場合には、マウスなどの指定により他の文書名
を表示するようにすることができる。

【０１５０】実施例３や実施例４についても同様に、検
索結果表示部２２が地図データベースを有し、表示処理
を行なうことができる。図５４に、検索結果表示部用ウ
ィンドウの一例を図示する。図５４の(a) は会社組織の
部所名を表す文字列とともに、それらに対応付けて場所
名、文書名、および時刻を表示している。この場合の地
図データベース内のデータの形式と一例を図５５に示
す。図５４の(a) では、図５５の組織のレベルの数値の
順に当該組織名を木構造の形で表示している。図５４の
(b) では、場所名を場所の映像と対応付けて表示してい
る。場所の映像の表示と、場所名との対応付けはコンピ
ュータグラフィックスの技術を用いればよい。

【０１５１】また、ある一定区域の場所中の文書はひと
まとまりとして表示し、当該の場所が選択された場合に
各文書の位置に表示することが可能である。例えば、世
界地図での表示において、日本国内の文書をまとめて一
つの位置に表示し、この位置がマウスなどで指定される
と、世界地図のかわりに日本地図を表示し、その各文書
を当該日本地図上の各地の該当する位置に表示する。あ
るいは、例えば、会社の全社組織図の表示において、本
社の文書をまとめて一つの位置に表示し、この位置がマ
ウスなどで指定されると、全社組織図のかわりに本社組
織図を表示し、その各文書を当該本社組織図上の該当す
る位置に表示する。

【０１５２】なお、以上の実施例では位置の情報を検索
キーとして文書を検索する方法を説明したが、逆に、利
用者が表示した文書について、その文書が閲覧、修正、
あるいは作成された位置の情報を表示することにより、
利用者がその文書の内容や過去に閲覧、修正、あるいは
作成したいきさつなどを思い出す手がかりに用いること
ができる。具体的には、検索された文書の文書ＩＤで位
置文書情報格納部２６または操作履歴格納部３１を検索
し、当該文書ＩＤの緯度と経度または場所ＩＤに従って
場所名を表示すればよい。

【０１５３】また、以上の実施例では文書を検索した
が、検索の対象を文書に限るものではない。例えば、プ
ログラムなどでもよい。例えばプログラムの場合には、
具体的には文書ＩＤと文書の代わりにプログラムＩＤと
プログラムを用いればよい。 ・実施例８ 以上の実施例では装置の位置の情報を検索の手がかりと
した。本実施例では、文書中に含まれている住所などの
情報を利用して文書群を表示し、文書の検索を容易にす
る。

【０１５４】本実施例の機器構成は図９と同じである。

【０１５５】図５６に、本実施例の機能構成を図示す
る。本実施例は、文書データなどを格納しておく文書デ
ータ格納部２５、文書データの表示命令や検索命令を入
力するための入力部２０、検索命令に従って文書を検索
するための検索部２３、文書データや検索結果を表示す
るための表示部３４、文書データや検索結果の表示のた
めに用いられる地図データベース３６と位置データベー
ス３７およびこれらの各構成要素を制御するための制御
部２１からなる。

【０１５６】まず、図５７に示すように、文書に筆者の
住所が書かれている場合について説明する。住所の抽出
については、後段で詳しく説明するが、文書章枠認識を
利用し、第一文書枠内の文字列を解析すればよい。解析
の方法は機械翻訳システムなどで用いられている方法を
用いればよい。このように文書から筆者の住所が抽出さ
れて、図５８に示すように、文書ＩＤと住所が文書デー
タ格納部に格納されている。

【０１５７】図５９に、位置データベースの形式とその
一例を示す。

【０１５８】表示部３４は検索された文書について、各
文書の住所を位置データベース３７中の住所と照合し、
文書の住所を構成する住所が位置データベース３７中に
存在する場合に、当該の緯度と経度の値を文書に付与す
る。その後、地図データベース３６内の地図を表示し、
文書の緯度と経度の値に対応する座標位置に文書名を表
示する。また、検索された文書だけではなく、文書デー
タ格納部２５内のすべての文書を表示することは可能で
ある。このとき、実施例７と同様にして、文書名を所定
の数だけ表示し、所定の数を越える文書が存在する場合
には、マウスなどの指定により他の文書名を表示するよ
うにすることができる。

【０１５９】次に、図６０に示すように、文書に筆者の
所属機関または所属部所名のみが書かれている場合につ
いて説明する。所属機関または所属部所名の抽出は上記
の説明のように行なうことができる。図６１に、文書デ
ータ格納部２５の形式とその例を示す。

【０１６０】図６２に、位置データベース３７の形式と
その一例を示す。

【０１６１】表示部３４は検索された文書について、各
文書の筆者の所属機関または所属部所名を位置データベ
ース３７中の所属機関または部所名と照合し、一致する
所属機関または部所名が存在する場合に、当該の緯度と
経度の値を文書に付与する。その後、地図データベース
３６内の地図を表示し、文書の緯度と経度の値に対応す
る座標位置に文書名を表示する。また、検索された文書
だけではなく、文書データ格納部２５内のすべての文書
を表示することは可能である。このとき、実施例７と同
様にして、文書名を所定の数だけ表示し、所定の数を越
える文書が存在する場合には、マウスなどの指定により
他の文書名を表示するようにすることができる。

【０１６２】また、実施例７と同様に、ある一定区域の
場所中の文書はひとまとまりとして表示し、当該の場所
が選択された場合に各文書の位置に表示することが可能
である。

【０１６３】また、住所と同様に、文書のタイトル部分
などに書かれている作成日付、発表日付、あるいは発行
日付を抽出して、図６３に示すように日付と文書の一覧
を表示することができる。同様に、複数の文書データ格
納部２５がある場合に、図６４に図示するように文書が
存在した文書データ格納部２５に付与された日付、文書
データ格納部２５の名称および文書名を表示することが
できる。

【０１６４】次に、図６５を参照しながら第２の発明に
ついて説明する。

【０１６５】第２の発明は、公知のスケジュール管理シ
ステムを用いて作成されたスケジュールと文書等のデー
タとを関連づけて記憶し、スケジュール項目から所望の
データを抽出する検索装置についてである。

【０１６６】前記データとスケジュールとを関連づける
方法には、 (1) 時刻を用いずにユーザがマニュアルで関連づける方
法 (2) 前記データに書かれた日付等を解析して関連づける
方法 (3) データ作成時刻、データ変更時刻、アクセスした時
刻等を用いる方法 などがある。

【０１６７】また、上記手段によって特定されたスケジ
ュール項目を対象データに関連づけて記憶する方法とし
ては、スケジュールに対象データへのリンク情報を付加
して記憶する方法などがある。

【０１６８】さらに、前記方法によって関連づけて記憶
されたデータの検索方法としては、 (1) スケジュール表をインターフェースとしてスケジュ
ール項目を指定することにより、直接、関連づけられて
いる所望のデータを検索する方法 (2) 『「……会議」に使用した資料』のように、まず
「……会議」をスケジュール表から検索し、抽出された
スケジュール項目を用いて関連づけされているデータを
検索する方法 などがある。

【０１６９】従来のスケジュール管理装置は、スケジュ
ールだけを管理することができ、事前に準備した資料や
スケジュールにしたがって実際に行った会議等の記録な
どの関連資料を管理する機能は持たない。

【０１７０】本実施例では、従来のスケジュール管理装
置に加え、対象データへのリンク情報を持ち、リンク付
けするスケジュールを決定し、スケジュール検索の結果
から対象データへのリンクをたどるようになされてい
る。

【０１７１】従来のスケジュール管理装置について、図
６５を用いて説明する。

【０１７２】スケジュールのデータ構造は、以下のよう
になされている。

【０１７３】スケジュール := (日時、用件) 日時 := [開始時刻から][終了時刻まで]
（少なくとも片方があればよい） 用件 := １個以上のキーワード キーワード := {場所* スケジュール名* 相手*
内容* その他のメモ} スケジュール表 := スケジュールを時間順に並べた
表 上記スケジュール表の構成は、スケジュールを日時（時
刻）順に管理するため、年、月、日という階層構造をそ
のままディレクトリ構造とし、個々のスケジュールの時
刻をファイル名として、スケジュールを一つずつ個別の
ファイルに格納する。

【０１７４】'92---Jan ---1 ---0700, 1300, *-Feb *-2 ---1000, *-... *-.. *-Dec *-31 -- 図６５において、スケジュール作成部４２はキーボード
等の入力部４１から入力されたデータに基づいてスケジ
ュールを作成する。作成されたスケジュールはスケジュ
ールはスケジュール記憶部４８に格納される。

【０１７５】基本機能は、日時を指定してスケジュール
を格納すること、日時を指定してスケジュールを取り出
すことである。用件をキーとして、キーを含むスケジュ
ールを検索する機能を持つ場合もある。

【０１７６】リンク情報について説明する。対象データ
を記録するときに、スケジュールと対象データとを関連
づけるリンク情報をスケジュールに付加する。例えば、
前述の構造をもつスケジュール表の場合には、個々のス
ケジュールに対応するファイルに、対象データ記憶装置
内の該当データへのリンク情報を書いておく。対象デー
タからスケジュールへのリンク情報を作り、双方向リン
クとするように拡張することも容易である。

【０１７７】リンク付けを行う時刻と対象スケジュール
の時刻の前後関係により、以下の３種類のリンク情報が
ある。スケジュールを基準として、過去に作成されたこ
とを示す「事前」リンク、スケジュールの進行と同時に
記録されたことを示す「現在」リンク、スケジュールが
終了した後に記録されたことをしめす「事後」リンクで
ある。

【０１７８】図６６に例を示す。６０がスケジュール表
である。３月２日１３：００から開催される会議の資料
６１を１日の午前中に作成したとする。資料作成時刻が
スケジュールよりも前なので実線で示すように「事前」
リンクを張る。２日１３：００の会議中の速記録または
録音テープ６２は、スケジュールと同時刻に作成される
ので、２重線で示すように「現在」リンクを張る。「現
在」リンクは、進行中の出来事の記録をとる場合に有効
である。会議の翌日に作成した議事録６３は、スケジュ
ール以降に作成されているので、破線で示される「事
後」リンクを張る。

【０１７９】次に、前記リンクを用いてスケジュールと
対象データとを関連づける手段について説明する。入力
された対象データに関連づける対象とするスケジュール
項目を特定する方法として、ユーザが明示的に指示する
方法と対象データから特定する方法、環境情報から特定
する方法の３通りがある。

【０１８０】対象データを記録する際に、ユーザがどの
スケジュールとリンク付けするかを明示的に指示する。
スケジュール表を候補として示してユーザが選択する形
式とすれば、指示しやすくなる。図６６の資料６１を３
月１日の午前中に作成したとすると、その時刻にはスケ
ジュールが入っていない。そこで、資料を記録する際
に、スケジュール表６０のように前後のスケジュールを
表示して、どのスケジュールにリンク付けするかをユー
ザに選択させる。スケジュール項目が特定されればリン
クの種類は時刻を比較することで決定できる。例えば、
ユーザが３月２日の会議を選択すると、時刻を比較して
「事前」リンクを張る。

【０１８１】対象データを作成してからスケジュールと
関連付けるのではなく、あらかじめスケジュールを選択
してから、文書を編集するようにすることも可能であ
る。例えば、３月１日の午前中に、スケジュール表６０
が表示されている状態で、３月２日の会議を指定してか
ら資料作成を始めると、作成完了時点で自動的ににリン
ク付けする。

【０１８２】対象データを解析し、表題や日付けを認識
してスケジュールを特定する。一定の形式の会議開催通
知を作成したり議事録を作成する場合には、会議名や開
催日時を特定することが容易にできる。このように形式
が決まった対象データを記録する場合に特に有効であ
る。例えば、３月３日に議事録６３を作成した場合、議
事録中に３月２日１３：００から１５：００の会議であ
ることが明記されているので、「事後」リンクを張るこ
とができる。具体的には、基本図面は基本情報レイアウ
ト抽出部５４により対象データ入力部４７からの対象デ
ータから、例えば、「議事録」という文字列と、その次
の日時を抽出すればよい。又、「開催日時」という文字
列の後の日時を抽出すればよい。又、文章枠を認識し、
第１文章枠内の文字列とスケジュール中の文字列を参照
すればよい。例えば、「開発会議議事録」と「開発会
議」の場合には、「開発会議」が一致するのでリンクで
きることが分かる。

【０１８３】対象データ以外の環境情報を用いて、スケ
ジュールを特定することも考えられる。音声情報から相
手を特定したり、画像情報から会議名を判読したりし
て、スケジュールの用件に記述されていそうな項目を抽
出する。十分な認識結果が得られない場合には、この項
目と現在時刻をキーとしてスケジュールを検索し、一致
度の高いスケジュールから順に候補としてユーザに提示
する。

【０１８４】上記のいづれか、または、組み合わせた方
法により、リンク付けするスケジュールが決まったら、
「事前」、「現在」、「事後」のどの種類のリンクとす
るかを決める。

【０１８５】対象データを作成した現在の時刻とスケジ
ュールの時刻とを比較して、現在時刻以降のスケジュー
ルの場合は「事前」リンク、現在と同時刻の場合は「現
在」リンク、過去のスケジュールの場合は「事後」リン
クとする。又、対象データを作成した時点ではなく、例
えば、一定時刻の後にリンク情報の種類を決定する場合
には、後述する対象データのアクセス情報中の「データ
新規作成時刻」とスケジュールの時刻とを比較すればよ
い。

【０１８６】次に、前記手段によりスケジュールと関連
づけられたデータを検索する方法について説明する。

【０１８７】日時や場所・相手・用件名など用件中に書
かれているキーワードを指定してスケジュールを検索す
る。この機能は従来のスケジュール管理装置において、
すでに実現されている。 従来の機能に加え、アクセス
情報や位置情報と関連づけることにより、キーワードに
修飾子をつけて複数のキーワードを連結して使用した
り、限定の度合を緩くすることも可能である。例えば、
「x 時頃にアクセスした」、「xx( 場所) から帰ってき
てから作成した」という検索方法も実現できる。このよ
うにしてスケジュールを特定した後に、リンク情報をた
どって目的の対象データに到達する。検索に連動して対
象データへのリンクをたどる点が、従来のスケジュール
管理装置と大きく異なる点である。

【０１８８】スケジュールに記載されているキーワード
以外の修飾子も検索範囲を限定するために用いることが
できる。たとえば、「xxx 会議用に作った資料」という
検索指定の「用に作った」の部分からxxx 会議への「事
前」リンクであると判断できる。「xxx から帰った後で
作った」の「帰った後で」から、xxx へ行った時刻より
後に作成された対象データを探せば良いと判断できる。

【０１８９】図により検索部５０における検索例を示
す。

【０１９０】図６６(b) は、３月２日１３：００の会議
開始時刻にスケジュール表を表示させた状態を示してい
る。スケジュール表には、「事前」リンク欄、「現在」
リンク欄、「事後」リンク欄がある。印６４は、事前に
準備された資料があることを示す。６４をマウスやペン
などの入力装置で指定すると、６５に示す資料選択画面
が表示され、希望の資料を選択することができる。６６
の資料１を選択すれば、６６のように内容が表示され
る。リンク付けされた資料が一つしかない場合には、６
５の資料選択画面を表示せずに、すぐに６６の内容を表
示するように設定することも可能である。

【０１９１】図６７(a) は、３月２日の１６：００にス
ケジュール表を開いた時の３月２日の欄だけを示してい
る。「現在」リンク欄にはテープマーク６７が表示さ
れ、会議の録音テープが存在することを示している。こ
のマークを選択すると、テープを再生して聞くことがで
きる。

【０１９２】図６７(b) は、議事録を作成した後のスケ
ジュール表の３月２日の欄を示している。「事後」リン
ク欄に資料があることを示すマーク６８がある。６９を
選択して事前に作成した資料を見たり、６７を選択して
録音テープに記録された会議の様子を再生したりするこ
ともできる。又、対象データは電子メールの文書でもよ
い。電子メールの文書の場合、電子メール内に記述され
ている発信日時とサブジェクト（表題）を用いることに
より、上記で説明したスケジュールとのリンク付けが実
現できる。

【０１９３】XXX 会議をキーワードとする検索以外の検
索も可能である。例えば、「本社にいった後に開かれた
開発会議の資料」という入力を行った場合、まず、この
入力文字列から「本社」，［後」，「開発会議」を抽出
する。次に、「本社」というキーワードでスケジュール
表を検索する。図６６のスケジュール表６０では、３月
１日が該当することがわかる。次に、３月１日以降で
「開発会議」の文字列を検索し、３月２日が該当するこ
とがわかる。その後、３月２日にリンクされている会議
資料等の名称を表示すればよい。

【０１９４】変形例として、対象データをテレビ番組、
スケジュールを番組表と読み替えると、ビデオレコーダ
に応用できる。録画予約は従来と同じ方法で行う。別の
入力手段で番組表（スケジュール）を記憶させておく。
録画済みのテープから希望の番組を取り出すときに、番
組名や出演者で検索する。

【０１９５】その他の変形例として、時刻の指定方法と
して、ある基準からの相対時刻を用いると、誕生日や入
社日を計時の基準として設定することにより、「xx才の
時の写真」とか「xx年目の仕事」という指定で記録を検
索することができる。

【０１９６】又、スケジュールを検索対象とすることが
可能である。例えば、検索キーとして「開発会議」を入
力し、スケジュールに「開発会議」の文字列を含む場合
に当該のスケジュールとそのスケジュールにリンクされ
ている文書の表題を表示することができる。図６８にそ
の表示例を示す。

【０１９７】次に、第３の発明について説明する。第３
の発明は、文書等のデータを作成し、記憶する際に、こ
のデータのレイアウト情報を抽出し、データと共にレイ
アウト情報を対応づけて記憶し、このレイアウト情報で
所望のデータを抽出する検索装置である。レイアウト情
報としては、段組数、文書枠の大きさ及び位置、行数、
図、表の数、図表の大きさ及び位置、図表の種類であ
り、上記レイアウト情報を用いて上記データを検索でき
るが、図表の大きさあるいは位置等は何種類かのパター
ンを用意しておき、ここから選ばせるか、タブレット等
の手書き表現された図表のレイアウトを基に類似のデー
タを検索できる。以下に、詳しく説明する。・実施例１ 図６９は、実施例を示すブロック図である。

【０１９８】文書を構成するイメージデータ・文字デー
タ・図形データ等は、例えばイメージスキャナ・通信ケ
ーブル・ＣＤＲＯＭプレイヤー・フロッピーディスクド
ライブなどからなる文書データ入力部１０１を介して読
みとられ、メモリやハードディスクなどからなる文書デ
ータ記憶部１０２に保存される。レイアウト情報抽出部
１０３は、文書データ記憶部１０２の内容から、文書デ
ータ中のレイアウト情報を抽出する。例えば、レイアウ
ト情報としては、頁数、頁の大きさ、段組数、文章枠の
大きさと位置、行数、行枠の大きさと位置、文字の大き
さ、図表の数、図表の大きさと位置、図表の種類などが
抽出される。れらは、レイアウト情報記憶部１０４に保
存される。

【０１９９】ユーザは検索する文書のレイアウトイメー
ジを、検索キー入力部１０５を介して入力する。検索部
１０６は、検索キー入力部１０５から入力された検索キ
ーを用いて、レイアウト情報記憶部１０４の中から対応
する文書を探し出す。文書出力部１０７は、検索部１０
６で見つかった文書をユーザに呈示する。

【０２００】以下に、図７０の入力データ例を用いて動
作を示す。

【０２０１】図６９の文書データ入力部１０１から入力
されるデータは、例えば図７０に示すような、文字デー
タと図形データあるいはイメージデータなどで構成され
る文書データとする。文書データは、ユーザによって閲
覧される際、文書データ入力部１０１を介して文書デー
タ記憶部１０２に読み込まれ、ディスプレイやプリンタ
などからなる文書出力部１０７に表示される。

【０２０２】一度ユーザによって閲覧された文書データ
は、レイアウト情報抽出部１０３に送られる。レイアウ
ト情報抽出部１０３の動作については、イメージデータ
からの抽出は特願昭６３ー７５１８号に、文字データや
図形データ等コード情報からの抽出は特願昭６１ー２０
６８３５号に詳しいので、ここでは割愛する。

【０２０３】例えば、図７１のような文章枠と図表の位
置と大きさが抽出されたとすると、以下に示すような方
法で、各頁の段組（１段組・２段組・タイトル付き２段
組など）と図表配置のタイプを決定し、分類しておく。

【０２０４】図７２に段組テンプレートと制約条件の例
を示す。まず、抽出されたレイアウト情報中に文章枠同
士が非常に近接している場合があれば、包括する文章枠
を定義し直す。次に、文章枠の数以上の段組を持つ段組
テンプレートを選ぶ。段組テンプレート中の各段組の変
数に、抽出した文章枠の位置などのレイアウト情報の値
を代入していく。ただし、文章枠に近接する図表がある
場合は、近接する辺と向かいあう辺を文章枠の境界とす
る。代入した結果、各段組テンプレート固有の制約条件
を満たさない場合は、次の段組テンプレートとマッチン
グを行う。図７１に示すように、この例では文章枠が２
つ抽出されている。隣接する文章枠および図表枠との間
隔は２０mm〜３０mmあるので近接するとはみなされない
ため、段組の数が２段組以上のテンプレートにあてはめ
る。２段組のテンプレートにあてはめると、ＳX1＝１７
０、ＳX2＝１００、ＳY1＝５０、ＳY2＝２００、ＰY1＝
３０、ＰY2＝１００、ＰX1＋ＳX1＝４０＋１７０＝２１
０、ＰX2＝２０となり、制約条件をまったく満たさな
い。一方、タイトル付きの２段組にあてはめ、第１文章
枠をタイトル段組、第２文章枠を第２段組に、第１図表
と第２図表をあわせて第３文章枠とすると、ＳX2＝ＳX3
＝１００、ＳY2＝ＳY3＝２００、ＰY2＝ＰY3＝１００、
ＰX2＋ＳX2＝１２０＜ＰX3＝１３０＜ＰX1＋ＳX1＝２１
０、ＰY1＋ＳY1＝８０＜ＰY2＝１００となり、制約条件
を満たす。第１頁の段組はタイトル付き２段組と決定す
る。

【０２０５】次に図表配置タイプで分類する。タイトル
付き２段組の図表配置タイプの一覧の例を図７３に示
す。図７１の例では文章枠は２つであるから、Ｆ，Ｇ，
Ｈ…のどれかになる。第３段組が図表のみで構成されて
いるＧタイプに分類できる。

【０２０６】文書データのタイトルや抽出されたレイア
ウト情報と分類は、例えば図７４に示すような形で、レ
イアウト情報記憶部１０４に記憶される。

【０２０７】検索キー入力部１０５では、文書データの
タイトルや著者名だけでなく、例えば以下のようなイン
タフェースを介して、レイアウト情報を入力する。ま
ず、図７５（ａ）に示すような、文書の段組の一覧をユ
ーザに呈示し、例えばマウスやキーボードなどを用い
て、ユーザの記憶に近い物を選択してもらう。ユーザが
タイトル付き２段組を選択したとする。検索キー入力部
では、図７５（ｂ）で示すような、タイトル付き２段組
での図表配置タイプの一覧を示し、再度ユーザの選択を
促す。これらのキーが送られた検索部では、レイアウト
情報記憶部のデータから、タイトル付き２段組でＧタイ
プの頁を探し出し、文書出力部１０７に送られユーザに
呈示される。該当する頁が複数見つかった場合、順に呈
示するか、縮小して何枚づつか一度に並べて呈示し、選
択させてもよい。又、ユーザ自身がタブレット等を利用
して手書き表現された図表のレイアウトを検索キーと
し、これに基づいて文書を検索してもよい。

【０２０８】ユーザのレイアウトに関する記憶が曖昧な
場合がある。例えば、図７３のＧタイプは、ユーザによ
って、ＣタイプやＤタイプあるいはＨタイプなどと混同
して記憶されることがある。そこで、混同し易い図表配
置タイプを類似図表配置タイプとして検索部に記憶させ
ておき、類似配置の頁も検索し、ユーザに呈示すること
も考えられる。

【０２０９】図表の種類から検索する場合は、検索キー
入力部１０５で、例えば図７６に示すようなインタフェ
ースを介して図表の種類を入力する。例えば図７６
（ａ）で示すように図表の種類が示され、その中から検
索する頁にあったと記憶しているものを選択する。その
頁に複数図表がある場合は複数指定すればよい。選択し
た項目について、図７６（ｂ）か（ｃ）のような、それ
ぞれ詳しい分類を入力する画面が示される。ここでは、
グラフを選択したのでグラフの種類が示されている。こ
こで、棒グラフを選択すると、検索キー入力部から検索
部にその情報が渡される。レイアウト情報記憶部１０４
の図表種類と照合して棒グラフがレイアウトされている
頁のデータをユーザに示す。ここで、頁のイメージを１
枚ずつ、あるいは何枚かまとめて示してもよい。また、
図表の部分のみ切り出して呈示してもよい。例えば、図
７７（ａ）に示すように、検索した頁の棒グラフの部分
のみユーザに示す。複数検索した場合は、ユーザが「次
候補」などのボタンを押せば、図７７（ｂ）、（ｃ）の
ように次の検索された頁の棒グラフを見せる。また、図
７８に示すように、一度に複数の検索頁のグラフのみ一
覧表示してもよい。

【０２１０】レイアウト情報抽出部１０３では、入力さ
れた文書の全頁でなく、ユーザが一番長い時間閲覧して
いた頁や、第１頁目や、図表や写真のある頁など、特徴
のある頁のみレイアウト情報を抽出しても良い。また、
レイアウト情報を抽出する頁を、ユーザに指定させるこ
とも考えられる。もちろん、あらかじめレイアウト情報
を取り込んでいない文書に対しては、検索時にレイアウ
ト情報を抽出しながら該当する頁を探しだす。

【０２１１】次に、第４の発明について説明する。第４
の発明は、文書等のデータを作成、記憶、検索し得る所
定の装置を用いて、データを入力し、記憶し、あるいは
記憶されたデータを検索する際の各々の動作に供される
前記データと、入力、記憶、あるいは検索時に前記装置
の所定位置に設置された画像入力装置を介して入力され
た画像情報とを各々対応づけて記憶し、この画像情報を
用いて所望のデータを抽出する検索装置である。データ
の抽出時には、入力された画像情報の変化点を用い、変
化点は、画像のシーンチェンジあるいは明暗等を環境情
報として検索に用いるものである。以下に、詳しく説明
する。 ・実施例１ 以下では、入力にカメラを用いた場合の実施例につい
て、図を用いて説明を行う。

【０２１２】図７９は、シーンの変化点（時刻）を環境
情報として抽出する環境情報抽出方法の構成を示す図で
ある。入力として、映像が与えられた画像メモリ７０，
７１に入る。

【０２１３】ヒストグラム演算部７２で、この画像メモ
リ７０，７１の輝度のヒストグラムが計算される。この
計算は各フィールドごとに行われる。即ち、垂直同期符
号ＶＳＹＮＣにより、演算部７２の出力はラッチされ、
内部のレジスタがクリアされる。シーンに変化がなけれ
ば、連続するフィールド間では、さほどの輝度の変化は
起きない。逆に輝度の変化が大きい場合、シーンが変化
していることになるので、連続フィールド間におけるヒ
ストグラム演算部７２の出力の差の絶対値の総和がある
しきい値より大きければシーンの変化点であると判断し
て、その時の時刻を記録する。

【０２１４】図８０は、ヒストグラム演算部７２の動作
を説明するフローチャートである。ここで画面のサイズ
をＭ×Ｎとする。

【０２１５】図８１は、シーン変化の判定の別の方法を
示す図である。連続フィールド間におけるヒストグラム
演算部７２の出力の差の絶対値で比べる代わりに、ヒス
トグラムの計上、即ち分布の広がり具合を示す。分散Ｘ
の変化をシーン変化の判定基準とする。輝度分布の形状
に着目すれば、分布の高さの変化には影響されないの
で、同じシーンで画面の明るさが変化したような場合
に、シーン変化あり、と誤判定しなくて済む、というメ
リットがある。

【０２１６】図８２は、分散Ｘ演算器７３の動作を説明
するフローチャートである。

【０２１７】図８３は、逆にシーンの動きが止まった場
合を検出する方法を示す図である。ある一定時間以上に
わたってシーンの変化がなければ、カメラの動きが止ま
ったと判断できるので、シーン変化があってからの時間
を計ることにより、停止を判定できる。

【０２１８】図８４は、シーン変化判定部の構成を示す
図である。上述の輝度の代わりにカラー情報を利用し、
画面全体の色合いの変化をもって、シーンの変化とす
る。入力されたコンポジットカラー画像信号（ＮＴＳＣ
信号etc ）は、カラーデコーダ７４で、明度（Ｌ）とＸ
Ｙ表色系のＸ，Ｙ信号に分離され、それぞれＡ／Ｄ変換
器７５でデジタイズされる。デジタル化されたＬ，Ｘ，
Ｙ信号はそれぞれヒストグラム演算器に与えられ、ヒス
トグラムと共に平均値Ｐ_L ，Ｐ_X ，Ｐ_Y と分散Ｘ_L ，Ｘ
_X ，Ｘ_Y とが算出される。上述の輝度のヒストグラムと
同様、これらの値はフィールドごとに求められるものと
する。シーン変化判定部では、Ｘ_L ，Ｘ_X，Ｘ_Y の値の
変化により、シーン変化を判定する。

【０２１９】図８５は、更に別のシーン変化検出法に基
く、環境情報抽出の構成例を示す図である。入力される
映像信号の連続するフィールド間の差分を常に求め、そ
の絶対値の緩和をもって、シーン変化の判定を行う。連
続するフィールド間の演算は、フィールドメモリを用い
ることにより、１フィールド前の画像を保持して行う。
図は、輝度だけで行う場合を示す。絶対値の緩和が、設
定したしきい値より大きければ、シーン変化ありとす
る。しきい値は、書き替え可能なしきい値レジスタに保
持されるものとする。

【０２２０】図８６は、カラー情報を利用する場合を示
す。Ｘ，Ｙ信号の差を用いることにより、色合いの変化
を検出することができる。

【０２２１】以上の説明では、入力された画像のシーン
変化検出を、その場でリアルタイム（もしくはほぼリア
ルタイム）に行うことを想定したが、一旦蓄積された映
像やあるいは既に録画されてある映像に対して、後から
シーンの変化検出を行う場合もありうる。

【０２２２】この場合、シーン変化の検出に要する時間
が、リアルタイムでなく、長くても構わなければ、シー
ン変化を検出するための計算速度を減じることが可能
で、装置規模、コストの減少を図ることができる。この
場合の構成は、図８７に示すように、環境情報入力部か
らの生データ（映像）が、先に一旦、環境情報記憶部に
記憶され、そこから環境情報抽出部へ生データが送られ
てシーン変化の検出が行われ、結果のシーン変化点列に
関する情報が環境情報記憶部に送り返されて記憶され
る。

【０２２３】映像が蓄積されていれば、図８８に示すよ
うに一つの蓄積映像に対して複数のシーン変化検出手段
を適用し、並列にシーン変化の検出を行うこともでき、
分析時間を短縮することが可能である。

【０２２４】以上の説明では、検索キーとして、映像中
のシーンの変化点を想定し、その検出方法について述べ
てきたが、シーンの変化点以外にも、例えば、画面の中
に人間が現われるシーンとか特定の個人が登場するシー
ン、等を検索キーとして想定することができる。

【０２２５】人間の検出については、例えば、上述した
カラー情報を利用し、肌色が出てくるシーンを検出する
ことにより行う。この場合、肌色の指定方法としては、
例えば、図８９に示すようなｘｙ表色系の色分布図をデ
ィスプレイの画面上に表示させておき、その中から所望
の色（この場合、肌色）の点、又は領域をポインティン
グデバイス等によって選択することにより、指定する方
法が考えられる。

【０２２６】肌色を指定する別の方法としては、例えば
図９０に示すように、人間が写っている、あるシーンで
映像を止め、そこに写っている人間の顔や手など肌色の
領域を、ポインティングデバイス等を用いて切り出して
指定する方法も考えられる。特定の個人を検出するに
は、まずシーンの中から顔の領域を抽出し、ついで探す
べき個人の顔のイメージのマッチングをとることにより
判定する。シーンの中から顔の領域を抽出するには、上
述した方法によって肌色の領域を検出し、その領域の面
積を求め、前髪、目、鼻などを探して顔であるかどうか
判定する。マッチングの方法としては、相関演算、ＳＳ
ＤＡ（Sequential Similarity Detection Algorithm ）
等が知られている。

【０２２７】探すべき、個人の指定の方法として、その
人間が写っているシーンを止め、ポインティングデバイ
スで顔の領域を切り出して指定する方法が考えられる。
複数の個人の顔のイメージが、予め名前と共に登録され
ている場合には、イメージで指定する代わりに個人の名
前で指定することができる。もちろん、登録してある顔
を列挙して表示し、それをポインティングデバイスで選
択する方法も考えられる。

【０２２８】個人の顔イメージが予め登録している場合
には、それら、おのおのをテンプレートとして検索を行
い、その映像の中に「誰それは居るか」の代わりに誰が
いたか、という情報を得ることもできる。

【０２２９】以上説明した、映像のシーン変化、人間が
写っているシーン、特定の個人、誰が居たか、といった
情報は、いずれも時間の情報を含むものであることは言
うまでもない。

【０２３０】次に検索時の動作について説明する。

【０２３１】本発明の中心的な考え方の一つは、ある文
書やプログラムを、それが作られた／登録された／前回
参照された／最後に参照された／際の環境情報と共に記
憶し、その環境情報を用いて当該文書又はプログラムの
検索を行うというものである。そしてここでは、環境情
報として映像を想定して論じている。

【０２３２】映像を検索に緩用する方法の一つは、図９
１に示すようにシーンの変化点などの静止画を画面上に
列べて一覧できるようにし、その中から画像を選ぶとそ
れに対応する文書やプログラムが検索されるようにする
ものである。

【０２３３】これは図９２に示すように、シーンの変化
点など映像中の特徴シーンから、文書やプログラムにリ
ンクを貼ることにより実現する。最も単純には、文書や
プログラムにとって意味のある時刻（作成、登録、改
変、参照etc ）に対応する映像中のシーンを特徴シーン
とすることである。

【０２３４】逆に映像とは別の手段を緩用して検索され
た文書やプログラムについて、関連する各時点での映像
を再現するためには、図９３に示すように文書やプログ
ラムから対応するシーンへの逆向きのリンクを貼ればよ
い。

【０２３５】映像の場合、シーン変化点等、検索のキー
とすべきシーンが必ずしも全て切り出せる訳ではない。
とくに人間の「画を見て思い出す」たぐいの人間の感性
にかかわるシーンの場合には、自動抽出ではなく人間の
介在が不可欠である。

【０２３６】この場合、録画してある映像を早送り等し
ながら探索することになるが、その際、図９４に示すよ
うに一つの画面だけでなく、映像全体をｎ分割し、ｎ個
の画面で並列に再生することによって検索に要する時間
を１／ｎに短縮することができる。これは、映像を磁気
テープなどのシーケンシャルなメディアの場合でも、ｎ
個のトラックに対してｎ個のヘッドで同時に読み書きす
ることによって実現できる。

【０２３７】あるいは、又、ｎ台の磁気テープ装置を用
い、全体の１／ｎの時間分ずつ映像を順に記憶してお
き、再生時にｎ台同時に再生するようにすれば、シーケ
ンシャルなメディアでも上記の効果が実現できる。

【０２３８】検索の他の例としては、図１３７に示すよ
うに、文書の入力開始、入力終了時点にカメラで取り込
んでおいた映像および入力中にシーンの変更があった時
点の静止画を並べて表示する。これらの映像を見て必要
な文書を選択することができる。

【０２３９】なお、入力中の静止画に限ることなく、そ
の間にきたメイルの標題や、その間に録音した音声など
を出すことも可能である。

【０２４０】また、上述の説明では、計算機に設置した
カメラを用い、映像を文書の検索に用いた。同様にし
て、小型のカメラを名札やバッチに装着して画像を蓄積
し、蓄積した画像を計算機に転送して上述の処理を行う
ことにより、行動の記録として用いることができる。

【０２４１】次に、第５の発明について説明する。第５
の発明は、文書等のデータを作成する際に要した前記デ
ータの作成開始時刻あるいは前記データの作成終了時刻
を、前記データと共に記憶し、これらの時刻を用いて所
望のデータを抽出する検索装置である。作成されたデー
タの作成開始、終了時刻から前記データの（段階的な）
緊急度を得、この緊急度を検索キーに用いる。データの
作成開始、終了時刻から作成に供された時間間隔を模式
的に表現する。模式化された図を検索キーとして用いる
等である。又、この発明は記憶された文書等のデータに
対し編集を行う際に、前記データへのアクセス開始時刻
あるいはアクセス終了時刻を、前記データと共に記憶
し、これらの時刻を用いて所望のデータを抽出する検索
装置である。アクセス開始回数をカウントし、参照頻度
を得、この頻度を検索キーに用いる（週報なら毎週アク
セスする）。時間の経過に対しての所定のデータのアク
セス頻度（密度）を模式的に表現する。模式化された図
を検索キーとして用いると共に、指示された模式図に基
づいた編集を施されたデータを抽出する。以下に、詳し
く説明する。 ・実施例１ 基本図、図９５における検索キー解析部５３の構成、内
容と処理の例を図９６〜図９９に示す。図９９の実行部
の「ー１」は実行部分の単語に位置からの相対位置を示
しており、実行部は条件部に示された単語「学会」の直
前の単語を抽出することを意味する。

【０２４２】基本図、図９５においてアクセス情報検出
部４５では、文章データ作成・編集の際に、データへの
アクセス操作に関する情報を抽出し、アクセス情報とし
て環境情報記憶部４８に記憶したり、環境情報記憶部４
８にあるアクセス情報を削除したりする。表１にアクセ
ス情報検出部４５が検出する操作イベントを示す。

【０２４３】

【表１】 これらの操作に伴い、表２に示す属性を持つアクセス情
報要素が生成または削除される。

【０２４４】

【表２】 このうち、データ新規作成時のデータ量は一般にはゼロ
であるが、データのファイル名を変更して新たなデータ
を作成した場合は、始めからいくらかの量を持ってい
る。アクセス情報は上記のアクセス情報要素のリスト
に、文書の他の属性情報として、参照回数、緊急度、コ
ピー元のファイル名、プリントアウトの総数などを加え
たもので構成される。ここで、参照回数とはデータ内容
の変更がないようなアクセス情報要素の総数を表す。ま
た、緊急度とは、単位時間あたりの記述量を表した値で
あり、１つの文章の緊急度をＥとすると、Ｅは以下の式
で導かれる。

【０２４５】

【数１】 ここで、各変数は表３の意味を持つ。

【０２４６】

【表３】 また、プリントアウトの総数は個々のアクセス情報要素
におけるプリントアウト回数の総和である。

【０２４７】図１００にアクセス情報の一例を示してお
り、文書１と文書１−アクセス情報はリンクで結ばれて
いる。文書１ーアクセス情報はアクセス情報要素リスト
とその他の属性情報で記述されており、各アクセス情報
要素は、１回のアクセスが発生するごとに生成され、リ
ストに付加される。

【０２４８】図１０１は「データの新規作成」操作およ
び、「データ名変更後保存」操作に対して、アクセス情
報検出部が行なう処理のフローを示している。

【０２４９】図１０２は「データアクセス開始」操作に
対してアクセス情報検出部が行なう処理のフローを示し
ている。

【０２５０】図１０３は「データアクセス終了」操作に
対してアクセス情報検出部が行なう処理のフローを示し
ている。

【０２５１】図１０４はデータのプリントアウトに対し
てアクセス情報検出部が行なう処理のフローを示してい
る。図１０５はデータ削除に対してアクセス情報検出部
が行なう処理のフローを示している。

【０２５２】基本図、面９５における検索部５０では、
環境情報記憶部４８に記憶されたアクセス情報を用い
て、表４に示すようなキーワードによる文書データの検
索を行なう。

【０２５３】

【表４】 図１０６は表４における時期に関する情報（時期パター
ン１）を用いた検索処理のフローであり、これによって
時刻S から時刻E までの範囲と、アクセス情報が持つ時
間情報を比較することで、作成、または作成開始、また
は作成終了した文書データを検索できる。

【０２５４】図１０７は表４における時期に関する情報
（時期パターン２）を用いた検索処理のフローであり、
これによっで時刻（T-dT）から時刻（T+dT）までの範囲
と、アクセス情報が持つ時間情報を比較することで、作
成、または作成開始、または作成終了した文書データを
検索できる。

【０２５５】図１０８は表４における期間に関する情報
を用いた検索処理のフローであり、アクセス情報が持つ
新規作成時刻から、最新アクセス終了時刻までにかかっ
た時間が、ｅ％の誤差で期間Ｔに含まれるような文書デ
ータを検索できる。

【０２５６】図１０９は表４における参照頻度に関する
情報を用いた検索処理のフローであり、参照回数が範囲
Ｄを満たすようなアクセス情報を持つ文書データを検索
できる。ここで、参照回数とはデータ内容の変更がない
ようなアクセス情報要素の総数を表す。また、Noftenは
経験的に「何回も参照した」とみなせる一定の回数であ
り、ユーザによってことなる値を持つ。

【０２５７】図１１５は表４におけるプリント頻度に関
する情報を用いた検索処理のフローであり、プリントア
ウト総数がＤを満たすようなアクセス情報を持つ文書デ
ータを検索できる。Noftenは経験的に「何回もプリント
した」とみなせる一定の回数であり、ユーザによって異
なる値を持つ。

【０２５８】図１１０は表４における作成の緊急度に関
する情報を用いた検索処理のフローであり、作成時の緊
急度による文書データの検索ができる。

【０２５９】[ 検索例１] 「２月ごろ書き始めた文章
で、何回か参照した文章」 [ 検索例２] 「３月ごろに作成した文章で、急いで１日
で書いたた文章」 [ 検索例３] 「一カ月の期間で、推敲を重ねて作成した
文章」 図１１１はアクセス情報要素の属性を表示した例であ
り、左端は新規作成時刻またはアクセス開始時刻を表
し、右端はアクセス終了時間を示す。また、図形の高さ
は、新規作成、アクセス開始、アクセス終了のそれぞれ
の時刻における文書データの量を示している。さらにデ
ータ内容の変更の有無を図形の持つ模様で表現してお
り、新規作成時点と最新のアクセス終了時点を色付けさ
れた小円で表している。また、コピー元のファイルとの
リンクは矢印で表現されている。

【０２６０】図１１２は、図１１１で示した表示方法に
基づいていくつかの文章のアクセス情報を一月毎の単位
で表示した例である。図１１２における文章１、文章
２、文章３はそれぞれ、上記の［検索例１］、［検索例
２］［検索例３］によって検索されるような特徴を持っ
ている。

【０２６１】図１１３は、一週間の単位で図１１２と同
じデータを表示しなおしたものである。また、基本図面
における検索部ではスケジュール作成部で生成されたス
ケジューリングの情報を時期情報として用いることで、
絶対時間ではなく、スケジュールに記述された言葉で検
索を行なうこともできる。これにより、例えば「○○学
会の論文〆切の頃に作成した文章」のような検索も可能
になる。具体的には、図９７に示したように検索キーか
ら・・・学会、論文、及び〆切を抽出し、これらの文字
列を含むスケジュールデータないの文字列を特定し、そ
の後は上記に述べたように検索処理を行えば良い。

【０２６２】図１１４は、スケジュールデータと組み合
わせて、文書のアクセスデータを表示したものである。

【０２６３】次に、第６の発明について説明する。第６
の発明は、文書、音声等のデータを入力する際に、前記
音声のデータから音声の特徴的データを検出し、検出さ
れた特徴的データと前記データと対応づけて記憶し、こ
の特徴的データを用いて所望のデータを抽出する検索装
置である。特徴的データは、音声のデータから話者認識
を行うことによって得られる話者あるいは話者の人数で
ある。特徴的データは、文書、音声等のデータが入力さ
れた環境（部屋の広さ又は電車の中等）のデータであ
る。特徴的データは、音声等のデータの密度、テンショ
ン（笑い声、にぎやかさあるいは静けさに相当）を模式
化したものである。以下に、図９５の基本図を用いて詳
しく説明する。

【０２６４】次に、環境解析対象データとして、周囲の
音や音声などの音響メディアを利用する場合について説
明する。

【０２６５】環境情報入力部８０は、マイクロフォンな
ど音響メディア入力デバイスを持ち、周囲の音や音声な
どの音響データを取り込み、低域通過型フィルタを介し
てＡ／Ｄ変換して標本化、量子化する。音響データに
は、標本化周波数、量子化ビット数などの離散化処理の
情報、入力デバイスに関する情報を付加すれば、様々な
離散化処理による形式の異なった入力データが混在した
場合のデータ抽出処理に有用である。

【０２６６】環境解析対象データは、原則としてユーザ
がシステムを利用しているあいだ常時入力される。すな
わち、検索対象データを入力、編集、検索・出力してい
るとき、あるいは、環境情報をユーザが追加、修正する
ときは必ず入力される。ただし、解析対象データを常時
取り込むと、その量が膨大になるため、特にその利用時
における検索対象データから得た環境情報をキーに検索
する必要がないときは解析対象データの入力を省略して
もよい。

【０２６７】入力される環境解析対象データは、複数の
マイクロフォンを利用したマルチチャネルの音響データ
であってもよい。例えば、複数の話者が出席している会
議において話者一人ひとりにマイクロフォンを持たせた
り、マイクロフォンアレイを用いて特定位置あるいは方
向にある音源の発する音を強めたり弱めたりして再構成
した音響データなどを入力することもできる。この場合
は、どのマイクロフォンによる入力か、どの位置あるい
はどの到来方向を強調あるいは減衰させたかを示す情報
が、入力デバイスに関する情報として音響データに付加
される。

【０２６８】環境情抽出部４３は、入力された環境解析
対象データを直ちに自動的に解析する。環境解析対象デ
ータが音響データである場合は、解析する内容として、
例えば周囲音レベル、周囲音の種類の識別、周囲の残響
特性による利用場所の識別、話者認識、音声認識、音声
理解があげられる。

【０２６９】周囲音レベルは、検索対象データの入力、
編集、検索・出力時などにおける音響データの信号パワ
ーを計算することにより得られる。周囲音のレベルが、
予め設定した閾値と比較して越えているか、あるいは閾
値より低いかによって、システムを利用していた場所が
騒々しいところであるとか、静かなところであるといっ
た、周囲の騒々しさに関する環境情報が得られる。

【０２７０】また、音響データの周波数分析によるスペ
クトルパターンデータと、周囲音の種類に対応する周波
数スペクトルパターンデータとの類似度を計算すること
により、周囲音の種類を識別できる。例えば、拍手の
音、笑い声など、利用者あるいは利用場所に居合わせた
人のたてる音、空調や自動車などの走行音、中波ラジ
オ、電話等の呼び出し音など利用場所の周囲音などに対
応する標準的な周波数スペクトルパターンデータを用い
て、システムを利用していた場所の周囲の音源の種類、
さらには利用場所に関する環境情報を得る。周囲音の識
別の方法は、単語音声認識で行われている方法と同じで
あり、単語音声の代りに周囲音の波形データを用いて単
語音声認識では単語毎に作成していた照合用の標準的な
周波数スペクトルパターンデータを周囲音の種類毎に作
成すればよい。

【０２７１】システム使用時に試験音を発し、その残響
音を収集して残響特性を求めることによりシステムの利
用場所を識別することも可能である。システムの使用中
に移動することがなければ、システムの利用開始時にビ
ープ音などの試験音を出してその残響音を収集すればよ
い。この場合は、上記周囲音の識別において、利用場所
毎に標準的な周波数スペクトルパターンデータを個別に
作成すればよい。これにより、システムを利用していた
場所が野外であるとか、残響音が長く残るホールである
とか、自分のいつも座る席であるなど、利用場所を識別
し、利用場所に関する環境情報を得る。

【０２７２】複数の話者がいる場所で使う場合は、誰の
発話であるかを話者認識により知ることができる。また
前述のように、話者ごとにマイクロフォンを持たせて別
々のチャネルから入力したり、マイクロフォンアレイに
より指向性を持たせることにより認識処理をしなくても
話者を特定できる。このような話者に関する情報によっ
て、誰の発話であるかだけでなく、誰が近くにいたかと
いった環境情報が得られる。

【０２７３】また、認識したい音韻や単語の標準的な周
波数スペクトルパターンを用意しておけば、環境解析対
象データである音響データの周波数分析によるスペクト
ルパターンデータとの類似度を計算することにより、音
韻や単語を検出できる。検出されるのが音韻の場合は、
さらに動的計画法（ＤＰ）などの方法を用いて単語検出
結果を得る。単語を検出する場合は、ワードスポッティ
ングを行ない単語検出結果を得る。さらに、検出した単
語を組み合わせてできる、可能な複数の単語検出結果列
を構文・意味解析することによって単語認識結果を決定
できる。また、認識結果を構成する単語列のつくる発話
の意味内容を得ることができる。

【０２７４】ここで、認識対象となる単語や単語列が構
成する意味内容は、解析に先立って設定しておく必要が
ある。すなわち、環境解析対象データの入力時に自動的
に解析結果として得られるのは、解析前に設定しておい
た単語や意味内容だけである。したがって、環境解析対
象データの入力時には設定してなかった単語や単語列が
構成する意味内容を利用した環境情報による検索をする
場合は、あらためて設定を行なって、環境解析対象デー
タを環境解析対象データ記憶部から取りだし再解析す
る。このように、予め認識結果として得たい情報を設定
する必要があることは、音声認識だけでなく、話者認
識、周囲音の識別、周囲音の識別など認識、識別などの
解析一般に共通しており、検索時に必要な環境情報が不
足していれば、同様に環境解析対象データの再解析を行
なえばよい。

【０２７５】環境情報として音響データを利用するパー
ソナルマルチメディアファイリングシステムの例とし
て、会議ファイルに応用する場合について述べる。

【０２７６】システムへ入力されるデータは音響、画
像、文字などのマルチメディアデータである。

【０２７７】ここでは、入力マルチメディアデータが検
索対象データである。

【０２７８】また、検索対象データを入力したり出力す
るのと同時に、環境情報を抽出するための音響データを
取り込む。ここでいう入出力時の環境情報とは、誰が、
誰と、いつ、どこで、何を、どのように対象データを入
力したり出力したかを示す情報である。このうち、入力
時の環境情報はこの環境情報を抽出するための音響デー
タは、対象データと同じものを用いてもよい。

【０２７９】このような環境情報を付加することによっ
て、後に入力マルチメディアデータを再び検索・出力す
る場合に検索が容易になる。

【０２８０】システムは、この音響データから環境情報
を自動的に抽出し、これを対象データとリンクさせて記
憶しておく。

【０２８１】対象データ入力部４７は、例えばマイク、
スキャナ、カメラ、ペン、マウス、キーボードなどの音
響、画像、文字など、対象データを入力する手段を有す
る。音響データのシステムへの入力はマイクを介して取
り込む。環境情報の抽出をリアルタイムに行なう必要の
ない場合は、マイクから取り込んだ音響データを一旦、
対象データ記憶部４９に蓄えておき、環境情報を抽出す
る際にこれを利用することもできる。

【０２８２】また、発言者が複数いるときのように複数
音源がある場合に音響データの品質を高め、環境情報の
抽出精度を高めるため、複数のマイクを利用して音響デ
ータを取り込み、マルチチャネル入力とすることも可能
である。

【０２８３】音響データ以外の検索対象データ、例えば
会議における配布資料などの文書・映像・イメージデー
タ、議場風景などの画像データ、メモなどの文字・イメ
ージデータは、例えばスキャナ、カメラ、ペン、マウス
などの入力デバイスを介して入力する。

【０２８４】対象データ記憶部４９では、対象データ入
力部４９が取り込んだマルチメディアデータを、その入
力時刻とともに格納する。

【０２８５】環境情報入力部８０は、マイクなどの音響
入力手段を有する。

【０２８６】対象データ入力部４７と同様、発言者の音
声や聴衆の音声や周囲の環境雑音などの音響データは、
マイクを介して取り込む。発言者が複数いる場合も同様
に、複数のマイクを利用し、マルチチャネル入力とする
ことも可能である。

【０２８７】環境情報抽出部４３は、図１１８に示すよ
うに、音源推定部９０、音声区間推定部９１、音声認識
理解部９２、話者情報管理部９３、会議状況推定部９４
を有する。

【０２８８】音源推定部９０は、環境情報入力部８０で
複数のマイクにより取り込んだ音響データ中に含まれる
音源の位置、方向を判定し、特定の音源の発する音響デ
ータ成分を推定する。音源推定部の最も簡単な構成例
は、発言者ごとにマイクを用意し、各マイクが取り込ん
だ音響データと発言者を対応させることにより、ある話
者の声の成分を推定する方法である。また、発言者の数
とマイクの数が一致していない場合でも、各マイクが取
り込んだ音響データを畳み込み、その畳み込み係数を制
御することにより音響的な指向性を制御することが可能
であり、音波の到来方向の違いから複数の話者を弁別
し、特定の話者の成分を推定したり、特定の話者以外の
成分を推定することができる。

【０２８９】ここでいう音源は必ずしも人間の発声する
音声に限定されず、周囲の環境雑音とすることも可能で
ある。

【０２９０】音声区間推定部９１は、音響データの時系
列中において、音声が存在する時間的な区間を推定す
る。例えば、音声の始端を決める場合は、あるパワー閾
値とある時間閾値を設定しておき、音響データにおいて
その時間閾値以上の時間にわたりパワー閾値を超える信
号のパワーが持続したとき、そのパワー閾値を超えた時
点を始端と決定する。

【０２９１】終端も同様に決定できる。また、パワー閾
値と時間閾値を、始端決定用と終端決定用とで別の値に
設定することにより、音声区間をより高精度に推定でき
る。音源推定部が得た特定の話者の音声信号成分から、
その話者の発声した始端、終端を推定することができ
る。

【０２９２】音声認識理解部９２は、音響データの音響
的分析、構文、意味解析により、単語認識、音声理解を
行い、発言の意味内容を抽出する。音響分析は、短区間
の周波数分析を、例えば数ミリ秒間隔で行い、ＨＭＭな
どの統計的な方法や複合類似度法などによるパターンマ
ッチングにより、音韻系列、あるいは単語系列を得る。
これらと履歴情報なども利用して構文意味解析を行い、
最終的な音声認識、理解結果を得る。また、音源推定部
が得た特定の話者の音声信号成分から、その話者の発声
した語彙、意味内容を抽出することができる。（図）話
者情報管理部９３は、音源推定部９０によって推定され
る話者ごとに、音声区間推定部９１の推定する音声区
間、音声認識理解部９２の出力する単語認識結果、発言
の意味内容を管理し、どの話者がいつ何を発言したかを
示す環境情報を管理する。これらの情報は話者情報管理
テーブル内で管理される。話者情報管理テーブルでは、
ある話者の発声した音声だけを対象とするだけでなく、
ある音源が発した環境雑音をも対象とすることが可能で
ある。また、これらのデータを時間情報とともに管理す
れば検索対象データとの対応付けが容易である。

【０２９３】会議状況推定部９４は、話者交替時間差計
測部、周囲雑音計測部、非発言者発生音量計測部、状況
推定部を有する。話者交替時間差計測部は、一人の発言
者が発言を終えてから別の発言者が発言を始めるまでの
経過時間を、話者情報管理テーブルを参照して求める。
周囲雑音計測部は、非音声区間の音量レベルから周囲雑
音のレベルを求める。非発言者発生音量計測部は、音声
区間の発言者以外の音源による周囲音のレベルを求め
る。状況推定部は、話者交替時間差計測部の測定する経
過時間から議論進行の円滑さを、周囲雑音計測部の測定
する周囲雑音レベルや非発言者発生音量計測部の測定す
る周囲音のレベルから会議のにぎやかさ等の会議状況を
推定する。これらの会議状況は、時間情報とともに、会
議状況情報管理テーブルで管理する。

【０２９４】以上述べた環境情報抽出部４３への入力
は、環境情報入力部８０が取り込んだ音響データを利用
する場合についてであるが、対象データ記憶部４９に格
納されている音響データを利用して環境情報を抽出する
ことも可能である。

【０２９５】環境情報記憶部４８は、環境情報抽出部４
３の話者情報管理テーブルの内容と会議状況情報管理テ
ーブルの内容を格納する。これらの情報はすべて時間情
報が付加されている。

【０２９６】検索キー入力部５２は、マイク、ペン、マ
ウス、キーボードなどの入力手段を有する。

【０２９７】話者、語彙、意味内容、雰囲気など環境情
報記憶部４８に格納されている話者情報管理テーブルと
会議状況情報管理テーブルの内容に関する検索キーを、
これらの入力手段を用いて音声入力あるいはポインティ
ング操作により入力する。

【０２９８】検索部５０は、検索キー入力部の受け付け
た検索キーをもとに、話者情報管理テーブルの内容や会
議状況情報管理テーブルの内容を検索し、マッチする環
境情報と、それに関連する対象データを検索結果として
文字あるいはアイコン表示などの視覚的方法あるいは音
声や効果音などの聴覚的方法で出力する。

【０２９９】対象データ出力部５１は、環境情報記憶部
４８、対象データ記憶部４９に格納されている環境情報
およびマルチメディアデータの内容、検索部の検索結果
を音響的あるいは視覚的に再生出力する。

【０３００】たとえば、環境情報の出力例について説明
する。話者と時間を軸とすれば、誰がいつ発言したかを
視覚的に示すことができる。また、意味内容と話者を軸
とすれば、誰がどのような意味の発言をして、誰がそれ
に近い内容を発言したかを視覚的に示すことができる。

【０３０１】音を環境情報として利用した幾つかの例に
ついて説明する。

【０３０２】（例）会議ファイル：対象データは音声・
資料などの文書 ○入力時 ・環境情報入力部８０ではマイクを介して発言者の音
声、周囲の音を取り込む。 ・環境情報抽出部４３では、これらの音声データから、
いつ、1)誰が発言したかあるいは 2) どのような話題、
使用語彙、意味内容であるかを、音声認識・音声理解を
行い抽出する。また、3)一人の発言者が発言を終えてか
ら別の発言者が発言を始めるまでの経過時間、発言のな
いときの周囲雑音レベル、発言者以外の音声・音レベル
等から、会議の雰囲気などの会議状況も抽出する。

【０３０３】−誰が発言したか：複数のマイクを用いて
マルチチャネル入力ができれば容易である。

【０３０４】例えば、少なくともマイクが発言者と同じ
数だけあれば、マイクと発言者を対応付けることによ
り、誰が発言したかわかる。また、マイクが発言者の数
より少なくても、マイクアレイを構成して音源の方向が
判れば、だいたいの話者は判断できる。

【０３０５】−話題、語彙、意味内容：連続音声認識に
より発話の中から単語を認識し、その単語の組合せから
意味内容を判断する。認識対象となる単語は、予想され
る話題から予めいくつか指定しておき、他の単語よりも
認識結果を決める際に優先的に扱うこともできる。

【０３０６】−発言の開始と終了：音声レベルと持続時
間から音声区間が検出できる。 ・環境情報記憶部４８では、その音声データあるいは環
境情報抽出部４３が抽出した環境情報を入力時刻ととも
に記録する。 ・対象データ出力部５１では、環境情報を視覚的に提
示、あるいは対象データたる音声、音の再生、文書を表
示出力する。 ○検索時 ・検索キー入力部５２ではペン、キーボード、マウス、
カメラなどの入力デバイスからユーザの検索要求入力を
受け付ける。例えば、環境情報出力部４３で、図１１９
に示すように、環境情報のリストを表示しておき、この
中から入力デバイスで検索キーとする環境情報を選択す
れば、それと一致する環境情報を得た環境解析対象デー
タ、さらにそれとリンクされた検索対象データを得るこ
とができる。 ・話者に着目した検索の例：何を発言したか、語彙、意
味内容を時刻順に表示する。例えば、検索対象データと
して映画などの動画像データを流しておき、それを複数
の人で見たときの各々の場面における感想を各自が述べ
たとする。環境解析対象データとしてはその場の発言を
収録した音声テープを使い、話者認識による話者の推定
結果と発話に含まれる語の認識結果を各々環境情報とす
る解析を行うとする。得られた環境情報、すなわち話者
毎の認識結果を発話の時間順に並べて表示すれば、特定
の人の発言内容や、その移り変りを環境情報だけから知
ることもできるし、ある人がある語を発言した場面とし
て検索対象データを検索することもできる。 ・語彙に着目した検索の例：繰り返し発言に含まれる語
彙を、その会議のキーワードとして扱う。 ・話題に着目した検索の例：ある話題に対して誰がどう
いう意見であるかを表示する。 ・会議の雰囲気に着目した検索の例：一人の発言者が発
言を終えてから別の発言者が発言を始めるまでの経過時
間が短いと議論が白熱しているとみなす。また、発言者
以外の音声、音のレベルから、にぎやかであったか静か
であったかがわかる。

【０３０７】（例）文書ファイル：対象データは音声以
外、環境情報は周囲の雑音情報（レベル） ○入力時 ・環境情報入力部８０では複数のマイクを介して利用時
の周囲の音を取り込む。 ・環境情報抽出部４３では、これらの音データから周囲
雑音のレベルを抽出する。また、文書作成のためのキー
入力の頻度を抽出する。（あるいは、キー入力音のスペ
クトルに近い雑音とそうでない雑音のレベルを分けて抽
出することにより、周囲雑音の中から文書作成のために
発生する雑音を除く。） ・環境情報記憶部４８では、その音声データあるいは環
境情報抽出部が抽出した環境情報を入力時刻とともに記
録する。 ・対象データ出力部５１では、文書毎に、あるいは、段
落、文、句、節、文字などの単位で雑音情報を視覚的に
提示する。 ○検索時 ・検索キー入力部５２ではペン、キーボード、マウス、
カメラなどの入力デバイスからユーザの検索要求入力を
受け付ける。 ・文書作成の集中度に着目した検索の例：周囲雑音のレ
ベルや種類から、静かな環境で作成した文書をクオリテ
ィが高いと判断する。

【０３０８】次に、第７の発明について説明する。第７
の発明は、ユーザが使用した（ログインした）計算機固
有の番号あるいは名称や愛称を記憶し、記憶した番号あ
るいは名称や愛称を用いて所望の文書などのデータを抽
出検索する検索装置である。

【０３０９】現在多数のパソコンやワークステーション
などの計算機をネットワークによって接続することが可
能となり、また、そのような環境下では、ある計算機の
記憶装置などに存在するデータを他の計算機から参照し
たり、変更したりすることが可能になっている。この第
７の発明では、このような環境においても、どの計算機
でデータを作成や参照、変更したかを手掛かりに所望の
データを抽出検索することを可能としている。 ・実施例１ 図１２０に基本構成を示す。

【０３１０】この検索装置は、入力部１００、計算機Ｉ
Ｄ設定部１０１、検索対象データ記憶部１０２、検索対
象データ出力部１０３、データおよび計算機ＩＤ記憶部
１０４、環境情報出力部１０５、検索キー入力部１０
６、検索部１０７、通信部１０８から構成されている。

【０３１１】図１２１にデータおよび計算機ＩＤ記憶部
１０４に記憶される情報の形式とその例を示す。図１２
２に検索対象データ記憶部１０２に格納されているデー
タ名と文書名の対応表の例を示す。図１２３に図１２１
の情報を生成する計算機ＩＤ設定部１０１での処理の流
れを示す。

【０３１２】検索キー入力部１０６の図示しないウイン
ドウ上の検索キーが押下されると、検索部１０７により
検索処理が行われる。

【０３１３】検索処理の流れを図１２４に示す。処理１
２３１により表示される画面の例を図１２５に示す。図
１２５において、計算機名が選択されると、図１２４の
処理１２３３以下の処理が行われる。処理１２３３によ
り表示される画面の例を図１２６に示す。 ・実施例２ 装置の構成は図１２０と同様である。この実施例では、
計算機固有の番号あるいは名称や愛称と計算機が置かれ
ている部屋の中の配置図を格納しておき、場所の配置を
手掛かりとして所望のデータを検索することを可能にし
ている。

【０３１４】図１２７には計算機とその配置図に関する
情報が示されている。この情報を予め作成しておき、各
計算機のデータおよび計算機ＩＤ記憶部１０２に図１２
１に示す情報とともに格納しておく。

【０３１５】図１２７の情報を生成する計算機ＩＤ設定
部１０１の処理の流れは図１２３と同様である。図１２
８に検索部１０７の処理の流れを示す。また、処理１２
７１で表示される画面の一例を図１２９に示す。なお、
処理１２７１では、全ての場所名を表示しているが、当
該のユーザのユーザＩＤで、全ての計算機のデータおよ
び計算機ＩＤ記憶部１０４内の図１２１に示した情報を
検索し、当該の計算機ＩＤによりそれらの計算機が置か
れている部屋のゾーンの名前だけを表示してもよい。処
理１２７３により表示される画面の一例を図１３０に示
す。処理１２７９により表示される画面の例は図１２６
と同様である。

【０３１６】なお、図１２７中の対応表は、計算機を接
続するネットワークのコンセントにＡＩなどの位置表示
を付与しておくことにより、計算機を接続したときに自
動的に作成するようにしてもよい。この場合、計算機を
移動させても対応表を自動的に作成変更することができ
る。

【０３１７】次に、図１の環境情報出力部７が表示範囲
決定の処理を行う例を説明する。ここでは環境解析対象
データの例として温度を用いる。温度の測定について
は、ディジタル温度計などで用いられている技術を用い
ればよい。また検索対象データとして文書を用いる。

【０３１８】図１３１に記憶される情報の形式と例を示
す。図１３２に環境情報出力部７の処理の流れを示し、
図１３３に表示の一例を示す。

【０３１９】同様に、明るさ（照度）を環境解析対象デ
ータとする場合には、図１３４に示すように表示すれば
よい。また、音声を環境解析対象データとし、音声の大
きさを検索キーとする場合には、図１３５に示すように
表示し、音声の種類を検索キーとする場合には図１３６
に示すように表示すればよい。

【０３２０】

【発明の効果】本願発明によれば、データを、検索式や
タイトルや内容を思い出せない場合や、タイトルや内容
を自然言語表現で表せない場合でも検索できる。

【図面の簡単な説明】

【図１】本発明に係わるシステムの概略構成図

【図２】本発明に係わる検索対象データ入力部の構成図

【図３】本発明に係わるデータのレベルを表す図

【図４】本発明に係わる環境解析対象データ入力部の構
成図

【図５】本発明に係わる解析タイミングを示す図

【図６】本発明に係わる環境情報の取得に関する説明図

【図７】本発明に係わるシステムの概略構成図

【図８】本発明に係わるシステムの概略構成図

【図９】第１の発明に係わる機器構成図

【図１０】第１の発明に係わる機能構成図

【図１１】第１の発明に係わる文書データ格納部内の形
式とその一例を示す図

【図１２】第１の発明に係わる制御部の処理の流れを示
す図

【図１３】第１の発明に係わる検索部の処理の流れを示
す図

【図１４】第１の発明に係わる位置文書情報格納部内の
形式とその一例を示す図

【図１５】第１の発明に係わる“場所登録”キーが押下
された場合の制御部の処理の流れを示す図

【図１６】第１の発明に係わる場所名格納部内の形式と
その一例を示す図

【図１７】第１の発明に係わる制御部の処理の流れを示
す図

【図１８】第１の発明に係わる検索結果表示部の処理の
流れを示す図

【図１９】第１の発明に係わる検索結果表示部用ウィン
ドウにおける表示の一例を示す図

【図２０】第１の発明に係わる検索部の処理の流れを示
す図

【図２１】第１の発明に係わる検索結果表示部用ウィン
ドウの表示の一例を示す図

【図２２】第１の発明に係わる“場所登録”キーが押下
された場合の位置測定部の処理の流れを示す図

【図２３】第１の発明に係わる位置文書情報格納部の検
索処理の流れを示す図

【図２４】第１の発明に係わる新規文書入力の場合の検
索部の処理の流れを示す図

【図２５】第１の発明に係わる場所名登録促進の場合の
制御部の処理の流れを示す図

【図２６】第１の発明に係わる場所名登録促進の場合の
検索結果表示部の処理の流れを示す図

【図２７】第１の発明に係わる場所名登録促進の場合の
検索部の処理の流れを示す図

【図２８】第１の発明に係わる実施例２における機能構
成を示す図

【図２９】第１の発明に係わる実施例２における検索部
の処理の流れを示す図

【図３０】第１の発明に係わる実施例２における新規文
書入力の場合の検索部の処理の流れを示す図

【図３１】第１の発明に係わる場所名登録促進の場合の
表示の一例を示す図

【図３２】第１の発明に係わる場所名登録促進の操作後
の表示の一例を示す図

【図３３】第１の発明に係わる実施例３における第一の
装置の機能構成を示す図

【図３４】第１の発明に係わる実施例３における第二の
装置の機能構成を示す図

【図３５】第１の発明に係わる実施例３における第一の
装置の検索部の処理の流れを示す図

【図３６】第１の発明に係わる実施例３における第一の
装置の通信部が送信するデータの形式とその例を示す図

【図３７】第１の発明に係わる実施例３における第一の
装置の操作履歴格納部内の形式とその例を示す図

【図３８】第１の発明に係わる実施例３における新規文
書入力の場合の第一の装置の検索部の処理の流れを示す
図

【図３９】第１の発明に係わる実施例３における第二の
装置の位置操作情報格納部内の形式とその例を示す図

【図４０】第１の発明に係わる実施例３における第二の
装置の検索部の処理の流れを示す図

【図４１】第１の発明に係わる実施例３における第二の
装置の場所名格納部内の形式とその例を示す図

【図４２】第１の発明に係わる実施例３における第二の
装置の検索結果表示部の表示の一例を示す図

【図４３】第１の発明に係わる実施例４における第一の
装置の機能構成図

【図４４】第１の発明に係わる実施例４における第二の
装置の機能構成図

【図４５】第１の発明に係わる実施例４における第一の
装置の検索部の処理の流れを示す図

【図４６】第１の発明に係わる実施例４における第一の
装置の操作履歴格納部内の形式とその例を示す図

【図４７】第１の発明に係わる実施例４における新規文
書入力の場合の第一の装置の検索部の処理の流れを示す
図

【図４８】第１の発明に係わる実施例５における第二の
装置の機能構成図

【図４９】第１の発明に係わる実施例６における検索部
の処理の流れを示す図

【図５０】第１の発明に係わる実施例６における検索部
の処理の流れ（その２）を示す図

【図５１】第１の発明に係わる実施例７における検索結
果表示部の表示処理の流れを示す図

【図５２】第１の発明に係わる実施例７における検索結
果表示部用ウィンドウの表示の一例を示す図

【図５３】第１の発明に係わる実施例７における検索結
果表示部用ウィンドウの表示の一例（その２）を示す図

【図５４】第１の発明に係わる実施例７における検索結
果表示部用ウィンドウの表示の一例（その３）を示す図

【図５５】第１の発明に係わる実施例７における地図デ
ータベース内のデータの形式と一例を示す図

【図５６】第１の発明に係わる実施例８における機能構
成図

【図５７】第１の発明に係わる実施例８における文書の
一例を示す図

【図５８】第１の発明に係わる実施例８における文書デ
ータ格納部の形式とその例を示す図

【図５９】第１の発明に係わる実施例８における位置デ
ータベースの形式とその一例を示す図

【図６０】第１の発明に係わる実施例８における文書の
一例（その２）を示す図

【図６１】第１の発明に係わる実施例８における文書デ
ータ格納部の形式とその例（その２）を示す図

【図６２】第１の発明に係わる実施例８における位置デ
ータベースの形式とその一例（その２）を示す図

【図６３】第１の発明に係わる実施例８における表示の
一例を示す図

【図６４】第１の発明に係わる実施例８における表示の
一例（その２）を示す図

【図６５】第２の発明に係わる基本図

【図６６】第２の発明に係わるスケジュール表の一例を
示す図

【図６７】第２の発明に係わるスケジュール表の一例を
示す図

【図６８】第２の発明に係わるスケジュール表の一例を
示す図

【図６９】第３の発明に係わる基本図

【図７０】第３の発明に係わる文書例を示す図

【図７１】第３の発明に係わるレイアウトの例を示す図

【図７２】第３の発明に係わる段組テンプレートと制約
条件を示す図

【図７３】第３の発明に係わる図表配置タイプを示す図

【図７４】第３の発明に係わるレイアウト情報記憶部の
記憶例を示す図

【図７５】第３の発明に係わる段組の一覧を示す図

【図７６】第３の発明に係わる図表の種類を示す図

【図７７】第３の発明に係わる検索結果を示す図

【図７８】第３の発明に係わる検索結果をしめす図

【図７９】第４の発明に係わる環境情報抽出部を示す図

【図８０】第４の発明に係わる処理の流れを示す図

【図８１】第４の発明に係わるシーン変化判定部を示す
図

【図８２】第４の発明に係わる処理の流れを示す図

【図８３】第４の発明に係わるシーン変化検出例を示す
図

【図８４】第４の発明に係わるシーン変化検出例を示す
図

【図８５】第４の発明に係わるシーン変化検出例を示す
図

【図８６】第４の発明に係わるシーン変化検出例を示す
図

【図８７】第４の発明に係わる他の実施例を示す図

【図８８】第４の発明に係わるシーン変化検出例を示す
図

【図８９】第４の発明に係わるシーン変化検出例を示す
図

【図９０】第４の発明に係わるシーン変化検出例を示す
図

【図９１】第４の発明に係わるシーン変化検出例を示す
図

【図９２】第４の発明に係わるシーン変化検出例を示す
図

【図９３】第４の発明に係わるシーン変化検出例を示す
図

【図９４】第４の発明に係わるシーン変化検出例を示す
図

【図９５】第５および第６の発明に係わる基本図

【図９６】検索キー解析部を示す図

【図９７】検索キー解析処理を示す図

【図９８】検索語辞書を示す図

【図９９】検索語抽出用規則辞を示す図

【図１００】アクセス情報の一例を示す図

【図１０１】図９５におけるアクセス情報検出部の処理
の流れを示す図

【図１０２】図９５におけるアクセス情報検出部の処理
の流れを示す図

【図１０３】図９５におけるアクセス情報検出部の処理
の流れを示す図

【図１０４】図９５におけるアクセス情報検出部の処理
の流れを示す図

【図１０５】図９５におけるアクセス情報検出部の処理
の流れを示す図

【図１０６】図９５における検索部の処理の流れを示す
図

【図１０７】図９５における検索部の処理の流れを示す
図

【図１０８】図９５における検索部の処理の流れを示す
図

【図１０９】図９５における検索部の処理の流れを示す
図

【図１１０】図９５における検索部の処理の流れを示す
図

【図１１１】アクセス情報要素の表示例を示す図

【図１１２】アクセス情報表示例を示す図

【図１１３】アクセス情報表示例を示す図

【図１１４】スケジュールデータタと組み合わせたアク
セス情報表示例を示す図

【図１１５】図９５における検索部の処理の流れを示す
図

【図１１６】アクセス情報の一例を示す図

【図１１７】文書表示の一例を示す図

【図１１８】環境情報抽出部の例を示す図

【図１１９】環境情報リストの表示例を示す図

【図１２０】第７の発明に係る基本構成図

【図１２１】データおよび計算機ＩＤ記憶部に記憶され
る情報の形式とその例を示す図

【図１２２】検索対象データ記憶部に格納されるデータ
名と文書名との対応表の一例を示す図

【図１２３】計算機ＩＤ設定部での処理の流れを示す図

【図１２４】検索処理の流れを示す図

【図１２５】同処理により表示される画面例を示す図

【図１２６】同処理により表示される画面例を示す図

【図１２７】計算機とその配置に関する情報例を示す図

【図１２８】検索部の処理の流れを示す図

【図１２９】同処理により表示される画面例を示す図

【図１３０】同処理により表示される画面例を示す図

【図１３１】図１に示す装置における記憶情報の形式と
例を示す図

【図１３２】図１に示す装置の環境情報出力部の処理の
流れを示す図

【図１３３】同処理解きおける表示の一例を示す図

【図１３４】明るさを環境解析対象データとしたときの
表示例を示す図

【図１３５】音声の大きさを環境解析対象データとした
ときの表示例を示す図

【図１３６】音声の種類を環境解析対象データとしたと
きの表示例を示す図

【図１３７】図６５に示す装置の検索応用例を示す図

【符号の説明】

１…検索対象データ入力部 ２…検索対象デー
タ記憶部 ３…検索対象データ出力部 ４…環境解析対象
データ入力部 ５…環境情報解析部 ６…環境情報記憶
部 ７…環境情報出力部 ８…検索キー入力
部 ９…検索部

───────────────────────────────────────────────────── フロントページの続き (72)発明者 福井 美佳 神奈川県川崎市幸区小向東芝町１番地 株 式会社東芝研究開発センター内 (72)発明者 田中 久子 神奈川県川崎市幸区小向東芝町１番地 株 式会社東芝研究開発センター内 (72)発明者 竹林 洋一 神奈川県川崎市幸区小向東芝町１番地 株 式会社東芝研究開発センター内 (72)発明者 溝口 博 神奈川県川崎市幸区小向東芝町１番地 株 式会社東芝研究開発センター内 (72)発明者 伊藤 聡 神奈川県川崎市幸区柳町70番地 株式会社 東芝柳町工場内 (72)発明者 瀬戸 重宣 神奈川県川崎市幸区小向東芝町１番地 株 式会社東芝研究開発センター内 (72)発明者 松村 善邦 神奈川県川崎市幸区小向東芝町１番地 株 式会社東芝研究開発センター内

Claims (12)

【特許請求の範囲】
1. 【請求項１】文書等のデータを作成あるいは検索を行っ
   た際に、前記データとこのデータの作成、検索を行った
   位置の情報あるいは位置に関連する情報とを対応づけて
   記憶する手段と、 この記憶手段に記憶された情報に基づいて、前記データ
   を抽出する手段とを備えてなることを特徴とする検索装
   置。
2. 【請求項２】スケジュール項目を設定することにより、
   スケジュール表を作成するスケジュール管理システムを
   用い、 文書等の記憶対象データと関連するスケジュール項目を
   スケジュール表から特定する手段と、 この手段により特定されたスケジュール項目と前記記憶
   対象データとを関連づけて記憶する手段と、 この手段に記憶されたデータを前記スケジュール表のス
   ケジュール項目を基づいて抽出する手段とを備えてなる
   ことを特徴とする検索装置。
3. 【請求項３】文書等のデータを記憶する際に、このデー
   タの構造的特徴を示す情報を抽出する手段と、 この手段により抽出された構造的特徴を示す情報と上記
   データとを対応づけて記憶する手段と、 この手段に記憶された前記データを、前記構造的特徴を
   示す情報に基づいて抽出する手段とを備えてなることを
   特徴とする検索装置。
4. 【請求項４】データの構造的特徴を示す情報は、段組
   数、文書枠の大きさ及び位置、行数、図、表の数、図表
   の大きさ及び位置、図表の種類を示す情報であることを
   特徴とする請求項３に記載の検索装置。
5. 【請求項５】文書等のデータを作成、記憶、検索し得る
   装置と、この装置の所定位置に設置された画像入力装置
   とを用い、 前記データを入力し、記憶し、あるいは記憶されたデー
   タを検索する際の各々の動作を画像情報として前記画像
   入力装置を介して入力し、この画像情報と前記データと
   を各々対応づけて記憶する手段と、 この手段に記憶された画像情報を用いて、所望のデータ
   を抽出する手段とを備えてなることを特徴とする検索装
   置。
6. 【請求項６】文書等のデータを作成する際に、前記デー
   タの作成開始時刻あるいは作成終了時刻を検出する手段
   と、 この手段により検出された時刻と前記データとを対応づ
   けて記憶する手段と、この手段に記憶された時刻に基づ
   いて所望のデータを抽出する手段とを備えてなることを
   特徴とする検索装置。
7. 【請求項７】請求項６に記載の検索装置において、作成
   されたデータの作成開始時刻及び終了時刻からこのデー
   タの緊急度を得る手段を付加し、 この手段により得られた緊急度を用いて所望のデータを
   抽出することを特徴とする検索装置。
8. 【請求項８】請求項６に記載の検索装置において、作成
   されたデータの作成開始時刻及び終了時刻から作成に供
   された時間間隔を模式図に表現する手段を付加し、 この手段により得られた模式図を用いて所望のデータを
   抽出することを特徴とする検索装置。
9. 【請求項９】文書等のデータに対し編集を行う際に、前
   記データのアクセス開始時刻あるいは終了時刻を検出す
   る手段と、 この手段により検出された時刻と前記データとを対応づ
   けて記憶する手段と、 この手段に記憶された時刻に基づいて所望のデータを抽
   出する手段とを備えてなることを特徴とする検索装置。
10. 【請求項１０】請求項９に記載の検索装置において、前
    記データのアクセス開始時刻あるいは終了時刻からアク
    セス回数をカウントする手段を付加し、 この手段により得られたアクセス回数（参照頻度）を用
    いて所望のデータを抽出する手段を備えてなることを特
    徴とする検索装置。
11. 【請求項１１】文書、音声等のデータを入力する際に、
    前記音声のデータから音声の特徴的データを検出する手
    段と、 この手段により検出された特徴的データと前記データと
    対応づけて記憶する手段と、 この手段に記憶された特徴的データを用いて所望のデー
    タを抽出する手段とを備えてなることを特徴とする検索
    装置。
12. 【請求項１２】音声の特徴的データは、音声のデータか
    ら話者認識を行うことによって得られる話者の数を表す
    ことを特徴とする請求項１１に記載の検索装置。