JP4464549B2 - 画像情報表示装置 - Google Patents
画像情報表示装置 Download PDFInfo
- Publication number
- JP4464549B2 JP4464549B2 JP2000356109A JP2000356109A JP4464549B2 JP 4464549 B2 JP4464549 B2 JP 4464549B2 JP 2000356109 A JP2000356109 A JP 2000356109A JP 2000356109 A JP2000356109 A JP 2000356109A JP 4464549 B2 JP4464549 B2 JP 4464549B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- image
- pattern
- input
- reproducing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Image Processing (AREA)
- Digital Computer Display Output (AREA)
Description
【発明の属する技術分野】
本発明は、画像情報表示装置に係り、特に、ユーザに対して、ユーザの注目する対象に関連する情報を表示する画像情報表示装置に関する。
【0002】
【従来の技術】
従来、ユーザに対して、ユーザの注目する対象に関する情報を呈示する装置としては、ユーザヘの情報呈示用の液晶ディスプレイと、周辺画像を取得するための小型ビデオカメラとから構成された携帯型の情報呈示装置(平川正人、安村通晃「ビジュアルインタフェース」,bit別冊,共立出版,pp177−198,1996)が知られている。
【0003】
すなわち、この情報呈示装置は、何らかの作業を行うユーザに対して、周囲に存在する対象に関する有益な情報を対象の存在する位置に関連付けて呈示するものである。
【0004】
この情報呈示装置では、複雑な画像認識技術を用いることなく状況や対象を同定するために、各対象毎にID認識用のカラーコード(赤と青のストライプによってIDをエンコードした一種のバーコード)を添付しており、カメラから取り込まれたカラーコードを含む対象の画像を画像認識部へ送る。
【0005】
画像認識部は、カラーコードの表すID番号を解読してユーザの注目する対象の識別を行う。
【0006】
そして、メッセージ生成部では、識別したIDを検索キーとして、予め用意されているデータベースから該当する情報を検索して、カメラから得られた映像上の適切な位置に、この検索した情報を基にして生成されたメッセージを画像合成部により合成表示して情報呈示用のディスプレイに表示する。
【0007】
このような情報呈示装置の用途例としては、ユーザが壁にかけられたカレンダーの前に、この装置を差し出すと、カレンダーの映像上にデータベースから得られたスケジュール情報が合成されて表示されるものなどが考えられる。
【0008】
また、特開平10−55259号公報では、医療環境で使用するのに適したユーザ・インタフェースとしてユーザである看護婦または医師が病院内を歩き、病室にいる患者の回診を行う場合のユーザ・インタフェース環境について開示している。
【0009】
この特開平10−55259号公報では、ユーザである看護婦または医師が病室に入った場合、自動的にその位置を特定の部屋として検知したり、あるいは、ユーザである看護婦またぼ医師が部屋に入る際に部屋番号を入力して部屋を特定するようになっている。
【0010】
また、上記特開平10−55259号公報では、ユーザである看護婦または医師が入った部屋を特定すると、例えば、患者に関する情報を有するデータ・クリップボートが表示されるようになっている。
【0011】
【発明が解決しようとする課題】
ところで、上述したような情報呈示装置では、対象毎に取り付けられた識別用カラーコードを認識して識別IDを検索キーとして、予め用意されたデータベースから該当特報を検索して合成表示する情報を生成するようにしている。
【0012】
このため、例えば、上述した情報呈示装置を病院内での回診に使用する場合、患者が使用する各ベッドに識別用カラーコードを取り付け、ユーザがそのカラーコードを情報呈示装置で観察すると識別用カラーコードを認識して識別IDを検索キーとして情報を蓄積するデータベースの中から該当情報を検索することにより、初めてユーザに情報を呈示することができることになる。
【0013】
つまり、上述した情報呈示装置では、該当情報を検索している間は、情報を何も呈示できないということであり、データベースに蓄積されている情報が膨大で検索に時間がかかる場合や、外部データベースに電話回線や無線LAN等で接続されていて情報転送に時間がかかる場合にはユーザに情報を何も呈示できず、その間、患者の特定もできないという問題が発生する恐れがある。
【0014】
また、上記特開平10−55259号公報では、回診時に自動的に部屋を特定する検知方法については、具体的に、何も開示されていない。
【0015】
また、上記特開平10−55259号公報では、仮に、自動的に部屋を特定できたとしても、複数の患者が同一の部屋に存在する場合についての処理方法については何も開示されていない。
【0016】
このため、誤って同一の部屋に存在する別の患者の情報を参照してしまってもユーザが誤りに気付かないという重大な問題が発生する恐れがある。
【0017】
本発明は、上記問題点に着目し、ユーザに対して、ユーザの注目する対象に関連する情報を表示するもので、例えば、医療環境で使用する場合、データベースを検索しなくても患者に関する基本情報を呈示でき、さらに、データベースに蓄積された患者の情報をユーザに確実に呈示できる画像情報表示装置を提供することを目的とする。
【0018】
【課題を解決するための手段】
本発明によると、上記課題を解決するために、
(1) 対象物の画像を入力する画像入力手段と、
上記画像入力手段から入力された上記対象物の画像から、上記対象物に設けられた情報を符号化したパターンを認識するパターン認識手段と、
上記パターン認識手段により認識されたパターンの情報を画像情報に再生する情報再生手段と、
上記対象物に関連する情報を記録した関連情報記録手段と、
上記情報再生手段により再生されたパターンの情報を用いて上記関連情報記録手段から上記対象物に関連する情報を取得する関連情報取得手段と、
上記画像入力手段から入力された上記対象物の画像に対して、上記情報再生手段によって再生されたパターンの画像情報または上記関連情報取得手段によって取得された上記対象物に関連する情報の少なくとも一方を重畳して出力する画像重畳手段と、
上記画像重畳手段からの出力を表示する画像表示手段と、
を有し、
上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像に対する大きさに基づいて、パターンの情報の内容または上記対象物に関連する情報の内容を設定することを特徴とする画像情報表示装置が提供される。
【0019】
(対応する発明の実施の形態)
この発明に関する実施の形態は、第1の実施の形態と第2の実施の形態が対応する。
【0020】
この(1)の発明中の面像入力手段は、これらの実施の形態では、ビデオカメラが該当するが、画像を入力できるものであれば何でもよい。
【0021】
また、この(1)の発明中のパターン認識手段は、これらの実施の形態では、コントローラ内の二次元パターン認識部が該当するが、一次元パターンの認識でもかまわないし、パターンを認識できるものであれば何でもよい。
【0022】
また、この(1)の発明中の情報再生手段は、これらの実施の形態では、コントローラ内の情報再生部が該当するが、情報を再生できるものであれば何でもよい。
【0023】
また、この(1)の発明中の関連情報記録手段は、これらの実施の形態では、コントローラ内の関連情報記録部が該当するが、情報を記録できるものであれば何でもよく、有線ネットワークや、無線ネットワークで接続された外部データベースでもかまわない。
【0024】
また、この(1)の発明中の関連情報取得手段は、これらの実施の形態では、コントローラ内の関連情報取得部が該当するが、関連情報を取得できるものであれば何でもよい。
【0025】
また、この(1)の発明中の画像重畳手段は、これらの実施の形態では、コントローラ内の画像重畳部が該当するが、ビデオミキサーでもかまわないし、画像を重畳できるものであれば何でもよい。
【0026】
また、この(1)の発明中の画像表示手段は、これらの実施の形態では、液晶ディスプレイが該当するが、CRTやプラズマディスプレイでもかまわないし、画像を表示できるものであれば何でもよい。
【0027】
(作用)
画像入力手段から入力された対象物の画像は、パターン認識手段と重畳表示手段とに供給される。
【0028】
パターン認識手段は、入力された対象物の画像に含まれる所定のパターンを認識し、認識されたパターンは情報再生手段に供給される。
【0029】
情報再生手段は、認識されたパターンを情報に再生し、再生された情報は画像重畳手段と関連情報取得手段とに供給される。
【0030】
関連情報取得手段は、再生された情報に関連する情報を関連情報記録手段から取得し、取得された情報は画像重畳手段に供給される。
【0031】
画像重畳手段は、画像入力手段から入力された画像に、情報再生手段で再生した情報および関連情報取得手段が関連情報記録手段から取得した情報のうちの少なくともいずれか一方を重畳し、重畳された画像は画像表示手段に供給され、この画像表示手段によって表示されることにより、ユーザに呈示されるものであって、ここで、画像重畳手段は、パターン認識手段によって認識された入力画像中のパターンの大きさによって情報再生手段によって再生した情報および関連情報取得手段によって取得した情報のうちの少なくてもいずれか一方の呈示内容を設定する。
【0032】
また、本発明によると、上記課題を解決するために、
(2) 上記画像重畳手段は、上記対象物の画像に対して重畳する情報を選択する重畳情報選択指示手段を有し、この重畳情報選択指示手段からの指示により解読されたパターンの情報または上記対象物に関連する情報を上記対象物の画像に重畳することを特徴とする(1)に記載の画像情報表示装置が提供される。
【0033】
(対応する発明の実施の形態)
この発明に関する実施の形態は、第2の実施の形態が対応する。
【0034】
この(2)の発明中の重畳情報選択指示手段は、この実施の形態では、キーボード6が該当するが、マウスやトラックパッド等のポインティングデバイスや音声認識による方法でもかまわないし、ユーザが指示を与える情報等を入力できるものであれば何でもよい。
【0035】
(作用)
重畳情報選択指示手段は、重畳情報選択指示手段によって入力されるユーザが指示を与える情報等を画像重畳手段に供給する。
【0036】
画像重畳手段は、重畳情報選択指示手段によって入力された指示にしたがって、画像入力手段から入力された対象物の画像に、情報再生手段で再生した情報および関連情報取得手段が関連情報記録手段から取得した情報のうちの少なくてもいずれか一方を重畳し、重畳された画像は画像表示手段に供給され、ユーザに呈示される。
【0037】
また、本発明によると、上記課題を解決するために、
(3) 上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像内の位置に基づいて、パターンの情報または上記対象物に関連する情報を入力画像に対して重畳する位置を設定することを特徴とする(1)または(2)に記載の画像情報表示装置が提供される。
【0038】
(対応する発明の実施の形態)
この発明に関する実施の形態は、第1の実施の形態と第2の実施の形態が対応する。
【0039】
(作用)
画像重畳手段は、パターン認識手段によって認識された入力画像中のパターンの位置によって情報再生手段によって再生した情報および関連情報取得手段によって取得した情報のうちの少なくてもいずれか一方の重畳位置を設定する。
【0043】
また、本発明によると、上記課題を解決するために、
(4) 上記画像入力手段から入力される上記対象物に設けられた情報を符号化したパターンは、表示属性情報を含んでおり、
上記パターン認識手段は、上記表示属性情報を解読し、
上記情報再生手段は、上記パターン認識手段によって解読された表示属性情報に基づき画像情報を再生することを特徴とする(1)乃至(3)のいずれか一に記載の画像情報表示装置が提供される。
【0044】
(対応する発明の実施の形態)
この発明に関する実施の形態は、第1の実施の形態と第2の実施の形態が対応する。
【0045】
(作用)
情報再生手段は、パターン認識手段によって解読された表示属性情報に基づき画像情報を再生する。
【0046】
また、本発明によると、上記課題を解決するために、
(5) 上記表示属性情報は、上記画像入力装置から入力された画像内のパターンと、このパターンから再生された画像情報を表示する相対位置情報を含んでおり、
上記情報再生手段は、上記表示属性情報に基づき再生する画像情報の位置を設定することを特徴とする(4)に記載の画像情報表示装置が提供される。
【0047】
(対応する発明の実施の形態)
この発明に関する実施の形態は、第1の実施の形態と第2の実施の形態が対応する。
【0048】
(作用)
情報再生手段は、入力された画像内のパターンと、このパターンから再生された画像情報を表示する相対位置情報を含んでいる表示属性情報に基づき再生する画像情報の位置を設定する。
【0049】
また、本発明によると、上記課題を解決するために、
(6) 上記表示属性情報は、上記情報再生手段が認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでおり、
上記情報再生手段は、上記表示属性情報の絶対位置情報に基づき、認識されたパターンの情報を画像情報に再生する画像情報の位置を設定することを特徴とする(4)に記載の画像情報表示装置が提供される。
【0050】
(対応する発明の実施の形態)
この発明に関する実施の形態は、第1の実施の形態と第2の実施の形態が対応する。
【0051】
(作用)
情報再生手段は、情報再生手段が認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでいる表示属性情報に基づき再生する画像情報の位置を設定する。
【0052】
【発明の実施の形態】
以下図面を参照して本発明の実施の形態について説明する。
【0053】
(第1の実施の形態)
図1は、本発明による画像情報表示装置の第1の実施の形態の構成を示すブロック図である。
【0054】
この実施の形態は、本発明を医療環境としての病院における患者情報の管理に適用した例である。
【0055】
この発明の第1の実施の形態による画像情報表示装置は、以下のように構成されている。
【0056】
この画像情報表示装置(以下、情報呈示装置と記す)には、ビデオカメラ(画像入力手段)1と、コントローラ2と、液晶ディスプレイ(画像表示手段)3とが設けられている。
【0057】
前記コントローラ2には、二次元パターン認識部(パターン認識手段)21と、情報再生部(情報再生手段)22と、画像重畳部(画像重畳手段)23と、関連情報記録部(関連情報記録手段)24と、関連情報取得部(関連情報取得手段)25とが設けられている。
【0058】
ビデオカメラ1で撮影された画像は、コントローラ2内の二次元パターン認識部21とコントローラ2内の画像重畳部23とに供給される。
【0059】
二次元パターン認識部21からの出力は、情報再生部22に供給される。
【0060】
情報再生部22からの出力は、画像重畳部23と関連情報取得部25とに供給される。
【0061】
関連情報取得部25からの出力は、関連情報記録部24と画像重畳部23とに供給される。
【0062】
関連情報記録部24からの出力は、関連情報取得部25に供給される。
【0063】
画像重畳部23からの出力は、液晶ディスプレイ3に供給される。
【0064】
対象物であるベッド4には、二次元パターン5が貼り付けてある。
【0065】
この二次元パターン5は、例えば、50mm四方の領域に2000バイトの情報が記録可能であり、エラー訂正機能を持っている。
【0066】
また、この二次元パターン5には、例えば、図2に示すように、ベッド4を使用している患者の基本情報である患者名、生年月目、性別、患者番号がパターン化された情報として記録されている。
【0067】
次に、この発明の第1の実施の形態による情報呈示装置の作用を説明する。
【0068】
図3は、本実施の形態による情報呈示装置におけるコントローラ2の処理手順を説明するために示すフロ一チャートである。
【0069】
まず、ユーザは、本実施の形態による情報呈示装置におけるビデオカメラ1を用いて対象物であるベッド4および二次元パターン5を撮影する(ステップS101)。
【0070】
これにより、ビデオカメラ1で撮影された画像は、コントロ一ラ2内の二次元パターン認識部21で二値化された後、二値化の中から二次元パターン5の部分が抽出されることにより、二次元パターン5のパターン認識が行われる(ステップS102)。
【0071】
そして、パターン認識が行われた情報は、情報再生部22に供給される。
【0072】
情報再生部22では、二次元パターン認識部21でパターン認識が行われた情報に基づいて、テキストデータやグラフィックデータを生成することにより、画像信号に変換する(ステップS103)。
【0073】
情報再生部22で画像信号に変換された情報は、画像重畳部23に供給され、二次元パターン認識部21で抽出した二次元パターン部分の左上方にビデオカメラ1で撮影された画像と重畳される。
【0074】
重畳された画像は、液晶ディスプレイ3に供給され、ユーザに呈示される(ステップS104)。
【0075】
関連情報取得部25では、情報再生部22で生成されたデータに基づいて、関連情報記録部24に蓄積された情報の中から、情報再生部22で生成されたデータに関連する情報(例えば、患者の血液検査結果等)を取得する。
【0076】
そして、取得した情報に基づいて、テキストデータやグラフィックデータを生成することにより、画像信号に変換する(ステップS105)。
【0077】
関連情報取得部25で画像信号に変換された情報は、画像重畳部23に供給され、二次元パターン認識部21で抽出した二次元パターン部分の右上方にビデオカメラ1で撮影された画像と重畳される。
【0078】
重畳された画像は、液晶ディスプレイ3に供給され、ユーザに呈示される(ステップS106)。
【0079】
したがって、ユーザには、図4に示すように、液晶ディスプレイ3上に、ビデオカメラ1で撮影された画像に、ベッド4を使用している患者の氏名、生年月日、性別、患者番号の基本情報と、関連情報記録部24に蓄積されているベッド4を使用している患者の血液検査結果とが、一覧表として重畳された画像が呈示される。
【0080】
この場合、患者の血液検査結果は一覧表ではなく、図5に示すようなグラフを重畳して呈示するようにしても良い。
【0081】
また、二次元パターン5がパターン認識手報によって認識された入力画像中のパターンの大きさによって、例えば、入力画像中のパターンが小さなときには基本情報を呈示し、入力画像中のパターンが大きくなったら血液検査結果を呈示するようにしても良い。
【0082】
このようにして、上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像に対する大きさに基づいて、パターンの情報の内容または上記対象物に関連する情報の内容を設定する。
【0083】
したがって、以上のような本発明の第1の実施の形態によれば、画像重畳手段により、画像入力手段からの画像と、パターン認識手段と情報再生手段とにより再生された情報と、関連情報取得手段が関連情報記録手段から取得した情報とを重畳してから、画像表示手段によって表示するようにしたので、即座に、パターンに記録された患者名等の基本情報を表示することができる。
【0084】
また、本発明の第1の実施の形態によれば、パターンに記録された情報に基づいて関連情報を取得するので、入力された画像と入力画像に含まれる情報と、入力画像に関連する情報を重畳して表示することにより、ユーザに呈示することが可能になる。
【0085】
なお、この実施の形態では、パターンに記録された情報と、パターンに記録された情報に基づいた関連情報との両方を同時に表示するようにしているが、順番に片方ずつ表示するようにしても良いし、どちらか片方のみを表示するようにしても良い。
【0086】
また、パターンに記録された情報の重畳位置は、二次元パターン部分の右上方に、パターンに記録された情報に基づいた関連情報の重畳位置は、二次元パター一ン部分の左上方としたが、これらの重畳位置は、ユーザが指定する任意の位置でも良いし、パターンとの相対的または絶対的な重畳位置をパターンにあらかじめ記録しておいても良いし、パターンの上下左右をパターンにあらかじめ記録しておき、これに基づき呈示する情報の上下左右の定位を決めても良い。
【0087】
すなわち、上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像内の位置に基づいて、パターンの情報または上記対象物に関連する情報を入力画像に対して重畳する位置を設定するようにしている。
【0088】
また、上記画像入力手段から入力される上記対象物に設けられた情報を符号化したパターンは、表示属性情報を含んでおり、上記パターン認識手段は、上記表示属性情報を解読し、上記情報再生手段は、上記パターン認識手段によって解読された表示属性情報に基づき画像情報を再生するようにしている。
【0089】
また、上記表示属性情報は、上記画像入力手段から入力された画像内のパターンと、このパターンから再生された画像情報を表示する相対位置情報を含んでおり、上記情報再生手段は、上記表示属性情報に基づき再生する画像情報の位置を設定するようにしている。
【0090】
また、上記表示属性情報は、上記情報再生手段が認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでおり、上記情報再生手段は、上記表示属性情報の絶対位置情報に基づき、認識されたパターンの情報を画像情報に再生する画像情報の位置を設定するようにしている。
【0091】
また、この発明の第1の実施の形態の各構成は、当然、各種の変形、変更が可能である。
【0092】
例えば、画像入力手段は、この実施の形態では、ビデオカメラ1が該当するが、画像を入力できるものであれば何でもよい。
【0093】
また、パターン認識手段は、この実施の形態では、コントローラ2内の二次元パターン認識部21が該当するが、一次元パターンの認識でもかまわないし、パターンを認識できるものであれば何でも良い。
【0094】
また、情報再生手段は、この実施の形態では、コントローラ2内の情報再生部22が該当するが、情報を再生できるものであれば何でも良い。
【0095】
また、関連情報記録手段は、この実施の形態では、コントローラ2内の関連情報記録部24が該当するが、情報を記録できるものであれば何でも良く、有線ネットワークや、無線ネットワーク等で接続された外部データベースでもかまわない。
【0096】
また、画像重畳手段は、この実施の形態では、コントローラ2内の画像重畳部23が該当するが、ビデオミキサーでもかまわないし、画像を重畳できるものであれば何でも良い。
【0097】
また、画像表示手段は、この実施の形態では、液晶ディスプレイ3が該当するが、CRTやプラズマディスプレイでもかまわないし、画像を表示できるものであれば何でも良い。
【0098】
(第2の実施の形態)
次に、図6に基づいて本発明による画像情報表示装置の第2の実施の形態として、医療環境としての病院における患者情報の管理に適用した情報呈示装置について説明する。
【0099】
図6は、本発明による画像情報表示装置の第2の実施の形態としての情報呈示装置の構成を示すブロック図である。
【0100】
この第2の実施の形態の構成で、第1の実施の形態と同じであるものは、同じ参照符号を用いて説明する。
【0101】
本実施の形態による情報呈示装置は、以下のように構成されている。
【0102】
この情報呈示装置には、ビデオカメラ(画像入力手段)1と、コントローラ2と、液晶ディスプレイ(画像表示手段)3とが設けられている。
【0103】
前記コントローラ2には、二次元パターン認識部(パターン認識手段)21と、情報再生部(情報再生手段)22と、画像重畳部(画像重畳手段)23と、関連情報記録部(関連情報記録手段)24と、関連情報取得部(関連取得情報手段)25とが設けられている。
【0104】
ビデオカメラ1で撮影された画像は、コントローラ2内の二次元パターン認識部21とコントローラ2内の面像重畳部23に供給される。
【0105】
二次元パターン認識部21からの出力は、情報再生部22に供給される。
【0106】
情報再生部22からの出力は、画像重畳部23と、関連情報取得部25とに供給される。
【0107】
関連情報取得部25からの出力は、関連情報記録部24と、画像重畳部23とに供給される。
【0108】
関連情報記録部24からの出力は、関連情報取得部25に供給される。
【0109】
画像重畳部23からの出力は、液晶ディスプレイ3に供給される。
【0110】
キーボ一ド(重畳情報選択指示手段および指示入力手段)6で入力されたユーザ指示情報は、コントローラ2内の面像重畳部23に供給される。
【0111】
二次元パターン5は、例えば、50mm四方の領域に2000バイトの情報が記録可能であり、エラー訂正機能を持っている。
【0112】
この二次元パターン5には、例えば、図2に示すように、対象物であるベッド4を使用している患者の氏名、生年月日、性別、患者番号がパターン化された情報として記録されている。
【0113】
次に、この発明の第2の実施の形態による情報呈示装置の作用を説明する。
【0114】
図7は、本実施の形態による情報呈示装置におけるコントローラ2の処理手順を示すフローチャートである。
【0115】
まず、ユーザは、本実施の形態による情報呈示装置におけるビデオカメラ1を用いて対象物であるベッド4および二次元パターン5を撮影する(ステップS201)。
【0116】
これにより、ビデオカメラ1で撮影された画像は、コントローラ2内の二次元パターン認識部21で二値化された後、二値化画像の中から二次元パターン5の部分が抽出されることにより、二次元パターン5のパターン認識が行われる(ステップS202)。
【0117】
そして、パターン認識が行われた情報は、情報再生部22に供給される。
【0118】
情報再生部22では、二次元パターン認識部21でパターン認識が行われた情報に基づいて、テキストデータやグラフィックデータを生成することにより、画像信号に変換する(ステップS203)。
【0119】
情報再生部22で画像信号に変換された情報は、画像重畳部23に供給され、二次元パターン認識部21で抽出した二次元パターン部分の左上方にビデオカメラ1で撮影された画像と重畳される。
【0120】
重畳された画像は、液晶ディスプレイ3に供給され、ユーザに呈示される(ステップS204)。
【0121】
ユーザは呈示された患者名、生年月日、性別、患者番号を確認し、関連情報の表示または非表示の指示をキーボード6に入力する(ステップS205)。
【0122】
ユーザが関連情報を表示するとキーボード6から入力したら、関連情報取得部25では、情報再生部22で生成されたデータに基づいて、関連情報記録部24に蓄積された情報の中から、情報再生部22で生成されたデータに関連する情報を取得する。
【0123】
そして、取得した情報に基づいて、テキストデータやグラフィックデータを生成することにより、画像信号に変換する(ステップS206)。
【0124】
関連情報取得部25で画像信号に変換された情報は、画像重畳部23に供給され、二次元パターン認識部21で抽出した二次元パターン部分の右上方にビデオカメラ1で撮影された画像と重畳される。
【0125】
重畳された画像は、液晶ディスプレイ3に供給され、ユーザに呈示される(ステップS207)。
【0126】
したがって、ユーザには、図4に示すように、液晶ディスプレイ3上に、ビデオカメラ1で撮影された画像に、対象物であるベッド4を使用している患者の氏名、生年月日、性別、患者番号の情報と、関連情報記録部24に蓄積されたベッド4を使用している患者に特有の情報、例えば、血液検査結果の一覧表等とが重畳された画像が呈示される。
【0127】
この場合、患者の血液検査結果の一覧表ではなく、図5に示すようなグラフを重畳して呈示するようにしても良い。
【0128】
すなわち、以上のようにして画像重畳手段は、上記対象物の画像に対して重畳する情報を選択する重畳情報選択指示手段(キーボード)6を有し、この重畳情報選択指示手段からの指示により解読されたパターンの情報または上記対象物に関連する情報を上記対象物の画像に重畳する。
【0129】
なお、ユーザが関連情報を表示しないとキーボード6から入力したら、画像重畳部23は、関連情報の重畳しないので、関連情報は表示されない。
【0130】
また、二次元パターン5がパターン認識手段によって認識された入力画像中のパターンの大きさによって、例えば、入力画像中のパターンが小さなときには基本情報を呈示し、入力画像中のパターンが大きくなったら血液検査結果等を呈示するようにしても良い。
【0131】
したがって、以上のような本発明の第2の実施の形態によれば、画像重畳手段により、画像入力手段からの画像と、パターン認識手段と情報再生手段とにより再生された情報とを重畳した後に、指示入力手段に入力された指示によって関連情報取得手段が関連情報記録手段から取得した情報を重畳してから画像表示手段により表示するようにしたので、即座に、パターンに記録された患者名等を表示することができる。
【0132】
また、本発明の第2の実施の形態によれば、ユーザが関連情報を必要としたときにのみパターンに記録された情報に基づいて関連情報を取得するするようにしたので、入力された画像と入力画像に含まれる情報と入力画像に関連する情報とを重畳表示してユーザに呈示することが可能になる。
【0133】
なお、この実施の形態では、パターンに記録された情報と、パターンに記録された情報に基づいた関連情報との両方を同時に表示するようにしたが、順番に片方ずつ表示するようにしても良いし、どちらか片方のみを表示するようにしても良い。
【0134】
また、パターンに記録された情報の重畳位置は、二次元パターン部分の右上方に、パターンに記録された情報に基づいた関連情報の重畳位置は、二次元パターン部分の左上方としたが、これらの重畳位置はユーザが指定する任意の位置でも良いし、パターンとの相対的または絶対的な重畳位置をパターンにあらかじめ記録しておいても良いし、パターンの上下左右をパターンにあらかじめ記録しておき、これに基づき呈示する情報の上下左右の定位を決めるようにしても良い。
【0135】
すなわち、上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像内の位置に基づいて、パターンの情報または上記対象物に関連する情報を入力画像に対して重畳する位置を設定するようにしている。
【0136】
また、上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像に対する大きさに基づいて、パターンの情報の内容または上記対象物に関連する情報の内容を設定するようにしている。
【0137】
また、上記画像入力手段から入力される上記対象物に設けられた情報を符号化したパターンは、表示属性情報を含んでおり、上記パターン認識手段は、上記表示属性情報を解読し、上記情報再生手段は、上記パターン認識手段によって解読された表示属性情報に基づき画像情報を再生するようにしている。
【0138】
また、上記表示属性情報は、上記画像入力手段から入力された画像内のパターンと、このパターンから再生された画像情報を表示する相対位置情報を含んでおり、上記情報再生手段は、上記表示属性情報に基づき再生する画像情報の位置を設定するようにしている。
【0139】
また、上記表示属性情報は、上記情報再生手段が認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでおり、上記情報再生手段は、上記表示属性情報の絶対位置情報に基づき、認識されたパターンの情報を画像情報に再生する画像情報の位置を設定するようにしている。
【0140】
また、この発明の第2の実施の形態の各構成は、当然、各種の変形、変更が可能である。
【0141】
例えば、画像入力手段は、この実施の形態では、ビデオカメラ1が該当するが、画像を入力できるものであれば何でも良い。
【0142】
また、パターン認識手段は、この実施の形態では、コントローラ2内の二次元パターン認識部21が該当するが、一次元パターンの認識でもかまわないし、パターンを認識できるものであれば何でも良い。
【0143】
また、情報再生手段は、この実施の形態では、コントローラ2内の情報再生部22が該当するが、情報を再生できるものであれば何でも良い。
【0144】
また、関連情報記録手段は、この実施の形態では、コントローラ2内の関連情報記録部24が該当するが、情報を記録できるものであれば何でも良く、有線ネットワークや、無線ネットワーク等で接続された外部データベースでもかまわない。
【0145】
また、画像重畳手段は、この実施の形態では、コントローラ2内の画像重畳部23が該当するが、ビデオミキサーでもかまわないし、画像を重畳できるものであれば何でも良い。
【0146】
また、画像表示手段は、この実施の形態では、液晶ディスプレイ3が該当するが、CRTやプラズマディスプレイでもかまわないし、画像を表示できるものであれば何でも良い。
【0147】
【発明の効果】
請求項1に記載の本発明によれば、入力された画像と入力画像に含まれる情報および入力画像に関連する情報のうちの少なくてもいずれか一方を重畳表示してユーザに呈示することが可能になる。
【0148】
請求項2に記載の本発明によれば、入力された画像と入力画像に含まれる情報および入力画像に関連する情報のうちの少なくてもいずれか一方をユーザの指示に応じて重畳表示し、ユーザに呈示することが可能になる。
【0149】
請求項3に記載の本発明によれば、パターンに記録された情報とパターンに記録された情報に基づき取得した関連情報を適切に配置してユーザに呈示することが可能となる。
【0150】
請求項4に記載の本発明によれば、認識された入力画像中のパターンの大きさによって再生した情報および取得した情報のうちの少なくてもいずれか一方の呈示内容を設定することが可能となる。
【0151】
請求項5に記載の本発明によれば、解読された表示属性情報に基づき画像情報を再生することが可能となる。
【0152】
請求項6に記載の本発明によれば、表示属性情報に含まれている相対位置情報に基づいて表示位置を設定した情報をユーザに呈示することが可能となる。
【0153】
請求項7に記載の本発明によれば、認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでいる表示属性情報に基づき再生する画像情報の位置を設定することが可能となる。
【0154】
従って、以上説明したように、本発明によれば、ユーザに対して、ユーザの注目する対象に関連する情報を表示するもので、例えば、医療環境で使用する場合、データベースを検索しなくても患者に関する基本情報を呈示でき、さらに、データベースに蓄積された患者の情報をユーザに確実に呈示できる画像情報表示装置を提供することができる。
【0155】
また、医療環境以外への適用として、携帯情報端末を用いたパーソナルナビゲーションにおいて使用し街頭にパターンを設置することにより、ユーザに対し、ユーザの注目する対象に関連する情報を呈示することができる。
【図面の簡単な説明】
【図1】図1は、本発明による画像情報表示装置の第1の実施の形態の構成を示すブロック図である。
【図2】図2は、本発明で用いる二次元パターンの例として、ベッド4を使用している患者の基本情報である患者の氏名、生年月目、性別、患者番号がパターン化された情報として記録されている二次元パターン5を示す図である。。
【図3】図3は、本発明による画像情報表示装置の第1の実施の形態としての情報呈示装置におけるコントローラ2の処理手順を説明するために示すフロ一チャートである。
【図4】図4は、本発明による画像情報表示装置の第1の実施の形態としての情報呈示装置において、ユーザに呈示される画像の例として、液晶ディスプレイ3上に、ビデオカメラ1で撮影された画像に、ベッド4を使用している患者の氏名、生年月日、性別、患者番号の基本情報と、関連情報記録部24に蓄積されているベッド4を使用している患者の血液検査結果とが、一覧表として重畳された画像を示す図である。
【図5】図5は、図4に示す患者の血液検査結果の一覧表の代わりに、グラフを重畳して呈示する例を示す図である。
【図6】図6は、本発明による画像情報表示装置の第2の実施の形態としての情報呈示装置の構成を示すブロック図である。
【図7】図7は、本発明による画像情報表示装置の第2の実施の形態としての情報呈示装置におけるコントローラ2の処理手順を説明するために示すフロ一チャートである。
【符号の説明】
1…ビデオカメラ(画像入力手段)、
2…コントローラ、
3…液晶ディスプレイ(画像表示手段)、
4…ベッド、
5…二次元パターン、
6…キーボード(重畳情報選択指示手段および指示入力手段)、
21…二次元パターン認識部(パターン認識手段)、
22…情報再生部(情報再生手段)、
23…画像重畳部(画像重畳手段)、
24…関連情報記録部(関連情報記録手段)、
25…関連情報取得部(関連情報取得手段)。
Claims (6)
- 対象物の画像を入力する画像入力手段と、
上記画像入力手段から入力された上記対象物の画像から、上記対象物に設けられた情報を符号化したパターンを認識するパターン認識手段と、
上記パターン認識手段により認識されたパターンの情報を画像情報に再生する情報再生手段と、
上記対象物に関連する情報を記録した関連情報記録手段と、
上記情報再生手段により再生されたパターンの情報を用いて上記関連情報記録手段から上記対象物に関連する情報を取得する関連情報取得手段と、
上記画像入力手段から入力された上記対象物の画像に対して、上記情報再生手段によって再生されたパターンの画像情報または上記関連情報取得手段によって取得された上記対象物に関連する情報の少なくとも一方を重畳して出力する画像重畳手段と、
上記画像重畳手段からの出力を表示する画像表示手段と、
を有し、
上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像に対する大きさに基づいて、パターンの情報の内容または上記対象物に関連する情報の内容を設定することを特徴とする画像情報表示装置。 - 上記画像重畳手段は、上記対象物の画像に対して重畳する情報を選択する重畳情報選択指示手段を有し、この重畳情報選択指示手段からの指示により解読されたパターンの情報または上記対象物に関連する情報を上記対象物の画像に重畳することを特徴とする請求項1に記載の画像情報表示装置。
- 上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像内の位置に基づいて、パターンの情報または上記対象物に関連する情報を入力画像に対して重畳する位置を設定することを特徴とする請求項1または2に記載の画像情報表示装置。
- 上記画像入力手段から入力される上記対象物に設けられた情報を符号化したパターンは、表示属性情報を含んでおり、
上記パターン認識手段は、上記表示属性情報を解読し、
上記情報再生手段は、上記パターン認識手段によって解読された表示属性情報に基づき画像情報を再生することを特徴とする請求項1乃至3のいずれか一に記載の画像情報表示装置。 - 上記表示属性情報は、上記画像入力装置から入力された画像内のパターンと、このパターンから再生された画像情報を表示する相対位置情報を含んでおり、
上記情報再生手段は、上記表示属性情報に基づき再生する画像情報の位置を設定することを特徴とする請求項4に記載の画像情報表示装置。 - 上記表示属性情報は、上記情報再生手段が認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでおり、
上記情報再生手段は、上記表示属性情報の絶対位置情報に基づき、認識されたパターンの情報を画像情報に再生する画像情報の位置を設定することを特徴とする請求項4に記載の画像情報表示装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000356109A JP4464549B2 (ja) | 2000-11-22 | 2000-11-22 | 画像情報表示装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000356109A JP4464549B2 (ja) | 2000-11-22 | 2000-11-22 | 画像情報表示装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2002157575A JP2002157575A (ja) | 2002-05-31 |
JP4464549B2 true JP4464549B2 (ja) | 2010-05-19 |
Family
ID=18828414
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000356109A Expired - Fee Related JP4464549B2 (ja) | 2000-11-22 | 2000-11-22 | 画像情報表示装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4464549B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005044029A (ja) | 2003-07-24 | 2005-02-17 | Olympus Corp | 情報呈示方法及び情報呈示システム |
JP7467075B2 (ja) * | 2019-11-06 | 2024-04-15 | 東芝テック株式会社 | 情報処理装置及びプログラム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06211323A (ja) * | 1992-11-30 | 1994-08-02 | Olympus Optical Co Ltd | 物流管理システム |
JPH08101849A (ja) * | 1994-09-30 | 1996-04-16 | Toshiba Corp | データ検索システム |
US5910799A (en) * | 1996-04-09 | 1999-06-08 | International Business Machines Corporation | Location motion sensitive user interface |
JP3518304B2 (ja) * | 1998-01-19 | 2004-04-12 | 株式会社豊田中央研究所 | 情報閲覧システム |
JP3786166B2 (ja) * | 1998-06-30 | 2006-06-14 | ソニー株式会社 | 画像処理装置、画像処理方法、および画像処理プログラム |
JP3122417B2 (ja) * | 1998-09-17 | 2001-01-09 | 株式会社東芝 | 情報表示方法及び情報処理装置 |
-
2000
- 2000-11-22 JP JP2000356109A patent/JP4464549B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2002157575A (ja) | 2002-05-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4405172B2 (ja) | 医用システム | |
JP5835381B2 (ja) | 画像処理装置及びプログラム | |
JP2005148990A (ja) | 医用画像読影システム及び読影レポート作成方法 | |
JP2005149107A (ja) | 医用画像管理システム | |
JP5231720B2 (ja) | 画像表示システム、及び画像表示装置 | |
JP2008200139A (ja) | 画像診断支援装置 | |
JP2000134603A (ja) | デ―タ転送方法および装置並びに記録媒体 | |
JP4818274B2 (ja) | 画像センサを備えた装置へマルチメディア・データを配信する方法 | |
JP2005130912A (ja) | 画像表示装置及びプログラム | |
JP2016526204A (ja) | 画像視覚化 | |
JP2004355168A (ja) | 病院リスクマネジメント支援システム | |
JP2006262977A (ja) | 医用画像表示装置 | |
JP2005056213A5 (ja) | ||
JP4464549B2 (ja) | 画像情報表示装置 | |
JPWO2006035788A1 (ja) | 撮像装置および撮像方法 | |
JP2007163370A (ja) | 移動支援装置、移動支援方法、移動支援プログラムおよび移動支援システムならびに支援コンテンツ用素材収集支援装置 | |
JP2007058625A (ja) | 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム | |
JP5262649B2 (ja) | 医用画像表示装置及びプログラム | |
JP4183865B2 (ja) | 情報呈示装置及び情報呈示方法 | |
JP2004272357A (ja) | 画像認識結果提示装置、画像認識結果表示方法、画像認識結果提示プログラムおよび記録媒体 | |
JP2004329742A (ja) | 画像表示装置、画像表示方法、コンピュータプログラムおよびコンピュータ読み取り可能な記録媒体 | |
JP2004302502A (ja) | 画像処理装置 | |
JP2006309550A (ja) | 二重読影支援システム | |
KR20210116947A (ko) | 치과용 전자 동의서 제공방법 및 이를 위한 치과 업무 관리장치 | |
JP2005173818A5 (ja) |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061030 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090807 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090818 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090929 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100126 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100219 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130226 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140226 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |