JP3145342B2 - Processing device for medical image data - Google Patents

Processing device for medical image data

Info

Publication number
JP3145342B2
JP3145342B2 JP27777797A JP27777797A JP3145342B2 JP 3145342 B2 JP3145342 B2 JP 3145342B2 JP 27777797 A JP27777797 A JP 27777797A JP 27777797 A JP27777797 A JP 27777797A JP 3145342 B2 JP3145342 B2 JP 3145342B2
Authority
JP
Japan
Prior art keywords
image data
image
extraction
output
medical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP27777797A
Other languages
Japanese (ja)
Other versions
JPH11113854A (en
Inventor
裕 武田
Original Assignee
マルチメディアシステム事業協同組合
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by マルチメディアシステム事業協同組合 filed Critical マルチメディアシステム事業協同組合
Priority to JP27777797A priority Critical patent/JP3145342B2/en
Publication of JPH11113854A publication Critical patent/JPH11113854A/en
Application granted granted Critical
Publication of JP3145342B2 publication Critical patent/JP3145342B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明が属する技術分野】本発明は、医師などの診療の
ために必要な医療用画像データを処理するための装置に
関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an apparatus for processing medical image data necessary for medical treatment of a doctor or the like.

【0002】[0002]

【従来の技術】病院などの医療現場では、放射線画像を
中心にデジタル画像処理は飛躍的に進歩している。しか
し診察室および生理機能検査室などで得られるアナログ
画像データの処理技術の開発は、前記デジタル画像処理
に比べて遅れており、病院情報システムにおける診療情
報の収集、統合において大きな障害になるおそれがあ
る。すなわち従来から医療現場では、来院歴、投薬歴お
よび検査歴などの文字情報およびX線画像情報がデジタ
ルデータベースとして蓄積され、利用されている。これ
に対してたとえば脳神経外科における診断に重要な意義
のある患者の顔面状態、神経内科における手足の動作お
よび麻痺状態ならびに整形外科における腕の変化および
間接の脱臼状態などの動画および静止画などは、従来で
は撮影するための適切な手段が医療現場にはほとんど存
在せず、たとえ存在しても、ビデオカメラによって撮像
してビデオテープに録画するだけであり、検索して利用
することができる状態にはなっていない。したがって従
来ではアナログ画像データは、利用されておらず、捨て
られている。医療現場において、静止画像はカルテに添
付され、ファイルされて棚に保管されており、また動画
および音声などのデータは、磁気テープなどに記録され
て棚に保管されているにすぎない。
2. Description of the Related Art At medical sites such as hospitals, digital image processing, especially radiographic images, has been dramatically advanced. However, the development of processing technology for analog image data obtained in consultation rooms and physiological function test rooms has been delayed compared to the digital image processing, and there is a possibility that collection and integration of medical information in a hospital information system may become a major obstacle. is there. That is, in the medical field, character information such as a visit history, a medication history, and a test history and X-ray image information are conventionally stored and used as a digital database. On the other hand, for example, moving images and still images such as the facial condition of a patient that is important for diagnosis in neurosurgery, the movement and paralysis of limbs in neurology, and the change of arm and indirect dislocation in orthopedics, In the past, there were few suitable means for taking pictures at medical sites, and even if they existed, they could only be captured by a video camera and recorded on videotape, and could be searched and used. Not. Therefore, conventionally, analog image data is not used and is discarded. At medical sites, still images are attached to medical records, filed and stored on shelves, and data such as moving images and sounds are simply recorded on magnetic tape or the like and stored on shelves.

【0003】[0003]

【発明が解決しようとする課題】本発明の目的は、病院
などの医療現場に存在するアナログ画像およびさらには
音声データなどを効率よく取得して、診療のために必要
な画像および音声のデータを記録媒体に記録して保管
し、こうして保管されたデータを検索して診療のために
有効に利用することができるようにした医療用画像デー
タの処理装置を提供することである。
SUMMARY OF THE INVENTION It is an object of the present invention to efficiently obtain analog images and audio data existing at medical sites such as hospitals and to obtain image and audio data necessary for medical treatment. An object of the present invention is to provide a processing apparatus for medical image data which is recorded and stored in a recording medium, and the stored data can be searched and used effectively for medical treatment.

【0004】[0004]

【課題を解決するための手段】本発明に従えば、基本的
には、医療用画像データを収集して取得する収集装置お
よびその抽出した画像データを保管する保管装置をそれ
ぞれクライエントおよびサーバシステムとして構成し、
いわばアナログ Picture Archiving andCommunicating
System と呼ぶことができるものである。本発明に従え
ば、(1)医師が撮影したい画像をできるだけ簡単な操
作で撮像することができる医療用画像データの撮像を行
って取得する収集装置としての取得ユニットと、(2)
撮像した画像データから医療診断に必要な画像データの
みを抽出する医学的エキスパートシステムである画像デ
ータ抽出ユニットと、(3)抽出した医療用画像データ
に診断上の属性を付与しながらデータベース化し、あい
まい検索をも可能とする医療用画像データの検索エージ
ェント機能を備える保管装置としての画像データのデー
タベースユニットを含み、医療用画像データの利用を促
進することが可能になる。医師に新しい診断のための工
夫、考察の時間を与えることは、医療現場で最も望まれ
ているので、画像入力には、周辺技術が発達していて多
量の映像の取扱いが可能な熟成されたアナログ画像デー
タ技術を用い、医療用画像データ抽出後は、デジタル画
像データとして扱う。
According to the present invention, basically, a collection device for collecting and acquiring medical image data and a storage device for storing the extracted image data are respectively provided by a client and a server system. Configured as
Analogue Picture Archiving and Communicating
It can be called a System. According to the present invention, (1) an acquisition unit serving as a collection device for acquiring and acquiring medical image data by which a doctor can capture an image to be taken by a simple operation as much as possible;
An image data extraction unit, which is a medical expert system that extracts only image data necessary for medical diagnosis from captured image data, and (3) a database created by assigning diagnostic attributes to the extracted medical image data and vague It includes a database unit of image data as a storage device having a medical image data search agent function that also enables a search, thereby facilitating the use of medical image data. It is the most desired in medical practice to give doctors time to think and think for new diagnosis, so the image input has been matured so that peripheral technology is developed and a large amount of images can be handled. After extracting medical image data using analog image data technology, it is handled as digital image data.

【0005】本発明は、患者の人体12を、予め定める
時間にわたって、撮像し、動画および静止画の画像デー
タを得るテレビカメラ10と、テレビカメラ10の光軸
を3次元に変化する駆動手段11と、操作者8が操作す
る操作手段9と、操作手段9の出力に応答し、駆動手段
11を駆動する制御手段13と、テレビカメラ10の出
力を操作者8が見ることができるように目視表示するモ
ニタ14と、テレビカメラ10の画像データをストアす
る記録装置15と、診療科目および部位を設定する設定
手段と、設定手段の出力に応答し、記録装置15にスト
アされた画像データを再生して、診療科目および部位毎
の患者の体躯の肘、腕全般、首から上部の頭部の部位に
関して、まがり具合動画、歩行開始指示から開始までの
初動状態動画を取得する取得手段と、取得手段の出力に
応答し、患者の衣服から露出している皮膚の各領域の座
標位置と面積とを求めて、各領域毎の図心の座標を検出
し、各領域毎の図心の時間変化率L1を演算する時間変
化率演算手段と、診療科目および部位毎の予め定める基
準動画用テンプレート値L01を保存する動画用テンプ
レート設定手段43と、時間変化率演算手段と動画用テ
ンプレート設定手段との出力に応答し、動画用合致度Δ
L1(=L1−L01)を演算する動画用合致度演算手
段と、動画用合致度演算手段の出力に応答し、記録装置
15にストアされた画像データのうち、動画用合致度Δ
L1が、動画用の予め定める値ΔL01未満である画像
データが得られた抽出開始から、予め定める時間T0に
わたって、画像データを抽出する抽出手段と、抽出手段
の出力に応答し、抽出された画像データを、患者の識別
番号とともに対応付けてストアする抽出用メモリ41
と、抽出用メモリにストアされた抽出画像を、目視表示
する表示手段42とを含むことを特徴とする医療用画像
データの処理装置である。また本発明は、記録装置15
にストアされた画像データの1画面分の静止画データを
取出し、正常な皮膚の色から大きく色彩が変化した変化
部分である変色領域31,34を検出する変色領域検出
手段と、変色領域検出手段によって検出した変色領域3
1,34の各面積Sjを演算する変色面積演算手段と、
前記1画面中の皮膚の全面積S0中における変色領域3
1,34の面積総和ΣSjの比率L2(=ΣSj/S
0)を演算する比率演算手段と、予め定める基準静止画
用テンプレート値L02を保存する静止画用テンプレー
ト設定手段と、比率演算手段と静止画用テンプレート設
定手段との出力に応答し、静止画用合致度ΔL2(=L
2−L02)を演算する静止画用合致度演算手段と、静
止画用合致度演算手段の出力に応答し、抽出された静止
画の静止画用合致度が、静止画用の予め定める値ΔL0
2未満である静止画の画像データを、前記抽出用メモリ
41にストアする手段とを含むことを特徴とする。また
本発明は、抽出手段はまた、抽出開始から遡って予め定
める時間だけ、画像データを抽出することを特徴とす
る。
According to the present invention, a television camera 10 for imaging a patient's human body 12 for a predetermined period of time to obtain moving image and still image data, and a driving means 11 for changing the optical axis of the television camera 10 three-dimensionally. Operating means 9 operated by the operator 8, control means 13 for driving the driving means 11 in response to the output of the operating means 9, and visual output so that the operator 8 can view the output of the television camera 10. A monitor 14 to be displayed; a recording device 15 for storing image data of the television camera 10; setting means for setting medical subjects and regions; and reproduction of image data stored in the recording device 15 in response to an output of the setting means. Then, for the elbows and arms of the patient's body, and for the parts of the head from the neck to the upper part of the patient's body for each medical treatment subject and region, a video of the rolling condition and a video of the initial movement from the instruction to start walking to the start are taken. Obtaining the coordinate position and area of each region of the skin exposed from the patient's clothing, detecting the coordinates of the centroid of each region, and responding to the output of the obtaining unit. Time change rate calculating means for calculating the time change rate L1 of the centroid, moving image template setting means 43 for storing a predetermined moving image template value L01 for each medical treatment subject and region, time change rate calculating means, and moving image In response to the output from the template setting means
L1 (= L1−L01) moving image matching degree calculating means, and the moving image matching degree Δ among the image data stored in the recording device 15 in response to the output of the moving image matching degree calculating means.
Extracting means for extracting image data for a predetermined time T0 from the start of extraction when image data in which L1 is less than a predetermined value ΔL01 for a moving image is obtained, and an extracted image in response to an output of the extracting means. Extraction memory 41 for storing data in association with patient identification numbers
And a display means 42 for visually displaying the extracted image stored in the extraction memory. The present invention also provides a recording device 15
Area detecting means for extracting one screen of still image data of the image data stored in the storage area, and detecting the discolored areas 31 and 34 which are the changed parts where the color has changed greatly from the normal skin color, and the discolored area detecting means Discolored area 3 detected by
Discoloration area calculating means for calculating each of the areas Sj of 1, 34;
Discolored area 3 in the entire area S0 of the skin in one screen
The ratio L2 of the total area ΣSj of 1,34 (= ΣSj / S
0), a still image template setting means for storing a predetermined reference still image template value L02, and a still image template response means responsive to the output of the ratio calculation means and the still image template setting means. Matching degree ΔL2 (= L
2-L02), and in response to the output of the still image matching degree calculating means, the still image matching degree of the extracted still image is a predetermined value ΔL0 for the still image.
Means for storing image data of a still image which is less than 2 in the extraction memory 41. Further, the invention is characterized in that the extracting means extracts the image data for a predetermined time retroactively from the start of the extraction.

【0006】本発明に従えば、アナログビデオカメラな
どによって人体を2次元的に撮像して得た動画または静
止画の画像データを、特徴付け画像処理加工し、予め同
様な加工を施した基準データであるテンプレート値と比
較し、合致度ΔLiを演算し、合致度が高いとき、すな
わち医師が診断のために必要とする画像データであると
き、その画像データを抽出用メモリ、たとえば磁気テー
プ、磁気ディスク、光ディスク、半導体メモリなどの記
録媒体にストアする。これによって医師の診断には役に
立たない画像データを除去し、役に立つ画像データだけ
を抽出することができる。したがって抽出用メモリの容
量を低減することができるとともに、診断を迅速に行う
ことができる。
According to the present invention, image data of a moving image or a still image obtained by two-dimensionally imaging a human body with an analog video camera or the like is subjected to characterization image processing and reference data obtained by performing similar processing in advance. Is compared with the template value, and the degree of matching ΔLi is calculated. When the degree of matching is high, that is, when the image data is required by a doctor for diagnosis, the image data is extracted from a memory for extraction, for example, a magnetic tape or a magnetic tape. The data is stored in a recording medium such as a disk, an optical disk, and a semiconductor memory. As a result, image data that is not useful for a doctor's diagnosis can be removed, and only useful image data can be extracted. Therefore, the capacity of the extraction memory can be reduced, and the diagnosis can be performed quickly.

【0007】特徴付け画像処理加工というのは、たとえ
ば後述の本発明の実施の形態では、画像データに関する
値Liを演算して求める処理を言う。
The characterization image processing refers to, for example, a process of calculating and calculating a value Li relating to image data in an embodiment of the present invention described later.

【0008】[0008]

【0009】本発明に従えば、動画の画像データを得る
には、合致度ΔLiが高いことが判断されたとき、すな
わち演算された合致度ΔLiが、後述の実施の形態で
は、予め定める値未満であるとき、その画像データから
始まる予め定める時間、たとえば1分間だけ、または、
遡って予め定める時間だけ、画像データを連続して、ま
たは間欠的に抽出用メモリにストアする。
According to the present invention, in order to obtain moving image data, when it is determined that the matching degree ΔLi is high, that is, in the embodiment described later, the calculated matching degree ΔLi is less than a predetermined value. Is a predetermined time starting from the image data, for example, only one minute, or
The image data is stored in the extraction memory continuously or intermittently for a predetermined time retroactively.

【0010】[0010]

【0011】本発明に従えば、静止画の画像データを抽
出するには、合致度が高いことが判断された画像データ
をそのまま抽出用メモリにストアする。
According to the present invention, in order to extract image data of a still image, image data determined to have a high degree of matching is stored in the extraction memory as it is.

【0012】また本発明は、抽出用メモリ41にストア
された画像データおよびその画像データに対応する識別
信号を、通信回線を介して送信する第1の送信手段と、
前記通信回線を介する第1送信手段からの画像データ
を、識別信号に対応してストアするデータベースメモリ
と、データベースメモリの入力される識別信号に対応す
る画像データを、読出して、通信回線を介して送信する
第2の送信手段と、前記通信回線を介する第2送信手段
からの画像データを受信して表示する手段とを含むこと
を特徴とする。
The present invention also provides a first transmission means for transmitting, via a communication line, image data stored in the extraction memory 41 and an identification signal corresponding to the image data,
A database memory for storing the image data from the first transmitting means via the communication line in accordance with the identification signal; and reading out the image data corresponding to the identification signal input to the database memory via the communication line. A second transmitting means for transmitting, and a means for receiving and displaying image data from the second transmitting means via the communication line are provided.

【0013】本発明に従えば、抽出用メモリにストアさ
れた動画または静止画の画像データは、通信回線、たと
えばLAN(Local Area Network)を介して、またはI
SDN,PHSなどの電話回線などを介して第1の送信
手段によって送信し、データベースメモリに、検索など
のために用いる識別番号に対応してストアしておく。た
とえば病院内における各診療科目毎の医師または複数の
各医院などの医師が、データベースメモリにストアされ
ている画像データを必要とするときには、識別番号によ
って、そのデータベースメモリの画像データを、第2送
信手段によって通信回線、たとえば前記LANまたは電
話回線などを介して受信表示手段に送信して目視表示、
または記録紙への印字、さらには音声などによって表示
出力することができる。
According to the present invention, the image data of a moving image or a still image stored in the extraction memory is transmitted via a communication line, for example, a LAN (Local Area Network) or
The data is transmitted by the first transmission means via a telephone line such as SDN or PHS, and stored in a database memory corresponding to an identification number used for a search or the like. For example, when a doctor for each medical department or a plurality of doctors in a hospital needs image data stored in the database memory, the image data in the database memory is transmitted by the identification number in the second transmission. Means for transmitting to a receiving and displaying means via a communication line, such as the LAN or a telephone line, for visual display;
Alternatively, it can be printed out on a recording paper, and further displayed and output by voice or the like.

【0014】こうして本発明による診断支援システム
は、救急車、ヘリコプタ、診療所、医院、在宅診療など
への活用が、たとえば携帯電話機などの通信回線の利用
によって、可能になる。さらに医療診断の一部として、
医療用画像処理の処理のためのソフトウエアを開発普及
されることができ、熟成された信頼性の高い既存デバイ
ス装置の組合わせによって、本発明を容易に実現するこ
とができる。通信回線として、たとえばISDNおよび
PHSなどによる端末装置を活用し、各種規模の病院お
よび医院の間の画像データの連携が密とすることがで
き、上述のように緊急時は勿論、平常時においても、複
数科目にわたって画像データを利用して行う診療もさら
に可能になる。
Thus, the diagnosis support system according to the present invention can be used for ambulances, helicopters, clinics, clinics, home medical treatments, etc. by using a communication line such as a mobile phone. In addition, as part of a medical diagnosis,
Software for medical image processing can be developed and spread, and the present invention can be easily realized by a combination of matured and reliable existing device devices. As a communication line, for example, a terminal device such as an ISDN and a PHS can be used so that image data can be closely linked between hospitals and clinics of various scales. In addition, medical treatment using image data for a plurality of subjects is further possible.

【0015】画像データとしては、人体の外形の撮像デ
ータだけでなく、眼底写真、消化管内視鏡画像などであ
ってもよく、さらに脳波、心電図、膀胱鏡写真、手術写
真、皮膚症状写真およびその他の医療に関連する画像デ
ータを含む。
The image data may be not only image data of the external shape of the human body, but also fundus photographs, gastrointestinal endoscopy images, etc., as well as electroencephalograms, electrocardiograms, cystoscope photographs, surgical photographs, skin symptom photographs, and others. Image data related to medical treatments.

【0016】[0016]

【発明の実施の形態】図1は、本発明の実施の一形態の
全体の構成を簡略化して示すブロック図である。LAN
を構成する通信回線1には、人体を撮像して得た動画ま
たは静止画の画像データを出力する画像データ出力手段
を構成する取得ユニット2が接続される。さらに通信回
線1には、抽出ユニット3が接続される。抽出ユニット
3は、取得ユニット2からの画像データを、特徴付け画
像処理加工する画像処理加工手段を含むとともに、テン
プレート用メモリにストアした動画または静止画の画像
データの前記特徴付け画像処理加工し、予め準備した基
準データをテンプレートとしてストアするテンプレート
用メモリを備え、こうして取得ユニット2から得た画像
データの画像処理加工データと、テンプレートとを比較
して合致度ΔLiを演算する。合致度が高いとき、すな
わち合致度ΔLiが予め定める値未満であるとき、抽出
ユニット3に設けられた抽出用メモリに、取得ユニット
2からの画像データがストアされる。
DESCRIPTION OF THE PREFERRED EMBODIMENTS FIG. 1 is a simplified block diagram showing the overall configuration of an embodiment of the present invention. LAN
Is connected to an acquisition unit 2 constituting image data output means for outputting image data of a moving image or a still image obtained by imaging a human body. Further, an extraction unit 3 is connected to the communication line 1. The extraction unit 3 includes image processing means for processing the image data from the acquisition unit 2 for characterization image processing, and performs the characterization image processing for the moving image or still image data stored in the template memory. A template memory for storing reference data prepared in advance as a template is provided. The image processing data of the image data obtained from the acquisition unit 2 is compared with the template to calculate the matching degree ΔLi. When the matching degree is high, that is, when the matching degree ΔLi is less than a predetermined value, the image data from the acquisition unit 2 is stored in the extraction memory provided in the extraction unit 3.

【0017】抽出ユニット3の抽出用メモリにストアさ
れている抽出された画像データは、通信回線1を介して
その抽出ユニット3の第1通信手段からデータベースユ
ニット4に送信され、データベースメモリにストアされ
る。各画像データには、識別信号が付与され、これによ
って検索を可能にする。こうして通信回線1を介し、デ
ータベースユニット4に備えられているデータベースメ
モリにストアされた画像データを、識別信号に基づき検
索し、第2の送信手段によって送信することができる。
さらにデータベースユニット4の第2送信手段には、通
信回線5を介して端末装置6が接続され、ここで、たと
えば病院内の各診療科目毎の部屋または各医院におい
て、データベースメモリにストアされている画像データ
を受信して、目視、印字または音響などの出力を行うこ
とができる。さらにこの受信表示手段6のバスには、さ
らにアナログテレビカメラおよびパーソナルコンピュー
タなどの処理手段が設けられ、ここで撮像して得た画像
データを、通信回線5,1を介して抽出ユニット3に伝
送することができる。
The extracted image data stored in the extraction memory of the extraction unit 3 is transmitted from the first communication means of the extraction unit 3 to the database unit 4 via the communication line 1 and stored in the database memory. You. Each image data is provided with an identification signal, thereby enabling a search. Thus, the image data stored in the database memory provided in the database unit 4 can be searched based on the identification signal via the communication line 1 and transmitted by the second transmission unit.
Further, a terminal device 6 is connected to the second transmitting means of the database unit 4 via a communication line 5, where the terminal device 6 is stored in a database memory, for example, in a room or a clinic for each medical subject in a hospital. Image data can be received and output such as visual observation, printing, or sound can be performed. Further, processing means such as an analog television camera and a personal computer are provided on the bus of the reception display means 6, and the image data obtained by imaging here is transmitted to the extraction unit 3 via the communication lines 5 and 1. can do.

【0018】図2は取得ユニット2の構成および機能を
簡略化して示すブロック図であり、図3はその取得ユニ
ット2の具体的な構成を示すブロック図である。部屋7
内には、たとえば医師である操作者8が、操作手段9を
操作して、アナログカラーテレビカメラ10の光軸を3
次元に駆動手段11によって変化する。テレビカメラ1
0は、操作者8の背後、横、または場合によっては前方
に配置され、撮像される患者の人体12を撮像する。操
作手段9の出力は制御手段13に与えられ、これによっ
て制御手段13は駆動手段11を駆動してカメラ10の
光軸を変化させ、患者12の希望する角度からの撮像を
行って、動画または静止画の画像データをアナログ信号
として得ることができる。カメラ10の出力は、目視表
示手段であるモニタ14によって表示し、この表示内容
を、操作者8が見ることができる。さらにテレビカメラ
10によって撮像して得られた画像データは、磁気テー
プ記録装置15において磁気テープ17に記録されてス
トアされる。制御手段13および記録装置15は、パー
ソナメコンピュータなどによって実現される処理回路1
6に接続され、この処理回路16は、通信回線1に接続
されて、送受信が可能である。操作手段9、制御手段1
3、駆動手段11、モニタ14などは、マンマシーンイ
ンターフェース18を構成し、高度の熟練を必要とする
ことなく、適確な画像データを得ることを可能にする。
これによってカメラ10が前述のように駆動され、磁気
テープ17に、画像データがストアされる。
FIG. 2 is a simplified block diagram showing the configuration and functions of the acquisition unit 2, and FIG. 3 is a block diagram showing a specific configuration of the acquisition unit 2. Room 7
Inside, an operator 8, for example, a doctor, operates the operating means 9 to move the optical axis of the analog color television camera 10 to 3.
The dimension is changed by the driving means 11. TV camera 1
Numeral 0 is placed behind, beside, or in some cases in front of the operator 8 and images the patient's human body 12 to be imaged. The output of the operation means 9 is given to the control means 13, whereby the control means 13 drives the drive means 11 to change the optical axis of the camera 10, performs imaging from a desired angle of the patient 12, Image data of a still image can be obtained as an analog signal. The output of the camera 10 is displayed on a monitor 14 serving as a visual display means, and the display contents can be viewed by the operator 8. Further, image data obtained by imaging with the television camera 10 is recorded on a magnetic tape 17 in a magnetic tape recording device 15 and stored. The control means 13 and the recording device 15 are a processing circuit 1 realized by a personal computer or the like.
6, the processing circuit 16 is connected to the communication line 1 and can transmit and receive. Operation means 9, control means 1
3. The driving means 11, the monitor 14 and the like constitute a man-machine interface 18, which makes it possible to obtain accurate image data without requiring a high level of skill.
Thereby, the camera 10 is driven as described above, and the image data is stored on the magnetic tape 17.

【0019】静止画は高精細度(HDPT)とし、動画
はNTSC方式の画質としてもよい。さらに画像の圧縮
または伸展をしてもよい。さらにテレビカメラ10を含
む取得ユニット2を可搬形とし、たとえば災害対応のた
めに出動可能な構造としてもよい。取得ユニット2で
は、医療現場のアナログ画像を得るものであり、その収
集にあたっては、デジタル映像機器を利用し、またIE
EE1394などのデジタルバスを活用し、効率よく、
高品質で、国際標準対応の画像収集を行うことができ
る。画像データにはまた、医師の診療科目、人体の部
位、患者を識別する識別番号および患者名などの識別信
号を、操作手段9によって入力し、磁気テープ17の画
像データに対応して検索可能となるようにストアする。
さらに撮像日時および関連する医師名を識別信号として
含めてストアしてもよい。
Still images may have high definition (HDPT), and moving images may have NTSC image quality. Further, the image may be compressed or expanded. Further, the acquisition unit 2 including the television camera 10 may be of a portable type, for example, a structure capable of being dispatched for disaster response. The acquisition unit 2 obtains an analog image of a medical site, and uses a digital imaging device to collect the analog image.
Utilizing digital bus such as EE1394, efficiently
High quality, international standard compliant image collection. In the image data, an identification signal such as a medical care subject of a doctor, a part of a human body, an identification number for identifying a patient, and a patient name is input by the operation means 9, and can be searched according to the image data of the magnetic tape 17. Store to become.
Further, the date and time of imaging and the name of the associated doctor may be stored as identification signals.

【0020】図4は、抽出ユニット3の構成を示すブロ
ック図である。抽出ユニット3では、特に冗長度の高い
診療画像データから、医師の診療のために必要な目的と
する1次画像を抽出するために、特徴付け画像処理加工
を行う。この特徴付け画像処理加工は、たとえば前処理
技術であって、音声認識、パターン認識、差分処理、微
分処理などを含み、医師による認識を学習したエキスパ
ート機能を有する。さらに検索に必要なキーワード自動
付与などの識別信号の検索のための付与を行い、現場業
務を支援することができる。この識別信号、特に患者識
別番号などを、既存病院情報システムと共有するなどし
て、総合医療情報システムの補助システムとして本発明
を実施することも可能である。
FIG. 4 is a block diagram showing the structure of the extraction unit 3. As shown in FIG. The extraction unit 3 performs characterization image processing in order to extract a primary image required for medical treatment of a doctor from medical image data having a particularly high degree of redundancy. This characterization image processing is, for example, a pre-processing technique, and includes speech recognition, pattern recognition, difference processing, differentiation processing, and the like, and has an expert function of learning recognition by a doctor. Further, an assignment for identification signal search such as automatic assignment of a keyword required for search can be performed to support on-site operations. The present invention can be implemented as an auxiliary system of a comprehensive medical information system by sharing this identification signal, particularly a patient identification number, with an existing hospital information system.

【0021】図4において、マネージャ部19は、エキ
スパート機能全体の状態遷移を管理する機能を有する。
たとえば想定外の動作に陥った場合、たとえば3回の同
一動作を繰返し行わせ、正常状態に復帰しないときに
は、マネージャ部19は、アラーム表示とアラーム音を
出力し、そのままの状態で、待機し、操作者によるマニ
アル操作のみを受付けて、正常動作に復帰することがで
きる。
In FIG. 4, the manager unit 19 has a function of managing the state transition of the entire expert function.
For example, if an unexpected operation occurs, for example, the same operation is repeated three times, and if the operation does not return to the normal state, the manager unit 19 outputs an alarm display and an alarm sound, and stands by in the same state. Only the manual operation by the operator is accepted, and the operation can be returned to the normal operation.

【0022】入出力制御部20は、対象区分指定機能、
すなわち予約機能と、頭出し機能と、ビデオ装置制御機
能とを含む。対象区分指定機能というのは、キャプチュ
ア、すなわち選択すべき被対象部分録画テープのヘッダ
情報を、単一または複数(たとえば10)ヘッダ程度、
時系列に予約指定する機能であり、予約したヘッダに関
して、被対象画像が検出、取得された後でも、すべて、
エキスパート機能を通過させる。頭出し機能は、取得ユ
ニット2と接続条件を定めた定義によって、ビデオ装置
制御機能を駆使して予約順位に沿って被計測開始部分の
頭出しをする機能を有する。ビデオ装置制御機能は、エ
キスパートマネージャ部19の指示によって制御を行う
機能であり、たとえば電源オン/オフ、磁気テープ17
の早送り/巻戻し/再生、速度制御すなわち標準、スロ
ーまたは倍速などの選択動作、およびジョグ/シャト
ル、すなわち磁気テープ17の表示中における送りまた
は戻しを行う機能を含む。
The input / output control unit 20 includes a target section designation function,
That is, it includes a reservation function, a cue function, and a video device control function. The target category designation function means that the capture, that is, the header information of the target recording tape to be selected is a single or multiple (eg, 10) headers,
This is a function to specify reservation in chronological order. Regarding the reserved header, even after the target image is detected and acquired,
Pass through the expert function. The cueing function has a function of cueing a measurement start portion along a reservation order by making full use of the video device control function according to a definition that defines the acquisition unit 2 and connection conditions. The video device control function is a function for performing control in accordance with an instruction from the expert manager unit 19, for example, power on / off, magnetic tape 17
This includes fast forward / rewind / playback, speed control, that is, selection of normal, slow or double speed, and jog / shuttle, that is, a function of performing forward or backward during display of the magnetic tape 17.

【0023】キャプチュア部21は、画像圧縮機能と画
像転送機能とを含む。出力部22は、エキスパート機能
によって抽出された画像を、通信回線1に送信する働き
をする。出力部22は、画像圧縮伝送回路39を備え、
LANである通信回線1を介して抽出した画像データ
を、データベースユニット4に送信する。さらに属性テ
ーブルメンテナンス部23が備えられ、抽出画像に属
性、たとえば前述の識別信号などを付与してストアする
働きをする。
The capture unit 21 has an image compression function and an image transfer function. The output unit 22 functions to transmit the image extracted by the expert function to the communication line 1. The output unit 22 includes an image compression transmission circuit 39,
The image data extracted via the communication line 1 that is a LAN is transmitted to the database unit 4. Further, an attribute table maintenance unit 23 is provided, and performs a function of adding an attribute, for example, the above-described identification signal to the extracted image and storing the extracted image.

【0024】図5は抽出ユニット3の構成および動作を
示すブロック図であり、図6は図4および図5に示され
る抽出ユニット3におけるマネージャ部19およびキャ
プチュア部21の動作を説明するためのフローチャート
である。これらの図面を参照して、入出力制御部20で
はまず、図6のステップa1からステップa2に移り、
磁気テープ17を再生する。抽出すべき画像データは、
入出力制御部20などによって入力される診療科目およ
び人体12の各部位によって、異なる。診療科目と人体
の検出部位の抽出画像データの概要は、次の表1に示さ
れるとおりである。
FIG. 5 is a block diagram showing the structure and operation of the extraction unit 3. FIG. 6 is a flowchart for explaining the operation of the manager unit 19 and the capture unit 21 in the extraction unit 3 shown in FIGS. It is. Referring to these drawings, the input / output control unit 20 first moves from step a1 to step a2 in FIG.
The magnetic tape 17 is reproduced. The image data to be extracted is
It differs depending on the medical subject and each part of the human body 12 input by the input / output control unit 20 or the like. The outline of the extracted image data of the medical treatment subject and the detection site of the human body is as shown in Table 1 below.

【0025】[0025]

【表1】 [Table 1]

【0026】これによって抽出すべき画像データは、動
画であるかまたは静止画であるかが決定される。入出力
制御部20ではまた、抽出すべき画像データが動画であ
るか静止画であるかを手動入力することができる。動画
であれば、抽出開始画像となり、静止画であれば1枚の
抽出画像となる。ステップa4において動画の画像デー
タを抽出すべきことが指示されると、次のステップa5
〜a8において、特徴付け画像処理加工が行われ、本件
実施の一形態では、いわばテンプレートマッチング方式
を行う。まずステップa5おいて特徴付け画像処理加工
を行う。
Thus, it is determined whether the image data to be extracted is a moving image or a still image. The input / output control unit 20 can also manually input whether the image data to be extracted is a moving image or a still image. If it is a moving image, it is an extraction start image, and if it is a still image, it is one extracted image. When it is instructed in step a4 to extract moving image data, the next step a5
In steps a to a8, characterization image processing is performed. In the present embodiment, a so-called template matching method is performed. First, in step a5, characterization image processing is performed.

【0027】ステップa5において、予め、エキスパー
ト対象としたい特定の診療科目部位毎の画像をモデルと
しそのモデルが保有する特徴付け画像処理加工を施して
基準画像を作成し、基準となるテンプレートとして保存
しておく。被比較画像の同一部位を取り込んだ場合、上
述の基準テンプレート作成と同一加工処理をした後、比
較画像として、基準画像との間で、双方の特徴部を中心
に比較処理して合致度合を計測して決定する。抽出は、
生画像そのままでは、抽出決定は極めて困難であるの
で、できるだけシンプルな画像加工を施し、これを基準
として比較画像の中から探し出す方法をとるのである。
こうして比較画像に関しても、基準画像を作成した手順
を踏んで加工し、両者の対比を形状や色抽出量で、ある
程度の割合(しきい値、すなわち後述のΔL0)で合致
したなら抽出ポイントと決定する。
In step a5, an image for each specific medical subject to be an expert is used as a model, and a characterization image processing is carried out on the model to create a reference image, which is stored as a reference template. Keep it. When the same part of the compared image is captured, after performing the same processing as the above-mentioned reference template creation, the comparison image is compared with the reference image, centering on both features, and the degree of matching is measured. To decide. Extraction is
Since it is extremely difficult to determine the extraction using the raw image as it is, a method is used in which the image processing is performed as simple as possible, and the image is searched for in the comparison image based on the image processing.
In this way, the comparative image is also processed according to the procedure for creating the reference image, and if the comparison between the two matches the shape and color extraction amount at a certain ratio (threshold value, that is, ΔL0 described later), it is determined as an extraction point. I do.

【0028】図6のステップa5における画像データの
特徴付け画像処理加工について、さらに述べる。前述の
図3におけるテレビカメラ10によって患者である人体
12を撮像して磁気テープ17に比較的長時間、たとえ
ば10分間〜1時間にわたって記録された画像データ
は、図7に示されている。図7(1)に示されるように
人体12が、起立した状態で、医師などの操作者8の音
声の指示に従い、またはランプなどの表示指示手段に従
い、動き出した状態は、図7(2)のとおりとなる。さ
らに人体12は、図7(3)のように移動する。テレビ
カメラ10は、図7に示されるように人体12の全体を
撮像する。
The characterization image processing of the image data in step a5 in FIG. 6 will be further described. FIG. 7 shows image data obtained by imaging the human body 12 as a patient with the television camera 10 shown in FIG. 3 and recorded on the magnetic tape 17 for a relatively long time, for example, 10 minutes to 1 hour. As shown in FIG. 7 (1), a state in which the human body 12 starts moving in accordance with the voice instruction of the operator 8 such as a doctor or in accordance with display instruction means such as a lamp while standing up is shown in FIG. 7 (2). It becomes as follows. Further, the human body 12 moves as shown in FIG. The television camera 10 images the entire human body 12 as shown in FIG.

【0029】本発明の実施の他の形態では、このような
人体12の全体を撮像する代りに、図8に示されるよう
に人体12の下肢27の停止状態から始まる移動途中の
状態がテレビカメラ10によって撮像されてもよい。こ
のとき患者である人体12は、たとえば椅子に着座した
状態で、下肢27を揺動する。
In another embodiment of the present invention, instead of imaging the entire human body 12, as shown in FIG. 8, a state in which the lower limbs 27 of the human body 12 are moving starting from a stopped state is a television camera. 10 may be taken. At this time, the human body 12, which is a patient, swings the lower limb 27 while sitting on a chair, for example.

【0030】さらに図9に示されるように人体12の上
肢28を揺動し、その状態をテレビカメラ10によって
撮像してもよい。このようにテレビカメラ10によっ
て、人体12の一部分を構成する各部位を撮像してもよ
い。
Further, as shown in FIG. 9, the upper limb 28 of the human body 12 may be swung, and the state may be imaged by the television camera 10. As described above, the television camera 10 may image each part constituting a part of the human body 12.

【0031】図10は、特徴付け画像処理加工のもっと
具体的な動作を説明するためのフローチャートである。
たとえば図7〜図9に示されるように画像データが得ら
れたとき、ステップb1からステップb2に移り、人体
12の衣服から露出している皮膚の領域を、検出する。
テレビカメラ10は、カラー画像データを得ることがで
き、こうして得た画像データのうち、皮膚の色彩を有す
る一画面中の領域を検出する。次のステップb3では、
上述のステップb2で得られた各領域毎の画素の座標位
置と面積などとを求めて、各領域の図心の座標を演算し
て求める。こうしてステップb4では、予め定める時間
毎の各領域毎の図心の座標を検出し、各領域毎の時間変
化率L1を演算して求める。たとえば図7における横方
向がX軸であり、縦方向がY軸であるとき、L1=dx
/dtまたはL1=dy/dtである。ここでx,y
は、たとえば顔または手などの衣服から露出している皮
膚の各領域の図心の座標(x,y)である。こうして時
間変化率L1は、たとえばX軸方向および/またはY軸
方向の移動速度であってもよい。このような図7〜図1
0に関連して示される特徴付け画像処理加工は、画像デ
ータから、動画または静止画の抽出のために、実施され
る。
FIG. 10 is a flowchart for explaining a more specific operation of the characterization image processing.
For example, when image data is obtained as shown in FIGS. 7 to 9, the process proceeds from step b1 to step b2 to detect a skin area exposed from clothes of the human body 12.
The television camera 10 can obtain color image data, and detects, in the obtained image data, an area in one screen having a skin color. In the next step b3,
The coordinate position and area of the pixel for each region obtained in step b2 described above are obtained, and the coordinates of the centroid of each region are calculated and obtained. In this manner, in step b4, the coordinates of the centroid of each region at each predetermined time are detected, and the time change rate L1 of each region is calculated and obtained. For example, when the horizontal direction in FIG. 7 is the X axis and the vertical direction is the Y axis, L1 = dx
/ Dt or L1 = dy / dt. Where x, y
Are the coordinates (x, y) of the centroid of each area of the skin exposed from clothing such as a face or hands. Thus, the time change rate L1 may be, for example, the moving speed in the X-axis direction and / or the Y-axis direction. FIG. 7 to FIG.
The characterization image processing operation indicated in relation to 0 is performed for extracting a moving image or a still image from the image data.

【0032】静止画に関して図11に示されるように、
皮膚症状の写真である人体12の皮膚の一部分のカメラ
10による視野30において、正常な皮膚の色彩とは大
きく異なった変色した領域31付近を抽出して、高精細
の静止画の画像データとして抽出することもできる。
As shown in FIG. 11 for a still image,
In a visual field 30 of a part of the skin of the human body 12 which is a photograph of the skin symptom, the vicinity of a discolored area 31 greatly different from the normal skin color is extracted as a high-definition still image data in a visual field 30 of the camera 10. You can also.

【0033】さらに図12に示されるように人体12の
手背32の一部分の視野33をテレビカメラ10で撮像
し、前述の図11と同様にして変色した領域34を静止
画として前述と同様に画像データを抽出してもよい。
Further, as shown in FIG. 12, a field of view 33 of a part of the back 32 of the human body 12 is picked up by the television camera 10, and the discolored area 34 is set as a still image in the same manner as in FIG. Data may be extracted.

【0034】このような図7〜図12に関連して述べた
静止画の画像データのための特徴付け画像処理加工の一
例は、図13に示される。ステップc1からステップc
2に移り、画像データの1画面分のデータを取出し、次
のステップc3において、たとえば図11および図12
に関連して述べたように正常な皮膚の色から大きく色彩
が変化した変色部分である領域31,34を検出して各
面積Sjを演算する。ステップc4では、その領域3
1,34の視野30,33内における数jを計数する。
こうしてステップc5では、1画面中の皮膚である手背
32の全面積S0中における視野30,33内に占める
変色領域31,34の面積総和ΣSjの比率L2(=Σ
Sj/S0)を演算して求め、ステップc6において一
連の動作を終了する。
An example of the characterization image processing for still image data described in connection with FIGS. 7 to 12 is shown in FIG. Step c1 to step c
2 and the data of one screen of the image data is taken out. In the next step c3, for example, FIGS.
As described in relation to the above, areas 31 and 34, which are discolored portions where the color has changed greatly from the normal skin color, are detected, and each area Sj is calculated. In step c4, the area 3
The number j in the fields of view 30, 33 of 1, 34 is counted.
Thus, in step c5, the ratio L2 (= Σ) of the total area ΣSj of the discolored regions 31 and 34 occupying the visual fields 30 and 33 in the entire area S0 of the back 32 which is the skin in one screen.
Sj / S0), and a series of operations is ended in step c6.

【0035】このように変色した領域31,33の占め
る面積の比率L2が大きいときには、後述のようにして
静止画の画像データとして抽出することになる。視野領
域30,33は、前記比率L2を正確に得るために、テ
レビカメラ10による撮像時に、人体12の撮像される
べき手または手背などの一部分を、予め定める位置に静
置した状態で、テレビカメラ10の撮像する光軸、光学
レンズの焦点距離、光学レンズの倍率などを予め定める
値に設定しておく。
When the ratio L2 of the areas occupied by the discolored regions 31 and 33 is large, the image data is extracted as still image data as described later. In order to accurately obtain the ratio L <b> 2, the visual field regions 30 and 33 are set such that a part of the human body 12 to be imaged, such as the hand or the back of the hand, is set to a predetermined position at the time of imaging by the television camera 10. The optical axis to be imaged by the camera 10, the focal length of the optical lens, the magnification of the optical lens, and the like are set to predetermined values.

【0036】このとき図6を参照して、図7〜図13に
関連して述べたように、特徴付け画像処理加工を施して
得た特徴値L1またはL2(総和的にはLiであってi
は、前述の実施の各形態において1または2である)を
求めた後、ステップa6においてテンプレートと比較す
る。このテンプレートは、画像データのLiに対応して
個別的にそれぞれ予め定める値L0i(iは前述のよう
に1または2)である。
At this time, referring to FIG. 6, as described in connection with FIGS. 7 to 13, the characteristic values L1 or L2 obtained by performing the characterization image processing (sum of Li and i
Is 1 or 2 in each of the above-described embodiments), and is compared with the template in step a6. This template is a predetermined value L0i (i is 1 or 2 as described above) individually corresponding to Li of the image data.

【0037】こうして得られた合致度ΔLi(=Li−
L0i)を演算して計測する。次のステップa8では、
この合致度ΔLiが、予め定める値ΔL0i未満である
かが判断され、そうであれば磁気テープ17に記録され
ている画像データと、テンプレートとの合致度が高くて
良好であることになる。
The degree of matching ΔLi (= Li−
L0i) is calculated and measured. In the next step a8,
It is determined whether the matching degree ΔLi is smaller than a predetermined value ΔL0i. If so, the matching degree between the image data recorded on the magnetic tape 17 and the template is high and good.

【0038】ステップa9では、動画に関して、合致度
の良好な磁気テープ17の画像データの抽出を開始す
る。この抽出開始からタイマによって時間Tをステップ
a10において計測し、その時間Tが予め定める時間T
0、たとえば1分間経過すれば、その抽出を終了して、
ステップa12において動画の画像データの抽出を終了
する。
In step a9, extraction of image data of the magnetic tape 17 having a good matching degree for a moving image is started. From the start of the extraction, a time T is measured by a timer in step a10, and the time T is equal to a predetermined time T
0, for example, after 1 minute, the extraction is terminated,
In step a12, extraction of the moving image data is ended.

【0039】静止画の画像データの抽出にあたっては、
ステップa13からステップa14に移る。このステッ
プa14では、動画の画像データの抽出に関連して述べ
た前述のステップa5〜ステップa8が実行される。こ
うして1枚の画像データが、ステップa15において静
止画として抽出される。
In extracting image data of a still image,
The process moves from step a13 to step a14. In step a14, the above-described steps a5 to a8 described in connection with the extraction of the moving image data are executed. Thus, one image data is extracted as a still image in step a15.

【0040】動画または静止画の画像データの抽出は、
入出力制御部20において入力指示される。図5におけ
る抽出ユニット3のエンジン36は、図6における各動
作ステップを実行する構成を有し、特に特徴付け画像処
理加工を、エキスパート対象診療科目毎に行う。こうし
て図5の参照符37で示される画像抽出動作が、図6の
ように行われる。
The extraction of moving image or still image data is as follows.
An input is instructed in the input / output control unit 20. The engine 36 of the extraction unit 3 in FIG. 5 has a configuration for executing each operation step in FIG. 6, and particularly performs a characterization image processing process for each subject to be treated as an expert. Thus, the image extraction operation indicated by reference numeral 37 in FIG. 5 is performed as shown in FIG.

【0041】抽出ユニット3にはまた、磁気テープ17
から取込んだ画像データをストアするメモリ40が設け
られ、さらに各エンジン36によって演算された画像デ
ータおよび/またはそれらに関連するデータがメモリ4
1にストアされ、抽出された画像は表示手段42によっ
て目視表示することができる。学習機能38によって、
テンプレートの補正を行い、各診療科目に最適なテンプ
レートが設定されることになる。学習機能38によって
得られたデータは、メモリ43にストアしておき、その
ストア内容を読出して、次の画像データの抽出のために
役立てることができる。
The extraction unit 3 also includes a magnetic tape 17
A memory 40 is provided for storing the image data taken from the memory 4, and further stores the image data calculated by each engine 36 and / or the data related thereto.
1 and can be visually displayed by the display means 42. With the learning function 38,
The template is corrected, and the optimal template for each medical department is set. The data obtained by the learning function 38 can be stored in the memory 43, and the stored contents can be read out to be useful for extracting the next image data.

【0042】本発明の実施の他の形態では、前述の図6
に関連して述べたステップa5〜a8に代えて、図11
に示されるように患者である人体12が、音声を発生
し、そのことがマイクロホン29によって検出されて磁
気テープ15に、画像データとともにストアされる。こ
の音声データが、図14のステップd1で検出されたと
き、動画または静止画の抽出のためのステップa9,a
15が実行される。
In another embodiment of the present invention, FIG.
Instead of steps a5 to a8 described in relation to
As shown in FIG. 7, the human body 12 as a patient generates sound, which is detected by the microphone 29 and stored on the magnetic tape 15 together with the image data. When this audio data is detected in step d1 of FIG. 14, steps a9 and a9 for extracting a moving image or a still image
15 is executed.

【0043】本発明の実施のさらに他の形態では、図6
のステップa5〜a8に代えて、図15に示されるよう
に患者12が操作スイッチ57を操作したとき、その操
作スイッチ57の出力が、画像データとともに磁気テー
プ17に、磁気テープ記録装置15によって記録され
る。このスイッチ57の人体12による操作が行われた
とき、図6の動画および静止画の画像データの抽出のた
めの動作ステップa9,a15が行われる。
In still another embodiment of the present invention, FIG.
When the patient 12 operates the operation switch 57 as shown in FIG. 15 instead of the steps a5 to a8, the output of the operation switch 57 is recorded on the magnetic tape 17 together with the image data by the magnetic tape recording device 15. Is done. When the switch 57 is operated by the human body 12, the operation steps a9 and a15 for extracting the image data of the moving image and the still image in FIG. 6 are performed.

【0044】図16は、データベースユニット4の具体
的な構成および動作を説明するためのブロック図であ
る。LANの通信回線1を介して抽出された画像データ
が通信制御回路45において受信され、メモリ46に、
検索のための識別信号とともにストアされてデータベー
ス化される。識別信号はまた、マンマシーンセンタ接続
回路47によって行い、さらにストアする画像データの
種類を選択することができる。メモリ46にストアされ
た内容は、処理回路49によって演算処理され、目視表
示手段50によって表示されることができる。さらにメ
モリ46のストア内容は、補助的なメモリ51にストア
しておくことができる。さらにメモリ46にストアされ
た内容は、画像圧縮処理回路52によって画像圧縮さ
れ、送信手段53によってLANなどの通信回線5を介
して、端末装置6に送信手段によって送信することがで
きる。さらに端末装置6からの画像データなどのデータ
を、通信回線5を介して受信手段によって受信すること
ができる。
FIG. 16 is a block diagram for explaining a specific configuration and operation of the database unit 4. As shown in FIG. The image data extracted via the LAN communication line 1 is received by the communication control circuit 45 and stored in the memory 46.
It is stored together with the identification signal for searching and is made into a database. The identification signal is also output by the man-machine center connection circuit 47, and the type of image data to be stored can be selected. The contents stored in the memory 46 can be processed by the processing circuit 49 and displayed by the visual display means 50. Further, the contents stored in the memory 46 can be stored in the auxiliary memory 51. Further, the content stored in the memory 46 is image-compressed by the image compression processing circuit 52, and can be transmitted to the terminal device 6 by the transmission unit 53 via the communication line 5 such as a LAN. Further, data such as image data from the terminal device 6 can be received by the receiving means via the communication line 5.

【0045】さらにマンマシーンセンタ接続回路47
は、サーバ54によってLANなどの通信回線55を介
して画像サーバ56(前述の図1参照、後述の図18参
照)に伝送される。
Further, the man-machine center connection circuit 47
Is transmitted by the server 54 to an image server 56 (see FIG. 1 described above and FIG. 18 described later) via a communication line 55 such as a LAN.

【0046】図17は、端末装置6の具体的な構成を示
すブロック図である。端末装置6は、前述の取得ユニッ
ト2と抽出ユニット3との各一部の構成要素を備え、対
応する部分には同一の参照符を付す。
FIG. 17 is a block diagram showing a specific configuration of the terminal device 6. The terminal device 6 includes some components of the acquisition unit 2 and the extraction unit 3 described above, and corresponding portions are denoted by the same reference numerals.

【0047】図18は、画像サーバ56の具体的な構成
を示すブロック図である。図18に示される画像サーバ
56は、画像データの保管および検索のための装置であ
る。この画像サーバ56は、医療用画像データ処理に関
するエキスパートシステムによって得られた動画または
静止画の抽出された画像データを保管し、必要に応じて
画像圧縮または伸展を行い、検索可能な状態としてデー
タベースとして保管する。
FIG. 18 is a block diagram showing a specific configuration of the image server 56. The image server 56 shown in FIG. 18 is a device for storing and retrieving image data. The image server 56 stores extracted image data of moving images or still images obtained by an expert system for medical image data processing, compresses or expands the image as necessary, and stores it in a searchable state as a database. store.

【0048】通信回線としては、たとえばISDNまた
はPHSなどの伝送方式の多重化を行うことができ、ま
た可搬化とすることができる。
For the communication line, for example, multiplexing of a transmission system such as ISDN or PHS can be performed, and the communication line can be made portable.

【0049】[0049]

【発明の効果】本発明によれば、医療用画像データを、
たとえばアナログカメラなどを用いて撮像して得た動画
または静止画の画像データを、特徴付け画像処理加工に
よって得て、予め準備したテンプレートと比較し、その
合致度が高いとき、画像データを抽出して抽出用メモリ
にストアするので、医療診断のために必要な画像データ
だけを、抽出用メモリにストアしておくことができる。
これによって抽出用メモリの容量を低減することができ
るとともに、医師などによる診断を迅速に行うことがで
きる。
According to the present invention, medical image data is
For example, image data of a moving image or a still image obtained by imaging using an analog camera or the like is obtained by characterization image processing, compared with a prepared template, and when the matching degree is high, the image data is extracted. Since the image data is stored in the extraction memory, only the image data necessary for medical diagnosis can be stored in the extraction memory.
As a result, the capacity of the extraction memory can be reduced, and diagnosis by a doctor or the like can be performed quickly.

【0050】動画の画像データは、合致度が高い画像デ
ータから予め定める時間だけ、抽出用メモリにストア
し、たとえば人体の一部が動き出してからの一連の、ま
たは間欠的な画像データをストアしておくことができ
る。こうして動画の画像データの抽出が容易である。
The moving image data is stored in the extraction memory for a predetermined period of time from the image data having a high degree of matching. For example, a series or intermittent image data after a part of the human body starts moving is stored. Can be kept. Thus, extraction of moving image data is easy.

【0051】合致度が高いことが判断された画像データ
を抽出用メモリにストアし、静止画の画像データの抽出
が容易である。特に本発明によれば、テレビカメラ10
を用いて記録装置15には、たとえば10分〜1時間に
わたる動画の画像データをストアしておき、取得手段か
らの診療科目および部位毎のまがり具合動画、初動状態
動画を取得して、患者の衣服から露出している領域毎の
図心の座標を検出して、その時間変化率L1を演算し、
動画用テンプレート値L01と比較することによって動
画用合致度ΔL1(=L1−L01)を演算して、動画
用の予め定める値ΔL01未満であるとき、動画用合致
度が高いものと判断し、予め定める時間T0、たとえば
1分間にわたって、画像データを抽出し、抽出用メモリ
41にストアし、表示手段42によって表示する。これ
によって抽出用メモリ41の容量を低減することができ
るとともに医師などによる診断を迅速に行うことができ
る。記録装置15は、前述のようにたとえば磁気テープ
などであってもよく、抽出用メモリ41は、患者の識別
番号とともに、抽出画像データをストアし、たとえば半
導体メモリなどによって実現することができる。
The image data determined to have a high degree of matching is stored in an extraction memory, so that still image data can be easily extracted. In particular, according to the present invention, the television camera 10
In the recording device 15, for example, image data of a moving image for 10 minutes to 1 hour is stored, and a rolling state moving image and an initial state moving image for each medical treatment subject and each part are obtained from the obtaining unit, and the moving image of the patient is obtained. The coordinates of the centroid of each area exposed from the clothes are detected, and the time rate of change L1 is calculated.
By comparing the moving image matching value ΔL1 (= L1−L01) by comparing with the moving image template value L01, if the moving image matching value ΔL1 is less than the predetermined moving image value ΔL01, it is determined that the moving image matching degree is high. Image data is extracted for a predetermined time T0, for example, for one minute, stored in the extraction memory 41, and displayed by the display unit. As a result, the capacity of the extraction memory 41 can be reduced, and diagnosis by a doctor or the like can be performed quickly. The recording device 15 may be a magnetic tape, for example, as described above, and the extraction memory 41 stores the extracted image data together with the patient's identification number, and can be realized by, for example, a semiconductor memory.

【0052】抽出用メモリにストアされた画像データ
は、通信回線を介して第1の送信手段によって送信され
てデータベースにストアされ、識別番号を用いる検索に
よって、そのデータベースメモリにストアされている画
像データを、通信回線を介して第2の送信手段によって
送信し、他の場所での受信装置を可能にするので、抽出
された画像データを各種の場所で有効に利用することが
でき、平常時においても、また緊急時においても、適確
な診療を行うことができる。
The image data stored in the extraction memory is transmitted by the first transmission means via the communication line and stored in the database, and the image data stored in the database memory is searched by the identification number. Is transmitted by the second transmitting means via the communication line, and the receiving device can be used in another place, so that the extracted image data can be effectively used in various places. In addition, appropriate medical treatment can be performed even in an emergency.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の実施の一形態の全体の構成を示すブロ
ック図である。
FIG. 1 is a block diagram showing an overall configuration of an embodiment of the present invention.

【図2】図1に示される取得ユニット2の構成と動作を
説明するためのブロック図である。
FIG. 2 is a block diagram for explaining the configuration and operation of an acquisition unit 2 shown in FIG.

【図3】取得ユニット2の構成を示すブロック図であ
る。
FIG. 3 is a block diagram illustrating a configuration of an acquisition unit 2.

【図4】図1の抽出ユニット3の構成を示すブロック図
である。
FIG. 4 is a block diagram showing a configuration of an extraction unit 3 of FIG.

【図5】抽出ユニット3の構成と動作を説明するための
ブロック図である。
FIG. 5 is a block diagram for explaining the configuration and operation of the extraction unit 3.

【図6】抽出ユニット3の主として図4における入出力
制御部20およびキャプチュア部21ならびに図5のエ
ンジン36および画像抽出部37の動作を説明するため
のフローチャートである。
6 is a flowchart for mainly explaining operations of the input / output control unit 20 and the capture unit 21 in FIG. 4 of the extraction unit 3 and the engine 36 and the image extraction unit 37 in FIG.

【図7】動画または静止画の画像データを抽出するため
における人体12の移動状態を説明するための図であ
る。
FIG. 7 is a diagram illustrating a moving state of a human body 12 for extracting image data of a moving image or a still image.

【図8】人体12の下肢27の移動状態を説明するため
の図である。
FIG. 8 is a diagram for explaining a moving state of the lower leg 27 of the human body 12.

【図9】人体12の上肢28の移動状態を説明するため
の図である。
FIG. 9 is a diagram for explaining a moving state of the upper limb 28 of the human body 12;

【図10】特徴付け画像処理加工の具体的な動作を示す
フローチャートである。
FIG. 10 is a flowchart showing a specific operation of characterization image processing.

【図11】静止画の画像データの抽出を行うための手の
一部の視野30を示す図である。
FIG. 11 is a diagram showing a field of view 30 of a part of a hand for extracting image data of a still image.

【図12】人体12の手背32における視野33の画像
データを説明するための図である。
FIG. 12 is a diagram for explaining image data of a visual field 33 on the back 32 of the human body 12;

【図13】図11および図12に示される静止画の画像
データの抽出を行うための特徴付け画像処理加工の動作
を説明するためのフローチャートである。
FIG. 13 is a flowchart for explaining an operation of characterization image processing for extracting the image data of the still image shown in FIGS. 11 and 12;

【図14】本発明の実施の他の形態における動画または
静止画の画像データの抽出を行うための動作の一部を示
すフローチャートである。
FIG. 14 is a flowchart illustrating a part of an operation for extracting image data of a moving image or a still image according to another embodiment of the present invention.

【図15】本発明の実施のさらに他の形態における動画
または静止画の画像データの抽出を行うための動作の一
部を示すフローチャートである。
FIG. 15 is a flowchart showing a part of an operation for extracting image data of a moving image or a still image according to still another embodiment of the present invention.

【図16】データベースユニット4の構成と動作を説明
するためのブロック図である。
FIG. 16 is a block diagram for explaining the configuration and operation of the database unit 4;

【図17】端末装置6の構成と動作を説明するためのブ
ロック図である。
FIG. 17 is a block diagram for explaining the configuration and operation of the terminal device 6.

【図18】画像サーバ56の構成と動作を説明するため
のブロック図である。
FIG. 18 is a block diagram for explaining the configuration and operation of an image server 56.

【符号の説明】[Explanation of symbols]

1 LANなどの通信回線 2 取得ユニット 3 抽出ユニット 4 データベースユニット 5 ISDNまたはPHSなどの通信回線 6 端末装置 8 操作者 9 操作手段 10 テレビカメラ 12 人体 15 ビデオテープ記録手段 16 処理回路 17 磁気テープ 19 マネージャ部 20 入出力制御部 21 キャプチュア部 22 出力部 23 属性テーブルメンテナンス部 30,33 視野 31,34 変色領域 1 Communication line such as LAN 2 Acquisition unit 3 Extraction unit 4 Database unit 5 Communication line such as ISDN or PHS 6 Terminal device 8 Operator 9 Operating means 10 Television camera 12 Human body 15 Video tape recording means 16 Processing circuit 17 Magnetic tape 19 Manager Unit 20 input / output control unit 21 capture unit 22 output unit 23 attribute table maintenance unit 30, 33 field of view 31, 34 discoloration area

Claims (4)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 患者の人体12を、予め定める時間にわ
たって、撮像し、動画および静止画の画像データを得る
テレビカメラ10と、 テレビカメラ10の光軸を3次元に変化する駆動手段1
1と、 操作者8が操作する操作手段9と、 操作手段9の出力に応答し、駆動手段11を駆動する制
御手段13と、 テレビカメラ10の出力を操作者8が見ることができる
ように目視表示するモニタ14と、 テレビカメラ10の画像データをストアする記録装置1
5と、 診療科目および部位を設定する設定手段と、 設定手段の出力に応答し、記録装置15にストアされた
画像データを再生して、診療科目および部位毎の患者の
体躯の肘、腕全般、首から上部の頭部の部位に関して、
まがり具合動画、歩行開始指示から開始までの初動状態
動画を取得する取得手段と、 取得手段の出力に応答し、患者の衣服から露出している
皮膚の各領域の座標位置と面積とを求めて、各領域毎の
図心の座標を検出し、各領域毎の図心の時間変化率L1
を演算する時間変化率演算手段と、 診療科目および部位毎の予め定める基準動画用テンプレ
ート値L01を保存する動画用テンプレート設定手段4
3と、 時間変化率演算手段と動画用テンプレート設定手段との
出力に応答し、動画用合致度ΔL1(=L1−L01)
を演算する動画用合致度演算手段と、 動画用合致度演算手段の出力に応答し、記録装置15に
ストアされた画像データのうち、動画用合致度ΔL1
が、動画用の予め定める値ΔL01未満である画像デー
タが得られた抽出開始から、予め定める時間T0にわた
って、画像データを抽出する抽出手段と、 抽出手段の出力に応答し、抽出された画像データを、患
者の識別番号とともに対応付けてストアする抽出用メモ
リ41と、 抽出用メモリにストアされた抽出画像を、目視表示する
表示手段42とを含むことを特徴とする医療用画像デー
タの処理装置。
1. A television camera 10 for imaging a patient's human body 12 for a predetermined time to obtain moving image and still image data, and a driving unit 1 for changing the optical axis of the television camera 10 three-dimensionally.
1, operating means 9 operated by the operator 8, control means 13 for driving the driving means 11 in response to the output of the operating means 9, and the output of the television camera 10 so that the operator 8 can see the output. Monitor 14 for visual display, and recording device 1 for storing image data of TV camera 10
5, setting means for setting a medical subject and a region; and reproducing the image data stored in the recording device 15 in response to the output of the setting device, and the general elbows and arms of the patient's body for each medical subject and each region. , Regarding the part of the head above the neck,
An acquisition means for acquiring a video of a rolling state, an initial motion state video from a walking start instruction to the start, and in response to an output of the acquisition means, determine a coordinate position and an area of each area of the skin exposed from the patient's clothing. , The coordinates of the centroid of each region are detected, and the time change rate L1 of the centroid of each region is detected.
And a moving image template setting means 4 for storing a predetermined moving image template value L01 for each medical treatment subject and each site.
3 and the response from the time change rate calculating means and the moving image template setting means, and the moving image matching degree ΔL1 (= L1-L01)
And a moving image matching degree ΔL1 among the image data stored in the recording device 15 in response to the output of the moving image matching degree calculating means.
Extracting means for extracting image data for a predetermined time T0 from the start of extraction when image data having a value less than the predetermined value ΔL01 for a moving image is obtained; and extracting the image data in response to the output of the extracting means. And a display means 42 for visually displaying the extracted image stored in the extraction memory. .
【請求項2】 記録装置15にストアされた画像データ
の1画面分の静止画データを取出し、正常な皮膚の色か
ら大きく色彩が変化した変化部分である変色領域31,
34を検出する変色領域検出手段と、 変色領域検出手段によって検出した変色領域31,34
の各面積Sjを演算する変色面積演算手段と、 前記1画面中の皮膚の全面積S0中における変色領域3
1,34の面積総和ΣSjの比率L2(=ΣSj/S
0)を演算する比率演算手段と、 予め定める基準静止画用テンプレート値L02を保存す
る静止画用テンプレート設定手段と、 比率演算手段と静止画用テンプレート設定手段との出力
に応答し、静止画用合致度ΔL2(=L2−L02)を
演算する静止画用合致度演算手段と、 静止画用合致度演算手段の出力に応答し、抽出された静
止画の静止画用合致度が、静止画用の予め定める値ΔL
02未満である静止画の画像データを、前記抽出用メモ
リ41にストアする手段とを含むことを特徴とする請求
項1記載の医療用画像データの処理装置。
2. A still image data of one screen of the image data stored in the recording device 15 is taken out, and a discolored area 31, which is a changed part where the color has changed greatly from the normal skin color, is obtained.
A color-change area detecting means for detecting the color-change area 34;
A color changing area calculating means for calculating each area Sj of the color changing area 3 in the entire area S0 of the skin in the one screen
The ratio L2 of the total area ΣSj of 1,34 (= ΣSj / S
0), a still image template setting means for storing a predetermined reference still image template value L02, and a still image template responding to the output of the ratio calculating means and the still image template setting means. The still image matching degree calculating means for calculating the matching degree ΔL2 (= L2-L02) and the still image matching degree of the extracted still image in response to the output of the still image matching degree calculating means Predetermined value ΔL
2. The medical image data processing apparatus according to claim 1, further comprising means for storing image data of a still image which is less than 02 in the extraction memory 41.
【請求項3】 抽出手段はまた、抽出開始から遡って予
め定める時間だけ、画像データを抽出することを特徴と
する請求項1または2記載の医療用画像データを処理装
置。
3. The medical image data processing apparatus according to claim 1, wherein the extraction means extracts the image data for a predetermined time retroactively from the start of the extraction.
【請求項4】 抽出用メモリ41にストアされた画像デ
ータおよびその画像データに対応する識別信号を、通信
回線を介して送信する第1の送信手段と、 前記通信回線を介する第1送信手段からの画像データ
を、識別信号に対応してストアするデータベースメモリ
と、 データベースメモリの入力される識別信号に対応する画
像データを、読出して、通信回線を介して送信する第2
の送信手段と、 前記通信回線を介する第2送信手段からの画像データを
受信して表示する手段とを含むことを特徴とする請求項
1または2記載の医療用画像データの処理装置。
4. A first transmission means for transmitting image data stored in the extraction memory 41 and an identification signal corresponding to the image data via a communication line, and a first transmission means via the communication line. A database memory for storing the image data corresponding to the identification signal, and reading the image data corresponding to the identification signal input to the database memory and transmitting the read image data via a communication line.
The medical image data processing apparatus according to claim 1, further comprising: a transmitting unit configured to receive and display image data from the second transmitting unit via the communication line.
JP27777797A 1997-10-09 1997-10-09 Processing device for medical image data Expired - Fee Related JP3145342B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP27777797A JP3145342B2 (en) 1997-10-09 1997-10-09 Processing device for medical image data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP27777797A JP3145342B2 (en) 1997-10-09 1997-10-09 Processing device for medical image data

Publications (2)

Publication Number Publication Date
JPH11113854A JPH11113854A (en) 1999-04-27
JP3145342B2 true JP3145342B2 (en) 2001-03-12

Family

ID=17588178

Family Applications (1)

Application Number Title Priority Date Filing Date
JP27777797A Expired - Fee Related JP3145342B2 (en) 1997-10-09 1997-10-09 Processing device for medical image data

Country Status (1)

Country Link
JP (1) JP3145342B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101795720B1 (en) 2011-05-12 2017-11-09 주식회사 미래컴퍼니 Control method of surgical robot system, recording medium thereof, and surgical robot system

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6934256B2 (en) * 2019-11-29 2021-09-15 株式会社シェアメディカル Auscultation site mapping system and auscultation sound data generation application

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05250449A (en) * 1992-03-04 1993-09-28 Toshiba Corp Data management device
JPH07194559A (en) * 1993-12-31 1995-08-01 Getz:Kk On-line medical diagnosis support system
JP3974946B2 (en) * 1994-04-08 2007-09-12 オリンパス株式会社 Image classification device
US6067075A (en) * 1995-12-21 2000-05-23 Eastman Kodak Company Controller for medical image review station

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101795720B1 (en) 2011-05-12 2017-11-09 주식회사 미래컴퍼니 Control method of surgical robot system, recording medium thereof, and surgical robot system

Also Published As

Publication number Publication date
JPH11113854A (en) 1999-04-27

Similar Documents

Publication Publication Date Title
US8315688B2 (en) Medical image management system and medical image management method
US20060100497A1 (en) Medical information system, program product for use in the medical information system and method of processing data to manage a medical procedures
JP2002253545A (en) Medical image interpretation recording device, medial image interpretation supporting device and system, medical image interpretation recording program, recording medium for this program, and medical image interpretation support processing program
JP3167363B2 (en) Region of interest setting method and image processing apparatus
JP6284439B2 (en) Medical information processing system
JP2002073615A (en) Medical image filing system
KR100751160B1 (en) Medical image recording system
JP2005065721A (en) Medical information system
JP2005528966A (en) Evaluation method and evaluation apparatus for images taken with fundus camera
JP3145342B2 (en) Processing device for medical image data
TW592668B (en) Measuring device
JP2005103030A (en) Apparatus and program for medical image generation
JP2003070748A (en) Medical information processing system
CN111753831A (en) Image analysis method and device, image acquisition equipment and storage medium
JP2000020630A (en) Medical image file system
WO2018043585A1 (en) Endoscope device, information processing device, and program
KR19980033700A (en) Medical Digital Image Processing System
JP2001275986A (en) Medical image displaying device
JPS62209670A (en) Medical picture retrieving system
JP3228622B2 (en) Endoscope system
JP2005124824A (en) Operation supporting system
JP2004065822A (en) Remote diagnostic system
WO2023135815A1 (en) Medical assistance system and medical assistance method
JPH08154244A (en) Image storage device
JP2001175784A (en) Electronic medical record device and introduction letter transmission device

Legal Events

Date Code Title Description
LAPS Cancellation because of no payment of annual fees