WO2013111684A1 - 医療情報記録装置 - Google Patents

医療情報記録装置 Download PDF

Info

Publication number
WO2013111684A1
WO2013111684A1 PCT/JP2013/050961 JP2013050961W WO2013111684A1 WO 2013111684 A1 WO2013111684 A1 WO 2013111684A1 JP 2013050961 W JP2013050961 W JP 2013050961W WO 2013111684 A1 WO2013111684 A1 WO 2013111684A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
input
medical
unit
recording
Prior art date
Application number
PCT/JP2013/050961
Other languages
English (en)
French (fr)
Inventor
誠 春見
秋介 土谷
上　邦彰
Original Assignee
オリンパスメディカルシステムズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパスメディカルシステムズ株式会社 filed Critical オリンパスメディカルシステムズ株式会社
Priority to CN2013800010098A priority Critical patent/CN103476329A/zh
Priority to JP2013527806A priority patent/JP5347089B1/ja
Priority to EP13741490.0A priority patent/EP2682050B1/en
Priority to US13/922,768 priority patent/US9186041B2/en
Publication of WO2013111684A1 publication Critical patent/WO2013111684A1/ja

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/0002—Operational features of endoscopes provided with data storages
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0833—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
    • A61B8/0841—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures for locating instruments
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5238—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
    • A61B8/5246—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image combining images from the same or different imaging techniques, e.g. color Doppler and B-mode
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/58—Testing, adjusting or calibrating the diagnostic device
    • A61B8/585—Automatic set-up of the device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/12—Devices for detecting or locating foreign bodies
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/46—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A61B6/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor

Definitions

  • the present invention relates to a medical information recording apparatus that records an image obtained by a medical apparatus such as an endoscope.
  • endoscopes have been widely used in medical fields and the like. Medical images obtained by an endoscope are recorded on various media for diagnosis and case recording. In recent years, recording of moving images from endoscopes has been performed with an increase in capacity of recording media. For example, an apparatus that performs recording processing according to image processing is disclosed. Such medical image recording processing is digitized, and medical images may be stored in a file format that can be read by a computer.
  • an endoscope image, an ultrasonic image, and an X-ray image are recorded in combination with many modalities such as an endoscope, an X-ray, and an ultrasonic diagnostic apparatus, and further, at the operator's hand.
  • Various images such as images and indoor images may be recorded.
  • a plurality of medical images to be recorded can be combined into a single medical image and recorded (see, for example, Japanese Patent Application Laid-Open No. 2009-392431).
  • the recording apparatus has a plurality of input connectors, and at the time of recording, a necessary composite image can be obtained by connecting a necessary modality to each connector.
  • the recording device or the like is frequently moved, and it is often necessary to connect each modality to the recording device before recording.
  • a relatively complicated operation is required.
  • the medical image to be recorded is different, but also the medical image to be recorded in the middle of the medical practice.
  • one of the medical images from two modalities may be recorded in the entire time zone of the medical practice, while the other medical image may be recorded only in a part of the time zone.
  • an endoscopic image that captures the surface layer of the lesion is constantly recorded, and an ultrasound image from an ultrasound diagnostic device that is temporarily used to diagnose the degree of penetration of the lesion is Only when it is recorded.
  • An object of the present invention is to provide a medical information recording apparatus capable of controlling the synthesis of medical images from a plurality of modalities without stopping recording during recording.
  • a medical information recording apparatus has a plurality of input terminals and is capable of inputting medical images from a plurality of imaging devices, and through any one of the plurality of input terminals.
  • An input unit that detects whether the medical image has been input and outputs a detection result; and one or more medical images input through the plurality of input terminals among a plurality of pre-defined synthetic patterns
  • the combination processing is performed in accordance with one combination pattern of the input unit, the medical scene or the switching of the medical scene is determined based on the detection result of the input unit, the combination pattern is switched based on the determination result, and the input
  • a screen composition unit for outputting a composite image based on the one or more medical images, and a recording processing unit for recording the composite image as one image file.
  • the medical information recording apparatus has a plurality of input terminals and is capable of inputting medical images from a plurality of imaging devices, and any one of the plurality of input terminals.
  • An input unit that detects whether the medical image is input via a terminal and outputs a detection result; and a plurality of pre-defined combinations of the one or more medical images input via the plurality of input terminals.
  • the combination processing is performed according to one combination pattern of the patterns, and the medical treatment is performed based on the detection result of the input unit and the image analysis result of one or more of the medical images input through the plurality of input terminals.
  • a screen compositing unit that determines a scene or a switching of the medical scene, switches the composite pattern based on a determination result, and outputs a composite image based on the one or more input medical images; ; And a recording unit for recording an image as a single image file.
  • FIG. 1 is a block diagram showing a medical information recording system in which a medical information recording device according to a first embodiment of the present invention is incorporated.
  • the block diagram which shows an example of the concrete structure of the signal detection parts 24 and 25 in FIG.
  • Explanatory drawing for demonstrating the folder produced for every patient information.
  • the flowchart which shows an example of the color determination flow which determines the color of a medical image.
  • the block diagram which shows the 4th Embodiment of this invention. 3 is an explanatory diagram for explaining a recording area of an internal HDD 31.
  • FIG. 1 is a block diagram showing a medical information recording system in which a medical information recording apparatus according to the first embodiment of the present invention is incorporated.
  • the endoscope processor 10 can capture an image from an endoscope (not shown) or the like and perform image signal processing to generate a medical image such as an endoscope image.
  • the medical image from the endoscope processor 10 is supplied to the medical information recording device 20 and the monitor 40.
  • the ultrasonic device 12 generates a medical image such as an ultrasonic image and outputs the medical image to the medical information recording device 20.
  • the input device 11 includes a keyboard (not shown), buttons and switches (not shown) provided on the main body of the endoscope processor 10, and the like.
  • the endoscope processor 10 can output this patient information to the medical information recording device 20.
  • control information includes recording start information for instructing recording start of a medical image that is a moving image, recording end information for instructing end of recording, still image recording information for instructing recording of a medical image that is a still image, and end of examination Inspection end information etc. for instructing
  • the endoscope processor 10 controls the image processing in response to various scope operations such as a release button and a recording start button provided on the endoscope, and generates control information corresponding to the various scope operations. Thus, it can be output to the medical information recording apparatus 20.
  • the endoscope processor 10 can superimpose and output patient information on a medical image generated based on the output of an endoscope or the like.
  • the endoscope processor 10 can also generate a medical image having a display area based on patient information and a display area based on an endoscopic image.
  • the monitor 40 can display a medical image from the endoscope processor 10 on a screen.
  • a medical image from the endoscope processor 10 on a screen.
  • an endoscope image, a patient name, a patient ID, and examination information are displayed in the area 41 on the right side of the screen of the monitor 40 and the areas 42 to 44 on the left side, respectively.
  • the medical information recording apparatus 20 includes an interface (hereinafter referred to as I / F) 21 that exchanges information with the endoscope processor 10, an I / F 22 that captures a medical image from the endoscope processor 10, and an ultrasonic apparatus. 12 has an I / F 23 for capturing medical images from 12.
  • the I / F 21 is an interface based on the RS-232C standard, for example, and takes in patient information and control information from the endoscope processor 10.
  • the I / Fs 22 and 23 are interfaces suitable for image transmission, and capture medical images from various modalities.
  • Each interface can include a plurality of input terminals.
  • a plurality of types of terminals such as a DVI (Digital Visual Interface) terminal, an SDI (Serial Digital Interface) terminal, an RGB terminal, a Y / C terminal, and a VIDEO terminal can be employed as input terminals.
  • an operative field camera, an X-ray observation apparatus, an endoscope processor other than the endoscope processor 10 and the like can be connected to these input terminals.
  • the medical information recording device 20 takes in via the I / F 22. Recording of a medical image (hereinafter also referred to as a main video) that is a moving image is started and the recording is ended.
  • a medical image hereinafter also referred to as a main video
  • video signals input via the I / Fs 22 and 23 are supplied to the signal detection units 24 and 25, respectively.
  • the signal detection units 24 and 25 are controlled by the control unit 28 and can detect whether or not a video signal is input via the I / Fs 22 and 23.
  • FIG. 2 is a block diagram showing an example of a specific configuration of the signal detectors 24 and 25 in FIG.
  • the signal detectors 24 and 25 have the same configuration, and only one signal detector 24 is shown in FIG.
  • the example of FIG. 2 shows an example in which the I / Fs 22 and 23 each have four systems of input terminals.
  • the output terminals of the four systems of the I / F 22 are supplied to the input terminals I1 to I4 of the signal detection unit 24.
  • Input terminals I1 to I4 are a VIDEO terminal, a Y / C terminal, an SDI terminal, and a DVI terminal, respectively.
  • the video signals input through these input terminals I1 to I4 are supplied to the detection unit 24a and also to the switch unit 24b.
  • the detection unit 24a is controlled by the control unit 28 to detect the video signals input to the input terminals I4 to I4, and outputs the detection result to the control unit 28.
  • the control unit 28 controls the switch unit 24 b to select an input terminal from which the video signal is detected, and the video input to the signal detection unit 24. A signal is output.
  • the control unit 28 can control the endoscope processor 10. 10 can be detected and the video signal from the endoscope processor 10 can be output from the switch unit 24b.
  • the control unit 28 can output from the ultrasonic device 12. While detecting that the video signal has been input, the video signal from the ultrasonic device 12 can be output from the switch unit 24b.
  • control unit 28 can determine whether or not a video signal is input via each of the I / Fs 22 and 23 based on the detection results of the signal detection units 24 and 25.
  • the input video signal can be captured regardless of the type of input terminal. That is, the surgeon can continue the medical practice without stopping the recording and changing the device setting during the medical practice.
  • the control unit 28 generates a synthesis control signal indicating from which of the I / Fs 22 and 23 the video signal is input, and outputs it to the screen synthesis calculation unit 29.
  • Video signals output from the signal detectors 24 and 25 are supplied to buffer memories 26 and 27, respectively.
  • the buffer memories 26 and 27 once hold the input video signal and then output it to the screen composition calculation unit 29.
  • the screen composition calculation unit 29 performs predetermined video signal processing on the input video signal.
  • the screen composition calculation unit 29 is input when the composite control signal from the control unit 28 indicates that the video signal is input from one of the I / Fs 22 and 23.
  • a medical image based on the video signal is output and it is indicated that the video signal is input from both I / Fs 22 and 23.
  • screen synthesis is performed on the medical image based on the two types of input video signals.
  • a composite image can be output.
  • the screen compositing calculation unit 29 is designated by the control unit 28 from a plurality of composite patterns prepared in advance, for example, composite patterns such as picture-in-picture (PIP) and picture-out-picture (POP). Screen synthesis is performed using the synthesis pattern, and a medical image of the moving image (main movie) is output.
  • PIP picture-in-picture
  • POP picture-out-picture
  • the screen composition calculation unit 29 outputs the generated main movie to the recording processing unit 30.
  • the recording processing unit 30 sequentially compresses the input main movie and applies it to the built-in HDD 31 for recording.
  • the recording processing unit 30 is, for example, H.264.
  • the main video is compressed by performing an encoding process according to a predetermined encoding method such as H.264. In this way, the main movie is recorded in the built-in HDD 31.
  • the screen composition calculation unit 29 controls the screen composition in accordance with the composition control signal from the control unit 28 even during recording. For example, in the state where only the endoscopic image is input from the I / F 22, the main composition moving image based only on the endoscopic image is generated and compressed and recorded by the screen composition calculation unit 29.
  • the screen composition calculation unit 29 is controlled by a synthesis control signal from the control unit 28, and the screen synthesis calculation unit 29 performs the input endoscopic image and ultrasound. Screen composition with the image is started and a composite image is generated. This composite image is supplied to the recording processing unit 30 as a main movie and the main movie is compressed and recorded.
  • the input of the ultrasonic image via the I / F 23 is stopped during the recording, it is controlled by the synthesis control signal from the control unit 28, and the screen synthesis calculation unit 29 performs only the input endoscopic image.
  • the main movie is generated, the main movie is compressed, and the recording process is continued.
  • the recording process is continued until the recording end information is input to the control unit 28 regardless of whether or not there is a medical image to which the medical image is input.
  • the control unit 28 instructs the recording processing unit 30 to end the recording.
  • the recording processing unit 30 converts the moving image recorded in the built-in HDD 31 into a file.
  • the main movie recorded during the period from the input of the recording start information to the input of the recording end information is recorded as one file.
  • the recording processing unit 30 can also apply the main video recorded in the internal HDD 31 to the external medium 51 for recording.
  • the external media includes various recording media such as an external hard disk and a semiconductor recording medium.
  • FIG. 3 is a timing chart for explaining the medical image recording process in the present embodiment.
  • FIG. 3A shows patient information
  • FIG. 3B shows recording start information
  • FIG. ) Shows the recording end information
  • FIG. 3 (d) shows the medical image Ima input
  • FIG. 3 (e) shows the medical image Imb input
  • FIG. 3 (f) shows the screen composition processing
  • FIG. ) Indicates output to the memory buffer.
  • control unit 28 creates a folder for each patient information in the built-in HDD 31.
  • FIG. 4 is an explanatory diagram for explaining a folder created for each patient information.
  • a patient folder corresponding to each patient is created, and a moving image folder in which the main moving image is stored is generated as a subfolder of the patient folder.
  • the control unit 28 starts recording the main video.
  • the medical image Ima from the endoscope processor 10 is taken into the medical information recording apparatus 20 via the I / F 22 and supplied to the signal detection unit 24 via the I / F 22.
  • the signal detection unit 24 detects that a video signal has been input and outputs a detection result to the control unit 28. Accordingly, the control unit 28 controls the signal detection unit 24 to output the input video signal to the buffer memory 26 (FIG. 3 (g)).
  • the video signal is supplied from the buffer memory 26 to the screen composition calculation unit 29.
  • the screen compositing calculation unit 29 performs predetermined signal processing on the input video signal, and then compresses the medical image Ima and then gives it to the recording processing unit 30 (FIG. 3 (f)).
  • the recording processing unit 30 gives the input medical image Ima to the built-in HDD 31 and records it.
  • the recording of the medical image based on the video signal from the endoscope processor 10 is started.
  • an external medium 51 such as an external HDD or various recording media can be selected as a recording destination of the medical image or the like. Is clear.
  • the ultrasonic device 12 connected to the I / F 23 is turned on to output an ultrasonic image from the ultrasonic device 12.
  • This ultrasonic image is supplied to the signal detection unit 25 via the I / F 23 (FIG. 3E).
  • the signal detection unit 25 detects that a video signal has been input and outputs the detection result to the control unit 28.
  • the control unit 28 detects that the video signal is input not only to the I / F 22 but also to the I / F 23, and displays the video signal input via the I / F 23 via the buffer memory 27.
  • a synthesis control signal for synthesizing the two inputs into the screen is outputted to the screen synthesis calculation unit 29 while being given to the synthesis calculation unit 29.
  • the screen composition calculation unit 29 synthesizes two input medical images based on the composition control signal, generates a composite image, and continues to output the main movie.
  • the main movie input to the recording processing unit 30 changes from a moving image based on one type of endoscopic image to a moving image of a composite image based on two types of images, an endoscopic image and an ultrasonic image.
  • the recording processing unit 30 continues the compression process and the recording process of the main movie, the main movie recorded in the built-in HDD 31 changes from a moving image of one screen to a moving image composed of two screens.
  • the recording of the main video which is a medical image of the video, is continued until the recording end information shown in FIG.
  • the control unit 28 controls the recording processing unit 30 to end the recording of the medical image.
  • the recording processing unit 30 converts the main movie into a file, and records the file with an appropriate file name in the movie folder for the main movie in the patient folder created in the internal HDD 31.
  • the recording is not stopped, and the moving image based on one type of medical image is used. Only by changing to a moving image based on a composite image of two types of medical images, a medical image (main video) of a video recording period specified by the recording start information and the recording end information is recorded in the built-in HDD 31 as one image file.
  • the control unit 28 determines whether or not the inspection is started in step S1 of FIG. For example, the control unit 28 determines that the examination is started by inputting patient information, recording start operation, examination start operation, or the like. It is assumed that the surgeon operates the input device 11 to input patient information. This patient information is supplied from the endoscope processor 10 to the medical information recording device 20. The patient information is taken into the control unit 28 via the I / F 21 (step S2).
  • the control unit 28 analyzes the input patient information and creates an examination folder with a folder name based on the patient information in the built-in HDD 31 (step S3). For example, the control unit 28 creates an examination folder having a folder name including the patient ID. Further, the control unit 28 creates a moving image folder for the main moving image in this folder.
  • the endoscope processor 10 outputs, for example, a medical image generated by superimposing patient information to an endoscopic image from an endoscope to the medical information recording device 20 and generates recording start information. And output to the medical information recording apparatus 20.
  • the control unit 28 captures a medical image input via the I / F 22.
  • This medical image is given to the screen composition calculation unit 29 via the signal detection unit 24 and the buffer memory 26.
  • the recording processing unit 30 compresses the main video and supplies it to the built-in HDD 31 to start recording (step S4).
  • step S5 the control unit 28 determines whether or not two inputs are detected.
  • the control unit 28 inputs the video signal to both the I / Fs 22 and 23 according to the detection result of the signal detection unit 25. If it has been determined, the process proceeds to step S6 to instruct the two-screen composition process.
  • the video signal from the I / F 23 is given to the screen composition calculation unit 29 via the signal detection unit 25 and the buffer memory 27.
  • the screen composition calculation unit 29 is provided with a composition control signal instructing the screen composition processing of two screens from the control unit 28, and the screen composition calculation unit 29 generates a two-input composition image and records it as a main video.
  • the data is output to the processing unit 30.
  • the main moving image is continuously input to the recording processing unit 30 before and after the input of the video signal from the ultrasonic device 12, and the recording processing unit 30 continues the input and compression processing of the main moving image, thereby compressing the compressed image. To the built-in HDD 31 to continue recording.
  • control unit 28 determines that the input is only the video signal from the I / F 22, and outputs a synthesis control signal for stopping the two-screen synthesis process.
  • the screen composition calculation unit 29 generates a main video based only on the endoscopic image and outputs it to the recording processing unit 30.
  • the main video is continuously input to the recording processing unit 30 before and after the input of the video signal from the ultrasonic device 12 is stopped, and the recording processing unit 30 continues to input and compress the main video. Then, the compressed image is supplied to the built-in HDD 31 to continue recording.
  • step S7 the end of recording is determined.
  • the surgeon presses the recording end button it is determined whether or not the main video is being recorded in step S7. If the main video is not being recorded, the main video recording process is ended in step S8.
  • Filed. The main movie file is recorded in the movie folder for the main movie in the patient folder.
  • the 2-input screen compositing process can be changed during recording depending on the detection result of the video signals input to the I / Fs 22 and 23, and the main video can be changed according to the input from the start to the end of the recording. Thus, it is recorded as one moving image file while changing into a single image or a composite image.
  • the input of the medical image different from the recorded medical image or the stop of the input is detected, and one input is made based on the detection result.
  • the above-described screen compositing process of medical images is controlled, and the main movie corresponding to the input change can be recorded as one movie file even during the recording.
  • FIG. 6 is a flowchart showing an operation flow employed in the second embodiment of the present invention.
  • the hardware configuration of this embodiment is the same as that of the first embodiment, and the screen composition processing is only different from that of the first embodiment.
  • the example in which the two-screen composition process is performed according to the composition pattern set by the control unit 28 has been described.
  • image analysis of a medical image is performed, and an optimal two-screen composite pattern is automatically selected based on the analysis result.
  • images from an endoscope and an operative field camera are combined and recorded up to a normal lesion.
  • the operator's hand By grasping the operator's hand and how to treat it, it becomes educational data that can accurately grasp the approach to the lesion.
  • the main screen arrangement is used, and the operative field image that is not directly related to medical treatment is the sub-screen arrangement.
  • an endoscopic image from another endoscopic processor is screen-synthesized and recorded. It is educational data for identifying the resection range of a luminal organ by comparing two endoscopic images. At this time, since the two endoscopic images are both important, picture-out-picture composition is optimal. As described above, the fact that the surgeon can automatically record by the optimal screen composition without changing the device setting during the medical practice contributes to the improvement of medical knowledge and treatment accuracy, and can realize medical efficiency. It can be said.
  • FIG. 6 shows processing for the second input when the recording processing of the medical image Ima based on the video signal from the endoscope processor 10 is started as one input.
  • FIG. 7 is an explanatory diagram showing an example of a composite pattern.
  • FIGS. 7A and 7B show a composite pattern in the picture-in-picture (PIP) format
  • FIG. 7A shows a medical image Ima based on a video signal input via the I / F 22 as a parent image.
  • the medical image Imb based on the video signal input via the I / F 23 is arranged in the parent image in the parent image.
  • FIG. 7B shows an example in which the medical image Imb is used as a parent image, and the medical image Ima is arranged in a child screen in the parent image.
  • FIGS. 7C and 7D show composite patterns in picture-out-picture (POP) format
  • FIG. 7C shows a medical image Ima based on the video signal input via the I / F 22 on the left side of the screen.
  • the medical image Imb based on the video signal input via the I / F 23 is arranged on the right side of the screen.
  • FIG. 7D shows an example in which the medical image Imb is arranged on the left side of the screen and the medical image Ima is arranged on the right side of the screen.
  • no-image portions are provided at the top and bottom of the screen in order not to change the aspect ratio of the medical images Ima and Imb.
  • step S21 of FIG. 6 the screen composition calculation unit 29 performs image analysis of the input medical image. Based on the result of the image analysis, the screen composition calculation unit 29 determines whether the medical image is a blackish image in step S21, and determines whether the medical image is a reddish color in step S22. .
  • the input medical image becomes a reddish color as a whole due to the influence of the color of the organ or blood.
  • the medical image is an X-ray image or an ultrasonic image
  • the input medical image is black and white.
  • the input medical image has a green or blue color as a whole.
  • FIG. 8 is a flowchart showing an example of a color determination flow for determining the color of a medical image.
  • FIG. 9 is a graph showing the color distribution in each block, with the horizontal axis representing the wavelength and the vertical axis representing the level of each block.
  • the screen compositing calculation unit 29 extracts a plurality of frames of medical images, and in step S32, divides the image of each frame into blocks.
  • the screen composition calculation unit 29 analyzes the color distribution of each block.
  • FIG. 9 shows an example of the color distribution in a predetermined block of a predetermined medical image. The example of FIG. 9 shows that the level of the wavelength of 600 nm is relatively high for the target block, and it can be seen that the target block has a reddish color.
  • step S34 the screen composition calculation unit 29 calculates the color distribution average value by obtaining the sum of one frame for the analysis result of the color distribution of each block. Further, in step S35, the screen composition calculation unit 29 calculates an average color distribution for the extracted frame from the color distribution average value of each frame. The screen compositing calculation unit 29 determines the color of the medical image by comparing the average color distribution with the color threshold value defined for each color (step S36).
  • step S24 the screen synthesis calculation unit 29 selects a PIP format synthesis pattern and selects the second input medical image. Is composed as a sub-screen. If the screen composition calculation unit 29 detects that the medical image is not a blackish image and is not a reddish image in step S22, the screen composition calculation unit 29 selects a PIP-type composition pattern in step S24 and selects the second input. The medical image is synthesized as a sub-screen.
  • step S23 the screen composition calculation unit 29 selects a POP format composition pattern and selects the second input. Are arranged on the right or left side of the screen and synthesized.
  • an endoscopic image is input to the I / F 22 of the medical information recording apparatus 20 as the first input video signal.
  • the endoscopic image is processed by the screen compositing calculation unit 29, and the recording processing unit 30 starts the recording process of the main movie on the built-in HDD 31 based on the endoscopic image (step S4).
  • the second input medical image is input to the I / F 23.
  • This medical image is given to the screen composition calculator 29, and the screen composition calculator 29 determines the color of the second input medical image by image analysis.
  • the second input is an ultrasonic image
  • the screen composition calculation unit 29 determines that the color of the second input image is dark in step S21, and the process proceeds to step S24.
  • the screen composition calculation unit 29 uses the first input endoscopic image (medical image Ima) as a parent image and the second input ultrasonic image (medical image Imb). ) Is placed on the sub screen.
  • the type of the medical image is determined by determining the color of the medical image by image analysis, and a screen suitable for display or the like is selected by selecting a pattern for screen synthesis according to the determination result. Synthesis can be done automatically.
  • step S22 Even when the second input is a medical image obtained by photographing the state of the operating field, the process proceeds from step S22 to step S24, and the second input is displayed on the child screen. If the second input is an endoscope image from another endoscope processor (not shown), the process proceeds from step S22 to step S23, as shown in FIGS. 7C and 7D.
  • screen composition is performed by, for example, a picture-out picture in which two input medical images are arranged on the left and right. Note that the composite pattern may be forcibly changed between FIGS. 7A to 7D by operating the input device 11.
  • the same effects as those in the first embodiment can be obtained, and the screen composition suitable for display can be automatically performed by analyzing the color of the image.
  • FIG. 10 is a flowchart showing an example of a contour determination flow for determining the contour of a medical image.
  • the same steps as those in FIG. FIG. 11 is an explanatory diagram for explaining the contour of an endoscopic image.
  • step S43 in FIG. 10 the screen composition calculation unit 29 analyzes the line density of the video contour of each block.
  • FIG. 11A shows an endoscopic image
  • FIG. 11B shows a video contour.
  • an endoscopic image 62 is arranged in the center of the screen 61.
  • a built-in 63 and forceps 64 are depicted in the center of the screen 61.
  • the screen composition calculation unit 29 divides the endoscopic image 62 into four blocks at a boundary indicated by a one-dot chain line.
  • FIG. 11B shows a video outline detected by the screen composition calculation unit 29 with a broken line for the upper right block of the four blocks in FIG.
  • the line density of the video contour of the block in the endoscopic image 62 is relatively low.
  • step S44 the screen composition calculation unit 29 calculates the average value of the contour line density by obtaining the sum of one frame for the analysis result of the contour line density of each block. Further, in step S45, the screen composition calculation unit 29 calculates the average contour line density for the extracted frame from the average value of the contour line density of each frame. The screen composition calculation unit 29 determines the type of the medical image by comparing the average contour line density with the average contour line density defined for each image (step S46).
  • the screen composition calculation unit 29 determines that the target medical image is an endoscopic image, and the average contour density exceeds the threshold. In this case, it is determined that the target medical image is an image other than the endoscopic image, for example, an image obtained by photographing the state of the operating field.
  • screen composition is performed by selecting a composite pattern in the PIP or POP format based on the video contour determination result.
  • an image comparison between the first input endoscopic image and the second input medical image indicates whether the second input medical image is an endoscopic image or an image other than the endoscopic image. You may determine whether it is.
  • FIG. 12 is a block diagram showing the configuration of the second modified example
  • FIG. 13 is a flowchart for explaining the operation of the second modified example
  • FIG. 14 is a diagram for explaining the composite pattern of the second modified example.
  • FIG. 12 the same components as those of FIG. In FIG. 13, the same steps as those in FIG.
  • the second modification is different from FIG. 1 only in that four inputs are used.
  • the input device 11, the endoscope processor 10, and the monitor 40 are not shown for simplification of the drawing.
  • an electrocardiogram device 77 and an operative field camera 78 are employed in addition to the endoscope processor 10 (see FIG. 1) and the ultrasound device 12 as devices for outputting medical images.
  • a medical image from the electrocardiogram device 77 is taken into the medical information recording device 70 via the I / F 71, and a medical image from the operative field camera 78 is taken into the medical information recording device 70 via the I / F 72.
  • the video signal input via the I / F 71 is supplied to the buffer memory 75 via the signal detection unit 73, and the video signal input via the I / F 72 is supplied to the buffer memory 76 via the signal detection unit 74. Is done.
  • the configuration of the I / Fs 71 and 72 is the same as that of the I / Fs 22 and 23, the configuration of the signal detection units 73 and 74 is the same as that of the signal detection units 24 and 25, and the configuration of the buffer memories 75 and 76 is the buffer memory 26, 27.
  • the video signals input via the I / Fs 22, 23, 71, 72 are temporarily stored in the buffer memories 26, 27, 75, 76, respectively, and then supplied to the screen composition calculation unit 29.
  • the control unit 28 controls the signal detection units 24, 25, 73, and 74 to acquire a detection result as to whether or not a video signal has been input through the I / Fs 22, 23, 71, and 72. Based on this, a synthesis control signal is output to the screen synthesis calculation unit 29.
  • the screen composition calculation unit 29 synthesizes the input medical image based on the composition control signal.
  • steps S31 to S34 are added.
  • steps S31, S32, and S5 it is determined whether there are 4 inputs, 3 inputs, or 2 inputs.
  • a four-screen composition process is performed in step S33.
  • a three-screen composition process is performed in step S34.
  • a two-screen composition process is performed in step S5. Is done.
  • FIG. 14 shows an example of a synthesis pattern
  • FIG. 14 (a) is an example of 3 screen synthesis
  • FIG. 14 (b) is an example of 4 screen synthesis.
  • Each of the examples in FIG. 14 shows an example of the POP format
  • FIG. 14A arranges the medical image Ima based on the video signal input via the I / F 22 in the most part on the left side of the screen, and the right side of the screen.
  • FIG. 14B shows an example in which the medical images Ima to Imd input via the I / Fs 22, 23, 71, and 72 are arranged in four divided areas on the top, bottom, left, and right of the screen.
  • the input of the 4-input medical image or the stop of the input is detected, and the screen synthesis process of the 4-input medical image is controlled based on the detection result. Even if it exists, the main moving image according to the change of input can be recorded as one moving image file.
  • the 2nd modification showed the example of 4 inputs, it is clear that the number of input systems can be set suitably.
  • step S4 in FIG. 6 In a general surgical endoscopic technique, recording is started after a rigid endoscope is inserted into the cavity (step S4 in FIG. 6) [scene 1 at the time of peeling treatment toward the lesioned part]. The procedure is advanced while treating the adhesion film and fat around the organ toward the lesion site. At this time, from the viewpoint of not being a relatively advanced treatment and leaving a proof record of appropriate treatment execution, only the endoscope image is recorded (NO determination in step S5 and NO determination in step S7 in FIG. 6). Loop).
  • the medical information recording device When reaching the lesion site, advanced treatments such as careful separation and excision of the lesion site and surrounding organs are started. At this time, in order to not only prove the proper implementation of the procedure, but also for the purpose of educating young doctors, in order to leave a record in synchronism with the endoscopic image of the operator's hand, the medical information recording device is operated on. Connect the video cable from the field camera [Scene 2: Treatment after reaching the lesion].
  • the input terminal is automatically set based on the video signal detected by the medical information recording apparatus (FIG. 2).
  • the video signal from the surgical field camera is input to the screen composition calculation unit 29 through the signal detection unit 25 and the buffer memory 27 shown in FIG. 1, and from the control unit 28 to the screen composition calculation unit.
  • the screen composition calculation unit 29 automatically starts image analysis based on the input video signal (step S6 in FIG. 6).
  • the PIP composite pattern is automatically set based on the result of the color analysis of the video signal photographed by the operative field camera and the determinations in steps S21 and S22 in FIG. 6, and the recording of the moving image is continued while the two-screen composition is started. To do. Since the two-screen composition pattern at this time is intended for educational use, FIG. 7A is selected in which the most important endoscopic image is the parent screen and the operative field image is the child screen.
  • a flexible endoscope is used to identify the lesion site.
  • a separate endoscope connected with the flexible endoscope is used.
  • a video cable for transmitting an endoscopic image output from the processor is connected to the medical information recording apparatus.
  • the lesion site is diagnosed and the procedure is interrupted, so the video input from the operative field camera is removed [scene 3 at the time of identifying the lesion].
  • the cable is intentionally disconnected.
  • the signal detection unit 25 detects the second input signal, so that it is automatically connected to the second video input terminal. You may have the means to switch. Thereby, the input terminal is automatically set again based on the video signal detected by the medical information recording apparatus (FIG. 2).
  • a video signal from another processor to which a flexible endoscope is connected is input to the screen composition calculation unit 29 through the signal detection unit 25 and the buffer memory 27 shown in FIG.
  • cooperative control is performed from the control unit 28 to the screen composition calculation unit (step S5 in FIG. 6).
  • the screen composition calculation unit 29 automatically starts image analysis based on the input video signal (step S6 in FIG. 6).
  • a POP composite pattern is automatically set based on the result of combining the color analysis of the video signal observed with the flexible endoscope and the determinations in steps S21 and S22 in FIG. 6, and recording of the moving image is started while the two-screen composition is started. continue. Since the two-screen composite pattern at this time is intended for educational use, an endoscope image from a rigid endoscope having the same medical importance is displayed on the left screen, and an endoscope image from a flexible endoscope is used. FIG. 7C with the mirror image as the right screen is selected.
  • the medical information recording device is not only used as a proof of appropriate treatment, but also for the purpose of educational use by young doctors, in order to leave a record in synchronization with the rigid endoscopic image of the operator's hand.
  • Reconnect the video cable from the operative field camera [Scene 4: At the time of excision anastomosis after identifying the lesion].
  • the medical information recording apparatus that has captured the video signal from the operative field camera automatically sets the input terminal and performs color analysis based on the input video signal. Based on the analysis result, the PIP pattern (FIG. 7A) of the two-screen composition using the endoscopic image as the main screen and the operative field image as the sub-screen is selected again, and the recording of the moving image is continued while combining the two screens .
  • the anastomosis using the forceps operation requires a high level of technology, so the recording of the moving image by the two-screen synthesis of the endoscopic image and the operative field image is continued.
  • control unit 28 and the screen composition calculation unit 29 can determine the scene determination or the scene switching based on the connection state and input state of the input terminal, the image analysis result of the video signal, and the like.
  • the optimum screen composition format can be selected and data to be recorded can be determined.
  • each scene is determined and the screen synthesis format is selected is described above.
  • each scene can be estimated based on a determination result of whether or not a device is connected to any input terminal.
  • the image from the rigid endoscope is used as the main screen, and Screen composition using an image as a sub-screen can be performed.
  • FIG. 15 is a block diagram showing a third embodiment of the present invention.
  • the same components as those in FIG. 15 are identical to FIG. 15 and are identical to FIG. 15 in FIG. 15, the same components as those in FIG. 15 in FIG. 15 in FIG. 15, the same components as those in FIG. 15
  • a display and an operation button indicating the operation state of the recording apparatus are often arranged on the front surface of the recording apparatus casing.
  • the visibility of the front surface of the recording device housing is poor, and it is difficult to check the operation status or the operability is low. It can be extremely bad.
  • it is difficult to grasp the status of the recording device it is difficult to grasp the lack of recording capacity and to start recording, or the abnormal state of the device during recording cannot be grasped. There is a risk that it will be impossible to record evidence that obstruction or appropriate medical practice has been implemented.
  • the present embodiment is configured so that various displays can be performed not only on the display unit disposed on the front surface of the recording apparatus housing but also on a display device which is an external monitor.
  • the medical information recording apparatus 80 of the present embodiment is different from the medical information recording apparatus 20 of the first embodiment in that an output screen generation unit 81 and an I / F 82 are employed.
  • the output screen generation unit 81 supplies the same image as that displayed on the display unit disposed on the front surface of the recording device housing (not shown) to the display device 83 configured by a liquid crystal monitor or the like via the I / F 82. It can be displayed.
  • the output screen generation unit 81 not only records the medical image (composite image) from the screen composition calculation unit 29 during the recording of the medical image, but also various information regarding the recording state, for example, the image quality setting at the time of recording, the title at the time of recording An output screen for image display is generated based on the number, the number of chapters, the remaining recording capacity of the built-in HDD 31, and the like.
  • FIG. 15 only one I / F 82 is shown, but a plurality of video output interfaces can be employed.
  • video interfaces such as those for SDI and DVI can be employed, and an image can be output to a display device corresponding to these interfaces.
  • Ethernet registered trademark
  • video can be output by HTTP protocol or streaming, and an image can be output to a display unit of an external computer.
  • the output screen generation unit 81 converts the output screen for display into a format suitable for the interface of the display device 83 and outputs it.
  • a display output screen can be output from a specified interface among the plurality of interfaces, and a display output screen can be output from all the interfaces. Can also be configured to output.
  • the output screen generation unit 81 can generate an output screen in the first and second display modes.
  • the first display mode is a mode in which the image input to the recording processing unit 30 is displayed with the image size as it is. In this display mode, an image to be recorded can be displayed with high definition.
  • the second display mode is a mode for displaying information relating to the recording state of the apparatus.
  • the recording state can be confirmed on the display device 83 without looking at the display unit disposed on the front surface of the recording device housing.
  • FIG. 16 is an explanatory diagram showing a display example in the second display mode.
  • FIG. 16A shows a display example when there is one main moving image to be recorded
  • FIG. 16B shows a display example when two main moving images to be recorded exist simultaneously. Note that the composite image in each of the above embodiments is one main movie.
  • the second display mode has a plurality of display areas 202 to 211 in the display screen 201.
  • a display area 202 is an area for displaying patient information input from the endoscope processor 10 (see FIG. 1) or the like, for example, a patient ID or a patient name.
  • the display area 202 also displays information indicating whether the examination is currently being performed or not.
  • “inspection in progress” is indicated by the display of “inspection”, but “non-inspection” or the like is displayed in cases other than the inspection.
  • text character string
  • the display area 203 information on recording settings such as an input terminal for inputting a medical image to be recorded and a moving image or a still image is displayed.
  • an SDI format video signal is input, recording of a moving image is designated in “high image quality” mode, and recording of a still image is designated in “high compression” mode of “JPEG” format. It shows that.
  • a medical image to be recorded is displayed with a reduced image size.
  • the current recording time is displayed in the lower left of the display area 204, and the recording state such as recording, stopped, or paused is displayed in the lower right by an icon, text, or the like.
  • “REC” indicates that recording is currently being performed.
  • the display area 205 displays the number of still images recorded during the current examination.
  • images recorded during the current examination are displayed as thumbnails.
  • the past three thumbnails are displayed, and when a new image is recorded, the old image is updated.
  • the number of displayed images is three, but it may be configured such that more images can be displayed.
  • the display area 207 the number of moving image titles recorded during the current examination is displayed. By performing the recording and stop operation, the title is divided, a subfolder is generated for each title inside the patient folder, and one main movie is recorded.
  • moving image titles (main movie) recorded during the current examination are displayed as thumbnails. In the example of FIG. 16A, the past three titles are displayed. However, it is also possible to configure so that thumbnails of more titles can be displayed.
  • the medical information recording device 80 can record an audio signal input from an audio input terminal (not shown) in conjunction with recording of a moving image.
  • the display of “AUDIO ON” indicates that voice recording is enabled.
  • the voice recording can be enabled / disabled by setting. In the case of invalidity, for example, text such as “AUDIO OFF” is displayed.
  • the remaining recordable amount of the built-in HDD 31 is displayed.
  • the moving image recording time and the number of still images recorded are displayed, and the values are updated in real time according to the state.
  • the medical information recording device 80 can also display a warning when the remaining amount is low, for example, when it falls below a certain threshold.
  • the recordable remaining amount of the external medium 51 is displayed.
  • the type of the storage medium, the recording time of the moving image, and the number of still images recorded are displayed.
  • the remaining recordable amount is updated in real time.
  • the medical information recording apparatus 80 can also display a warning when the remaining amount is low as in the case of the built-in HDD 31, for example, when it falls below a certain threshold value.
  • FIG. 16B is an example in the case where there are a plurality of, for example, two images to be recorded in the display screen 201.
  • the display area relating to one image (“CH1”) is shown as plain, and the other A display area relating to the image (“CH2”) is indicated by hatching.
  • the same reference numerals are assigned to the same display areas as in FIG.
  • display areas 203a and 203b are areas for performing display similar to the display area 203 in FIG. 16 (a) with respect to CH1 and CH2, respectively.
  • the display areas 204a and 204b are areas for performing display similar to the display area 204 in FIG. 16A with respect to CH1 and CH2, respectively.
  • the medical image of CH1 is being recorded, and the medical image of CH2 is in a recording stopped state.
  • the display area 213 displays the same contents as the display area 205 of FIG. 16A for both CH1 and CH2, and the display area 214 displays the same contents as the display area 207 of FIG. This is displayed for both CH1 and CH2.
  • information on CH1 is displayed after “CH1”
  • information on CH2 is displayed after “CH2”.
  • both the CH1 still image and the CH2 still image are displayed.
  • “CH1” and “CH2” are displayed at the bottom of the thumbnail display so that it can be seen which image is CH1 or CH2.
  • the display area 208 where the thumbnail of the moving image is displayed both the CH1 moving image and the CH2 moving image are displayed.
  • “CH1” and “CH2” are displayed at the bottom of the thumbnail display so that it can be seen which image is CH1 or CH2.
  • the surgeon can specify which display mode to select between the first display mode and the second display mode by operating the input device 11.
  • An operation signal related to the display mode from the input device 11 is supplied to the control unit 28 via the I / F 21.
  • the control unit 28 outputs a display control signal for designating a display mode to the output screen generation unit 81 based on the operation signal.
  • the output screen generation unit 81 generates an output screen in the first or second display mode according to the display control signal from the control unit 28.
  • the display mode selection operation is not limited to the input device 11, and can be configured to be performed by a button, a touch panel, an infrared remote controller, or other external controller (not shown) of the apparatus body.
  • the display mode may be set by the control unit 28 or according to the operator's operation. In the case where a plurality of interfaces are provided, it may be configured such that which display mode is set corresponding to each interface can be individually specified.
  • control unit 28 can control the screen composition calculation unit 29 to set whether the screen composition is always valid or invalid.
  • the screen compositing calculation unit 29 automatically starts the compositing process and one moving image is obtained.
  • the display in the display mode of FIG. 16A is performed on the display screen of the display device 83.
  • the composition processing is not performed even if two video signals are input, so that two moving images corresponding to each input can be obtained.
  • the display in the display mode of FIG. 16B is performed on the display screen of the display device 83.
  • FIGS. 17 to 20 relate to the fourth embodiment of the present invention, and FIG. 17 is a block diagram showing the fourth embodiment.
  • FIG. 17 the same components as those in FIG.
  • the recording data can be read from the recorded external medium so as to improve convenience while ensuring security. It has become.
  • the medical information recording apparatus 300 in this embodiment is different from the medical information recording apparatus 20 in FIG. 1 in that a recording information management unit 301, a reading unit 302, a data processing unit 303, and an I / F 304 are added.
  • the reading unit 302 can read data recorded on the external medium 51 under the control of the recording information management unit 301.
  • the data processing unit 303 is provided with the recording data from the reading unit 302, performs data processing for developing into a video signal, and outputs it to the I / F 304.
  • the I / F 304 supplies the video signal from the data processing unit 303 to the monitor 40 to display an image.
  • the recorded information management unit 301 is controlled by the control unit 28 to collate the external media recorded by the medical information recording apparatus 300, and the written data is determined according to the collation result.
  • the recording medium is a recorded external medium
  • reading of recording data from the external medium is permitted.
  • the recording information management unit 301 generates a database 31 a and records it in the built-in HDD 31.
  • FIG. 18 is an explanatory diagram for explaining a recording area of the built-in HDD 31.
  • the built-in HDD 31 has an image management area 32b in addition to the image recording area 32a.
  • a moving image or a still medical image is recorded in the image recording area 32a of the built-in HDD 31 .
  • the image recorded in the image recording area 32a in the built-in HDD 31 can be written to the external medium 51 by the recording information management unit 301 via the reading unit 302 in accordance with a user operation.
  • management information relating to recording of image data recorded in the image recording area 32a and written to the external medium 51 is recorded in the image management area 32b as a database 31a.
  • FIG. 19 is an explanatory diagram showing a management table which is an example of management information recorded as the database 31a.
  • the management table includes an internal HDD management table for managing images recorded in the internal HDD 31, and an external media management table for managing external media 51 on which images are written. Including.
  • an ID for identifying a patient, a patient name, a date, and a file management number (No.) associated with an image recorded in the image recording area 32a In the built-in HDD management table, an ID for identifying a patient, a patient name, a date, and a file management number (No.) associated with an image recorded in the image recording area 32a. And flag information indicating whether or not an image exists in the image recording area 32a.
  • the flag is “1” when an image is written in the image recording area 32a of the built-in HDD 31, and is “0” when the image is deleted from the image recording area 32a.
  • the recording information management unit 301 acquires these pieces of information from the control unit 28 and generates a management table.
  • the “write media type” indicating the type of the external media on which the image is recorded and the “media serial number” information on which information for specifying the medium on which the image is recorded are recorded. Is included.
  • the volume name is used when the external medium 51 is an optical disk such as a Blu-ray disc or a digital versatile disc
  • the serial name is used when a USB storage such as a USB memory or a USB-HDD or a semiconductor memory such as an SD card.
  • a number is used.
  • the recording information management unit 301 acquires these pieces of information from the external medium 51 via the reading unit 302 and generates a management table.
  • NAS Network Attached Storage-Network-Attached Storage
  • storage server etc.
  • the recording information management unit 301 determines the serial number of the medium.
  • the server name may be recorded as
  • the recording information management unit 301 When writing an image to the external medium 51, the recording information management unit 301 creates a folder name using the ID and date value in the built-in HDD management table, and writes the image file in the created folder. It has become.
  • the name of the image file in this case is, for example, a folder name or file management number. Create by.
  • the folder name is “1234567_2010_02_16” and the file name is “1234567_2010_02_16_h-1234567-1.mp4”.
  • the recording information management unit 301 can read the contents of the database 31 a constructed in the image management area 32 b and output it to the data processing unit 303 via the reading unit 302.
  • the data processing unit 303 can convert the management table into a form that can be displayed on the monitor 40 and output it. Thereby, the contents of the management table can be displayed on the monitor 40 by the user's menu operation or the like.
  • FIG. 20 is a flowchart for explaining playback control of a recording medium.
  • the recording process of the medical image to the built-in HDD 31 is the same as that of the first embodiment.
  • a management table is generated by the recording information management unit 301.
  • the recording information management unit 301 is controlled by the control unit 28 and corresponds from the image recording area 32 a in the built-in HDD 31.
  • the image is read and supplied to the reading unit 302.
  • the reading unit 302 gives the image data read from the recording information management unit 301 to the external medium 51 for recording.
  • the recording information management unit 301 receives information related to the read image from the control unit 28 and creates a built-in HDD management table.
  • the recording information management unit 301 reads the type and volume label of the external medium 51, and writes the type of medium to be written or the serial number of the medium in the external medium management table. Record in the column. In this way, each record in FIG. 19 is generated for each image to be written.
  • the record information management unit 301 changes the flag from “1” to “0” without deleting from the management table the record related to the image deleted from the internal HDD 31 among the records in the management table.
  • step S41 of FIG. 20 the recording information management unit 301 determines whether or not the external medium 51 is connected based on information from the reading unit 302.
  • the recording information management unit 301 reads information regarding the external medium 51 via the reading unit 302 (step S42). Further, the recording information management unit 301 reads information in the management table of the database 31a (step S43).
  • the recording information management unit 301 checks whether or not the external medium 51 to be read is a medium on which a medical image from the built-in HDD 31 is recorded. That is, the recording information management unit 301 determines in step S44 the media type acquired from the external media 51 and the serial number of the media. Same media type and media serial number. It is determined whether or not a record having “” exists on the management table. If it exists, it is determined that the external medium 51 is a medium on which a medical image from the built-in HDD 31 is recorded, and the recording information management unit 301 performs the determination in the next step S45.
  • step S45 for the file read from the external medium 51, it is determined whether the ID and date indicating the stored folder name match the record (ID and date) on the management table. If they match, the recording information management unit 301 determines in step S46 whether the file name of the file read from the external medium 51 matches the record (file management number) on the management table. To do. If they match, the recording information management unit 301 determines whether or not the flag is “1” in the next step S47. In step S48, the recording information management unit 301 determines whether the flag is “0”.
  • step S46 if it is determined in step S46 that a file matching the record in the management table of the database 31a exists in the external medium 51 In step S51, reproduction of the file in the external medium 51 is permitted.
  • the recording information management unit 301 controls the reading unit 302 in accordance with an instruction from the control unit 28, reads a file designated by the user, and supplies the file to the data processing unit 303.
  • the data processing unit 303 develops the read data into a video signal, and then gives the data to the monitor 40 via the I / F 304.
  • the data processing unit 303 may display the medical image in the original size or may display thumbnails. In this way, medical images and the like recorded on the external medium 51 can be displayed.
  • step S46 determines whether or not there is a record of the same file on the management table for all the files in the folder.
  • the flag on the management table is “0”. If such a file exists, the recording information management unit 301 shifts the processing from step S48 to step S50, and registers information related to the file in the management table. For example, when an image file whose flag is managed as “0” on the management table is read from an external medium, the recording information management unit 301 reads and reproduces the file, and configures a reading table that understands the history. The image file link is registered in this table. As a result, when the image file is reproduced again, it can be read immediately without executing the processing flow of FIG. 20 each time.
  • the management table is used to record the external medium at the time of recording. Images that are recorded on external media while ensuring security and checking whether or not there is a matching file in the management table. Can be played back and displayed, which is very convenient.

Abstract

　医療情報記録装置は、複数の入力端子を有して複数の撮像装置からの医療画像を入力可能であると共に、前記複数の入力端子のうちのいずれの入力端子を介して前記医療画像が入力されたかを検出して検出結果を出力する入力部と、前記複数の入力端子を介して入力された１つ以上の前記医療画像を予め規定された複数の合成パターンのうちの１つの合成パターンに従って合成処理するものであって、前記入力部の検出結果に基づいて医療シーン又は前記医療シーンの切換りを判定し、判定結果に基づいて前記合成パターンを切換えて、前記入力された１つ以上の医療画像に基づく合成画像を出力する画面合成部と、前記合成画像を１つの画像ファイルとして記録する記録処理部とを具備する。

Description

医療情報記録装置
　本発明は、内視鏡等の医療装置によって得られる画像を記録する医療情報記録装置に関する。
　従来、内視鏡は医療用分野等において広く採用されている。内視鏡によって得られる医療画像は、診断や症例の記録のために、種々のメディアに記録される。近年、記録媒体の大容量化に伴って、内視鏡からの動画像の記録も行われるようになってきた。例えば、画像処理に応じた録画処理を行う装置が開示されている。このような医療画像の録画処理はデジタル化されており、医療画像はコンピュータによって読み出し可能なファイル形式にて保存されることがある。
　ところで、医療機関においては、内視鏡やＸ線、超音波診断装置等の多くのモダリティを組み合わせて、内視鏡画像、超音波画像、Ｘ線画像を記録すると共に、更に術者の手元の画像や室内の様子の画像等の種々の画像（以下、医療画像という）を記録することがある。この場合において、記録する複数の医療画像を１つの医療画像に合成して記録することも可能である（例えば、日本国特開２００９－３９２４３１号公報参照）。例えば、内視鏡治療中において、内視鏡画像と術者の手元の画像とが同期して合成画像として同時に記録された場合には、病変部を的確に捉えるための内視鏡のアプローチ方法と実際の内視鏡画像の見え方が一目で把握できるため、若手医師への教育用として極めて有用である。
　記録装置は複数の入力コネクタを有しており、記録時には、各コネクタに必要なモダリティを接続することで、必要な合成画像を得ることができる。しかし、比較的小規模の病院等においては、記録装置等を頻繁に移動させることも多く、記録前に各モダリティと記録装置の接続作業が必要な場合が多い。更に、合成画像を記録するためには、合成する画像が入力されるコネクタを指定すると共に、合成画像生成のための設定操作を行う必要があり、医療画像の合成画像を記録するためには、比較的煩雑な作業が必要である。
　ところで、医療行為の内容によっては、記録すべき医療画像の種類が異なるだけでなく、医療行為の途中で記録すべき医療画像も異なることが考えられる。例えば、２台のモダリティからの医療画像のうち一方の医療画像は医療行為の全時間帯において記録するのに対し、他方の医療画像は一部の時間帯にのみ記録を行う場合等が考えられる。具体的には、病変部の表層を捉えた内視鏡画像は常時記録し続け、病変部の浸達度を診断するために一時的に使用される超音波診断装置からの超音波画像はその時だけ記録される場合である。
　しかしながら、術者は医療行為に専念する必要があることから、一旦医療行為が開始されると、記録装置の煩雑な設定変更等を行うことはできない。従って、複数台のモダリティを接続してこれらの医療画像の合成画像を記録しようとする場合には、各モダリティの使用未使用の時間帯に拘わらず、全時間帯において合成画像が生成されることになる。このため、各モダリティの使用状況によっては、合成画像の一部は、無画像である黒表示となってしまう。 つまり、病変部を同定するまでの過程において、一部画像が欠けた状態で記録されることとなり、教育用に活用する上で、適切ではないものとなってしまう。
　本発明は、記録途中において、記録を停止させることなく、複数のモダリティからの医療画像の合成を制御することができる医療情報記録装置を提供することを目的とする。
　本発明の一態様に係る医療情報記録装置は、複数の入力端子を有して複数の撮像装置からの医療画像を入力可能であると共に、前記複数の入力端子のうちのいずれの入力端子を介して前記医療画像が入力されたかを検出して検出結果を出力する入力部と、前記複数の入力端子を介して入力された１つ以上の前記医療画像を予め規定された複数の合成パターンのうちの１つの合成パターンに従って合成処理するものであって、前記入力部の検出結果に基づいて医療シーン又は前記医療シーンの切換りを判定し、判定結果に基づいて前記合成パターンを切換えて、前記入力された１つ以上の医療画像に基づく合成画像を出力する画面合成部と、前記合成画像を１つの画像ファイルとして記録する記録処理部とを具備する。
　また、本発明の他の態様に係る医療情報記録装置は、複数の入力端子を有して複数の撮像装置からの医療画像を入力可能であると共に、前記複数の入力端子のうちのいずれの入力端子を介して前記医療画像が入力されたかを検出して検出結果を出力する入力部と、前記複数の入力端子を介して入力された１つ以上の前記医療画像を予め規定された複数の合成パターンのうちの１つの合成パターンに従って合成処理するものであって、前記入力部の検出結果及び前記複数の入力端子を介して入力された１つ以上の前記医療画像の画像解析結果に基づいて医療シーン又は前記医療シーンの切換りを判定し、判定結果に基づいて前記合成パターンを切換えて、前記入力された１つ以上の医療画像に基づく合成画像を出力する画面合成部と、前記合成画像を１つの画像ファイルとして記録する記録処理部とを具備する。
本発明の第１の実施の形態に係る医療情報記録装置が組み込まれた医療情報記録システムを示すブロック図。 図１中の信号検出部２４，２５の具体的な構成の一例を示すブロック図。 本実施の形態における医療画像の記録処理を説明するためのタイミングチャート。 患者情報毎に作成されるフォルダを説明するための説明図。 第１の実施の形態の動作を説明するためのフローチャート。 本発明の第２の実施の形態において採用される動作フローを示すフローチャート。 合成パターンの例を示す説明図。 医療画像の色を判定する色判定フローの一例を示すフローチャート。 横軸に波長をとり縦軸に各ブロックのレベルをとって、各ブロックにおける色分布を示すグラフ。 医療画像の輪郭を判定する輪郭判定フローの一例を示すフローチャート。 内視鏡画像の輪郭を説明するための説明図。 第２変形例の構成を示すブロック図。 第２変形例の動作を説明するためのフローチャート。 第２変形例の合成パターンを説明するための説明図。 本発明の第３の実施の形態を示すブロック図。 第２の表示モードの表示例を示す説明図。 本発明の第４の実施の形態を示すブロック図。 内蔵ＨＤＤ３１の記録領域を説明するための説明図。 データベース３１ａとして記録される管理情報の一例である管理テーブルを示す説明図。 記録メディアの再生制御を説明するためのフローチャート。
　以下、図面を参照して本発明の実施の形態について詳細に説明する。
　（第１の実施の形態）
　図１は本発明の第１の実施の形態に係る医療情報記録装置が組み込まれた医療情報記録システムを示すブロック図である。
　本実施の形態は医療情報を出力する装置として内視鏡プロセッサ１０及び超音波装置１２を用いた例について説明する。内視鏡プロセッサ１０は、図示しない内視鏡等からの画像を取り込んで画像信号処理を行い、内視鏡画像等の医療画像を生成することができる。内視鏡プロセッサ１０からの医療画像は医療情報記録装置２０及びモニター４０に供給される。また、超音波装置１２は、超音波画像等の医療画像を生成して、医療情報記録装置２０に出力する。
　入力装置１１は、図示しないキーボードや内視鏡プロセッサ１０の本体に設けられたボタン、スイッチ（図示せず）等によって構成され、内視鏡プロセッサ１０の画像処理に対する指示操作や、患者情報の入力操作等を行うことができるようになっている。内視鏡プロセッサ１０は、この患者情報を医療情報記録装置２０に出力することができる。
　また、内視鏡プロセッサ１０は、医療情報記録装置２０を制御するための制御情報を発生する。制御情報としては、動画像である医療画像の録画開始を指示する録画開始情報、その録画終了を指示する録画終了情報、静止画像である医療画像の録画を指示する静止画録画情報、検査の終了を指示する検査終了情報等がある。例えば、内視鏡プロセッサ１０は、内視鏡に設けられたレリーズボタンや録画開始ボタン等の各種スコープ操作に応答して、画像処理が制御されると共に、各種スコープ操作に応じた制御情報を発生して医療情報記録装置２０に出力することができるようになっている。
　更に、内視鏡プロセッサ１０は、内視鏡等の出力に基づいて生成した医療画像に、患者情報をスーパーインポーズして出力することができる。この場合において、内視鏡プロセッサ１０は、患者情報に基づく表示領域と内視鏡画像に基づく表示領域とを有する医療画像を生成することもできる。
　モニター４０は、内視鏡プロセッサ１０からの医療画像を画面上に表示することができるようになっている。図１の例では、モニター４０の画面右側の領域４１及び左側の領域４２～４４に、夫々内視鏡画像、患者名、患者ＩＤ及び検査情報が表示されることを示している。
　医療情報記録装置２０は、内視鏡プロセッサ１０との間で情報の授受を行うインターフェース（以下、Ｉ／Ｆという）２１、内視鏡プロセッサ１０からの医療画像を取り込むＩ／Ｆ２２及び超音波装置１２からの医療画像を取り込むＩ／Ｆ２３を有している。Ｉ／Ｆ２１は例えばＲＳ－２３２Ｃ規格に基づくインターフェースであり、内視鏡プロセッサ１０からの患者情報及び制御情報を取り込む。Ｉ／Ｆ２２，２３は画像伝送に適したインターフェースであり、各種モダリティからの医療画像を取り込む。
　なお、図１では、２系統のインターフェースのみを示し、内視鏡プロセッサ１０及び超音波装置１２を各インターフェースに接続する例を示しているが、３系統以上のインターフェースを有していてもよい。また、各インターフェースは複数の入力端子を備えることが可能である。例えば、入力端子として、ＤＶＩ(Digital Visual Interface)端子、ＳＤＩ(Serial Digital Interface)端子、ＲＧＢ端子、Ｙ／Ｃ端子、ＶＩＤＥＯ端子等の複数種類の端子を採用することができる。これらの入力端子には、内鏡プロセッサや超音波装置以外にも、例えば、術野カメラ、Ｘ線観測装置、内視鏡プロセッサ１０とは別の内視鏡プロセッサ等を接続可能である。
　医療情報記録装置２０は、Ｉ／Ｆ２１を介して、内視鏡に設けられた録画開始ボタン及び録画終了ボタンの操作に応答して発生した制御情報が与えられると、Ｉ／Ｆ２２を介して取り込まれた動画像である医療画像（以下、本編動画ともいう）の録画の開始、及び当該録画の終了を行うようになっている。
　本実施の形態においては、Ｉ／Ｆ２２，２３を介して入力された映像信号はそれぞれ信号検出部２４，２５に供給されるようになっている。信号検出部２４，２５は制御部２８に制御されて、Ｉ／Ｆ２２，２３を介して映像信号が入力された否かを検出することができるようになっている。
　図２は図１中の信号検出部２４，２５の具体的な構成の一例を示すブロック図である。なお、信号検出部２４，２５は相互に同一構成であり、図２では一方の信号検出部２４のみを示している。図２の例はＩ／Ｆ２２，２３が夫々４系統の入力端子を有する例を示している。
　図２において、Ｉ／Ｆ２２の４系統の出力端は信号検出部２４の各入力端子Ｉ１～Ｉ４に供給される。入力端子Ｉ１～Ｉ４は夫々ＶＩＤＥＯ端子、Ｙ／Ｃ端子、ＳＤＩ端子及びＤＶＩ端子である。これらの入力端子Ｉ１～Ｉ４を介して入力された映像信号は検出部２４ａに供給されると共にスイッチ部２４ｂにも供給される。検出部２４ａは、制御部２８に制御されて、各入力端子Ｉ４～Ｉ４に入力された映像信号を検出して、検出結果を制御部２８に出力する。制御部２８は、信号検出部２４から映像信号の検出結果が与えられると、スイッチ部２４ｂを制御して、映像信号が検出された入力端子を選択して、信号検出部２４に入力された映像信号を出力するようになっている。
　内視鏡プロセッサ１０の信号コネクタをＩ／Ｆ２２の各入力端子のいずれか１つに接続して、内視鏡プロセッサ１０から映像信号が出力されることにより、制御部２８は、内視鏡プロセッサ１０からの映像信号が入力されたことを検出すると共に、内視鏡プロセッサ１０からの映像信号をスイッチ部２４ｂから出力させることができる。同様に、Ｉ／Ｆ２３の入力端子のいずれか１つに超音波装置１２の信号コネクタを接続して超音波装置１２から映像信号を出力させることにより、制御部２８は、超音波装置１２からの映像信号が入力されたことを検出すると共に、超音波装置１２からの映像信号をスイッチ部２４ｂから出力させることができる。
　このように、信号検出部２４，２５の検出結果によって、制御部２８は、各Ｉ／Ｆ２２，２３を介して映像信号が入力されたか否かを判定することができ、また、これらの映像信号がいずれの種類の入力端子に入力された場合でも、入力された映像信号を取り込むことができる。つまり、術者は医療行為中に録画を停止し機器設定変更を行うこともなく、継続して医療行為を継続することができる。制御部２８は、Ｉ／Ｆ２２，２３のいずれから映像信号が入力されるかを示す合成制御信号を生成して画面合成演算部２９に出力するようになっている。
　信号検出部２４，２５から出力された映像信号は夫々バッファメモリ２６，２７に供給される。バッファメモリ２６，２７は入力された映像信号を一旦保持した後、画面合成演算部２９に出力する。画面合成演算部２９は、入力映像信号に対して所定の映像信号処理を施す。
　本実施の形態においては、画面合成演算部２９は、制御部２８からの合成制御信号によって、Ｉ／Ｆ２２，２３の一方から映像信号が入力されたことが示された場合には、入力された映像信号に基づく医療画像を出力し、Ｉ／Ｆ２２，２３の両方から映像信号が入力されたことが示された場合には、入力された２種類の映像信号に基づく医療画像に対する画面合成を行い、合成画像を出力することができるようになっている。画面合成演算部２９は、画面合成に際して、予め用意された複数の合成パターン、例えば、ピクチャーインピクチャー（ＰＩＰ）やピクチャーアウトピクチャー（ＰＯＰ）等の合成パターンの中から、制御部２８によって指定された合成パターンを用いて画面合成を行って、動画の医療画像（本編動画）を出力する。
　画面合成演算部２９は、生成した本編動画を記録処理部３０に出力する。記録処理部３０は、入力された本編動画を順次圧縮処理して内蔵ＨＤＤ３１に与えて記録する。なお、記録処理部３０は、例えば、Ｈ．２６４方式等の所定のエンコード方式に従ってエンコード処理を行って本編動画を圧縮する。こうして、内蔵ＨＤＤ３１に、本編動画が記録される。
　本実施の形態においては、画面合成演算部２９は、記録途中であっても、制御部２８からの合成制御信号に従って画面合成が制御されるようになっている。例えば、Ｉ／Ｆ２２から内視鏡画像のみが入力されている状態では、画面合成演算部２９によって内視鏡画像のみによる本編動画が生成されて圧縮記録される。この記録途中において、Ｉ／Ｆ２３を介して超音波画像が入力され始めると、制御部２８からの合成制御信号に制御されて、画面合成演算部２９は、入力された内視鏡画像と超音波画像との画面合成を開始して合成画像を生成する。この合成画像が本編動画として記録処理部３０に供給され、本編動画の圧縮及び記録処理が継続される。
　更に、この記録途中において、Ｉ／Ｆ２３を介した超音波画像の入力が停止すると、制御部２８からの合成制御信号に制御されて、画面合成演算部２９は、入力された内視鏡画像のみの本編動画を生成し、この本編動画が圧縮されて記録処理が継続される。なお、記録処理は、医療画像が入力される医療画像が存在するか否かに拘わらず、制御部２８に録画終了情報が入力されるまで継続される。制御部２８に録画終了情報が入力されると、制御部２８は記録処理部３０に録画の終了を指示する。記録処理部３０は、制御部２８によって録画の終了が指示されると、内蔵ＨＤＤ３１に記録している動画像のファイル化を行う。こうして、録画開始情報の入力から録画終了情報の入力までの期間に記録された本編動画が１ファイルとして記録される。
　記録処理部３０は、内蔵ＨＤＤ３１に記録されている本編動画を外部メディア５１に与えて記録させることもできるようになっている。なお、外部メディアとしては、外付けハードディスクや半導体記録媒体等の各種記録メディアを含む。
　図３は本実施の形態における医療画像の記録処理を説明するためのタイミングチャートであり、図３（ａ）は患者情報を示し、図３（ｂ）は録画開始情報を示し、図３（ｃ）は録画終了情報を示し、図３（ｄ）は医療画像Ｉｍａ入力を示し、図３（ｅ）は医療画像Ｉｍｂ入力を示し、図３（ｆ）は画面合成処理を示し、図３（ｇ）はメモリバッファへの出力を示している。
　制御部２８は、図３（ａ）に示す患者情報がＩ／Ｆ２１を介して入力されると、患者情報毎のフォルダを内蔵ＨＤＤ３１内に作成する。
　図４は患者情報毎に作成されるフォルダを説明するための説明図である。図４の例では、各患者に対応する患者フォルダが作成され、更に、患者フォルダのサブフォルダとして、本編動画が格納される動画フォルダが生成されることを示している。
　図３（ｂ）に示す録画開始情報がＩ／Ｆ２１を介して入力されると、制御部２８は、本編動画の録画を開始する。内視鏡プロセッサ１０からの医療画像ＩｍａはＩ／Ｆ２２を介して医療情報記録装置２０に取り込まれ、Ｉ／Ｆ２２を介して信号検出部２４に供給される。信号検出部２４は映像信号が入力されたことを検出して制御部２８に検出結果を出力する。これにより、制御部２８は、信号検出部２４を制御して、入力された映像信号をバッファメモリ２６に出力させる（図３（ｇ））。映像信号は、バッファメモリ２６から画面合成演算部２９に供給される。
　画面合成演算部２９は、入力された映像信号に対して所定の信号処理を施した後、医療画像Ｉｍａを圧縮した後記録処理部３０に与える（図３（ｆ））。記録処理部３０は入力された医療画像Ｉｍａを内蔵ＨＤＤ３１に与えて記録する。こうして、録画開始情報の発生と同時に、内視鏡プロセッサ１０からの映像信号に基づく医療画像の記録が開始される。
　なお、本実施の形態においては、内蔵ＨＤＤ３１に医療画像等を記録する例を説明するが、医療画像等の記録先としては、外部ＨＤＤや各種記録メディア等の外部メディア５１を選択することができることは明らかである。
　ここで、内視鏡プロセッサ１０からの医療画像に基づく記録途中において、Ｉ／Ｆ２３に接続されている超音波装置１２の電源を投入して、超音波装置１２から超音波画像を出力させるものとする。この超音波画像は、Ｉ／Ｆ２３を介して信号検出部２５に供給される（図３（ｅ））。信号検出部２５は映像信号が入力されたことを検出して検出結果を制御部２８に出力する。これにより、制御部２８は、Ｉ／Ｆ２２だけでなくＩ／Ｆ２３にも映像信号が入力されたことを検出して、Ｉ／Ｆ２３を介して入力された映像信号をバッファメモリ２７を介して画面合成演算部２９に与えると共に、２入力を画面合成するための合成制御信号を画面合成演算部２９に出力する。
　画面合成演算部２９は、合成制御信号に基づいて、入力された２つの医療画像を画面合成して、合成画像を生成し、本編動画として出力を続ける。こうして、記録処理部３０に入力される本編動画は、１種類の内視鏡画像に基づく動画像から内視鏡画像と超音波画像の２種類の画像に基づく合成画像の動画像に変化する。記録処理部３０が本編動画の圧縮処理及び記録処理を継続することで、内蔵ＨＤＤ３１に記録される本編動画は、１画面の動画像から２画面合成された動画像に変化する。
　動画の医療画像である本編動画の録画は、図３（ｃ）に示す録画終了情報が入力されるまで継続される。制御部２８は、録画終了情報が入力されると、記録処理部３０を制御して、医療画像の録画を終了させる。記録処理部３０は、本編動画をファイル化し、このファイルを内蔵ＨＤＤ３１に作成された患者フォルダ内の本編動画用の動画フォルダ内に適宜のファイル名を付して記録する。
　このように、本実施の形態においては、記録途中において、入力される映像信号が１種類から２種類に変化した場合でも、記録が停止されることなく、１種類の医療画像に基づく動画像から２種類の医療画像の合成画像に基づく動画像に変化するのみで、録画開始情報及び録画終了情報によって指定された動画録画期間の医療画像（本編動画）が１つの画像ファイルとして内蔵ＨＤＤ３１に記録される。
　次に、このように構成された実施の形態の動作について図５のフローチャートを参照して説明する。
　制御部２８は、図５のステップＳ１において、検査が開始されたか否かを判断する。例えば、患者情報の入力、録画開始操作、検査開始操作等の操作によって、制御部２８は検査が開始されたことを判断する。術者が入力装置１１を操作して患者情報を入力するものとする。この患者情報は、内視鏡プロセッサ１０から医療情報記録装置２０に供給される。患者情報は、Ｉ／Ｆ２１を介して制御部２８に取り込まれる（ステップＳ２）。
　制御部２８は、入力された患者情報を解析し、患者情報に基づくフォルダ名の検査フォルダを内蔵ＨＤＤ３１内に作成する（ステップＳ３）。例えば、制御部２８は、患者ＩＤを含むフォルダ名の検査フォルダを作成する。また、制御部２８は、このフォルダ内に本編動画用の動画フォルダを作成する。
　術者が図示しない内視鏡や内視鏡プロセッサ１０等に設けられた録画開始ボタンを押して、録画開始を指示するものとする。この操作によって、内視鏡プロセッサ１０は、例えば内視鏡からの内視鏡画像に患者情報をスーパーインポーズして生成した医療画像を医療情報記録装置２０に出力すると共に、録画開始情報を発生して医療情報記録装置２０に出力する。制御部２８は、Ｉ／Ｆ２１を介して録画開始情報を受信すると、Ｉ／Ｆ２２を介して入力される医療画像を取り込む。この医療画像は、信号検出部２４、バッファメモリ２６を介して画面合成演算部２９に与えられ、画面合成演算部２９の画像処理の後、本編動画として記録処理部３０に与えられ、記録処理部３０は本編動画を圧縮した後、内蔵ＨＤＤ３１に供給して記録を開始する（ステップＳ４）。
　次のステップＳ５では、制御部２８によって、２入力が検出されたか否かの判定が行われる。本編動画の記録中において、超音波装置１２からの映像信号がＩ／Ｆ２３に供給されると、信号検出部２５の検出結果によって、制御部２８はＩ／Ｆ２２，２３の両方に映像信号が入力されたものと判定して、処理をステップＳ６に移行し、２画面合成処理を指示する。
　Ｉ／Ｆ２３からの映像信号は、信号検出部２５及びバッファメモリ２７を介して画面合成演算部２９に与えられる。画面合成演算部２９には、制御部２８から２画面の画面合成処理を指示する合成制御信号が与えられており、画面合成演算部２９は、２入力の合成画像を生成して本編動画として記録処理部３０に出力する。記録処理部３０には、超音波装置１２からの映像信号の入力前後において、継続して本編動画が入力されており、記録処理部３０は、本編動画の入力、圧縮処理を継続し、圧縮画像を内蔵ＨＤＤ３１に供給して記録を続ける。
　次に、合成画像の本編動画の記録途中において、超音波装置１２からの映像信号のＩ／Ｆ２３への供給が停止するものとする。制御部２８は、信号検出部２５の検出結果によって、入力はＩ／Ｆ２２からの映像信号のみになったものと判定して、２画面合成処理を停止するための合成制御信号を出力する。
　これにより、画面合成演算部２９は、内視鏡画像のみに基づく本編動画を生成して記録処理部３０に出力する。記録処理部３０には、超音波装置１２からの映像信号の入力が停止する前後において、継続して本編動画が入力されており、記録処理部３０は、本編動画の入力、圧縮処理を継続し、圧縮画像を内蔵ＨＤＤ３１に供給して記録を続ける。
　ステップＳ７では録画の終了が判定される。術者が録画終了ボタンを押すと、ステップＳ７において本編動画の録画中であるか否かが判定され、録画中でない場合には、ステップＳ８において、本編動画の録画処理が終了し、本編動画がファイル化される。この本編動画ファイルは、患者フォルダ内の本編動画用の動画フォルダ内に記録される。
　２入力の画面合成処理は、Ｉ／Ｆ２２，２３に入力される映像信号の検出結果に応じて、記録途中においても変更可能であり、録画の開始から終了までの間、本編動画は入力に応じて単独の画像又は合成画像に変化しながら、１つの動画ファイルとして記録される。
　このように本実施の形態においては、医療画像の記録途中において、記録されている医療画像とは異なる医療画像の入力又は入力の停止を検出し、この検出結果に基づいて、入力される１つ以上の医療画像の画面合成処理を制御しており、記録途中であっても入力の変化に応じた本編動画を１つの動画ファイルとして記録することができる。
（第２の実施の形態）
　図６は本発明の第２の実施の形態において採用される動作フローを示すフローチャートである。図６において図５と同一の手順については同一符号を付して説明を省略する。本実施の形態のハードウェア構成は第１の実施の形態と同様であり、画面合成処理が第１の実施の形態と異なるのみである。
　第１の実施の形態においては、制御部２８が設定した合成パターンに従って２画面合成処理を行う例について説明した。本実施の形態においては、医療画像の画像解析を行い、解析結果に基づいて自動的に最適な２画面合成パターンを選択するものである。一例として実際の術中内視鏡において、通常病変部までは内視鏡と術野カメラからの画像を画面合成して記録する。術者の手元と処置の仕方を捉えることで、病変部までのアプローチを的確に把握できる教育用データとなる。この時、一番重要な画像は内視鏡画像であることから親画面配置とし、直接医療に関わらない術野画像は子画面配置とするピクチャーインピクチャーの画面合成が最適となる。次に、病変部に到達後は、別の内視鏡プロセッサからの内視鏡画像を画面合成して記録する。管腔臓器の切除範囲を2つの内視鏡画像を比較し同定するための教育用データとなる。この時、2つの内視鏡画像はともに重要なことからピクチャーアウトピクチャーの画面合成が最適となる。このように、術者が医療行為中に機器設定変更を行うこともなく、最適な画面合成により自動的に記録できることは、医療知識と処置精度の向上に寄与し、医療の効率化を実現できると言える。
　本実施の形態においては、図５のステップＳ５における２入力の検出処理までは第１の実施の形態と同様である。図６は１入力として内視鏡プロセッサ１０からの映像信号に基づく医療画像Ｉｍａの記録処理が開始されている場合における２入力目に対する処理を示している。
　図７は合成パターンの例を示す説明図である。図７（ａ），（ｂ）はピクチャーインピクチャー（ＰＩＰ）形式の合成パターンを示しており、図７（ａ）はＩ／Ｆ２２を介して入力された映像信号に基づく医療画像Ｉｍａを親画像とし、この親画像内に、Ｉ／Ｆ２３を介して入力された映像信号に基づく医療画像Ｉｍｂを子画面配置する例を示している。また、図７（ｂ）は、医療画像Ｉｍｂを親画像とし、この親画像内に、医療画像Ｉｍａを子画面配置する例を示している。
　図７（ｃ），（ｄ）はピクチャーアウトピクチャー（ＰＯＰ）形式の合成パターンを示しており、図７（ｃ）はＩ／Ｆ２２を介して入力された映像信号に基づく医療画像Ｉｍａを画面左側に配置し、Ｉ／Ｆ２３を介して入力された映像信号に基づく医療画像Ｉｍｂを画面右側に配置する例を示している。また、図７（ｄ）は、医療画像Ｉｍｂを画面左側に配置し、医療画像Ｉｍａを画面右側に配置する例を示している。なお、図７（ｂ），（ｃ）の合成パターンにおいては、医療画像Ｉｍａ，Ｉｍｂのアスペクト比を変更させないために、画面の上下に無画部が設けられている。
　図６のステップＳ２１においては、画面合成演算部２９によって、入力された医療画像の画像解析が行われる。画面合成演算部２９は、画像解析の結果に基づいて、ステップＳ２１において医療画像が黒っぽい画像であるか否かを判定し、ステップＳ２２において医療画像が赤っぽい色であるか否かを判定する。
　例えば、医療画像が内視鏡画像である場合には、臓器や血の色等の影響によって、入力される医療画像は全体的に赤っぽい色となる。また、例えば、医療画像がＸ線画像や超音波画像である場合には、入力される医療画像は白黒である。また、医療画像が術場の風景等の画像である場合には、入力される医療画像は全体的に緑色や青色系統の色となる。
　図８は医療画像の色を判定する色判定フローの一例を示すフローチャートである。また、図９は横軸に波長をとり縦軸に各ブロックのレベルをとって、各ブロックにおける色分布を示すグラフである。
　図８のステップＳ３１において、画面合成演算部２９は、複数フレームの医療画像を抽出し、ステップＳ３２において、各フレームの画像をブロックに分割する。画面合成演算部２９は、各ブロックの色分布を解析する。図９は所定の医療画像の所定のブロックにおける色分布の一例を示している。図９の例は対象ブロックについては波長が６００ｎｍのレベルが比較的高いことを示しており、対象ブロックは赤っぽい色であることが分かる。
　画面合成演算部２９は、ステップＳ３４において、各ブロックの色分布の解析結果について１フレーム分の総和を求めて色分布平均値を算出する。更に、画面合成演算部２９は、ステップＳ３５において、各フレームの色分布平均値から抽出フレーム分の平均的色分布を算出する。画面合成演算部２９は、平均的色分布と各色に対応して規定されている色閾値との比較によって、医療画像の色を判定する（ステップＳ３６）。
　画面合成演算部２９は、ステップＳ２１において、医療画像の解析結果が黒っぽい画像であることを示した場合には、次のステップＳ２４において、ＰＩＰ形式の合成パターンを選択し、２入力目の医療画像を子画面として合成する。また、画面合成演算部２９は、医療画像が黒っぽい画像でなく、ステップＳ２２において赤っぽい画像でもないことを検出した場合には、ステップＳ２４において、ＰＩＰ形式の合成パターンを選択し、２入力目の医療画像を子画面として合成する。また、画面合成演算部２９は、医療画像が黒っぽい画像でなく、ステップＳ２２において赤っぽい画像であることを検出した場合には、ステップＳ２３において、ＰＯＰ形式の合成パターンを選択し、２入力目の医療画像を画面の右側又は左側に配置して合成する。
　他の処理は図５のフローと同様である。
　次に、このように構成された実施の形態の動作について説明する。
　いま、１入力目の映像信号として内視鏡画像が医療情報記録装置２０のＩ／Ｆ２２に入力されているものとする。内視鏡画像は、画面合成演算部２９によって処理され、記録処理部３０はこの内視鏡画像に基づく本編動画の内蔵ＨＤＤ３１への記録処理を開始する（ステップＳ４）。
　ここで、２入力目の医療画像がＩ／Ｆ２３に入力されるものとする。この医療画像は画面合成演算部２９に与えられ、画面合成演算部２９は画像解析によって、２入力目の医療画像の色を判定する。図１の接続の場合には２入力目は超音波画像であり、画面合成演算部２９は、ステップＳ２１において、２入力目の画像の色が黒っぽいものと判定して、処理をステップＳ２４に移行する。ステップＳ２４では、画面合成演算部２９は、図７（ａ）に示すように、１入力目の内視鏡画像（医療画像Ｉｍａ）を親画像とし、２入力目の超音波画像（医療画像Ｉｍｂ）を子画面配置する。
　内視鏡診断等の画像としては、通常、超音波画像よりも内視鏡画像が観察し易い方が好まれる。本実施の形態においては、画像解析によって医療画像の色を判定することで、医療画像の種類を判定しており、この判定結果に従って画面合成のパターンを選択することで、表示等に適した画面合成を自動的に行うことができる。
　なお、２入力目が手術場の様子を撮影した医療画像である場合にも、ステップＳ２２からステップＳ２４に処理が移行して、２入力目が子画面表示される。また、２入力目が図示しない他の内視鏡プロセッサからの内視鏡画像である場合には、ステップＳ２２からステップＳ２３に処理が移行して、図７（ｃ），（ｄ）に示すように、入力された２つの医療画像を例えば左右に配置したピクチャーアウトピクチャーによって画面合成が行われる。なお、入力装置１１を操作することで、合成パターンを図７（ａ）乃至（ｄ）の間で強制的に変更するようにしてもよい。
　このように本実施の形態においては、第１の実施の形態と同様の効果が得られるとともに、画像の色を解析することで、表示に適した画面合成を自動的に行うことができる。
（第１変形例）
　第２の実施の形態における説明では、画像解析によって医療画像の色を判定し、色の判定結果に従って合成パターンを決定する例について説明したが、合成パターンの判定基準を医療画像に描写された輪郭を基準にしてもよい。例えば、内視鏡画像は、手術場の様子を撮影した画像に比べて、絵柄が粗く、輪郭が少ないことが考えられる。そこで、画像の輪郭を検出することで、内視鏡画像とその他の画像を判定することができる。
　図１０は医療画像の輪郭を判定する輪郭判定フローの一例を示すフローチャートである。図１０において図８と同一の手順には同一符号を付して説明を省略する。図１１は内視鏡画像の輪郭を説明するための説明図である。
　図１０のステップＳ４３において、画面合成演算部２９は、各ブロックの映像輪郭の線密度を解析する。図１１（ａ）は内視鏡画像を示し、図１１（ｂ）は映像輪郭を示している。画面６１の中央には、内視鏡画像６２が配置されている。内視鏡画像６２中には、内蔵６３及び鉗子６４が描写されている。例えば、画面合成演算部２９は、この内視鏡画像６２を１点鎖線に示す境界で４つのブロックに分割する。図１１（ｂ）は図１１（ａ）の４つのブロックのうちの右上のブロックについて、画面合成演算部２９が検出した映像輪郭を破線にて示している。図１１（ｂ）に示すように、内視鏡画像６２内のブロックの映像輪郭の線密度は比較的低い。
　画面合成演算部２９は、ステップＳ４４において、各ブロックの輪郭線密度の解析結果について１フレーム分の総和を求めて輪郭線密度の平均値を算出する。更に、画面合成演算部２９は、ステップＳ４５において、各フレームの輪郭線密度の平均値から抽出フレーム分の平均的輪郭線密度を算出する。画面合成演算部２９は、平均的輪郭線密度と各画像に対応して規定されている平均的輪郭線密度との比較によって、医療画像の種類を判定する（ステップＳ４６）。
　例えば、画面合成演算部２９は、平均的輪郭線密度が所定の閾値以下の場合には、対象の医療画像は内視鏡画像であるものと判定し、平均的輪郭線密度が閾値を超える場合には、対象の医療画像は内視鏡画像以外の画像、例えば、手術場の様子を撮影した画像であるものと判定する。
　映像輪郭の判定結果に基づいて、ＰＩＰ又はＰＯＰ形式の合成パターンを選択して、画面合成を行うことは図６と同様である。
　更に、他の変形例として、１入力目の内視鏡画像と２入力目の医療画像との画像比較によって、２入力目の医療画像が内視鏡画像であるか内視鏡画像以外の画像であるかを判定してもよい。
（第２変形例）
　図１２乃至図１４は第２変形例を示しており、３入力以上の入力がある場合の例を示している。図１２は第２変形例の構成を示すブロック図であり、図１３は第２変形例の動作を説明するためのフローチャートであり、図１４は第２変形例の合成パターンを説明するための説明図である。図１２において図１と同一の構成要素には同一符号を付して説明を省略する。また、図１３において図５と同一の手順には同一符号を付して説明を省略する。
　第２変形例は、入力を４系統にした点が図１と異なるのみである。なお、図１２においては、図面の簡略化のために、入力装置１１、内視鏡プロセッサ１０及びモニター４０の図示を省略している。
　図１２では医療画像を出力する装置として、内視鏡プロセッサ１０（図１参照）及び超音波装置１２の外に、心電図装置７７及び術野カメラ７８を採用している。心電図装置７７からの医療画像はＩ／Ｆ７１を介して医療情報記録装置７０に取り込まれ、術野カメラ７８からの医療画像はＩ／Ｆ７２を介して医療情報記録装置７０に取り込まれる。
　Ｉ／Ｆ７１を介して入力された映像信号は信号検出部７３を介してバッファメモリ７５に供給され、Ｉ／Ｆ７２を介して入力された映像信号は信号検出部７４を介してバッファメモリ７６に供給される。Ｉ／Ｆ７１，７２の構成はＩ／Ｆ２２，２３と同様であり、信号検出部７３，７４の構成は信号検出部２４，２５と同様であり、バッファメモリ７５，７６の構成はバッファメモリ２６，２７と同様である。Ｉ／Ｆ２２，２３，７１，７２を介して入力された映像信号は、夫々バッファメモリ２６，２７，７５，７６に一旦記憶された後、画面合成演算部２９に与えられる。
　制御部２８は、信号検出部２４，２５，７３，７４を制御して、Ｉ／Ｆ２２，２３，７１，７２を介して映像信号が入力されたか否かの検出結果を取得し、検出結果に基づく合成制御信号を画面合成演算部２９に出力する。画面合成演算部２９は、合成制御信号に基づいて、入力された医療画像を合成処理する。
　図１３のフローはステップＳ３１～Ｓ３４の処理が追加された点が図５のフローと異なるのみである。ステップＳ３１，Ｓ３２，Ｓ５では、夫々４入力であるか否か、３入力であるか否か、２入力であるか否かが判定される。４入力の場合には、ステップＳ３３において４画面合成処理が行われ、３入力の場合には、ステップＳ３４において３画面合成処理が行われ、２入力の場合には、ステップＳ５において２画面合成処理が行われる。
　図１４は合成パターンの例を示しており、図１４（ａ）は３画面合成の例であり、図１４（ｂ）は４画面合成の例である。図１４の例はいずれもＰＯＰ形式の例を示しており、図１４（ａ）はＩ／Ｆ２２を介して入力された映像信号に基づく医療画像Ｉｍａを画面左側の大部分に配置し、画面右側には上下に、Ｉ／Ｆ２３，７１を介して入力された映像信号に基づく医療画像Ｉｍｂ，Ｉｍｃを配置する例を示している。また、図１４（ｂ）は、Ｉ／Ｆ２２，２３，７１，７２を介して夫々入力された医療画像Ｉｍａ～Ｉｍｄを画面の上下左右の４分割した領域に配置する例を示している。
　このように第２変形例においては、４入力の医療画像の入力又は入力の停止を検出し、この検出結果に基づいて、４入力の医療画像の画面合成処理を制御しており、記録途中であっても入力の変化に応じた本編動画を１つの動画ファイルとして記録することができる。なお、第２変形例は４入力の例を示したが、入力系統数は適宜設定可能であることは明らかである。
　次に、実際の手技の流れに合せて、２画面合成の形式が選択される機序と記録データの内容について説明する。
　一般的な外科内視鏡手技では、硬性内視鏡を腔内に挿入してから記録を開始する（図６のステップＳ４）[シーン１　病変部へ向けた剥離処置時]。病変部位に向けて、臓器周辺の癒着膜や脂肪を処置しながら手技を進めていく。この時、比較的高度な処置ではないこと、適切な処置実施の証明記録を残すという視点から、内視鏡画像のみの記録となる（図６のステップＳ５のＮＯ判定とステップＳ７のＮＯ判定とのループ）。
　病変部位に到達すると、病変部位と周辺臓器との丁寧な剥離、切除などの高度な処置が開始される。この時、適切な処置実施の証明だけでなく若手医師の教育用途を意図して、術者の手元の画像を内視鏡画像と同期させて記録を残すために、前記医療情報記録装置に術野カメラからの映像ケーブルを接続する[シーン２　病変部到達後の処置時]。これにより、前記医療情報記録装置にて検出した映像信号をもとに、入力端子を自動的に設定する（図２）。入力端子が設定されることで、図１で示す信号検出部２５、バッファメモリ２７を通して画面合成演算部２９へ術野カメラからの映像信号が入力されるとともに、制御部２８から画面合成演算部へ連携制御を行う（図６のステップＳ５）。画面合成演算部２９では、入力された映像信号をもとに自動的に画像解析を開始する（図６のステップＳ６）。術野カメラで撮影した映像信号の色分析と図６のステップＳ２１とステップＳ２２の判定を合せた結果からＰＩＰ合成パターンが自動的に設定され、２画面合成が開始しつつ動画像の記録を継続する。この時の２画面合成パターンは、教育用途を意図しているため、もっとも重要な内視鏡画像を親画面、術野画像を子画面とする図７（ａ）が選択される。
　ある程度処置が進行すると、病変部位同定のために軟性内視鏡が用いられる。この時、適切な処置実施の証明だけでなく若手医師の教育用途を意図して、病変部位同定と切除ライン確定までのプロセスを明示させる記録を残すために、軟性内視鏡が接続された別のプロセッサーから出力される内視鏡画像を伝送する映像ケーブルを前記医療情報記録装置に接続する。同時に、病変部位同定の診断となり処置は中断されるため、術野カメラからの映像入力を外す[シーン３　病変部の同定時]。ここでは、意図的にケーブルを外すこととしているが、ケーブルを外さない場合にて、信号検出部２５が２つ目の入力信号を検出することで、自動的に２つ目の映像入力端子に切り替える手段を有していてもよい。これにより、前記医療情報記録装置にて検出した映像信号をもとに、再度入力端子を自動的に設定する（図２）。前述と同様に、入力端子が設定されることで、図１で示す信号検出部２５、バッファメモリ２７を通して画面合成演算部２９へ軟性内視鏡が接続された別のプロセッサーからの映像信号が入力されるとともに、制御部２８から画面合成演算部へ連携制御を行う（図６のステップＳ５）。画面合成演算部２９では、入力された映像信号をもとに自動的に画像解析を開始する（図６のステップＳ６）。軟性内視鏡で観察した映像信号の色分析と図６のステップＳ２１とステップＳ２２の判定を合せた結果からＰＯＰ合成パターンが自動的に設定され、２画面合成が開始しつつ動画像の記録を継続する。この時の２画面合成パターンは、教育用途を意図しているため、医学的重要度が同程度である硬性内視鏡からの内視鏡画像を左画面に、軟性内視鏡からの内視鏡画像を右画面とする図７（ｃ）が選択される。
　臓器に対する切除ラインが確定すると、病変部位の摘出に向けた切除が開始される。この時は前述と同様に高度な処置となる。このため、適切な処置実施の証明だけでなく若手医師の教育用途を意図して、術者の手元の画像を硬性内視鏡画像と同期させて記録を残すために、前記医療情報記録装置に術野カメラからの映像ケーブルを再接続する[シーン４　病変部同定後の切除吻合時]。以降は前述と同様に、術野カメラからの映像信号を取り込んだ前記医療情報記録装置が自動的に入力端子を設定し、かつ、入力された映像信号をもとに色分析を行う。分析結果により、内視鏡画像を親画面、術野画像を子画面とした２画面合成のＰＩＰパターン（図７（ａ））が再度選択され、２画面合成しつつ動画像の記録を継続する。
　病変部位摘出後の切除部吻合、出血確認においても、鉗子操作による吻合は高度な技術を要するため、内視鏡画像と術野画像の２画面合成による動画像の記録を継続する。
　吻合後は、体内部の洗浄となる。この時は高度な医療行為はなく平易な処置となるため、教育的意図もほとんどなくなることから、術野カメラからの映像ケーブルを外し、内視鏡画像のみの動画像を継続記録する[シーン５　病変部摘出後の処置時]。
　最後に閉創となる。この時は、硬性内視鏡自体が体外へ取り出されてしまうため、内視鏡が接続されたプロセッサーからの映像ケーブルを取り外す。この代わりに、術野カメラからの映像ケーブルを前記医療情報記録装置に再接続させ、術野画像のみの動画像を継続記録する[シーン６　閉創時]。
　手技終了とともに、記録を停止する。これにより、一連の手技の中に、２画面合成された画像も取り込まれた１つの動画ファイルが生成される。
　このように、制御部２８及び画面合成演算部２９は、入力端子の接続状態や入力状態、映像信号の画像解析結果等によってシーン判定又はシーンの切換りの判定が可能であり、各シーン毎に最適な画面合成の形式を選択すると共に記録するデータを決定することができる。
　なお、上記説明は、一般的な外科内視鏡手技に沿ったものであり、手技の手順が予め決まっているものとして、入力端子に機器が接続されるか否かの判定及び画像解析の結果のみによって、各シーンを判定して画面合成の形式を選択する例について説明した。更に、入力端子毎に接続する機器を固定する場合には、いずれの入力端子に機器が接続された否かの判定結果によって、各シーンを推定することも可能である。これにより、例えば、硬性内視鏡用の入力端子と術野カメラ用の入力端子にこれらの機器が接続された場合には、硬性内視鏡からの画像を親画面とし、術野カメラからの画像を子画面とする画面合成を行うことができる。
（第３の実施の形態）
　図１５は本発明の第３の実施の形態を示すブロック図である。図１５において図１と同一の構成要素には同一符号を付して説明を省略する。
　従来、記録装置においては、記録装置の動作状態を示す表示や操作釦が記録装置筐体の前面部に配置されていることが多い。しかしながら、記録装置が設置される術場や医療機器を可搬するトロリーシステム上の配置によっては、記録装置筐体の前面部の視認性が悪く、動作状況を確認しにくい場合や、操作性が極めて不良となる場合がある。このように、記録装置の状況の把握が困難な場合には、記録容量不足に気付かずに記録を開始することや記録中における機器の異常状態を把握できていないなど、円滑な医療行為進行の妨げや適切な医療行為が実施されたことの証明記録ができない状態となる虞がある。
　そこで、本実施の形態は記録装置筐体の前面部に配置された表示部だけでなく、外部モニターである表示装置に各種表示を行うことができるように構成する。本実施の形態の医療情報記録装置８０は、出力画面生成部８１及びＩ／Ｆ８２を採用した点が第１の実施の形態の医療情報記録装置２０と異なる。
　出力画面生成部８１は、図示しない記録装置筐体の前面部に配置された表示部に表示する画像と同一の画像をＩ／Ｆ８２を介して液晶モニター等によって構成された表示装置８３に与えて表示させることができるようになっている。出力画面生成部８１は、医療画像の記録中において、画面合成演算部２９からの医療画像（合成画像）だけでなく、記録状態に関する様々な情報、例えば、記録時の画質設定、記録時のタイトル数、チャプター数、内蔵ＨＤＤ３１の残り記録容量等に基づく画像表示のための出力画面を生成する。
　なお、図１５では、１つのＩ／Ｆ８２のみを示しているが、映像出力用の複数のインターフェースを採用することができる。例えば、ＳＤＩ用、ＤＶＩ用等の映像インターフェースを採用することができ、これらのインターフェースに対応した表示装置に、画像を出力可能である。また、インターフェースとしてEthernet（登録商標）を利用することで、ＨＴＴＰプロトコルやストリーミングにより映像を出力することができ、外部のコンピュータの表示部に画像出力することも可能である。
　出力画面生成部８１は、表示用の出力画面を表示装置８３のインターフェースに適した形式に変換して出力する。Ｉ／Ｆ８２だけでなく複数のインターフェースがある場合には、複数のインターフェースのうち指定したインターフェースから表示用の出力画面を出力するようにすることもでき、また、全てのインターフェースから表示用の出力画面を出力するように構成することもできる。
　本実施の形態においては、出力画面生成部８１は第１及び第２の表示モードで出力画面を生成することができる。
　第１の表示モードは、記録処理部３０に入力されている画像をそのままの画像サイズで表示するモードである。この表示モードでは、記録対象となる画像を高精細に表示することができる。
　第２の表示モードは、本装置の記録状態に関する情報を表示するモードである。第２の表示モードにおいては、記録装置筐体の前面に配置された表示部を見ることなく、表示装置８３において記録状態を確認することができる。
　図１６は第２の表示モードの表示例を示す説明図である。図１６（ａ）は記録対象の本編動画が１つの場合の表示例を示し、図１６（ｂ）は記録対象の本編動画が同時に２つ存在する場合の表示例を示している。なお、上記各実施の形態における合成画像は１つの本編動画である。
　図１６（ａ）に示すように、第２の表示モードは、表示画面２０１中に、複数の表示領域２０２～２１１を有する。表示領域２０２は内視鏡プロセッサ１０（図１参照）等から入力された患者情報、例えば、患者ＩＤや患者名等を表示する領域である。また、この表示領域２０２には、現在検査中であるか検査外であるかの情報も表示される。図１６（ａ）の例では、「検査中」の表示によって検査中であることが示されているが、検査外の場合には、「非検査中」等が表示される。また、図１６（ａ）の例ではテキスト（文字列）で表示する例を示しているが、アイコン等を用いて表示を行うこともできる。
　表示領域２０３には、記録対象の医療画像が入力される入力端子、動画であるか静止画である等の記録設定の情報が表示される。図１６（ａ）の例では、ＳＤＩ形式の映像信号が入力され、動画は「高画質」モードでの記録が指定され、静止画は「ＪＰＥＧ」フォーマットの「高圧縮」モードで記録が指定されていることを示している。
　表示領域２０４には、記録対象の医療画像が、縮小された画像サイズで表示される。また、表示領域２０４の左下には、現在の記録時間が表示されており、右下にはアイコンやテキスト等によって、録画中、停止中又は一時停止中等の録画状態を表示している。図１６（ａ）の例では、「◎ ＲＥＣ」によって、現在録画中であることを表している。
　表示領域２０５は、現在の検査中に記録した静止画の枚数を表示する。表示領域２０５の下方の３つの表示領域２０６には、現在の検査中に記録した画像がサムネイル表示される。図１６（ａ）の例では、過去３枚分のサムネイルを表示するようになっており、新しい画像が記録された場合には、古い画像が更新される。なお、図１６（ａ）の例では、表示枚数は３枚であるが、より多くの画像を表示可能なように構成することもできる。表示領域２０６を参照することで、確実に静止画が取得されていることを確認することができる。
　表示領域２０７には、現在の検査中に記録した動画のタイトル数が表示される。録画及び停止操作をすることで、タイトルが区切られて、患者フォルダ内部にタイトル毎にサブフォルダが生成されて、１つの本編動画が記録される。表示領域２０７の下方の３つの表示領域２０８には、現在の検査中に記録した動画タイトル（本編動画）がサムネイル表示される。図１６（ａ）の例では、過去３タイトルが表示されるようになっているが、より多くのタイトルのサムネイルを表示することができるように構成することもできる。
　表示領域２０９では、音声録音の有効・無効の情報が表示される。医療情報記録装置８０においては、動画の記録に併せて、図示しない音声入力端子から入力された音声信号の録音が可能である。図１６（ａ）においては、「ＡＵＤＩＯ　ＯＮ」の表示によって、音声録音を有効にしていることを示している。音声録音の有効・無効は、設定により切り替え可能である。無効の場合には、例えば「ＡＵＤＩＯ　ＯＦＦ」等のテキストを表示する。
　表示領域２１０では、内蔵ＨＤＤ３１の記録可能な残量を表示する。表示領域２１０では、動画の記録時間と静止画の記録枚数が表示されるようになっており、状態に応じてリアルタイムに値が更新される。医療情報記録装置８０は、残量が少なくなった場合、例えば、ある閾値を下回った場合には、警告を表示することもできる。
　表示領域２１１では、外部メディア５１の記録可能な残量が表示される。図１６（ａ）の例では、保存先となっているメディアの種別と、動画の記録時間、静止画の記録枚数が表示されている。記録可能な残量はリアルタイムに更新される。医療情報記録装置８０は、内蔵ＨＤＤ３１と同様に残量が少なくなった場合、例えば、ある閾値を下回った場合には、警告を表示することもできる。
　図１６（ｂ）は表示画面２０１中に、記録の対象となる画像が複数、例えば、２つある場合の例であり、一方の画像（「ＣＨ１」）に関する表示領域を無地で示し、他方の画像（「ＣＨ２」）に関する表示領域を斜線部にて示している。なお、図１６（ｂ）において図１６（ａ）と同一の表示領域について同一符号を付して説明を省略する。
　図１６（ｂ）において、表示領域２０３ａ，２０３ｂは、夫々ＣＨ１，ＣＨ２に関して、図１６（ａ）の表示領域２０３と同様の表示を行う領域である。また、表示領域２０４ａ，２０４ｂは、夫々ＣＨ１，ＣＨ２に関して、図１６（ａ）の表示領域２０４と同様の表示を行う領域である。図１６（ｂ）の例では、ＣＨ１の医療画像について録画中であり、ＣＨ２の医療画像については録画停止状態であることが示されている。
　表示領域２１３は、図１６（ａ）の表示領域２０５と同様の内容をＣＨ１，ＣＨ２の両方について表示するものであり、表示領域２１４は、図１６（ａ）の表示領域２０７と同様の内容をＣＨ１，ＣＨ２の両方について表示するものである。これらの領域２１３，２１４においては、ＣＨ１に関する情報は「ＣＨ１」に続けて表示し、ＣＨ２に関する情報は「ＣＨ２」に続けて表示している。
　また、静止画のサムネイル表示を行う表示領域２０６においては、ＣＨ１の静止画とＣＨ２の静止画との両方を表示する。表示領域２０６において、ＣＨ１，ＣＨ２のいずれの画像であるかが分かるように、サムネイル表示の下部に「ＣＨ１」，「ＣＨ２」を表示する。同様に、動画のサムネイル表示を行う表示領域２０８においては、ＣＨ１の動画とＣＨ２の動画との両方を表示する。表示領域２０８において、ＣＨ１，ＣＨ２のいずれの画像であるかが分かるように、サムネイル表示の下部に「ＣＨ１」，「ＣＨ２」を表示する。
　術者は、入力装置１１を操作することで、第１の表示モードと第２の表示モードのいずれの表示モードを選択するかを指定することができる。入力装置１１からの表示モードに関する操作信号は、Ｉ／Ｆ２１を介して制御部２８に供給される。制御部２８は、この操作信号に基づいて、表示モードを指定するための表示制御信号を出力画面生成部８１に出力する。出力画面生成部８１は、制御部２８からの表示制御信号に従って、第１又は第２の表示モードの出力画面を生成する。なお、表示モードの選択操作は、入力装置１１に限らず、図示しない装置本体のボタンやタッチパネル、赤外線リモコン、その他外部のコントローラ等によって行うように構成することもできる。
　また、インターフェースとしてＩ／Ｆ８２のみを備えた場合には、制御部２８によって表示モードを設定するか又は術者の操作に従って、表示モードを設定すればよい。複数のインターフェースを備える場合には、各インターフェースに対応していずれの表示モードを設定するかを個別に指定することができるように構成してもよい。
　ところで、図１６（ｂ）の表示モードでは、２入力の医療画像を合成することなく表示することができる。このような表示を可能にするために、制御部２８は、画面合成演算部２９を制御して、画面合成を常時有効とするか無効とするかを設定することができるようになっている。
　常時有効の設定では、２つの映像信号が入力されると同時に自動的に画面合成演算部２９が合成処理を開始し、１つの動画像が得られる。この場合には、表示装置８３の表示画面上には、図１６（ａ）の表示モードでの表示が行われる。
　画面合成無効の設定では、２つの映像信号が入力されても合成処理されないので、各入力に対応した２つの動画像が得られる。この場合には、表示装置８３の表示画面上には、図１６（ｂ）の表示モードでの表示が行われる。
　なお、画面合成無効の設定時に、１つの映像信号のみが入力された場合には、画面合成演算部２９における画面合成処理が行われないことから、図１６（ｂ）の表示領域２０４ａ，２０４ｂの一方の領域には、入力された医療画像が動画表示され、他方の領域は、無画像（黒画面）となる。なお、画面合成無効時には、画面合成演算部２９と記録処理部３０との間で２つの映像信号（動画像）が夫々伝送される（図示省略）。
（第４の実施の形態）
　図１７乃至図２０は本発明の第４の実施の形態に係り、図１７は第４の実施の形態を示すブロック図である。図１７において図１と同一の構成要素には同一符号を付して説明を省略する。
　従来、医療用の記録装置は、記録データをコンピュータ等で利用すること等を考慮して、内蔵ＨＤＤに記録した記録データを外部メディアにも複製可能に構成されていることが多い。しかしながら、外部メディアに存在するウィルスの侵入を防ぐ等の理由から、記録済の外部メディアから記録データを読み込むことができない設定になっている。このため、外部メディアを一旦記録装置から取り外した後は、外部メディアに記録した記録データの内容を、記録装置によって手軽に確認することができない。
　そこで、本実施の形態においては、外部メディア及び記録ファイルの照合を行った後、記録済の外部メディアから記録データを読み込み可能にすることにより、セキュリティを確保しつつ、利便性を向上させるようになっている。
　本実施の形態における医療情報記録装置３００は、記録情報管理部３０１、読取部３０２、データ処理部３０３及びＩ／Ｆ３０４を付加した点が図１の医療情報記録装置２０と異なる。読取部３０２は、記録情報管理部３０１に制御されて、外部メディア５１に記録されたデータを読み取ることができるようになっている。データ処理部３０３は読取部３０２から記録データが与えられ、映像信号に展開するためのデータ処理を行って、Ｉ／Ｆ３０４に出力する。Ｉ／Ｆ３０４は、データ処理部３０３からの映像信号をモニター４０に与えて、画像表示させるようになっている。
　本実施の形態において、記録情報管理部３０１は、制御部２８に制御されて、本医療情報記録装置３００によって記録が行われた外部メディアについての照合を行い、照合の結果によって、書き出したデータが記録された外部メディアであると判定された場合に、当該外部メディアからの記録データの読み込みを許可するようになっている。この照合のために、記録情報管理部３０１は、データベース３１ａを生成して内蔵ＨＤＤ３１に記録するようになっている。
　図１８は内蔵ＨＤＤ３１の記録領域を説明するための説明図である。内蔵ＨＤＤ３１は、画像記録エリア３２ａの外に画像管理エリア３２ｂを有する。内蔵ＨＤＤ３１の画像記録エリア３２ａには、動画又は静止画の医療画像等が記録される。内蔵ＨＤＤ３１内の画像記録エリア３２ａに記録された画像は、ユーザ操作に従って、記録情報管理部３０１により読取部３０２を介して外部メディア５１に書き出し可能である。本実施の形態においては、画像管理エリア３２ｂには、画像記録エリア３２ａに記録されて外部メディア５１に書き出された画像データの記録等に関する管理情報がデータベース３１ａとして記録される。
　図１９はデータベース３１ａとして記録される管理情報の一例である管理テーブルを示す説明図である。
　図１９に示すように、管理テーブル中には、内蔵ＨＤＤ３１に記録されている画像を管理するための内蔵ＨＤＤ管理テーブルと、画像が書き出された外部メディア５１を管理するための外部メディア管理テーブルとを含む。
　図１９に示すように、内蔵ＨＤＤ管理テーブル中には、患者を特定するためのＩＤ、患者名、日付、画像記録エリア３２ａ内に記録された画像と対応付けられたファイル管理番号（Ｎｏ．）、及び、画像が画像記録エリア３２ａ内に存在するか否かを示すフラグの情報が含まれる。フラグは、画像が内蔵ＨＤＤ３１の画像記録エリア３２ａに書き込まれている場合に"１"となり、当該画像が画像記録エリア３２ａから削除された場合に"０"となる。記録情報管理部３０１は、制御部２８からこれらの情報を取得して、管理テーブルを生成する。
　外部メディア管理テーブルは、画像の書き出しに際し、画像を記録する外部メディアの種類を示す"書き出しメディア種別"及び画像を記録するメディアを特定するための情報を記録する"メディアのシリアルNo．"の情報を含んでいる。
　メディアのシリアルNo．としては、外部メディア５１がブルーレイディスク又はデジタルヴァーサタイルディスク等の光学ディスクの場合にはボリューム名が用いられ、ＵＳＢメモリ及びＵＳＢ－ＨＤＤ等のＵＳＢストレージやＳＤカード等の半導体メモリの場合にはシリアルナンバーが用いられる。記録情報管理部３０１は、これらの情報を読取部３０２を介して外部メディア５１から取得して、管理テーブルを生成する。
　なお、外部メディアとしては、ＮＡＳ（ネットワークアタッチトストレージ Network Attached Storage）やストレージサーバ等を採用してもよい。この場合には、記録情報管理部３０１は、メディアのシリアルＮｏ．としてサーバ名を記録すればよい。
　外部メディア５１に画像を書き出す場合には、記録情報管理部３０１は、内蔵ＨＤＤ管理テーブル中のＩＤ及び日付の値を用いてフォルダの名前を作成し、作成したフォルダ内に画像ファイルを書き出すようになっている。なお、この場合の画像ファイルの名前は、例えばフォルダ名及びファイル管理Ｎｏ．によって作成する。
　例えば、図１９のファイル管理Ｎｏが１のレコードについては、フォルダ名は"1234567_2010_02_16"となり、ファイル名は"1234567_2010_02_16_h-1234567-1.mp4"となる。
　記録情報管理部３０１は、画像管理エリア３２ｂに構築されたデータベース３１ａの内容を読み出して、読取部３０２を介してデータ処理部３０３に出力することができる。データ処理部３０３は管理テーブルをモニター４０に表示可能な形態に変換して出力することができる。これにより、ユーザのメニュー操作等によってモニター４０上に管理テーブルの内容を表示させることができる。
　次に、このように構成された実施の形態の動作について図２０を参照して説明する。図２０は記録メディアの再生制御を説明するためのフローチャートである。
　医療画像の内蔵ＨＤＤ３１への記録処理は第１の実施の形態と同様である。本実施の形態においては、内蔵ＨＤＤ３１に記録されている医療画像を外部メディア５１に書き出す場合には、記録情報管理部３０１によって、管理テーブルが生成される。
　例えば、入力装置１１に対するユーザ操作によって、画像の外部メディア５１への書き出しが指示されると、記録情報管理部３０１は、制御部２８に制御されて、内蔵ＨＤＤ３１内の画像記録エリア３２ａから該当する画像を読み出して読取部３０２に供給する。読取部３０２は、記録情報管理部３０１から読み出された画像データを外部メディア５１に与えて記録する。
　この書き出しに際して、記録情報管理部３０１は、読み出した画像に関する情報が制御部２８から与えられて、内蔵ＨＤＤ管理テーブルを作成する。また、記録情報管理部３０１は、外部メディア５１の種別及びボリュームラベルを読み出して、夫々外部メディア管理テーブルの書き出しメディア種別又はメディアのシリアルＮｏ．の欄に記録する。こうして、書き出す画像毎に、図１９の各レコードが生成される。なお、記録情報管理部３０１は、管理テーブルの各レコードのうち、内蔵ＨＤＤ３１から削除した画像に関するレコードについては、管理テーブルから削除することなく、フラグを"１"から"０"に変更する。
　次に、一旦取り外した外部メディア５１を再び取り付けて、外部メディア５１に記録されている画像を読み出してモニター４０に表示させる場合の動作について説明する。
　図２０のステップＳ４１において、記録情報管理部３０１は、読取部３０２からの情報に基づいて外部メディア５１が接続されているか否かを判定する。外部メディア５１が接続されると、記録情報管理部３０１は、読取部３０２を介して外部メディア５１に関する情報を読み出す（ステップＳ４２）。また、記録情報管理部３０１は、データベース３１ａの管理テーブルの情報を読み出す（ステップＳ４３）。
　次に、記録情報管理部３０１は、読み出しを行う外部メディア５１が、内蔵ＨＤＤ３１からの医療画像を記録したメディアであるか否かの照合を行う。即ち、記録情報管理部３０１は、ステップＳ４４において、外部メディア５１から取得したメディア種別及びメディアのシリアルＮｏ．と同一のメディア種別及びメディアのシリアルＮｏ．を有するレコードが管理テーブル上に存在するか否かを判定する。存在する場合には、外部メディア５１が内蔵ＨＤＤ３１からの医療画像を記録したメディアであるものと判定して、記録情報管理部３０１は次のステップＳ４５の判定を行う。
　ステップＳ４５においては、外部メディア５１から読み出すファイルについて、格納されているフォルダ名を示すＩＤと日付が管理テーブル上のレコード（ＩＤと日付）と一致しているか否かを判定する。一致している場合には、記録情報管理部３０１は、次のステップＳ４６において、外部メディア５１から読み出すファイルのファイル名が管理テーブル上のレコード（ファイル管理番号）と一致しているか否かを判定する。一致している場合には、記録情報管理部３０１は、次のステップＳ４７において、フラグが"１"であるか否かを判定する。また、記録情報管理部３０１は、ステップＳ４８において、フラグが"０"であるか否かを判定する。
　フラグが"１"であるか"０"であるかに拘わらず、ステップＳ４６において、外部メディア５１内に、データベース３１ａの管理テーブルのレコードと一致するファイルが存在するものと判定された場合には、ステップＳ５１において、外部メディア５１内の当該ファイルの再生が許可される。
　記録情報管理部３０１は、制御部２８の指示に従って読取部３０２を制御して、ユーザが指定したファイルを読み出し、データ処理部３０３に供給する。データ処理部３０３は、読み出されたデータを映像信号に展開した後、Ｉ／Ｆ３０４を介してモニター４０に与える。例えば、データ処理部３０３は、医療画像を元のサイズで表示させてもよく、また、サムネイル表示させてもよい。こうして、外部メディア５１に記録されている医療画像等の表示が可能である。
　逆に、ステップＳ４６において、外部メディア５１内に、データベース３１ａの管理テーブルのレコードと一致するファイルが存在しないものと判定された場合には、外部メディア５１内の当該ファイルの再生は許可されない。記録情報管理部３０１は、ステップＳ４９によって次のファイルの存在を確認して処理をステップＳ４５又はＳ４６に戻すことにより、フォルダ内の全てのファイルについて管理テーブル上に同一ファイルのレコードが存在するか否かを調査する。
　外部メディア５１に記録されているファイルであって、内蔵ＨＤＤ３１からは削除されているファイルについては、管理テーブル上のフラグが"０"となっている。記録情報管理部３０１は、このようなファイルが存在する場合には、処理をステップＳ４８からステップＳ５０に移行して、管理テーブルに当該ファイルに関する情報を登録する。例えば、記録情報管理部３０１は、管理テーブル上でフラグが"０"として管理された画像ファイルが外部メディアより読み込まれた場合には、そのファイルを読み込み再生すると共に、履歴が分かる読み込みテーブルを構成し、このテーブルに画像ファイルのリンクを登録する。これにより、この画像ファイルを再々再生する場合において、図２０の処理フローを毎回実施することなく、直ちに読み込みを行うことができる。
　このように本実施の形態においては、医療画像を外部メディアに記録後において、記録された外部メディアが本記録装置に再接続された場合には、管理テーブルを用いることで、外部メディアが記録時のものであるか否かを照合すると共に、管理テーブルに一致するファイルが存在するか否かを調査して再生の可否を判断しており、セキュリティを確保しつつ、外部メディアに記録された画像を再生表示することができ、利便性に優れている。
　なお、本発明は、上記各実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

　本出願は、２０１２年１月２６日に日本国に出願された特願２０１２－１４２６９号を優先権主張の基礎として出願するものであり、上記の開示内容は、本願明細書、請求の範囲、図面に引用されたものとする。

Claims (13)

  1. 　複数の入力端子を有して複数の撮像装置からの医療画像を入力可能であると共に、前記複数の入力端子のうちのいずれの入力端子を介して前記医療画像が入力されたかを検出して検出結果を出力する入力部と、
    　前記複数の入力端子を介して入力された１つ以上の前記医療画像を予め規定された複数の合成パターンのうちの１つの合成パターンに従って合成処理するものであって、前記入力部の検出結果に基づいて医療シーン又は前記医療シーンの切換りを判定し、判定結果に基づいて前記合成パターンを切換えて、前記入力された１つ以上の医療画像に基づく合成画像を出力する画面合成部と、
    　前記合成画像を１つの画像ファイルとして記録する記録処理部と
    　を具備したことを特徴とする医療情報記録装置。
  2. 　複数の入力端子を有して複数の撮像装置からの医療画像を入力可能であると共に、前記複数の入力端子のうちのいずれの入力端子を介して前記医療画像が入力されたかを検出して検出結果を出力する入力部と、
    　前記複数の入力端子を介して入力された１つ以上の前記医療画像を予め規定された複数の合成パターンのうちの１つの合成パターンに従って合成処理するものであって、前記入力部の検出結果及び前記複数の入力端子を介して入力された１つ以上の前記医療画像の画像解析結果に基づいて医療シーン又は前記医療シーンの切換りを判定し、判定結果に基づいて前記合成パターンを切換えて、前記入力された１つ以上の医療画像に基づく合成画像を出力する画面合成部と、
    　前記合成画像を１つの画像ファイルとして記録する記録処理部と
    　を具備したことを特徴とする医療情報記録装置。
  3. 　前記画面合成部は、前記記録処理部の記録処理中において、前記入力部の検出結果に基づいて、合成処理する医療画像を切換える
    　ことを特徴とする請求項１又は２に記載の医療情報記録装置。
  4. 　前記画面合成部は、前記合成パターンとしてピクチャーインピクチャー及びピクチャーアウトピクチャーの少なくとも一方を採用する
    　ことを特徴とする請求項１又は２に記載の医療情報記録装置。
  5. 　前記画面合成部は、
    　前記複数の入力端子を介して入力される前記医療画像の数に応じて、前記合成パターンを切換える
    　ことを特徴とする請求項１又は２に記載の医療情報記録装置。
  6. 　前記画面合成部は、
    　前記複数の入力端子を介して入力される前記医療画像の種類に応じて、前記合成パターンを切換える
    　ことを特徴とする請求項１又は２に記載の医療情報記録装置。
  7. 　前記画面合成部は、
    　前記入力された１つ以上の医療画像を画像解析する画像解析部と、
    　前記画像解析部の画像解析結果に基づいて、前記合成処理に用いる合成パターンを決定する合成パターン決定部と
    　を具備したことを特徴とする請求項１又は２に記載の医療情報記録装置。
  8. 　前記合成画像を表示する表示部と、
    　外部表示装置に対して前記合成画像を出力するインターフェースと
    　を具備したことを特徴とする請求項１又は２に記載の医療情報記録装置。
  9. 　前記記録処理部によって前記合成画像が記録される内蔵記録部と、
    　前記内蔵記録部に記録された前記合成画像を外部メディアに書き出すと共に、外部メディアに記録された画像を読み出す外部記録制御部と、
    　前記外部メディアに書き出された前記合成画像の記録に関する情報及び前記外部メディアに関する情報を含む管理テーブルを用いて、前記外部メディアを照合すると共に、前記外部メディアに記録されている画像が前記内蔵記録部から読み出されて書き出された前記合成画像であることを検出して、前記外部メディアに記録されている画像の再生の可否を決定する記録情報管理部と
    　を具備したことを特徴とする請求項１又は２に記載の医療情報記録装置。
  10. 　前記画面合成部は、前記複数の入力端子のうちの２つの入力端子を介して内視鏡画像と術野画像とが入力された場合には、前記内視鏡画像を親画面とし術野画像を子画面とするピクチャーインピクチャー表示するための画面合成を行う
    　ことを特徴とする請求項１又は２に記載の医療情報記録装置。
  11. 　前記画面合成部は、前記複数の入力端子のうちの２つの入力端子を介して硬性内視鏡画像と軟性内視鏡画像とが入力された場合には、前記硬性内視鏡画像と軟性内視鏡画像とをピクチャーアウトピクチャー表示するための画面合成を行う
    　ことを特徴とする請求項１又は２に記載の医療情報記録装置。
  12. 　前記画像解析部は、画像の色分布の解析結果を出力し、
    　前記合成パターン決定部は、前記色分布に基づいて、前記合成処理に用いる合成パターンを決定する
    　ことを特徴とする請求項７に記載の医療情報記録装置。
  13. 　前記画像解析部は、画像中の絵柄の輪郭の解析結果を出力し、
    　前記合成パターン決定部は、前記輪郭に基づいて、前記合成処理に用いる合成パターンを決定する
    　ことを特徴とする請求項７に記載の医療情報記録装置。
PCT/JP2013/050961 2012-01-26 2013-01-18 医療情報記録装置 WO2013111684A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN2013800010098A CN103476329A (zh) 2012-01-26 2013-01-18 医疗信息记录装置
JP2013527806A JP5347089B1 (ja) 2012-01-26 2013-01-18 医療情報記録装置
EP13741490.0A EP2682050B1 (en) 2012-01-26 2013-01-18 Medical information recording apparatus
US13/922,768 US9186041B2 (en) 2012-01-26 2013-06-20 Medical information recording apparatus that determines medical scene or changing of medical scene, synthesizes images obtained by medical equipment, and records synthesized image

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012-014269 2012-01-26
JP2012014269 2012-01-26

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/922,768 Continuation US9186041B2 (en) 2012-01-26 2013-06-20 Medical information recording apparatus that determines medical scene or changing of medical scene, synthesizes images obtained by medical equipment, and records synthesized image

Publications (1)

Publication Number Publication Date
WO2013111684A1 true WO2013111684A1 (ja) 2013-08-01

Family

ID=48873404

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/050961 WO2013111684A1 (ja) 2012-01-26 2013-01-18 医療情報記録装置

Country Status (5)

Country Link
US (1) US9186041B2 (ja)
EP (1) EP2682050B1 (ja)
JP (1) JP5347089B1 (ja)
CN (1) CN103476329A (ja)
WO (1) WO2013111684A1 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015226216A (ja) * 2014-05-28 2015-12-14 オリンパス株式会社 医療用画像記録装置
CN105519107A (zh) * 2013-10-18 2016-04-20 奥林巴斯株式会社 图像输出装置
JP2018057695A (ja) * 2016-10-07 2018-04-12 キヤノン株式会社 画像表示システム、画像表示方法、及びプログラム
JPWO2017056762A1 (ja) * 2015-10-02 2018-07-19 ソニー株式会社 医療用制御装置、制御方法、プログラム、および医療用制御システム
JP2018175757A (ja) * 2017-04-21 2018-11-15 オリンパス株式会社 画像記録再生装置及び内視鏡システム
JP2018175554A (ja) * 2017-04-18 2018-11-15 コニカミノルタ株式会社 超音波診断装置
JP2020054834A (ja) * 2014-04-11 2020-04-09 ソニー株式会社 信号処理装置、および信号処理方法

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6387003B2 (ja) * 2013-06-18 2018-09-05 キヤノン株式会社 トモシンセシス撮影の制御装置、撮影装置、撮影システム、制御方法および当該制御方法をコンピュータに実行させるためのプログラム
US9270919B2 (en) * 2013-09-24 2016-02-23 Karl Storz Imaging, Inc. Simultaneous display of two or more different sequentially processed images
JP6224561B2 (ja) * 2014-09-16 2017-11-01 富士フイルム株式会社 携帯型コンソール、携帯型コンソールの制御方法、携帯型コンソール用プログラム及び放射線撮影システム
US9582916B2 (en) * 2014-11-10 2017-02-28 Siemens Healthcare Gmbh Method and system for unsupervised cross-modal medical image synthesis
US9595120B2 (en) 2015-04-27 2017-03-14 Siemens Healthcare Gmbh Method and system for medical image synthesis across image domain or modality using iterative sparse representation propagation
JP7073618B2 (ja) 2016-09-23 2022-05-24 ソニーグループ株式会社 制御装置、制御方法及び医療用システム
JP6608111B2 (ja) * 2016-09-28 2019-11-20 富士フイルム株式会社 医用画像保存再生装置および方法並びにプログラム
EP3544482A4 (en) 2016-11-28 2020-07-22 Adaptivendo LLC SEPARABLE DISPOSABLE SHAFT ENDOSCOPE
WO2019008942A1 (ja) * 2017-07-03 2019-01-10 富士フイルム株式会社 医療画像処理装置、内視鏡装置、診断支援装置、医療業務支援装置、及び、レポート作成支援装置
CN111343922A (zh) * 2017-12-14 2020-06-26 株式会社岛津制作所 放射线断层图像处理装置和放射线断层摄影装置
US10482600B2 (en) 2018-01-16 2019-11-19 Siemens Healthcare Gmbh Cross-domain image analysis and cross-domain image synthesis using deep image-to-image networks and adversarial networks
JP7171274B2 (ja) * 2018-07-06 2022-11-15 ソニー・オリンパスメディカルソリューションズ株式会社 医療用画像処理装置及び医療用観察装置
CN113164007A (zh) * 2018-12-10 2021-07-23 奥林巴斯株式会社 图像记录装置
EP3936027A4 (en) * 2019-03-08 2022-04-27 FUJIFILM Corporation DEVICE AND METHOD FOR PROCESSING MEDICAL IMAGES
USD1018844S1 (en) 2020-01-09 2024-03-19 Adaptivendo Llc Endoscope handle
US11893745B2 (en) * 2020-12-09 2024-02-06 Raytheon Company System and method for generating and displaying contours

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0818861A (ja) * 1994-07-01 1996-01-19 Olympus Optical Co Ltd 画像処理装置
JP2008000282A (ja) * 2006-06-21 2008-01-10 Olympus Medical Systems Corp 手技画像記録制御システム及び手術システム
JP2009039243A (ja) 2007-08-08 2009-02-26 Olympus Medical Systems Corp 内視鏡観察装置
WO2011152489A1 (ja) * 2010-06-03 2011-12-08 オリンパスメディカルシステムズ株式会社 画像記録システム及び画像記録方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05324821A (ja) * 1990-04-24 1993-12-10 Sony Corp 高解像度映像及び図形表示装置
EP0655710B1 (en) 1993-11-29 2000-10-04 Olympus Optical Co., Ltd. Image rotating and superimposing apparatus
US7304662B1 (en) * 1996-07-10 2007-12-04 Visilinx Inc. Video surveillance system and method
US6184922B1 (en) * 1997-07-31 2001-02-06 Olympus Optical Co., Ltd. Endoscopic imaging system in which still image-specific or motion picture-specific expansion unit can be coupled to digital video output terminal in freely uncoupled manner
US20010002842A1 (en) * 1999-12-03 2001-06-07 Asahi Kogaku Kogyo Kabushiki Kaisha Electronic endoscope system
US7206029B2 (en) * 2000-12-15 2007-04-17 Koninklijke Philips Electronics N.V. Picture-in-picture repositioning and/or resizing based on video content analysis
US20050159645A1 (en) * 2003-11-12 2005-07-21 Bertolero Arthur A. Balloon catheter sheath
JP2006000536A (ja) * 2004-06-21 2006-01-05 Olympus Corp 手術室制御システム
JP4914574B2 (ja) * 2005-04-18 2012-04-11 オリンパスメディカルシステムズ株式会社 内視鏡形状検出装置
WO2010109726A1 (ja) * 2009-03-23 2010-09-30 オリンパスメディカルシステムズ株式会社 画像処理システム、外部装置およびその画像処理方法
JP5618535B2 (ja) * 2009-12-22 2014-11-05 株式会社日立メディコ 医用画像診断装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0818861A (ja) * 1994-07-01 1996-01-19 Olympus Optical Co Ltd 画像処理装置
JP2008000282A (ja) * 2006-06-21 2008-01-10 Olympus Medical Systems Corp 手技画像記録制御システム及び手術システム
JP2009039243A (ja) 2007-08-08 2009-02-26 Olympus Medical Systems Corp 内視鏡観察装置
WO2011152489A1 (ja) * 2010-06-03 2011-12-08 オリンパスメディカルシステムズ株式会社 画像記録システム及び画像記録方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2682050A4

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105519107A (zh) * 2013-10-18 2016-04-20 奥林巴斯株式会社 图像输出装置
JP2020054834A (ja) * 2014-04-11 2020-04-09 ソニー株式会社 信号処理装置、および信号処理方法
US11182874B2 (en) 2014-04-11 2021-11-23 Sony Corporation Signal processing device and signal processing method
JP2015226216A (ja) * 2014-05-28 2015-12-14 オリンパス株式会社 医療用画像記録装置
JPWO2017056762A1 (ja) * 2015-10-02 2018-07-19 ソニー株式会社 医療用制御装置、制御方法、プログラム、および医療用制御システム
US11197736B2 (en) 2015-10-02 2021-12-14 Sony Corporation Medical control system and method that uses packetized data to convey medical video information
JP2018057695A (ja) * 2016-10-07 2018-04-12 キヤノン株式会社 画像表示システム、画像表示方法、及びプログラム
US10997762B2 (en) 2016-10-07 2021-05-04 Canon Kabushiki Kaisha Image display system, image display method, and program
JP2018175554A (ja) * 2017-04-18 2018-11-15 コニカミノルタ株式会社 超音波診断装置
JP2018175757A (ja) * 2017-04-21 2018-11-15 オリンパス株式会社 画像記録再生装置及び内視鏡システム

Also Published As

Publication number Publication date
CN103476329A (zh) 2013-12-25
EP2682050A4 (en) 2015-07-29
JP5347089B1 (ja) 2013-11-20
EP2682050B1 (en) 2017-10-25
JPWO2013111684A1 (ja) 2015-05-11
US20130342668A1 (en) 2013-12-26
EP2682050A1 (en) 2014-01-08
US9186041B2 (en) 2015-11-17

Similar Documents

Publication Publication Date Title
JP5347089B1 (ja) 医療情報記録装置
JP5690450B2 (ja) 画像記録装置
JP6177462B2 (ja) 画像記録装置
CN105848559B (zh) 医疗用运动图像记录再现系统以及医疗用运动图像记录再现装置
JP5378612B2 (ja) 医療情報記録装置
JP2009081857A (ja) 映像記録・画像キャプチャ装置
JPWO2018193799A1 (ja) 情報処理装置、および情報処理方法、並びにプログラム
US11483515B2 (en) Image recording and reproduction apparatus, image recording method, and endoscope system
WO2004105592A1 (ja) 医療用画像記録システム
JP2008136759A (ja) 動画記録再生装置
KR0155895B1 (ko) 내시경 수술시스템 주변장치 및 그 제어방법
JP6948043B1 (ja) 医療映像システム及び医療映像処理装置
JP2017006260A (ja) 内視鏡装置
WO2019097804A1 (ja) 画像記録装置及び画像記録方法
JP5551522B2 (ja) 医療情報記録装置
JP2021194299A (ja) 超音波診断装置、超音波診断装置の制御方法、及び、超音波診断装置の制御プログラム
JP2021194300A (ja) 超音波診断装置、超音波診断装置の制御方法、及び、超音波診断装置の制御プログラム
JPWO2020121373A1 (ja) 画像記録装置、画像記録方法及び内視鏡システム

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2013527806

Country of ref document: JP

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13741490

Country of ref document: EP

Kind code of ref document: A1

REEP Request for entry into the european phase

Ref document number: 2013741490

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2013741490

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE