WO2011033770A1 - 読影レポート作成装置および方法並びにプログラム - Google Patents

読影レポート作成装置および方法並びにプログラム Download PDF

Info

Publication number
WO2011033770A1
WO2011033770A1 PCT/JP2010/005640 JP2010005640W WO2011033770A1 WO 2011033770 A1 WO2011033770 A1 WO 2011033770A1 JP 2010005640 W JP2010005640 W JP 2010005640W WO 2011033770 A1 WO2011033770 A1 WO 2011033770A1
Authority
WO
WIPO (PCT)
Prior art keywords
interpretation report
lesion
link
lesion area
medical image
Prior art date
Application number
PCT/JP2010/005640
Other languages
English (en)
French (fr)
Inventor
守屋禎之
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to US13/496,690 priority Critical patent/US20120176408A1/en
Priority to EP10816884.0A priority patent/EP2478834B1/en
Priority to CN2010800410453A priority patent/CN102497804A/zh
Publication of WO2011033770A1 publication Critical patent/WO2011033770A1/ja

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0004Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by the type of physiological signal transmitted
    • A61B5/0013Medical image data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46Arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • A61B6/465Displaying means of special interest adapted to display user selection data, e.g. graphical user interface, icons or menus
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00ICT specially adapted for medical reports, e.g. generation or transmission thereof
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Definitions

  • the present invention relates to a medical image interpretation report creation apparatus and method, and a computer program for carrying out the method.
  • Patent Document 1 there is a report report in which a character string described in an interpretation report can be created by linking a reference image with a hyperlink.
  • an interpreter such as a doctor in charge can display and view the corresponding reference image by clicking on the screen the characters described in the interpretation report, making the interpretation report easier. Can understand.
  • Patent Document 1 since one image is linked to one character string, if there are a plurality of link target parts in one slice image, which of the plurality of linked character strings is selected. Even if it is specified, there is a problem that only the same corresponding medical image can be seen, and it is not known which character string indicates where in the medical image.
  • the present invention provides an interpretation report creation apparatus and method that makes it easier to create an interpretation report including a hyperlink and makes it easier to understand a medical image corresponding to a linked character string.
  • the purpose is to provide.
  • An interpretation report creating apparatus includes a medical image display means for acquiring and displaying a medical image, an interpretation report display means for creating and displaying an electronic interpretation report of the medical image, A lesion area input means for inputting a position of a lesion area on the medical image, and a link character linked by a hyperlink with a medical image including the position of the input lesion area is inserted in the interpretation report so as to be identified and displayed.
  • a link character insertion unit that performs identification, a link character finger unit that specifies the link character of the interpretation report, and an index that indicates the position of the lesion area according to the designation by the link character designation unit. It is characterized by comprising indicator display means for displaying above.
  • An interpretation report creation method acquires and displays a medical image, creates and displays an electronic interpretation report of the medical image, inputs a position of a lesion area on the medical image, and is input
  • a link character linked with a medical image including the position of the lesion area by a hyperlink is inserted in the interpretation report so as to be identifiable, and the link character of the interpretation report that is identified and displayed is designated.
  • An index representing the position of the lesion area is displayed on the medical image in accordance with designation by the means.
  • the interpretation report creating program of the present invention is a computer that obtains and displays a medical image, medical image display means, an interpretation report display means that creates and displays an electronic interpretation report of the medical image, and the medical image.
  • a lesion character input means for inputting the position of the lesion region above, and a link character that inserts a link character linked to the medical image including the position of the lesion region that has been input by a hyperlink so that it can be identified and displayed in the interpretation report
  • An insertion unit, a link character designating unit for designating the link character of the image interpretation report identified and displayed, and an index representing the position of the lesion area according to the designation by the link character designating unit is displayed on the medical image It is characterized by functioning as an indicator display means.
  • the “position of the lesion area” may be a point indicating an arbitrary position in the lesion area, or may indicate the lesion area itself.
  • the region can be indicated by various methods such as a circle, a rectangle, an arrow, and a closed curved surface.
  • “input of the position of the lesion area” may be the one in which the position of the lesion is directly input by a mouse, a keyboard, or another input device, or the lesion area calculated based on the coordinates input by the mouse, the keyboard, or the like.
  • the position of a lesion area recognized using a known image recognition function for automatically detecting an abnormal shadow area from a medical image by image processing may be input.
  • the “link character” linked by the hyperlink is preferably a character string, a symbol, or a number prepared in advance, but may be input by an operator.
  • “Inserting link characters into the interpretation report so that they can be identified and displayed” means that the link characters are distinguished from other characters so as to stand out among the characters of the interpretation report. Link characters are displayed so that they can be distinguished from unlinked characters using well-known techniques such as coloring or background coloring, underlining, blinking, bold, typeface, character size, and frame. Further, the link character inserted in the interpretation report can be edited from a character string prepared in advance to another character string or the like while maintaining a linked state.
  • “Specifying a link character” means specifying a link character with a mouse, keyboard or other input device.
  • the lesion area input means is capable of inputting the positions of a plurality of lesion areas
  • the link character insertion means is configured to input each position of the plurality of lesion areas.
  • a plurality of link characters corresponding to can be inserted.
  • the image interpretation report display means may display an attached image obtained by reducing a medical image including a lesion area corresponding to the link character together with the image interpretation report. preferable.
  • the image interpretation report display means may display a plurality of the attached images in the order in which the link characters are described in the image interpretation report.
  • the lesion area input means may be capable of manually inputting the position of the lesion area.
  • the position of the lesion area can be manually input means that the operator can input the position of the lesion area using an input device such as a mouse or a keyboard.
  • the interpretation report creating apparatus of the present invention further includes a lesion name storage unit in which lesion names representing a plurality of lesions are stored, and a lesion region detection unit that automatically detects the position of the lesion region from the medical image,
  • the lesion area input means inputs the position of the lesion area automatically detected by the lesion area detection means, and the link character insertion means detects the position of the lesion area detected by the lesion area detection means. It is desirable that a lesion name representing a lesion located in is selected from the lesion name storage means and inserted.
  • the “lesion name” includes a disease name, a keyword or symbol representing the disease name, or an abbreviation thereof.
  • the lesion name may include an organ name or a keyword representing the organ.
  • a recording medium such as a hard disk or a flash memory is appropriately used.
  • “Automatic detection of a lesion area” means detection of an abnormal shadow area including a lesion using a known image recognition function that detects an abnormal shadow from a medical image by image processing.
  • the automatically detected lesion area may be an organ area.
  • the interpretation report display means may highlight only the index corresponding to the specified link character in accordance with the designation of the link character of the interpretation report.
  • the link character insertion means is for coloring the plurality of link characters in different colors and inserting them into the interpretation report, and the indicator display means is the same as the link characters corresponding to the indicators. It may be displayed in color.
  • the link character linked with the medical image including the position of the lesion area input on the medical image by the hyperlink is inserted in the interpretation report so as to be identified and displayed. Therefore, the hyperlink linking operation is completed simply by inputting the position of the lesion area, and the complicated linking operation is not required, so that an interpretation report including the hyperlink can be created more easily.
  • the link character of the identified interpretation report the index indicating the position of the lesion area can be displayed on the medical image, making it easier to understand the medical image corresponding to the linked character string. become.
  • the lesion area input means can input positions of a plurality of lesion areas, and the link character insertion means can insert a plurality of link characters corresponding to each of the input positions of the plurality of lesion areas. If it is, the corresponding plurality of link operations are facilitated, so that a plurality of complicated link attaching operations are not required, and an interpretation report including hyperlinks can be created more easily.
  • the interpretation report display means in the present invention displays an attached image obtained by reducing a medical image including a lesion area corresponding to the link character together with the interpretation report, the attached image of the linked image Therefore, it is easier to understand the medical image corresponding to the linked character string.
  • the interpretation report display means in the present invention displays a plurality of the attached images in the order in which the link characters are described in the interpretation report, the attached images of the linked images are referred to. Therefore, it becomes easier to understand the medical image corresponding to the linked character string.
  • the lesion area input means When the lesion area input means according to the present invention is capable of manually inputting the position of the lesion area, the hyperlink linking operation is completed simply by manually inputting the position of the lesion area. Work is unnecessary, and an interpretation report including hyperlinks can be created more easily.
  • the interpretation report creating apparatus and method and program according to the present invention further comprise a lesion name storage means in which lesion names representing a plurality of lesions are stored, and a lesion area detection means for automatically detecting the position of the lesion area from the medical image.
  • the lesion area input means inputs the position of the lesion area automatically detected by the lesion area detection means, and the link character insertion means detects the lesion area detected by the lesion area detection means.
  • the interpretation report display means When the interpretation report display means according to the present invention highlights only the index corresponding to the specified link character in accordance with the designation of the link character of the interpretation report, the linked character This makes it easier to understand the medical images corresponding to the columns.
  • the link character insertion means inserts the plurality of link characters in different interpretation colors and inserts them into the interpretation report, and the indicator display means uses the link characters corresponding to the indicators. If the display is colored in the same color, it is possible to easily understand the correspondence between the multiple link characters in the interpretation report and the position of the multiple lesion areas, and corresponds to the linked character strings. Understanding medical images becomes easier.
  • Schematic configuration diagram of an interpretation report creating apparatus Block diagram showing the configuration of the first embodiment
  • Functional block diagram showing the interpretation report creation function of the first embodiment
  • Flow chart for explaining the flow of link character insertion processing of the first embodiment
  • Flow chart for explaining the flow of link character change of the first embodiment
  • Functional block diagram showing the interpretation report creation function of the third embodiment
  • Flow chart for explaining the flow of link character insertion processing of the third embodiment
  • FIG. 1 is a hardware configuration diagram showing an outline of a medical image processing apparatus. As shown in the figure, in this system, a modality 1, an image storage server 2, and an image processing workstation 3 are connected via a network 9 in a communicable state.
  • the modality 1 acquires a medical image V representing a subject, and specifically includes a CT apparatus, an MRI apparatus, a PET, an ultrasonic diagnostic apparatus, and the like.
  • the image storage server 2 is a computer that stores and manages the medical image V acquired by the modality 1 and the medical image V generated by image processing at the image processing workstation 3 in an image database.
  • Database management software for example, ORDB (Object Relational Database) management software
  • ORDB Object Relational Database
  • the image processing workstation 3 is a computer that performs image processing on the medical image V acquired from the modality 1 or the image storage server 2 and displays a generated image in response to a request from the image interpreter.
  • the image data storage format and communication between devices via the network 9 are based on protocols such as DICOM (Digital Imaging and Communications Communications in Medicine).
  • DICOM Digital Imaging and Communications Communications in Medicine
  • FIG. 2 is a schematic block diagram showing the configuration of the image processing workstation 3.
  • the interpretation report creation apparatus includes a display unit 301 such as a liquid crystal monitor for performing various displays, an input unit 303 including a keyboard and a mouse for performing various inputs, and the interpretation report of the present invention.
  • Various programs for controlling the interpretation report creation apparatus according to the present embodiment including a creation program, and the hard disk 305 that stores various data such as image data, and the various programs are executed to control the interpretation report creation apparatus according to the present embodiment.
  • the image processing workstation 3 includes a CPU 307 that performs communication, a memory 309 that serves as a work area during program execution, and a communication interface 311 that is connected to a network via a bus 313.
  • the functions of the present invention are performed by a computer by a program installed from the outside.
  • the program may be installed by supplying an information group including the program from a storage medium such as a CD-ROM, a flash memory, or an FD, or from an external storage medium via a network.
  • FIG. 3 is a functional block diagram showing a portion related to the interpretation report creation function in the first embodiment of the present invention.
  • the interpretation report creation function of the present invention includes a medical image display means 50 for acquiring a medical image V via a network 9 in response to a request from the modality 1 or the image storage server 2, and an electronic Interpretation report display means 30 for creating and displaying a simple interpretation report, lesion area input means 10 for inputting the position of a lesion area on a medical image, and a link linked to the position of the entered lesion area by a hyperlink Link character insertion means 20 that inserts characters into the interpretation report so that they can be identified, link character designation means 40 that designates the link character of the displayed interpretation report, and an index that indicates the position of the lesion according to the designation of the link character designation means 40 Is displayed on a medical image.
  • the lesion area input means 10 mainly includes an input unit 303 for inputting a lesion area, and points, circles, rectangles, and the like are appropriately input from the input unit 303 to the medical image V according to the operation of the operator.
  • Information indicating the position of the lesion area and the medical image V including the position of the lesion area is input to the link character insertion unit 20 as position information.
  • the link character insertion unit 20 mainly includes a CPU 307, and hyperlinks the position of the lesion area input by the lesion area input unit 10 and a predetermined character string including a character string, a symbol, a number, and the like prepared in advance.
  • a predetermined character string is inserted as a link character so that it can be identified and displayed in an interpretation report created by the interpretation report display means 30.
  • the interpretation report display means 30 mainly includes an input unit 303 for creating an interpretation report, a CPU 307 for creating an interpretation report, and a display unit 301 for displaying the interpretation report, and according to the operation of the operator.
  • the input of the input unit 303 is created by reflecting it in the interpretation report, and the created interpretation report is displayed on the display unit 301.
  • the link character designation unit 40 mainly includes an input unit 303, and inputs the designated link character from the input unit 303 to the index display unit 60 and the medical image display unit 50 in accordance with the designation of the link character by the operator. .
  • the medical image display means 50 mainly includes a communication interface 311 for acquiring the medical image V from the network 9 and a display unit 301 for displaying the acquired medical image V.
  • the medical image display unit 50 displays the medical image acquired via the network. 301 is displayed.
  • the index display means 60 includes a display unit 301 that mainly displays an index, and displays an index at the position of a lesion on the medical image V linked to a designated link character. At this time, the medical image V including the position of the lesion corresponding to the designated link character is displayed on the display unit 301 by the medical image display means 50.
  • the index may be a cross mark such as the index 115A shown in FIG. 5, or a known index that can indicate a position, such as a point, a circle, a rectangle, an arrow, or a closed curved surface, can be used.
  • FIG. 5 is a conceptual diagram of an interpretation report and a medical image displayed by the interpretation report creation function of the first embodiment.
  • FIG. 5 shows an interpretation report creation screen 100 as an example of the interpretation report creation screen.
  • the interpretation report creation screen 100 shown in FIG. 5 includes a patient information area 101 in which patient information is written.
  • the patient information area 101 for example, the patient name, patient ID, sex, age, etc. obtained from the DICOM header information are displayed.
  • the medical image information area 103 indicating the information of the medical image V, the photographing date, modality, requested department, and the like are input from the input unit 303 such as a mouse and a keyboard or DICOM header information and displayed.
  • the interpretation report area 104 includes an interpretation doctor name field 106, an observation field 105 that is an interpretation report, and a diagnosis field 107.
  • the interpretation doctor name column 106, the finding column 105, and the diagnosis column 107 can be input and edited by a doctor or the like with an operator such as a mouse or a keyboard.
  • the interpretation report creation screen 100 may be appropriately provided with an interpretation report edit button 109 for saving and canceling the edited interpretation report and various function buttons as required.
  • an interpretation report edit button 109 for saving and canceling the edited interpretation report and various function buttons as required.
  • a temporary save button, a confirm button, a cancel button, and the like are shown as examples.
  • the interpretation report creation screen 100 is appropriately provided with buttons necessary for referring to information such as the past report selection button 119A and the reference image selection button 119B, and the link input selection that enables link input in the embodiment of the present invention.
  • a button 111 is provided. Such a link input selection button 111 may be provided in various forms as long as the purpose is achieved.
  • the past report selection button 119A When the past report selection button 119A is selected, a past report is displayed in the reference information area 117 so as to be selectable.
  • the reference image selection button 119B When the reference image selection button 119B is selected, the thumbnail of the medical image V is displayed in the reference information area 117 so as to be selectable as shown in FIG.
  • the interpretation report creation screen 100 includes a detailed image display area 113, and reference information such as thumbnails of medical images V and past reports are appropriately displayed in the reference information selection area 117.
  • FIG. 5 shows a state in which the thumbnail 117A is selected from the plurality of thumbnails indicating the medical image V in the reference information area 117, and the medical image 115 corresponding to the thumbnail 117A is displayed in the detailed image display area 113.
  • the plurality of thumbnails shown in the reference information area 117 may be thumbnails of medical images representing lesions included in one series of medical images V, or medical images representing lesions included in a plurality of series. It may be a thumbnail of the image.
  • the detailed image display area 113 is appropriately provided with edit buttons 113A and 113B for processing and editing the medical image displayed in the detailed image display area 113.
  • FIG. 4 is a flowchart showing the operation of the image interpretation report creating apparatus according to the first embodiment.
  • the link input button 111 is selected by the input unit 303, and the link input mode is turned on (ST101).
  • the cross-shaped pointer 113C is selected from the edit button 113A using the input unit 303. Then, since a cross-shaped pointer is displayed, when the cross-shaped pointer is positioned on the lesion position and clicked with the mouse, the lesion position 115A is input (Y in ST102).
  • the lesion area input means 10 in the image interpretation report creating apparatus of this embodiment can manually input the position of the lesion area, and the selection of the lesion position 115A is limited to the edit button 113A in FIG.
  • the position of the lesion area can be designated or displayed with various marks (indicators) as long as it is a markable figure, line, or point, such as a point, circle, rectangle, closed curve, or arrow. Further, the color of the mark may be selectable by a tool such as the color designation button 113B.
  • the position information may further include information such as an image ID acquired from DICOM header information, for example, and may include image information such as an image brightness value at the lesion position 115A.
  • position information can be acquired as a coordinate value on the medical image 115, and when the position of the lesion area is a circle, the coordinate value and radius of the center on the medical image 115 are obtained.
  • the position information can be acquired as a length and the position of the lesion area is a figure surrounded by a straight line or a curve
  • the information representing the figure such as a function representing the end point or curve of the straight line on the medical image 115, is appropriately positioned. It can be acquired as information.
  • Link character insertion means 30 selects a character string that has not been used in finding field 105 from a predetermined character string, and determines a character string to be inserted as link character 105A (ST103).
  • the predetermined character string may be either a character string, a symbol, or a number, and (1) a fixed character string such as lesion 1 or lesion 2, and (2) a series in which the medical image V includes a series of tomographic images. Is a number obtained by combining the series number of the medical image V and the slice number of the tomographic image including the position of the lesion, (3) pixel value of the position of the lesion, and (4) anatomy of the position of the lesion. (5) Coordinate values of the position of the lesion, (6) A combination of the above can be used.
  • a link operation can be performed without inputting a link character from the input unit 303 only by specifying the position of the lesion area.
  • An interpretation report including a hyperlink can be created more easily.
  • a link character is inserted only by specifying the position of a lesion area manually, an interpretation report including a hyperlink can be created more easily.
  • link information is created by obtaining necessary information from the header information of the medical image 115 To do.
  • link information in addition to being able to perform a linking operation without inputting link characters from the input unit 303, it is possible to clearly understand which medical image the link is, so it is easier to create an interpretation report including hyperlinks. Is possible.
  • a link character is created by obtaining the corresponding pixel value or coordinate value of the lesion area position of the medical image 115.
  • the symptom or position of the lesion area can be estimated from the link character, so an interpretation report including a hyperlink can be created more easily. Is possible.
  • a link character can be extracted and inserted as follows.
  • the organ to which the position of the input lesion area belongs is extracted by computer-aided image diagnosis (CAD; Computer Aided Diagnosis).
  • CAD Computer Aided Diagnosis
  • Specific examples of extraction of each organ are as follows: JP-A-2001-137230, JP-A-2008-253293 for lung field, JP-A-2001-283191 for liver extraction, JP-A-2002-345807,
  • the technique of Japanese Patent Application Laid-Open No. 2004-141612 can be used, and other organ recognition techniques can be used as long as they can automatically extract the organ to which the designated lesion location belongs. is there.
  • the above organ extraction is performed on a medical image including a lesion position, and if the extracted organ includes the lesion position, the organ can be determined as the organ to which the lesion position belongs.
  • a part name representing an anatomical part representing the organ can be inserted as a link character.
  • the symptom or position of the lesion area can be estimated from the link character, so an interpretation report including a hyperlink can be created more easily. Is possible.
  • a part name representing each organ or a part of each organ can be used.
  • the left lung and the right lung may be used as the part name, and the right lung further classified.
  • Upper lobe, right lobe middle lobe, right lobe lower lobe, left lung upper lobe, left lung lower lobe may be used as part names, or part names classified in the lung area such as left upper lobe upper tongue (S4) These abbreviations may be used as site names.
  • a lesion name storage means 80 for storing a link character candidate representing a lesion is further provided, the name of the lesion, The names of the parts or their abbreviations are registered in advance in the lesion name storage means 80, and the stored lesion names can be selectively used as a predetermined character string.
  • the lesion name storage means 80 is a lesion name database that is mainly composed of the hard disk 305 and stores at least a plurality of lesion names. A plurality of lesions or sites are registered in advance. The registration of a lesion name may be registered by inputting from the input unit 303, or may be created by copying a lesion name prepared in advance via a network or a storage medium.
  • the lesion name storage unit 80 may also register anatomical site names such as organs.
  • the lesion name here may be an abbreviation or a symbol indicating the lesion.
  • the lesion name storage unit 80 links the lesion name position and the feature information 203 of the lesion area position and the link character candidate 205 representing the lesion in association with each other. Prepare a character candidate mapping table.
  • the luminance value 203 of the CT image is associated as the feature information 203 of the position of the lesion area.
  • the organ to which the position of the input lesion area belongs is extracted using a specific example of organ extraction by the computer-aided image diagnosis described above.
  • the luminance value of the input image of the position of the lesion area is acquired as position information.
  • the position of the input lesion area belongs to the lung in the organ name 201.
  • the luminance value of the position of the lesion area input with respect to the feature information 203 of the position of the lesion area Is ⁇ 50 which is a value included between ⁇ 2000 and 0, among the link character candidates 205, four character strings of bra, pneumothorax, emphysema, and bronchodilation correspond to link character candidates 205A.
  • the luminance value is 100
  • the luminance value 100 is included in the luminance values 50 to 100, and is included in the luminance values 100 to 1000. Therefore, nodule, GGO, infiltration shadow, and calcification are determined as link character candidates. To do.
  • the link character candidate 20A is displayed as a link character candidate list 210 on the interpretation report creation screen 100 when the user designates the position of the lesion area.
  • the link character candidate 210A is selected by the user from the link character candidate list 210, the selected link character candidate 210A is inserted into the interpretation report as a link character.
  • FIG. 13 when inputting a character string that does not exist as a link character candidate, it is possible to select other and input the link character from the input unit.
  • the list of link character candidates may be displayed in the form of a pull-down menu, and various methods for selecting a part name can be applied.
  • the symptom or position of the lesion area can be estimated from the link character, so an interpretation report including a hyperlink can be created more easily. Is possible.
  • a luminance value average, variance, or luminance value pattern around the position of the lesion area may be acquired, and the feature information 203 of the position of the lesion area is used as the position of the lesion area, respectively.
  • the corresponding link character candidates may be selected as feature information corresponding to the brightness value average, variance, or brightness value pattern in the vicinity.
  • the link character insertion means 20 stores the link information of the lesion position 115A (ST104).
  • the link information may be composed of, for example, (1) a link ID, (2) a position of a lesion area including a series name and a slice name, and coordinates on the slice, and (3) a link character.
  • the position of the lesion area composed of the link ID, the series name and the slice name, and the coordinates on the slice can be acquired from the position information input from the lesion area input means 10.
  • a link character 105A is inserted into the finding column 105 by linking with an image including the lesion area position 115A acquired from the lesion area input means 10 by a hyperlink (ST105).
  • the link character 105A is colored with a link character or a background color, underline, blinking, bold, typeface, size of the link character, frame, etc. so that it can be identified that it is linked by a hyperlink.
  • It is inserted so that it can be distinguished from characters other than link characters.
  • the insertion position it is desirable that the link character is inserted at the position where the interpretation report cursor is at that time, but the added link character is inserted at the end of the sentence in the interpretation report 105 column. In other words, it can be inserted into a preferable position as appropriate.
  • the lesion area input means 10 of this embodiment can input the positions of a plurality of lesion areas, and the link character insertion means 20 has a plurality of positions corresponding to each of the inputted positions of the plurality of lesion areas. Link characters can be inserted. When the positions of a plurality of lesion areas are designated from the medical image V, the corresponding link characters are inserted the designated number of times.
  • the index display means 60 acquires link information from the link character insertion means 20 and displays the lesion area position 115A corresponding to the link character 105A on the medical image 115 in the detailed image display area 113.
  • the index is preferably represented in the same format as the format in which the position of the lesion area is input.
  • the index when the position of the lesion area is input with the cross-shaped pointer, the index is also represented by the cross-shaped pointer, and when the position of the lesion area is input with the closed curve, the index is preferably displayed with the closed curve.
  • the index when the position of the lesion area is represented by an area, the index may be displayed as a representative point in the area.
  • an arrow, an area, various pointers indicating representative points in the lesion area, and the like may be selected.
  • the operator can edit the inserted link character and the surrounding text by operating the keyboard, etc., and can insert another link character, link input and interpretation report Can be performed alternately.
  • a medical image including a lesion area cannot be confirmed unless a hyperlink is created by drag and drop on the created interpretation report.
  • link characters can be created before describing the specific contents of the interpretation report. Since the position of the corresponding lesion area can be displayed when the inserted link character is selected, the position of the lesion area can be easily confirmed while creating the interpretation report, and the interpretation report including hyperlinks can be created more easily. is there.
  • FIG. 6 is a flowchart for explaining the flow of link character change according to the first embodiment.
  • FIG. 7 is a conceptual diagram of an interpretation report created by partially changing the link characters of the first embodiment.
  • FIG. 7 is an example of the finding column 105 of the interpretation report creation screen 100.
  • three link characters of lesion 1, lesion 2 (105B), and lesion 3 (105C) are inserted, and lesion 1 is edited and changed to an irregular link (105A) that is a new link character. Indicates the state.
  • the link character is selected by the input unit 303 (ST201).
  • the link character is changed to an arbitrary character string, symbol, or number according to the operation of the mouse and keyboard. For example, when a selection tool such as an arrow 123 is aligned with a link character and right-clicked, a link character change option is displayed in a pull-down menu format, and the link character change option is selected to change the link character (ST202). ).
  • the link character may be changed using another method as appropriate.
  • the link information is updated by associating the link character after the change with the position of the corresponding lesion area instead of the link character before the change (ST203).
  • a link character obtained by linking the position of a lesion area with a hyperlink can be displayed in an interpretation report by simply clicking on the input unit 303. Since it is inserted, unlike the conventional technique, it is not necessary to repeatedly drag and drop, and the position of the lesion area can be easily linked. In addition, since the position of the lesion area is designated by a point or area, and the designated position is displayed on the medical image V, it is possible to grasp at a glance which part is referred to in the interpretation report and linked to it. This makes it easier to understand the medical image corresponding to the character string.
  • positions of a plurality of lesion areas are described on one medical image
  • the positions 115D, 115E, and 115F of the plurality of lesion areas are displayed as 115D when the link character 105D is designated, and 115E, 115F can be prevented from being displayed.
  • FIG. 8 is a conceptual diagram of an interpretation report and a medical image displayed by the interpretation report creation function of the second embodiment.
  • the same reference numerals as those in FIG. 5 are the same as those in FIG.
  • the interpretation report display means 30 includes an attached image display area 121 in the interpretation report area 114, and includes a medical image including the position of the lesion area corresponding to the link character in addition to the interpretation report. Thumbnails 121A, 121B, and 121C reduced in size are displayed as attached images.
  • the thumbnail 121A of the medical image is a reduction of the medical image including the lesion area position 115A
  • the thumbnail 121B is a medical image including the lesion area position 115B
  • the thumbnail 121C is a medical image including the lesion area position 115C. It is a reduced version.
  • thumbnails of medical images including the position of a lesion area that is an attached image are displayed in the order described in the report in the attached image display area 121 of the medical image, which link character describes which image. Therefore, it is easier to understand the medical image corresponding to the linked character string.
  • FIG. 9 is a conceptual diagram of an interpretation report and a medical image displayed by an interpretation report creation function according to a modification of the second embodiment.
  • a lesion character 105D is selected, and the selected lesion character 105D has a frame to indicate 105E and 105F. Identification is displayed. Furthermore, the cross-shaped pointer at the position 115D of the lesion area corresponding to the selected lesion character 105D is shown in bolder than the cross-shaped pointers 115E and 115F representing the positions of the other lesion areas, and is displayed for identification.
  • the index indicating the position of the specified link character and the corresponding lesion area is indicated by blinking the mark or character or both, coloring the link character or coloring the background color, underlining, blinking, bold, typeface, the size of the link character.
  • the corresponding link characters and the position of the lesion area can be colored and displayed in the same color.
  • the identification display is performed in this way, in addition to clearly knowing which link character is described about which lesion area position, it is also possible to determine which lesion area position represents all the link characters at once. Since it can be grasped, it is easier to understand the medical image corresponding to the linked character string.
  • the position of a lesion area is automatically input by computer-aided image diagnosis (CAD; Computer Aided Diagnosis).
  • CAD Computer Aided Diagnosis
  • FIG. 10 is a functional block diagram showing the interpretation report creation function of the third embodiment. It further comprises a lesion name storage means 80 in which lesion names representing a plurality of lesions are stored, and a lesion area detection means 70 for automatically detecting the position of the lesion area from the medical image.
  • the lesion area input means 10 includes the lesion area detection means 70.
  • the link character insertion means 30 inputs a lesion name representing a lesion at the position of the lesion area detected by the lesion area detection means 70 from the lesion name storage means 80. Since it is the same as that of 1st Embodiment except selecting and inserting, description is abbreviate
  • the lesion name storage means 80 is a lesion name database that is mainly composed of the hard disk 305 and stores at least a plurality of lesion names. A plurality of lesions or sites are registered in advance. The registration of a lesion name may be registered by inputting from the input unit 303, or may be created by copying a lesion name prepared in advance via a network or a storage medium.
  • the lesion name storage unit 80 may also register anatomical site names such as organs.
  • the lesion name here may be an abbreviation or a symbol indicating the lesion.
  • the lesion area detection means 70 automatically extracts a lesion from the medical image V using a known means for detecting a lesion such as a tumor, detects the position of the lesion area, and determines the position of the detected lesion area as the lesion. Input to the area input means 10.
  • the link character insertion means 30 selects a lesion name representing the detected lesion area from the lesion name storage means 80 and inserts it as a link character.
  • the lesion area detection means 70 performs computer-aided image diagnosis (CAD; Computer Aided Diagnosis) in which abnormal shadow candidates are automatically detected using computer processing, and automatically detects a lesion area.
  • CAD Computer Aided Diagnosis
  • the position of the abnormal shadow may be a region, or a point indicating a representative position of the abnormal shadow region, such as the center of gravity of the abnormal shadow.
  • the lesion area may be automatically detected for all medical images, or the lesion area may be automatically detected for a part of the medical image.
  • Wakita et al. "Intelligent CAD for diffuse lung disease", Ministry of Education, Culture, Sports, Science and Technology Cost-subsidy specific area research "intelligent diagnosis support for multidimensional medical images", 4th Symposium Proceedings, consolidation shown in pp.5445-54, 2007, Ground-Glass Opacity (GGO), Crazy-Paving, honeycomb
  • diffuse lung diseases such as pulmonary shadows, emphysema shadows, and granular shadows
  • Wakita et al. "Detection of liver cancer based on measurement of interphase concentration characteristics of multi-phase abdominal X-ray CT images," Computer Aided Imaging , Vol.10, No.1, Mar 2007 Liver Cancer Detection Technique , "Intellectual CAD based on understanding of normal structure", Ministry of Education, Culture, Sports, Science and Technology Grant-in-Aid for Scientific Research on Specific Areas "Support for Intelligent Diagnosis of Multidimensional Medical Images", Proceedings
  • a technique for detecting a blood vessel abnormality as disclosed in Japanese Patent Application Laid-Open No. 2004-329929 a technique for detecting an abnormal shadow candidate disclosed in Japanese Patent Application Laid-Open No. 10-097624 filed by the present applicant, and a technique disclosed in Japanese Patent Application Laid-Open No. 8-215183.
  • Such a technique for detecting a calcified region can also be used.
  • FIG. 11 is a flowchart for explaining the flow of link character insertion processing according to the third embodiment.
  • the flow of link character insertion processing according to the third embodiment will be described with reference to FIG.
  • ST305 to ST308 are the same processes as ST103 to ST106, respectively.
  • the interpretation report is set in a state where link input is possible (ST301).
  • the link input button 111 may be selected by the input unit 303 as shown in FIG. 5, and an automatic lesion region insertion button or the like is provided to enable the link character input shown in the third embodiment. It is also possible to provide an input screen by turning on the button.
  • the lesion area detection means 70 automatically detects a lesion such as an abnormal shadow (ST302).
  • a lesion such as an abnormal shadow
  • the lesion area detecting means 70 has a function of detecting a plurality of lesions
  • automatic lesion area detection is repeated until the lesion areas are completely detected by the detection function of all the lesion areas (N in ST303).
  • the lesion area detection that identifies the detected lesion area position 115G and the method of detecting the lesion area position 115G Information is input to the lesion area input means 10.
  • the lesion area input means 10 receives an address or image ID indicating the storage location of the medical image 115, coordinates indicating the lesion area position 115G, and the like. Information is acquired.
  • the lesion area input unit 10 inputs lesion area detection information for specifying a method for detecting the position 115G of the lesion area to the link character insertion unit 30.
  • Link character insertion means 30 selects a character string that has not yet been used in finding field 105 from a predetermined character string, and determines a character string to be inserted as link character 105G (ST305).
  • This predetermined character string is stored in the storage means 80 in advance in association with the method of detecting the position of the lesion area, and the character string to be inserted is determined from the input lesion area detection information. To do.
  • the character string to be inserted is preferably a character string representing the detected lesion area.
  • the technique for detecting a lesion detects a lesion peculiar to an organ
  • the method of detecting the position of the lesion area is a technique that detects lung cancer
  • the lung cancer is used as an insertion character string
  • the liver cancer is used as an insertion character string.
  • the lesion area detection information for specifying the technique for detecting the lesion is associated with the character string for inserting the keyword representing the expected lesion.
  • the automatically inserted link character is a keyword that represents a lesion specific to an organ. Therefore, it is easy to grasp the position and name of the lesion from the link character, and interpretation that includes hyperlinks more easily. You can create a report.
  • the site recognition using the CAD is performed to acquire the site name of the lesion area, and the lesion name representing the detected lesion is acquired. It is good also as a link character which inserts the character string which consists of site
  • automatically inserted link characters are keywords that represent organs and lesions, so it is easy to identify lesioned organs and lesion names from the link characters, making it easier to interpret interpretation reports that include hyperlinks. Can be created.
  • JP-A-2001-137230 and JP-A-2008-253293 for the lung field JP-A-2001-283191 and JP-A-2002-345807 for the liver extraction.
  • the technique disclosed in Japanese Patent Application Laid-Open No. 2008-043564 for bone and the technique disclosed in Japanese Patent Application Laid-Open No. 2004-141612 can be used for the heart. It can be determined that it is a part including.
  • Other organ recognition techniques can be used as long as they can automatically extract the organ to which the detected lesion position belongs.
  • the character string to be inserted the predetermined character string shown in the description of ST105 can be used.
  • the link character insertion means 20 stores the link information of the position 115G (ST306).
  • the link information may be composed of, for example, (1) a link ID, (2) a position of a lesion area including a series name and a slice name, and coordinates on the slice, and (3) a link character.
  • the position of the lesion area composed of the link ID, the series name and the slice name, and the coordinates on the slice can be acquired from the position information input from the lesion area input means 10.
  • Linked with the lesion area position 115G acquired from the lesion area input means 10 by a hyperlink in the finding column 105 and a link character 105G is inserted (ST307).
  • the link character 105G is inserted so that it can be identified that it is linked by a hyperlink, as in ST105.
  • the steps from ST305 to ST307 are repeated (Y in ST308). That is, when the positions of a plurality of lesion regions are designated from the medical image V, the corresponding link characters are inserted the designated number of times.
  • the link character insertion process is terminated (N in ST308).
  • the same processing as ST103 is performed in ST305 as described above.
  • the link character linked to the position of the lesion area from the beginning by the hyperlink is inserted in the interpretation report.
  • An interpretation report including a hyperlink can be created more easily.
  • the character string inserted in the interpretation report is a character string related to the part, it is easy to understand where the lesion area exists when looking at the automatically inserted link character, Interpretation reports including hyperlinks can be created more easily.
  • the lesion area detecting means 70 instead of the lesion area detecting means 70, when the position of the lesion area is designated by the input unit 303, the lesion area detecting means 70 for extracting the lesion area including the position of the lesion area. You may have '.
  • the following processing is performed instead of ST302.
  • the third embodiment is the same as the third embodiment.
  • the corner pixels are contoured by performing machine learning in advance on the feature values of the pixels in a plurality of sample images including an abnormal region whose contour is known.
  • An evaluation function F for evaluating whether or not the pixel is a pixel corresponding to the feature amount is obtained.
  • the position in the abnormal region in the image is designated by a point using the input unit 303, a sufficiently large determination region including the abnormal region is determined with reference to the point, and each of the determined determination regions A feature amount is extracted for the pixel.
  • an evaluation value for whether each pixel is a pixel representing a contour is calculated using an evaluation function, and an optimal lesion region contour is obtained based on the calculated evaluation value.
  • the obtained contour of the lesion area is input to the lesion area input means 10.
  • an organ area may be automatically input as the position of the lesion area.
  • the organ area is automatically detected, and the lesion area detection information for specifying the position of the detected organ area and the detection technique for detecting the organ is input to the lesion area detecting means 10.
  • the lesion area detection information for specifying the position of the detected organ area and the detection technique for detecting the organ is input to the lesion area detecting means 10.
  • the method for detecting the position of the organ area is a technique for detecting the lung
  • the lesion area detection information for specifying the technique for detecting the organ area such as the lung as an insertion character string
  • the automatically inserted link character is a keyword representing an organ, it is easy to grasp the organ from the link character, and an interpretation report including a hyperlink can be created more easily.
  • an organ with a lesion may be detected or an organ without a lesion may be detected. Even when an organ without a lesion is detected, an organ without a lesion may be described in the interpretation report, for example, when the disease has improved, so that the interpretation report can be easily created.
  • JP 2001-137230 A, JP 2008-253293 A, lung extraction JP 2001-283191 A, JP 2002-345807 JP JP 2008-345807 A, and bones JP 2008-345807 A As for the -043564 and the heart, other techniques can be used as long as the technique of Japanese Patent Application Laid-Open No. 2004-141612 can be used and the organ region can be automatically detected.
  • the mode may be switched so that the mode for editing characters other than the link character on the report is turned on and the mode for editing the link character is turned off.
  • the link character editing mode when a new character is inserted before or after the link character, the inserted character is inserted as the link character. It is possible to clearly determine whether a character is inserted or a character inserted as a character other than a link character. Further, it is possible to prevent the user from mistakenly editing the link character as a character other than the link character, and to mistakenly edit the character other than the link character as the link character.
  • the link for displaying the position of the corresponding lesion area is displayed.
  • the character selection method and the link character selection method for editing the link character are different. For example, in order to display the position of the lesion area corresponding to the link character, the link character is selected by left clicking, and in order to edit the link character, the link character is selected by the method described above.
  • the interpretation report may be edited by the user's voice input.
  • a voice input unit such as a microphone and voice recognition means such as voice recognition software for recognizing the user's voice are further provided, and a button for switching the interpretation report voice editing ON / OFF is provided on the screen so as to be selectable by the user.
  • the input means 303 may turn on the interpretation report speech editing mode in response to selection of the interpretation report speech editing ON button. In this way, if the interpretation report speech editing mode is ON, the speech recognition means obtains the speech input from the user for all or part of the edit of the link character, and the speech information obtained by the speech recognition means is obtained. Based on this, editing can be performed.
  • the interpretation report speech editing mode may be applied to at least one of the link character and the character other than the link character, or may be applied to both.
  • the voice editing method can be used as the voice editing method.
  • the interpretation report speech editing mode when the microphone receives the voice “link character editing”, the first link character is selected and identified from among the plurality of link characters described in the interpretation report,
  • the voice “link character candidate” is received in a state where the link character is identified and displayed, the link character candidate 1, the link character candidate 2 and the link character candidate 3 are selected from the pull-down menu near the identified and displayed link character.
  • a voice message “Select No. 1” is received, a method of changing the link character to the link character candidate 1 can be used.
  • the link character when a voice “link character input” is received in a state where the above-mentioned link character is identified and displayed, the link character may be changed to a word that is input by the user following “link character input”. .
  • the voice “Edit link text” is accepted, and one of the link letters listed in the interpretation report is selected and displayed as "Next".
  • voice necessary for each editing operation such as selecting a link character next to or before the link character identified and displayed from the head of the interpretation report can be input by voice.
  • the interpretation report can be created by voice editing. Can be created.

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Physiology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

【課題】読影レポートと医用画像とのリンク付け作業の支援を行う。 【解決手段】医用画像を取得して表示し、医用画像の電子的な読影レポートを作成して表示し、医用画像上の病変領域の位置を入力し、入力された病変領域の位置を含む医用画像とハイパーリンクによってリンク付けされるリンク文字を読影レポートに識別表示可能に挿入し、識別表示された読影レポートのリンク文字を指定し、リンク文字の指定に応じて病変領域の位置を表す指標を、医用画像上に表示する。

Description

読影レポート作成装置および方法並びにプログラム
 本発明は、医用画像の読影レポート作成装置および方法並びにその方法を実施するためのコンピュータ用プログラムに関するものである。
近年、医療分野の画像診断においては、専門医が医用画像を読影し、その結果を担当医に読影レポートとして記録して報告することが行われており、その読影レポートとして、電子的な読影レポートが広く用いられている。
このような読影レポートとして、特許文献1に示すように、読影レポートに記載された文字列にハイパーリンクによって参照画像がリンク付けされたものを作成することができるようにしたものがある。このような読影レポートを用いて、担当医などの読影者は、読影レポートに記載された文字を画面上でクリックすることにより対応する参照画像を表示して見ることができ、読影レポートをより容易に理解することができる。
特開2005-301453号公報
しかし、このハイパーリンクを貼った読影レポートの作成には、従来から行われている読影レポート作成作業に加えて、作成される読影レポートに記載された文字列を選択して、そこに参照画像をドラッグアンドドロップするというリンク付け作業が新たに必要となり、読影レポートを入力する負荷が増加するという問題があった。
また、特許文献1では、一つの文字列に対して一枚の画像をリンク付けするため、一枚のスライス画像に複数のリンク対象部位がある場合、リンク付けされた複数の文字列のどれを指定しても、対応する同一の医用画像が見られるだけで、どの文字列が医用画像のどこを指しているかまでは分からないという問題があった。
また、この問題を解消するために、一つのスライス画像からリンク付けされた複数の対象部位を対象部位ごとに切り出して、新たな複数の参照画像を作成し、作成された参照画像をそれぞれ対応する文字列にドラッグアンドドロップしてリンク付け作業を行うという方法があったが、編集作業が非常に繁雑となるという問題があった。
そこで、本発明は、かかる課題に鑑み、ハイパーリンクを含む読影レポートをより容易に作成可能にし、リンク付けされた文字列と対応する医用画像の理解をより容易にする読影レポート作成装置および方法を提供することを目的とする。
本発明による読影レポート作成装置は、医用画像を取得して表示する医用画像表示手段と、前記医用画像の電子的な読影レポートを作成して表示する読影レポート表示手段と、
前記医用画像上の病変領域の位置を入力する病変領域入力手段と、入力された前記病変領域の位置を含む医用画像とハイパーリンクによってリンク付けされるリンク文字を前記読影レポートに識別表示可能に挿入するリンク文字挿入手段と、識別表示された前記読影レポートの前記リンク文字を指定するリンク文字指手段と、該リンク文字指定手段による指定に応じて前記病変領域の位置を表す指標を、前記医用画像上に表示する指標表示手段とを備えたことを特徴とするものである。
本発明による読影レポート作成方法は、医用画像を取得して表示し、前記医用画像の電子的な読影レポートを作成して表示し、前記医用画像上の病変領域の位置を入力し、入力された前記病変領域の位置を含む医用画像とハイパーリンクによってリンク付けされるリンク文字を前記読影レポートに識別表示可能に挿入し、識別表示された前記読影レポートの前記リンク文字を指定し、該リンク文字指定手段による指定に応じて前記病変領域の位置を表す指標を、前記医用画像上に表示することを特徴とするものである。
本発明の読影レポート作成プログラムは、コンピュータを、医用画像を取得して表示する医用画像表示手段と、前記医用画像の電子的な読影レポートを作成して表示する読影レポート表示手段と、前記医用画像上の病変領域の位置を入力する病変領域入力手段と、入力された前記病変領域の位置を含む医用画像とハイパーリンクによってリンク付けされるリンク文字を前記読影レポートに識別表示可能に挿入するリンク文字挿入手段と、識別表示された前記読影レポートの前記リンク文字を指定するリンク文字指定手段と、該リンク文字指定手段による指定に応じて前記病変領域の位置を表す指標を、前記医用画像上に表示する指標表示手段として機能させることを特徴とするものである。
 ここで、「病変領域の位置」は、病変領域内の任意の位置を示す点であってもよいし、病変領域そのものを示すものであってもよい。領域は、円、矩形、矢印、閉曲面など、様々な手法で示すことができる。
 また、「病変領域の位置の入力」は、マウスやキーボードあるいはその他の入力装置によって病変の位置を直接入力するものでもよいし、マウスやキーボード等によって入力された座標に基づいて算出された病変領域の位置を入力するものでもよいし、画像処理によって医用画像から異常陰影領域を自動検出する周知の画像認識機能を用いて認識された病変領域の位置を入力するものであってもよい。
 ハイパーリンクによってリンク付けされる「リンク文字」とは、予め用意された文字列または記号または数字であることが望ましいが、操作者が入力するものでもよい。
 「リンク文字を前記読影レポートに識別表示可能に挿入する」とは、リンク文字は、読影レポートの文字の中で目立つように、他の文字と区別されて表示されることを意味し、例えば、リンク文字は着色または背景色の着色、下線、点滅、太字、書体、文字の大きさ、枠など周知の手法を用いて、リンク付けされていない文字と識別できるように表示される。また、読影レポートに挿入されたリンク文字は、リンク付けをされた状態を保ちつつ、予め用意された文字列等から別の文字列等に編集することができる。
 「リンク文字の指定」とは、マウスやキーボードあるいはその他の入力装置によってリンク文字を指定することをいう。
 本発明の読影ポート作成装置においては、前記病変領域入力手段が、複数の病変領域の位置を入力可能なものであり、前記リンク文字挿入手段が、入力された前記複数の病変領域の位置の各々に対応する複数のリンク文字を挿入可能なものであってもよい。
また、本発明の読影ポート作成装置においては、前記読影レポート表示手段は、前記リンク文字に対応する病変領域を含む医用画像を縮小した添付画像を前記読影レポートに併せて表示するものであることが好ましい。
また、本発明の読影ポート作成装置においては、前記読影レポート表示手段は、複数の前記添付画像を、前記読影レポートに前記リンク文字が記載された順番に並べて表示するものであってもよい。
また、本発明の読影ポート作成装置においては、前記病変領域入力手段は、病変領域の位置を手動で入力可能なものであってもよい。「病変領域の位置を手動で入力可能」とは、マウスやキーボード等の入力装置を用いてオペレータが病変領域の位置を入力することができることをいう。
また、本発明の読影レポート作成装置においては、複数の病変を表す病変名が記憶された病変名記憶手段と、前記医用画像から前記病変領域の位置を自動検出する病変領域検出手段をさらに備え、前記病変領域入力手段が、前記病変領域検出手段によって自動検出された前記病変領域の位置を入力するものであり、前記リンク文字挿入手段は、前記病変領域検出手段によって検出された前記病変領域の位置にある病変を表す病変名を前記病変名記憶手段から選択して挿入するものであることが望ましい。
「病変名」とは、病名、病名を表すキーワードまたは記号、もしくはそれらの略称のいずれかを含むものである。また、病変名に臓器名、または臓器を表すキーワードを含んでもよい。
「記憶手段」は、ハードディスク、フラッシュメモリなどの記録媒体が適宜用いられる。
「病変領域を自動検出」とは、画像処理によって医用画像から異常陰影を検出する周知の画像認識機能を用いて病変を含む異常陰影領域を検出することをいう。自動検出される病変領域は、臓器領域であってもよい。
前記読影レポート表示手段は、前記読影レポートの前記リンク文字の指定に応じて、指定された該リンク文字と対応する前記指標のみを強調表示するものであってもよい。
前記リンク文字挿入手段は、前記複数のリンク文字を互いに異なる色に着色して前記読影レポートに挿入するものであり、前記指標表示手段は、前記複数の指標を該指標に対応するリンク文字と同じ色に着色して表示するものであってもよい。
本発明による読影レポート作成装置および方法ならびにプログラムによれば、医用画像上で入力した病変領域の位置を含む医用画像とハイパーリンクによってリンク付けされるリンク文字が読影レポートに識別表示可能に挿入されるから、病変領域の位置を入力するだけでハイパーリンクによるリンク付け作業が完了し、煩雑なリンク付け作業が不要となり、ハイパーリンクを含む読影レポートをより容易に作成可能である。また、識別表示された読影レポートのリンク文字を指定することにより病変領域の位置を表す指標を医用画像上に表示することができ、リンク付けされた文字列と対応する医用画像の理解がより容易になる。
前記病変領域入力手段が、複数の病変領域の位置を入力可能なものであり、前記リンク文字挿入手段が、入力された前記複数の病変領域の位置の各々に対応する複数のリンク文字を挿入可能なものである場合には、対応する複数のリンク作業が容易になるため、複数の煩雑なリンク付け作業が不要となり、ハイパーリンクを含む読影レポートをより容易に作成可能である。
本発明における前記読影レポート表示手段が、前記リンク文字に対応する病変領域を含む医用画像を縮小した添付画像を前記読影レポートに併せて表示するものである場合は、リンク付けされた画像の添付画像を参照することが容易になるため、リンク付けされた文字列と対応する医用画像の理解がより容易になる。
本発明における前記読影レポート表示手段が、複数の前記添付画像を、前記読影レポートに前記リンク文字が記載された順番に並べて表示するものである場合は、リンク付けされた画像の添付画像を参照することが容易になるため、リンク付けされた文字列と対応する医用画像の理解がより容易になる。
 本発明における前記病変領域入力手段が、病変領域の位置を手動で入力可能なものである場合は、病変領域の位置を手動入力するだけでハイパーリンクによるリンク付け作業が完了し、煩雑なリンク付け作業が不要となり、ハイパーリンクを含む読影レポートをより容易に作成可能である。
本発明による読影レポート作成装置および方法ならびにプログラムが、複数の病変を表す病変名が記憶された病変名記憶手段と、前記医用画像から前記病変領域の位置を自動検出する病変領域検出手段をさらに備え、前記病変領域入力手段が、前記病変領域検出手段によって自動検出された前記病変領域の位置を入力するものであり、前記リンク文字挿入手段は、前記病変領域検出手段によって検出された前記病変領域の位置にある病変を表す病変名を前記病変名記憶手段から選択して挿入するものである場合には、読影レポート上に病変領域の位置を示すリンク文字が自動的に挿入されるため、ハイパーリンクを含む読影レポートをより容易に作成可能である。
本発明による前記読影レポート表示手段が、前記読影レポートの前記リンク文字の指定に応じて、指定された該リンク文字と対応する前記指標のみを強調表示するものである場合は、リンク付けされた文字列と対応する医用画像の理解がより容易になる。
本発明による前記リンク文字挿入手段が、前記複数のリンク文字を互いに異なる色に着色して前記読影レポートに挿入するもので、前記指標表示手段が、前記複数の指標を該指標に対応するリンク文字と同じ色に着色して表示するものである場合には、読影レポートの複数のリンク文字と複数の病変領域の位置の対応を容易に理解することができ、リンク付けされた文字列と対応する医用画像の理解がより容易になる。
本発明の実施の形態となる読影レポート作成装置の概略構成図 第一の実施形態の構成を示すブロック図 第一の実施形態の読影レポート作成機能を示す機能ブロック図 第一の実施形態のリンク文字挿入処理の流れを説明するためのフロー図 第一の実施形態の読影レポート作成機能により表示された読影レポートおよび医用画像の概念図 第一の実施形態のリンク文字変更の流れを説明するためのフロー図 第一の実施形態のリンク文字を一部変更して作成された読影レポートの概念図 第二の実施形態により表示された読影レポートおよび医用画像の概念図 第二の実施形態の変形例により表示された読影レポートおよび医用画像の概念図 第三の実施形態の読影レポート作成機能を示す機能ブロック図 第三の実施形態のリンク文字挿入処理の流れを説明するためのフロー図 病変領域の位置とリンク文字の候補を対応付ける対応付けテーブルの例 リンク文字の候補リストの表示例
 図1は、医用画像処理装置の概要を示すハードウェア構成図である。図に示すように、このシステムでは、モダリティ1と、画像保管サーバ2と、画像処理ワークステーション3とが、ネットワーク9を経由して通信可能な状態で接続されている。
 モダリティ1は、被検体を表す医用画像Vを取得するものであり、具体的には、CT装置、MRI装置、PET、超音波診断装置等である。
 画像保管サーバ2は、モダリティ1で取得された医用画像Vや画像処理ワークステーション3での画像処理によって生成された医用画像Vを画像データベースに保存・管理するコンピュータであり、大容量外部記録装置やデータベース管理ソフトウェア(たとえば、ORDB(Object Relational Database)管理ソフトウェア)を備えている。
 画像処理ワークステーション3は、読影者からの要求に応じて、モダリティ1や画像保管サーバ2から取得した医用画像Vに対して画像処理を行い、生成された画像を表示するコンピュータである。
 画像データの格納形式やネットワーク9経由での各装置間の通信は、DICOM(Digital Imaging and Communications in Medicine)等のプロトコルに基づいている。
次いで、第一の実施形態の医用画像処理機能に関連する構成を説明する。
図2は画像処理ワークステーション3の構成を示す概略ブロック図である。図2に示すように、第1の実施形態による読影レポート作成装置は、各種表示を行う液晶モニタ等の表示部301、各種入力を行うキーボードおよびマウス等からなる入力部303、本発明の読影レポート作成プログラムを含む、本実施形態による読影レポート作成装置を制御するための各種プログラムおよび画像データ等の各種データを保存するハードディスク305、各種プログラムを実行することにより本実施形態による読影レポート作成装置を制御するCPU307、プログラム実行時の作業領域となるメモリ309、バス313を介してネットワークと接続する通信インターフェース311を備えた画像処理ワークステーション3で構成されている。
なお、全ての実施例において、本発明の機能は、外部からインストールされるプログラムによって、コンピュータにより遂行される。そして、そのプログラムは、CD-ROMやフラッシュメモリやFD等の記憶媒体により、あるいはネットワークを介して外部の記憶媒体から、プログラムを含む情報群を供給されてインストールされたものであってもよい。
図3は、本発明の第1の実施形態における読影レポート作成機能に関連する部分を示す機能ブロック図である。図3に示すように、本発明の読影レポート作成機能は、モダリティ1または画像保管サーバ2からの要求に応じて、ネットワーク9を介して医用画像Vを取得する医用画像表示手段50と、電子的な読影レポートを作成して表示する読影レポート表示手段30と、医用画像上の病変領域の位置を入力する病変領域入力手段10と、入力された病変領域の位置とハイパーリンクによってリンク付けされるリンク文字を読影レポートに識別表示可能に挿入するリンク文字挿入手段20と表示された読影レポートのリンク文字を指定するリンク文字指定手段40とリンク文字指定手段40の指定に応じて病変の位置を表す指標を、医用画像上に表示する指標表示手段60とから構成されている。
病変領域入力手段10は、主に病変領域を入力するための入力部303を含み構成され、入力部303からオペレータの操作に応じて医用画像V上に点、円、矩形、など適宜入力される病変領域の位置および該病変領域の位置を含む医用画像Vを示す情報をリンク文字挿入手段20に位置情報として入力する。
また、リンク文字挿入手段20は、主にCPU307を含み構成され、病変領域入力手段10によって入力された病変領域の位置と予め用意した文字列、記号、数字等からなる所定の文字列とをハイパーリンクによってリンク付けして、所定の文字列をリンク文字として読影レポート表示手段30が作成した読影レポートに識別表示可能に挿入する。
読影レポート表示手段30は、主に読影レポートを作成するための入力部303、読影レポートを作成するためのCPU307、読影レポートを表示するための表示部301を含み構成され、オペレータの操作に応じて入力部303の入力を読影レポートに反映して作成し、作成された読影レポートを表示部301に表示する。
リンク文字指定手段40は、主に入力部303を含み構成され、入力部303からオペレータによるリンク文字の指定に応じて、指定されたリンク文字を指標表示手段60および医用画像表示手段50に入力する。
医用画像表示手段50は、主に医用画像Vをネットワーク9から取得する通信インターフェース311および取得した医用画像Vを表示するための表示部301を含み構成され、ネットワーク経由で取得した医用画像を表示部301に表示する。
指標表示手段60は、主に指標を表示する表示部301を含み、指定されたリンク文字にリンク付けされている医用画像V上の病変の位置に指標を表示する。この際、指定されたリンク文字に対応する病変の位置を含む医用画像Vは、医用画像表示手段50によって表示部301に表示される。指標は、図5に示す指標115Aのような十字マークでもよいし、点、円、矩形、矢印、閉曲面など、位置を示すことができる周知の指標を用いることができる。
図4および図5を用いて、本実施形態にかかる読影レポートにリンク文字を挿入する動作を説明する。
図5は、第一の実施形態の読影レポート作成機能により表示された読影レポートおよび医用画像の概念図である。図5には、読影レポート作成画面の一例として、読影レポート作成画面100が示されている。
まず、図5に示す読影レポート作成画面100の構成を説明する。図5に示す読影レポート作成画面100は患者の情報を記す患者情報領域101を備える。患者情報領域101には、例えば、DICOMのヘッダー情報から得られる患者名、患者ID、性別、年齢等が表示される。医用画像Vの情報を示す医用画像情報領域103には、撮影日、モダリティ、依頼科等が、マウスやキーボード等の入力部303、または、DICOMのヘッダー情報から入力され、表示される。読影レポート領域104には、読影医名欄106、読影レポートである所見欄105、診断欄107が設けられる。読影医名欄106、所見欄105、診断欄107は医師等がオペレータとなって、マウスやキーボード等により入力、編集を行うことができる。
さらに、読影レポート作成画面100には、編集した読影レポートを保存、キャンセル等するための読影レポート編集ボタン109やその他必要に応じて様々な機能ボタンが適宜備えられてもよい。図5では、一時保存ボタン、確定ボタン、キャンセルボタン等を例として示した。
読影レポート作成画面100には、過去レポート選択ボタン119A、参照画像選択ボタン119Bなどの情報を参照するために必要なボタンが適宜用意され、本発明の実施形態におけるリンク入力を可能にするリンク入力選択ボタン111を備えている。このようなリンク入力選択ボタン111は、その目的を達成する範囲で、周知の様々は形態で備えられ得る。
 過去レポート選択ボタン119Aを選択すると、参照情報領域117に過去レポートが選択可能に表示される。参照画像選択ボタン119Bを選択すると、図5に示すように参照情報領域117に医用画像Vのサムネイルが選択可能に表示される。
また、読影レポート作成画面100には、詳細画像表示領域113が備えられ、参照情報選択領域117には医用画像Vのサムネイルや過去レポート等の参照情報が適宜表示される。図5では、参照情報領域117において医用画像Vを示す複数のサムネイルのうちサムネイル117Aが選択され、サムネイル117Aに対応する医用画像115が詳細画像表示領域113に表示された様子を示している。なお、参照情報領域117に示された複数のサムネイルは、医用画像Vの一つのシリーズに含まれる病変を表す医用画像のサムネイルであってもよいし、複数のシリーズに含まれた病変を表す医用画像のサムネイルであってもよい。
詳細画像表示領域113には、詳細画像表示領域113に表示された医用画像を加工、編集するための編集ボタン113A、113Bが適宜備えられる。
次いで、図4に沿って、リンク文字105Aを読影レポートである所見欄105に入力する流れを説明する。図4は、第1の実施形態にかかる読影レポート作成装置の動作を示すフローチャートである。
まず、リンク入力ボタン111を入力部303で選択し、リンク入力モードをオンにする(ST101)。
次に、病変の位置を入力するために、編集ボタン113Aから十字型ポインタ113Cを、入力部303を用いて選択する。すると、十字型ポインタが表示されるため、十字型ポインタを病変の位置の上に合わせてマウスでクリックすると病変の位置115Aが入力される(ST102のY)。このように、本実施形態の読影レポート作成装置における病変領域入力手段10は、病変領域の位置を手動で入力可能であり、病変の位置115Aの選択には、図5の編集ボタン113Aに限定されず、点、円、矩形、閉曲線、矢印など、マーキング可能な図形や線や点であれば種々のマーク(指標)で病変領域の位置を指定または表示することができる。また、マークの色を色指定ボタン113Bのようなツール等によって選択することができてもよい。
次に、病変領域の位置115Aが入力されると、リンク文字挿入手段20に病変の位置115Aを含む医用画像115の記憶場所を示す情報、および医用画像115上での病変領域の座標などの病変領域の位置を示す位置情報を含む情報が取得される。また、位置情報には、例えばDICOMのヘッダー情報から取得した、画像IDなどの情報をさらに含んでいても良く、病変の位置115Aにおける画像の輝度の値などの画像情報を含んでもよい。例えば、病変領域の位置が点の場合は、医用画像115上での座標値として位置情報を取得でき、病変領域の位置が円の場合は、医用画像115上での中心の座標値と半径の長さとして位置情報を取得でき、病変領域の位置が直線または曲線で囲まれた図形の場合は、医用画像115上での直線の端点や曲線を表す関数など、その図形を表す情報を適宜位置情報として取得できる。
リンク文字挿入手段30は、所定の文字列から所見欄105にまだ使用されていないものを選択して、リンク文字105Aとして挿入する文字列を決定する(ST103)。
この所定の文字列は、文字列または記号または数字のいずれでもよく、(1)病変1、病変2のような定型の文字列、(2)医用画像Vが一連の断層画像からなる1つのシリーズを構成する医用画像であれば、医用画像Vのシリーズ番号と病変の位置を含む断層画像のスライス番号を組み合わせた番号、(3)病変の位置の画素値、(4)病変の位置の解剖学的な部位名、(5)病変の位置の座標値、(6)上記の組み合わせを使用することができる。
所定の文字列に病変1、病変2のような定型の文字列を用いた場合は、病変領域の位置を指定しただけで、リンク文字を入力部303から入力することなくリンク付け操作を行えるため、ハイパーリンクを含む読影レポートをより容易に作成可能である。また、手動で病変領域の位置を指定しただけで、リンク文字が挿入されるため、ハイパーリンクを含む読影レポートをより容易に作成可能である。
また、医用画像115のシリーズ番号と病変の位置を含む断層画像のスライス番号を組み合わせた番号を所定の文字列に用いる場合は、医用画像115のヘッダー情報から必要な情報を得てリンク文字を作成する。この場合、リンク文字を入力部303から入力することなくリンク付け操作を行えることに加えて、どの医用画像についてのリンクなのかを明確に把握できるため、ハイパーリンクを含む読影レポートをより容易に作成可能である。
また、所定の文字列に、病変の位置の画素値または座標値を用いる場合は、医用画像115の病変領域の位置の対応する画素値または座標値を得てリンク文字を作成する。この場合は、リンク文字を入力部303から入力することなくリンク付け操作を行えることに加えて、病変領域の症状また位置をリンク文字から推測できるため、ハイパーリンクを含む読影レポートをより容易に作成可能である。
さらに、所定の文字列として、解剖学的な部位を表す部位名を用いる場合は、リンク文字を以下のように抽出して挿入できる。まず、入力された病変領域の位置が所属する臓器を、計算機支援画像診断(CAD;Computer Aided Diagnosis)によって抽出する。各臓器の抽出の具体例を挙げると、肺野について、特開2001-137230号、特開2008-253293号、肝臓抽出について特開2001-283191号、特開2002-345807号、骨について、特開2008-043564号、心臓について、特開2004-141612号の技術が利用でき、その他の臓器認識技術も指定された病変の位置が所属する臓器を自動的に抽出できるものであれば利用可能である。例えば、病変の位置を含む医用画像について、上記の臓器抽出を行い、抽出された臓器に病変の位置が含まれていれば、その臓器を病変の位置が所属する臓器と決定できる。この臓器を表す解剖学的な部位を表す部位名をリンク文字として挿入できる。この場合は、リンク文字を入力部303から入力することなくリンク付け操作を行えることに加えて、病変領域の症状また位置をリンク文字から推測できるため、ハイパーリンクを含む読影レポートをより容易に作成可能である。
また、部位名として、各臓器または各臓器の部位を表す部位名を使用することができ、例えば、肺の場合、左肺、右肺を部位名としてもよいし、さらに細かく分類した、右肺上葉か、右肺中葉、右肺下葉、左肺上葉、左肺下葉を部位名としてもよいし、左肺上葉上舌区(S4)等、肺区域で分類した部位名としてもよいし、これらの略称を部位名としてもよい。
さらに、所定の文字列として、解剖学的な部位を表す部位名を用いる場合の変形例として、病変を表すリンク文字の候補を記憶する病変名記憶手段80をさらに備えれば、病変の名称、部位の名称もしくはそれらの略称を予め病変名記憶手段80に登録し、所定の文字列に、記憶された病変名を選択的に用いることができる。
病変名記憶手段80は、主にハードディスク305から構成され、少なくとも複数の病変名が記憶された病変名データベースである。複数の病変または部位については、予め登録される。病変名の登録は、入力部303から入力されて登録されてもよいし、予め用意された病変名をネットワークまたは記憶媒体等を介して複写して作成してもよい。また、病変名記憶手段80には、臓器などの解剖学的な部位名も登録されていてもよい。なお、ここでいう病変名は略称や病変を示す記号などでもよい。具体的には、病変名記憶手段80に、図12に示すように、臓器名201と病変領域の位置の特徴情報203と病変を表すリンク文字の候補205を対応付けた病変領域の位置とリンク文字の候補の対応付けテーブルを用意する。図12では、病変領域の位置の特徴情報203として、CT画像の輝度値203が対応付けられている。
 病変領域の位置を入力すると、先述の計算機支援画像診断による臓器抽出の具体例等を用いて、入力された病変領域の位置が所属する臓器を抽出する。次に、入力された病変領域の位置の画像の輝度値を位置情報として取得する。
図12に示すように、入力された病変領域の位置が、臓器名201の中の肺に属するものであり、例えば、病変領域の位置の特徴情報203について入力された病変領域の位置の輝度値が-2000から0の間に含まれる値である-50であれば、リンク文字の候補205のうち、ブラ、気胸、肺気腫、気管支拡張、の4つの文字列が対応するリンク文字の候補205Aと決定する。また、輝度値が100の場合は、輝度値100は輝度値50から100に含まれ、かつ輝度値100から1000に含まれるため、結節、GGO、浸潤影、石灰化がリンク文字の候補と決定する。
 図13に示すように、このリンク文字の候補20Aは、ユーザーが病変領域の位置を指定すると、読影レポート作成画面100上に、リンク文字の候補リスト210として表示される。リンク文字の候補リスト210からリンク文字の候補210Aがユーザーによって選択されると、選択されたリンク文字の候補210Aがリンク文字として読影レポートに挿入される。図13には、リンク文字の候補にない文字列を入力する場合、その他を選択して、入力部からリンク文字を入力することもできる。リンク文字の候補のリスト表示は、プルダウンメニューの形式で表示されてもよいし、部位名を選択できる種々の方法を適用できる。この場合は、リンク文字を入力部303から選択するだけでリンク付け操作を行えることに加えて、病変領域の症状また位置をリンク文字から推測できるため、ハイパーリンクを含む読影レポートをより容易に作成可能である。
また、病変の位置から取得する情報として、病変領域の位置の周辺の輝度値平均、分散、または輝度値パターンを取得するものとしてもよく、病変領域の位置の特徴情報203をそれぞれ病変領域の位置の周辺の輝度値平均、分散、または輝度値パターンに応じた特徴情報として、対応するリンク文字の候補を選択できるようにしてもよい。
次いで、リンク文字挿入手段20は病変の位置115Aのリンク情報を記憶する(ST104)。リンク情報は、例えば、(1)リンクID、(2)シリーズ名およびスライス名およびスライス上の座標からなる病変領域の位置、(3)リンク文字から構成されてもよい。リンクID、シリーズ名およびスライス名およびスライス上の座標からなる病変領域の位置は、病変領域入力手段10から入力された位置情報により取得できる。
所見欄105に、病変領域入力手段10から取得した病変領域の位置115Aを含む画像とハイパーリンクによってリンク付けしてリンク文字105Aを挿入する(ST105)。この際、リンク文字105Aは、ハイパーリンクによってリンク付けされていることが識別できるように、リンク文字の着色または背景色の着色、下線、点滅、太字、書体、リンク文字の大きさ、枠などで、リンク文字以外の文字とは区別して認識できるよう挿入される。挿入される位置は、その時読影レポートのカーソルがある位置にリンク文字が挿入されることが望ましいが、追加されるリンク文字が、読影レポートの所見欄105の文章の最後となるように挿入されてもよく、適宜好ましい位置に挿入することができるものとする。
 そして、さらに、病変領域の位置がST102と同様に入力された場合は、ST102からST105までのステップを繰り返す(ST106のY)。つまり、本実施形態の病変領域入力手段10は、複数の病変領域の位置を入力可能なものであり、リンク文字挿入手段20は、入力された複数の病変領域の位置の各々に対応する複数のリンク文字を挿入可能なものであって、リンク文字は、医用画像Vから複数の病変領域の位置が指定された場合、指定された回数分、対応するリンク文字が挿入される。
病変領域の位置が入力されない場合は、リンク文字の挿入処理を終了する(ST106のN)。
また、読影レポート作成領域105で、挿入されたリンク文字が、入力部303によって選択された場合、例えば、図5に示す選択ツール123等によってリンク文字105Aが選択された場合、医用画像表示手段50は読影レポート表示手段30からリンク文字105Aに対応する医用画像115の位置情報を取得し、医用画像115を詳細画像表示領域113に表示する。また、指標表示手段60はリンク文字挿入手段20からリンク情報を取得し、リンク文字105Aに対応する病変領域の位置115Aを詳細画像表示領域113の医用画像115上に表示する。指標は、病変領域の位置を入力した形式と同じ形式で表されることが好ましい。つまり、病変領域の位置を十字型ポインタで入力すると、指標も十字型ポインタで表され、病変領域の位置を閉曲線で入力すると、閉曲線で指標が表示されることが望ましい。ただし、病変領域の位置が領域で表される場合に、領域内の代表的な点として指標を表示できるようにしてもよい。また、指標の表示形式を、矢印、領域、病変領域内の代表的な点を示す種々のポインタなど選択するようにしてもよい。
オペレータは、リンク文字を挿入した後、キーボード等の操作により、挿入されたリンク文字およびその周辺の文章を編集することができ、さらに別のリンク文字を挿入することもでき、リンク入力と読影レポートの記入作業を交互に行うことができる。
また、従来技術では、作成した読影レポートにドラッグアンドドロップでハイパーリンクを作成してからでなければ、病変領域を含む医用画像の確認ができなかったが、本発明によれば、医用画像Vの病変領域の位置を次々と指定することにより読影レポートの具体的な内容を記述する前にリンク文字を作成しておくことができ、読影レポートの内容をオペレータが記入する作業の間にも、すでに挿入されたリンク文字を選択すると対応する病変領域の位置が表示できるため、読影レポートを作成しながら病変領域の位置の確認が容易に行えて、ハイパーリンクを含む読影レポートをより容易に作成可能である。
図6および図7を用いて、本実施形態にかかる読影レポートに挿入されたリンク文字を変更する動作を説明する。
 図6は、第一の実施形態のリンク文字変更の流れを説明するためのフロー図である。
 図7は、第一の実施形態のリンク文字を一部変更して作成された読影レポートの概念図である。
図7は読影レポート作成画面100の所見欄105の一例である。図7には、病変1、病変2(105B)、病変3(105C)の3つのリンク文字が挿入され、病変1が編集されて新たなリンク文字である不整形結節(105A)に変更された状態を示している。
 まず、リンク文字が挿入された所見欄105において、リンク文字を入力部303で選択する(ST201)。次に、リンク文字を任意の文字列または記号もしくは数字に、マウス、キーボードの操作に応じて変更する。例えば、具体的には、リンク文字に矢印123等の選択ツールを合わせ、右クリックするとプルダウンメニュー形式でリンク文字変更オプションが表示され、そのリンク文字変更オプションを選択してリンク文字変更を行う(ST202)。ハイパーリンクされた状態を保ったままリンク文字の文字列だけを変更できる方法であれば、適宜別の方法を用いてリンク文字の変更を行っても良い。
次に、リンク情報として、変更前のリンク文字に替えて変更後のリンク文字を対応する病変領域の位置に対応付けてリンク情報を更新する(ST203)。
 このように、十字型ポインタのような病変領域の位置を点によって指定する場合には、入力部303でクリックするだけで、病変領域の位置をハイパーリンクによってリンク付けしたリンク文字が、読影レポートに挿入されているため、従来の技術と異なって、繰り返しドラッグアンドドロップをするという必要がなく、簡単に病変領域の位置のリンク付けができる。また、病変領域の位置を点若しくは領域で指定し、その指定された位置を医用画像V上に表示するため、どの部分について読影レポートで言及されているか一目で把握することができ、リンク付けされた文字列と対応する医用画像の理解がより容易になる。
 また、一つの医用画像上について、複数の病変領域の位置が記されている場合に、その複数の病変領域の位置115D、115E、115Fを、リンク文字105Dを指定すると115Dを表示し、115E、115Fを表示しないようにできる。
 特許文献1に示す技術では、一つの文字列に対して一枚の画像をリンク付けするため、一枚のスライス画像に複数のリンク対象部位がある場合、リンク付けされた複数の文字列のどれを指定しても、対応する医用画像が同一の画像となってしまい、どの文字列が医用画像のどこを指しているか分かりにくいという問題があったが、本実施形態によれば、病変の位置を表す指標を医用画像上に表示するため、どのリンク文字105Dがどの病変領域の位置について記述されたかが明確に把握できるため、リンク付けされた文字列と対応する医用画像の理解がより容易になる。
また、一枚のスライス画像に複数のリンク対象部位がある場合、特許文献1に示す技術のように、一つのスライス画像からリンク付けされた複数の対象部位を対象部位ごとに切り出して、新たな複数の参照画像を作成し、作成された参照画像をそれぞれ対応する文字列にドラッグアンドドロップしてリンク付け作業を行うという面倒な方法をとらず、対応する位置を入力部303で選択して入力するだけで、リンク文字と対応する病変領域の位置を正確に把握できる読影レポートが作成でき、ハイパーリンクを含む読影レポートをより容易に作成可能である。
 図8は、第二の実施形態の読影レポート作成機能により表示された読影レポートおよび医用画像の概念図である。なお、図8、図9において、図5と共通の番号を付したものについては、図5と同じ構成であるため、説明を省略する。
 図8に示すように、読影レポート作成画面では、読影レポート表示手段30が読影レポート領域114に添付画像表示領域121を備え、読影レポートに併せてリンク文字に対応する病変領域の位置を含む医用画像を縮小したサムネイル121A、121B、121Cを添付画像として表示している。医用画像のサムネイル121Aは病変領域の位置115Aを含む医用画像を縮小したものであり、サムネイル121Bは病変領域の位置115Bを含む医用画像を、サムネイル121Cは病変領域の位置115Cを含む医用画像をそれぞれ縮小したものである。
 このようにリンク文字に対応する病変領域の位置を含む医用画像のサムネイル(縮小画像)を読影レポートに併せて表示することで、その後読影レポートを読む際、リンク付けされた文字列と対応する医用画像の理解がより容易になる。
さらに、医用画像の添付画像表示領域121に添付画像である病変領域の位置を含む医用画像のサムネイルをレポートに記載された順番に表示した場合には、どのリンク文字がどの画像についての記述なのかを把握することが容易になるため、リンク付けされた文字列と対応する医用画像の理解がより容易になる。
さらなる変形例を図9に示す。以下の変形例は、その本質を変容させることなく、他の実施形態にも適用できる。図9は、第二の実施形態の変形例による読影レポート作成機能により表示された読影レポートおよび医用画像の概念図である。
一つの医用画像上に複数の病変領域の位置が記されている場合のさらなる変形例として、その複数の病変領域の位置その複数の病変領域の位置115D、115E、115Fを、同時に表示する方法もある。この場合、リンク文字105Dを指定に応じて、指定されたリンク文字105Dおよび病変領域の位置115Dを他のリンク文字105E,105F,病変領域の位置115E、115Fとは識別表示することで、どのリンク文字105Dがどの病変領域の位置について記述されたかが明確に把握でき、さらにその画像上にいくつの病変領域の位置が記載されているかも把握できるため、リンク付けされた文字列と対応する医用画像の理解がより容易になる。図9においては、一つの医用画像上に存在する複数の病変領域の位置を識別表示する例として、病変文字105Dが選択され、選択された病変文字105Dが枠を付けることで105E、105Fとは識別表示されている。さらに、選択された病変文字105Dに対応する病変領域の位置115Dの十字型ポインタが他の病変領域の位置を表す十字型ポインタ115E、115Fよりも太字で示され、識別表示されている。
また、指定されたリンク文字および対応する病変領域の位置を表す指標を、マークまたは文字もしくはこれら両方の点滅、リンク文字の着色または背景色の着色、下線、点滅、太字、書体、リンク文字の大きさ、枠など識別表示可能な種々の方法によって強調表示することで、どのリンク文字に対応する病変領域の位置が表示されているかより明確に示すことができ、リンク付けされた文字列と対応する医用画像の理解がより容易になる。
さらに、複数のリンク文字と病変領域の位置が存在する場合に、対応するリンク文字と病変領域の位置を同じ色で着色して表示することができる。このように識別表示を行った場合には、どのリンク文字がどの病変領域の位置について記述されたかが明確に把握できることに加え、さらに全てのリンク文字についてどの病変領域の位置を表しているか、一度に把握することができるため、リンク付けされた文字列と対応する医用画像の理解がより容易になる。
次に、第三の実施形態について説明する。第三の実施形態では、計算機支援画像診断(CAD;Computer Aided Diagnosis)によって病変領域の位置を自動入力する。
図10は、第三の実施形態の読影レポート作成機能を示す機能ブロック図である。複数の病変を表す病変名が記憶された病変名記憶手段80と、医用画像から病変領域の位置を自動検出する病変領域検出手段70をさらに備え、病変領域入力手段10が、病変領域検出手段70によって自動検出された病変領域の位置を入力するものであり、リンク文字挿入手段30が、病変領域検出手段70によって検出された病変領域の位置にある病変を表す病変名を病変名記憶手段80から選択して挿入するものであること以外は第一の実施形態と同様であるため、同じ名の部分については説明を省略する。
病変名記憶手段80は、主にハードディスク305から構成され、少なくとも複数の病変名が記憶された病変名データベースである。複数の病変または部位については、予め登録される。病変名の登録は、入力部303から入力されて登録されてもよいし、予め用意された病変名をネットワークまたは記憶媒体等を介して複写して作成してもよい。また、病変名記憶手段80には、臓器などの解剖学的な部位名も登録されていてもよい。なお、ここでいう病変名は略称や病変を示す記号などでもよい。
病変領域検出手段70は、周知の腫瘍等の病変を検出する手段を用いて、医用画像Vから病変の自動抽出を行い、病変領域の位置を検出して、検出された病変領域の位置を病変領域入力手段10に入力する。また、リンク文字挿入手段30は、病変領域検出手段は検出された病変領域を表す病変名を病変名記憶手段80から選択して、リンク文字として挿入する。ここで、同じ病変名を示す場合は、具体的な病名をより把握できるため下位概念で挿入することが望ましい。
病変領域検出手段70は、計算機処理を用いて異常陰影候補を自動的に検出するようにした計算機支援画像診断(CAD;Computer Aided Diagnosis)を行い、自動的に病変領域を検出する。この場合、異常陰影の位置は領域でもよく、その異常陰影の重心など、異常陰影領域の代表の位置を示す点でもよい。また、全ての医用画像に対して病変領域を自動検出してもよいし、医用画像の一部について病変領域を自動検出してもよい。
病変領域検出に利用できる技術は、具体的には、特開2003-225231号、特開2003-271924号、および、久保田等、「ヘリカルCT像を用いた肺がん計算機診断支援システムの評価」、電子情報通信学会、信学技報、pp.41-46、MI2001-41(2001-09)に示す肺がんを検出する技術、脇田等、「びまん性肺疾患の知的CAD」、文部科学省科学研究費補助金特定領域研究"多次元医用画像の知的診断支援"、第4回シンポジウム論文集、pp. 45-54、2007に示すコンソリデーション、Ground-Glass Opacity(GGO)、Crazy-Paving、蜂巣状陰影、肺気腫陰影、粒状影等のびまん性肺疾患の検出技術、脇田等、「多時相腹部X線CT像の時相間濃度特徴計測に基づく肝臓がん検出」、コンピュータ支援画像診断学会論文誌、Vol.10、No.1、Mar 2007に示す肝臓がん検出技術、「正常構造の理解に基づく知的CAD」、文部科学省科学研究費補助金特定領域研究"多次元医用画像の知的診断支援"、第4回シンポジウム論文集、pp.55-60、2007に示す肝細胞がん、肝のう胞、肝血管種、肝臓領域における出血、脳領域における出血を検出する技術を用いることができる。
また、特開2004-329929号に示すような血管の異常を検出する技術、本出願人の出願である特開平10-097624号に示す異常陰影候補の検出技術、特開平8-215183号に示すような石灰化領域の検出技術を用いることもできる。以上の病変検出技術から病変領域が発見された場合は、病変領域の位置と病変を検出した検出技術を特定する病変領域検出情報を病変領域検出手段10に入力する。
図11は、第三の実施形態のリンク文字挿入処理の流れを説明するためのフロー図である。図11を用いて第三の実施形態のリンク文字挿入処理の流れを説明する。ここで、ST305からST308は、それぞれST103からST106と同じ処理である。
まず、ST101と同様に読影レポートをリンク入力可能な状態に設定する(ST301)。例えば、図5のようにリンク入力ボタン111を入力部303で選択してもよく、さらに自動病変領域挿入ボタン等を設けて、本第三の実施形態に示すリンク文字入力可能にするボタン等を設けて、該ボタンをオンにして入力画面にしてもよい。
次に、リンク入力モードがオンになると、病変領域検出手段70は、異常陰影等の病変を自動的に検出する(ST302)。病変領域検出手段70が複数の病変を検出する機能を備えている場合は、全ての病変領域の検出機能によって、病変領域を検出し終えるまで、自動病変領域検出を繰り返す(ST303のN)。
全ての病変領域検出が終了し(ST303のY)、病変領域の位置115Gが検出された場合は、検出された病変領域の位置115Gおよび病変領域の位置115Gを検出した方法を特定する病変領域検出情報を病変領域入力手段10に入力する。病変領域入力手段10は、図4に示すST103と同様に、病変領域の位置115Gが入力されると、医用画像115の記憶場所を示すアドレスまたは画像ID、および病変領域の位置115Gを示す座標などの情報が取得される。また、病変領域入力手段10は、病変領域の位置115Gを検出した方法を特定する病変領域検出情報をリンク文字挿入手段30に入力する。
リンク文字挿入手段30は、所定の文字列から所見欄105にまだ使用されていないものを選択して、リンク文字105Gとして挿入する文字列を決定する(ST305)。
この所定の文字列は、病変領域の位置を検出した方法に対し、挿入する文字列を予め対応付けて記憶手段80に記憶しておき、入力された病変領域検出情報から挿入する文字列を決定する。また、挿入する文字列は、検出された病変領域を表す文字列とすることが望ましい。
病変を検出した技術が、臓器に特有な病変を検出する場合は、病変を検出する技術の検出対象病変名を表すキーワードを挿入する文字列とすることが望ましい。具体的には、病変領域の位置を検出した方法が肺がんを検出する技術であれば、肺がんを挿入文字列とし、肝臓がんを検出する技術であれば肝臓がんを挿入文字列とするように、病変を検出した技術を特定する病変領域検出情報に対して、予想される病変を表すキーワードを挿入する文字列とするように対応付けておくことが好ましい。この結果、自動的に挿入されたリンク文字が臓器に特有な病変を表すキーワードとなっているため、リンク文字から病変の位置と病変名の把握が容易であり、より容易にハイパーリンクを含む読影レポートの作成ができる。
また、病変領域検出手段70から検出された病変領域を含む医用画像V1について、CADを用いた部位認識を行って病変領域の部位名を取得し、検出された病変を表す病変名と取得された部位名からなる文字列を挿入するリンク文字としてもよい。この結果、自動的に挿入されたリンク文字が臓器および病変を表すキーワードとなっているため、リンク文字から病変のある臓器と病変名の把握が容易であり、ハイパーリンクを含む読影レポートをより容易に作成可能である。具体的には、病変領域が検出された医用画像V1について、肺野について、特開2001-137230号、特開2008-253293号、肝臓抽出について特開2001-283191号、特開2002-345807号、骨について、特開2008-043564号、心臓について、特開2004-141612号の技術が利用でき、抽出された臓器に検出された病変の位置が含まれていれば、その臓器は病変領域を含む部位であると判断できる。なお、その他の臓器認識技術も検出された病変の位置が所属する臓器を自動的に抽出できるものであれば利用可能である。なお、挿入する文字列として、ST105の説明で示した所定の文字列を用いることもできる。
次いで、リンク文字挿入手段20は位置115Gのリンク情報を記憶する(ST306)。リンク情報は、例えば、(1)リンクID、(2)シリーズ名およびスライス名およびスライス上の座標からなる病変領域の位置、(3)リンク文字から構成されてもよい。リンクID、シリーズ名およびスライス名およびスライス上の座標からなる病変領域の位置は、病変領域入力手段10から入力された位置情報により取得できる。
所見欄105に、病変領域入力手段10から取得した病変領域の位置115Gとハイパーリンクによってリンク付けしてリンク文字105Gを挿入する(ST307)。この際、リンク文字105Gは、ST105と同様にハイパーリンクによってリンク付けされていることが識別できるように挿入される。
そして、さらに、病変領域の位置がST102と同様に入力部303から入力された場合は、ST305からST307までのステップを繰り返す(ST308のY)。つまり、リンク文字は、医用画像Vから複数の病変領域の位置が指定された場合、指定された回数分、対応するリンク文字が挿入される。
病変領域の位置が入力されない場合は、リンク文字の挿入処理を終了する(ST308のN)。なお、入力部303によって入力があった場合、先述の通りST305ではST103と同様の処理を行う。
第三の実施形態のように、リンク付けする病変領域の位置を自動入力することによって、読影レポートに最初から病変領域の位置にハイパーリンクによってリンク付けされたリンク文字が挿入された状態となるため、ハイパーリンクを含む読影レポートをより容易に作成可能である。さらに、本実施形態によれば、読影者にその医用画像Vに目を通す前に、リンク文字と対応病変領域の位置をリストアップした情報を提供することができるため、病変領域の目安を与えることができ、読影時に、病変部を見落とす、またはレポートに書き漏らす等の人為ミスを低減し、より正確に読影レポートを作成する支援ができる。
また、読影レポートに挿入される文字列を部位に関連する文字列とした場合は、自動挿入されたリンク文字を見るとどの部位に病変領域が存在するかを理解することが容易になるため、ハイパーリンクを含む読影レポートをより容易に作成可能である。
 また、第三の実施形態の変形例として、病変領域検出手段70に替えて、病変領域の位置を入力部303で指定すると、その病変領域の位置を含む病変領域を抽出する病変領域検出手段70’を備えていてもよい。
具体的には、図11に示すリンク文字挿入の流れで、ST302に替えて、以下の処理を行う。なお、ST302以外については第三の実施形態と同様である。
本出願人の特開2007-307358号に示す方法を用いて、まず、輪郭が既知である異常領域を含む複数のサンプル画像における各画素の特徴量を予め機械学習することにより、角画素が輪郭を示す画素であるかどうかを評価する評価関数Fを特徴量に対応させて求める。次に、画像中の異常領域内の位置を入力部303を用いて点で指定し、その点を基準として異常領域を含む十分な大きさの判別領域を決定し、決定した判別領域内の各画素に対して特徴量を抽出する。抽出した特徴量に基づいて、各画素が輪郭を表す画素であるかどうかの評価値を、評価関数を用いて算出し、算出した評価値に基づいて最適な病変領域の輪郭を得る。この得られた病変領域の輪郭を病変領域入力手段10に入力する。
この第三の実施形態の変形例を用いた場合には、病変領域の位置を点で指定するだけで、より正確に病変領域を抽出して指定することができ、より精度の高い病変領域を示した読影レポートを作成することができるため、オペレータの操作を複雑化することなく、より品質のよい読影レポートを作成することができる。
 また、第三の実施形態のさらなる変形例として、病変領域の位置として、臓器領域を自動入力してもよい。この場合、臓器領域を自動検出し、検出された臓器領域の位置と臓器を検出した検出技術を特定する病変領域検出情報を病変領域検出手段10に入力する。また、リンク文字を挿入する際、臓器領域を検出した技術の検出対象臓器名を表すキーワードを挿入する文字列とすることが望ましい。具体的には、臓器領域の位置を検出した方法が肺を検出する技術であれば、肺を挿入文字列とするように、臓器領域を検出した技術を特定する病変領域検出情報に対して、予想される臓器名または臓器の部位を表すキーワードを挿入する文字列とするように対応付けておくことが好ましい。この結果、自動的に挿入されたリンク文字が臓器を表すキーワードとなっているため、リンク文字から臓器の把握が容易であり、ハイパーリンクを含む読影レポートをより容易に作成可能である。
なお、臓器領域は、病変のある臓器が検出される場合と病変のない臓器が検出される場合があり得る。病変のない臓器が検出された場合にでも、病気が改善した場合など病変のない臓器について読影レポートに記載する場合があるので、読影レポート作成が容易になる。
 臓器領域を自動検出できる技術として、肺野について、特開2001-137230号、特開2008-253293号、肝臓抽出について特開2001-283191号、特開2002-345807号、骨について、特開2008-043564号、心臓について、特開2004-141612号の技術が利用でき、臓器領域を自動検出できる技術であれば、その他の技術も利用可能である。
 なお、本明細書において、図6を用いて説明した読影レポートに挿入されたリンク文字を変更する動作では、リンク文字修正のステップST201で読影レポートの編集を開始し、編集したいリンク文字を指定する際、リンク文字を編集するモードとリンク文字以外の文字を編集するモードを別々に設け、リンク文字を編集する場合とリンク文字以外の編集をする場合でモードを切り換えることが好ましい。そして、リンク文字を変更するモードでは、読影レポート上のリンク文字以外の文字は変更が出来ないようロックし、逆に、読影レポート上のリンク文字以外の文字を編集するモードでは、リンク文字は変更できないようロックすることが好ましい。
 リンク文字編集モードとリンク文字以外の文字編集モードを切り替える方法としては、例えば、読影レポート上のリンク文字に選択ツールを重ねて右クリックすることでプルダウンメニューを表示させ、プルダウンメニュー中でリンク文字を編集するモードとレポート上のリンク文字以外の文字を編集するモードを選択可能にすることが考えられる。また、読影レポート上のリンク文字に選択ツールを重ねた状態でダブルクリックすると、リンク文字を編集するモードをONにするとともにリンク文字以外の文字を編集するモードをOFFにし、リンク文字以外の文字に選択ツールを重ねた状態でダブルクリックするとレポート上のリンク文字以外の文字を編集するモードをONにするとともにリンク文字を編集するモードをOFFにするようにモードを切り換えるようにしてもよい。また、同様に、読影レポート上のリンク文字に選択ツールを重ねた状態で右クリックすると、リンク文字を編集するモードをONにするとともにリンク文字以外の文字を編集するモードをOFFにし、リンク文字以外の文字に選択ツールを重ねた状態で右クリックするとレポート上のリンク文字以外の文字を編集するモードをONにするとともにリンク文字を編集するモードをOFFにするようにモードを切り換えるようにしてもよい。さらに、画面上にリンク文字を編集するモードとレポート上のリンク文字以外の文字を編集するモードを選択できるボタン等を設けてもよい。リンク文字編集モードとリンク文字以外の文字編集モードを切り換える方法としては、以上の例に限られず、種々のモードを切り換え方法を適用することができる。
 このように、リンク文字を編集するモードとリンク文字以外の文字を編集するモードを切り換えることで、リンク文字の前後に新たな文字が挿入された場合に、挿入された文字がリンク文字として挿入された文字か、リンク文字以外の文字として挿入された文字かを明確に判断することができる。また、ユーザーがリンク文字をリンク文字以外の文字と誤って編集することや、リンク文字以外の文字をリンク文字と誤って編集することを防ぐことができる。
 なお、本明細書の実施形態においては、読影レポートの編集中も、リンク文字の選択に応じて対応する病変領域の位置を表示可能であるため、対応する病変領域の位置を表示する際のリンク文字の選択方法とリンク文字を編集するためのリンク文字の選択方法は異なるものとする。例えば、リンク文字に対応する病変領域の位置を表示させるためにはリンク文字を左クリックで選択し、リンク文字を編集するためには上記のような方法でリンク文字を選択するようにする。
 また、図6に示すST201、ST202のステップにおいては、ユーザーの音声入力による読影レポートの編集を可能にしてもよい。例えば、マイク等の音声入力部とユーザーの音声を認識する音声認識ソフトウェア等の音声認識手段をさらに備え、読影レポート音声編集ON/OFFを切り替えるボタン等を画面上に選択可能に設けて、ユーザーの読影レポート音声編集ONボタンの選択に応じて入力手段303が読影レポート音声編集モードをONにするようにしてもよい。このようにすることにより、読影レポート音声編集モードがONであれば、リンク文字の編集の全て又は一部をユーザーからの音声入力を音声認識手段が取得し、音声認識手段が取得した音声情報に基づいて、編集を行うことができる。また、読影レポート音声編集モードは、リンク文字及びリンク文字以外の文字の少なくとも一方に適用してもよいし、両方に適用してもよい。
 音声編集の方法は、周知の種々の方法を用いることができる。一例として、読影レポート音声編集モードがONのとき、マイクが「リンク文字編集」という音声を受け付けると、読影レポートに記載された複数のリンク文字のうち先頭のリンク文字が選択されて識別表示され、リンク文字が識別表示された状態で「リンク文字候補」という音声を受け付けると、識別表示されたリンク文字近傍にプルダウンメニューでリンク文字の候補1、リンク文字の候補2、リンク文字の候補3が選択可能に表示され、ここで「1番を選択」という音声を受け付けると、リンク文字がリンク文字の候補1に変更されるようにする方法を用いることができる。または、上記のリンク文字が識別表示された状態で「リンク文字入力」という音声を受け付けたとき、リンク文字をユーザーが「リンク文字入力」に続いて音声入力した言葉に変更するようにしてもよい。なお、音声編集モードでは、「リンク文字編集」という音声を受け付けて、読影レポートに記載された複数のリンク文字のうちいずれかのリンク文字が選択され、識別表示された状態で、「次へ」または「前へ」という音声を受け付けると、読影レポートの先頭から数えて識別表示されたリンク文字の次または前にあるリンク文字を選択する等の各編集に必要な動作も音声入力できることが好ましい。
 以上のように、ユーザーの音声入力に基づいて読影レポート中のリンク文字を編集可能にした場合は、音声編集によっても読影レポートの作成が可能となるため、操作性を高め、容易に読影レポートの作成を行うことができる。

Claims (10)

  1. 医用画像を取得して表示する医用画像表示手段と、
    前記医用画像の電子的な読影レポートを作成して表示する読影レポート表示手段と、
    前記医用画像上の病変領域の位置を入力する病変領域入力手段と、
    入力された前記病変領域の位置を含む医用画像とハイパーリンクによってリンク付けされるリンク文字を前記読影レポートに識別表示可能に挿入するリンク文字挿入手段と、
    識別表示された前記読影レポートの前記リンク文字を指定するリンク文字指定手段と、
    該リンク文字指定手段による指定に応じて前記病変領域の位置を表す指標を、前記医用画像上に表示する指標表示手段と
    を備えた読影レポート作成装置。
  2.  前記病変領域入力手段が、複数の病変領域の位置を入力可能なものであり、
     前記リンク文字挿入手段が、入力された前記複数の病変領域の位置の各々に対応する複数のリンク文字を挿入可能なものであることを特徴とする請求項1記載の読影レポート作成装置。
  3. 前記読影レポート表示手段が、前記リンク文字に対応する病変領域を含む医用画像を縮小した添付画像を前記読影レポートに併せて表示するものであることを特徴とする請求項1または2記載の読影レポート作成装置。
  4. 前記読影レポート表示手段が、複数の前記添付画像を、前記読影レポートに前記リンク文字が記載された順番に並べて表示するものであることを特徴とする請求項3記載の読影レポート作成装置。
  5. 前記病変領域入力手段が、病変領域の位置を手動で入力可能なものであることを特徴とする請求項1から4のいずれか1項記載の読影レポート作成装置。
  6. 複数の病変を表す病変名が記憶された病変名記憶手段と、
    前記医用画像から前記病変領域の位置を自動検出する病変領域検出手段をさらに備え、
    前記病変領域入力手段が、前記病変領域検出手段によって自動検出された前記病変領域の位置を入力するものであり、
    前記リンク文字挿入手段が、前記病変領域検出手段によって検出された前記病変領域の位置にある病変を表す病変名を前記病変名記憶手段から選択して挿入するものであることを特徴とする請求項1から4のいずれか1項記載の読影レポート作成装置。
  7. 前記読影レポート表示手段が、前記読影レポートの前記リンク文字の指定に応じて、指定された該リンク文字と対応する前記指標のみを強調表示するものであることを特徴とする請求項2から6のいずれか1項記載の読影レポート作成装置。
  8. 前記リンク文字挿入手段が、前記複数のリンク文字を互いに異なる色に着色して前記読影レポートに挿入するものであり、
    前記指標表示手段は、前記複数の指標を該指標に対応するリンク文字と同じ色に着色して表示するものであることを特徴とする請求2から7のいずれか1項記載の読影レポート作成装置。
  9. 医用画像を取得して表示し、
    前記医用画像の電子的な読影レポートを作成して表示し、
    前記医用画像上の病変領域の位置を入力し、
    入力された前記病変領域の位置を含む医用画像とハイパーリンクによってリンク付けされるリンク文字を前記読影レポートに識別表示可能に挿入し、
    識別表示された前記読影レポートの前記リンク文字を指定し、
    該リンク文字の指定に応じて前記病変領域の位置を表す指標を、前記医用画像上に表示することを特徴とする読影レポート作成方法。
  10. コンピュータを、
    医用画像を取得して表示する医用画像表示手段と、
    前記医用画像の電子的な読影レポートを作成して表示する読影レポート表示手段と、
    前記医用画像上の病変領域の位置を入力する病変領域入力手段と、
    入力された前記病変領域の位置を含む医用画像とハイパーリンクによってリンク付けされるリンク文字を前記読影レポートに識別表示可能に挿入するリンク文字挿入手段と、
    識別表示された前記読影レポートの前記リンク文字を指定するリンク文字指定手段と、
    該リンク文字の指定に応じて前記病変領域の位置を表す指標を、前記医用画像上に表示する指標表示手段と
    して機能させるための読影レポート作成プログラム。
PCT/JP2010/005640 2009-09-17 2010-09-15 読影レポート作成装置および方法並びにプログラム WO2011033770A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US13/496,690 US20120176408A1 (en) 2009-09-17 2010-09-15 Image interpretation report generation apparatus, method and program
EP10816884.0A EP2478834B1 (en) 2009-09-17 2010-09-15 Radiograph interpretation report creation device, method, and program
CN2010800410453A CN102497804A (zh) 2009-09-17 2010-09-15 图像判读报告生成设备、方法和程序

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2009-215579 2009-09-17
JP2009215579 2009-09-17
JP2010-066566 2010-03-23
JP2010066566A JP5486364B2 (ja) 2009-09-17 2010-03-23 読影レポート作成装置および方法並びにプログラム

Publications (1)

Publication Number Publication Date
WO2011033770A1 true WO2011033770A1 (ja) 2011-03-24

Family

ID=43758384

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2010/005640 WO2011033770A1 (ja) 2009-09-17 2010-09-15 読影レポート作成装置および方法並びにプログラム

Country Status (5)

Country Link
US (1) US20120176408A1 (ja)
EP (1) EP2478834B1 (ja)
JP (1) JP5486364B2 (ja)
CN (1) CN102497804A (ja)
WO (1) WO2011033770A1 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103733200A (zh) * 2011-06-27 2014-04-16 皇家飞利浦有限公司 由带有解剖学标记临床管理促进的检查审阅
CN104039225A (zh) * 2012-01-05 2014-09-10 日立阿洛卡医疗株式会社 医疗装置
WO2020209382A1 (ja) * 2019-04-11 2020-10-15 富士フイルム株式会社 医療文書作成装置、方法およびプログラム
RU2740777C2 (ru) * 2016-04-04 2021-01-21 Конинклейке Филипс Н.В. Устройство удаленного управления медицинской системой формирования изображения
WO2021250484A1 (en) * 2020-06-10 2021-12-16 Parth Chopra System and method to diagnose respiratory diseases in real-time
EP3985679A1 (en) * 2020-10-19 2022-04-20 Deepc GmbH Technique for providing an interactive display of a medical image

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2506173B1 (en) 2011-03-28 2020-01-01 Canon Kabushiki Kaisha Medical diagnosis support apparatus and medical diagnosis support method
RU2013152744A (ru) * 2011-04-28 2015-06-10 Конинклейке Филипс Н.В. Медицинское устройство формирования изображений с отдельной кнопкой для выбора изображений-кандидатов сегментации
KR20130053587A (ko) * 2011-11-15 2013-05-24 삼성전자주식회사 의료기기 및 이를 이용한 의료영상 디스플레이 방법
CN104303184B (zh) * 2012-03-21 2018-05-15 皇家飞利浦有限公司 整合医疗成像和活检数据的临床工作站以及使用其的方法
JP5946028B2 (ja) * 2012-11-08 2016-07-05 株式会社島津製作所 光生体計測装置
KR101533591B1 (ko) 2013-07-08 2015-07-06 삼성메디슨 주식회사 의료 영상 장치 및 의료 영상 제공 방법
CN105683973B (zh) * 2013-07-29 2019-06-25 皇家飞利浦有限公司 具有集成病变分级器的报告工具、方法和计算机存储介质
JP6595193B2 (ja) * 2014-03-11 2019-10-23 キヤノンメディカルシステムズ株式会社 読影レポート作成装置および読影レポート作成システム
US10586618B2 (en) * 2014-05-07 2020-03-10 Lifetrack Medical Systems Private Ltd. Characterizing states of subject
JP6657210B2 (ja) * 2014-11-03 2020-03-04 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. テキスト認識に基づくテキストイメージリンキングを伴うピクチャアーカイビングシステム
WO2016105972A1 (en) * 2014-12-23 2016-06-30 General Electric Company Report generation in medical imaging
US10734102B2 (en) * 2015-07-31 2020-08-04 Canon Kabushiki Kaisha Apparatus, method, system, and program for creating and displaying medical reports
JP6765795B2 (ja) * 2015-09-09 2020-10-07 日本メジフィジックス株式会社 医用画像データに基づく解析結果報告書作成装置
JP7004648B2 (ja) * 2015-11-09 2022-01-21 コーニンクレッカ フィリップス エヌ ヴェ X線画像吸気品質モニタリング
JP2017099616A (ja) * 2015-12-01 2017-06-08 ソニー株式会社 手術用制御装置、手術用制御方法、およびプログラム、並びに手術システム
US10276265B2 (en) 2016-08-31 2019-04-30 International Business Machines Corporation Automated anatomically-based reporting of medical images via image annotation
US10729396B2 (en) 2016-08-31 2020-08-04 International Business Machines Corporation Tracking anatomical findings within medical images
CN107133474B (zh) * 2017-05-09 2019-10-25 山东省千佛山医院 适用于肺癌的病理诊断报告快速生成系统及方法
CN107273657A (zh) * 2017-05-15 2017-10-20 慧影医疗科技(北京)有限公司 影像诊断图文报告的生成方法及存储设备
EP3506279A1 (en) * 2018-01-02 2019-07-03 Koninklijke Philips N.V. Automatic diagnosis report preparation
CA3100091C (en) * 2018-05-15 2023-10-24 Intex Holdings Pty Ltd Expert report editor
TWI714025B (zh) * 2019-03-19 2020-12-21 緯創資通股份有限公司 影像辨識方法及影像辨識裝置
EP3951786A4 (en) * 2019-04-04 2022-05-25 FUJIFILM Corporation MEDICAL DOCUMENT COMPILATION SUPPORT DEVICE, METHOD AND PROGRAM
JP2020173614A (ja) * 2019-04-10 2020-10-22 キヤノンメディカルシステムズ株式会社 医用情報処理装置及び医用情報処理プログラム
WO2020241857A1 (ja) * 2019-05-31 2020-12-03 富士フイルム株式会社 医療文書作成装置、方法およびプログラム、学習装置、方法およびプログラム、並びに学習済みモデル
CN112420167A (zh) 2019-08-20 2021-02-26 阿里巴巴集团控股有限公司 影像报告的生成方法、装置及设备
JP2021190017A (ja) * 2020-06-04 2021-12-13 キヤノンメディカルシステムズ株式会社 レポート作成支援装置およびレポート作成支援プログラム
CN111832445A (zh) * 2020-06-29 2020-10-27 万翼科技有限公司 工程图纸的定位方法及相关装置
JPWO2022075047A1 (ja) * 2020-10-09 2022-04-14
WO2022220081A1 (ja) * 2021-04-14 2022-10-20 富士フイルム株式会社 文書作成支援装置、文書作成支援方法、及び文書作成支援プログラム
CN113920095A (zh) * 2021-07-05 2022-01-11 深圳科亚医疗科技有限公司 用于宫颈图像的分析管理的装置和方法、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007012044A (ja) * 2005-05-30 2007-01-18 Toshiba Corp 医用レポート作成装置、医用レポート参照装置及びそのプログラム
JP2007264773A (ja) * 2006-03-27 2007-10-11 Toshiba Corp 読影レポート作成システム及び読影レポート作成装置
JP2007275558A (ja) * 2006-03-15 2007-10-25 Toshiba Corp 医用画像読影装置、及びカーソル移動プログラム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003506797A (ja) * 1999-08-09 2003-02-18 ウェイク フォレスト ユニバーシティ レポートを作成する方法とシステム
US6785410B2 (en) * 1999-08-09 2004-08-31 Wake Forest University Health Sciences Image reporting method and system
US7130457B2 (en) * 2001-07-17 2006-10-31 Accuimage Diagnostics Corp. Systems and graphical user interface for analyzing body images
US20090228299A1 (en) * 2005-11-09 2009-09-10 The Regents Of The University Of California Methods and apparatus for context-sensitive telemedicine
JP5525675B2 (ja) * 2006-03-07 2014-06-18 東芝メディカルシステムズ株式会社 医用画像診断支援装置、医用画像診断装置、又は医用画像診断支援システム
JP5067793B2 (ja) * 2007-08-15 2012-11-07 富士フイルム株式会社 医用情報処理システム、医用情報処理方法、及びプログラム
JP2009082227A (ja) * 2007-09-27 2009-04-23 Fujifilm Corp 医用レポートシステム、医用レポート作成装置、及び医用レポート作成方法
JP5153281B2 (ja) * 2007-09-28 2013-02-27 キヤノン株式会社 診断支援装置及びその制御方法
US8107700B2 (en) * 2007-11-21 2012-01-31 Merge Cad Inc. System and method for efficient workflow in reading medical image data
AU2008331807A1 (en) * 2007-12-03 2009-06-11 Dataphysics Research, Inc. Systems and methods for efficient imaging
US20100063842A1 (en) * 2008-09-08 2010-03-11 General Electric Company System and methods for indicating an image location in an image stack

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007012044A (ja) * 2005-05-30 2007-01-18 Toshiba Corp 医用レポート作成装置、医用レポート参照装置及びそのプログラム
JP2007275558A (ja) * 2006-03-15 2007-10-25 Toshiba Corp 医用画像読影装置、及びカーソル移動プログラム
JP2007264773A (ja) * 2006-03-27 2007-10-11 Toshiba Corp 読影レポート作成システム及び読影レポート作成装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2478834A4 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103733200A (zh) * 2011-06-27 2014-04-16 皇家飞利浦有限公司 由带有解剖学标记临床管理促进的检查审阅
CN104039225A (zh) * 2012-01-05 2014-09-10 日立阿洛卡医疗株式会社 医疗装置
RU2740777C2 (ru) * 2016-04-04 2021-01-21 Конинклейке Филипс Н.В. Устройство удаленного управления медицинской системой формирования изображения
WO2020209382A1 (ja) * 2019-04-11 2020-10-15 富士フイルム株式会社 医療文書作成装置、方法およびプログラム
JPWO2020209382A1 (ja) * 2019-04-11 2020-10-15
WO2021250484A1 (en) * 2020-06-10 2021-12-16 Parth Chopra System and method to diagnose respiratory diseases in real-time
EP3985679A1 (en) * 2020-10-19 2022-04-20 Deepc GmbH Technique for providing an interactive display of a medical image

Also Published As

Publication number Publication date
EP2478834A4 (en) 2013-07-31
EP2478834B1 (en) 2015-06-24
US20120176408A1 (en) 2012-07-12
JP2011086276A (ja) 2011-04-28
CN102497804A (zh) 2012-06-13
JP5486364B2 (ja) 2014-05-07
EP2478834A1 (en) 2012-07-25

Similar Documents

Publication Publication Date Title
JP5486364B2 (ja) 読影レポート作成装置および方法並びにプログラム
JP5349384B2 (ja) 医用画像表示装置および方法並びにプログラム
US8423571B2 (en) Medical image information display apparatus, medical image information display method, and recording medium on which medical image information display program is recorded
JP5100285B2 (ja) 医用診断支援装置およびその制御方法、プログラム、記憶媒体
US8744149B2 (en) Medical image processing apparatus and method and computer-readable recording medium for image data from multiple viewpoints
JP5405678B2 (ja) 医用レポート作成装置、医用レポート参照装置及びそのプログラム
US7130457B2 (en) Systems and graphical user interface for analyzing body images
JP5523891B2 (ja) 病変領域抽出装置、その作動方法およびプログラム
US6901277B2 (en) Methods for generating a lung report
US9144407B2 (en) Image processing device and method, and program
JP5264136B2 (ja) 医用診断支援装置及びその制御方法、ならびにコンピュータプログラム及び記憶媒体
JP5242022B2 (ja) 医用レポート作成装置、医用レポート参照装置及びそのプログラム
KR20140055152A (ko) 병변 진단 보조 장치 및 방법
US20120278105A1 (en) Protocol guided imaging procedure
JP2009525143A (ja) 医用画像を比較するための改良型ナビゲーションツール
US20100189322A1 (en) Diagnostic supporting apparatus and method for controlling the same
JP5355111B2 (ja) 診断支援装置及び診断支援方法
US20090106047A1 (en) Integrated solution for diagnostic reading and reporting
JP2003299645A (ja) 画像診断支援装置
JP2021183114A (ja) 医用画像判読支援システム

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201080041045.3

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10816884

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 13496690

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2010816884

Country of ref document: EP