WO2022181747A1 - 画像表示装置、画像表示方法及びプログラム - Google Patents

画像表示装置、画像表示方法及びプログラム Download PDF

Info

Publication number
WO2022181747A1
WO2022181747A1 PCT/JP2022/007787 JP2022007787W WO2022181747A1 WO 2022181747 A1 WO2022181747 A1 WO 2022181747A1 JP 2022007787 W JP2022007787 W JP 2022007787W WO 2022181747 A1 WO2022181747 A1 WO 2022181747A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
information
display
inspected
processor
Prior art date
Application number
PCT/JP2022/007787
Other languages
English (en)
French (fr)
Inventor
遼 池田
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to EP22759781.2A priority Critical patent/EP4300085A4/en
Priority to JP2023502524A priority patent/JPWO2022181747A1/ja
Priority to CN202280017016.6A priority patent/CN116888461A/zh
Publication of WO2022181747A1 publication Critical patent/WO2022181747A1/ja
Priority to US18/454,756 priority patent/US20230394648A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G06T7/0008—Industrial image inspection checking presence/absence
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20104—Interactive definition of region of interest [ROI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30204—Marker

Definitions

  • the present invention relates to an image display device, an image display method, and a program, and more particularly to technology for determining defects in an inspection object from an image of the inspection object.
  • Japanese Patent Application Laid-Open No. 2002-300003 describes a device that highlights regions determined to have a tendency to perform
  • the present invention has been made in view of such circumstances, and provides an image display device, an image display method, and a program that can improve the accuracy of judgment by comprehensively considering information interpreted by a plurality of judges. With the goal.
  • One aspect of an image display device for achieving the above object comprises at least one processor and at least one memory for storing instructions to be executed by the at least one processor, the at least one processor comprising: obtaining a first inspection image in which a first inspection object is photographed and in which interpretation information by a plurality of judges is associated with an arbitrary region; displaying an image on a display, displaying a marker in at least one region associated with interpretation information of a first image to be inspected, accepting a marker selection instruction from a user, and receiving a selection instruction for the first inspection image.
  • the image display device displays on a display at least one of first information, which is document information of information, and second information, which is statistical information obtained by statistically processing non-document information of interpretation information. According to this aspect, the user can fully consider the interpretation information provided by a plurality of judges.
  • the document information includes a plurality of comments input by a plurality of judges, and at least one processor displays a list of the plurality of comments.
  • the non-document information includes judgment results classified by a plurality of judges, including judgment results including at least one of presence/absence, type, and severity of defects in the marker area, and statistically processing the non-document information.
  • the statistical information obtained preferably includes the distribution of the number of people for each determination result.
  • the non-document information includes defect numerical information determined by a plurality of judges, and the statistical information obtained by statistically processing the non-document information may include at least one of the average and distribution of the defect numerical information. preferable.
  • the defect numerical information preferably includes at least one of defect size and defect density.
  • the first image to be inspected includes information of image processing when the determination that is the basis of the interpretation information is performed, and at least one processor processes the first information and the second information displayed on the display. receiving a selection instruction from at least one user of them, and displaying the first image to be inspected that has undergone image processing when a determination based on the selected and instructed first information or second information is made It is preferable to display
  • the at least one processor causes the display to display the first image to be inspected together with the second image to be inspected.
  • the at least one processor causes the display to display the first image to be inspected instead of the second image to be inspected.
  • the image processing includes at least one of image magnification reproduction, image display position reproduction, and image appearance parameters, where the image appearance parameters are image brightness, image sharpness, It preferably includes at least one of image contrast and image gradation.
  • At least one processor accepts at least one of correction and approval of the interpretation information associated with the region, and superimposes a mark indicating final judgment on the region for which at least one of the correction and approval has been accepted. is preferred.
  • At least one processor accepts an input of an area of the first image to be inspected that needs to be re-determined, and superimposes a mark indicating remand on the input area.
  • At least one processor is a determined image in which a second inspection object different from the first inspection object is photographed, and determination is made in which determined image interpretation information by a plurality of assessors is associated with an arbitrary region.
  • Third information that is document information of the determined interpretation information associated with the determined interpretation information associated with the area of the selected marker obtained by acquiring the determined interpretation information of the completed image, and non-document information of the determined interpretation information It is preferable to display on the display at least one of the fourth information which is the statistical information obtained by statistically processing the.
  • the second inspection object is preferably the same standard product as the first inspection object.
  • the displayed determined interpretation information document information is at least one of the same text as the document information of the interpretation information associated with the selected marker area and the text indicating the same defect determination result. It is preferred to include one.
  • At least one processor calculates a distribution of the judgment results of the plurality of judges for the first image to be inspected, and calculates the first It is preferable to display on the display that the judgment results of a plurality of judges for one image to be inspected vary.
  • At least one processor calculates a distribution of the judgment results of the plurality of judges for the first image to be inspected, and if the judgment result of a specific judge for the first image to be inspected is an outlier, It is preferable to display on the display that there is a possibility that the determination result of a specific judge is an outlier.
  • At least one processor statistically processes the non-document information of the interpretation information by weighting the determination results of each of the plurality of judges based on the judgment results of each judge.
  • One aspect of an image display method for achieving the above object is a first image to be inspected in which a first inspection object is photographed, and image interpretation information by a plurality of judges is associated with an arbitrary region.
  • the user can fully consider the interpretation information provided by a plurality of judges.
  • One aspect of the program for achieving the above object is a program for causing a computer to execute the image display method described above.
  • a computer-readable non-transitory storage medium in which this program is recorded may also be included in this embodiment.
  • FIG. 1 is a block diagram showing a defect inspection system.
  • FIG. 2 is a block diagram showing an example of an imaging system.
  • FIG. 3 is a flow chart showing the steps of the image display method.
  • FIG. 4 is a diagram showing an example of a display screen on which an image to be inspected is displayed.
  • FIG. 5 is a diagram showing an example of marker selection by the user.
  • FIG. 6 is a diagram showing an example of a display screen on which an enlarged inspection target image is displayed.
  • FIG. 7 is a diagram showing an example of a display screen on which an enhanced inspection target image is displayed.
  • FIG. 8 is a diagram showing an example of a display screen when document information is selected.
  • FIG. 9 is a diagram showing an example of a display screen when document information is selected.
  • FIG. 9 is a diagram showing an example of a display screen when document information is selected.
  • FIG. 10 is a diagram showing an example of a display screen on which a final judgment mark is superimposed.
  • FIG. 11 is a diagram showing an example of a display screen on which a mark indicating remand is superimposed.
  • FIG. 12 is a diagram showing an example of statistical information displayed on the screen of the display.
  • a defect inspection system is a system in which a user judges a defect of an inspection object from an image of an industrial product that is an inspection object.
  • a user is a radiogram interpreter, and may be any one of a plurality of assessors, or may be a person other than the assessor.
  • the inspection target image of the inspection target is a radiographic image of an industrial product will be described, but it may be another target object and another interpretation target image.
  • the industrial product to be inspected is not particularly limited in material such as metal or resin, and may be pre-processed or post-processed, and may be a part or an assembly.
  • FIG. 1 is a block diagram showing a defect inspection system 10 according to this embodiment.
  • the defect inspection system 10 includes an imaging system 12, a display 14, an image display device 16, an input device 18, and an image database 20.
  • FIG. 1 is a block diagram showing a defect inspection system 10 according to this embodiment.
  • the defect inspection system 10 includes an imaging system 12, a display 14, an image display device 16, an input device 18, and an image database 20.
  • FIG. 1 is a block diagram showing a defect inspection system 10 according to this embodiment.
  • the defect inspection system 10 includes an imaging system 12, a display 14, an image display device 16, an input device 18, and an image database 20.
  • the imaging system 12 is a system that captures an image of the inspection object OBJ, which is the first inspection object. Details of the imaging system 12 will be described later.
  • the display 14 is a display device for allowing the user to visually recognize an image of an object to be inspected in which the object to be inspected OBJ is photographed.
  • the display 14 displays screens required for operations on the input device 18 and functions as a part that implements a GUI (Graphical User Interface).
  • GUI Graphic User Interface
  • the image display device 16 is a control device for displaying the image of the inspection object OBJ captured by the imaging system 12 on the screen of the display 14 .
  • the image display device 16 has a processor 16A and a memory 16B.
  • the processor 16A executes instructions stored in the memory 16B.
  • a plurality of processors 16A may be provided.
  • the hardware structure of the processor 16A is various processors as shown below.
  • Various processors include a CPU (Central Processing Unit), which is a general-purpose processor that executes software (programs) and acts as various functional units, a GPU (Graphics Processing Unit), which is a processor specialized for image processing, A circuit specially designed to execute specific processing such as PLD (Programmable Logic Device), which is a processor whose circuit configuration can be changed after manufacturing such as FPGA (Field Programmable Gate Array), ASIC (Application Specific Integrated Circuit), etc. Also included are dedicated electrical circuits, which are processors with configuration, and the like.
  • One processing unit may be composed of one of these various processors, or two or more processors of the same or different type (for example, a plurality of FPGAs, a combination of CPU and FPGA, or a combination of CPU and GPU).
  • a plurality of functional units may be configured by one processor.
  • a single processor is configured by combining one or more CPUs and software.
  • a processor acts as a plurality of functional units.
  • SoC System On Chip
  • various functional units are configured using one or more of the above various processors as a hardware structure.
  • the hardware structure of these various processors is, more specifically, an electrical circuit that combines circuit elements such as semiconductor elements.
  • the memory 16B stores instructions to be executed by the processor 16A.
  • the memory 16B includes RAM (Random Access Memory) and ROM (Read Only Memory) (not shown).
  • the processor 16A uses the RAM as a work area, executes software using various programs and parameters including an image display program stored in the ROM, and uses the parameters stored in the ROM or the like to perform image display. Various operations of device 16 are performed.
  • the input device 18 is an interface that receives operation input from the user.
  • the input device 18 includes a keyboard for character input, a pointer displayed on the screen of the display 14, and a pointing device for operating icons and the like.
  • Input device 18 may be a touch panel display integrated with display 14 .
  • the image database 20 is composed of a large-capacity storage device.
  • the image database 20 stores a plurality of judged images obtained by photographing a plurality of different second inspection objects in the past. Each judged image is associated with interpretation information including judgment results of defects of the second inspection object by a plurality of judges in an arbitrary area.
  • the second inspection object is an article different from the inspection object OBJ.
  • the second object to be inspected may be, for example, the same standard product as the object to be inspected OBJ, or may be an object having a shape different from that of the object to be inspected OBJ.
  • the imaging system 12, the image display device 16, and the image database 20 are communicably connected via the network NW.
  • the network NW is, for example, LAN (Local Area Network), WAN (Wide Area Network), or Internet connection.
  • the imaging system 12, the image display device 16, and the image database 20 may be communicably connected by a USB (Universal Serial Bus) cable or the like, or may be communicably connected by short-range wireless communication using infrared rays or the like. good too.
  • the photographing system 12, the image display device 16, and the image database 20 may exchange data including images using removable and readable storage media.
  • FIG. 2 is a block diagram showing an example of the imaging system 12.
  • the imaging system 12 includes an imaging room 22 , an imaging control section 24 , an imaging operation section 26 , an image recording section 28 , a radiation detector 30 and a radiation source 34 .
  • the imaging room 22 is X-ray protected by X-ray protective materials (for example, lead, concrete, etc.) at the partition walls and entrances to the outside. Inside the imaging room 22, in addition to the radiation detector 30 and the radiation source 34, an object to be inspected OBJ to be imaged is arranged.
  • X-ray protective materials for example, lead, concrete, etc.
  • the shooting control section 24 includes a CPU that controls the operation of each section of the shooting system 12 .
  • the photographing control unit 24 receives operation input from the photographer via the photographing operation unit 26, transmits control signals corresponding to the received operation input to each unit of the photographing system 12, and controls the operation of each unit.
  • the shooting operation unit 26 is an input device that receives operation inputs from the photographer. Via the imaging operation unit 26, the operator inputs information about the object to be inspected OBJ and inputs instructions to the radiation detector 30 to perform imaging (imaging conditions such as exposure time, focal length, aperture, imaging angle, imaging location, etc.). etc.), input of radiation irradiation instructions to the radiation source 34 (including settings such as irradiation start time, irradiation duration, irradiation angle, irradiation intensity, etc.), and record the acquired image in the image recording unit 28 Instructions can be entered.
  • the image recording unit 28 records an image (light receiving image data) of the inspection object OBJ captured by the radiation detector 30 .
  • Information for identifying the inspection object OBJ is recorded in the image recording unit 28 in association with the image.
  • the radiation source 34 is, for example, an X-ray source.
  • the radiation source 34 irradiates the object to be inspected OBJ in the imaging room 22 with radiation according to the instruction from the imaging control unit 24 . In the case of irradiating the inspection object OBJ with visible light for imaging, it is not necessary to use the protected imaging room 22 .
  • the radiation detector 30 receives the radiation emitted from the radiation source 34 to the object to be inspected OBJ and transmitted through the object to be inspected OBJ, and images the object to be inspected OBJ in accordance with the instruction to execute imaging from the imaging control unit 24 .
  • the inspection object OBJ is held in the imaging room 22 by a holding member (for example, a manipulator, a mounting table, a movable mounting table) (not shown).
  • the distance and angle to the are adjustable.
  • the operator can control the relative positions of the object to be inspected OBJ, the radiation detector 30, and the radiation source 34 via the imaging control unit 24, so that a desired portion of the object to be inspected OBJ can be imaged.
  • the radiation source 34 finishes irradiating the inspection object OBJ with radiation in synchronization with the end of the execution of imaging by the radiation detector 30 .
  • the radiation detector 30 is arranged inside the imaging room 22. However, if the radiation detector 30 is capable of imaging the object to be inspected OBJ in the imaging room 22, It may be arranged outside the chamber 22 .
  • one radiation detector 30 and one radiation source 34 are provided, but the number of radiation detectors and radiation sources is not limited to this. For example, there may be multiple radiation detectors and multiple radiation sources.
  • Image display method An image display method using the image display device 16 will be described.
  • the image display method is implemented by the processor 16A executing an image display program stored in the memory 16B.
  • the image display program may be provided by a computer-readable non-transitory storage medium.
  • the image display device 16 may read the image display program from the non-temporary storage medium and store it in the memory 16B.
  • FIG. 3 is a flow chart showing the steps of the image display method.
  • the image display method according to the present embodiment causes the screen of the display 14 to display a photographed image of the object to be inspected OBJ and its interpretation information.
  • the processor 16A of the image display device 16 acquires the first inspection object image in which the inspection object is photographed (step S1: an example of inspection object image acquiring process).
  • the processor 16A acquires the inspection object image 100 in which the inspection object OBJ is photographed from the image database 20 via the network NW.
  • An inspection target image 100 is an image of an inspection target OBJ captured by the imaging system 12, and is an image that has already been interpreted by a plurality of judges.
  • An arbitrary area of the inspection target image 100 is pre-associated with interpretation information by a plurality of judges.
  • the processor 16A causes the acquired first image to be inspected to be displayed on the display, and displays a marker in at least one area associated with the interpretation information of the first image to be inspected (step S2: first (an example of the image display process of ).
  • FIG. 4 is a diagram showing an example of the screen of the display 14 on which the image 100 to be inspected is displayed.
  • a window WA is displayed on the screen of the display 14, and an image 100 to be inspected is displayed in the window WA.
  • the image to be inspected 100 has image interpretation information associated with the area AA and the area AB.
  • a marker 102A and a marker 102B are added to an area AA and an area AB, respectively, associated with interpretation information.
  • the markers 102A and 102B are bounding boxes surrounding the areas AA and AB, respectively. Any other format may be used as long as it can be displayed in a recognizable manner.
  • the processor 16A superimposes a marker on the area associated with the interpretation information. For example, if the inspection object image 100 has no markers, the processor 16A superimposes the marker 102A on the area AA and the marker 102B on the area AB of the inspection image 100 displayed in the window WA. All you have to do is Thereby, the processor 16A can perform the same display as when the first image to be inspected is provided with the marker in advance.
  • the processor 16A receives a marker selection instruction from the user (step S3: an example of a receiving process).
  • the user uses the input device 18 to select and instruct the marker 102A or the marker 102B of the image 100 to be inspected displayed on the screen of the display 14 .
  • Processor 16A receives marker 102A or marker 102B selected by input device 18 .
  • FIG. 5 is a diagram showing an example of a marker selection instruction by the user. 1000 and 1002 shown in FIG. 5 each show an example of selecting and instructing a marker using a pointing device (not shown).
  • the user selects and instructs the marker 102B by moving the cursor 104 to the position of the desired marker 102B and performing a click operation.
  • the user selects and instructs the marker 102A by specifying a range 106 surrounding the marker 102A by a drag operation.
  • 1004 shown in FIG. 5 is a list of marker information displayed on the screen of the display 14 .
  • the list of marker information may be displayed together with the inspection target image 100 by being displayed in a window different from the window WA.
  • the marker information includes marker color, marker position, and defect type information for the region associated with the marker.
  • the marker information may include a representative determination of defects in the area associated with the marker.
  • the marker information may include enough information to identify each marker.
  • the user can select and instruct the marker of that information.
  • the marker information and the cursor 104 may be linked. For example, only the information of the marker corresponding to the marker closest to the position of the cursor 104 on the image may be displayed. information may be highlighted and displayed.
  • the processor 16A when receiving a marker selection instruction from the user, performs at least enlargement processing and enhancement processing on a region including at least a part of the region of the selected marker in the first image to be inspected.
  • a second image to be inspected is displayed on the display (step S4: an example of a second image display step).
  • the processor 16A selects the first information, which is document information of the interpretation information associated with the selected marker area, and the second information, which is statistical information obtained by statistically processing the non-document information of the interpretation information. At least one is displayed on the display (step S5: an example of the interpretation information display step). Document information and non-document information will be described later. Thus, the processing of this flowchart ends.
  • the processor 16A Since the selection instruction of the marker 102A by the user is received in step S3, the processor 16A performs at least one of enlargement processing and enhancement processing on an area including at least a part of the area AA of the inspection object image 100 to obtain the second inspection object. Generate an image. The area AA and the area on which at least one of the enlargement process and the enhancement process are to be performed do not necessarily have to match. processing may be performed.
  • the processor 16A generates an enlarged inspection object image 110 obtained by enlarging a part of the area AA by a predetermined magnification as the second inspection object image, and displays the produced enlarged inspection object image 110 on the screen of the display 14.
  • FIG. 6 is a diagram showing an example of the screen of the display 14 on which the enlarged inspection target image 110 is displayed.
  • an enlarged inspection target image 110 is displayed in the window WA.
  • the area AA is enlarged by a predetermined magnification with respect to the inspection object image 100 displayed in the window WA of FIG. In this way, by shifting from the display of the entire inspection object OBJ to the display in which the area AA is enlarged, the area AA has a higher resolution and is displayed in detail, so that the user can visually recognize the area AA in detail. can.
  • the processor 16A reads out the interpretation information associated with the area AA from the image database 20.
  • the image interpretation information may be included in the inspection target image 100 as metadata of the inspection target image 100 .
  • the interpretation information includes document information.
  • the document information includes a plurality of comments respectively input by a plurality of judges.
  • the input comment may include the grounds for determination, such as "many defects were confirmed during enlargement".
  • processor 16A causes display 14 to list at least document information 120A, 120B, and 120C as first information.
  • document information 120A, 120B, and 120C are displayed in window WB.
  • the interpretation information includes non-document information.
  • the non-document information includes defect determination results determined by a plurality of judges or defect numerical information.
  • the processor 16A statistically processes the non-document information and displays the statistically processed statistical information 122A on the screen of the display 14 as the second information. In the example shown in FIG. 6, statistical information 122A is displayed in window WB.
  • the user can check the information of the area AA without omission. Therefore, it is possible to take into consideration the interpretation information from multiple judges without omission.
  • the processor 16A also displays a scroll bar 130 and a slider 132 on the window WB.
  • the user can use the input device 18 to vertically move the slider 132 along the scroll bar 130, and the processor 16A displays the first information and the second information vertically arranged in the window WB. is displayed on the screen of the display 14 according to the position of the slider 132 .
  • the user can thoroughly check and consider the interpretation information provided by a plurality of judges.
  • the processor 16A displays the enlarged inspection object image 110 instead of the inspection object image 100.
  • the processor 16A causes the enlarged inspection object image 110 to be displayed in a window different from the window WA in which the inspection object image 100 is displayed. Both the target image 100 and the enlarged inspection target image 110 may be displayed simultaneously.
  • the processor 16A causes the screen of the display 14 to display the enlarged inspection image 110 obtained by enlarging a part of the area AA as the second inspection image.
  • the enhanced inspection target image on which the area AA has been enhanced may be displayed on the screen of the display 14 .
  • FIG. 7 is a diagram showing an example of the screen of the display 14 displaying the enhanced inspection target image 140 on which the area AA has been enhanced.
  • an enhanced inspection target image 140 is displayed in the window WA.
  • the processor 16A generates the enhanced inspection target image 140 by changing the overall gradation of the inspection target image 100 .
  • the enhancement processing of the area AA is not limited to the gradation change processing, and may be sharpness change processing, luminance change processing, and the like. Also, the processor 16A may perform enhancement processing on at least a part of the area AA. A marker 102A and a marker 102B may be displayed on the enhanced inspection target image 140 .
  • the processor 16A may generate an enlarged enhanced inspection image obtained by performing both enlargement processing and enhancement processing of the area AA as the second inspection object image, and display it on the screen of the display 14 .
  • the non-document information is the defect judgment results classified by a plurality of judges, and includes, for example, at least one of the presence/absence, type, and severity of the defect in the marker area.
  • the statistical information of the defect determination results may be the population distribution for each determination result. The population distribution may be shown using any of a histogram, a selection rate for each determination, a pie chart, and a bar graph.
  • the non-document information may be numerical information of defects judged respectively by a plurality of judges, or may be a degree of certainty of the judgment and a scale of seriousness.
  • Numerical information on defects may be the size (area) of the defect, the density of a group of defects that are densely generated instead of the simple size of each defect, or the position of the defect. Coordinates (position of center of gravity, position of bounding box) may also be used.
  • the numerical information of the defect may be a marker assigned in advance to the area, or a diagonal length of a circumscribing rectangle that is a newly assigned bounding box.
  • it may be a diagonal length of a circumscribing rectangle in consideration of rotation, or a graphic parameter when ellipse fitting is performed.
  • the diagonal length of the circumscribing rectangle which takes into account the rotation, makes it possible to distinguish between elongated and round defects.
  • the statistical information of the defect numerical information, the confidence of the determination, and the measure of seriousness may be at least one of their average, variance, deviation, maximum/minimum, and histogram.
  • the average may be a simple average, a weighted average, or an average excluding outliers.
  • a weighted average may use a weight for each judge.
  • the processor 16A may cause the screen of the display 14 to display an image when the interpretation information is created.
  • the image to be inspected 100 includes image processing information at the time of determination that is the basis of the interpretation information associated with the area AA. , document information 120B, document information 120C, and statistical information 122A. and displayed on the screen of the display 14.
  • the image processing information includes at least one of the reproduction of image magnification (display size), reproduction of image display position, and image appearance parameter.
  • the image appearance parameters include at least one of image brightness, image sharpness, image contrast, and image gradation.
  • FIG. 8 is a diagram showing an example of the screen of the display 14 when the user selects the document information 120A with the input device 18 in the state shown in FIG.
  • the processor 16A acquires from the image database 20 the image processing information when the judge A created the document information 120A from the inspection target image 100, and applies the acquired image processing to the inspection target image. 100 to generate a document creation image 150 and display it on the screen of the display 14 .
  • the inspection target image 100 may have the image processing information when the judge A creates the document information 120A as metadata of the inspection target image 100 .
  • the processor 16A causes the frame line of the selected document information 120A to be displayed thicker than the frame lines of other interpretation information. Further, the processor 16A causes the window WA to display the document creation time image 150, which is the image of the area AA used when the judge A created the document information 120A, instead of the enlarged inspection target image 110. FIG. In addition, the processor 16A causes the frame of the window WA displaying the image 150 during document creation to be thicker than the frame of the window WA displaying the enlarged inspection target image 110 . Here, the lines of the frame are displayed thick, but it is sufficient if the correspondence between the document information 120A and the document creation image 150 can be identified. For example, the display method may be such that the color of the frame line of the document information 120A and the color of at least one of the frame of the window WA and the menu bar are displayed in the same color.
  • the user can visually recognize the image displayed when document information and non-document information are created.
  • FIG. 9 shows the display 14 when the user selects the document information 120A with the input device 18 in the state shown in FIG. It is a figure at the time of displaying simultaneously.
  • an enlarged inspection target image 110 is displayed in a window WA
  • an image 150 at the time of document creation is displayed in another window WC.
  • the user can visually recognize the document information and the image displayed when the non-document information is created, and compare the enlarged inspection target image 110 with the document creation image 150. be able to.
  • the interpretation information may be approved by the user, or the interpretation information may be modified before approval.
  • the processor 16A receives at least one of correction and approval of at least one of the document information 120A, the document information 120B, the document information 120C, and the statistical information 122A, which is the interpretation information associated with the area AA; A mark indicating final judgment is superimposed on the area AA where at least one of correction and approval has been received.
  • the user can use the input device 18 to correct and approve the document information 120A.
  • FIG. 10 is a diagram showing an example of the screen of the display 14 on which the final judgment mark is superimposed.
  • the interior of the marker 102A is painted out as the final determination mark.
  • the processor 16A receives an input of an area AA of the image to be inspected 100 that needs to be re-determined, and superimposes a mark indicating remand on the input area AA.
  • the user can use the input device 18 to input a re-determination.
  • FIG. 11 is a diagram showing an example of the screen of the display 14 on which a mark indicating remand is superimposed.
  • the bounding box of marker 102A is double displayed as a mark indicating remand.
  • the final judgment mark and the mark indicating remand are displayed superimposed on the area AA. 20 may be stored.
  • the document information and statistical information displayed on the screen of the display 14 are not limited to the first information that is document information of the inspection target image 100 and the second information that is statistical information of non-document information. Information of past determined images other than 100 may be used.
  • the processor 16A is a determined image in which a second inspection object different from the inspection object OBJ, which is the first inspection object, is photographed, and the determined image is read by a plurality of assessors in an arbitrary region.
  • At least one piece of fourth information which is statistical information obtained by statistically processing the non-document information of the completed interpretation information, is displayed on the screen of the display 14 .
  • the document information of the determined image is displayed instead of the document information 120B.
  • the second inspection object may be the same standard product as the inspection object OBJ.
  • the third information includes at least one of the same text as the document information of the interpretation information associated with the area AA of the selected marker 102A and the text indicating the same defect determination result. may contain.
  • the user can recognize information about defects in inspection objects other than inspection object OBJ, and can refer to determination of defects in inspection object OBJ.
  • the image display device 16 may be configured to use statistical information to report an abnormality in the judgment result of the judge.
  • the processor 16A calculates the distribution of the judgment results of a plurality of judges for the inspection target image 100, and if the variation in the judgment results for the inspection target image 100 is larger than a first reference, the inspection target image 100 It is displayed on the screen of the display 14 that the variation in judgment is greater than the first standard with respect to the judgment results of a plurality of judges.
  • the variation in determination results includes variation in distribution when the determination results are information for determining good products and defective products, and information for determining types of defects. Further, when the determination result is numerical information of defects, the variation of the determination result includes dispersion and deviation.
  • the determination result of a plurality of judges is greater than the first standard does not mean that all of the plurality of judges have their own problems, but rather that the judgment of the image to be inspected is so difficult that opinions are divided. indicates that it is difficult. Therefore, the display to the effect that the judgment varies may be displayed for each judge's judgment result, or may be displayed for all judgment results.
  • the screen of the display 14 indicates that the judgment result of the specific judge may be an outlier. may be displayed.
  • FIG. 12 is a diagram showing an example of the statistical information 122A displayed on the screen of the display 14.
  • This statistical information 122A is a histogram representing the size distribution of defects included in the area AA determined by a plurality of judges, and the horizontal axis represents S (Small), M (Medium), L (Large), and XL. Four sizes (Extra Large) are shown, and the vertical axis shows the number of judges who judged each size.
  • the processor 16A determines that the judge P's judgment is an outlier, the processor 16A displays a mark 160 indicating an outlier at the XL size position of the histogram as shown in FIG. Furthermore, the processor 16A displays a caution display 162 to the effect that the judgment result of the judge P overestimates the size of the defect.
  • the mark 160 and caution display 162 may be any display that can be recognized by the user.
  • Statistical processing of non-document information may be performed based on the results of judgments made by each judge.
  • the processor 16A statistically processes the non-document information of the interpretation information by weighting the judgment results of each judge based on the judgment results of each of the plurality of judges.
  • the judgment record of each judge may be calculated using statistical information of non-document information of each of the judged images stored in the image database 20 . Defect numerical information, determination confidence, and severity measure statistical information may be calculated as mean, variance, and deviation using values weighted according to the determination performance of each judge.
  • the processor 16A performs the judgment based on the judgment results. Make the weight relatively small. On the other hand, the processor 16A relatively increases the weight of judges whose decision results have been adopted as the final decision results at a high rate, based on their actual decision results. The processor 16A obtains weighted statistical information in statistical processing of non-document information using such a weight for each judge.
  • the processor 16A determines that the variations in the determination results for the image to be inspected 100 are greater than the first reference, and the determination result of the specific judge for the image to be inspected 100 is not correct.
  • the determination results of the plurality of determined images stored in the image database 20 may be assumed to have a normal distribution, and the distribution may be used as a basis for determination.
  • the image display device 16 used in the defect inspection system for non-destructive inspection has been described here, the image display device 16 is not limited to non-destructive inspection, and can be used for inspection and inspection such as various inspection work such as social infrastructure. This is applicable when displaying an image for

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Quality & Reliability (AREA)
  • Geometry (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

複数の判定員による読影情報を総合考慮することで判定の精度を向上することができる画像表示装置、画像表示方法及びプログラムを提供する。検査対象物が撮影された第１の検査対象画像をディスプレイに表示させ、第１の検査対象画像の読影情報が関連付けられた少なくとも１つの領域にマーカを表示させ、選択されたマーカの領域の少なくとも一部を含む領域について拡大処理及び強調処理の少なくとも１つを行った第２の検査対象画像をディスプレイに表示させ、ユーザに選択されたマーカの領域に関連付けられた読影情報の文書情報である第１の情報、及び読影情報の非文書情報を統計処理した統計情報である第２の情報のうちの少なくとも１つをディスプレイに表示させる。

Description

画像表示装置、画像表示方法及びプログラム
　本発明は画像表示装置、画像表示方法及びプログラムに係り、特に検査対象物の画像から検査対象物の欠陥を判定する技術に関する。
　医用画像の読影の際に、画像内の病変位置を２名のユーザにそれぞれ入力させ、病変の有無の判定結果が異なる位置を抽出し、その差分に基づいてそのユーザが他のユーザと異なる判定を行う傾向があると判定される領域を強調表示する装置が記載されている（特許文献１）。
特開２０１２－２２３５０６号公報
　非破壊検査、及び社会インフラ分野における各種点検業務では、判定基準を個別のケースに応じて定める必要がある。このため、複数の読影者による判定結果のすり合わせを行うことにより、判定精度を向上させられる場合がある。また、規格品のように同種の検査対象が多数判定される場合には、過去に判定された結果の集積が有益な場合がある。
　しかしながら、特許文献１に記載の技術では、判定結果を用いて判定精度を向上させることはできなかった。
　本発明はこのような事情に鑑みてなされたもので、複数の判定員による読影情報を総合考慮することで判定の精度を向上することができる画像表示装置、画像表示方法及びプログラムを提供することを目的とする。
　上記目的を達成するための画像表示装置の一の態様は、少なくとも１つのプロセッサと、少なくとも１つのプロセッサに実行させるための命令を記憶する少なくとも１つのメモリと、を備え、少なくとも１つのプロセッサは、第１の検査対象物が撮影された第１の検査対象画像であって、任意の領域に複数の判定員による読影情報が関連付けられた第１の検査対象画像を取得し、第１の検査対象画像をディスプレイに表示させ、かつ第１の検査対象画像の読影情報が関連付けられた少なくとも１つの領域にマーカを表示させ、ユーザによるマーカの選択指示を受け付け、第１の検査対象画像の選択指示されたマーカの領域の少なくとも一部を含む領域について拡大処理及び強調処理の少なくとも１つを行った第２の検査対象画像をディスプレイに表示させ、さらに、選択指示されたマーカの領域に関連付けられた読影情報の文書情報である第１の情報、及び読影情報の非文書情報を統計処理した統計情報である第２の情報のうちの少なくとも１つをディスプレイに表示させる、画像表示装置である。本態様によれば、ユーザは複数の判定員による読影情報を漏れなく考慮することができる。
　文書情報は、複数の判定員によってそれぞれ入力された複数のコメントを含み、少なくとも１つのプロセッサは、複数のコメントを一覧表示させることが好ましい。
　非文書情報は、複数の判定員によってそれぞれ分類された判定結果であって、マーカの領域の欠陥の有無、種別、及び深刻さの少なくとも１つを含む判定結果を含み、非文書情報を統計処理した統計情報は、判定結果ごとの人数分布を含むことが好ましい。
　非文書情報は、複数の判定員によってそれぞれ判定された欠陥の数値情報を含み、非文書情報を統計処理した統計情報は、欠陥の数値情報の平均及び分布のうちの少なくとも１つを含むことが好ましい。
　欠陥の数値情報は、欠陥のサイズ、及び欠陥の密度のうちの少なくとも１つを含むことが好ましい。
　第１の検査対象画像は、読影情報のもととなる判定が行われた際の画像処理の情報を含み、少なくとも１つのプロセッサは、ディスプレイに表示された第１の情報及び第２の情報のうちの少なくとも１つのユーザによる選択指示を受け付け、選択指示された第１の情報又は第２の情報のもととなる判定が行われた際の画像処理を施した第１の検査対象画像をディスプレイに表示させることが好ましい。
　少なくとも１つのプロセッサは、第２の検査対象画像とともに画像処理を施した第１の検査対象画像をディスプレイに表示させることが好ましい。
　少なくとも１つのプロセッサは、第２の検査対象画像に代えて画像処理を施した第１の検査対象画像をディスプレイに表示させることが好ましい。
　画像処理は、画像の拡大率の再現、画像の表示位置の再現、及び画像の見え方のパラメータのうちの少なくとも１つを含み、画像の見え方のパラメータは、画像の明暗、画像のシャープネス、画像のコントラスト、及び画像の階調のうちの少なくとも１つを含むことが好ましい。
　少なくとも１つのプロセッサは、領域に関連付けられた読影情報の修正及び承認のうちの少なくとも１つを受け付け、修正及び承認のうちの少なくとも１つが受け付けられた領域に最終判定済を示すマークを重畳表示させることが好ましい。
　少なくとも１つのプロセッサは、第１の検査対象画像の領域であって、再判定が必要な領域の入力を受け付け、入力された領域に差し戻しを示すマークを重畳表示させることが好ましい。
　少なくとも１つのプロセッサは、第１の検査対象物とは異なる第２の検査対象物が撮影された判定済画像であって、任意の領域に複数の判定員による判定済読影情報が関連付けられた判定済画像の判定済読影情報を取得し、選択指示されたマーカの領域に関連付けられた読影情報と関連する判定済読影情報の文書情報である第３の情報、及び判定済読影情報の非文書情報を統計処理した統計情報である第４の情報のうちの少なくとも１つをディスプレイに表示させることが好ましい。
　第２の検査対象物は、第１の検査対象物と同一規格品であることが好ましい。
　表示された判定済読影情報の文書情報は、選択指示されたマーカの領域に関連付けられた読影情報の文書情報と同一のテキスト、及び同一の欠陥の判定結果であることを示すテキストのうちの少なくとも１つを含むことが好ましい。
　少なくとも１つのプロセッサは、第１の検査対象画像についての複数の判定員の判定結果の分布を算出し、第１の検査対象画像に対する判定結果のばらつきが第１の基準よりも大きい場合に、第１の検査対象画像の複数の判定員の判定結果に対して、判定がばらついている旨をディスプレイに表示させることが好ましい。
　少なくとも１つのプロセッサは、第１の検査対象画像についての複数の判定員の判定結果の分布を算出し、第１の検査対象画像についての特定の判定員の判定結果が外れ値である場合に、特定の判定員の判定結果に対して、外れ値である可能性がある旨をディスプレイに表示させることが好ましい。
　少なくとも１つのプロセッサは、複数の判定員のそれぞれの判定員の判定実績に基づいてそれぞれの判定員の判定結果に重み付けをして読影情報の非文書情報を統計処理することが好ましい。
　上記目的を達成するための画像表示方法の一の態様は、第１の検査対象物が撮影された第１の検査対象画像であって、任意の領域に複数の判定員による読影情報が関連付けられた第１の検査対象画像を取得する検査対象画像取得工程と、第１の検査対象画像をディスプレイに表示させ、かつ第１の検査対象画像の読影情報が関連付けられた少なくとも１つの領域にマーカを表示させる第１の画像表示工程と、ユーザによるマーカの選択指示を受け付ける受付工程と、第１の検査対象画像の選択指示されたマーカの領域の少なくとも一部を含む領域について拡大処理及び強調処理の少なくとも１つを行った第２の検査対象画像をディスプレイに表示させる第２の画像表示工程と、さらに、選択指示されたマーカの領域に関連付けられた読影情報の文書情報である第１の情報、及び読影情報の非文書情報を統計処理した統計情報である第２の情報のうちの少なくとも１つをディスプレイに表示させる読影情報表示工程と、を備える画像表示方法である。本態様によれば、ユーザは複数の判定員による読影情報を漏れなく考慮することができる。
　上記目的を達成するためのプログラムの一の態様は、上記に記載の画像表示方法をコンピュータに実行させるためのプログラムである。このプログラムが記録された、コンピュータが読み取り可能な非一時的記憶媒体も本態様に含んでよい。
　本発明によれば、複数の判定員による読影情報を総合考慮することで判定の精度を向上することができる。
図１は、欠陥検査システムを示すブロック図である。 図２は、撮影システムの一例を示すブロック図である。 図３は、画像表示方法の工程を示すフローチャートである。 図４は、検査対象画像が表示されたディスプレイの画面の一例を示す図である。 図５は、ユーザによるマーカの選択の例を示す図である。 図６は、拡大検査対象画像が表示されたディスプレイの画面の一例を示す図である。 図７は、強調検査対象画像が表示されたディスプレイの画面の一例を示す図である。 図８は、文書情報が選択された場合のディスプレイの画面の一例を示す図である。 図９は、文書情報が選択された場合のディスプレイの画面の一例を示す図である。 図１０は、最終判定済のマークが重畳表示されたディスプレイの画面の一例を示す図である。 図１１は、差し戻しを示すマークが重畳表示されたディスプレイの画面の一例を示す図である。 図１２は、ディスプレイの画面に表示された統計情報の一例を示す図である。
　以下、添付図面に従って本発明の好ましい実施形態について詳説する。
　〔画像表示装置〕
　本実施形態に係る画像表示装置は、非破壊検査の欠陥検査システムに用いられる。欠陥検査システムは、検査対象物である工業製品が撮影された画像からユーザが検査対象物の欠陥を判断するシステムである。ここでは、検査対象物の画像に関連付けられた複数の判定員の読影情報を考慮してユーザが欠陥を判断する例を説明する。ユーザとは読影者であり、複数の判定員のいずれかの人物であってもよいし、判定員以外の人物であってもよい。ここでは、検査対象物の検査対象画像が工業製品の放射線画像である場合について説明するが、他の対象物及び他の読影対象画像であってもよい。また、検査対象物である工業製品は、金属製、樹脂製など、素材は特に限定されず、加工前でも加工後でもよいし、部品でも組み立て品でもよい。
　図１は、本実施形態に係る欠陥検査システム１０を示すブロック図である。図１に示すように、欠陥検査システム１０は、撮影システム１２、ディスプレイ１４、画像表示装置１６、入力装置１８、及び画像データベース２０を備える。
　撮影システム１２は、第１の検査対象物である検査対象物ＯＢＪの画像を撮影するシステムである。撮影システム１２の詳細については後述する。
　ディスプレイ１４は、検査対象物ＯＢＪが撮影された検査対象画像等をユーザに視認させるための表示装置である。ディスプレイ１４は、入力装置１８での操作に必要な画面を表示し、ＧＵＩ（Graphical User Interface）を実現する部分として機能する。
　画像表示装置１６は、撮影システム１２によって撮影された検査対象物ＯＢＪの画像をディスプレイ１４の画面に表示させるための制御装置である。画像表示装置１６は、プロセッサ１６Ａ、及びメモリ１６Ｂを備える。
　プロセッサ１６Ａは、メモリ１６Ｂに記憶された命令を実行する。プロセッサ１６Ａは、複数備えらえてもよい。
　プロセッサ１６Ａのハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウェア（プログラム）を実行して各種の機能部として作用する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）、画像処理に特化したプロセッサであるＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるＰＬＤ（Programmable Logic Device）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
　１つの処理部は、これら各種のプロセッサのうちの１つで構成されていてもよいし、同種又は異種の２つ以上のプロセッサ（例えば、複数のＦＰＧＡ、又はＣＰＵとＦＰＧＡの組み合わせ、あるいはＣＰＵとＧＰＵの組み合わせ）で構成されてもよい。また、複数の機能部を１つのプロセッサで構成してもよい。複数の機能部を１つのプロセッサで構成する例としては、第１に、クライアント又はサーバ等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の機能部として作用させる形態がある。第２に、ＳｏＣ（System On Chip）等に代表されるように、複数の機能部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の機能部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。
　さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路（circuitry）である。
　メモリ１６Ｂは、プロセッサ１６Ａに実行させるための命令を記憶する。メモリ１６Ｂは、不図示のＲＡＭ（Random Access Memory）、及びＲＯＭ（Read Only Memory）を含む。プロセッサ１６Ａは、ＲＡＭを作業領域とし、ＲＯＭに記憶された画像表示プログラムを含む各種のプログラム及びパラメータを使用してソフトウェアを実行し、かつＲＯＭ等に記憶されたパラメータを使用することで、画像表示装置１６の各種の処理を実行する。
　入力装置１８は、ユーザからの操作入力を受け付けるインターフェースである。入力装置１８は、文字入力のためのキーボード、ディスプレイ１４の画面に表示されるポインタ、アイコン等を操作するためのポインティングデバイスを含む。入力装置１８は、ディスプレイ１４と一体化されたタッチパネルディスプレイであってもよい。
　画像データベース２０は、大容量ストレージ装置によって構成される。画像データベース２０には、それぞれ異なる複数の第２の検査対象物がそれぞれ過去に撮影された複数の判定済画像が記憶されている。各判定済画像には、それぞれ任意の領域に複数の判定員による第２の検査対象物の欠陥の判定結果を含む読影情報が関連付けられている。第２の検査対象物は、検査対象物ＯＢＪとは互いに異なる物品である。第２の検査対象物は、例えば検査対象物ＯＢＪと同一規格品であってもよいし、検査対象物ＯＢＪとは異なる形状の物品であってもよい。
　撮影システム１２、画像表示装置１６、及び画像データベース２０は、ネットワークＮＷを介して通信可能に接続される。ネットワークＮＷは、例えばＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）、インターネット接続である。撮影システム１２、画像表示装置１６、及び画像データベース２０は、ＵＳＢ（Universal Serial Bus）ケーブル等により通信可能に接続されてもよいし、赤外線等を使用する近距離無線通信により通信可能に接続されてもよい。撮影システム１２、画像表示装置１６、及び画像データベース２０は、それぞれ着脱及び読取可能な記憶媒体によって画像を含むデータの受け渡しをしてもよい。
　〔撮影システム〕
　図２は、撮影システム１２の一例を示すブロック図である。図２に示すように、撮影システム１２は、撮影室２２、撮影制御部２４、撮影操作部２６、画像記録部２８、放射線検出器３０、及び放射線源３４を備えている。
　撮影室２２は、外部との間の隔壁および出入口に、Ｘ線防護材料（例えば、鉛、コンクリート等）によりＸ線防護が施されている。撮影室２２の内部には、放射線検出器３０、及び放射線源３４の他、撮影対象となる検査対象物ＯＢＪが配置される。
　撮影制御部２４は、撮影システム１２の各部の動作を制御するＣＰＵを含む。撮影制御部２４は、撮影操作部２６を介して撮影者からの操作入力を受け付け、受け付けた操作入力に応じた制御信号を撮影システム１２の各部に送信して各部の動作を制御する。
　撮影操作部２６は、撮影者からの操作入力を受け付ける入力装置である。撮影者は、撮影操作部２６を介して、検査対象物ＯＢＪに関する情報の入力、放射線検出器３０に対する撮影実行の指示の入力（露出時間、焦点距離、絞り等の撮影条件、撮影角度、撮影箇所等の設定を含む）、放射線源３４に対する放射線の照射の指示の入力（照射開始時間、照射継続時間、照射角度、照射強度等の設定を含む）、取得した画像を画像記録部２８に記録する指示の入力を行うことができる。
　画像記録部２８は、放射線検出器３０によって撮影された検査対象物ＯＢＪの画像（受光画像データ）を記録する。画像記録部２８には、検査対象物ＯＢＪを特定するための情報が画像と関連付けられて記録される。
　放射線源３４は、例えば、Ｘ線源である。放射線源３４は、撮影制御部２４からの指示に従って、撮影室２２内の検査対象物ＯＢＪに放射線を照射する。なお、検査対象物ＯＢＪに可視光を照射して撮影を行う場合には、防護を施した撮影室２２を用いる必要はない。
　放射線検出器３０は、撮影制御部２４からの撮影実行の指示に従って、放射線源３４から検査対象物ＯＢＪに照射されて検査対象物ＯＢＪを透過した放射線を受光して検査対象物ＯＢＪを撮影する。検査対象物ＯＢＪは、不図示の保持部材（例えば、マニピュレーター、載置台、可動式の載置台）によって撮影室２２内に保持されており、検査対象物ＯＢＪは、放射線検出器３０、放射線源３４に対する距離および角度が調整可能となっている。操作者は、撮影制御部２４を介して、検査対象物ＯＢＪ、放射線検出器３０、放射線源３４の相対位置を制御可能となっており、検査対象物ＯＢＪの所望の箇所を撮影可能となっている。
　放射線源３４は、放射線検出器３０による撮影の実行の終了に同期して、検査対象物ＯＢＪに対する放射線の照射を終了する。
　なお、図２に示す例では、放射線検出器３０は、撮影室２２の内部に配置されているが、放射線検出器３０は、撮影室２２内の検査対象物ＯＢＪを撮影可能であれば、撮影室２２の外部に配置されていてもよい。
　また、図２に示す例では、放射線検出器３０が１台、放射線源３４が１台設けられているが、放射線検出器および放射線源の台数はこれに限定されるものではない。例えば、放射線検出器および放射線源は、それぞれ複数台あってもよい。
　〔画像表示方法〕
　画像表示装置１６を用いた画像表示方法について説明する。画像表示方法は、プロセッサ１６Ａがメモリ１６Ｂに記憶された画像表示プログラムを実行することで実現される。画像表示プログラムは、コンピュータが読み取り可能な非一時的記憶媒体によって提供されてもよい。この場合、画像表示装置１６は、非一時的記憶媒体から画像表示プログラムを読み取り、メモリ１６Ｂに記憶させてもよい。
　図３は、画像表示方法の工程を示すフローチャートである。本実施形態に係る画像表示方法は、ディスプレイ１４の画面に検査対象物ＯＢＪが撮影された画像とその読影情報を表示させる。
　画像表示装置１６のプロセッサ１６Ａは、検査対象物が撮影された第１の検査対象画像を取得する（ステップＳ１：検査対象画像取得工程の一例）。ここでは、プロセッサ１６Ａは、ネットワークＮＷを介して画像データベース２０から検査対象物ＯＢＪが撮影された検査対象画像１００を取得する。検査対象画像１００は、撮影システム１２において検査対象物ＯＢＪが撮影された画像であり、すでに複数の判定員によって読影が行われた画像である。検査対象画像１００は、任意の領域に複数の判定員による読影情報が予め関連付けられている。
　次に、プロセッサ１６Ａは、取得した第１の検査対象画像をディスプレイに表示させ、かつ第１の検査対象画像の読影情報が関連付けられた少なくとも１つの領域にマーカを表示させる（ステップＳ２：第１の画像表示工程の一例）。
　図４は、検査対象画像１００が表示されたディスプレイ１４の画面の一例を示す図である。図４に示す例では、ディスプレイ１４の画面にはウィンドウＷＡが表示され、ウィンドウＷＡに検査対象画像１００が表示されている。
　ここでは、検査対象画像１００は領域ＡＡ、及び領域ＡＢにそれぞれ読影情報が関連付けられているものとする。また、検査対象画像１００には、読影情報が関連付けられた領域ＡＡにマーカ１０２Ａが、及び領域ＡＢにマーカ１０２Ｂが付与されているものとする。図４に示す例では、マーカ１０２Ａ、及びマーカ１０２Ｂは、それぞれ領域ＡＡ、及び領域ＡＢを囲うバウンディングボックスであるが、マーカ１０２Ａ及び１０２Ｂはバウンディングボックスに限られず、領域ＡＡ、及び領域ＡＢに読影情報が関連付けられていることを認識可能に表示できれば他の形式でもよい。
　なお、第１の検査対象画像は、読影情報が関連付けられた領域にマーカが予め付与されていなくてもよい。この場合、プロセッサ１６Ａは、読影情報が関連付けられた領域にマーカを重畳表示させる。例えば、検査対象画像１００にマーカが付与されていない場合であれば、プロセッサ１６Ａは、ウィンドウＷＡに表示させた検査対象画像１００の領域ＡＡにマーカ１０２Ａを、及び領域ＡＢにマーカ１０２Ｂを重畳表示させればよい。これにより、プロセッサ１６Ａは、第１の検査対象画像にマーカが予め付与されている場合と同様の表示を行うことができる。
　図３の説明に戻り、プロセッサ１６Ａは、ユーザによるマーカの選択指示を受け付ける（ステップＳ３：受付工程の一例）。ユーザは、入力装置１８を用いて、ディスプレイ１４の画面に表示された検査対象画像１００のマーカ１０２Ａ、又はマーカ１０２Ｂを選択指示する。プロセッサ１６Ａは、入力装置１８によって選択指示されたマーカ１０２Ａ、又はマーカ１０２Ｂを受け付ける。
　図５は、ユーザによるマーカの選択指示の例を示す図である。図５に示す１０００及び１００２は、それぞれ不図示のポインティングデバイスを用いてマーカを選択指示する例を示している。１０００に示す例では、ユーザは、所望のマーカ１０２Ｂの位置にカーソル１０４を合わせてクリック操作することで、マーカ１０２Ｂを選択指示している。また、１００２に示す例では、ユーザは、ドラッグ操作によりマーカ１０２Ａを囲む範囲１０６を指定することで、マーカ１０２Ａを選択指示している。
　また、図５に示す１００４は、ディスプレイ１４の画面に表示されるマーカの情報の一覧である。マーカの情報の一覧は、ウィンドウＷＡとは異なるウィンドウに表示されることで、検査対象画像１００とともに表示されてもよい。
　１００４に示すように、マーカの情報は、マーカの色、マーカの位置、及びマーカに関連付けられた領域の欠陥の種類の情報を含んでいる。ここでは、マーカ１０２Ａを赤、マーカ１０２Ｂを青で表示することで、複数のマーカを色によって識別しているが、マーカの区別は色以外の情報であってもよい。マーカの情報は、マーカに関連付けられた領域の欠陥の代表的な判定結果を含んでもよい。マーカの情報は、それぞれのマーカを識別するのに足りる程度の情報を含めばよい。
　ユーザは、入力装置１８を用いてマーカの情報の一覧から所望のマーカの情報を選択することで、その情報のマーカを選択指示することができる。
　なお、マーカの情報とカーソル１０４とを連動させてもよい。例えば、画像上のカーソル１０４の位置に最も近いマーカに対応するマーカの情報のみが表示されてもよいし、マーカの情報の一覧のうち画像上のカーソル１０４の位置に最も近いマーカに対応するマーカの情報が強調されて表示されてもよい。
　ここでは、プロセッサ１６Ａは、ユーザによるマーカ１０２Ａの選択指示を受け付けたものとする。
　再び図３の説明に戻り、ユーザによるマーカの選択指示を受け付けると、プロセッサ１６Ａは、第１の検査対象画像の選択されたマーカの領域の少なくとも一部を含む領域について拡大処理及び強調処理の少なくとも１つを行った第２の検査対象画像をディスプレイに表示させる（ステップＳ４：第２の画像表示工程の一例）。
　さらに、プロセッサ１６Ａは、選択されたマーカの領域に関連付けられた読影情報の文書情報である第１の情報、及び読影情報の非文書情報を統計処理した統計情報である第２の情報のうちの少なくとも１つをディスプレイに表示させる（ステップＳ５：読影情報表示工程の一例）。文書情報、及び非文書情報については後述する。以上で本フローチャートの処理が終了する。
　ステップＳ３においてユーザによるマーカ１０２Ａの選択指示を受け付けたため、プロセッサ１６Ａは、検査対象画像１００の領域ＡＡの少なくとも一部を含む領域について拡大処理及び強調処理の少なくとも１つを行った第２の検査対象画像を生成する。領域ＡＡと拡大処理及び強調処理の少なくとも１つの処理を行う領域とは必ずしも一致する必要はなく、領域ＡＡの周辺の領域を含めて処理を行ってもよいし、領域ＡＡの一部の領域に処理を行ってもよい。ここでは、プロセッサ１６Ａは、第２の検査対象画像として領域ＡＡの一部を所定の拡大率で拡大した拡大検査対象画像１１０を生成し、生成した拡大検査対象画像１１０をディスプレイ１４の画面に表示させる。
　図６は、拡大検査対象画像１１０が表示されたディスプレイ１４の画面の一例を示す図である。図６に示す例では、ウィンドウＷＡに拡大検査対象画像１１０が表示されている。図６のウィンドウＷＡに表示された拡大検査対象画像１１０は、図４のウィンドウＷＡに表示された検査対象画像１００に対して領域ＡＡが所定の拡大率で拡大されている。このように、検査対象物ＯＢＪ全体の表示から領域ＡＡを拡大した表示に移行することで、領域ＡＡはより解像度が高く、詳細まで表示されるので、ユーザは領域ＡＡについて詳細に視認することができる。
　また、ステップＳ３においてユーザによるマーカ１０２Ａの選択指示を受け付けたため、プロセッサ１６Ａは、領域ＡＡに関連付けられた読影情報を画像データベース２０から読み出す。読影情報は、検査対象画像１００のメタデータとして検査対象画像１００が有していてもよい。
　読影情報は、文書情報を含む。文書情報は、複数の判定員によってそれぞれ入力された複数のコメントを含む。入力されたコメントとは、例えば「拡大時に欠陥が多数確認されたため」のように、判定の根拠を含んでもよい。ここでは、領域ＡＡには、読影情報の文書情報として、検査対象画像１００の判定を行った判定員Ａの文書情報１２０Ａ、判定員Ｂの文書情報１２０Ｂ、及び判定員Ｃの文書情報１２０Ｃが少なくとも関連付けられているものとする。したがって、プロセッサ１６Ａは、少なくとも文書情報１２０Ａ、１２０Ｂ、及び１２０Ｃを第１の情報としてディスプレイ１４に一覧表示させる。図６に示す例では、ウィンドウＷＢに文書情報１２０Ａ、１２０Ｂ、及び１２０Ｃが表示されている。
　また、読影情報は、非文書情報を含む。非文書情報は、複数の判定員によって判定された欠陥の判定結果、又は欠陥の数値情報を含む。ここでは、領域ＡＡには、読影情報の非文書情報が関連付けられているものとする。したがって、プロセッサ１６Ａは、非文書情報を統計処理し、統計処理した統計情報１２２Ａを第２の情報としてディスプレイ１４の画面に表示させる。図６に示す例では、ウィンドウＷＢに統計情報１２２Ａが表示されている。
　このように、拡大検査対象画像１１０に加えて、文書情報１２０Ａ、１２０Ｂ、及び１２０Ｃと統計情報１２２Ａとをディスプレイ１４の画面に表示させることで、ユーザは領域ＡＡの情報を漏れなく確認することができ、複数の判定員による読影情報を漏れなく考慮することができる。
　また、プロセッサ１６Ａは、ウィンドウＷＢにスクロールバー１３０、及びスライダ１３２を表示させている。ユーザは、入力装置１８を用いてスライダ１３２をスクロールバー１３０に沿って上下方向に移動させることができ、プロセッサ１６Ａは、ウィンドウＷＢ内に上下方向に並べて配置した第１の情報及び第２の情報をスライダ１３２の位置に応じてディスプレイ１４の画面に表示させる。このように、第１の情報及び第２の情報の全てをディスプレイ１４に一度に表示できない場合であっても、第１の情報及び第２の情報を漏れなくディスプレイ１４の画面に表示することができる。したがって、ユーザは、複数の判定員による読影情報を漏れなく確認し、考慮することができる。
　ここでは、プロセッサ１６Ａは、検査対象画像１００に代えて拡大検査対象画像１１０を表示させたが、検査対象画像１００を表示させたウィンドウＷＡとは異なるウィンドウに拡大検査対象画像１１０を表示させ、検査対象画像１００、及び拡大検査対象画像１１０の両方の画像を同時に表示させてもよい。
　〔強調処理〕
　図６に示した例では、プロセッサ１６Ａは、第２の検査対象画像として領域ＡＡの一部を拡大した拡大検査対象画像１１０をディスプレイ１４の画面に表示させたが、第２の検査対象画像として領域ＡＡの強調処理を行った強調検査対象画像をディスプレイ１４の画面に表示させてもよい。
　図７は、領域ＡＡの強調処理を行った強調検査対象画像１４０が表示されたディスプレイ１４の画面の一例を示す図である。図７に示す例では、ウィンドウＷＡに強調検査対象画像１４０が表示されている。
　ここでは、プロセッサ１６Ａは、検査対象画像１００の全体の階調を変更することで強調検査対象画像１４０を生成している。領域ＡＡの強調処理は、階調変更処理に限定されず、シャープネス変更処理、及び輝度変更処理等であってもよい。また、プロセッサ１６Ａは、領域ＡＡの少なくとも一部の領域に強調処理を行えばよい。強調検査対象画像１４０には、マーカ１０２Ａ、及びマーカ１０２Ｂが表示されてもよい。
　また、プロセッサ１６Ａは、第２の検査対象画像として領域ＡＡの拡大処理、及び強調処理の両方の処理を行った拡大強調検査対象画像を生成してディスプレイ１４の画面に表示させてもよい。
　〔非文書情報・統計情報〕
　統計とは、「集団における個々の要素の分布を調べ、その集団の傾向・性質などを数量的に統一的に明らかにすること。また、その結果として得られた数値。」のことである。非文書情報を統計処理した統計情報は、一般に「統計量」と表現されるものを含む。
　非文書情報は、複数の判定員によってそれぞれ分類された欠陥の判定結果であって、例えばマーカの領域の欠陥の有無、種別、及び深刻さの少なくとも１つを含む。また、欠陥の判定結果の統計情報は、判定結果ごとの人数分布であってもよい。人数分布は、ヒストグラム、判定ごとの選択率、円グラフ、棒グラフのいずれを用いて示してもよい。
　また、非文書情報は、複数の判定員によってそれぞれ判定された欠陥の数値情報であってもよいし、判定の確信度、及び深刻さの尺度であってもよい。欠陥の数値情報は、欠陥のサイズ（面積）であってもよいし、個々の欠陥の単純なサイズではなく、密集して発生する欠陥の集団としての密度であってもよいし、欠陥の位置座標（重心位置、バウンディングボックスの位置）であってもよい。また、欠陥の数値情報は、領域に予め付与されたマーカ、あるいは新たに付与したバウンディングボックスである外接矩形の対角線長であってもよい。また、回転を考慮した外接矩形の対角線長、又は楕円フィッティングした際の図形パラメータであってもよい。回転を考慮した外接矩形の対角線長は、欠陥の形状が細長いもの及び丸いものを区別することを可能とする。
　欠陥の数値情報、判定の確信度、及び深刻さの尺度の統計情報は、それらの平均、分散、偏差、最大最小、及びヒストグラムの少なくとも１つであってもよい。平均は、単純平均、重み付き平均、及び外れ値を除外した平均のいずれであってもよい。重み付き平均は、判定員ごとの重みを用いてもよい。
　〔読影情報が作成された際の画像の表示〕
　プロセッサ１６Ａは、読影情報が作成された際の画像をディスプレイ１４の画面に表示させてもよい。例えば、検査対象画像１００は、領域ＡＡに関連付けられた読影情報のもととなる判定が行われた際の画像処理の情報を含み、プロセッサ１６Ａは、ディスプレイ１４の画面に表示された文書情報１２０Ａ、文書情報１２０Ｂ、文書情報１２０Ｃ、及び統計情報１２２Ａのうちの少なくとも１つのユーザによる選択指示を受け付け、選択された情報のもととなる判定が行われた際の画像処理を検査対象画像１００に施し、ディスプレイ１４の画面に表示させる。
　ここで、画像処理の情報は、画像の拡大率（表示される大きさ）の再現、画像の表示位置の再現、及び画像の見え方のパラメータのうちの少なくとも１つを含む。画像の見え方のパラメータは、画像の明暗、画像のシャープネス、画像のコントラスト、及び画像の階調のうちの少なくとも１つを含む。
　図８は、図６に示した状態において、ユーザが入力装置１８によって文書情報１２０Ａを選択した場合のディスプレイ１４の画面の一例を示す図である。文書情報１２０Ａが選択されると、プロセッサ１６Ａは、検査対象画像１００から判定員Ａが文書情報１２０Ａを作成した際の画像処理の情報を画像データベース２０から取得し、取得した画像処理を検査対象画像１００に施して文書作成時画像１５０を生成し、ディスプレイ１４の画面に表示させる。判定員Ａが文書情報１２０Ａを作成した際の画像処理の情報は、検査対象画像１００のメタデータとして検査対象画像１００が有していてもよい。
　図８に示すように、プロセッサ１６Ａは、選択された文書情報１２０Ａの枠の線をその他の読影情報の枠の線よりも太く表示させる。また、プロセッサ１６Ａは、拡大検査対象画像１１０に代えて、判定員Ａが文書情報１２０Ａを作成した際に用いた領域ＡＡの画像である文書作成時画像１５０をウィンドウＷＡに表示させる。また、プロセッサ１６Ａは、文書作成時画像１５０を表示させている際のウィンドウＷＡの枠を、拡大検査対象画像１１０を表示させているウィンドウＷＡの枠よりも太く表示させる。ここでは枠の線を太く表示させているが、文書情報１２０Ａと文書作成時画像１５０とが対応していることが識別できればよい。例えば、文書情報１２０Ａの枠の線の色と、ウィンドウＷＡの枠、及びメニューバーの少なくとも１つの色とを同じ色に表示させるなどの表示方法でもよい。
　このような画面表示を行うことで、ユーザは、文書情報、及び非文書情報作成時に表示されている画像を視認することができる。
　なお、文書作成時画像１５０は、拡大検査対象画像１１０と比較可能なように並べて配置されてもよい。図９は、図６に示した状態において、ユーザが入力装置１８によって文書情報１２０Ａを選択した場合のディスプレイ１４を示す図であり、拡大検査対象画像１１０と文書作成時画像１５０とを別ウィンドウに同時に表示させた場合の図である。図９に示す例では、ウィンドウＷＡに拡大検査対象画像１１０が表示され、別のウィンドウＷＣに文書作成時画像１５０が表示されている。
　このような画面表示を行うことで、ユーザは、文書情報、及び非文書情報作成時に表示されている画像を視認することができるとともに、拡大検査対象画像１１０と文書作成時画像１５０とを比較することができる。
　〔承認と差し戻し〕
　ユーザが読影情報を承認可能に構成してもよいし、承認前に読影情報の修正を可能に構成してもよい。例えば、プロセッサ１６Ａは、領域ＡＡに関連付けられた読影情報である文書情報１２０Ａ、文書情報１２０Ｂ、文書情報１２０Ｃ、及び統計情報１２２Ａの少なくとも１つの情報の修正及び承認のうちの少なくとも１つを受け付け、修正及び承認のうちの少なくとも１つが受け付けられた領域ＡＡに最終判定済を示すマークを重畳表示させる。ユーザは、入力装置１８を用いて文書情報１２０Ａ等の修正、及び承認を行うことができる。
　図１０は、最終判定済のマークが重畳表示されたディスプレイ１４の画面の一例を示す図である。図１０に示す例では、最終判定済のマークとして、マーカ１０２Ａの内部が塗りつぶされている。このように表示させることで、ユーザは最終判定が行われた領域を認識することができる。
　また、ユーザが読影の差し戻しを可能に構成してもよい。例えば、プロセッサ１６Ａは、検査対象画像１００の領域ＡＡであって、再判定が必要な領域ＡＡの入力を受け付け、入力された領域ＡＡに差し戻しを示すマークを重畳表示させる。ユーザは、入力装置１８を用いて再判定の入力を行うことができる。
　図１１は、差し戻しを示すマークが重畳表示されたディスプレイ１４の画面の一例を示す図である。図１１に示す例では、差し戻しを示すマークとして、マーカ１０２Ａのバウンディングボックスが２重に表示されている。このように表示させることで、ユーザは再読影すべき領域を認識することができる。
　ここでは、最終判定済のマーク、及び差し戻しを示すマークは領域ＡＡに重畳表示されたが、プロセッサ１６Ａは、最終判定済のマーク、及び差し戻しを示すマークを検査対象画像１００に付与して画像データベース２０に記憶させてもよい。
　〔検査対象画像以外の情報〕
　ディスプレイ１４の画面に表示される文書情報、及び統計情報は、検査対象画像１００の文書情報である第１の情報、及び非文書情報の統計情報である第２の情報に限られず、検査対象画像１００以外の過去の判定済画像の情報であってもよい。
　例えば、プロセッサ１６Ａは、第１の検査対象物である検査対象物ＯＢＪとは異なる第２の検査対象物が撮影された判定済画像であって、任意の領域に複数の判定員による判定済読影情報が関連付けられた判定済画像の判定済読影情報を取得し、選択されたマーカ１０２Ａの領域ＡＡに関連付けられた読影情報と関連する判定済読影情報の文書情報である第３の情報、及び判定済読影情報の非文書情報を統計処理した統計情報である第４の情報の少なくとも１つをディスプレイ１４の画面に表示させる。一例として、図６で示したディスプレイ１４の画面において、文書情報１２０Ｂに代えて判定済画像の文書情報を表示する。
　第２の検査対象物は、検査対象物ＯＢＪと同一規格品であってもよい。また、第３の情報は、選択されたマーカ１０２Ａの領域ＡＡに関連付けられた読影情報の文書情報と同一のテキスト、及び同一の欠陥の判定結果であることを示すテキストのうちの少なくとも１つを含んでもよい。
　このように表示させることで、ユーザは検査対象物ＯＢＪ以外の検査対象物の欠陥の情報を認識することができ、検査対象物ＯＢＪの欠陥の判断の参考にすることができる。
　〔判定結果の異常の報知〕
　画像表示装置１６は、統計情報を用いて判定員の判定結果の異常を報知する構成としてもよい。例えば、プロセッサ１６Ａは、検査対象画像１００についての複数の判定員の判定結果の分布を算出し、検査対象画像１００に対する判定結果のばらつきが第１の基準よりも大きい場合に、検査対象画像１００の複数の判定員の判定結果に対して、判定のばらつきが第１の基準よりも大きい旨をディスプレイ１４の画面に表示させる。
　ここで、判定結果のばらつきとは、判定結果が良品及び不良品の判断情報、及び欠陥の種類の判断情報である場合は、分布のばらつきを含む。また、判定結果のばらつきとは、判定結果が欠陥の数値情報である場合は、分散、及び偏差を含む。
　なお、複数の判定員の判定結果が第１の基準よりも大きい場合とは、複数の判定員の全ての判定員にそれぞれ問題があるということではなく、意見が割れるほど検査対象画像の判定が困難であるということを示している。したがって、判定がばらついている旨の表示は、各判定員の判定結果についてそれぞれ行ってもよいが、判定結果全体に対して１つ表示してもよい。
　また、検査対象画像１００についての特定の判定員の判定結果が外れ値である場合に、その特定の判定員の判定結果に対して、外れ値である可能性がある旨をディスプレイ１４の画面に表示させてもよい。
　図１２は、ディスプレイ１４の画面に表示された統計情報１２２Ａの一例を示す図である。この統計情報１２２Ａは、複数の判定員により判定された領域ＡＡに含まれる欠陥のサイズの分布を表すヒストグラムであり、横軸はＳ（Small）、Ｍ（Medium）、Ｌ（Large）、及びＸＬ（Extra Large）の４種類のサイズを示し、縦軸は各サイズに判定した判定員の人数を示す。
　ここでは、判定員ＰのみがサイズをＸＬとして判定しているものとする。プロセッサ１６Ａは、判定員Ｐの判定が外れ値であると判断すると、図１２に示すように、ヒストグラムのＸＬサイズの位置に外れ値を示すマーク１６０を表示させる。さらに、プロセッサ１６Ａは、判定員Ｐの判定結果は欠陥のサイズを過大評価している旨の注意表示１６２を表示させる。マーク１６０、及び注意表示１６２は、ユーザが認識可能であればどのような表示であってもよい。
　〔判定員の重み付け〕
　非文書情報の統計処理は、各判定員の判定実績に基づいて行われてもよい。例えば、プロセッサ１６Ａは、複数の判定員のそれぞれの判定員の判定実績に基づいてそれぞれの判定員の判定結果に重み付けをして読影情報の非文書情報を統計処理する。各判定員の判定実績は、画像データベース２０に記憶された複数の判定済画像のそれぞれの非文書情報の統計情報を用いて算出されてもよい。欠陥の数値情報、判定の確信度、及び深刻さの尺度の統計情報は、各判定員の判定実績に応じて重み付けした値を用いて平均、分散、及び偏差を算出されてもよい。
　判定済画像に対する判定結果のばらつきが第１の基準よりも大きい判定を行った判定員、及び判定結果が外れ値である判定を行った判定員については、プロセッサ１６Ａは、この判定実績に基づいて重みを相対的に小さくする。一方、判定結果が最終的な判定結果として採用された割合が高い判定員については、プロセッサ１６Ａは、この判定実績に基づいて重みを相対的に大きくする。プロセッサ１６Ａは、このような判定員ごとの重みを用いて、非文書情報の統計処理において、重み付きの統計情報を取得する。
　また、プロセッサ１６Ａは、図１２を用いて説明した、検査対象画像１００に対する判定結果のばらつきが第１の基準よりも大きいという判定、及び検査対象画像１００についての特定の判定員の判定結果が外れ値であるという判定について、画像データベース２０に記憶された複数の判定済画像の判定結果を正常な分布と仮定し、その分布を根拠に判定してもよい。
　〔その他〕
　ここでは非破壊検査の欠陥検査システムに用いられる画像表示装置１６について説明したが、画像表示装置１６は、非破壊検査に限定されず、社会インフラ等の各種点検業務のような、検査用及び点検用の画像を表示する場合に適用可能である。
　本発明の技術的範囲は、上記の実施形態に記載の範囲には限定されない。各実施形態における構成等は、本発明の趣旨を逸脱しない範囲で、各実施形態間で適宜組み合わせることができる。
１０…欠陥検査システム
１２…撮影システム
１４…ディスプレイ
１６…画像表示装置
１６Ａ…プロセッサ
１６Ｂ…メモリ
１８…入力装置
２０…画像データベース
２２…撮影室
２４…撮影制御部
２６…撮影操作部
２８…画像記録部
３０…放射線検出器
３４…放射線源
１００…検査対象画像
１０２Ａ…マーカ
１０２Ｂ…マーカ
１０４…カーソル
１０６…範囲
１１０…拡大検査対象画像
１２０Ａ…文書情報
１２０Ｂ…文書情報
１２０Ｃ…文書情報
１２２Ａ…統計情報
１３０…スクロールバー
１３２…スライダ
１４０…強調検査対象画像
１５０…文書作成時画像
１６０…マーク
１６２…注意表示
ＡＡ…領域
ＡＢ…領域
ＮＷ…ネットワーク
ＯＢＪ…検査対象物
Ｓ１～Ｓ５…画像表示方法の各ステップ
ＷＡ、ＷＢ、ＷＣ…ウィンドウ

Claims (20)

  1. 　少なくとも１つのプロセッサと、
    　前記少なくとも１つのプロセッサに実行させるための命令を記憶する少なくとも１つのメモリと、
    　を備え、
    　前記少なくとも１つのプロセッサは、
    　第１の検査対象物が撮影された第１の検査対象画像であって、任意の領域に複数の判定員による読影情報が関連付けられた第１の検査対象画像を取得し、
    　前記第１の検査対象画像をディスプレイに表示させ、かつ前記第１の検査対象画像の前記読影情報が関連付けられた少なくとも１つの領域にマーカを表示させ、
    　ユーザによる前記マーカの選択指示を受け付け、
    　前記第１の検査対象画像の前記選択指示されたマーカの領域の少なくとも一部を含む領域について拡大処理及び強調処理の少なくとも１つを行った第２の検査対象画像を前記ディスプレイに表示させ、
    　さらに、前記選択指示されたマーカの領域に関連付けられた前記読影情報の文書情報である第１の情報、及び前記読影情報の非文書情報を統計処理した統計情報である第２の情報のうちの少なくとも１つを前記ディスプレイに表示させる、
    　画像表示装置。
  2. 　前記文書情報は、前記複数の判定員によってそれぞれ入力された複数のコメントを含み、
    　前記少なくとも１つのプロセッサは、前記複数のコメントを一覧表示させる、
    　請求項１に記載の画像表示装置。
  3. 　前記非文書情報は、前記複数の判定員によってそれぞれ分類された判定結果であって、前記マーカの領域の欠陥の有無、種別、及び深刻さの少なくとも１つを含む判定結果を含み、
    　前記非文書情報を統計処理した統計情報は、前記判定結果ごとの人数分布を含む、
    　請求項１又は２に記載の画像表示装置。
  4. 　前記非文書情報は、前記複数の判定員によってそれぞれ判定された欠陥の数値情報を含み、
    　前記非文書情報を統計処理した統計情報は、前記欠陥の数値情報の平均及び分布のうちの少なくとも１つを含む、
    　請求項１から３のいずれか１項に記載の画像表示装置。
  5. 　前記欠陥の数値情報は、欠陥のサイズ、及び欠陥の密度のうちの少なくとも１つを含む、
    　請求項４に記載の画像表示装置。
  6. 　前記第１の検査対象画像は、前記読影情報のもととなる判定が行われた際の画像処理の情報を含み、
    　前記少なくとも１つのプロセッサは、
    　前記ディスプレイに表示された前記第１の情報及び前記第２の情報のうちの少なくとも１つのユーザによる選択指示を受け付け、
    　前記選択指示された前記第１の情報又は前記第２の情報のもととなる判定が行われた際の前記画像処理を施した前記第１の検査対象画像を前記ディスプレイに表示させる、
    　請求項１から５のいずれか１項に記載の画像表示装置。
  7. 　前記少なくとも１つのプロセッサは、
    　前記第２の検査対象画像とともに前記画像処理を施した前記第１の検査対象画像を前記ディスプレイに表示させる、
    　請求項６に記載の画像表示装置。
  8. 　前記少なくとも１つのプロセッサは、
    　前記第２の検査対象画像に代えて前記画像処理を施した前記第１の検査対象画像を前記ディスプレイに表示させる、
    　請求項６に記載の画像表示装置。
  9. 　前記画像処理は、画像の拡大率の再現、画像の表示位置の再現、及び画像の見え方のパラメータのうちの少なくとも１つを含み、
    　前記画像の見え方のパラメータは、画像の明暗、画像のシャープネス、画像のコントラスト、及び画像の階調のうちの少なくとも１つを含む、
    　請求項６から８のいずれか１項に記載の画像表示装置。
  10. 　前記少なくとも１つのプロセッサは、
    　前記領域に関連付けられた前記読影情報の修正及び承認のうちの少なくとも１つを受け付け、
    　前記修正及び承認のうちの少なくとも１つが受け付けられた領域に最終判定済を示すマークを重畳表示させる、
    　請求項１から９のいずれか１項に記載の画像表示装置。
  11. 　前記少なくとも１つのプロセッサは、
    　前記第１の検査対象画像の領域であって、再判定が必要な領域の入力を受け付け、
    　前記入力された領域に差し戻しを示すマークを重畳表示させる、
    　請求項１から１０のいずれか１項に記載の画像表示装置。
  12. 　前記少なくとも１つのプロセッサは、
    　前記第１の検査対象物とは異なる第２の検査対象物が撮影された判定済画像であって、任意の領域に複数の判定員による判定済読影情報が関連付けられた判定済画像の前記判定済読影情報を取得し、
    　前記選択指示されたマーカの領域に関連付けられた前記読影情報と関連する前記判定済読影情報の文書情報である第３の情報、及び前記判定済読影情報の非文書情報を統計処理した統計情報である第４の情報のうちの少なくとも１つを前記ディスプレイに表示させる、
    　請求項１から１１のいずれか１項に記載の画像表示装置。
  13. 　前記第２の検査対象物は、前記第１の検査対象物と同一規格品である、
    　請求項１２に記載の画像表示装置。
  14. 　前記表示された前記判定済読影情報の前記文書情報は、前記選択指示されたマーカの領域に関連付けられた前記読影情報の前記文書情報と同一のテキスト、及び同一の欠陥の判定結果であることを示すテキストのうちの少なくとも１つを含む、
    　請求項１２又は１３に記載の画像表示装置。
  15. 　前記少なくとも１つのプロセッサは、
    　前記第１の検査対象画像についての前記複数の判定員の判定結果の分布を算出し、
    　前記第１の検査対象画像に対する判定結果のばらつきが第１の基準よりも大きい場合に、前記第１の検査対象画像の前記複数の判定員の判定結果に対して、判定がばらついている旨を前記ディスプレイに表示させる、
    　請求項１から１４のいずれか１項に記載の画像表示装置。
  16. 　前記少なくとも１つのプロセッサは、
    　前記第１の検査対象画像についての前記複数の判定員の判定結果の分布を算出し、
    　前記第１の検査対象画像についての特定の判定員の判定結果が外れ値である場合に、前記特定の判定員の判定結果に対して、外れ値である可能性がある旨を前記ディスプレイに表示させる、
    　請求項１から１５のいずれか１項に記載の画像表示装置。
  17. 　前記少なくとも１つのプロセッサは、
    　前記複数の判定員のそれぞれの判定員の判定実績に基づいて前記それぞれの判定員の判定結果に重み付けをして前記読影情報の非文書情報を統計処理する、
    　請求項１５又は１６に記載の画像表示装置。
  18. 　第１の検査対象物が撮影された第１の検査対象画像であって、任意の領域に複数の判定員による読影情報が関連付けられた第１の検査対象画像を取得する検査対象画像取得工程と、
    　前記第１の検査対象画像をディスプレイに表示させ、かつ前記第１の検査対象画像の前記読影情報が関連付けられた少なくとも１つの領域にマーカを表示させる第１の画像表示工程と、
    　ユーザによる前記マーカの選択指示を受け付ける受付工程と、
    　前記第１の検査対象画像の前記選択指示されたマーカの領域の少なくとも一部を含む領域について拡大処理及び強調処理の少なくとも１つを行った第２の検査対象画像を前記ディスプレイに表示させる第２の画像表示工程と、
    　さらに、前記選択指示されたマーカの領域に関連付けられた前記読影情報の文書情報である第１の情報、及び前記読影情報の非文書情報を統計処理した統計情報である第２の情報のうちの少なくとも１つを前記ディスプレイに表示させる読影情報表示工程と、
    　を備える画像表示方法。
  19. 　請求項１８に記載の画像表示方法をコンピュータに実行させるためのプログラム。
  20. 　非一時的かつコンピュータ読取可能な記録媒体であって、請求項１９に記載のプログラムが記録された記録媒体。
PCT/JP2022/007787 2021-02-26 2022-02-25 画像表示装置、画像表示方法及びプログラム WO2022181747A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
EP22759781.2A EP4300085A4 (en) 2021-02-26 2022-02-25 IMAGE DISPLAY DEVICE AND METHOD, AND PROGRAM
JP2023502524A JPWO2022181747A1 (ja) 2021-02-26 2022-02-25
CN202280017016.6A CN116888461A (zh) 2021-02-26 2022-02-25 图像显示装置、图像显示方法及程序
US18/454,756 US20230394648A1 (en) 2021-02-26 2023-08-23 Image display device, image display method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021-031134 2021-02-26
JP2021031134 2021-02-26

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US18/454,756 Continuation US20230394648A1 (en) 2021-02-26 2023-08-23 Image display device, image display method, and program

Publications (1)

Publication Number Publication Date
WO2022181747A1 true WO2022181747A1 (ja) 2022-09-01

Family

ID=83049140

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/007787 WO2022181747A1 (ja) 2021-02-26 2022-02-25 画像表示装置、画像表示方法及びプログラム

Country Status (5)

Country Link
US (1) US20230394648A1 (ja)
EP (1) EP4300085A4 (ja)
JP (1) JPWO2022181747A1 (ja)
CN (1) CN116888461A (ja)
WO (1) WO2022181747A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009060945A (ja) * 2007-09-04 2009-03-26 Fujifilm Corp 読影レポートシステム、読影レポート作成装置、読影レポート表示装置、読影レポート表示方法、及び読影レポートプログラム
JP2012223506A (ja) 2011-04-22 2012-11-15 Canon Inc 読影支援システム及び読影支援方法
WO2016189764A1 (ja) * 2015-05-26 2016-12-01 三菱電機株式会社 検出装置および検出方法
JP2019053050A (ja) * 2017-09-13 2019-04-04 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
JP2020060875A (ja) * 2018-10-05 2020-04-16 富士通株式会社 生成プログラム、生成方法、および、生成装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6767490B2 (ja) * 2016-08-18 2020-10-14 富士フイルム株式会社 欠陥検査装置、欠陥検査方法、およびプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009060945A (ja) * 2007-09-04 2009-03-26 Fujifilm Corp 読影レポートシステム、読影レポート作成装置、読影レポート表示装置、読影レポート表示方法、及び読影レポートプログラム
JP2012223506A (ja) 2011-04-22 2012-11-15 Canon Inc 読影支援システム及び読影支援方法
WO2016189764A1 (ja) * 2015-05-26 2016-12-01 三菱電機株式会社 検出装置および検出方法
JP2019053050A (ja) * 2017-09-13 2019-04-04 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
JP2020060875A (ja) * 2018-10-05 2020-04-16 富士通株式会社 生成プログラム、生成方法、および、生成装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4300085A4

Also Published As

Publication number Publication date
CN116888461A (zh) 2023-10-13
JPWO2022181747A1 (ja) 2022-09-01
EP4300085A4 (en) 2024-08-21
US20230394648A1 (en) 2023-12-07
EP4300085A1 (en) 2024-01-03

Similar Documents

Publication Publication Date Title
JP6810505B2 (ja) 教師データ作成方法及び装置並びに欠陥検査方法及び装置
US7133546B2 (en) Digital medical image analysis
JP6767490B2 (ja) 欠陥検査装置、欠陥検査方法、およびプログラム
WO2020003917A1 (ja) 欠陥表示装置及び方法
JP6556266B2 (ja) 欠陥検査装置、方法およびプログラム
JP6078234B2 (ja) 荷電粒子線装置
KR102249836B1 (ko) 투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 컴퓨터 판독 가능한 저장 매체
TWI813871B (zh) 圖像處理程式、圖像處理裝置及圖像處理方法
JP2013103023A (ja) 画像診断支援装置および画像診断支援方法
JP6832921B2 (ja) 粒子分析装置、及び、粒子分析システム
JP4748991B2 (ja) 医用画像診断支援装置
WO2022181747A1 (ja) 画像表示装置、画像表示方法及びプログラム
WO2016121009A1 (ja) 荷電粒子線装置
WO2021044532A1 (ja) 荷電粒子線装置
WO2022181746A1 (ja) 画像表示装置、画像表示方法及びプログラム
WO2023053727A1 (ja) 画像処理装置、処理システム、画像表示方法及びプログラム
JP7047643B2 (ja) 画像処理装置、放射線撮影システム、画像処理プログラム及び画像処理方法
KR102415928B1 (ko) 투과영상 기반의 비파괴검사 방법
WO2023112497A1 (ja) 情報処理装置、情報処理方法、プログラム及び記録媒体
KR20220093078A (ko) 비파괴검사 방법
KR20150093959A (ko) 영역 지정에 따른 지능형 판정 기준의 자동 설정 방법 및 그에 의한 스마트 학습 방식의 엑스레이 검사 방법
CN118541599A (zh) 信息处理装置、信息处理方法及信息处理程序

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22759781

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2023502524

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 202280017016.6

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 2022759781

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2022759781

Country of ref document: EP

Effective date: 20230926