WO2023170788A1 - 補助具、撮影装置、プログラム及び方法 - Google Patents

補助具、撮影装置、プログラム及び方法 Download PDF

Info

Publication number
WO2023170788A1
WO2023170788A1 PCT/JP2022/010014 JP2022010014W WO2023170788A1 WO 2023170788 A1 WO2023170788 A1 WO 2023170788A1 JP 2022010014 W JP2022010014 W JP 2022010014W WO 2023170788 A1 WO2023170788 A1 WO 2023170788A1
Authority
WO
WIPO (PCT)
Prior art keywords
main body
auxiliary tool
oral cavity
cover
imaging device
Prior art date
Application number
PCT/JP2022/010014
Other languages
English (en)
French (fr)
Inventor
秋穂 佐久間
卓志 安見
渉 ▲高▼橋
Original Assignee
アイリス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アイリス株式会社 filed Critical アイリス株式会社
Priority to PCT/JP2022/010014 priority Critical patent/WO2023170788A1/ja
Publication of WO2023170788A1 publication Critical patent/WO2023170788A1/ja

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/24Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the mouth, i.e. stomatoscopes, e.g. with tongue depressors; Instruments for opening or keeping open the mouth

Definitions

  • the present disclosure relates to an auxiliary tool suitable for photographing a subject's oral cavity that assists in photographing, a photographing device, a program, and a method for photographing the inside of the oral cavity using the auxiliary tool.
  • Non-Patent Document 1 reports that lymphoid follicles appearing in the deepest part of the pharynx located in the oral cavity have a pattern unique to influenza. Lymphoid follicles with this unique pattern are called influenza follicles, which are a characteristic sign of influenza and appear about two hours after the onset of symptoms.
  • influenza follicles which are a characteristic sign of influenza and appear about two hours after the onset of symptoms.
  • such a pharynx region has been diagnosed by direct visual inspection by a doctor, and diagnosis using images has not been made.
  • the present disclosure provides various embodiments of an auxiliary device suitable for photographing a subject's oral cavity that assists in photographing, and a photographing device that photographs the inside of the oral cavity using the auxiliary device.
  • the purpose is to provide programs and methods.
  • an auxiliary tool that is inserted into the oral cavity for intraoral imaging using a imaging device, and includes a main body shaped like a body, and the imaging device can be inserted into the main body. , an opening configured at an end of the main body in a direction opposite to the direction in which the auxiliary tool is inserted into the oral cavity;
  • the main body and the cover are arranged such that the cover is arranged at the end of the main body in the direction in which the auxiliary device is inserted into the oral cavity, and the cover is arranged at the end of the main body in the direction in which the auxiliary device is inserted into the oral cavity.
  • a cover frame configured such that at least a portion of the cover frame is reflected within the angle of view photographed by the photographing device inserted from the opening.
  • a cylindrical main body that is inserted into the oral cavity for intraoral imaging, and an end portion of the main body in a direction opposite to the direction in which it is inserted into the oral cavity.
  • a cover configured at an end of the main body in a direction to be inserted into the oral cavity; and a cover disposed at an end of the main body in a direction to be inserted into the oral cavity.
  • An imaging device that is inserted into the main body through the opening with respect to an auxiliary tool that includes a cover frame configured to connect the main body and the cover, and includes at least one processor;
  • the at least one processor starts capturing a subject image by accepting an operation input from a user, and determines that at least a portion of the cover frame is included in the subject image based on the captured subject image.
  • the apparatus is configured to perform processing for outputting information indicating that the imaging device is not inserted into the auxiliary tool if the at least part of the auxiliary device is not included as a result of determining whether or not the auxiliary tool is included.
  • "Photography equipment" is provided.
  • a cylindrical main body that is inserted into the oral cavity for intraoral imaging, and an end portion of the main body in a direction opposite to the direction in which it is inserted into the oral cavity.
  • a cover configured at an end of the main body in a direction to be inserted into the oral cavity; and a cover disposed at an end of the main body in a direction to be inserted into the oral cavity.
  • an auxiliary tool including a cover frame configured to connect the main body and the cover, the photographing device inserted into the main body through the opening can be inserted into the subject by receiving an operation input from the user.
  • a program that functions as a processor configured to perform processing for outputting information indicating that the imaging device is not inserted into the auxiliary device.
  • a cylindrical main body that is inserted into the oral cavity for intraoral imaging, and an end portion of the main body in a direction opposite to the direction in which it is inserted into the oral cavity.
  • a cover configured at an end of the main body in a direction to be inserted into the oral cavity; and a cover disposed at an end of the main body in a direction to be inserted into the oral cavity.
  • an auxiliary tool suitable for photographing the oral cavity of a subject which assists the photographing, and a photographing device, program, and method for photographing the inside of the oral cavity using the auxiliary tool.
  • FIG. 1 is a diagram showing a usage state of a processing system 1 according to an embodiment of the present disclosure.
  • FIG. 2 is a diagram showing a usage state of the processing system 1 according to an embodiment of the present disclosure.
  • FIG. 3A is a schematic diagram of a processing system 1 according to an embodiment of the present disclosure.
  • FIG. 3B is a top view showing the configuration of the imaging device 200 according to an embodiment of the present disclosure.
  • FIG. 4 is a perspective view showing the configuration of an auxiliary tool 300 according to an embodiment of the present disclosure.
  • FIG. 5 is a side view showing the configuration of an auxiliary tool 300 according to an embodiment of the present disclosure.
  • FIG. 6 is a schematic diagram showing how the imaging device 200 and the auxiliary tool 300 are used according to an embodiment of the present disclosure.
  • FIG. 1 is a diagram showing a usage state of a processing system 1 according to an embodiment of the present disclosure.
  • FIG. 2 is a diagram showing a usage state of the processing system 1 according to an embodiment of the present disclosure
  • FIG. 7 is a schematic diagram showing how the imaging device 200 and the auxiliary tool 300 are attached according to an embodiment of the present disclosure.
  • FIG. 8A is a schematic diagram showing the front configuration of an auxiliary tool 300 according to an embodiment of the present disclosure.
  • FIG. 8B is a schematic diagram showing a partial cross-sectional configuration of the distal end 314 of the auxiliary tool 300 according to an embodiment of the present disclosure.
  • FIG. 9 is a schematic diagram showing a front configuration of an auxiliary tool 300 according to an embodiment of the present disclosure.
  • FIG. 10 is a schematic diagram showing a cross-sectional configuration of an imaging device 200 according to an embodiment of the present disclosure.
  • FIG. 11 is a schematic diagram showing the configuration of the upper surface of the auxiliary tool 300 according to an embodiment of the present disclosure.
  • FIG. 8A is a schematic diagram showing the front configuration of an auxiliary tool 300 according to an embodiment of the present disclosure.
  • FIG. 8B is a schematic diagram showing a partial cross-sectional configuration of the distal end 314
  • FIG. 12 is a schematic diagram showing the configuration of the positioning mechanism 329 of the auxiliary tool 300 according to an embodiment of the present disclosure.
  • FIG. 13 is a schematic diagram showing the configuration of the plate 334 of the auxiliary tool 300 according to an embodiment of the present disclosure.
  • FIG. 14 is a block diagram showing the configuration of an imaging device 200 according to an embodiment of the present disclosure.
  • FIG. 15 is a diagram showing a processing flow executed in the imaging device 200 according to an embodiment of the present disclosure.
  • FIG. 16 is a diagram illustrating a processing flow related to generation of a trained model according to an embodiment of the present disclosure.
  • FIG. 17 is a diagram illustrating an example of a screen output by the imaging device 200 according to an embodiment of the present disclosure.
  • FIG. 18 is a diagram illustrating an example of a screen output by the imaging device 200 according to an embodiment of the present disclosure.
  • the processing system 1 according to the present disclosure is mainly used to obtain a subject image in which the inside of a subject's oral cavity is photographed.
  • the processing system 1 is used to image the back of the throat of the oral cavity, specifically, the pharynx. Therefore, in the following, a case will be mainly described in which the processing system 1 according to the present disclosure is used to photograph the pharynx.
  • the pharynx is an example of a site to be imaged, and the processing system 1 according to the present disclosure can of course be suitably used for other sites such as tonsils within the oral cavity.
  • the processing system 1 determines the possibility of contracting a predetermined disease from a subject image obtained by photographing a subject including at least the pharyngeal region of the oral cavity of a subject, and diagnoses the predetermined disease. or used to assist in that.
  • An example of a disease determined by the processing system 1 is influenza.
  • the possibility of influenza infection is usually diagnosed by examining the subject's pharynx and tonsils and determining the presence or absence of findings such as follicles in the pharynx region.
  • the processing system 1 determine the possibility of contracting influenza and outputting the result, it becomes possible to diagnose or assist. Note that the determination of the possibility of contracting influenza is one example.
  • the processing system 1 can be suitably used for any disease that causes a difference in oral findings depending on the disease.
  • differences in findings are not limited to those discovered by a doctor or the like and whose existence is medically known.
  • any difference that can be recognized by a person other than a doctor or that can be detected by artificial intelligence or image recognition technology can be suitably applied to the processing system 1.
  • diseases include, in addition to influenza, infectious diseases such as streptococcal infection, adenovirus infection, EB virus infection, mycoplasma infection, hand-foot-and-mouth disease, herpangina, candidiasis, arteriosclerosis, diabetes, Diseases that exhibit vascular disorders or mucosal disorders such as hypertension, and tumors such as oral cavity cancer, tongue cancer, and pharyngeal cancer are included.
  • infectious diseases such as streptococcal infection, adenovirus infection, EB virus infection, mycoplasma infection, hand-foot-and-mouth disease, herpangina, candidiasis, arteriosclerosis, diabetes, Diseases that exhibit vascular disorders or mucosal disorders such as hypertension, and tumors such as oral cavity cancer, tongue cancer, and pharyngeal cancer are included.
  • subjects to be photographed by the photographing device 200 may include any human being, such as a patient, a subject, a diagnostic user, and a healthy person.
  • the user who holds the imaging device 200 and performs the imaging operation is not limited to medical personnel such as doctors, nurses, and laboratory technicians, but may include any person such as the user himself/herself.
  • the processing system 1 according to the present disclosure is typically used in a medical institution.
  • the present invention is not limited to this case, and the device may be used at any location such as the user's home, school, or workplace.
  • the subject and the user are only used as names to refer to the above-mentioned persons, and they may be different persons or may be the same person. Good too. That is, when a person uses an imaging device to take an image of his or her own oral cavity, that person can be both the subject and the user.
  • the subject only needs to include at least a part of the subject's oral cavity. Further, any disease may be determined as long as it shows a difference in findings in the oral cavity. However, in the following, a case will be described in which the subject includes the pharynx or the vicinity of the pharynx, and the possibility of contracting influenza is determined as the disease.
  • the subject image and the determination image may be one or more moving images or one or more still images.
  • the camera captures a live view image, and the captured live view image is displayed on the display 203. Thereafter, when the user presses the photographing button, one or more still images are photographed by the camera, and the photographed images are displayed on the display 203.
  • shooting button shooting of a moving image is started, and the image being shot with the camera during that time is displayed on the display 203. Then, when the shooting button is pressed again, shooting of the moving image is finished.
  • various images such as through images, still images, and moving images are taken by the camera and displayed on the display.
  • the subject image or the determination image may be subjected to various image processing, resulting in a processed image.
  • the subject image and the determination image do not mean only specific images among them, but may include all of these images taken with a camera.
  • all such subject images do not necessarily include at least a part of the oral cavity, and as mentioned above, in the case of through-the-lens images, at least a part of the oral cavity may not be included.
  • FIG. 1 is a diagram showing a usage state of a processing system 1 according to an embodiment of the present disclosure.
  • a processing system 1 according to the present disclosure includes a processing device 100 and an imaging device 200.
  • the user attaches the auxiliary tool 300 to the distal end of the imaging device 200 so as to cover it, and inserts the imaging device 200 together with the auxiliary tool 300 into the oral cavity 710 of the subject.
  • a user (which may be the subject 700 himself or a user different from the subject 700) attaches the auxiliary tool 300 to the tip of the imaging device 200 so as to cover it.
  • the user inserts the imaging device 200 with the auxiliary tool 300 attached into the oral cavity 710.
  • the tip of the auxiliary tool 300 passes through the incisors 711 and is inserted to the vicinity of the soft palate 713. That is, the imaging device 200 is similarly inserted up to the vicinity of the soft palate 713.
  • the tongue 714 is pushed downward by the auxiliary tool 300 (functioning as a tongue depressor), and the movement of the tongue 714 is restricted.
  • the user can secure a good field of view of the imaging device 200 and can take good pictures of the pharynx 715 located in front of the imaging device 200.
  • the photographing device 200 is inserted into the oral cavity 710 of the subject.
  • the auxiliary tool 300 by covering the tip of the imaging device 200 with the auxiliary tool 300, it is possible to prevent the imaging device 200 from coming into direct contact with mucous membranes in the oral cavity, saliva, body fluids, etc., and to prevent the imaging device 200 from being contaminated. It becomes possible. Note that if such an auxiliary tool 300 is not used, at least the tip portion of the photographing device 200 needs to be disinfected, cleaned, etc. each time it is used. Therefore, it is desirable to use the auxiliary tool 300 also from the viewpoint of saving the user's effort.
  • the photographed subject image (typically, an image including the pharynx 715) is transmitted from the photographing device 200 to the processing device 100, which is communicably connected via a wired or wireless network.
  • the processor of the processing device 100 that has received the subject image processes the program stored in the memory, thereby selecting a judgment image to be used for judgment from the subject image, and using the judgment image to determine the prevalence of a predetermined disease. The possibility of is determined.
  • the results are then output to a display or the like.
  • FIG. 2 is a diagram showing a usage state of the processing system 1 according to an embodiment of the present disclosure. Specifically, FIG. 2 is a diagram showing a state in which the photographing device 200 of the processing system 1 is held by the user 600.
  • the imaging device 200 is composed of a main body 201, a grip 202, and a display 203 from the side inserted into the oral cavity.
  • the main body 201 and the grip 202 are formed into a substantially columnar shape with a predetermined length along the insertion direction H into the oral cavity.
  • the display 203 is arranged on the side of the grip 202 opposite to the main body 201 side.
  • the photographing device 200 is formed into a generally columnar shape as a whole, and is held by the user 600 in a manner similar to holding a pencil. That is, since the display panel of the display 203 faces toward the user 600 when in use, it is possible to easily handle the photographing device 200 while checking the subject image photographed by the photographing device 200 in real time.
  • the photographing button 220 is arranged on the top side of the grip. Therefore, when the user 600 holds it, the user 600 can easily press the shooting button 220 with his/her index finger or the like.
  • FIG. 3 is a schematic diagram of processing system 1 according to an embodiment of the present disclosure.
  • the processing system 1 includes a processing device 100 and an imaging device 200 communicably connected to the processing device 100 via a wired or wireless network.
  • the processing device 100 receives operation inputs from the user and controls photographing by the photographing device 200.
  • the processing device 100 processes the subject image photographed by the photographing device 200 to determine the possibility that the subject is infected with influenza.
  • the processing device 100 outputs the determined result and notifies the subject, user, doctor, etc. of the result.
  • the tip of the photographing device 200 is inserted into the oral cavity of the subject to photograph the inside of the oral cavity, particularly the pharynx. The specific processing will be described later.
  • the photographed subject image is transmitted to the processing device 100 via a wired or wireless network.
  • the processing system 1 can further include a mounting table 400 if necessary.
  • the mounting table 400 is capable of stably mounting the imaging device 200. Moreover, by connecting the mounting table 400 to a power source via a wired cable, it is possible to supply power to the photographing apparatus 200 from the power supply terminal of the mounting table 400 through the power supply port of the photographing apparatus 200.
  • FIG. 3B is a top view showing the configuration of the imaging device 200 according to an embodiment of the present disclosure. Hereinafter, the specific configuration of the imaging device 200 will be described with reference to FIG. 3B.
  • the main body 201 includes a base end 225 and a distal end 222, and has a predetermined length in a direction substantially parallel to the direction in which light is irradiated from the light source 212, that is, the direction H in which it is inserted into the oral cavity. It is composed of columns. Then, at least the tip 222 of the main body 201 is inserted into the oral cavity.
  • the main body 201 is formed into a hollow cylindrical columnar shape whose cross section is a perfect circle.
  • the wall portion 224 may be made of any material as long as it is capable of guiding light into its interior, and can be made of thermoplastic resin, for example.
  • Thermoplastic resins include polyolefin resins such as chain polyolefin resins (polypropylene resins, etc.), cyclic polyolefin resins (norbornene resins, etc.), cellulose ester resins such as triacetylcellulose and diacetylcellulose, and polyesters. type resins, polycarbonate resins, (meth)acrylic resins, polystyrene resins, or mixtures and copolymers thereof. That is, the wall portion 224 of the main body 201 functions as a light guide for guiding the light emitted from the light source into the oral cavity or toward the diffuser plate.
  • the main body 201 Since the main body 201 is formed hollow, a housing space 223 is formed on the inner surface by the wall portion 224. The camera 211 is accommodated in this accommodation space 223 .
  • the main body 201 only needs to be formed into a columnar shape having an accommodation space 223. Therefore, the accommodation space 223 does not need to have a cylindrical shape with a perfect circle in cross section, but may have an elliptical or polygonal cross section. Further, the main body 201 does not necessarily have to be formed hollow inside.
  • the tip of the grip 202 is connected to the base end 225 of the main body 201.
  • the user holds the grip 202 and performs operations such as inserting and removing the photographing device 200.
  • the grip 202 is constituted by a columnar body having a predetermined length in a direction substantially parallel to the direction H of insertion into the oral cavity, that is, along the longitudinal direction of the main body 201, and extends in the same direction as the main body 201 in the direction H. placed on the line.
  • the cross section in the vertical direction is formed to have a substantially elliptical shape, but it does not have to be an ellipse, and may be a perfect circle, an ellipse, or a polygon.
  • the grip 202 has a connecting portion 230 formed at a position closest to the base end 225 of the main body 201, and is connected to the main body 201 via the connecting portion 230.
  • the outer periphery of the connecting portion 230 includes engagement protrusions 217 (217-1 to 217-4) for positioning the auxiliary tool 300 and a positioning protrusion 218.
  • the engagement protrusion 217 mutually engages with engagement protrusions 318 (318-1 to 318-4) provided on the auxiliary tool 300. Further, the positioning protrusion 218 is inserted into an insertion hole 330 provided in the auxiliary tool 300 to position the imaging device 200 and the auxiliary tool 300 relative to each other.
  • the engagement protrusions 217 of the main body 201 have a total of four engagement protrusions (engagement protrusions 217-1 to 217-4) on the surface of the grip 202 and on the base of the main body 201. They are arranged at equal intervals near the end 225. Further, one positioning protrusion 218 is arranged between the engagement protrusions 217 on the surface of the grip 202 and near the base end 225 of the main body 201.
  • the present invention is not limited to this, and only one of the engaging protrusion 217 and the positioning protrusion 218 may be disposed.
  • the number of engagement protrusions 217 and positioning protrusions 218 may be any number as long as the number is one or more.
  • the grip 202 includes a photographing button 220 on its upper surface at a position close to the base end 225 of the main body 201, that is, near the tip of the grip 202 in the insertion direction H into the oral cavity. Thereby, when the user 600 holds it, the user 600 can easily press the shooting button 220 with his/her index finger or the like. Further, the grip 202 has a power button 221 disposed on its upper surface at a position close to the display 203, that is, at a position on the opposite side of the grip 202 from the photographing button 220. This makes it possible to prevent the user 600 from accidentally pressing the power button 221 while holding the camera to take a picture.
  • the display 203 has an approximately rectangular parallelepiped shape as a whole, and is arranged on the same straight line as the main body 201 in the direction H. Further, the display 203 includes a display panel on a surface opposite to the direction H of insertion into the oral cavity (that is, the direction toward the user). Therefore, the display 203 is formed such that the surface including the display panel is substantially perpendicular to the longitudinal direction of the main body 201 and the grip 202, which are formed substantially parallel to the direction H of insertion into the oral cavity. Ru.
  • the grip 202 is connected to the grip 202 on the side opposite to the oral cavity of the grip 202 on the surface facing the surface including the display panel. Note that the shape of the display is not limited to a substantially rectangular parallelepiped shape, and may be any shape such as a cylindrical shape.
  • the imaging device 200 can be placed vertically so that the surface including the display panel is in contact with the placement surface. Therefore, at least the outer periphery of the surface of the display 203 including the display panel is formed on a substantially flat surface suitable for placement.
  • the diffusion plate 219 is arranged at the tip 222 of the main body 201 and diffuses the light emitted from the light source 212 and passed through the main body 201 toward the inside of the oral cavity.
  • the diffuser plate 219 has a shape corresponding to the cross-sectional shape of a portion of the main body 201 configured to be able to guide light.
  • the main body 201 is formed into a hollow cylindrical shape. Therefore, the cross section of the diffusion plate 219 is also formed into a hollow shape corresponding to its shape.
  • the camera 211 is used to detect reflected light that is diffused from the diffuser plate 219, irradiated into the oral cavity, and reflected on the subject, and generates a subject image.
  • the camera 211 is arranged on the inner surface of the wall 224 of the main body 201, that is, in the accommodation space 223 formed inside the main body 201, so as to be on the same straight line as the main body 201 in the direction H. Note that in this embodiment, only one camera 211 is described, but the photographing device 200 may include a plurality of cameras. By generating a subject image using a plurality of cameras, the subject image includes information regarding the three-dimensional shape.
  • the camera 211 is arranged in the accommodation space 223 of the main body 201, but the camera 211 may be located at the tip 222 of the main body 201 or the main body 201 (inside the main body 201 or on the outer periphery of the main body 201). may be placed in
  • FIG. 4 is a perspective view showing the configuration of auxiliary tool 300 according to an embodiment of the present disclosure.
  • the auxiliary tool 300 is a tool for assisting in photographing the subject's oral cavity. Therefore, when photographing the inside of the oral cavity with the photographing device 200, it is not absolutely necessary, and may not be used depending on the user's or subject's wishes. At least a portion of the distal end side of the imaging device 200 is inserted into the auxiliary tool 300. Therefore, it is preferable that at least a portion of the auxiliary tool 300 has translucency from the viewpoint of ensuring a good field of view without interfering with the imaging device 200.
  • the auxiliary tool 300 is manufactured by integral molding of resin. However, it may be manufactured from other materials such as paper, cloth, metal, or combinations thereof. Further, the auxiliary tool 300 is preferably of a disposable type, but may be of a reusable type.
  • An example of such a resin is a thermoplastic resin.
  • Thermoplastic resins include polyolefin resins such as chain polyolefin resins (polypropylene resins, etc.), cyclic polyolefin resins (norbornene resins, etc.), cellulose ester resins such as triacetylcellulose and diacetylcellulose, and polyesters.
  • the resins used include polycarbonate resins, (meth)acrylic resins, polystyrene resins, vinyl resins, nylon resins, preurethane, fluorine resins, and mixtures and copolymers thereof.
  • the auxiliary tool 300 it is preferable to configure the auxiliary tool 300 to be easily deformed depending on the selection of material or the thickness during processing. With this configuration, it can be easily disposed of, such as when the auxiliary tool 300 is made disposable as described above.
  • the auxiliary tool 300 includes a main body 312 formed in a cylindrical shape, a pair of grip plates 311 disposed at the base end 316 of the main body 312, and a pair of grip plates 311 disposed near the distal end 314 of the main body 312.
  • a tongue depressor 315 is included.
  • the main body 312 is configured to cover at least a part of the distal end 222 side of the main body 201 of the photographing device 200 inside thereof, so that the auxiliary tool 300 can be inserted into the oral cavity according to the length of the main body 201. It is formed into a cylindrical shape having a predetermined length along the direction H, which is the direction in which it is directed.
  • An opening 320 for inserting the photographing device 200 is provided on the proximal end 316 side, and a cover 313 is provided on the distal end 314 side for allowing irradiation light from the light source 212 of the photographing device 200 and reflected light from the subject to pass through.
  • the auxiliary tool 300 is inserted into the oral cavity from the tip 314.
  • the main body 201 of the imaging device 200 has a substantially constant inner diameter and outer diameter from the base end 225 to the distal end 222. Therefore, the main body 312 of the auxiliary tool 300 is also formed to have an inner diameter and an outer diameter substantially constant in the longitudinal direction in accordance with this shape.
  • the cross-sectional shape of the main body 312 is preferably formed to correspond to the cross-sectional shape of the main body 201 of the imaging device 200, but it may have any shape as long as it can be inserted, and may be a perfect circle, an ellipse, a polygon, etc. It may be of any shape.
  • the pair of gripping plates 311 are arranged along the proximal end 316 of the main body 312 in a direction perpendicular or substantially perpendicular to the direction in which the auxiliary tool 300 is inserted into the oral cavity, that is, the direction H, on the outside of the main body 312. It is configured to extend towards. That is, the grip plate 311 having this configuration is used to be held by the user's hand when inserting the auxiliary tool 300 into the oral cavity of the subject. In this embodiment, when the auxiliary tool 300 is inserted into the oral cavity, the gripping plate 311 prevents further insertion of the auxiliary tool 300 by having its distal end surface contact the lips of the subject. It also functions as a regulating member to prevent aspiration.
  • the grip plate 311 is configured to extend outward, it is possible to prevent the auxiliary tool 300 itself from rolling on the floor or the like.
  • the pair of gripping plates 311 are vertically symmetrically arranged on the base end 316 side of the main body 312, but they are arranged in a donut shape along the base end 316 of the main body 312. It may be formed in any shape.
  • the tongue depressor 315 is arranged at the lower part of the main body 312 (on the side toward the tongue in the oral cavity) and is formed on a blade toward the tongue.
  • the subject's tongue moves in front of the photographing device 200, which obstructs the photographing of the oral cavity.
  • the tongue depressor 315 pushes the tongue downward to restrict movement of the tongue in the oral cavity and prevent the tongue from being located in front of the imaging device 200. Therefore, in this embodiment, the tongue depressor 315 is formed into a blade shape, but it may have any shape as long as it can realize this function.
  • FIG. 5 is a side view schematically showing a side configuration of an auxiliary tool 300 according to an embodiment of the present disclosure.
  • the auxiliary tool 300 includes the tongue depressor 315 near the distal end 314 side of the main body 312 and the grip plate 311 on the proximal end 316 side.
  • the main body 312 has a pair of grooves 319 formed with a predetermined length in a direction perpendicular to the outer periphery of the main body 312, and a piece 317 formed by these grooves and a pair of grooves 319 arranged in the piece 317, respectively. It has an engaging protrusion 318 configured to engage with each engaging protrusion 217 arranged at the tip of the grip 202 of the device 200, and an insertion hole 330 into which the positioning protrusion 218 of the grip 202 is inserted.
  • the engagement protrusions 318 are provided at positions corresponding to the respective engagement protrusions 217 arranged on the grip 202 of the photographing device 200, and protrude toward the inner surface of the main body 312. Therefore, in this embodiment, four engaging protrusions 318-1 to 318-4 are arranged at positions corresponding to four engaging protrusions 217-1 to 217-4. Further, the insertion hole 330 is provided at a position corresponding to the positioning protrusion 218 arranged on the grip 202 of the photographing device 200. Therefore, in this embodiment, one insertion hole 330 is arranged at a position corresponding to one positioning protrusion 218.
  • FIG. 6 is a schematic diagram showing the usage state of the imaging device 200 and the auxiliary tool 300 according to an embodiment of the present disclosure.
  • FIG. 6 a case where the imaging device 200 is inserted into the auxiliary tool 300 will be described with reference to FIG. 6.
  • the imaging device 200 is inserted into the proximal end 316 through the opening 320 of the auxiliary tool 300 and reaches the vicinity of the distal end 314, the engaging protrusion 217 formed to protrude outward from the grip 202 of the imaging device 200, An engaging protrusion 318 formed toward the inner surface of the main body 312 of the auxiliary tool 300 comes into contact with it.
  • the engagement protrusions 318-1 to 318-4 of the main body 312 are the pieces 317-1 formed by the pair of grooves 319-1a and 319-1b to 319-4a and 319-4b. It is formed at ⁇ 317-4. Therefore, when a force is further applied in the direction of inserting the photographing device 200 while the engaging protrusion 217 of the photographing device 200 and the engaging protrusion 318 of the auxiliary tool 300 are in contact with each other, the piece 317 formed by the pair of grooves 319 be lifted up. As a result, the engagement protrusion 217 of the photographing device 200 is further inserted beyond the engagement protrusion 318 of the auxiliary tool 300.
  • the positioning projection 218 provided on the grip 202 of the photographing device 200 so as to protrude outward is inserted into the insertion hole 330 of the auxiliary tool 300. inserted into. Then, the positioning protrusion 218 of the photographing device 200 comes into contact with the wall surface of the insertion hole 330 formed on the distal end 314 side. This restricts the imaging device 200 from being inserted any further in the direction of the distal end 314 of the auxiliary tool 300.
  • the movement of the imaging device 200 in the direction in which the imaging device 200 is inserted is regulated by the positioning protrusion 218 and the insertion hole 330.
  • the movement of the photographing device 200 in the opposite direction, that is, in the direction in which the photographing device 200 is removed, is regulated by the engaging protrusion 217 and the engaging protrusion 318.
  • Such positioning protrusions 218 and insertion holes 330 are preferably installed at one location or asymmetrically in the circumferential direction of the photographing device 200 and the auxiliary tool 300 when they are installed at a plurality of locations.
  • the vertical direction of the photographing device 200 and the vertical direction of the auxiliary tool 300 can be kept constant; for example, the tongue depressor 315 is installed so as to be always positioned below the display 203 of the photographing device 200. becomes possible.
  • FIG. 7 is a schematic diagram showing how the imaging device 200 and the auxiliary tool 300 are attached according to an embodiment of the present disclosure.
  • FIG. 7 is an enlarged view showing the vicinity of the proximal end 316 of the auxiliary tool 300 and the vicinity of the connecting portion 230 of the imaging device 200 when the imaging device 200 is inserted into the auxiliary tool 300.
  • a notification body 226 (not shown in FIG. 6 etc.) is included on the upper surface of the connecting portion 230 of the photographing device 200.
  • An example of such a notification object 226 is a position or a light emitting object such as a plurality of LEDs.
  • the notification body 226 emits light when the power button 221 of the photographing device 200 is pressed to turn on the power of the photographing device 200, and stops emitting light when the power button 221 is pressed again to turn off the power.
  • the notification body 226 is placed on the top surface of the connecting portion 230, but the notification body 226 may be placed anywhere as long as it is covered by the auxiliary tool 300.
  • the auxiliary tool 300 into which the photographing device 200 having the notification body 226 is inserted includes a notification window 322 near the grip plate 311 on the base end 316 side.
  • the notification window 322 may be configured as a through hole that penetrates the auxiliary tool 300 in the thickness direction, and may be made of a material that has high transmittance of light emitted from the notification body 226 to the surrounding area. It may be configured by Conversely, in the auxiliary device 300, the area excluding the notification window 322 and the cover 313 (FIG. 4), that is, at least the area around the notification window 322, is made of a material that does not transmit light, or is made of a material that does not transmit light.
  • the notification body 226 may also be made of a material with low transmittance to inhibit transmission of at least part of the light from the notification body 226.
  • the notification body 226 and the notification window 322 are They are located one above the other. That is, in such a state, the notification window 322 of the auxiliary tool 300 is arranged at a position opposite to the arrangement position of the notification body 226 of the photographing device 200, so that the light emitted from the notification body 226 is transmitted through the notification window 322. It becomes possible to visually recognize it. This allows the user to visually confirm that the auxiliary tool is attached to the photographing device 200.
  • the notification body 226 is composed of an LED.
  • the notification body 226 only needs to be able to notify that the photographing device 200 has been inserted into the auxiliary tool 300 via the notification window 322. That is, the notification body 226 can be simply formed by a colored part, or can be formed by characters, patterns, or the like.
  • FIG. 8A is a schematic diagram showing the front configuration of an auxiliary tool 300 according to an embodiment of the present disclosure. Specifically, FIG. 8A is a diagram for explaining the structure of the auxiliary tool 300 and the relationship between the angle of view of the imaging device 200 and the cover frame of the auxiliary tool 300 when the auxiliary tool 300 is viewed from the front. be.
  • the auxiliary device 300 has a proximal end 316, which is an end opposite to the direction in which the auxiliary device 300 is inserted into the oral cavity, extending outward from the main body 312 perpendicularly or substantially perpendicularly to the direction. It includes a pair of gripping plates 311 (gripping plate 311a and gripping plate 311b) extending in the direction.
  • the grip plate 311 may include a through hole 323 (through hole 323a and through hole 323b) extending in its thickness direction, that is, in the direction in which the auxiliary tool 300 is inserted into the oral cavity.
  • the through hole 323 is formed in a shape that follows the outer shape of the grip plate 311, but is not limited to this shape.
  • it may be formed by one or more small holes, or may be formed by other shapes.
  • the auxiliary tool 300 also includes a cover 313 through which light detected by the imaging device 200 can pass, at a tip 314 that is the end in the direction in which the auxiliary tool 300 is inserted into the oral cavity.
  • a cover 313 is formed to follow the cross-sectional shape of the main body 312 in a direction perpendicular to the direction in which the auxiliary tool 300 is inserted into the oral cavity.
  • the shape is naturally not limited to a shape that follows the cross-sectional shape of the main body 312. Any shape may be used as long as it does not excessively obstruct photographing of a subject image by the photographing device 200.
  • the auxiliary tool 300 includes a cover frame that is arranged around the cover 313 and connects the main body 312 and the cover 313 in order to arrange the cover 313 at the end in the direction in which the auxiliary tool 300 is inserted into the oral cavity.
  • the shape of the cover frame on the side in contact with the main body 312 is formed to follow the cross section of the main body 312, and the shape on the side in contact with the cover 313 is formed in a shape along the outer shape of the cover 313.
  • Such a cover frame 321 does not necessarily need to be formed as a clearly distinguishable component from the main body 312 or the cover 313, but may be formed as a part of the main body 312 in an area that contacts the cover 313, or as a part of the cover 313. It may also refer to a region in contact with the main body 312.
  • the cover frame 321 has at least a portion thereof a reflection area that is reflected within the angle of view photographed by the photographing device 200 when the photographing device 200 is inserted and positioned with respect to the auxiliary tool 300.
  • a reflection area that is reflected within the angle of view photographed by the photographing device 200 when the photographing device 200 is inserted and positioned with respect to the auxiliary tool 300.
  • four reflection areas ie, reflection areas 321a to 321d
  • the reflection areas 321a to 321d are formed so as to correspond to the four corners of the angle of view of a rectangle.
  • the reflection areas 321a to 321d are formed at four locations in the example of FIG. 8A, they are of course not limited to this, and may be formed at only one location or at multiple locations. Good too.
  • FIG. 8B is a schematic diagram showing a partial cross-sectional configuration of the distal end 314 of the auxiliary tool 300 according to an embodiment of the present disclosure.
  • FIG. 8B is a diagram schematically showing a longitudinal cross section near the reflection area 321a shown in FIG. 8A.
  • the auxiliary tool 300 includes a main body 312 forming its outer shape, a cover 313 formed inside the main body 312 so as to follow the shape of the main body 312, and a cover frame connecting the main body 312 and the cover 313. 321.
  • the cover frame 321 is configured to protrude in the direction G toward the inside from the inner surface of the main body 312, for example.
  • the positional relationship is such that at least some of them are relative to each other. Therefore, when a subject image is photographed by the photographing device 200, the opposing area of the cover frame 321 will be reflected within the angle of view as a reflection area 321a.
  • the cover frame 321 may preferably be configured to protrude from the inner surface of the cover 313 along a direction perpendicular to the direction G. With this configuration, it is possible to prevent the tip of the imaging device 200 from coming into direct contact with the cover 313.
  • the reflection areas 321a to 321d may be formed to have the same structure as the cover frame 321 other than the areas, as shown in (a). Also, as shown in (b) and (c), the reflection area 321a to reflection area 321d are at least one part of the inner surface or the outer surface of the cover frame 321 in the direction in which the auxiliary tool 300 is inserted into the oral cavity.
  • the portion may include a structure formed from a predetermined pattern.
  • the structure is composed of a plurality of grooves or convex patterns formed at predetermined intervals.
  • the structure is composed of a predetermined character string formed in a groove shape. Note that such a structure may be formed by any method such as a concave or convex pattern or a pattern printed on the surface.
  • the reflection area may be any area that can reflect light used for photographing, such as light emitted from the photographing device 200, and generate reflected light that can be detected by the sensor of the camera 211. Therefore, it is only necessary for any of the auxiliary tools 300 to have such an area, and the reflection area 321a to 321d may be physically separated from other areas or intentionally processed or molded. It does not need to be pre-formed.
  • FIG. 9 is a schematic diagram showing the front configuration of an auxiliary tool 300 according to an embodiment of the present disclosure. Specifically, FIG. 9 is a diagram for explaining the surface structure of the cover 313 when the auxiliary tool 300 is viewed from the front.
  • the auxiliary tool 300 includes a cover 313 formed to be in contact with the inside of the main body 312 via a cover frame 321 at a distal end 314 that is the end in the direction of insertion into the oral cavity.
  • the cover 313 is made of a material that can transmit the light emitted from the photographing device 200 into the oral cavity, and also transmits the light reflected by the subject in the direction of the photographing device 200.
  • the auxiliary tool 300 since the auxiliary tool 300 is inserted into the oral cavity so as to cover the photographing device 200, it is always affected by exhalation by the subject. That is, the surface of the cover 313 becomes cloudy due to breathing from the subject, and this clouding may adversely affect the photographing of the subject by the photographing device 200. Therefore, if necessary, an antifogging agent may be laminated on the outer surface or inner surface of the cover 313 in the direction in which the auxiliary tool 300 is inserted into the oral cavity.
  • the antifogging agent has a function of imparting antifogging properties by forming a coating layer on the outer surface or inner surface of the cover 313 and improving wettability by laminating the antifogging agent.
  • antifogging agents include, but are not limited to, antifogging agents made of silicon-based materials, and polymeric or low molecular hydrophilic materials such as surfactants.
  • Such an antifogging agent may be applied to the cover 313 in advance or may be applied afterwards. Moreover, not only the case where a liquid antifogging agent is applied, but also a sheet-like material on which an antifogging agent is laminated in advance may be laminated.
  • the auxiliary tool 300 including the cover 313 includes a transparent resin layer 327 made of thermoplastic resin or the like as a base material.
  • Such a light-transmitting resin layer 327 is preferably made of a cyclic olefin resin such as an amorphous cyclic olefin resin or an amorphous cyclic olefin resin among thermoplastic resins.
  • the cover 313 when the cover 313 is inserted into the oral cavity, as described above, it is affected by the subject's exhalation, and a smooth water film is formed on the antifogging agent or the surface of the cover 313, which causes rainbow patterns, etc. This may adversely affect shooting. Therefore, it is desirable that the boundary surface of the antifogging agent or the cover has irregularities at predetermined intervals or at random so that light is diffusely reflected.
  • a laminated coating layer 326 is formed on the cover 313 by applying an antifog agent to the surface of the base material of the transparent resin layer 327, and recesses are formed on the surface of the coating layer 326 at predetermined intervals or randomly. 325 may be provided.
  • the intervals between the respective recesses 325 are, on average, wider than the wavelength band of light detected by the imaging device 200 (for example, 830 nm or more, which is the wavelength band of red light), and more preferably wider than twice the wavelength band. It is. By configuring the recesses 325 at such intervals, it is possible to cause diffuse reflection of light and suppress the occurrence of interference patterns.
  • the thickness of the coating layer 326 can be adjusted based on the coherence length calculated from the wavelength band of light detected by the imaging device 200, and is preferably 10 ⁇ m or more, for example.
  • the coating layer 326 is formed on the outer surface of the light-transmitting resin layer 327 has been described, but such a coating layer 326 may be formed on the inner surface of the light-transmitting resin layer 327. good.
  • a case has been described in which the recesses 325 are formed in the coating layer 326, but the surface of the translucent resin layer 327 may be subjected to acid treatment or plasma treatment, or a pattern may be printed on the surface.
  • the recessed portion 325 may be directly formed in the light-transmitting resin layer 327 by the method described above.
  • the cover 313 is formed of the coating layer 326 and the transparent resin layer 327, but it may further include layers other than these layers.
  • a portion of the tip portion of the main body 312 is configured to protrude from the outer surface of the cover 313 in a direction J perpendicular to a direction G from the inner surface of the main body 312 toward the inside.
  • FIG. 10 is a schematic diagram showing a cross-sectional configuration of an imaging device 200 according to an embodiment of the present disclosure.
  • FIG. 10 is a diagram schematically showing a process in which a subject image is generated in the photographing device 200, and also shows another example for suppressing the occurrence of interference patterns.
  • a total of four light sources 212-1 to 212-4 are arranged on a substrate 231 arranged at the tip end side of the grip 202.
  • the light sources 212 each include an LED, and each LED emits light having a predetermined frequency band toward the oral cavity.
  • the light emitted from the light source 212 enters the base end 225 of the main body 201 and is guided toward the diffuser plate 219 by the wall portion 224 of the main body 201.
  • the light reaching the diffusion plate 219 is diffused into the oral cavity by the diffusion plate 219.
  • the light diffused by the diffusion plate 219 is reflected on the subject, such as the pharynx 715. When this reflected light reaches the camera 211, a subject image is generated.
  • the wall portion 224 of the main body 201 has the function of guiding the light emitted from the light sources 212-1 to 212-4 to the diffuser plate 219 as described above, but a portion or an end thereof has the function of guiding the light emitted from the light sources 212-1 to 212-4 to the diffuser plate 219.
  • a plate 233 may also be included.
  • the sensor of the camera 211 is arranged in the housing space 223 formed by the wall 224 of the main body 201, the photographing device 200 may also include a second polarizing plate 234 closer to the subject than the sensor. good.
  • the first polarizing plate 233 and the second polarizing plate 234 are arranged with their polarization axes perpendicular to each other at 90°.
  • FIG. 11 is a schematic diagram showing the configuration of the top surface of an auxiliary tool 300 according to an embodiment of the present disclosure. Specifically, FIG. 11 is an enlarged view of the vicinity of the proximal end 316 of the auxiliary tool 300, schematically showing another example of the structure of the auxiliary tool 300.
  • the auxiliary tool 300 may include a positioning mechanism 329 that can be deformed or separated from the main body 312 by applying a load in a predetermined direction.
  • the positioning mechanism 329 includes a grip plate 311 configured to extend toward the outside of the main body 312 in a direction perpendicular or substantially perpendicular to the direction in which the auxiliary tool 300 is inserted into the oral cavity, and the imaging device 200. It includes a positioning piece 331 for positioning the auxiliary tool 300, and a connecting piece 328 (connecting piece 328a to connecting piece 328d) for connecting to the main body 312.
  • the connecting piece 328 has one end connected to the main body portion of the positioning mechanism 329 and the other end connected to the main body 312, thereby connecting the two.
  • the connecting piece 328 in the cross section of the longitudinal direction, has a notch 333a and a notch 333b formed in a groove shape along the short direction, and at least a part of the connecting piece 328 in the thickness direction. It includes a thin region 332 formed thin. Therefore, the connecting piece 328 is configured to be easily deformed or easily cut when a load is applied in a predetermined direction.
  • FIG. 12 is a schematic diagram showing the configuration of the positioning mechanism 329 of the auxiliary tool 300 according to an embodiment of the present disclosure. Specifically, FIG. 12 is a diagram for explaining in more detail the structure and usage method of the positioning mechanism 329 shown in FIG. 11.
  • the positioning piece 331 of the positioning mechanism 329 includes an inclined surface 331a and a recess 331b that are inclined from the end toward the inside thereof.
  • the protrusion (not shown) formed on the upper surface of the connecting portion 230 of the imaging device 200 is inserted while contacting the inclined surface 331a, so that the positioning mechanism 329 rises upwards, and by further inserting the photographing device 200, the convex portion of the photographing device 200 finally fits into the recess 331b of the positioning piece 331, so that the auxiliary tool 300 and the photographing device 200 are mutually connected. Positioned.
  • the protrusion on the photographing device 200 side and the recess 331b of the positioning piece 331 fit together, so that the auxiliary tool 300 can be removed from the photographing device 200. becomes difficult. Therefore, the user applies a load to the positioning mechanism 329 by pushing the grip plate 311 of the positioning mechanism 329 in the direction F. Then, the connecting pieces 328a to 328d in which the notches 333a and 333b and the thin area 332 are formed are deformed or cut, and the positioning mechanism 329 connected to the main body 312 rises upward. The fitted state between the protrusion on the imaging device 200 side and the recess 331b of the positioning piece 331 is released.
  • FIG. 12 shows a state in which each connecting piece 328 is cut and the positioning mechanism 329 is separated from the main body 312 by applying a load to the positioning mechanism 329.
  • the positioning mechanism 329 including the positioning piece 331 has already been separated, so the imaging device 200 is inserted into the auxiliary tool 300. Unable to position 200. Therefore, the user cannot attach the auxiliary tool 300 to the photographing device 200, and it is possible to prevent the photographing device 200 from being reinserted into the auxiliary tool 300 once inserted.
  • FIG. 13 is a schematic diagram showing the configuration of the plate 334 of the auxiliary tool 300 according to an embodiment of the present disclosure. Specifically, in FIG. 13, (a) shows a front view of the auxiliary tool 300, and (b) shows a side view of the auxiliary tool 300.
  • the auxiliary tool 300 can include a plate 334 along the outer periphery of the main body 312. By installing the plate 334 on the outer periphery of the main body 312, if the auxiliary tool 300 and the photographing device 200 are inserted more than necessary, the plate 334 will come into contact with the teeth or lips, and the auxiliary tool 300 or the imaging device 200 will be placed in the back of the throat excessively. It is possible to prevent the photographing device 200 from being inserted.
  • the plate 334 is formed in an annular shape along the outer periphery of the main body 312.
  • the plate 300 is installed on the proximal end 316 side of the auxiliary tool 300 at a position corresponding to the distance from the tip of the tongue depressor 315 to the subject's lips or incisors.
  • the plate 334 is arranged to protrude from the main body 312 toward the outer circumference in a direction perpendicular or substantially perpendicular to the direction in which the auxiliary tool 300 is inserted into the oral cavity.
  • it is desirable that the plate 334 has a height from the main body 312 in the outer circumferential direction that corresponds to the size of the subject's mouth when the subject opens his or her mouth.
  • the shape of the plate 334 is just one example, and it is sufficient that at least a portion thereof is along the outer periphery of the main body 312, and the plate 334 does not necessarily need to be formed in an annular shape. Furthermore, in such a case, the number of plates 334 does not need to be just one along the outer periphery of the main body 312, and a plurality of plates 334 may be installed.
  • the plate 334 may include one or more through holes 335a to 335d. As an example, it is formed to penetrate in the thickness direction along the outer shape of the plate 334, but of course it is not limited to this shape. For example, it may be formed by one or more small holes, or may be formed by other shapes. Further, in the example of FIG. 13, four through holes 335a to 335d are illustrated as the through holes, but of course the number and arrangement position are not limited to this. For example, small holes may be placed throughout, or one large hole may be placed at one location.
  • the plate 334 is integrally molded in advance when manufacturing the auxiliary tool 300.
  • the present invention is not limited to this, and the plate 334 may be formed in an annular shape (doughnut shape) and configured to be detachable from the auxiliary tool 300.
  • the auxiliary tool 300 is configured such that the diameter gradually becomes narrower from the base end 316 toward the distal end 314. Therefore, by preparing a plurality of plates 334 with different inner diameters R, the plates 334 can be installed at positions according to the depth of the subject's oral cavity, the age of the subject, the size of the subject's mouth, etc. becomes possible.
  • FIG. 14 is a block diagram showing the configuration of the photographing device 200 according to an embodiment of the present disclosure.
  • the photographing device 200 includes a camera 211, a light source 212, a processor 213, a memory 214, a display panel 215, an input interface 210, and a communication interface 216. Each of these components is electrically connected to each other via control lines and data lines. Note that the photographing device 200 does not need to include all of the components shown in FIG. 14, and can be configured by omitting some of them, or can include other components.
  • the photographing device 200 can include a battery or the like for driving each component.
  • the camera 211 functions as a photographing unit that detects reflected light reflected from the oral cavity, which is the subject, and generates a subject image.
  • the camera 211 includes, for example, a CMOS image sensor to detect the light, and a lens system and a drive system to realize a desired function.
  • the image sensor is not limited to a CMOS image sensor, but other sensors such as a CCD image sensor can also be used. Further, it is also possible to additionally use a photographing element depending on the band of reflected light to be detected.
  • CMOS image sensor that is a photographing element that detects wavelengths in a near-infrared light band from wavelengths in a visible light band
  • a sensor that is an infrared light photographing element that detects wavelengths in an infrared light band.
  • the camera 211 may be arranged adjacent to the camera 211, but may have an autofocus function, and is preferably set to focus on a specific area in front of the lens, for example. . Further, the camera 211 may have a zoom function, and is preferably set to take images at an appropriate magnification depending on the size of the pharynx or influenza follicle.
  • lymphoid follicles that appear in the deepest part of the pharynx located in the oral cavity have a pattern unique to influenza. Lymphoid follicles with this unique pattern are called influenza follicles, which are a characteristic sign of influenza and appear about two hours after the onset of symptoms.
  • influenza follicles which are a characteristic sign of influenza and appear about two hours after the onset of symptoms.
  • the processing system 1 of the present embodiment is used to determine the possibility of a subject suffering from influenza by, for example, photographing the pharynx of the oral cavity and detecting the follicles. Therefore, when the imaging device 200 is inserted into the oral cavity, the distance between the camera 211 and the subject becomes relatively short.
  • the camera 211 preferably has an angle of view (2 ⁇ ) such that the value calculated by [(distance from the tip of the camera 211 to the posterior wall of the pharynx)*tan ⁇ ] is 20 mm or more vertically and 40 mm or more horizontally.
  • 2 ⁇ the value calculated by [(distance from the tip of the camera 211 to the posterior wall of the pharynx)*tan ⁇ ] is 20 mm or more vertically and 40 mm or more horizontally.
  • the light source 212 is driven by an instruction from the processing device 100 or the imaging device 200, and functions as a light source section for irradiating light into the oral cavity.
  • Light source 212 includes one or more light sources 212.
  • the light source 212 includes one or more LEDs, and each LED emits light having a predetermined frequency band toward the oral cavity.
  • the light source 212 uses light having a desired band among an ultraviolet light band, a visible light band, and an infrared light band, or a combination thereof. When emitting light in a plurality of bands, a plurality of LEDs preset to emit light in each band are switched and displayed.
  • the processor 213 functions as a control unit that controls other components of the imaging device 200 based on a program stored in the memory 214.
  • the processor 213 controls the driving of the camera 211 and the light source 212 based on a program stored in the memory 214, and also controls the storage of the subject image photographed by the camera 211 in the memory 214.
  • the processor 213 performs a process of starting photographing a subject image by accepting an operation input from a user, and includes at least a portion of the cover frame 321 of the auxiliary tool 300 in the subject image based on the photographed subject image. is included, and if it is not included as a result of the determination, processing for outputting information indicating that the photographing device 200 is not inserted into the auxiliary tool 300, etc. are executed.
  • the processor 213 is mainly composed of one or more CPUs, but may be combined with other processors as appropriate.
  • the memory 214 is composed of RAM, ROM, nonvolatile memory, HDD, etc., and functions as a storage unit.
  • the memory 214 stores instructions for various controls of the imaging device 200 as programs. Specifically, the memory 214 performs a process of starting photographing of a subject image by accepting an operation input from a user, and includes a process of starting photographing of a subject image based on a photographed subject image, and a process of starting photographing of a subject image based on the photographed subject image.
  • the display panel 215 is provided on the display 203 and functions as a display section for displaying the subject image photographed by the photographing device 200 and information indicating that the photographing device 200 is not inserted into the auxiliary tool 300.
  • the display panel 215 is composed of a liquid crystal panel, but is not limited to a liquid crystal panel, and may be composed of an organic EL display, a plasma display, or the like.
  • the input interface 210 functions as an input unit that accepts the subject's instruction input to the processing device 100 and the imaging device 200.
  • Examples of the input interface 210 include a “shooting button” for instructing the shooting device 200 to start and end recording, a “power button” for turning on and off the power of the shooting device 200, and a “power button” for making various selections.
  • buttons and keys may be physically prepared, or may be displayed as icons on the display panel 215, and may be a touch panel or the like that is superimposed on the display panel 215 and arranged as the input interface 210. It may also be possible to make the selection possible.
  • the detection method of the subject's instruction input using the touch panel may be any method such as a capacitance method or a resistive film method.
  • the communication interface 216 functions as a communication unit for transmitting and receiving information to and from the processing device 100 and/or other devices.
  • Examples of the communication interface 216 include wired communication connectors such as USB and SCSI, wireless communication transmitting and receiving devices such as wireless LAN, Bluetooth (registered trademark), and infrared rays, and various connection terminals for printed mounting boards and flexible mounting boards. There are various things that can be mentioned.
  • FIG. 15 is a diagram showing a processing flow executed in the imaging device 200 according to an embodiment of the present disclosure.
  • the processing flow is mainly performed by the processor 213 of the photographing device 200 reading and executing a program stored in the memory 214.
  • the processor 213 determines whether an operation input by the user is accepted via the input interface 210 (for example, the power button) (S211). Note that at this time, if the processor 213 determines that the input by the user is not accepted, the processing flow ends.
  • the processor 213 determines that the user's input has been accepted, it outputs a standby screen to the display panel 215 (S212).
  • the standby screen (not shown) includes a through image photographed via the camera 211.
  • the processor 213 receives the user's operation input through the input interface 210, and receives the selection of information specifying the subject whose intraoral image is to be photographed (S213).
  • the processor 213 outputs the standby screen to the display panel 215 again (S214).
  • the user covers the tip of the imaging device 200 with the auxiliary tool 300 and inserts the imaging device 200 into the subject's oral cavity to a predetermined position.
  • the processor 213 determines whether the auxiliary tool 300 is attached to the photographing device 200 based on the subject image (through image) photographed by the camera 211 (S215). The determination is performed, for example, by inputting a photographed subject image to a trained assistive device attachment determination model stored in the memory 214. Note that the use of a trained assistive device attachment determination model in this determination is just one example, and rule-based image analysis processing is used to determine whether at least a part of the cover frame is included in the subject image, and It may be determined whether the tool 300 is attached to the photographing device 200 or not.
  • the processor 213 of the imaging device 200 does not need to execute the process. That is, the processing related to the determination involves transmitting the subject image photographed by the photographing device 200 to a server device connected via a network, and performing image analysis processing based on a learned assistive device wearing determination model or a rule in the server device. The determination may be made by applying the subject image to the subject image, and the photographing device 200 may receive the result from the server device.
  • FIG. 16 is a diagram showing an example of a screen output by the imaging device 200 according to an embodiment of the present disclosure. Specifically, FIG. 16 is a diagram illustrating a processing flow related to generation of the learned assistive tool attachment determination model used in S215 of FIG. 15. The processing flow may be executed by the processor 213 of the imaging device 200, or may be executed by the processor of another processing device connected via communication.
  • the processor acquires a subject image as a learning determination image using the camera 211 of the photographing device 200 (S311). Next, the processor labels the learning determination image with a correct answer label based on a determination made by the user or the like as to whether or not the image includes at least a portion of the cover frame 321 of the auxiliary tool 300. (S312). Then, the processor stores the assigned correct label information in association with the learning determination image used to assign the correct label (S313).
  • the processor executes a step of performing machine learning of the attachment determination pattern of the auxiliary tool 300 using them (S314).
  • this machine learning method provides a set of information to a neural network that combines neurons, and learns while adjusting the parameters of each neuron so that the output from the neural network is the same as the correct label information. This is done by repeating.
  • a step of acquiring a trained assistive device attachment determination model is executed (S315).
  • the acquired auxiliary device attachment determination model is stored in the memory 214 of the photographing device 200 or in another processing device connected to the photographing device 200 via a wired or wireless network. In this way, by using the learned assistive device determination model, it is determined whether or not at least a part of the cover frame 321 of the assistive device 300 is reflected in the subject image photographed by the camera 211. It becomes possible to do so.
  • FIG. 17 is a diagram showing an example of a screen output by the imaging device 200 according to an embodiment of the present disclosure.
  • FIG. 17 is a diagram showing an example of a subject image used for determination in S215 of FIG. 15.
  • the subject image photographed by the camera 211 of the photographing device 200 in addition to an image of the oral cavity that is the subject, there are also reflection areas 321a of the cover frame 321 reflected in the four corners of the subject image.
  • a region 321d is included. That is, the light emitted from the light source 212 of the photographing device 200 is reflected by the reflection area 321a to 321d of the cover frame 321, and is detected by the camera 211 of the photographing device 200.
  • the auxiliary tool 300 can be attached to the photographing device 200. It becomes possible to determine whether the device is attached or not.
  • the reflection areas 321a to 321d of the cover frame 321 can include structures having a predetermined pattern as necessary. For example, if the structure is the same as that of other areas of the cover frame 321 as shown in (a) of FIG. 8A, the predetermined pattern will not be drawn in the photographed image as shown in (a) of FIG. .
  • the cover frame 321 includes a structure formed of a predetermined pattern as shown in (b) or (c) of FIG. 8A, the structure shown in (b) or (c) of FIG. In addition to the cover frame 321, the structure is also drawn. By using such a structure, it becomes possible to determine the reflection of the cover frame 321 more accurately.
  • the reflection areas 321a to 321d included in the subject image are shown clearly separated from other areas.
  • the distances from the camera 211 are naturally different between the oral cavity that is the subject and the reflection areas 321a to 321d of the cover frame 321. Therefore, depending on the settings at the time of shooting, the reflection areas 321a to 321d may not be clearly divided and detected and output as shown in FIG. 17, but may be detected and output as blurred images. .
  • the processor 213 outputs a notification to the display of the display panel 215 indicating that the photographing device 200 is not inserted into the auxiliary device 300 ( S216).
  • FIG. 18 is a diagram showing an example of a screen output by the imaging device 200 according to an embodiment of the present disclosure.
  • FIG. 18 is a diagram showing an example of the notification output to the display of the display panel 215 in S216 of FIG. 15.
  • the message “No auxiliary device is attached. Please attach the auxiliary device to the tip of the photographing device” is taken.
  • a notification indicating that the device 200 is not inserted into the auxiliary tool 300 is output. By outputting such a notification, the user can reliably know whether the auxiliary tool 300 is not attached, and smoother photographing can be performed.
  • the notification may be output to the processing device 100 or other devices connected via communication, and displayed via these devices.
  • the photographing device 200 has an output section such as a speaker, notification may be made by voice via the output section.
  • notification may be made by vibration or light emission.
  • any notification may be used as long as it is a "notification indicating that the imaging device 200 is not inserted into the auxiliary device 300," and such a notification may be a notification indicating that the imaging device 200 has been inserted, or a notification prompting the insertion. It may be a notification like this.
  • the processor 213 accepts the user's operation to start photographing via the input interface 210 (for example, the photographing button). As a result, the processor 213 controls the camera 211 to start capturing an image of the subject (S217). This photographing of the subject image is carried out by pressing a photographing button and sequentially photographing a fixed number of images (for example, 30 images) at regular intervals. When the photographing of the subject image is completed, the processor 213 stores the photographed subject image in the memory 214 in association with the read subject ID information. Then, the processor 213 outputs the subject image stored in the memory 214 to the display panel 215 (S218).
  • the input interface 210 for example, the photographing button
  • the processor 213 controls the camera 211 to start capturing an image of the subject (S217). This photographing of the subject image is carried out by pressing a photographing button and sequentially photographing a fixed number of images (for example, 30 images) at regular intervals.
  • the processor 213 stores the photographed subject image in the memory
  • the user takes out the imaging device 200 along with the auxiliary tool 300 from the oral cavity, checks the subject image output on the display panel 215, and inputs an instruction for re-imaging if the desired image is not obtained. It is possible to do so. Therefore, the processor 213 determines whether or not an input of a re-imaging instruction from the user has been received via the input interface 210 (S219). If the processor 213 receives the input of the re-photographing instruction, the processor 213 displays the standby screen in S215 again and enables photographing of the subject image.
  • the processor 213 updates the memory via the communication interface 216.
  • the subject image stored in 214 and the subject ID information associated with the subject image are transmitted to the processing device 100 (S220). With the above, the processing flow ends.
  • the processor of the processing device 100 selects a judgment image to be used for judgment, and also selects the judgment image to be used for judgment.
  • the possibility of contracting a predetermined disease is determined using the following.
  • the results are then output to a display or the like.
  • this determination may be performed by rule-based image analysis processing, or a learned determination obtained by machine learning using a training subject image in which disease information such as influenza is associated as a correct label. The determination may be made using a model.
  • auxiliary device suitable for photographing the oral cavity of a subject, which assists the photographing, and a photographing device, program, and method for photographing the inside of the oral cavity using the auxiliary device. becomes.
  • the processes and procedures described herein can be implemented not only by what is explicitly described in the embodiments, but also by software, hardware, or a combination thereof. Specifically, the processes and procedures described in this specification can be realized by implementing logic corresponding to the processes in a medium such as an integrated circuit, volatile memory, nonvolatile memory, magnetic disk, or optical storage. be done. Further, the processes and procedures described in this specification can be implemented as a computer program and executed by various computers including processing devices and server devices.
  • Processing system 100 Processing device 200: Photographing device 201: Main body 202: Grip 203: Display 210: Input interface 211: Camera 212: Light source 212-1: Light source 213: Processor 214: Memory 215: Display panel 216: Communication interface 217: Engagement protrusion 218: Positioning protrusion 219: Diffusion plate 220: Shooting button 221: Power button 222: Tip 223: Accommodation space 224: Wall portion 225: Base end 226: Notification body 230: Connecting portion 231: Board 233: No.
  • polarizing plate 234 2nd polarizing plate 300 : Auxiliary tool 311 : Grip plate 312 : Main body 313 : Cover 314 : Tip 315 : Tongue depressor 316 : Base end 317 : Piece 318 : Engaging protrusion 319 : Groove 320 : Opening 321 : Cover frame 322: Notification window 323: Through hole 325: Recess 326: Coating layer 327: Transparent resin layer 328: Connecting piece 329: Positioning mechanism 330: Insertion hole 331: Positioning piece 331a: Inclined surface 331b: Recess 332: Thin area 333a: Notch 333b: Notch 400: Placement table 600: User 700: Target person

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Public Health (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Endoscopes (AREA)

Abstract

【課題】対象者の口腔の撮影に適した、撮影を補助する補助具、当該補助具を用いて口腔内を撮影する撮影装置、プログラム及び方法を提供する。 【解決手段】撮影装置による口腔内の撮影のために前記口腔内に挿入される補助具であって、状の本体と、前記本体の内部に前記撮影装置が挿入可能に、前記本体において前記補助具が前記口腔内に挿入される方向とは逆の方向の端部に構成された開口と、前記撮影装置によって検出される光を透過可能に、前記補助具が前記口腔内に挿入される方向の端部に構成されたカバーと、前記本体において前記補助具が前記口腔内に挿入される方向の端部に前記カバーが配置されるように前記本体と前記カバーとを接続し、前記開口から挿入された前記撮影装置によって撮影される画角内に少なくとも一部が写り込むように構成されたカバー枠と、を含む補助具が提供される。

Description

補助具、撮影装置、プログラム及び方法
 本開示は、対象者の口腔の撮影に適した、撮影を補助する補助具、当該補助具を用いて口腔内を撮影する撮影装置、プログラム及び方法に関する。
 従来より、医者によって、対象者の口腔の状態の変化を観察して、例えばウイルス性の風邪などの診断をすることが知られていた。非特許文献1は、口腔内に位置する咽頭の最深部に出現するリンパ濾胞にはインフルエンザに特有のパターンがあることを報告している。この特有のパターンを有するリンパ濾胞はインフルエンザ濾胞と呼ばれ、インフルエンザに特徴的なサインであって、発症後2時間程度で出現するとされる。しかし、このような咽頭部分は医師が直接視診することによって診断されており、画像を用いた診断がなされてこなかった。
宮本・渡辺著「咽頭の診察所見(インフルエンザ濾胞)の意味と価値の考察」日大医誌72(1):11~18(2013)
 そこで、上記のような技術を踏まえ、本開示では、様々な実施形態により、対象者の口腔の撮影に適した、撮影を補助する補助具、当該補助具を用いて口腔内を撮影する撮影装置、プログラム及び方法を提供することを目的とする。
 本開示の一態様によれば、「撮影装置による口腔内の撮影のために前記口腔内に挿入される補助具であって、状の本体と、前記本体の内部に前記撮影装置が挿入可能に、前記本体において前記補助具が前記口腔内に挿入される方向とは逆の方向の端部に構成された開口と、前記撮影装置によって検出される光を透過可能に、前記補助具が前記口腔内に挿入される方向の端部に構成されたカバーと、前記本体において前記補助具が前記口腔内に挿入される方向の端部に前記カバーが配置されるように前記本体と前記カバーとを接続し、前記開口から挿入された前記撮影装置によって撮影される画角内に少なくとも一部が写り込むように構成されたカバー枠と、を含む補助具」が提供される。
 本開示の一態様によれば、「口腔内の撮影のために前記口腔内に挿入され、筒状の本体と、前記本体において前記口腔内に挿入される方向とは逆の方向の端部に構成された開口と、前記本体において前記口腔内に挿入される方向の端部に構成されたカバーと、前記本体において前記口腔内に挿入される方向の端部に前記カバーが配置されるように前記本体と前記カバーとを接続するように構成されたカバー枠とを含む補助具に対して、前記開口から前記本体の内部に挿入される撮影装置であって、少なくとも一つのプロセッサを具備し、前記少なくとも一つのプロセッサは、用者による操作入力を受け付けることによって被写体画像の撮影を開始し、撮影された前記被写体画像に基づいて、前記被写体画像中に前記カバー枠の少なくとも一部が含まれているか否かの判定の結果、前記少なくとも一部が含まれていない場合には前記撮影装置が前記補助具に挿入されていないことを示す情報を出力するための処理をするように構成された、撮影装置」が提供される。
 本開示の一態様によれば、「口腔内の撮影のために前記口腔内に挿入され、筒状の本体と、前記本体において前記口腔内に挿入される方向とは逆の方向の端部に構成された開口と、前記本体において前記口腔内に挿入される方向の端部に構成されたカバーと、前記本体において前記口腔内に挿入される方向の端部に前記カバーが配置されるように前記本体と前記カバーとを接続するように構成されたカバー枠とを含む補助具に対して、前記開口から前記本体の内部に挿入される撮影装置を、使用者による操作入力を受け付けることによって被写体画像の撮影を開始し、撮影された前記被写体画像に基づいて、前記被写体画像中に前記カバー枠の少なくとも一部が含まれているか否かの判定の結果、前記少なくとも一部が含まれていない場合には前記撮影装置が前記補助具に挿入されていないことを示す情報を出力するための処理を行うように構成されたプロセッサとして機能させる、プログラム」が提供される。
 本開示の一態様によれば、「口腔内の撮影のために前記口腔内に挿入され、筒状の本体と、前記本体において前記口腔内に挿入される方向とは逆の方向の端部に構成された開口と、前記本体において前記口腔内に挿入される方向の端部に構成されたカバーと、前記本体において前記口腔内に挿入される方向の端部に前記カバーが配置されるように前記本体と前記カバーとを接続するように構成されたカバー枠とを含む補助具に対して、前記開口から前記本体の内部に挿入される撮影装置に含まれる少なくとも一つのプロセッサにより実行される方法であって、使用者による操作入力を受け付けることによって被写体画像の撮影を開始する段階と、撮影された前記被写体画像に基づいて、前記被写体画像中に前記カバー枠の少なくとも一部が含まれているか否かの判定の結果、前記少なくとも一部が含まれていない場合には前記撮影装置が前記補助具に挿入されていないことを示す情報を出力する段階とを含む方法」が提供される。
 本開示によれば、対象者の口腔の撮影に適した、撮影を補助する補助具、当該補助具を用いて口腔内を撮影する撮影装置、プログラム及び方法を提供することができる。
 なお、上記効果は説明の便宜のための例示的なものであるにすぎず、限定的なものではない。上記効果に加えて、又は上記効果に代えて、本開示中に記載されたいかなる効果や当業者であれば明らかな効果を奏することも可能である。
図1は、本開示の一実施形態に係る処理システム1の使用状態を示す図である。 図2は、本開示の一実施形態に係る処理システム1の使用状態を示す図である。 図3Aは、本開示の一実施形態に係る処理システム1の概略図である。 図3Bは、本開示の一実施形態に係る撮影装置200の構成を示す上面図である。 図4は、本開示の一実施形態に係る補助具300の構成を示す斜視図である。 図5は、本開示の一実施形態に係る補助具300の構成を示す側面図である。 図6は、本開示の一実施形態に係る撮影装置200と補助具300の使用状態を示す概略図である。 図7は、本開示の一実施形態に係る撮影装置200と補助具300の装着の様子を示す概略図である。 図8Aは、本開示の一実施形態に係る補助具300の正面の構成を示す概略図である。 図8Bは、本開示の一実施形態に係る補助具300の先端314の一部断面の構成を示す概略図である。 図9は、本開示の一実施形態に係る補助具300の正面の構成を示す概略図である。 図10は、本開示の一実施形態に係る撮影装置200の断面の構成を示す概略図である。 図11は、本開示の一実施形態に係る補助具300の上面の構成を示す概略図である。 図12は、本開示の一実施形態に係る補助具300の位置決め機構329の構成を示す概略図である。 図13は、本開示の一実施形態に係る補助具300のプレート334の構成を示す概略図である。 図14は、本開示の一実施形態に係る撮影装置200の構成を示すブロック図である。 図15は、本開示の一実施形態に係る撮影装置200において実行される処理フローを示す図である。 図16は、本開示の一実施形態に係る学習済みモデルの生成に係る処理フローを示す図である。 図17は、本開示の一実施形態に係る撮影装置200において出力される画面の例を示す図である。 図18は、本開示の一実施形態に係る撮影装置200において出力される画面の例を示す図である。
 添付図面を参照して本開示の様々な実施形態を説明する。なお、図面における共通する構成要素には同一の参照符号が付されている。
<第1実施形態>
1.処理システム1の概要
 本開示に係る処理システム1は、主に対象者の口腔の内部が撮影された被写体画像を得るために用いられる。特に、当該処理システム1は、口腔の喉奥周辺、具体的には咽頭を撮影するために用いられる。したがって、以下においては、本開示に係る処理システム1を咽頭の撮影に用いた場合について主に説明する。ただし、咽頭は撮影部位の一例であって、当然に、口腔内であれば扁桃などの他の部位であっても、本開示に係る処理システム1を好適に用いることができる。
 本開示に係る処理システム1は、対象者の口腔の少なくとも咽頭領域が含まれた被写体を撮影して得られた被写体画像から、所定の疾患に対する罹患の可能性を判定し、所定の疾患に対する診断又はその補助をするために用いられる。処理システム1によって判定される疾患の一例としては、インフルエンザが挙げられる。通常、インフルエンザの罹患の可能性は、対象者の咽頭や扁桃領域を診察したり、咽頭領域に濾胞などの所見の有無を判断することによって診断される。しかし、処理システム1を用いてインフルエンザに対する罹患の可能性を判定しその結果を出力することで、その診断又は補助をすることが可能となる。なお、インフルエンザの罹患の可能性の判定は一例である。処理システム1は、罹患することによって口腔内の所見に差が現れる疾患の判定であれば、いずれであっても好適に用いることができる。なお、所見の差とは、医師等により発見されかつ医学的にその存在が既知となっているものに限らない。例えば、医師以外の者によって認識され得る差や、人工知能や画像認識技術によってその検出が可能な差であれば、処理システム1に対して好適に適用することが可能である。そのような疾患の一例としては、インフルエンザのほかに、溶連菌感染症、アデノウイルス感染症、EBウイルス感染症、マイコプラズマ感染症、手足口病、ヘルパンギーナ、カンジダ症などの感染症、動脈硬化、糖尿病、高血圧症などの血管障害または粘膜障害を呈する疾病、口腔癌、舌癌、咽頭癌などの腫瘍などが挙げられる。
 なお、本開示において、疾患に対する「判定」や「診断」等の用語を用いるが、これらは医師による確定的な判定又は診断を必ずしも意味するものではない。例えば、本開示の処理システム1を対象者自らが使用したり、医師以外の使用者が使用したりして、処理システム1に含まれる処理装置100によって判定又は診断されることも当然に含みうる。
 また、本開示において、撮影装置200による撮影の対象となる対象者は、患者、被検者、診断使用者、健常者など、あらゆるヒトを含みうる。また、本開示において撮影装置200を保持して撮影の操作を行う使用者は、医師、看護師、検査技師などの医療従事者に限らず、使用者自身などあらゆるヒトを含みうる。本開示に係る処理システム1は、典型的には医療機関で使用されることが想定される。しかし、この場合に限らず、例えば使用者の自宅や学校、職場など、その使用場所はいずれでもよい。
 また、本開示において、対象者と使用者は、それぞれ上記ヒトをそれぞれくべつするための呼称として用いているに過ぎず、両者がそれぞれ異なる者であってもよいし、同一の者であってもよい。すなわち、撮影装置を用いて自らの口腔内の画像を撮影するような場合には、その者が対象者でもあり使用者にもなりうる。
 また、本開示においては、上記のとおり、被写体としては対象者の口腔の少なくとも一部が含まれていればよい。また、判定される疾患も口腔内の所見に差が現れる疾患であればいずれでもよい。しかし、以下においては、被写体として咽頭又は咽頭周辺を含み、疾患としてインフルエンザに対する罹患の可能性を判定する場合について説明する。
 また、本開示においては、被写体画像や判定画像は、一又は複数の動画であってもよいし一又は複数の静止画であってもよい。動作の一例としては、電源ボタンが押下されると、カメラによるスルー画像の取り込みを行い、取り込まれたスルー画像がディスプレイ203に表示される。その後、使用者によって撮影ボタンが押下されると、一又は複数の静止画像がカメラによって撮影され、撮影された画像をディスプレイ203に表示する。又は、使用者によって撮影ボタンが押下されると、動画の撮影が開始され、その間カメラで撮影されている画像がディスプレイ203に表示される。そして、再度撮影ボタンが押下されると動画の撮影が終了される。このように、一連の動作において、スルー画像や静止画、動画など様々な画像がカメラによって撮影され、ディスプレイに表示される。さらに当該表示または本開示に係る処理のために被写体画像又は判定画像に対して様々な画像処理が施された処理済みの画像となることがある。しかし、被写体画像及び判定画像はこれらのうちの特定の画像のみを意味するのではなく、カメラで撮影されたこれら画像の全てを含みうる。また、このような被写体画像は、全てにおいて口腔の少なくとも一部が含まれている必要はなく、上記のようにスルー画像などにおいては当然口腔の少なくとも一部が含まれていないこともある。
 図1は、本開示の一実施形態に係る処理システム1の使用状態を示す図である。図1によれば、本開示に係る処理システム1は、処理装置100と撮影装置200とを含む。使用者は、撮影装置200の先端に補助具300を被覆するように装着し、補助具300とともに撮影装置200を対象者の口腔710に挿入する。具体的には、まず、使用者(対象者700自らの場合もあれば対象者700とは異なるものの場合もある)が撮影装置200の先端に、補助具300を被覆するように装着する。そして、使用者は、補助具300が装着された撮影装置200を、口腔710内に挿入する。このとき補助具300の先端は、門歯711を通過して軟口蓋713近辺まで挿入される。つまり、撮影装置200も同様に軟口蓋713近辺まで挿入される。このとき、補助具300(舌圧子として機能する。)によって、舌714が下方へ押しやられ舌714の動きが制限される。これによって、使用者は、撮影装置200の良好な視野を確保して、撮影装置200の前方に位置する咽頭715の良好な撮影が可能となる。また、撮影装置200による撮影において、撮影装置200は対象者の口腔710の内部に挿入されることとなる。そのため、当該補助具300によって撮影装置200の先端を被覆することによって、撮影装置200に口腔内の粘膜、唾液、体液等が直接接触するのを防止し、撮影装置200の汚染を防止することが可能となる。なお、このような補助具300を用いない場合には、撮影装置200の少なくとも先端部分については使用の都度消毒や洗浄などの処理をする必要がある。したがって、使用者の手間を省くという観点からも補助具300を使用することが望ましい。
 撮影された被写体画像(典型的には、咽頭715を含む画像)は、撮影装置200から有線又は無線ネットワークで通信可能に接続された処理装置100に送信される。被写体画像を受信した処理装置100のプロセッサがメモリに記憶されたプログラムを処理することによって、被写体画像から判定に用いられる判定画像の選択が行われるとともに、当該判定画像を用いて所定の疾患に対する罹患の可能性が判定される。そして、結果がディスプレイなどに出力される。
 図2は、本開示の一実施形態に係る処理システム1の使用状態を示す図である。具体的には、図2は、処理システム1のうち撮影装置200について、使用者600が把持した状態を示す図である。図2によれば、撮影装置200は、口腔内に挿入される側から、本体201、グリップ202及びディスプレイ203により構成される。本体201及びグリップ202は、口腔への挿入方向Hに沿って所定長の略柱状に形成される。また、ディスプレイ203は、グリップ202の本体201側とは反対側に配置される。そのため、撮影装置200は、全体として略柱状に形成されており、鉛筆を把持するような持ち方をすることによって、使用者600に把持される。つまり、使用状態においてディスプレイ203の表示パネルが使用者600自身の方向を向くため、撮影装置200によって撮影された被写体画像をリアルタイムで確認しながら撮影装置200を容易に取り扱うことが可能である。
 また、ディスプレイ203に被写体画像が通常の向きに表示される向きで使用者600がグリップ202を把持するとき、撮影ボタン220がグリップの上面側に配置されるように構成されている。そのため、使用者600が把持したときに、使用者600が撮影ボタン220を人差し指等で容易に押下可能になっている。
2.処理システム1の構成
 図3は、本開示の一実施形態に係る処理システム1の概略図である。図3によれば、処理システム1は、処理装置100と、当該処理装置100に有線又は無線ネットワークを介して通信可能に接続された撮影装置200とを含む。処理装置100は、使用者による操作入力を受け付けて、撮影装置200による撮影を制御する。また、処理装置100は、撮影装置200によって撮影された被写体画像を処理して、対象者のインフルエンザへの罹患の可能性を判定する。さらに、処理装置100は、判定された結果を出力して、対象者、使用者又は医師等に、その結果を通知する。
 撮影装置200は、その先端が対象者の口腔内に挿入されて、口腔内、特に咽頭を撮影する。その具体的な処理については、後述する。撮影された被写体画像は、有線又は無線ネットワークを介して処理装置100へ送信される。
 なお、処理システム1は、必要に応じてさらに載置台400を含むことが可能である。載置台400は、撮影装置200を安定的に載置することが可能である。また、載置台400は、有線ケーブルを介して電源に接続することで、載置台400の給電端子から撮影装置200の給電ポートを通じて撮影装置200に給電することが可能である。
3.撮影装置200の構成
 本開示に係る処理システム1は、処理装置100で処理するための画像を撮影する撮影装置200を含む。図3Bは、本開示の一実施形態に係る撮影装置200の構成を示す上面図である。以下、図3Bによって、撮影装置200の具体的な構成について説明する。
 図3Bによると、本体201は、基端225及び先端222を備え、光源212から光が照射される方向、すなわち口腔内に挿入される方向Hに略平行な方向に所定長の長さを有する柱状体によって構成されている。そして、本体201の少なくとも先端222が、口腔に挿入される。
 本体201は、その断面が真円となる中空の円筒形をした柱状に形成される。その壁部224は、その内部に光を導光可能な材料であればいずれでもよく、一例としては熱可塑性樹脂を用いて得ることができる。熱可塑性樹脂には、鎖状ポリオレフィン系樹脂(ポリプロピレン系樹脂等)、環状ポリオレフィン系樹脂(ノルボルネン系樹脂等)のようなポリオレフィン系樹脂、トリアセチルセルロース、ジアセチルセルロースのようなセルロースエステル系樹脂、ポリエステル系樹脂、ポリカーボネート系樹脂、(メタ)アクリル系樹脂、ポリスチレン系樹脂、又はこれらの混合物、共重合物などが用いられる。すなわち、本体201の壁部224は、光源から照射された光を口腔内又は拡散板方向に導光するための導光体として機能する。
 本体201は、中空に形成されるため、壁部224によってその内面に収容空間223が形成される。この収容空間223には、カメラ211が収容される。なお、本体201は、収容空間223を有する柱状に形成されさえすればよい。したがって、収容空間223は、断面が真円の円筒形を有する必要はく、断面が楕円であったり多角形であってもよい。また、本体201は、必ずしも内部が中空に形成される必要もない。
 グリップ202は、その先端が本体201の基端225に接続される。使用者は当該グリップ202を把持して撮影装置200の抜き差しなどの操作を行う。グリップ202は、口腔内に挿入される方向Hに略平行な方向に、すなわち本体201の長手方向に沿って、所定長の長さを有する柱状体によって構成され、本体201と方向Hにおいて同一直線上に配置されている。なお、本実施形態では、垂直方向の断面が略長円形になるように形成されているが、長円形である必要はなく、真円や楕円、多角形であってもよい。
 グリップ202は、本体201の基端225に最も近い位置に連結部230が形成され、当該連結部230を介して本体201に連結される。連結部230の外周には、補助具300を位置決めするための係合突起217(217-1~217-4)と、位置決め突起218とを有する。係合突起217は、補助具300に設けられた係合突起318(318-1~318-4)と互いに係合する。また、位置決め突起218は、補助具300に設けられた挿入穴330に挿入されて、撮影装置200と補助具300とを互いに位置決めする。なお、本実施形態においては、本体201の係合突起217は、合計4個の係合突起(係合突起217-1~217-4)が、グリップ202の表面であって、本体201の基端225近傍の位置に、等間隔に配置される。また、位置決め突起218は、グリップ202の表面の係合突起217の間であって、本体201の基端225近傍の位置に、一つ配置される。しかし、これに限らず、係合突起217と位置決め突起218のいずれか一方を配置するだけであってもよい。また、その個数も、係合突起217及び位置決め突起218のいずれも、一又は複数の個数であれば、何個であってもよい。
 また、グリップ202は、その上面で本体201の基端225に近い位置、すなわちグリップ202の口腔内の挿入方向Hにおける先端付近に撮影ボタン220を含む。これにより、使用者600が把持したときに、使用者600が撮影ボタン220を人差し指等で容易に押下可能になっている。また、グリップ202は、その上面でディスプレイ203に近い位置、すなわちグリップ202の撮影ボタン220と反対側の位置に電源ボタン221が配置されている。これにより、使用者600が把持して撮影しているときに、誤って電源ボタン221を押下してしまうのを防止することが可能となる。
 ディスプレイ203は、全体として略直方体形状をし、本体201と方向Hにおいて同一直線上に配置されている。また、ディスプレイ203は、口腔内に挿入される方向Hの反対方向(つまりは、使用者側の方向)の面に表示パネルを含む。したがって、ディスプレイ203は、口腔内に挿入される方向Hに略平行になるように形成された本体201及びグリップ202の長手方向に対して、表示パネルを含む面が略垂直になるように形成される。そして、表示パネルを含む面に相対する面において、グリップ202の口腔とは反対側でグリップ202と連結される。なお、ディスプレイの形状は、略直方体形状に限らず、円柱状などいかなる形状であってもよい。
 ここで、撮影装置200は、表示パネルを含む面が載置面に接するように縦方向に載置することが可能である。そのため、ディスプレイ203の表示パネルを含む面は、すくなくともその外周が載置に適した略平面上に形成される。
 拡散板219は、本体201の先端222に配置され、光源212から照射され、本体201を通過した光を口腔内に向けて拡散する。拡散板219は、本体201の導光可能に構成された部分の断面形状に対応した形状を有する。本実施形態においては、本体201は、中空の円筒形に形成されている。したがって、拡散板219の断面も、その形状に対応して中空状に形成される。
 カメラ211は、拡散板219から拡散され口腔内に照射され、被写体に反射してきた反射光を検出して、被写体画像を生成するために用いられる。カメラ211は、本体201の壁部224の内面、すなわち本体201の内部に形成された収容空間223に、本体201と方向Hにおいて同一直線上になるように配置される。なお、本実施形態では、カメラ211は一個のみ記載しているが、撮影装置200は複数のカメラを含んでもよい。複数のカメラを用いて被写体画像を生成することにより、立体形状に関する情報を被写体画像が含むことになる。また、本実施形態では、カメラ211は、本体201の収容空間223に配置されているが、本体201の先端222又は本体201(本体201の内部であっても本体201の外周上であってもよい)に配置されてもよい。
4.補助具300の構成
 図4は、本開示の一実施形態に係る補助具300の構成を示す斜視図である。補助具300は、対象者の口腔内の撮影を補助するための道具である。したがって、撮影装置200で口腔内を撮影する場合に、必ず必要とするものではなく、使用者又は対象者の所望に応じて使用されなくてもよい。補助具300には、撮影装置200の少なくとも先端側の一部が挿入される。したがって、補助具300は、撮影装置200の邪魔にならず良好な視野を確保するという観点から、少なくとも一部が透光性を有することが好ましい。
 本実施形態においては、補助具300は樹脂の一体成型によって製造される。しかし、紙や布、金属などの他の素材やそれらの組み合わせによって製造されてよい。また、補助具300は、使い捨てタイプであることが望ましいが、再利用可能なタイプであってもよい。このような樹脂としては、一例としては熱可塑性樹脂が挙げられる。熱可塑性樹脂には、鎖状ポリオレフィン系樹脂(ポリプロピレン系樹脂等)、環状ポリオレフィン系樹脂(ノルボルネン系樹脂等)のようなポリオレフィン系樹脂、トリアセチルセルロース、ジアセチルセルロースのようなセルロースエステル系樹脂、ポリエステル系樹脂、ポリカーボネート系樹脂、(メタ)アクリル系樹脂、ポリスチレン系樹脂、ビニル系樹脂、ナイロン系樹脂、プリウレタン、フッ素系樹脂、又はこれらの混合物、共重合物などが用いられる。なお、本実施形態においては、材料の選択又は加工時の厚さに応じて容易に変形する補助具300を構成するのが好ましい。このように構成することによって、上記のとおり補助具300を使い捨てタイプとする場合など、容易に廃棄が可能である。
 図4によると、補助具300は、筒状に形成された本体312と、本体312の基端316に配置され一対に構成される把持板311と、本体312の先端314の近傍に配置された舌圧子315とを含む。
 本体312は、その内部に撮影装置200の本体201の先端222側の少なくとも一部を被覆するように構成されているため、本体201の長さに対応して、補助具300が口腔内に挿入される方向である方向Hに沿って所定長の長さを有する円筒状に形成される。そして、基端316側には撮影装置200を挿入するための開口320を、先端314側には撮影装置200の光源212からの照射光と被写体からの反射光とを通過させるためのカバー313を有する。なお、本実施形態においては、補助具300は、先端314から口腔内に挿入される。
 また、本実施形態においては、撮影装置200の本体201は、基端225から先端222にかけて実質的に一定の内径及び外径を有する。したがって、補助具300の本体312も、この形状に対応して、内径及び外径が長手方向にわたって実質的に一定に形成される。なお、本体312の断面形状は、撮影装置200の本体201の断面形状に対応して形成されるのが好ましいが、挿入可能であればいずれの形状でもよく、真円、楕円、多角形などのいずれの形状であってもよい。
 一対に構成される把持板311は、本体312の基端316に沿って、補助具300が口腔内に挿入される方向、すなわち方向Hに対して垂直又は略垂直な方向に、本体312の外側に向かって延伸するように構成される。すなわち、把持板311は、当該構成を有することによって、使用者が対象者の口腔内に補助具300を挿入する際に、手で把持するために使用される。本実施形態においては、把持板311は、補助具300が口腔内に挿入されたときに、先端側の面が対象者の唇などに当接することで、それ以上の補助具300の挿入を規制するための規制部材としても機能するとともに誤嚥防止をすることが可能である。また、把持板311が外側に向かって延伸するように構成されているため、補助具300そのものが床面等において転がるのを防止することが可能である。なお、本実施形態においては、把持板311は、本体312の基端316側に上下方向に対称となるように一対の把持板を配置したが、本体312の基端316に沿ってドーナツ状に形成してもよく、その形状はいかなる形状であってもよい。
 舌圧子315は本体312の下部(口腔内の舌方向の側)に配置され、舌方向に向かってブレード上に形成される。撮影装置200で撮影する際に、対象者の舌が撮影装置200の前方で動くことによって、口腔内の撮影が阻害される。舌圧子315は、舌を下方へ押しやって舌の口腔内における動きを制限し、舌が撮影装置200の前方に位置するのを防止する。したがって、本実施形態においては舌圧子315をブレード状に形成しているが、この機能を実現可能であればいかなる形状であってもよい。
 図5は、本開示の一実施形態に係る補助具300の側面の構成の概略を示す側である。図5によると、上記のとおり、補助具300は、本体312の先端314側近傍に舌圧子315と、基端316側に把持板311を備える。
 また、本体312の基端316側には、撮影装置200が基端316側から挿入されたときに位置決めするための機構が備えられている。具体的には、本体312は、本体312の外周に対して垂直な方向に所定の長さで形成された一対の溝319と、これらによって形成された片317と、片317にそれぞれ配置され撮影装置200のグリップ202の先端に配置された各係合突起217に係合するように構成された係合突起318と、グリップ202の位置決め突起218が挿入される挿入穴330とを有する。
 係合突起318は、撮影装置200のグリップ202に配置された各係合突起217に対応する位置であって、本体312の内面に向かう方向に突出して設けられる。したがって、本実施形態においては、4個の係合突起217-1~217-4に対応する位置に、4個の係合突起318-1~318-4が配置される。また、挿入穴330は、撮影装置200のグリップ202に配置された位置決め突起218に対応する位置に設けられる。したがって、本実施形態においては、1個の位置決め突起218に対応する位置に、1個の挿入穴330が配置される。
5.撮影装置200及び補助具300の使用状態
 図6は、本開示の一実施形態に係る撮影装置200と補助具300の使用状態を示す概略図である。以下、補助具300に対して撮影装置200が挿入された場合について、図6を参照しつつ説明する。まず、撮影装置200が補助具300の開口320を介して基端316に挿入され、先端314近傍まで達すると、撮影装置200のグリップ202の外方向に突出して形成された係合突起217と、補助具300の本体312の内面に向かって形成された係合突起318とが当接する。ここで、本実施形態においては、本体312の係合突起318-1~318-4は、一対の溝319-1a及び319-1b~319-4a及び319-4bによって形成された片317-1~317-4に形成されている。したがって、撮影装置200の係合突起217と補助具300の係合突起318が当接した状態でさらに撮影装置200を挿入する方向に力が加わると、一対の溝319で形成された片317が持ち上げられる。これによって、撮影装置200の係合突起217が、補助具300の係合突起318を越えてさらに挿入される。
 次いで、補助具300の係合突起318を越えて撮影装置200が挿入されると、撮影装置200のグリップ202上に外方向に突出して設けられた位置決め突起218が、補助具300の挿入穴330に挿入される。そして、先端314側に形成されている挿入穴330の壁面に撮影装置200の位置決め突起218が当接する。これによって、撮影装置200が補助具300の先端314方向に、これ以上挿入されるのが規制される。
 すなわち、本実施形態においては、撮影装置200が補助具300に完全に挿入された状態においては、撮影装置200が挿入される方向への撮影装置200の移動は位置決め突起218と挿入穴330によって規制され、当該方向と反対方向、すなわち撮影装置200が取り外される方向への撮影装置200の移動は係合突起217と係合突起318によって規制される。このような位置決め突起218及び挿入穴330は、撮影装置200及び補助具300の周方向において好ましくは1カ所又は複数設置される場合は非対称に設置される。このように設置することで、撮影装置200に対する補助具300の周方向の位置、及び移動を規制することが可能となる。すなわち、撮影装置200との上下方向の向きと補助具300の上下方向の向きを常に一定にすることができ、例えば撮影装置200のディスプレイ203の下方に常に舌圧子315が位置するように設置することが可能となる。
 ここで、図7は、本開示の一実施形態に係る撮影装置200と補助具300の装着の様子を示す概略図である。具体的には、図7は、補助具300に対して撮影装置200が挿入される場合の様子を、補助具300の基端316付近及び撮影装置200の連結部230付近を拡大して示す図である。図7によれば、撮影装置200の連結部230の上面に通知体226(図6等において不図示)を含む。このような通知体226の一例としては、位置又は複数のLEDなどの発光体が挙げられる。通知体226は、撮影装置200の電源ボタン221の押下によって撮影装置200の電源がオンになると発光され、再度の電源ボタン221の押下によって電源がオフになると発光が停止される。なお、図7の例では、通知体226を連結部230の上面に配置したが、当該通知体226の位置は補助具300によって被覆される位置であればどこに配置されてもよい。
 また、通知体226を有する撮影装置200が挿入される補助具300において、基端316側の把持板311の近辺に通知窓322を含む。当該通知窓322は、一例としては補助具300を厚さ方向に貫通する貫通孔として構成されていてもよいし、その周辺領域に対して通知体226から発光される光の透過率が高い材質により構成されてもよい。逆に言えば、補助具300は、通知窓322及びカバー313(図4)を除く領域、すなわち少なくとも通知窓322の周囲の領域は、光を不透過の材質で構成するか、通知窓322よりも透過率が低い材質で構成されて、通知体226からの光の少なくとも一部の透過を阻害するようにしてもよい。
 さらに、撮影装置200が補助具300の開口から挿入されて、撮影装置200の係合突起217及び補助具300の係合突起318によって互いが位置決めされた状態において、通知体226と通知窓322は互いに上下に重なり合うように位置する。すなわち、補助具300の通知窓322は、このような状態において、撮影装置200の通知体226の配置位置と相対する位置に配置されることにより、通知窓322より通知体226から発光する光を視認することが可能となる。これによって、使用者は撮影装置200に補助具が装着されていることを視覚的に確認することが可能となる。
 なお、図7の例では、通知体226をLEDにより構成される場合について説明した。しかし、通知体226は通知窓322を介して補助具300に撮影装置200が挿入されたことを通知できれば良い。すなわち、通知体226として単に着色した着色部によって構成したり、文字やパターン等により構成することも可能である。
 図8Aは、本開示の一実施形態に係る補助具300の正面の構成を示す概略図である。具体的には、図8Aは、補助具300を正面から見た場合において、補助具300の構造と、撮影装置200の画角と補助具300のカバー枠との関係について説明するための図である。
 図8Aによると、補助具300は、補助具300が口腔内に挿入される方向とは反対方向の端部である基端316において、本体312から外側に当該方向に対して垂直又は略垂直な方向に伸延された一対の把持板311(把持板311a及び把持板311b)を含む。当該把持板311は、その厚み方向、つまり補助具300が口腔内に挿入される方向に対して貫通した貫通穴323(貫通穴323a及び貫通穴323b)を含でもよい。このような貫通穴323は、一例としては、把持板311の外形に沿うような形状に形成されるが、当然このような形状のみには限らない。例えば、一又は複数の小孔により形成されてもよいし、他の形状により形成してもよい。このような貫通穴323を把持板311に設けることにより、例えば補助具300が口内に全て挿入されてしまったとしても、当該貫通穴323があることによって対象者は呼吸を阻害することはない。
 また、補助具300は、補助具300が口腔内に挿入される方向の端部である先端314において、撮影装置200によって検出される光が透過可能なカバー313を含む。このようなカバー313は、補助具300が口腔内に挿入される方向に対して垂直な方向における本体312の断面形状に沿うように形成される。なお、当該形状は、当然に、本体312の断面形状に沿う形状には限らない。撮影装置200による被写体画像の撮影を過剰に阻害しない形状であればいずれでもよい。
 補助具300は、このようなカバー313を補助具300が口腔内に挿入される方向の端部に配置するために、カバー313の周囲に配置され、本体312とカバー313とを接続するカバー枠321を含む。当該カバー枠は、本体312と接する側の形状は本体312の断面に沿う形状に形成され、カバー313と接する側の形状はカバー313の外形に沿う形状に形成される。このようなカバー枠321は、必ずしも本体312又はカバー313と明確に区別可能な構成部品として形成されている必要はなく、本体312の一部としてカバー313に接する領域、又はカバー313の一部として本体312に接する領域のことを意味してもよい。
 カバー枠321は、撮影装置200を補助具300に対して挿入し位置決めされた場合において、撮影装置200によって撮影される画角内に写り込む写り込み領域を、その少なくとも一部に有する。図8Aの例では、写り込み領域は、四角形の画角の四隅に対応するように、写り込み領域321a~写り込み領域321dの4つの写り込み領域が形成されている。なお、当該写り込み領域321a~写り込み領域321dは、図8Aの例では4カ所形成されているが、当然これのみには限られず、1か所のみであってもよいし複数個所形成してもよい。
 ここで、図8Bは、本開示の一実施形態に係る補助具300の先端314の一部断面の構成を示す概略図である。具体的には、図8Bは、図8Aに示された写り込み領域321a付近の長手方向の断面を概略的に示した図である。図8Bによると、補助具300は、その外形を形成する本体312と、本体312の形状に沿うように本体312の内部に形成されたカバー313と、本体312とカバー313とを接続するカバー枠321とを含む。ここで、カバー枠321は、一例としては、本体312の内面から内部に向かう方向Gに突出するように構成される。そのため、図8Bにおいて破線で示すように、本体312の内壁に沿って撮影装置200が挿入されると、カバー枠321は撮影装置200の短手方向(つまり、方向Gと平行な方向)の面と、少なくとも一部が相対する位置関係となる。そのため、撮影装置200において被写体画像の撮影が行われると、カバー枠321の相対する領域が写り込み領域321aとして画角内に写り込むこととなる。
 なお、図8Bに示すように、好適には、カバー枠321は、カバー313の内面に対して方向Gに垂直な方向に沿って突出するように構成されてもよい。このように構成することによって、撮影装置200の先端が直接カバー313に接触するのを防止することが可能である。
 再び図8Aに戻り、写り込み領域321a~写り込み領域321dは、(a)に示すように、当該領域以外のカバー枠321と同じ構造を有するように形成されていてもよい。また、写り込み領域321a~写り込み領域321dは、(b)及び(c)に示すように、補助具300が口腔内に挿入される方向において、カバー枠321の内側表面又は外側表面の少なくとも一部に、所定のパターンから構成される構造体を含んでもよい。(b)の例では、当該構造体は、所定間隔で複数形成された凹溝又は凸状紋から構成されている。また、(c)の例では、当該構造体は、溝状に形成された所定の文字列から構成されている。なお、このような構造体は、凹状又は凸状のパターンや表面にプリントされたパターンなど、その形成方法はいずれであってもよい。
 なお、図8A及び図8Bの例では、カバー枠321の相対する領域に写り込み領域321a~写り込み領域321dが形成される場合について説明した。しかし、これらの例は一例であって当然この例のみには限らない。本実施形態において、写り込み領域は、撮影装置200から照射された光等の撮影に用いられる光を反射してカメラ211のセンサで検出可能な反射光を生成できる領域であればよい。したがって、補助具300のいずれかにおいて、このような領域を有しさえいれば良く、写り込み領域321a~写り込み領域321dが他の領域と物理的に区分けされていたり、意図して加工や成型時にあらかじめ形成されておく必要はない。
 図9は、本開示の一実施形態に係る補助具300の正面の構成を示す概略図である。具体的には、図9は、補助具300を正面から見た場合において、カバー313の表面構造を説明するための図である。
 図9によると、補助具300が口腔内に挿入される方向の端部である先端314において、本体312の内側にカバー枠321を介して接するように形成されたカバー313を含む。当該カバー313は、撮影装置200から口腔内に照射された光を透過させるとともに、被写体に反射した光を撮影装置200の方向に透過させるため、これら光を透過可能な材料により形成されている。ここで、補助具300は、撮影装置200を被覆するようにして口腔内に挿入されるため、対象者による呼気の影響を常に受けることとなる。すなわち、カバー313は、対象者からの呼吸によりその表面に曇りが生じ、撮影装置200により被写体の撮影にこの曇りが悪影響を及ぼす可能性がある。そのため、必要に応じて、補助具300が口腔内に挿入される方向において、カバー313の外表面又は内表面には防曇剤を積層してもよい。
 防曇剤は、当該防曇剤を積層することでカバー313の外表面又は内表面にコーティング層を形成してぬれ性向上させることで防曇性を付与する機能を有する。このような防曇剤には、特に以下に例示するものに限定されるわけではないが、ケイ素系材料の防曇剤や、界面活性剤に代表される高分子型又は低分子型親水性材料(例えば、ショ糖脂肪酸エステル、グリセリン脂肪酸エステル、ポリグリセリン脂肪酸エステル、ソルビタン脂肪酸エステル、ポリオキシエチレンアルキルエーテル、ポリオキシエチレンアルキルフェニルエーテル、ポリオキシエチレンポリオキシプロピレンブロックコポリマー、ポリエチレングリコール脂肪酸エステル、ポリオキシエチレンソルビタン脂肪酸エステル、ポリオキシエチレングリセリン脂肪酸エステル、ポリオキシエチレンポリグリセリン脂肪酸エステル、脂肪酸アルカノールアミド又はこれらの組み合わせを主成分として含むノニオン性防曇剤や、ラウリルジメチルアミノ酢酸ベタイン、ステアリルジメチルアミノ酢酸ベタインなどのアルキルベタイン類、コカミドプロピルベタインなどの脂肪酸アミドプロピルベタイン類、2-アルキル-N-カルボキシメチル-N-ヒドロキシエチルイミダゾリニウムベタインなどのアルキルイミダゾール類、ラウロイルグルタミン酸ナトリウムなどのアミノ酸類、ラウリルジメチルアミンN-オキシド、オレイルジメチルアミンN-オキシドなどのアミンオキシド類又はこれらの組み合わせを主成分として含む両性防曇剤など)、MCPポリマー系の防曇剤や、これらの組み合わせが適宜用いられる。
 このような防曇剤は、カバー313に対してあらかじめ塗布されていてもよいし、後から塗布されてもよい。また、液状の防曇剤を塗布する場合に限らずあらかじめ防曇剤が積層されたシート状のものを積層するようにしてもよい。
 ここで、防曇剤をカバー313に積層した場合であっても、又は防曇剤を積層することなくカバー313のみを用いた場合であっても、撮影装置200から照射される光や、被写体に反射する光などの影響を受けて、虹色の干渉紋が生じ、撮影装置200による撮影に悪影響を及ぼす場合がある。そのため、図9の(a)及び(b)に示すように、カバー313を含む補助具300は熱可塑性樹脂等を用いて構成された透光樹脂層327を基材として含む。このような透光樹脂層327には、熱可塑性樹脂の中でもとりわけ非晶性環状オレフィン樹脂や非晶性環状オレフィン樹脂などの環状オレフィン樹脂で構成するのが好ましい。
 また、カバー313は口腔に挿入されることで、上記のとおり、対象者の呼気の影響を受け、防曇剤又はカバー313の表面に滑らかな水膜が形成され、これにより虹紋等が発生し撮影に悪影響を及ぼす可能性がある。そのため、防曇剤又はカバーの境界面に所定間隔又はランダムな凹凸が存在するようにし、光が乱反射するように構成するのが望ましい。具体的には、防曇剤と呼気による水膜との境界面、防曇剤とカバー313との境界面、カバー313と呼気による水膜との境界面(防曇剤を設けない場合)、又はこれらの組み合わせにおいて、上記のとおり所定間隔又はランダムな凹凸を形成するのが望ましい。一例としては、カバー313に、透光樹脂層327の基材の表面に防曇剤を塗布することによって積層されたコーティング層326を形成し、当該コーティング層326の表面に所定間隔又はランダムに凹部325を設けるようにしてもよい。各凹部325の間隔は、平均で、撮影装置200において検出する光の波長帯域(例えば、赤色光の波長帯域である830nm以上)よりも広い間隔、より好ましくは当該波長帯域の2倍より広い間隔である。このような間隔で凹部325を構成することにより、光の乱反射を起こして干渉紋の発生を抑制することが可能である。
 また、コーティング層326の厚さは、撮影装置200において検出する光の波長帯域から算出されるコヒーレンス長に基づいて調整することが可能であり、一例としては10μm以上有するのが好ましい。
 なお、図9の例では、透光樹脂層327の外表面にコーティング層326を形成する場合については説明したが、このようなコーティング層326は透光樹脂層327の内表面に形成されてもよい。また、図9の例では、凹部325がコーティング層326に形成される場合について説明したが、透光性樹脂層327の表面を酸処理やプラズマ処理をしたり、当該表面にパターンをプリントしたりする方法によって、当該凹部325が透光樹脂層327に直接形成されてもよい。また、図9の例では、カバー313がコーティング層326及び透光樹脂層327により形成される場合について説明したが、これら層以外の層をさらに含んでもよい。
 また、図8Bにおいて、本体312の内面から内部に向かう方向Gに垂直な方向Jにおいて、カバー313の外表面に対して本体312の先端部分の一部が突出するように構成されている。このように構成することによって、図9において防曇剤を塗布したり積層する場合において、突出した先端部分を超えて防曇剤が漏出するのを防止することが可能となる。
 ここで、図10は、本開示の一実施形態に係る撮影装置200の断面の構成を示す概略図である。具体的には、図10は、撮影装置200において被写体画像が生成される過程を概略的に示すとともに、干渉紋の発生を抑制するための他の例を示す図である。図10によると、光源212は、グリップ202の先端側に配置された基板231上に、合計4個の光源212-1~212-4が配置される。光源212は、一例としては、それぞれLEDで構成され、各LEDから所定の周波数帯域を有する光が口腔の方向に向かって照射される。光源212から照射された光は、本体201の基端225に入光し、本体201の壁部224によって、拡散板219方向に導光される。拡散板219に達した光は、拡散板219によって口腔内に拡散される。そして、拡散板219によって拡散された光は、被写体である咽頭715等に反射する。この反射光がカメラ211に到達することで、被写体画像が生成される。
 このとき、本体201の壁部224は、上記のとおり光源212-1~212-4から照射された光を拡散板219に導光する機能を有するが、その一部又は端部に第1偏光板233を有するようにしてもよい。また、本体201の壁部224によって構成される収容空間223にはカメラ211のセンサが配置されるが、撮影装置200は、当該センサよりも被写体側に第2偏光板234を有するようにしてもよい。このとき、第1偏光板233及び第2偏光板234は、その偏光軸を互いに90°に直行させて配置する。これによって、第1偏光板233を介して被写体に入射した光が被写体で反射したときに生成される正反射光(直線偏光)による光源212-1~212-4の映り込みを抑制することが可能となり、より良好な被写体画像を得ることが可能である。
 図11は、本開示の一実施形態に係る補助具300の上面の構成を示す概略図である。具体的には、図11は、補助具300の基端316付近を拡大して、補助具300の他の構造の例を概略的に示した図である。図11によると、補助具300は、所定方向に荷重を加えることによって変形又は本体312から分離可能な位置決め機構329を含んでもよい。
 位置決め機構329は、補助具300が口腔内に挿入される方向に対して垂直又は略垂直な方向に、本体312の外側に向かって延伸するように構成された把持板311と、撮影装置200と補助具300とを位置決めするための位置決め片331と、本体312と連結するための連結片328(連結片328a~連結片328d)を含む。連結片328は、一端が位置決め機構329の本体部分に接続され、他端が本体312に接続されることによって、両者を連結する。ここで、連結片328は、図11に示すように、長手方向の断面において、短手方向に沿って溝状に形成された切り欠き333a及び切り欠き333bと、厚さ方向において少なくとも一部が薄肉に形成された薄肉領域332を含む。そのため連結片328は、所定の方向に対して荷重が加えられた場合に、容易に変形するか容易に切断されるよう構成されている。
 ここで、図12は、本開示の一実施形態に係る補助具300の位置決め機構329の構成を示す概略図である。具体的には、図12は、図11に示す位置決め機構329の構造及び使用方法をより詳細に説明するための図である。図12によると、位置決め機構329の位置決め片331は、端部からその内部方向に向かうように傾斜した傾斜面331a及び凹部331bを含む。すなわち、撮影装置200が補助具300に挿入されるとき、撮影装置200の連結部230の上面に形成された凸部(図示しない)が傾斜面331aに接しながら挿入されることで、位置決め機構329が上方にせり上がり、そのままさらに撮影装置200を挿入することによって、最終的には位置決め片331の凹部331bに撮影装置200の凸部が嵌合することによって、補助具300と撮影装置200が互いに位置決めされる。
 補助具300に撮影装置200が挿入されて位置決め片331によって位置決めされると、撮影装置200側の凸部と位置決め片331の凹部331bとの嵌合により、撮影装置200から補助具300を取り外すことが困難となる。そのため、使用者は位置決め機構329の把持板311を方向Fの方向に押すことによって位置決め機構329に対して荷重を加える。そうすると、切り欠き333a及び切り欠き333bや薄肉領域332が形成された連結片328a~連結片328dが変形されるか切断されることによって、本体312に連結された位置決め機構329が上方にせり上がり、撮影装置200側の凸部と位置決め片331の凹部331bとの嵌合状態を開放される。
 図12には、位置決め機構329に対して荷重が加わることによって、各連結片328が切断され、位置決め機構329が本体312から分離された状態が示される。このような状態においては、補助具300に対して撮影装置200が再度挿入されたとしても、既に位置決め片331を含む位置決め機構329が分離されてしまっているため、補助具300に対して撮影装置200を位置決めすることができない。そのため、使用者は撮影装置200に対して補助具300を装着することができず、一度撮影装置200が挿入された補助具300に対して再度挿入されることを防止することが可能である。
 なお、図12の例では位置決め機構329に対して所定の方向から荷重を加えることで連結片328を変形又は切断する場合について説明したが、例えばハサミやニッパーなどの道具を用いて変形又は切断してもよい。
 図13は、本開示の一実施形態に係る補助具300のプレート334の構成を示す概略図である。具体的には、図13のうち(a)は補助具300の正面図、及び(b)は補助具300の側面図を示す。図13によると、補助具300は、本体312の外周に沿うように、プレート334を含むことが可能である。当該プレート334を本体312の外周に設置することによって、必要以上に補助具300及び撮影装置200が挿入された場合に歯や唇に当該プレート334が当接し、喉奥に過剰に補助具300や撮影装置200が挿入されてしまうのを防止することが可能である。
 図13によれば、プレート334は、本体312の外周に沿って、環状に形成される。当該プレート300は、補助具300の基端316側であって、舌圧子315の先端から対象者の唇又は門歯までの距離に対応する位置に設置される。また、プレート334は、補助具300が口腔内に挿入される方向に対して垂直又は略垂直な方向に、本体312から外周方向に向かって突出するように配置される。このとき、プレート334は、本体312から、外周方向に対して対象者が口を開いた場合の口の大きさに対応する高さを有するのが望ましい。これらの距離及び高さで構成することによって補助具300や撮影装置200の過剰な挿入を効果的に防止することが可能である。なお、プレート334の形状は一例であって、少なくとも一部が本体312の外周に沿っていればよく、必ずしも環状に形成される必要はない。また、このような場合、またプレート334は、本体312の外周に沿って1個のみである必要はなく、複数個設置されてもよい。
 また、図13によれば、プレート334は、1又は複数の貫通穴335a~335dを備えるようにしてもよい。一例としては、プレート334の外形に沿うように厚み方向に貫通して形成されるが、当然このような形状のみには限らない。例えば、一又は複数の小孔により形成されてもよいし、他の形状により形成してもよい。また、図13の例では貫通穴として4個の貫通穴335a~335dを例示しているが、当然この数及び配置位置に限らない。例えば、小さな小孔を全体に配置してもよいし、一つの大きな孔を一カ所に設置してもよい。このような貫通穴335a~335dをプレート334に設けることにより、例えば補助具300が口内に全て挿入されてしまったとしても、当該貫通穴335a~335dがあることによって対象者の呼吸を阻害することはない。
 なお、図13の例では、補助具300の製造時にあらかじめプレート334が一体的に成形される場合について説明した。しかし、これに限らず、プレート334を円環状(ドーナツ状)に形成し、補助具300に対して着脱自在に構成してもよい。本実施形態においては、補助具300は基端316から先端314に向かって徐々に直径が狭くなるように構成されている。そのため、内径Rが異なる複数のプレート334を用意することによって、対象者の口腔内の奥行の距離、対象者の年齢、対象者の口の大きさなどに応じた位置に当該プレート334を設置することが可能となる。
6.撮影装置200における処理
 図14は、本開示の一実施形態に係る撮影装置200の構成を示すブロック図である。図14によると、撮影装置200は、カメラ211、光源212、プロセッサ213、メモリ214、表示パネル215、入力インターフェイス210及び通信インターフェイス216を含む。これらの各構成要素は、互いに、制御ライン及びデータラインを介して互いに電気的に接続される。なお、撮影装置200は、図14に示す構成要素のすべてを備える必要はなく、一部を省略して構成することも可能であるし、他の構成要素を加えることも可能である。例えば、撮影装置200は、各構成要素を駆動するためのバッテリ等を含むことが可能である。
 撮影装置200のうち、カメラ211は、被写体である口腔に反射した反射光を検出して被写体画像を生成する撮影部として機能する。カメラ211は、その光を検出するために、一例としてCMOSイメージセンサと、所望の機能を実現するためのレンズ系と駆動系を備える。イメージセンサは、CMOSイメージセンサに限らず、CCDイメージセンサ等の他のセンサを用いることも可能である。また、検出する反射光の帯域に応じて撮影素子を追加で用いることも可能である。例えば、イメージセンサ基板上に、可視光線帯域の波長から近赤外光線帯域の波長を検出する撮影素子であるCMOSイメージセンサと、赤外光線帯域の波長を検出する赤外光撮影素子であるセンサとを、隣接して配置してもよいカメラ211は、特に図示はしないが、オートフォーカス機能を有することができ、例えばレンズの正面に焦点が特定部位に合うように設定されていることが好ましい。また、カメラ211は、ズーム機能を有することができ、咽頭又はインフルエンザ濾胞のサイズに応じて適切な倍率で撮影するように設定されていることが好ましい。
 ここで、口腔内に位置する咽頭の最深部に出現するリンパ濾胞にはインフルエンザに特有のパターンがあることが知られている。この特有のパターンを有するリンパ濾胞はインフルエンザ濾胞と呼ばれ、インフルエンザに特徴的なサインであって、発症後2時間程度で出現されるとされる。上記のとおり、本実施形態の処理システム1は、例えば口腔の咽頭を撮影して、上記濾胞を検出することにより、対象者のインフルエンザへの罹患の可能性を判定するために用いられる。そのため、撮影装置200が口腔へ挿入されると、カメラ211と被写体との距離が比較的近くなる。したがって、カメラ211は、[(カメラ211の先端部から咽頭後壁までの距離)*tanθ]によって算出される値が垂直20mm以上及び水平40mm以上となる画角(2θ)を有するのが好ましい。このような画角を有するカメラを用いることによって、カメラ211と被写体とが近接していたとしても、より広範な範囲の撮影が可能となる。すなわち、カメラ211は、通常のカメラを用いることも可能であるが、いわゆる広角カメラや超広角カメラと呼ばれるカメラを用いることも可能である。
 光源212は、処理装置100又は撮影装置200からの指示によって駆動され、口腔内に光を照射するための光源部として機能する。光源212は、一又は複数の光源212を含む。本実施形態においては、光源212は、一又は複数のLEDから構成され、各LEDから所定の周波数帯域を有する光が口腔方向に照射される。光源212には、紫外光帯域、可視光帯域、赤外光帯域の中から所望の帯域を有する光、又はそれらの組み合わせが用いられる。複数の帯域を照射する場合には、各帯域の光を照射するようにあらかじめ設定された複数のLEDを切り換えて表示する。
 プロセッサ213は、メモリ214に記憶されたプログラムに基づいて撮影装置200の他の構成要素の制御を行う制御部として機能する。プロセッサ213は、メモリ214に記憶されたプログラムに基づいて、カメラ211の駆動、光源212の駆動を制御するとともに、カメラ211によって撮影された被写体画像のメモリ214への記憶を制御する。具体的には、プロセッサ213は、使用者による操作入力を受け付けることによって被写体画像の撮影を開始する処理、撮影された被写体画像に基づいて被写体画像中に補助具300のカバー枠321の少なくとも一部が含まれているか否かを判定する処理、判定の結果含まれていない場合には撮影装置200が補助具300に挿入されていないことを示す情報を出力するための処理等を実行する。プロセッサ213は、主に一又は複数のCPUにより構成されるが、他のプロセッサと適宜組み合わせてもよい。
 メモリ214は、RAM、ROM、不揮発性メモリ、HDD等から構成され、記憶部として機能する。メモリ214は、撮影装置200の様々な制御のための指示命令をプログラムとして記憶する。具体的には、メモリ214は、使用者による操作入力を受け付けることによって被写体画像の撮影を開始する処理、撮影された被写体画像に基づいて被写体画像中に補助具300のカバー枠321の少なくとも一部が含まれているか否かを判定する処理、判定の結果含まれていない場合には撮影装置200が補助具300に挿入されていないことを示す情報を出力するための処理等をするためのプログラムを記憶する。
 表示パネル215は、ディスプレイ203に設けられ撮影装置200によって撮影された被写体画像や撮影装置200が補助具300に挿入されていないことを示す情報を表示するための表示部として機能する。表示パネル215は、液晶パネルによって構成されるが、液晶パネルに限らず、有機ELディスプレイやプラズマディスプレイ等から構成されていてもよい。
 入力インターフェイス210は、処理装置100及び撮影装置200に対する対象者の指示入力を受け付ける入力部として機能する。入力インターフェイス210の一例としては、撮影装置200による録画の開始・終了を指示するための「撮影ボタン」、撮影装置200の電源のオンオフをするための「電源ボタン」、各種選択を行うための「確定ボタン」、前画面に戻ったり入力した確定操作をキャンセルするための「戻る/キャンセルボタン」、表示パネル215に表示されたアイコン等の移動をするための十字キーボタン等の物理キーボタンが挙げられる。なお、これらの各種ボタン・キーは、物理的に用意されたものであってもよいし、表示パネル215にアイコンとして表示され、表示パネル215に重畳して入力インターフェイス210として配置されたタッチパネル等を用いて選択可能にしたものであってもよい。タッチパネルによる対象者の指示入力の検出方式は、静電容量式、抵抗膜式などいかなる方式であってもよい。
 通信インターフェイス216は、処理装置100及び/又は他の装置と情報の送受信を行うための通信部として機能する。通信インターフェイス216の一例としては、USB、SCSIなどの有線通信用コネクタや、無線LAN、Bluetooth(登録商標)、赤外線などの無線通信用送受信デバイスや、プリント実装基板やフレキシブル実装基板用の各種接続端子など、様々なものが挙げられる。
 図15は、本開示の一実施形態に係る撮影装置200において実行される処理フローを示す図である。当該処理フローは、主に撮影装置200のプロセッサ213がメモリ214に記憶されたプログラムを読み出して実行することにより行われる。
 図15によると、プロセッサ213は、入力インターフェイス210(例えば、電源ボタン)を介して使用者による操作入力が受け付けられたか否かを判定する(S211)。なお、このとき、プロセッサ213が使用者による入力が受け付けられていないと判定すると、当該処理フローは終了する。
 他方、プロセッサ213は使用者による入力が受け付けられたと判定すると、表示パネル215にスタンバイ画面を出力する(S212)。当該スタンバイ画面(図示しない)には、カメラ211を介して撮影されたスルー画像が含まれる。そして、プロセッサ213は、入力インターフェイス210による使用者の操作入力を受け付けて、口腔内の撮影がされる対象者を特定する情報の選択を受け付ける(S213)。撮影の対象者が選択されると、プロセッサ213は、再度スタンバイ画面を表示パネル215に出力する(S214)
 次に、使用者が、撮影装置200の先端を補助具300で被覆し、対象者の口腔に撮影装置200を所定の位置まで挿入する。すると、プロセッサ213は、カメラ211によって撮影された被写体画像(スルー画像)に基づいて撮影装置200に補助具300が装着されているか否かを判定する(S215)。当該判定は、一例としては、メモリ214に記憶された学習済み補助具装着判定モデルに対して、撮影された被写体画像を入力することによって行われる。なお、当該判定において学習済み補助具装着判定モデルを用いるのは一例にすぎず、ルールベースの画像解析処理によって被写体画像中にカバー枠の少なくとも一部が含まれているか否かを判定し、補助具300が撮影装置200に装着されているか否かを判断してもよい。また、学習済み補助具装着判定モデルを用いる場合及びルールベースの画像解析処理を用いる場合のいずれであっても、撮影装置200のプロセッサ213が当該処理を実行する必要はない。すなわち、当該判定に係る処理は、撮影装置200で撮影された被写体画像をネットワークを介して接続されたサーバ装置に送信し、当該サーバ装置において学習済み補助具装着判定モデル又はルールベースの画像解析処理に被写体画像を適用することによって判定され、その結果を撮影装置200がサーバ装置から受信するようにしてもよい。
 ここで、図16は、本開示の一実施形態に係る撮影装置200において出力される画面の例を示す図である。具体的には、図16は、図15のS215で利用される学習済み補助具装着判定モデルの生成に係る処理フローを示す図である。当該処理フローは、撮影装置200のプロセッサ213によって実行されてもよいし、通信で接続された他の処理装置のプロセッサによって実行されてもよい。
 図16によると、プロセッサは、撮影装置200のカメラ211によって被写体画像を学習用判定画像として取得する(S311)。次に、プロセッサは、当該学習用判定画像に対して、あらかじめ使用者等によって補助具300のカバー枠321の少なくとも一部が写り込んだ画像であるか否かの判定結果に基づいて、正解ラベルを付与する処理ステップを実行する(S312)。そして、プロセッサは付与された正解ラベル情報を、その正解ラベルの付与に用いられた学習用判定画像に対応付けて記憶する(S313)。
 学習用判定画像とそれに対応付けられた正解ラベル情報がそれぞれ得られると、プロセッサは、それらを用いて補助具300の装着判定パターンの機械学習を行うステップを実行する(S314)。当該機械学習は、一例として、ニューロンを組み合わせたニューラルネットワークに対して、これら情報の組を与え、ニューラルネットワークからの出力が正解ラベル情報と同じになるように、各ニューロンのパラメータを調整しながら学習を繰り返すことにより行われる。そして、学習済みの補助具装着判定モデルを取得するステップが実行される(S315)。取得された補助具装着判定モデルは、撮影装置200のメモリ214や撮影装置200と有線又は無線ネットワークを介して接続された他の処理装置内に記憶される。このように、当該学習済み補助具判定モデルを使用することによって、カメラ211によって撮影された被写体画像において、補助具300のカバー枠321の少なくとも一部が写り込んだ画像であるか否かを判定することが可能となる。
 また、図17は、本開示の一実施形態に係る撮影装置200において出力される画面の例を示す図である。具体的には、図17は、図15のS215において判定に用いられる被写体画像の一例を示す図である。図17によれば、撮影装置200のカメラ211によって撮影された被写体画像中には、被写体である口腔内の画像に加えて、その四隅に写り込んだカバー枠321の写り込み領域321a~写り込み領域321dが含まれている。すなわち、撮影装置200の光源212から照射された光がカバー枠321の写り込み領域321a~写り込み領域321dによって反射され、撮影装置200のカメラ211によって検出される。これにより、当該被写体画像中に、これら領域が含まれることになる。このように、仮に撮影装置200に補助具300が正しく装着されている場合には、図17に示すようにその四隅にカバー枠321の写り込み領域321a~写り込み領域321dが写り込むことになる。したがって、撮影装置200のカメラ211によって撮影された被写体画像において、カバー枠321の写り込み領域321a~写り込み領域321dが写り込んでいるか否かを判定することによって、撮影装置200に補助具300が装着されているか否かを判定することが可能となる。
 なお、図8Aで示したように、カバー枠321の写り込み領域321a~写り込み領域321dは、所定のパターンを有する構造体を必要に応じて含むことが可能となる。例えば、図8Aの(a)に示すようにカバー枠321の他の領域と同じ構造を有する場合には、図17の(a)で示すように撮影された画像中に所定のパターンが描画されない。他方、図8Aの(b)又は(c)に示すようにカバー枠321に所定のパターンから構成される構造体を含むような場合には、図17の(b)又は(c)で示すようにカバー枠321に加えて当該構造体も描画されることになる。このような構造体を用いることによって、カバー枠321の写り込みをより正確に判定することが可能となる。
 また、図17の例では、説明の便宜のために、被写体画像中に含まれる写り込み領域321a~写り込み領域321dが他の領域に対して明確に区分けして表示されるように記載した。しかし、被写体である口腔とカバー枠321の写り込み領域321a~写り込み領域321dとは、当然にカメラ211からの距離が相違する。そのため、写り込み領域321a~写り込み領域321dは、撮影時の設定によっては、図17に示すように明確に区分けして検出・出力されず、いわばぼやけた像として検出・出力される場合もある。
 再び図15に戻り、学習済み補助具装着判定モデルよって被写体画像中にカバー枠の少なくとも一部が含まれているか否かを判定し、補助具300が撮影装置200に装着されているか否かが判断された結果、補助具300が装着されていないと判断された場合には、プロセッサ213は表示パネル215のディスプレイに撮影装置200が補助具300に挿入されていないことを示す通知を出力する(S216)。
 ここで、図18は、本開示の一実施形態に係る撮影装置200において出力される画面の例を示す図である。具体的には、図18は、図15のS216において表示パネル215のディスプレイに出力される通知の一例を示す図である。図18によると、スルー画像として撮影装置200のカメラ211で撮影された被写体画像に加えて、「補助具が装着されていません。撮影装置の先端に補助具を装着してください。」という撮影装置200が補助具300に挿入されていないことを示す通知を出力する。このような通知を出力することによって、使用者は補助具300の未装着を確実に知ることが可能となり、より円滑な撮影が可能となる。
 なお、このような通知は、図18の例ではディスプレイに出力する場合について説明したが、当然他の方法によって通知されてもよい。例えば、通信を介して接続された処理装置100や他の装置に対して当該通知を出力し、これらの装置を介して表示するようにしてもよい。また、例えば撮影装置200がスピーカーなどの出力部を有している場合は、当該出力部を介して音声で通知してもよい。また、例えば撮影装置200がバイブレータやLED等を有している場合には、振動や発光によって通知してもよい。さらに、「撮影装置200が補助具300に挿入されていないことを示す通知」であればいずれでもよく、このような通知は挿入されていることを示す通知であってもよいし、挿入を促すような通知であってもよい。
 再び図15に戻り、補助具300が撮影装置200に装着されたと判定された場合には、プロセッサ213は、入力インターフェイス210(例えば、撮影ボタン)を介して使用者による撮影開始操作が受け付ける。これによって、プロセッサ213はカメラ211を制御して被写体の被写体画像の撮影を開始する(S217)。この被写体画像の撮影は、撮影ボタンが押下されることによって一定枚数(例えば、30枚)をまとめて一定間隔で連写して撮影されることにより実施される。プロセッサ213は、被写体画像の撮影が終了すると、撮影された被写体画像をメモリ214に読み取られた対象者ID情報と対応付けて記憶する。そして、プロセッサ213は、メモリ214に記憶された被写体画像を表示パネル215に出力する(S218)。
 ここで、使用者は、撮影装置200を補助具300とともに口腔内から取り出して表示パネル215に出力された被写体画像を確認し、所望の画像が得られなかった場合には再撮影の指示入力を行うことが可能である。そのため、プロセッサ213は、入力インターフェイス210を介して使用者による再撮影指示の入力を受け付けたか否かを判定する(S219)。再撮影指示の入力を受け付けた場合には、プロセッサ213は再度S215のスタンバイ画面を表示し、被写体画像の撮影を可能にする。
 他方、再撮影指示の入力を受け付けておらず、使用者によって載置台400に撮影装置200が戻されて処理装置100から撮影終了の指示を受信すると、プロセッサ213は、通信インターフェイス216を介してメモリ214に記憶された被写体画像及び当該被写体画像に対応付けられた対象者ID情報を処理装置100に送信する(S220)。以上によって、当該処理フローを終了する。
 なお、特に図示はしないが、このように撮影された被写体画像は、処理装置100に送信されると、処理装置100のプロセッサによって、判定に用いられる判定画像の選択が行われるとともに、当該判定画像とを用いて所定の疾患に対する罹患の可能性が判定される。そして、その結果がディスプレイなどに出力される。また、この判定は、ルールベースの画像解析処理によって行ってもよいし、インフルエンザ等の疾患情報が正解ラベルとして対応付けられた学習用被写体画像を用いて機械学習することによって得られた学習済み判定モデルを用いて判定してもよい。
 このように、本実施形態においては、対象者の口腔の撮影に適した、撮影を補助する補助具、当該補助具を用いて口腔内を撮影する撮影装置、プログラム及び方法を提供することが可能となる。
7.変形例
 図15の例では、撮影装置200のプロセッサ213において撮影された被写体画像に基づいて補助具300が撮影装置200に装着されているか否かを判定する場合について説明した。しかし、これに限らず、当該判定は撮影装置200と通信可能に接続された他の装置(例えば、処理装置100やクラウド上のサーバ装置など)によって判定され、撮影装置200はその判定の結果を受信して出力するようにしてもよい。
 なお、これら変形例は、上記で具体的に説明する点を除いて、図1~図18で説明した一実施形態における構成、処理、手順と同様である。したがって、それらの事項の詳細な説明は省略する。また、各変形例や各実施形態で説明した各要素を適宜組み合わせるか、それらを置き換えてシステムを構成することも可能である。
 本明細書で説明される処理及び手順は、実施形態において明示的に説明されたものによってのみならず、ソフトウェア、ハードウェア又はこれらの組み合わせによっても実現可能である。具体的には、本明細書で説明された処理及び手順は、集積回路、揮発性メモリ、不揮発性メモリ、磁気ディスク、光ストレージ等の媒体に、当該処理に相当するロジックを実装することによって実現される。また、本明細書で説明される処理及び手順は、それらの処理・手順をコンピュータプログラムとして実装し、処理装置やサーバ装置を含む各種のコンピュータに実行させることが可能である。
 本明細書中で説明される処理及び手順が単一の装置、ソフトウェア、コンポーネント、モジュールによって実行される旨が説明されたとしても、そのような処理又は手順は、複数の装置、複数のソフトウェア、複数のコンポーネント、及び/又は、複数のモジュールによって実行されるものとすることができる。また、本明細書中で説明される各種情報が単一のメモリや記憶部に格納される旨が説明されたとしても、そのような情報は、単一の装置に備えられた複数のメモリ又は複数の装置に分散して配置された複数のメモリに分散して格納されるものとすることができる。さらに、本明細書において説明されるソフトウェア及びハードウェアの要素は、それらをより少ない構成要素に統合して、又は、より多い構成要素に分解することによって実現されるものとすることができる。
1      :処理システム
100    :処理装置
200    :撮影装置
201    :本体
202    :グリップ
203    :ディスプレイ
210    :入力インターフェイス
211    :カメラ
212    :光源
212-1  :光源
213    :プロセッサ
214    :メモリ
215    :表示パネル
216    :通信インターフェイス
217    :係合突起
218    :位置決め突起
219    :拡散板
220    :撮影ボタン
221    :電源ボタン
222    :先端
223    :収容空間
224    :壁部
225    :基端
226    :通知体
230    :連結部
231    :基板
233    :第1偏光板
234    :第2偏光板
300    :補助具
311    :把持板
312    :本体
313    :カバー
314    :先端
315    :舌圧子
316    :基端
317    :片
318    :係合突起
319    :溝
320    :開口
321    :カバー枠
322    :通知窓
323    :貫通穴
325    :凹部
326    :コーティング層
327    :透光樹脂層
328    :連結片
329    :位置決め機構
330    :挿入穴
331    :位置決め片
331a   :傾斜面
331b   :凹部
332    :薄肉領域
333a   :切り欠き
333b   :切り欠き
400    :載置台
600    :使用者
700    :対象者

 

Claims (13)

  1.  撮影装置による口腔内の撮影のために前記口腔内に挿入される補助具であって、
     筒状の本体と、
     前記本体の内部に前記撮影装置が挿入可能に、前記本体において前記補助具が前記口腔内に挿入される方向とは逆の方向の端部に構成された開口と、
     前記撮影装置によって検出される光を透過可能に、前記補助具が前記口腔内に挿入される方向の端部に構成されたカバーと、
     前記本体において前記補助具が前記口腔内に挿入される方向の端部に前記カバーが配置されるように前記本体と前記カバーとを接続し、前記開口から挿入された前記撮影装置によって撮影される画角内に少なくとも一部が写り込むように構成されたカバー枠と、
     を含む補助具。
  2.  前記カバー枠は、前記画角内に少なくとも一部が写り込むように構成された写り込み領域を含み、
     前記写り込み領域は所定パターンで形成された構造体を含む、
     請求項1に記載の補助具。
  3.  前記撮影装置が前記補助具に装着されたことを通知するための通知体を有する前記撮影装置が前記開口から挿入された場合において、前記通知体を視認可能にするための通知窓をさらに含む、請求項1又は2に記載の補助具。
  4.  前記通知窓は、前記撮影装置が前記開口から挿入された場合において前記通知体に相対する位置に配置され、
     前記通知体は、外部に光を発光する発光体により構成され、
     少なくとも前記発光窓の周囲は前記発光体から発光された光の少なくとも一部の透過を阻害する、
     請求項3に記載の補助具。
  5.  前記本体の外周の少なくとも一部に沿うように、前記補助具が前記口腔内に挿入される方向に対して垂直又は略垂直な方向であって、前記本体から前記本体の外周方向に向かって突出するように配置されるプレートをさらに含む、請求項1~4のいずれか一項に記載の補助具。
  6.  前記プレートは、厚み方向に貫通した貫通穴を含む、請求項5に記載の補助具。
  7.  前記撮影装置が前記開口から挿入された場合に前記撮影装置と前記補助具との位置を決めるための位置決め機構をさらに含む、請求項1~6のいずれか一項に記載の補助具。
  8.  前記位置決め機構は、所定方向に荷重を加えることによって変形又は切断可能に構成された連結片により、前記本体と連結される、請求項7に記載の補助具。
  9.  前記連結片に対して所定方向に荷重を加えることによって前記連結片が変形又は切断されることによって、前記補助具に前記撮影装置が再度挿入されることを阻害する、請求項8に記載の補助具。
  10.  口腔内の撮影のために前記口腔内に挿入され、状の本体と、前記本体において口腔内に挿入される方向とは逆の方向の端部に構成された開口と、前記本体において前記口腔内に挿入される方向の端部に構成されたカバーと、前記本体において前記口腔内に挿入される方向の端部に前記カバーが配置されるように前記本体と前記カバーとを接続するように構成されたカバー枠とを含む補助具に対して、前記開口から前記本体の内部に挿入される撮影装置であって、
     少なくとも一つのプロセッサを具備し、
     前記少なくとも一つのプロセッサは、
      使用者による操作入力を受け付けることによって被写体画像の撮影を開始し、
      撮影された前記被写体画像に基づいて、前記被写体画像中に前記カバー枠の少なくとも一部が含まれているか否かの判定の結果、前記少なくとも一部が含まれていない場合には前記撮影装置が前記補助具に挿入されていないことを示す情報を出力する、
     ための処理をするように構成された、撮影装置。
  11.  前記判定は、被写体画像中に前記カバー枠の少なくとも一部が含まれているか否かを分類した学習用被写体画像に基づいて学習することによって得られた学習済み補助具装着判定モデルに対して、撮影された前記被写体画像を入力することによって行われる、請求項10に記載の撮影装置。
  12.  口腔内の撮影のために前記口腔内に挿入され、筒状の本体と、前記本体において前記口腔内に挿入される方向とは逆の方向の端部に構成された開口と、前記本体において前記口腔内に挿入される方向の端部に構成されたカバーと、前記本体において前記口腔内に挿入される方向の端部に前記カバーが配置されるように前記本体と前記カバーとを接続するように構成されたカバー枠とを含む補助具に対して、前記開口から前記本体の内部に挿入される撮影装置を、
     使用者による操作入力を受け付けることによって被写体画像の撮影を開始し、
     撮影された前記被写体画像に基づいて、前記被写体画像中に前記カバー枠の少なくとも一部が含まれているか否かの判定の結果、前記少なくとも一部が含まれていない場合には前記撮影装置が前記補助具に挿入されていないことを示す情報を出力する、
     ための処理を行うように構成されたプロセッサとして機能させる、プログラム。
  13.  口腔内の撮影のために前記口腔内に挿入され、筒状の本体と、前記本体において前記口腔内に挿入される方向とは逆の方向の端部に構成された開口と、前記本体において前記口腔内に挿入される方向の端部に構成されたカバーと、前記本体において前記口腔内に挿入される方向の端部に前記カバーが配置されるように前記本体と前記カバーとを接続するように構成されたカバー枠とを含む補助具に対して、前記開口から前記本体の内部に挿入される撮影装置に含まれる少なくとも一つのプロセッサにより実行される方法であって、
     使用者による操作入力を受け付けることによって被写体画像の撮影を開始する段階と、
     撮影された前記被写体画像に基づいて、前記被写体画像中に前記カバー枠の少なくとも一部が含まれているか否かの判定の結果、前記少なくとも一部が含まれていない場合には前記撮影装置が前記補助具に挿入されていないことを示す情報を出力する段階と、
     を含む方法。

     
PCT/JP2022/010014 2022-03-08 2022-03-08 補助具、撮影装置、プログラム及び方法 WO2023170788A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2022/010014 WO2023170788A1 (ja) 2022-03-08 2022-03-08 補助具、撮影装置、プログラム及び方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2022/010014 WO2023170788A1 (ja) 2022-03-08 2022-03-08 補助具、撮影装置、プログラム及び方法

Publications (1)

Publication Number Publication Date
WO2023170788A1 true WO2023170788A1 (ja) 2023-09-14

Family

ID=87936268

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/010014 WO2023170788A1 (ja) 2022-03-08 2022-03-08 補助具、撮影装置、プログラム及び方法

Country Status (1)

Country Link
WO (1) WO2023170788A1 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09299315A (ja) * 1996-05-16 1997-11-25 Olympus Optical Co Ltd 内視鏡
JP2013248353A (ja) * 2012-06-04 2013-12-12 Univ Of Occupational & Environmental Health Japan 内視鏡を用いた物体計測装置及び物体計測方法並びに内視鏡先端フード
WO2015040887A1 (ja) * 2013-09-20 2015-03-26 オリンパス株式会社 内視鏡
WO2019131327A1 (ja) * 2017-12-28 2019-07-04 アイリス株式会社 口内撮影装置、医療装置及びプログラム
WO2021085443A1 (ja) * 2019-10-31 2021-05-06 アイリス株式会社 撮像装置及び撮像システム
WO2022009285A1 (ja) * 2020-07-06 2022-01-13 アイリス株式会社 処理装置、処理プログラム、処理方法及び処理システム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09299315A (ja) * 1996-05-16 1997-11-25 Olympus Optical Co Ltd 内視鏡
JP2013248353A (ja) * 2012-06-04 2013-12-12 Univ Of Occupational & Environmental Health Japan 内視鏡を用いた物体計測装置及び物体計測方法並びに内視鏡先端フード
WO2015040887A1 (ja) * 2013-09-20 2015-03-26 オリンパス株式会社 内視鏡
WO2019131327A1 (ja) * 2017-12-28 2019-07-04 アイリス株式会社 口内撮影装置、医療装置及びプログラム
WO2021085443A1 (ja) * 2019-10-31 2021-05-06 アイリス株式会社 撮像装置及び撮像システム
WO2022009285A1 (ja) * 2020-07-06 2022-01-13 アイリス株式会社 処理装置、処理プログラム、処理方法及び処理システム

Similar Documents

Publication Publication Date Title
AU2014211763B2 (en) Method for identifying objects in a subject's ear
CN107708523B9 (zh) 用于咽喉成像的系统和方法
CN105324063B9 (zh) 识别受试者的耳朵中的对象的方法
US9974433B2 (en) Multi-purpose dental instrument
JP2019115679A (ja) 耳鏡装置の作動方法
CA2897866A1 (en) Ear inspection device and method of determining a condition of a subject's ear
US20080240537A1 (en) Radiographic film reading device
US20230190109A1 (en) Intraoral scanner
WO2021085443A1 (ja) 撮像装置及び撮像システム
WO2023170788A1 (ja) 補助具、撮影装置、プログラム及び方法
WO2022009285A1 (ja) 処理装置、処理プログラム、処理方法及び処理システム
WO2023286199A1 (ja) 処理装置、処理プログラム、処理方法及び処理システム
JP6906903B2 (ja) マンモグラフィ装置及びハンドスイッチ
WO2022230084A1 (ja) 撮像装置及び撮像システム
WO2023073844A1 (ja) 処理装置、処理プログラム及び処理方法
WO2023181417A1 (ja) 撮影装置、プログラム及び方法
WO2022270068A1 (ja) 口腔内組織体または付着物の検査装置及び、検査補助部材
Kim et al. Biologically inspired intraoral camera for multifunctional dental imaging
JP2018171323A (ja) 撮像装置および撮像装置の筺体から着脱可能である先端部材
KR20210120330A (ko) 부비동 진단 시스템 및 그것을 이용한 구강 조사용 마우스피스의 led 제어 방법
KR20210120334A (ko) 부비동 진단 시스템 및 그것을 이용한 근적외선 사진의 동기화 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22930773

Country of ref document: EP

Kind code of ref document: A1