WO2023053257A1 - 情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体 - Google Patents

情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体 Download PDF

Info

Publication number
WO2023053257A1
WO2023053257A1 PCT/JP2021/035823 JP2021035823W WO2023053257A1 WO 2023053257 A1 WO2023053257 A1 WO 2023053257A1 JP 2021035823 W JP2021035823 W JP 2021035823W WO 2023053257 A1 WO2023053257 A1 WO 2023053257A1
Authority
WO
WIPO (PCT)
Prior art keywords
subject
information
image quality
information processing
video data
Prior art date
Application number
PCT/JP2021/035823
Other languages
English (en)
French (fr)
Inventor
浩一 二瓶
祥史 大西
孝法 岩井
康一 川島
玲 山内
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to US18/275,144 priority Critical patent/US20240177828A1/en
Priority to PCT/JP2021/035823 priority patent/WO2023053257A1/ja
Priority to JP2023550836A priority patent/JP7485233B2/ja
Publication of WO2023053257A1 publication Critical patent/WO2023053257A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/66—Transforming electric information into light information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30168—Image quality inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person

Definitions

  • the present disclosure relates to an information processing system, an information processing device, an information processing method, and a non-transitory computer-readable medium storing a program.
  • a medical service providing system is being introduced that transmits video data from a remote location to a medical service provider via a network.
  • a medical service provider via a network.
  • Patent Document 1 high-frequency components are analyzed for each region of an acquired image, and at least a part of the region of the image is adjusted according to the analysis result so that the higher the high-frequency component, the higher the image quality.
  • Techniques for making adjustments are disclosed. According to this technique, it is possible to reduce the amount of video data and to make the difference in image quality at the boundary between the low image quality area and the high image quality area less noticeable.
  • Patent Document 1 an image quality level map generated by setting the image quality for each area based on the analysis result of the high-frequency component is generated when a person's face area is detected. It is described that the image quality setting in the image quality level map is changed so that the image quality is higher than the image quality of areas other than the face area.
  • Patent Document 1 only discloses extracting feature points of a face to detect a face region and increasing the image quality of the face region to be higher than the image quality of other regions. There is no disclosure of a technique for appropriately controlling the image quality of a necessary area in a medical service providing system that transmits video data to a person from a remote location via a network.
  • An object of the present disclosure is an information processing system, an information processing device, an information processing method, and a non-temporary computer-readable medium storing a program that can control the image quality of an area that is appropriately necessary for a provider that provides medical services. is to provide
  • An information processing system includes: image data including a subject who receives medical services; acquisition means for acquiring subject-related information regarding the subject contained in the image data; and based on the subject-related information, , specifying means for specifying a change area for changing the image quality in the video data; and image quality changing means for changing the image quality of the specified change area.
  • An information processing apparatus includes video data including a target person who receives medical services, acquisition means for acquiring target-person-related information about the target person included in the video data, and based on the target-person-related information, and a control means for outputting an image quality change instruction for changing the image quality of the specified change area.
  • An information processing method acquires video data including a subject who receives medical services and subject-related information about the subject contained in the video data, and generates the image based on the subject-related information.
  • a change area in the data whose image quality is to be changed is identified, and the image quality of the identified change area is changed.
  • a non-transitory computer-readable medium includes video data including a subject receiving medical services, a process of obtaining subject-related information about the subject included in the video data, and the subject-related information.
  • a program is stored for causing a computer to execute a process of specifying a change area for changing the image quality in the video data and a process of changing the image quality of the specified change area based on.
  • the information processing system, the information processing device, the information processing method, and the non-temporary program stored therein are capable of clarifying the image of the area necessary for the provider who provides the medical service.
  • a computer readable medium can be provided.
  • FIG. 1 is a block diagram showing the configuration of an information processing system according to an embodiment
  • FIG. 1 is a diagram illustrating a configuration example of an information processing system including an information processing device according to an embodiment
  • FIG. 3 is a block diagram showing an example of the configuration of a doctor-side terminal in FIG. 2
  • FIG. 3 is a block diagram showing an example of the configuration of a patient-side terminal in FIG. 2
  • FIG. It is a figure explaining an example of the display content of the doctor side terminal. It is a figure explaining an example of the display content of a patient side terminal.
  • 4 is a sequence diagram illustrating an example of the flow of information processing according to the embodiment
  • FIG. 1 is a diagram illustrating a configuration example of an information processing system including an information processing device according to an embodiment
  • FIG. 3 is a block diagram showing an example of the configuration of a doctor-side terminal in FIG. 2
  • FIG. is a block diagram showing an example of the configuration of a patient-side terminal in FIG. 2
  • FIG. It is
  • Embodiments transmit image data of a subject via a network between a facility that provides medical services and a facility that has a subject who receives medical service at a remote location, It is related to medical service provision technology that experts such as diagnose.
  • FIG. 1 is a block diagram showing the configuration of an information processing system 100 according to an embodiment.
  • the information processing system 100 includes acquisition means 101 , identification means 102 and image quality change means 103 .
  • Acquisition means 101 acquires video data including a subject who receives medical services and subject-related information about the subject included in the video data.
  • the specifying unit 102 specifies a change area for changing image quality in the video data based on the subject-related information.
  • Image quality changing means 103 changes the image quality of the specified change area.
  • FIG. 2 is a diagram showing a configuration example of an information processing system 100 including the information processing device 1 according to the embodiment.
  • the information processing system 100 includes a doctor-side terminal 10 and a patient-side terminal 20 .
  • FIG. 3 is a block diagram showing an example of the configuration of the doctor-side terminal 10 of FIG.
  • FIG. 3 shows logical functional blocks implemented in the information processing apparatus 1 for executing the image quality changing operation.
  • FIG. 4 is a block diagram showing an example of the configuration of the patient terminal 20 of FIG. 2. As shown in FIG. In addition to the hardware configuration of the patient terminal 20, FIG. 4 shows logical functional blocks implemented in the arithmetic unit 5 for executing the image quality changing operation.
  • the information processing system 100 supports telemedicine (online medical care, home medical care), in which the subject receiving the medical service receives various services from the medical service provider while staying at home.
  • medical service providers include doctors, nurses, physical therapists, caregivers, and the like.
  • Telemedicine also includes medical practices in a narrow sense such as treatment and treatment performed by doctors, etc., as well as medical practices in a broad sense such as rehabilitation performed by physical therapists, health management performed by caregivers, and medication management.
  • the medical service provider will be referred to as a "physician”.
  • the subjects who receive medical services are, for example, patients, those undergoing medical examinations (examinees), and those receiving care (care recipients).
  • a subject who receives medical services is referred to as a "patient”.
  • Facilities that provide medical services are, for example, hospitals, clinics, nursing homes, and the like. In the following, for the sake of simplicity, facilities that provide medical services are referred to as "hospitals”.
  • the doctor's terminal 10 and the patient's terminal 20 are connected by a network N and perform two-way communication in real time.
  • the network N is a communication network such as the Internet or a dedicated line.
  • a closed network is formed by a VPN (Virtual Private Network) or the like.
  • the doctor-side terminal 10 is installed in the hospital, and the patient-side terminal 20 is installed in the patient's home in a remote location.
  • the doctor-side terminal 10 and the patient-side terminal 20 may be a personal computer, a server machine, a tablet terminal capable of input/output using a touch panel, a smart phone, or the like.
  • a doctor at the hospital can use the doctor-side terminal 10 to communicate in real time with a patient who uses the patient-side terminal 20 at a remote location.
  • Such real-time two-way communication of video data has a high network load, and there is a demand to reduce the size of the video data.
  • the band required for transmission is reduced by compressing and encoding video data.
  • the image quality deteriorates.
  • abnormal sites that differ from patient to patient are specified using subject-related information to be described later, and the image quality of the specified area is made higher than that of other areas. clarify.
  • the doctor-side terminal 10 includes an information processing device 1, a display device 11, an imaging device 12, a storage device 13, an input device 14, a communication device 15, an audio input device 16, an audio output device 17, These are interconnected by a bus 18 .
  • the information processing device 1 is, for example, an arithmetic processing device such as a CPU (Central Processing Unit) or a GPU (Graphics Processing Unit).
  • the information processing device 1 includes an acquisition unit 2, a specification unit 3, and a control unit 4 as logical functional blocks.
  • the acquisition unit 2, the identification unit 3, and the control unit 4 correspond to acquisition means, identification means, and control means described in claims.
  • the acquisition unit 2 acquires video data including a patient and subject-related information about the patient included in the video data.
  • Video data including the patient is transmitted from the patient terminal 20 via the network, for example.
  • the image data including the patient may be stored in a database (not shown) connected to a network. In this case, the acquisition unit 2 can access the database and acquire the video data.
  • Subject-related information includes the patient's own personal information, medical record information, medical interview information, biological information, ability information that indicates the ability of daily living activities such as ADL (Activities of Daily Living), and records of prescriptions, nursing care, rehabilitation, etc. contains information indicating These pieces of information are stored in the storage device 13 . Note that these pieces of information may be stored and managed in an external management server.
  • the subject-related information includes the patient's voice information and motion information included in the patient's video data transmitted from the patient-side terminal 20, which will be described later.
  • the specifying unit 3 specifies a change area for changing the image quality in the video data based on the subject-related information.
  • the specifying unit 3 can specify a change area by combining one or more of the plurality of subject-related information described above.
  • a change area is an area in a video containing a patient that should be inspected by a physician to make a diagnosis.
  • the identification unit 3 can identify the injured part of the patient from the past medical information described in the medical chart, and identify the abnormal area corresponding to the injured part in the video as the changed area.
  • the area specified as the change area may be changed according to the number of examinations, the degree of symptoms, and the like.
  • the specifying unit 3 may specify, as a change area, a region where the patient complains of an abnormality not included in the medical chart information or medical interview information. can.
  • the acquisition unit 2 acquires minute vibrations of the video data due to the patient's convulsions as motion information. Based on this motion information, the identification unit 3 can identify the convulsed part as the change area.
  • the specifying unit 3 can also specify the change area based on both the voice information and the motion information. For example, the identifying unit 3 can identify the region in the video where the patient is pointing with his/her finger as the changed region, based on the voice information of the patient saying "This is where it hurts" and the movement information of the patient's finger pointing. .
  • the specifying unit 3 can also specify the change area according to the doctor's input operation.
  • an input device for receiving an input operation by a doctor an input means simulating a human body (hereinafter referred to as "human body model input device”) can be used.
  • specified position information specifying the change area in the patient's image data is generated.
  • the specifying unit 3 can specify the change area based on the specified position information. Therefore, the subject-related information described above also includes the designated position information by the human body model input device.
  • the identifying unit 3 can automatically add the information of the site to the medical chart or the like. For example, when a change area is specified based on a conversation (voice information) between a doctor and a patient, the change area is added to the chart as an abnormal site. Further, by analyzing the voice information of the doctor, it is possible to add the symptoms of the added abnormal site to the chart.
  • the control unit 4 outputs to the patient-side terminal 20 an image quality change instruction for changing the image quality of the specified change area.
  • the control unit 4 outputs an image quality change instruction to set the image quality of the changed area to be higher than the image quality of the areas other than the changed area.
  • the display device 11 is an LCD (Liquid Crystal Display) or the like, and displays various information.
  • FIG. 5 is a diagram for explaining an example of the display contents of the doctor's terminal. As shown in FIG. 5, the display device 11 has a video display area 111, an information display area 112, and an input information display area 113.
  • FIG. 5 is a diagram for explaining an example of the display contents of the doctor's terminal. As shown in FIG. 5, the display device 11 has a video display area 111, an information display area 112, and an input information display area 113.
  • the image of the patient transmitted from the patient terminal 20 is displayed in the image display area 111 .
  • the patient terminal 20 when transmitting the video data including the patient, sets the change area to be larger than the area other than the change area.
  • the image quality of the image data is changed so as to have high image quality, and the image data is transmitted to the doctor side terminal 10.
  • the patient terminal 20 when the patient terminal 20 performs compression encoding to reduce the data size when transmitting video data, the patient terminal 20 reduces the compression rate of the change area to be lower than the compression rate of the area other than the change area.
  • the doctor can display the area necessary for diagnosis with higher image quality than other areas, and it is possible to suppress the influence of deterioration of the image quality on the medical service.
  • chart information eg, chronic disease, medical history, examination information, etc.
  • interview information are displayed.
  • information indicating an image quality change area specified based on the subject-related information and whose image quality has been changed is displayed.
  • the doctor-side terminal 10 may further include a voice analysis unit, and the information display area 112 may display information related to the voice-recognized content of the conversation between the doctor and the patient. For example, it is possible to display predetermined vital signs (blood pressure, heart rate, etc.) based on the patient's voice information "I have a headache.”
  • the information display area 112 may display disease name candidates according to the symptoms by utilizing the voice recognition result of the conversation between the doctor and the patient. Further, after narrowing down the name of the disease from the symptoms, the information display area 112 may display recommendation information as to what kind of questions should be asked in order to determine the name of the disease.
  • a diagram simulating a human body is displayed in the input information display area 113 .
  • the specified position information is generated by the above-described human body model input device, a mark, an icon, or the like is displayed at a part corresponding to the specified position information in a drawing simulating a human body.
  • the input information display area 113 displays a clear image of the patient's body part to be inspected by pressing the human body model input device by the doctor.
  • the photographing device 12 is, for example, a video camera, and can photograph a doctor using the doctor-side terminal 10.
  • the imaging device 12 images a doctor in a predetermined imaging range (imaging angle of view) at a predetermined imaging rate, and generates moving image data composed of a plurality of time-series image data.
  • the storage device 13 is a non-volatile storage device such as a HDD (Hard Disk Drive), SSD (Solid State Drive), or flash memory.
  • the storage device 13 stores a program that implements each function of the components included in the information processing device 1 . By the information processing device 1 executing this program, each function of the constituent elements included in the information processing device 1 is realized.
  • the storage device 13 may include memories such as RAM (Random Access Memory) and ROM (Read Only Memory). When executing the programs, the information processing apparatus 1 may execute the programs after reading them onto the memory, or may execute them without reading them onto the memory. The storage device 13 also plays a role of storing information (subject-related information and the like) and data held by components included in the information processing device 1 .
  • the input device 14 is a device that receives operation input from the doctor who is the user of the doctor-side terminal 10, and is, for example, a keyboard, a mouse, and the like.
  • the display device 11 and the input device 14 may be integrated and implemented as a touch panel.
  • the input device 14 also includes the human body model input device described above.
  • the communication device 15 transmits and receives data to and from an external patient terminal 20, for example, via a wireless transmission line.
  • the communication device 15 transmits video data including a doctor to the patient terminal 20 and receives video data including a patient from the patient terminal 20 .
  • the communication device 15 receives these information from the management server.
  • the voice input device 16 is, for example, a microphone, and collects the voice uttered by the doctor as voice data.
  • Video data is generated by synthesizing the moving image data generated by the imaging device 12 and the audio data collected by the audio input device 16 . That is, the video data includes doctor's operation information and audio data.
  • the audio output device 17 is, for example, a speaker, and reproduces the audio contained in the patient's video data transmitted from the patient-side terminal 20 .
  • the acquisition unit 2 may further acquire voice data uttered by the doctor collected by the voice input device 16 .
  • the specifying unit 3 can specify the change area based on at least one of the subject-related information and voice data uttered by the doctor. Further, when the voice information included in the video data of the subject and the voice data uttered by the doctor are acquired, the specifying unit 3 gives priority to the voice data uttered by the doctor, and changes based on the voice data. A region may be specified.
  • the doctor checks the patient's video and says, "The first joint of the index finger of the right hand hurts, doesn't it?"
  • "the first joint of the index finger of the right hand” can be specified as the change area. This enables the doctor to accurately convert the region necessary for diagnosis to high image quality.
  • the specifying unit 3 can function as output means for outputting a plurality of candidates for the change area.
  • the specifying unit 3 can output the first change area specified using the medical record information and the second change area different from the first change area specified using the medical interview information as candidates for the change area. . These candidates can be displayed in the information display area 112 .
  • the doctor can use the input device 14 to select at least one candidate from a plurality of candidates for the change region.
  • the input device 14 functions as a receiving means for receiving selection of candidates.
  • the control unit 4 outputs an image quality change instruction to change the image quality of the area corresponding to the selected candidate.
  • the doctor himself/herself can appropriately select a candidate for which visual inspection is necessary from among the plurality of candidates for the change region automatically presented.
  • multiple change area candidates may be narrowed down according to the clinical department that the patient is visiting. That is, predetermined candidates are set for each clinical department, and it is possible to exclude candidates for the change region that are not included in the predetermined candidates. For example, if the clinical department is "ophthalmology", the candidates for ophthalmology do not include the "fingertips" of the body part of the patient. When a patient is undergoing an online eye examination at an ophthalmology clinic, if "fingertips of the hand" are identified as candidates for the change area, exclude candidates for the change area that indicate "fingertips of the hand” that are not included in the ophthalmology candidates. be able to.
  • a plurality of change area candidates are displayed in the information display area 112, they may be displayed in order of priority. For example, based on the chart information, it is possible to display candidates for change areas with severe symptoms with the highest priority. In this case, the content of the chart and the candidate for the change area (abnormal part of the patient) are linked and displayed in the information display area 112 so that the doctor can understand why the candidate for the change area is given the highest priority. You may
  • the patient-side terminal 20 includes an arithmetic device 5, a display device 21, an imaging device 22, a storage device 23, an input device 24, a communication device 25, an audio input device 26, and an audio output device 27. are interconnected by a bus 28.
  • the display device 21, the imaging device 22, the storage device 23, the input device 24, the communication device 25, the audio input device 26, and the audio output device 27 are the display device 11, the imaging device 12, the storage device 13, the input device 14, the storage device 13, and the audio output device 27, respectively. Since general functions are the same as those of the communication device 15, the voice input device 16, and the voice output device 17, description thereof will be omitted as appropriate.
  • the arithmetic device 5 is, for example, an arithmetic processing device such as a CPU or GPU.
  • the arithmetic device 5 includes an image quality change processing section 6 as a logical functional block.
  • the image quality change processing unit 6 changes the image quality of the image data including the patient according to the image quality change instruction from the doctor side terminal 10 .
  • the image quality change processing unit 6 changes the compression ratio of the video data in the codec unit.
  • the image data in which the changed area has a higher image quality than the area other than the changed area is generated by lowering the compression rate of the changed area than the compression rate of the area other than the changed area. Generate. As a result, it is possible to reduce the data size of the entire video data to be transmitted while increasing the image quality of the change area.
  • two compression rates are set: low compression rate (high-resolution image quality) for the changed area and high compression rate (low-resolution image quality) for the area other than the changed area.
  • the setting of the compression rate may be, for example, three or more levels, such as a modified area, an area including the patient, and a background area.
  • the display device 21 is an LCD or the like, and displays various information.
  • FIG. 6 is a diagram for explaining an example of display contents of the patient terminal.
  • the display device 21 has an image display area 211 , an information display area 212 and an input information display area 213 .
  • the image display area 211 an image including the doctor transmitted from the doctor-side terminal 10 is displayed.
  • Information to be notified to the patient is displayed in the information display area 212 .
  • the information display area 212 may be displayed to notify the patient that the oxygen saturation will be measured. can be done. The patient can know what is being measured from this notification, and can avoid moving his/her own body parts necessary for the measurement as much as possible.
  • a diagram simulating a human body is displayed in the input information display area 213 .
  • a mark, icon, or the like is displayed at the site corresponding to the specified position information in the figure simulating the human body. That is, in the input information display area 213, the part of the patient that the doctor presses on the human body model input device and wants to inspect is displayed so as to be clear. From this display, the patient can see the part of his/her body that is being inspected by the doctor and can avoid moving that part.
  • the information display area 212 and the input information display area 213 function as notification means for notifying the patient of the change area (part of the patient's body inspected by the doctor) for changing the image quality.
  • the notification means an example of performing various displays on the display device 21 has been shown, but the present invention is not limited to this. For example, it is possible to notify the patient of the changed area by voice.
  • the photographing device 22 is, for example, a video camera, and can photograph the patient using the patient-side terminal 20.
  • the imaging device 22 images a patient in a predetermined imaging range (imaging angle of view) at a predetermined imaging rate, and generates moving image data composed of a plurality of time-series image data.
  • the storage device 23 is a nonvolatile storage device such as an HDD, SSD, or flash memory.
  • the storage device 23 stores a program that implements the functions of the image quality change processing section 6 provided in the arithmetic device 5 .
  • the functions of the image quality change processing unit 6 are realized by the arithmetic unit 5 executing this program.
  • the storage device 23 may include memories such as RAM and ROM.
  • the storage device 13 also plays a role of storing data necessary for the image quality change processing section 6 to change the image quality of the video data.
  • the input device 24 is a device that receives operation input from the patient who is the user of the patient-side terminal 20, and is, for example, a keyboard, mouse, and the like.
  • the display device 21 and the input device 24 may be integrated and implemented as a touch panel.
  • the communication device 25 transmits and receives data to and from the external doctor's terminal 10 via, for example, a wireless transmission line. For example, video data including doctors and video data including patients are transmitted via the communication device 25 . Further, when receiving an image quality change instruction, the communication device 25 transmits to the doctor side terminal 10 the image data of the image data including the patient in which the image quality of the changed area is higher than the image quality of the other areas.
  • the voice input device 26 is, for example, a microphone, and collects voices uttered by the patient.
  • Video data is generated by synthesizing the moving image data generated by the imaging device 22 and the audio information collected by the audio input device 26 . That is, this video data includes patient's movement information and audio information.
  • the audio output device 27 is, for example, a speaker, and reproduces the audio contained in the doctor's video data transmitted from the doctor-side terminal 10 .
  • FIG. 7 is a sequence diagram illustrating an example of the flow of information processing according to the embodiment.
  • the patient terminal 20 transmits video data including the patient to the doctor terminal 10 (S10).
  • the acquiring unit 2 of the doctor-side terminal 10 acquires the video data including the patient and the subject related information of the patient (S11).
  • the specifying unit 3 specifies a change area for changing the image quality in the video data based on the subject-related information (S12).
  • the control unit 4 generates an image quality change instruction for changing the image quality of the specified change area, and outputs it to the patient terminal 20 via the communication device 15 (S13). Specifically, the control unit 4 outputs an image quality change instruction to set the image quality of the changed area to be higher than the image quality of the areas other than the changed area. For example, when transmitting the image data generated by the imaging device 22 of the patient-side terminal 20 to the doctor-side terminal 10, the control unit 4 lowers the compression rate of the change area than the compression rate of the area other than the change area. , it is possible to generate an image quality change instruction for changing the change area to high image quality.
  • the image quality change processing unit 6 of the patient-side terminal 20 changes the image quality of the specified change area in the video data including the patient based on the image quality change instruction (S15). More specifically, the image quality change processing unit 6 generates image data in which the image quality of the changed area is higher than the image quality of the other areas than the image data including the patient.
  • the image quality change processing unit 6 lowers the compression rate of the change area than the compression rate of the area other than the change area, and increases the compression rate of the change area. image quality.
  • the generated image data is transmitted to the doctor's terminal 10 via the communication device 25 (step S16).
  • the display device 11 of the doctor-side terminal 10 displays an image in which the image quality of the changed area is higher than the image quality of the areas other than the changed area (step S17). This makes it possible to automatically sharpen the image of the changed area, that is, the area necessary for the doctor to make a diagnosis.
  • past medical care information written in medical charts information on medical questionnaires filled out by patients at the time of consultation, information included in video data including patients, and other information necessary for medical examinations. It is possible to specify an area to be visually inspected from the subject-related information, which is the information, and automatically improve the image quality of the area. As a result, it is possible to clearly display the image of the area that the doctor wants to visually inspect, and it is possible to improve medical services.
  • the information processing device 1 can be realized as a server installed in a data center or the like.
  • the image data including the patient from the patient-side terminal 20 is transmitted to the server, and the server executes the process of generating the image quality change instruction described above.
  • the image quality change instruction from the server is transmitted to the patient terminal 20, and the patient terminal 20 sets the image quality of the changed area to be higher than that of other areas, and transmits video data to the doctor terminal 10. can.
  • each functional block that performs various processes described in the drawings can be configured with a processor, memory, and other circuits. Moreover, it is also possible to implement the above-described processing by causing a processor to execute a program. Therefore, these functional blocks can be realized in various forms by hardware only, software only, or a combination thereof, and are not limited to either one.
  • Non-transitory computer readable media include various types of tangible storage media.
  • Examples of non-transitory computer-readable media include magnetic recording media (e.g., flexible discs, magnetic tapes, hard disk drives), magneto-optical recording media (e.g., magneto-optical discs), CD-ROMs (Read Only Memory), CD-Rs, CD-R/W, semiconductor memory (eg mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (Random Access Memory)).
  • the program may also be delivered to the computer on various types of transitory computer readable medium. Examples of transitory computer-readable media include electrical signals, optical signals, and electromagnetic waves. Transitory computer-readable media can deliver the program to the computer via wired channels, such as wires and optical fibers, or wireless channels.
  • (Appendix 1) Video data including a subject who receives medical services, and acquisition means for acquiring subject-related information about the subject contained in the video data; specifying means for specifying a change area for changing image quality in the video data based on the subject-related information; image quality changing means for changing the image quality of the specified change area; comprising Information processing system.
  • (Appendix 2) output means for outputting a plurality of candidates for the change area based on the subject-related information; receiving means for receiving selection of at least one candidate from the plurality of candidates; with The image quality changing means changes the image quality of the area corresponding to the selected candidate.
  • the information processing system according to appendix 1.
  • the subject-related information includes at least one of the subject's chart information, the subject's interview information, the subject's voice information included in the video data, and the subject's motion information included in the video data.
  • the acquisition means further acquires voice data of a provider who provides medical services,
  • the identifying means identifies the change area based on at least one of the subject-related information and the audio data.
  • the information processing system according to appendix 3. (Appendix 5) When the audio information of the subject and the audio data of the provider are acquired, the identifying means prioritizes the audio data of the provider, and based on the audio data, identify areas to change image quality, The information processing system according to appendix 4.
  • the specifying means specifies the change area based on both the voice information and the motion information.
  • the information processing system according to appendix 3. (Appendix 7) Further equipped with an input means that imitates the human body, The subject-related information includes specified position information on the human body input from the input means, The information processing system according to appendix 3.
  • the first terminal further comprising a first terminal that performs two-way communication and a second terminal
  • the first terminal comprises a photographing means for photographing the subject and generating the video data
  • the second terminal comprises display means for displaying an image of the image data generated by the first terminal in which the image quality of the change area has been changed
  • the information processing system according to any one of Appendices 1 to 7.
  • the image quality changing means controls the compression rate of the video data generated by the photographing means to change the image quality of the change area.
  • the information processing system according to appendix 8. (Appendix 10)
  • the first terminal further comprises notification means for notifying the target person of the change area specified by the specifying means,
  • Video data including a subject who receives medical services, and acquisition means for acquiring subject-related information about the subject contained in the video data; specifying means for specifying a change area for changing image quality in the video data based on the subject-related information; a control means for outputting an image quality change instruction for changing the image quality of the specified change area; comprising Information processing equipment.
  • output means for outputting a plurality of candidates for the change area based on the subject-related information; receiving means for receiving selection of at least one candidate from the plurality of candidates; with The control means outputs the image quality change instruction to change the image quality of the area corresponding to the selected candidate.
  • the subject-related information includes at least one of the subject's chart information, the subject's interview information, the subject's voice information included in the video data, and the subject's motion information included in the video data. is 13.
  • the acquisition means further acquires voice data of a provider who provides medical services,
  • the identifying means identifies the change area based on at least one of the subject-related information and the audio data.
  • the information processing device according to appendix 13. (Appendix 15)
  • the identifying means prioritizes the audio data of the provider, and based on the audio data, identify areas to change image quality, 15.
  • the specifying means specifies the change area based on both the voice information and the motion information. 13.
  • the information processing device according to appendix 13. (Appendix 17) Further equipped with an input means that imitates the human body, The subject-related information includes specified position information on the human body input from the input means, 13.
  • the information processing device according to appendix 13. (Appendix 18) the acquiring means acquires, via a network, the image data generated by photographing the subject by an external photographing means; further comprising display means for displaying an image in which the image quality of the change area is changed according to the image quality change instruction from the control means, out of the image data generated by the photographing means; 18.
  • the information processing apparatus according to any one of Appendices 11 to 17.
  • the control means generates the image quality change instruction for changing the image quality of the change area by controlling the compression rate of the video data generated by the imaging means. 19.
  • the control means further outputs a notification instruction to notify the target person of the change area specified by the specifying means. 19.
  • (Appendix 21) Acquiring video data including a subject receiving medical services and subject-related information about the subject contained in the video data; identifying a change area for changing image quality in the video data based on the subject-related information; changing the image quality of the identified change area; Information processing methods.
  • Appendix 22 A process of acquiring video data including a subject receiving medical services and subject-related information about the subject contained in the video data; a process of identifying a change area for changing image quality in the video data based on the subject-related information; a process of changing the image quality of the identified change area; A non-transitory computer-readable medium that stores a program that causes a computer to execute

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

本開示に係る情報処理システム（１００）は、医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得する取得手段（１０１）と、前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定する特定手段（１０２）と、特定された前記変更領域の画質を変更する画質変更手段（１０３）とを備える。対象者関連情報は、対象者のカルテ情報、問診情報、映像データに含まれる対象者の音声情報及び動作情報の少なくとも一つである。

Description

情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体
　本開示は、情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体に関する。
　遠隔地からネットワークを介して、映像データを、医療サービスを提供する提供者に送信する医療サービス提供システムが導入されつつある。
　また、画質に関する特許文献として以下がある。
　特許文献１には、取得された映像の領域毎に高周波成分を解析し、解析結果に応じて、映像の領域の少なくとも一部が、高周波成分がより多くなるにつれてより高画質となるように画質調整を行う技術が開示されている。この技術によれば、映像データのデータ量を軽減するとともに、低画質領域と高画質領域との境界における画質の違いを目立ち難くすることできるとされている。
　また、特許文献１には、高周波成分の解析結果に基づいて、各領域に対して画質を設定することにより生成された画質レベルマップを、人物の顔領域が検出された場合に、顔領域の画質が該顔領域以外の他の領域の画質よりも高画質となるように、画質レベルマップにおける画質設定を変更することが記載されている。
特開２０２０－０５８０１４号公報
　特許文献１では、顔の特徴点を抽出して顔領域を検出し、該顔領域の画質を他の領域の画質よりも高くすることを開示しているにすぎず、医療サービスを提供する提供者に対し、映像データを遠隔地からネットワークを介して送信する医療サービス提供システムにおいて、適切に必要な領域の画質を制御する技術については開示されていない。
　本開示の目的は、医療サービスを提供する提供者にとって適切に必要な領域の画質を制御可能な、情報処理システム、情報処理装置、情報処理方法及びプログラムが格納された非一時的なコンピュータ可読媒体を提供することにある。
　一態様に係る情報処理システムは、医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得する取得手段と、前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定する特定手段と、特定された前記変更領域の画質を変更する画質変更手段とを備えるものである。
　一態様に係る情報処理装置は、医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得する取得手段と、前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定する特定手段と、特定された前記変更領域の画質を変更させる画質変更指示を出力する制御手段とを備えるものである。
　一態様に係る情報処理方法は、医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得し、前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定し、特定された前記変更領域の画質を変更する。
　　一態様に係る非一時的なコンピュータ可読媒体は、医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得する処理と、前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定する処理と、特定された前記変更領域の画質を変更する処理とをコンピュータに実行させるプログラムが格納されたものである。
　上述の態様によれば、医療サービスを提供する提供者にとって必要な領域の映像を明瞭にすることが可能な、情報処理システム、情報処理装置、情報処理方法及びプログラムが格納された非一時的なコンピュータ可読媒体を提供することができる。
実施形態に係る情報処理システムの構成を示すブロック図である。 実施形態に係る情報処理装置を含む情報処理システムの構成例を示す図である。 図２の医師側端末の構成の一例を示すブロック図である。 図２の患者側端末の構成の一例を示すブロック図である。 医師側端末の表示内容の一例を説明する図である。 患者側端末の表示内容の一例を説明する図である。 実施形態に係る情報処理の流れの一例を説明するシーケンス図である。
　以下、図面を参照して本開示の実施形態について説明する。なお、以下の記載及び図面は、説明の明確化のため、適宜、省略及び簡略化がなされている。また、以下の各図面において、同一の要素には同一の符号が付されており、必要に応じて重複説明は省略されている。また、以下で示す具体的な数値などは、本開示の理解を容易とするための例示にすぎず、これに限定されるものではない。
　実施形態は、医療サービスを提供する施設と遠隔地にある医療サービスを受ける対象者がいる施設との間で、ネットワークを介して対象者の映像データを伝送し、対象者の映像に基づいて医師等の専門家が診断を行う、医療サービス提供技術に関する。
　図１は、実施形態に係る情報処理システム１００の構成を示すブロック図である。図１に示すように、情報処理システム１００は、取得手段１０１、特定手段１０２、画質変更手段１０３を備える。取得手段１０１は、医療サービスを受ける対象者を含む映像データと、該映像データに含まれる対象者に関する対象者関連情報を取得する。特定手段１０２は、対象者関連情報に基づいて、映像データにおける画質を変更する変更領域を特定する。画質変更手段１０３は、特定された変更領域の画質を変更する。
　このように、対象者の対象者関連情報に基づいて、映像データにおける画質を変更する領域を特定することで、医師が診断を行うために必要な領域の画質を変更して、映像を明瞭とすることができ、医療サービスの向上を図ることが可能となる。
　次に、図２～４を参照して、実施形態に係る情報処理システム１００の具体的な例について説明する。図２は、実施形態に係る情報処理装置１を含む情報処理システム１００の構成例を示す図である。図２に示すように、情報処理システム１００は、医師側端末１０、患者側端末２０を含む。
　図３は、図２の医師側端末１０の構成の一例を示すブロック図である。図３では、医師側端末１０のハードウェア構成のほか、画質変更動作を実行するために情報処理装置１内に実現される論理的な機能ブロックが示されている。図４は、図２の患者側端末２０の構成の一例を示すブロック図である。図４では、患者側端末２０のハードウェア構成のほか、画質変更動作を実行するために演算装置５内に実現される論理的な機能ブロックが示されている。
　情報処理システム１００は、医療サービスを受ける対象者が自宅に在宅したまま、医療サービス提供者から各種サービスの提供を受ける、遠隔診療（オンライン診療、在宅診療）を支援するものである。ここで、医療サービス提供者には、医師、看護師、理学療法士、介護士等が含まれる。また、遠隔診療には、医師等が行う治療や処置といった狭義の医療行為の他、理学療法士が行うリハビリテーション、介護士が行う健康管理、服薬管理等の広義の医療行為も含まれる。以下、説明を簡単にするため、医療サービス提供者を「医師」と記載する。
　医療サービスを受ける対象者は、例えば、患者、健康診断を受ける者（被健診者）、介護を受ける者（被介護者）等である。以下、説明を簡単にするため、医療サービスを受ける対象者を「患者」と記載する。また、医療サービスを提供する施設は、例えば、病院、診療所、介護施設等である。以下、説明を簡単にするため、医療サービスを提供する施設を「病院」と記載する。
　医師側端末１０と患者側端末２０とは、ネットワークＮで接続され、リアルタイムで双方向通信を行う。ここで、ネットワークＮは、インターネット、専用線等の通信ネットワークである。インターネットの場合、ＶＰＮ（Virtual Private Network）等で閉域網が形成されていることが好ましい。
　医師側端末１０は病院に設置され、患者側端末２０は遠隔地にある患者宅に設置される。医師側端末１０、患者側端末２０は、パーソナルコンピュータ、サーバマシン、タッチパネルによる入出力が可能なタブレット端末、スマートフォン等であり得る。病院にいる医師は、医師側端末１０を用いて、遠隔地にいる患者側端末２０を使用する患者との間でリアルタイムなやり取りを行うことができる。
　このような医師及び患者の音声や動作を含む映像データのリアルタイムの双方向通信は、ネットワーク負荷が高く、映像データのサイズを小さくすることが求められている。一般に、映像データを圧縮符号化することで、伝送に必要な帯域を小さくしている。しかし、映像データを圧縮符号化すると画質が劣化する。
　遠隔診療では患者宅から伝送された映像に基づいて医師が診断を行うため、映像が劣化すると、映像中の患者の負傷部位等の何らかの異常部位が不明瞭となり、誤診につながる恐れがある。実施形態に係る情報処理装置１では、患者によってそれぞれ異なる異常部位を後述する対象者関連情報を用いて特定し、特定された領域の画質を他の領域よりも高画質にすることで、当該領域を明瞭にする。
　図３に示すように、医師側端末１０は、情報処理装置１、表示装置１１、撮影装置１２、記憶装置１３、入力装置１４、通信装置１５、音声入力装置１６、音声出力装置１７を含み、これらはバス１８により相互に接続されている。情報処理装置１は、例えばＣＰＵ（Central Processing Unit）やＧＰＵ（Graphics Processing Unit）等の演算処理装置である。情報処理装置１は、論理的な機能ブロックとしての取得部２、特定部３、制御部４を備える。取得部２、特定部３、制御部４は、特許請求の範囲に記載の取得手段、特定手段、制御手段に対応する。
　取得部２は、患者を含む映像データと、該映像データに含まれる患者に関する対象者関連情報を取得する。患者を含む映像データは、例えば、患者側端末２０からネットワークを介して伝送される。患者を含む映像データは、ネットワークに接続された、図示しないデータベースに格納されたものであってもよい。この場合、取得部２は、該データベースにアクセスして映像データを取得することができる。
　対象者関連情報には、患者自身の個人情報、カルテ情報、問診情報、生体情報、ＡＤＬ（Activities of Daily Living）等の日常生活動作の能力を示す能力情報や、処方、介護、リハビリ等の記録を示す情報が含まれる。これらの情報は、記憶装置１３に格納される。なお、これらの情報は、外部の管理サーバに保存され、管理されていてもよい。
　また、対象者関連情報には、後述する患者側端末２０より伝送される患者の映像データに含まれる、患者の音声情報や動作情報が含まれる。
　特定部３は、対象者関連情報に基づいて、映像データにおける画質を変更する変更領域を特定する。特定部３は、上述した複数の対象者関連情報のうち、１つ又は１つ以上を組み合わせて、変更領域を特定することができる。変更領域とは、患者を含む映像中の医師が診断を行うために視診すべき領域である。
　例えば、特定部３は、カルテに記載された過去の診療情報の記載から、患者の負傷部位を特定し、映像中の負傷部位に対応する異常領域を変更領域として特定することができる。なお、初診の場合、再診の場合、診察の回数、症状の度合い等に応じて、変更領域として特定する領域を変えてもよい。
　また、患者が受診する前に記載した問診表の内容に基づいて変更領域を特定することも可能である。さらに、特定部３は、患者の映像データに含まれる患者の音声情報に基づいて、カルテ情報や問診情報には含まれていない患者が音声で異常を訴える部位を、変更領域として特定することもできる。
　また、患者の映像データに含まれる患者の動作情報に基づいて、変更領域を特定することも可能である。例えば、患者が痙攣している場合、取得部２は、映像データの患者の痙攣による微小な振動を動作情報として取得する。特定部３は、この動作情報に基づいて、痙攣している部位を変更領域として特定することができる。
　また、特定部３は、患者の音声情報と動作情報とが取得された場合、音声情報と動作情報の両方に基づいて、変更領域を特定することも可能である。例えば、特定部３は、患者の「ここが痛い」という音声情報と、患者が指を指している動作情報から、映像中の患者が指を指している部位を変更領域として特定することができる。
　さらに、特定部３は、医者の入力操作に応じて、変更領域を特定することも可能である。例えば、医者の入力操作を受け付ける入力装置として、人体模型や人形等の３次元の人体モデル、人体のイラスト等の２次元の人体モデルを含む、人体を模した入力手段（以下、「人体モデル入力装置」とする）を用いることができる。
　医者が、人体モデル入力装置における視診したい部位を押圧することで、患者の映像データにおける変更領域を指定する指定位置情報が生成される。特定部３は、指定位置情報に基づいて、変更領域を特定することができる。従って、上述した対象者関連情報には、人体モデル入力装置による指定位置情報も含まれる。
　なお、変更領域として特定した部位が、患者の異常部位としてカルテ情報や問診情報には含まれていない場合、特定部３はカルテ等に自動的に当該部位の情報を追加することができる。例えば、医者と患者の会話（音声情報）に基づいて変更領域が特定された場合、当該変更領域が異常部位としてカルテに追加される。また、医者の音声情報を解析することで、追加した異常部位の症状等をカルテに追加することも可能である。
　制御部４は、特定された変更領域の画質を変更させる画質変更指示を患者側端末２０に出力する。制御部４は、変更領域の画質を、変更領域以外の他の領域の画質よりも高画質とする画質変更指示を出力する。
　表示装置１１は、ＬＣＤ（Liquid Crystal Display）等であり、各種情報を表示する。図５は、医師側端末の表示内容の一例を説明する図である。図５に示すように、表示装置１１は、映像表示領域１１１、情報表示領域１１２、入力情報表示領域１１３を有する。
　映像表示領域１１１には、患者側端末２０から伝送される患者の映像が表示される。上述したように、制御部４から画質変更指示が患者側端末２０に出力された場合、患者側端末２０は、患者を含む映像データを送信する際に、変更領域が変更領域以外の領域よりも高画質となるように映像データの画質を変更して医師側端末１０に送信する。
　例えば、患者側端末２０は、映像データを送信する際にデータサイズを小さくするために圧縮符号化する場合、変更領域の圧縮率を変更領域以外の領域の圧縮率よりも下げることで、変更領域が変更領域以外の領域よりも高画質である映像データとすることができる。これにより、医師が診断に必要な領域を他の領域よりも高画質で表示することができ、画質の劣化による医療サービスへの影響を抑制することが可能となる。
　情報表示領域１１２には、カルテ情報（例えば、持病、病歴、検査情報等）、問診情報が表示される。また、情報表示領域１１２には、対象者関連情報に基づいて特定され、画質が変更された画質変更領域を示す情報が表示される。なお、医師側端末１０は、音声解析部をさらに備え、情報表示領域１１２には、医者と患者との会話を音声認識した内容と関連する情報が表示されてもよい。例えば、患者の「頭が痛い」との音声情報から、所定のバイタルサイン（血圧や心拍数等）を表示することができる。
　また、情報表示領域１１２は、医師と患者との会話の音声認識結果を活用して、症状に応じた病名の候補を表示してもよい。また、症状から病名を絞り込んだ後、病名を確定するために、情報表示領域１１２はどのような質問したらいいかのリコメンド情報を表示してもよい。
　入力情報表示領域１１３には、人体を模した図が表示される。上述した人体モデル入力装置で指定位置情報が生成されると、人体を模した図における指定位置情報に応じた部位にマークやアイコン等が表示される。すなわち、入力情報表示領域１１３は、医者が人体モデル入力装置を押圧した、視診したい患者の身体部位が明確となる表示を行う。
　撮影装置１２は、例えばビデオカメラであり、医師側端末１０を使用する医師を撮影することができる。撮影装置１２は、所定の撮影範囲（撮影画角）を所定の撮影レートで医者を撮影して、時系列の複数の画像データによって構成される動画データを生成する。
　記憶装置１３は、例えばＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、又はフラッシュメモリ等の不揮発性記憶装置である。記憶装置１３は、情報処理装置１が備える構成要素の各機能を実現するプログラムを記憶している。情報処理装置１がこのプログラムを実行することで、情報処理装置１が備える構成要素の各機能が実現される。
　記憶装置１３は、ＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）等のメモリを含んでいてもよい。情報処理装置１は、上記プログラムを実行する際、これらのプログラムをメモリ上に読み出してから実行しても良いし、メモリ上に読み出さずに実行しても良い。また、記憶装置１３は、情報処理装置１が備える構成要素が保持する情報（対象者関連情報等）やデータを記憶する役割も果たす。
　入力装置１４は、医師側端末１０の使用者である医師の操作入力を受け付ける装置であり、例えば、キーボード、マウス等である。表示装置１１と入力装置１４とが一体化され、タッチパネルとして実現されてもよい。また、入力装置１４には、上述した人体モデル入力装置が含まれる。
　通信装置１５は、例えば、無線伝送路を介して外部の患者側端末２０との間でデータを送受信する。例えば、通信装置１５は、医者を含む映像データを患者側端末２０へ送信し、患者を含む映像データを患者側端末２０から受信する。また、カルテ情報や問診情報等が外部の管理サーバに保存されている場合は、通信装置１５はこれらの情報を管理サーバから受信する。
　音声入力装置１６は、例えばマイクであり、医者が発した音声を、音声データとして収集する。撮影装置１２により生成された動画データと音声入力装置１６により収集された音声データを合成することで、映像データが生成される。すなわち、この映像データには、医者の動作情報と音声データとが含まれる。音声出力装置１７は、例えばスピーカーであり、患者側端末２０から伝送された患者の映像データに含まれる音声を再生する。
　取得部２は、音声入力装置１６により収集された、医者が発した音声データをさらに取得してもよい。特定部３は、対象者関連情報及び医者が発した音声データの少なくともいずれか１つに基づいて、変更領域を特定することができる。また、対象者の映像データに含まれる音声情報と医者が発した音声データとが取得された場合、特定部３は、医者が発した音声データを優先して、該音声データに基づいて、変更領域を特定してもよい。
　例えば、患者が「手が痛い」と発言した後に、医師が患者の映像を確認して「右手の人差し指の第１関節が痛いのですね」と発言した場合、特定部３は、医師の音声データに基づき、「右手の人差し指の第１関節」を変更領域として特定することができる。これにより、医師が診断に必要な領域を正確に高画質に変換することが可能となる。
　また、特定部３は、変更領域の複数の候補を出力する出力手段の機能を果たし得る。例えば、特定部３は、カルテ情報を用いて特定した第１変更領域と、問診情報を用いて特定した第１変更領域と異なる第２変更領域とを、変更領域の候補として出力することができる。情報表示領域１１２には、これらの候補が表示され得る。
　医師は、入力装置１４を用いて、複数の変更領域の候補から、少なくとも１つの候補を選択することができる。すなわち、入力装置１４は、候補の選択を受け付ける受付手段の機能を果たす。制御部４は、選択された候補に対応する領域の画質を変更させる画質変更指示を出力する。これにより、医者自身が、自動的に提示された複数の変更領域の候補から、視診が必要であると考える候補を適宜選択することが可能となる。
　なお、複数の変更領域の候補は、患者が受診している診療科に応じて絞り込まれてもよい。すなわち、診療科毎に所定の候補が設定されており、この所定の候補に含まれない変更領域の候補を除外することができる。例えば、診療科が「眼科」である場合、眼科の候補には、患者の身体部位の「手の指先」は含まれないものとする。患者が眼科をオンラインで受診しているときに、「手の指先」が変更領域の候補として特定された場合、眼科の候補に含まれない「手の指先」を示す変更領域の候補を除外することができる。
　また、情報表示領域１１２に複数の変更領域の候補が表示される場合、優先順位を設けて表示してもよい。例えば、カルテ情報に基づいて、症状の酷い変更領域の候補を最優先として表示することができる。この場合に、該変更領域の候補がなぜ最優先であるかが医師にわかるように、カルテの内容と当該変更領域の候補（患者の異常部位）とを紐づけて、情報表示領域１１２に表示してもよい。
　次に、患者側端末２０について説明する。図４に示すように、患者側端末２０は、演算装置５、表示装置２１、撮影装置２２、記憶装置２３、入力装置２４、通信装置２５、音声入力装置２６、音声出力装置２７を含み、これらはバス２８により相互に接続されている。
　なお、表示装置２１、撮影装置２２、記憶装置２３、入力装置２４、通信装置２５、音声入力装置２６、音声出力装置２７は、それぞれ表示装置１１、撮影装置１２、記憶装置１３、入力装置１４、通信装置１５、音声入力装置１６、音声出力装置１７と一般的な機能は同一であるため、適宜説明を省略する。
　演算装置５は、例えばＣＰＵやＧＰＵ等の演算処理装置である。演算装置５は、論理的な機能ブロックとしての画質変更処理部６を備える。画質変更処理部６は、医師側端末１０からの画質変更指示に従って、患者を含む映像データの画質を変更する。
　例えば、患者を含む映像データを送信する際に圧縮符号化を行うコーデック部を有している場合、画質変更処理部６は、コーデック部における映像データの圧縮率を変更する。医師側端末１０から画質変更指示を受けた場合、変更領域の圧縮率を変更領域以外の領域の圧縮率よりも下げることで、変更領域が変更領域以外の領域よりも高画質である映像データを生成する。これにより、変更領域を高画質にしつつ、伝送される映像データ全体のデータサイズを小さくすることができる。
　なお、コーデック部では、変更領域の圧縮率である低圧縮率（高解像度の画質）と変更領域以外の圧縮率である高圧縮率（低解像度の画質）の２段階の圧縮率が設定されていてもよい。また、圧縮率の設定は、例えば、変更領域、患者が含まれる領域、背景領域等、３段階以上であってもよい。
　表示装置２１は、ＬＣＤ等であり、各種情報を表示する。図６は、患者側端末の表示内容の一例を説明する図である。表示装置２１は、映像表示領域２１１、情報表示領域２１２、入力情報表示領域２１３を有する。映像表示領域２１１には、医師側端末１０から伝送される医者を含む映像が表示される。
　情報表示領域２１２には、患者への通知情報が表示される。例えば、対象者関連情報に基づいて、患者の映像に基づいて酸素飽和度の測定を行う必要がある場合、情報表示領域２１２に酸素飽和度の測定を行うことを患者に通知する表示を行うことができる。患者は、この通知から何を測定しているかがわかり、測定に必要な自身の身体部位をなるべく動かさないようにすることができる。
　入力情報表示領域２１３には、人体を模した図が表示される。入力情報表示領域１１３と同様に、上述した人体モデル入力装置で指定位置情報が生成されると、人体を模した図における指定位置情報に応じた部位にマークやアイコン等が表示される。すなわち、入力情報表示領域２１３には、医者が人体モデル入力装置を押圧した、患者の視診したい部位が明確となるように表示される。患者は、この表示から、医者に視診されている自身の身体部位がわかり、当該部位を動かさないようにすることができる。
　このように、情報表示領域２１２、入力情報表示領域２１３は、画質を変更する変更領域（医師が視診する患者の身体部位）を患者に通知する通知手段の機能を果たす。なお、通知手段の一例として、表示装置２１に各種表示を行う例を示したが、これに限定されない。例えば、音声により患者に変更領域を通知することも可能である。
　撮影装置２２は、例えばビデオカメラであり、患者側端末２０を使用する患者を撮影することができる。撮影装置２２は、所定の撮影範囲（撮影画角）を所定の撮影レートで患者を撮影して、時系列の複数の画像データによって構成される動画データを生成する。
　記憶装置２３は、例えばＨＤＤ、ＳＳＤ、又はフラッシュメモリ等の不揮発性記憶装置である。記憶装置２３は、演算装置５が備える画質変更処理部６の機能を実現するプログラムを記憶している。演算装置５がこのプログラムを実行することで、画質変更処理部６の機能が実現される。また、記憶装置１３と同様に、記憶装置２３は、ＲＡＭやＲＯＭ等のメモリを含んでいてもよい。記憶装置１３は、画質変更処理部６が映像データの画質を変更する処理を行うために必要なデータ等を記憶する役割も果たす。
　入力装置２４は、患者側端末２０の使用者である患者の操作入力を受け付ける装置であり、例えば、キーボード、マウス等である。表示装置２１と入力装置２４とが一体化され、タッチパネルとして実現されてもよい。
　通信装置２５は、例えば無線伝送路を介して外部の医師側端末１０との間でデータを送受信する。例えば、医者を含む映像データ、患者を含む映像データは通信装置２５を介して伝送される。また、画質変更指示を受けた場合は、通信装置２５は、患者を含む映像データのうち変更領域の画質が変更領域以外の画質よりも高い映像データを医師側端末１０へ伝送する。
　音声入力装置２６は、例えばマイクであり、患者が発した音声を収集する。撮影装置２２により生成された動画データと音声入力装置２６により収集された音声情報を合成することで、映像データが生成される。すなわち、この映像データには、患者の動作情報と音声情報とが含まれる。音声出力装置２７は、例えばスピーカーであり、医師側端末１０から伝送された医者の映像データに含まれる音声を再生する。
　ここで、図７を参照して、実施形態に係る情報処理方法について説明する。図７は、実施形態に係る情報処理の流れの一例を説明するシーケンス図である。まず、患者側端末２０は、医師側端末１０に患者を含む映像データを送信する（Ｓ１０）。医師側端末１０の取得部２は、患者を含む映像データと当該患者の対象者関連情報とを取得する（Ｓ１１）。そして、特定部３は、対象者関連情報に基づいて、映像データにおける画質を変更する変更領域を特定する（Ｓ１２）。
　そして、制御部４は、特定された変更領域の画質を変更させる画質変更指示を生成し、通信装置１５を介して患者側端末２０に出力する（Ｓ１３）。具体的には、制御部４は、変更領域の画質を、変更領域以外の他の領域の画質よりも高画質とする画質変更指示を出力する。例えば、制御部４は、患者側端末２０の撮影装置２２により生成された映像データを医師側端末１０に送信する際に、変更領域の圧縮率を変更領域以外の領域の圧縮率よりも下げて、変更領域を高画質に変更させる画質変更指示を生成することができる。
　患者側端末２０の画質変更処理部６は、画質変更指示に基づいて、患者を含む映像データのうち、特定された変更領域の画質を変更する（Ｓ１５）。より詳細には、画質変更処理部６は、患者を含む映像データのうち、変更領域の画質が変更領域以外の画質よりも高い画像データを生成する。画質変更処理部６は、撮影装置２２により生成された映像データを医師側端末１０に送信する際に、変更領域の圧縮率を変更領域以外の領域の圧縮率よりも下げて、変更領域を高画質とする。
　生成された画像データは、通信装置２５を介して医師側端末１０へ送信される（ステップＳ１６）。医師側端末１０の表示装置１１は、変更領域の画質が変更領域以外の画質よりも高い画像を表示する（ステップＳ１７）。これにより、変更領域、すなわち、医師が診断を行うために必要な領域の映像を自動的に明瞭とすることができる。
　以上説明したように、実施の形態によれば、カルテに記載された過去の診療情報や、受診時に患者が記入した問診票の情報、患者を含む映像データに含まれる情報等、診察に必要となる情報である対象者関連情報から、視診すべき領域を特定し、当該領域を自動で高画質にすることが可能となる。これにより、医師が視診したい領域の映像を明瞭に表示することができ、医療サービスへの向上を図ることが可能となる。
　また、全ての映像データを圧縮せずに伝送する場合や全ての映像データを一定の圧縮率で圧縮して伝送する場合と比較して、ネットワークＮのトラヒックの増大を防止しながら、視診すべき領域を良好な画質で確認することが可能となる。
　なお、図３に示す例では、情報処理システム１００が情報処理装置１を含む例を示したが、この構成に限定されるものではない。例えば、情報処理装置１は、データセンター等に設置されたサーバとして実現することも可能である。患者側端末２０からの患者を含む画像データは、該サーバに送信され、サーバが上述した画質変更指示を生成する処理を実行する。また、サーバからの画質変更指示は、患者側端末２０に送信され、患者側端末２０で変更領域の画質を他の領域よりも高画質とした映像データを、医師側端末１０に送信することができる。
　なお、図面に記載された様々な処理を行う各機能ブロックは、ハードウェア的には、プロセッサ、メモリ、その他の回路で構成することができる。また、上述した処理を、プロセッサにプログラムを実行させることにより実現することも可能である。従って、これらの機能ブロックは、ハードウェアのみ、ソフトウェアのみ、又はそれらの組合せによっていろいろな形で実現でき、いずれかに限定されるものではない。
　上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
　以上、実施の形態を参照して本開示を説明したが、本開示は上述した実施の形態に限定されるものではない。本開示の構成や詳細には、本開示のスコープ内で当業者が理解し得る様々な変更をすることができる。
　また、上述した実施の形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
　（付記１）
　医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得する取得手段と、
　前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定する特定手段と、
　特定された前記変更領域の画質を変更する画質変更手段と、
　を備える、
　情報処理システム。
　（付記２）
　前記対象者関連情報に基づいて、前記変更領域の複数の候補を出力する出力手段と、
　複数の前記候補から、少なくとも１つの候補の選択を受け付ける受付手段と、
　を備え、
　前記画質変更手段は、選択された候補に対応する領域の画質を変更する、
　付記１に記載の情報処理システム。
　（付記３）
　前記対象者関連情報は、前記対象者のカルテ情報、前記対象者の問診情報、前記映像データに含まれる前記対象者の音声情報及び前記映像データに含まれる前記対象者の動作情報の少なくとも一つである、
　付記１又は２に記載の情報処理システム。
　（付記４）
　前記取得手段は、医療サービスを提供する提供者の音声データをさらに取得し、
　前記特定手段は、前記対象者関連情報及び前記音声データの少なくともいずれか１つに基づいて、前記変更領域を特定する、
　付記３に記載の情報処理システム。
　（付記５）
　前記特定手段は、前記対象者の前記音声情報と前記提供者の前記音声データとが取得された場合、前記提供者の前記音声データを優先して、該音声データに基づいて、前記映像データにおける画質を変更する領域を特定する、
　付記４に記載の情報処理システム。
　（付記６）
　前記特定手段は、前記対象者の前記音声情報と前記動作情報とが取得された場合、前記音声情報と前記動作情報の両方に基づいて、前記変更領域を特定する、
　付記３に記載の情報処理システム。
　（付記７）
　人体を模した入力手段をさらに備え、
　前記対象者関連情報は、前記入力手段から入力される前記人体における指定位置情報を含む、
　付記３に記載の情報処理システム。
　（付記８）
　双方向通信を行う第１端末と、第２端末とをさらに備え、
　前記第１端末は、前記対象者を撮影し、前記映像データを生成する撮影手段を備え、
　前記第２端末は、前記第１端末により生成された前記映像データのうち前記変更領域の画質が変更された映像を表示する表示手段を備える、
　付記１～７のいずれか１項に記載の情報処理システム。
　（付記９）
　前記画質変更手段は、前記撮影手段により生成された前記映像データの圧縮率を制御して、前記変更領域の画質を変更する、
　付記８に記載の情報処理システム。
　（付記１０）
　前記第１端末は、前記特定手段により特定された前記変更領域を、前記対象者に通知する通知手段をさらに備える、
　付記８に記載の情報処理システム。
　（付記１１）
　医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得する取得手段と、
　前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定する特定手段と、
　特定された前記変更領域の画質を変更させる画質変更指示を出力する制御手段と、
　を備える、
　情報処理装置。
　（付記１２）
　前記対象者関連情報に基づいて、前記変更領域の複数の候補を出力する出力手段と、
　複数の前記候補から、少なくとも１つの候補の選択を受け付ける受付手段と、
　を備え、
　前記制御手段は、選択された候補に対応する領域の画質を変更させる前記画質変更指示を出力する、
　付記１１に記載の情報処理装置。
　（付記１３）
　前記対象者関連情報は、前記対象者のカルテ情報、前記対象者の問診情報、前記映像データに含まれる前記対象者の音声情報及び前記映像データに含まれる前記対象者の動作情報の少なくとも一つである、
　付記１１又は１２に記載の情報処理装置。
　（付記１４）
　前記取得手段は、医療サービスを提供する提供者の音声データをさらに取得し、
　前記特定手段は、前記対象者関連情報及び前記音声データの少なくともいずれか１つに基づいて、前記変更領域を特定する、
　付記１３に記載の情報処理装置。
　（付記１５）
　前記特定手段は、前記対象者の前記音声情報と前記提供者の前記音声データとが取得された場合、前記提供者の前記音声データを優先して、該音声データに基づいて、前記映像データにおける画質を変更する領域を特定する、
　付記１４に記載の情報処理装置。
　（付記１６）
　前記特定手段は、前記対象者の前記音声情報と前記動作情報とが取得された場合、前記音声情報と前記動作情報の両方に基づいて、前記変更領域を特定する、
　付記１３に記載の情報処理装置。
　（付記１７）
　人体を模した入力手段をさらに備え、
　前記対象者関連情報は、前記入力手段から入力される前記人体における指定位置情報を含む、
　付記１３に記載の情報処理装置。
　（付記１８）
　前記取得手段は、外部の撮影手段によって前記対象者を撮影して生成された前記映像データを、ネットワークを介して取得し、
　前記撮影手段により生成された前記映像データのうち、前記制御手段による前記画質変更指示に従って、前記変更領域の画質が変更された映像を表示する表示手段をさらに備える、
　付記１１～１７のいずれか１項に記載の情報処理装置。
　（付記１９）
　前記制御手段は、前記撮影手段により生成された前記映像データの圧縮率を制御して、前記変更領域の画質を変更させる前記画質変更指示を生成する、
　付記１８に記載の情報処理装置。
　（付記２０）
　前記制御手段は、前記特定手段により特定された前記変更領域を、前記対象者に通知させる通知指示をさらに出力する、
　付記１８に記載の情報処理装置。
　（付記２１）
　医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得し、
　前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定し、
　特定された前記変更領域の画質を変更する、
　情報処理方法。
　（付記２２）
　医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得する処理と、
　前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定する処理と、
　特定された前記変更領域の画質を変更する処理と、
　をコンピュータに実行させるプログラムが格納された非一時的なコンピュータ可読媒体。
　１　情報処理装置
　２　取得部
　３　特定部
　４　制御部
　５　演算装置
　６　画質変更処理部
　１０　医師側端末
　１１　表示装置
　１２　撮影装置
　１３　記憶装置
　１４　入力装置
　１５　通信装置
　１６　音声入力装置
　１７　音声出力装置
　１８　バス
　２０　患者側端末
　２１　表示装置
　２２　撮影装置
　２３　記憶装置
　２４　入力装置
　２５　通信装置
　２６　音声入力装置
　２７　音声出力装置
　２８　バス
　１００　情報処理システム
　１０１　取得手段
　１０２　特定手段
　１０３　画質変更手段
　１１１　映像表示領域
　１１２　情報表示領域
　１１３　入力情報表示領域
　２１１　映像表示領域
　２１２　情報表示領域
　２１３　入力情報表示領域
　Ｎ　ネットワーク

Claims (22)

  1. 　医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得する取得手段と、
    　前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定する特定手段と、
    　特定された前記変更領域の画質を変更する画質変更手段と、
    　を備える、
    　情報処理システム。
  2. 　前記対象者関連情報に基づいて、前記変更領域の複数の候補を出力する出力手段と、
    　複数の前記候補から、少なくとも１つの候補の選択を受け付ける受付手段と、
    　を備え、
    　前記画質変更手段は、選択された候補に対応する領域の画質を変更する、
    　請求項１に記載の情報処理システム。
  3. 　前記対象者関連情報は、前記対象者のカルテ情報、前記対象者の問診情報、前記映像データに含まれる前記対象者の音声情報及び前記映像データに含まれる前記対象者の動作情報の少なくとも一つである、
    　請求項１又は２に記載の情報処理システム。
  4. 　前記取得手段は、医療サービスを提供する提供者の音声データをさらに取得し、
    　前記特定手段は、前記対象者関連情報及び前記音声データの少なくともいずれか１つに基づいて、前記変更領域を特定する、
    　請求項３に記載の情報処理システム。
  5. 　前記特定手段は、前記対象者の前記音声情報と前記提供者の前記音声データとが取得された場合、前記提供者の前記音声データを優先して、該音声データに基づいて、前記映像データにおける画質を変更する領域を特定する、
    　請求項４に記載の情報処理システム。
  6. 　前記特定手段は、前記対象者の前記音声情報と前記動作情報とが取得された場合、前記音声情報と前記動作情報の両方に基づいて、前記変更領域を特定する、
    　請求項３に記載の情報処理システム。
  7. 　人体を模した入力手段をさらに備え、
    　前記対象者関連情報は、前記入力手段から入力される前記人体における指定位置情報を含む、
    　請求項１～６のいずれか１項に記載の情報処理システム。
  8. 　双方向通信を行う第１端末と、第２端末とをさらに備え、
    　前記第１端末は、前記対象者を撮影し、前記映像データを生成する撮影手段を備え、
    　前記第２端末は、前記第１端末により生成された前記映像データのうち前記変更領域の画質が変更された映像を表示する表示手段を備える、
    　請求項１～７のいずれか１項に記載の情報処理システム。
  9. 　前記画質変更手段は、前記撮影手段により生成された前記映像データの圧縮率を制御して、前記変更領域の画質を変更する、
    　請求項８に記載の情報処理システム。
  10. 　前記第１端末は、前記特定手段により特定された前記変更領域を、前記対象者に通知する通知手段をさらに備える、
    　請求項８に記載の情報処理システム。
  11. 　医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得する取得手段と、
    　前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定する特定手段と、
    　特定された前記変更領域の画質を変更させる画質変更指示を出力する制御手段と、
    　を備える、
    　情報処理装置。
  12. 　前記対象者関連情報に基づいて、前記変更領域の複数の候補を出力する出力手段と、
    　複数の前記候補から、少なくとも１つの候補の選択を受け付ける受付手段と、
    　を備え、
    　前記制御手段は、選択された候補に対応する領域の画質を変更させる前記画質変更指示を出力する、
    　請求項１１に記載の情報処理装置。
  13. 　前記対象者関連情報は、前記対象者のカルテ情報、前記対象者の問診情報、前記映像データに含まれる前記対象者の音声情報及び前記映像データに含まれる前記対象者の動作情報の少なくとも一つである、
    　請求項１１又は１２に記載の情報処理装置。
  14. 　前記取得手段は、医療サービスを提供する提供者の音声データをさらに取得し、
    　前記特定手段は、前記対象者関連情報及び前記音声データの少なくともいずれか１つに基づいて、前記変更領域を特定する、
    　請求項１３に記載の情報処理装置。
  15. 　前記特定手段は、前記対象者の前記音声情報と前記提供者の前記音声データとが取得された場合、前記提供者の前記音声データを優先して、該音声データに基づいて、前記映像データにおける画質を変更する領域を特定する、
    　請求項１４に記載の情報処理装置。
  16. 　前記特定手段は、前記対象者の前記音声情報と前記動作情報とが取得された場合、前記音声情報と前記動作情報の両方に基づいて、前記変更領域を特定する、
    　請求項１３に記載の情報処理装置。
  17. 　人体を模した入力手段をさらに備え、
    　前記対象者関連情報は、前記入力手段から入力される前記人体における指定位置情報を含む、
    　請求項１１～１６のいずれか１項に記載の情報処理装置。
  18. 　前記取得手段は、外部の撮影手段によって前記対象者を撮影して生成された前記映像データを、ネットワークを介して取得し、
    　前記撮影手段により生成された前記映像データのうち、前記制御手段による前記画質変更指示に従って、前記変更領域の画質が変更された映像を表示する表示手段をさらに備える、
    　請求項１１～１７のいずれか１項に記載の情報処理装置。
  19. 　前記制御手段は、前記撮影手段により生成された前記映像データの圧縮率を制御して、前記変更領域の画質を変更させる前記画質変更指示を生成する、
    　請求項１８に記載の情報処理装置。
  20. 　前記制御手段は、前記特定手段により特定された前記変更領域を、前記対象者に通知させる通知指示をさらに出力する、
    　請求項１８に記載の情報処理装置。
  21. 　医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得し、
    　前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定し、
    　特定された前記変更領域の画質を変更する、
    　情報処理方法。
  22. 　医療サービスを受ける対象者を含む映像データと、該映像データに含まれる前記対象者に関する対象者関連情報を取得する処理と、
    　前記対象者関連情報に基づいて、前記映像データにおける画質を変更する変更領域を特定する処理と、
    　特定された前記変更領域の画質を変更する処理と、
    　をコンピュータに実行させるプログラムが格納された非一時的なコンピュータ可読媒体。
PCT/JP2021/035823 2021-09-29 2021-09-29 情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体 WO2023053257A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US18/275,144 US20240177828A1 (en) 2021-09-29 2021-09-29 Information processing system, information processing device, information processing method, and non-transitory computer-readable medium storing program
PCT/JP2021/035823 WO2023053257A1 (ja) 2021-09-29 2021-09-29 情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体
JP2023550836A JP7485233B2 (ja) 2021-09-29 2021-09-29 情報処理システム、情報処理装置、情報処理方法、プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2021/035823 WO2023053257A1 (ja) 2021-09-29 2021-09-29 情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体

Publications (1)

Publication Number Publication Date
WO2023053257A1 true WO2023053257A1 (ja) 2023-04-06

Family

ID=85781561

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/035823 WO2023053257A1 (ja) 2021-09-29 2021-09-29 情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体

Country Status (3)

Country Link
US (1) US20240177828A1 (ja)
JP (1) JP7485233B2 (ja)
WO (1) WO2023053257A1 (ja)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0975404A (ja) * 1995-09-19 1997-03-25 Toshiba Corp 遠隔医療システム
JP2006042962A (ja) * 2004-08-02 2006-02-16 Matsushita Electric Ind Co Ltd 携帯端末装置、当該携帯端末装置を用いた対話式診察システム及び診察用データ通信方法
JP2010187711A (ja) * 2009-02-13 2010-09-02 Canon Inc カメラ制御装置、カメラ制御システムおよびカメラ制御方法
JP2014130519A (ja) * 2012-12-28 2014-07-10 Toshiba Corp 医用情報処理システム、医用情報処理装置及び医用画像診断装置
JP2014144215A (ja) * 2013-01-30 2014-08-14 Canon Inc 撮影装置、その制御方法及びプログラム
JP2016091298A (ja) * 2014-11-05 2016-05-23 凸版印刷株式会社 問診票作成システム、携帯情報端末、問診票作成方法、問診票作成プログラム、及び、問診票管理サーバ
JP2017207809A (ja) * 2016-05-16 2017-11-24 オリンパス株式会社 音声記録装置、情報通信システム、音声記録制御方法、およびプログラム
JP2020006056A (ja) * 2018-07-12 2020-01-16 コニカミノルタ株式会社 情報収集処理装置、情報収集処理方法及びプログラム
JP2020150512A (ja) * 2019-03-15 2020-09-17 日本電気株式会社 メディア符号化方法および装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5374135B2 (ja) 2008-12-16 2013-12-25 オリンパス株式会社 画像処理装置、画像処理装置の作動方法および画像処理プログラム

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0975404A (ja) * 1995-09-19 1997-03-25 Toshiba Corp 遠隔医療システム
JP2006042962A (ja) * 2004-08-02 2006-02-16 Matsushita Electric Ind Co Ltd 携帯端末装置、当該携帯端末装置を用いた対話式診察システム及び診察用データ通信方法
JP2010187711A (ja) * 2009-02-13 2010-09-02 Canon Inc カメラ制御装置、カメラ制御システムおよびカメラ制御方法
JP2014130519A (ja) * 2012-12-28 2014-07-10 Toshiba Corp 医用情報処理システム、医用情報処理装置及び医用画像診断装置
JP2014144215A (ja) * 2013-01-30 2014-08-14 Canon Inc 撮影装置、その制御方法及びプログラム
JP2016091298A (ja) * 2014-11-05 2016-05-23 凸版印刷株式会社 問診票作成システム、携帯情報端末、問診票作成方法、問診票作成プログラム、及び、問診票管理サーバ
JP2017207809A (ja) * 2016-05-16 2017-11-24 オリンパス株式会社 音声記録装置、情報通信システム、音声記録制御方法、およびプログラム
JP2020006056A (ja) * 2018-07-12 2020-01-16 コニカミノルタ株式会社 情報収集処理装置、情報収集処理方法及びプログラム
JP2020150512A (ja) * 2019-03-15 2020-09-17 日本電気株式会社 メディア符号化方法および装置

Also Published As

Publication number Publication date
US20240177828A1 (en) 2024-05-30
JP7485233B2 (ja) 2024-05-16
JPWO2023053257A1 (ja) 2023-04-06

Similar Documents

Publication Publication Date Title
Narasimha et al. Designing telemedicine systems for geriatric patients: a review of the usability studies
Roter et al. Physician gender effects in medical communication: a meta-analytic review
Eisenberg Ten lessons for evidence-based technology assessment
US20180233237A1 (en) Apparatus and method for processing and/or providing healthcare information and/or healthcare-related information with or using an electronic healthcare record and information regarding and/or obtained with or from electronic interactive activity, information, content, or media
Schlachta-Fairchild et al. Patient safety, telenursing, and telehealth
Hewing et al. Plus disease in retinopathy of prematurity: qualitative analysis of diagnostic process by experts
US9596991B2 (en) Self-examination apparatus and method for self-examination
US20180211730A1 (en) Health information (data) medical collection, processing and feedback continuum systems and methods
JP2020199072A (ja) 脳卒中判定装置、方法およびプログラム
WO2018106481A1 (en) Computer-implemented methods, systems, and computer-readable media for diagnosing a condition
US20140236627A1 (en) Dynamic medical scheduling system and method of operation thereof
US11200967B1 (en) Medical patient synergistic treatment application
KR20150031173A (ko) 원격의료지원 시스템 및 그의 제어방법
Bass et al. Assessment of racial disparities in the risks of septic and aseptic revision total knee replacements
Iqbal et al. Characterising consumer engagement in virtual models of care: A systematic review and narrative synthesis
Carpenter et al. A symposium on the clinic of the future and telehealth: Highlights and future directions
Riquelme Clinical swallow examination (CSE): Can we talk?
WO2023053257A1 (ja) 情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体
Kelly et al. Association of vibrotactile biofeedback with reduced ergonomic risk for surgeons during tonsillectomy
JP6769417B2 (ja) サーバ、医師装置、指導者装置、コンピュータプログラム及び遠隔診療支援方法
JP2023103774A (ja) 医用情報処理装置、医用情報処理方法及び医用情報処理プログラム
WO2023053267A1 (ja) 情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体
WO2023053260A1 (ja) 情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体
JP7550901B2 (ja) 臨床支援システム、及び臨床支援装置
US20240290441A1 (en) Clinical support system and clinical support apparatus

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21959304

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2023550836

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 18275144

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21959304

Country of ref document: EP

Kind code of ref document: A1