WO2023182183A1 - 情報処理装置及び情報処理方法 - Google Patents
情報処理装置及び情報処理方法 Download PDFInfo
- Publication number
- WO2023182183A1 WO2023182183A1 PCT/JP2023/010453 JP2023010453W WO2023182183A1 WO 2023182183 A1 WO2023182183 A1 WO 2023182183A1 JP 2023010453 W JP2023010453 W JP 2023010453W WO 2023182183 A1 WO2023182183 A1 WO 2023182183A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- user
- information
- abstraction
- information processing
- level
- Prior art date
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 453
- 238000003672 processing method Methods 0.000 title claims description 6
- 238000000034 method Methods 0.000 claims description 63
- 230000008569 process Effects 0.000 claims description 35
- 230000004043 responsiveness Effects 0.000 claims description 25
- 230000004044 response Effects 0.000 claims description 21
- 238000012544 monitoring process Methods 0.000 abstract description 15
- 238000012545 processing Methods 0.000 description 142
- 230000006870 function Effects 0.000 description 37
- 238000004891 communication Methods 0.000 description 36
- 238000010586 diagram Methods 0.000 description 26
- 230000008859 change Effects 0.000 description 24
- 101000874141 Homo sapiens Probable ATP-dependent RNA helicase DDX43 Proteins 0.000 description 18
- 102100035724 Probable ATP-dependent RNA helicase DDX43 Human genes 0.000 description 18
- 230000000694 effects Effects 0.000 description 17
- 230000033001 locomotion Effects 0.000 description 12
- 238000013500 data storage Methods 0.000 description 10
- 238000001914 filtration Methods 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 6
- 230000007423 decrease Effects 0.000 description 6
- 238000013507 mapping Methods 0.000 description 6
- 230000006399 behavior Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 230000008450 motivation Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000000474 nursing effect Effects 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000002238 attenuated effect Effects 0.000 description 2
- 230000001149 cognitive effect Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000000873 masking effect Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 241000257303 Hymenoptera Species 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000003287 bathing Methods 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000001055 chewing effect Effects 0.000 description 1
- 235000009508 confectionery Nutrition 0.000 description 1
- 230000005674 electromagnetic induction Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 210000004247 hand Anatomy 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 239000002304 perfume Substances 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 230000002829 reductive effect Effects 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 235000021259 spicy food Nutrition 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000009747 swallowing Effects 0.000 description 1
- 210000004243 sweat Anatomy 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/565—Conversion or adaptation of application format or content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M11/00—Telephonic communication systems specially adapted for combination with other electrical systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
Definitions
- the present disclosure relates to an information processing device and an information processing method.
- Patent Document 1 Technologies related to providing services using information are known. For example, a technique is known that facilitates the addition of newly appearing input/output resources (for example, Patent Document 1).
- the present disclosure proposes an information processing device and an information processing method that can appropriately determine the abstraction level of information.
- an information processing device includes first user information regarding a first user who is a user who is being watched over, and first user information about a first user who is a user who is watching over the first user.
- an acquisition unit that acquires second user information regarding two users, and a degree of abstraction of presentation information that is information indicating the state of the first user, based on the first user information and the second user information.
- FIG. 2 is a diagram illustrating an example of information processing according to an embodiment of the present disclosure.
- FIG. 2 is a diagram illustrating an example of abstraction level determination processing in an information processing system.
- FIG. 3 is a diagram illustrating an example of information regarding a function used to determine the level of abstraction.
- FIG. 2 is a diagram illustrating an example of information presentation processing in the information processing system.
- 1 is a diagram illustrating a configuration example of an information processing system according to an embodiment of the present disclosure.
- FIG. 1 is a diagram illustrating a configuration example of an information processing device according to an embodiment of the present disclosure.
- FIG. 1 is a diagram illustrating a configuration example of a terminal device according to an embodiment of the present disclosure.
- FIG. 3 is a flowchart illustrating a processing procedure of an information processing device according to an embodiment of the present disclosure. It is a flowchart which shows the processing procedure regarding the update of presentation content.
- FIG. 2 is a diagram illustrating an example of abstraction level determination processing in an information processing system.
- FIG. 3 is a diagram illustrating an example of information regarding a function used to determine the level of abstraction. It is a figure which shows an example of the presentation aspect of a sensing object and information.
- FIG. 1 is a diagram illustrating an example of components of an information processing system. It is a figure which shows an example of presentation of information. It is a figure which shows an example of presentation of information.
- FIG. 1 is a hardware configuration diagram showing an example of a computer that implements the functions of an information processing device.
- Embodiment 1-1 Overview of information processing according to embodiment of the present disclosure
- 1-1-1 Example of information processing flow 1-1-2.
- Example of abstraction level determination process 1-1-3 Example of information presentation 1-1-3-1.
- Protectiveness/attention/responsiveness 1-1-4 Background and effects, etc.
- 1-2 Configuration of information processing system according to embodiment 1-3.
- Configuration of information processing device according to embodiment 1-4 Configuration of terminal device according to embodiment 1-5.
- Procedures for updating presentation content 1-6 Examples related to information processing systems 1-6-1.
- Processing example 1-6-1-1 Processing example 1-6-1-1. Multiple levels of abstraction 1-6-1-2.
- Sensing and data processing example 1-6-1-4 Sensing and information presentation mode 1-6-1-5. Presentation equipment and presentation content examples 1-6-2. System configuration example 1-6-3. Example of information presentation 2. Other embodiments 2-1. Other configuration examples 2-2. Others 3. Effects related to the present disclosure 4. Hardware configuration
- Embodiment [1-1. Overview of information processing according to embodiment of the present disclosure] Information processing according to the embodiment of the present disclosure is realized by the information processing system 1 (see FIG. 5). The configuration of the information processing system 1 will be described later, but the information processing system 1 has a first user who is the user who is being watched over (also referred to as the "user who is being watched over"), and a second user (who is the user who is watching) who is the user who is watching over the user. (also referred to as "the user on the monitoring side”) executes processing related to monitoring.
- an elderly person living in a nursing care facility (elderly facility) or the like will be referred to as a first user (user being watched over), and a family member of the elderly person will be referred to as a second user (user being watched over).
- the first user and the second user are merely examples, and the relationship between the first user and the second user is not limited to users with a family relationship.
- the first user and the second user can be any type of user if there is a relationship between the side that provides information to the watching side (the watched side) and the side that receives the information presented by the watched side (the watching side). It may be.
- FIG. 1 is a diagram illustrating an example of information processing according to an embodiment of the present disclosure. Below, a case will be described as an example in which the information processing apparatus 100 determines the abstraction level when presenting information regarding the user U1, who is the first user, as presentation information.
- the presentation information is information based on sensing (detection) of the first user (user being watched) by the sensor device 20a (see FIG. 5).
- the presentation information is information based on a video (also referred to as an "image") of the first user.
- the presentation information may be an image based on a captured image of the user U1, who is an elderly person.
- the presentation information may be any information as long as it presents the state of the first user.
- the presentation information may be information based on audio information that detects sounds surrounding the first user, such as audio information that detects sounds surrounding the elderly person (activity sounds of the elderly, conversations with caregivers, etc.). There may be.
- Information processing is realized by an information processing system 1 including an information processing device 100, a plurality of sensor devices 20, and a plurality of terminal devices 10.
- the terminal device 10a is the terminal device 10 used by the user U1 who is the first user
- the terminal device 10b is the terminal device 10 used by the user U2 who is the second user who watches over the user U1. be.
- the information processing apparatus 100 uses the first input information input by the first user as the first user information, the second input information input by the second user as the second user information, and the information processing apparatus 100
- the determined level of abstraction ie, the mask level
- the information processing apparatus 100 determines the abstraction level using the initial value of the abstraction level input by the user U1, who is the first user, and an instruction to increase or decrease the abstraction level as first input information.
- the information processing apparatus 100 determines the level of abstraction using the initial value of the level of abstraction inputted by the second user U2 and an instruction to increase or decrease the level of abstraction as second input information.
- the level of abstraction may be determined individually by the first user and the second user, but details regarding this point will be described later.
- the first user information used for determining the abstraction level is not limited to the first input information input by the first user, but may be information detected (sensed) by the sensor device 20a (first sensing information).
- the second user information is not limited to the second input information input by the second user, but may be information detected (sensed) by the sensor device 20b (see FIG. 5) (second sensing information).
- the information processing device 100 acquires an initial value (also referred to as a "first initial value") of the mask level specified by the user U1 on the side to be watched (step S11).
- the first initial value is the initial value of the mask level set by the side to be watched, and corresponds to "ML initial_elder " shown in FIGS. 2 and 3.
- the user U1 operates the terminal device 10a to input the first initial value to the terminal device 10a, and causes the terminal device 10a to transmit the first initial value. Thereby, the terminal device 10a transmits the first initial value input by the user U1 to the information processing device 100, and the information processing device 100 receives the first initial value from the terminal device 10a.
- the information processing device 100 acquires an initial value (also referred to as a "second initial value") of the mask level specified by the user U2 on the watched side (step S12).
- the second initial value is the initial value of the mask level set by the watching side, and corresponds to "ML initial_younger " shown in FIGS. 2 and 3.
- the user U2 operates the terminal device 10b to input the second initial value into the terminal device 10b, and causes the terminal device 10b to transmit the second initial value.
- the terminal device 10b transmits the second initial value input by the user U2 to the information processing device 100, and the information processing device 100 receives the second initial value from the terminal device 10b.
- steps S11 and S12 are convenient symbols for explaining the processing, and the processing of step S12 may be performed before the processing of step S11.
- the information processing device 100 determines the abstraction level of the presentation information, which is information indicating the state of the first user (step S13).
- the information processing device 100 determines the mask level of the image of the first user based on the first initial value that is the first user information. For example, the information processing device 100 determines the abstraction level (mask level) based on the first initial value specified by the first user, as shown in equation (1) below.
- ML(0) in equation (1) corresponds to the mask level at time 0 (corresponding to the origin (t0) in FIG. 2). Furthermore, ML(1) in equation (1) corresponds to the mask level at time 1 (time after time 0). "ML initial_elder " in equation (1) corresponds to the first initial value of the mask level set by the watched side.
- the information processing device 100 outputs presentation information corresponding to the determined abstraction level (steps S14, S15).
- the information processing device 100 generates presentation information corresponding to the determined mask level, and transmits the generated presentation information to the terminal device 10.
- the information processing device 100 generates content abstracted at the mask level of the first initial value (for example, content CT11 in FIG. 4) as presentation information, and transmits the generated content to the terminal device 10a and the terminal device 10b.
- steps S14 and S15 are convenient symbols for explaining the processing, and either the processing of step S14 or the processing of step S15 may be performed first, or may be performed simultaneously.
- the information processing apparatus 100 obtains the instruction to change the mask level by the user U1 as feedback (also referred to as "first feedback") from the user U1 (step S16).
- the first feedback is feedback from the side being watched (instruction to raise or lower the mask level), and corresponds to "FB(t) elder " shown in FIGS. 2 and 3.
- the user U1 operates the terminal device 10a to input the first feedback to the terminal device 10a, and causes the terminal device 10a to transmit the first feedback. Thereby, the terminal device 10a transmits the first feedback input by the user U1 to the information processing device 100, and the information processing device 100 receives the first feedback from the terminal device 10a.
- the information processing apparatus 100 obtains an instruction from the user U2 to change the mask level as feedback (also referred to as "second feedback") from the user U2 (step S17).
- the second feedback is feedback from the watching side (instruction to raise or lower the mask level), and corresponds to "FB(t) younger " shown in FIGS. 2 and 3.
- the user U2 operates the terminal device 10b to input the second feedback to the terminal device 10b, and causes the terminal device 10b to transmit the second feedback.
- the terminal device 10b transmits the second feedback input by the user U2 to the information processing device 100, and the information processing device 100 receives the second feedback from the terminal device 10b.
- steps S16 and S17 are convenient symbols for explaining the processing, and the processing of step S17 may be performed before the processing of step S16.
- the information processing device 100 determines the abstraction level of the presentation information based on the first user information and the second user information (step S18).
- the information processing device 100 determines the mask level of the image of the first user based on the first feedback that is the first user information and the second feedback that is the second user information. For example, the information processing device 100 determines (updates) the level of abstraction (mask level) based on the first feedback from the first user and the second feedback from the second user, as shown in equation (2) below. )do.
- ML(t+2) in equation (2) corresponds to the mask level at time t+2. Furthermore, "ML initial_elder " in equation (2) corresponds to the first initial value of the mask level set by the side being watched. “ ⁇ (t+1) younger ” in Equation (2) corresponds to a weighting coefficient (also referred to as “second weighting coefficient”) of feedback (second feedback) from the watching side at time t+1. Note that the second weighting coefficient may be a constant value regardless of time. “FB(t+1) younger ” in equation (2) corresponds to feedback from the watching side at time t+1.
- ⁇ (t) elder " in Equation (2) corresponds to a weighting coefficient (also referred to as “first weighting coefficient") of feedback (first feedback) from the side being watched at time t.
- first weighting coefficient may be a constant value regardless of time.
- FB(t) elder " in equation (2) corresponds to feedback from the watched side at time t.
- the information processing device 100 outputs presentation information corresponding to the updated abstraction level.
- the information processing device 100 generates presentation information corresponding to the updated mask level, and transmits the generated presentation information to the terminal device 10.
- the information processing device 100 generates content abstracted at the mask level calculated by equation (2) (for example, content CT13 in FIG. 4) as presentation information, and sends the generated content to the terminal device 10a and the terminal device 10b. Send.
- the information processing device 100 repeats determining (updating) the level of abstraction in step S18 and outputting presentation information based on the determined (updated) level of abstraction.
- the information processing device 100 can appropriately determine the abstraction level of the information by determining the abstraction level of the presentation information based on the first user information and the second user information.
- FIG. 2 is a diagram illustrating an example of abstraction level determination processing in an information processing system.
- FIG. 3 is a diagram illustrating an example of information regarding functions used to determine the level of abstraction. Note that descriptions of points similar to those described in FIG. 1 will be omitted as appropriate. For example, each element shown in FIG. 3 is the same as that explained in equation (1) and equation (2) above, so the explanation will be omitted.
- a graph GR1 in FIG. 2 shows a change over time (time series) in the mask level (level of abstraction) for the information presented by the user U1 determined by the information processing device 100.
- the vertical axis of graph GR1 indicates the mask level of information, that is, the abstraction level. Further, the horizontal axis of graph GR1 indicates time.
- ML initial_elder in the graph GR1 corresponds to the initial value of the mask level set by the watched side.
- ML initial_younger in the graph GR1 corresponds to the initial value of the mask level set by the watching side.
- a line LN1 in the graph GR1 indicates a case where the presented mask level constantly oscillates due to inputs from the watched side and the watching side.
- the information processing device 100 determines a mask level based on the mask level (level of abstraction) desired by the side being watched, and presents information based on the determined mask level.
- a line LN2 in the graph GR1 indicates a case where the presented mask level oscillates attenuated due to inputs from the watched side and the watching side.
- the information processing apparatus 100 determines a mask level so that the mask level (abstract level) converges, and presents information based on the determined mask level.
- the information processing device 100 sets the initial state in accordance with the user's request to extremely mask information.
- the information processing apparatus 100 then adjusts the presentation content based on feedback from the user when the mask is gradually removed.
- the information processing device 100 performs the following processes #1-1 to #1 to #4.
- Processing #1-1 Presenting a high mask level to both users according to the side being watched Processing #1-2. Lowering the mask level based on input from the watching side Process #1-3. Side being watched Increase the mask level based on the input and run the loop of presentation processing #1-4. Processing #1-2 and #1-3 to converge the mask level.
- the information processing device 100 determines the mask level ML(t) to be presented to the user being watched and the user watching at time t using the above-mentioned equation (1) or equation (2). In this way, the information processing device 100 adjusts the mask level presented to the user being watched and the user watching, and presents information at the same mask level to both the user being watched and the user watching.
- the information processing device 100 may multiply, add, subtract, average, etc. by weighting that is set in advance or takes into account mutual relationships, personalities, the degree of symptoms of the person being watched, etc., based on feedback from the person being watched and the person being watched. Vary the mask level using the value.
- the information processing apparatus 100 can autonomously and dynamically adjust the mask level to be presented. In this way, the information processing system 1 can autonomously perform matching regarding the presentation of the watching side and the watched side through personalization and local optimization.
- FIG. 4 is a diagram illustrating an example of information presentation processing in the information processing system.
- the information processing device 100 generates at least one of the contents CT11 to CT13 as presentation information based on the determined abstraction level.
- the information processing device 100 transmits at least one of the generated contents CT11 to CT13 to the terminal device 10 as presentation information.
- the terminal device 10 displays any of the contents CT11 to CT13 received as presentation information. Note that descriptions of points similar to those described above will be omitted as appropriate.
- Contents CT11 to CT13 in FIG. 4 show examples of presentation information. Contents CT11 to CT13 in FIG. 4 show examples of changes in presentation information depending on the level of protection.
- content CT11 shows an example of presentation information presented when the protection level is high.
- an object OB1 imitating a mountain corresponds to the watched user (first user).
- the degree of protection is high, the first user is represented at a high level of abstraction.
- content CT12 shows an example of presentation information presented when the protection level is medium.
- an object OB2 imitating a flower corresponds to the watched user (first user).
- the degree of protection is medium
- the first user is represented with a medium level of abstraction.
- content CT13 shows an example of presentation information presented when the protection level is low.
- an object OB3 imitating a person corresponds to the watched user (first user).
- the first user is represented with a low level of abstraction.
- the object OB3 in the content CT13 may be a virtual character such as an avatar, or may be the image itself of the first user.
- the protection level corresponds to the abstraction level, and the higher the abstraction level (mask level), the higher the protection level.
- the information processing device 100 generates presentation information with higher protection as the determined abstraction level (mask level) is higher. For example, when the determined degree of abstraction is equal to or greater than the first threshold, the information processing device 100 generates the highly protected content CT11 as the presentation information. For example, when the determined abstraction level is less than the first threshold and greater than or equal to the second threshold, the information processing apparatus 100 generates the content CT12 with medium protection as the presentation information.
- the second threshold is a smaller value than the first threshold. For example, when the determined abstraction level is less than the second threshold, the information processing apparatus 100 generates the content CT13 with lower protection as the presentation information.
- protection corresponds to the degree of permissibility of privacy disclosure and corresponds to the degree of abstraction of the entire content presented.
- the information processing device 100 when the degree of protection is high, the information processing device 100 generates an abstract image as the presentation information. Further, the information processing device 100 generates an illustration as the presentation information when the protection level is medium. In addition, when the protection level is low, the information processing device 100 generates an avatar, a live photograph of only the face, etc. as the presentation information.
- the information processing apparatus 100 determines the abstraction level of the first user's presented information according to the protection nature of the first user's presented information determined based on the first user information and the second user information. do.
- the information processing device 100 may use protection for various purposes.
- the degree of protection corresponds to the degree of permissibility of privacy disclosure, and corresponds to the theme to be drawn.
- the information processing device 100 may determine the taste of the illustration or video, the physical transparency, the specificity/visibility in the mask area, etc. based on the protection property.
- the information processing device 100 may generate presentation information according to the degree of attention.
- the information processing device 100 determines the amount of information of the first user's presentation information according to the attentionality of the first user's presentation information determined based on the first user information and the second user information.
- the attention level corresponds to the degree to which the user wants to see and convey information, and corresponds to the type and number of object contents (also simply referred to as "objects") in the presentation information.
- attentionality corresponds to types in illustration, sound, and haptics.
- the information processing device 100 increases the number of objects as the attention level increases.
- Content CT12 in FIG. 4 shows an example of presentation information presented when the degree of attention is high.
- Content CT12 includes a plurality of objects SB1 to SB5 in addition to object OB2 corresponding to the first user. In this manner, in the information processing system 1, when the degree of attention is high, the number of objects other than the object corresponding to the first user is increased.
- Object SB1 in FIG. 4 is object content imitating a bird pecking at a flower.
- Object SB2 in FIG. 4 is object content imitating a watering can.
- Object SB3 in FIG. 4 is object content imitating wind.
- Object SB4 in FIG. 4 is object content imitating a butterfly.
- Object SB5 in FIG. 4 is object content indicating a movement trajectory of a butterfly.
- the information processing device 100 decreases the number of objects as the attention level decreases.
- Content CT13 in FIG. 4 shows an example of presentation information presented when the degree of attention is low.
- Content CT13 includes only object OB3 corresponding to the first user.
- the degree of attention may be determined by the information processing apparatus 100 using the first user information or the second user information, or may be set in advance.
- the information processing apparatus 100 presents the information in the following manner.
- the information processing device 100 may generate presentation information according to responsiveness.
- the information processing device 100 determines the resolution of the first user's presentation information according to the responsiveness of the first user's presentation information determined based on the first user information and the second user information. For example, responsiveness corresponds to the time from the occurrence of an event until the display content is changed.
- the information processing device 100 makes the responsiveness correspond to the temporal and spatial resolution of the effects of the content.
- the information processing device 100 determines the speed, type, etc. of a robot's movement, music, illustration, or shape change of an object based on responsiveness.
- the information processing device 100 increases the frame rate of the content as the responsiveness increases.
- the information processing device 100 lowers the frame rate of the content as the responsiveness decreases.
- the information processing device 100 makes the time from the occurrence of an event to the change of display content correspond to the time for the effect of the object based on the responsiveness. For example, in the case of an illustration with medium protection and high responsiveness, the information processing apparatus 100 may increase the temporal resolution, increase the frame rate of effect change, and change the gradation. Further, if the responsiveness is low, the information processing device 100 may lower the temporal resolution and lower the frame rate of effect change to switch between display and non-display. Note that the responsiveness may be determined by the information processing apparatus 100 using the first user information or the second user information, or may be set in advance.
- the information processing device 100 performs mapping between data and presentation methods. Furthermore, the information processing device 100 also determines the level of protection, attention, and responsiveness based on logs of user operations and reactions. You can start from a very high level and then lower it back down. Further, the information processing apparatus 100 may determine the levels of protection, attention, and responsiveness based on manual pre-settings by the user. Further, the information processing device 100 may adjust the levels of protection, attention, and responsiveness by proposing initial values based on the usage status of other users.
- the information processing device 100 determines that the user's motivation is low, and makes the presented information more vague ( increase the level of abstraction). Further, for example, when the user gazes at the presentation device, speaks, gestures, operates with voice or hands, etc., the information processing device 100 determines that the user is highly motivated, and makes the presentation information more detailed, or may be played in a loop. Furthermore, the information processing system 1 may also be configured to allow users to individually register content created by themselves, such as protective illustrations, attention-grabbing objects, responsive effects, and the like.
- the information processing system 1 may continuously change the content according to changes in the level of abstraction.
- the information processing system 1 may continuously change the contents C11, CT12, and CT13 according to changes in the level of abstraction. For example, when the level of abstraction increases, the information processing system 1 may continuously change the content in the order of content C11, content CT12, and content CT13. For example, when the level of abstraction decreases, the information processing system 1 may continuously change the content in the order of content C13, content CT12, and content CT11.
- the information processing system 1 may zoom a part of the mountain object OB1 when the content CT11 changes continuously to the content CT12. In this case, the information processing system 1 may continuously change the display so that the content CT12 is located at a location where part of the mountain object OB1 is zoomed.
- the information processing system 1 may superimpose the human object OB3 on the flower object OB2. In this case, the information processing system 1 may continuously change the display so that the flower object OB2 changes to the human object OB3.
- the information processing system 1 may organically connect and change the display by enlarging/reducing, superimposing, morphing, etc.
- the information processing system 1 may change the display either continuously or discretely.
- the information processing system 1 measures content matching according to the intentions of the watching side and the watched side, so that the information processing system 1 can convey information that reflects the optimal degree of what each person wants to know and what they want to know. Furthermore, the information processing system 1 can realize an interface that is highly compatible with daily life by simplifying operations and eliminating the reality of presented content.
- the conditions for the watching side include the condition of the watched side, the relationship with the watched side, the cognitive cost of the watching side, etc.
- Conditions for the watched party include the level of privacy protection desired by the watched party, the granularity of the information desired to be conveyed, etc.
- the information processing system 1 dynamically changes the mapping between data and presentation methods based on what the watching side wants to know and what the watched side wants to convey, thereby optimizing the presentation to each user individually.
- the information processing system 1 combines sensors in the facility and scene information such as a schedule, performs dimensional compression through filtering and conversion, and changes the displayed content.
- the information processing system 1 personalizes the nature and amount of presented information based on explicit or implicit input from the user.
- the amount of exercise, the number of times the door is opened and closed, the number of times the home appliance is operated, etc. are detected through sensing by the sensor device 20 installed in the environment. Furthermore, in the information processing system 1, the amount of exercise, vital signs, content of speech, etc. are detected through sensing by the sensor device 20 of the wearable device.
- the information processing system 1 performs data processing.
- the information processing system 1 performs filtering such as downsampling, bandpass filtering, outlier removal, and clustering.
- the information processing system 1 performs conversion such as whether or not there is a change, differences with others, and dimension compression into noteworthy alerts.
- the information processing system 1 performs mapping of data and presentation methods depending on the viewer and the viewed side.
- the information processing system 1 presents presentation information based on protection that indicates the degree of permissibility of privacy disclosure.
- the information processing system 1 adjusts how much information the watched party is allowed to show to the watching party.
- the information processing system 1 presents presentation information based on attention, which indicates the degree to which the user wants to see/communicate.
- the information processing system 1 adjusts what information the watching side and the watching side want to see and convey.
- the information processing system 1 presents presentation information based on responsiveness that indicates the time from the occurrence of an event until the display content is changed.
- the information processing system 1 adjusts how quickly the watching side and the watched side want to know/see information.
- the information processing system 1 enables communication that is optimized for each other's motivations, based on the extent to which the watching side "wants to know", the watched side "wants to tell”, etc.
- the information processing system 1 can provide comfortable and easy-to-use presentation and operation to encourage communication between residents of nursing facilities (those who are being watched over) and their families (those who are being watched over).
- the information processing system 1 matches the sense of level that the person being watched can convey and the sense of level that the watching side wants to convey, and dynamically changes the method of mapping information for ambient expression.
- the information processing system 1 can optimize the motivation of the viewer of the information presented, such as the state of the viewer, the relationship with the viewer, and the cognitive cost of the viewer.
- the information processing system 1 can be optimized to suit the motivation of the viewer, such as the level of privacy protection desired by the viewer and the granularity of information to be conveyed.
- the information processing system 1 constructs a loop of sensing, data processing, and presentation (drawing update).
- the information processing system 1 performs matching and dynamically changes the protection, attention, and responsiveness of the presentation based on inputs from the watched side and the watched side.
- input from the user is performed by estimating the degree based on the user's behavior and by direct operation from the user.
- the presentation to each user in the information processing system 1 may be the same content, different content, or a superimposed presentation of each other's content.
- the equipment autonomously and dynamically changes the mapping between the measured/obtained data and the presented content, and the matching to the degree that the watching party wants to know and the watched party wants to convey is achieved. individualize and locally optimize the presented content.
- the information processing system 1 can realize an interface that is mutually easy to use for the users on the watching side and the users on the watched side.
- the information processing system 1 has inputs necessary for individualizing the matching of protection, attention, and responsiveness of the viewed side and the viewer side in presentation, such as estimation of the degree based on the behavior of each user, and input from the user. by direct manipulation. Thereby, the information processing system 1 can improve the accuracy of the content autonomously and dynamically presented by the device.
- the information processing system 1 has a configuration in which the unit that senses the user and the surrounding environment and the unit that presents information can be recombined for each user and environment. Thereby, the information processing system 1 can widely accommodate the different personalities, thoughts, and physical characteristics of each user.
- FIG. 5 is a diagram illustrating a configuration example of an information processing system according to an embodiment.
- the information processing system 1 includes an information processing device 100, a terminal device 10a, a terminal device 10b, a sensor device 20a, and a sensor device 20b.
- terminal device 10 when describing the terminal device 10a and the terminal device 10b without making any particular distinction, they will be referred to as "terminal device 10." Further, although two terminal devices 10 are illustrated in FIG. 1, there may be three or more terminal devices 10. In addition, when describing the sensor device 20a and the sensor device 20b without particularly distinguishing them, they will be referred to as "sensor device 20.” Moreover, although two sensor devices 20 are illustrated in FIG. 1, there may be three or more sensor devices 20.
- the terminal device 10a and the sensor device 20a correspond to devices used on the monitored side.
- the terminal device 10a is the terminal device 10 used by a first user (user being watched over)
- the sensor device 20a is a sensor device 20 that performs sensing regarding the first user.
- the terminal device 10b and the sensor device 20b correspond to devices used on the monitoring side.
- the terminal device 10b is the terminal device 10 used by the second user (user on the watching side)
- the sensor device 20b is the sensor device 20 that performs sensing regarding the second user.
- the information processing device 100, the terminal device 10, and the sensor device 20 are communicably connected via a predetermined communication network (network N) by wire or wirelessly. Furthermore, the information processing system 1 shown in FIG. 5 may include a plurality of information processing apparatuses 100.
- the information processing device 100 is a computer processing device that executes processing related to determining the abstraction level of information.
- the information processing device 100 determines the first user's information based on first user information regarding the first user who is the user who is being watched over, and second user information regarding the second user who is the user who is watching over the first user.
- Determine the level of abstraction of presentation information which is information indicating the state.
- the information processing device 100 is used to provide various services related to monitoring.
- the information processing device 100 provides a remote monitoring (watching) service for a user being watched.
- the information processing device 100 has a voice recognition function.
- the information processing device 100 has functions of natural language understanding (NLU) and automatic speech recognition (ASR).
- the information processing device 100 may include software modules for audio signal processing, speech recognition, utterance meaning analysis, dialogue control, and the like.
- the information processing device 100 may convert the user's utterance into text and estimate the content of the user's utterance using the textual utterance (that is, character information of the utterance).
- the information processing device 100 communicates with a speech recognition server having functions of natural language understanding and automatic speech recognition, and obtains utterances converted into text by the speech recognition server and information indicating estimated utterance contents from the speech recognition server. It's okay.
- the terminal device 10 is a computer used by a user.
- the terminal device 10 outputs information regarding monitoring.
- the terminal device 10 outputs information about the user being watched over.
- the terminal device 10 displays an image (video) related to the user being watched over, and outputs audio related to the user being watched over.
- the terminal device 10 transmits the user's speech and images (video) to the information processing device 100, and receives the voice and images (video) of the user being watched from the information processing device 100.
- the terminal device 10 accepts input from the user.
- the terminal device 10 accepts voice input from the user's utterances and input from the user's operations.
- the terminal device 10 accepts the designation of the level of abstraction by the user.
- the terminal device 10 may be any device as long as it can implement the processing in the embodiment.
- the terminal device 10 may be any device as long as it has a function of displaying monitoring information, outputting audio, etc.
- the terminal device 10 may be a device such as a notebook PC (Personal Computer), a tablet terminal, a desktop PC, a smartphone, a smart speaker, a television, a mobile phone, a PDA (Personal Digital Assistant), or the like.
- the terminal device 10 may have speech recognition functions such as natural language understanding and automatic speech recognition. For example, the terminal device 10 may convert the user's utterance into text and estimate the content of the user's utterance using the textual utterance (ie, character information of the utterance).
- the terminal device 10 may convert the user's utterance into text and estimate the content of the user's utterance using the textual utterance (ie, character information of the utterance).
- the sensor device 20 detects various sensor information.
- the sensor device 20 performs sensing regarding the user.
- the sensor device 20 is provided in a space where a user is located.
- the sensor device 20a is provided at the elderly care facility where the elderly person resides.
- the sensor device 20 may be a device worn by the user.
- the sensor device 20 may be a device that the user wears on his or her wrist or hangs from his or her neck.
- the sensor device 20 has a sound sensor (microphone) that detects sound. For example, the sensor device 20 detects the user's utterance using a sound sensor. The sensor device 20 collects not only the user's utterances but also environmental sounds around the sensor device 20 and the like. Further, the sensor device 20 is not limited to a sound sensor, and includes various sensors.
- the sensor device 20 has a function as an imaging unit that captures images.
- the sensor device 20 has the function of an image sensor and detects image information.
- the sensor device 20 functions as an image input unit that receives an image as input. For example, the sensor device 20a photographs the first user (the user being watched).
- the sensor device 20 may include sensors that detect various information such as temperature, humidity, illuminance, position, acceleration, light, pressure, gyro, distance, etc.
- the sensor device 20 is not limited to a sound sensor, but also includes an image sensor (camera) that detects an image, a temperature sensor, a humidity sensor, an illuminance sensor, a position sensor such as a GPS (Global Positioning System) sensor, an acceleration sensor, and a light sensor. It may include various sensors such as a sensor, a pressure sensor, a gyro sensor, and a distance sensor.
- the sensor device 20 is not limited to the above-mentioned sensors, and may include various sensors such as a proximity sensor, a sensor for acquiring biological information such as odor, sweat, heartbeat, pulse, and brain waves.
- the sensor device 20 may transmit various sensor information detected by various sensors to the information processing device 100. Further, the sensor device 20 may have a drive mechanism such as an actuator or a motor with an encoder. The sensor device 20 may transmit sensor information including information detected regarding the driving state of a drive mechanism such as an actuator or a motor with an encoder to the information processing device 100.
- the sensor device 20 may include software modules for audio signal processing, speech recognition, utterance meaning analysis, dialogue control, behavior output, and the like.
- the sensor device 20 is not limited to the above, and may include various sensors. Further, the sensors that detect the above various information in the sensor device 20 may be a common sensor, or may be realized by different sensors. There may be a plurality of sensor devices 20, and each sensor device 20 has a communication function and transmits collected information (sensing information) to other devices such as the information processing device 100.
- FIG. 6 is a diagram illustrating a configuration example of an information processing device according to an embodiment of the present disclosure.
- the information processing device 100 includes a communication section 110, a storage section 120, and a control section 130.
- the information processing device 100 includes an input unit (for example, a keyboard, a mouse, etc.) that accepts various operations from an administrator of the information processing device 100, and a display unit (for example, a liquid crystal display, etc.) for displaying various information. May have.
- the communication unit 110 is realized by, for example, a NIC (Network Interface Card).
- the communication unit 110 is connected to the network N (see FIG. 5) by wire or wirelessly, and transmits and receives information to and from other information processing devices such as the terminal device 10 and the sensor device 20.
- the storage unit 120 is realized by, for example, a semiconductor memory element such as a RAM (Random Access Memory) or a flash memory, or a storage device such as a hard disk or an optical disk.
- the storage unit 120 according to the embodiment includes a data storage unit 121, a user information storage unit 122, and an abstraction level information storage unit 123, as shown in FIG.
- the data storage unit 121 stores various information that is also used in processing.
- the data storage unit 121 stores information to be presented.
- the data storage unit 121 stores information acquired from the sensor device 20.
- the data storage unit 121 stores information indicating the state of the first user detected by the sensor device 20 in association with information indicating the first user.
- the data storage unit 121 stores information detected by the sensor device 20 in association with information indicating the location where the information was detected.
- the data storage unit 121 stores user information in association with information identifying each first user (first user ID, etc.).
- the data storage unit 121 is not limited to the above, and may store various information depending on the purpose.
- the user information storage unit 122 stores various information regarding the user.
- the user information storage unit 122 stores information indicating the level of abstraction specified by each user.
- the user information storage unit 122 stores information regarding operations of each user.
- the user information storage unit 122 stores information etc. sensed about each user.
- the user information storage unit 122 stores information for identifying each user (user ID, etc.) in association with corresponding user information.
- the user information storage unit 122 stores information about the first user. For example, the user information storage unit 122 stores first user information including first input information input by a first user. For example, the user information storage unit 122 stores first input information indicating the level of abstraction specified by the first user. The user information storage unit 122 stores first user information including first sensing information indicating the state of the first user detected by the sensor device 20.
- the user information storage unit 122 stores information about the second user. For example, the user information storage unit 122 stores second user information including second input information input by a second user. For example, the user information storage unit 122 stores second input information indicating the level of abstraction specified by the second user. The user information storage unit 122 stores second user information including second sensing information indicating the state of the second user detected by the sensor device 20.
- the user information storage unit 122 is not limited to the above, and may store various information depending on the purpose.
- the user information storage unit 122 may store attribute information of each user.
- the user information storage unit 122 may store information by associating the first user and the second user.
- the user information storage unit 122 may store information indicating the relationship between the first user and the second user.
- the abstraction level information storage unit 123 stores various information regarding the abstraction level.
- the abstraction level information storage unit 123 stores information indicating the abstraction level of information presentation.
- the abstraction level information storage unit 123 stores information indicating the determined abstraction level, such as the mask level.
- the abstraction level information storage unit 123 is not limited to the above, and may store various information depending on the purpose.
- the abstraction level information storage unit 123 stores a history of determined abstraction levels.
- the abstraction level information storage unit 123 stores the history of the determined abstraction levels in chronological order.
- the abstraction level information storage unit 123 stores the determined level of abstraction in association with the first user corresponding to the determined level of abstraction.
- control unit 130 allows a program stored inside the information processing device 100 (for example, an information processing program according to the present disclosure) to be transferred to a RAM (Random Access Memory) etc. as a work area.
- control unit 130 is realized by, for example, an integrated circuit such as an ASIC (Application Specific Integrated Circuit) or an FPGA (Field Programmable Gate Array).
- the control unit 130 includes an acquisition unit 131, a processing unit 132, a determination unit 133, a generation unit 134, and a transmission unit 135, and has information processing functions and operations described below. to realize or carry out.
- the internal configuration of the control unit 130 is not limited to the configuration shown in FIG. 6, and may be any other configuration as long as it performs information processing to be described later.
- the connection relationship between the respective processing units included in the control unit 130 is not limited to the connection relationship shown in FIG. 6, and may be other connection relationships.
- the acquisition unit 131 acquires various information.
- the acquisition unit 131 acquires various information from the storage unit 120.
- the acquisition unit 131 acquires various information from an external information processing device.
- the acquisition unit 131 receives various information from an external information processing device via the communication unit 110.
- the acquisition unit 131 receives information from the terminal device 10.
- the acquisition unit 131 receives information from the sensor device 20.
- the acquisition unit 131 acquires various information from the terminal device 10 and the sensor device 20.
- the acquisition unit 131 acquires information collected by the terminal device 10 from the terminal device 10.
- the acquisition unit 131 acquires information detected by the sensor device 20 from the sensor device 20 .
- the acquisition unit 131 acquires various information regarding the user.
- the acquisition unit 131 acquires information regarding the first user to present to the second user.
- the acquisition unit 131 acquires information indicating the state of the user detected by the sensor device 20.
- the acquisition unit 131 acquires information regarding the state of the first user who is the user being watched over.
- the acquisition unit 131 acquires information indicating the sensing result of the first user by the sensor.
- the acquisition unit 131 acquires information regarding the first user's activities.
- the acquisition unit 131 acquires information regarding the amount of activity of the first user.
- the acquisition unit 131 acquires first user information regarding the first user who is the user being watched.
- the acquisition unit 131 acquires first user information including first input information input by the first user.
- the acquisition unit 131 acquires first input information indicating the level of abstraction specified by the first user.
- the acquisition unit 131 acquires first input information indicating an instruction by the first user to lower the level of abstraction.
- the acquisition unit 131 acquires first input information indicating an instruction by the first user to increase the level of abstraction.
- the acquisition unit 131 acquires first user information including first sensing information indicating the state of the first user detected by the sensor device 20.
- the acquisition unit 131 acquires second user information regarding the second user who is the user watching over the first user.
- the acquisition unit 131 acquires second user information including second input information input by the second user.
- the acquisition unit 131 acquires second input information indicating the level of abstraction specified by the second user.
- the acquisition unit 131 acquires second input information indicating an instruction by the second user to lower the level of abstraction.
- the acquisition unit 131 acquires second input information indicating an instruction by the second user to increase the level of abstraction.
- the acquisition unit 131 acquires second user information including second sensing information indicating the state of the second user detected by the sensor device 20.
- the processing unit 132 executes various processes.
- the processing unit 132 executes processing using the information acquired by the acquisition unit 131.
- the processing unit 132 executes image processing.
- the processing unit 132 executes processing related to voice recognition.
- the processing unit 132 uses the information stored in the storage unit 120 to execute speech recognition processing.
- the processing unit 132 converts the user's utterance into text information, thereby converting the user's utterance into text.
- the processing unit 132 can be realized by using existing utterance meaning analysis technology.
- the processing unit 132 analyzes the content of the user's utterance.
- the processing unit 132 estimates the content of the user's utterance by analyzing the user's utterance using various conventional techniques as appropriate. For example, the processing unit 132 analyzes the content of the user's utterance using natural language understanding (NLU) and automatic speech recognition (ASR) functions.
- NLU natural language understanding
- ASR automatic speech recognition
- the processing unit 132 estimates (identifies) the content of the user's utterance through semantic analysis using character information corresponding to the user's utterance. For example, the processing unit 132 estimates the content of the user's utterance corresponding to the text information by analyzing the text information using various conventional techniques such as syntactic analysis.
- the processing unit 132 executes processing related to data retention.
- the processing unit 132 accumulates information transmitted from each terminal device 10 and sensor device 20.
- the processing unit 132 accumulates information such as recognition results of sensing information such as images and sounds transmitted from each terminal device 10 and sensor device 20.
- the processing unit 132 stores information such as recognition results of sensing information such as images and sounds transmitted from each terminal device 10 and sensor device 20 in the storage unit 120.
- the processing unit 132 executes keyword extraction processing.
- the processing unit 132 extracts keywords based on the voice recognition results.
- the determining unit 133 determines various information.
- the determining unit 133 determines the abstraction level of information.
- the determining unit 133 executes a determining process using the information acquired by the acquiring unit 131.
- the determining unit 133 determines the abstraction level of presentation information, which is information indicating the state of the first user, based on the first user information and the second user information. The determining unit 133 determines the abstraction level of the first user's presentation information based on the first input information. The determining unit 133 determines the level of abstraction of the information presented by the first user based on the level of abstraction indicated by the first input information. The determining unit 133 lowers the level of abstraction of the information presented by the first user in response to the first user's instruction to lower the level of abstraction. The determining unit 133 increases the level of abstraction of the information presented by the first user in response to the first user's instruction to increase the level of abstraction. The determining unit 133 determines the abstraction level of the first user's presentation information based on the first sensing information.
- the determining unit 133 determines the abstraction level of the information presented by the second user based on the second input information.
- the determining unit 133 determines the level of abstraction of the information presented by the second user based on the level of abstraction indicated by the second input information.
- the determining unit 133 lowers the level of abstraction of the information presented by the second user in response to the second user's instruction to lower the level of abstraction.
- the determining unit 133 increases the level of abstraction of the information presented by the second user in response to the second user's instruction to increase the level of abstraction.
- the determining unit 133 determines the abstraction level of the information presented by the second user based on the second sensing information.
- the determining unit 133 determines the level of abstraction when presenting the first user's presentation information to the second user, based on the first user information and the second user information.
- the determining unit 133 determines the level of abstraction when presenting the first user's presentation information to the first user, based on the first user information and the second user information.
- the determining unit 133 determines the degree of abstraction of the first user's presented information in accordance with the protection nature of the first user's presented information determined based on the first user information and the second user information. The determining unit 133 determines the amount of information of the first user's presentation information according to the attentionality of the first user's presentation information determined based on the first user information and the second user information. The determining unit 133 determines the resolution of the first user's presentation information according to the responsiveness of the first user's presentation information determined based on the first user information and the second user information.
- the generation unit 134 generates various information.
- the generation unit 134 generates various information based on information from an external information processing device and information stored in the storage unit 120.
- the generation unit 134 generates various types of information based on information from other information processing devices such as the terminal device 10 and the sensor device 20.
- the generation unit 134 generates various information based on information stored in the data storage unit 121, user information storage unit 122, and abstraction information storage unit 123.
- the generation unit 134 generates various information to be output to the terminal device 10 based on the information generated by the processing of the processing unit 132.
- the generation unit 134 executes various processes related to information provided to the terminal device 10.
- the generation unit 134 generates content to be provided to the terminal device 10.
- the generation unit 134 generates content corresponding to the abstraction level determined by the determination unit 133.
- the generation unit 134 generates content CT11.
- the generation unit 134 generates content CT12.
- the generation unit 134 generates content CT13.
- the generation unit 134 generates content to be displayed on the terminal device 10.
- the generation unit 134 may generate a screen (content) to be provided to the terminal device 10 using various technologies such as Java (registered trademark) as appropriate.
- the generation unit 134 may generate the screen (content) to be provided to the terminal device 10 based on CSS, JavaScript (registered trademark), or HTML format.
- the generation unit 134 may generate the screen (content) in various formats such as JPEG (Joint Photographic Experts Group), GIF (Graphics Interchange Format), and PNG (Portable Network Graphics).
- the transmitting unit 135 functions as an output unit that performs output processing.
- the transmitter 135 transmits information to the terminal device 10.
- the transmitting unit 135 transmits information indicating the processing result by the processing unit 132 to the terminal device 10.
- the transmitting unit 135 transmits information on the level of abstraction determined by the determining unit 133 to the terminal device 10.
- the transmitter 135 transmits the information generated by the generator 134 to the terminal device 10.
- the transmitter 135 transmits the content generated by the generator 134 to the terminal device 10.
- the transmitting unit 135 outputs presentation information corresponding to the abstraction level determined by the determining unit 133.
- the transmitter 135 transmits the content CT11.
- the transmitter 135 transmits the content CT12.
- the transmitter 135 transmits the content CT13.
- the transmitting unit 135 transmits the presentation information corresponding to the abstraction level determined by the determining unit 133 to the terminal device 10 used by the second user.
- the transmitting unit 135 transmits presentation information corresponding to the abstraction level determined by the determining unit 133 to the terminal device 10 used by the first user.
- FIG. 7 is a diagram illustrating a configuration example of a terminal device according to an embodiment of the present disclosure.
- the terminal device 10 includes a communication section 11, an audio input section 12, an audio output section 13, a camera 14, a display section 15, an operation section 16, a storage section 17, and a control section. 18.
- the communication unit 11 is realized by, for example, a NIC or a communication circuit.
- the communication unit 11 is connected to a predetermined communication network by wire or wirelessly, and transmits and receives information to and from an external information processing device.
- the communication unit 11 is connected to a predetermined communication network by wire or wirelessly, and transmits and receives information to and from the information processing device 100.
- the voice input unit 12 functions as an input unit that accepts operations by voice (speech) from the user.
- the audio input unit 12 is, for example, a microphone, and detects audio.
- the voice input unit 12 detects a user's utterance.
- the voice input unit 12 receives a user's utterance as an operation by the user.
- the audio input unit 12 receives a designation of the level of abstraction of the presentation information from the user using the terminal device 10. Note that the voice input unit 12 may have any configuration as long as it can detect the user's utterance information necessary for processing.
- the audio output unit 13 is realized by a speaker that outputs audio, and is an output device for outputting various information as audio.
- the audio output unit 13 outputs content provided from the information processing device 100 as audio.
- the audio output unit 13 outputs audio corresponding to information displayed on the display unit 15.
- the terminal device 10 inputs and outputs audio using an audio input section 12 and an audio output section 13.
- the audio output unit 13 audio outputs the presentation information corresponding to the determined abstraction level.
- the camera 14 has an image sensor (image sensor) that detects images. Camera 14 photographs images.
- the terminal device 10 is a notebook computer
- the camera 14 may be built into the terminal device 10 and placed above the display section 15. Further, for example, in the case of a smartphone, the camera 14 may be an in-camera built into the terminal device 10.
- the display unit 15 is a display screen of a tablet terminal or the like realized by, for example, a liquid crystal display or an organic EL (Electro-Luminescence) display, and is a display device for displaying various information.
- a liquid crystal display or an organic EL (Electro-Luminescence) display is a display device for displaying various information.
- the display unit 15 functions as an output unit that executes output processing.
- the display unit 15 displays various information regarding monitoring.
- the display unit 15 displays various information regarding the first user.
- the display unit 15 displays content.
- the display unit 15 displays various information received from the information processing device 100.
- the display unit 15 outputs presentation information corresponding to the level of abstraction determined by the information processing device 100.
- the display unit 15 displays presentation information corresponding to the level of abstraction determined by the information processing device 100.
- the display unit 15 displays content CT11.
- the display unit 15 displays content CT12.
- the display unit 15 displays content CT13.
- the operation unit 16 functions as an input unit that accepts various user operations.
- the operation unit 16 receives operations on the information displayed on the display unit 15 from the user using the terminal device 10.
- the operation unit 16 receives a designation of the level of abstraction of the presentation information from the user using the terminal device 10.
- the operation unit 16 is a keyboard, a mouse, etc. Further, the operation unit 16 may include a touch panel that can realize functions equivalent to a keyboard or a mouse. In this case, the operation unit 16 receives various operations from the user via the display screen using touch panel functions realized by various sensors. For example, the operation unit 16 receives various operations from the user via the display unit 15.
- the operation unit 16 accepts a user's operation such as a designation operation via the display unit 15 of the terminal device 10.
- a user's operation such as a designation operation via the display unit 15 of the terminal device 10.
- the tablet terminal mainly uses a capacitance method to detect user operations using the operation unit 16, but other detection methods such as a resistive film method, a surface acoustic wave method, an infrared method, and an electromagnetic induction method are also available. Any method may be used as long as it can detect the user's operation and realize the functions of a touch panel.
- the terminal device 10 may have a configuration that accepts (detects) various information as input, not limited to the above.
- the terminal device 10 may include a line-of-sight sensor that detects the user's line of sight.
- the line-of-sight sensor detects the user's line-of-sight direction using eye tracking technology, for example, based on detection results from a camera 14, an optical sensor, a motion sensor (all not shown), etc. mounted on the terminal device 10.
- the line-of-sight sensor determines a gaze area on the screen where the user is gazing, based on the detected line-of-sight direction.
- the line-of-sight sensor may transmit line-of-sight information including the determined gaze area to the information processing apparatus 100.
- the terminal device 10 may include a motion sensor that detects user gestures and the like.
- the terminal device 10 may receive a user's gesture operation using a motion sensor.
- the storage unit 17 is realized by, for example, a semiconductor memory element such as a RAM (Random Access Memory) or a flash memory, or a storage device such as a hard disk or an optical disk.
- the storage unit 17 stores various information received from the information processing device 100, for example.
- the storage unit 17 stores, for example, information regarding applications (such as a monitoring application) installed in the terminal device 10, such as programs.
- the storage unit 17 stores information received from the information processing device 100.
- the storage unit 17 stores presentation information to be presented to the user.
- the storage unit 17 stores content to be output.
- the storage unit 17 stores user information.
- the storage unit 17 may store the user's utterance history (history of voice recognition results) and behavior history.
- the control unit 18 is realized by, for example, executing various programs stored in a storage device such as the storage unit 17 inside the terminal device 10 using a RAM as a work area by a CPU, an MPU, or the like.
- these various programs include a program for an application (for example, a monitoring application) that performs information processing.
- the control unit 18 is realized by, for example, an integrated circuit such as an ASIC or an FPGA.
- control unit 18 includes an acquisition unit 181, a transmission unit 182, a reception unit 183, and a processing unit 184, and realizes or executes information processing functions and operations described below.
- the internal configuration of the control unit 18 is not limited to the configuration shown in FIG. 7, and may be any other configuration as long as it performs information processing to be described later.
- connection relationship between the respective processing units included in the control unit 18 is not limited to the connection relationship shown in FIG. 7, and may be other connection relationships.
- the acquisition unit 181 acquires various information. For example, the acquisition unit 181 acquires various information from an external information processing device. For example, the acquisition unit 181 stores the acquired various information in the storage unit 17. The acquisition unit 181 acquires user operation information accepted by the operation unit 16. The acquisition unit 181 acquires presentation information to be presented to the user.
- the acquisition unit 181 acquires the user's utterance information.
- the acquisition unit 181 acquires the user's utterance information detected by the voice input unit 12.
- the transmitting unit 182 transmits information to the information processing device 100 via the communication unit 11.
- the transmitter 182 transmits information regarding the user to the information processing device 100.
- the transmitter 182 transmits information input by user's speech or operation.
- the transmitter 182 transmits information indicating an operation on the presentation information to the information processing apparatus 100.
- the receiving unit 183 receives information from the information processing device 100 via the communication unit 11.
- the receiving unit 183 receives information provided by the information processing device 100.
- the receiving unit 183 receives content from the information processing device 100.
- the receiving unit 183 receives presentation information at the level of abstraction determined by the information processing device 100.
- the processing unit 184 executes various processes.
- the processing unit 184 executes processing using information provided from the information processing device 100.
- the processing unit 184 displays various information via the display unit 15.
- the processing unit 184 functions as a display control unit that controls the display on the display unit 15.
- the processing unit 184 outputs various information as audio via the audio output unit 13.
- the processing unit 184 functions as an audio output control unit that controls the audio output of the audio output unit 13.
- the processing unit 184 changes the display mode according to the user's operation accepted by the voice input unit 12 or the operation unit 16.
- the processing unit 184 outputs the information acquired by the acquisition unit 181.
- the processing unit 184 outputs the information received by the receiving unit 183.
- the processing unit 184 outputs content provided from the information processing device 100.
- the processing unit 184 outputs the content received by the receiving unit 183 via the audio output unit 13 or the display unit 15.
- the processing unit 184 displays content via the display unit 15.
- the processing unit 184 outputs the content as audio via the audio output unit 13.
- the processing unit 184 transmits various information to an external information processing device via the communication unit 11.
- the processing unit 184 transmits various information to the information processing device 100.
- the processing unit 184 transmits various information stored in the storage unit 17 to an external information processing device.
- the processing unit 184 transmits various information acquired by the acquisition unit 181 to the information processing device 100.
- the processing unit 184 transmits the sensor information acquired by the acquisition unit 181 to the information processing device 100.
- the processing unit 184 transmits the user operation information accepted by the operation unit 16 to the information processing device 100.
- the processing unit 184 transmits information such as utterances and images of a user using the terminal device 10 to the information processing device 100.
- each process by the control unit 18 described above may be implemented using, for example, JavaScript (registered trademark).
- each part of the control unit 18 may be realized by, for example, a predetermined application.
- processing such as information processing by the control unit 18 may be realized using control information received from an external information processing device.
- the control unit 18 may include, for example, an application control unit that controls the predetermined application or a dedicated application.
- FIG. 8 is a flowchart showing a processing procedure of the information processing device according to the embodiment of the present disclosure. Specifically, FIG. 8 is a flowchart showing the procedure of information processing by the information processing apparatus 100, which is an example of an information processing apparatus.
- the information processing device 100 stores first user information regarding the first user who is the user being watched over, and second user information regarding the second user who is the user watching over the first user. Acquire (step S101).
- the information processing device 100 determines the abstraction level of presentation information, which is information indicating the state of the first user, based on the first user information and the second user information (step S102).
- FIG. 9 is a flowchart showing the processing procedure regarding updating the presentation content.
- the processing shown in FIG. Any device such as the sensor device 20 may perform this.
- the information processing system 1 refers to the DB (step S201).
- the information processing device 100 refers to information stored in the storage unit 120.
- the information processing system 1 performs sensing of the watched side (step S202).
- the sensor device 20 performs sensing.
- the information processing system 1 performs various processes such as filtering, conversion, and state estimation (step S203).
- the information processing device 100 performs various processes such as filtering, conversion, and state estimation.
- step S204: Yes If there is an input from the side to be watched (step S204: Yes), the information processing system 1 returns to step S203 and performs the process. If there is no input from the side to be watched (step S204: No), the information processing system 1 updates the presentation content (step S205). For example, the information processing device 100 determines the abstraction level of the presentation information, and the terminal device 10 updates the information to be displayed in the presentation information based on the abstraction level determined by the information processing device 100.
- step S206: Yes If there is an input from the watching side (step S206: Yes), the information processing system 1 returns to step S203 and performs the process. If there is no input from the watching side (step S206: No), the information processing system 1 updates the presentation content (step S207). For example, the information processing device 100 determines the abstraction level of the presentation information, and the terminal device 10 updates the information to be displayed in the presentation information based on the abstraction level determined by the information processing device 100.
- the information processing system 1 updates the DB (step S208), and returns to step S202 to perform the process.
- the information processing device 100 updates information stored in the storage unit 120.
- FIG. 10 is a diagram illustrating an example of abstraction level determination processing in an information processing system.
- FIG. 11 is a diagram illustrating an example of information regarding functions used to determine the level of abstraction. Note that the mask level (level of abstraction) that targets the user being watched over (first user) is the first mask level (first level of abstraction), and the mask level (level of abstraction) that targets the user watching over (second user) is the first mask level (first level of abstraction). degree) is also called a second mask level (second level of abstraction).
- the information processing device 100 determines a first mask level (first degree of abstraction) of the user being watched over (first user). For example, the information processing device 100 determines the mask level ML elder (t), which is the first mask level to be presented to the watched party at time t, using the following equation (3) or equation (4). For example, the information processing device 100 determines the first mask level (first degree of abstraction) based on the first initial value specified by the first user, as shown in equation (3) below.
- ML elder (0) in equation (3) corresponds to the first mask level at time 0 (corresponding to the origin (t0) in FIG. 2). Furthermore, ML elder (3) in equation (3) corresponds to the first mask level at time 1 (time after time 0). “ML initial_elder ” in equation (3) corresponds to the first initial value of the first mask level set by the watched side.
- the information processing device 100 determines (updates) the first mask level based on the first feedback from the first user and the second feedback from the second user, as shown in equation (4) below. .
- ML elder (t+2) in equation (4) corresponds to the first mask level at time t+2. Furthermore, “ML initial_elder " in equation (4) corresponds to the first initial value of the first mask level set by the watched side. Note that the other elements in equation (4) are the same as those in equation (2), so detailed explanations will be omitted.
- the information processing device 100 determines the second mask level (second abstraction level) of the watching user (second user). For example, the information processing device 100 determines the mask level ML younger (t), which is the second mask level to be presented to the viewer at time t, using the following equation (5) or equation (6). For example, the information processing device 100 determines the second mask level (second abstraction level) based on the second initial value specified by the second user, as shown in equation (5) below.
- ML younger (0) in equation (5) corresponds to the second mask level at time 0 (corresponding to the origin (t0) in FIG. 2). Furthermore, ML younger (5) in equation (5) corresponds to the second mask level at time 1 (time after time 0). “ML initial_younger ” in equation (5) corresponds to the second initial value of the second mask level set by the watched side.
- the information processing device 100 determines (updates) the second mask level based on the first feedback from the first user and the second feedback from the second user, as shown in equation (6) below. .
- ML younger (t+2) in equation (6) corresponds to the second mask level at time t+2. Furthermore, “ML initial_younger " in equation (6) corresponds to the second initial value of the second mask level set by the watched side. Note that the other elements in equation (6) are the same as those in equation (2), so detailed explanations will be omitted.
- a graph GR2 in FIG. 10 shows a change over time (time series) in the mask level (level of abstraction) for the information presented by the user U1 determined by the information processing device 100.
- the vertical axis of graph GR2 indicates the mask level of information, that is, the abstraction level. Further, the horizontal axis of graph GR2 indicates time.
- ML initial_elder in the graph GR2 corresponds to the initial value of the mask level set by the watched side.
- ML initial_younger in graph GR2 corresponds to the initial value of the mask level set by the watching side.
- Line LN11 and line LN21 in graph GR2 indicate the case where the presented mask level constantly oscillates due to inputs from the watched side and the watching side.
- Line LN11 corresponds to the first mask level
- line LN12 corresponds to the second mask level.
- the information processing device 100 determines the first mask level based on the mask level (level of abstraction) desired by the side being watched, and presents information to the first user based on the determined first mask level.
- the information processing device 100 determines a second mask level based on the mask level (level of abstraction) desired by the viewer, and presents information to the second user based on the determined second mask level.
- line LN12 and line LN22 in graph GR2 indicate the case where the presented mask level oscillates attenuated due to input from the watched side and the watching side.
- Line LN21 corresponds to the first mask level
- line LN22 corresponds to the second mask level.
- the information processing device 100 determines the first mask level so as to converge the mask levels (levels of abstraction), and presents information to the first user based on the determined first mask level. Further, the information processing device 100 determines a second mask level so as to converge the mask level (level of abstraction), and presents information to the second user based on the determined second mask level.
- the information processing device 100 sets the initial state in accordance with the user's request to extremely mask information.
- the information processing apparatus 100 then adjusts the presentation content based on feedback from the user when the mask is gradually removed.
- the information processing device 100 performs the following processes #2-1 to #2 to #4.
- Processing #2-1 Presenting the mask level required by both the watched side and the watching side Processing #2-2. Presenting process by lowering the mask level of the watching side based on the input from the watched side # 2-3. Based on the input from the watching side, raise the mask level on the watching side and present process #2-4. Run the loop of processes #2-2 and #2-3 to converge the mask level.
- the information processing device 100 determines the mask level ML elder (t) to be presented to the user being watched at time t using the above-mentioned equation (3) or equation (4). Furthermore, the information processing apparatus 100 determines the mask level ML younger (t) to be presented to the watching user at time t using the above-mentioned equation (5) or equation (6). In this way, the information processing apparatus 100 adjusts the mask levels presented to the users on the watched side and the users on the watching side, and presents information on individual mask levels to both the users on the watched side and the users on the watching side. In this way, the information processing system 1 can autonomously perform matching regarding the presentation of the watching side and the watched side through personalization and local optimization.
- the information processing system 1 may perform the following processing when the users on the watching side view information on the side being watched one by one. For example, the information processing system 1 presents the information at the highest mask level that is preset based on the input of the user watching the information. Further, the information processing system 1 adjusts and presents the mask level based on the operation by the user on the watching side and the recognition result of the user on the watching side by the device.
- the information processing system 1 may process as follows. For example, if a biological child who wants to know the details requests (specifies) a low mask level, and the child's spouse, who does not need to know the details, requests a high mask level, the information processing system 1 Information is presented by a terminal device 10 at a low mask level suited to the person. In addition, when accessing a user whose biological child is being watched, the information processing system 1 identifies the user through operations and identification such as biometric authentication using fingerprints, speech, and iris, and facial feature analysis, and temporarily The mask level may be adjusted to a mask level registered in advance and presented.
- the information processing system 1 may perform the following processing when a plurality of users on the watching side simultaneously view information on the watched side. For example, the information processing system 1 presents the information at the highest mask level that is preset based on the input of the user watching the information. Note that if the configuration of the presentation device, such as a lenticular display or stereophonic speaker, can present different information depending on the position of the user watching, and if the device can present information at different mask levels to the number of people at the same time, the information processing system 1 may be processed as follows. For example, the information processing system 1 presents each watching user with the highest mask level of information set in advance based on the input of the watching user.
- the information processing system 1 can set the information mask level in advance by the user on the watched side. Present at a high level based on the basics.
- the information processing system 1 determines the information masking level based on past information regarding the relationship between the user being watched and a third party, such as the presence or absence of direct interaction with the person being watched and the frequency of detection. Adjustments may be made based on situational judgment rather than explicit instructions.
- the measurement (sensing) of the state of the person being watched may be performed by the following sensors.
- the information processing system 1 may perform sensing using a sensor installed in an environment corresponding to the space where the user is located.
- the environmentally installed sensors may be a door opening/closing sensor, a human sensor, a bed leaving sensor, an image sensor, a CO2 sensor, a temperature/humidity sensor, an acceleration sensor, a microphone, or the like.
- the information processing system 1 may perform sensing using a sensor of a wearable device worn by the user.
- the sensor of the wearable device may be a sensor that detects exhalation, swallowing, pulse, heartbeat, body movement, etc., or may be a microphone that detects sound.
- the information processing system 1 may perform the following data processing.
- the information processing system 1 may process time-series data acquired from a sensor.
- the information processing system 1 may perform filtering processing.
- the filtering process may be downsampling, bandpass filtering, outlier removal, clustering, or the like.
- the information processing system 1 may perform conversion processing. For example, the information processing system 1 may perform processing based on the presence or absence of a change. For example, the information processing system 1 may perform processing based on comparison with the last few weeks or months, comparison with another day, comparison with another time period on the same day, etc.
- the information processing system 1 may perform processing based on the difference from others. For example, the information processing system 1 may perform processing based on comparison with people at the same facility or comparisons with people of the same age at other facilities. For example, the information processing system 1 may perform dimensional compression to noteworthy alerts. For example, the information processing system 1 may perform dimension compression when the amount of activity is extremely small or large.
- the information processing device 100 can determine any information as long as it is information related to the user Information may be used to determine the level of abstraction.
- the information processing device 100 may determine the abstraction level (mask level) based on sensing information indicating the user's state detected by the sensor device 20.
- the information processing device 100 may determine the abstraction level based on first sensing information indicating the state of the first user detected by the sensor device 20a.
- the information processing apparatus 100 may increase the abstraction level when the first user is included in the content that is the presentation information.
- the information processing device 100 may lower the level of abstraction when the content that is the presentation information does not include the first user. For example, the information processing device 100 may determine the abstraction level based on second sensing information indicating the state of the second user detected by the sensor device 20b. For example, the information processing apparatus 100 may lower the abstraction level when the second user is watching the presented information. For example, the information processing device 100 may increase the abstraction level when the second user is not watching the presented information.
- FIG. 12 is a diagram illustrating an example of a sensing target and an information presentation mode.
- the list TB11 shown in FIG. 12 shows mapping of data and presentation methods depending on the side watching and the side watched.
- the information processing system 1 performs processing such as smoothing using the analog information of the amount of exercise as a measured value.
- the information processing system 1 then presents the state of the first user by changing the wind strength in proportion to the amount of exercise.
- the information processing system 1 when the type of sensor is an opening/closing sensor provided on the first user's bathroom door, the information processing system 1 performs processing such as outlier processing using digital information of opening/closing as a measurement value. Then, the information processing system 1 presents the state of the first user by drawing a watering can when the user is in the bathroom.
- the information processing system 1 performs processing such as outlier processing using digital information of opening/closing as a measurement value. Then, the information processing system 1 presents the state of the first user by drawing a bird when a person enters from outside.
- the information processing system 1 when the type of sensor is a microphone, the information processing system 1 performs processing such as smoothing and AI (artificial intelligence) processing using analog sound information as a measurement value. Then, the information processing system 1 presents the state of the first user by drawing an object that reflects the relationship with the user being watched over. For example, the information processing system 1 may draw a person who has a close relationship with the first user as a butterfly, and may draw a person who is estranged from the first user or has a relationship that the first user considers unfavorable as an aggressive image. The state of the first user is presented by drawing as a bird.
- processing such as smoothing and AI (artificial intelligence) processing using analog sound information as a measurement value.
- AI artificial intelligence
- the information processing system 1 associates the analysis results of data obtained from each sensor with the object to be drawn.
- the information processing system 1 also draws the degree of deviation of the current situation from the steady state estimated from past accumulated data in association with the movement of the object or the trajectory of the movement.
- the information processing system 1 allows each user to easily associate events with presentation content even when the information masking level is high.
- the information processing system 1 stores data, protection, attention, and responsiveness in a database in a table format.
- the information processing system 1 measures content matching according to the intentions of the watching side and the watched side. Thereby, the information processing system 1 can convey information that reflects the optimal degree to which the watching side and the watched side want to know and inform each other. Therefore, the information processing system 1 can realize an interface that is highly compatible with daily life by simplifying operations and eliminating the reality of presented content.
- the sensor information and the presentation content are in one-to-one correspondence, but the correspondence is not limited to one-to-one.
- the information processing system 1 uses sensor fusion using multiple other sensors to generate estimation results. may be calculated and presented, or the most recent changes may be presented.
- sensor fusion if the value of the opening/closing sensor of the room door repeats 0 and 1 rapidly, the information processing system 1 determines that the opening/closing sensor is abnormal, and detects a person based on the data of the microphone and human sensor. It is also possible to estimate the inflow and outflow of
- the device that presents information is the terminal device 10 such as a smartphone used by a user, but the presentation device is not limited to a smartphone or the like, but can be any other device. It may be. That is, the interface (terminal device 10) that presents information in the information processing system 1 is not limited to visual presentation using two-dimensional images. Further, the presentation device may not be a dedicated device but may incorporate the algorithm into an existing device as an application. Regarding this point, examples of presentation devices and examples of information presentation contents for each presentation device will be described below.
- the presentation device (for example, the terminal device 10) may be a wearable device such as a smart watch or smart glasses, a three-dimensional (3D) holographic display, or the like.
- the presentation content may be images (types), vibrations (types, strengths, weaknesses, periodicity), etc.
- the information processing system 1 may present a miniature garden that imitates the room of the person being watched, a three-dimensional avatar image, etc.
- the presentation device (for example, the terminal device 10) may be a robot or the like.
- the presentation content may be movement (type, strength), shape change, rigidity change, temperature change (type, size, texture), etc.
- the presentation device may be a small humanoid, a pet robot, a flower robot, an air soft robot, etc.
- the presentation device may be a speaker or the like.
- the presentation content may be BGM (type, intensity, tempo, playlist), sound effects (type), etc.
- the information processing system 1 may present up-tempo sounds or slow-tempo sounds, or may present sounds such as whistling, breathing, laughter, sighing, and chewing.
- the presentation device may be a diffuser, a heat source, or the like.
- the presentation content may be scent (type, intensity), wind (type, intensity), temperature (intensity/weakness), etc.
- the information processing system 1 may present the scent of sweet perfume or the aroma of spicy food, or may present a strong or weak sound, a continuous sound or an intermittent sound, etc. It's okay.
- the information processing system 1 may present hot or cold.
- the information processing system 1 may constantly update the presented content, may update the presented content only when the user is confirming it, or may update the presented content in accordance with the ON/OFF operation by the user. It's okay.
- the information processing system 1 can also perform fast forwarding that compresses a long time into a short time, highlights that are extracted and linked only when multiple events occur, slow loops of short events, etc. May be presented.
- Information processing system 1 changes or adjusts the presentation method to make changes in brightness, volume, movement, etc. easier to understand when the environment or the user's condition changes, such as daytime and nighttime, shared space and private room, and degree of disability. You may also do so.
- the information processing system 1 may detect the location where the observer (the user watching) is located by a plurality of presentation devices working together, and may present the information via the nearest display.
- the information processing system 1 may also present the degree of stationarity by comparing not only the micro environment such as a private room but also the macro environment such as the entire facility.
- the information processing system 1 can communicate in a manner that is desirable for the side being watched and the side watching.
- FIG. 13 is a diagram illustrating an example of the components of the information processing system.
- the information processing system 1 includes a communication unit, a processing unit, a presentation unit, and a sensing unit that are arranged corresponding to the user who is being watched.
- a communication unit placed corresponding to the user being watched sends and receives information to and from components other than those placed corresponding to the user being watched.
- the communication unit arranged corresponding to the user on the watched side in FIG. 13 corresponds to the communication unit 11 of the terminal device 10a used by the first user.
- the processing unit arranged corresponding to the user on the watched side in FIG. 13 corresponds to the control unit 18 of the terminal device 10a used by the first user.
- the presentation unit arranged corresponding to the user on the watched side in FIG. 13 corresponds to the display unit 15 and the audio output unit 13 of the terminal device 10a used by the first user.
- the sensing unit arranged corresponding to the user on the watched side in FIG. 13 corresponds to the sensor device 20a.
- the information processing system 1 includes a communication unit, a processing unit, a presentation unit, and a sensing unit, which are arranged to correspond to the user watching.
- a communication unit disposed corresponding to the user on the watching side transmits and receives information to and from components other than those disposed corresponding to the user on the watching side.
- the communication unit arranged corresponding to the watching user in FIG. 13 corresponds to the communication unit 11 of the terminal device 10b used by the second user.
- the processing unit arranged corresponding to the user on the watching side in FIG. 13 corresponds to the control unit 18 of the terminal device 10b used by the second user.
- the presentation section arranged corresponding to the user on the watching side in FIG. 13 corresponds to the display section 15 and the audio output section 13 of the terminal device 10b used by the second user.
- the sensing unit arranged corresponding to the watching user in FIG. 13 corresponds to the sensor device 20b.
- the information processing system 1 includes a communication section, a processing section, and a database arranged in accordance with the configuration of the decision processing.
- a communication unit arranged corresponding to the configuration of the determination process transmits and receives information to and from components other than the components arranged corresponding to the configuration of the determination process.
- the communication unit arranged corresponding to the configuration of the determination process in FIG. 13 corresponds to the communication unit 110 of the information processing device 100.
- a processing unit arranged corresponding to the configuration of the determination process in FIG. 13 corresponds to the control unit 130 of the information processing device 100.
- a database arranged corresponding to the configuration of the determination process in FIG. 13 corresponds to the storage unit 120 of the information processing apparatus 100.
- the configuration shown in FIG. 13 is the initial configuration, and for example, there may be multiple users being watched. Furthermore, there may be multiple users watching. In this way, any configuration can be adopted for the physical arrangement of each component in the information processing system 1 depending on the presented information, presentation mode, and the like.
- FIGS. 14 and 15 are diagrams showing examples of information presentation. That is, FIGS. 14 and 15 are diagrams showing an example of a UI (User Interface).
- UI User Interface
- the information processing system 1 may present the presentation information using the presentation device DV1, as shown in the presentation device DV1 in FIG.
- the information processing system 1 may use the presentation device DV1 having a display to display the presentation information in the form of images of flowers changing in bloom. For example, when an unsteady sound is detected in the room of the person being watched, the information processing system 1 may change the drawing of the person being watched.
- the information processing system 1 may inform the resident who is being watched about the situation of the family member who is watching over the resident. For example, the information processing system 1 may present the presentation information using the presentation device DV2, as shown in the presentation device DV2 in FIG. In this case, the information processing system 1 may use the presentation device DV2, which is a robot, to present presentation information with an image of the robot's behavior changing. For example, in the information processing system 1, if the grandchild being watched over is doing well, the presentation device DV2, which is the robot being watched over, may present information using sound and movement.
- the terminal device 10 functions as a so-called thin client, a device that transmits information such as user input and sensing to the information processing device 100 and outputs information received from the information processing device 100.
- the information processing system 1 has been described as an example of the configuration of a so-called centralized system, such as a client-server type system in which main processing is executed on the server side. Note that the above is just an example, and any manner of division of functions in the information processing system 1 can be adopted.
- the system configuration in which the information processing device 100 performs image processing and voice recognition has been described as an example, but the image processing and voice recognition may be performed by each of the terminal devices 10. Further, for example, the terminal device 10 may perform a process of generating presentation information such as content.
- the terminal device 10 functions as an information processing device that determines the level of abstraction and outputs information based on the determined level of abstraction.
- the terminal device 10 has information stored in the storage section 120 and has the functions of a processing section 132, a determining section 133, and a generating section 134.
- the terminal device 10 functions as a rich client that performs processing related to speech recognition, determination of abstraction level, generation, and output (display).
- the information processing device 100 then collects information from each terminal device 10 and provides each terminal device 10 with necessary information.
- the information processing system 1 may not include a server-side device.
- the information processing system 1 has a system configuration in which the main processing is executed on the user's terminal (client) side, and the server-side device only manages information related to monitoring, or the server-side device is not included.
- the configuration of a so-called autonomous decentralized system may be used.
- the information processing system 1 may have any configuration such as a centralized type or an autonomous decentralized type.
- the information processing system 1 may have any function division mode and any device configuration as long as it can provide the above-mentioned monitoring service. good.
- each component of each device shown in the drawings is functionally conceptual, and does not necessarily need to be physically configured as shown in the drawings.
- the specific form of distributing and integrating each device is not limited to what is shown in the diagram, and all or part of the devices can be functionally or physically distributed or integrated in arbitrary units depending on various loads and usage conditions. Can be integrated and configured.
- the information processing device includes an acquisition unit (the acquisition unit 131 in the embodiment) and a determination unit (the determination unit 133 in the embodiment). .
- the acquisition unit acquires first user information regarding a first user who is a user being watched over, and second user information regarding a second user who is a user watching over the first user.
- the determining unit determines the abstraction level of presentation information, which is information indicating the state of the first user, based on the first user information and the second user information.
- the information processing apparatus is based on the first user information regarding the first user who is the user being watched over, and the second user information regarding the second user who is the user watching over the first user.
- the level of abstraction of the presentation information which is information indicating the state of the first user
- the acquisition unit also acquires first user information including first input information input by the first user.
- the determining unit determines the abstraction level of the information presented by the first user based on the first input information. In this way, the information processing device can appropriately determine the abstraction level of the information by determining the abstraction level of the presentation information based on the first input information input by the first user.
- the acquisition unit also acquires first input information indicating the level of abstraction specified by the first user.
- the determining unit determines the level of abstraction of the information presented by the first user based on the level of abstraction indicated by the first input information. In this way, the information processing device can appropriately determine the abstraction level of the information by determining the abstraction level of the presentation information based on the level of abstraction specified by the first user.
- the acquisition unit also acquires first input information indicating an instruction by the first user to lower the level of abstraction.
- the determining unit lowers the level of abstraction of the information presented by the first user in response to the first user's instruction to lower the level of abstraction. In this way, the information processing device can appropriately determine the abstraction level of the information by lowering the abstraction level of the information presented by the first user in response to the first user's instruction to lower the abstraction level. .
- the acquisition unit also acquires first input information indicating an instruction to increase the level of abstraction by the first user.
- the determining unit increases the abstraction level of the first user's presentation information in response to the first user's instruction to increase the abstraction level. In this manner, the information processing device can appropriately determine the abstraction level of the information by increasing the abstraction level of the information presented by the first user in response to the first user's instruction to increase the abstraction level. .
- the acquisition unit also acquires first user information including first sensing information indicating the state of the first user detected by the sensor.
- the determining unit determines the abstraction level of the first user's presentation information based on the first sensing information. In this way, the information processing device can appropriately determine the abstraction level of the information by determining the abstraction level of the presentation information based on the first sensing information indicating the state of the first user detected by the sensor. can.
- the acquisition unit also acquires second user information including second input information input by the second user.
- the determining unit determines the abstraction level of the information presented by the second user based on the second input information. In this way, the information processing device can appropriately determine the abstraction level of the information by determining the abstraction level of the presentation information based on the second input information input by the second user.
- the acquisition unit also acquires second input information indicating the level of abstraction specified by the second user.
- the determining unit determines the level of abstraction of the information presented by the second user based on the level of abstraction indicated by the second input information. In this way, the information processing device can appropriately determine the abstraction level of the information by determining the abstraction level of the presentation information based on the level of abstraction specified by the second user.
- the acquisition unit also acquires second input information indicating an instruction by the second user to lower the level of abstraction.
- the determining unit lowers the level of abstraction of the information presented by the second user in response to the second user's instruction to lower the level of abstraction. In this way, the information processing device can appropriately determine the abstraction level of the information by lowering the abstraction level of the information presented by the second user in response to the second user's instruction to lower the abstraction level. .
- the acquisition unit also acquires second input information indicating an instruction by the second user to increase the level of abstraction.
- the determining unit increases the abstraction level of the information presented by the second user in response to the second user's instruction to increase the abstraction level. In this way, the information processing device can appropriately determine the abstraction level of the information by increasing the abstraction level of the information presented by the second user in response to the second user's instruction to increase the abstraction level. .
- the acquisition unit also acquires second user information including second sensing information indicating the state of the second user detected by the sensor.
- the determining unit determines the abstraction level of the information presented by the second user based on the second sensing information. In this way, the information processing device can appropriately determine the abstraction level of the information by determining the abstraction level of the presentation information based on the second sensing information indicating the state of the second user detected by the sensor. can.
- the determining unit also determines the level of abstraction when presenting the first user's presentation information to the second user, based on the first user information and the second user information. In this way, the information processing device can appropriately determine the abstraction level of the information by determining the abstraction level when presenting the presentation information to the second user.
- the determining unit also determines the level of abstraction when presenting the first user's presentation information to the first user, based on the first user information and the second user information. In this way, the information processing device can appropriately determine the abstraction level of the information by determining the abstraction level when presenting the presentation information to the first user.
- the determining unit determines the degree of abstraction of the first user's presented information in accordance with the protection nature of the first user's presented information determined based on the first user information and the second user information.
- the information processing device determines the degree of abstraction of the presentation information of the first user according to the protection nature of the presentation information determined based on the first user information and the second user information.
- the level of abstraction can be determined appropriately.
- the determining unit determines the amount of information of the first user's presentation information according to the attentionality of the first user's presentation information determined based on the first user information and the second user information. In this way, the information processing device determines the information amount of the first user's presentation information according to the attentionality of the presentation information determined based on the first user information and the second user information. can be determined appropriately.
- the determining unit also determines the resolution of the first user's presentation information in accordance with the responsiveness of the first user's presentation information determined based on the first user information and the second user information. In this way, the information processing device determines the resolution of the information presented by the first user according to the responsiveness of the presented information determined based on the first user information and the second user information. can be determined appropriately.
- the information processing device also includes an output unit (transmission unit 135 in the embodiment).
- the output unit outputs presentation information corresponding to the abstraction level determined by the determination unit. In this way, the information processing device can output information at an appropriate level of abstraction by outputting presentation information corresponding to the determined level of abstraction.
- the output unit transmits the presentation information corresponding to the abstraction level determined by the determination unit to the terminal device used by the second user.
- the information processing device can provide information at an appropriate level of abstraction by transmitting presentation information corresponding to the level of abstraction to the terminal device used by the second user.
- the output unit transmits the presentation information corresponding to the level of abstraction determined by the determination unit to the terminal device used by the first user.
- the information processing device can provide information at an appropriate level of abstraction by transmitting presentation information corresponding to the level of abstraction to the terminal device used by the first user.
- FIG. 16 is a hardware configuration diagram showing an example of a computer 1000 that implements the functions of an information processing device.
- the information processing device 100 according to the embodiment will be described below as an example.
- Computer 1000 has CPU 1100, RAM 1200, ROM (Read Only Memory) 1300, HDD (Hard Disk Drive) 1400, communication interface 1500, and input/output interface 1600. Each part of computer 1000 is connected by bus 1050.
- the CPU 1100 operates based on a program stored in the ROM 1300 or the HDD 1400 and controls each part. For example, the CPU 1100 loads programs stored in the ROM 1300 or HDD 1400 into the RAM 1200, and executes processes corresponding to various programs.
- the ROM 1300 stores boot programs such as BIOS (Basic Input Output System) that are executed by the CPU 1100 when the computer 1000 is started, programs that depend on the hardware of the computer 1000, and the like.
- BIOS Basic Input Output System
- the HDD 1400 is a computer-readable recording medium that non-temporarily records programs executed by the CPU 1100 and data used by the programs.
- HDD 1400 is a recording medium that records an information processing program according to the present disclosure, which is an example of program data 1450.
- the communication interface 1500 is an interface for connecting the computer 1000 to an external network 1550 (for example, the Internet).
- CPU 1100 receives data from other devices or transmits data generated by CPU 1100 to other devices via communication interface 1500.
- the input/output interface 1600 is an interface for connecting the input/output device 1650 and the computer 1000.
- the CPU 1100 receives data from an input device such as a keyboard or a mouse via the input/output interface 1600. Further, the CPU 1100 transmits data to an output device such as a display, speaker, or printer via an input/output interface 1600.
- the input/output interface 1600 may function as a media interface that reads programs and the like recorded on a predetermined recording medium.
- Media includes, for example, optical recording media such as DVD (Digital Versatile Disc) and PD (Phase change rewritable disk), magneto-optical recording media such as MO (Magneto-Optical disk), tape media, magnetic recording media, semiconductor memory, etc. It is.
- the CPU 1100 of the computer 1000 realizes the functions of the control unit 130 and the like by executing the information processing program loaded onto the RAM 1200.
- the HDD 1400 stores an information processing program according to the present disclosure and data in the storage unit 120. Note that although the CPU 1100 reads and executes the program data 1450 from the HDD 1400, as another example, these programs may be obtained from another device via the external network 1550.
- the present technology can also have the following configuration.
- an acquisition unit that acquires first user information regarding a first user who is a user being watched over, and second user information regarding a second user who is a user watching over the first user; a determining unit that determines the abstraction level of presentation information that is information indicating the state of the first user, based on the first user information and the second user information;
- An information processing device comprising: (2) The acquisition unit includes: obtaining the first user information including first input information input by the first user; The determining unit is The information processing device according to (1), wherein the degree of abstraction of the presentation information of the first user is determined based on the first input information.
- the acquisition unit includes: obtaining the first input information indicating the level of abstraction specified by the first user;
- the determining unit is The information processing device according to (2), wherein the level of abstraction of the presentation information of the first user is determined based on the level of abstraction indicated by the first input information.
- the acquisition unit includes: obtaining the first input information indicating an instruction by the first user to lower the level of abstraction;
- the determining unit is The information processing device according to (3), wherein the level of abstraction of the presentation information of the first user is lowered in response to an instruction by the first user to lower the level of abstraction.
- the acquisition unit includes: obtaining the first input information indicating an instruction by the first user to increase the level of abstraction;
- the determining unit is The information processing device according to (3) or (4), wherein the degree of abstraction of the presentation information of the first user is increased in response to an instruction by the first user to increase the level of abstraction.
- the acquisition unit includes: obtaining the first user information including first sensing information indicating the state of the first user detected by a sensor;
- the determining unit is The information processing device according to any one of (1) to (5), wherein the degree of abstraction of the presentation information of the first user is determined based on the first sensing information.
- the acquisition unit includes: obtaining the second user information including second input information input by the second user;
- the determining unit is The information processing device according to any one of (1) to (6), wherein the degree of abstraction of the presentation information of the second user is determined based on the second input information.
- the acquisition unit includes: obtaining the second input information indicating the level of abstraction specified by the second user;
- the determining unit is The information processing device according to (7), wherein the level of abstraction of the presentation information of the second user is determined based on the level of abstraction indicated by the second input information.
- the acquisition unit includes: obtaining the second input information indicating an instruction by the second user to lower the level of abstraction;
- the determining unit is The information processing device according to (8), wherein the level of abstraction of the presentation information of the second user is lowered in response to an instruction from the second user to lower the level of abstraction.
- the acquisition unit includes: obtaining the second input information indicating an instruction by the second user to increase the level of abstraction;
- the determining unit is The information processing device according to (8) or (9), wherein the degree of abstraction of the presentation information of the second user is increased in response to an instruction by the second user to increase the level of abstraction.
- the acquisition unit includes: obtaining the second user information including second sensing information indicating the state of the second user detected by a sensor;
- the determining unit is The information processing device according to any one of (1) to (10), wherein the abstraction level of the presentation information of the second user is determined based on the second sensing information.
- the determining unit is Determining the level of abstraction when presenting the presentation information of the first user to the second user based on the first user information and the second user information. Any one of (1) to (11).
- the information processing device described in . (13) The determining unit is Based on the first user information and the second user information, determine the abstraction level when presenting the presentation information of the first user to the first user. Any one of (1) to (12).
- the determining unit is Determining the degree of abstraction of the presentation information of the first user according to the protection nature of the presentation information of the first user determined based on the first user information and the second user information (1) The information processing device according to any one of (13).
- the determining unit is Determining the information amount of the presentation information of the first user according to the attentionality of the presentation information of the first user determined based on the first user information and the second user information (1) The information processing device according to any one of (14).
- the determining unit is Determining the resolution of the presentation information of the first user according to the responsiveness of the presentation information of the first user determined based on the first user information and the second user information (1) - ( 15) The information processing device according to any one of items 15) to 15).
- the output section is The information processing device according to (17), wherein the presentation information corresponding to the abstraction level determined by the determination unit is transmitted to a terminal device used by the second user.
- the output section is The information processing device according to (17) or (18), wherein the presentation information corresponding to the abstraction level determined by the determining unit is transmitted to a terminal device used by the first user.
- Information processing system 100 Information processing device 110 Communication unit 120 Storage unit 121 Data storage unit 122 User information storage unit 130 Control unit 131 Acquisition unit 132 Processing unit 133 Determination unit 134 Generation unit 135 Transmission unit 10 Terminal device (output device) 11 Communication section 12 Audio input section (input section) 13 Audio output section 14 Camera 15 Display section 16 Operation section (input section) 17 Storage unit 18 Control unit 181 Acquisition unit 182 Transmission unit 183 Receiving unit 184 Processing unit 20 Sensor device
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Computer Networks & Wireless Communication (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Multimedia (AREA)
- Alarm Systems (AREA)
Abstract
本開示に係る情報処理装置は、見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、前記第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とを取得する取得部と、前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの状態を示す情報である提示情報の抽象度を決定する決定部と、を備える。
Description
本開示は、情報処理装置及び情報処理方法に関する。
情報を用いたサービスの提供に関する技術が知られている。例えば、新たに出現する入出力リソースの追加を容易にする技術が知られている(例えば特許文献1)。
しかしながら、従来技術では、情報の抽象度を適切に決定することができるとは限らない。従来技術では、入出力リソースの追加が可能であるものの、情報の抽象度の点については考慮されておらず、例えば、従来技術では、情報の提供元の意思、または情報の提示先の意思等が反映されていない等、改善の余地がある。そのため、情報の抽象度を適切に決定することが望まれている。
そこで、本開示では、情報の抽象度を適切に決定することができる情報処理装置及び情報処理方法を提案する。
上記の課題を解決するために、本開示に係る一形態の情報処理装置は、見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、前記第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とを取得する取得部と、前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの状態を示す情報である提示情報の抽象度を決定する決定部と、を備える。
以下に、本開示の実施形態について図面に基づいて詳細に説明する。なお、この実施形態により本願にかかる情報処理装置及び情報処理方法が限定されるものではない。また、以下の各実施形態において、同一の部位には同一の符号を付することにより重複する説明を省略する。
以下に示す項目順序に従って本開示を説明する。
1.実施形態
1-1.本開示の実施形態に係る情報処理の概要
1-1-1.情報処理の流れ例
1-1-2.抽象度の決定処理例
1-1-3.情報の提示例
1-1-3-1.保護性・注目性・応答性
1-1-4.背景及び効果等
1-2.実施形態に係る情報処理システムの構成
1-3.実施形態に係る情報処理装置の構成
1-4.実施形態に係る端末装置の構成
1-5.実施形態に係る情報処理の手順
1-5-1.情報処理装置に係る処理の手順
1-5-2.提示内容の更新に関する処理の手順
1-6.情報処理システムに関する例
1-6-1.処理例
1-6-1-1.複数の抽象度
1-6-1-2.提示態様例
1-6-1-3.センシング及びデータ処理例
1-6-1-4.センシング及び情報の提示態様
1-6-1-5.提示機器及び提示内容例
1-6-2.システム構成例
1-6-3.情報の提示例
2.その他の実施形態
2-1.その他の構成例
2-2.その他
3.本開示に係る効果
4.ハードウェア構成
1.実施形態
1-1.本開示の実施形態に係る情報処理の概要
1-1-1.情報処理の流れ例
1-1-2.抽象度の決定処理例
1-1-3.情報の提示例
1-1-3-1.保護性・注目性・応答性
1-1-4.背景及び効果等
1-2.実施形態に係る情報処理システムの構成
1-3.実施形態に係る情報処理装置の構成
1-4.実施形態に係る端末装置の構成
1-5.実施形態に係る情報処理の手順
1-5-1.情報処理装置に係る処理の手順
1-5-2.提示内容の更新に関する処理の手順
1-6.情報処理システムに関する例
1-6-1.処理例
1-6-1-1.複数の抽象度
1-6-1-2.提示態様例
1-6-1-3.センシング及びデータ処理例
1-6-1-4.センシング及び情報の提示態様
1-6-1-5.提示機器及び提示内容例
1-6-2.システム構成例
1-6-3.情報の提示例
2.その他の実施形態
2-1.その他の構成例
2-2.その他
3.本開示に係る効果
4.ハードウェア構成
[1.実施形態]
[1-1.本開示の実施形態に係る情報処理の概要]
本開示の実施形態に係る情報処理は、情報処理システム1(図5参照)によって実現される。情報処理システム1の構成については後述するが、情報処理システム1は、見守られる側のユーザである第1ユーザ(「見守られる側ユーザ」ともいう)を見守る側のユーザである第2ユーザ(「見守る側ユーザ」ともいう)による見守りに関する処理を実行する。
[1-1.本開示の実施形態に係る情報処理の概要]
本開示の実施形態に係る情報処理は、情報処理システム1(図5参照)によって実現される。情報処理システム1の構成については後述するが、情報処理システム1は、見守られる側のユーザである第1ユーザ(「見守られる側ユーザ」ともいう)を見守る側のユーザである第2ユーザ(「見守る側ユーザ」ともいう)による見守りに関する処理を実行する。
以下では、介護施設(高齢者施設)等で生活する高齢者を第1ユーザ(見守られる側ユーザ)とし、その高齢者の家族を第2ユーザ(見守る側ユーザ)として説明する。なお、第1ユーザ及び第2ユーザは一例に過ぎず、第1ユーザと第2ユーザとの関係性は、家族関係の有るユーザに限られない。すなわち、第1ユーザ及び第2ユーザは、見守る側へ情報が提供される側(見守られる側)と見守られる側の情報の提示を受ける側(見守る側)の関係性があればどのようなユーザであってもよい。
ここから、図1~図4を参照しつつ、情報処理システム1が実行する情報処理の概要について説明する。
[1-1-1.情報処理の流れ例]
まず、図1を用いて情報処理の流れについて説明する。図1は、本開示の実施形態に係る情報処理の一例を示す図である。以下では、情報処理装置100が第1ユーザであるユーザU1に関する情報を提示情報として提示する際の抽象度を決定する場合を一例として説明する。
まず、図1を用いて情報処理の流れについて説明する。図1は、本開示の実施形態に係る情報処理の一例を示す図である。以下では、情報処理装置100が第1ユーザであるユーザU1に関する情報を提示情報として提示する際の抽象度を決定する場合を一例として説明する。
提示情報の例等の詳細については図4で説明するが、提示情報は、センサ装置20a(図5参照)による第1ユーザ(見守られる側ユーザ)についてのセンシング(検知)に基づく情報である。例えば、提示情報は、第1ユーザを撮影した映像(「画像」ともいう)等に基づく情報である。図1では、提示情報は、高齢者であるユーザU1を撮像した画像に基づく画像であってもよい。なお、上記は一例に過ぎず、提示情報は、第1ユーザの状態を提示する情報であれば、どのような情報であってもよい。例えば、提示情報は、高齢者の周囲の音声(高齢者の活動音、介護者との会話等)を検知した音声情報等、第1ユーザの周囲の音声を検知した音声情報等に基づく情報であってもよい。
本開示の実施形態に係る情報処理は、情報処理装置100や複数のセンサ装置20や複数の端末装置10を含む情報処理システム1によって実現される。図1では、端末装置10aは、第1ユーザであるユーザU1に利用される端末装置10であり、端末装置10bは、ユーザU1を見守る第2ユーザであるユーザU2に利用される端末装置10である。
図1では、第1ユーザが入力した第1入力情報を第1ユーザ情報とし、第2ユーザが入力した第2入力情報を第2ユーザ情報として、情報処理装置100が第1ユーザ及び第2ユーザに共通のマスクレベルを抽象度として決定する場合を説明する。例えば、決定した抽象度であるマスクレベルは、情報を提示する際にその情報をどの程度抽象化するかを決定するために用いられる。また、図1では、情報処理装置100は、第1ユーザであるユーザU1が入力した抽象度の初期値、抽象度を上下させる指示を第1入力情報として抽象度を決定する。また、情報処理装置100は、第2ユーザであるユーザU2が入力した抽象度の初期値、抽象度を上下させる指示を第2入力情報として抽象度を決定する。
なお、抽象度は、第1ユーザと第2ユーザとで個別に決定されてもよいが、この点についての詳細は後述する。また、抽象度の決定に用いる第1ユーザ情報は、第1ユーザが入力した第1入力情報に限らず、センサ装置20aにより検知(センシング)された情報(第1センシング情報)であってもよい。第2ユーザ情報は、第2ユーザが入力した第2入力情報に限らず、センサ装置20b(図5参照)により検知(センシング)された情報(第2センシング情報)であってもよい。
ここから、図1に示す処理の流れについて説明する。情報処理装置100は、見守られる側のユーザU1が指定するマスクレベルの初期値(「第1初期値」ともいう)を取得する(ステップS11)。例えば、第1初期値は、見守られる側の設定したマスクレベルの初期値であり、図2及び図3で示す「MLinitial_elder」に対応する。ユーザU1は、端末装置10aを操作して端末装置10aに第1初期値を入力し、端末装置10aに第1初期値を送信させる。これにより、端末装置10aは、ユーザU1により入力された第1初期値を情報処理装置100へ送信し、情報処理装置100は、第1初期値を端末装置10aから受信する。
また、情報処理装置100は、見守られる側のユーザU2が指定するマスクレベルの初期値(「第2初期値」ともいう)を取得する(ステップS12)。例えば、第2初期値は、見守る側の設定したマスクレベルの初期値であり、図2及び図3で示す「MLinitial_younger」に対応する。ユーザU2は、端末装置10bを操作して端末装置10bに第2初期値を入力し、端末装置10bに第2初期値を送信させる。これにより、端末装置10bは、ユーザU2により入力された第2初期値を情報処理装置100へ送信し、情報処理装置100は、第2初期値を端末装置10bから受信する。なお、ステップS11、S12は、処理を説明するための便宜的な符号であり、ステップS11の処理よりも先にステップS12の処理が行われてもよい。
情報処理装置100は、ユーザ情報に基づいて、第1ユーザの状態を示す情報である提示情報の抽象度を決定する(ステップS13)。情報処理装置100は、第1ユーザ情報である第1初期値に基づいて、第1ユーザを撮影した画像のマスクレベルを決定する。例えば、情報処理装置100は、以下の式(1)に示すように、第1ユーザが指定した第1初期値を基に抽象度(マスクレベル)を決定する。
式(1)中のML(0)は、時刻0(図2中の原点(t0)に対応)でのマスクレベルに対応する。また、式(1)中のML(1)は、時刻1(時刻0より後の時刻)でのマスクレベルに対応する。式(1)中の「MLinitial_elder」は、見守られる側の設定したマスクレベルの第1初期値に対応する。
そして、情報処理装置100は、決定した抽象度に対応する提示情報を出力する(ステップS14、S15)。情報処理装置100は、決定したマスクレベルに対応する提示情報を生成し、生成した提示情報を端末装置10へ送信する。例えば、情報処理装置100は、第1初期値のマスクレベルで抽象化したコンテンツ(例えば図4中のコンテンツCT11)を提示情報として生成し、生成したコンテンツを端末装置10a及び端末装置10bへ送信する。なお、ステップS14、S15は、処理を説明するための便宜的な符号であり、ステップS14の処理及びステップS15の処理はいずれが先に行われてもよし、同時に行われてもよい。
そして、情報処理装置100は、ユーザU1によるマスクレベルを変更する指示を、ユーザU1からのフィードバック(「第1フィードバック」ともいう)として取得する(ステップS16)。例えば、第1フィードバックは、見守られる側からのフィードバック(マスクレベルの上下の指示)であり、図2及び図3で示す「FB(t)elder」に対応する。ユーザU1は、端末装置10aを操作して端末装置10aに第1フィードバックを入力し、端末装置10aに第1フィードバックを送信させる。これにより、端末装置10aは、ユーザU1により入力された第1フィードバックを情報処理装置100へ送信し、情報処理装置100は、第1フィードバックを端末装置10aから受信する。
また、情報処理装置100は、ユーザU2によるマスクレベルを変更する指示を、ユーザU2からのフィードバック(「第2フィードバック」ともいう)として取得する(ステップS17)。例えば、第2フィードバックは、見守る側からのフィードバック(マスクレベルの上下の指示)であり、図2及び図3で示す「FB(t)younger」に対応する。ユーザU2は、端末装置10bを操作して端末装置10bに第2フィードバックを入力し、端末装置10bに第2フィードバックを送信させる。これにより、端末装置10bは、ユーザU2により入力された第2フィードバックを情報処理装置100へ送信し、情報処理装置100は、第2フィードバックを端末装置10bから受信する。なお、ステップS16、S17は、処理を説明するための便宜的な符号であり、ステップS16の処理よりも先にステップS17の処理が行われてもよい。
情報処理装置100は、第1ユーザ情報と第2ユーザ情報とに基づいて、提示情報の抽象度を決定する(ステップS18)。情報処理装置100は、第1ユーザ情報である第1フィードバックと、第2ユーザ情報である第2フィードバックとに基づいて、第1ユーザを撮影した画像のマスクレベルを決定する。例えば、情報処理装置100は、以下の式(2)に示すように、第1ユーザからの第1フィードバック、及び第2ユーザからの第2フィードバックを基に抽象度(マスクレベル)を決定(更新)する。
式(2)中のML(t+2)は、時刻t+2でのマスクレベルに対応する。また、式(2)中の「MLinitial_elder」は、見守られる側の設定したマスクレベルの第1初期値に対応する。式(2)中の「β(t+1)younger」は、時刻t+1での見守る側のフィードバック(第2フィードバック)の重みづけ係数(「第2重みづけ係数」ともいう)に対応する。なお、第2重みづけ係数は、時刻に依らず一定の値であってもよい。式(2)中の「FB(t+1)younger」は、時刻t+1での見守る側のフィードバックに対応する。
また、式(2)中の「α(t)elder」は、時刻tでの見守られる側のフィードバック(第1フィードバック)の重みづけ係数(「第1重みづけ係数」ともいう)に対応する。なお、第1重みづけ係数は、時刻に依らず一定の値であってもよい。式(2)中の「FB(t)elder」は、時刻tでの見守られる側のフィードバックに対応する。
そして、情報処理装置100は、更新した抽象度に対応する提示情報を出力する。情報処理装置100は、更新したマスクレベルに対応する提示情報を生成し、生成した提示情報を端末装置10へ送信する。例えば、情報処理装置100は、式(2)で算出したマスクレベルで抽象化したコンテンツ(例えば図4中のコンテンツCT13)を提示情報として生成し、生成したコンテンツを端末装置10a及び端末装置10bへ送信する。例えば、第1ユーザ及び第2ユーザからのフィードバックに応じて、情報処理装置100は、ステップS18での抽象度の決定(更新)、決定(更新)した抽象度に基づく提示情報の出力を繰り返す。
このように、情報処理装置100は、第1ユーザ情報と第2ユーザ情報とに基づいて、提示情報の抽象度を決定することにより、情報の抽象度を適切に決定することができる。
[1-1-2.抽象度の決定処理例]
ここから、図2及び図3を用いて、抽象度の決定処理の一例を説明する。図2は、情報処理システムにおける抽象度の決定処理の一例を示す図である。図3は、抽象度の決定に用いる関数に関する情報の一例を示す図である。なお、図1で説明した内容と同様の点については適宜説明を省略する。例えば、図3に示す各要素は、上述した式(1)及び式(2)で説明したものと同様であるため説明を省略する。
ここから、図2及び図3を用いて、抽象度の決定処理の一例を説明する。図2は、情報処理システムにおける抽象度の決定処理の一例を示す図である。図3は、抽象度の決定に用いる関数に関する情報の一例を示す図である。なお、図1で説明した内容と同様の点については適宜説明を省略する。例えば、図3に示す各要素は、上述した式(1)及び式(2)で説明したものと同様であるため説明を省略する。
図2中のグラフGR1は、情報処理装置100により決定されるユーザU1の提示情報を対象としたマスクレベル(抽象度)の時間経過(時系列)に沿った変化を示す。グラフGR1の縦軸は、情報のマスクレベル、すなわち抽象度を示す。また、グラフGR1の横軸は、時間を示す。
グラフGR1中の「MLinitial_elder」は、見守られる側の設定したマスクレベルの初期値に対応する。グラフGR1中の「MLinitial_younger」は、見守る側の設定したマスクレベルの初期値に対応する。
グラフGR1中の線LN1は、見守られる側及び見守る側の入力によって提示のマスクレベルが定常振動する場合を示す。この場合、情報処理装置100は、見守られる側の求めるマスクレベル(抽象度)でマスクレベルを決定し、決定したマスクレベルを基に情報を提示する。
また、グラフGR1中の線LN2は、見守られる側及び見守る側の入力によって提示のマスクレベルが減衰振動する場合を示す。この場合、情報処理装置100は、マスクレベル(抽象度)を収束させるようにマスクレベルを決定し、決定したマスクレベルを基に情報を提示する。
例えば、情報処理装置100は、見守られる側の伝えたい程度と、見守る側の見たい程度が極端に異なる場合、極端に情報をマスクするユーザの要求に合わせて初期状態を設定する。そして、情報処理装置100は、徐々にマスクを外していった際のユーザからのフィードバックをもとに提示内容を調整する。
例えば、情報処理装置100は、見守られる側が情報を伝えたくなく、見守る側が情報を知りたい場合、以下の処理#1-1~処理#1~4を行う。
処理#1-1.見守られる側に合わせて両ユーザへ高いマスクレベルで提示
処理#1-2.見守る側の入力をもとに、マスクレベルを下げて提示
処理#1-3.見守られる側の入力をもとにマスクレベルを上げて提示
処理#1-4.処理#1-2、#1-3のループを回し、マスクレベルを収束させる
処理#1-2.見守る側の入力をもとに、マスクレベルを下げて提示
処理#1-3.見守られる側の入力をもとにマスクレベルを上げて提示
処理#1-4.処理#1-2、#1-3のループを回し、マスクレベルを収束させる
例えば、情報処理装置100は、時刻tに見守られる側及び見守る側のユーザへ提示するマスクレベルML(t)を、上述した式(1)または式(2)を用いて決定する。このように、情報処理装置100は、見守られる側及び見守る側のユーザに提示するマスクレベルを調整し、見守られる側及び見守る側のユーザの双方に同マスクレベルの情報を提示する。
例えば、情報処理装置100は、あらかじめ設定、もしくは互いの関係性、パーソナリティ、見守られる側の症状の程度等を加味した重みづけを、見守られる側及び見守る側のフィードバックにかけ合わせ、加算、減算、平均値を用いてマスクレベルを変動させる。これにより、情報処理装置100は、自律的かつ動的に提示するマスクレベルを調整することができる。このように、情報処理システム1は、個人化と局所最適化により、見守る側と見守られる側の提示に関するマッチングを自律的に実施することができる。
[1-1-3.情報の提示例]
次に、図4を用いて情報の提示の一例について説明する。図4は、情報処理システムにおける情報の提示処理の一例を示す図である。例えば、情報処理装置100は、決定した抽象度を基にコンテンツCT11~CT13の少なくとも1つを提示情報として生成する。情報処理装置100は、生成したコンテンツCT11~CT13の少なくとも1つを提示情報として端末装置10へ送信する。端末装置10は、提示情報として受信したコンテンツCT11~CT13のいずれかを表示する。なお、上述した内容と同様の点については適宜説明を省略する。
次に、図4を用いて情報の提示の一例について説明する。図4は、情報処理システムにおける情報の提示処理の一例を示す図である。例えば、情報処理装置100は、決定した抽象度を基にコンテンツCT11~CT13の少なくとも1つを提示情報として生成する。情報処理装置100は、生成したコンテンツCT11~CT13の少なくとも1つを提示情報として端末装置10へ送信する。端末装置10は、提示情報として受信したコンテンツCT11~CT13のいずれかを表示する。なお、上述した内容と同様の点については適宜説明を省略する。
[1-1-3-1.保護性・注目性・応答性]
図4中のコンテンツCT11~CT13は、提示情報の一例を示す。図4中のコンテンツCT11~CT13は、保護性の高低に応じた提示情報の変化の一例を示す。
図4中のコンテンツCT11~CT13は、提示情報の一例を示す。図4中のコンテンツCT11~CT13は、保護性の高低に応じた提示情報の変化の一例を示す。
例えば、コンテンツCT11は、保護性が高い場合に提示される提示情報の一例を示す。コンテンツCT11では、山を模したオブジェクトOB1が見守られる側ユーザ(第1ユーザ)に対応する。このように、情報処理システム1では、保護性が高い場合、抽象度を高くした状態で第1ユーザを表現する。
また、コンテンツCT12は、保護性が中程度の場合に提示される提示情報の一例を示す。コンテンツCT12では、花を模したオブジェクトOB2が見守られる側ユーザ(第1ユーザ)に対応する。このように、情報処理システム1では、保護性が中程度の場合、抽象度を中程度にした状態で第1ユーザを表現する。
また、コンテンツCT13は、保護性が低い場合に提示される提示情報の一例を示す。コンテンツCT13では、人を模したオブジェクトOB3が見守られる側ユーザ(第1ユーザ)に対応する。このように、情報処理システム1では、保護性が低い場合、抽象度を低くした状態で第1ユーザを表現する。なお、コンテンツCT13中のオブジェクトOB3は、アバター等の仮想キャラクタであってもよいし、第1ユーザを撮影した画像自体であってもよい。
図4に示すように、保護性は抽象度に対応し、抽象度(マスクレベル)が高い程保護性が高くなる。情報処理装置100は、決定した抽象度(マスクレベル)が高い程、保護性が高い提示情報を生成する。例えば、情報処理装置100は、決定した抽象度が第1閾値以上である場合、保護性が高いコンテンツCT11を提示情報として生成する。例えば、情報処理装置100は、決定した抽象度が第1閾値未満、かつ第2閾値以上である場合、保護性が中程度のコンテンツCT12を提示情報として生成する。なお、第2閾値は、第1閾値よりも小さい値である。例えば、情報処理装置100は、決定した抽象度が第2閾値未満である場合、保護性が引くコンテンツCT13を提示情報として生成する。
上記のように、保護性は、プライバシー開示の許容度合いに対応し、提示するコンテンツ全体の抽象度に対応する。例えば、情報処理装置100は、保護性が高い場合、抽象画を提示情報として生成する。また、情報処理装置100は、保護性が中程度である場合、イラストを提示情報として生成する。また、情報処理装置100は、保護性が低い場合、アバター、顔だけ実写等を提示情報として生成する。
上述したように、情報処理装置100は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した第1ユーザの提示情報の保護性に応じて、第1ユーザの提示情報の抽象度を決定する。なお、上記は一例に過ぎず、情報処理装置100は、保護性を様々な用途に用いてもよい。例えば、保護性は、プライバシー開示の許容度合いに対応し、描画するテーマに対応する。例えば、情報処理装置100は、保護性を基に、イラストや映像のテイスト、物理的な透過度やマスク領域における、具体性・視認性等を決定してもよい。
また、情報処理装置100は、注目度に応じて提示情報を生成してもよい。情報処理装置100は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した第1ユーザの提示情報の注目性に応じて、第1ユーザの提示情報の情報量を決定する。例えば、注目性は、ユーザの見たい度合い及び伝えたい度合いに対応し、提示情報中のオブジェクトコンテンツ(単に「オブジェクト」ともいう)の種類と数に対応する。例えば、注目性は、イラスト、サウンド、ハプティックにおける種類に対応する。
例えば、情報処理装置100は、注目性が高い程、オブジェクトの数を多くする。図4中のコンテンツCT12は、注目度が高い場合に提示される提示情報の一例を示す。コンテンツCT12では、第1ユーザに対応するオブジェクトOB2以外に、複数のオブジェクトSB1~SB5が含まれる。このように、情報処理システム1では、注目度が高い場合、第1ユーザに対応するオブジェクト以外の他のオブジェクトの数を多くする。
図4中のオブジェクトSB1は、花をつつく鳥を模したオブジェクトコンテンツである。図4中のオブジェクトSB2は、じょうろを模したオブジェクトコンテンツである。図4中のオブジェクトSB3は、風を模したオブジェクトコンテンツである。図4中のオブジェクトSB4は、蝶を模したオブジェクトコンテンツである。図4中のオブジェクトSB5は、蝶の移動軌跡を示すオブジェクトコンテンツである。
また、情報処理装置100は、注目性が低い程、オブジェクトの数を少なくする。図4中のコンテンツCT13は、注目度が低い場合に提示される提示情報の一例を示す。コンテンツCT13では、第1ユーザに対応するオブジェクトOB3のみが含まれる。このように、情報処理システム1では、注目度が低い場合、第1ユーザに対応するオブジェクト以外の他のオブジェクトの数を少なくする。なお、注目度は、情報処理装置100が第1ユーザ情報または第2ユーザ情報を用いて決定してもよいし、予め設定されてもよい。
上記のように、注目性は、ユーザの見たい度合い及び伝えたい度合いに対応し、イベントを励起させるオブジェクトに対応する。例えば、情報処理装置100は、保護性が中程度でイラストの場合、以下のような態様により情報を提示する。
・花をつつく鳥、蜂:negativeな関係者との会話
・別の花、蝶:positiveな関係者との会話
・じょうろ:食事・入浴
・弱い風:活動量が少ない
・強い風:活動量が多い
・別の花、蝶:positiveな関係者との会話
・じょうろ:食事・入浴
・弱い風:活動量が少ない
・強い風:活動量が多い
また、情報処理装置100は、応答性に応じて提示情報を生成してもよい。情報処理装置100は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した第1ユーザの提示情報の応答性に応じて、第1ユーザの提示情報の分解能を決定する。例えば、応答性は、イベント発生から表示内容を変化させるまでの時間に対応する。情報処理装置100は、応答性を、コンテンツのエフェクトにおける時間的・空間的分解能に対応させる。例えば、情報処理装置100は、ロボットの動作、曲、イラストや物体の形状変化における、速さや種類等を、応答性に基づいて決定する。例えば、情報処理装置100は、応答性が高い程、コンテンツのフレームレートを高くする。例えば、情報処理装置100は、応答性が低い程、コンテンツのフレームレートを低くする。
上記のように、情報処理装置100は、応答性に基づいて、イベント発生から表示内容を変化させるまでの時間を、オブジェクトのエフェクトに対する時間に対応させる。例えば、情報処理装置100は、保護性が中程度でイラストの場合、応答性が高ければ、時間分解能高くして、エフェクト変化のフレームレート高くして、グラデーション変化させてもよい。また、情報処理装置100は、応答性が低ければ、時間分解能を低くして、エフェクト変化のフレームレート低くして、表示と非表示との切り替えを行ってもよい。なお、応答性は、情報処理装置100が第1ユーザ情報または第2ユーザ情報を用いて決定してもよいし、予め設定されてもよい。
上述したように、情報処理装置100は、データと提示方法のマッピングを行う、なお、情報処理装置100は、保護性、注目性、応答性のレベルを、ユーザの操作やリアクションのログ等をもとに高いレベルからもとに下げていってもよい。また、情報処理装置100は、保護性、注目性、応答性のレベルを、ユーザの手動での事前設定により決定してもよい。また、情報処理装置100は、保護性、注目性、応答性のレベルを、他のユーザの利用状況に基づいた初期値の提案などにより調整してもよい。
例えば、情報処理装置100は、ユーザが情報を提示する機器(「提示機器」ともいう)の視界に入る、近づく等した場合、ユーザのモチベーションを低いと判断し、提示情報をより曖昧にする(抽象度を高くする)。また、例えば、情報処理装置100は、ユーザが提示機器を注視する、発話やジェスチャ、音声や手で操作する等した場合、ユーザのモチベーションを高いと判断し、提示情報をより詳細にしたり、イベントをループ再生したりしてもよい。また、情報処理システム1は、保護性のイラスト、注目性のオブジェクト、応答性のエフェクトなどについて、ユーザが自ら作成したコンテンツも個別に登録可能としてもよい。
なお、情報処理システム1は、抽象度の変化に応じてコンテンツを連続的に変化させてもよい。図4では、情報処理システム1は、抽象度の変化に応じてコンテンツC11、CT12、CT13を連続的に変化させてもよい。例えば、情報処理システム1は、抽象度が高くなっていく場合、コンテンツC11、コンテンツCT12、コンテンツCT13の順に変換するように連続的に変化させてもよい。例えば、情報処理システム1は、抽象度が低くなっていく場合、コンテンツC13、コンテンツCT12、コンテンツCT11の順に変換するように連続的に変化させてもよい。
例えば、情報処理システム1は、コンテンツCT11からコンテンツCT12に連続的に変化する場合、山のオブジェクトOB1一部をズームしてもよい。この場合、情報処理システム1は、山のオブジェクトOB1一部をズームした箇所にコンテンツCT12が位置するように表示を連続的に変化させてもよい。
また、例えば、情報処理システム1は、コンテンツCT12からコンテンツCT13に連続的に変化する場合、花のオブジェクトOB2に人のオブジェクトOB3を重畳させてもよい。この場合、情報処理システム1は、花のオブジェクトOB2が人のオブジェクトOB3に変化するように表示を連続的に変化させてもよい。
上記のように、情報処理システム1は、拡大・縮小、重畳、モーフィング等によって有機的に接続して表示を変化させてもよい。情報処理システム1は、連続的または離散的のいずれの態様により表示を変化させてもよい。
上述したように、情報処理システム1は、見守る側、見守られる側の意図に応じてコンテンツのマッチングを測ることで、互いに最適な知りたい及び知らせたい程度が反映された情報を伝えることができる。また、情報処理システム1は、簡便な操作と提示コンテンツのリアリティ排除により、日常生活との親和性が高いインターフェイスを実現することができる。
[1-1-4.背景及び効果等]
高齢者施設で暮らす親を離れて暮らす子が見守る従来のシステムでは、見る側、見られる側の下記条件を考慮しない場合、お互いのユーザにとって不快で使い勝手が悪くなる場合がある。例えば、見守る側の条件は、見られる側の状態、見られる側との関係性、見る側の認知コスト等がある。また、見守られる側条件は、見られる側の求めるプライバシーの保護レベル、伝えたい情報の粒度等がある。
高齢者施設で暮らす親を離れて暮らす子が見守る従来のシステムでは、見る側、見られる側の下記条件を考慮しない場合、お互いのユーザにとって不快で使い勝手が悪くなる場合がある。例えば、見守る側の条件は、見られる側の状態、見られる側との関係性、見る側の認知コスト等がある。また、見守られる側条件は、見られる側の求めるプライバシーの保護レベル、伝えたい情報の粒度等がある。
例えば、従来のシステムでは、見守る側にとって知りたい程度、見守られる側にとって知られて良い程度のマッチングがユーザ毎に取られておらず、互いのユーザが望んでいる内容・提示方法を両立していないため、個人化がされていない。また、従来のシステムでは、見守り行為の具体性とプライバシー保護の抽象性を両立するアンビエントな表示を動的に生成していないため、局所最適化がされていない。
そこで、情報処理システム1は、見守る側の知りたい、見守られる側の伝えたい程度を基に、データと提示方法のマッピングを動的に変更することで、互いのユーザに対して提示を個別最適化する。例えば、情報処理システム1は、施設内のセンサと予定表をはじめとするシーン情報を組み合わせ、フィルタリングと変換の次元圧縮をし、表示内容を変更する。例えば、情報処理システム1は、ユーザからの明示的な入力または非明示的な入力をもとに、提示情報の性質と量を個別化する。
情報処理システム1では、環境設置のセンサ装置20のセンシングにより、運動量、ドアの開け閉め、家電の操作回数等を検知する。また、情報処理システム1では、装着機器のセンサ装置20のセンシングにより、運動量、バイタル、発話内容等を検知する。
情報処理システム1は、データ処理を行う。情報処理システム1は、ダウンサンプリング、バンドパスフィルタ、外れ値除去、クラスタリング等のフィルタリングを行う。情報処理システム1は、変化の有無、他者との差分、特筆すべきアラートへの次元圧縮等の変換を行う。
情報処理システム1は、見る側、見られる側に応じた、データと提示方法のマッピングを行う。情報処理システム1は、プライバシー開示の許容度合いを示す保護性に基づく提示情報を提示する。情報処理システム1は、見守られる側にとって見守る側へどの程度情報を見せて良いかを調整する。
また、情報処理システム1は、ユーザの見たい・伝えたい度合いを示す注目性に基づく提示情報を提示する。情報処理システム1は、見守る側及び見守られる側がどの情報を見たい・伝えたいかを調整する。
また、情報処理システム1は、イベント発生から表示内容を変化させるまでの時間を示す応答性に基づく提示情報を提示する。情報処理システム1は、見守る側及び見守られる側がどの程度早く情報を知りたい・見たいかを調整する。
これにより、情報処理システム1は、見守る側の「知りたい」、見守られる側の「伝えたい」程度等に基づいて、お互いのモチベーションに最適化されたコミュニケーションが可能となる。情報処理システム1は、介護施設の入居者(見守られる側)と家族(見守る側)とのコミュニケーションを促すための、快適で使い勝手の良い提示・操作を提供することができる。例えば、情報処理システム1は、見守られる側の伝えてよいレベル感と見守る側の伝えて欲しいレベル感のマッチングをとり、アンビエント表現のための情報のマッピング方法を動的に変更する。これにより、情報処理システム1は、見られる側の状態、見られる側との関係性、見る側の認知コスト等、提示される情報を見る側のモチベーションに最適化できる。また、情報処理システム1は、見られる側の求めるプライバシーの保護レベルや伝えたい情報の粒度等、見られる側のモチベーションに最適化できる。
例えば、情報処理システム1は、センシング、データ処理、提示(描画更新)のループを構築する。情報処理システム1は、提示における保護性、注目性、応答性について、見守られる側、見守る側の入力をもとにマッチングを行い、動的に変更する。情報処理システム1において、ユーザからの入力は、ユーザの振る舞いに基づく程度の推定、ユーザからの直接的な操作によって行う。情報処理システム1における互いのユーザへの提示は、各々に同一内容の提示であってもよいし、異なる内容の提示であってもよいし、お互いの内容を重畳した提示であってもよい。
上述したように、情報処理システム1は、計測・取得されたデータと提示内容のマッピングを機器が自律的かつ動的に変更し、見守る側の知りたい、見守られる側の伝えたい程度のマッチングをとって提示内容を個別化かつ局所最適化する。これにより、情報処理システム1は、見守る側、見守られる側のユーザにとって互いに使い勝手の良いインターフェイスを実現することができる。
また、情報処理システム1は、提示における見られる側、見る側の保護性、注目性、応答性のマッチングの個別化に必要な入力は、互いのユーザの振る舞いに基づく程度の推定、ユーザからの直接的な操作によって行う。これにより、情報処理システム1は、機器による自律的かつ動的な提示内容の精度を向上させることができる。
また、情報処理システム1は、ユーザと周辺環境をセンシングするユニット、および情報を提示するユニットをユーザおよび環境毎に組み換え可能な構成とする。これにより、情報処理システム1は、ユーザ毎に異なる性格、思想、身体的特徴へ幅広く対応することができる。
[1-2.実施形態に係る情報処理システムの構成]
図5に示す情報処理システム1について説明する。図5は、実施形態に係る情報処理システムの構成例を示す図である。図5に示すように、情報処理システム1は、情報処理装置100、端末装置10a、端末装置10b、センサ装置20a、及びセンサ装置20bが含まれる。
図5に示す情報処理システム1について説明する。図5は、実施形態に係る情報処理システムの構成例を示す図である。図5に示すように、情報処理システム1は、情報処理装置100、端末装置10a、端末装置10b、センサ装置20a、及びセンサ装置20bが含まれる。
なお、端末装置10a及び端末装置10bについて、特に区別せずに説明する場合は、「端末装置10」と記載する。また、図1では、2つの端末装置10を図示するが、端末装置10は3つ以上あってもよい。また、センサ装置20a及びセンサ装置20bについて、特に区別せずに説明する場合は、「センサ装置20」と記載する。また、図1では、2つのセンサ装置20を図示するが、センサ装置20は3つ以上あってもよい。
端末装置10a及びセンサ装置20aは、見守られる側で用いられる装置に対応する。例えば、端末装置10aは、第1ユーザ(見守られる側ユーザ)が利用する端末装置10であり、センサ装置20aは、第1ユーザに関するセンシングを行うセンサ装置20である。
端末装置10b及びセンサ装置20bは、見守る側で用いられる装置に対応する。例えば、端末装置10bは、第2ユーザ(見守る側ユーザ)が利用する端末装置10であり、センサ装置20bは、第2ユーザに関するセンシングを行うセンサ装置20である。
情報処理装置100と、端末装置10と、センサ装置20とは所定の通信網(ネットワークN)を介して、有線または無線により通信可能に接続される。また、図5に示した情報処理システム1には、複数の情報処理装置100が含まれてもよい。
情報処理装置100は、情報の抽象度の決定に関する処理を実行するコンピュータ処理装置である。情報処理装置100は、見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とに基づいて、第1ユーザの状態を示す情報である提示情報の抽象度を決定する。例えば、情報処理装置100は、見守りに関する各種サービスを提供するために用いられる。例えば、情報処理装置100は、見守られる側ユーザの遠隔監視(見守り)サービスを提供する。
また、情報処理装置100は、音声認識の機能を有する。例えば、情報処理装置100は、自然言語理解(NLU)や自動音声認識(ASR:Automatic Speech Recognition)の機能を有する。情報処理装置100は、音声信号処理や音声認識や発話意味解析や対話制御等のソフトウェアモジュールを有してもよい。例えば、情報処理装置100は、ユーザの発話をテキスト化し、テキスト化された発話(すなわち発話の文字情報)を用いて、ユーザの発話内容を推定してもよい。なお、情報処理装置100は、自然言語理解や自動音声認識の機能を有する音声認識サーバと通信し、音声認識サーバがテキスト化した発話や、推定した発話内容を示す情報を音声認識サーバから取得してもよい。
端末装置10は、ユーザが利用するコンピュータである。端末装置10は、見守りに関する情報を出力する。端末装置10は、見守られる側ユーザの情報を出力する。端末装置10は、見守られる側ユーザに関する画像(映像)を表示し、見守られる側ユーザに関する音声を音声出力する。例えば、端末装置10は、ユーザの発話や画像(映像)を情報処理装置100へ送信し、情報処理装置100から見守られる側ユーザの音声や画像(映像)を受信する。
端末装置10は、ユーザによる入力を受け付ける。端末装置10は、ユーザの発話による音声入力や、ユーザの操作による入力を受け付ける。端末装置10は、ユーザによる抽象度のレベルの指定を受け付ける。端末装置10は、実施形態における処理を実現可能であれば、どのような装置であってもよい。端末装置10は、見守りの情報表示や音声出力等を行う機能を有する構成であれば、どのような装置であってもよい。例えば、端末装置10は、ノート型PC(Personal Computer)、タブレット型端末、デスクトップPC、スマートフォン、スマートスピーカ、テレビ、携帯電話機、PDA(Personal Digital Assistant)等の装置であってもよい。
また、端末装置10は、自然言語理解や自動音声認識等の音声認識の機能を有してもよい。例えば、端末装置10は、ユーザの発話をテキスト化し、テキスト化された発話(すなわち発話の文字情報)を用いて、ユーザの発話内容を推定してもよい。
センサ装置20は、種々のセンサ情報を検知する。センサ装置20は、ユーザについてのセンシングを行う。例えば、センサ装置20は、ユーザが位置する空間に設けられる。例えば、センサ装置20aは、第1ユーザ(見守られる側ユーザ)が高齢者施設に入居する高齢者である場合、その高齢者が居住する高齢者施設に設けられる。センサ装置20は、ユーザが身に着ける装置であってもよい。例えば、センサ装置20は、ユーザが手首などに装着したり、首から下げたりする装置であってもよい。
センサ装置20は、音を検知する音センサ(マイク)を有する。例えば、センサ装置20は、音センサにより、ユーザの発話を検知する。センサ装置20は、ユーザの発話に限らず、センサ装置20の周囲の環境音等を収集する。また、センサ装置20は、音センサに限らず、種々のセンサを有する。
センサ装置20は、画像を撮像する撮像部としての機能を有する。センサ装置20は、画像センサの機能を有し、画像情報を検知する。センサ装置20は、画像を入力として受け付ける画像入力部として機能する。例えば、センサ装置20aは、第1ユーザ(見守られる側ユーザ)を撮影する。
例えば、センサ装置20は、温度、湿度、照度、位置、加速度、光、圧力、ジャイロ、距離等、種々の情報を検知するセンサを有してもよい。このように、センサ装置20は、音センサに限らず、画像を検知する画像センサ(カメラ)、温度センサ、湿度センサ、照度センサ、GPS(Global Positioning System)センサ等の位置センサ、加速度センサ、光センサ、圧力センサ、ジャイロセンサ、測距センサ等の種々のセンサを有してもよい。また、センサ装置20は、上記のセンサに限らず、近接センサ、ニオイや汗や心拍や脈拍や脳波等の生体情報を取得のためのセンサ等の種々のセンサを有してもよい。
そして、センサ装置20は、各種センサにより検知された種々のセンサ情報を情報処理装置100に送信してもよい。また、センサ装置20は、例えばアクチュエータやエンコーダー付きモータ等の駆動機構を有してもよい。センサ装置20は、アクチュエータやエンコーダー付きモータ等の駆動機構の駆動状態等について検知された情報を含むセンサ情報を情報処理装置100に送信してもよい。センサ装置20は、音声信号処理や音声認識や発話意味解析や対話制御や行動出力等のソフトウェアモジュールを有してもよい。
なお、上記は一例であり、センサ装置20は、上記に限らず、種々のセンサを有してもよい。また、センサ装置20における上記の各種情報を検知するセンサは共通のセンサであってもよいし、各々異なるセンサにより実現されてもよい。センサ装置20は、複数あってもよい、また、センサ装置20は、通信機能を有し、収集した情報(センシング情報)を情報処理装置100等の他の装置へ送信する。
[1-3.実施形態に係る情報処理装置の構成]
次に、実施形態に係る情報処理を実行する情報処理装置の一例である情報処理装置100の構成について説明する。図6は、本開示の実施形態に係る情報処理装置の構成例を示す図である。
次に、実施形態に係る情報処理を実行する情報処理装置の一例である情報処理装置100の構成について説明する。図6は、本開示の実施形態に係る情報処理装置の構成例を示す図である。
図6に示すように、情報処理装置100は、通信部110と、記憶部120と、制御部130とを有する。なお、情報処理装置100は、情報処理装置100の管理者等から各種操作を受け付ける入力部(例えば、キーボードやマウス等)や、各種情報を表示するための表示部(例えば、液晶ディスプレイ等)を有してもよい。
通信部110は、例えば、NIC(Network Interface Card)等によって実現される。そして、通信部110は、ネットワークN(図5参照)と有線または無線で接続され、端末装置10及びセンサ装置20等の他の情報処理装置との間で情報の送受信を行う。
記憶部120は、例えば、RAM(Random Access Memory)、フラッシュメモリ(Flash Memory)等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。実施形態に係る記憶部120は、図6に示すように、データ記憶部121と、ユーザ情報記憶部122と、抽象度情報記憶部123とを有する。
実施形態に係るデータ記憶部121は、処理も用いる各種情報を記憶する。データ記憶部121は、提示する対象となる情報を記憶する。例えば、データ記憶部121は、センサ装置20から取得した情報を記憶する。
データ記憶部121は、センサ装置20により検知された第1ユーザの状態を示す情報に、第1ユーザを示す情報等を対応付けて記憶する。データ記憶部121は、センサ装置20により検知された情報に、その情報が検知された場所を示す情報等を対応付けて記憶する。データ記憶部121は、各第1ユーザを識別する情報(第1ユーザID等)に対応するユーザの情報を対応付けて記憶する。
なお、データ記憶部121は、上記に限らず、目的に応じて種々の情報を記憶してもよい。
実施形態に係るユーザ情報記憶部122は、ユーザに関する各種情報を記憶する。ユーザ情報記憶部122は、各ユーザが指定した抽象度のレベルを示す情報を記憶する。ユーザ情報記憶部122は、各ユーザの操作に関する情報等を記憶する。ユーザ情報記憶部122は、各ユーザについてセンシングされた情報等を記憶する。ユーザ情報記憶部122は、各ユーザを識別する情報(ユーザID等)に対応するユーザの情報を対応付けて記憶する。
ユーザ情報記憶部122は、第1ユーザの情報を記憶する。例えば、ユーザ情報記憶部122は、第1ユーザが入力した第1入力情報を含む第1ユーザ情報を記憶する。例えば、ユーザ情報記憶部122は、第1ユーザが指定した抽象度のレベルを示す第1入力情報を記憶する。ユーザ情報記憶部122は、センサ装置20により検知された第1ユーザの状態を示す第1センシング情報を含む第1ユーザ情報を記憶する。
ユーザ情報記憶部122は、第2ユーザの情報を記憶する。例えば、ユーザ情報記憶部122は、第2ユーザが入力した第2入力情報を含む第2ユーザ情報を記憶する。例えば、ユーザ情報記憶部122は、第2ユーザが指定した抽象度のレベルを示す第2入力情報を記憶する。ユーザ情報記憶部122は、センサ装置20により検知された第2ユーザの状態を示す第2センシング情報を含む第2ユーザ情報を記憶する。
なお、ユーザ情報記憶部122は、上記に限らず、目的に応じて種々の情報を記憶してもよい。例えば、ユーザ情報記憶部122は、各ユーザの属性情報等を記憶してもよい。ユーザ情報記憶部122は、第1ユーザと第2ユーザとを対応付けて情報を記憶してもよい。ユーザ情報記憶部122は、第1ユーザと第2ユーザとの関係性を示す情報を記憶してもよい。
実施形態に係る抽象度情報記憶部123は、抽象度に関する各種情報を記憶する。抽象度情報記憶部123は、情報の提示の抽象度を示す情報を記憶する。抽象度情報記憶部123は、決定したマスクレベル等の抽象度を示す情報を記憶する。
なお、抽象度情報記憶部123は、上記に限らず、目的に応じて種々の情報を記憶してもよい。例えば、抽象度情報記憶部123は、決定された抽象度の履歴を記憶する。例えば、抽象度情報記憶部123は、決定された抽象度の履歴を時系列に沿って記憶する。例えば、抽象度情報記憶部123は、決定された抽象度をその抽象度に対応する第1ユーザを対応付けて記憶する。
制御部130は、例えば、CPU(Central Processing Unit)やMPU(Micro Processing Unit)等によって、情報処理装置100内部に記憶されたプログラム(例えば、本開示に係る情報処理プログラム等)がRAM(Random Access Memory)等を作業領域として実行されることにより実現される。また、制御部130は、例えば、ASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)等の集積回路により実現される。
図6に示すように、制御部130は、取得部131と、処理部132と、決定部133と、生成部134と、送信部135とを有し、以下に説明する情報処理の機能や作用を実現または実行する。なお、制御部130の内部構成は、図6に示した構成に限られず、後述する情報処理を行う構成であれば他の構成であってもよい。また、制御部130が有する各処理部の接続関係は、図6に示した接続関係に限られず、他の接続関係であってもよい。
取得部131は、各種情報を取得する。取得部131は、記憶部120から各種情報を取得する。取得部131は、外部の情報処理装置から各種情報を取得する。取得部131は、通信部110を介して外部の情報処理装置から各種情報を受信する。取得部131は、端末装置10から情報を受信する。取得部131は、センサ装置20から情報を受信する。取得部131は、端末装置10やセンサ装置20から各種情報を取得する。取得部131は、端末装置10が収集した情報を端末装置10から取得する。取得部131は、センサ装置20が検知した情報をセンサ装置20から取得する。
取得部131は、ユーザに関する各種情報を取得する。取得部131は、第2ユーザに提示する第1ユーザに関する情報を取得する。取得部131は、センサ装置20により検知されたユーザの状態を示す情報を取得する。取得部131は、見守られる側のユーザである第1ユーザの状態に関する情報を取得する。取得部131は、センサによる第1ユーザのセンシング結果を示す情報を取得する。取得部131は、第1ユーザの活動に関する情報を取得する。取得部131は、第1ユーザの活動量に関する情報を取得する。
取得部131は、見守られる側のユーザである第1ユーザに関する第1ユーザ情報を取得する。取得部131は、第1ユーザが入力した第1入力情報を含む第1ユーザ情報を取得する。取得部131は、第1ユーザが指定した抽象度のレベルを示す第1入力情報を取得する。取得部131は、第1ユーザによる抽象度のレベルを下げる指示を示す第1入力情報を取得する。取得部131は、第1ユーザによる抽象度のレベルを上げる指示を示す第1入力情報を取得する。取得部131は、センサ装置20により検知された第1ユーザの状態を示す第1センシング情報を含む第1ユーザ情報を取得する。
取得部131は、第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報を取得する。取得部131は、第2ユーザが入力した第2入力情報を含む第2ユーザ情報を取得する。取得部131は、第2ユーザが指定した抽象度のレベルを示す第2入力情報を取得する。取得部131は、第2ユーザによる抽象度のレベルを下げる指示を示す第2入力情報を取得する。取得部131は、第2ユーザによる抽象度のレベルを上げる指示を示す第2入力情報を取得する。取得部131は、センサ装置20により検知された第2ユーザの状態を示す第2センシング情報を含む第2ユーザ情報を取得する。
処理部132は、各種処理を実行する。処理部132は、取得部131により取得された情報を用いて処理を実行する。処理部132は、画像処理を実行する。処理部132は、音声認識に関する処理を実行する。処理部132は、記憶部120に記憶された情報を用いて、音声認識処理を実行する。処理部132は、ユーザの発話を文字情報に変換することにより、ユーザ発話の音声をテキスト化する。処理部132は、既存の発話意味解析技術を用いることにより実現可能となる。
また、処理部132は、ユーザの発話の内容を分析する。処理部132は、種々の従来技術を適宜用いて、ユーザの発話を分析することにより、ユーザの発話の内容を推定する。例えば、処理部132は、自然言語理解(NLU)や自動音声認識(ASR)の機能により、ユーザの発話の内容を分析する。処理部132は、ユーザの発話に対応する文字情報を用いて、意味解析により、ユーザの発話の内容を推定(特定)する。例えば、処理部132は、文字情報を構文解析等の種々の従来技術を適宜用いて解析することにより、文字情報に対応するユーザの発話の内容を推定する。
処理部132は、データ保持に関する処理を実行する。処理部132は、各端末装置10やセンサ装置20から送信される情報を蓄積する。処理部132は、各端末装置10やセンサ装置20から送信される画像、音声等のセンシング情報の認識結果等の情報を蓄積する。処理部132は、各端末装置10やセンサ装置20から送信される画像、音声等のセンシング情報の認識結果等の情報を記憶部120に格納する。処理部132は、キーワード抽出の処理を実行する。処理部132は、音声認識の結果を基にキーワードを抽出する。
決定部133は、各種の情報を決定する。決定部133は、情報の抽象度を決定する。決定部133は、取得部131により取得された情報を用いて決定処理を実行する。
決定部133は、第1ユーザ情報と第2ユーザ情報とに基づいて、第1ユーザの状態を示す情報である提示情報の抽象度を決定する。決定部133は、第1入力情報に基づいて、第1ユーザの提示情報の抽象度を決定する。決定部133は、第1入力情報が示す抽象度のレベルに基づいて、第1ユーザの提示情報の抽象度を決定する。決定部133は、第1ユーザによる抽象度のレベルを下げる指示に応じて、第1ユーザの提示情報の抽象度を下げる。決定部133は、第1ユーザによる抽象度のレベルを上げる指示に応じて、第1ユーザの提示情報の抽象度を上げる。決定部133は、第1センシング情報に基づいて、第1ユーザの提示情報の抽象度を決定する。
決定部133は、第2入力情報に基づいて、第2ユーザの提示情報の抽象度を決定する。決定部133は、第2入力情報が示す抽象度のレベルに基づいて、第2ユーザの提示情報の抽象度を決定する。決定部133は、第2ユーザによる抽象度のレベルを下げる指示に応じて、第2ユーザの提示情報の抽象度を下げる。決定部133は、第2ユーザによる抽象度のレベルを上げる指示に応じて、第2ユーザの提示情報の抽象度を上げる。決定部133は、第2センシング情報に基づいて、第2ユーザの提示情報の抽象度を決定する。
決定部133は、第1ユーザ情報と第2ユーザ情報とに基づいて、第1ユーザの提示情報を第2ユーザに提示する際の抽象度を決定する。決定部133は、第1ユーザ情報と第2ユーザ情報とに基づいて、第1ユーザの提示情報を第1ユーザに提示する際の抽象度を決定する。
決定部133は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した第1ユーザの提示情報の保護性に応じて、第1ユーザの提示情報の抽象度を決定する。決定部133は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した第1ユーザの提示情報の注目性に応じて、第1ユーザの提示情報の情報量を決定する。決定部133は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した第1ユーザの提示情報の応答性に応じて、第1ユーザの提示情報の分解能を決定する。
生成部134は、各種情報を生成する。生成部134は、外部の情報処理装置からの情報や記憶部120に記憶された情報に基づいて、各種情報を生成する。生成部134は、端末装置10やセンサ装置20等の他の情報処理装置からの情報に基づいて、各種情報を生成する。生成部134は、データ記憶部121やユーザ情報記憶部122や抽象度情報記憶部123に記憶された情報に基づいて、各種情報を生成する。生成部134は、処理部132の処理により生成された情報を基に、端末装置10に出力する各種情報を生成する。
生成部134は、端末装置10に提供する情報に関する各種処理を実行する。生成部134は、端末装置10に提供するコンテンツを生成する。生成部134は、決定部133により決定された抽象度に対応するコンテンツを生成する。生成部134は、コンテンツCT11を生成する。生成部134は、コンテンツCT12を生成する。生成部134は、コンテンツCT13を生成する。
また、生成部134は、端末装置10に表示するコンテンツを生成する。例えば、生成部134は、Java(登録商標)等の種々の技術を適宜用いて、端末装置10へ提供する画面(コンテンツ)を生成してもよい。なお、生成部134は、CSSやJavaScript(登録商標)やHTMLの形式に基づいて、端末装置10へ提供する画面(コンテンツ)を生成してもよい。また、例えば、生成部134は、JPEG(Joint Photographic Experts Group)やGIF(Graphics Interchange Format)やPNG(Portable Network Graphics)など様々な形式で画面(コンテンツ)を生成してもよい。
送信部135は、出力する処理を実行する出力部として機能する。送信部135は、端末装置10へ情報を送信する。送信部135は、処理部132による処理結果を示す情報を端末装置10へ送信する。送信部135は、決定部133により決定された抽象度の情報を端末装置10へ送信する。送信部135は、生成部134により生成された情報を端末装置10へ送信する。送信部135は、生成部134により生成されたコンテンツを端末装置10へ送信する。
送信部135は、決定部133により決定された抽象度に対応する提示情報を出力する。送信部135は、コンテンツCT11を送信する。送信部135は、コンテンツCT12を送信する。送信部135は、コンテンツCT13を送信する。送信部135は、決定部133により決定された抽象度に対応する提示情報を第2ユーザが利用する端末装置10に送信する。送信部135は、決定部133により決定された抽象度に対応する提示情報を第1ユーザが利用する端末装置10に送信する。
[1-4.実施形態に係る端末装置の構成]
次に、実施形態に係る出力処理を実行する出力装置の一例である端末装置10の構成について説明する。図7は、本開示の実施形態に係る端末装置の構成例を示す図である。
次に、実施形態に係る出力処理を実行する出力装置の一例である端末装置10の構成について説明する。図7は、本開示の実施形態に係る端末装置の構成例を示す図である。
図7に示すように、端末装置10は、通信部11と、音声入力部12と、音声出力部13と、カメラ14と、表示部15と、操作部16と、記憶部17と、制御部18とを有する。
通信部11は、例えば、NICや通信回路等によって実現される。そして、通信部11は、所定の通信網(ネットワーク)と有線または無線で接続され、外部の情報処理装置との間で情報の送受信を行う。例えば、通信部11は、所定の通信網と有線または無線で接続され、情報処理装置100との間で情報の送受信を行う。
音声入力部12は、ユーザの音声(発話)による操作を受け付ける入力部として機能する。音声入力部12は、例えばマイク等であり、音声を検知する。例えば、音声入力部12は、ユーザの発話を検知する。音声入力部12は、ユーザの発話をユーザによる操作として受け付ける。音声入力部12は、提示情報の抽象度のレベルの指定を、端末装置10を利用するユーザから受け付ける。なお、音声入力部12は、処理に必要なユーザの発話情報を検知可能であれば、どのような構成であってもよい。
音声出力部13は、音声を出力するスピーカーによって実現され、各種情報を音声として出力するための出力装置である。音声出力部13は、情報処理装置100から提供されるコンテンツを音声出力する。例えば、音声出力部13は、表示部15に表示される情報に対応する音声を出力する。端末装置10は、音声入力部12及び音声出力部13により音声の入出力を行う。例えば、音声出力部13は、決定した抽象度に対応する提示情報を音声出力する。
カメラ14は、画像を検知するイメージセンサ(画像センサ)を有する。カメラ14は、画像を撮影する。例えば、端末装置10がノートパソコンの場合、カメラ14は、端末装置10に内蔵され、表示部15の上部に配置されてもよい。また、例えば、スマートフォンの場合、カメラ14は、端末装置10に内蔵されたインカメラであってもよい。
表示部15は、例えば液晶ディスプレイや有機EL(Electro-Luminescence)ディスプレイ等によって実現されるタブレット端末等の表示画面であり、各種情報を表示するための表示装置である。
表示部15は、出力する処理を実行する出力部として機能する。表示部15は、見守りに関する各種情報を表示する。表示部15は、第1ユーザに関する各種情報を表示する。表示部15は、コンテンツを表示する。表示部15は、情報処理装置100から受信した各種情報を表示する。
表示部15は、情報処理装置100が決定した抽象度に対応する提示情報を出力する。表示部15は、情報処理装置100が決定した抽象度に対応する提示情報を表示する。
表示部15は、コンテンツCT11を表示する。表示部15は、コンテンツCT12を表示する。表示部15は、コンテンツCT13を表示する。
操作部16は、様々なユーザの操作を受け付ける入力部として機能する。操作部16は、表示部15により表示された情報に対する操作を、端末装置10を利用するユーザから受け付ける。操作部16は、提示情報の抽象度のレベルの指定を、端末装置10を利用するユーザから受け付ける。
図7の例では、操作部16は、キーボード、マウス等である。また、操作部16は、キーボードやマウスと同等の機能を実現できるタッチパネルを有してもよい。この場合、操作部16は、各種センサにより実現されるタッチパネルの機能により、表示画面を介してユーザから各種操作を受け付ける。例えば、操作部16は、表示部15を介してユーザから各種操作を受け付ける。
例えば、操作部16は、端末装置10の表示部15を介してユーザの指定操作等の操作を受け付ける。なお、操作部16によるユーザの操作の検知方式には、タブレット端末では主に静電容量方式が採用されるが、他の検知方式である抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式など、ユーザの操作を検知できタッチパネルの機能が実現できればどのような方式を採用してもよい。
上記のキーボード、マウス、タッチパネル等は一例に過ぎず、端末装置10は、上記に限らず様々な情報を入力として受け付ける(検知する)構成を有してもよい。例えば、端末装置10は、ユーザの視線を検知する視線センサを有してもよい。視線センサは、例えば、端末装置10に搭載されたカメラ14や光センサ、動きセンサ(いずれも図示省略)等の検出結果に基づき、アイトラッキング技術を利用して、ユーザの視線方向を検出する。視線センサは、検出した視線方向に基づき、画面のうち、ユーザが注視している注視領域を決定する。視線センサは、決定した注視領域を含む視線情報を情報処理装置100に送信してもよい。例えば、端末装置10は、ユーザのジェスチャ等を検知するモーションセンサを有してもよい。端末装置10は、モーションセンサにより、ユーザのジェスチャによる操作を受け付けてもよい。
記憶部17は、例えば、RAM(Random Access Memory)、フラッシュメモリ(Flash Memory)等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。記憶部17は、例えば、情報処理装置100から受信した各種情報を記憶する。記憶部17は、例えば、端末装置10にインストールされているアプリケーション(例えば見守りアプリ等)に関する情報、例えばプログラム等を記憶する。
記憶部17は、情報処理装置100から受信した情報を記憶する。記憶部17は、ユーザに提示する提示情報を記憶する。記憶部17は、出力するコンテンツを記憶する。例えば、記憶部17は、ユーザの情報を記憶する。この場合、記憶部17は、ユーザの発話履歴(音声認識結果の履歴)や行動履歴を記憶してもよい。
制御部18は、例えば、CPUやMPU等によって、端末装置10内部の記憶部17などの記憶装置に記憶されている各種プログラムがRAMを作業領域として実行されることにより実現される。例えば、この各種プログラムは、情報処理を行うアプリケーション(例えば見守りアプリ)のプログラムが含まれる。また、制御部18は、例えば、ASICやFPGA等の集積回路により実現される。
図7に示すように、制御部18は、取得部181と、送信部182と、受信部183と、処理部184とを有し、以下に説明する情報処理の機能や作用を実現または実行する。なお、制御部18の内部構成は、図7に示した構成に限られず、後述する情報処理を行う構成であれば他の構成であってもよい。また、制御部18が有する各処理部の接続関係は、図7に示した接続関係に限られず、他の接続関係であってもよい。
取得部181は、各種情報を取得する。例えば、取得部181は、外部の情報処理装置から各種情報を取得する。例えば、取得部181は、取得した各種情報を記憶部17に格納する。取得部181は、操作部16により受け付けられたユーザの操作情報を取得する。取得部181は、ユーザに提示する提示情報を取得する。
取得部181は、ユーザの発話情報を取得する。取得部181は、音声入力部12により検知されたユーザの発話情報を取得する。
送信部182は、通信部11を介して、情報処理装置100へ情報を送信する。送信部182は、情報処理装置100へユーザに関する情報を送信する。送信部182は、ユーザの発話または操作などにより入力された情報を送信する。送信部182は、提示情報に対する操作を示す情報を情報処理装置100へ送信する。
受信部183は、通信部11を介して、情報処理装置100から情報を受信する。受信部183は、情報処理装置100が提供する情報を受信する。受信部183は、情報処理装置100からコンテンツを受信する。受信部183は、情報処理装置100が決定した抽象度の提示情報を受信する。
処理部184は、各種の処理を実行する。処理部184は、情報処理装置100から提供された情報を用いた処理を実行する。処理部184は、表示部15を介して各種情報を表示する。例えば、処理部184は、表示部15の表示を制御する表示制御部として機能する。処理部184は、音声出力部13を介して各種情報を音声出力する。例えば、処理部184は、音声出力部13の音声出力を制御する音声出力制御部として機能する。
処理部184は、音声入力部12または操作部16により受け付けられたユーザの操作に応じて、表示態様を変更する。処理部184は、取得部181が取得した情報を出力する。処理部184は、受信部183が受信した情報を出力する。処理部184は、情報処理装置100から提供されたコンテンツを出力する。処理部184は、受信部183が受信したコンテンツを、音声出力部13または表示部15を介して出力する。処理部184は、表示部15を介してコンテンツを表示する。処理部184は、音声出力部13を介してコンテンツを音声出力する。
処理部184は、通信部11を介して、外部の情報処理装置へ種々の情報を送信する。処理部184は、情報処理装置100へ各種情報を送信する。処理部184は、記憶部17に記憶された各種情報を外部の情報処理装置へ送信する。処理部184は、取得部181により取得された各種情報を情報処理装置100へ送信する。処理部184は、取得部181により取得されたセンサ情報を情報処理装置100へ送信する。処理部184は、操作部16により受け付けられたユーザの操作情報を情報処理装置100へ送信する。処理部184は、端末装置10を利用するユーザの発話や画像等の情報を情報処理装置100へ送信する。
なお、上述した制御部18による各処理は、例えば、JavaScript(登録商標)などにより実現されてもよい。また、上述した制御部18による情報処理等の処理は、所定のアプリケーションにより行われる場合、制御部18の各部は、例えば、所定のアプリケーションにより実現されてもよい。例えば、制御部18による情報処理等の処理は、外部の情報処理装置から受信した制御情報により実現されてもよい。例えば、上述した表示処理が所定のアプリケーション(例えば見守りアプリ等)により行われる場合、制御部18は、例えば、所定のアプリや専用アプリを制御するアプリ制御部を有してもよい。
[1-5.実施形態に係る情報処理の手順]
次に、図8及び図9を用いて、実施形態に係る各種情報処理の手順について説明する。
次に、図8及び図9を用いて、実施形態に係る各種情報処理の手順について説明する。
[1-5-1.情報処理装置に係る処理の手順]
まず、図8を用いて、情報処理装置に係る処理の流れについて説明する。図8は、本開示の実施形態に係る情報処理装置の処理手順を示すフローチャートである。具体的には、図8は、情報処理装置の一例である情報処理装置100による情報処理の手順を示すフローチャートである。
まず、図8を用いて、情報処理装置に係る処理の流れについて説明する。図8は、本開示の実施形態に係る情報処理装置の処理手順を示すフローチャートである。具体的には、図8は、情報処理装置の一例である情報処理装置100による情報処理の手順を示すフローチャートである。
図8に示すように、情報処理装置100は、見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とを取得する(ステップS101)。情報処理装置100は、第1ユーザ情報と第2ユーザ情報とに基づいて、第1ユーザの状態を示す情報である提示情報の抽象度を決定する(ステップS102)。
[1-5-2.提示内容の更新に関する処理の手順]
次に、図9を用いて、提示内容の更新に関する処理について説明する。図9は、提示内容の更新に関する処理手順を示すフローチャートである。なお、以下では、情報処理システム1が処理を行う場合を一例として説明するが、図9に示す処理は、情報処理システム1に含まれる装置構成に応じて、情報処理装置100、端末装置10、センサ装置20等のいずれの装置が行ってもよい。
次に、図9を用いて、提示内容の更新に関する処理について説明する。図9は、提示内容の更新に関する処理手順を示すフローチャートである。なお、以下では、情報処理システム1が処理を行う場合を一例として説明するが、図9に示す処理は、情報処理システム1に含まれる装置構成に応じて、情報処理装置100、端末装置10、センサ装置20等のいずれの装置が行ってもよい。
図9では、情報処理システム1は、DBを参照する(ステップS201)。例えば、情報処理装置100は、記憶部120に記憶された情報を参照する。情報処理システム1は、見守られる側のセンシングを行う(ステップS202)。例えば、センサ装置20は、センシングを行う。情報処理システム1は、フィルタリング、変換、状態推定等の各種処理を行う(ステップS203)。例えば、情報処理装置100は、フィルタリング、変換、状態推定等の各種処理を行う。
情報処理システム1は、見守られる側の入力がある場合(ステップS204:Yes)、ステップS203に戻って処理を行う。情報処理システム1は、見守られる側の入力がない場合(ステップS204:No)、提示内容の更新を行う(ステップS205)。例えば、情報処理装置100は、提示情報の抽象度を決定し、端末装置10は、情報処理装置100により決定された抽象度に基づく提示情報に表示する情報を更新する。
情報処理システム1は、見守る側の入力がある場合(ステップS206:Yes)、ステップS203に戻って処理を行う。情報処理システム1は、見守る側の入力がない場合(ステップS206:No)、提示内容の更新を行う(ステップS207)。例えば、情報処理装置100は、提示情報の抽象度を決定し、端末装置10は、情報処理装置100により決定された抽象度に基づく提示情報に表示する情報を更新する。
そして、情報処理システム1は、DBを更新し(ステップS208)、ステップS202に戻って処理を行う。例えば、情報処理装置100は、記憶部120に記憶された情報を更新する。
[1-6.情報処理システムに関する例]
ここから、情報処理システム1が行う処理例等を示す。なお、上述した内容と同様の点については適宜説明を省略する。
ここから、情報処理システム1が行う処理例等を示す。なお、上述した内容と同様の点については適宜説明を省略する。
[1-6-1.処理例]
まず、情報処理システム1が行う処理例について説明する。
まず、情報処理システム1が行う処理例について説明する。
[1-6-1-1.複数の抽象度]
上述した例では、見守られる側ユーザ(第1ユーザ)及び見守る側ユーザ(第2ユーザ)に共通したマスクレベルを用いる場合を一例として示したが、情報処理装置100は、第1ユーザと第2ユーザとで個別にマスクレベル(抽象度)を決定してもよい。この点について、図10及び図11を用いて説明する。
上述した例では、見守られる側ユーザ(第1ユーザ)及び見守る側ユーザ(第2ユーザ)に共通したマスクレベルを用いる場合を一例として示したが、情報処理装置100は、第1ユーザと第2ユーザとで個別にマスクレベル(抽象度)を決定してもよい。この点について、図10及び図11を用いて説明する。
図10は、情報処理システムにおける抽象度の決定処理の一例を示す図である。図11は、抽象度の決定に用いる関数に関する情報の一例を示す図である。なお、見守られる側ユーザ(第1ユーザ)を対象とするマスクレベル(抽象度)を第1マスクレベル(第1抽象度)とし、見守る側ユーザ(第2ユーザ)を対象とするマスクレベル(抽象度)を第2マスクレベル(第2抽象度)ともいう。
情報処理装置100は、見守られる側ユーザ(第1ユーザ)の第1マスクレベル(第1抽象度)を決定する。例えば、情報処理装置100は、時刻tに見守られる側に提示する第1マスクレベルであるマスクレベルMLelder(t)を以下の式(3)または式(4)を用いて決定する。例えば、情報処理装置100は、以下の式(3)に示すように、第1ユーザが指定した第1初期値を基に第1マスクレベル(第1抽象度)を決定する。
式(3)中のMLelder(0)は、時刻0(図2中の原点(t0)に対応)での第1マスクレベルに対応する。また、式(3)中のMLelder(3)は、時刻1(時刻0より後の時刻)での第1マスクレベルに対応する。式(3)中の「MLinitial_elder」は、見守られる側の設定した第1マスクレベルの第1初期値に対応する。
例えば、情報処理装置100は、以下の式(4)に示すように、第1ユーザからの第1フィードバック、及び第2ユーザからの第2フィードバックを基に第1マスクレベルを決定(更新)する。
式(4)中のMLelder(t+2)は、時刻t+2での第1マスクレベルに対応する。また、式(4)中の「MLinitial_elder」は、見守られる側の設定した第1マスクレベルの第1初期値に対応する。なお、式(4)中の他の要素は、式(2)と同様であるため詳細な説明は省略する。
情報処理装置100は、見守る側ユーザ(第2ユーザ)の第2マスクレベル(第2抽象度)を決定する。例えば、情報処理装置100は、時刻tに見守る側に提示する第2マスクレベルであるマスクレベルMLyounger(t)を以下の式(5)または式(6)を用いて決定する。例えば、情報処理装置100は、以下の式(5)に示すように、第2ユーザが指定した第2初期値を基に第2マスクレベル(第2抽象度)を決定する。
式(5)中のMLyounger(0)は、時刻0(図2中の原点(t0)に対応)での第2マスクレベルに対応する。また、式(5)中のMLyounger(5)は、時刻1(時刻0より後の時刻)での第2マスクレベルに対応する。式(5)中の「MLinitial_younger」は、見守られる側の設定した第2マスクレベルの第2初期値に対応する。
例えば、情報処理装置100は、以下の式(6)に示すように、第1ユーザからの第1フィードバック、及び第2ユーザからの第2フィードバックを基に第2マスクレベルを決定(更新)する。
式(6)中のMLyounger(t+2)は、時刻t+2での第2マスクレベルに対応する。また、式(6)中の「MLinitial_younger」は、見守られる側の設定した第2マスクレベルの第2初期値に対応する。なお、式(6)中の他の要素は、式(2)と同様であるため詳細な説明は省略する。
図10中のグラフGR2は、情報処理装置100により決定されるユーザU1の提示情報を対象としたマスクレベル(抽象度)の時間経過(時系列)に沿った変化を示す。グラフGR2の縦軸は、情報のマスクレベル、すなわち抽象度を示す。また、グラフGR2の横軸は、時間を示す。
グラフGR2中の「MLinitial_elder」は、見守られる側の設定したマスクレベルの初期値に対応する。グラフGR2中の「MLinitial_younger」は、見守る側の設定したマスクレベルの初期値に対応する。
グラフGR2中の線LN11及び線LN21は、見守られる側及び見守る側の入力によって提示のマスクレベルが定常振動する場合を示す。線LN11は、第1マスクレベルに対応し、線LN12は、第2マスクレベルに対応する。この場合、情報処理装置100は、見守られる側の求めるマスクレベル(抽象度)で第1マスクレベルを決定し、決定した第1マスクレベルを基に第1ユーザに情報を提示する。また、情報処理装置100は、見守る側の求めるマスクレベル(抽象度)で第2マスクレベルを決定し、決定した第2マスクレベルを基に第2ユーザに情報を提示する。
また、グラフGR2中の線LN12及び線LN22は、見守られる側及び見守る側の入力によって提示のマスクレベルが減衰振動する場合を示す。線LN21は、第1マスクレベルに対応し、線LN22は、第2マスクレベルに対応する。この場合、情報処理装置100は、マスクレベル(抽象度)を収束させるように第1マスクレベルを決定し、決定した第1マスクレベルを基に第1ユーザに情報を提示する。また、情報処理装置100は、マスクレベル(抽象度)を収束させるように第2マスクレベルを決定し、決定した第2マスクレベルを基に第2ユーザに情報を提示する。
例えば、情報処理装置100は、見守られる側の伝えたい程度と、見守る側の見たい程度が極端に異なる場合、極端に情報をマスクするユーザの要求に合わせて初期状態を設定する。そして、情報処理装置100は、徐々にマスクを外していった際のユーザからのフィードバックをもとに提示内容を調整する。
例えば、情報処理装置100は、見守られる側が情報を伝えたく、見守る側が情報を知りたくない場合、以下の処理#2-1~処理#2~4を行う。
処理#2-1.見守られる側、見守る側にお互いが要求しているマスクレベルで提示
処理#2-2.見守られる側の入力をもとに、見守る側のマスクレベルを下げて提示
処理#2-3.見守る側の入力をもとに、見守る側のマスクレベルを上げて提示
処理#2-4.処理#2-2、#2-3のループを回し、マスクレベルを収束させる
処理#2-2.見守られる側の入力をもとに、見守る側のマスクレベルを下げて提示
処理#2-3.見守る側の入力をもとに、見守る側のマスクレベルを上げて提示
処理#2-4.処理#2-2、#2-3のループを回し、マスクレベルを収束させる
例えば、情報処理装置100は、時刻tに見守られる側のユーザへ提示するマスクレベルMLelder(t)を、上述した式(3)または式(4)を用いて決定する。また、情報処理装置100は、時刻tに見守る側のユーザへ提示するマスクレベルMLyounger(t)を、上述した式(5)または式(6)を用いて決定する。このように、情報処理装置100は、見守られる側及び見守る側のユーザに提示するマスクレベルを調整し、見守られる側及び見守る側のユーザの双方に個別のマスクレベルの情報を提示する。このように、情報処理システム1は、個人化と局所最適化により、見守る側と見守られる側の提示に関するマッチングを自律的に実施することができる。
[1-6-1-2.提示態様例]
上述した情報の提示態様は一例に過ぎず、情報処理システム1は、様々な提示態様により情報の提示を行ってもよい。この点についての例示を以下に記載する。以下では、異なるマスクレベルを要求する見守る側ユーザが同一環境に存在する状況下での提示方法についての一例を説明する。
上述した情報の提示態様は一例に過ぎず、情報処理システム1は、様々な提示態様により情報の提示を行ってもよい。この点についての例示を以下に記載する。以下では、異なるマスクレベルを要求する見守る側ユーザが同一環境に存在する状況下での提示方法についての一例を説明する。
情報処理システム1は、見守る側のユーザが1人ずつ見守られる側の情報を閲覧する場合、以下のように処理を行ってもよい。例えば、情報処理システム1は、情報のマスクレベルを、見守るユーザの入力を基に事前に設定した最も高いマスクレベルにして提示を行う。また、情報処理システム1は、見守る側のユーザによる操作や機器による見守る側のユーザの認識結果をもとに、マスクレベルを調整して提示する。
例えば、見守られる側のユーザにとっての実の子供とその子供の配偶者が同居している場合、情報処理システム1は、以下のように処理してもよい。例えば、情報処理システム1は、詳細を知りたい実の子供が低いマスクレベルを要求(指定)し、詳細を知らなくて良い子供の配偶者が高いマスクレベルを要求している場合、子供の配偶者に合わせた低いマスクレベルで端末装置10により情報を提示する。また、実の子供が見守られる側のユーザへアクセスする際は、情報処理システム1は、指紋、発話、虹彩による生体認証、顔の特徴量解析といった操作・識別によってユーザの特定を行い、一時的に事前に登録されたマスクレベルへと調整して提示してもよい。
情報処理システム1は、見守る側のユーザが複数同時に見守られる側の情報を閲覧する場合、以下のように処理を行ってもよい。例えば、情報処理システム1は、情報のマスクレベルを、見守るユーザの入力を基に事前に設定した最も高いマスクレベルにして提示を行う。なお、レンチキュラーディスプレイや立体音響スピーカー等、提示機器の構成が見守る側のユーザの位置によって異なる情報を提示可能、かつ機器が異なるマスクレベルの情報を同時に提示可能な人数である場合、情報処理システム1は、以下のように処理してもよい。例えば、情報処理システム1は、見守る側の各ユーザに対して、情報のマスクレベルを、見守るユーザの入力を基に事前に設定した最も高いマスクレベルで提示する。
なお、見守る側のユーザの環境で来客者をはじめとする全くの赤の他人(第三者)がいる場合、情報処理システム1は、情報のマスクレベルは見守られる側のユーザによる事前の設定を基に高いレベルで提示する。なお、情報処理システム1は、見守られる側との直接的なやり取りの有無や検出頻度といった、見守られる側のユーザと第三者の関係性に関する過去の情報をもとに、情報のマスクレベルは明示的な指示ではない状況判断をもとに調整してもよい。
[1-6-1-3.センシング及びデータ処理例]
ここで、情報処理システム1におけるセンシング及びデータ処理についての例示を以下に記載する。
ここで、情報処理システム1におけるセンシング及びデータ処理についての例示を以下に記載する。
例えば、見守られる側の状態の計測(センシング)は、以下のようなセンサにより行われてもよい。以下は、使用するセンサと取得情報の例を示す。情報処理システム1は、ユーザが位置する空間に対応する環境設置のセンサを用いてセンシングを行ってもよい。例えば、環境設置のセンサは、ドア開閉センサ、人感センサ、離床センサ、イメージセンサ、CO2センサ、温度・湿度センサ、加速度センサ、マイク等であってもよい。
また、情報処理システム1は、ユーザが装着する装着機器のセンサを用いてセンシングを行ってもよい。例えば、装着機器のセンサは、呼気、嚥下、脈拍、心拍、体動等を検知するセンサであってもよいし、音を検知するマイク等であってもよい。
また、情報処理システム1は、以下のようなデータ処理を行ってもよい。例えば、情報処理システム1は、センサから取得した時系列データの加工を行ってもよい。情報処理システム1は、フィルタリングの処理を行ってもよい。例えば、フィルタリングの処理は、ダウンサンプリング、バンドパスフィルタ、外れ値除去、クラスタリング等であってもよい。
情報処理システム1は、変換の処理を行ってもよい。例えば、情報処理システム1は、変化の有無に基づく処理を行ってもよい。例えば、情報処理システム1は、直近数週間・数ヶ月との比較、別日との比較、同日での別の時間帯との比較等に基づく処理を行ってもよい。
また、情報処理システム1は、他者との差分に基づく処理を行ってもよい。例えば、情報処理システム1は、同じ施設の方との比較、他施設の同年代の方との比較に基づく処理を行ってもよい。例えば、情報処理システム1は、特筆すべきアラートへの次元圧縮を行ってもよい。例えば、情報処理システム1は、極端に活動量が少ないかまたは多い場合に次元圧縮を行ってもよい。
[1-6-1-4.センシング及び情報の提示態様]
なお、図1の例では、ユーザが入力した入力情報を用いて抽象度(マスクレベル)を決定する場合を一例として説明したが、情報処理装置100は、ユーザに関する情報であれば、どのような情報を用いて抽象度を決定してもよい。例えば、情報処理装置100は、センサ装置20により検知されたユーザの状態を示すセンシング情報に基づいて、抽象度(マスクレベル)を決定してもよい。例えば、情報処理装置100は、センサ装置20aにより検知された第1ユーザの状態を示す第1センシング情報に基づいて、抽象度を決定してもよい。例えば、情報処理装置100は、提示情報であるコンテンツに第1ユーザが含まれる場合、抽象度を高くしてもよい。例えば、情報処理装置100は、提示情報であるコンテンツに第1ユーザが含まれない場合、抽象度を低くしてもよい。例えば、情報処理装置100は、センサ装置20bにより検知された第2ユーザの状態を示す第2センシング情報に基づいて、抽象度を決定してもよい。例えば、情報処理装置100は、第2ユーザが提示情報を注視している場合、抽象度を低くしてもよい。例えば、情報処理装置100は、第2ユーザが提示情報を注視していない場合、抽象度を高くしてもよい。
なお、図1の例では、ユーザが入力した入力情報を用いて抽象度(マスクレベル)を決定する場合を一例として説明したが、情報処理装置100は、ユーザに関する情報であれば、どのような情報を用いて抽象度を決定してもよい。例えば、情報処理装置100は、センサ装置20により検知されたユーザの状態を示すセンシング情報に基づいて、抽象度(マスクレベル)を決定してもよい。例えば、情報処理装置100は、センサ装置20aにより検知された第1ユーザの状態を示す第1センシング情報に基づいて、抽象度を決定してもよい。例えば、情報処理装置100は、提示情報であるコンテンツに第1ユーザが含まれる場合、抽象度を高くしてもよい。例えば、情報処理装置100は、提示情報であるコンテンツに第1ユーザが含まれない場合、抽象度を低くしてもよい。例えば、情報処理装置100は、センサ装置20bにより検知された第2ユーザの状態を示す第2センシング情報に基づいて、抽象度を決定してもよい。例えば、情報処理装置100は、第2ユーザが提示情報を注視している場合、抽象度を低くしてもよい。例えば、情報処理装置100は、第2ユーザが提示情報を注視していない場合、抽象度を高くしてもよい。
また、情報処理システム1は、図12に示す一覧リストTB11に示すような組み合わせに基づく処理や情報の提示を行ってもよい。図12は、センシング対象及び情報の提示態様の一例を示す図である。図12に示す一覧リストTB11は、見守る側、見守られる側に応じた、データと提示方法のマッピングを示す。例えば、情報処理システム1は、センサの種類が第1ユーザの居室に設けられた人感センサである場合、運動量のアナログ情報を計測値として、平滑化等の処理を行う。そして、情報処理システム1は、運動量に比例して風の強さを変更することにより、第1ユーザの状態を提示する。
例えば、情報処理システム1は、センサの種類が第1ユーザの浴室ドアに設けられた開閉センサである場合、開閉のデジタル情報を計測値として、外れ値処理等の処理を行う。そして、情報処理システム1は、浴室内にいる際にじょうろを描画することにより、第1ユーザの状態を提示する。
例えば、情報処理システム1は、センサの種類が第1ユーザの居室ドアに設けられた開閉センサである場合、開閉のデジタル情報を計測値として、外れ値処理等の処理を行う。そして、情報処理システム1は、外から人が入ってきた際に鳥を描画することにより、第1ユーザの状態を提示する。
例えば、情報処理システム1は、センサの種類がマイクである場合、音のアナログ情報を計測値として、平滑化やAI(人工知能)処理等の処理を行う。そして、情報処理システム1は、見守られる側ユーザとの関係性が反映されたオブジェクトを描画することにより、第1ユーザの状態を提示する。例えば、情報処理システム1は、第1ユーザと親密な関係性を有する人を蝶として描画し、第1ユーザと疎遠または第1ユーザが好ましくないと思っている関係性を有する人を攻撃的な鳥として描画することにより、第1ユーザの状態を提示する。
上述したように、情報処理システム1は、各センサから得られるデータの解析結果と描画するオブジェクトを紐づける。また、情報処理システム1は、過去の蓄積データから推定される定常状態に対する現在の状況の外れ度合いを、オブジェクトの動き、あるいは動きの軌跡と対応付けて描画する。これにより、情報処理システム1は、情報のマスクレベルが高い場合であっても、各ユーザがイベントと提示内容の対応付けを容易とすることができる。例えば、情報処理システム1は、データと保護性、注目性、応答性はテーブル形式でデータベースへ保管する。
例えば、情報処理システム1は、見守る側、見守られる側の意図に応じてコンテンツのマッチングを測る。これにより、情報処理システム1は、見守る側及び見守られる側の互いに最適な知りたい・知らせたい程度が反映された情報を伝えることができる。したがって、情報処理システム1は、簡便な操作と提示コンテンツのリアリティ排除により、日常生活との親和性が高いインターフェイスを実現できる。
なお、上述した例では、センサ情報と提示内容とを1対1対応させるが、対応関係は1対1に限られない。例えば、絵、音楽、ロボットの動きなど、通信機能やセンサ異常によってデータが欠落した際に違和感を感じるような出力形態の場合、情報処理システム1は、他の複数のセンサによるセンサフュージョンによって推定結果を算出して提示してもよいし、直近の変化を提示しておいてもよい。センサフュージョンの例としては、情報処理システム1は、居室ドアの開閉センサの値が高速に0と1を繰り返す場合、開閉センサの異常と判断し、マイクと人感センサのデータをもとに人の出入りを推定してもよい。
[1-6-1-5.提示機器及び提示内容例]
なお、上述した例では、情報を提示する機器(提示機器)が、ユーザが利用するスマートフォン等の端末装置10である場合を一例として説明したが、提示機器はスマートフォン等に限らず、様々なデバイスであってもよい。すなわち、情報処理システム1において情報を提示するインターフェイス(端末装置10)は、2次元映像による視覚的な提示に限られない。また、提示機器は、専用機器でなくアプリケーションとして既存の機器にアルゴリズムを組み込んでもよい。この点について、以下では、提示機器の例と、各提示機器の場合における情報の提示内容の例を記載する。
なお、上述した例では、情報を提示する機器(提示機器)が、ユーザが利用するスマートフォン等の端末装置10である場合を一例として説明したが、提示機器はスマートフォン等に限らず、様々なデバイスであってもよい。すなわち、情報処理システム1において情報を提示するインターフェイス(端末装置10)は、2次元映像による視覚的な提示に限られない。また、提示機器は、専用機器でなくアプリケーションとして既存の機器にアルゴリズムを組み込んでもよい。この点について、以下では、提示機器の例と、各提示機器の場合における情報の提示内容の例を記載する。
例えば、提示機器(例えば端末装置10)は、スマートウォッチ、スマートグラス等のウェアラブルデバイス、3次元(3D)ホログラフィックディスプレイ等であってもよい。この場合、提示内容は、映像(種類)、振動(種類、強弱、周期性)等であってもよい。例えば、3Dディスプレイの場合、情報処理システム1は、見守られる側の部屋を模した箱庭、立体的なアバター映像等を提示してもよい。
例えば、提示機器(例えば端末装置10)は、ロボット等であってもよい。この場合、提示内容は、動き(種類、強弱)、形状変化、剛性変化、温度変化(種類、大きさ、テクスチャー)等であってもよい。例えば、ロボットの場合、提示機器は、小型ヒューマノイド、ペット型ロボット、フラワー型のロボット、空気ソフトロボット等であってもよい。
例えば、提示機器(例えば端末装置10)は、スピーカー等であってもよい。この場合、提示内容は、BGM(種類、強弱、テンポ、プレイリスト)、効果音(種類)等であってもよい。例えば、スピーカーの場合、情報処理システム1は、アップテンポな音またはスローテンポな音等を提示してもよいし、口笛、寝息、笑い声、ため息、咀嚼音等を提示してもよい。
例えば、提示機器(例えば端末装置10)は、ディフューザー、熱源等であってもよい。この場合、提示内容は、香り(種類、強弱)、風(種類、強弱)、温度(強弱)等であってもよい。例えば、ディフューザーの場合、情報処理システム1は、甘い香水の香りまたはスパイシーな料理の香り等を提示してもよいし、強い音または弱い音、継続的な音または断続的な音等を提示してもよい。例えば、熱源の場合、情報処理システム1は、熱いまたは冷たい等を提示してもよい。
情報処理システム1は、提示内容を常に更新してもよいし、ユーザが確認している時のみ提示内容を更新してもよいし、ユーザによるON/OFFの操作に応じて提示内容を更新してもよい。
また、情報処理システム1は、実時間スケールだけでなく、長時間を短時間に圧縮した早回し、複数のイベント発生時のみ抽出して連結したハイライト、時間が短いイベントのスロー・ループ等を提示してもよい。情報処理システム1は、昼間と夜、共有スペースと個室、障がいの程度など、環境やユーザの状態が変化した場合、輝度、音量、動きなど変化が分かりやすくなるよう提示方法を変更したり、調整したりしてもよい。
また、情報処理システム1は、複数の提示機器が連携して観察者(見守る側ユーザ)がいる場所を検知し、最も近いディスプレイを介して提示してもよい。情報処理システム1は、個室等のミクロ環境だけでなく、施設全体等のマクロ環境での比較による定常度合いも提示してもよい。
これにより、情報処理システム1は、見守られる側、見守る側にとって望ましい形でコミュニケーションを行うことができる。
[1-6-2.システム構成例]
ここで、図13を用いて、情報処理システム1における各構成要素の物理的な配置を含む構成態様を概念的に示す。図13は、情報処理システムの構成要素の一例を示す図である。
ここで、図13を用いて、情報処理システム1における各構成要素の物理的な配置を含む構成態様を概念的に示す。図13は、情報処理システムの構成要素の一例を示す図である。
情報処理システム1は、見守られる側のユーザに対応して配置される通信部、処理部、提示部、センシング部を有する。例えば、見守られる側のユーザに対応して配置される通信部は、見守られる側のユーザに対応して配置される構成要素以外の構成要素との間で情報を送受信する。図13中の見守られる側のユーザに対応して配置される通信部は、第1ユーザが利用する端末装置10aの通信部11に対応する。また、図13中の見守られる側のユーザに対応して配置される処理部は、第1ユーザが利用する端末装置10aの制御部18に対応する。また、図13中の見守られる側のユーザに対応して配置される提示部は、第1ユーザが利用する端末装置10aの表示部15及び音声出力部13に対応する。図13中の見守られる側のユーザに対応して配置されるセンシング部は、センサ装置20aに対応する。
情報処理システム1は、見守る側のユーザに対応して配置される通信部、処理部、提示部、センシング部を有する。例えば、見守る側のユーザに対応して配置される通信部は、見守る側のユーザに対応して配置される構成要素以外の構成要素との間で情報を送受信する。図13中の見守る側のユーザに対応して配置される通信部は、第2ユーザが利用する端末装置10bの通信部11に対応する。また、図13中の見守る側のユーザに対応して配置される処理部は、第2ユーザが利用する端末装置10bの制御部18に対応する。また、図13中の見守る側のユーザに対応して配置される提示部は、第2ユーザが利用する端末装置10bの表示部15及び音声出力部13に対応する。図13中の見守る側のユーザに対応して配置されるセンシング部は、センサ装置20bに対応する。
情報処理システム1は、決定処理の構成に対応して配置される通信部、処理部、データベースを有する。例えば、決定処理の構成に対応して配置される通信部は、決定処理の構成に対応して配置される構成要素以外の構成要素との間で情報を送受信する。図13中の決定処理の構成に対応して配置される通信部は、情報処理装置100の通信部110に対応する。また、図13中の決定処理の構成に対応して配置される処理部は、情報処理装置100の制御部130に対応する。また、図13中の決定処理の構成に対応して配置されるデータベースは、情報処理装置100の記憶部120に対応する。
なお、図13に示す構成は最初構成であり、例えば、見守られる側のユーザは複数あってもよい。また、見守る側のユーザは複数あってもよい。このように、情報処理システム1における各構成要素の物理的な配置構成については、提示情報や提示態様等に応じて、任意の構成が採用可能である。
[1-6-3.情報の提示例]
次に、図14及び図15を用いて、情報の提示例について説明する。図14及び図15は、情報の提示の一例を示す図である。すなわち、図14及び図15は、UI(User Interface)の一例を示す図である。
次に、図14及び図15を用いて、情報の提示例について説明する。図14及び図15は、情報の提示の一例を示す図である。すなわち、図14及び図15は、UI(User Interface)の一例を示す図である。
例えば、情報処理システム1は、図14中の提示機器DV1に示すように、提示機器DV1により提示情報を提示してもよい。この場合、情報処理システム1は、ディスプレイを有する提示機器DV1により、花の咲き具合が変わるイメージで提示情報を表示してもよい。例えば、情報処理システム1は、見守られる側の部屋で非定常音が検知された場合、見守る側の描画を変化させてもよい。
なお、情報処理システム1は、見守る側である家族の状況を見守られる側である入居者に伝えてもよい。例えば、情報処理システム1は、図15中の提示機器DV2に示すように、提示機器DV2により提示情報を提示してもよい。この場合、情報処理システム1は、ロボットである提示機器DV2により、ロボットの振る舞いが変わるイメージで提示情報を提示してもよい。例えば、情報処理システム1は、見守る側の孫が元気である場合、見守られる側のロボットである提示機器DV2が音と動きで情報を提示してもよい。
[2.その他の実施形態]
上述した各実施形態に係る処理は、上記各実施形態や変形例以外にも種々の異なる形態(変形例)にて実施されてよい。
上述した各実施形態に係る処理は、上記各実施形態や変形例以外にも種々の異なる形態(変形例)にて実施されてよい。
[2-1.その他の構成例]
上記の情報処理システム1では、端末装置10がユーザの入力やセンシング等の情報を情報処理装置100へ送信し、情報処理装置100から受信した情報を出力するデバイス、いわゆるシンクライアントとして機能する。このように、上述した例では、情報処理システム1は、例えばサーバ側で主な処理を実行するクライアントサーバ方式のシステムのような、いわゆる中央集権型システムの構成を一例として説明した。なお、上記は一例に過ぎず、情報処理システム1における機能の分割は任意の態様が採用可能である。
上記の情報処理システム1では、端末装置10がユーザの入力やセンシング等の情報を情報処理装置100へ送信し、情報処理装置100から受信した情報を出力するデバイス、いわゆるシンクライアントとして機能する。このように、上述した例では、情報処理システム1は、例えばサーバ側で主な処理を実行するクライアントサーバ方式のシステムのような、いわゆる中央集権型システムの構成を一例として説明した。なお、上記は一例に過ぎず、情報処理システム1における機能の分割は任意の態様が採用可能である。
例えば、上述した例の情報処理システム1では、情報処理装置100が画像処理及び音声認識を行うシステム構成を一例として説明したが、画像処理及び音声認識は端末装置10の各々が行ってもよい。また、例えば、端末装置10がコンテンツ等の提示情報の生成処理等を行ってもよい。この場合、端末装置10は、抽象度を決定し、決定した抽象度に基づく情報を出力する情報処理装置として機能する。例えば、端末装置10は、記憶部120に記憶される情報を保有し、処理部132、決定部133、生成部134の機能を有する。例えば、端末装置10は、音声認識、抽象度の決定、生成、出力(表示)に関する処理を行うリッチクライアントとして機能する。そして、情報処理装置100は、各端末装置10から情報を収集し、各端末装置10に必要な情報を提供する。
また、例えば、各端末装置10がいわゆるP2P(Peer to Peer)のような態様により、及び各端末装置10間で見守りに関するサービスを提供するための情報の通信を行ったり、共有を行ったりする場合、情報処理システム1には、サーバ側の装置が含まれなくてもよい。例えば、情報処理システム1は、例えばユーザの端末(クライアント)側で主な処理を実行し、サーバ側の装置は見守りに関する情報の管理のみを行うか、またはサーバ側の装置は含まれないシステム構成、いわゆる自律分散型システムの構成であってもよい。上述のように、情報処理システム1は、中央集権型または自律分散型等いずれの構成であってもよい。
なお、上述した構成は一例であり、上述した見守りに関するサービスを提供可能であれば、情報処理システム1は、どのような機能の分割態様であってもよく、どのような装置構成であってもよい。
[2-2.その他]
また、上記各実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。
また、上記各実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。
また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。
また、上述してきた各実施形態及び変形例は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。
また、本明細書に記載された効果はあくまで例示であって限定されるものでは無く、他の効果があってもよい。
[3.本開示に係る効果]
上述のように、本開示に係る情報処理装置(例えば、実施形態では情報処理装置100)は、取得部(実施形態では取得部131)と、決定部(実施形態では決定部133)とを備える。取得部は、見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とを取得する。決定部は、第1ユーザ情報と第2ユーザ情報とに基づいて、第1ユーザの状態を示す情報である提示情報の抽象度を決定する。
上述のように、本開示に係る情報処理装置(例えば、実施形態では情報処理装置100)は、取得部(実施形態では取得部131)と、決定部(実施形態では決定部133)とを備える。取得部は、見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とを取得する。決定部は、第1ユーザ情報と第2ユーザ情報とに基づいて、第1ユーザの状態を示す情報である提示情報の抽象度を決定する。
このように、本開示に係る情報処理装置は、見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報に基づいて、第1ユーザの状態を示す情報である提示情報の抽象度を決定することにより、情報の抽象度を適切に決定することができる。
また、取得部は、第1ユーザが入力した第1入力情報を含む第1ユーザ情報を取得する。決定部は、第1入力情報に基づいて、第1ユーザの提示情報の抽象度を決定する。このように、情報処理装置は、第1ユーザが入力した第1入力情報に基づいて提示情報の抽象度を決定することにより、情報の抽象度を適切に決定することができる。
また、取得部は、第1ユーザが指定した抽象度のレベルを示す第1入力情報を取得する。決定部は、第1入力情報が示す抽象度のレベルに基づいて、第1ユーザの提示情報の抽象度を決定する。このように、情報処理装置は、第1ユーザが指定した抽象度のレベルに基づいて提示情報の抽象度を決定することにより、情報の抽象度を適切に決定することができる。
また、取得部は、第1ユーザによる抽象度のレベルを下げる指示を示す第1入力情報を取得する。決定部は、第1ユーザによる抽象度のレベルを下げる指示に応じて、第1ユーザの提示情報の抽象度を下げる。このように、情報処理装置は、第1ユーザによる抽象度のレベルを下げる指示に応じて、第1ユーザの提示情報の抽象度を下げることにより、情報の抽象度を適切に決定することができる。
また、取得部は、第1ユーザによる抽象度のレベルを上げる指示を示す第1入力情報を取得する。決定部は、第1ユーザによる抽象度のレベルを上げる指示に応じて、第1ユーザの提示情報の抽象度を上げる。このように、情報処理装置は、第1ユーザによる抽象度のレベルを上げる指示に応じて、第1ユーザの提示情報の抽象度を上げることにより、情報の抽象度を適切に決定することができる。
また、取得部は、センサにより検知された第1ユーザの状態を示す第1センシング情報を含む第1ユーザ情報を取得する。決定部は、第1センシング情報に基づいて、第1ユーザの提示情報の抽象度を決定する。このように、情報処理装置は、センサにより検知された第1ユーザの状態を示す第1センシング情報に基づいて提示情報の抽象度を決定することにより、情報の抽象度を適切に決定することができる。
また、取得部は、第2ユーザが入力した第2入力情報を含む第2ユーザ情報を取得する。決定部は、第2入力情報に基づいて、第2ユーザの提示情報の抽象度を決定する。このように、情報処理装置は、第2ユーザが入力した第2入力情報に基づいて提示情報の抽象度を決定することにより、情報の抽象度を適切に決定することができる。
また、取得部は、第2ユーザが指定した抽象度のレベルを示す第2入力情報を取得する。決定部は、第2入力情報が示す抽象度のレベルに基づいて、第2ユーザの提示情報の抽象度を決定する。このように、情報処理装置は、第2ユーザが指定した抽象度のレベルに基づいて提示情報の抽象度を決定することにより、情報の抽象度を適切に決定することができる。
また、取得部は、第2ユーザによる抽象度のレベルを下げる指示を示す第2入力情報を取得する。決定部は、第2ユーザによる抽象度のレベルを下げる指示に応じて、第2ユーザの提示情報の抽象度を下げる。このように、情報処理装置は、第2ユーザによる抽象度のレベルを下げる指示に応じて、第2ユーザの提示情報の抽象度を下げることにより、情報の抽象度を適切に決定することができる。
また、取得部は、第2ユーザによる抽象度のレベルを上げる指示を示す第2入力情報を取得する。決定部は、第2ユーザによる抽象度のレベルを上げる指示に応じて、第2ユーザの提示情報の抽象度を上げる。このように、情報処理装置は、第2ユーザによる抽象度のレベルを上げる指示に応じて、第2ユーザの提示情報の抽象度を上げることにより、情報の抽象度を適切に決定することができる。
また、取得部は、センサにより検知された第2ユーザの状態を示す第2センシング情報を含む第2ユーザ情報を取得する。決定部は、第2センシング情報に基づいて、第2ユーザの提示情報の抽象度を決定する。このように、情報処理装置は、センサにより検知された第2ユーザの状態を示す第2センシング情報に基づいて提示情報の抽象度を決定することにより、情報の抽象度を適切に決定することができる。
また、決定部は、第1ユーザ情報と第2ユーザ情報とに基づいて、第1ユーザの提示情報を第2ユーザに提示する際の抽象度を決定する。このように、情報処理装置は、提示情報を第2ユーザに提示する際の抽象度を決定することにより、情報の抽象度を適切に決定することができる。
また、決定部は、第1ユーザ情報と第2ユーザ情報とに基づいて、第1ユーザの提示情報を第1ユーザに提示する際の抽象度を決定する。このように、情報処理装置は、提示情報を第1ユーザに提示する際の抽象度を決定することにより、情報の抽象度を適切に決定することができる。
また、決定部は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した第1ユーザの提示情報の保護性に応じて、第1ユーザの提示情報の抽象度を決定する。このように、情報処理装置は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した提示情報の保護性に応じて、第1ユーザの提示情報の抽象度を決定することにより、情報の抽象度を適切に決定することができる。
また、決定部は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した第1ユーザの提示情報の注目性に応じて、第1ユーザの提示情報の情報量を決定する。このように、情報処理装置は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した提示情報の注目性に応じて、第1ユーザの提示情報の情報量を決定することにより、情報量を適切に決定することができる。
また、決定部は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した第1ユーザの提示情報の応答性に応じて、第1ユーザの提示情報の分解能を決定する。このように、情報処理装置は、第1ユーザ情報と第2ユーザ情報とに基づいて決定した提示情報の応答性に応じて、第1ユーザの提示情報の分解能を決定することにより、情報の分解能を適切に決定することができる。
また、情報処理装置は、出力部(実施形態では送信部135)を備える。出力部は、決定部により決定された抽象度に対応する提示情報を出力する。このように、情報処理装置は、決定した抽象度に対応する提示情報を出力することにより、適切な抽象度の情報を出力することができる。
また、出力部は、決定部により決定された抽象度に対応する提示情報を第2ユーザが利用する端末装置に送信する。このように、情報処理装置は、抽象度に対応する提示情報を第2ユーザが利用する端末装置に送信することにより、適切な抽象度の情報を提供することができる。
また、出力部は、決定部により決定された抽象度に対応する提示情報を第1ユーザが利用する端末装置に送信する。このように、情報処理装置は、抽象度に対応する提示情報を第1ユーザが利用する端末装置に送信することにより、適切な抽象度の情報を提供することができる。
[4.ハードウェア構成]
上述してきた各実施形態に係る情報処理装置100や端末装置10等の情報処理装置(情報機器)は、例えば図16に示すような構成のコンピュータ1000によって実現される。図16は、情報処理装置の機能を実現するコンピュータ1000の一例を示すハードウェア構成図である。以下、実施形態に係る情報処理装置100を例に挙げて説明する。コンピュータ1000は、CPU1100、RAM1200、ROM(Read Only Memory)1300、HDD(Hard Disk Drive)1400、通信インターフェイス1500、及び入出力インターフェイス1600を有する。コンピュータ1000の各部は、バス1050によって接続される。
上述してきた各実施形態に係る情報処理装置100や端末装置10等の情報処理装置(情報機器)は、例えば図16に示すような構成のコンピュータ1000によって実現される。図16は、情報処理装置の機能を実現するコンピュータ1000の一例を示すハードウェア構成図である。以下、実施形態に係る情報処理装置100を例に挙げて説明する。コンピュータ1000は、CPU1100、RAM1200、ROM(Read Only Memory)1300、HDD(Hard Disk Drive)1400、通信インターフェイス1500、及び入出力インターフェイス1600を有する。コンピュータ1000の各部は、バス1050によって接続される。
CPU1100は、ROM1300又はHDD1400に格納されたプログラムに基づいて動作し、各部の制御を行う。例えば、CPU1100は、ROM1300又はHDD1400に格納されたプログラムをRAM1200に展開し、各種プログラムに対応した処理を実行する。
ROM1300は、コンピュータ1000の起動時にCPU1100によって実行されるBIOS(Basic Input Output System)等のブートプログラムや、コンピュータ1000のハードウェアに依存するプログラム等を格納する。
HDD1400は、CPU1100によって実行されるプログラム、及び、かかるプログラムによって使用されるデータ等を非一時的に記録する、コンピュータが読み取り可能な記録媒体である。具体的には、HDD1400は、プログラムデータ1450の一例である本開示に係る情報処理プログラムを記録する記録媒体である。
通信インターフェイス1500は、コンピュータ1000が外部ネットワーク1550(例えばインターネット)と接続するためのインターフェイスである。例えば、CPU1100は、通信インターフェイス1500を介して、他の機器からデータを受信したり、CPU1100が生成したデータを他の機器へ送信したりする。
入出力インターフェイス1600は、入出力デバイス1650とコンピュータ1000とを接続するためのインターフェイスである。例えば、CPU1100は、入出力インターフェイス1600を介して、キーボードやマウス等の入力デバイスからデータを受信する。また、CPU1100は、入出力インターフェイス1600を介して、ディスプレイやスピーカーやプリンタ等の出力デバイスにデータを送信する。また、入出力インターフェイス1600は、所定の記録媒体(メディア)に記録されたプログラム等を読み取るメディアインターフェイスとして機能してもよい。メディアとは、例えばDVD(Digital Versatile Disc)、PD(Phase change rewritable Disk)等の光学記録媒体、MO(Magneto-Optical disk)等の光磁気記録媒体、テープ媒体、磁気記録媒体、または半導体メモリ等である。
例えば、コンピュータ1000が実施形態に係る情報処理装置100として機能する場合、コンピュータ1000のCPU1100は、RAM1200上にロードされた情報処理プログラムを実行することにより、制御部130等の機能を実現する。また、HDD1400には、本開示に係る情報処理プログラムや、記憶部120内のデータが格納される。なお、CPU1100は、プログラムデータ1450をHDD1400から読み取って実行するが、他の例として、外部ネットワーク1550を介して、他の装置からこれらのプログラムを取得してもよい。
なお、本技術は以下のような構成も取ることができる。
(1)
見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、前記第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とを取得する取得部と、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの状態を示す情報である提示情報の抽象度を決定する決定部と、
を備える情報処理装置。
(2)
前記取得部は、
前記第1ユーザが入力した第1入力情報を含む前記第1ユーザ情報を取得し、
前記決定部は、
前記第1入力情報に基づいて、前記第1ユーザの前記提示情報の抽象度を決定する
(1)に記載の情報処理装置。
(3)
前記取得部は、
前記第1ユーザが指定した抽象度のレベルを示す前記第1入力情報を取得し、
前記決定部は、
前記第1入力情報が示す抽象度のレベルに基づいて、前記第1ユーザの前記提示情報の抽象度を決定する
(2)に記載の情報処理装置。
(4)
前記取得部は、
前記第1ユーザによる抽象度のレベルを下げる指示を示す前記第1入力情報を取得し、
前記決定部は、
前記第1ユーザによる抽象度のレベルを下げる指示に応じて、前記第1ユーザの前記提示情報の抽象度を下げる
(3)に記載の情報処理装置。
(5)
前記取得部は、
前記第1ユーザによる抽象度のレベルを上げる指示を示す前記第1入力情報を取得し、
前記決定部は、
前記第1ユーザによる抽象度のレベルを上げる指示に応じて、前記第1ユーザの前記提示情報の抽象度を上げる
(3)または(4)に記載の情報処理装置。
(6)
前記取得部は、
センサにより検知された前記第1ユーザの状態を示す第1センシング情報を含む前記第1ユーザ情報を取得し、
前記決定部は、
前記第1センシング情報に基づいて、前記第1ユーザの前記提示情報の抽象度を決定する
(1)~(5)のいずれか1つに記載の情報処理装置。
(7)
前記取得部は、
前記第2ユーザが入力した第2入力情報を含む前記第2ユーザ情報を取得し、
前記決定部は、
前記第2入力情報に基づいて、前記第2ユーザの前記提示情報の抽象度を決定する
(1)~(6)のいずれか1つに記載の情報処理装置。
(8)
前記取得部は、
前記第2ユーザが指定した抽象度のレベルを示す前記第2入力情報を取得し、
前記決定部は、
前記第2入力情報が示す抽象度のレベルに基づいて、前記第2ユーザの前記提示情報の抽象度を決定する
(7)に記載の情報処理装置。
(9)
前記取得部は、
前記第2ユーザによる抽象度のレベルを下げる指示を示す前記第2入力情報を取得し、
前記決定部は、
前記第2ユーザによる抽象度のレベルを下げる指示に応じて、前記第2ユーザの前記提示情報の抽象度を下げる
(8)に記載の情報処理装置。
(10)
前記取得部は、
前記第2ユーザによる抽象度のレベルを上げる指示を示す前記第2入力情報を取得し、
前記決定部は、
前記第2ユーザによる抽象度のレベルを上げる指示に応じて、前記第2ユーザの前記提示情報の抽象度を上げる
(8)または(9)に記載の情報処理装置。
(11)
前記取得部は、
センサにより検知された前記第2ユーザの状態を示す第2センシング情報を含む前記第2ユーザ情報を取得し、
前記決定部は、
前記第2センシング情報に基づいて、前記第2ユーザの前記提示情報の抽象度を決定する
(1)~(10)のいずれか1つに記載の情報処理装置。
(12)
前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの前記提示情報を前記第2ユーザに提示する際の抽象度を決定する
(1)~(11)のいずれか1つに記載の情報処理装置。
(13)
前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの前記提示情報を前記第1ユーザに提示する際の抽象度を決定する
(1)~(12)のいずれか1つに記載の情報処理装置。
(14)
前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて決定した前記第1ユーザの前記提示情報の保護性に応じて、前記第1ユーザの前記提示情報の抽象度を決定する
(1)~(13)のいずれか1つに記載の情報処理装置。
(15)
前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて決定した前記第1ユーザの前記提示情報の注目性に応じて、前記第1ユーザの前記提示情報の情報量を決定する
(1)~(14)のいずれか1つに記載の情報処理装置。
(16)
前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて決定した前記第1ユーザの前記提示情報の応答性に応じて、前記第1ユーザの前記提示情報の分解能を決定する
(1)~(15)のいずれか1つに記載の情報処理装置。
(17)
前記決定部により決定された抽象度に対応する前記提示情報を出力する出力部、
を備える(1)~(16)のいずれか1つに記載の情報処理装置。
(18)
前記出力部は、
前記決定部により決定された抽象度に対応する前記提示情報を前記第2ユーザが利用する端末装置に送信する
(17)に記載の情報処理装置。
(19)
前記出力部は、
前記決定部により決定された抽象度に対応する前記提示情報を前記第1ユーザが利用する端末装置に送信する
(17)または(18)に記載の情報処理装置。
(20)
見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、前記第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とを取得し、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの状態を示す情報である提示情報の抽象度を決定する
処理を実行する情報処理方法。
(1)
見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、前記第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とを取得する取得部と、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの状態を示す情報である提示情報の抽象度を決定する決定部と、
を備える情報処理装置。
(2)
前記取得部は、
前記第1ユーザが入力した第1入力情報を含む前記第1ユーザ情報を取得し、
前記決定部は、
前記第1入力情報に基づいて、前記第1ユーザの前記提示情報の抽象度を決定する
(1)に記載の情報処理装置。
(3)
前記取得部は、
前記第1ユーザが指定した抽象度のレベルを示す前記第1入力情報を取得し、
前記決定部は、
前記第1入力情報が示す抽象度のレベルに基づいて、前記第1ユーザの前記提示情報の抽象度を決定する
(2)に記載の情報処理装置。
(4)
前記取得部は、
前記第1ユーザによる抽象度のレベルを下げる指示を示す前記第1入力情報を取得し、
前記決定部は、
前記第1ユーザによる抽象度のレベルを下げる指示に応じて、前記第1ユーザの前記提示情報の抽象度を下げる
(3)に記載の情報処理装置。
(5)
前記取得部は、
前記第1ユーザによる抽象度のレベルを上げる指示を示す前記第1入力情報を取得し、
前記決定部は、
前記第1ユーザによる抽象度のレベルを上げる指示に応じて、前記第1ユーザの前記提示情報の抽象度を上げる
(3)または(4)に記載の情報処理装置。
(6)
前記取得部は、
センサにより検知された前記第1ユーザの状態を示す第1センシング情報を含む前記第1ユーザ情報を取得し、
前記決定部は、
前記第1センシング情報に基づいて、前記第1ユーザの前記提示情報の抽象度を決定する
(1)~(5)のいずれか1つに記載の情報処理装置。
(7)
前記取得部は、
前記第2ユーザが入力した第2入力情報を含む前記第2ユーザ情報を取得し、
前記決定部は、
前記第2入力情報に基づいて、前記第2ユーザの前記提示情報の抽象度を決定する
(1)~(6)のいずれか1つに記載の情報処理装置。
(8)
前記取得部は、
前記第2ユーザが指定した抽象度のレベルを示す前記第2入力情報を取得し、
前記決定部は、
前記第2入力情報が示す抽象度のレベルに基づいて、前記第2ユーザの前記提示情報の抽象度を決定する
(7)に記載の情報処理装置。
(9)
前記取得部は、
前記第2ユーザによる抽象度のレベルを下げる指示を示す前記第2入力情報を取得し、
前記決定部は、
前記第2ユーザによる抽象度のレベルを下げる指示に応じて、前記第2ユーザの前記提示情報の抽象度を下げる
(8)に記載の情報処理装置。
(10)
前記取得部は、
前記第2ユーザによる抽象度のレベルを上げる指示を示す前記第2入力情報を取得し、
前記決定部は、
前記第2ユーザによる抽象度のレベルを上げる指示に応じて、前記第2ユーザの前記提示情報の抽象度を上げる
(8)または(9)に記載の情報処理装置。
(11)
前記取得部は、
センサにより検知された前記第2ユーザの状態を示す第2センシング情報を含む前記第2ユーザ情報を取得し、
前記決定部は、
前記第2センシング情報に基づいて、前記第2ユーザの前記提示情報の抽象度を決定する
(1)~(10)のいずれか1つに記載の情報処理装置。
(12)
前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの前記提示情報を前記第2ユーザに提示する際の抽象度を決定する
(1)~(11)のいずれか1つに記載の情報処理装置。
(13)
前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの前記提示情報を前記第1ユーザに提示する際の抽象度を決定する
(1)~(12)のいずれか1つに記載の情報処理装置。
(14)
前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて決定した前記第1ユーザの前記提示情報の保護性に応じて、前記第1ユーザの前記提示情報の抽象度を決定する
(1)~(13)のいずれか1つに記載の情報処理装置。
(15)
前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて決定した前記第1ユーザの前記提示情報の注目性に応じて、前記第1ユーザの前記提示情報の情報量を決定する
(1)~(14)のいずれか1つに記載の情報処理装置。
(16)
前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて決定した前記第1ユーザの前記提示情報の応答性に応じて、前記第1ユーザの前記提示情報の分解能を決定する
(1)~(15)のいずれか1つに記載の情報処理装置。
(17)
前記決定部により決定された抽象度に対応する前記提示情報を出力する出力部、
を備える(1)~(16)のいずれか1つに記載の情報処理装置。
(18)
前記出力部は、
前記決定部により決定された抽象度に対応する前記提示情報を前記第2ユーザが利用する端末装置に送信する
(17)に記載の情報処理装置。
(19)
前記出力部は、
前記決定部により決定された抽象度に対応する前記提示情報を前記第1ユーザが利用する端末装置に送信する
(17)または(18)に記載の情報処理装置。
(20)
見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、前記第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とを取得し、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの状態を示す情報である提示情報の抽象度を決定する
処理を実行する情報処理方法。
1 情報処理システム
100 情報処理装置
110 通信部
120 記憶部
121 データ記憶部
122 ユーザ情報記憶部
130 制御部
131 取得部
132 処理部
133 決定部
134 生成部
135 送信部
10 端末装置(出力装置)
11 通信部
12 音声入力部(入力部)
13 音声出力部
14 カメラ
15 表示部
16 操作部(入力部)
17 記憶部
18 制御部
181 取得部
182 送信部
183 受信部
184 処理部
20 センサ装置
100 情報処理装置
110 通信部
120 記憶部
121 データ記憶部
122 ユーザ情報記憶部
130 制御部
131 取得部
132 処理部
133 決定部
134 生成部
135 送信部
10 端末装置(出力装置)
11 通信部
12 音声入力部(入力部)
13 音声出力部
14 カメラ
15 表示部
16 操作部(入力部)
17 記憶部
18 制御部
181 取得部
182 送信部
183 受信部
184 処理部
20 センサ装置
Claims (20)
- 見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、前記第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とを取得する取得部と、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの状態を示す情報である提示情報の抽象度を決定する決定部と、
を備える情報処理装置。 - 前記取得部は、
前記第1ユーザが入力した第1入力情報を含む前記第1ユーザ情報を取得し、
前記決定部は、
前記第1入力情報に基づいて、前記第1ユーザの前記提示情報の抽象度を決定する
請求項1に記載の情報処理装置。 - 前記取得部は、
前記第1ユーザが指定した抽象度のレベルを示す前記第1入力情報を取得し、
前記決定部は、
前記第1入力情報が示す抽象度のレベルに基づいて、前記第1ユーザの前記提示情報の抽象度を決定する
請求項2に記載の情報処理装置。 - 前記取得部は、
前記第1ユーザによる抽象度のレベルを下げる指示を示す前記第1入力情報を取得し、
前記決定部は、
前記第1ユーザによる抽象度のレベルを下げる指示に応じて、前記第1ユーザの前記提示情報の抽象度を下げる
請求項3に記載の情報処理装置。 - 前記取得部は、
前記第1ユーザによる抽象度のレベルを上げる指示を示す前記第1入力情報を取得し、
前記決定部は、
前記第1ユーザによる抽象度のレベルを上げる指示に応じて、前記第1ユーザの前記提示情報の抽象度を上げる
請求項3に記載の情報処理装置。 - 前記取得部は、
センサにより検知された前記第1ユーザの状態を示す第1センシング情報を含む前記第1ユーザ情報を取得し、
前記決定部は、
前記第1センシング情報に基づいて、前記第1ユーザの前記提示情報の抽象度を決定する
請求項1に記載の情報処理装置。 - 前記取得部は、
前記第2ユーザが入力した第2入力情報を含む前記第2ユーザ情報を取得し、
前記決定部は、
前記第2入力情報に基づいて、前記第2ユーザの前記提示情報の抽象度を決定する
請求項1に記載の情報処理装置。 - 前記取得部は、
前記第2ユーザが指定した抽象度のレベルを示す前記第2入力情報を取得し、
前記決定部は、
前記第2入力情報が示す抽象度のレベルに基づいて、前記第2ユーザの前記提示情報の抽象度を決定する
請求項7に記載の情報処理装置。 - 前記取得部は、
前記第2ユーザによる抽象度のレベルを下げる指示を示す前記第2入力情報を取得し、
前記決定部は、
前記第2ユーザによる抽象度のレベルを下げる指示に応じて、前記第2ユーザの前記提示情報の抽象度を下げる
請求項8に記載の情報処理装置。 - 前記取得部は、
前記第2ユーザによる抽象度のレベルを上げる指示を示す前記第2入力情報を取得し、
前記決定部は、
前記第2ユーザによる抽象度のレベルを上げる指示に応じて、前記第2ユーザの前記提示情報の抽象度を上げる
請求項8に記載の情報処理装置。 - 前記取得部は、
センサにより検知された前記第2ユーザの状態を示す第2センシング情報を含む前記第2ユーザ情報を取得し、
前記決定部は、
前記第2センシング情報に基づいて、前記第2ユーザの前記提示情報の抽象度を決定する
請求項1に記載の情報処理装置。 - 前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの前記提示情報を前記第2ユーザに提示する際の抽象度を決定する
請求項1に記載の情報処理装置。 - 前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの前記提示情報を前記第1ユーザに提示する際の抽象度を決定する
請求項1に記載の情報処理装置。 - 前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて決定した前記第1ユーザの前記提示情報の保護性に応じて、前記第1ユーザの前記提示情報の抽象度を決定する
請求項1に記載の情報処理装置。 - 前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて決定した前記第1ユーザの前記提示情報の注目性に応じて、前記第1ユーザの前記提示情報の情報量を決定する
請求項1に記載の情報処理装置。 - 前記決定部は、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて決定した前記第1ユーザの前記提示情報の応答性に応じて、前記第1ユーザの前記提示情報の分解能を決定する
請求項1に記載の情報処理装置。 - 前記決定部により決定された抽象度に対応する前記提示情報を出力する出力部、
を備える請求項1に記載の情報処理装置。 - 前記出力部は、
前記決定部により決定された抽象度に対応する前記提示情報を前記第2ユーザが利用する端末装置に送信する
請求項17に記載の情報処理装置。 - 前記出力部は、
前記決定部により決定された抽象度に対応する前記提示情報を前記第1ユーザが利用する端末装置に送信する
請求項17に記載の情報処理装置。 - 見守られる側のユーザである第1ユーザに関する第1ユーザ情報と、前記第1ユーザを見守る側のユーザである第2ユーザに関する第2ユーザ情報とを取得し、
前記第1ユーザ情報と前記第2ユーザ情報とに基づいて、前記第1ユーザの状態を示す情報である提示情報の抽象度を決定する
処理を実行する情報処理方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022-048112 | 2022-03-24 | ||
JP2022048112 | 2022-03-24 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2023182183A1 true WO2023182183A1 (ja) | 2023-09-28 |
Family
ID=88100880
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2023/010453 WO2023182183A1 (ja) | 2022-03-24 | 2023-03-16 | 情報処理装置及び情報処理方法 |
Country Status (1)
Country | Link |
---|---|
WO (1) | WO2023182183A1 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005078138A (ja) * | 2003-08-28 | 2005-03-24 | Toshiba Corp | 生活モニタ装置 |
JP2006285308A (ja) | 2005-03-31 | 2006-10-19 | Ntt Comware Corp | サービス提供システム |
JP2010122914A (ja) * | 2008-11-19 | 2010-06-03 | Secom Co Ltd | 安心表示システム |
JP2016154320A (ja) * | 2015-02-20 | 2016-08-25 | Kddi株式会社 | 通信端末装置、システム、方法およびプログラム |
JP2017117492A (ja) * | 2017-03-13 | 2017-06-29 | 株式会社日立製作所 | 見守りシステム |
-
2023
- 2023-03-16 WO PCT/JP2023/010453 patent/WO2023182183A1/ja active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005078138A (ja) * | 2003-08-28 | 2005-03-24 | Toshiba Corp | 生活モニタ装置 |
JP2006285308A (ja) | 2005-03-31 | 2006-10-19 | Ntt Comware Corp | サービス提供システム |
JP2010122914A (ja) * | 2008-11-19 | 2010-06-03 | Secom Co Ltd | 安心表示システム |
JP2016154320A (ja) * | 2015-02-20 | 2016-08-25 | Kddi株式会社 | 通信端末装置、システム、方法およびプログラム |
JP2017117492A (ja) * | 2017-03-13 | 2017-06-29 | 株式会社日立製作所 | 見守りシステム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11587272B2 (en) | Intelligent interactive and augmented reality cloud platform | |
US11937929B2 (en) | Systems and methods for using mobile and wearable video capture and feedback plat-forms for therapy of mental disorders | |
KR102038016B1 (ko) | 스마트 휴대 기기를 이용한 스마트 기기와 로봇의 개인 맞춤형 서비스 운용 시스템 및 방법 | |
US10960173B2 (en) | Recommendation based on dominant emotion using user-specific baseline emotion and emotion analysis | |
US11010601B2 (en) | Intelligent assistant device communicating non-verbal cues | |
CN109074117B (zh) | 提供基于情绪的认知助理系统、方法及计算器可读取媒体 | |
WO2018049430A2 (en) | An intelligent interactive and augmented reality based user interface platform | |
US20090171902A1 (en) | Life recorder | |
US9891884B1 (en) | Augmented reality enabled response modification | |
US11483618B2 (en) | Methods and systems for improving user experience | |
US20220301002A1 (en) | Information processing system, communication device, control method, and storage medium | |
CN113168526B (zh) | 用于虚拟和增强现实的系统和方法 | |
US20230336694A1 (en) | Tagging Characteristics of an Interpersonal Encounter Based on Vocal Features | |
US12056275B2 (en) | Method and a system for interacting with physical devices via an artificial-reality device | |
US11169599B2 (en) | Information processing apparatus, information processing method, and program | |
US11544968B2 (en) | Information processing system, information processingmethod, and recording medium | |
WO2023182183A1 (ja) | 情報処理装置及び情報処理方法 | |
WO2023182022A1 (ja) | 情報処理装置、情報処理方法、端末装置及び出力方法 | |
KR20150004952A (ko) | 행동기반 실감영상환경 제어 시스템 | |
CN114556885B (zh) | 消息递送 | |
WO2022181080A1 (ja) | 傾向判定装置、反射体付き表示装置、傾向表示システム装置、傾向判定方法、表示処理方法、傾向表示方法、プログラム及び記録媒体 | |
US20240371001A1 (en) | Medical device for transcription of appearances in an image to text with machine learning | |
WO2021112010A1 (ja) | 情報処理装置、情報処理方法、情報処理プログラム | |
US11270682B2 (en) | Information processing device and information processing method for presentation of word-of-mouth information | |
TW202329150A (zh) | 保護隱私之計算裝置及其方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 23774779 Country of ref document: EP Kind code of ref document: A1 |
|
WWE | Wipo information: entry into national phase |
Ref document number: 2023774779 Country of ref document: EP |
|
ENP | Entry into the national phase |
Ref document number: 2023774779 Country of ref document: EP Effective date: 20241024 |