WO2019163458A1 - 情報処理装置、情報処理システム、情報処理方法、及びプログラム - Google Patents

情報処理装置、情報処理システム、情報処理方法、及びプログラム Download PDF

Info

Publication number
WO2019163458A1
WO2019163458A1 PCT/JP2019/003252 JP2019003252W WO2019163458A1 WO 2019163458 A1 WO2019163458 A1 WO 2019163458A1 JP 2019003252 W JP2019003252 W JP 2019003252W WO 2019163458 A1 WO2019163458 A1 WO 2019163458A1
Authority
WO
WIPO (PCT)
Prior art keywords
state
target person
information
evaluation
information processing
Prior art date
Application number
PCT/JP2019/003252
Other languages
English (en)
French (fr)
Inventor
一希 笠井
亮太 葛西
芦田　徹
悠介 鵜飼
悠樹 脇田
良子 小川
Original Assignee
オムロン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オムロン株式会社 filed Critical オムロン株式会社
Publication of WO2019163458A1 publication Critical patent/WO2019163458A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection

Definitions

  • the present invention relates to an information processing apparatus, an information processing system, an information processing method, and a program.
  • Patent Document 1 Conventionally, there has been known a content providing system that provides content in an optimum output form according to the scene in consideration of the current situation of the user (see, for example, Patent Document 1).
  • content is provided to an appropriate device in an appropriate form for a plurality of devices used by the user in consideration of the current situation of the user.
  • Patent Document 2 a technique in which a target image including a face area of a subject is photographed, and video content to be displayed on a display unit is selected based on the photographed image data (see, for example, Patent Document 2).
  • the technique described in Patent Document 2 displays a plurality of videos on the display unit, captures a target image including the face area of the subject, and displays the plurality of images displayed on the display unit based on the captured image data. From the video content, one video content on which the subject is concentrated is selected and displayed on the display means.
  • Japanese Patent Publication Japanese Patent Laid-Open No. 2015-52981 (published on March 19, 2015)” Japanese Patent Publication “Japanese Patent Laid-Open No. 2006-277192 (published on October 12, 2006)”
  • One aspect of the present invention has been made in view of the above-described circumstances, and an object of the present invention is to realize a technique capable of performing an appropriate response according to an evaluation related to a subject's condition and a subject's service. To do.
  • an information processing apparatus including an acquisition unit, a state determination unit, an output determination unit, and an output unit, wherein the acquisition The unit acquires a captured image including the target person, the state determination unit determines the state of the target person with reference to the captured image, and the output determination unit includes the state of the target person, and It is determined whether at least one of the service provided to the target person or the evaluation related to the candidate is output, and the output unit outputs information determined to be output by the output determination unit.
  • FIG. 1 is a block diagram illustrating a schematic configuration of an information processing apparatus 100 according to the present embodiment.
  • the information processing apparatus 100 determines the state of the target person and outputs at least one of the state of the target person and the evaluation regarding the service provided to the target person or the candidate thereof. Used as a functional unit of the system 1.
  • the information processing apparatus 100 includes an image acquisition unit 101, a state determination unit 102, and an output determination unit 108.
  • the information processing apparatus 100 acquires a captured image including the target person using the function of the image acquisition unit 101.
  • the information processing apparatus 100 determines the attribute of the subject by referring to the captured image including the subject acquired by the image acquisition unit 101 by the function of the state determination unit 102.
  • the attributes of the subject are, for example, the sex, age, race, etc. of the subject.
  • the information processing apparatus 100 provides the target person with a service corresponding to the determined attribute of the target person.
  • the information processing apparatus 100 determines the state of the subject by referring to the captured image including the subject acquired by the image acquisition unit 101 by the function of the state determination unit 102.
  • the state of the subject is, for example, the mood or physical condition of the subject.
  • the information processing apparatus 100 determines to output at least one of the state of the target person and the evaluation of the service of the target person by the function of the output determination unit 108. For example, when it is determined that the physical condition of the subject is an abnormal state, the information processing apparatus 100 determines to output the state of the subject.
  • the information processing apparatus 100 may request assistance necessary for the subject by, for example, reporting an abnormality in the subject's condition to an external device.
  • the information processing apparatus 100 further includes an evaluation creation unit 103.
  • the evaluation creation unit 103 creates an evaluation of the target person for the service provided to the target person with reference to the state of the target person determined by the function of the state determination unit 102.
  • the information processing apparatus 100 may switch the service provided to the target person with reference to the evaluation of the target person for the created service.
  • the information processing apparatus 100 acquires the service candidate and the evaluation information of the person different from the target person regarding the service candidate, and provides the target person with the service May be determined.
  • the information processing apparatus 100 may provide the evaluation of the target person with respect to the service provided to the target person created by the function of the evaluation creation part 103 to the all-user evaluation recording part 150 that is an external apparatus.
  • the all user evaluation recording unit 150 stores evaluation information for each service of a plurality of target persons. Then, the all-user evaluation recording unit 150 provides the plurality of information processing apparatus 100 with the information on the evaluation of the plurality of target persons for each recorded service as the information on the evaluation of the persons different from the target person.
  • the information processing apparatus 100 may be configured to be communicable with a display device including a content display unit 120 that displays image content on a display, and may be configured to provide content to the display device. Further, the information processing apparatus 100 may be configured integrally with a display device including the content display unit 120.
  • the information processing apparatus 100 is an apparatus that provides content to, for example, an on-vehicle display device.
  • the information processing apparatus 100 is not limited to a display device mounted on a vehicle, and may be a device that provides content to a child bed or a study content providing device.
  • the information processing apparatus 100 When the information processing apparatus 100 is applied to a vehicle-mounted display device, for example, a child sitting in the back seat of a car can be used as the subject. Then, the information processing apparatus 100 may switch the content of the moving image to be displayed on the content display unit 120 according to the attributes such as the age and sex of the child who is the target person, and the state, mood, and concentration of the child. . Accordingly, it is possible to provide content that can be watched in a concentrated manner by children, and a parent driving a car in the driver's seat can also concentrate on driving.
  • the information processing apparatus 100 when the information processing apparatus 100 is applied to a display device installed in a child bed, for example, a child sleeping on a child bed can be used as a subject. Then, the information processing apparatus 100 may switch the content of the moving image to be displayed on the content display unit 120 according to the attributes such as the age and sex of the child who is the target person, and the state, mood, and concentration of the child. . For example, if the child is sleeping, provide content that can invite the child to sleep, or improve the child's mood when the child is waking up from sleep It is also possible to provide content that can be used. This allows content to be provided so that the child can feel good and be able to spend safely in the child's bed, and parents who are doing housework away from the child's bed can concentrate on housework with peace of mind. can do.
  • the information processing apparatus 100 when the information processing apparatus 100 is applied to a study content providing apparatus, for example, a person who studies can be used as a target person. And the information processing apparatus 100 may switch the study content displayed on the content display part 120 according to a learner's state, a mood, and the degree of concentration. For example, when the target person is in trouble with the content content, the information processing apparatus 100 may be able to display hints and explanations about the content, or switch the difficulty level of the content. . In addition, when the degree of concentration on the content of the target person is low, the content to be played back may be switched to content such as a moving image that introduces the problem of the game format or interesting trivia that attracts the target person's interest. .
  • At least one of the state information indicating the state of the subject and the evaluation information obtained by referring to the state information is output to an external device and shared with the subject. Can provide more diverse services.
  • FIG. 1 is a block diagram illustrating a schematic configuration of the information processing apparatus 100.
  • FIG. 2 is a diagram schematically illustrating a configuration example when the information processing device 100 is used as a device that provides content to the in-vehicle display device 10.
  • the information processing apparatus 100 is used as a component of the information processing system 1.
  • the information processing system 1 includes an information processing apparatus 100, a content display unit 120, an all-user evaluation recording unit 150, a content server 170, and an external system 140. Note that the information processing apparatus 100 and the content display unit 120 may be configured integrally with the display apparatus 10.
  • the content display unit 120 is a display device such as a liquid crystal display, and is configured to display an image based on image data provided from the information processing apparatus 100.
  • the display device 10 includes an imaging unit 15 provided in a frame portion surrounding the content display unit 120.
  • the imaging unit 15 is a camera in which an image sensor such as a CMOS or CCD and a lens are combined, for example, and is configured to be able to capture a viewer of the image content displayed on the content display unit 120.
  • the imaging unit 15 may be provided separately from the display device 10, and is provided in a living room or in a vehicle so that a viewer of a content image displayed by the content display unit 120 can be captured. It may be done.
  • the structure provided with two or more with respect to the one display apparatus 10 may be sufficient as the imaging part 15, and the one or several imaging part 15 is provided with respect to the several display apparatus 10.
  • FIG. It may be a configuration.
  • the display device 10 may be, for example, a so-called rear monitor provided for a rear seat of a vehicle, and a child sitting on a child seat can be suitably used as a viewing target.
  • the display device 10 can be used by being attached to a child seat using a rear portion of a front seat or an attachment arm.
  • the display device 10 is preferably configured such that the height and orientation of the content display unit 120 can be adjusted according to the position and height of the subject.
  • the information processing apparatus 100 can be configured to be built in the display apparatus 10 and configured to be able to communicate with the content server 170 and the external system 140 via wireless communication. Although not shown, the information processing apparatus 100 is preferably configured to be able to communicate with a portable terminal such as a car navigation system in a car or a smartphone in the car via wired communication or wireless communication. The various types of information processed by the information processing apparatus 100 are preferably configured to be confirmed by a car navigation system or a portable terminal.
  • the all-user evaluation recording unit 150 is an external server that can communicate with the information processing apparatus 100 via wireless communication, and each of the plurality of information processing apparatuses 100 transmits state information to be described later. And evaluation information is recorded.
  • the evaluation information is evaluation information related to service candidates that can be provided to the target person, and is at least one of evaluation information associated with a person different from the target person and past evaluation information associated with the target person. It is included.
  • the content server 170 is an external server in which content (information) that can be provided to the target person is stored.
  • content server 170 for example, moving images of various genres are stored.
  • the all user evaluation recording unit 150 may be provided on the content server 170.
  • the external system 140 is a security system that is managed and operated by an operator that provides security services.
  • the external system 140 receives a notification from the information processing apparatus 100 to notify the abnormality of the subject person, the external system 140 instructs the subject person to dispatch a person, or contacts an emergency or fire department depending on the state of the subject person. Or do.
  • the information processing apparatus 100 includes an image acquisition unit 101, a state determination unit 102, an output determination unit 108, and an output unit 130. Further, the information processing apparatus 100 includes an evaluation creation unit 103, an evaluation recording unit 104, and an evaluation transmission unit 105. Further, the information processing apparatus 100 includes a content determination unit 106 and a content switching unit 107. In addition, the information processing apparatus 100 includes a display unit 131.
  • the state determination unit 102, the output determination unit 108, the output unit 130, the evaluation creation unit 103, the evaluation recording unit 104, the evaluation transmission unit 105, the content determination unit 106, and the content switching unit 107 control the entire information processing apparatus 100. It is included in the control unit that controls.
  • the image acquisition unit 101 acquires a captured image including the target person.
  • the target person has shown the viewing target person of the content image which the content display part 120 displays, it is not limited to this.
  • the target person only needs to be a target person who provides a service based on information processed by the information processing apparatus 100.
  • the information processing apparatus 100 can provide other information such as a safety monitoring service for the target person in addition to providing image content. It may be a target person who provides the service.
  • the image acquisition unit 101 acquires a captured image including the target person from the imaging unit 15 described above.
  • the image acquisition unit 101 may be configured to include the function of the imaging unit 15.
  • the image acquisition unit 101 provides the captured image including the acquired subject to the state determination unit 102.
  • the image acquisition unit 101 has an image analysis function such as a face recognition function, for example, recognizes the target person from the captured image, and extracts an image related to the target person, for example, an image of the face of the target person, from the captured image. May be provided to the state determination unit 102.
  • the state determination unit 102 refers to the captured image provided from the image acquisition unit 101 to determine the state of the subject. For example, the state determination unit 102 determines whether the target person is concentrating on the content image displayed on the content display unit 120 with reference to the captured image provided from the image acquisition unit 101. . It can be determined using a known technique whether or not the subject is intensively viewing the content image. For example, the state determination unit 102 detects the subject's line of sight from the captured image, measures the time during which the content image is viewed, and calculates the concentration level of the subject from the ratio of the content image airing time. Also good.
  • the state determination unit 102 refers to the captured image provided from the image acquisition unit 101 to determine a mood such as the subject's crying, laughing, or concentrating from the facial expression of the subject. May be.
  • the state determination unit 102 can determine the mood of the subject from the facial expression of the subject using a known technique. For example, the state determination unit 102 determines the mood of the subject from the captured image based on information such as the degree of opening / closing of the subject's eyes, the shape of the corner of the eye, the shape of the wrinkle, the shape of the mouth corner, the degree of opening / closing of the mouth. May be.
  • the state determination unit 102 may determine the subject's mood and use information indicating the determination result as the degree of smile of the subject.
  • the state determination unit 102 can determine whether or not the state of the subject is in an abnormal state different from a predetermined normal state with reference to the captured image provided from the image acquisition unit 101. Good.
  • the state determination unit 102 can be configured to determine whether or not the state of the subject is in an abnormal state different from a predetermined normal state using a known technique.
  • the abnormal state different from the predetermined normal state is, for example, a state such as a state in which the subject has lost consciousness or a state in which a serious injury has occurred.
  • the state determination unit 102 may determine the state of the subject from the facial expression of the subject, the degree of concentration, the motion of the subject, and the movement of the body with reference to the captured image. If the state determination unit 102 determines that the state of the subject determined with reference to the captured image is an abnormal state indicating a sudden change in physical condition or a dangerous state, the determination unit 102 provides the determination result to the output determination unit 108.
  • the state determination unit 102 refers to the captured image provided from the image acquisition unit 101 to determine the state of the subject. Then, the state determination unit 102 generates state information indicating the state of the subject based on the determination result, and provides the state information to the evaluation creation unit 103. If the state determination unit 102 determines that the subject's state is in an abnormal state different from a predetermined normal state, the state determination unit 102 provides the determination result to the output determination unit 108.
  • the state determination unit 102 may be able to determine attributes such as the sex, age, and race of the target person with reference to the captured image provided from the image acquisition unit 101.
  • the state determination unit 102 provides attribute information indicating the attributes of the target person to the evaluation creation unit 103 together with the state information. Further, the state determination unit 102 provides the content determination unit 106 with attribute information indicating the attributes of the target person.
  • the output determination unit 108 determines whether to output at least one of the status of the target person and the evaluation related to the service provided to the target person or its candidate.
  • the output determination unit 108 switches between the information output destination and the information to be output according to the state of the subject determined by the state determination unit 102. For example, the output determination unit 108 outputs the state of the subject and the evaluation created by the evaluation creation unit 103 when the state of the subject is normal. On the other hand, the output determination unit 108 outputs only the state of the subject when the state of the subject is abnormal.
  • the output determination unit 108 includes (A) the state of the target person determined by the state determination unit, (B) a part of the evaluation for each service of the plurality of target persons acquired by the content determination unit, and (C ) It is determined that at least one of the evaluations for each service of the target person created by the evaluation creation unit is output.
  • the output determining unit 108 may determine to output a plurality of pieces of information among these (A) to (C).
  • the state determination unit 102 determines whether or not the subject's state is in an abnormal state different from a predetermined normal state, and the output determination unit 108 determines whether or not the subject's state is in an abnormal state.
  • the information to be output is switched.
  • an evaluation according to the mood and concentration of a child in a monitored area such as a rear seat of a car or a child's bed is output, and the child in the monitored area is in an abnormal state.
  • information notifying an abnormal condition can be output.
  • the evaluation creation unit 103 refers to the state information indicating the state of the target person provided from the state determination unit 102 and generates evaluation information indicating the evaluation of the target person's content image.
  • the target person in the present embodiment is a target person who receives a service provided by the information processing apparatus 100, and the evaluation information is evaluation information regarding a service provided to the target person by the information processing apparatus 100. .
  • FIG. 3 is a diagram illustrating a relationship between the state information indicating the state of the subject determined by the state determination unit 102 and the evaluation information obtained by the evaluation creating unit 103 with reference to the state information.
  • the state information includes, for example, information on the degree of concentration of the subject person with respect to the content image and the degree of smile of the subject person.
  • the evaluation creation unit 103 creates evaluation information for the target person's content image in five stages 1 to 5 based on the concentration level of the target person and the smile level of the target person. For example, the evaluation creation unit 103 creates “5”, which is the highest in the five-step evaluation, as evaluation information for the content of the subject if both the concentration level of the subject and the smile level of the subject are 80% or more. Further, the evaluation creation unit 103 sets “4”, which is the second highest from the top in the five-level evaluation, to the content of the subject if the concentration of the subject and the smile of the subject are both 60% or more and less than 80%. Create as evaluation information for.
  • the evaluation creation unit 103 sets “3”, which is an intermediate evaluation in a five-level evaluation, to the content of the target person when both the concentration level of the target person and the smile level of the target person are 40% or more and less than 60%. Create as evaluation information.
  • the evaluation creating unit 103 applies “2”, which is the second evaluation from the bottom in the five-level evaluation. Created as evaluation information for the contents of Further, the evaluation creation unit 103 sets “1”, which is the lowest evaluation in the five-level evaluation, to the content of the target person if both the concentration level of the target person and the smile degree of the target person are 0% or more and less than 20%. Create as evaluation information.
  • the evaluation creation unit 103 provides the evaluation recording unit 104 with the evaluation information created by referring to the state information, together with the attribute information indicating the attributes of the target person provided from the state determination unit 102.
  • the evaluation recording unit 104 records the evaluation information created by the evaluation creating unit 103 for a predetermined period.
  • the evaluation recording unit 104 includes “non-temporary tangible medium” such as ROM (Read Only Memory), tape, disk, card, semiconductor memory, and programmable logic circuit.
  • ROM Read Only Memory
  • evaluation information is stored in association with the attribute information of the target person. Further, the information related to the content displayed on the content display unit 120 is provided from the content switching unit 107 to the evaluation recording unit 104.
  • FIG. 4 is a diagram showing an evaluation table recorded in the evaluation recording unit 104.
  • the evaluation table recorded in the evaluation recording unit 104 includes attribute information such as the age and sex of the target person, information indicating the presence or absence of the target person's abnormal state, and the target person.
  • the information indicating the content being stored and the evaluation information are stored in association with the content distribution time.
  • the evaluation recording unit 104 may store, for each content, the evaluation information for the content, the content distribution time, and the attributes of the target person.
  • the control unit stops distribution of the content and records a log indicating that there is an abnormal state in the evaluation table. Also good.
  • the evaluation transmission unit 105 transmits the evaluation information stored in the evaluation recording unit 104 to all user evaluation recording units 150, which are external servers, together with the attribute information of the target person and information related to the content.
  • the evaluation transmission unit 105 transmits these pieces of information to all user evaluation recording units 150 at predetermined intervals.
  • the evaluation transmission unit 105 may be configured to transmit these pieces of information to the all-user evaluation recording unit 150 at a predetermined time every day.
  • the number of times the evaluation transmission unit 105 transmits information to all user evaluation recording units 150 may be once every few days, once a day, or multiple times a day. Further, the evaluation transmission unit 105 may be configured to transmit information to the all-user evaluation recording unit 150 at a timing when content distribution is stopped.
  • the evaluation transmission unit 105 may be configured to transmit information to the all user evaluation recording unit 150 from information next to the previously transmitted information. Further, the information transmitted by the evaluation transmission unit 105 is deleted from the evaluation recording unit 104. The evaluation transmission unit 105 stores all the information recorded in the evaluation recording unit 104 for all user evaluation recording units 150. The structure which transmits to may be sufficient.
  • FIG. 5 is a diagram showing an evaluation table recorded in the all user evaluation recording unit 150.
  • the evaluation table recorded in the all-user evaluation recording unit 150 includes the age of the target person in association with the content distribution time and the device ID for specifying the transmission source device. Attribute information such as gender, information indicating the presence or absence of an abnormal state of the subject, information indicating content provided to the subject, and evaluation information are stored.
  • the content determination unit 106 determines content to be provided to the target person based on at least one of the state information generated by the state determination unit 102 and the evaluation information generated by the evaluation generation unit 103.
  • the content determination unit 106 also includes at least one of attribute information indicating the attributes of the target person generated by the state determination unit 102 and evaluation information stored in the all-user evaluation recording unit 150 and the evaluation recording unit 104. And select the content to be provided to the target person.
  • the content determination unit 106 refers to attributes such as the age, sex, and race of the target person and evaluation information associated with a person having the same attribute different from the target person, Content that is preferred may be selected.
  • the content determination unit 106 uses the evaluation information of FIG. 4 stored in the evaluation recording unit 104 when the target person is a 4-year-old man and the evaluation of the currently viewed content is 1. With reference to the content A or the content E, the evaluation by a person having the same attribute as the target person may be selected.
  • the content determination unit 106 uses the evaluation information in FIG. 5 stored in the all-user evaluation recording unit 150. With reference to the content J, the content J having a higher evaluation by a person having the same attribute as the target person may be selected.
  • the content determination unit 106 when the evaluation created by the evaluation creation unit 103 is equal to or less than a predetermined evaluation, for example, 3 or less in 5 stages, the attribute information of the target person, the all-user evaluation recording unit 150, The content to be provided to the target person is selected with reference to at least one of the evaluation information stored in the evaluation recording unit 104.
  • the content determination unit 106 may be configured to acquire content candidates that can be provided to the target person from the content server 170 via the content switching unit 107.
  • the content determination unit 106 may acquire content candidates that can be provided to the target person from the all-user evaluation recording unit 150. .
  • the content determination unit 106 can acquire service information including content candidates to be provided to the target person and evaluation information related to the content candidates. Then, the content determination unit 106 may further determine the content to be provided to the target person with reference to the acquired service information. The content determination unit 106 may determine content to be provided to the target person with reference to evaluation information regarding one or more contents included in the service information.
  • the information processing apparatus 100 is linked to the in-vehicle navigation system, and the content determination unit 106 determines content having a length corresponding to the estimated arrival time to the purpose set in the navigation system as a content candidate,
  • the configuration may be such that it can be selected with reference to the evaluation information regarding the content.
  • the content determination unit 106 determines the content to be provided to the target person, the content determination unit 106 outputs a switching instruction to switch the content displayed on the content display unit 120 to the content switching unit 107.
  • the content switching unit 107 refers to the switching instruction output from the content determination unit 106 and acquires content including an image from the content server 170. Then, the content switching unit 107 switches the content to be reproduced to the content acquired from the content server 170 with reference to the switching instruction.
  • the image acquisition unit 101 that acquires a captured image including the target person is also referred to as an acquisition unit.
  • the content determination unit 106 that acquires service information and the content switching unit 107 that acquires content from the content server 170 are collectively referred to as a “service determination unit”.
  • the output unit 130 When the state determination unit 102 determines that the state of the subject is in an abnormal state different from a predetermined normal state, the output unit 130 outputs the state of the subject to the display unit 131 and the external system. Output to 140.
  • At least one of the state information indicating the state of the subject and the evaluation information obtained by referring to the state information is an external device. It is output to the all user evaluation recording unit 150.
  • At least one of state information indicating the state of the subject and evaluation information obtained by referring to the state information is stored in the external system 140 that is another external device. Is output.
  • the output determination unit 108 switches the destination device to output the state information depending on whether or not the subject is in an abnormal state.
  • the display unit 131 functions as a presentation unit that presents the state of the subject when the state determination unit 102 determines that the state of the subject is in an abnormal state different from a predetermined normal state.
  • the display unit 131 is a display device, and displays warning information according to a warning display instruction output from the output unit 130.
  • the method of presenting the state of the subject person is not limited to the method based on the display of the warning information on the display unit 131, but is based on other presentation methods such as an alarm sound and lighting of a warning lamp. Also good.
  • the display unit 131 may be a display device separate from the information processing apparatus 100, and is configured to be able to communicate with a display display of a car navigation system, a display display of a portable terminal such as a smartphone, or the information processing apparatus 100. It may be a monitor.
  • the display unit 131 is a display for a car navigation system
  • the display unit 131 when it is determined that the child in the rear seat, which is the subject, is in an abnormal state different from a predetermined normal state, The status is presented to the driver's seat parent.
  • the parent when the state of the child in the rear seat becomes an abnormal state different from the predetermined normal state, the parent can quickly notice the abnormality of the child. Therefore, even during driving when the state of the child in the rear seat cannot be confirmed, it is possible to concentrate on driving without worrying about the state of the child.
  • FIG. 6 is a flowchart illustrating an example of a processing flow of the information processing apparatus 100.
  • Step S1 The image acquisition unit 101 acquires a captured image including the target person.
  • Step S2 The state determination unit 102 refers to the captured image acquired by the image acquisition unit 101 and estimates the attribute of the target person.
  • Step S3 The content determination unit 106 acquires content according to the attributes of the target person estimated by the state determination unit 102.
  • the content determination unit 106 associates the attribute of the target person, past evaluation information associated with the target person recorded in the evaluation recording part 104, and a person different from the target person acquired from the all-user evaluation recording part 150.
  • the content to be acquired is selected with reference to at least one of the received evaluation information, and the content is acquired via the content switching unit 107.
  • Step S4 The state determination unit 102 refers to the captured image acquired by the image acquisition unit 101 to determine the state of the subject.
  • the state determination part 102 produces
  • the evaluation creation unit 103 refers to the state information indicating the state of the target person generated by the state determination unit 102 and generates evaluation information indicating the evaluation regarding the content of the target person.
  • Step S6 The content determination unit 106 refers to the evaluation information created by the evaluation creation unit 103 to determine whether or not the evaluation regarding the content of the target person is greater than or equal to a certain level. If the content determination unit 106 determines that the evaluation regarding the content of the target person is greater than or equal to a certain level (Yes in step S6), the content determination unit 106 proceeds to step S7. If the content determination unit 106 determines that the evaluation regarding the content of the target person is not a certain level (No in step S6), the content determination unit 106 proceeds to step S13.
  • Step S7 The content determination unit 106 determines whether the display of the content on the content display unit 120 is finished. If the content determination unit 106 determines that the display of the content has ended (Yes in step S7), the process proceeds to step S8. If the content determination unit 106 determines that the display of content has not ended (No in step S7), the content determination unit 106 returns to step S1 and continues the processing.
  • Step S8 The evaluation recording unit 104 records the evaluation information created by the evaluation creating unit 103 and ends the process.
  • Step S9 The state determination unit 102 determines whether or not the subject's state is in an abnormal state different from a predetermined normal state. If the state determination unit 102 determines that the state of the subject is in an abnormal state (Yes in step S9), the state determination unit 102 proceeds to step S10. If the state determination unit 102 determines that the state of the subject is not in an abnormal state (No in step S9), the process ends.
  • Step S10 The state determination unit 102 determines whether or not the vehicle on which the subject is riding is in automatic driving, that is, whether the vehicle is traveling in a state where the driver is not riding. If the state determination unit 102 determines that automatic driving is being performed (Yes in step S10), the process proceeds to step S12. If the state determination part 102 determines that it is not in automatic driving
  • Step S11 In response to the determination of the state determination unit 102, the output determination unit 108 outputs a notification instruction to the output unit 130, and displays a warning display on the display unit 131, so that the driver is in an abnormal state. Inform you that there is. Based on the notification instruction from the state determination unit 102, the output unit 130 may notify the driver that the target person is in an abnormal state and also notify the external system 140 of the abnormality.
  • Step S12 In response to the determination of the state determination unit 102, the output determination unit 108 outputs a notification instruction to the output unit 130 and notifies the external system 140 that the target person is in an abnormal state.
  • the external system 140 is notified that the subject is in an abnormal state. Can use self-driving cars with peace of mind.
  • step S13 In step S 6, when the content determination unit 106 determines that the evaluation regarding the target person's content is not a certain level or more, the evaluation recording unit 104 records the target person's evaluation information for the content created by the evaluation creation unit 103. The process proceeds to step S14.
  • Step S14 The content determination unit 106 determines whether the display of the content on the content display unit 120 is finished. If the content determination unit 106 determines that the display of the content is complete (Yes in step S14), the content determination unit 106 ends the process. If the content determination unit 106 determines that the display of content has not ended (No in step S14), the process proceeds to step S15.
  • the content determination unit 106 includes at least past evaluation information associated with the target person recorded in the evaluation recording part 104 and evaluation information associated with a person different from the target person acquired from the all-user evaluation recording part 150. With reference to either, the content to be acquired is selected, and the content is acquired via the content switching unit 107.
  • Step S16 The content switching unit 107 switches the content displayed on the content display unit 120 to the content newly acquired from the content server 170, returns to step S4, and continues the processing.
  • the image acquisition unit 101 acquires captured images including the subject at predetermined time intervals, for example, while the information processing apparatus 100 is operating.
  • the state determination unit 102 may be configured to periodically determine the state of the subject at the timing at which the image acquisition unit 101 acquires the captured image.
  • the state determination unit 102 can sequentially determine the state of the target person by shortening the cycle in which the image acquisition unit 101 acquires the captured image.
  • control blocks of the information processing apparatus 100 (particularly the state determination unit 102, the output determination unit 108, the output unit 130, the evaluation creation unit 103, the evaluation recording unit 104, the evaluation transmission unit 105, the content determination unit 106, and the content switching unit 107) Alternatively, it may be realized by a logic circuit (hardware) formed in an integrated circuit (IC chip) or the like, or may be realized by software.
  • the information processing apparatus 100 includes a computer that executes instructions of a program that is software for realizing each function.
  • the computer includes, for example, one or more processors and a computer-readable recording medium storing the program.
  • the processor reads the program from the recording medium and executes the program, thereby achieving the object of the present invention.
  • a CPU Central Processing Unit
  • the recording medium a “non-temporary tangible medium” such as a ROM (Read Only Memory), a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used.
  • a RAM Random Access Memory
  • the program may be supplied to the computer via any transmission medium (such as a communication network or a broadcast wave) that can transmit the program.
  • any transmission medium such as a communication network or a broadcast wave
  • one aspect of the present invention can also be realized in the form of a data signal embedded in a carrier wave, in which the program is embodied by electronic transmission.
  • the specific configuration of the classification and learning process for determining the state of the subject by the state determination unit 102, switching the information to be output and switching the output destination by the output determination unit 108, and determining the content by the content determination unit 106 is as follows.
  • the present embodiment is not limited, and for example, any of the following machine learning methods or a combination thereof can be used.
  • SVM Support Vector Machine
  • IDP Inductive Logic Programming
  • GP Genetic Algorithm
  • BN Baysian Network
  • NN Neural network
  • 3D data may be processed and used in advance for input to the neural network.
  • a method such as data argumentation (Deta Argumentation) can be used in addition to the one-dimensional arrangement or multidimensional arrangement of data.
  • a convolutional neural network including convolution processing
  • CNN Convolutional Neural Network
  • a convolution layer that performs a convolution operation is provided as one or a plurality of layers (layers) included in the neural network, and a filter operation (product-sum operation) is performed on input data input to the layer. It is good also as a structure. Further, when performing the filter operation, a process such as padding may be used together, or an appropriately set stride width may be adopted.
  • a multi-layer or super multi-layer neural network having several tens to several thousand layers may be used.
  • the machine learning used for the state determination process of the subject by the state determination unit 102 and the content determination process by the content determination unit 106 may be supervised learning or unsupervised learning.
  • An information processing apparatus is an information processing apparatus including an acquisition unit, a state determination unit, an output determination unit, and an output unit, wherein the acquisition unit includes a captured image including a target person.
  • the state determination unit refers to the captured image to determine the state of the target person, and the output determination unit includes the state of the target person and a service provided to the target person or It is determined whether at least one of the evaluations related to the candidate is output, and the output unit outputs information that the output determination unit determines to output.
  • the output determination unit determines whether to output at least one of the status of the target person and the evaluation regarding the service provided to the target person or its candidate. Therefore, an external device that receives information output from the information processing device can collect and use state information and evaluation information from a plurality of target persons. Appropriate measures can be taken according to the evaluation.
  • the information processing apparatus further includes a service determination unit that determines a service to be provided to the target person with reference to the state of the target person determined by the state determination part in the aspect 1. It is the composition which is provided.
  • the acquisition unit further includes service information including a service candidate to be provided to the target person and evaluation information related to the service candidate.
  • the service determining unit further refers to the service information to determine a service to be provided to the target person.
  • the service determination unit determines the service to be provided by referring to the service information including the service candidate and the evaluation information regarding the service candidate.
  • a suitable service can be provided.
  • the evaluation information related to the service candidate is associated with evaluation information associated with a person different from the target person and with the target person.
  • at least one of the past evaluation information is included.
  • various services are provided to determine services to be provided to a target person by referring not only to the target person's past evaluation information but also to evaluation information associated with a person different from the target person.
  • the service suitable for the target person can be provided.
  • the information processing apparatus is the information processing apparatus according to aspects 3 and 4, wherein the service is reproduction of content including an image, and the service determination unit includes one or more of the service information included in the service information
  • the configuration is such that content to be reproduced is switched with reference to evaluation information regarding the content.
  • the image content more suitable for the target person from various image contents can be provided.
  • the state determination unit determines whether or not the state of the subject is in an abnormal state different from a predetermined normal state.
  • the said output judgment part is the structure which switches the information to output according to whether the said subject's state is in an abnormal state.
  • the state determination unit determines whether the state of the subject is in an abnormal state different from a predetermined normal state.
  • the said output part is the structure which switches the apparatus of the destination which outputs status information according to whether the said subject's state is in an abnormal state.
  • the service provided to the subject is switched in order to switch the device to which the state information is output depending on whether the subject's state is in an abnormal state different from a predetermined normal state.
  • content distribution can be changed to notification to the notification system, and a service more suitable for the target person can be provided.
  • the information processing apparatus has a configuration further including a presentation unit that presents the state of the subject in the aspects 1 to 7.
  • an information processing system includes at least one of the information processing device according to aspects 1 to 8, the state information output from the information processing device, and the evaluation information. It is the structure provided with the server which acquires either.
  • the server can manage the status information output from each of a plurality of information processing apparatuses and the evaluation information, and therefore can provide an appropriate service to each of a plurality of subjects. .
  • an information processing method includes a captured image acquisition step of acquiring a captured image including a target person, and the state of the target person with reference to the captured image.
  • a state determination step for determining; an output determination step for determining whether to output at least one of the status of the target person and the service provided to the target person or an evaluation thereof; and output information determined to be output And an information output step.
  • the evaluation on the status of the target person and the service of the target person is performed. Accordingly, it is possible to appropriately respond to the target person.
  • an information processing program for causing a computer to function as the information processing apparatus according to aspect 1, and includes the acquisition unit and the state determination And the output determination unit, and the computer functions as the output unit.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Emergency Management (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Alarm Systems (AREA)

Abstract

対象者の状態、及び対象者のサービスに関する評価に応じた適切な対応を行うことができる技術を実現する。対象者を含む撮像画像を参照して、対象者の状態を判定し、対象者の状態、及び、対象者に提供されるサービス又はその候補に関する評価の少なくとも何れを出力するかを判断し、出力すると判断した情報を出力する。

Description

情報処理装置、情報処理システム、情報処理方法、及びプログラム
　本発明は、情報処理装置、情報処理システム、情報処理方法、及びプログラムに関する。
　従来、ユーザの現在の状況を考慮して、シーンに応じた最適な出力形態でコンテンツを提供するコンテンツ提供システムが知られている（例えば、特許文献１参照）。特許文献１に記載のコンテンツ提供システムでは、ユーザが使用する複数のデバイスに対して、ユーザの現在の状況を考慮して、適切なデバイスに適切な形態でコンテンツを提供している。
　また、被撮影者の顔領域を含む対象画像を撮影して、撮影した画像データに基づいて、表示手段に表示させる映像コンテンツを選択する技術が知られている（例えば、特許文献２参照）。特許文献２に記載の技術は、表示手段に複数の映像を表示するとともに、被撮影者の顔領域を含む対象画像を撮影して、撮影した画像データに基づいて、表示手段に表示された複数の映像コンテンツの中から、被撮影者が集中している１つの映像コンテンツを選択して、表示手段に表示させている。
日本国公開特許公報「特開２０１５－５２９８１号公報（２０１５年３月１９日公開）」 日本国公開特許公報「特開２００６－２７７１９２号公報（２００６年１０月１２日公開）」
　しかしながら、上述のような従来技術では、対象者に対して提供することができるサービスが限定的であり、さらに、対象者の状態や、対象者のサービスに対する評価に応じた適切な対応ができないという問題がある。
　本発明の一態様は、上述の事情に鑑みてなされたものであり、対象者の状態、及び対象者のサービスに関する評価に応じた適切な対応を行うことができる技術を実現することを目的とする。
　前記の課題を解決するために、本発明の一態様に係る情報処理装置は、取得部と、状態判断部と、出力判断部と、出力部とを備えた情報処理装置であって、前記取得部は、対象者を含む撮像画像を取得し、前記状態判断部は、前記撮像画像を参照して、前記対象者の状態を判定し、前記出力判断部は、前記対象者の状態、及び、前記対象者に提供されるサービス又はその候補に関する評価の少なくとも何れを出力するかを判断し、前記出力部は、上記出力判断部が出力すると判断した情報を出力する構成である。
　本発明の一態様によれば、対象者の状態、及び対象者のサービスに関する評価に応じた適切な対応を行うことができる。
本実施形態に係る情報処理システムの概略構成を示すブロック図である。 情報処理装置を適用した表示装置の構成を模式的に示す図である。 状態情報と、評価情報との関係を示す図である。 評価記録部に記録されている評価テーブルを示す図である。 全ユーザ評価記録部に記録されている評価テーブルを示す図である。 制御部の処理の流れを示すフローチャートである。
　以下、本発明の一側面に係る実施形態（以下、「本実施形態」とも表記する）を、図面に基づいて説明する。ただし、以下で説明する本実施形態は、あらゆる点において本発明の例示に過ぎない。本発明の範囲を逸脱することなく種々の改良や変形を行うことができることは言うまでもない。つまり、本発明の実施にあたって、実施形態に応じた具体的構成が適宜採用されてもよい。なお、本実施形態において登場するデータを自然言語により説明しているが、より具体的には、コンピュータが認識可能な疑似言語、コマンド、パラメータ、マシン語等で指定される。
　§１　適用例
　まず、図１を用いて、本発明が適用される場面の一例について説明する。図１は、本実施形態に係る情報処理装置１００の概略構成を示すブロック図である。情報処理装置１００は、例えば、図１に示されるとおり、対象者の状態を判定し、対象者の状態、及び対象者に提供されるサービス又はその候補に関する評価の少なくとも何れかを出力する情報処理システム１の機能ユニットとして用いられる。
　情報処理装置１００は、画像取得部１０１と、状態判断部１０２と、出力判断部１０８とを含んでいる。情報処理装置１００は、画像取得部１０１の機能により、対象者を含む撮像画像を取得する。情報処理装置１００は、状態判断部１０２の機能により、画像取得部１０１によって取得された対象者を含む撮像画像を参照して、対象者の属性を判定する。対象者の属性は、例えば、対象者の性別、年齢、人種等である。情報処理装置１００は、判定した対象者の属性に応じたサービスを対象者に提供する。
　また、情報処理装置１００は、状態判断部１０２の機能により、画像取得部１０１によって取得された対象者を含む撮像画像を参照して、対象者の状態を判定する。対象者の状態は、例えば、対象者の機嫌や体調状態である。
　情報処理装置１００は、出力判断部１０８の機能により、対象者の状態、及び対象者のサービスに対する評価の少なくとも何れかを出力することを判断する。情報処理装置１００は、例えば、対象者の体調状態が異常な状態であると判定した場合に、対象者の状態を出力することを判断する。情報処理装置１００は、例えば、外部の装置に対して対象者の状態の異常を通報することで、対象者にとって必要な援助を要請してもよい。
　情報処理装置１００は、更に、評価作成部１０３を備えている。評価作成部１０３は、状態判断部１０２の機能により判定された対象者の状態を参照して対象者に提供したサービスに対する対象者の評価を作成する。情報処理装置１００は、作成したサービスに対する対象者の評価を参照して、対象者に提供するサービスを切り替えてもよい。情報処理装置１００は、対象者に提供するサービスを切り替える際に、サービスの候補と、当該サービスの候補に関する、対象者とは異なる者の評価の情報とを取得して、対象者に提供するサービスを決定してもよい。
　また、情報処理装置１００は、評価作成部１０３の機能により作成した、対象者に提供したサービスに対する対象者の評価を外部の装置である全ユーザ評価記録部１５０に提供してもよい。
　全ユーザ評価記録部１５０には、複数の対象者の、各サービスに対する評価の情報が記憶されている。そして、全ユーザ評価記録部１５０は、記録した各サービスに対する複数の対象者の評価の情報を、対象者とは異なる者の評価の情報として、複数の情報処理装置１００に提供する。
　なお、対象者に提供するサービスは、例えば、画像を含むコンテンツの再生であってもよい。情報処理装置１００は、画像コンテンツをディスプレイ表示するコンテンツ表示部１２０を備えた表示装置に通信可能に構成され、当該表示装置にコンテンツを提供する構成であってもよい。また、情報処理装置１００は、コンテンツ表示部１２０を備えた表示装置と一体に構成されていても良い。
　情報処理装置１００は、例えば、車載された表示装置にコンテンツを提供する装置である。また、情報処理装置１００は、車載された表示装置に限らず、子供用ベッドや、勉強コンテンツ提供装置にコンテンツを提供する装置であってもよい。
　情報処理装置１００を、車載された表示装置に適用した場合には、例えば、車の後部座席に座っている子供を対象者として用いることができる。そして、情報処理装置１００は、対象者である子供の年齢や性別などの属性と、子供の状態や機嫌、集中度に応じて、コンテンツ表示部１２０に表示する動画像のコンテンツを切り替えてもよい。これにより、子供が機嫌良く集中して視聴することができるコンテンツを提供することができ、運転席で車を運転している親も、運転に集中することができる。
　また、情報処理装置１００を、子供用ベッドに設置された表示装置に適用した場合には、例えば、子供用ベッドに寝ている子供を対象者として用いることができる。そして、情報処理装置１００は、対象者である子供の年齢や性別などの属性と、子供の状態や機嫌、集中度に応じて、コンテンツ表示部１２０に表示する動画像のコンテンツを切り替えてもよい。例えば、子供が眠たそうにしている状態であれば、子供を眠りに誘うことができるようなコンテンツを提供したり、子供が眠りから覚めてぐずっている状態の時には、子供の機嫌を良くすることができるコンテンツを提供してもよい。これにより、子供が機嫌良く、安全に子供用ベッドで過ごすことができるように、コンテンツを提供することができ、子供用ベッドから離れた場所で家事等を行っている親が安心して家事に集中することができる。
　また、情報処理装置１００を、勉強コンテンツ提供装置に適用した場合には、例えば、勉強する者を対象者として用いることができる。そして、情報処理装置１００は、勉強者の状態や機嫌、集中度に応じて、コンテンツ表示部１２０に表示する勉強コンテンツを切り替えてもよい。例えば、対象者がコンテンツの内容が難しくて困っている状態の場合には、情報処理装置１００は、コンテンツに関するヒントや説明を表示したり、コンテンツの難易度を切り替えたりすることができてもよい。また、対象者のコンテンツに対する集中度が低い場合には、再生するコンテンツを、対象者の興味を引くような、例えばゲーム形式の問題や面白い雑学を紹介する動画像等のコンテンツに切り替えてもよい。
　これらの構成により、本実施形態では、対象者の状態を示す状態情報、及び当該状態情報を参照して得られる評価情報の少なくとも何れかを、外部の装置に出力し、共有することにより対象者に対してより多様なサービスを提供することができる。
　§２　構成例
　以下、本発明の実施形態に係る情報処理装置１００の構成について、図１、及び図２に基づいて詳細に説明する。図１は、情報処理装置１００の概略構成を示すブロック図である。図２は、情報処理装置１００を、車載の表示装置１０にコンテンツを提供する装置として用いた場合の構成例を模式的に示す図である。
　図１に示すように、情報処理装置１００は、情報処理システム１の構成要素として用いられる。情報処理システム１は、情報処理装置１００、コンテンツ表示部１２０、全ユーザ評価記録部１５０、コンテンツサーバ１７０、及び外部システム１４０を含んでいる。なお、情報処理装置１００と、コンテンツ表示部１２０とは、表示装置１０に一体に備えられている構成であってもよい。
　図２に示すように、コンテンツ表示部１２０は、液晶ディスプレイ等のディスプレイデバイスであり、情報処理装置１００から提供される画像データに基づく画像をディスプレイ表示可能に構成されている。表示装置１０は、コンテンツ表示部１２０の周囲を囲む枠部に設けられた撮像部１５を備えている。撮像部１５は、例えばＣＭＯＳやＣＣＤ等のイメージセンサと、レンズとが組み合わされたカメラであり、コンテンツ表示部１２０に表示されている画像コンテンツの視聴対象者を撮像可能に構成されている。
　なお、撮像部１５は、表示装置１０とは別体に設けられている構成であってもよく、コンテンツ表示部１２０が表示するコンテンツ画像の視聴対象者を撮像可能に、居室内や車内に設けられていてもよい。また、撮像部１５は、１つの表示装置１０に対して複数設けられている構成であってもよいし、１つまたは複数の撮像部１５が、複数の表示装置１０に対して設けられている構成であってもよい。
　表示装置１０は、例えば、車の後部座席用に設けられた所謂リアモニターであっても良く、チャイルドシートに着座する子供を視聴の対象者として好適に用いることができるものである。表示装置１０は、前方の座席の背面部や、取付アームを用いてチャイルドシートに取り付けて使用することができる。また、表示装置１０は、対象者の位置や高さに応じて、コンテンツ表示部１２０の高さや向きが調整可能に構成されているのが望ましい。
　情報処理装置１００は、表示装置１０に内蔵されている構成とすることができ、コンテンツサーバ１７０、及び外部システム１４０と無線通信を介して通信可能に構成されている。また、情報処理装置１００は、図示は省略するが、車内のカーナビゲーションシステムや、車内のスマートフォン等の携帯型端末と有線通信又は無線通信を介して通信可能に構成されているのが望ましい。そして、情報処理装置１００によって処理された各種情報は、カーナビゲーションシステムや、携帯型端末で確認可能な構成であるのが望ましい。
　図１に示すように、全ユーザ評価記録部１５０は、情報処理装置１００と無線通信を介して通信可能な外部サーバであり、複数の情報処理装置１００からそれぞれ送信される、後述の状態情報、及び評価情報を記録している。なお、評価情報とは、対象者に提供可能なサービス候補に関する評価情報であり、対象者とは異なる者に関連付けられた評価情報、及び、対象者に関連付けられた過去の評価情報の少なくとも何れかが含まれている。
　コンテンツサーバ１７０は、対象者に提供可能なコンテンツ（情報）が記憶されている外部サーバである。コンテンツサーバ１７０には、例えば、様々なジャンルの動画像が記憶されている。なお、全ユーザ評価記録部１５０は、コンテンツサーバ１７０上に設けられている構成であってもよい。
　外部システム１４０は、セキュリティーサービスを提供する事業者等によって管理、及び運営されるセキュリティシステムである。外部システム１４０は、情報処理装置１００から、対象者の異常を知らせる通報を受けた際に、対象者の元に人員を出動させる指示を行ったり、対象者の状態に応じて救急や消防に連絡を行ったりする。
　〔情報処理装置１００の構成について〕
　情報処理装置１００は、画像取得部１０１と、状態判断部１０２と、出力判断部１０８と、出力部１３０とを含んでいる。また、情報処理装置１００は、評価作成部１０３、評価記録部１０４、及び評価送信部１０５を含んでいる。また、情報処理装置１００は、コンテンツ判断部１０６、及びコンテンツ切替部１０７を含んでいる。また、情報処理装置１００は、表示部１３１を備えている。
　状態判断部１０２、出力判断部１０８、出力部１３０、評価作成部１０３、評価記録部１０４、評価送信部１０５、コンテンツ判断部１０６、及びコンテンツ切替部１０７は、情報処理装置１００の全体を統括的に制御する制御部に含まれている。
　画像取得部１０１は、対象者を含む撮像画像を取得する。なお、本実施形態において対象者とは、コンテンツ表示部１２０が表示するコンテンツ画像の視聴対象者を示しているが、これに限定されるものではない。対象者とは、情報処理装置１００によって処理された情報に基づくサービスを提供する対象者であれば良く、情報処理装置１００は、画像コンテンツの提供の他に、対象者の安全監視サービス等のその他のサービスを提供する対象者であってもよい。
　画像取得部１０１は、上述した撮像部１５から対象者を含む撮像画像を取得する。なお、画像取得部１０１が、撮像部１５の機能を備えている構成であってもよい。画像取得部１０１は、取得した対象者を含む撮像画像を状態判断部１０２に提供する。なお、画像取得部１０１は、例えば顔認識機能等の画像解析機能を有し、撮像画像から対象者を認識し、対象者に係る画像、例えば対象者の顔の画像、を撮像画像から抽出して、状態判断部１０２に提供してもよい。
　状態判断部１０２は、画像取得部１０１から提供された撮像画像を参照して、対象者の状態を判定する。例えば、状態判断部１０２は、対象者が、コンテンツ表示部１２０に表示されているコンテンツ画像を集中して視ているか否かを、画像取得部１０１から提供された撮像画像を参照して判断する。対象者が、コンテンツ画像を集中して視ているか否かは、公知の技術を用いて判断することができる。例えば、状態判断部１０２は、対象者の視線を撮像画像から検出して、コンテンツ画像を視ている時間を計測し、コンテンツ画像の放映時間との割合から、対象者の集中度を算出してもよい。
　また、状態判断部１０２は、画像取得部１０１から提供された撮像画像を参照して、対象者の顔の表情から対象者の泣いている、笑っている、集中している等の機嫌を判断してもよい。状態判断部１０２は、公知の技術を用いて対象者の顔の表情から対象者の機嫌を判断することができる。例えば、状態判断部１０２は、撮像画像から、対象者の目の開閉度、目尻の形状、しわの形状、口角の形状、口の開閉度等の情報を基に、対象者の機嫌を判断してもよい。状態判断部１０２は、対象者の機嫌を判断し、判断結果を示す情報を対象者の笑顔度としてもよい。
　また、状態判断部１０２は、画像取得部１０１から提供された撮像画像を参照して、対象者の状態が所定の通常状態とは異なる異常状態にあるか否かを判定することができてもよい。状態判断部１０２は、公知の技術を用いて、対象者の状態が所定の通常状態とは異なる異常状態にあるか否かを判定する構成とすることができる。なお、所定の通常状態とは異なる異常状態とは、例えば、対象者が意識を失った状態や、大きな怪我を負った状態等のような状態である。
　例えば、状態判断部１０２は、撮像画像を参照して、対象者の表情、集中度、及び対象者の動作や体の動きから対象者の状態を判断してもよい。状態判断部１０２は、撮像画像を参照して判断した対象者の状態が体調急変や、危険な状態を示す異常状態であると判定すると、判定結果を、出力判断部１０８に提供する。
　このように、状態判断部１０２は、画像取得部１０１から提供された撮像画像を参照して、対象者の状態を判定する。そして、状態判断部１０２は、判定結果に基づいて、対象者の状態を示す状態情報を生成し、当該状態情報を評価作成部１０３に対して提供する。また、状態判断部１０２は、対象者の状態が所定の通常状態とは異なる異常状態にあると判定した場合には、判定結果を出力判断部１０８に提供する。
　また、状態判断部１０２は、画像取得部１０１から提供された撮像画像を参照して、対象者の性別、年齢、及び人種等の属性を判断することができてもよい。状態判断部１０２は、対象者の属性を示す属性情報を、状態情報とともに評価作成部１０３に対して提供する。また、状態判断部１０２は、対象者の属性を示す属性情報を、コンテンツ判断部１０６に提供する。
　出力判断部１０８は、対象者の状態、及び、対象者に提供されるサービス又はその候補に関する評価の少なくとも何れを出力するかを判断する。出力判断部１０８は、状態判断部１０２が判断した対象者の状態に応じて、情報の出力先と、出力する情報とを切り換える。例えば出力判断部１０８は、対象者の状態が通常の場合には、対象者の状態と、評価作成部１０３が作成した評価とを出力する。一方で、出力判断部１０８は、対象者の状態が異常の場合には、対象者の状態のみを出力する。
　このように、出力判断部１０８は、（Ａ）状態判断部が判断した対象者の状態、（Ｂ）コンテンツ判断部が取得した、複数の対象者の各サービスに対する評価の一部、及び（Ｃ）評価作成部が作成した、対象者の各サービスに対する評価の少なくとも何れかを出力することを判断する。出力判断部１０８は、これらの（Ａ）～（Ｃ）のうち、複数の情報を出力することを決定してもよい。
　また、状態判断部１０２は、対象者の状態が、所定の通常状態とは異なる異常状態にあるか否かを判定し、出力判断部１０８は、対象者の状態が異常状態にあるか否かに応じて、出力する情報を切り替える。これにより、例えば車の後部座席や子供用ベッドなどの監視対象領域内にいる子供の機嫌や集中度に応じた評価を出力するとともに、当該監視対象領域内での子供の状態が異常状態に有る場合には、異常状態を知らせる情報を出力することができる。
　評価作成部１０３は、状態判断部１０２から提供された対象者の状態を示す状態情報を参照して、対象者のコンテンツ画像に対する評価を示す評価情報を生成する。ここで、本実施形態における対象者とは、情報処理装置１００によって提供されるサービスを受ける対象者であり、評価情報とは、情報処理装置１００によって対象者に提供されるサービスに関する評価情報である。
　図３は、状態判断部１０２が判定した対象者の状態を示す状態情報と、当該状態情報を参照して評価作成部１０３によって得られる評価情報との関係を示す図である。図３に示すように、状態情報には、例えば、対象者のコンテンツ画像に対する集中度と、対象者の笑顔度に関する情報が含まれている。
　評価作成部１０３は、対象者の集中度、及び対象者の笑顔度に基づいて、１～５の５段階で、対象者のコンテンツ画像に対する評価情報を作成する。例えば、評価作成部１０３は、対象者の集中度、及び対象者の笑顔度が共に８０％以上であれば、５段階評価で最も高い“５”を対象者のコンテンツに対する評価情報として作成する。また、評価作成部１０３は、対象者の集中度、及び対象者の笑顔度が共に６０％以上８０％未満であれば、５段階評価で上から２番目に高い“４”を対象者のコンテンツに対する評価情報として作成する。また、評価作成部１０３は、対象者の集中度、及び対象者の笑顔度が共に４０％以上６０％未満であれば、５段階評価で中間の評価である“３”を対象者のコンテンツに対する評価情報として作成する。また、評価作成部１０３は、対象者の集中度、及び対象者の笑顔度が共に２０％以上４０％未満であれば、５段階評価で下から２番目の評価である “２”を対象者のコンテンツに対する評価情報として作成する。さらに、評価作成部１０３は、対象者の集中度、及び対象者の笑顔度が共に０％以上２０％未満であれば、５段階評価で最も低い評価である“１”を対象者のコンテンツに対する評価情報として作成する。
　評価作成部１０３は、状態情報を参照して作成した評価情報を、状態判断部１０２から提供された対象者の属性を示す属性情報とともに、評価記録部１０４に提供する。
　評価記録部１０４は、評価作成部１０３によって作成された評価情報を、所定期間記録する。評価記録部１０４は、ＲＯＭ（Read Only Memory）、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などの「一時的でない有形の媒体」から構成されている。評価記録部１０４には、評価情報が、対象者の属性情報に関連付けて記憶されている。また、評価記録部１０４には、コンテンツ切替部１０７から、コンテンツ表示部１２０に表示しているコンテンツに関する情報が提供される。
　図４は、評価記録部１０４に記録されている評価テーブルを示す図である。図４に示すように、評価記録部１０４に記録されている評価テーブルには、対象者の年齢や性別などの属性情報と、対象者の異常状態の有無を示す情報と、対象者に提供しているコンテンツを示す情報と、評価情報とが、コンテンツの配信時間に対応付けて記憶されている。
　評価記録部１０４には、コンテンツ毎に、当該コンテンツに対する評価情報と、コンテンツの配信時間と、対象者の属性に関連付けて記憶されてもよい。なお、コンテンツの配信中に、対象者の異常状態が検出された場合には、制御部は、コンテンツの配信を停止して、異常状態が有る旨のログを評価テーブルに記録する構成であってもよい。
　評価送信部１０５は、外部のサーバである全ユーザ評価記録部１５０に、評価記録部１０４に記憶した評価情報を対象者の属性情報、及びコンテンツに関する情報とともに送信する。評価送信部１０５は、これらの情報を所定間隔毎に全ユーザ評価記録部１５０に送信する。評価送信部１０５は、例えば、毎日決まった時間に、これらの情報を全ユーザ評価記録部１５０に送信する構成であってもよい。評価送信部１０５が、全ユーザ評価記録部１５０に情報を送信する回数は、数日に一回でも良いし、一日に一回でも良いし、一日に複数回であっても良い。また、評価送信部１０５は、コンテンツ配信が停止されたタイミングで、全ユーザ評価記録部１５０に情報を送信する構成であってもよい。
　評価送信部１０５は、前回送信した情報の次の情報から、全ユーザ評価記録部１５０に情報を送信する構成であってもよい。また、評価送信部１０５によって送信済みの情報については、評価記録部１０４から削除される構成であり、評価送信部１０５は、評価記録部１０４に記録されている情報を全て全ユーザ評価記録部１５０に送信する構成であってもよい。
　図５は、全ユーザ評価記録部１５０に記録されている評価テーブルを示す図である。図５に示すように、全ユーザ評価記録部１５０に記録されている評価テーブルには、コンテンツの配信時間と、送信元の機器を特定するための機器IDとに関連付けて、対象者の年齢や性別などの属性情報と、対象者の異常状態の有無を示す情報と、対象者に提供しているコンテンツを示す情報と、評価情報とが記憶されている。
　コンテンツ判断部１０６は、状態判断部１０２によって生成された状態情報、及び評価作成部１０３によって作成された評価情報の少なくとも何れかに基づいて、対象者に提供するコンテンツについての判断を行う。また、コンテンツ判断部１０６は、状態判断部１０２によって生成された対象者の属性を示す属性情報と、全ユーザ評価記録部１５０、及び評価記録部１０４に格納されている評価情報の少なくとも何れか一方と、を参照して対象者に提供するコンテンツを選択する。コンテンツ判断部１０６は、例えば、対象者の年齢、性別、人種等の属性と、対象者とは異なる同様の属性の者に関連付けられた評価情報と、を参照して、当該属性の者に好まれているコンテンツを選択してもよい。
　具体的には、コンテンツ判断部１０６は、対象者が４歳男であって、現在視聴中のコンテンツの評価が１である場合に、評価記録部１０４に格納されている、図４の評価情報を参照して、対象者と同様の属性の者による評価がより高いコンテンツＡ又はコンテンツＥを選択してもよい。
　また、コンテンツ判断部１０６は、対象者が５歳女であって、現在視聴中のコンテンツの評価が３である場合に、全ユーザ評価記録部１５０に格納されている、図５の評価情報を参照して、対象者と同様の属性の者による評価がより高いコンテンツJを選択してもよい。
　また、コンテンツ判断部１０６は、評価作成部１０３によって作成された評価が所定の評価以下の場合、例えば５段階中の３以下の場合、に対象者の属性情報と、全ユーザ評価記録部１５０、及び評価記録部１０４に格納されている評価情報の少なくとも何れか一方と、を参照して対象者に提供するコンテンツを選択する。
　また、コンテンツ判断部１０６は、コンテンツ切替部１０７を介して、コンテンツサーバ１７０から、対象者に対して提供可能なコンテンツの候補を取得可能な構成であってもよい。全ユーザ評価記録部１５０が、コンテンツサーバ１７０上に設けられている構成では、コンテンツ判断部１０６は、全ユーザ評価記録部１５０から対象者に対して提供可能なコンテンツの候補を取得してもよい。
　このように、コンテンツ判断部１０６は、対象者に対して提供するコンテンツの候補と、当該コンテンツの候補に関する評価情報とを含むサービス情報を取得可能である。そして、コンテンツ判断部１０６は、取得したサービス情報を更に参照して、対象者に提供するコンテンツを決定してもよい。また、コンテンツ判断部１０６は、サービス情報に含まれる１又は複数のコンテンツに関する評価情報を参照して、対象者に提供するコンテンツを決定してもよい。
　さらに、情報処理装置１００が、車載のナビゲーションシステムと連携しており、コンテンツ判断部１０６は、ナビゲーションシステムに設定された目的までの到着予測時間に応じた長さのコンテンツを、コンテンツの候補と、当該コンテンツに関する評価情報とを参照して、選択することができる構成であってもよい。
　コンテンツ判断部１０６は、対象者に提供するコンテンツを決定すると、コンテンツ表示部１２０に表示されているコンテンツを、切り替える切替指示をコンテンツ切替部１０７に対して出力する。
　コンテンツ切替部１０７は、コンテンツ判断部１０６が出力した切替指示を参照して、画像を含むコンテンツをコンテンツサーバ１７０から取得する。そして、コンテンツ切替部１０７は、再生するコンテンツを、切替指示を参照してコンテンツサーバ１７０から取得したコンテンツに切り替える。
　なお、本実施形態では、対象者を含む撮像画像を取得する画像取得部１０１を取得部とも呼称する。さらに、本実施形態では、サービス情報を取得するコンテンツ判断部１０６と、コンテンツをコンテンツサーバ１７０から取得するコンテンツ切替部１０７と、を総称して「サービス決定部」とも呼称する。
　出力部１３０は、状態判断部１０２によって、対象者の状態が、所定の通常状態とは異なる異常状態にあると判定された場合に、対象者の状態を表示部１３１に出力するとともに、外部システム１４０に出力する。
　これらの構成によれば、対象者が異常状態に無い場合には、対象者の状態を示す状態情報、及び当該状態情報を参照して得られる評価情報の少なくとも何れかが、外部の装置である全ユーザ評価記録部１５０に出力される。また、対象者が異常状態に有る場合には、対象者の状態を示す状態情報、及び当該状態情報を参照して得られる評価情報の少なくとも何れかが他の外部の装置である外部システム１４０に出力される。このように、出力判断部１０８は、対象者の状態が異常状態にあるか否かに応じて、状態情報を出力する先の装置を切り替える。
　表示部１３１は、状態判断部１０２によって、対象者の状態が、所定の通常状態とは異なる異常状態にあると判定された場合に、対象者の状態を提示する提示部として機能する。表示部１３１は、ディスプレイデバイスであり、出力部１３０から出力される警告表示指示に応じて、警告情報を表示する。なお、対象者の状態を提示する方法は、表示部１３１への警告情報の表示に因る方法に限らず、警報音や、警告ランプの点灯等の他の提示方法に因るものであっても良い。
　表示部１３１は、情報処理装置１００とは別体のディスプレイデバイスであってもよく、カーナビゲーションシステムの表示ディスプレイや、スマートフォン等の携帯型端末の表示ディスプレイ、或いは情報処理装置１００と通信可能に構成されたモニターであっても良い。
　例えば、表示部１３１が、カーナビゲーションシステムの表示ディスプレイである場合には、対象者である後部座席の子供が、所定の通常状態とは異なる異常状態にあると判定された場合に、対象者の状態が運転席の親に提示される。このように、後部座席の子供の状態が、所定の通常状態とは異なる異常状態となった場合には、親は子供の異常に迅速に気が付くことができる。よって、後部座席の子供の状態が確認できない運転時であっても、子供の状態を心配することなく、安心して運転に集中することができる。
　（情報処理装置１００の処理の流れについて）
　図６は、情報処理装置１００の処理の流れの一例を示すフローチャートである。
　（ステップＳ１）
　画像取得部１０１によって、対象者を含む撮影画像が取得される。
　（ステップＳ２）
　状態判断部１０２は、画像取得部１０１が取得した撮像画像を参照して、対象者の属性を推定する。
　（ステップＳ３）
　コンテンツ判断部１０６は、状態判断部１０２によって推定された対象者の属性に応じたコンテンツを取得する。コンテンツ判断部１０６は、対象者の属性と、評価記録部１０４に記録されている対象者に関連付けられた過去の評価情報、及び全ユーザ評価記録部１５０から取得した対象者とは異なる者に関連付けられた評価情報の少なくとも何れかと、を参照して、取得するコンテンツを選択し、コンテンツ切替部１０７を介してコンテンツを取得する。
　（ステップＳ４）
　状態判断部１０２は、画像取得部１０１が取得した撮像画像を参照して、対象者の状態を判断する。状態判断部１０２は、対象者の状態を示す状態情報を生成して、ステップＳ５、及びステップＳ９に進む。
　（ステップＳ５）
　評価作成部１０３は、状態判断部１０２が生成した対象者の状態を示す状態情報を参照して、対象者のコンテンツに関する評価を示す評価情報を生成する。
　（ステップＳ６）
　コンテンツ判断部１０６は、評価作成部１０３によって作成された評価情報を参照して、対象者のコンテンツに関する評価が一定以上であるか否かを判断する。コンテンツ判断部１０６は、対象者のコンテンツに関する評価が一定以上であると判定すると（ステップＳ６でＹｅｓ）、ステップＳ７に進む。コンテンツ判断部１０６は、対象者のコンテンツに関する評価が一定以上ではないと判定すると（ステップＳ６でＮｏ）、ステップＳ１３に進む。
　（ステップＳ７）
　コンテンツ判断部１０６は、コンテンツのコンテンツ表示部１２０における表示が終了したか否かを判定する。コンテンツ判断部１０６は、コンテンツの表示が終了したと判定すると（ステップＳ７でＹｅｓ）、ステップＳ８に進む。コンテンツ判断部１０６は、コンテンツの表示が終了していないと判定すると（ステップＳ７でＮｏ）、ステップＳ１に戻り処理を継続する。
　（ステップＳ８）
　評価記録部１０４は、評価作成部１０３によって作成された評価情報を記録して、処理を終了する。
　（ステップＳ９）
　状態判断部１０２は、対象者の状態が所定の通常状態とは異なる異常状態にあるか否かを判定する。状態判断部１０２は、対象者の状態が異常状態にあると判定すると（ステップＳ９でＹｅｓ）、ステップＳ１０に進む。状態判断部１０２は、対象者の状態が異常状態にないと判定すると（ステップＳ９でＮｏ）、処理を終了する。
　（ステップＳ１０）
　状態判断部１０２は、対象者が乗車している車が自動運転中、つまり運転者が同乗していない状態で走行中、であるか否かを判定する。状態判断部１０２は、自動運転中であると判定すると（ステップＳ１０でＹｅｓ）、ステップＳ１２へ進む。状態判断部１０２は、自動運転中でないと判定すると（ステップＳ１０でＮｏ）、ステップＳ１１へ進む。
　（ステップＳ１１）
　状態判断部１０２の判断に応じて、出力判断部１０８は、出力部１３０に対して通報指示を出力し、表示部１３１に警告表示を表示させることにより運転者に対象者の状態が異常状態である旨を知らせる。出力部１３０は、状態判断部１０２からの通報指示に基づいて、運転者に対象者の状態が異常状態である旨を知らせると共に、外部システム１４０に異常を知らせてもよい。
　（ステップＳ１２）
　状態判断部１０２の判断に応じて、出力判断部１０８は、出力部１３０に対して通報指示を出力し、外部システム１４０に対象者の状態が異常状態である旨を通知する。このように、車が自動運転中であるときに、対象者の状態が異常状態となった場合には、外部システム１４０に対象者の状態が異常状態である旨が通知されるため、対象者は安心して自動運転車を利用することができる。
　（ステップＳ１３）
　ステップＳ６において、コンテンツ判断部１０６が対象者のコンテンツに関する評価が一定以上ではないと判定すると、評価記録部１０４は、評価作成部１０３によって作成された当該コンテンツに対する対象者の評価情報を記録して、ステップＳ１４に進む。
　（ステップＳ１４）
　コンテンツ判断部１０６は、コンテンツのコンテンツ表示部１２０における表示が終了したか否かを判定する。コンテンツ判断部１０６は、コンテンツの表示が終了したと判定すると（ステップＳ１４でＹｅｓ）、処理を終了する。コンテンツ判断部１０６は、コンテンツの表示が終了していないと判定すると（ステップＳ１４でＮｏ）、ステップＳ１５に進む。
　（ステップＳ１５）
　コンテンツ判断部１０６は、評価記録部１０４に記録されている対象者に関連付けれた過去の評価情報、及び全ユーザ評価記録部１５０から取得した対象者とは異なる者に関連付けられた評価情報の少なくとも何れかと、を参照して、取得するコンテンツを選択し、コンテンツ切替部１０７を介してコンテンツを取得する。
　（ステップＳ１６）
　コンテンツ切替部１０７は、コンテンツ表示部１２０に表示するコンテンツを、新たにコンテンツサーバ１７０から取得したコンテンツに切り替えて、ステップS４に戻り処理を継続する。なお、画像取得部１０１は、情報処理装置１００が動作中には、例えば所定時間間隔で対象者を含む撮像画像を取得している。そして、状態判断部１０２は、対象者の状態を、画像取得部１０１が撮像画像を取得するタイミングで定期的に判定する構成であってもよい。画像取得部１０１が、撮像画像を取得する周期を短くすることで、状態判断部１０２は、対象者の状態を逐次に判定することができる。
　〔ソフトウェアによる実現例〕
　情報処理装置１００の制御ブロック（特に状態判断部１０２、出力判断部１０８、出力部１３０、評価作成部１０３、評価記録部１０４、評価送信部１０５、コンテンツ判断部１０６、及びコンテンツ切替部１０７）は、集積回路（ＩＣチップ）等に形成された論理回路（ハードウェア）によって実現してもよいし、ソフトウェアによって実現してもよい。
　後者の場合、情報処理装置１００は、各機能を実現するソフトウェアであるプログラムの命令を実行するコンピュータを備えている。このコンピュータは、例えば１つ以上のプロセッサを備えていると共に、前記プログラムを記憶したコンピュータ読み取り可能な記録媒体を備えている。そして、前記コンピュータにおいて、前記プロセッサが前記プログラムを前記記録媒体から読み取って実行することにより、本発明の目的が達成される。前記プロセッサとしては、例えばＣＰＵ（Central Processing Unit）を用いることができる。前記記録媒体としては、「一時的でない有形の媒体」、例えば、ＲＯＭ（Read Only Memory）等の他、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、前記プログラムを展開するＲＡＭ（Random Access Memory）などをさらに備えていてもよい。また、前記プログラムは、該プログラムを伝送可能な任意の伝送媒体（通信ネットワークや放送波等）を介して前記コンピュータに供給されてもよい。なお、本発明の一態様は、前記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。
　なお、状態判断部１０２による対象者の状態判断、出力判断部１０８による出力する情報の切り換えと出力先の切り替え、及び、コンテンツ判断部１０６によるコンテンツの判断のための分類及び学習処理の具体構成は本実施形態を限定するものではなく、例えば、以下のような機械学習的手法の何れかまたはそれらの組み合わせを用いることができる。
　・サポートベクターマシン（SVM: Support Vector Machine）
　・クラスタリング（Clustering）
　・帰納論理プログラミング（ILP: Inductive Logic Programming）
　・遺伝的アルゴリズム（GP: Genetic Programming）
　・ベイジアンネットワーク（BN: Baysian Network）
　・ニューラルネットワーク（NN: Neural Network）
　ニューラルネットワークを用いる場合、３Ｄデータをニューラルネットワークへのインプット用に予め加工して用いるとよい。このような加工には、データの１次元的配列化、または多次元的配列化に加え、例えば、データアーギュメンテーション（Deta Argumentation）等の手法を用いることができる。
　また、ニューラルネットワークを用いる場合、畳み込み処理を含む畳み込みニューラルネットワーク（CNN: Convolutional Neural Network）を用いてもよい。より具体的には、ニューラルネットワークに含まれる１又は複数の層（レイヤ）として、畳み込み演算を行う畳み込み層を設け、当該層に入力される入力データに対してフィルタ演算（積和演算）を行う構成としてもよい。またフィルタ演算を行う際には、パディング等の処理を併用したり、適宜設定されたストライド幅を採用したりしてもよい。
　また、ニューラルネットワークとして、数十～数千層に至る多層型又は超多層型のニューラルネットワークを用いてもよい。
　また、状態判断部１０２による対象者の状態判断処理、及び、コンテンツ判断部１０６によるコンテンツ判断処理に用いられる機械学習は、教師あり学習であってもよいし、教師なし学習であってもよい。
　〔まとめ〕
　本発明の態様１に係る情報処理装置は、取得部と、状態判断部と、出力判断部と、出力部とを備えた情報処理装置であって、前記取得部は、対象者を含む撮像画像を取得し、前記状態判断部は、前記撮像画像を参照して、前記対象者の状態を判定し、前記出力判断部は、前記対象者の状態、及び、前記対象者に提供されるサービス又はその候補に関する評価の少なくとも何れを出力するかを判断し、前記出力部は、上記出力判断部が出力すると判断した情報を出力する構成である。
　前記の構成によれば、出力判断部は、対象者の状態、及び、対象者に提供されるサービス又はその候補に関する評価の少なくとも何れを出力するかを判断する。よって、情報処理装置から出力される情報を受信する外部の装置では、複数の対象者からの状態情報、及び評価情報を収集して利用することができ、対象者の状態、及び対象者のサービスに関する評価に応じた適切な対応を行うことができる。
　また、本発明の態様２に係る情報処理装置は、前記態様１において、前記状態判断部が判断した対象者の状態を参照して、前記対象者に提供するサービスを決定するサービス決定部を更に備えている構成である。
　前記の構成によれば、多様なサービスの中から、対象者の状態に応じた適切なサービスを対象者に提供することができるため、ユーザにとって満足度の高いサービスを提供することができる。
　また、本発明の態様３に係る情報処理装置は、前記態様２において、前記取得部は、更に、前記対象者に対して提供するサービスの候補と、当該サービス候補に関する評価情報とを含むサービス情報を取得し、前記サービス決定部は、前記サービス情報を更に参照して、前記対象者に提供するサービスを決定する構成である。
　前記の構成によれば、サービス決定部は、サービスの候補と、サービス候補に関する評価情報とを含むサービス情報を参照して提供するサービスを決定するため、多様なサービスの中から、より対象者に適したサービスを提供することができる。
　また、本発明の態様４に係る情報処理装置は、前記態様３において、前記サービス候補に関する評価情報には、前記対象者とは異なる者に関連付けられた評価情報、及び、前記対象者に関連付けられた過去の評価情報の少なくとも何れかが含まれる構成である。
　前記の構成によれば、対象者の過去の評価情報だけではなく、対象者とは異なる者に関連付けられた評価情報をも参照して、対象者に提供するサービスを決定するため、多様なサービスの中から、より対象者に適したサービスを提供することができる。
　また、本発明の態様５に係る情報処理装置は、前記態様３、４において、前記サービスは、画像を含むコンテンツの再生であり、前記サービス決定部は、前記サービス情報に含まれる１又は複数のコンテンツに関する評価情報を参照して、再生するコンテンツを切り替える構成である。
　前記の構成によれば、対象者の状態と、当該状態を参照して得られる評価とに応じて、再生するコンテンツを切り替えるため、多様な画像コンテンツの中から、より対象者に適した画像コンテンツを提供することができる。
　また、本発明の態様６に係る情報処理装置は、前記態様１から５において、前記状態判断部は、前記対象者の状態が、所定の通常状態とは異なる異常状態にあるか否かを判定し、前記出力判断部は、前記対象者の状態が異常状態にあるか否かに応じて、出力する情報を切り替える構成である。
　前記の構成によれば、対象者の状態が、所定の通常状態とは異なる異常状態にある場合には、異常であることを示す情報のみを送付することができ、対象者の状態に応じて、適切な対応を行うことができる。
　また、本発明の態様７に係る情報処理装置は、前記態様１から６において、前記状態判断部は、前記対象者の状態が、所定の通常状態とは異なる異常状態にあるか否かを判定し、前記出力部は、前記対象者の状態が異常状態にあるか否かに応じて、状態情報を出力する先の装置を切り替える構成である。
　前記の構成によれば、対象者の状態が、所定の通常状態とは異なる異常状態にあるか否かに応じて、状態情報を出力する先の装置を切り替えるため、対象者に提供するサービスを、例えばコンテンツ配信から、通報システムへの通報に、変更することができ、より対象者に適したサービスを提供することができる。
　また、本発明の態様８に係る情報処理装置は、前記態様１から７において、前記対象者の状態を提示する提示部を更に備えている構成である。
　前記の構成によれば、対象者の状態を、対象者とは異なる者に提示することができるため、対象者の状態が異常状態にある場合には、対象者とは異なる者に対象者の異常を知らせることができる。
　前記の課題を解決するために、本発明の一態様に係る情報処理システムは、前記態様１から８の情報処理装置と、前記情報処理装置から出力される前記状態情報、及び前記評価情報の少なくとも何れかを、取得するサーバと、を備えた構成である。
　前記の構成によれば、サーバにおいて複数の情報処理装置からそれぞれ出力される状態情報、及び前記評価情報を管理することができるため、複数の対象者のそれぞれに適切なサービスを提供することができる。
　前記の課題を解決するために、本発明の一態様に係る情報処理方法は、対象者を含む撮像画像を取得する撮像画像取得ステップと、前記撮像画像を参照して、前記対象者の状態を判定する状態判定ステップと、前記対象者の状態、及び、前記対象者に提供されるサービス又はその候補に関する評価の少なくとも何れを出力するかを判断する出力判断ステップと、出力すると判断した情報を出力する情報出力ステップと、を含む方法である。
　前記の構成によれば、対象者の状態、及び、前記対象者に提供されるサービス又はその候補に関する評価の少なくとも何れかを出力するため、対象者の状態、及び、対象者のサービスに関する評価に応じて、対象者に適切な対応を行うことができる。
　前記の課題を解決するために、本発明の一態様に係る情報処理プログラムは、前記態様１の情報処理装置としてコンピュータを機能させるための情報処理プログラムであって、前記取得部と、前記状態判断部と、前記出力判断部と、前記出力部としてコンピュータを機能させる構成である。
　前記の構成によれば、コンピュータの機能を利用して、対象者の状態、及び対象者のサービスに関する評価に応じた適切な対応を行うことができる。
　本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
１　情報処理システム
１００　情報処理装置
１０　表示装置
１０１　画像取得部
１０２　状態判断部
１０３　評価作成部
１０４　評価記録部
１０５　評価送信部
１０６　コンテンツ判断部（サービス決定部）
１０７　コンテンツ切替部（サービス決定部）
１０８　出力判断部
１２０　コンテンツ表示部
１３０　出力部
１３１　表示部（提示部）
１４０　外部システム
１５０　全ユーザ評価記録部
１７０　コンテンツサーバ

Claims (11)

  1. 　取得部と、状態判断部と、出力判断部と、出力部とを備えた情報処理装置であって、
    　前記取得部は、対象者を含む撮像画像を取得し、
    　前記状態判断部は、前記撮像画像を参照して、前記対象者の状態を判定し、
    　前記出力判断部は、
    　　前記対象者の状態、及び、
    　　前記対象者に提供されるサービス又はその候補に関する評価
    の少なくとも何れを出力するかを判断し、
    　前記出力部は、
    　　上記出力判断部が出力すると判断した情報を出力する
    ことを特徴とする情報処理装置。
  2. 　前記状態判断部が判断した対象者の状態を参照して、前記対象者に提供するサービスを決定するサービス決定部を更に備えている
    ことを特徴とする請求項１に記載の情報処理装置。
  3. 　前記取得部は、更に、前記対象者に対して提供するサービスの候補と、当該サービス候補に関する評価情報とを含むサービス情報を取得し、
    　前記サービス決定部は、前記サービス情報を更に参照して、前記対象者に提供するサービスを決定する
    ことを特徴とする請求項２に記載の情報処理装置。
  4. 　前記サービス候補に関する評価情報には、
    　　前記対象者とは異なる者に関連付けられた評価情報、及び、
    　　前記対象者に関連付けられた過去の評価情報
    の少なくとも何れかが含まれることを特徴とする請求項３に記載の情報処理装置。
  5. 　前記サービスは、画像を含むコンテンツの再生であり、
    　前記サービス決定部は、前記サービス情報に含まれる１又は複数のコンテンツに関する評価情報を参照して、再生するコンテンツを切り替える
    ことを特徴とする請求項３又は４に記載の情報処理装置。
  6. 　前記状態判断部は、
    　　前記対象者の状態が、所定の通常状態とは異なる異常状態にあるか否かを判定し、
    　前記出力判断部は、
    　　前記対象者の状態が異常状態にあるか否かに応じて、出力する情報を切り替える
    ことを特徴とする請求項１から５の何れか１項に記載の情報処理装置。
  7. 　前記状態判断部は、
    　　前記対象者の状態が、所定の通常状態とは異なる異常状態にあるか否かを判定し、
    　前記出力部は、
    　　前記対象者の状態が異常状態にあるか否かに応じて、状態情報を出力する先の装置を切り替える
    ことを特徴とする請求項１から６の何れか１項に記載の情報処理装置。
  8. 　前記対象者の状態を提示する提示部を更に備えている
    ことを特徴とする請求項１から６の何れか１項に記載の情報処理装置。
  9. 　請求項１～８の何れか一項に記載の情報処理装置と、
    　前記情報処理装置から出力される前記対象者の状態を示す状態情報、及び前記対象者に提供されるサービス又はその候補に関する評価を示す評価情報の少なくとも何れかを、取得するサーバと、を備えたことを特徴とする情報処理システム。
  10. 　対象者を含む撮像画像を取得する撮像画像取得ステップと、
    　前記撮像画像を参照して、前記対象者の状態を判定する状態判定ステップと、
    　前記対象者の状態、及び、前記対象者に提供されるサービス又はその候補に関する評価の少なくとも何れを出力するかを判断する出力判断ステップと、
    　出力すると判断した情報を出力する情報出力ステップと、を含む
    ことを特徴とする情報処理方法。
  11. 　請求項１に記載の情報処理装置としてコンピュータを機能させるための情報処理プログラムであって、前記取得部と、前記状態判断部と、前記出力判断部と、前記出力部としてコンピュータを機能させるための情報処理プログラム。
PCT/JP2019/003252 2018-02-23 2019-01-30 情報処理装置、情報処理システム、情報処理方法、及びプログラム WO2019163458A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018031261A JP6389346B1 (ja) 2018-02-23 2018-02-23 情報処理装置、情報処理システム、情報処理方法、及びプログラム
JP2018-031261 2018-02-23

Publications (1)

Publication Number Publication Date
WO2019163458A1 true WO2019163458A1 (ja) 2019-08-29

Family

ID=63518835

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/003252 WO2019163458A1 (ja) 2018-02-23 2019-01-30 情報処理装置、情報処理システム、情報処理方法、及びプログラム

Country Status (2)

Country Link
JP (1) JP6389346B1 (ja)
WO (1) WO2019163458A1 (ja)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005250322A (ja) * 2004-03-08 2005-09-15 Matsushita Electric Ind Co Ltd 表示装置
JP2006324742A (ja) * 2005-05-17 2006-11-30 Matsushita Electric Ind Co Ltd 映像表示装置、映像表示方法および映像表示プログラム
JP2008279862A (ja) * 2007-05-09 2008-11-20 Denso Corp 車載設備制御システム及びプログラム
EP2762363A1 (en) * 2013-01-31 2014-08-06 Delphi Technologies, Inc. Vehicle safety and monitoring system
JP2015030276A (ja) * 2013-07-31 2015-02-16 三菱電機株式会社 情報処理装置および情報処理方法
JP2015067254A (ja) * 2013-10-01 2015-04-13 パナソニックＩｐマネジメント株式会社 車載機器と、それを搭載した自動車
JP2018022310A (ja) * 2016-08-03 2018-02-08 オムロンオートモーティブエレクトロニクス株式会社 運転手状態判定装置、車両制御システム
JP2018019882A (ja) * 2016-08-03 2018-02-08 オムロンオートモーティブエレクトロニクス株式会社 生命徴候検出装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005250322A (ja) * 2004-03-08 2005-09-15 Matsushita Electric Ind Co Ltd 表示装置
JP2006324742A (ja) * 2005-05-17 2006-11-30 Matsushita Electric Ind Co Ltd 映像表示装置、映像表示方法および映像表示プログラム
JP2008279862A (ja) * 2007-05-09 2008-11-20 Denso Corp 車載設備制御システム及びプログラム
EP2762363A1 (en) * 2013-01-31 2014-08-06 Delphi Technologies, Inc. Vehicle safety and monitoring system
JP2015030276A (ja) * 2013-07-31 2015-02-16 三菱電機株式会社 情報処理装置および情報処理方法
JP2015067254A (ja) * 2013-10-01 2015-04-13 パナソニックＩｐマネジメント株式会社 車載機器と、それを搭載した自動車
JP2018022310A (ja) * 2016-08-03 2018-02-08 オムロンオートモーティブエレクトロニクス株式会社 運転手状態判定装置、車両制御システム
JP2018019882A (ja) * 2016-08-03 2018-02-08 オムロンオートモーティブエレクトロニクス株式会社 生命徴候検出装置

Also Published As

Publication number Publication date
JP6389346B1 (ja) 2018-09-12
JP2019145036A (ja) 2019-08-29

Similar Documents

Publication Publication Date Title
KR102446686B1 (ko) 승객 상태 분석 방법 및 장치, 차량, 전자 기기, 저장 매체
JP7299840B2 (ja) 情報処理装置および情報処理方法
JP5782737B2 (ja) 状態検知装置、状態検知方法および状態検知プログラム
JPH0476698A (ja) 画像監視装置
WO2019220851A1 (ja) 映像出力装置、映像出力方法、及びコンピュータプログラム
JP2009157780A (ja) 監視システム
JP2018163644A (ja) ベッド出口監視システム
JP2021176235A (ja) 画像処理方法
JP6389346B1 (ja) 情報処理装置、情報処理システム、情報処理方法、及びプログラム
WO2018216402A1 (ja) 情報処理装置、情報処理方法、及びプログラム
JP3767898B2 (ja) 人物行動理解システム
JP2020194227A (ja) 顔遮蔽判定装置、顔遮蔽判定方法、顔遮蔽判定プログラム及び乗員監視システム
US20190149777A1 (en) System for recording a scene based on scene content
JP7062879B2 (ja) 表示制御装置及び表示制御方法
JP7134282B1 (ja) 映像解析装置、映像解析方法及び映像解析プログラム
JP2017177830A (ja) 表情記録システム
KR101609939B1 (ko) 신생아 영상 시스템
Bhargava et al. Drowsiness detection while driving using eye tracking
JP2023051148A (ja) ナースコールシステム、および状態判断システム
GB2578764A (en) Apparatus and method for controlling vehicle system operation
US20230053925A1 (en) Error management
JP2023051149A (ja) ナースコールシステム、および状態判断システム
CN118046849A (zh) 基于车载对象的车端控制控制方法及装置
JP2010063621A (ja) 視認情景に対する視認者感性反応装置
JP2022081218A (ja) 移動体搭載映像装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19757226

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19757226

Country of ref document: EP

Kind code of ref document: A1