WO2017094306A1 - 情報処理装置、情報処理方法、およびプログラム - Google Patents

情報処理装置、情報処理方法、およびプログラム Download PDF

Info

Publication number
WO2017094306A1
WO2017094306A1 PCT/JP2016/075825 JP2016075825W WO2017094306A1 WO 2017094306 A1 WO2017094306 A1 WO 2017094306A1 JP 2016075825 W JP2016075825 W JP 2016075825W WO 2017094306 A1 WO2017094306 A1 WO 2017094306A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
information processing
processing apparatus
unit
character
Prior art date
Application number
PCT/JP2016/075825
Other languages
English (en)
French (fr)
Inventor
智彦 後藤
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US15/777,546 priority Critical patent/US11017431B2/en
Priority to CN201680068969.XA priority patent/CN108293171B/zh
Publication of WO2017094306A1 publication Critical patent/WO2017094306A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0255—Targeted advertisements based on user history
    • G06Q30/0256—User search
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20—Instruments for performing navigational calculations
    • G01C21/206—Instruments for performing navigational calculations specially adapted for indoor navigation
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/3453—Special cost functions, i.e. other than distance or default speed limit of road segments
    • G01C21/3476—Special cost functions, i.e. other than distance or default speed limit of road segments using point of interest [POI] information, e.g. a route passing visible POIs
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/005—Traffic control systems for road vehicles including pedestrian guidance indicator
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • H04R2201/107—Monophonic and stereophonic headphones with microphone for two-way hands free communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/07—Use of position data from wide-area or local-area positioning systems in hearing devices, e.g. program or information selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H04S1/007—Two-channel systems in which the audio signals are in digital form
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation

Definitions

  • the present disclosure relates to an information processing apparatus, an information processing method, and a program.
  • Patent Document 1 an information processing system that outputs to a user a synthesized voice synthesized so that a guidance voice can be heard from the direction of a guidance object existing in the vicinity from a speaker. has been proposed.
  • Patent Document 1 whether or not the user follows the guidance to the target location depends on whether or not the user himself has motivation to go to the target location. Does not always move to the target location. Therefore, for example, there is a possibility that the effect when the navigation technology is used for advertisement is limited.
  • the present disclosure proposes an information processing apparatus, an information processing method, and a program capable of exciting the user the motivation following the guidance to a predetermined place.
  • the search unit that searches for a predetermined point specified according to the user situation and the scenario progress situation from the periphery of the user, and the voice by the character corresponding to the scenario progress situation And an output control unit that controls to guide to the searched predetermined point.
  • the processor searches the user's surroundings for a predetermined point specified according to the user situation and the scenario progress status based on the user position information, and the character corresponding to the scenario progress status
  • An information processing method is proposed that includes controlling to guide to the searched predetermined point with the voice of.
  • the computer corresponds to the scenario progress situation, the search unit that searches the user's surroundings for a predetermined point specified according to the user situation and the scenario progress situation, based on the user position information.
  • a program is proposed that functions as an output control unit that controls to be guided to the searched predetermined point by voice from a character.
  • FIG. 1 is a perspective view illustrating an example of an external configuration of the information processing apparatus 1 according to the present embodiment.
  • the information processing apparatus 1 may be, for example, a neckband type information processing terminal hung on the user's neck.
  • the neckband type information processing apparatus 1 has a mounting unit (a mounting portion) shaped to make a half turn from both sides of the neck to the back side (back side), and is mounted on the user by being hooked on the user's neck.
  • FIG. 1 shows a perspective view in a state where the mounting unit is mounted by the user.
  • words indicating directions such as up, down, left and right, front and back are used, and these directions indicate directions viewed from the center of the user's body (for example, the position of the pigeon tail) in the user's upright posture.
  • “right” indicates the direction of the user's right side
  • “left” indicates the direction of the user's left side
  • “up” indicates the direction of the user's head
  • “down” Indicates the direction of the user's foot.
  • “front” indicates a direction in which the user's body faces
  • “rear” indicates a direction on the user's back side.
  • the mounting unit may be mounted in close contact with the user's neck or may be mounted separately.
  • Other shapes of the neck-mounted mounting unit include, for example, a pendant type mounted on the user by a neck strap, or a headset type having a neck band passing through the back of the neck instead of a head band applied to the head. Conceivable.
  • the usage form of the wearing unit may be a form used by being directly worn on the human body.
  • the form that is directly worn and used refers to a form that is used without any object between the wearing unit and the human body.
  • the case where the mounting unit shown in FIG. 1 is mounted so as to contact the skin of the user's neck corresponds to this embodiment.
  • various forms such as a headset type and a glasses type that are directly attached to the head are conceivable.
  • wearing unit may be a form used by mounting
  • the form that is used by being indirectly worn refers to a form that is used in the state where some object exists between the wearing unit and the human body. For example, when the wearing unit shown in FIG.
  • the information processing apparatus 1 is provided with a plurality of microphones 12 (12A, 12B), cameras 13 (13A, 13B), and speakers 15 (15A, 15B).
  • the microphone 12 acquires sound data such as user sound or ambient environmental sound.
  • the camera 13 captures an image of the surroundings and acquires image data.
  • the speaker 15 reproduces audio data.
  • the speaker 15 reproduces an audio signal that has been subjected to sound image localization processing so that a user perceives a virtual character (an example of a virtual object) as if it actually exists in the real space.
  • the information processing apparatus 1 has a function of causing a user to perceive that a virtual character really exists in the real space using a sound image localization technology that spatially arranges audio information.
  • a sound image localization technology that spatially arranges audio information.
  • the user needs to be motivated to follow the guidance to the target location, and the user does not necessarily move to the target location.
  • the effect could be limited.
  • the voice of a character appearing in the game that is linked to the user's action in the real world is used to guide the user to a predetermined place as an event in the game or to encourage the purchase of a product, thereby naturalizing the user's motivation. Can be excited.
  • by giving a reward for clearing an event to a user following the guidance it is possible to continuously receive information presentation and give a motivation to follow the guidance.
  • the advertising effect can be enhanced by giving the user a new motivation to obtain a sense of accomplishment of the game.
  • installation positions and number of the microphones 12, the cameras 13, and the speakers 15 of the information processing apparatus 1 are not limited to the example shown in FIG.
  • FIG. 2 is a block diagram illustrating an example of an internal configuration of the information processing apparatus 1 according to the present embodiment.
  • the information processing apparatus 1 includes a control unit 10, a communication unit 11, a microphone 12, a camera 13, a 9-axis sensor 14, a speaker 15, a position positioning unit 16, a storage unit 17, and a beacon receiving unit 18.
  • a control unit 10 a communication unit 11
  • a microphone 12 a microphone 12
  • a camera 13 a 9-axis sensor 14
  • speaker 15 a position positioning unit 16
  • storage unit 17 a beacon receiving unit 18.
  • the control unit 10 functions as an arithmetic processing device and a control device, and controls the overall operation in the information processing device 1 according to various programs.
  • the control unit 10 is realized by an electronic circuit such as a CPU (Central Processing Unit) or a microprocessor, for example.
  • the control unit 10 may include a ROM (Read Only Memory) that stores programs to be used, calculation parameters, and the like, and a RAM (Random Access Memory) that temporarily stores parameters that change as appropriate.
  • the control unit 10 includes a state / action detection unit 10a, a virtual character action determination unit 10b, a scenario update unit 10c, a relative position calculation unit 10d, a sound image localization unit 10e, and an audio output. It functions as a control unit 10f, a reproduction history / feedback storage control unit 10g, a beacon determination unit 10i, and a POI search unit 10h.
  • the state / behavior detection unit 10a detects the user's state and recognizes the behavior based on the detected state, and outputs the detected state and the recognized behavior to the virtual character behavior determination unit 10b. Specifically, the state / behavior detection unit 10a acquires information such as position information, moving speed, direction, and ear (or head) height as information related to the user's state.
  • the user state is information that can be uniquely specified at the detected timing and can be calculated and acquired as numerical values from various sensors.
  • the position information is acquired from the position positioning unit 16, for example.
  • the moving speed is obtained from, for example, the position measurement unit 16, an acceleration sensor included in the 9-axis sensor 14, or the camera 13.
  • the orientation is acquired by a gyro sensor, an acceleration sensor, a geomagnetic sensor, or the camera 13 included in the 9-axis sensor 14.
  • the height of the ear (or head) is obtained from the user's physique data, acceleration sensor, and gyro sensor.
  • the user's physique data is stored in the storage unit 17.
  • the moving speed and direction may be acquired using SLAM (Simultaneous Localization and Mapping) that calculates the motion based on the change of the feature points in the video continuously captured by the camera 13.
  • SLAM Simultaneous Localization and Mapping
  • the state / behavior detection unit 10a can also recognize the user behavior by referring to the previous and next states.
  • User actions include, for example, “stopped”, “walking”, “running”, “sitting”, “sitting down”, “riding in a car”, “sitting a bicycle” ”,“ Facing the character ”or the like.
  • the state / behavior detection unit 10 a uses a predetermined behavior recognition engine based on information detected by the 9-axis sensor 14 (acceleration sensor, gyro sensor, geomagnetic sensor) and position information detected by the position positioning unit 16. It is also possible to recognize user behavior.
  • the virtual character action determination unit 10b determines a virtual action of the virtual character in the real space (including scenario selection) according to the user state and action recognized by the state / action detection unit 10a. Select the sound content corresponding to the action from the scenario. For example, when the user is walking from the station on the way home from the station, the virtual character action determining unit 10b selects a mission that guides the user to a store where the product to be advertised is sold from the scenario.
  • the virtual character action determination unit 10b may determine the action of the virtual character according to the location (user's current location), time, weather, environment, etc. in addition to the user's state and action, and develop the scenario. .
  • the virtual character action determining unit 10b selects a sound source corresponding to the action of the virtual character from a sound source list (sound content) stored in advance as a content scenario.
  • the scenario update unit 10c updates the scenario corresponding to the user in response to the sound content corresponding to the action of the virtual character determined by the virtual character action determination unit 10b being selected from the scenario.
  • the scenario is stored in the storage unit 17, for example.
  • the scenario configuration may be composed of, for example, a plurality of chapters, and each chapter may be composed of a plurality of missions. When all the missions are cleared, one chapter may be completed and proceed to the next chapter.
  • FIG. 3 is a diagram for explaining an example of scenario progress according to the present embodiment.
  • a mission M ⁇ b> 1 where the user meets the character is executed.
  • self-introduction is performed with the voice of the character corresponding to the mission M1.
  • a mission M2 is performed in which the user returns with the character on the way back to the company.
  • a mission M3 is performed in which the user spends morning and evening commuting time with the character.
  • the character is also output as a voice to commute together.
  • a mission M4 including missions M4-1 to M4-4, a mission M5 including missions M5-1 to M5-4, and a mission M6 including missions M6-1 to M6-4 are executed according to the progress of the game. For example, when the time spent with a character (that is, application use (activation) time) exceeds a predetermined time (for example, 10 hours) (mission M4-1 clear), the character's favorite product (for example, “croquette”) is displayed from the character. It becomes clear (execution of mission M4-2). Specifically, the product selected according to the situation (date, place, weather, environment, user preference, etc.) from the advertisement target product is introduced to the user by the character's voice as the favorite product of the character. Is done.
  • advertisement guidance to the specific store where the croquette is sold is performed with the voice of the character (execution of mission M4-3).
  • a voice such as “Is my favorite croquette selling at a convenience store just before you turn right? This allows the user to clear the game event or listen to the request of an attached character after spending a long time even if they already know the location or do not have the motivation to buy a croquette. Expect to move to the place, following the nature and guidance.
  • an event occurs in which the advertisement target product (here, the character's favorite food) is purchased at the store (execution of mission M4-4).
  • the product description and the product recommendation such as “This is delicious! Is performed, and the user is motivated to purchase the product.
  • the mission M4 including the above-described missions M4-1 to M4-4 advertises food as an example of a product to be advertised, but this embodiment is not limited to this, and the missions M5-1 to M5-4 are not limited thereto.
  • a music CD may be advertised as in a mission M5 including, or a book may be advertised as in a mission M6 including missions M6-1 to M6-4.
  • the relative position calculation unit 10d calculates a relative three-dimensional position (xy coordinate position and height) that localizes the sound source (sound content) of the virtual character selected by the virtual character action determination unit 10b. Specifically, the relative position calculation unit 10d calculates a relative position of the virtual character portion (head, torso, feet, etc.) corresponding to the type of the sound source (voice, clothing, footsteps, etc.) with respect to the user. The relative position calculation unit 10d may calculate the relative position so that the character's voice can be heard from the guiding direction. For example, when guiding to a convenience store, it is assumed that a character voice such as “This is it!” Can be heard from the way toward the convenience store.
  • the relative position calculation unit 10d can calculate the relative position in consideration of the height and direction of the user's ear (or head), the height information of the virtual character, and the like. This calculates the sound image localization position (localization direction and distance to the user) according to the action and lines of the virtual character so that there is no sense of incongruity when assuming that the virtual character is present and acting in the real space, The presence of the virtual character can be made more realistic.
  • the sound image localization unit 10e localizes the corresponding sound content (sound source) selected by the virtual character action determination unit 10b at the sound image localization position for each sound content calculated by the relative position calculation unit 10d. Perform signal processing.
  • the audio output control unit 10f controls the speaker 15 to reproduce the audio signal processed by the sound image localization unit 10e.
  • the information processing apparatus 1 localizes the sound content corresponding to the movement of the virtual character according to the user's state / action at an appropriate position, distance, and height with respect to the user.
  • the reality of the movement and size of the character can be presented, and the presence of the virtual character in the real space can be increased.
  • the reproduction history / feedback storage control unit 10g performs control so that the sound source (sound content) output by the audio output control unit 10f is stored in the storage unit 17 as a history (reproduction log). Further, the reproduction history / feedback storage control unit 10g feeds back a user's reaction such that the user turns around in the direction of the voice, stops and listens to the story, and speaks when the voice output control unit 10f outputs the voice. To be stored in the storage unit 17. As a result, the control unit 10 can learn user preferences, and the virtual character behavior determination unit 10b described above can select a mission or advertisement target product according to the user preferences.
  • the POI search unit 10h searches for a POI (point of interest) around the user based on the position information of the user. Specifically, the POI search unit 10h searches for the specific location from the user's surroundings when the scenario progresses to a mission for guiding the user to the specific location, for example, according to the progress of the scenario. The result is output to the virtual character action determination unit 10b.
  • a POI point of interest
  • the beacon determination unit 10 i determines whether or not the beacon is received by the beacon receiving unit 18. For example, when the user moves into the store according to the guidance, it is necessary to determine whether or not the product to be advertised is displayed in the store. 16, the accuracy may be low. Therefore, in the present embodiment, it is possible to acquire indoor position information by receiving a beacon transmitted from a beacon terminal installed on a target product display shelf or the like by the beacon receiving unit 18.
  • the beacon determination unit 10i determines whether or not the user has come close to the predetermined advertisement target product depending on whether or not the predetermined beacon is received by the beacon reception unit 18, and the determination result is sent to the virtual character action determination unit 10b. Output. Thereby, the virtual character action determination part 10b can select the mission which recommends the said goods to a user, when a user moves to the vicinity of predetermined
  • the communication unit 11 is a communication module for transmitting and receiving data to and from other devices by wire / wireless.
  • the communication unit 11 is a system such as a wired LAN (Local Area Network), wireless LAN, Wi-Fi (Wireless Fidelity (registered trademark)), infrared communication, Bluetooth (registered trademark), short-range / non-contact communication, and the like. Wirelessly or directly via a network access point.
  • the communication unit 11 transmits data acquired by the microphone 12, the camera 13, and the 9-axis sensor 14 to the external device. Send to.
  • the communication unit 11 receives various sensor data or the like from the smartphone or other wearable device and controls the control unit 10. May be output. Further, the communication unit 11 may receive the sound content selected by the control unit 10 from a server on the cloud.
  • the microphone 12 collects the user's voice and the surrounding environment, and outputs it to the control unit 10 as voice data.
  • the camera 13 photoelectrically converts a lens system including an imaging lens, an aperture, a zoom lens, a focus lens, and the like, a drive system that causes the lens system to perform a focus operation and a zoom operation, and imaging light obtained by the lens system.
  • a solid-state image pickup device array for generating an image pickup signal.
  • the solid-state imaging device array may be realized by, for example, a CCD (Charge Coupled Device) sensor array or a CMOS (Complementary Metal Oxide Semiconductor) sensor array.
  • the camera 13 is provided so that the front of the user can be imaged in a state where the information processing apparatus 1 (mounting unit) is mounted on the user.
  • the camera 13 can capture, for example, the movement of the surrounding scenery according to the movement of the user, the product shelf displayed in the direction in which the user is viewing in the store, and the like. Further, the camera 13 may be provided so that the user's face can be imaged in a state where the information processing apparatus 1 is worn by the user. In this case, the information processing apparatus 1 can specify the position and expression of the user's ear from the captured image. In addition, the camera 13 outputs captured image data that is a digital signal to the control unit 10.
  • the 9-axis sensor 14 includes a 3-axis gyro sensor (detection of angular velocity (rotational speed)), a 3-axis acceleration sensor (also referred to as G sensor, detection of acceleration during movement), and a 3-axis geomagnetic sensor (compass, absolute direction (azimuth) ) Detection).
  • the 9-axis sensor 14 has a function of sensing the state of the user wearing the information processing apparatus 1 or the surrounding state.
  • the 9-axis sensor 14 is an example of a sensor unit, and the present embodiment is not limited thereto.
  • a speed sensor or a vibration sensor may be further used, or an acceleration sensor, a gyro sensor, and a geomagnetic sensor may be used. At least one of them may be used.
  • the sensor unit may be provided in a device different from the information processing device 1 (mounting unit), or may be provided in a distributed manner in a plurality of devices.
  • an acceleration sensor, a gyro sensor, and a geomagnetic sensor may be provided in a device (for example, an earphone) attached to the head, and a speed sensor or a vibration sensor may be provided in a smartphone.
  • the 9-axis sensor 14 outputs information indicating the sensing result to the control unit 10.
  • the speaker 15 reproduces the audio signal processed by the sound image localization unit 10e according to the control of the audio output control unit 10f.
  • the speaker 15 can also convert a plurality of sound sources at arbitrary positions / directions into stereo sound and output the sound.
  • the position positioning unit 16 has a function of detecting the current position of the information processing apparatus 1 based on an externally acquired signal.
  • the positioning unit 16 is realized by a GPS (Global Positioning System) positioning unit, receives a radio wave from a GPS satellite, detects a position where the information processing apparatus 1 exists, and detects the position.
  • the position information is output to the control unit 10.
  • the information processing apparatus 1 detects a position by, for example, Wi-Fi (registered trademark), Bluetooth (registered trademark), transmission / reception with a mobile phone / PHS / smartphone, or short-range communication. There may be.
  • the storage unit 17 stores programs and parameters for the above-described control unit 10 to execute each function.
  • the storage unit 17 according to the present embodiment includes scenarios (various sound contents), virtual character setting information (shape, height, etc.), user information (name, age, home, occupation, workplace, physique data, hobbies / preferences, etc.) ).
  • the information stored in the storage unit 17 may be stored in another device such as a server on the cloud.
  • the beacon receiving unit 18 receives a beacon transmitted from a beacon terminal existing in the vicinity and outputs the beacon to the control unit 10.
  • FIG. 4 is a flowchart showing an operation process according to this embodiment.
  • the state / behavior detection unit 10a of the information processing apparatus 1 is detected by various sensors (specifically, for example, the microphone 12, the camera 13, the 9-axis sensor 14, or the position measurement unit 16). Based on the information thus obtained, the user situation is detected (step S103).
  • the virtual character action determination unit 10b determines whether or not the event occurrence condition is satisfied based on the user situation detected by the state / action detection unit 10a (step S106). For example, the virtual character action determination unit 10b determines whether or not a predetermined event occurrence condition is satisfied according to the position information of the user and the progress of the game scenario. For example, as a predetermined event, for example, a guide to a store where a product to be advertised is sold, a guide to a place where an event to be advertised is held, a guide to a place where advertisement information to be viewed by a user is posted , Guidance to a movie theater where a movie to be advertised is shown, or guidance to a place of getting on / off of a transportation to be advertised.
  • a predetermined event for example, a guide to a store where a product to be advertised is sold, a guide to a place where an event to be advertised is held, a guide to a place where advertisement information to be viewed by a user is posted
  • guidance information that the user wants to browse when the user uses a different route than usual, such as guidance to a CD shop where the music CD that the user wants to advertise is placed (the purchase of music may be a download) For example, guidance to the posted location.
  • the POI search unit 10h searches for a POI existing around the current position of the user (step S109).
  • the virtual character action determination unit 10b has a specific place (here, for example, a store) corresponding to the event determined by the virtual character action determination unit 10b around the user. It is determined whether or not there is (step S112). Note that a specific location corresponding to the event determined by the virtual character action determination unit 10b may be notified to the POI search unit 10h, and the POI search unit 10h may search for the specific location from around the user.
  • a specific place here, for example, a store
  • the control unit 10 guides the user to the specific store by a voice of a predetermined character in the scenario (step S115). Specifically, the control unit 10 causes the audio output control unit 10f to output a predetermined character's voice such as “Let's go because there is a convenience store near here!” “Turn right here!” “Straight”. Output from the speaker 15 at any time. At this time, the voice of the character output from the speaker 15 is controlled so that it can be heard from the direction where the convenience store is located.
  • the relative position calculation unit 10d calculates the direction of the specific store with respect to the current position of the user, the sound image localization unit 10e performs localization processing, and the sound output control unit 10f performs output control.
  • the relative position calculation unit 10d further considers the difference between the height of the user and the height of the virtual character, is in the direction in which the specific store exists, and corresponds to the height difference (the height of the virtual character is lower than the user). The lower one, the higher one).
  • the state / behavior detection unit 10a determines the location where the user is present from the position information continuously measured by the position measurement unit 16 (step S118).
  • the virtual character action determination unit 10b determines whether or not the user has arrived at a specific store as a guide destination based on the determination result of the state / action detection unit 10a (step S121). Until arrival, voice guidance by a predetermined character can be continuously performed according to the current position of the user.
  • step S121 the control unit 10 guides the user into the store by the voice of a predetermined character (step S124).
  • a voice of a predetermined character urges the store to say “It ’s a convenience store here! Let ’s enter!” “It ’s very delicious,” says a voice promoting the product.
  • the beacon determination unit 10i performs beacon determination (step S127).
  • the detailed position information of the user in the store may be inferior in accuracy in the position measurement unit 16 using GPS or the like, so based on the beacon information transmitted from the beacon terminal installed in the store, It is possible to acquire position information.
  • Whether or not the user has entered the store may be determined based on a beacon transmitted from a beacon terminal installed near the store entrance.
  • control unit 10 determines whether or not the user has moved to a specific sales floor in the store based on the determination result by the beacon determination unit 10i (step S130).
  • control unit 10 performs object recognition based on the captured image captured by the camera 13, and is in front of the user's eyes. It is determined whether or not the specific product to be advertised exists (in the user's field of view) (steps S133 and S136).
  • control unit 10 prompts the user to purchase with the voice of the predetermined character (step S139). For example, the control unit 10 outputs “This is this! This ice is delicious!” With the voice of a predetermined character.
  • control unit 10 determines whether or not the user has purchased a specific product (step S142). Specifically, for example, the control unit 10 receives, in real time, information from a smartphone or the like that the user has purchased a specific product by electronic money settlement using a smartphone or the like, and performs purchase determination of the specific product.
  • step S145 when the user purchases a specific product (step S145 / Yes), the control unit 10 notifies the user of gratitude by the voice of a predetermined character (step S148). For example, sounds such as “Thank you!”, “Let's eat fast!” And “Delicious?” Are output.
  • control part 10 updates the game scenario by having cleared the mission of purchasing a specific product, and information that can advance the point addition in the game, the item grant, and the game advantageously as the reward Presentation is performed (step S151).
  • an event such as purchase of a specific product to be advertised at a store is executed.
  • the present embodiment is not limited to this, and for example, the following event may be executed.
  • control unit 10 leads to a movie theater where a movie to be advertised is screened, prompts the user to acquire a discount coupon using a smartphone, and when the user acquires the discount coupon, the voice of a predetermined character indicates “This movie with this coupon. Can be seen cheaply! "
  • control unit 10 when the user approaches the advertisement (poster or signboard) that the user wants to browse, the control unit 10 outputs “Look at the poster on the right building!” By the voice of a predetermined character. .
  • control unit 10 determines whether or not the transportation means to be advertised is used based on the position information and the acceleration sensor data and the like, and “Thank you for getting on the train! Is output.
  • control unit 10 when there is an event to be advertised, the control unit 10 outputs “Please come to XX Park at 18:00 this Saturday” as an in-game event with the voice of a predetermined character.
  • control unit 10 when the user is in the amusement park, the control unit 10 outputs “Now, XX attractions are available!” With the voice of a predetermined character based on the surrounding environment information.
  • control unit 10 when there is a movie to be advertised, the control unit 10 outputs, as an in-game event, “A movie called XX is interesting!
  • a discount ticket may be acquired by touching a smartphone with a predetermined terminal in a movie theater.
  • control unit 10 guides “Let's get a rain at a shopping center” with the voice of a predetermined character, and when the user enters a predetermined shopping center. Advertise “You ’re doing a sale at ⁇ !”
  • control unit 10 utters “Our XX CD poster to be released next time in the building in front of you” Or when you ’re looking at the target poster, it says “Did you see the poster?
  • control unit 10 when there is a transportation means or a place to be advertised, the control unit 10 outputs “I want to ride a trolley train in the XX canyon” as an event in the game with a voice of a predetermined character, and the user can When you get on the train, it will output “Nice scenery! Thank you for bringing me!”
  • control unit 10 outputs “I will guide this town today” by voice of a predetermined character, and guides it to various attractions and souvenir shops.
  • control unit 10 when there is a book to be advertised, the control unit 10 outputs “I want to go to the bookstore” as an event in the game with a voice of a predetermined character, and when the user goes to the bookstore to deal with, “I want a constellation book” Is output.
  • control unit 10 causes the voice of the predetermined character to output “Do not go home a little today?”, And the predetermined store where the user does not normally pass When you pass through the city, it outputs “The cake here is really delicious!”
  • control unit 10 prompts the user with a predetermined character's voice, “I like the song ⁇ of the artist XX. Don't listen together?” When the target music is purchased, it outputs "Thank you! Let's listen together!
  • control unit 10 prompts the user to “take a photo booth together” with the voice of a predetermined character, and guides to a store with a specific model photo booth machine.
  • the specific type of photo booth machine communicates with the information processing apparatus 1 worn by the user, and can take a photo of the photo booth in which a predetermined character is also taken. As a result, it is possible to see the appearance of a virtual character with only voice.
  • control unit 10 outputs “Oh, I bought it! Thank you” with the voice of a predetermined character, and adds a point indicating good friendship with the character.
  • the user can feel the presence of the virtual character by voice, and the user can respond to the voice of the virtual character by actions such as scolding, turning around, moving, buying goods, etc. Without taking it, you can enjoy a game linked to the real space.
  • the information processing apparatus 1 is an information processing system including a headphone (or earphone, eyewear, etc.) provided with a speaker 15 and a mobile terminal (smartphone, etc.) mainly having the function of the control unit 10. It may be realized. At this time, the mobile terminal transmits the sound signal subjected to the sound image localization process to the headphones for reproduction.
  • the speaker 15 is not limited to being mounted on a device worn by the user, and may be realized by, for example, an environmental speaker installed around the user. In this case, the environmental speaker is an arbitrary speaker around the user. It is possible to localize the sound image at the position.
  • the presence of the virtual character is presented only by voice, but the present embodiment is not limited to this.
  • the information processing apparatus 1 is an eyewear type
  • the present embodiment is based on this embodiment. It is also possible to combine the sound image localization and the superimposed display of the virtual character video in the real space to give the virtual character more reality.
  • the game scenario is not limited to a preset scenario, and the user may be able to register a task as appropriate. For example, a task of throwing away trash at a predetermined time on a predetermined day of the week may be registered so that a predetermined character can be met at the trash disposal place when the task is executed.
  • the POI search and the generation of guidance voice data are performed by the information processing apparatus 1, but the present embodiment is not limited to this, and the information processing apparatus 1 transmits data via the communication unit 11.
  • search for user peripheral information specifically, POI search
  • generation of guidance voice data to the searched specific place may be performed.
  • this technique can also take the following structures.
  • a search unit that searches a predetermined point specified according to the user situation and the scenario progress situation from the user's surroundings, An output control unit that controls to be guided to the searched predetermined point by voice by a character corresponding to the scenario progress;
  • An information processing apparatus comprising: (2) The information processing apparatus according to (1), wherein the search unit searches for a place corresponding to an advertisement target. (3) The information processing apparatus according to (1) or (2), wherein the predetermined point is further specified according to a user surrounding environment.
  • the information processing apparatus includes: A calculation unit that calculates a relative localization position of the sound source of the character with respect to the user based on information on the character that is a virtual object perceived to exist in the real space by sound image localization and information on the state of the user When, A sound image localization unit that performs audio signal processing of the sound source so as to localize a sound image at the calculated localization position;
  • the information processing apparatus includes: The information processing apparatus according to any one of (2) to (5), further including an update unit configured to update a scenario according to the user's behavior or the passage of time.
  • the information processing apparatus includes a beacon receiving unit that receives a beacon transmitted from a beacon terminal; A determination unit that determines whether or not a user has moved to the vicinity of the advertisement target based on the beacon received by the beacon reception unit;

Abstract

【課題】所定の場所への誘導に従うモチベーションをユーザに励起させることが可能な情報処理装置、情報処理方法、およびプログラムを提供する。 【解決手段】ユーザの位置情報に基づいて、ユーザ状況およびシナリオ進捗状況に応じて特定される所定のポイントをユーザの周辺から検索する検索部と、前記シナリオ進捗状況に対応するキャラクタによる音声で、前記検索した所定のポイントへ誘導するよう制御する出力制御部と、を備える、情報処理装置。

Description

情報処理装置、情報処理方法、およびプログラム
　本開示は、情報処理装置、情報処理方法、およびプログラムに関する。
　近年の情報処理および情報通信技術の発展に伴い、コンピュータが広く普及し、日常生活においてもコンピュータが積極的に利用されるようになった。例えば、スマートフォン、携帯電話端末等のモバイル通信端末を用いて、外出先でネットワーク上の情報を閲覧したり、目的地までのナビゲーションサービスを享受したりすることが可能となる。
　携帯電話端末を用いたナビゲーション技術に関し、例えば下記特許文献１では、ユーザに対して、周辺に存在する案内対象物の方向から案内音声が聞こえるように合成した合成音声をスピーカから出力する情報処理システムが提案されている。
特開２００８－２７５５１９号公報
　しかしながら、上記特許文献１では、ユーザが目的の場所までの誘導に従うか否かは、ユーザ自身に目的の場所まで行くモチベーションがあるか否かによるものであって、誘導を行った際に必ずしもユーザが目的の場所に移動するとは限らない。したがって、例えばナビゲーション技術を広告に用いた際の効果が限定的になる可能性があった。
　そこで、本開示では、所定の場所への誘導に従うモチベーションをユーザに励起させることが可能な情報処理装置、情報処理方法、およびプログラムを提案する。
　本開示によれば、ユーザの位置情報に基づいて、ユーザ状況およびシナリオ進捗状況に応じて特定される所定のポイントをユーザの周辺から検索する検索部と、前記シナリオ進捗状況に対応するキャラクタによる音声で、前記検索した所定のポイントへ誘導するよう制御する出力制御部と、を備える、情報処理装置を提案する。
　本開示によれば、プロセッサが、ユーザの位置情報に基づいて、ユーザ状況およびシナリオ進捗状況に応じて特定される所定のポイントをユーザの周辺から検索することと、前記シナリオ進捗状況に対応するキャラクタによる音声で、前記検索した所定のポイントへ誘導するよう制御することと、を含む情報処理方法を提案する。
　本開示によれば、コンピュータを、ユーザの位置情報に基づいて、ユーザ状況およびシナリオ進捗状況に応じて特定される所定のポイントをユーザの周辺から検索する検索部と、前記シナリオ進捗状況に対応するキャラクタによる音声で、前記検索した所定のポイントへ誘導するよう制御する出力制御部と、として機能させるプログラムを提案する。
　以上説明したように本開示によれば、所定の場所への誘導に従うモチベーションをユーザに励起させることが可能となる。
　なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本実施形態による情報処理装置の外観構成の一例を示す斜視図である。 本実施形態による情報処理装置の内部構成の一例を示すブロック図である。 本実施形態によるシナリオ進行の一例を示す図である。 本実施形態による情報処理装置の動作処理を示すフローチャートである。
　以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
　また、説明は以下の順序で行うものとする。
　１．本開示の一実施形態による情報処理装置の概要
　２．内部構成例
　３．動作処理
　４．まとめ
　＜＜１．本開示の一実施形態による情報処理装置の概要＞＞
　まず、本開示の一実施形態による情報処理装置の概要について、図１を参照して説明する。図１は、本実施形態による情報処理装置１の外観構成の一例を示す斜視図である。
　図１に示すように、本実施形態による情報処理装置１は、例えばユーザの首に掛けられるネックバンド型の情報処理端末であってもよい。ネックバンド型の情報処理装置１は、首の両側から後ろ側（背中側）にかけて半周回するような形状の装着ユニット（装着部）を有し、ユーザの首にかけられることでユーザに装着される。図１では、装着ユニットをユーザが装着した状態における斜視図を示す。なお、本明細書では、上下左右前後といった方向を示す言葉を用いるが、これらの方向はユーザの直立姿勢における、ユーザの体の中心（例えば鳩尾の位置）からみた方向を示すものとする。例えば、「右」とはユーザの右半身側の方向を示し、「左」とはユーザの左半身側の方向を示し、「上」とはユーザの頭側の方向を示し、「下」とはユーザの足側の方向を示すものとする。また、「前」とはユーザの体が向く方向を示し、「後」とはユーザの背中側の方向を示すものとする。
　図１に示すように、装着ユニットは、ユーザの首に密着して装着されてもよいし、離間して装着されてもよい。なお首かけ型の装着ユニットの他の形状としては、例えば首下げ紐によりユーザに装着されるペンダント型や、頭にかけるヘッドバンドの代わりに首の後ろ側を通るネックバンドを有するヘッドセット型が考えられる。
　また、装着ユニットの使用形態は、人体に直接的に装着されて使用される形態であってもよい。直接的に装着されて使用される形態とは、装着ユニットと人体との間に何らの物体も存在しない状態で使用される形態を指す。例えば、図１に示す装着ユニットがユーザの首の肌に接するように装着される場合は本形態に該当する。他にも、頭部に直接的に装着されるヘッドセット型やメガネ型等の多様な形態が考えられる。若しくは、装着ユニットの使用形態は、人体に間接的に装着されて使用される形態であってもよい。間接的に装着されて使用される形態とは、装着ユニットと人体との間に何らかの物体が存在する状態で使用される形態を指す。例えば、図１に示した装着ユニットが、シャツの襟の下に隠れるように装着される等、服の上からユーザに接するように装着される場合は、本形態に該当する。他にも、首下げ紐によりユーザに装着されるペンダント型や、衣服に留め具等で留められるブローチ型等の多様な形態が考えられる。
　また、本実施形態による情報処理装置１には、複数のマイクロホン１２（１２Ａ、１２Ｂ）、カメラ１３（１３Ａ、１３Ｂ）、およびスピーカ１５（１５Ａ、１５Ｂ）が設けられている。マイクロホン１２は、ユーザ音声又は周囲の環境音等の音声データを取得する。カメラ１３は、周囲の様子を撮像し撮像データを取得する。また、スピーカ１５は、音声データの再生を行う。特に、スピーカ１５は、仮想キャラクタ（仮想物体の一例）が現実空間に実際に存在しているかのようにユーザに知覚させるよう音像定位処理された音声信号を再生する。すなわち、本実施形態による情報処理装置１は、音声情報を空間的に配置する音像定位技術を用いて、現実空間に仮想キャラクタが本当に存在しているようユーザに知覚させる機能を有し、仮想キャラクタの音声により所定の場所への誘導情報を提示することで、当該誘導に従うモチベーションをユーザに励起させることが可能となる。
　上述したように、ユーザが目的の場所までの誘導に従うにはユーザ自身のモチベーションが必要であり、必ずしもユーザが目的の場所に移動するとは限らないため、例えば広告等にナビゲーション技術を利用する場合の効果が限定的になる可能性があった。
　また、誘導に従ってユーザが目的の場所まで移動したり、目的の商品を購入しても、ユーザに対するインセンティブが無いため、再訪が期待できなかった。また、ユーザが既に知っている場所への広告誘導や広告情報の提示は、ユーザにとって不要な情報と判断され、誘導に従うモチベーションが下がっていた。
　そこで、本実施形態では、実世界におけるユーザの行動と連動するゲーム内で登場するキャラクタの音声によって、ゲーム内のイベントとして所定の場所へ誘導したり商品購入を促すことで、ユーザのモチベーションを自然と励起させることを可能とする。また、誘導に従ったユーザに対してイベントクリアの報酬を与えることで、継続的に情報提示を受け誘導に従う動機を与えることを可能とする。
　ユーザは、実世界と連動するゲームを楽しみながら、自然に、広告の場所、店舗、および商品購入へ誘導され、ゲーム内のキャラクタからのお願いに応えるという形で広告に従った行動を行うため、既に知っている場所への誘導にも従うモチベーションが生まれる。このように、ゲームの達成感を得るといった新たなモチベーションをユーザに与えることで、広告効果を高めることができる。
　なお情報処理装置１のマイクロホン１２、カメラ１３、およびスピーカ１５の設置位置および数は、図１に示す例に限定されない。
　＜＜２．内部構成例＞＞
　続いて、本実施形態による情報処理装置１の内部構成について図２を参照して説明する。図２は、本実施形態による情報処理装置１の内部構成の一例を示すブロック図である。図２に示すように、情報処理装置１は、制御部１０、通信部１１、マイクロホン１２、カメラ１３、９軸センサ１４、スピーカ１５、位置測位部１６、記憶部１７、およびビーコン受信部１８を有する。
　（制御部１０）
　制御部１０は、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理装置１内の動作全般を制御する。制御部１０は、例えばＣＰＵ（Central　Processing　Unit）、マイクロプロセッサ等の電子回路によって実現される。また、制御部１０は、使用するプログラムや演算パラメータ等を記憶するＲＯＭ（Read　Only　Memory）、及び適宜変化するパラメータ等を一時記憶するＲＡＭ（Random　Access　Memory）を含んでいてもよい。
　また、本実施形態による制御部１０は、図２に示すように、状態・行動検出部１０ａ、仮想キャラクタ行動決定部１０ｂ、シナリオ更新部１０ｃ、相対位置算出部１０ｄ、音像定位部１０ｅ、音声出力制御部１０ｆ、再生履歴・フィードバック記憶制御部１０ｇ、ビーコン判定部１０ｉ、ＰＯＩ検索部１０ｈとして機能する。
　状態・行動検出部１０ａは、ユーザの状態の検出、また、検出した状態に基づく行動の認識を行い、検出した状態や認識した行動を仮想キャラクタ行動決定部１０ｂに出力する。具体的には、状態・行動検出部１０ａは、位置情報、移動速度、向き、耳（または頭部）の高さといった情報を、ユーザの状態に関する情報として取得する。ユーザ状態は、検出したタイミングで一意に特定可能であって、各種センサから数値として算出・取得できる情報である。
　位置情報は、例えば位置測位部１６から取得される。また、移動速度は、例えば位置測位部１６、９軸センサ１４に含まれる加速度センサ、またはカメラ１３等から取得される。向きは、９軸センサ１４に含まれるジャイロセンサ、加速度センサ、および地磁気センサ、若しくはカメラ１３により取得される。耳（または頭部）の高さは、ユーザの体格データ、加速度センサ、およびジャイロセンサから取得される。ユーザの体格データは、記憶部１７に記憶されている。また、移動速度および向きは、カメラ１３により継続的に周囲を撮像した映像における特徴点の変化をベースに動きを算出するSLAM（Simultaneous Localization and Mapping）を用いて取得してもよい。
　また、状態・行動検出部１０ａは、前後の状態を参照することでユーザ行動を認識することも可能である。ユーザ行動としては、例えば「立ち止まっている」、「歩いている」、「走っている」、「座っている」、「寝転んでいる」、「車に乗っている」、「自転車を漕いでいる」、「キャラクタの方を向いている」等が想定される。状態・行動検出部１０ａは、９軸センサ１４（加速度センサ、ジャイロセンサ、地磁気センサ）により検出された情報や、位置測位部１６により検出された位置情報に基づいて、所定の行動認識エンジンを用いてユーザ行動を認識することも可能である。
　仮想キャラクタ行動決定部１０ｂは、状態・行動検出部１０ａにより認識されたユーザの状態や行動に応じて、仮想キャラクタの現実空間における仮想的な行動を決定し（シナリオの選択も含む）、決定した行動に対応する音コンテンツをシナリオから選択する。例えば、仮想キャラクタ行動決定部１０ｂは、ユーザが会社帰りで駅から歩いている際に、広告対象の商品が販売されている店舗へユーザを誘導するといったミッションをシナリオから選択する。
　また、仮想キャラクタ行動決定部１０ｂは、ユーザの状態や行動の他、場所（ユーザの現在地）、時間、天候、または環境等に応じて仮想キャラクタの行動を決定し、シナリオを展開してもよい。
　また、仮想キャラクタ行動決定部１０ｂは、仮想キャラクタの行動が決定すると、コンテンツのシナリオとして予め記憶している音源リスト（音コンテンツ）の中で、仮想キャラクタの行動に対応する音源を選択する。
　シナリオ更新部１０ｃは、仮想キャラクタ行動決定部１０ｂにより決定された仮想キャラクタの行動に対応する音コンテンツがシナリオから選択されることに応じて、ユーザに対応するシナリオの更新を行う。当該シナリオは、例えば記憶部１７に記憶されている。シナリオ構成は、例えば複数のチャプターから成り、各チャプターは複数のミッションで構成され、ミッションを全てクリアした場合に１チャプターが終了して次のチャプターに進むようにしてもよい。
　ここで、シナリオ進行の一例を、図３を参照して説明する。図３は、本実施形態によるシナリオ進行の一例を説明する図である。図３に示すように、例えば本実施形態を実行するアプリケーションを利用開始した時点で、ユーザとキャラクタが出会うミッションＭ１が実行される。具体的には、例えばミッションＭ１に対応するキャラクタの音声で自己紹介が行われる。次いで、ユーザが会社の帰り道にキャラクタと一緒に帰るミッションＭ２が実行される。具体的には、例えばユーザの行動認識結果に基づいて、ユーザが会社帰りに駅から自宅まで歩く際に、キャラクタも隣を歩きながら（足音で表現）、ミッションＭ２に対応する音声（例えば身の上話）を音声出力する。次に、ユーザが朝晩の通勤時間をキャラクタと一緒に過ごすミッションＭ３が実行される。具体的には、例えばユーザの行動認識結果に基づいて、ユーザの電車通勤時に、キャラクタも一緒に通勤して話し掛けるよう音声出力する。
　次いで、図３に示すように、ミッションＭ４－１～Ｍ４－４を含むミッションＭ４と、ミッションＭ５－１～Ｍ５－４を含むミッションＭ５と、ミッションＭ６－１～Ｍ６－４を含むミッションＭ６とが、それぞれゲーム進行状況に応じて実行される。例えば、キャラクタと過ごした時間（すなわちアプリケーション利用（起動）時間）が所定時間（例えば１０時間）を超えた場合（ミッションＭ４－１クリア）、キャラクタからキャラクタの好きな商品（例えば「コロッケ」）が判明する（ミッションＭ４－２実行）。具体的には、広告対象の商品から、状況に応じて（日時、場所、天候、環境、ユーザの嗜好等）選択された商品を、キャラクタの好きな商品としてキャラクタの音声によりユーザに対して紹介される。次いで、キャラクタの音声で、当該コロッケが販売されている特定店舗への広告誘導が行われる（ミッションＭ４－３実行）。例えば、「そこを右に曲がった先にあるコンビニに、私の好きなコロッケが売ってるの！ちょっと付き合ってくれる？」といった音声がキャラクタの音声でユーザに出力される。これにより、たとえその場所を既に知っていたり、コロッケを買いたいモチベーションがなくても、ユーザは、ゲームイベントクリアのため、若しくは長い時間を一緒に過ごして愛着の湧いたキャラクタのお願いを聞くために、自然と誘導に従い、その場所へ移動することが期待される。次に、誘導に従ってユーザが特定店舗に移動した場合、当該店舗で広告対象商品（ここでは、キャラクタの好きな食べ物）を購入するというイベントが発生する（ミッションＭ４－４実行）。具体的には、例えばキャラクタの音声誘導に従って対象商品が陳列されている棚までユーザが移動すると、キャラクタの音声により「これ美味しいの！季節限定なんだよ！」と商品説明や商品のお勧めが行われ、ユーザに商品購入のモチベーションを与える。
　上述したミッションＭ４－１～Ｍ４－４を含むミッションＭ４は、広告対象の商品の一例として食べ物を広告するものであるが、本実施形態はこれに限定されず、ミッションＭ５－１～Ｍ５－４を含むミッションＭ５のように音楽ＣＤを広告するものであってもよいし、ミッションＭ６－１～Ｍ６－４を含むミッションＭ６のように書籍を広告するものであってもよい。
　以上、本実施形態によるシナリオの一例について説明した。
　相対位置算出部１０ｄは、仮想キャラクタ行動決定部１０ｂにより選択された仮想キャラクタの音源（音コンテンツ）を定位する相対的な３次元位置（ｘｙ座標位置および高さ）を算出する。具体的には、相対位置算出部１０ｄは、音源の種別（声、衣擦れ、足音等）に対応する仮想キャラクタの部位（頭部、胴体、足元等）の、ユーザに対する相対位置を算出する。また、相対位置算出部１０ｄは、誘導する方向からキャラクタの音声が聞こえるよう相対位置を算出してもよい。例えば、コンビニに誘導する際、コンビニの方へ向かう道から、「こっちだよ！」といったキャラクタ音声が聞こえるようにすることが想定される。また、相対位置算出部１０ｄは、ユーザの耳（または頭部）の高さおよび向きと、仮想キャラクタの身長情報等も考慮して、相対位置を算出し得る。これにより、仮想キャラクタが現実空間に存在して行動していると想定した場合に違和感の無いよう、仮想キャラクタの行動とセリフに合わせて音像定位位置（ユーザに対する定位方向および距離）を算出し、仮想キャラクタの存在をよりリアルに感じさせることができる。
　音像定位部１０ｅは、相対位置算出部１０ｄにより算出された音コンテンツ毎の音像定位位置に、仮想キャラクタ行動決定部１０ｂにより選択された対応する音コンテンツ（音源）を定位させるよう、音コンテンツの音声信号処理を行う。
　音声出力制御部１０ｆは、音像定位部１０ｅにより処理された音声信号をスピーカ１５で再生するよう制御する。これにより、本実施形態による情報処理装置１は、ユーザの状態・行動に応じた仮想キャラクタの動きに対応する音コンテンツを、ユーザに対して適切な位置、距離、高さで音像定位し、仮想キャラクタの動きや大きさのリアリティを提示し、現実空間における仮想キャラクタの存在感を増すことができる。
　再生履歴・フィードバック記憶制御部１０ｇは、音声出力制御部１０ｆで音声出力された音源（音コンテンツ）を履歴（再生ログ）として記憶部１７に記憶するよう制御する。また、再生履歴・フィードバック記憶制御部１０ｇは、音声出力制御部１０ｆで音声出力された際に、ユーザが声の方向に振り向いたり、立ち止まって話を聞いたり、頷いたり、といったユーザの反応をフィードバックとして記憶部１７に記憶するよう制御する。これにより制御部１０はユーザ嗜好を学習することが可能となり、上述した仮想キャラクタ行動決定部１０ｂにおいてユーザ嗜好に応じたミッションや広告対象商品を選択することができる。
　ＰＯＩ検索部１０ｈは、ユーザの位置情報に基づいて、ユーザ周辺のＰＯＩ（point of interest）を検索する。具体的には、ＰＯＩ検索部１０ｈは、シナリオの進捗状況に応じて、例えばユーザを特定の場所へ誘導するミッションまでシナリオが進んでいる場合に、当該特定の場所をユーザ周辺から検索し、検索結果を仮想キャラクタ行動決定部１０ｂに出力する。
　ビーコン判定部１０ｉは、ビーコン受信部１８によりビーコンを受信したか否かを判定する。例えば、ユーザが誘導に従って店舗内に移動した場合、さらに店舗内に陳列されている広告対象商品の近くに来たか否かを判断する必要があるが、室内での位置情報を取得は位置測位部１６では精度が低い場合がある。そこで、本実施形態では、ビーコン受信部１８により対象商品陳列棚等に設置されたビーコン端末から発信されたビーコンを受信することで、室内での位置情報を取得することを可能とする。ビーコン判定部１０ｉは、ビーコン受信部１８により所定ビーコンを受信したか否か応じて、ユーザが所定の広告対象商品の近くに来たか否かを判定し、判定結果を仮想キャラクタ行動決定部１０ｂへ出力する。これにより、仮想キャラクタ行動決定部１０ｂは、ユーザが所定の広告対象商品の近くに移動した場合に当該商品をユーザに勧めるミッションを選択することができる。
　（通信部１１）
　通信部１１は、有線／無線により他の装置との間でデータの送受信を行うための通信モジュールである。通信部１１は、例えば有線ＬＡＮ（Local　Area　Network）、無線ＬＡＮ、Ｗｉ－Ｆｉ（Wireless　Fidelity、登録商標）、赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）、近距離／非接触通信等の方式で、外部機器と直接、またはネットワークアクセスポイントを介して無線通信する。
　なお、上述した制御部１０の各機能がスマートフォン又はクラウド上のサーバ等の外部装置に含まれる場合、通信部１１は、マイクロホン１２、カメラ１３、および９軸センサ１４により取得されたデータを外部装置へ送信する。また、例えばマイクロホン１２、カメラ１３、または９軸センサ１４がスマートフォンや他のウェアラブル装置に設けられる場合は、通信部１１は、スマートフォンや他のウェアラブル装置から各種センサデータ等を受信して制御部１０に出力してもよい。また、通信部１１は、制御部１０により選択される音コンテンツをクラウド上のサーバ等から受信してもよい。
　（マイクロホン１２）
　マイクロホン１２は、ユーザの音声や周囲の環境を収音し、音声データとして制御部１０に出力する。
　（カメラ１３）
　カメラ１３は、撮像レンズ、絞り、ズームレンズ、及びフォーカスレンズ等により構成されるレンズ系、レンズ系に対してフォーカス動作やズーム動作を行わせる駆動系、レンズ系で得られる撮像光を光電変換して撮像信号を生成する固体撮像素子アレイ等を有する。固体撮像素子アレイは、例えばＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）センサアレイや、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサアレイにより実現されてもよい。例えば、カメラ１３は、情報処理装置１（装着ユニット）がユーザに装着された状態で、ユーザの前方を撮像可能に設けられる。この場合、カメラ１３は、例えばユーザの動きに応じた周囲の景色の動きや、店舗内でユーザが見ている方向に陳列されている商品棚等を撮像することが可能となる。また、カメラ１３は、情報処理装置１がユーザに装着された状態で、ユーザの顔を撮像可能に設けられてもよい。この場合、情報処理装置１は、撮像画像からユーザの耳の位置や表情を特定することが可能となる。また、カメラ１３は、デジタル信号とされた撮像画像のデータを制御部１０へ出力する。
　（９軸センサ１４）
　９軸センサ１４は、３軸ジャイロセンサ（角速度（回転速度）の検出）、３軸加速度センサ（Ｇセンサとも称す。移動時の加速度の検出）、および３軸地磁気センサ（コンパス、絶対方向（方位）の検出）を含む。９軸センサ１４は、情報処理装置１を装着したユーザの状態または周囲の状態をセンシングする機能を有する。なお９軸センサ１４は、センサ部の一例であって、本実施形態はこれに限定されず、例えば速度センサまたは振動センサ等をさらに用いてもよいし、加速度センサ、ジャイロセンサ、および地磁気センサのうち少なくともいずれかを用いてもよい。また、センサ部は、情報処理装置１（装着ユニット）とは別の装置に設けられていてもよいし、複数の装置に分散して設けられていてもよい。例えば、加速度センサ、ジャイロセンサ、および地磁気センサが頭部に装着されたデバイス（例えばイヤホン）に設けられ、速度センサや振動センサがスマートフォンに設けられてもよい。９軸センサ１４は、センシング結果を示す情報を制御部１０へ出力する。
　（スピーカ１５）
　スピーカ１５は、音声出力制御部１０ｆの制御に従って、音像定位部１０ｅにより処理された音声信号を再生する。また、スピーカ１５は、任意の位置／方向の複数の音源をステレオ音声に変換して出力することも可能である。
　（位置測位部１６）
　位置測位部１６は、外部からの取得信号に基づいて情報処理装置１の現在位置を検知する機能を有する。具体的には、例えば位置測位部１６は、ＧＰＳ（Global　Positioning　System）測位部により実現され、ＧＰＳ衛星からの電波を受信して、情報処理装置１が存在している位置を検知し、検知した位置情報を制御部１０に出力する。また、情報処理装置１は、ＧＰＳの他、例えばＷｉ－Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、携帯電話・ＰＨＳ・スマートフォン等との送受信、または近距離通信等により位置を検知するものであってもよい。
　（記憶部１７）
　記憶部１７は、上述した制御部１０が各機能を実行するためのプログラムやパラメータを格納する。また、本実施形態による記憶部１７は、シナリオ（各種音コンテンツ）、仮想キャラクタの設定情報（形状、身長等）、ユーザ情報（氏名、年齢、自宅、職業、職場、体格データ、趣味・嗜好等）を格納する。なお記憶部１７に格納される情報の少なくとも一部は、クラウド上のサーバ等の別装置に格納されていてもよい。
　（ビーコン受信部１８）
　ビーコン受信部１８は、周辺に存在するビーコン端末から発信されたビーコンを受信し、制御部１０に出力する。
　以上、本実施形態による情報処理装置１の内部構成例について具体的に説明した。
　　＜＜３．動作処理＞＞
　続いて、本実施形態による情報処理装置１の動作処理について図４を参照して説明する。図４は、本実施形態による動作処理を示すフローチャートである。
　図４に示すように、まず、情報処理装置１の状態・行動検出部１０ａは、各種センサ（具体的には、例えばマイクロホン１２、カメラ１３、９軸センサ１４、または位置測位部１６）により検出された情報に基づいて、ユーザ状況を検出する（ステップＳ１０３）。
　次に、仮想キャラクタ行動決定部１０ｂは、状態・行動検出部１０ａにより検出されたユーザ状況に基づいて、イベント発生条件を満たすか否かを判断する（ステップＳ１０６）。例えば、仮想キャラクタ行動決定部１０ｂは、ユーザの位置情報と、ゲームシナリオの進捗状況に応じて、所定イベントの発生条件を満たすか否かを判断する。例えば、所定イベントとしては、例えば広告したい商品が販売されている店舗への誘導、広告したいイベントが開催されている場所への誘導、ユーザに閲覧させたい広告情報が掲示されている場所への誘導、広告したい映画が上映されている映画館への誘導、または広告したい交通手段の乗降場所への誘導が挙げられる。さらに、広告したい音楽ＣＤが置いてあるＣＤショップへの誘導（音楽の購入はダウンロードであってもよい）や、ユーザが普段と異なる経路を利用している場合にユーザに閲覧させたい広告情報が掲示されている場所への誘導等が挙げられる。
　次いで、ＰＯＩ検索部１０ｈは、ユーザの現在位置周辺に存在するＰＯＩを検索する（ステップＳ１０９）。
　次に、仮想キャラクタ行動決定部１０ｂは、ＰＯＩ検索部１０ｈによる検索結果に基づいて、ユーザ周辺に、仮想キャラクタ行動決定部１０ｂにより決定されたイベントに応じた特定の場所（ここでは、例えば店舗）があるか否かを判断する（ステップＳ１１２）。なお、仮想キャラクタ行動決定部１０ｂにより決定されたイベントに応じた特定の場所をＰＯＩ検索部１０ｈに通知し、ＰＯＩ検索部１０ｈが当該特定の場所をユーザ周辺から検索するようにしてもよい。
　次いで、特定の店舗がユーザ周辺に存在した場合（ステップＳ１１２／Ｙｅｓ）、制御部１０は、シナリオ内の所定キャラクタの音声によりユーザを当該特定の店舗へ誘導する（ステップＳ１１５）。具体的には、制御部１０は、音声出力制御部１０ｆにより、「この近くにコンビニあるから、行こうよ！」「ここを右に曲がって！」「真っ直ぐだよ」といった所定キャラクタの音声をスピーカ１５から随時出力させる。この際、スピーカ１５から出力されるキャラクタの音声は、コンビニがある方向から聞こえるよう制御される。具体的には、相対位置算出部１０ｄにより、ユーザの現在位置に対する特定店舗の方向が算出され、音像定位部１０ｅにより定位処理が行われ、音声出力制御部１０ｆにより出力制御される。相対位置算出部１０ｄは、さらにユーザの身長と仮想キャラクタの身長との差を考慮して、特定店舗が存在する方向であって、かつ身長差に応じた位置（ユーザより仮想キャラクタの身長が低ければ下の方、高ければ上の方）を算出する。
　次に、状態・行動検出部１０ａは、位置測位部１６により継続的に測位される位置情報から、ユーザが現在居る場所を判定する（ステップＳ１１８）。
　次いで、仮想キャラクタ行動決定部１０ｂは、状態・行動検出部１０ａの判定結果に基づいて、ユーザが誘導先である特定の店舗に到着したか否かを判断する（ステップＳ１２１）。到着するまで、所定キャラクタによる音声誘導がユーザの現在位置に応じて継続的に行われ得る。
　続いて、ユーザが特定の店舗に到着した場合（ステップＳ１２１／Ｙｅｓ）、制御部１０は、所定キャラクタの音声により、ユーザを店舗内へ誘導する（ステップＳ１２４）。例えば、ユーザが特定の店舗の近くに居ることが認識されると、所定キャラクタの声により「ここのコンビニだよ！入ろう！」と店内へ促す音声や、「ここで売っている○○アイスがとっても美味しいんだよ」と商品を宣伝する音声が出力される。
　次に、ユーザが店舗内へ入ると、ビーコン判定部１０ｉによりビーコン判定が行われる（ステップＳ１２７）。店舗内におけるユーザの詳細な位置情報は、ＧＰＳ等を用いた位置測位部１６では精度が劣る場合があるため、店舗内に設置されたビーコン端末から発信されるビーコン情報に基づいて、店舗内の位置情報を取得することを可能とする。なお店舗内へ入ったか否かも店舗入り口付近に設置されたビーコン端末から発信されるビーコンに基づいて判断してもよい。
　次いで、制御部１０は、ビーコン判定部１０ｉによる判定結果に基づいて、ユーザが店舗内の特定の売り場前に移動したか否かを判断する（ステップＳ１３０）。
　次に、ユーザが特定の売り場前に移動したと判断した場合（ステップＳ１３０／Ｙｅｓ）、制御部１０は、カメラ１３により撮像された撮像画像に基づいて物体認識を行い、ユーザの目の前に（ユーザの視界内に）広告対象の特定商品が存在するか否かを判断する（ステップＳ１３３、Ｓ１３６）。
　次いで、撮像画像から特定商品が認識できた場合（ステップＳ１３６／Ｙｅｓ）、制御部１０は、所定キャラクタの音声によりユーザに購入を促す（ステップＳ１３９）。例えば、制御部１０は、所定キャラクタの音声で「これこれ！このアイスがおいしいんだよ！」と出力させる。
　次に、制御部１０は、ユーザが特定商品を購入したか否かの判定を行う（ステップＳ１４２）。具体的には、例えば制御部１０は、ユーザがスマートフォン等を用いた電子マネー決済により特定商品を購入したという情報をスマートフォン等からリアルタイムで受信し、特定商品の購入判定を行う。
　次いで、ユーザが特定の商品を購入した場合（ステップＳ１４５／Ｙｅｓ）、制御部１０は、所定キャラクタの音声によりユーザに感謝等を通知する（ステップＳ１４８）。例えば、「ありがとう！」「早く食べよう！」「美味しい？」といった音声を出力させる。
　そして、制御部１０は、特定商品を購入するというミッションをクリアしたことで、ゲームシナリオを更新し、また、その報酬としてゲーム内のポイント加算、アイテム付与、ゲームを有利に進めることが可能な情報提示等を行う（ステップＳ１５１）。
　以上説明した動作処理は、広告したい特定商品の店舗での購入といったイベントが実行されるが、本実施形態はこれに限定されず、例えば以下のようなイベントの実行が考えられる。
　例えば制御部１０は、広告したい映画が上映されている映画館に誘導し、スマートフォンを用いた割引クーポンの取得を促し、ユーザが割引クーポンを取得すると、所定キャラクタの音声により「このクーポンでこの映画が安く観られるよ！」と出力させる。
　また、制御部１０は、ユーザに閲覧させたい広告（ポスターや看板）の付近にユーザが近付いた場合、所定キャラクタの音声により「右のビルの上にあるポスターを見てみて！」と出力させる。
　また、制御部１０は、広告したい交通手段を利用しているか否かを、位置情報および加速度センサデータ等に基づいて判定し、所定キャラクタの音声により「○○鉄道に乗せてくれてありがとう！」と出力させる。
　また、制御部１０は、広告したいイベントがある場合に、所定キャラクタの音声でゲーム内のイベントとして「○○公園に今週土曜日の18時に来てね」と出力させる。
　また、制御部１０は、ユーザが遊園地に居る場合に、周辺の環境情報に基づいて、所定キャラクタの音声で「今は○○アトラクションが空いてるよ！」と出力させる。
　また、制御部１０は、広告したい映画がある場合に、所定キャラクタの音声でゲーム内のイベントとして「○○っていう映画が面白いみたい！割引券があるから、見に行こう！」出力する。割引券は、例えば映画館で所定の端末にスマートフォンをタッチさせることで取得可能としてもよい。
　また、制御部１０は、広告したいセールがあって、現在雨が降っている場合、所定キャラクタの音声で「○○ショッピングセンターで雨宿りしようよ」と誘導し、ユーザが所定のショッピングセンターに入ると「○○でセールやってるんだって！」と広告する。
　また、制御部１０は、広告したい情報がユーザの近くにある場合、所定キャラクタの音声で「目の前のビルに、今度発売される私たちの○○っていうＣＤのポスターがあるんだよ」と出力させたり、対象のポスターを見ている際に「ポスター見てくれた？私たちがＣＭしてる○○っていうお菓子だよ」と出力させる。
　また、制御部１０は、広告したい交通手段や場所がある場合、所定キャラクタの音声でゲーム内のイベントとして「○○渓谷のトロッコ列車に乗りたい！」と出力させ、ユーザが○○渓谷のトロッコ列車に乗ると「いい景色だね！連れてきてくれてありがとう！」と出力させる。
　また、制御部１０は、広告したい観光地イベントがある場合、所定キャラクタの音声で「今日は私がこの町を案内するね」と出力し、様々な見所や土産店に誘導する。
　また、制御部１０は、広告したい書籍がある場合、所定キャラクタの音声でゲーム内のイベントとして「本屋に行きたい」と出力させ、ユーザが対処の書店に行くと「星座の本が欲しいな」と出力させる。
　また、制御部１０は、広告したい商品がユーザが普段通らない経路にある場合、所定キャラクタの音声で「今日はちょっと寄り道して帰らない？」と出力させ、ユーザがいつもは通らない所定の商店街を通ると、「ここのケーキ、すっごくおいしいんだって！」と出力させる。
　また、制御部１０は、広告したい音楽がある場合、所定キャラクタの音声で「○○っていうアーティストの△△っていう曲が好きなの。いっしょに聴かない？」と促し、ユーザが音楽配信サービスで対象の音楽を購入すると「ありがとう！じゃ、一緒に聴こう！」と出力させる。
　また、制御部１０は、広告したいプリクラ機がある場合、所定キャラクタの音声で「一緒にプリクラを撮ろう」と促し、特定の機種のプリクラ機のある店まで誘導する。当該特定の機種のプリクラ機は、ユーザが装着する情報処理装置１と通信し、所定キャラクタも一緒に写るプリクラを撮影することが可能である。これによりいつもは音声だけの仮想キャラクタの姿を見ることができる。
　また、制御部１０は、広告対象商品をユーザが購入した場合、所定キャラクタの音声で「あ、買ってくれたんだ！ありがとう」と出力し、キャラクタとの仲の良さを示すポイントを加算する。
　　＜＜４．まとめ＞＞
　上述したように、本開示の実施形態による情報処理システムでは、所定の場所への誘導に従うモチベーションをユーザに励起させることを可能とする。
　また、音声により仮想キャラクタの存在をユーザに感じさせ、ユーザは仮想キャラクタの音声に対して頷いたり振り向いたり、移動したり、商品を買ったりといった行動で応じることができるので、不自然な行動を取ることなく、現実空間と連動するゲームを楽しむことができる。
　以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
　例えば、上述した情報処理装置１に内蔵されるＣＰＵ、ＲＯＭ、およびＲＡＭ等のハードウェアに、情報処理装置１の機能を発揮させるためのコンピュータプログラムも作成可能である。また、当該コンピュータプログラムを記憶させたコンピュータ読み取り可能な記憶媒体も提供される。
　また、本実施形態による情報処理装置１は、スピーカ１５が設けられたヘッドホン（またはイヤホン、アイウェア等）と、主に制御部１０の機能を有するモバイル端末（スマートフォン等）を含む情報処理システムにより実現されていてもよい。この際、モバイル端末は、音像定位処理した音声信号をヘッドホンに送信して再生させる。また、スピーカ１５は、ユーザに装着される装置に搭載される場合に限定されず、例えばユーザの周囲に設置された環境スピーカにより実現されてもよく、この場合環境スピーカは、ユーザの周囲の任意の位置に音像定位することが可能である。
　また、上述した実施形態では、音声のみでの仮想キャラクタの存在感を提示しているが、本実施形態はこれに限定されず、例えば情報処理装置１がアイウェア型の場合、本実施形態による音像定位と、仮想キャラクタ映像の現実空間への重畳表示を組み合わせて、さらに仮想キャラクタにリアリティを持たせることも可能である。
　また、ゲームシナリオは予め設定されたものに限定されず、適宜ユーザがタスク登録できるようにしてもよい。例えば、所定の曜日の所定時間にゴミ捨てを行うというタスクを登録し、当該タスクを実行した際にゴミ捨て場で所定のキャラクタと会えるようにしてもよい。
　また、上述した実施形態では、POI検索や案内音声データの生成を情報処理装置１で行っているが、本実施形態はこれに限定されず、情報処理装置１が通信部１１を介してデータの送受信が可能なサーバ側で、ユーザ周辺情報の検索（具体的にはPOI検索）や、検索した特定場所への案内音声データの生成を行うようにしてもよい。
　また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
　なお、本技術は以下のような構成も取ることができる。
（１）
　ユーザの位置情報に基づいて、ユーザ状況およびシナリオ進捗状況に応じて特定される所定のポイントをユーザの周辺から検索する検索部と、
　前記シナリオ進捗状況に対応するキャラクタによる音声で、前記検索した所定のポイントへ誘導するよう制御する出力制御部と、
を備える、情報処理装置。
（２）
　前記検索部は、広告対象に応じた場所を検索する、前記（１）に記載の情報処理装置。
（３）
　前記所定のポイントは、さらにユーザ周辺環境に応じて特定される、前記（１）または（２）に記載の情報処理装置。
（４）
　前記情報処理装置は、
　音像定位により現実空間に存在するよう知覚させる仮想物体である前記キャラクタに関する情報と、前記ユーザの状態に関する情報とに基づいて、前記ユーザに対する前記キャラクタの音源の相対的な定位位置を算出する算出部と、
　前記算出された定位位置に音像を定位させるよう前記音源の音声信号処理を行う音像定位部と、
をさらに備える、前記（２）または（３）に記載の情報処理装置。
（５）
　前記音像定位部は、前記キャラクタによる音声が、前記検索した所定のポイントが存在する方向から聞こえるよう処理する、前記（４）に記載の情報処理装置。
（６）
　前記情報処理装置は、
　前記ユーザの行動または時間経過に応じてシナリオを更新する更新部をさらに備える、前記（２）～（５）のいずれか１項に記載の情報処理装置。
（７）
　前記情報処理装置は、ビーコン端末から発信されたビーコンを受信するビーコン受信部と、
　前記ビーコン受信部により受信した前記ビーコンに基づいて前記広告対象の付近にユーザが移動したか否かを判定する判定部と、
をさらに備える、前記（２）～（６）のいずれか１項に記載の情報処理装置。
（８）
　前記情報処理装置は、ユーザの目線方向を撮像した撮像画像に基づいて、前記広告対象がユーザの視界内にあるか否かを判定する、前記（２）～（７）のいずれか１項に記載の情報処理装置。
（９）
　前記音像の相対的な定位位置は、高さを含む３次元位置である、前記（４）に記載の情報処理装置。
（１０）
　プロセッサが、
　ユーザの位置情報に基づいて、ユーザ状況およびシナリオ進捗状況に応じて特定される所定のポイントをユーザの周辺から検索することと、
　前記シナリオ進捗状況に対応するキャラクタによる音声で、前記検索した所定のポイントへ誘導するよう制御することと、
を含む、情報処理方法。
（１１）
　コンピュータを、
　ユーザの位置情報に基づいて、ユーザ状況およびシナリオ進捗状況に応じて特定される所定のポイントをユーザの周辺から検索する検索部と、
　前記シナリオ進捗状況に対応するキャラクタによる音声で、前記検索した所定のポイントへ誘導するよう制御する出力制御部と、
として機能させる、プログラム。
　１　　情報処理装置
　１０　　制御部
　１０ａ　　状態・行動検出部
　１０ｂ　　仮想キャラクタ行動決定部
　１０ｃ　　シナリオ更新部
　１０ｄ　　相対位置算出部
　１０ｅ　　音像定位部
　１０ｆ　　音声出力制御部
　１０ｇ　　再生履歴・フィードバック記憶制御部
　１０ｈ　　ＰＯＩ検索部
　１０ｉ　　ビーコン判定部
　１１　　通信部
　１２　　マイクロホン
　１３　　カメラ
　１４　　９軸センサ
　１５　　スピーカ
　１６　　位置測位部
　１７　　記憶部
　１８　　ビーコン受信部

Claims (11)

  1. 　ユーザの位置情報に基づいて、ユーザ状況およびシナリオ進捗状況に応じて特定される所定のポイントをユーザの周辺から検索する検索部と、
    　前記シナリオ進捗状況に対応するキャラクタによる音声で、前記検索した所定のポイントへ誘導するよう制御する出力制御部と、
    を備える、情報処理装置。
  2. 　前記検索部は、広告対象に応じた場所を検索する、請求項１に記載の情報処理装置。
  3. 　前記所定のポイントは、さらにユーザ周辺環境に応じて特定される、請求項１に記載の情報処理装置。
  4. 　前記情報処理装置は、
    　音像定位により現実空間に存在するよう知覚させる仮想物体である前記キャラクタに関する情報と、前記ユーザの状態に関する情報とに基づいて、前記ユーザに対する前記キャラクタの音源の相対的な定位位置を算出する算出部と、
    　前記算出された定位位置に音像を定位させるよう前記音源の音声信号処理を行う音像定位部と、
    をさらに備える、請求項２に記載の情報処理装置。
  5. 　前記音像定位部は、前記キャラクタによる音声が、前記検索した所定のポイントが存在する方向から聞こえるよう処理する、請求項４に記載の情報処理装置。
  6. 　前記情報処理装置は、
    　前記ユーザの行動または時間経過に応じてシナリオを更新する更新部をさらに備える、請求項２に記載の情報処理装置。
  7. 　前記情報処理装置は、ビーコン端末から発信されたビーコンを受信するビーコン受信部と、
    　前記ビーコン受信部により受信した前記ビーコンに基づいて前記広告対象の付近にユーザが移動したか否かを判定する判定部と、
    をさらに備える、請求項２に記載の情報処理装置。
  8. 　前記情報処理装置は、ユーザの目線方向を撮像した撮像画像に基づいて、前記広告対象がユーザの視界内にあるか否かを判定する、請求項２に記載の情報処理装置。
  9. 　前記音像の相対的な定位位置は、高さを含む３次元位置である、請求項４に記載の情報処理装置。
  10. 　プロセッサが、
    　ユーザの位置情報に基づいて、ユーザ状況およびシナリオ進捗状況に応じて特定される所定のポイントをユーザの周辺から検索することと、
    　前記シナリオ進捗状況に対応するキャラクタによる音声で、前記検索した所定のポイントへ誘導するよう制御することと、
    を含む、情報処理方法。
  11. 　コンピュータを、
    　ユーザの位置情報に基づいて、ユーザ状況およびシナリオ進捗状況に応じて特定される所定のポイントをユーザの周辺から検索する検索部と、
    　前記シナリオ進捗状況に対応するキャラクタによる音声で、前記検索した所定のポイントへ誘導するよう制御する出力制御部と、
    として機能させる、プログラム。
PCT/JP2016/075825 2015-12-01 2016-09-02 情報処理装置、情報処理方法、およびプログラム WO2017094306A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US15/777,546 US11017431B2 (en) 2015-12-01 2016-09-02 Information processing apparatus and information processing method
CN201680068969.XA CN108293171B (zh) 2015-12-01 2016-09-02 信息处理设备、信息处理方法以及存储介质

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015234976A JP2017103598A (ja) 2015-12-01 2015-12-01 情報処理装置、情報処理方法、およびプログラム
JP2015-234976 2015-12-01

Publications (1)

Publication Number Publication Date
WO2017094306A1 true WO2017094306A1 (ja) 2017-06-08

Family

ID=58796920

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/075825 WO2017094306A1 (ja) 2015-12-01 2016-09-02 情報処理装置、情報処理方法、およびプログラム

Country Status (4)

Country Link
US (1) US11017431B2 (ja)
JP (1) JP2017103598A (ja)
CN (1) CN108293171B (ja)
WO (1) WO2017094306A1 (ja)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10973440B1 (en) * 2014-10-26 2021-04-13 David Martin Mobile control using gait velocity
US11120465B1 (en) 2017-01-20 2021-09-14 Walgreen Co. Omni-channel digital coupon clipping and redemption
JP6341526B1 (ja) * 2018-01-16 2018-06-13 新生環境株式会社 自己行動記録カメラ
JP2019169052A (ja) * 2018-03-26 2019-10-03 株式会社タイトー キャラクタ演出システム、キャラクタ演出プログラム
JP6756777B2 (ja) 2018-05-30 2020-09-16 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置および音発生方法
JP7207694B2 (ja) * 2018-08-31 2023-01-18 株式会社オトングラス 音声出力装置
JP2020085783A (ja) * 2018-11-29 2020-06-04 一般財団法人生産技術研究奨励会 歩行者用測位装置、歩行者用測位システム及び歩行者用測位方法
JP7419666B2 (ja) * 2019-04-03 2024-01-23 ヤマハ株式会社 音信号処理装置および音信号処理方法
JP2021022757A (ja) * 2019-07-24 2021-02-18 株式会社Ｊｖｃケンウッド ネックバンド型スピーカ
WO2021125081A1 (ja) * 2019-12-19 2021-06-24 日本電気株式会社 情報処理装置、制御方法及び非一時的なコンピュータ可読媒体
USD933633S1 (en) * 2019-12-20 2021-10-19 Yamaha Corporation Earphone
JP2021131423A (ja) 2020-02-18 2021-09-09 ヤマハ株式会社 音声再生装置、音声再生方法および音声再生プログラム
JP7472582B2 (ja) 2020-03-25 2024-04-23 ヤマハ株式会社 音声再生システムおよび頭部伝達関数選択方法
US11323664B1 (en) * 2021-01-08 2022-05-03 I Can See You Inc., The New Technology Wearable electronic device for providing audio output and capturing visual media
JP2023148359A (ja) 2022-03-30 2023-10-13 株式会社ジェイテクト 情報提供システム、情報提供方法、および、情報提供プログラム
CN115086861B (zh) * 2022-07-20 2023-07-28 歌尔股份有限公司 音频处理方法、装置、设备及计算机可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000193473A (ja) * 1998-12-25 2000-07-14 Aisin Aw Co Ltd ナビゲ―ション装置及び記憶媒体
JP2003134510A (ja) * 2001-08-16 2003-05-09 Space Tag Inc 画像情報配信システム
WO2006075606A1 (ja) * 2005-01-13 2006-07-20 Pioneer Corporation 音案内装置、音案内方法および音案内プログラム
US20080280730A1 (en) * 2007-05-10 2008-11-13 Ulf Petter Alexanderson Personal training device using multi-dimensional spatial audio
JP2012063253A (ja) * 2010-09-16 2012-03-29 Olympus Corp 画像生成システム、プログラム及び情報記憶媒体
JP2012079036A (ja) * 2010-09-30 2012-04-19 Dainippon Printing Co Ltd サーバ装置及びコンテンツ情報提供プログラム

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002216026A (ja) * 2000-11-17 2002-08-02 Sony Corp 情報通信システム、エージェント端末、情報配信システム、エージェントプログラムが記憶された記憶媒体、エージェントアクセスプログラムが記憶された記憶媒体、専用処理プログラムが記憶された記憶媒体、エージェントプログラム、エージェントアクセスプログラム、及び、専用処理プログラム
JP2003204481A (ja) 2001-08-16 2003-07-18 Space Tag Inc 画像情報配信システム
JP2005055666A (ja) * 2003-08-04 2005-03-03 Sony Corp 音声処理装置
JP2006010509A (ja) 2004-06-25 2006-01-12 Mitsubishi Electric Corp ナビゲーションシステム
TW200827199A (en) 2006-12-22 2008-07-01 Leadtek Research Inc Electronic device for vehicle and method for operating the same
JP4315211B2 (ja) 2007-05-01 2009-08-19 ソニー株式会社 携帯情報端末及び制御方法、並びにプログラム
US8416247B2 (en) * 2007-10-09 2013-04-09 Sony Computer Entertaiment America Inc. Increasing the number of advertising impressions in an interactive environment
US9202171B2 (en) * 2008-11-11 2015-12-01 Digideal Corporation Virtual game assistant based on artificial intelligence
US8418085B2 (en) * 2009-05-29 2013-04-09 Microsoft Corporation Gesture coach
US9183588B2 (en) * 2011-01-20 2015-11-10 Ebay, Inc. Three dimensional proximity recommendation system
US9063703B2 (en) 2011-12-16 2015-06-23 Microsoft Technology Licensing, Llc Techniques for dynamic voice menus
CN103674035A (zh) 2012-09-25 2014-03-26 环达电脑(上海)有限公司 检索任意区域内兴趣点的导航装置及其控制方法
US9304736B1 (en) * 2013-04-18 2016-04-05 Amazon Technologies, Inc. Voice controlled assistant with non-verbal code entry
EP3036930B1 (en) * 2013-08-19 2019-12-18 Estimote Polska Sp. Zo. o. Method for distributing notifications
CN103686613A (zh) 2013-12-31 2014-03-26 何海英 一种基于无线信标的智能信息推送系统和方法
CN103886484A (zh) * 2014-03-14 2014-06-25 河海大学常州校区 一种用于大型商业街区的导购系统
US10140667B2 (en) * 2014-05-16 2018-11-27 International Business Machines Corporation Social customer relationship management opportunity templating
US20160300392A1 (en) * 2015-04-10 2016-10-13 VR Global, Inc. Systems, media, and methods for providing improved virtual reality tours and associated analytics
US20170109796A1 (en) * 2015-10-14 2017-04-20 Facebook, Inc. Presenting content selected by an online system via content presented by an application along with additional content presented by the application
US10334283B2 (en) * 2017-02-09 2019-06-25 Nanning Fugui Precision Industrial Co., Ltd. Interactive system for virtual cinema and method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000193473A (ja) * 1998-12-25 2000-07-14 Aisin Aw Co Ltd ナビゲ―ション装置及び記憶媒体
JP2003134510A (ja) * 2001-08-16 2003-05-09 Space Tag Inc 画像情報配信システム
WO2006075606A1 (ja) * 2005-01-13 2006-07-20 Pioneer Corporation 音案内装置、音案内方法および音案内プログラム
US20080280730A1 (en) * 2007-05-10 2008-11-13 Ulf Petter Alexanderson Personal training device using multi-dimensional spatial audio
JP2012063253A (ja) * 2010-09-16 2012-03-29 Olympus Corp 画像生成システム、プログラム及び情報記憶媒体
JP2012079036A (ja) * 2010-09-30 2012-04-19 Dainippon Printing Co Ltd サーバ装置及びコンテンツ情報提供プログラム

Also Published As

Publication number Publication date
CN108293171B (zh) 2020-12-04
CN108293171A (zh) 2018-07-17
US11017431B2 (en) 2021-05-25
US20180341982A1 (en) 2018-11-29
JP2017103598A (ja) 2017-06-08

Similar Documents

Publication Publication Date Title
WO2017094306A1 (ja) 情報処理装置、情報処理方法、およびプログラム
US11128972B2 (en) Information processing device, information processing method, and program
US10360907B2 (en) Smart necklace with stereo vision and onboard processing
US9915545B2 (en) Smart necklace with stereo vision and onboard processing
US11343613B2 (en) Prioritizing delivery of location-based personal audio
US11638869B2 (en) Information processing device and information processing method
WO2019173573A1 (en) User-interfaces for audio-augmented-reality
JP6263098B2 (ja) 仮想音源を提供情報位置に配置する携帯端末、音声提示プログラム及び音声提示方法
CN110999327B (zh) 信息处理装置、信息处理方法以及程序
WO2019054086A1 (ja) 情報処理装置、情報処理方法、およびプログラム
US20240013256A1 (en) Information providing apparatus, information providing system, information providing method, and non-transitory computer readable medium
JP2022110509A (ja) 情報処理装置及びプログラム
JP2012064138A (ja) 情報提供システム
JP6559096B2 (ja) 情報出力システム及び情報出力方法
JP2019075805A (ja) 移動手段においてコンテンツを提供するためにコンピュータで実行される方法、当該方法をコンピュータに実行させるプログラム、コンテンツ提供装置、およびコンテンツ提供システム
JP6199355B2 (ja) コンテンツ配信サーバ及びコンテンツ配信方法並びにコンテンツ再生システム
EP4080328A1 (en) Method involving digital avatar
US20240029109A1 (en) Information providing apparatus, information providing system, information providing method, and non-transitory computer readable medium

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16870246

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15777546

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16870246

Country of ref document: EP

Kind code of ref document: A1