WO2018088450A1 - 音声提供装置、音声再生装置、音声提供方法及び音声再生方法 - Google Patents

音声提供装置、音声再生装置、音声提供方法及び音声再生方法 Download PDF

Info

Publication number
WO2018088450A1
WO2018088450A1 PCT/JP2017/040336 JP2017040336W WO2018088450A1 WO 2018088450 A1 WO2018088450 A1 WO 2018088450A1 JP 2017040336 W JP2017040336 W JP 2017040336W WO 2018088450 A1 WO2018088450 A1 WO 2018088450A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
voice
providing
area
facing
Prior art date
Application number
PCT/JP2017/040336
Other languages
English (en)
French (fr)
Inventor
旬 臼井
多田　幸生
貴裕 浅野
徹 上和田
弘樹 内田
幸実 横山
Original Assignee
ヤマハ株式会社
富士通株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ヤマハ株式会社, 富士通株式会社 filed Critical ヤマハ株式会社
Priority to JP2018550237A priority Critical patent/JP6795611B2/ja
Publication of WO2018088450A1 publication Critical patent/WO2018088450A1/ja
Priority to US16/398,443 priority patent/US11134356B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F25/00—Audible advertising
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K15/00—Acoustics not otherwise provided for
    • G10K15/02—Synthesis of acoustic waves
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/487—Arrangements for providing information services, e.g. recorded voice services or time announcements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/323—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only for loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00—Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/003—Digital PA systems using, e.g. LAN or internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00—Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/005—Audio distribution systems for home, i.e. multi-room use
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems

Definitions

  • the present invention relates to a technique for providing voice to a user.
  • Patent Document 1 discloses that, when an advertisement for a facility or a store is distributed to a mobile terminal, information to be distributed is switched according to the distance between the facility or store and the mobile terminal.
  • an object of the present invention is to realize a mechanism for providing information in which a user's position and direction are associated with voice.
  • the present invention provides an acquisition unit that acquires a user position and a direction in which the user is facing, and an area that exists in the direction in which the user is facing with respect to the user position. Providing means for providing the user with the voice provided to the user.
  • the present invention acquires detection means for detecting a position of a user and a direction in which the user is facing, and audio data corresponding to an area existing in the direction in which the user is facing with respect to the position of the user.
  • an audio reproducing apparatus including an obtaining unit for performing reproduction and a reproducing unit for reproducing the audio data.
  • the present invention provides the user with a step of obtaining the user's position and the direction in which the user is facing, and voice corresponding to an area existing in the direction in which the user is facing with respect to the user's position. And providing a voice providing method.
  • the present invention also includes a step of detecting a position of the user and a direction in which the user is facing, and a step of acquiring audio data corresponding to an area existing in the direction detected with reference to the detected user position. And a method for reproducing the acquired audio data.
  • FIG. 1 is a diagram showing an overall configuration of a voice providing system according to an embodiment of the present invention.
  • FIG. 2 is a block diagram illustrating a hardware configuration of the user terminal in the voice providing system.
  • FIG. 3 is a block diagram illustrating a hardware configuration of the server device in the voice providing system.
  • FIG. 4 is a diagram illustrating an example of a user management table stored in the server apparatus.
  • FIG. 5 is a diagram illustrating an example of an area management table stored in the server apparatus.
  • FIG. 6 is a block diagram showing a functional configuration of each device in the voice providing system.
  • FIG. 7 is a sequence diagram illustrating an example of the operation of the voice providing system.
  • FIG. 8 is a schematic diagram showing the relationship between the position and direction of the user and the area associated with the voice.
  • FIG. 1 is a diagram showing an overall configuration of a voice providing system according to an embodiment of the present invention.
  • this audio providing system for example, areas such as commercial stores, amusement facilities, amusement facilities, public facilities or event venues, or areas with natural environments such as the sea, rivers, and mountains are determined in advance.
  • Each of the plurality of areas is associated with a characteristic voice.
  • the sound characteristic of the area is the background music or commercial song of the commercial store, and in the case of a movie theater, it is the sound of the movie being screened or the explanation narration of the movie.
  • the sound providing system the sound corresponding to the area existing in the direction in which the user's face is facing (that is, the user's line-of-sight direction) with respect to the position of the user is provided to the user.
  • the user can grasp what kind of area is present in the direction in which he / she is facing from the image (impression) of the voice.
  • the voice providing system includes a server device 100 that provides voice to the user, and a user terminal 200 used by the user.
  • the server device 100 and the user terminal 200 are connected via a network 900 so that they can communicate with each other.
  • the network 900 is not limited to a single communication network, and may be a network in which a plurality of communication networks having different communication methods are interconnected.
  • the network 900 is a wired or wireless communication network such as the Internet or a mobile communication network.
  • FIG. 1 shows one server device 100 and one user terminal 200, there may be a plurality of them.
  • FIG. 2 is a block diagram showing a hardware configuration of the user terminal 200.
  • the user terminal 200 is a communicable computer such as a smart phone, a tablet, or various wearable terminals.
  • the user terminal 200 includes, for example, a control unit 21 including an arithmetic processing device such as a CPU (Central Processing Unit) and a storage device such as a ROM (Read Only Memory) and a RAM (Random Access Memory), and an antenna or a communication circuit, for example.
  • a control unit 21 including an arithmetic processing device such as a CPU (Central Processing Unit) and a storage device such as a ROM (Read Only Memory) and a RAM (Random Access Memory), and an antenna or a communication circuit, for example.
  • a communication unit 22 that performs communication via a network 900
  • a storage unit 23 such as an EEPROM (Electronically-Erasable-and-Programmable-ROM), a flash memory, and a terminal or an amplifier for a speaker
  • a playback unit 24 that performs audio output, and a direction detection unit that includes a direction sensor, a gyro sensor, and the like, for example, and detects a direction in which the user terminal 200 faces (here, the direction of the user terminal 200 is regarded as the direction in which the user is facing).
  • a positioning unit 26 that performs positioning by GPS (Global Positioning System), Operators such Ebaki or touch sensor and a UI (User Interface) unit 27 including a display unit of the operation unit and for example, a liquid crystal panel and a liquid crystal drive circuit is provided.
  • FIG. 3 is a block diagram showing a hardware configuration of the server apparatus 100.
  • the server device 100 is a computer such as a server machine, and includes a control unit 11, a communication unit 12, and a storage unit 13.
  • the control unit 11 includes an arithmetic device such as a CPU and a storage device such as a ROM and a RAM.
  • the CPU controls the operation of each unit of the server apparatus 100 by executing a program stored in the ROM or the storage unit 13 using the RAM as a work area.
  • the communication unit 12 is connected to the network 900 and performs communication via the network 900.
  • the storage unit 13 is a storage device such as a hard disk, for example, and stores a data group and a program group used by the control unit 11.
  • the storage unit 13 describes a voice database including voice data indicating various voices (hereinafter referred to as a database), a user management table in which information about users is described, and information about areas.
  • the area management table is stored.
  • a user ID which is identification information for identifying each user
  • an attribute group of the user for example, the gender, age, interest, etc. of the user
  • the attribute group of the user is registered or declared in advance by the user.
  • an area ID which is identification information for identifying each area, position information indicating the position of the area, attributes of the area, and audio data corresponding to the area are stored.
  • a voice ID that is identification information to be identified is associated. Since each area has a certain extent, the position of the area indicates the range of the entire area.
  • the attribute of the area is information that characterizes the area, and is used for matching the voice corresponding to the area and the user.
  • the voice ID is, for example, a file name of each voice data included in the voice database.
  • FIG. 6 is a diagram illustrating a functional configuration of the user terminal 200 and the server device 100.
  • the detection unit 201 of the user terminal 200 detects the position of the user and the direction in which the user is facing.
  • the notification unit 202 of the user terminal 200 notifies the server device 100 of the position of the user detected by the detection unit 201 and the direction in which the user is facing.
  • the acquisition unit 101 of the server device 100 acquires the position of the user and the direction in which the user is facing, notified from the notification unit 202 of the user terminal 200.
  • the storage unit 102 of the server device 100 stores voice data indicating voice and an area in association with each other.
  • the providing unit 103 of the server device 100 provides the user with audio data corresponding to the area existing in the direction acquired by the acquiring unit 101 with reference to the position of the user acquired by the acquiring unit 101. More specifically, the providing unit 103 extracts an area that exists in a direction in which the user is facing from the plurality of areas with reference to the user's position, and the audio data associated with the area is extracted from the storage unit 102. It is read out and provided to the user terminal 200.
  • the providing unit 103 acquires user attributes, and provides the user terminal 200 with audio data corresponding to the acquired attributes among the audio data corresponding to the extracted area group. At this time, the providing unit 103 provides the user terminal 200 with sound data whose volume is controlled according to the distance between the user's position and the area.
  • the reproduction unit 203 of the user terminal 200 reproduces audio data provided from the server device 100 and outputs audio. The user listens to sound reproduced from the user terminal 200.
  • the detection unit 201 of the user terminal 200 described above is realized by the direction detection unit 25 and the positioning unit 26 shown in FIG. 2, the notification unit 202 is realized by the communication unit 22 shown in FIG. 2, and the playback unit 203 is shown in FIG. This is realized by the reproducing unit 24 shown.
  • the acquisition unit 101 of the server device 100 is realized by the communication unit 12 shown in FIG. 3, the storage unit 102 is realized by the storage unit 13 shown in FIG. 3, and the providing unit 103 is connected to the control unit 11 and the communication shown in FIG. This is realized by the unit 12.
  • the user directs the user terminal 200 toward a certain direction, and performs an operation for instructing acquisition of sound in an area in that direction.
  • the certain direction may be a direction where there is an area such as a commercial store directly visible to the user, or the user is conscious of the direction in a state where the specific area is not directly visible to the user.
  • the direction in which the user terminal 200 is directed may be used.
  • the detection unit 201 of the user terminal 200 detects the position of the user and the direction in which the user is facing (step S12).
  • the position of the user here is the position of the user terminal 200
  • the direction in which the user is facing is the direction in which the user terminal 200 is facing.
  • the notification part 202 notifies the server apparatus 100 of a user's position and the direction which the said user faces with a user ID (step S13).
  • This user ID may be stored in advance in the storage unit 23 or may be input to the user terminal 200 when the user logs in to the voice providing service.
  • the acquisition unit 101 of the server apparatus 100 acquires the user position, the direction in which the user is facing, and the user ID notified from the notification unit 202 of the user terminal 200.
  • the providing unit 103 refers to the position of each area in the area management table, and extracts an area that exists in the direction acquired with reference to the acquired user position as a candidate area group (step S14). Specifically, as illustrated in FIG. 8, when the user is facing the direction D at the position P, a range of a predetermined angle centering on the half line indicating the direction D (in the figure, the half line D 1 and the half line). An area that overlaps at least partly with a range sandwiched between the straight lines D2, that is, areas AR010, AR014, and AR016 are extracted here.
  • the providing unit 103 selects a voice corresponding to one of the extracted candidate area groups based on the area attribute and the user attribute (step S15). Specifically, first, the providing unit 103 reads an attribute associated with each area ID of the extracted candidate area group with reference to the area management table. Next, the providing unit 103 reads the user attribute group associated with the user ID acquired in step S13 with reference to the area management table. Then, the providing unit 103 compares each attribute of the candidate area group with the user attribute to calculate the degree of relevance, and identifies an area having the attribute of the user and the attribute with the highest degree of relevance. For example, in the example of FIGS.
  • the providing unit 103 refers to the area management table and selects the sound data of the sound ID corresponding to the area ID of the identified area.
  • the providing unit 103 calculates the distance between the position of the area and the position of the user, and sets the sound data to a volume corresponding to the distance (step S16). For example, regarding the volume parameter included in the audio data, the providing unit 103 decreases the volume when the distance between the area position and the user position is large, and decreases the volume when the distance between the area position and the user position is small. Set to increase.
  • the providing unit 103 reads the audio data in which the volume parameter is set from the storage unit 102 and transmits the audio data to the user terminal 200 via the network 900 (step S17).
  • the reproducing unit 203 of the user terminal 200 acquires the audio data transmitted from the providing unit 103, and performs audio reproduction according to the volume parameter set in the audio data (step S18). Thereby, the user can know what is in the direction in which he / she is facing from the sound image, and can know the distance to the area sensuously by the volume level.
  • the position and direction of the user are associated with the voice.
  • the user can grasp the image of the area by listening to the sound characteristic of the area that exists in the direction that the user is facing.
  • the side that prepares the voice of the area (for example, an operator of a commercial store) can expect the effect of attracting customers by calling the user into the commercial store or the like by the voice provided to the user.
  • [Modification] The embodiment described above can be modified as follows. The following modifications may be implemented in combination with each other.
  • [Modification 1] sound is provided to the user by transmitting the sound data to the user terminal 200 used by each user.
  • sound emitting means such as a speaker installed in or near each area is provided.
  • Voice may be provided to the user.
  • the voice providing system is detected with reference to the acquisition unit that acquires the user position and the direction in which the user is facing, and the acquired user position.
  • a function called a providing unit that provides the user with sound corresponding to an area in a certain direction is implemented.
  • the acquisition unit is realized by, for example, an imaging device and an image processing device.
  • the image processing device analyzes the user's image captured by the imaging device, estimates the user's position from the positional relationship between the image processing device itself and the user, and further estimates the orientation of the user's face by image recognition. Then, it is determined whether or not the user is facing the corresponding area.
  • the providing unit is realized by sound emitting means such as a speaker installed in or near the corresponding area, and emits sound when it is determined that the user is facing the corresponding area. In this case, it is desirable to use only a directional speaker or the like as the sound emitting means for realizing the providing unit, so that the sound is mainly provided only to the target user.
  • the voice providing device when a voice providing device is installed at a commercial storefront of a store and a user outside the store sees the direction in which the commercial store exists, the voice providing device emits a sound related to the commercial store to the user. It becomes possible to do.
  • the user can grasp the characteristic of the commercial store by listening to the characteristic voice regarding the commercial store that exists in the direction that the user is facing, and the operator of the commercial store can expect the effect of attracting customers.
  • the sound provided to the user is not limited to the sound stored in the storage unit 102 in advance, and may be a sound emitted or collected in each area.
  • a commercial store it may be background music sounded at the commercial store, or in the case of a movie theater, the sound of a movie that is actually being shown may be sounded. If so, it may be a cheer of a user who has collected sound in real time or an announcement in the park, and if it is a river, it may be a murmur sound collected in real time.
  • the providing unit 103 selects the voice corresponding to any one of the extracted candidate area groups based on the attribute of the area and the attribute of the user. Not limited to.
  • the providing unit 103 acquires the range of the position specified by the user, and is in the acquired position range of the voice group corresponding to the area existing in the direction in which the user is facing based on the user's position. You may select the audio
  • the user designates the distance between the position of the user and the area in advance in a predetermined range, for example, 0 m to 200 m in step S11 in FIG.
  • step S ⁇ b> 15 the providing unit 103 identifies an area that falls within the above range from the extracted candidate area group, and selects voice data having a voice ID corresponding to the area ID of the area.
  • the content specified by the user is not limited to the range of the distance between the position of the user and the position of the area as described above.
  • the range of the distance from the station / stop of public transportation to the area is specified. It may be a range of distances between a position serving as a reference and an area position, such as a thing.
  • the content specified by the user may specify the attribute of the area, or may directly specify the position of the area.
  • the user designation as described above may be designated on a menu or a map in which various designation contents are listed, for example.
  • the providing unit 103 may select voices corresponding to a plurality of areas instead of selecting one voice when selecting the voice corresponding to any area of the candidate area group.
  • the volume of each sound may be controlled in accordance with the distance between the position of the user and the position of each area. For example, regarding the volume parameter included in the audio data, the providing unit 103 decreases the volume when the distance between the area position and the user position is large, and decreases the volume when the distance between the area position and the user position is small. Set to increase.
  • the providing unit 103 controls the volume of the audio data based on the distance between the position of the area and the position of the user, but the method for controlling the volume is not limited to this.
  • the providing unit 103 may provide the user with a sound having a volume corresponding to the degree of coincidence between the direction in which the user is facing based on the user's position and the area.
  • a range of a predetermined angle centered on a half line indicating the direction D facing the user in the figure, a range sandwiched between the half line D1 and the half line D2
  • the volume of the audio data is controlled based on the size of the area that overlaps each area.
  • the providing unit 103 performs setting such that the volume parameter included in the audio data increases the volume when the overlapping area is large, and decreases the volume when the overlapping area is small.
  • the size of the overlapping region may be an absolute value of the area of the region, or may be a fractional value using the area of the entire area as a denominator and the area of the overlapping region as a numerator.
  • the providing unit 103 provides the user with sound having a volume corresponding to the positional relationship between the user and the area (the distance between the two positions and the degree of coincidence based on both positions).
  • the acoustic processing for changing the acoustic parameters in the audio data may be performed based on the positional relationship between the area and the user, such as the timbre and effect of the audio data.
  • an equalizer can be used to reduce the low frequency range according to the distance between the area and the user (for example, a low sound component can be reduced if the distance is long), or an effect such as delay or reverb can be selected depending on the distance between the area and the user.
  • the strength may be varied (for example, the reverb strength is increased when the distance is long).
  • the providing unit 103 may provide the user with a sound having a volume corresponding to the degree of association between the user attribute and the area attribute. Specifically, the providing unit 103 reads an attribute associated with each area ID of the extracted candidate area group with reference to the area management table. Next, the providing unit 103 reads the user attribute group associated with the user ID acquired in step S13 with reference to the area management table. Then, the providing unit 103 compares each attribute of the candidate area group with the user attribute, calculates the degree of association, and controls the volume of the audio data based on the magnitude of the degree of association. For example, the providing unit 103 sets the volume parameter included in the audio data such that the volume is increased when the degree of association is large and the volume is decreased when the degree of association is small.
  • the providing unit 103 outputs the sound subjected to the acoustic processing according to the degree of association between the user attribute and the area attribute.
  • the low frequency range is reduced by an equalizer according to the degree of association between the user attribute and the area attribute (for example, the low sound component is reduced when the degree of association is small), or the user attribute and the area attribute.
  • the intensity of effects such as delay and reverb may be varied according to the degree of relevance to (for example, the intensity of reverb is increased when the degree of relevance is small).
  • the providing unit 103 may provide the sound while continuously changing the sound in accordance with the change. For example, when the user turns his / her neck and changes the direction in which the user is facing, the sound corresponding to each direction is emitted while continuously changing. Moreover, you may make it provide an audio
  • the providing unit 103 may provide the sound while continuously changing the sound according to the position. For example, when the user moves, the sound corresponding to the position change of the moving user can be heard while changing continuously. Moreover, you may make it provide an audio
  • a user may be guided to a certain area by voice. For example, by giving the user the role of guiding the user to the sound corresponding to the area in the direction in which the user is facing, the guidance to the area visible to the user is repeated multiple times. Will be able to guide the user to areas that were not directly visible.
  • the providing unit 103 may provide data other than sound related to the area (for example, text data describing information related to the area or image data representing an image related to the area) in addition to the sound data.
  • each functional block is realized by any combination of hardware and / or software.
  • the means for realizing each functional block is not particularly limited. That is, each functional block may be realized by one device physically and / or logically coupled, and two or more devices physically and / or logically separated may be directly and / or indirectly. (For example, wired and / or wireless) and may be realized by these plural devices. Therefore, the audio providing apparatus or the audio reproducing apparatus according to the present invention can be realized by an apparatus having all of the functions integrated as described in the embodiment, and the functions of the respective apparatuses can be further increased. It may be a system that is distributed and implemented in the apparatus. Further, the order of the processing procedures described in the above embodiments may be changed as long as there is no contradiction. About the method demonstrated by embodiment, the element of each step is shown in the example order, and is not limited to the specific order shown.
  • the present invention can also be implemented in the form of an information processing method performed by a sound providing device or a sound reproducing device. That is, the present invention provides the user with a sound according to an area existing in a direction acquired with reference to the acquired user position, and a step of acquiring the user position and the direction in which the user is facing. And providing a voice providing method.
  • the present invention also includes a step of detecting a position of the user and a direction in which the user is facing, and a step of acquiring audio data corresponding to an area existing in the direction detected with reference to the detected user position. And a step of reproducing the acquired audio data.
  • the present invention can also be implemented in the form of a program for causing a computer to function as an audio providing apparatus or an audio reproducing apparatus. Such a program may be provided in a form recorded on a recording medium such as an optical disc, or may be provided in a form such that the program is downloaded to a computer via a communication network such as the Internet, and is installed and made available. Is
  • the obtaining unit obtains the position of the user and the direction in which the user is facing from a user terminal used by the user, and the providing unit Provides audio data indicating the audio to the user terminal.
  • the providing unit acquires an attribute of the user, and an area that exists in a direction in which the user is facing based on the position of the user.
  • the voice group corresponding to the voice the voice corresponding to the attribute of the user is provided to the user.
  • the providing unit acquires the content specified by the user, and the user is directed to the position based on the position of the user.
  • the voice corresponding to the area corresponding to the acquired content is provided to the user among the voice group corresponding to the area existing in the certain direction.
  • the providing unit sends a voice, which has been subjected to acoustic processing according to a positional relationship between the user and the area, to the user. provide.
  • the providing unit performs sound processing on which acoustic processing is performed in accordance with the degree of association between the user attribute and the area attribute. To the user.
  • the providing unit provides sound according to a change in the position of the user or a change in the direction in which the user is facing. .
  • the providing unit may provide the user with a voice whose volume has been changed according to a change in the position of the user or a change in the direction in which the user is facing. provide.
  • the providing unit is configured to respond to an area existing in the direction in which the user is facing in accordance with a change in the direction in which the user is facing.
  • the user is provided with a voice that has been changed from the voice.
  • the voice providing device according to any one of (1) to (9), further comprising storage means for storing voice data indicating the voice and the area in association with each other, wherein the providing means includes the user The voice data associated with the area existing in the direction in which the user faces is read out from the storage means and provided to the user.
  • the voice is a voice that is emitted or collected in the area.
  • Detection means for detecting the position of the user and the direction in which the user is facing, and acquisition means for acquiring audio data corresponding to an area existing in the direction in which the user is facing with respect to the position of the user
  • an audio reproducing device for reproducing the audio data.
  • the obtaining step obtains a position of the user and a direction in which the user is facing from a user terminal used by the user, and the providing step Provides audio data indicating the audio to the user terminal.
  • the providing step acquires an attribute of the user, and an area that exists in a direction in which the user is facing based on the position of the user In the voice group corresponding to the voice, the voice corresponding to the attribute of the user is provided to the user.
  • the providing step acquires the content specified by the user, and the user is directed to the position based on the position of the user.
  • the voice corresponding to the area corresponding to the acquired content is provided to the user among the voice group corresponding to the area existing in the certain direction.
  • the providing step sends a voice subjected to acoustic processing according to a positional relationship between the user and the area to the user. provide.
  • the providing step includes sound that has been subjected to acoustic processing in accordance with the degree of association between the user attribute and the area attribute. To the user.
  • the providing step provides sound according to a change in the position of the user or a change in the direction in which the user is facing.
  • the providing step may provide the user with a sound whose volume has been changed according to a change in the position of the user or a change in the direction in which the user is facing. provide.
  • the providing step is performed according to an area existing in the direction in which the user is facing in accordance with a change in the direction in which the user is facing.
  • the user is provided with a voice that has been changed from the voice.
  • the providing step includes: storing data in which voice data indicating the voice and the area are stored in association with each other; The voice data associated with the area existing in the direction in which the user is facing is read out and provided to the user.
  • the sound is sound that is emitted or collected in the area.
  • (24) a step of detecting a position of the user and a direction in which the user is facing; a step of acquiring audio data corresponding to an area existing in the direction detected with reference to the detected user position; and And a step of reproducing the reproduced audio data.
  • the user can know what area is in the direction the user is facing from the image resulting from the voice, and the user's position and direction and the voice. This is useful because a mechanism for providing information in association with

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Human Computer Interaction (AREA)
  • Otolaryngology (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

音声提供装置（１００，２００）は、ユーザの位置と当該ユーザが向いている方向とを取得する取得手段（２０１）と、ユーザの位置を基準としてユーザが向いている方向に存在するエリアに応じた音声をユーザに提供する提供手段（２０３）と、を備える。

Description

音声提供装置、音声再生装置、音声提供方法及び音声再生方法
　本発明は、ユーザに音声を提供する技術に関する。
　ユーザに対してそのユーザの位置に応じた情報を提供する技術が知られている。例えば特許文献１には、施設や商店の広告を移動端末に配信する際に、その施設や商店と移動端末との距離に応じて、配信する情報を切り替えることが開示されている。
日本国特開２００１－２３８２６６号公報
　これに対し、本発明は、ユーザの位置及び方向と音声とを関連付けた情報提供の仕組みを実現することを目的とする。
　上記課題を解決するため、本発明は、ユーザの位置と当該ユーザが向いている方向とを取得する取得手段と、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声を前記ユーザに提供する提供手段と、を備えた音声提供装置を提供する。
　また、本発明は、ユーザの位置と当該ユーザが向いている方向とを検出する検出手段と、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声データを取得する取得手段と、前記音声データを再生する再生手段と、を備えた音声再生装置を提供する。
　また、本発明は、ユーザの位置と当該ユーザが向いている方向とを取得するステップと、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声を前記ユーザに提供するステップと、を備えた音声提供方法を提供する。
　また、本発明は、ユーザの位置と当該ユーザが向いている方向とを検出するステップと、検出されたユーザの位置を基準として検出された方向に存在するエリアに応じた音声データを取得するステップと、取得された音声データを再生するステップとを備えた音声再生方法を提供する。
　本発明によれば、ユーザの位置及び方向と音声とを関連付けた情報提供の仕組みを実現することができる。
図１は、本発明の一実施形態に係る音声提供システムの全体構成を示す図である。 図２は、音声提供システムにおけるユーザ端末のハードウェア構成を示すブロック図である。 図３は、音声提供システムにおけるサーバ装置のハードウェア構成を示すブロック図である。 図４は、サーバ装置が記憶しているユーザ管理テーブルの一例を示す図である。 図５は、サーバ装置が記憶しているエリア管理テーブルの一例を示す図である。 図６は、音声提供システムにおける各装置の機能構成を示すブロック図である。 図７は、音声提供システムの動作の一例を示すシーケンス図である。 図８は、ユーザの位置及び方向と、音声が対応付けられたエリアとの関係を示す模式図である。
　図１は、本発明の一実施形態である音声提供システムの全体構成を示す図である。この音声提供システムにおいては、例えば商業店舗、遊戯施設、アミューズメント施設、公共施設又はイベント会場などの人工的な施設があるエリアや、例えば海、川、山などの自然環境があるエリアなど、予め決められた複数のエリアのそれぞれに対し、そのエリアに特徴的な音声が対応付けられている。エリアに特徴的な音声とは、例えば商業店舗であればその商業店舗のバックグラウンドミュージックやコマーシャルソングであり、映画館であれば上映中の映画の音声やその映画の説明ナレーションであり、遊園地であれば園内の利用客の歓声やその遊園地のテーマソングであり、海であれば波の音や海をイメージさせるような楽曲であり、川であればせせらぎや滝の音であり、山であれば鳥のさえずりや虫の鳴き声である。そして、この音声提供システムにおいて、ユーザの位置を基準としてそのユーザの顔が向いている方向（つまりユーザの視線方向）に存在するエリアに対応する音声がそのユーザに提供される。ユーザは提供される音声を聴くことで、自身の向いている方向にどのようなエリアがあるかを音声のイメージ（印象）で把握することができる。
　図１に示すように、音声提供システムは、ユーザに音声を提供するサーバ装置１００と、ユーザが使用するユーザ端末２００とを備える。サーバ装置１００及びユーザ端末２００はネットワーク９００を介して通信可能に接続されている。ネットワーク９００は、単独の通信ネットワークに限らず、通信方式が異なる複数の通信ネットワークを相互接続したものであってもよく、例えばインターネットや移動通信網等の有線又は無線の通信ネットワークである。図１には、サーバ装置１００及びユーザ端末２００を１つずつ示しているが、これらはそれぞれ複数であってもよい。
　図２は、ユーザ端末２００のハードウェア構成を示すブロック図である。ユーザ端末２００は、例えばスマートホンやタブレット或いは各種のウェアラブル端末などの通信可能なコンピュータである。ユーザ端末２００は、例えばＣＰＵ（Central Processing Unit）などの演算処理装置とＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）などの記憶装置とを備えた制御部２１と、例えばアンテナや通信回路を含みネットワーク９００を介して通信を行う通信部２２と、例えばＥＥＰＲＯＭ（Electronically Erasable and Programmable ROM）やフラッシュメモリなどの記憶部２３と、例えばスピーカ又はイヤホン用端子やアンプなどを含み音声データを再生して音声出力を行う再生部２４と、例えば方位センサやジャイロセンサなどを含みユーザ端末２００が向いている方向（ここではユーザ端末２００の向きをユーザが向いている方向とみなす）を検出する方向検出部２５と、例えばＧＰＳ（Global Positioning System）によって測位を行う測位部２６と、例えばキーやタッチセンサなどの操作子が設けられた操作部及び例えば液晶パネルや液晶駆動回路などの表示部を含むＵＩ（User Interface）部２７とを備えている。
　図３は、サーバ装置１００のハードウェア構成を示すブロック図である。サーバ装置１００は例えばサーバマシンなどのコンピュータであり、制御部１１と、通信部１２と、記憶部１３とを備えている。制御部１１は、ＣＰＵ等の演算装置と、ＲＯＭ及びＲＡＭなどの記憶装置とを備えている。ＣＰＵは、ＲＡＭをワークエリアとして用いてＲＯＭや記憶部１３に記憶されたプログラムを実行することによって、サーバ装置１００の各部の動作を制御する。通信部１２はネットワーク９００に接続されており、ネットワーク９００を介して通信を行う。記憶部１３は、例えばハードディスク等の記憶装置であり、制御部１１が用いるデータ群やプログラム群を記憶している。具体的には、記憶部１３は、様々な音声を示す音声データを含む音声データベース（以下、データベースをＤＢと称す）と、ユーザに関する情報が記述されたユーザ管理テーブルと、エリアに関する情報が記述されたエリア管理テーブルとを記憶している。
　図４に示すように、ユーザ管理テーブルにおいては、各ユーザを識別する識別情報であるユーザＩＤと、そのユーザの属性群（例えばユーザの性別、年齢、興味など）とが対応付けられている。ユーザの属性群はそのユーザによって事前に登録又は申告されたものである。
　図５に示すように、エリア管理テーブルにおいては、各エリアを識別する識別情報であるエリアＩＤと、そのエリアの位置を示す位置情報と、そのエリアの属性と、そのエリアに対応する音声データを識別する識別情報である音声ＩＤとが対応付けられている。各エリアには或る程度の広がりがあるため、エリアの位置はそのエリア全体の範囲を示している。エリアの属性は、そのエリアを特徴づける情報であり、エリアに対応する音声とユーザとのマッチングに用いられる。音声ＩＤは、例えば、音声データベースに含まれる各音声データのファイル名である。
　図６は、ユーザ端末２００及びサーバ装置１００の機能構成を示す図である。ユーザ端末２００の検出部２０１は、ユーザの位置とそのユーザが向いている方向とを検出する。ユーザ端末２００の通知部２０２は、検出部２０１によって検出されたユーザの位置とそのユーザが向いている方向とをサーバ装置１００に通知する。
　サーバ装置１００の取得部１０１は、ユーザ端末２００の通知部２０２から通知された、ユーザの位置とそのユーザが向いている方向とを取得する。サーバ装置１００の記憶部１０２は、音声を示す音声データとエリアとを対応付けて記憶している。サーバ装置１００の提供部１０３は、取得部１０１により取得されたユーザの位置を基準として、取得部１０１により取得された方向に存在するエリアに応じた音声データをユーザに提供する。より具体的には、提供部１０３は、複数のエリアのうちユーザの位置を基準としてユーザが向いている方向に存在するエリアを抽出し、そのエリアに対応付けられた音声データを記憶部１０２から読み出してユーザ端末２００に提供する。さらに、提供部１０３は、ユーザの属性を取得し、抽出したエリア群に応じた各音声データのうち、取得した属性に応じた音声データをユーザ端末２００に提供する。このとき、提供部１０３は、ユーザの位置と上記エリアとの距離に応じた音量の制御された音声データをユーザ端末２００に提供する。
　ユーザ端末２００の再生部２０３は、サーバ装置１００から提供された音声データを再生して音声を出力する。ユーザはユーザ端末２００から再生される音声を聴く。
　上述したユーザ端末２００の検出部２０１は図２に示した方向検出部２５及び測位部２６によって実現され、通知部２０２は図２に示した通信部２２によって実現され、再生部２０３は図２に示した再生部２４によって実現される。サーバ装置１００の取得部１０１は図３に示した通信部１２によって実現され、記憶部１０２は図３に示した記憶部１３によって実現され、提供部１０３は図３に示した制御部１１及び通信部１２によって実現される。
［動作］
　次に、図７を参照して本実施形態の動作を説明する。まずユーザは或る方向に対してユーザ端末２００を向けて、その方向にあるエリアの音声を取得することを指示する操作を行う。ここで、或る方向とは、例えばユーザから直接見える商業店舗などのエリアがある方向であってもよいし、また、ユーザからは具体的なエリアが直接見えない状態で、ユーザが方向を意識せずにユーザ端末２００を向けた方向であってもよい。ユーザ端末２００の検出部２０１はこの取得操作を受け付けると（ステップＳ１１）、ユーザの位置と当該ユーザが向いている方向とを検出する（ステップＳ１２）。前述したように、ここでいうユーザの位置はユーザ端末２００の位置であり、ユーザが向いている方向はユーザ端末２００が向いている方向である。そして、通知部２０２は、ユーザの位置及び当該ユーザが向いている方向を、ユーザＩＤとともにサーバ装置１００に通知する（ステップＳ１３）。このユーザＩＤは記憶部２３に予め記憶されたものであってもよいし、ユーザがこの音声提供サービスにログインするときにユーザ端末２００に入力したものであってもよい。
　サーバ装置１００の取得部１０１は、ユーザ端末２００の通知部２０２から通知された、ユーザの位置、ユーザが向いている方向及びユーザＩＤを取得する。提供部１０３は、エリア管理テーブルにおける各エリアの位置を参照し、取得されたユーザの位置を基準として取得された方向に存在するエリアを、候補エリア群として抽出する（ステップＳ１４）。具体的には、図８に例示するように、ユーザが位置Ｐにおいて方向Ｄを向いているとき、その方向Ｄを示す半直線を中心として所定の角度の範囲（図においては半直線Ｄ１及び半直線Ｄ２に挟まれた範囲）と少なくとも一部が重なるエリア、ここではエリアＡＲ０１０、ＡＲ０１４、ＡＲ０１６が抽出される。
　次に、提供部１０３は、エリアの属性及びユーザの属性に基づいて、抽出した候補エリア群のうちのいずれかのエリアに対応する音声を選択する（ステップＳ１５）。具体的には、まず、提供部１０３は、エリア管理テーブルを参照し、抽出した候補エリア群の各エリアＩＤに対応付けられた属性を読み出す。次に、提供部１０３は、エリア管理テーブルを参照し、ステップＳ１３にて取得したユーザＩＤに対応付けられたユーザの属性群を読み出す。そして、提供部１０３は、候補エリア群の各属性とユーザの属性とを比較して相互の関連度を算出し、ユーザの属性と最も高い関連度の属性を備えたエリアを特定する。例えば図４，５の例では、ユーザＩＤＵ０００１のユーザはロックミュージックに興味があるので、候補エリア群に、ロックコンサートという属性のエリアＩＤＡ０００００３のエリアが含まれていれば、このエリアが特定されることになる。ここで用いる関連度の算出アルゴリズムは周知のものを用いればよい。そして、提供部１０３は、エリア管理テーブルを参照し、特定したエリアのエリアＩＤに対応する音声ＩＤの音声データを選択する。
　さらに、提供部１０３は、エリアの位置及びユーザの位置の間の距離を算出し、音声データをその距離に応じた音量に設定する（ステップＳ１６）。例えば、提供部１０３は、音声データに含まれる音量パラメータについて、エリアの位置及びユーザの位置の間の距離が大きいと音量を小さくし、エリアの位置及びユーザの位置の間の距離が小さいと音量を大きくするという設定を行う。
　提供部１０３は、音量パラメータを設定した音声データを記憶部１０２から読み出してユーザ端末２００に対してネットワーク９００を介して送信する（ステップＳ１７）。
　ユーザ端末２００の再生部２０３は、提供部１０３から送信されてくる音声データを取得し、この音声データに設定されている音量パラメータに従い音声再生を行う（ステップＳ１８）。これにより、ユーザは自身が向いている方向にどのようなものがあるかを音声のイメージで知ることができ、さらに、音量の大小でそのエリアまでの距離を感覚的に知ることができる。
　以上説明した実施形態によれば、ユーザの位置及び方向と音声とを関連付けた新たな情報提供の仕組みを実現することができる。また、ユーザは、自身が向いた方向に存在するエリアに特徴的な音声を聴くことによって、そのエリアのイメージを把握することができる。一方、エリアの音声を用意する側（例えば商業店舗の運営者）にとっては、ユーザに提供する音声によってそのユーザを商業店舗等に呼び込むという集客効果を期待することができる。
［変形例］
　上述した実施形態は次のような変形が可能である。また、以下の変形例を互いに組み合わせて実施してもよい。
［変形例１]
　実施形態においては、個々のユーザが使用するユーザ端末２００に音声データを送信することでそのユーザに音声を提供していたが、例えば各エリア内又はその近傍に設置されたスピーカ等の放音手段によってユーザに音声を提供してもよい。具体的には、各エリアにおいて、音声提供システムは、ユーザの位置とそのユーザが向いている方向とを検出することでこれらを取得する取得部と、取得されたユーザの位置を基準として検出された方向にあるエリアに応じた音声をユーザに提供する提供部という機能を実装する。取得部は、例えば撮像装置と画像処理装置とで実現される。画像処理装置は、撮像装置によって撮像されたユーザの画像を解析し、その画像処理装置自身とユーザとの位置関係からユーザの位置を推定し、さらに、ユーザの顔の向きを画像認識により推定して、ユーザが該当するエリアのほうを向いているか否かを判断する。提供部は、該当するエリア又はその近傍に設置されたスピーカ等の放音手段によって実現され、ユーザが該当するエリアの方向を向いていると判断されると音声を放音する。この場合、提供部を実現する放音手段として指向性スピーカ等を用いることで、主に対象とするユーザに対してのみ音声を提供することが望ましい。
　これにより、例えば音声提供装置が店舗の商業店頭に設置され、店外のユーザがその商業店舗が存在する方向を見たときに、音声提供装置はそのユーザに対して商業店舗に関する音声を放音することが可能となる。ユーザは、自身が向いた方向に存在する商業店舗に関する特徴的な音声を聴くことによって、その商業店舗の特徴を把握することができ、商業店舗の運営者は集客効果を期待することができる。
［変形例２］
　ユーザに提供される音声は記憶部１０２に予め記憶されているものに限らず、各エリアにおいて放音又は収音されている音声であってもよい。例えば、商業店舗であればその商業店舗で放音されているバックグラウンドミュージックであってもよいし、映画館であれば実際に上映中の映画の音声が放音されてもよいし、遊園地であればリアルタイムに収音した利用客の歓声や園内のアナウンスであってもよいし、川であればリアルタイムに収音したせせらぎ音などであってもよい。
［変形例３］
　実施形態において、提供部１０３は、エリアの属性及びユーザの属性に基づいて、抽出した候補エリア群のうちのいずれかのエリアに対応する音声を選択していたが、音声を選択する方法はこれに限らない。例えば提供部１０３は、ユーザによって指定された位置の範囲を取得し、ユーザの位置を基準としたユーザが向いている方向に存在するエリアに応じた音声群のうち、取得した位置の範囲にあるエリアに応じた音声を選択してもよい。具体的には、ユーザは図７のステップＳ１１において又は予め、自身の位置とエリアとの位置との間の距離を所定の範囲、例えば０ｍ～２００ｍに指定しておく。提供部１０３は、ステップＳ１５において、抽出した候補エリア群のうち、上記の範囲に収まるエリアを特定し、そのエリアのエリアＩＤに対応する音声ＩＤの音声データを選択する。なお、ユーザが指定する内容は、上記のようなユーザの位置とエリアの位置との間の距離の範囲に限らず、例えば、公共交通機関の駅・停留所からエリアまでの距離の範囲を指定するものなど、何らかの基準となる位置とエリアの位置との間の距離の範囲であってもよい。さらに、ユーザが指定する内容は、エリアの属性を指定するものであってもよいし、エリアの位置を直接指定するものであってもよい。なお、上記のようなユーザの指定は、例えば各種の指定内容をリスト化したメニュー或いは地図上で指定するものであってもよい。
　また、提供部１０３は、候補エリア群のうちのいずれかのエリアに対応する音声を選択するときに１つの音声を選択するのではなく、複数のエリアに対応する音声を選択してもよい。この場合、例えば、ユーザの位置と各エリアの位置との間の距離に応じてそれぞれの音声の音量を制御してもよい。例えば、提供部１０３は、音声データに含まれる音量パラメータについて、エリアの位置及びユーザの位置の間の距離が大きいと音量を小さくし、エリアの位置及びユーザの位置の間の距離が小さいと音量を大きくするという設定を行う。
［変形例４］
　実施形態において、提供部１０３は、エリアの位置及びユーザの位置の間の距離に基づいて音声データの音量を制御していたが、音量を制御する方法はこれに限らない。例えば提供部１０３は、ユーザの位置を基準としたユーザの向いている方向とエリアとの一致度に応じた音量の音声を前記ユーザに提供するようにしてもよい。具体的には、図８の例の場合、ユーザの向いている方向Ｄを示す半直線を中心とした所定の角度の範囲（図においては半直線Ｄ１及び半直線Ｄ２に挟まれた範囲）と、各エリアとが重なる領域の大きさに基づいて音声データの音量を制御する。例えば、提供部１０３は、音声データに含まれる音量パラメータについて、重なる領域が大きいと音量を大きくし、重なる領域が小さいと音量を小さくするという設定を行う。ここでいう、重なる領域の大きさは、その領域の面積の絶対値であってもよいし、そのエリア全体の面積を分母とし重なる領域の面積を分子とした分数の値であってもよい。
　以上のように、提供部１０３は、ユーザとエリアとの位置関係（両者の位置間の距離や、両者の位置に基づく一致度）に応じた音量の音声をユーザに提供する。
　さらに、音声データの音量のみならず、音声データの音色やエフェクトなど、エリア及びユーザの位置関係に基づいて、音声データにおける音響的なパラメータを変化させる音響処理を施すというものでもよい。例えばエリア及びユーザ間の距離に応じてイコライザで低音域を低減させたり（例えば距離が遠いと低い音の成分のみ小さくするなど）とか、エリア及びユーザ間の距離に応じてディレイやリバーブといったエフェクトの強度を異ならせる（例えば距離が遠いとリバーブの強度を高くするなど)ようにしてもよい。
　また、例えば提供部１０３は、ユーザの属性とエリアの属性との関連度に応じた音量の音声をユーザに提供するようにしてもよい。具体的には、提供部１０３は、エリア管理テーブルを参照し、抽出した候補エリア群の各エリアＩＤに対応付けられた属性を読み出す。次に、提供部１０３は、エリア管理テーブルを参照し、ステップＳ１３にて取得したユーザＩＤに対応付けられたユーザの属性群を読み出す。そして、提供部１０３は、候補エリア群の各属性とユーザの属性とを比較して相互の関連度を算出し、その関連度の大きさに基づいて音声データの音量を制御する。例えば、提供部１０３は、音声データに含まれる音量パラメータについて、関連度が大きいと音量を大きくし、関連度が小さいと音量を小さくするという設定を行う。
　ここにおいても、ユーザとエリアとの位置関係に応じて音響処理を施したのと同様に、提供部１０３は、ユーザの属性とエリアの属性との関連度に応じた音響処理を施した音声をユーザに提供するようにしてもよい。つまり、例えばユーザの属性とエリアの属性との関連度に応じてイコライザで低音域を低減させたり（例えば関連度が小さいと低い音の成分のみ小さくするなど）とか、ユーザの属性とエリアの属性との関連度に応じてディレイやリバーブといったエフェクトの強度を異ならせる（例えば関連度が小さいとリバーブの強度を高くするなど)ようにしてもよい。
［変形例５］
　提供部１０３は、ユーザの向いている方向が変化すると、その変化に応じて連続的に音声を変えながら提供するようにしてもよい。例えばユーザが首を回して自身が向いている方向を変えると、それぞれの方向に応じた音声が連続的に変化しながら放音される。また、ユーザの向いている方向の変化率に応じて音声を提供するようにしてもよい。これにより、例えば、音声提供装置が商業店舗の店頭に設置され、店外のユーザがその商業店舗の方を見たあとにそのほかの商業店舗を見るなどユーザの向いている方向が変わったタイミングや、歩き始めて向く方向が変化したユーザに対して音声を提供するようにしてもよい。また、提供部１０３は、ユーザの位置が変化すると、その位置に応じて連続的に音声を変えながら提供するようにしてもよい。例えばユーザが移動すると、その移動中のユーザの位置変化に応じた音声が連続的に変化しながら聞こえるようになる。また、ユーザの向いている位置の変化率や速度に応じて音声を提供するようにしてもよい。
［変形例６］
　本発明の音声提供の仕組みを用いて、ユーザを音声によって或るエリアへと誘導してもよい。例えば、ユーザが向いた方向にあるエリアに応じた音声に対してそのエリアにユーザを誘導する役割を持たせることで、ユーザから見えるエリアへの誘導を複数回繰り返すなどして、最初はユーザからは直接見えなかったエリアへとそのユーザを誘導することが可能となる。
［変形例７］
　提供部１０３は、音声データに加えて、エリアに関する音声以外のデータ（例えばエリアに関する情報を記述したテキストデータやそのエリアに関連する画像を表す画像データ）を提供してもよい。
［変形例８］
　上記実施形態の説明に用いた図６のブロック図は機能単位のブロックを示している。これらの各機能ブロックは、ハードウェア及び／又はソフトウェアの任意の組み合わせによって実現される。また、各機能ブロックの実現手段は特に限定されない。すなわち、各機能ブロックは、物理的及び／又は論理的に結合した１つの装置により実現されてもよいし、物理的及び／又は論理的に分離した２つ以上の装置を直接的及び／又は間接的に（例えば、有線及び／又は無線）で接続し、これら複数の装置により実現されてもよい。従って、本発明に係る音声提供装置又は音声再生装置は、実施形態で説明したようにそれぞれの機能の全てを一体に備えた装置によっても実現可能であるし、それぞれの装置の機能を、さらに複数の装置に分散して実装したシステムであってもよい。また、上記実施形態で説明した処理の手順は、矛盾の無い限り、順序を入れ替えてもよい。実施形態で説明した方法については、例示的な順序で各ステップの要素を提示しており、提示した特定の順序に限定されない。
　本発明は、音声提供装置又は音声再生装置が行う情報処理方法といった形態でも実施が可能である。つまり、本発明は、ユーザの位置と当該ユーザが向いている方向とを取得するステップと、取得されたユーザの位置を基準として取得された方向に存在するエリアに応じた音声を前記ユーザに提供するステップとを備えることを特徴とする音声提供方法を提供する。また、本発明は、ユーザの位置と当該ユーザが向いている方向とを検出するステップと、検出されたユーザの位置を基準として検出された方向に存在するエリアに応じた音声データを取得するステップと、取得された音声データを再生するステップとを備えることを特徴とする音声再生方法を提供する。
　また、本発明は、音声提供装置又は音声再生装置としてコンピュータを機能させるためのプログラムといった形態でも実施が可能である。かかるプログラムは、光ディスク等の記録媒体に記録した形態で提供されたり、インターネット等の通信網を介して、コンピュータにダウンロードさせ、これをインストールして利用可能にするなどの形態で提供されたりすることが可能である。
　ここで、本開示の実施形態を以下のようにまとめる。
（１）ユーザの位置と当該ユーザが向いている方向とを取得する取得手段と、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声を前記ユーザに提供する提供手段と、を備えた音声提供装置を提供する。
（２）上記（１）に記載の音声提供装置において、前記取得手段は、前記ユーザによって使用されるユーザ端末から、前記ユーザの位置と前記ユーザが向いている方向とを取得し、前記提供手段は、前記音声を示す音声データを前記ユーザ端末に提供する。
（３）上記（１）又は（２）に記載の音声提供装置において、前記提供手段は、前記ユーザの属性を取得し、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声群のうち、前記ユーザの属性に応じた音声を前記ユーザに提供する。
（４）上記（１）～（３）のいずれかに記載の音声提供装置において、前記提供手段は、前記ユーザによって指定された内容を取得し、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声群のうち、取得した内容に対応するエリアに応じた音声を前記ユーザに提供する。
（５）上記（１）～（４）のいずれかに記載の音声提供装置において、前記提供手段は、前記ユーザと前記エリアとの位置関係に応じた音響処理が施された音声を前記ユーザに提供する。
（６）上記（１）～（５）のいずれかに記載の音声提供装置において、前記提供手段は、前記ユーザの属性と前記エリアの属性との関連度に応じた音響処理が施された音声を前記ユーザに提供する。
（７）上記（１）～（６）のいずれかに記載の音声提供装置において、前記提供手段は、前記ユーザの位置の変化又は前記ユーザが向いている方向の変化に応じて音声を提供する。
（８）上記（７）に記載の音声提供装置において、前記提供手段は、前記ユーザの位置の変化又は前記ユーザが向いている方向の変化に応じて、音量が変更された音声を前記ユーザに提供する。
（９）上記（７）又は（８）に記載の音声提供装置において、前記提供手段は、前記ユーザが向いている方向の変化に応じて、前記ユーザが向いている方向に存在するエリアに応じた音声から変更された音声を前記ユーザに提供する。
（１０）上記（１）～（９）のいずれかに記載の音声提供装置、前記音声を示す音声データと前記エリアとを対応付けて記憶する記憶手段をさらに備え、前記提供手段は、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに対応付けられた音声データを前記記憶手段から読み出して前記ユーザに提供する。
（１１）上記（１）～（１０）のいずれかに記載の音声提供装置において、前記音声は、前記エリアにおいて放音又は収音されている音声である。
（１２）ユーザの位置と当該ユーザが向いている方向とを検出する検出手段と、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声データを取得する取得手段と、前記音声データを再生する再生手段と、を備えた音声再生装置を提供する。
（１３）ユーザの位置と当該ユーザが向いている方向とを取得するステップと、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声を前記ユーザに提供するステップと、を備えた音声提供方法を提供する。
（１４）上記（１３）に記載の音声提供方法において、前記取得ステップは、前記ユーザによって使用されるユーザ端末から、前記ユーザの位置と前記ユーザが向いている方向とを取得し、前記提供ステップは、前記音声を示す音声データを前記ユーザ端末に提供する。
（１５）上記（１３）又は（１４）に記載の音声提供方法において、前記提供ステップは、前記ユーザの属性を取得し、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声群のうち、前記ユーザの属性に応じた音声を前記ユーザに提供する。
（１６）上記（１３）～（１５）のいずれかに記載の音声提供方法において、前記提供ステップは、前記ユーザによって指定された内容を取得し、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声群のうち、取得した内容に対応するエリアに応じた音声を前記ユーザに提供する。
（１７）上記（１３）～（１６）のいずれかに記載の音声提供方法において、前記提供ステップは、前記ユーザと前記エリアとの位置関係に応じた音響処理が施された音声を前記ユーザに提供する。
（１８）上記（１３）～（１７）のいずれかに記載の音声提供方法において、前記提供ステップは、前記ユーザの属性と前記エリアの属性との関連度に応じた音響処理が施された音声を前記ユーザに提供する。
（１９）上記（１３）～（１８）のいずれかに記載の音声提供方法において、前記提供ステップは、前記ユーザの位置の変化又は前記ユーザが向いている方向の変化に応じて音声を提供する。
（２０）上記（１９）に記載の音声提供方法において、前記提供ステップは、前記ユーザの位置の変化又は前記ユーザが向いている方向の変化に応じて、音量が変更された音声を前記ユーザに提供する。
（２１）上記（１９）又は（２０）に記載の音声提供方法において、前記提供ステップは、前記ユーザが向いている方向の変化に応じて、前記ユーザが向いている方向に存在するエリアに応じた音声から変更された音声を前記ユーザに提供する。
（２２）上記（１３）～（２１）のいずれかに記載の音声提供方法において、前記提供ステップは、前記音声を示す音声データと前記エリアとが対応付けて記憶される記憶手段から、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに対応付けられた音声データを読み出して前記ユーザに提供する。
（２３）上記（１３）～（２２）のいずれかに記載の音声提供方法において、前記音声は、前記エリアにおいて放音又は収音されている音声である。
（２４）ユーザの位置と当該ユーザが向いている方向とを検出するステップと、検出されたユーザの位置を基準として検出された方向に存在するエリアに応じた音声データを取得するステップと、取得された音声データを再生するステップとを備えた音声再生方法を提供する。
　本出願は、２０１６年１１月８日に出願された日本特許出願（特願２０１６－２１８２４２）に基づくものであり、ここに参照として取り込まれる。
　本発明によれば、ユーザは提供される音声を聴くことで、ユーザの向いている方向にどのようなエリアがあるかを音声に起因するイメージで知ることができ、ユーザの位置及び方向と音声とを関連付けた情報提供の仕組みを実現できるため有用である。
１００　サーバ装置
１１　制御部
１２　通信部
１３　記憶部
１０１　取得部
１０２　記憶部
１０３　提供部
２００　ユーザ端末
２１　制御部
２２　通信部
２３　記憶部
２４　再生部
２５　方向検出部
２６　測位部
２７　ＵＩ部
２０１　検出部
２０２　通知部
２０３　再生部
９００　ネットワーク

Claims (24)

  1. 　ユーザの位置と当該ユーザが向いている方向とを取得する取得手段と、
    　前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声を前記ユーザに提供する提供手段と、
    　を備えることを特徴とする音声提供装置。
  2. 　前記取得手段は、前記ユーザによって使用されるユーザ端末から、前記ユーザの位置と前記ユーザが向いている方向とを取得し、
    　前記提供手段は、前記音声を示す音声データを前記ユーザ端末に提供する
    　ことを特徴とする請求項１に記載の音声提供装置。
  3. 　前記提供手段は、前記ユーザの属性を取得し、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声群のうち、前記ユーザの属性に応じた音声を前記ユーザに提供する
    　ことを特徴とする請求項１又は２に記載の音声提供装置。
  4. 　前記提供手段は、前記ユーザによって指定された内容を取得し、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声群のうち、取得した内容に対応するエリアに応じた音声を前記ユーザに提供する
    　ことを特徴とする請求項１～３のいずれか１項に記載の音声提供装置。
  5. 　前記提供手段は、前記ユーザと前記エリアとの位置関係に応じた音響処理が施された音声を前記ユーザに提供する
    　ことを特徴とする請求項１～４のいずれか１項に記載の音声提供装置。
  6. 　前記提供手段は、前記ユーザの属性と前記エリアの属性との関連度に応じた音響処理が施された音声を前記ユーザに提供する
    　ことを特徴とする請求項１～５のいずれか１項に記載の音声提供装置。
  7. 　前記提供手段は、前記ユーザの位置の変化又は前記ユーザが向いている方向の変化に応じて音声を提供する
    　ことを特徴とする請求項１～６のいずれか１項に記載の音声提供装置。
  8. 　前記提供手段は、前記ユーザの位置の変化又は前記ユーザが向いている方向の変化に応じて、音量が変更された音声を前記ユーザに提供する
    　ことを特徴とする請求項７に記載の音声提供装置。
  9. 　前記提供手段は、前記ユーザが向いている方向の変化に応じて、前記ユーザが向いている方向に存在するエリアに応じた音声から変更された音声を前記ユーザに提供する
    　ことを特徴とする請求項７又は８に記載の音声提供装置。
  10. 　前記音声を示す音声データと前記エリアとを対応付けて記憶する記憶手段をさらに備え、
    　前記提供手段は、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに対応付けられた音声データを前記記憶手段から読み出して前記ユーザに提供する
    　ことを特徴とする請求項１～９のいずれか１項に記載の音声提供装置。
  11. 前記音声は、前記エリアにおいて放音又は収音されている音声である
    　ことを特徴とする請求項１～１０のいずれか１項に記載の音声提供装置。
  12. 　ユーザの位置と当該ユーザが向いている方向とを検出する検出手段と、
    　前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声データを取得する取得手段と、
    　前記音声データを再生する再生手段と、
    　を備えることを特徴とする音声再生装置。
  13. 　ユーザの位置と当該ユーザが向いている方向とを取得する取得ステップと、
    　前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声を前記ユーザに提供する提供ステップと、
    　を備えることを特徴とする音声提供方法。
  14. 　前記取得ステップは、前記ユーザによって使用されるユーザ端末から、前記ユーザの位置と前記ユーザが向いている方向とを取得し、
    　前記提供ステップは、前記音声を示す音声データを前記ユーザ端末に提供する
    　ことを特徴とする請求項１３に記載の音声提供方法。
  15. 　前記提供ステップは、前記ユーザの属性を取得し、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声群のうち、前記ユーザの属性に応じた音声を前記ユーザに提供する
    　ことを特徴とする請求項１３又は１４に記載の音声提供方法。
  16. 　前記提供ステップは、前記ユーザによって指定された内容を取得し、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに応じた音声群のうち、取得した内容に対応するエリアに応じた音声を前記ユーザに提供する
    　ことを特徴とする請求項１３～１５のいずれか１項に記載の音声提供方法。
  17. 　前記提供ステップは、前記ユーザと前記エリアとの位置関係に応じた音響処理が施された音声を前記ユーザに提供する
    　ことを特徴とする請求項１３～１６のいずれか１項に記載の音声提供方法。
  18. 　前記提供ステップは、前記ユーザの属性と前記エリアの属性との関連度に応じた音響処理が施された音声を前記ユーザに提供する
    　ことを特徴とする請求項１３～１７のいずれか１項に記載の音声提供方法。
  19. 　前記提供ステップは、前記ユーザの位置の変化又は前記ユーザが向いている方向の変化に応じて音声を提供する
    　ことを特徴とする請求項１３～１８のいずれか１項に記載の音声提供方法。
  20. 　前記提供ステップは、前記ユーザの位置の変化又は前記ユーザが向いている方向の変化に応じて、音量が変更された音声を前記ユーザに提供する
    　ことを特徴とする請求項１９に記載の音声提供方法。
  21. 　前記提供ステップは、前記ユーザが向いている方向の変化に応じて、前記ユーザが向いている方向に存在するエリアに応じた音声から変更された音声を前記ユーザに提供する
    　ことを特徴とする請求項１９又は２０に記載の音声提供方法。
  22. 　前記提供ステップは、前記音声を示す音声データと前記エリアとが対応付けて記憶される記憶手段から、前記ユーザの位置を基準として前記ユーザが向いている方向に存在するエリアに対応付けられた音声データを読み出して前記ユーザに提供する
    　ことを特徴とする請求項１３～２１のいずれか１項に記載の音声提供方法。
  23. 　前記音声は、前記エリアにおいて放音又は収音されている音声である
    　ことを特徴とする請求項１３～２２のいずれか１項に記載の音声提供方法。
  24. 　ユーザの位置と当該ユーザが向いている方向とを検出するステップと、
    　検出されたユーザの位置を基準として検出された方向に存在するエリアに応じた音声データを取得するステップと、
    　取得された音声データを再生するステップと
    　を備えることを特徴とする音声再生方法。
PCT/JP2017/040336 2016-11-08 2017-11-08 音声提供装置、音声再生装置、音声提供方法及び音声再生方法 WO2018088450A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018550237A JP6795611B2 (ja) 2016-11-08 2017-11-08 音声提供装置、音声再生装置、音声提供方法及び音声再生方法
US16/398,443 US11134356B2 (en) 2016-11-08 2019-04-30 Speech providing device, speech reproducing device, speech providing method, and speech reproducing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016-218242 2016-11-08
JP2016218242 2016-11-08

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/398,443 Continuation US11134356B2 (en) 2016-11-08 2019-04-30 Speech providing device, speech reproducing device, speech providing method, and speech reproducing method

Publications (1)

Publication Number Publication Date
WO2018088450A1 true WO2018088450A1 (ja) 2018-05-17

Family

ID=62109825

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/040336 WO2018088450A1 (ja) 2016-11-08 2017-11-08 音声提供装置、音声再生装置、音声提供方法及び音声再生方法

Country Status (3)

Country Link
US (1) US11134356B2 (ja)
JP (1) JP6795611B2 (ja)
WO (1) WO2018088450A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020241845A1 (en) * 2019-05-29 2020-12-03 Asahi Kasei Kabushiki Kaisha Sound reproducing apparatus having multiple directional speakers and sound reproducing method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014016694A (ja) * 2012-07-06 2014-01-30 Sony Corp サーバ、クライアント端末、およびプログラム
US20140185823A1 (en) * 2012-12-27 2014-07-03 Avaya Inc. Immersive 3d sound space for searching audio
JP2015508487A (ja) * 2011-12-15 2015-03-19 クゥアルコム・インコーポレイテッドＱｕａｌｃｏｍｍ Ｉｎｃｏｒｐｏｒａｔｅｄ ナビゲーションサウンドスケーピング

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3697568B2 (ja) 2000-02-24 2005-09-21 株式会社日立製作所 情報配信システム
GB2376123B (en) * 2001-01-29 2004-06-30 Hewlett Packard Co Facilitation of speech recognition in user interface
US8422693B1 (en) * 2003-09-29 2013-04-16 Hrl Laboratories, Llc Geo-coded spatialized audio in vehicles
US7492915B2 (en) * 2004-02-13 2009-02-17 Texas Instruments Incorporated Dynamic sound source and listener position based audio rendering
US8718301B1 (en) * 2004-10-25 2014-05-06 Hewlett-Packard Development Company, L.P. Telescopic spatial radio system
US7876903B2 (en) * 2006-07-07 2011-01-25 Harris Corporation Method and apparatus for creating a multi-dimensional communication space for use in a binaural audio system
US20100292917A1 (en) * 2009-05-13 2010-11-18 International Business Machines Corporation System and method for guiding a user through a surrounding environment
US20110288860A1 (en) * 2010-05-20 2011-11-24 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for processing of speech signals using head-mounted microphone pair
EP2590432B1 (en) * 2010-06-30 2020-04-08 Panasonic Intellectual Property Management Co., Ltd. Conversation detection device, hearing aid and conversation detection method
US9538133B2 (en) * 2011-09-23 2017-01-03 Jie Diao Conveying gaze information in virtual conference
US20130275873A1 (en) * 2012-04-13 2013-10-17 Qualcomm Incorporated Systems and methods for displaying a user interface
US9746916B2 (en) * 2012-05-11 2017-08-29 Qualcomm Incorporated Audio user interaction recognition and application interface
EP2669634A1 (en) * 2012-05-30 2013-12-04 GN Store Nord A/S A personal navigation system with a hearing device
EP2736276A1 (en) * 2012-11-27 2014-05-28 GN Store Nord A/S Personal communications unit for observing from a point of view and team communications system comprising multiple personal communications units for observing from a point of view
US20140270182A1 (en) * 2013-03-14 2014-09-18 Nokia Corporation Sound For Map Display
US10262462B2 (en) * 2014-04-18 2019-04-16 Magic Leap, Inc. Systems and methods for augmented and virtual reality
US9629774B2 (en) * 2014-01-14 2017-04-25 Toyota Motor Engineering & Manufacturing North America, Inc. Smart necklace with stereo vision and onboard processing
US10529359B2 (en) * 2014-04-17 2020-01-07 Microsoft Technology Licensing, Llc Conversation detection
US9905244B2 (en) * 2016-02-02 2018-02-27 Ebay Inc. Personalized, real-time audio processing
WO2018081609A1 (en) * 2016-10-27 2018-05-03 Livelike Inc. Spatial audio based advertising in virtual or augmented reality video streams
US10224033B1 (en) * 2017-09-05 2019-03-05 Motorola Solutions, Inc. Associating a user voice query with head direction

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015508487A (ja) * 2011-12-15 2015-03-19 クゥアルコム・インコーポレイテッドＱｕａｌｃｏｍｍ Ｉｎｃｏｒｐｏｒａｔｅｄ ナビゲーションサウンドスケーピング
JP2014016694A (ja) * 2012-07-06 2014-01-30 Sony Corp サーバ、クライアント端末、およびプログラム
US20140185823A1 (en) * 2012-12-27 2014-07-03 Avaya Inc. Immersive 3d sound space for searching audio

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020241845A1 (en) * 2019-05-29 2020-12-03 Asahi Kasei Kabushiki Kaisha Sound reproducing apparatus having multiple directional speakers and sound reproducing method
US10999677B2 (en) 2019-05-29 2021-05-04 Asahi Kasei Kabushiki Kaisha Sound reproducing apparatus having multiple directional speakers and sound reproducing method
JP2022534958A (ja) * 2019-05-29 2022-08-04 旭化成株式会社 複数の指向性スピーカを有する音声再生装置、および音声再生方法
JP7425090B2 (ja) 2019-05-29 2024-01-30 旭化成株式会社 複数の指向性スピーカを有する音声再生装置、および音声再生方法

Also Published As

Publication number Publication date
US11134356B2 (en) 2021-09-28
JP6795611B2 (ja) 2020-12-02
JPWO2018088450A1 (ja) 2019-10-03
US20190261123A1 (en) 2019-08-22

Similar Documents

Publication Publication Date Title
US11604247B2 (en) Mobile device indoor navigation
US20220103924A1 (en) Remotely Controlling a Hearing Device
US9952309B2 (en) Mobile device indoor navigation
CN105163241B (zh) 音频播放方法及装置、电子设备
US9609419B2 (en) Contextual information while using headphones
US11343613B2 (en) Prioritizing delivery of location-based personal audio
KR20140098615A (ko) 이동 단말기와 연결된 보청기를 피팅(ｆｉｔｔｉｎｇ) 하는 방법 및 이를 수행하는 이동 단말기
US9288594B1 (en) Auditory environment recognition
US20200098367A1 (en) Output for improving information delivery corresponding to voice request
CN102348014A (zh) 用于使用声音提供增强现实服务的装置和方法
EP3989083A1 (en) Information processing system, information processing method, and recording medium
KR20170023154A (ko) 오디오 신호들을 사용한 근접성 발견
WO2018088450A1 (ja) 音声提供装置、音声再生装置、音声提供方法及び音声再生方法
CN104038772A (zh) 生成铃声文件的方法及装置
US9824548B2 (en) Alert sound alteration
JP7037654B2 (ja) キャプチャされた空間オーディオコンテンツの提示用の装置および関連する方法
JP2021508193A5 (ja)
JP6990042B2 (ja) 音声提供装置及び音声提供方法
JP6674557B2 (ja) 音声再生装置及び音声再生方法
CN104079948A (zh) 生成铃声文件的方法及装置
JP2020022158A (ja) 音源フィルタリングのための方法およびシステム
CN114747196A (zh) 使用多个音频装置来输出多声道音频的终端和方法
KR20150094862A (ko) 모임에서 발생되는 이벤트의 관리 방법 및 장치
KR20150094294A (ko) 모임에서 발생되는 이벤트의 관리 방법 및 장치
KR20150094291A (ko) 모임에서 발생되는 이벤트의 관리 방법 및 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17869072

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018550237

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17869072

Country of ref document: EP

Kind code of ref document: A1