JPWO2019230236A1 - Binaural sound processing equipment, information processing equipment, and programs - Google Patents
Binaural sound processing equipment, information processing equipment, and programs Download PDFInfo
- Publication number
- JPWO2019230236A1 JPWO2019230236A1 JP2020521784A JP2020521784A JPWO2019230236A1 JP WO2019230236 A1 JPWO2019230236 A1 JP WO2019230236A1 JP 2020521784 A JP2020521784 A JP 2020521784A JP 2020521784 A JP2020521784 A JP 2020521784A JP WO2019230236 A1 JPWO2019230236 A1 JP WO2019230236A1
- Authority
- JP
- Japan
- Prior art keywords
- binaural sound
- coating material
- user
- information
- sound source
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K15/00—Acoustics not otherwise provided for
- G10K15/04—Sound-producing devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Stereophonic System (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
バイノーラル音処理装置は、複数の塗布物のそれぞれを識別する塗布物識別情報と、各塗布物を肌に塗布したときの音がバイノーラル録音されたバイノーラル音源情報と、が関連付けて記憶された記憶装置を備え、複数の塗布物の中から少なくとも1つの塗布物を識別する塗布物識別情報を決定する手段を備え、決定された塗布物識別情報に関連付けられたバイノーラル音源情報を選択する手段を備え、選択されたバイノーラル音源情報を出力する手段を備える。The binaural sound processing device is a storage device in which coating material identification information for identifying each of a plurality of coating materials and binaural sound source information in which the sound when each coating material is applied to the skin is binaurally recorded are stored in association with each other. A means for determining a coating material identification information for identifying at least one coating material from a plurality of coating materials, and a means for selecting binaural sound source information associated with the determined coating material identification information. A means for outputting the selected binaural sound source information is provided.
Description
本発明は、バイノーラル音処理装置、情報処理装置、及び、プログラムに関する。 The present invention relates to a binaural sound processing device, an information processing device, and a program.
一般に、人体に塗布される塗布物(例えば、化粧料)が被塗布者に与える触感には個人差がある。
例えば、化粧料の消費者は、化粧料を使用することによって得られる美容効果だけでなく、化粧料を使用したときの触感(例えば、肌触り)を考慮して、化粧料を選定する。
一方、化粧料の販売者は、美容効果及び触感の両方を消費者に訴求することにより、化粧料の販売を促進する。In general, there are individual differences in the tactile sensation given to the person to be coated by the coating material (for example, cosmetics) applied to the human body.
For example, a cosmetic consumer selects a cosmetic in consideration of not only the beauty effect obtained by using the cosmetic but also the tactile sensation (for example, the touch) when the cosmetic is used.
On the other hand, cosmetics sellers promote sales of cosmetics by appealing to consumers both beauty effects and tactile sensations.
特開2003−186962号公報には、触感を考慮した化粧料の選定を支援するために、触感に関するパラメータを消費者に入力させ、且つ、消費者によって入力されたパラメータに応じた化粧料のレシピを提示する技術が開示されている。 Japanese Patent Application Laid-Open No. 2003-186962 allows consumers to input parameters related to tactile sensation in order to support selection of cosmetics in consideration of tactile sensation, and recipes for cosmetics according to the parameters input by consumers. The technology for presenting is disclosed.
しかし、特開2003−186962号公報の技術では、消費者に触感を体験させることができない。そのため、提示されたレシピに対応する化粧料を実際に使用したときに消費者が感じる触感は、パラメータを入力したときに消費者が想像した触感とは異なる可能性がある。
特に、近年急速に普及しているオンラインショッピングでは、消費者は、化粧料の触感を体験することができないHowever, the technique of JP-A-2003-186962 does not allow consumers to experience the tactile sensation. Therefore, the tactile sensation that the consumer feels when actually using the cosmetic corresponding to the presented recipe may be different from the tactile sensation that the consumer imagines when entering the parameters.
Consumers cannot experience the tactile sensation of cosmetics, especially in online shopping, which has rapidly become widespread in recent years.
つまり、従来、塗布物を使用する前に、塗布物の触感を消費者が体験することはできない。 That is, conventionally, the consumer cannot experience the tactile sensation of the coating before using the coating.
本発明の目的は、塗布物を使用する前に、塗布物の触感を消費者に体験させることである。 An object of the present invention is to allow consumers to experience the tactile sensation of a coating before using it.
本発明の一態様は、
複数の塗布物のそれぞれを識別する塗布物識別情報と、各塗布物を肌に塗布したときの音がバイノーラル録音されたバイノーラル音源情報と、を関連付けて記憶する手段を備え、
複数の塗布物の中から少なくとも1つの塗布物を識別する塗布物識別情報を決定する手段を備え、
前記決定された塗布物識別情報に関連付けられたバイノーラル音源情報を選択する手段を備え、
前記選択されたバイノーラル音源情報を出力する手段を備える、
バイノーラル音処理装置である。One aspect of the present invention is
It is provided with a means for associating and storing the coating material identification information for identifying each of the plurality of coating materials and the binaural sound source information in which the sound when each coating material is applied to the skin is recorded binaurally.
A means for determining coating material identification information for identifying at least one coating material from a plurality of coating materials is provided.
A means for selecting binaural sound source information associated with the determined coating material identification information is provided.
A means for outputting the selected binaural sound source information is provided.
It is a binaural sound processing device.
本発明によれば、塗布物を使用する前に、塗布物の触感を消費者に体験させることができる。 According to the present invention, the consumer can experience the tactile sensation of the coating before using the coating.
以下、本発明の一実施形態について、図面に基づいて詳細に説明する。なお、実施形態を説明するための図面において、同一の構成要素には原則として同一の符号を付し、その繰り返しの説明は省略する。 Hereinafter, one embodiment of the present invention will be described in detail with reference to the drawings. In addition, in the drawing for demonstrating the embodiment, the same components are in principle the same reference numerals, and the repeated description thereof will be omitted.
(1)音声処理システムの構成
音声処理システムの構成について説明する。図1は、本実施形態の音声処理システムの構成を示す概略図である。図2は、図1の音声処理システムの構成を示すブロック図である。(1) Configuration of voice processing system The configuration of the voice processing system will be described. FIG. 1 is a schematic view showing the configuration of the voice processing system of the present embodiment. FIG. 2 is a block diagram showing a configuration of the voice processing system of FIG.
図1及び図2に示すように、音声処理システム1は、バイノーラル音処理装置10と、音声出力装置20と、サーバ30と、を備える。
バイノーラル音処理装置10及び音声出力装置20は、有線通信又は無線通信によって接続される。バイノーラル音処理装置10及びサーバ30は、ネットワーク(例えば、インターネット又はイントラネット)NWを介して接続される。
ユーザUは、音声出力装置20を介して、バイノーラル音処理装置10によって処理された音声(例えば、バイノーラル音)を聴くことができる。As shown in FIGS. 1 and 2, the
The binaural
The user U can listen to the voice processed by the binaural sound processing device 10 (for example, the binaural sound) through the
バイノーラル音処理装置10は、バイノーラル音の音声信号を生成するように構成される。
また、バイノーラル音処理装置10は、サーバ30にリクエストを送信する情報処理装置の一例である。バイノーラル音処理装置10は、例えば、スマートフォン、タブレット端末、又は、パーソナルコンピュータである。The binaural
The binaural
音声出力装置20は、バイノーラル音処理装置10から送信された音声信号に対応するバイノーラル音を出力するように構成される。音声出力装置20は、例えば、ヘッドフォン、又は、イヤフォンである。
The
サーバ30は、バイノーラル音処理装置10から送信されたリクエストに応じたレスポンスをバイノーラル音処理装置10に提供する情報処理装置の一例である。サーバ30は、例えば、ウェブサーバである。
The
(1−1)バイノーラル音処理装置の構成
図2を参照して、バイノーラル音処理装置10の構成について説明する。(1-1) Configuration of Binaural Sound Processing Device The configuration of the binaural
図2に示すように、バイノーラル音処理装置10は、記憶装置11と、プロセッサ12と、入出力インタフェース13と、通信インタフェース14とを備える。
As shown in FIG. 2, the binaural
記憶装置11は、プログラム及びデータを記憶するように構成される。記憶装置11は、例えば、ROM(Read Only Memory)、RAM(Random Access Memory)、及び、ストレージ(例えば、フラッシュメモリ又はハードディスク)の組合せである。
The
プログラムは、例えば、以下のプログラムを含む。
・OS(Operating System)のプログラム
・情報処理を実行するアプリケーション(例えば、バイノーラル音の処理のためのアプリケーション)のプログラムThe program includes, for example, the following program.
-OS (Operating System) program-Program of an application that executes information processing (for example, an application for processing binaural sound)
データは、例えば、以下のデータを含む。
・情報処理において参照されるデータベース
・情報処理を実行することによって得られるデータ(つまり、情報処理の実行結果)The data includes, for example, the following data.
-Database referenced in information processing-Data obtained by executing information processing (that is, the execution result of information processing)
プロセッサ12は、記憶装置11に記憶されたプログラムを起動することによって、バイノーラル音処理装置10の機能を実現するように構成される。プロセッサ12は、コンピュータの一例である。
The
入出力インタフェース13は、バイノーラル音処理装置10に接続される入力デバイスからユーザの指示を取得し、かつ、バイノーラル音処理装置10に接続される出力デバイスに情報を出力するように構成される。
入力デバイスは、例えば、キーボード、ポインティングデバイス、タッチパネル、又は、それらの組合せである。
出力デバイスは、例えば、ディスプレイである。The input /
The input device is, for example, a keyboard, a pointing device, a touch panel, or a combination thereof.
The output device is, for example, a display.
通信インタフェース14は、バイノーラル音処理装置10とサーバ30との間の通信を制御するように構成される。
The
(1−2)サーバの構成
図2を参照して、サーバ30の構成について説明する。(1-2) Server Configuration The configuration of the
図2に示すように、サーバ30は、記憶装置31と、プロセッサ32と、入出力インタフェース33と、通信インタフェース34とを備える。
As shown in FIG. 2, the
記憶装置31は、プログラム及びデータを記憶するように構成される。記憶装置31は、例えば、ROM、RAM、及び、ストレージ(例えば、フラッシュメモリ又はハードディスク)の組合せである。
The
プログラムは、例えば、以下のプログラムを含む。
・OSのプログラム
・情報処理を実行するアプリケーションのプログラムThe program includes, for example, the following program.
・ OS program ・ Application program that executes information processing
データは、例えば、以下のデータを含む。
・情報処理において参照されるデータベース
・情報処理の実行結果The data includes, for example, the following data.
・ Database referenced in information processing ・ Execution result of information processing
プロセッサ32は、記憶装置31に記憶されたプログラムを起動することによって、サーバ30の機能を実現するように構成される。プロセッサ32は、コンピュータの一例である。
The
入出力インタフェース33は、サーバ30に接続される入力デバイスからユーザの指示を取得し、かつ、サーバ30に接続される出力デバイスに情報を出力するように構成される。
入力デバイスは、例えば、キーボード、ポインティングデバイス、タッチパネル、又は、それらの組合せである。
出力デバイスは、例えば、ディスプレイである。The input /
The input device is, for example, a keyboard, a pointing device, a touch panel, or a combination thereof.
The output device is, for example, a display.
通信インタフェース34は、サーバ30とバイノーラル音処理装置10との間の通信を制御するように構成される。
The
(2)実施形態の概要
本実施形態の概要について説明する。図3は、本実施形態の概要の説明図である。(2) Outline of the Embodiment The outline of the present embodiment will be described. FIG. 3 is an explanatory diagram of an outline of the present embodiment.
バイノーラル音処理装置10には、バイノーラル音源情報が記憶されている。バイノーラル音源情報は、人体に塗布可能な塗布物に関連付けられている。塗布物とは、例えば、肌に塗布可能な化粧料である。化粧料としては、例えば、メーキャップ用化粧料、スキンケア用化粧料、ヘアケア用化粧料などが挙げられる。化粧料の形態は、例えば、固体、液体、スプレー状などが挙げられる。
バイノーラル音源情報には、各塗布物を人体に塗布したときに鼓膜に伝わる振動によって再現されるバイノーラル音が記録されている。
ユーザUが所望の塗布物を指定すると、バイノーラル音処理装置10は、指定された塗布物に関連付けられたバイノーラル音源情報を音声出力装置20に出力する。
音声出力装置20は、バイノーラル音処理装置10から出力されたバイノーラル音源情報に記録されたバイノーラル音を出力する。Binaural sound source information is stored in the binaural
The binaural sound source information records the binaural sound reproduced by the vibration transmitted to the eardrum when each coating material is applied to the human body.
When the user U specifies the desired coating material, the binaural
The
このような塗布物のバイノーラル音は、聴覚と、聴覚に付随して生じる触覚と、を刺激することにより、ユーザUに対して、塗布物を使用したときの触感を体験させることができる。本実施形態では、ユーザUに所望の塗布物のバイノーラル音を聴かせることにより、所望の塗布物を使用したときの触感を提示することができる。 The binaural sound of such a coating material stimulates the auditory sense and the tactile sensation that accompanies the hearing, so that the user U can experience the tactile sensation when the coating material is used. In the present embodiment, by letting the user U hear the binaural sound of the desired coating material, it is possible to present the tactile sensation when the desired coating material is used.
(3)データベース
本実施形態のデータベースについて説明する。以下のデータベースは、記憶装置11に記憶される。(3) Database The database of the present embodiment will be described. The following database is stored in the
(3−1)塗布物情報データベース
本実施形態の塗布物情報データベースについて説明する。図4は、本実施形態の塗布物情報データベースのデータ構造を示す図である。(3-1) Coating Material Information Database The coating material information database of the present embodiment will be described. FIG. 4 is a diagram showing a data structure of the coating material information database of the present embodiment.
図4の塗布物情報データベースには、塗布物に関する塗布物情報が格納される。
塗布物情報データベースは、「塗布物ID」フィールドと、「塗布物名」フィールドと、「推奨属性」フィールドと、「バイノーラル音源」フィールドと、「コンテンツ」フィールドと、を含む。各フィールドは、互いに関連付けられている。The coating material information database of FIG. 4 stores the coating material information related to the coating material.
The application information database includes a "application ID" field, a "application name" field, a "recommended attribute" field, a "binoral sound source" field, and a "content" field. Each field is associated with each other.
「塗布物ID」フィールドには、塗布物を識別する塗布物ID(「塗布物識別情報」の一例)が格納される。塗布物IDは、塗布物情報データベースのレコード(以下「塗布物情報レコード」という)の主キーである。 A coating material ID (an example of "coating material identification information") for identifying a coating material is stored in the "coated material ID" field. The coating material ID is the primary key of the record of the coating material information database (hereinafter referred to as “coating material information record”).
「塗布物名」フィールドには、塗布物の名称に関する情報(例えば、テキスト)が格納される。 The "Applied Material Name" field stores information (eg, text) about the name of the coated material.
「推奨属性」フィールドには、塗布物の使用が推奨されるユーザ属性に関する情報(以下「推奨属性情報」という)が格納される。「推奨属性」フィールドは、「性別」フィールドと、「年齢」フィールドと、「肌状態」フィールドと、を含む。 The "recommended attribute" field stores information about user attributes for which the use of the coating is recommended (hereinafter referred to as "recommended attribute information"). The Recommended Attributes field includes a Gender field, an Age field, and a Skin Condition field.
「性別」フィールドには、塗布物の使用が推奨される性別に関する情報が格納される。 The Gender field contains information about the gender for which the application is recommended for use.
「年齢」フィールドには、塗布物の使用が推奨される年齢に関する情報が格納される。 The Age field stores information about the age at which the application is recommended for use.
「肌状態」フィールドには、塗布物の使用が推奨される肌状態に関する情報が格納される。 The "Skin Condition" field stores information about the skin condition for which the application is recommended for use.
「バイノーラル音源」フィールドには、塗布物を塗布したときの振動音が記録されたバイノーラル音源ファイル(「バイノーラル音源情報」の一例)が格納される。 In the "binaural sound source" field, a binaural sound source file (an example of "binaural sound source information") in which the vibration sound when the applied material is applied is recorded is stored.
「コンテンツ」フィールドには、塗布物に関するコンテンツのコンテンツファイルが格納される。コンテンツは、例えば、以下の少なくとも1つを含む。
・動画コンテンツ
・静止画コンテンツ
・CG(Computer Graphics)コンテンツ
・音声コンテンツThe Content field stores a content file of content related to the coating. The content includes, for example, at least one of the following:
・ Video content ・ Still image content ・ CG (Computer Graphics) content ・ Audio content
(4)情報処理
本実施形態の情報処理について説明する。図5は、本実施形態の情報処理のフローチャートである。図6は、図5の情報処理において表示される画面例を示す図である。(4) Information processing The information processing of the present embodiment will be described. FIG. 5 is a flowchart of information processing of the present embodiment. FIG. 6 is a diagram showing an example of a screen displayed in the information processing of FIG.
図5に示すように、バイノーラル音処理装置10は、塗布物の指定の受付(S100)を実行する。
具体的には、プロセッサ12は、画面P100(図6)をディスプレイに表示する。As shown in FIG. 5, the binaural
Specifically, the
画面P100は、操作オブジェクトB100a〜B100bを含む。
操作オブジェクトB100a〜B100bは、塗布物を指定するためのユーザ指示を受け付けるオブジェクトである。操作オブジェクトB100a〜B100bには、塗布物IDが割り当てられている。The screen P100 includes operation objects B100a to B100b.
The operation objects B100a to B100b are objects that receive user instructions for designating the coating material. Application IDs are assigned to the operation objects B100a to B100b.
例えば、ユーザUが操作オブジェクトB100aを操作すると、プロセッサ12は、操作オブジェクトB100aに割り当てられた塗布物IDを特定する。これにより、塗布物の指定が受け付けられる。
For example, when the user U operates the operation object B100a, the
ステップS100の後、バイノーラル音処理装置10は、バイノーラル音源の選択(S101)を実行する。
具体的には、プロセッサ12は、塗布物情報データベース(図4)を参照して、ステップS100で特定された塗布物IDに関連付けられた「バイノーラル音源」フィールドの情報(つまり、バイノーラル音源ファイル)を読み出す。After step S100, the binaural
Specifically, the
ステップS101の後、バイノーラル音処理装置10は、バイノーラル音の再生(S102)を実行する。
具体的には、プロセッサ12は、ステップS101で読み出したバイノーラル音源ファイルを開くことにより、バイノーラル音源ファイルに記録されたバイノーラル音の音声信号を生成する。
プロセッサ12は、生成した音声信号を音声出力装置20に送信する。
音声出力装置20は、プロセッサ12から送信された音声信号に基づいて、バイノーラル音を出力する。After step S101, the binaural
Specifically, the
The
The
本実施形態によれば、ユーザUは、音声出力装置20によって出力されるバイノーラル音を聴くことにより、所望の塗布物を使用したときの触感を体験することができる。
According to the present embodiment, the user U can experience the tactile sensation when using the desired coating material by listening to the binaural sound output by the
(5)変形例
本実施形態の変形例について説明する。(5) Modification Example A modification of the present embodiment will be described.
(5−1)変形例1
変形例1について説明する。変形例1は、塗布物、及び、ユーザUのユーザ属性の組合せに応じたバイノーラル音を出力する例である。(5-1)
(5−1−1)変形例1の概要
変形例1の概要について説明する。図7は、変形例1の概要の説明図である。(5-1-1) Outline of Deformation Example 1 An outline of Deformation Example 1 will be described. FIG. 7 is an explanatory diagram of an outline of the modified example 1.
図7のバイノーラル音処理装置10には、バイノーラル音源情報が記憶されている。バイノーラル音源情報は、塗布物及びユーザ属性の組合せ(例えば、ユーザUのユーザ属性から使用が推奨される塗布物)に関連付けられている。
ユーザUが所望の塗布物を指定すると、バイノーラル音処理装置10は、指定された塗布物及びユーザUのユーザ属性の組合せに関連付けられたバイノーラル音源情報を音声出力装置20に出力する。
音声出力装置20は、バイノーラル音処理装置10から出力されたバイノーラル音源情報に記録されたバイノーラル音を出力する。The binaural sound source information is stored in the binaural
When the user U specifies a desired coating material, the binaural
The
変形例1では、ユーザUの所望の塗布物のうち、ユーザUのユーザ属性が関連付けられた塗布物のバイノーラル音を聴かせることにより、ユーザUにとって使用が推奨される塗布物を塗布したときに感じる触感を提示することができる。 In the first modification, when the binaural sound of the coating material associated with the user attribute of the user U is heard among the desired coating materials of the user U, the coating material recommended for use by the user U is applied. It is possible to present the tactile sensation to be felt.
(5−1−2)データベース
変形例1のデータベースについて説明する。(5-1-2) Database The database of
(5−1−2−1)ユーザ情報データベース
変形例1のユーザ情報データベースについて説明する。図8は、変形例1のユーザ情報データベースのデータ構造を示す図である。(5-1-2-1) User Information Database The user information database of
図8のユーザ情報データベースは、「ユーザID」フィールドと、「ユーザ名」フィールドと、「ユーザ属性」フィールドと、「行動履歴」フィールドと、を含む。
各フィールドは、互いに関連付けられている。The user information database of FIG. 8 includes a "user ID" field, a "user name" field, a "user attribute" field, and an "action history" field.
Each field is associated with each other.
「ユーザID」フィールドには、ユーザUを識別するユーザID(「ユーザ識別情報」の一例)が格納される。ユーザIDは、ユーザ情報データベースのレコード(以下「ユーザ情報レコード」という)の主キーである。 In the "user ID" field, a user ID that identifies the user U (an example of "user identification information") is stored. The user ID is a primary key of a record in the user information database (hereinafter referred to as "user information record").
「ユーザ名」フィールドには、ユーザUのユーザ名に関する情報(例えば、テキスト)が格納される。 The "username" field stores information (eg, text) about the username of user U.
「ユーザ属性」フィールドには、ユーザUの属性に関するユーザ属性情報が格納される。「ユーザ属性」フィールドは、「性別」フィールドと、「年齢」フィールドと、「肌状態」フィールドと、を含む。 In the "user attribute" field, user attribute information regarding the attribute of user U is stored. The "User Attributes" field includes a "Gender" field, an "Age" field, and a "Skin Condition" field.
「性別」フィールドには、ユーザUの性別に関する情報が格納される。 Information about the gender of user U is stored in the "Gender" field.
「年齢」フィールドには、ユーザUの年齢に関する情報が格納される。 Information about the age of user U is stored in the "age" field.
「肌状態」フィールドには、ユーザUの肌状態に関する肌状態情報が格納される。「肌状態」フィールドには、以下の少なくとも1つの方法によりユーザ情報データベースに格納される。
・プロセッサ12は、ユーザUによって入力された肌状態情報を「肌状態」フィールドに格納する。
・プロセッサ12は、通信インタフェース14を介して、肌状態情報を取得可能なデバイス(例えば、スマートフォン)から送信された肌状態情報を「肌状態」フィールドに格納する。
・プロセッサ12は、ユーザUが装着したウェアラブルデバイスから送信された肌状態情報を「肌状態」フィールドに格納する。In the "skin condition" field, skin condition information regarding the skin condition of the user U is stored. The "skin condition" field is stored in the user information database by at least one of the following methods.
-The
The
-The
「行動履歴」フィールドには、ユーザUの行動の履歴に関する行動履歴情報が格納される。「行動履歴」フィールドは、「閲覧履歴」フィールドと、「購入履歴」フィールドと、を含む。 In the "behavior history" field, the action history information regarding the action history of the user U is stored. The "Behavior History" field includes a "Browsing History" field and a "Purchase History" field.
「閲覧履歴」フィールドには、ウェブサイトの閲覧履歴に関する閲覧履歴情報(一例として、ユーザUが閲覧したウェブサイトのURL(Uniform Resource Locator))が格納される。 In the "browsing history" field, browsing history information regarding the browsing history of the website (as an example, the URL (Uniform Resource Locator) of the website browsed by the user U) is stored.
「購入履歴」フィールドには、商品の購入履歴に関する購入履歴情報(一例として、ユーザUが購入した塗布物の塗布物ID、及び、購入日に関する情報)が格納される。 In the "purchase history" field, purchase history information regarding the purchase history of the product (as an example, the coating material ID of the coating material purchased by the user U and the information regarding the purchase date) is stored.
(5−1−3)情報処理
変形例1の情報処理について説明する。図9は、変形例1の情報処理のフローチャートである。図10は、図9の情報処理において表示される画面例を示す図である。(5-1-3) Information Processing The information processing of
図9に示すように、バイノーラル音処理装置10は、ユーザ情報の取得(S110)を実行する。
具体的には、プロセッサ12は、画面P110(図10)をディスプレイに表示する。As shown in FIG. 9, the binaural
Specifically, the
画面P110は、操作オブジェクトB110と、フィールドオブジェクトF110と、を含む。
フィールドオブジェクトF110は、ユーザ情報の入力を受け付けるオブジェクトである。
操作オブジェクトB110は、フィールドオブジェクトF110に入力されたユーザ情報を確定させるためのユーザ指示を受け付けるオブジェクトである。The screen P110 includes an operation object B110 and a field object F110.
The field object F110 is an object that accepts input of user information.
The operation object B110 is an object that receives a user instruction for confirming the user information input to the field object F110.
例えば、ユーザUがフィールドオブジェクトF110にユーザIDを入力し、且つ、操作オブジェクトB110を操作すると、プロセッサ12は、ユーザ情報データベース(図8)を参照して、フィールドオブジェクトF110に入力されたユーザIDに関連付けられたユーザ情報レコードを特定する。
For example, when the user U inputs the user ID into the field object F110 and operates the operation object B110, the
ステップS110の後、バイノーラル音処理装置10は、バイノーラル音源の選択(S111)を実行する。
After step S110, the binaural
ステップS111の第1例では、プロセッサ12は、塗布物情報データベース(図4)の「推奨属性」フィールドを参照して、ステップS111で特定したユーザ情報レコードに含まれるユーザ属性情報(例えば、性別、年齢、及び、肌状態に関する情報)に対応する塗布物情報レコードを特定する。
プロセッサ12は、塗布物情報レコードの「バイノーラル音源」フィールドの情報(つまり、バイノーラル音源ファイル)を読み出す。In the first example of step S111, the
The
ステップS111の第2例では、記憶装置11には、ユーザUの行動履歴、及び、ユーザUが嗜好する塗布物の相関モデルが記憶されている。相関モデルの入力は、ユーザUの行動履歴である。相関モデルの出力は、塗布物情報である。
プロセッサ12は、ステップS111で特定したユーザ情報レコードに含まれる「行動履歴」フィールドの情報(例えば、「閲覧履歴」フィールド及び「購入履歴」フィールドの少なくとも1つの情報)を相関モデルに入力することにより、ユーザUに対して使用が推奨される塗布物に関する塗布物情報(例えば、塗布物ID)を予測する。
プロセッサ12は、塗布物情報データベース(図4)を参照して、予測した塗布物IDに関連付けられた「バイノーラル音源」フィールドの情報(つまり、バイノーラル音源ファイル)を読み出す。In the second example of step S111, the
The
The
ステップS111の後、バイノーラル音処理装置10は、図5と同様に、バイノーラル音の再生(S102)を実行する。
After step S111, the binaural
変形例1によれば、ユーザUは、音声出力装置20によって出力されるバイノーラル音を聴くことにより、自身の属性を考慮して使用が推奨される塗布物を使用したときの触感を体験することができる。
According to the first modification, the user U listens to the binaural sound output by the
(5−2)変形例2
変形例2について説明する。変形例2は、ユーザUの動きに応じて最適化されたバイノーラル音を出力する例である。(5-2)
(5−2−1)変形例2の概要
変形例2の概要について説明する。図11は、変形例2の概要の説明図である。(5-2-1) Outline of Deformation Example 2 An outline of Deformation Example 2 will be described. FIG. 11 is an explanatory diagram of an outline of the modified example 2.
図11に示すように、音声出力装置20から出力されるバイノーラル音を聴いている間に、ユーザUが動くと、バイノーラル音処理装置10は、ユーザUの動きに応じてバイノーラル音を補正する。
音声出力装置20は、バイノーラル音処理装置10によって補正されたバイノーラル音を出力する。As shown in FIG. 11, when the user U moves while listening to the binaural sound output from the
The
(5−2−2)情報処理
変形例2の情報処理について説明する。図12は、変形例2の情報処理のフローチャートである。(5-2-2) Information processing The information processing of the modified example 2 will be described. FIG. 12 is a flowchart of information processing of the second modification.
図12に示すように、バイノーラル音処理装置10は、図9と同様に、ステップS100〜S101を実行する。
As shown in FIG. 12, the binaural
ステップS101の後、バイノーラル音処理装置10は、動き情報の取得(S120)を実行する。
具体的には、バイノーラル音処理装置10は、ユーザの動きを検出するように構成されたモーションセンサ(不図示)に接続される。モーションセンサは、例えば、以下の少なくとも1つを含む。
・ユーザUの画像を検出するイメージセンサ
・ユーザUの体の一部(例えば、手)の加速度を検出する加速度センサ
・ユーザUの体の一部(例えば、手)の角加速度を検出するジャイロセンサ
・地磁気を検出する地磁気センサAfter step S101, the binaural
Specifically, the binaural
-Image sensor that detects the image of user U-Accelerometer that detects the acceleration of a part of the body of user U (for example, hand) -Gyro that detects the angular acceleration of part of the body of user U (for example, hand) Sensor ・ Geomagnetic sensor that detects geomagnetism
プロセッサ12は、モーションセンサによって検出された情報(例えば、画像、加速度、ジャイロ、及び、地磁気の少なくとも1つ)に基づいて、ユーザUの動きを計算する。
The
ステップS120の後、バイノーラル音処理装置10は、バイノーラル音の補正(S121)を実行する。
具体的には、記憶装置11には、ユーザUの動き毎の補正パラメータが格納されている。
プロセッサ12は、ステップS120で計算した動きに対応する補正パラメータを用いて、バイノーラル音の音声特性を補正する。音声特性は、例えば、以下の少なくとも1つを含む。
・周波数(一例として、再生速度)
・音圧
・左右のバイノーラル音の時間差(一例として、位相差)After step S120, the binaural
Specifically, the
The
・ Frequency (as an example, playback speed)
・ Sound pressure ・ Time difference between left and right binaural sounds (for example, phase difference)
ステップS121の後、バイノーラル音処理装置10は、図9と同様に、ステップS102を実行する。
After step S121, the binaural
変形例2によれば、バイノーラル音処理装置10は、ユーザUの動きに応じてバイノーラル音を補正する。これにより、ユーザUに対して、バイノーラル音を聴いている間の動きに応じて、塗布物を使用するときの触感をインタラクティブ且つ能動的に体験させることができる。
また、ユーザUは、自身の動きに応じて最適化されたバイノーラル音を聴くことができる。これにより、バイノーラル音を聴いている間にユーザUが動いたとしても、塗布物を使用するときの触感をユーザUに正しく伝達することができる。
より具体的には、ユーザUが自分の肌を撫でる速度に応じて周波数を補正することにより、肌を撫でる動作に応じたインタラクティブな触感を提示することができる。
ユーザUが自分の肌を撫でる位置及び方向に応じて左右のバイノーラル音の時間差を補正することにより、肌を撫でる位置及び方向に応じたインタラクティブな触感を提示することができる。
ユーザUが自分の肌を撫でる強さに応じて音圧を補正することにより、肌を撫でる強さに応じたインタラクティブな触感を提示することができる。
ユーザUが自分の肌を撫でる際に生じる実際の音の逆位相の音をバイノーラル音に重畳することにより、実際の音が打ち消されるので、触感のみに対応するバイノーラル音を提示することができる。According to the second modification, the binaural
In addition, the user U can listen to the binaural sound optimized according to his / her movement. As a result, even if the user U moves while listening to the binaural sound, the tactile sensation when using the coating material can be correctly transmitted to the user U.
More specifically, by correcting the frequency according to the speed at which the user U strokes his / her skin, it is possible to present an interactive tactile sensation according to the action of stroking the skin.
By correcting the time difference between the left and right binaural sounds according to the position and direction of the user U stroking his / her skin, it is possible to present an interactive tactile sensation according to the position and direction of stroking the skin.
By correcting the sound pressure according to the strength with which the user U strokes his / her skin, it is possible to present an interactive tactile sensation according to the strength with which the user U strokes his / her skin.
By superimposing the sound of the opposite phase of the actual sound generated when the user U strokes his / her skin on the binaural sound, the actual sound is canceled, so that the binaural sound corresponding only to the tactile sensation can be presented.
(5−3)変形例3
変形例3について説明する。変形例3は、ユーザUの環境に応じて最適化されたバイノーラル音を出力する例である。(5-3)
(5−3−1)変形例3の概要
変形例3の概要について説明する。図13は、変形例3の概要の説明図である。(5-3-1) Outline of Modified Example 3 An outline of Modified Example 3 will be described. FIG. 13 is an explanatory diagram of an outline of the modified example 3.
図13に示すように、音声出力装置20から出力されるバイノーラル音を聴いている間に、ユーザUの環境(つまり、バイノーラル音の再生環境)に関する環境情報に応じて、バイノーラル音処理装置10は、バイノーラル音を補正する。
音声出力装置20は、バイノーラル音処理装置10によって補正されたバイノーラル音を出力する。As shown in FIG. 13, while listening to the binaural sound output from the
The
(5−3−2)情報処理
変形例3の情報処理について説明する。図14は、変形例3の情報処理のフローチャートである。(5-3-2) Information processing The information processing of the modified example 3 will be described. FIG. 14 is a flowchart of information processing of the third modification.
図14に示すように、バイノーラル音処理装置10は、図9と同様に、ステップS100〜S101を実行する。
As shown in FIG. 14, the binaural
ステップS101の後、バイノーラル音処理装置10は、環境情報の取得(S130)を実行する。
具体的には、バイノーラル音処理装置10は、ユーザUが存在する環境に関する環境情報を検出するように構成された環境センサ(不図示)に接続される。センサは、例えば、以下の少なくとも1つを含む。
・温度を検出する温度センサ
・湿度を検出する湿度センサ
・ユーザUが曝露する紫外線レベルを検出するセンサAfter step S101, the binaural
Specifically, the binaural
-Temperature sensor that detects temperature-Humidity sensor that detects humidity-Sensor that detects the level of ultraviolet rays exposed by user U
プロセッサ12は、入出力インタフェース13を介して、環境センサによって検出された環境情報を取得する。
The
ステップS130の後、バイノーラル音処理装置10は、バイノーラル音の補正(S131)を実行する。
具体的には、記憶装置11には、環境情報毎の補正パラメータが格納されている。
プロセッサ12は、ステップS130で取得した環境情報に対応する補正パラメータを用いて、バイノーラル音の音声特性を補正する。音声特性は、例えば、以下の少なくとも1つを含む。
・周波数(一例として、再生速度)
・音圧
・左右のバイノーラル音の時間差(一例として、位相差)After step S130, the binaural
Specifically, the
The
・ Frequency (as an example, playback speed)
・ Sound pressure ・ Time difference between left and right binaural sounds (for example, phase difference)
ステップS131の後、バイノーラル音処理装置10は、図9と同様に、ステップS102を実行する。
After step S131, the binaural
変形例3によれば、バイノーラル音処理装置10は、ユーザUが存在する環境(つまり、バイノーラル音の再生環境)に応じてバイノーラル音を補正する。これより、ユーザUに対して、環境に応じた触感を体験させることができる。
According to the third modification, the binaural
(5−4)変形例4
変形例4について説明する。変形例4は、塗布物に関するコンテンツに合わせてバイノーラル音を出力する例である。(5-4) Modification 4
A modification 4 will be described. Modification 4 is an example of outputting a binaural sound according to the content related to the coated material.
(5−4−1)変形例4の概要
変形例4の概要について説明する。図15は、変形例4の概要の説明図である。(5-4-1) Outline of Deformation Example 4 An outline of Deformation Example 4 will be described. FIG. 15 is an explanatory diagram of an outline of the modified example 4.
図4に示すように、塗布物情報データベースには、塗布物IDと、バイノーラル音源ファイルと、コンテンツファイルと、が関連付けて記憶されている。
図15に示すように、バイノーラル音処理装置10は、コンテンツ(例えば、ユーザUが指定した画像コンテンツ)が選択されると、選択されたコンテンツに対応するコンテンツファイルに関連付けられたバイノーラル音源ファイルを開くことにより、当該バイノーラル音源ファイルに対応する音声信号を生成する。
音声出力装置20は、バイノーラル音処理装置10によって生成された音声信号に基づいて、バイノーラル音を出力する。As shown in FIG. 4, the coating material information database stores the coating material ID, the binaural sound source file, and the content file in association with each other.
As shown in FIG. 15, when the content (for example, the image content specified by the user U) is selected, the binaural
The
(5−4−2)情報処理
変形例4の情報処理について説明する。図16は、変形例4の情報処理のフローチャートである。図17は、図16の情報処理において表示される画面例を示す図である。(5-4-2) Information processing The information processing of the modified example 4 will be described. FIG. 16 is a flowchart of information processing of the modified example 4. FIG. 17 is a diagram showing an example of a screen displayed in the information processing of FIG.
図16に示すように、バイノーラル音処理装置10は、コンテンツの指定の受付(S130)を実行する。
具体的には、プロセッサ12は、画面P130(図17)をディスプレイに表示する。As shown in FIG. 16, the binaural
Specifically, the
画面P130は、操作オブジェクトB130と、フィールドオブジェクトF130と、を含む。
フィールドオブジェクトF130は、コンテンツファイルのファイル名を指定するためのユーザ指示を受け付けるオブジェクトである。
操作オブジェクトB130は、フィールドオブジェクトF130に指定されたファイル名を確定させるためのユーザ指示を受け付けるオブジェクトである。The screen P130 includes an operation object B130 and a field object F130.
The field object F130 is an object that receives a user instruction for designating a file name of the content file.
The operation object B130 is an object that receives a user instruction for fixing the file name specified in the field object F130.
ユーザUがフィールドオブジェクトF130に任意のファイル名を指定し、且つ、操作オブジェクトB130を操作すると、プロセッサ12は、フィールドオブジェクトF130に指定されたファイル名を取得する。
When the user U specifies an arbitrary file name for the field object F130 and operates the operation object B130, the
ステップS130の後、バイノーラル音処理装置10は、バイノーラル音源の選択(S131)を実行する。
具体的には、プロセッサ12は、塗布物情報データベース(図4)を参照して、ステップS130で取得したファイル名に対応するコンテンツファイルに関連付けられたバイノーラル音源ファイルを読み出す。After step S130, the binaural
Specifically, the
ステップS131の後、バイノーラル音処理装置10は、コンテンツ及びバイノーラル音の再生(S132)を実行する。
具体的には、プロセッサ12は、ステップS130で取得したファイル名に対応するコンテンツファイルを開くことにより、画面P131(図16)をディスプレイに表示する。After step S131, the binaural
Specifically, the
画面P131は、表示オブジェクトA131を含む。
表示オブジェクトA131には、当該コンテンツファイルに対応するコンテンツ(例えば、塗布物のプロモーション動画)が再生される。The screen P131 includes the display object A131.
The display object A131 reproduces the content corresponding to the content file (for example, a promotional movie of the coating material).
プロセッサ12は、表示オブジェクトA131で再生されたコンテンツと同期するように、ステップS131で読み出したバイノーラル音源ファイルに記録されたバイノーラル音の音声信号を生成する。
プロセッサ12は、生成した音声信号を音声出力装置20に送信する。
音声出力装置20は、プロセッサ12から送信された音声信号に基づいて、バイノーラル音を出力する。The
The
The
変形例4によれば、バイノーラル音処理装置10は、ユーザUによって指定されたコンテンツと同期して、バイノーラル音を提示する。これにより、ユーザUに対して、所望のコンテンツを提示しながら、当該コンテンツで紹介される塗布物を使用したときの触感を体験させることができる。
According to the fourth modification, the binaural
なお、変形例4では、バイノーラル音処理装置10は、ステップS130において、CGコンテンツの指定を受け付けた場合、ステップS132において、ユーザ指示に応じてCGコンテンツを変化させ、且つ、変化後のCGコンテンツに応じたバイノーラル音を再生してもよい。
In the fourth modification, when the binaural
一例として、メーキャップのプロフェッショナルがユーザUの顔の画像に対して塗布物を塗布するというシナリオのCGコンテンツが指定された場合、ユーザUは、バイノーラル音処理装置10に対して、以下の少なくとも1つのユーザ指示を与えることができる。
・塗布物を塗布すべき部位(全部又は一部)を指定するための指示
・塗布物の塗布方法(例えば、薄塗り又は厚塗り)を指定するための指示
プロセッサ12は、ユーザ指示に応じて、ディスプレイに表示したCGコンテンツを変化させ、且つ、変化後のCGコンテンツに応じてバイノーラル音源情報も変化させる。As an example, when the CG content of the scenario in which the makeup professional applies the coating material to the image of the user U's face is specified, the user U has the following at least one of the following for the binaural
-Instruction for designating the part (all or part) to which the coating material should be applied-Instruction for specifying the coating method (for example, thin coating or thick coating) of the coating material The
この場合、バイノーラル音処理装置10は、ユーザ指示に応じたCGコンテンツ及びバイノーラル音を提示する。これにより、ユーザUに対して、CGコンテンツを体験している間のユーザ指示に応じて、塗布物を使用するときの触感をインタラクティブ且つ能動的に体験させることができる。
In this case, the binaural
(5−5)変形例5
変形例5について説明する。変形例5は、バイノーラル音の再生中に、塗布物の成分の経時的変化に合わせてバイノーラル音を補正する例である。(5-5) Modification 5
A modified example 5 will be described. Modification 5 is an example in which the binaural sound is corrected according to the time-dependent change of the components of the coating material during the reproduction of the binaural sound.
(5−5−1)変形例5の概要
変形例5の概要について説明する。図18は、変形例5の概要の説明図である。(5-5-1) Outline of Modified Example 5 An outline of Modified Example 5 will be described. FIG. 18 is an explanatory diagram of an outline of the modified example 5.
図18に示すように、音声出力装置20から出力されるバイノーラル音を聴いている時間の経過に応じて、バイノーラル音処理装置10は、バイノーラル音を補正する。
音声出力装置20は、バイノーラル音処理装置10によって補正されたバイノーラル音を出力する。As shown in FIG. 18, the binaural
The
(5−5−2)情報処理
変形例5の情報処理について説明する。図19は、変形例5の情報処理のフローチャートである。(5-5-2) Information Processing The information processing of the modified example 5 will be described. FIG. 19 is a flowchart of information processing of the modified example 5.
図19に示すように、バイノーラル音処理装置10は、図9と同様に、ステップS100〜S101を実行する。
As shown in FIG. 19, the binaural
ステップS101の後、バイノーラル音処理装置10は、バイノーラル音の補正(S140)を実行する。
具体的には、記憶装置11には、塗布物ID毎に、時間の経過と共に変化する触感に対応する補正パラメータが格納されている。
プロセッサ12は、ステップS100で特定された塗布物IDに関連付けられた補正パラメータを特定する。
プロセッサ12は、バイノーラル音の再生時間に基づいて、特定した補正パラメータを用いて、バイノーラル音の音声特性を補正する。音声特性は、例えば、以下の少なくとも1つを含む。
・周波数(一例として、再生速度)
・音圧
・左右のバイノーラル音の時間差(一例として、位相差)After step S101, the binaural
Specifically, the
The
The
・ Frequency (as an example, playback speed)
・ Sound pressure ・ Time difference between left and right binaural sounds (for example, phase difference)
ステップS131の後、バイノーラル音処理装置10は、図9と同様に、ステップS102を実行する。
After step S131, the binaural
変形例5によれば、バイノーラル音処理装置10は、再生時間に応じてバイノーラル音を補正する。これにより、ユーザUに対して、塗布物を使用するときの触感の時間変化を体験させることができる。
According to the modification 5, the binaural
(6)本実施形態の小括
本実施形態について小括する。(6) Summary of the present embodiment A summary of the present embodiment will be given.
本実施形態の第1態様は、
複数の塗布物のそれぞれを識別する塗布物識別情報(例えば、塗布物ID)と、各塗布物を肌に塗布したときの音がバイノーラル録音されたバイノーラル音源情報(例えば、バイノーラル音源ファイル)と、を関連付けて記憶する手段(例えば、記憶装置11)を備え、
複数の塗布物の中から少なくとも1つの塗布物を識別する塗布物識別情報を決定する手段(例えば、ステップS100の処理を実行するプロセッサ12)を備え、
決定された塗布物識別情報に関連付けられたバイノーラル音源情報を選択する手段(例えば、ステップS101の処理を実行するプロセッサ12)を備え、
選択されたバイノーラル音源情報を出力する手段(例えば、ステップS102の処理を実行するプロセッサ12)を備える、
バイノーラル音処理装置10である。The first aspect of this embodiment is
Binaural sound source information (for example, binaural sound source file) in which the sound when each coating material is applied to the skin is binaurally recorded, and coating material identification information (for example, coating material ID) that identifies each of the plurality of coating materials. A means for associating and storing (for example, a storage device 11) is provided.
A means for determining coating material identification information for identifying at least one coating material from a plurality of coating materials (for example, a
A means for selecting binaural sound source information associated with the determined coating material identification information (for example, a
A means for outputting the selected binaural sound source information (for example, a
The binaural
第1態様によれば、バイノーラル音処理装置10は、塗布物に対応するバイノーラル音をユーザUに提示する。これにより、塗布物を使用する前に、塗布物の触感をユーザU(例えば、塗布物の消費者)に体験させることができる。
According to the first aspect, the binaural
本実施形態の第2態様は、
決定する手段は、操作者の指示に応じて、塗布物識別情報を決定する、
バイノーラル音処理装置10である。The second aspect of this embodiment is
The means for determining the coating material identification information is determined according to the instruction of the operator.
The binaural
第2態様によれば、バイノーラル音処理装置10は、所望の塗布物に対応するバイノーラル音をユーザUに提示する。これにより、塗布物を使用する前に、所望の塗布物の触感をユーザU(例えば、塗布物の消費者)に体験させることができる。
According to the second aspect, the binaural
バイノーラル音源情報と、ユーザの属性に関するユーザ属性情報と、を関連付けて記憶する手段を備え、
ユーザの属性に関するユーザ属性情報(例えば、ステップS110の処理を実行するプロセッサ12)を取得する手段を備え、
選択する手段は、決定された塗布物識別情報、及び、取得されたユーザ属性情報に関連付けられたバイノーラル音源情報を選択する、
バイノーラル音処理装置10である。A means for associating and storing binaural sound source information and user attribute information related to user attributes is provided.
A means for acquiring user attribute information regarding user attributes (for example, a
The means for selecting is to select the determined coating material identification information and the binaural sound source information associated with the acquired user attribute information.
The binaural
第3態様によれば、バイノーラル音処理装置10は、ユーザUのユーザ属性に応じたバイノーラル音をユーザUに提示する。これにより、ユーザUに適した塗布物の触感をユーザU(例えば、塗布物の消費者)に体験させることができる。
According to the third aspect, the binaural
本実施形態の第4態様は、
ユーザに対して使用が推奨される塗布物を予測する手段(例えば、ステップS111の処理を実行するプロセッサ12)を備え、
塗布物識別情報を決定する手段は、決定された塗布物の塗布物識別情報を取得する、バイノーラル音処理装置10である。The fourth aspect of this embodiment is
A means for predicting a coating material recommended for use by the user (for example, a
The means for determining the coating material identification information is the binaural
第4態様によれば、バイノーラル音処理装置10は、ユーザUに対して使用が推奨される塗布物のバイノーラル音をユーザUに提示する。これにより、ユーザUに対して使用が推奨される塗布物の触感をユーザU(例えば、塗布物の消費者)に体験させることができる。
According to the fourth aspect, the binaural
本実施形態の第5態様は、
塗布物を決定する手段は、ユーザの肌の状態に基づいて、塗布物を決定する、
バイノーラル音処理装置10である。A fifth aspect of this embodiment is
The means for determining the application is to determine the application based on the condition of the user's skin.
The binaural
第5態様によれば、バイノーラル音処理装置10は、ユーザUの肌状態に基づいて使用が推奨される塗布物のバイノーラル音をユーザUに提示する。これにより、ユーザUの肌状態に応じた塗布物の触感をユーザU(例えば、塗布物の消費者)に体験させることができる。
According to the fifth aspect, the binaural
本実施形態の第6態様は、
ユーザの行動履歴に基づいて、ユーザに対して使用が推奨される塗布物を予測する手段(例えば、ステップS111の処理を実行するプロセッサ12)を備え、
選択する手段は、予測された塗布物の塗布物識別情報に関連付けられたバイノーラル音源情報を選択する、
バイノーラル音処理装置10である。The sixth aspect of this embodiment is
A means for predicting a coating material recommended for use by the user based on the user's behavior history (for example, a
The means of selection is to select the binaural sound source information associated with the predicted coating identification information of the coating.
The binaural
第6態様によれば、バイノーラル音処理装置10は、ユーザUの行動履歴に基づいて使用が推奨される塗布物のバイノーラル音をユーザUに提示する。これにより、ユーザUの行動の傾向に応じた塗布物の触感をユーザU(例えば、塗布物の消費者)に体験させることができる。
According to the sixth aspect, the binaural
本実施形態の第7態様は、
行動履歴は、ユーザがアクセスしたウェブサイトの閲覧履歴、及び、ユーザが購入した塗布物の購入履歴の少なくとも1つである、
バイノーラル音処理装置10である。The seventh aspect of this embodiment is
The behavior history is at least one of the browsing history of the website accessed by the user and the purchase history of the coating material purchased by the user.
The binaural
第7態様によれば、バイノーラル音処理装置10は、ユーザUのウェブサイトの閲覧履歴、及び、ユーザが購入した塗布物の購入履歴の少なくとも1つに基づいて使用が推奨される塗布物のバイノーラル音を提示する。これにより、ユーザUの行動の傾向及び購買の傾向の少なくとも1つに応じた塗布物の触感をユーザU(例えば、塗布物の消費者)に体験させることができる。
According to the seventh aspect, the binaural
本実施形態の第8態様は、
塗布物を使用するユーザの動きに関する動き情報を取得する手段(例えば、ステップS120の処理を実行するプロセッサ12)を備え、
取得された動き情報に応じて、選択されたバイノーラル音源情報を補正する手段(例えば、ステップS121の処理を実行するプロセッサ12)を備え、
出力する手段は、補正されたバイノーラル音源情報を出力する、
バイノーラル音処理装置10である。The eighth aspect of this embodiment is
A means for acquiring motion information regarding the motion of a user who uses the coating material (for example, a
A means for correcting the selected binaural sound source information according to the acquired motion information (for example, a
The output means outputs the corrected binaural sound source information,
The binaural
第8態様によれば、バイノーラル音処理装置10は、バイノーラル音を聴いている間のユーザUの動きに応じてバイノーラル音を補正する。これにより、ユーザUに対して、塗布物を使用するときの触感をインタラクティブ且つ能動的に体験させることができる。
また、バイノーラル音を聴いている間にユーザUが動いたとしても、塗布物を使用するときの触感をユーザUに正しく伝達することができる。According to the eighth aspect, the binaural
Further, even if the user U moves while listening to the binaural sound, the tactile sensation when using the coating material can be correctly transmitted to the user U.
本実施形態の第9態様は、
動き情報を取得する手段は、イメージセンサ、加速度センサ、ジャイロセンサ、及び、地磁気センサの少なくとも1つから、動き情報を取得する、
バイノーラル音処理装置10である。The ninth aspect of this embodiment is
The means for acquiring motion information is to acquire motion information from at least one of an image sensor, an acceleration sensor, a gyro sensor, and a geomagnetic sensor.
The binaural
第9態様によれば、画像、加速度、角加速度、及び、地磁気の少なくとも1つから特定される動き情報に応じて、塗布物を使用するときの触感をユーザUに正しく伝達することができる。 According to the ninth aspect, the tactile sensation when using the coating material can be correctly transmitted to the user U according to the motion information specified from at least one of the image, the acceleration, the angular acceleration, and the geomagnetism.
本実施形態の第10態様は、
ユーザの環境に関する環境情報を取得する手段(例えば、ステップS130の処理を実行するプロセッサ12)を備え、
取得された環境情報に応じて、選択されたバイノーラル音源情報を補正する手段(例えば、ステップS131の処理を実行するプロセッサ12)を備え、
出力する手段は、補正されたバイノーラル音源情報を出力する、
バイノーラル音処理装置10である。The tenth aspect of this embodiment is
A means for acquiring environmental information regarding the user's environment (for example, a
A means for correcting the selected binaural sound source information according to the acquired environmental information (for example, the
The output means outputs the corrected binaural sound source information,
The binaural
第10態様によれば、バイノーラル音処理装置10は、ユーザUが存在する環境(つまり、バイノーラル音の再生環境)に応じて、バイノーラル音を補正する。これにより、ユーザUに対して、環境に応じた触感を体験させることができる。
According to the tenth aspect, the binaural
本実施形態の第11態様は、
塗布物に関する動画コンテンツと、バイノーラル音源情報と、を関連付けて記憶する手段を備え、
選択する手段は、再生される動画コンテンツに関連付けられたバイノーラル音源情報を選択し、
動画コンテンツの再生時間に応じて、バイノーラル音源情報を補正する、
バイノーラル音処理装置10である。The eleventh aspect of this embodiment is
A means for associating and storing video content related to a coating material and binaural sound source information is provided.
The means of selection is to select the binaural sound source information associated with the video content to be played.
Correct the binaural sound source information according to the playback time of the video content,
The binaural
第11態様によれば、バイノーラル音処理装置10は、ユーザUによって指定されたコンテンツと同期してバイノーラル音を提示する。これにより、ユーザUに対して、所望のコンテンツを提示しながら、当該コンテンツで紹介される塗布物を使用したときの触感を体験させることができる。
According to the eleventh aspect, the binaural
本実施形態の第12態様は、
塗布物に関するCGコンテンツと、バイノーラル音源情報と、を関連付けて記憶する手段を備え、
選択する手段は、再生されるCGコンテンツに関連付けられたバイノーラル音源情報を選択し、
CGコンテンツの再生中に受け付けられた操作者の指示に応じて、バイノーラル音源情報を変化させる、
バイノーラル音処理装置10である。The twelfth aspect of this embodiment is
A means for associating and storing CG contents related to a coating material and binaural sound source information is provided.
The means of selection is to select the binaural sound source information associated with the CG content to be played.
The binaural sound source information is changed according to the operator's instruction received during the playback of the CG content.
The binaural
第12態様によれば、ユーザUに対して、CGコンテンツを体験している間に与えられた指示(例えば、ユーザ指示)に応じて、塗布物を使用するときの触感をインタラクティブ且つ能動的に体験させることができる。 According to the twelfth aspect, the tactile sensation when using the coating material is interactively and actively given to the user U in response to an instruction (for example, a user instruction) given to the user U while experiencing the CG content. You can experience it.
本実施形態の第13態様は、
各塗布物を人体に塗布したときの組成の時間変化を予測するための予測モデルを参照して、決定された塗布物識別情報によって識別される塗布物の組成の時間変化を予測する手段を備え、
予測された時間変化に基づいて、選択されたバイノーラル音源情報を時間変換する手段を備え、
出力する手段は、時間変換されたバイノーラル音源情報を出力する、
バイノーラル音処理装置10である。The thirteenth aspect of this embodiment is
A means for predicting the time change of the composition of the coating material identified by the determined coating material identification information by referring to a prediction model for predicting the time change of the composition when each coating material is applied to the human body is provided. ,
It has a means to time-convert selected binaural sound source information based on the predicted time change.
The means to output is to output the time-converted binaural sound source information.
The binaural
第13態様によれば、バイノーラル音処理装置10は、再生時間に応じてバイノーラル音を補正する。これにより、ユーザUに対して、塗布物を使用するときの触感の時間変化を体験させることができる。
According to the thirteenth aspect, the binaural
本実施形態の第14態様は、
コンピュータ(例えば、プロセッサ12)に、上記の何れかの各手段を実現させるためのプログラムである。The fourteenth aspect of this embodiment is
It is a program for realizing each of the above-mentioned means in a computer (for example, a processor 12).
(7)その他の変形例 (7) Other modifications
記憶装置11は、ネットワークNWを介して、バイノーラル音処理装置10と接続されてもよい。記憶装置31は、ネットワークNWを介して、サーバ30と接続されてもよい。
The
バイノーラル音処理装置10及び音声出力装置20は、一体に構成されてもよい。この場合、バイノーラル音処理装置10及び音声出力装置20は、有線通信又は無線通信ではなく、電気回路によって接続される。
The binaural
バイノーラル音処理装置10が実行するステップの少なくとも一部は、サーバ30が実行してもよい。この場合、バイノーラル音処理装置10は、サーバ30に対して、情報処理のリクエストを送信する。
サーバ30は、バイノーラル音処理装置10から送信されたリクエストに応じた情報処理を実行し、かつ、当該情報処理の結果を含むレスポンスをバイノーラル音処理装置10に送信する。
バイノーラル音処理装置10は、サーバ30から送信されたレスポンスに含まれる情報処理の結果に基づいて、音声出力装置20に音声信号を送信する。At least a part of the steps performed by the binaural
The
The binaural
記憶装置11に記憶されるデータベースの少なくとも1つは、記憶装置31に記憶されてもよい。
At least one of the databases stored in the
以上、本発明の実施形態について詳細に説明したが、本発明の範囲は上記の実施形態に限定されない。また、上記の実施形態は、本発明の主旨を逸脱しない範囲において、種々の改良や変更が可能である。また、上記の実施形態及び変形例は、組合せ可能である。 Although the embodiments of the present invention have been described in detail above, the scope of the present invention is not limited to the above embodiments. Further, the above-described embodiment can be improved or modified in various ways without departing from the spirit of the present invention. Moreover, the above-described embodiment and modification can be combined.
1 :音声処理システム
10 :バイノーラル音処理装置
11 :記憶装置
12 :プロセッサ
13 :入出力インタフェース
14 :通信インタフェース
20 :音声出力装置
30 :サーバ
31 :記憶装置
32 :プロセッサ
33 :入出力インタフェース
34 :通信インタフェース1: Voice processing system 10: Binoral sound processing device 11: Storage device 12: Processor 13: Input / output interface 14: Communication interface 20: Voice output device 30: Server 31: Storage device 32: Processor 33: Input / output interface 34: Communication interface
Claims (14)
複数の塗布物の中から少なくとも1つの塗布物を識別する塗布物識別情報を決定する手段を備え、
前記決定された塗布物識別情報に関連付けられたバイノーラル音源情報を選択する手段を備え、
前記選択されたバイノーラル音源情報を出力する手段を備える、
バイノーラル音処理装置。It is provided with a means for associating and storing the coating material identification information for identifying each of the plurality of coating materials and the binaural sound source information in which the sound when each coating material is applied to the skin is recorded binaurally.
A means for determining coating material identification information for identifying at least one coating material from a plurality of coating materials is provided.
A means for selecting binaural sound source information associated with the determined coating material identification information is provided.
A means for outputting the selected binaural sound source information is provided.
Binaural sound processing device.
請求項1に
記載のバイノーラル音処理装置。The determining means determines the coating identification information according to the instruction of the operator.
The binaural sound processing apparatus according to claim 1.
ユーザの属性に関するユーザ属性情報を取得する手段を備え、
前記選択する手段は、前記決定された塗布物識別情報、及び、前記取得されたユーザ属性情報に関連付けられたバイノーラル音源情報を選択する、
請求項1に記載のバイノーラル音処理装置。A means for associating and storing the binaural sound source information and the user attribute information regarding the user's attribute is provided.
It has a means to acquire user attribute information about user attributes.
The selecting means selects the determined coating material identification information and the binaural sound source information associated with the acquired user attribute information.
The binaural sound processing apparatus according to claim 1.
前記塗布物識別情報を決定する手段は、前記決定された塗布物の塗布物識別情報を取得する、
請求項3に記載のバイノーラル音処理装置。A means for determining a coating recommended for use by the user.
The means for determining the coating material identification information acquires the coating material identification information of the determined coating material.
The binaural sound processing apparatus according to claim 3.
請求項4に記載のバイノーラル音処理装置。The means for determining the coating material determines the coating material based on the skin condition of the user.
The binaural sound processing apparatus according to claim 4.
前記選択する手段は、前記予測された塗布物の塗布物識別情報に関連付けられたバイノーラル音源情報を選択する、
請求項1〜5の何れかに記載のバイノーラル音処理装置。A means for predicting a coating material recommended for use by the user based on the user's behavior history.
The selecting means selects binaural sound source information associated with the predicted coating identification information of the coating.
The binaural sound processing apparatus according to any one of claims 1 to 5.
請求項6に記載のバイノーラル音処理装置。The action history is at least one of the browsing history of the website accessed by the user and the purchase history of the coating material purchased by the user.
The binaural sound processing apparatus according to claim 6.
前記取得された動き情報に応じて、前記選択されたバイノーラル音源情報を補正する手段を備え、
前記出力する手段は、前記補正されたバイノーラル音源情報を出力する、
請求項1〜7の何れかに記載のバイノーラル音処理装置。Equipped with a means to acquire movement information regarding the movement of the user who uses the coating material,
A means for correcting the selected binaural sound source information according to the acquired motion information is provided.
The output means outputs the corrected binaural sound source information.
The binaural sound processing apparatus according to any one of claims 1 to 7.
請求項8に記載のバイノーラル音処理装置。The means for acquiring the motion information acquires the motion information from at least one of an image sensor, an acceleration sensor, a gyro sensor, and a geomagnetic sensor.
The binaural sound processing apparatus according to claim 8.
前記取得された環境情報に応じて、前記選択されたバイノーラル音源情報を補正する手段を備え、
前記出力する手段は、前記補正されたバイノーラル音源情報を出力する、
請求項1〜9の何れかに記載のバイノーラル音処理装置。Equipped with a means to obtain environmental information about the user's environment
A means for correcting the selected binaural sound source information according to the acquired environmental information is provided.
The output means outputs the corrected binaural sound source information.
The binaural sound processing apparatus according to any one of claims 1 to 9.
前記選択する手段は、再生される動画コンテンツに関連付けられたバイノーラル音源情報を選択し、
前記動画コンテンツの再生時間に応じて、前記バイノーラル音源情報を補正する、
請求項1〜10の何れかに記載にバイノーラル音処理装置。A means for associating and storing the moving image content related to the coating material and the binaural sound source information is provided.
The selection means selects binaural sound source information associated with the video content to be played.
The binaural sound source information is corrected according to the playback time of the moving image content.
The binaural sound processing apparatus according to any one of claims 1 to 10.
前記選択する手段は、再生されるCGコンテンツに関連付けられたバイノーラル音源情報を選択し、
前記CGコンテンツの再生中に受け付けられた操作者の指示に応じて、前記バイノーラル音源情報を変化させる、
請求項1〜11の何れかに記載にバイノーラル音処理装置。A means for associating and storing the CG (Computer Graphics) content related to the coating material and the binaural sound source information is provided.
The selection means selects the binaural sound source information associated with the CG content to be played.
The binaural sound source information is changed according to the instruction of the operator received during the reproduction of the CG content.
The binaural sound processing apparatus according to any one of claims 1 to 11.
前記予測された時間変化に基づいて、前記選択されたバイノーラル音源情報を時間変換する手段を備え、
前記出力する手段は、前記時間変換されたバイノーラル音源情報を出力する、
請求項1〜12の何れかに記載のバイノーラル音処理装置。A means for predicting the time change of the composition of the coating material identified by the determined coating material identification information by referring to a prediction model for predicting the time change of the composition when each coating material is applied to the human body. Prepare,
A means for time-converting the selected binaural sound source information based on the predicted time change is provided.
The output means outputs the time-converted binaural sound source information.
The binaural sound processing apparatus according to any one of claims 1 to 12.
A program for causing a computer to realize each of the means according to any one of claims 1 to 13.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018101358 | 2018-05-28 | ||
JP2018101358 | 2018-05-28 | ||
PCT/JP2019/016469 WO2019230236A1 (en) | 2018-05-28 | 2019-04-17 | Binaural sound processing apparatus, information processing apparatus, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019230236A1 true JPWO2019230236A1 (en) | 2021-06-10 |
JP7195314B2 JP7195314B2 (en) | 2022-12-23 |
Family
ID=68697562
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020521784A Active JP7195314B2 (en) | 2018-05-28 | 2019-04-17 | Binaural sound processing device, information processing device, and program |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP7195314B2 (en) |
TW (1) | TW202005417A (en) |
WO (1) | WO2019230236A1 (en) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005070721A (en) * | 2003-08-27 | 2005-03-17 | Akihiko Shigeta | Toilet set with sound output function |
JP2016100877A (en) * | 2014-11-26 | 2016-05-30 | 日本放送協会 | Three-dimensional acoustic reproduction device and program |
-
2019
- 2019-04-17 JP JP2020521784A patent/JP7195314B2/en active Active
- 2019-04-17 WO PCT/JP2019/016469 patent/WO2019230236A1/en active Application Filing
- 2019-05-15 TW TW108116683A patent/TW202005417A/en unknown
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005070721A (en) * | 2003-08-27 | 2005-03-17 | Akihiko Shigeta | Toilet set with sound output function |
JP2016100877A (en) * | 2014-11-26 | 2016-05-30 | 日本放送協会 | Three-dimensional acoustic reproduction device and program |
Also Published As
Publication number | Publication date |
---|---|
TW202005417A (en) | 2020-01-16 |
WO2019230236A1 (en) | 2019-12-05 |
JP7195314B2 (en) | 2022-12-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR20170015122A (en) | Crowd-based haptics | |
WO2021008166A1 (en) | Method and apparatus for virtual fitting | |
JP6784499B2 (en) | Decision device, decision method and decision program | |
US11675439B2 (en) | Method and arrangement for handling haptic feedback | |
KR20170104846A (en) | Method and apparatus for analyzing virtual reality content | |
US20090146948A1 (en) | Apparatus for Providing Sensing Information | |
JP2019514127A (en) | Method and apparatus for presenting advertisements in a virtualized environment | |
JP2014179912A (en) | Audibility test provision system and audibility test provision method | |
JP7470040B2 (en) | Information processing device, program, and information processing method | |
JP7195314B2 (en) | Binaural sound processing device, information processing device, and program | |
KR20170105905A (en) | Method and apparatus for analyzing virtual reality content | |
CN113228085A (en) | Information processing device and program | |
JP2019105932A (en) | Information processing device, information processing method, and information processing program | |
Larsson et al. | On the quality of experience: A multi-modal approach to perceptual ego-motion and sensed presence in virtual environments | |
JP7423555B2 (en) | Information processing equipment and programs | |
JP7253325B2 (en) | Information processing device, program, and information processing method | |
CN114341944A (en) | Computer generated reality recorder | |
JP7216084B2 (en) | Information processing device, program, and sensing device | |
Zheleva et al. | An Extensive Integrative Literature Review of Quality of Experience in Virtual Reality | |
BALTEZAREVIĆ | DIGITAL SENSORY MARKETING: APPEALING TO CONSUMERS'SENSES THROUGH DIGITAL TECHNOLOGIES | |
WO2023166721A1 (en) | Information processing apparatus, information processing system, and information processing method | |
Yumurtaci | A theoretical framework for the evaluation of virtual reality technologies prior to use: A biological evolutionary approach based on a modified media naturalness theory | |
Yan et al. | The Effects of Primary Output Design of True Wireless Earbuds on the Wearing Comfort | |
Wąsowicz | Representing Built Environments with Digital Tools: Problems with Human Perception | |
CN117221807A (en) | Audio processing method and device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220222 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221206 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221213 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7195314 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |