JP7017919B2

JP7017919B2 - Information processing equipment, information processing methods and information processing programs

Info

Publication number: JP7017919B2
Application number: JP2017237050A
Authority: JP
Inventors: 潤一安川; 梓角田; 真理亜若林; 優青野
Original assignee: Yahoo Japan Corp
Current assignee: Yahoo Japan Corp
Priority date: 2017-12-11
Filing date: 2017-12-11
Publication date: 2022-02-09
Anticipated expiration: 2037-12-11
Also published as: JP2019105932A

Description

本発明は、情報処理装置、情報処理方法及び情報処理プログラムに関する。 The present invention relates to an information processing apparatus, an information processing method and an information processing program.

従来、ユーザの視野を覆い、両眼視差に基づく仮想現実（ＶＲ：Virtual Reality）空間の映像を提供するＨＭＤ（Head Mounted Device）等により、ＶＲを含む仮想空間上でユーザに対して触覚及び感触を体験させる技術が提供されている。例えば、拡張及び仮想現実アプリケーションのための触覚的に向上されたオブジェクトを生成する技術が知られている。 Conventionally, an HMD (Head Mounted Device) that covers the user's field of view and provides an image of a virtual reality (VR) space based on binocular disparity, etc., gives the user a sense of touch and feel in the virtual space including VR. The technology to experience is provided. For example, techniques are known to generate tactilely enhanced objects for extended and virtual reality applications.

特開２０１６－１２６７７２号公報Japanese Unexamined Patent Publication No. 2016-126772

しかしながら、上記の従来技術では、訴求効果の高いコンテンツを提供することができるとは限らない。例えば、上記の従来技術では、拡張及び仮想現実アプリケーションのための触覚的に向上されたオブジェクトを生成するに過ぎず、訴求効果の高いコンテンツを提供することができるとは限らない。 However, the above-mentioned prior art may not always be able to provide highly appealing content. For example, the prior art described above may only generate tactilely enhanced objects for extended and virtual reality applications and may not always be able to provide highly appealing content.

本願は、上記に鑑みてなされたものであって、訴求効果の高いコンテンツを提供することができる情報処理装置、情報処理方法及び情報処理プログラムを提供することを目的とする。 The present application has been made in view of the above, and an object of the present application is to provide an information processing apparatus, an information processing method, and an information processing program capable of providing highly appealing contents.

本願に係る情報処理装置は、映像によって形成される仮想空間を体験するユーザの行動であって、前記仮想空間に映し出される所定のオブジェクトに対して物理的な変化を及ぼすユーザの行動を検出する検出部と、前記検出部によって検出された結果に基づいて、コンテンツを出力する出力部と、を備えたことを特徴とする。 The information processing device according to the present application is a detection that detects a user's behavior that experiences a virtual space formed by an image and exerts a physical change on a predetermined object projected on the virtual space. It is characterized by including a unit and an output unit that outputs content based on the result detected by the detection unit.

実施形態の一態様によれば、訴求効果の高いコンテンツを提供することができるという効果を奏する。 According to one aspect of the embodiment, there is an effect that content having a high appeal effect can be provided.

図１は、実施形態に係る情報処理装置が実行する出力処理の一例を示す図である。FIG. 1 is a diagram showing an example of output processing executed by the information processing apparatus according to the embodiment. 図２は、実施形態に係る情報処理装置の構成例を示す図である。FIG. 2 is a diagram showing a configuration example of the information processing apparatus according to the embodiment. 図３は、実施形態に係るＶＲ空間構成要素情報記憶部の一例を示す図である。FIG. 3 is a diagram showing an example of a VR space component information storage unit according to an embodiment. 図４は、実施形態に係る広告オブジェクト記憶部の一例を示す図である。FIG. 4 is a diagram showing an example of an advertisement object storage unit according to an embodiment. 図５は、実施形態に係る情報処理装置が実行する出力処理の流れの一例を示すフローチャートである。FIG. 5 is a flowchart showing an example of the flow of output processing executed by the information processing apparatus according to the embodiment. 図６は、変形例に係る情報処理装置が実行する検出処理の一例を示す図である。FIG. 6 is a diagram showing an example of a detection process executed by the information processing apparatus according to the modified example. 図７は、変形例に係る広告オブジェクト記憶部の一例を示す図である。FIG. 7 is a diagram showing an example of an advertisement object storage unit according to a modified example. 図８は、変形例に係る情報処理装置が実行する出力処理の一例を示す図である。FIG. 8 is a diagram showing an example of output processing executed by the information processing apparatus according to the modified example. 図９は、変形例に係る広告オブジェクト記憶部の一例を示す図である。FIG. 9 is a diagram showing an example of an advertisement object storage unit according to a modified example. 図１０は、情報処理装置の機能を実現するコンピュータの一例を示すハードウェア構成図である。FIG. 10 is a hardware configuration diagram showing an example of a computer that realizes the functions of the information processing device.

以下に、本願に係る情報処理装置、情報処理方法及び情報処理プログラムの実施するための形態（以下、「実施形態」と呼ぶ）について図面を参照しつつ詳細に説明する。なお、この実施形態により本願に係る情報処理装置、情報処理方法及び情報処理プログラムが限定されるものではない。また、各実施形態は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。また、以下の各実施形態において同一の部位には同一の符号を付し、重複する説明は省略される。 Hereinafter, an information processing apparatus, an information processing method, and an embodiment for implementing an information processing program (hereinafter referred to as “embodiments”) according to the present application will be described in detail with reference to the drawings. Note that this embodiment does not limit the information processing apparatus, information processing method, and information processing program according to the present application. In addition, each embodiment can be appropriately combined as long as the processing contents do not contradict each other. Further, in each of the following embodiments, the same parts are designated by the same reference numerals, and duplicate explanations are omitted.

〔１．情報処理装置が示す出力処理の一例〕
図１を用いて、実施形態に係る情報処理装置が実行する出力処理の一例について説明する。図１は、実施形態に係る情報処理装置が実行する出力処理の一例を示す図である。図１では、情報処理装置１００により出力処理が実行される例を示す。 [1. An example of output processing shown by an information processing device]
An example of output processing executed by the information processing apparatus according to the embodiment will be described with reference to FIG. FIG. 1 is a diagram showing an example of output processing executed by the information processing apparatus according to the embodiment. FIG. 1 shows an example in which output processing is executed by the information processing apparatus 100.

図１に示すように、情報処理システム１は、広告主端末１０と、ＨＭＤ２０と、情報処理装置１００とを含む。広告主端末１０、ＨＭＤ２０及び情報処理装置１００は、図示しない所定の通信網を介して、有線又は無線により通信可能に接続される。なお、図１に示す情報処理システム１には、複数台の広告主端末１０や、複数台のＨＭＤ２０や、複数台の情報処理装置１００が含まれてもよい。 As shown in FIG. 1, the information processing system 1 includes an advertiser terminal 10, an HMD 20, and an information processing device 100. The advertiser terminal 10, the HMD 20, and the information processing apparatus 100 are communicably connected by wire or wirelessly via a predetermined communication network (not shown). The information processing system 1 shown in FIG. 1 may include a plurality of advertiser terminals 10, a plurality of HMDs 20, and a plurality of information processing devices 100.

広告主端末１０は、広告主によって利用される情報処理装置である。例えば、広告主端末１０は、デスクトップ型ＰＣ（Personal Computer）や、ノート型ＰＣや、タブレット端末や、携帯電話機や、ＰＤＡ（Personal Digital Assistant）等である。また、広告主端末１０は、広告主による操作に従って、広告オブジェクトを情報処理装置１００に入稿する。 The advertiser terminal 10 is an information processing device used by the advertiser. For example, the advertiser terminal 10 is a desktop PC (Personal Computer), a notebook PC, a tablet terminal, a mobile phone, a PDA (Personal Digital Assistant), or the like. Further, the advertiser terminal 10 submits the advertisement object to the information processing apparatus 100 according to the operation by the advertiser.

なお、広告主は、広告オブジェクトの入稿を代理店に依頼する場合がある。この場合、情報処理装置１００に広告オブジェクトを入稿するのは代理店となる。以下では、「広告主」といった表記は、広告主だけでなく代理店を含む概念であり、「広告主端末」といった表記は、広告主端末１０だけでなく代理店によって利用される代理店装置を含む概念であるものとする。 In addition, the advertiser may request the agency to upload the advertisement object. In this case, it is the agency that submits the advertisement object to the information processing device 100. In the following, the notation "advertiser" is a concept that includes not only the advertiser but also the agency, and the notation "advertiser terminal" refers to the agency device used not only by the advertiser terminal 10 but also by the agency. It shall be a concept that includes.

ＨＭＤ２０は、ユーザが装着するウェアラブルデバイスであり、ユーザの視野内に情報処理装置１００から出力される静止画像や動画像といった各種の映像を表示する。このことにより、ＨＭＤ２０は、ユーザがあたかもＶＲ空間内に居住するといった感覚を提供し、ユーザにＶＲ空間を体験させる。また、ＨＭＤ２０は、情報処理装置１００から出力された音声やＢＧＭ（Background Music）等を出力する機能を有していてもよい。 The HMD 20 is a wearable device worn by the user, and displays various images such as still images and moving images output from the information processing apparatus 100 in the user's field of view. As a result, the HMD 20 provides a feeling that the user lives in the VR space, and allows the user to experience the VR space. Further, the HMD 20 may have a function of outputting voice, BGM (Background Music), or the like output from the information processing apparatus 100.

例えば、ＨＭＤ２０は、情報処理装置１００によって出力されたＶＲ空間の映像と音声及びＢＧＭとを組み合わせたＶＲ空間の映像をユーザに提供する。また、例えば、ＨＭＤ２０は、ユーザの向きが変更した場合に、ユーザが変更した向きに対応するＶＲ空間の映像をユーザに提供する。なお、ＨＭＤ２０の処理は、例えば、３Ｄ（Dimension）モデルの自動変形等に関する各種の周知技術や、３Ｄモデルのレンダリングに関する各種の周知技術により実現可能である。 For example, the HMD 20 provides a user with a VR space video that is a combination of a VR space video output by the information processing apparatus 100, audio, and BGM. Further, for example, when the orientation of the user is changed, the HMD 20 provides the user with an image of the VR space corresponding to the orientation changed by the user. The processing of the HMD 20 can be realized by, for example, various well-known techniques related to automatic deformation of a 3D (Dimension) model and various well-known techniques related to rendering of a 3D model.

情報処理装置１００は、ＨＭＤ２０にＶＲ空間の映像を出力する情報処理装置であり、例えば、サーバ装置やクラウドシステム、ゲーム機等により実現される。具体的には、情報処理装置１００は、ユーザとオブジェクトとの接触態様に基づいて、ＶＲ空間内に広告オブジェクトを含む映像をＨＭＤ２０に出力する。 The information processing device 100 is an information processing device that outputs an image of VR space to the HMD 20, and is realized by, for example, a server device, a cloud system, a game machine, or the like. Specifically, the information processing apparatus 100 outputs a video including an advertising object in the VR space to the HMD 20 based on the contact mode between the user and the object.

以下、図１を用いて、情報処理装置１００による広告オブジェクトの出力処理の一例を流れに沿って説明する。 Hereinafter, an example of the output processing of the advertisement object by the information processing apparatus 100 will be described along the flow with reference to FIG. 1.

まず、図１に示すように、広告主端末１０は、広告主の操作に従って、広告オブジェクトを情報処理装置１００に入稿する（ステップＳ１）。例えば、広告主が、花専門の小売り業者であるとする。この場合、広告主端末１０は、広告オブジェクトとして、花束の料金に関するクーポン等を入稿する。そして、情報処理装置１００は、ＶＲ空間ＶＲ１の映像をＨＭＤ２０に出力する（ステップＳ２）。これにより、ＨＭＤ２０は、例えば、両眼視差に基づくＶＲ空間ＶＲ１であるＶＲ空間内に所定のオブジェクトとして花オブジェクトＯＤ１が配置された映像と音声及びＢＧＭとを組み合わせたＶＲ空間ＶＲ１をユーザに体験させる。この場合、図１の例では、ユーザは、小道の両脇に大きな街路樹が植えられている並木道を歩いている感覚を体験する。 First, as shown in FIG. 1, the advertiser terminal 10 submits an advertisement object to the information processing apparatus 100 according to the operation of the advertiser (step S1). For example, suppose the advertiser is a retailer specializing in flowers. In this case, the advertiser terminal 10 uploads a coupon or the like related to the price of the bouquet as an advertising object. Then, the information processing apparatus 100 outputs the image of the VR space VR1 to the HMD 20 (step S2). Thereby, for example, the HMD 20 allows the user to experience the VR space VR1 which is a combination of video, audio, and BGM in which the flower object OD1 is arranged as a predetermined object in the VR space which is the VR space VR1 based on binocular disparity. .. In this case, in the example of FIG. 1, the user experiences the sensation of walking on a tree-lined road with large roadside trees planted on both sides of the path.

そして、ユーザは、街路樹の根元に咲いている花オブジェクトＯＤ１を視認し、花オブジェクトＯＤ１に触れるものとする（ステップＳ３）。例えば、図１に示すように、ユーザは、街路樹の根元に咲いている花オブジェクトＯＤ１を凝視するものとする。この場合、ＨＭＤ２０は、花オブジェクトＯＤ１が拡大表示されたＶＲ空間ＶＲ１の映像を情報処理装置１００がＨＭＤ２０に出力することで、ＶＲ空間ＶＲ１の映像を切り替える。そして、ユーザは、街路樹の根元に咲いている花オブジェクトＯＤ１に触れるものとする。そして、ＨＭＤ２０は、ユーザが花オブジェクトＯＤ１に触れた行動に関する情報を情報処理装置１００に送信する。なお、ＨＭＤ２０は、定期的にＶＲ空間ＶＲ１内で行ったユーザの様々な行動に関する情報を情報処理装置１００に送信する。続いて、情報処理装置１００は、ユーザの行動のうち、ユーザが花オブジェクトＯＤ１に触れた行動を検出する（ステップＳ４）。例えば、情報処理装置１００は、ＨＭＤ２０によって送信されたユーザの行動に関する情報に基づいて、ユーザが花オブジェクトＯＤ１に触れた行動を検出する。 Then, the user visually recognizes the flower object OD1 blooming at the root of the roadside tree and touches the flower object OD1 (step S3). For example, as shown in FIG. 1, the user shall stare at the flower object OD1 blooming at the root of the roadside tree. In this case, the HMD 20 switches the image of the VR space VR1 by outputting the image of the VR space VR1 in which the flower object OD1 is enlarged and displayed to the HMD 20 by the information processing apparatus 100. Then, the user shall touch the flower object OD1 blooming at the base of the roadside tree. Then, the HMD 20 transmits information regarding the behavior of the user touching the flower object OD1 to the information processing apparatus 100. The HMD 20 periodically transmits information about various actions of the user performed in the VR space VR1 to the information processing apparatus 100. Subsequently, the information processing apparatus 100 detects the behavior of the user touching the flower object OD1 among the behaviors of the user (step S4). For example, the information processing apparatus 100 detects the behavior of the user touching the flower object OD1 based on the information regarding the behavior of the user transmitted by the HMD 20.

続いて、情報処理装置１００は、検出結果に基づいて、ＶＲ空間内に広告オブジェクトＣ１を含むＶＲ空間の映像を出力する（ステップＳ５）。例えば、ユーザの行動に関する広告オブジェクトＣ１が花束に関するクーポンであるとする。この場合、情報処理装置１００は、ユーザが花オブジェクトＯＤ１に触れた行動を検出した検出結果に基づいて、ユーザによって触れられた花オブジェクトＯＤ１の代わりに「今なら花束が１０％ＯＦＦ！！」というクーポンを含むＶＲ空間の映像をＨＭＤ２０に出力する。そして、ＨＭＤ２０は、広告オブジェクトＣ１として花束に関するクーポンＣ１を含むＶＲ空間ＶＲ２の映像をユーザに提供する。これにより、ＨＭＤ２０は、例えば、両眼視差に基づくＶＲ空間ＶＲ２の映像と音声及びＢＧＭとを組み合わせたＶＲ空間ＶＲ２をユーザに再度体験させる。この場合、図１の例では、ユーザは、背景が街路樹の根元に表示された花束に関するクーポンＣ１を視認する。 Subsequently, the information processing apparatus 100 outputs an image in the VR space including the advertisement object C1 in the VR space based on the detection result (step S5). For example, assume that the advertising object C1 relating to the user's behavior is a coupon relating to a bouquet. In this case, the information processing apparatus 100 says, "Now, the bouquet is 10% off !!" instead of the flower object OD1 touched by the user, based on the detection result of detecting the behavior of the user touching the flower object OD1. The image of the VR space including the coupon is output to the HMD 20. Then, the HMD 20 provides the user with an image of the VR space VR2 including the coupon C1 related to the bouquet as the advertising object C1. As a result, the HMD 20 allows the user to experience the VR space VR2, which is a combination of the video, audio, and BGM of the VR space VR2 based on binocular parallax, for example. In this case, in the example of FIG. 1, the user visually recognizes the coupon C1 relating to the bouquet whose background is displayed at the root of the roadside tree.

このように、実施形態に係る情報処理装置１００は、ユーザがＶＲ空間ＶＲ１内の花オブジェクトＯＤ１に触れる行動を検出し、かかる検出結果に基づいて、ＶＲ空間内に広告オブジェクトＣ１を含むＶＲ空間の映像をＨＭＤ２０に出力する。これにより、実施形態に係る情報処理装置１００は、広告オブジェクトの訴求効果を向上させることができる。図１の例を用いて説明すると、ユーザは、花オブジェクトＯＤ１に触れるということから、花オブジェクトＯＤ１に興味があると考えられる。この場合、情報処理装置１００は、ユーザがＶＲ空間内で所定のオブジェクトに触れる行動に関する広告オブジェクトを含むＶＲ空間の映像をＨＭＤ２０に出力する。したがって、情報処理装置１００は、ユーザのオブジェクトに触れるという動作から、ユーザの興味関心があるコンテンツを特定することができるので、コンテンツの訴求効果を効率的に向上させることができる。 As described above, the information processing apparatus 100 according to the embodiment detects the behavior of the user touching the flower object OD1 in the VR space VR1, and based on the detection result, the VR space including the advertisement object C1 in the VR space. The video is output to the HMD 20. As a result, the information processing apparatus 100 according to the embodiment can improve the appealing effect of the advertising object. Explaining with reference to the example of FIG. 1, it is considered that the user is interested in the flower object OD1 because he / she touches the flower object OD1. In this case, the information processing apparatus 100 outputs to the HMD 20 an image of the VR space including an advertisement object related to the behavior of the user touching a predetermined object in the VR space. Therefore, since the information processing apparatus 100 can identify the content of interest to the user from the operation of touching the object of the user, the appealing effect of the content can be efficiently improved.

〔２．情報処理装置の構成〕
次に、図２を用いて、実施形態に係る情報処理装置１００の構成について説明する。図２は、実施形態に係る情報処理装置１００の構成例を示す図である。図２に示すように、情報処理装置１００は、通信部１１０と、記憶部１２０と、制御部１３０とを有する。 [2. Information processing device configuration]
Next, the configuration of the information processing apparatus 100 according to the embodiment will be described with reference to FIG. FIG. 2 is a diagram showing a configuration example of the information processing apparatus 100 according to the embodiment. As shown in FIG. 2, the information processing apparatus 100 includes a communication unit 110, a storage unit 120, and a control unit 130.

（通信部１１０について）
通信部１１０は、例えば、ＮＩＣ（Network Interface Card）等によって実現される。そして、通信部１１０は、ネットワークと有線又は無線で接続され、広告主端末１０と、ＨＭＤ２０との間で情報の送受信を行う。 (About communication unit 110)
The communication unit 110 is realized by, for example, a NIC (Network Interface Card) or the like. Then, the communication unit 110 is connected to the network by wire or wirelessly, and transmits / receives information between the advertiser terminal 10 and the HMD 20.

（記憶部１２０について）
記憶部１２０は、例えば、ＲＡＭ（Random Access Memory)、フラッシュメモリ（Flash Memory）等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。記憶部１２０は、ＶＲ空間構成要素情報記憶部１２１と、広告オブジェクト記憶部１２２とを有する。 (About the storage unit 120)
The storage unit 120 is realized by, for example, a semiconductor memory element such as a RAM (Random Access Memory) or a flash memory (Flash Memory), or a storage device such as a hard disk or an optical disk. The storage unit 120 includes a VR space component information storage unit 121 and an advertisement object storage unit 122.

（ＶＲ空間構成要素情報記憶部１２１について）
実施形態に係るＶＲ空間構成要素情報記憶部１２１は、ＶＲ空間に映し出される各種オブジェクトに関する情報を記憶する。ここで、図３に、実施形態に係るＶＲ空間構成要素情報記憶部１２１の一例を示す。図３に示した例では、ＶＲ空間構成要素情報記憶部１２１は、「ＶＲ空間構成要素ＩＤ（Identifier）」、「背景情報」、「オブジェクト情報」、「オブジェクト配置位置情報」といった項目を有する。 (About VR space component information storage unit 121)
The VR space component information storage unit 121 according to the embodiment stores information about various objects projected in the VR space. Here, FIG. 3 shows an example of the VR space component information storage unit 121 according to the embodiment. In the example shown in FIG. 3, the VR space component information storage unit 121 has items such as "VR space component ID (Identifier)", "background information", "object information", and "object placement position information".

「ＶＲ空間構成要素ＩＤ」は、ＶＲ空間構成要素を識別する識別子である。「背景情報」は、「ＶＲ空間構成要素ＩＤ」と対応付けられたＶＲ空間の背景に関する情報である。「オブジェクト情報」は、「ＶＲ空間構成要素ＩＤ」と対応付けられたオブジェクトに関する情報であり、オブジェクトの形状やテクスチャ等の情報である。「オブジェクト配置位置情報」は、「ＶＲ空間構成要素ＩＤ」と対応付けられたオブジェクトが配置されたＶＲ空間内の位置に関する情報である。例えば、図３では、ＶＲ空間構成要素ＩＤによって識別される「Ｅ１」は、背景情報が「小道」であり、オブジェクト情報が「花オブジェクト」であり、オブジェクト配置位置情報が「ＯＰ１」である。 The "VR space component ID" is an identifier that identifies the VR space component. The "background information" is information regarding the background of the VR space associated with the "VR space component ID". The "object information" is information about an object associated with the "VR space component ID", and is information such as the shape and texture of the object. The "object placement position information" is information regarding the position in the VR space in which the object associated with the "VR space component ID" is placed. For example, in FIG. 3, "E1" identified by the VR space component ID has background information of "path", object information of "flower object", and object placement position information of "OP1".

なお、ＶＲ空間構成要素情報記憶部１２１は、上記に限らず、ＶＲ空間を実現するための種々の情報を記憶してもよい。例えば、ＶＲ空間構成要素情報記憶部１２１は、ＶＲ空間を実現するための音声及びＢＧＭや映像データ等を記憶してもよい。 The VR space component information storage unit 121 is not limited to the above, and may store various information for realizing the VR space. For example, the VR space component information storage unit 121 may store audio, BGM, video data, and the like for realizing the VR space.

（広告オブジェクト記憶部１２２について）
実施形態に係る広告オブジェクト記憶部１２２は、広告主によって入稿された広告オブジェクトを記憶する。ここで、図４に、実施形態に係る広告オブジェクト記憶部１２２の一例を示す。図４に示した例では、広告オブジェクト記憶部１２２は、「広告主ＩＤ」、「広告オブジェクト」といった項目を有する。 (About the advertisement object storage unit 122)
The advertisement object storage unit 122 according to the embodiment stores the advertisement object submitted by the advertiser. Here, FIG. 4 shows an example of the advertisement object storage unit 122 according to the embodiment. In the example shown in FIG. 4, the advertisement object storage unit 122 has items such as "advertiser ID" and "advertisement object".

「広告主ＩＤ」は、広告主を識別するための識別情報を示す。「広告オブジェクト」は、広告主によって入稿された広告オブジェクトを示す。例えば、図４では、広告主ＩＤによって識別される「ＣＬ１」によって入稿された広告オブジェクト「花束に関するクーポン」を示す。 The "advertiser ID" indicates identification information for identifying the advertiser. "Advertising object" refers to an advertising object submitted by an advertiser. For example, FIG. 4 shows an advertising object “coupon related to a bouquet” submitted by “CL1” identified by the advertiser ID.

なお、広告オブジェクト記憶部１２２は、上記に限らず、広告主によって設定された条件に関する種々の情報を記憶してもよい。例えば、広告オブジェクト記憶部１２２は、オブジェクト、ユーザとオブジェクトとの接触態様等を記憶してもよい。この点について、変形例で詳述する。 The advertising object storage unit 122 is not limited to the above, and may store various information regarding the conditions set by the advertiser. For example, the advertisement object storage unit 122 may store the object, the contact mode between the user and the object, and the like. This point will be described in detail in a modified example.

（制御部１３０について）
制御部１３０は、コントローラ（Controller）であり、例えば、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）等によって、情報処理装置１００内部の記憶装置に記憶されている各種プログラム（情報処理プログラムの一例に相当）がＲＡＭを作業領域として実行されることにより実現される。また、制御部１３０は、コントローラであり、例えば、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路により実現される。 (About control unit 130)
The control unit 130 is a controller, and for example, various programs (information processing programs) stored in a storage device inside the information processing device 100 by a CPU (Central Processing Unit), an MPU (Micro Processing Unit), or the like. (Corresponding to one example) is realized by executing RAM as a work area. Further, the control unit 130 is a controller, and is realized by, for example, an integrated circuit such as an ASIC (Application Specific Integrated Circuit) or an FPGA (Field Programmable Gate Array).

図２に示すように、制御部１３０は、入稿受付部１３１と、ユーザ行動受付部１３２と、検出部１３３と、出力部１３４とを有し、以下に説明する情報処理の機能や作用を実現または実行する。なお、制御部１３０の内部構成は、図２に示した構成に限られず、後述する情報処理を行う構成であれば他の構成であってもよい。また、制御部１３０が有する各処理部の接続関係は、図２に示した接続関係に限られず、他の接続関係であってもよい。 As shown in FIG. 2, the control unit 130 includes a trafficking reception unit 131, a user action reception unit 132, a detection unit 133, and an output unit 134, and has functions and operations of information processing described below. Realize or execute. The internal configuration of the control unit 130 is not limited to the configuration shown in FIG. 2, and may be any other configuration as long as it is configured to perform information processing described later. Further, the connection relationship of each processing unit included in the control unit 130 is not limited to the connection relationship shown in FIG. 2, and may be another connection relationship.

（入稿受付部１３１について）
入稿受付部１３１は、広告主端末１０から広告オブジェクトの入稿を受け付ける。具体的には、入稿受付部１３１は、広告主端末１０から広告オブジェクトの入稿を受け付け、かかる広告オブジェクトを広告オブジェクト記憶部１２２に格納する。また、入稿受付部１３１は、広告主によって設定された所定の条件を受け付け、かかる所定の条件を広告オブジェクト記憶部１２２に格納する。例えば、入稿受付部１３１は、所定の条件として、オブジェクト、ユーザとオブジェクトとの接触態様等を受け付け、かかる所定の条件を広告オブジェクト記憶部１２２に格納する。 (About the submission reception section 131)
The submission reception unit 131 accepts submission of an advertisement object from the advertiser terminal 10. Specifically, the submission receiving unit 131 accepts the submission of the advertisement object from the advertiser terminal 10, and stores the advertisement object in the advertisement object storage unit 122. Further, the submission receiving unit 131 accepts a predetermined condition set by the advertiser, and stores the predetermined condition in the advertisement object storage unit 122. For example, the submission receiving unit 131 accepts an object, a contact mode between a user and an object, and the like as predetermined conditions, and stores the predetermined conditions in the advertisement object storage unit 122.

（ユーザ行動受付部１３２について）
ユーザ行動受付部１３２は、ＶＲ空間におけるユーザの行動を示す操作等をＨＭＤ２０から受け付ける。例えば、ユーザ行動受付部１３２は、ＨＭＤ２０によって送信されたユーザの行動に関する情報に基づいて、ユーザの行動を受け付ける。また、ここでいうユーザの行動とは、オブジェクトを摘まむ、オブジェクトを蹴る、オブジェクトを踏む、オブジェクトを手のひらで温める、オブジェクトを持ったときにユーザの体温が上がる、オブジェクトを叩く、オブジェクトを投擲する等の行動を示す。なお、ユーザ行動受付部１３２の処理は、例えば、ユーザの体の各部位に各種センサーをつけて動作及び体温を読み取る各種の周知技術により実現可能である。 (About user behavior reception unit 132)
The user action receiving unit 132 receives an operation or the like indicating a user's action in the VR space from the HMD 20. For example, the user action receiving unit 132 receives the user's action based on the information about the user's action transmitted by the HMD 20. Also, the user's actions here are picking the object, kicking the object, stepping on the object, warming the object with the palm of the hand, raising the user's body temperature when holding the object, hitting the object, throwing the object. Show actions such as. The process of the user action receiving unit 132 can be realized by, for example, various well-known techniques of attaching various sensors to each part of the user's body to read the operation and the body temperature.

（検出部１３３について）
検出部１３３は、映像によって形成される仮想空間（ＶＲ空間に相当）を体験するユーザの行動であって、ＶＲ空間に映し出される所定のオブジェクトに対して物理的な変化を及ぼすユーザの行動を検出する。具体的には、検出部１３３は、ユーザ行動受付部１３２によって受け付けられたユーザの行動のうち、ユーザが接触することで、ＶＲ空間内の所定のオブジェクトに対して物理的な変化を及ぼすユーザの行動を検出する。例えば、所定のオブジェクトが花オブジェクトであるとする。この場合、検出部１３３は、ユーザ行動受付部１３２によって受け付けられたユーザの行動のうち、ユーザが花オブジェクトに触るユーザの行動を検出する。一方、検出部１３３は、ユーザ行動受付部１３２によって受け付けられたユーザの行動のうち、ユーザが花オブジェクトに触らないユーザの行動を検出しない。 (About detection unit 133)
The detection unit 133 detects the behavior of the user who experiences the virtual space (corresponding to the VR space) formed by the image, and which causes a physical change to a predetermined object projected in the VR space. do. Specifically, the detection unit 133 is a user's behavior received by the user behavior reception unit 132, which causes a physical change to a predetermined object in the VR space when the user comes into contact with the user's behavior. Detect behavior. For example, suppose a given object is a flower object. In this case, the detection unit 133 detects the user's behavior that the user touches the flower object among the user's behaviors received by the user behavior reception unit 132. On the other hand, the detection unit 133 does not detect the user's behavior that the user does not touch the flower object among the user's behaviors received by the user behavior reception unit 132.

（出力部１３４について）
出力部１３４は、検出部１３３によって検出された検出結果に基づいて、コンテンツ（広告オブジェクトに相当）を出力する。具体的には、出力部１３４は、ＶＲ空間構成要素情報記憶部１２１に基づいて、ユーザの操作に伴う向きの変更、各種オブジェクトの配置位置等に応じて、ＶＲ空間におけるユーザの視野に対応する映像をＨＭＤ２０に出力する。また、具体的には、出力部１３４は、検出部１３３によって検出された検出結果に基づいて、ＶＲ空間内の所定のオブジェクトの代わりに、広告オブジェクト記憶部１２２に記憶される広告オブジェクトを表示させたＶＲ空間の映像をＨＭＤ２０に出力する。例えば、図１の例では、出力部１３４は、検出部１３３によって検出された検出結果に基づいて、ＶＲ空間ＶＲ１内の花オブジェクトＯＤ１の代わりに、広告オブジェクト記憶部１２２に記憶される花束に関するクーポンＣ１を表示させたＶＲ空間ＶＲ２の映像をＨＭＤ２０に出力する。 (About output unit 134)
The output unit 134 outputs content (corresponding to an advertising object) based on the detection result detected by the detection unit 133. Specifically, the output unit 134 corresponds to the user's field of view in the VR space based on the VR space component information storage unit 121 according to the change of orientation accompanying the user's operation, the arrangement position of various objects, and the like. The video is output to the HMD 20. Further, specifically, the output unit 134 causes the advertisement object stored in the advertisement object storage unit 122 to be displayed instead of the predetermined object in the VR space based on the detection result detected by the detection unit 133. The image of the VR space is output to the HMD 20. For example, in the example of FIG. 1, the output unit 134 is a coupon for a bouquet stored in the advertisement object storage unit 122 instead of the flower object OD1 in the VR space VR1 based on the detection result detected by the detection unit 133. The image of the VR space VR2 displaying C1 is output to the HMD 20.

〔３．出力処理のフローチャート〕
次に、図５を用いて、実施形態に係る情報処理装置１００が実行する出力処理の手順について説明する。図５は、実施形態に係る情報処理装置が実行する出力処理の流れの一例を示すフローチャートである。 [3. Flowchart of output processing]
Next, a procedure of output processing executed by the information processing apparatus 100 according to the embodiment will be described with reference to FIG. FIG. 5 is a flowchart showing an example of the flow of output processing executed by the information processing apparatus according to the embodiment.

図５に示すように、出力部１３４は、ＶＲ空間の映像をＨＭＤ２０に出力する（ステップＳ１０１）。そして、ユーザ行動受付部１３２は、ユーザの行動を受け付ける（ステップＳ１０２）。そして、検出部１３３は、ユーザが花オブジェクトに触れる行動を検出する（ステップＳ１０３）。そして、検出部１３３は、ユーザが花オブジェクトに触れる行動を検出しない場合（ステップＳ１０３；Ｎｏ）、ユーザが花オブジェクトに触れる行動を検出するまで待機する。 As shown in FIG. 5, the output unit 134 outputs an image in the VR space to the HMD 20 (step S101). Then, the user action receiving unit 132 receives the user's action (step S102). Then, the detection unit 133 detects the behavior of the user touching the flower object (step S103). Then, when the detection unit 133 does not detect the action of the user touching the flower object (step S103; No), the detection unit 133 waits until the action of the user touching the flower object is detected.

一方、検出部１３３は、ユーザが花オブジェクトに触れる行動を検出する場合（ステップＳ１０３；Ｙｅｓ）、出力部１３４は、ＶＲ空間内に広告オブジェクトを含む映像をＨＭＤ２０に出力する（ステップＳ１０４）。 On the other hand, when the detection unit 133 detects the behavior of the user touching the flower object (step S103; Yes), the output unit 134 outputs the video including the advertisement object in the VR space to the HMD 20 (step S104).

〔４．変形例〕
上述した情報処理装置１００は、上記実施形態以外にも種々の異なる形態にて実施されてよい。そこで、以下では、情報処理装置１００の他の実施形態について説明する。 [4. Modification example]
The information processing apparatus 100 described above may be implemented in various different forms other than the above-described embodiment. Therefore, another embodiment of the information processing apparatus 100 will be described below.

〔４－１．検出処理（１）〕
上記実施形態では、情報処理装置１００の検出部１３３が花オブジェクトに触れるユーザの行動を検出する検出処理の一例を説明したが、検出部１３３は、ユーザが所定のオブジェクトを用いて行動することで、所定のオブジェクトと所定のオブジェクト以外の他のオブジェクトとを接触させるユーザの行動を検出してもよい。具体的には、検出部１３３は、ユーザが所定のオブジェクトを投擲することで、所定のオブジェクト以外の他のオブジェクトに衝突させるユーザの行動を検出する。例えば、ユーザが池オブジェクトに向かって石オブジェクトを投擲することで水切りを行うとする。この場合、検出部１３３は、ユーザ行動受付部１３２によって受け付けられたユーザの行動のうち、ユーザが石オブジェクトを池オブジェクトに向かって投擲することで、池オブジェクトの水面と石オブジェクトとが衝突したと示す場合に、石オブジェクトと池オブジェクトの水面とを接触させるユーザの行動を検出してもよい。 [4-1. Detection process (1)]
In the above embodiment, an example of the detection process in which the detection unit 133 of the information processing apparatus 100 detects the behavior of the user who touches the flower object has been described, but the detection unit 133 describes the behavior by the user using a predetermined object. , The user's behavior of contacting a predetermined object with an object other than the predetermined object may be detected. Specifically, the detection unit 133 detects the user's behavior of colliding with an object other than the predetermined object by throwing a predetermined object. For example, suppose a user throws a stone object at a pond object to drain it. In this case, the detection unit 133 states that among the user's actions received by the user action reception unit 132, the user throws the stone object toward the pond object, and the water surface of the pond object collides with the stone object. When indicated, the user's behavior of bringing the stone object into contact with the water surface of the pond object may be detected.

図６を用いて、変形例に係る情報処理装置が実行する検出処理の一例について説明する。図６は、変形例に係る情報処理装置が実行する検出処理の一例を示す図である。以下、図６を用いて、情報処理装置１００によるユーザの行動の検出処理の一例を流れに沿って説明する。 An example of the detection process executed by the information processing apparatus according to the modified example will be described with reference to FIG. FIG. 6 is a diagram showing an example of a detection process executed by the information processing apparatus according to the modified example. Hereinafter, an example of the user behavior detection process by the information processing apparatus 100 will be described along the flow with reference to FIG.

まず、図６に示すように、ユーザが所定のオブジェクトである池オブジェクトＯＤ２を視認し、ユーザが所定のオブジェクトである石オブジェクトＯＤ３を池オブジェクトＯＤ２に向かって投擲する行動を行う（ステップＳ２１）。例えば、図６に示すように、ユーザは、背景である森林の中に所在する池オブジェクトＯＤ２を視認する。そして、ユーザは、池オブジェクトＯＤ２の周辺に落ちている石オブジェクトＯＤ３を拾う体験をする。そして、ユーザは、石オブジェクトＯＤ３を池オブジェクトＯＤ２に向かって投擲することで水切りを行う体験をする。これにより、ユーザは、ユーザが石オブジェクトＯＤ３を池オブジェクトＯＤ２に向かって投擲することで、石オブジェクトＯＤ３と池オブジェクトＯＤ２の水面とを接触させる行動を行う。続いて、ユーザが池オブジェクトＯＤ２に向かって石オブジェクトＯＤ３を投擲する行動に関する広告オブジェクトＣ１を含むＶＲ空間をＨＭＤ２０に出力する（ステップＳ２２）。例えば、石オブジェクトＯＤ３と池オブジェクトＯＤ２の水面とを接触させるユーザの行動に対応する広告オブジェクトＣ１が石オブジェクトＯＤ３で形成されたアクセサリーに関するクーポンであるとする。この場合、情報処理装置１００は、石オブジェクトＯＤ３と池オブジェクトＯＤ２の水面とを接触させるユーザの行動を検出し、「今ならアクセサリー１５％ＯＦＦ！！」というクーポンを含むＶＲ空間ＶＲ２の映像をＨＭＤ２０に出力してもよい。 First, as shown in FIG. 6, the user visually recognizes the pond object OD2 which is a predetermined object, and the user throws the stone object OD3 which is a predetermined object toward the pond object OD2 (step S21). For example, as shown in FIG. 6, the user visually recognizes the pond object OD2 located in the background forest. Then, the user has an experience of picking up the stone object OD3 that has fallen around the pond object OD2. Then, the user experiences draining by throwing the stone object OD3 toward the pond object OD2. As a result, the user throws the stone object OD3 toward the pond object OD2 to bring the stone object OD3 into contact with the water surface of the pond object OD2. Subsequently, the VR space including the advertisement object C1 relating to the action of the user throwing the stone object OD3 toward the pond object OD2 is output to the HMD 20 (step S22). For example, assume that the advertising object C1 corresponding to the user's action of bringing the stone object OD3 into contact with the water surface of the pond object OD2 is a coupon for an accessory formed by the stone object OD3. In this case, the information processing apparatus 100 detects the behavior of the user who brings the stone object OD3 and the water surface of the pond object OD2 into contact with each other, and displays the image of the VR space VR2 including the coupon "Now, accessories 15% OFF !!" It may be output to.

これにより、実施形態に係る情報処理装置１００の検出部１３３は、所定のオブジェクトと所定のオブジェクト以外の他のオブジェクトとを接触させる間接的なユーザの行動を検出することができるので、網羅的なユーザに関する行動の検出を行うことができる。 As a result, the detection unit 133 of the information processing apparatus 100 according to the embodiment can detect indirect user actions that bring a predetermined object into contact with another object other than the predetermined object, and thus is comprehensive. It is possible to detect actions related to the user.

〔４－２．出力処理（１）〕
上記実施形態では、情報処理装置１００の出力部１３４が花オブジェクトに触れるユーザの行動に基づいて広告オブジェクトを出力する出力処理の一例を説明したが、出力部１３４は、変化によって異なる広告オブジェクトを含むＶＲ空間の映像を出力してもよい。具体的には、出力部１３４は、図７に示した広告オブジェクト記憶部１２３に記憶される所定の条件としてユーザ自身又は所定のオブジェクトに対して変化を及ぼすユーザの行動に伴うユーザ又は所定のオブジェクトの変化に基づいて、かかる変化によって異なる広告オブジェクトを含むＶＲ空間の映像をＨＭＤ２０に出力する。例えば、ユーザが花オブジェクトを摘まむ行動を起こすとする。この場合、出力部１３４は、検出部１３３によって検出された花オブジェクトを摘まむユーザの行動に基づいて、広告オブジェクトとして花束に関するクーポンを含むＶＲ空間の映像をＨＭＤ２０に出力してもよい。 [4-2. Output processing (1)]
In the above embodiment, an example of output processing in which the output unit 134 of the information processing apparatus 100 outputs an advertisement object based on the behavior of the user who touches the flower object has been described, but the output unit 134 includes an advertisement object that differs depending on the change. The image of the VR space may be output. Specifically, the output unit 134 is a user or a predetermined object associated with the user's behavior that changes the user himself / herself or a predetermined object as a predetermined condition stored in the advertisement object storage unit 123 shown in FIG. Based on the change of, the image of the VR space including the advertisement object different by the change is output to the HMD 20. For example, suppose a user takes an action of picking a flower object. In this case, the output unit 134 may output a VR space image including a coupon for a bouquet as an advertising object to the HMD 20 based on the user's action of picking the flower object detected by the detection unit 133.

図８を用いて、変形例に係る情報処理装置が実行する出力処理の一例について説明する。図８は、変形例に係る情報処理装置が実行する出力処理の一例を示す図である。以下、図８を用いて、情報処理装置１００による広告オブジェクトの出力処理の一例を流れに沿って説明する。 An example of output processing executed by the information processing apparatus according to the modified example will be described with reference to FIG. FIG. 8 is a diagram showing an example of output processing executed by the information processing apparatus according to the modified example. Hereinafter, an example of the output processing of the advertisement object by the information processing apparatus 100 will be described along the flow with reference to FIG.

まず、図８に示すように、ユーザが所定のオブジェクトである花オブジェクトＯＤ１を視認し、花オブジェクトＯＤ１を摘まむ行動を行う（ステップＳ３１）。例えば、図８に示すように、ＨＭＤ２０は、ユーザが街路樹の根元に咲いている花オブジェクトＯＤ１を凝視することで、ＶＲ空間ＶＲ１の映像を花オブジェクトＯＤ１が拡大表示されたＶＲ空間ＶＲ１の映像に切り替える。そして、ユーザは、街路樹の根元に咲いている花オブジェクトＯＤ１を摘まむ行動を行うものとする。続いて、情報処理装置１００は、ユーザが花オブジェクトＯＤ１を摘まむ行動に関する広告オブジェクトＣ１を含むＶＲ空間ＶＲ２の映像をＨＭＤ２０に出力する（ステップＳ３２）。例えば、ユーザが花オブジェクトＯＤ１を摘まむ行動に関する広告オブジェクトＣ１が花束に関するクーポンであるとする。この場合、情報処理装置１００は、ユーザが花オブジェクトＯＤ１を摘まむ行動を検出し、「今なら花束が１５％ＯＦＦ！！」というクーポンを含むＶＲ空間ＶＲ２の映像をＨＭＤ２０に出力してもよい。 First, as shown in FIG. 8, the user visually recognizes the flower object OD1 which is a predetermined object, and performs an action of picking the flower object OD1 (step S31). For example, as shown in FIG. 8, in the HMD 20, the user stares at the flower object OD1 blooming at the root of the roadside tree, so that the image of the VR space VR1 is enlarged and displayed as the image of the flower object OD1. Switch to. Then, the user shall perform an action of picking the flower object OD1 blooming at the root of the roadside tree. Subsequently, the information processing apparatus 100 outputs the image of the VR space VR2 including the advertisement object C1 relating to the action of the user picking the flower object OD1 to the HMD 20 (step S32). For example, assume that the advertising object C1 relating to the action of the user picking the flower object OD1 is a coupon relating to a bouquet. In this case, the information processing apparatus 100 may detect the behavior of the user picking the flower object OD1 and output the image of the VR space VR2 including the coupon "Now the bouquet is 15% OFF !!" to the HMD 20. ..

これにより、実施形態に係る情報処理装置１００の出力部１３４は、ユーザが花オブジェクトを摘まむ行動に対応する広告オブジェクトを含むＶＲ空間の映像を出力することができるので、訴求効果の高い広告オブジェクトを提供することができる。 As a result, the output unit 134 of the information processing apparatus 100 according to the embodiment can output an image of the VR space including the advertisement object corresponding to the action of the user picking the flower object, so that the advertisement object having a high appeal effect. Can be provided.

〔４－３．出力処理（２）〕
上記実施形態では、情報処理装置１００の出力部１３４がユーザの行動に基づいて、広告オブジェクトを含むＶＲ空間の映像を出力する出力処理の一例を説明したが、出力部１３４は、広告主によって設定された所定の条件が満たされた場合に、広告オブジェクトを出力してもよい。具体的には、出力部１３４は、図９に示した広告オブジェクト記憶部１２４に記憶される広告主によって設定されたオブジェクト又はユーザとオブジェクトとの接触態様が所定の条件として満たされた場合に、広告オブジェクトを含むＶＲ空間の映像をＨＭＤ２０に出力する。例えば、広告主によって設定された所定の条件がユーザとオブジェクトとの接触態様であるとする。この場合、出力部１３４は、ユーザが花オブジェクトを摘まんだ場合、広告オブジェクトとして花束に関するクーポンを含むＶＲ空間をＨＭＤ２０に出力してもよい。 [4-3. Output processing (2)]
In the above embodiment, an example of the output process in which the output unit 134 of the information processing apparatus 100 outputs the image of the VR space including the advertisement object based on the behavior of the user has been described, but the output unit 134 is set by the advertiser. The advertisement object may be output when the predetermined conditions are satisfied. Specifically, the output unit 134 is set when the object or the contact mode between the user and the object set by the advertiser stored in the advertisement object storage unit 124 shown in FIG. 9 is satisfied as a predetermined condition. The image of the VR space including the advertisement object is output to the HMD 20. For example, it is assumed that a predetermined condition set by the advertiser is a contact mode between the user and the object. In this case, when the user picks the flower object, the output unit 134 may output the VR space including the coupon related to the bouquet as an advertising object to the HMD 20.

これにより、実施形態に係る情報処理装置１００の出力部１３４は、広告主によって設定された所定の条件が満たされた場合に広告オブジェクトを含むＶＲ空間の映像を出力することができるので、広告主にとって有益な広告オブジェクトの提供が実現できる。 As a result, the output unit 134 of the information processing apparatus 100 according to the embodiment can output the image of the VR space including the advertisement object when the predetermined condition set by the advertiser is satisfied, so that the advertiser can output the image. It is possible to provide advertising objects that are useful to the public.

〔４－４．広告オブジェクト〕
上記実施形態では、広告オブジェクトの代わりに、静止画像、動画像等を適用できる。また、情報処理装置１００は、広告オブジェクトに限らず、各種のコンテンツオブジェクトを含むＶＲ空間の映像を出力してもよい。例えば、情報処理装置１００は、広告目的でないコンテンツオブジェクト（例えば、コンテンツオブジェクトに含まれる記事等）を含むＶＲ空間の映像をＨＭＤ２０に出力してもよい。 [4-4. Advertising object]
In the above embodiment, a still image, a moving image, or the like can be applied instead of the advertisement object. Further, the information processing apparatus 100 may output not only an advertisement object but also a VR space image including various content objects. For example, the information processing apparatus 100 may output a video in VR space including a content object (for example, an article included in the content object) that is not for advertising purposes to the HMD 20.

〔４－５．接触態様に対応するユーザ行動〕
上記実施形態では、情報処理装置１００が花オブジェクトに触るユーザの行動を検出する一例を説明したが、接触態様に対応するユーザの行動として、ユーザが所定のオブジェクトに接触する接触態様に対応するユーザの行動、ユーザが所定のオブジェクトを触る行動、ユーザが所定のオブジェクトを摘まむ行動、ユーザが所定のオブジェクトを蹴る行動、ユーザが所定のオブジェクトを踏む行動、ユーザが所定のオブジェクトを用いてユーザの身体的変化を伴う行動等を検出してもよい。 [4-5. User behavior corresponding to the contact mode]
In the above embodiment, an example in which the information processing apparatus 100 detects the behavior of the user who touches the flower object has been described, but as the behavior of the user corresponding to the contact mode, the user corresponding to the contact mode in which the user touches a predetermined object. Behavior, user touching a predetermined object, user picking a predetermined object, user kicking a predetermined object, user stepping on a predetermined object, user using a predetermined object Behaviors and the like that accompany physical changes may be detected.

〔４－６．仮想空間〕
上記実施形態では、情報処理装置１００がユーザの行動に基づいて、広告オブジェクトを含むＶＲ空間の映像を出力する出力処理の一例を説明したが、情報処理装置１００は、ＶＲ空間の映像を出力することに限定されるものではない。例えば、情報処理装置１００は、ユーザの行動に基づいて、広告オブジェクトを含む拡張現実等の仮想空間の映像を出力してもよい。 [4-6. Virtual space〕
In the above embodiment, an example of the output process in which the information processing device 100 outputs the image of the VR space including the advertisement object based on the behavior of the user has been described, but the information processing device 100 outputs the image of the VR space. It is not limited to that. For example, the information processing device 100 may output an image of a virtual space such as augmented reality including an advertisement object based on the user's behavior.

〔４－７．情報処理装置（１）〕
上記実施形態では、情報処理装置１００がユーザの行動に基づいて、広告オブジェクトを含むＶＲ空間の映像を出力する出力処理の一例を説明したが、情報処理装置１００は、これに限定されるものではない。例えば、情報処理装置１００が実行する検出処理及び出力処理は、ＨＭＤ２０がスタンドアローンで実行してもよい。 [4-7. Information processing device (1)]
In the above embodiment, an example of output processing in which the information processing device 100 outputs an image in a VR space including an advertisement object based on a user's behavior has been described, but the information processing device 100 is not limited to this. do not have. For example, the detection process and the output process executed by the information processing apparatus 100 may be executed standalone by the HMD 20.

〔４－８．情報処理装置（２）〕
上記実施形態では、情報処理装置１００が広告主端末１０から広告オブジェクトを受け付ける処理の一例を説明したが、情報処理装置１００の入稿受付部１３１は、情報処理装置１００と異なるサーバ装置等であってもよい。例えば、情報処理装置１００は、入稿受付部１３１が広告主によって受け付けた広告オブジェクトを参照してもよい。 [4-8. Information processing device (2)]
In the above embodiment, an example of the process in which the information processing device 100 receives an advertisement object from the advertiser terminal 10 has been described, but the submission receiving unit 131 of the information processing device 100 is a server device or the like different from the information processing device 100. You may. For example, the information processing apparatus 100 may refer to an advertisement object received by the advertiser by the submission reception unit 131.

〔５．ハードウェア構成〕
また、上述してきた実施形態に係る広告主端末１０、ＨＭＤ２０、情報処理装置１００は、例えば図１０に示すような構成のコンピュータ１０００によって実現される。以下、情報処理装置１００を例に挙げて説明する。図１０は、情報処理装置１００の機能を実現するコンピュータ１０００の一例を示すハードウェア構成図である。コンピュータ１０００は、ＣＰＵ１１００、ＲＡＭ１２００、ＲＯＭ（Read Only Memory）１３００、ＨＤＤ（Hard Disk Drive）１４００、通信インターフェイス（Ｉ／Ｆ）１５００、入出力インターフェイス（Ｉ／Ｆ）１６００、及びメディアインターフェイス（Ｉ／Ｆ）１７００を有する。 [5. Hardware configuration]
Further, the advertiser terminal 10, the HMD 20, and the information processing apparatus 100 according to the above-described embodiment are realized by, for example, a computer 1000 having a configuration as shown in FIG. Hereinafter, the information processing apparatus 100 will be described as an example. FIG. 10 is a hardware configuration diagram showing an example of a computer 1000 that realizes the functions of the information processing apparatus 100. The computer 1000 includes a CPU 1100, a RAM 1200, a ROM (Read Only Memory) 1300, an HDD (Hard Disk Drive) 1400, a communication interface (I / F) 1500, an input / output interface (I / F) 1600, and a media interface (I / F). ) Has 1700.

ＣＰＵ１１００は、ＲＯＭ１３００又はＨＤＤ１４００に格納されたプログラムに基づいて動作し、各部の制御を行う。ＲＯＭ１３００は、コンピュータ１０００の起動時にＣＰＵ１１００によって実行されるブートプログラムや、コンピュータ１０００のハードウェアに依存するプログラム等を格納する。 The CPU 1100 operates based on a program stored in the ROM 1300 or the HDD 1400, and controls each part. The ROM 1300 stores a boot program executed by the CPU 1100 when the computer 1000 is started, a program depending on the hardware of the computer 1000, and the like.

ＨＤＤ１４００は、ＣＰＵ１１００によって実行されるプログラム、及び、かかるプログラムによって使用されるデータ等を格納する。通信インターフェイス１５００は、ネットワークＮを介して他の機器からデータを受信してＣＰＵ１１００へ送り、ＣＰＵ１１００がネットワークＮを介して生成したデータを他の機器へ送信する。 The HDD 1400 stores a program executed by the CPU 1100, data used by such a program, and the like. The communication interface 1500 receives data from another device via the network N and sends the data to the CPU 1100, and the CPU 1100 transmits the data generated by the CPU 1100 to the other device via the network N.

ＣＰＵ１１００は、入出力インターフェイス１６００を介して、ディスプレイやプリンタ等の出力装置、及び、キーボードやマウス等の入力装置を制御する。ＣＰＵ１１００は、入出力インターフェイス１６００を介して、入力装置からデータを取得する。また、ＣＰＵ１１００は、入出力インターフェイス１６００を介して生成したデータを出力装置へ出力する。 The CPU 1100 controls an output device such as a display or a printer, and an input device such as a keyboard or a mouse via the input / output interface 1600. The CPU 1100 acquires data from the input device via the input / output interface 1600. Further, the CPU 1100 outputs the data generated via the input / output interface 1600 to the output device.

メディアインターフェイス１７００は、記録媒体１８００に格納されたプログラム又はデータを読み取り、ＲＡＭ１２００を介してＣＰＵ１１００に提供する。ＣＰＵ１１００は、かかるプログラムを、メディアインターフェイス１７００を介して記録媒体１８００からＲＡＭ１２００上にロードし、ロードしたプログラムを実行する。記録媒体１８００は、例えばＤＶＤ（Digital Versatile Disc）、ＰＤ（Phase change rewritable Disk）等の光学記録媒体、ＭＯ（Magneto-Optical disk）等の光磁気記録媒体、テープ媒体、磁気記録媒体、または半導体メモリ等である。 The media interface 1700 reads a program or data stored in the recording medium 1800 and provides the program or data to the CPU 1100 via the RAM 1200. The CPU 1100 loads the program from the recording medium 1800 onto the RAM 1200 via the media interface 1700, and executes the loaded program. The recording medium 1800 is, for example, an optical recording medium such as a DVD (Digital Versatile Disc) or PD (Phase change rewritable Disk), a magneto-optical recording medium such as MO (Magneto-Optical disk), a tape medium, a magnetic recording medium, or a semiconductor memory. And so on.

例えば、コンピュータ１０００が実施形態に係る情報処理装置１００として機能する場合、コンピュータ１０００のＣＰＵ１１００は、ＲＡＭ１２００上にロードされたプログラムを実行することにより、制御部１３０の機能を実現する。また、ＨＤＤ１４００には、記憶部１２０内のデータが格納される。コンピュータ１０００のＣＰＵ１１００は、これらのプログラムを記録媒体１８００から読み取って実行するが、他の例として、他の装置からネットワークＮを介してこれらのプログラムを取得してもよい。 For example, when the computer 1000 functions as the information processing apparatus 100 according to the embodiment, the CPU 1100 of the computer 1000 realizes the function of the control unit 130 by executing the program loaded on the RAM 1200. Further, the data in the storage unit 120 is stored in the HDD 1400. The CPU 1100 of the computer 1000 reads and executes these programs from the recording medium 1800, but as another example, these programs may be acquired from another device via the network N.

〔６．その他〕
また、上記実施形態及び変形例において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。 [6. others〕
Further, among the processes described in the above-described embodiments and modifications, all or part of the processes described as being automatically performed can be manually performed, or are described as being manually performed. It is also possible to automatically perform all or part of the performed processing by a known method. In addition, information including processing procedures, specific names, various data and parameters shown in the above documents and drawings can be arbitrarily changed unless otherwise specified. For example, the various information shown in each figure is not limited to the information shown in the figure.

また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。 Further, each component of each of the illustrated devices is a functional concept, and does not necessarily have to be physically configured as shown in the figure. That is, the specific form of distribution / integration of each device is not limited to the one shown in the figure, and all or part of them may be functionally or physically distributed / physically in any unit according to various loads and usage conditions. Can be integrated and configured.

また、上述してきた実施形態及び変形例は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。 Further, the above-described embodiments and modifications can be appropriately combined as long as the processing contents do not contradict each other.

また、上述してきた「部（section、module、unit）」は、「手段」や「回路」などに読み替えることができる。例えば、出力部は、出力手段や出力回路に読み替えることができる。 Further, the above-mentioned "section, module, unit" can be read as "means" or "circuit". For example, the output unit can be read as an output means or an output circuit.

〔７．効果〕
上述してきたように、実施形態に係る情報処理装置１００は、検出部１３３と、出力部１３４とを有する。検出部１３３は、映像によって形成される仮想空間（ＶＲ空間に相当）を体験するユーザの行動であって、仮想空間に映し出される所定のオブジェクトに対して物理的な変化を及ぼすユーザの行動を検出する。出力部１３４は、検出部１３３によって検出された結果に基づいて、コンテンツ（広告オブジェクト）を出力する。 [7. effect〕
As described above, the information processing apparatus 100 according to the embodiment includes a detection unit 133 and an output unit 134. The detection unit 133 detects the behavior of the user who experiences the virtual space (corresponding to the VR space) formed by the image, and which causes a physical change to a predetermined object projected in the virtual space. do. The output unit 134 outputs the content (advertising object) based on the result detected by the detection unit 133.

これにより、実施形態に係る情報処理装置１００は、ユーザがＶＲ空間内の興味を示すオブジェクトに触れたユーザの行動を検出することができるので、訴求効果の高い広告オブジェクトを含むＶＲ空間の映像を提供することができる。 As a result, the information processing apparatus 100 according to the embodiment can detect the behavior of the user who touches the object showing interest in the VR space, so that the image of the VR space including the advertisement object having a high appeal effect can be obtained. Can be provided.

また、実施形態に係る情報処理装置１００において、検出部１３３は、ユーザが仮想空間に映し出される所定のオブジェクトに接触するユーザの行動を検出する。 Further, in the information processing apparatus 100 according to the embodiment, the detection unit 133 detects the user's behavior in contact with a predetermined object projected in the virtual space.

これにより、実施形態に係る情報処理装置１００は、ユーザがＶＲ空間内のオブジェクトに対して起こしたユーザの行動を検出することができるので、訴求効果の高い広告オブジェクトを含むＶＲ空間の映像を提供することができる。 As a result, the information processing apparatus 100 according to the embodiment can detect the user's action caused by the user with respect to the object in the VR space, so that the image of the VR space including the advertisement object having a high appeal effect is provided. can do.

また、実施形態に係る情報処理装置１００において、検出部１３３は、ユーザが所定のオブジェクトを用いて行動することで、所定のオブジェクトと所定のオブジェクト以外の他のオブジェクトとを接触させるユーザの行動を検出する。 Further, in the information processing apparatus 100 according to the embodiment, the detection unit 133 performs the user's action of bringing the predetermined object into contact with another object other than the predetermined object by the user acting using the predetermined object. To detect.

また、実施形態に係る情報処理装置１００において、検出部１３３は、ユーザが所定のオブジェクトを投擲することで、所定のオブジェクト以外の他のオブジェクトに衝突させるユーザの行動を検出する。 Further, in the information processing apparatus 100 according to the embodiment, the detection unit 133 detects the user's behavior of colliding with an object other than the predetermined object by throwing the predetermined object.

これにより、実施形態に係る情報処理装置１００は、ユーザがＶＲ空間内のオブジェクトに対して起こした間接的なユーザの行動を検出することができるので、訴求効果の高い広告オブジェクトを含むＶＲ空間の映像を提供することができる。 As a result, the information processing apparatus 100 according to the embodiment can detect the indirect user action caused by the user with respect to the object in the VR space, so that the information processing device 100 including the advertising object having a high appeal effect can be detected. Images can be provided.

また、実施形態に係る情報処理装置１００において、検出部１３３は、ユーザ自身又は所定のオブジェクトに対して変化を及ぼすユーザの行動に伴うユーザ又は所定のオブジェクトの変化を検出し、出力部１３４は、変化によって異なるコンテンツを出力する。 Further, in the information processing apparatus 100 according to the embodiment, the detection unit 133 detects a change in the user or a predetermined object due to the behavior of the user who causes a change in the user himself / herself or a predetermined object, and the output unit 134 detects a change in the user or a predetermined object. Output different content depending on the change.

これにより、実施形態に係る情報処理装置１００は、ユーザ自身やオブジェクトに対する変化を及ぼすユーザの行動を検出することができるので、訴求効果の高い広告オブジェクトを含むＶＲ空間の映像を提供することができる。 As a result, the information processing apparatus 100 according to the embodiment can detect the user's behavior that causes a change to the user himself / herself or the object, so that it is possible to provide an image of the VR space including the advertisement object having a high appeal effect. ..

また、実施形態に係る情報処理装置１００において、検出部１３３は、ユーザが所定のオブジェクトに接触する接触態様に対応するユーザの行動を検出し、出力部１３４は、接触態様によって異なるコンテンツを出力する。 Further, in the information processing apparatus 100 according to the embodiment, the detection unit 133 detects the user's behavior corresponding to the contact mode in which the user contacts a predetermined object, and the output unit 134 outputs different contents depending on the contact mode. ..

また、実施形態に係る情報処理装置１００において、検出部１３３は、ユーザが所定のオブジェクトに接触する接触態様に対応するユーザの行動として、ユーザが所定のオブジェクトを触る行動、ユーザが所定のオブジェクトを摘まむ行動、ユーザが所定のオブジェクトを蹴る行動、ユーザが所定のオブジェクトを踏む行動、ユーザが所定のオブジェクトを用いてユーザの身体的変化を伴う行動のいずれか１つを検出する。 Further, in the information processing apparatus 100 according to the embodiment, the detection unit 133 uses an action of the user to touch a predetermined object and a user to perform a predetermined object as the user's action corresponding to the contact mode in which the user touches the predetermined object. One of the behavior of picking, the behavior of the user kicking a predetermined object, the behavior of the user stepping on a predetermined object, and the behavior of the user using the predetermined object with physical changes of the user are detected.

これにより、実施形態に係る情報処理装置１００は、ユーザがオブジェクトに接触する接触態様に対応する様々なユーザの行動を検出することができるので、訴求効果の高い広告オブジェクトを含むＶＲ空間の映像を提供することができる。 As a result, the information processing apparatus 100 according to the embodiment can detect various user actions corresponding to the contact mode in which the user contacts the object, so that the image in the VR space including the advertisement object having a high appeal effect can be obtained. Can be provided.

また、実施形態に係る情報処理装置１００において、出力部１３４は、コンテンツ提供主（広告主に相当）によって設定された所定の条件が満たされた場合に、コンテンツを出力する。 Further, in the information processing apparatus 100 according to the embodiment, the output unit 134 outputs the content when the predetermined condition set by the content provider (corresponding to the advertiser) is satisfied.

また、実施形態に係る情報処理装置１００において、出力部１３４は、所定の条件として、所定のオブジェクト又はユーザと所定のオブジェクトとの接触態様が満たされた場合に、コンテンツを出力する。 Further, in the information processing apparatus 100 according to the embodiment, the output unit 134 outputs the content when the contact mode between the predetermined object or the user and the predetermined object is satisfied as a predetermined condition.

これにより、実施形態に係る情報処理装置１００は、広告主によって設定された所定の条件が満たされた場合に広告オブジェクトを含むＶＲ空間の映像を出力することできるので、広告主にとって有益な広告オブジェクトの提供が実現できる。 As a result, the information processing apparatus 100 according to the embodiment can output the image of the VR space including the advertisement object when the predetermined condition set by the advertiser is satisfied, so that the advertisement object is useful for the advertiser. Can be provided.

また、実施形態に係る情報処理装置１００において、出力部１３４は、コンテンツとして、ユーザの行動に関連するコンテンツを出力する。 Further, in the information processing apparatus 100 according to the embodiment, the output unit 134 outputs the content related to the user's behavior as the content.

これにより、実施形態に係る情報処理装置１００は、広告オブジェクトとして様々な形態の情報を提供することができるので、広告主にとって有益な広告オブジェクトの提供が実現でき、かつ、ユーザにとってもユーザの趣向に合致した広告オブジェクトの提供が実現できる。 As a result, the information processing apparatus 100 according to the embodiment can provide various forms of information as an advertisement object, so that it is possible to provide an advertisement object that is useful to the advertiser, and the user's taste is also to the user. It is possible to provide an advertising object that matches the above.

以上、本願の実施形態のいくつかを図面に基づいて詳細に説明したが、これらは例示であり、発明の開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。 Although some of the embodiments of the present application have been described in detail with reference to the drawings, these are examples, and various modifications are made based on the knowledge of those skilled in the art, including the embodiments described in the disclosure column of the invention. It is possible to carry out the present invention in other modified forms.

１情報処理システム
１０広告主端末
２０ＨＭＤ
１００情報処理装置
１１０通信部
１２０記憶部
１２１ＶＲ空間構成要素情報記憶部
１２２広告オブジェクト記憶部
１２３広告オブジェクト記憶部
１２４広告オブジェクト記憶部
１３０制御部
１３１入稿受付部
１３２ユーザ行動受付部
１３３検出部
１３４出力部 1 Information processing system 10 Advertiser terminal 20 HMD
100 Information processing device 110 Communication unit 120 Storage unit 121 VR space component Information storage unit 122 Advertising object storage unit 123 Advertising object storage unit 124 Advertising object storage unit 130 Control unit 131 Submission reception unit 132 User action reception unit 133 Detection unit 134 Output section

Claims

A detection unit that detects a user's behavior that experiences a virtual space formed by an image and exerts a physical change on a predetermined object projected on the virtual space.
Based on the result detected by the detection unit, an output unit that outputs the content so that the predetermined object and the content appealing to the target indicated by the predetermined object are interchanged .
An information processing device characterized by being equipped with.

The detection unit
Detecting the user's behavior in contact with a predetermined object projected in the virtual space.
The information processing apparatus according to claim 1.

The detection unit
When the user acts using the predetermined object, the action of the user who brings the predetermined object into contact with another object other than the predetermined object is detected.
The information processing apparatus according to claim 1 or 2.

The detection unit
By throwing the predetermined object, the user detects the behavior of the user to collide with an object other than the predetermined object.
The information processing apparatus according to any one of claims 1 to 3.

The detection unit
Detecting changes in the user or the predetermined object due to the behavior of the user or the user who causes a change in the predetermined object.
The output unit is
Output different contents due to the above changes,
The information processing apparatus according to any one of claims 1 to 4.

The detection unit
As the user's behavior, the contact mode in which the user contacts the predetermined object is detected, and the user's behavior is detected.
The output unit is
Output different contents depending on the contact mode.
The information processing apparatus according to any one of claims 1 to 5.

The detection unit
The user's behavior corresponding to the contact mode in which the user touches the predetermined object includes the behavior of the user touching the predetermined object, the behavior of the user picking the predetermined object, and the behavior of the user picking the predetermined object. The user detects one of an action of kicking, an action of the user stepping on the predetermined object, and an action of the user using the predetermined object with a physical change of the user.
The information processing apparatus according to any one of claims 1 to 6, wherein the information processing apparatus is characterized.

The output unit is
Outputs the content when a predetermined condition set by the content provider is satisfied.
The information processing apparatus according to any one of claims 1 to 7.

The output unit is
As the predetermined condition, the content is output when the contact mode between the predetermined object or the user and the predetermined object is satisfied.
The information processing apparatus according to any one of claims 1 to 8.

The output unit is
As the content, the content related to the behavior of the user is output.
The information processing apparatus according to any one of claims 1 to 9, wherein the information processing apparatus is characterized.

It is an information processing method executed by a computer.
A detection process for detecting a user's behavior that experiences a virtual space formed by an image and exerts a physical change on a predetermined object projected on the virtual space.
An output step of outputting the content so that the predetermined object and the content appealing to the target indicated by the predetermined object are interchanged based on the result detected by the detection step.
An information processing method characterized by being equipped with.

A detection procedure for detecting a user's behavior that experiences a virtual space formed by an image and exerts a physical change on a predetermined object projected on the virtual space, and a detection procedure.
Based on the result detected by the detection procedure, an output procedure for outputting the content so that the predetermined object and the content appealing to the target indicated by the predetermined object are interchanged , and an output procedure.
An information processing program characterized by having a computer execute.