JP2021163287A

JP2021163287A - 拡張現実システム

Info

Publication number: JP2021163287A
Application number: JP2020065423A
Authority: JP
Inventors: 周人山本; Shuto YAMAMOTO
Original assignee: Avex Technologies Inc
Current assignee: Avex Technologies Inc
Priority date: 2020-03-31
Filing date: 2020-03-31
Publication date: 2021-10-11

Abstract

【課題】拡張現実空間に広告を提供することができるようにする。
【解決手段】拡張現実システムであって、拡張現実空間に仮想オブジェクトを配置するオブジェクト管理部と、仮想オブジェクトに関連する広告情報を取得する広告情報取得部と、広告情報を出力する広告管理出力部と、を備えることを特徴とする。
【選択図】図１

Description

本発明は、拡張現実システムに関する。

拡張現実形態のガイド情報を提供することが行われている（特許文献１参照）。

特許６１００４９６号公報

拡張現実形態のガイド情報を用いているときには広告を表示することができない。

本発明は、このような背景を鑑みてなされたものであり、拡張現実空間に広告を提供することができる技術を提供することを目的とする。

上記課題を解決するための本発明の主たる発明は、拡張現実システムであって、拡張現実空間に仮想オブジェクトを配置するオブジェクト管理部と、前記仮想オブジェクトに関連する広告情報を取得する広告情報取得部と、前記広告情報を出力する広告管理出力部と、を備えることを特徴とする。

その他本願が開示する課題やその解決方法については、発明の実施形態の欄及び図面により明らかにされる。

本発明によれば、拡張現実空間に広告を提供することができる。

本実施形態に係る広告システムの全体構成図である。本実施形態に係る広告システムのシステム構成図である。ユーザ端末３が広告を受信するプロセスを示すフローチャートである。本実施形態に係る拡張現実システムにおける拡張現実コンテンツの表示に関する説明図である。本実施形態に係る拡張現実システムにおける仮想オブジェクトと広告とのインタラクションに関する説明図である。第２の実施形態に係る拡張現実コンテンツ提供システムの構成例を示す図である。第２の実施形態に係る拡張現実コンテンツ提供システムの動作を説明する図である。

＜発明の概要＞
本発明の実施形態の内容を列記して説明する。本発明は、たとえば、以下のような構成を備える。
［項目１］
拡張現実空間に仮想オブジェクトを配置するオブジェクト管理部と、
前記仮想オブジェクトに関連する広告情報を取得する広告情報取得部と、
前記広告情報を出力する広告管理出力部と、
を備えることを特徴とする拡張現実システム。
［項目２］
項目１に記載の拡張現実システムであって、
前記オブジェクト管理部は、複数の前記仮想オブジェクトを前記仮想現実空間に配置し、
前記広告管理部出力部は、前記複数の前記仮想オブジェクトの少なくとも１つのテクスチャとして前記広告情報を設定すること、
を特徴とする拡張現実システム。
［項目３］
項目２に記載の拡張現実システムであって、
前記オブジェクト管理部は、ユーザから指定された第１の前記オブジェクトと、前記ユーザから指定されていない第２の前記オブジェクトとを前記仮想現実空間に配置し、
前記広告取得部は、前記第１のオブジェクトに関連する前記広告情報を取得し、
前記広告出力部は、前記第２のオブジェクトに前記広告情報を設定すること、
を特徴とする拡張現実システム。
［項目４］
項目１に記載の拡張現実システムであって、
前記拡張現実空間において前記オブジェクトを動作させるためのシーン情報を記憶する記憶部をさらに備え、
前記広告情報取得部は、前記シーン情報に関連する前記広告情報を取得すること、
を特徴とする拡張現実システム。
［項目５］
項目１に記載の拡張現実システムであって、
前記オブジェクト管理部は、前記拡張現実空間において前記オブジェクトを動かし、
前記広告取得部は、前記オブジェクトの動きに関連する前記広告情報を取得すること、
を特徴とする拡張現実システム。

本発明の実施形態に係る広告システムの具体例を、以下に図面を参照しつつ説明する。なお、本発明はこれらの例示に限定されるものではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。以下の説明では、図面の説明において同一の要素には同一の符号を付し、重複する説明を省略する。

図１は、本実施形態に係る広告システムの全体構成図である。図２は、本実施形態に係る広告システムのシステム構成図である。広告システム１は、サービス側のサーバ２と、サーバ２とインターネットＩを介して双方向通信するユーザ端末３と、を含んで備えている。

サーバ２は、顧客に広告を提供する機能を有しており、主にサーバ通信部２１と、記憶部２２と、広告提供部２３と、を含んで備えている。

サーバ通信部２１は、顧客の端末等外部機器と通信可能な部分であり、例えば無線通信手段であってもよい。

記憶部２２は、様々な情報が記憶されているデータベースやプログラム等が記憶されている。例えば記憶部には、現実拡張に用いられる広告が記憶されている広告ＤＢ２２ａ等が含まれている。また、現実拡張に用いられいる広告は、少なくとも商品や役務サービスに関する広告が含まれている。また、広告の形態として、静止画、動画、仮想オブジェクトを含む視覚情報と、音声情報と、匂い情報と、味覚情報と、触覚情報等が含まれている。また、各広告には少なくとも１つの情報に紐づけされている。例えば、商品広告には、種類、形状、大きさ、特徴、値段、態様等商品の属性情報や、当該商品の販売場所等商品の関連情報が含んで紐づけされている。また、役務サービス広告は、役務サービスの種類、特徴、値段、態様等の属性情報や、役務サービスを受けられる場所等関連情報が含んで紐づかされている。

広告提供部２３は、広告を広告DB２２ａから抽出し、ユーザ端末３へ送信する機能を備えている。また、広告提供部２３は、ユーザ端末３から様々な情報を取得することができ、取得した情報に関連する広告を抽出する機能を備えている。

ユーザ端末３は、例えばスマートフォン、タブレットやノートパソコンのような電子端末であってもよく、主に端末通信部３１と、カメラ３２と、入力部３３と、表示部３４と、オブジェクト管理部３５と、広告管理部３６、広告対応部３７と、情報出力部３８と、位置特定部３９と、を含んで備えている。

端末通信部３１は、外部機器と通信可能な部分であり、例えば無線通信手段である。

カメラ３２は、撮影動作等を行う部分であり、光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等の撮像素子やシャッターを有している。また静止画のみに限らず動画像をも撮影することができる。

入力部３３は、例えば、タッチパネルやキーボード等のように、ユーザの操作を介して入力することができる。また、入力部３３は、手による操作のみならず、例えば音声による入力でもよい。

表示部３４は、例えば液晶モニタであり、各種情報を表示可能である。また、表示部３４は、入力部３３と一体であってもよい。

広告情報取得部は、広告情報を取得する機能を備えている。

オブジェクト記憶部３５ａは、例えば、仮想のキャラクターや日常用品等をモチーフにした仮想オブジェクトを生成するために必要なモデル情報を記憶する。モデル情報は、例えば、ＵＳＤＺやｇｌＴＦなどの形式のデータとすることができる。また、モデル情報には、例えば、仮想オブジェクトに直接関連する属性情報や、広告属性情報や広告関連情報に対応する広告対応情報が含まれている。属性情報は、例えば、外観、種類、態様、部品構成等の情報が含まれいる。

オブジェクト管理部３５ｂは、拡張現実コンテンツを作成する。具体的には、オブジェクト管理部３５ｂは、現実空間の画像（カメラ３２が撮影した画像）に重畳表示させる拡張現実画像を作成する。オブジェクト管理部３５ｂは、オブジェクト記憶部３５ａに記憶されているモデル情報に基づいて仮想オブジェクトを作成し、拡張現実空間に配置することができる。オブジェクト管理部３５ｂは、また、後述する広告管理部３６が作成した広告オブジェクトを拡張現実空間に配置することもできる。

広告管理部３７は、広告情報を出力する機能を備えている。例えば、広告管理部は、受信した広告情報を当該広告情報に適する広告オブジェクトに適用する。広告オブジェクトは、オブジェクト管理部３５ｂが作成した仮想オブジェクトである。広告オブジェクトは、例えば、キャラクター等の、ユーザが指定したオブジェクトとともに配信されるオブジェクト（周辺オブジェクト）である。広告オブジェクトは、例えば、額縁やテレビジョンなど、元来その表面にコンテンツを表示するための仮想オブジェクトであってもよいし、壁や机、ドアなど、キャラクタ等のメインコンテンツとなる仮想オブジェクトの周囲に配される物品を表す仮想オブジェクトであってもよいし、Ｔシャツやカップなど、キャラクタ等のメインコンテンツとなる仮想オブジェクトが有している他の仮想オブジェクトであってもよい。広告管理部３７は、例えば、静止画像や動画像の広告情報を広告オブジェクトの表面にテクスチャとして貼付することにより、広告オブジェクトの外観に広告を表示させることができる。また、例えば、広告情報が音声情報である場合、広告オブジェクトに音声情報を付帯させて、広告オブジェクトの再生時に音声情報も再生させることができる。例えば、広告管理部３７は、新しい衣服に関する広告情報を受信した場合、衣服をモチーフにした広告オブジェクトの表面に新しい衣服のデザインを貼付させることができる。広告管理部３７は、広告情報の属性情報に対応している属性の広告オブジェクトに広告情報を装着させることができる。例えば、広告管理部３７は、新曲の広告情報を受信した場合、広告属性情報は音楽であるので、音楽に対応する広告対応情報を含んでいるラジカセをモチーフにした広告オブジェクトに装着させることができる。なお、広告管理部は、仮想オブジェクトが複数ある場合は、少なくとも１つのテクスチャとして前記広告情報を設定することも可能である。

情報出力部３８は、様々な情報やデータを表示部３４に出力させる機能を備えている。また、情報出力部３８は、映像のみならず、音声情報、匂い情報、触覚情報、味覚情報等を出力する機能を備えている。

位置特定部３９は、例えばGPS等衛星測位や近距離無線技術を用いて測位するビーコン等により、ユーザ端末３の位置情報を取得する機能を備えている。また、位置特定部３９は、取得した位置情報をサーバ２に送信することもできる。

図３は、ユーザ端末３が広告を受信するプロセスを示すフローチャートである。図４は、本実施形態に係る拡張現実システムにおける拡張現実コンテンツの表示に関する説明図である。図５は、本実施形態に係る拡張現実システムにおける仮想オブジェクトと広告とのインタラクションに関する説明図である。

まず、ステップＳ１として、ユーザは、ユーザ端末３において拡張現実モードを起動させる。拡張現実モードとは、ユーザ端末３のカメラ３２が起動されており、カメラ３２が撮影している周囲の実空間映像Ｐ（現実空間の情報）と、オブジェクト管理部３７が生成した仮想キャラクターOとドリンクをモチーフにした仮想ドリンクD（仮想オブジェクト）が、表示部３４に表示されている状態である。

次にステップＳ２では、ユーザ端末３は、サーバ２に位置情報を送信する。

次にステップS３では、サーバ２の広告提供部２３は、広告DB２２ａから位置情報に関連する広告を抽出し、ユーザ端末３に送信する。本実施形態では、受信した位置情報に基づいてユーザ端末３の位置から所定の範囲内にあるカフェで販売されているドリンクに関する広告を抽出している。

次にステップS４では、広告対応部３７は、受信した広告に対して、適する仮想ドリンクＤに対応づけさせて広告オブジェクトCを生成させる。

次にステップS５では、オブジェクト管理部３５は、仮想キャラクターＯに広告オブジェクトCに反応させるように制御する。本実施形態では、仮想キャラクターOは、広告オブジェクCを持上げているが、これに限らない。例えば、仮想キャラクターは、広告オブジェクトを触れたり、叩いたり等広告オブジェクトに外力を加えてもよい。また、仮想キャラクターは、広告オブジェクトに関して言及してもよい。例えば、広告を受信したり、広告オブジェクトが生成されたりすると、仮想キャラクターは、その旨について音声出力する等がある。また、仮想キャラクターは、その用途に応じて使用してもよい。例えば、広告オブジェクトがドリンクの場合、仮想キャラクターは、その広告オブジェクトに対して飲む仕草を行うことができる。

次に、ステップＳ６では、ユーザは、広告の内容を表示また再生させ、以上で本実施形態におけるプロセスは終了する。

このように、本実施形態における広告システム１は、ユーザが広告に対して関心を持たせることができ、さらに仮想キャラクターが広告オブジェクトに対して反応することで、ユーザに購買意欲を促す効果がある。

以上で本発明の実施形態の説明を終えるが、本発明の態様はこの実施形態に限定されるものではない。

＜第２の実施形態＞
図６は、第２の実施形態に係る拡張現実コンテンツ提供システムの構成例を示す図である。第２の実施形態では、ユーザ端末３は広告受信部３６及び広告管理部３７を省略している。また、サーバ２の記憶部２２は、広告ＤＢ２２ａに加えてオブジェクトＤＢ２２ｂを備える。

オブジェクトＤＢ２２ｂは、拡張現実空間に配置する仮想オブジェクトのモデル情報（以下、単に仮想オブジェクトともいう。）を記憶する。モデル情報は、例えば、ＵＳＤＺやｇｌＴＦなどの形式のデータとすることができる。

第２の実施形態において、提供部２３は、拡張現実コンテンツを提供する。提供部２３は、例えば、ユーザ端末３からのリクエストに応じて拡張現実コンテンツを提供することができる。リクエストには、キャラクターなどのユーザが閲覧を希望する仮想オブジェクト（以下、コンテンツオブジェクトという。）が指定される。提供部２３は、リクエストに指定されているコンテンツオブジェクトを記憶部２２から読み出し、コンテンツオブジェクトと当該コンテンツオブジェクトを拡張現実空間に配置するためのシーン情報とを含む拡張現実コンテンツをユーザ端末３に応答する。この際に、提供部２３は、広告を表示するための仮想オブジェクト（以下、広告オブジェクトという。）を拡張現実コンテンツに含めてユーザ端末３に応答することができる。提供部２３は、例えば、広告オブジェクトのテクスチャとして、広告画像を貼り付ける（設定する）ことができる。なお、提供部は、ユーザ端末からのリクエストに応じて、コンテンツオブジェクトを提供しているが、これに限らない。例えば、オブジェクト管理部は、ユーザ端末からコンテンツオブジェクトのリクエストがあった場合、オブジェクト管理部は、リクエストの有ったコンテンツオブジェクト（第１のオブジェクト）と広告オブジェクト（第２のオブジェクト）をユーザ端末に提供してもよい。また第２のオブジェクトには第１のオブジェクトに関連する広告情報が設定されてもよい。

図７は、第２の実施形態に係る拡張現実コンテンツ提供システムの動作を説明する図である。

ステップＳ２において、ユーザ端末３が拡張現実コンテンツのリクエストをサーバ２に送信する。リクエストには、ユーザが閲覧したいキャラクタなどの仮想オブジェクトの指定が含まれる。

ステップＳ３において、サーバ２は、リクエストに応じて拡張現実コンテンツを作成する。サーバ２は、例えば、リクエストに指定されたキャラクタ等の仮想オブジェクト（以下、コンテンツオブジェクトという。）に対応するモデル情報をオブジェクトＤＢ２２ｂから読み出して、拡張現実コンテンツを作成すことができる。サーバ２はまた、ユーザからの指定のない、例えば背景のセットや小物等のオブジェクトを広告オブジェクトとして生成し、広告情報を広告オブジェクトのテクスチャに貼付したうえで拡張現実コンテンツに含めることができる。また、サーバ２は、コンテンツオブジェクト及び広告オブジェクトの配置位置や動きなどを指定したシーン情報を拡張現実コンテンツに含めることができる。

ステップＳ４において、ユーザ端末３は、拡張現実コンテンツを受信し、受信した拡張現実コンテンツに基づいて、拡張現実のシーンを作成することができる。

以上のようにして、第２の実施形態に係る拡張現実コンテンツ提供システムによれば、ユーザが閲覧しようとするコンテンツオブジェクトに付随させて広告オブジェクトを提供することができる。したがって、ユーザが興味を持っているコンテンツオブジェクトと同一の拡張現実空間に広告を配置することができる。

＜変形例＞
上記実施形態では、オブジェクト記憶部３５ａでは、仮想オブジェクトの属性情報として、外観、種類、態様、部品構成等の情報が含まれいるが、これに限らない。例えば、様々なモーションや会話フレーズ等の行動情報が含まれても良いし、複数のオブジェクトがセットで一連のモーションや会話する動作等のシーン情報が含まれても良い。また、オブジェクト管理部３５ｂは、ユーザのリクエストした行動情報またはシーン情報に基づいて、仮想オブジェクトを動作させるように制御することができる。また、ユーザが仮想オブジェクトに行動をリクエストしたり、複数のオブジェクトに対して一連の動作をリクエストした場合は、その旨は、オブジェクト記憶部３５ａに記憶される。または、その旨をサーバの広告提供部に送信される。

そして、サーバの広告提供部は、行動情報またはシーン情報に基づいた広告を広告ＤＢから抽出して、ユーザ端末に送信することができる。

また、上記実施形態における、拡張現実モードは、カメラ３２が撮影している周囲の実空間映像Ｐ（現実空間の情報）と、オブジェクト管理部３７が生成している仮想キャラクターＯ（仮想オブジェクト）とが、表示部３４に表示されている状態としているが、これに限らない。例えば、ユーザ端末の位置情報とユーザ端末が向いている方向に基づいて、カメラによって撮影されている周囲の現実空間（建物、道路、オブジェクト等）を認識する拡張現実による道案サービス（例えばGoogle map サービスであるLive View）であってもよい。

また、オブジェクト管理部３５は、拡張現実モードにより認識した周囲の現実空間（建物、道路、オブジェクト等）をその全部または一部を仮想オブジェクト（実空間オブジェクト）に変換する機能を備えてもよい。

また、サーバ２の広告提供部２３は、位置情報と前記現実空間オブジェクトに関する情報に関連する広告を抽出してユーザ端末３に送信してもよい。

上記実施形態では、広告は、映像で表示してあるが、これに限らず音声情報でもよい。

また、上記実施形態における広告と、現実空間の環境は匂い情報でもよい。例えばは、ユーザ端末３の情報出力部３８には、匂いの素が少なくとも一つ含まれており、情報出力部３８は、１又は複数の匂いの素を放出させることができる。匂いの素は、例えば、フラネオール（イチゴの香り）や１−ヘキサノール（森林の香り）等の単一の化学物質でもよいし、これらを組合わせたものでもよい。また、例えば、化学物質の組成を問わず、ジャスミンの香りと同等の香りを１単位とする匂いでもよい。即ち、情報出力部３８は、例えば、イチゴミルクの匂いを出力方法として、複数の化学物質の組合せによって同等の匂いを出力しても良いし、イチゴの匂いを１単位とする匂いと、ミルクの匂いを１単位とするの匂いとを組合わせて出力してもよい。

また、上記実施形態における広告と、現実空間の環境は味覚情報でもよい。例えば、ユーザ端末３の情報出力部３８には、味覚の素が少なくとも一つが含まれており、情報出力部３８は、１又は複数の味覚の素を放出させることができる。味覚の素は、例えば、イノシン酸やグルタミン酸等の単一の化学物質でも良いし、これらを組合わせたものでもよい。また、例えば、化学物質の組成を問わず、イチゴ味と同等の味を１単位とする味でもよい。即ち、情報出力部３８は、例えば、イチゴチョコレートの味覚情報を出力方法として、複数の化学物質の組合せによって同等の味を出力しても良いし、イチゴ味を１単位とする味と、チョコレート味を１単位とする味とを組合わせて出力してよい。

また、上記実施形態における広告と、現実空間の環境は触覚情報でもよい。（請求項１４の効果）

また、本実施形態では、拡張現実（ＡＲ；Augumented Reality）による仮想空間を想定していたが、これに限らず、仮想現実（ＶＲ；Virtual Reality）空間あるいは複合現実（ＭＲ；Mixed Reality）空間であっても本実施形態の広告システムはそのまま適用可能である。

１広告システム
２サーバ
３ユーザ端末
２１サーバ通信部
２２記憶部
２２ａ広告ＤＢ
２３広告提供部
３１端末通信部
３２カメラ
３３入力部
３４表示部
３５オブジェクト管理部
３６広告管理部
３７広告対応部
３８情報出力部
３９位置特定部

Claims

拡張現実空間に仮想オブジェクトを配置するオブジェクト管理部と、
前記仮想オブジェクトに関連する広告情報を取得する広告情報取得部と、
前記広告情報を出力する広告管理出力部と、
を備えることを特徴とする拡張現実システム。
請求項１に記載の拡張現実システムであって、
前記オブジェクト管理部は、複数の前記仮想オブジェクトを前記仮想現実空間に配置し、
前記広告管理部出力部は、前記複数の前記仮想オブジェクトの少なくとも１つのテクスチャとして前記広告情報を設定すること、
を特徴とする拡張現実システム。
請求項２に記載の拡張現実システムであって、
前記オブジェクト管理部は、ユーザから指定された第１の前記オブジェクトと、前記ユーザから指定されていない第２の前記オブジェクトとを前記仮想現実空間に配置し、
前記広告取得部は、前記第１のオブジェクトに関連する前記広告情報を取得し、
前記広告出力部は、前記第２のオブジェクトに前記広告情報を設定すること、
を特徴とする拡張現実システム。
請求項１に記載の拡張現実システムであって、
前記拡張現実空間において前記オブジェクトを動作させるためのシーン情報を記憶する記憶部をさらに備え、
前記広告情報取得部は、前記シーン情報に関連する前記広告情報を取得すること、
を特徴とする拡張現実システム。
請求項１に記載の拡張現実システムであって、
前記オブジェクト管理部は、前記拡張現実空間において前記オブジェクトを動かし、
前記広告取得部は、前記オブジェクトの動きに関連する前記広告情報を取得すること、
を特徴とする拡張現実システム。