JP5600148B2 - 映像配信装置、映像配信方法及び映像配信プログラム - Google Patents

Description

本発明は、映像配信装置、映像配信方法及び映像配信プログラムに関する。

従来、自由視点映像と呼ばれる技術が知られている。自由視点映像とは、視点位置が異なる複数台の撮像装置（例えば、カメラ）から得られた映像に基づいて、自由な視点位置から見た映像を生成する技術である。

かかる自由視点映像技術においては、例えば、利用者が指定した任意の視点から見た画像を表示する一方、画像データを生成するために使用したカメラの光軸の方向等に基づく視点位置に誘導する技術が提案されている（特許文献１参照）。

特開２０１０−７２９２１号公報

しかしながら、上記従来の自由視点映像の技術では、ショッピングサイトやオークションサイト等のｅコマースサービスにおいて、ユーザの購買意欲を向上させることが困難であった。具体的には、ｅコマースサービスにおいて取り扱う商品を自由視点映像により提供する場合、上記の従来技術では、予め決められている視点位置に誘導することに留まり、ユーザの購買意欲を向上させることができるとは限らなかった。

本願は、上記に鑑みてなされたものであって、ユーザの購買意欲を向上させることができる映像配信装置、映像配信方法及び映像配信プログラムを提供することを目的とする。

本願に係る映像配信装置は、ユーザに関するユーザ情報を記憶するユーザ情報記憶手段と、視点位置が異なる映像データに基づいて生成される被写体に関する自由視点映像に対して行われた視点条件を変更する操作の履歴である操作履歴を記憶する操作履歴記憶手段と、第１ユーザが利用する端末装置から前記被写体に関する自由視点映像の配信要求を受け付けた場合に、前記ユーザ情報記憶手段に記憶されているユーザ情報に基づいて、前記第１ユーザとユーザ情報が類似する第２ユーザを抽出する抽出手段と、前記抽出手段によって抽出された第２ユーザに対応する操作履歴を前記操作履歴記憶手段から取得し、取得した操作履歴に基づいて生成した前記被写体に関する自由視点映像を前記端末装置に配信する映像配信手段と、を備えることを特徴とする。

実施形態の一態様によれば、ユーザの購買意欲を向上させることができるという効果を奏する。

図１は、実施形態に係るネットワークシステムの構成を示す図である。 図２は、実施形態に係る映像配信装置の構成例を示す図である。 図３は、実施形態に係るユーザ情報記憶部の一例を示す図である。 図４は、実施形態に係る操作履歴記憶部の一例を示す図である。 図５は、実施形態に係る視点条件を説明するための図である。 図６は、実施形態に係る自由視点映像を含むウェブページの一例を示す図である。 図７は、実施形態に係る映像配信装置による映像配信処理手順を示すフローチャートである。 図８は、実施形態に係る自由視点映像を含むウェブページの一例を示す図である。

以下に、本願に係る映像配信装置、映像配信方法及び映像配信プログラムを実施するための形態（以下、「実施形態」と呼ぶ）について図面を参照しつつ詳細に説明する。なお、この実施形態により本願に係る映像配信装置、映像配信方法及び映像配信プログラムが限定されるものではない。また、以下の各実施形態において同一の部位には同一の符号を付し、重複する説明は省略される。

〔１．ネットワークシステムの構成〕
図１は、実施形態に係るネットワークシステムの構成を示す図である。図１に示すように、ネットワークシステム１は、映像配信システム２と、複数の端末装置３とを含む。映像配信システム２は、ネットワーク４を介して端末装置３と通信可能に接続される。

映像配信システム２は、ショッピングサイトやオークションサイト等のｅコマースサービスを提供する。かかる映像配信システム２は、被写体である撮像対象Ａに関する自由視点映像を生成し、生成した自由視点映像を端末装置３に配信する。かかる撮像対象Ａは、例えば、ショッピングサイトやオークションサイトに出品される取引対象の商品等に該当する。このような自由視点映像は、視点位置、視線方向および画角を自由に選択することが可能である。すなわち、端末装置３のユーザは、撮像対象Ａの自由視点映像のうち所望する視点位置、視線方向および画角の映像である任意視点位置の映像を閲覧することができる。

端末装置３は、映像配信システム２によって配信される自由視点映像を閲覧するユーザによって利用される。例えば、端末装置３は、パーソナルコンピュータ（Personal Computer）、携帯電話機、ＰＤＡ（Personal Digital Assistant）等に該当する。

映像配信システム２は、複数の撮像装置１０と、映像配信装置１１とを有する。各撮像装置１０は、所定の商品等の撮像対象Ａに対して互いに異なる視点位置に配置されており、撮像した撮像対象Ａの各領域の映像データを映像配信装置１１に出力する。撮像装置１０から出力される映像データは、例えば、３０フレーム／秒の動画像データである。

映像配信装置１１は、複数の撮像装置１０から出力される撮像対象Ａに関する映像データに基づいて、ポリゴン（例えば、三角形や四角形等の多角形のポリゴン）によって表現される３次元モデルを生成する。そして、映像配信装置１１は、３次元モデルにテクスチャをマッピングすることで撮像対象Ａに関する自由視点映像を生成し、かかる自由視点映像を端末装置３に配信する。

ここで、実施形態に係る映像配信装置１１は、各端末装置３を利用するユーザ毎に、かかるユーザに関するユーザ情報（後述するサイコグラフィック属性やデモグラフィック属性など）を保持する。また、映像配信装置１１は、端末装置３のユーザによって自由視点映像の視点条件を変更する操作が行われた場合に、かかる操作履歴をユーザ毎に保持しておく。なお、詳細については後述するが、視点条件とは、例えば、視点位置、視線方向、画角等の条件を示す。

そして、映像配信装置１１は、所定の商品に関する自由視点映像の配信要求を端末装置３から受信した場合に、かかる端末装置３のユーザとユーザ情報が類似する他のユーザを抽出する。そして、映像配信装置１１は、他のユーザに対応する操作履歴に基づいて、他のユーザが操作した自由視点映像と同様に視点条件が変化するデモンストレーション（以下、デモと略記する）用の自由視点映像を生成し、生成したデモ用の自由視点映像を配信要求の送信元である端末装置３に配信する。

このように、映像配信装置１１は、デモ用の自由視点映像を配信要求の送信元ユーザに閲覧させることができるので、かかる送信元ユーザの購買意欲を向上させることができる。具体的には、ユーザ情報が類似するユーザ同士は同様の嗜好を有することが考えられる。このため、他のユーザが興味を持って閲覧した商品の部位は、送信元ユーザも興味を持つ可能性が高い部位であることが考えられる。すなわち、送信元ユーザは、他のユーザによる視点変更操作や拡大操作に即した自由視点映像を閲覧することで、他のユーザが注目した商品の部位を閲覧することになるので、かかる商品に対して興味を持つ可能性が高い。このようなことから、映像配信装置１１は、送信元ユーザの商品に対する購買意欲を向上させることができる。

なお、映像配信装置１１は、類似する他のユーザが操作した自由視点映像としてデモ用の自由視点映像を配信するので、かかるデモ用の自由視点映像に対する視点条件の変更操作を受け付けない。ただし、映像配信装置１１は、デモ用の自由視点映像を配信した後に、視点条件の変更操作が可能な自由視点映像（以下、通常の自由視点映像と表記する）を配信する。そして、映像配信装置１１は、通常の自由視点映像に対して視点条件の変更操作が行われた場合に操作履歴を保持しておき、今後にデモ用の自由視点映像を配信する際にかかる操作履歴を利用する。以下、このような映像配信装置１１についてさらに具体的に説明する。

〔２．映像配信装置の構成〕
図２は、実施形態に係る映像配信装置１１の構成例を示す図である。図２に示すように、映像配信装置１１は、通信部１２と、ユーザ情報記憶部１３と、操作履歴記憶部１４と、制御部１５とを有する。

通信部１２は、ネットワーク４に接続され、ネットワーク４を介して端末装置３との間で情報の送受信を行う。かかる通信部１２は、ネットワーク４との接続を有線または無線で行う。例えば、通信部１２は、ＮＩＣ（Network Interface Card）等によって実現される。

ユーザ情報記憶部１３及び操作履歴記憶部１４は、例えば、ＲＡＭ（Random Access Memory)、フラッシュメモリ（Flash Memory）等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。

（ユーザ情報記憶部１３について）
ユーザ情報記憶部１３は、端末装置３を利用するユーザに関するユーザ情報としてユーザ属性を記憶する。ここで、図３に、実施形態に係るユーザ情報記憶部１３の一例を示す。図３に示すように、ユーザ情報記憶部１３は、「ユーザＩＤ」、「サイコグラフィック属性」、「デモグラフィック属性」といった項目を有する。

「ユーザＩＤ」は、端末装置３を利用するユーザを識別するための識別情報である。例えば、「ユーザＩＤ」は、映像配信装置１１がｅコマースサービスを会員向けに提供している場合には、会員ＩＤ（ログインＩＤ）などに該当する。また、例えば、「ユーザＩＤ」は、映像配信装置１１と端末装置３との間で送受信されるＨＴＴＰクッキー（HyperText Transfer Protocol Cookie：以下、単に「クッキー」と表記する）に設定されるユーザ識別情報に該当する。

「サイコグラフィック属性」は、ユーザの価値観、ライフスタイル、性格、嗜好などを示す情報である。かかる「サイコグラフィック属性」は、例えば、「コスメ（化粧品）」、「車」、「服」、「旅行」などの属性区分に分類される。図３に示す例では、属性区分毎に、ユーザの嗜好が相対的に高い場合に「１」が記憶され、それ以外の場合には「０」が記憶される。ただし、これに限定されるものではなく、各属性区分は、例えば、ユーザの嗜好を３段階以上に評価した情報を記憶してもよい。また、「サイコグラフィック属性」は、図３に示した属性区分の例に限られず、経済、政治、野球、サッカー、その他スポーツ、スイーツ、パソコン、白物家電、家具など様々な属性区分が含まれてもよい。

「デモグラフィック属性」は、人口統計学的なユーザの属性情報を示す。かかる「デモグラフィック属性」は、例えば、ユーザの「性別」、「年齢」などの属性区分に分類される。図３に示す「性別」には、ユーザが女性である場合には「１」が記憶され、ユーザが男性である場合には「２」が記憶される。また、「年齢」には、ユーザの年齢が記憶される。なお、「デモグラフィック属性」は、図３に示した属性区分の例に限られず、ユーザの職業、家族構成、年収、住所、出身地、学歴など様々な属性区分が含まれてもよい。

例えば、図３では、ユーザＩＤ「Ｕ００１」によって識別されるユーザが、コスメ、服に対して高い嗜好を有し、２８歳の女性であることを示している。また、例えば、図３では、ユーザＩＤ「Ｕ００４」によって識別されるユーザが、旅行に対して高い嗜好を有し、４４歳の男性であることを示している。

（操作履歴記憶部１４について）
操作履歴記憶部１４は、ユーザ毎かつ商品毎に、かかる商品に関する自由視点映像に対する操作履歴を記憶する。ここで、図４に、実施形態に係る操作履歴記憶部１４の一例を示す。図４に示すように、操作履歴記憶部１４は、「ユーザＩＤ」、「商品ＩＤ」、「購入履歴」、「操作履歴」といった項目を有する。

「ユーザＩＤ」は、図３に示したユーザＩＤに対応する。「商品ＩＤ」は、映像配信装置１１が提供するショッピングサイトやオークションサイト等に出品される商品を識別するための識別情報を示す。言い換えれば、「商品ＩＤ」は、映像配信装置１１によって自由視点映像が生成される商品の識別情報を示す。「購入履歴」は、ユーザが商品を購入したか否かを示す。

例えば、図４では、ユーザＩＤ「Ｕ００１」によって識別されるユーザが、商品ＩＤ「Ｃ００１」によって識別される商品を購入したことを示す。また、例えば、図４では、ユーザＩＤ「Ｕ００１」によって識別されるユーザが、商品ＩＤ「Ｃ００２」によって識別される商品を購入していないことを示す。

「操作履歴」は、自由視点映像に対するユーザの操作履歴を示す。図４に示した例では、操作履歴には、ユーザによる操作毎に「操作内容」が記憶される。例えば、図４では、ユーザによって「操作内容１」における操作が行われた後に、「操作内容２」における操作が行われたことを示す。なお、図４では図示することを省略したが、操作履歴には、ユーザによって行われた操作回数Ｎに応じて、「操作内容３」、・・・、「操作内容Ｎ」といった情報が記憶される。

各操作内容には、「視点位置」、「視線方向」、「画角」、「経過時間」といった情報が記憶される。「視点位置」は、例えば、撮像対象Ａが置かれる撮像空間における３次元座標（ｘ、ｙ、ｚ）等で規定される。「視線方向」は、例えば、撮像対象Ａが置かれる撮像空間におけるベクトル成分（Ｖｘ、Ｖｙ、Ｖｚ）等で規定される。「画角」は、例えば、画角またはズーム率などによって規定される。「経過時間」は、１つ前の操作が行われてから、今回の操作が行われるまでの経過時間を示す。図４の例では、「経過時間」には、秒単位の時間が記憶されるものとする。

例えば、図４では、ユーザＩＤ「Ｕ００１」によって識別されるユーザが、商品ＩＤ「Ｃ００１」によって識別される商品に関する自由視点映像に対して、視点位置「ｘ１、ｙ１、ｚ１」、視線方向「Ｖｘ１、Ｖｙ１、Ｖｚ１」、画角「６０度」となるように視点条件を変更する操作を行い、その後に１０秒が経過した際に、視点位置「ｘ２、ｙ２、ｚ２」、視線方向「Ｖｘ２、Ｖｙ２、Ｖｚ２」、画角「４０度」となるように視点条件を変更した例を示している。

ここで、図５を用いて、実施形態に係る視点条件について説明する。図５は、実施形態に係る視点条件を説明するための図である。なお、図５では、視点位置が「ｘ１、ｙ１、ｚ１」であり、視線方向が「Ｖｘ１、Ｖｙ１、Ｖｚ１」である例を示す。図５に示した例において、撮像空間Ｅは、複数の撮像装置１０によって撮像される空間であり、被写体である撮像対象Ａが置かれる。ここでは、撮像対象Ａが携帯電話機である例を示している。

図５に示した視点位置「ｘ１、ｙ１、ｚ１」は、撮像空間Ｅにおける３次元座標に該当し、撮像対象Ａを見る位置を規定する。また、視線方向「Ｖｘ１、Ｖｙ１、Ｖｚ１」は、視点位置「ｘ１、ｙ１、ｚ１」を基点とする方向ベクトルに該当し、視点位置「ｘ１、ｙ１、ｚ１」から撮像対象Ａを見る方向を規定する。また、視線方向「Ｖｘ１、Ｖｙ１、Ｖｚ１」の大きさは、視点位置「ｘ１、ｙ１、ｚ１」から撮像対象Ａまでの距離に該当し、撮像対象Ａの表示サイズを規定する。また、画角は、視点位置「ｘ１、ｙ１、ｚ１」から撮像対象Ａを見る範囲に該当する。例えば、画角が「６０°」である場合、視点位置「ｘ１、ｙ１、ｚ１」から視線方向「Ｖｘ１、Ｖｙ１、Ｖｚ１」を中心とした画角「±３０度（６０度）」の範囲内に位置する撮像対象Ａが自由視点映像として生成される。

（制御部１５について）
制御部１５は、例えば、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）等によって、内部の記憶装置に記憶されているプログラム（映像配信プログラムの一例に相当）がＲＡＭを作業領域として実行されることにより実現される。また、制御部１５は、例えば、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路により実現される。

かかる制御部１５は、映像取得部２１と、配信要求受付部２２と、抽出部２３と、映像配信部２４とを有し、以下に説明する情報処理の機能や作用を実現または実行する。なお、制御部１５の内部構成は、図２に示した構成に限られず、後述する情報処理を行う構成であれば他の構成であってもよい。

（映像取得部２１について）
映像取得部２１は、撮像対象Ａが置かれる撮像空間Ｅに対して異なる視点位置に配置された複数の撮像装置１０のそれぞれから出力される映像データを取得し、取得した各映像データを映像配信部２４に出力する。

（配信要求受付部２２について）
配信要求受付部２２は、端末装置３から、自由視点映像の配信要求を受け付ける。上記の通り、映像配信装置１１はｅコマースサービスを提供する。したがって、配信要求受付部２２は、例えば、所定の商品に関する自由視点映像を含むショッピングサイトやオークションサイト等におけるウェブページの配信要求を受け付ける。

ここで、配信要求受付部２２は、配信要求を受け付けた際に、端末装置３のユーザを識別するためのユーザＩＤについても受け付ける。例えば、配信要求受付部２２は、ショッピングサイトやオークションサイトにログインするためのログインＩＤをユーザＩＤとして端末装置３から受け付ける。また、例えば、配信要求受付部２２は、端末装置３から配信要求とともにクッキーを受け付けることにより、かかるクッキーからユーザＩＤを取得する。

（抽出部２３について）
抽出部２３は、配信要求受付部２２によって配信要求が受け付けられた場合に、ユーザ情報記憶部１３に記憶されているユーザ情報に基づいて、配信要求の送信元ユーザとユーザ情報が類似する他のユーザを抽出する。

具体的には、抽出部２３は、配信要求により自由視点映像が要求されている商品の商品ＩＤに対応するユーザＩＤであり、かつ、配信要求の送信元ユーザのユーザＩＤと異なるユーザＩＤを操作履歴記憶部１４から取得する。続いて、抽出部２３は、操作履歴記憶部１４から取得したユーザＩＤ毎に、かかるユーザＩＤに対応するユーザ属性をユーザ情報記憶部１３から取得する。さらに、抽出部２３は、送信元ユーザのユーザＩＤに対応するユーザ属性をユーザ情報記憶部１３から取得する。続いて、抽出部２３は、ユーザ情報記憶部１３から取得したユーザ属性と、送信元ユーザに対応するユーザ属性とを比較することにより、送信元ユーザと、送信元ユーザと異なる他のユーザとの類似性を判定する。そして、抽出部２３は、送信元ユーザと最も類似する他のユーザを抽出し、抽出した他のユーザのユーザＩＤを映像配信部２４に出力する。

なお、抽出部２３による類似性の判定処理はいくつか例が考えられる。例えば、抽出部２３は、ユーザ属性のサイコグラフィック属性については、属性区分（「コスメ」、「車」、「服」、「旅行」など）が一致する数（又は、一致する数の割合）をユーザ間の類似度として算出する。または、サイコグラフィック属性が「０」又は「１」の情報ではなく３段階以上に評価した情報を記憶する場合には、抽出部２３は、かかる属性区分に記憶されている数値の差異が小さいほど高い類似度を算出する。

また、例えば、抽出部２３は、ユーザ属性のデモグラフィック属性については、属性区分（「性別」、「年齢」など）が一致する数（又は、一致する数の割合）をユーザ間の類似度として算出したり、属性区分に記憶されている数値の差異が小さいほど高い類似度を算出する。

また、抽出部２３は、属性区分毎に重み付けを行って類似度を算出してもよい。例えば、サイコグラフィック属性よりもデモグラフィック属性を重視することが指定されている場合には、抽出部２３は、サイコグラフィック属性が類似するユーザ間よりも、デモグラフィック属性が類似するユーザ間の類似度を高く算出する。また、例えば、サイコグラフィック属性の属性区分「コスメ」と、デモグラフィック属性の属性区分「年齢」を重視することが指定されている場合には、抽出部２３は、属性区分「コスメ」及び属性区分「年齢」が類似するユーザ間ほど高い類似度を算出する。

（映像配信部２４について）
映像配信部２４は、抽出部２３によって抽出された他のユーザに対応する操作履歴に応じてデモ用の自由視点映像を生成し、生成したデモ用の自由視点映像を配信要求の送信元である端末装置３に配信する。

具体的には、映像配信部２４は、抽出部２３によって抽出された他のユーザのユーザＩＤに対応し、かつ、配信要求により自由視点映像が要求されている商品の商品ＩＤに対応する操作履歴を操作履歴記憶部１４から取得する。そして、映像配信部２４は、操作履歴記憶部１４から取得した操作履歴と同様に視点条件が自動的に変更されるデモ用の自由視点映像を生成する。

例えば、映像配信部２４は、図４に示した操作履歴記憶部１４から、ユーザＩＤ「Ｕ００１」かつ商品ＩＤ「Ｃ００１」に対応する操作履歴を取得したものとする。かかる場合に、映像配信部２４は、商品ＩＤ「Ｃ００１」の商品に関するデモ用の自由視点映像として、初期状態が操作内容１の視点条件（視点位置「ｘ１、ｙ１、ｚ１」、視線方向「Ｖｘ１、Ｖｙ１、Ｖｚ１」、画角「６０度」）であり、１０秒後に操作内容２の視点条件（視点位置「ｘ２、ｙ２、ｚ２」、視線方向「Ｖｘ２、Ｖｙ２、Ｖｚ２」、画角「４０度」）に変化する自由視点映像を生成する。また、図４では、操作内容１及び２のみを図示したが、映像配信部２４は、操作履歴記憶部１４に記憶されている操作内容１〜Ｎに応じたデモ用の自由視点映像を生成する。

そして、映像配信部２４は、このようにして生成したデモ用の自由視点映像を含むウェブページを端末装置３に配信する。かかるデモ用の自由視点映像は、視点条件を変更する操作を受け付けず、他のユーザの操作内容が動画として表示される。また、映像配信部２４は、デモ用の自由視点映像を配信した後に、視点条件の変更操作を受け付ける通常の自由視点映像を端末装置３に配信する。

これにより、端末装置３は、映像配信部２４から配信されたウェブページをブラウザ等に表示する。そして、端末装置３は、最初に視点条件が変更できないデモ用の自由視点映像を表示した後に、視点条件が変更可能な通常の自由視点映像を表示する。これにより、映像配信装置１１は、端末装置３のユーザに対して、まずデモ用の自由視点映像を閲覧させた後に、配信要求において要求された商品に関する通常の自由視点映像を閲覧させることができる。

ここで、図６に、実施形態に係る自由視点映像を含むウェブページの一例を示す。図６では、ショッピングサイト等のウェブページを例に挙げて説明する。図６に示すように、ウェブページＧ１０には、自由視点映像が表示される映像表示枠Ｈ１１と、広告コンテンツが表示される広告枠Ｈ１２〜Ｈ１４とが含まれる。かかる広告コンテンツは、例えば、バナー広告、テキスト広告、動画広告などの２次元コンテンツや３次元コンテンツなどが該当する。また、ウェブページＧ１０には、映像表示枠Ｈ１１に表示されている商品を購入するための購入ボタン等が含まれる。

端末装置３のユーザは、映像表示枠Ｈ１１にデモ用の自由視点映像が表示されている場合には、かかるデモ用の自由視点映像を閲覧するだけであって、視点条件を変更する操作等を行うことができない。一方、端末装置３のユーザは、映像表示枠Ｈ１１に通常の自由視点映像が表示されている場合には、例えば、ホイールマウスへの操作（マウスの移動、ホイールの回転）や映像表示枠Ｈ１１でのマウスカーソルの位置移動などによって、かかる通常の自由視点映像における視点条件を変更することができる。この場合、端末装置３は、ユーザによって行われた操作内容を映像配信装置１１に送信し、映像配信装置１１の映像配信部２４は、かかる操作内容を操作履歴記憶部１４に格納するとともに、かかる操作内容に対応する自由視点映像を端末装置３に配信する。

〔３．映像配信処理の手順〕
次に、図７を用いて、実施形態に係る映像配信装置１１による映像配信処理の手順について説明する。図７は、実施形態に係る映像配信装置１１による映像配信処理手順を示すフローチャートである。

図７に示すように、映像配信装置１１の配信要求受付部２２は、端末装置３から自由視点映像を含むウェブページの配信要求を受け付けたか否かを判定する（ステップＳ１０１）。そして、配信要求受付部２２は、配信要求を受け付けていない場合には（ステップＳ１０１；Ｎｏ）、配信要求を受け付けるまで待機する。

一方、配信要求受付部２２によって配信要求が受け付けられた場合（ステップＳ１０１；Ｙｅｓ）、抽出部２３は、ユーザ情報記憶部１３に記憶されているユーザ属性（サイコグラフィック属性、デモグラフィック属性）に基づいて、配信要求の送信元ユーザとユーザ属性が類似する他のユーザを抽出する（ステップＳ１０２）。このとき、抽出部２３は、配信要求において要求されている商品の自由視点映像を過去に操作したことがある他のユーザの中から、配信要求の送信元ユーザとユーザ属性の類似度が最も高いユーザを抽出する。

続いて、映像配信部２４は、抽出部２３によって抽出された他のユーザに対応する操作履歴を操作履歴記憶部１４から取得する（ステップＳ１０３）。続いて、映像配信部２４は、操作履歴記憶部１４から取得した操作履歴に基づいて、配信要求において要求されている商品に関するデモ用の自由視点映像を生成する（ステップＳ１０４）。そして、映像配信部２４は、ステップＳ１０１において配信要求を送信した端末装置３に対して、デモ用の自由視点映像を配信する（ステップＳ１０５）。

続いて、映像配信部２４は、配信要求において要求されている商品に関する自由視点映像であって、視点条件の変更が可能な通常の自由視点映像を生成する（ステップＳ１０６）。そして、映像配信部２４は、ステップＳ１０１において配信要求を送信した端末装置３に対して、通常の自由視点映像を配信する（ステップＳ１０７）。

この後に、通常の自由視点映像に対して視点条件を変更する操作が行われた場合には、映像配信部２４は、変更後の視点条件を操作履歴記憶部１４に格納し、さらに、変更後の視点条件に対応する通常の自由視点映像を端末装置３に配信する。

〔４．変形例〕
上述した実施形態に係る映像配信装置１１は、上記実施形態以外にも種々の異なる形態にて実施されてよい。そこで、以下では、上記の映像配信装置１１の他の実施形態について説明する。

〔４−１．類似ユーザの抽出（１）〕
上記実施形態では、抽出部２３が、配信要求の送信元ユーザとユーザ属性が類似する他のユーザを抽出する例を示した。しかし、抽出部２３は、操作履歴記憶部１４に記憶されている購入履歴（ユーザ情報の一例、他の履歴情報も同様）を考慮して、商品を購入したことがあるユーザを優先して他のユーザとして抽出してもよい。例えば、抽出部２３は、配信要求により自由視点映像が要求されている商品を購入したことがあるユーザの中から他のユーザを抽出してもよい。この場合、抽出部２３は、かかる商品の商品ＩＤに対応するユーザＩＤであり、かつ、かかる商品を購入したことがあるユーザＩＤであり、かつ、配信要求の送信元ユーザのユーザＩＤと異なるユーザＩＤを操作履歴記憶部１４から取得する。そして、抽出部２３は、操作履歴記憶部１４から取得したユーザＩＤ毎に、他のユーザと送信元ユーザとの類似性を判定し、送信元ユーザと最も類似する他のユーザを抽出することとなる。

これにより、映像配信装置１１は、商品を購入した他のユーザにおける操作履歴に基づいて生成したデモ用の自由視点映像をユーザに閲覧させることができる。このため、映像配信装置１１は、商品を購入した他のユーザが注目した商品の部位を閲覧させることができるので、ユーザの購買意欲をより向上させることができる。

〔４−２．類似ユーザの抽出（２）〕
また、上記実施形態では、抽出部２３が１人の他のユーザを抽出する例を示した。しかし、抽出部２３は、複数の他のユーザを抽出してもよい。例えば、抽出部２３は、上述してきた類似性の判定処理を行うことにより、配信要求の送信元ユーザとの類似度が高い順に所定数の他のユーザを抽出する。この場合、映像配信部２４は、抽出部２３によって抽出された複数の他のユーザに対応する各操作履歴に応じてデモ用の自由視点映像を生成する。例えば、映像配信部２４は、複数の他のユーザに対応する各操作履歴に含まれる操作内容ごとに視点条件の平均（各視点位置の重心、視線方向の平均、画角の平均、経過時間の平均）を算出し、算出した視点条件の平均に従ってデモ用の自由視点映像を生成してもよい。

これにより、映像配信装置１１は、ユーザ属性が類似する他のユーザによる平均的な操作内容をユーザに閲覧させることができる。このため、映像配信装置１１は、特定のユーザに偏った操作内容を閲覧させることを防止できるので、ユーザの購買意欲を安定して向上させることができる。

なお、映像配信部２４は、上記例のように抽出部２３によって複数の他のユーザが抽出された場合には、視点条件の平均を算出するのではなく、送信元ユーザとの類似度に応じた重みを各他のユーザに付与した上で、視点条件を算出してもよい。すなわち、映像配信部２４は、送信元ユーザとの類似度が高い他のユーザに対応する操作履歴ほど重視して、デモ用の自由視点映像を生成してもよい。

〔４−３．デモ用の自由視点映像〕
また、上記実施形態において、操作履歴記憶部１４は、商品が購入された時刻の前後に対応する操作内容がいずれであるかを識別できる情報を記憶してもよい。かかる場合に、映像配信部２４は、商品が購入された前後の操作内容が強調表示されるデモ用の自由視点映像を生成してもよい。例えば、映像配信部２４は、商品が購入された前後の操作内容については、再生時間を長くしたり、表示サイズを大きくしたり、背景色を変化させる等してもよい。

〔４−４．広告枠〕
また、上記実施形態において、映像配信部２４は、図６に示した映像表示枠Ｈ１１に自由視点映像が表示されている商品に関連する広告コンテンツが広告枠Ｈ１２〜Ｈ１４に表示されるようにしてもよい。

〔４−５．自由視点映像の操作手法〕
また、上記実施形態では、マウス操作によって自由視点映像の視点条件を変更する例について説明した。しかし、映像配信部２４は、自由視点映像を操作するための操作ボタンをウェブページに表示してもよい。この点について、図８を用いて説明する。図８は、実施形態に係る自由視点映像を含むウェブページの一例を示す図である。

図８に示すように、ウェブページＧ２０には、自由視点映像を操作するための各種の操作ボタン３３ａ、３３ｂ、３３ｃが配置される操作枠３３を含む。操作ボタン３３ａは、視点位置を変更するためのボタンであり、端末装置３のユーザは操作ボタン３３ａを操作することによって、±Ｘ方向、±Ｙ方向、±Ｚ方向に視点位置を変更することができる。

操作ボタン３３ｂは、視点位置からの視線方向を変更するためのボタンであり、端末装置３のユーザは操作ボタン３３ｂを操作することによって、操作ボタン３３ａで設定した視点位置での視線方向を変更することができる。

操作ボタン３３ｃは、ズーム率を変更するためのボタンであり、端末装置３のユーザは操作ボタン３３ｃを操作することによって、操作ボタン３３ａ、３３ｂで設定した視点位置からの視線方向を中心とした画角を変更することができる。

ウェブページＧ２０において、操作ボタン３３ａ、３３ｂ、３３ｃが操作されると、端末装置３の制御部は、かかる操作によって指定された変更後の視点条件の情報を映像配信装置１１へネットワーク４を介して送信する。例えば、端末装置３の制御部は、操作ボタン３３ａ、３３ｂ、３３ｃに対するユーザの操作に対して、視点位置、視線方向および画角を算出し、これらの情報を変更後の視点条件として映像配信装置１１へ送信する。映像配信部２４は、端末装置３から変更後の視点条件を受け付けると、かかる変更後の視点条件に対応する自由視点映像を端末装置３に配信する。

なお、端末装置３の制御部は、操作ボタン３３ａ、３３ｂ、３３ｃに対するユーザの操作毎に、かかる操作情報を映像配信装置１１へ送信し、映像配信部２４によって、変更後の視点条件を算出するようにしてもよい。この場合、映像配信部２４は、ユーザ毎に、視点位置、視線方向及び画角を記憶しておき、かかる記憶情報と端末装置３から送信される情報とに基づいて、変更後の視点条件を算出する。

〔４−６．自由視点映像の生成手法〕
上述した実施形態では、映像配信装置１１の制御部１５は、複数の撮像装置１０で撮像対象Ａをリアルタイムで撮像した動画像の撮像データに基づいて、自由視点映像の動画像データを生成して配信するが、これに限定されるものではない。例えば、制御部１５は、予め撮像装置１０で撮像された撮像データに基づいて、自由視点映像の動画像データを生成して配信するようにしてもよい。

また、例えば、制御部１５は、端末装置３から配信要求を受け付けたときに撮像装置１０で撮像された撮像データに基づいて、自由視点映像の静止画データを生成して配信するようにしてもよい。

〔５．効果〕
上述してきたように、実施形態に係る映像配信装置１１は、ユーザ情報記憶部１３と、操作履歴記憶部１４と、抽出部２３と、映像配信部２４とを有する。ユーザ情報記憶部１３は、ユーザに関するユーザ情報（ユーザ属性が一例に相当）を記憶する。操作履歴記憶部１４は、視点位置が異なる映像データに基づいて生成される商品に関する自由視点映像に対してユーザにより行われた視点条件を変更する操作履歴を記憶する。抽出部２３は、所定のユーザ（第１ユーザの一例に相当）が利用する端末装置３から商品に関する自由視点映像の配信要求を受け付けた場合に、ユーザ情報記憶部１３に記憶されているユーザ情報に基づいて、所定のユーザとユーザ情報が類似する他のユーザ（第２ユーザの一例に相当）を抽出する。映像配信部２４は、抽出部２３によって抽出された他のユーザに対応する操作履歴を操作履歴記憶部１４から取得し、取得した操作履歴に基づいて生成した商品に関する自由視点映像を所定のユーザが利用する端末装置３に配信する。

また、実施形態に係る映像配信装置１１において、操作履歴記憶部１４は、商品を識別するための商品ＩＤ（商品識別子の一例に相当）毎に、かかる商品に関する自由視点映像に対するユーザの操作履歴を記憶する。また、抽出部２３は、商品に関する自由視点映像の配信要求を受け付けた場合に、かかる商品に関する自由視点映像を操作したことがあるユーザを他のユーザとして抽出する。

これにより、実施形態に係る映像配信装置１１は、ユーザ情報が類似する他のユーザが注目した商品の部位を閲覧させることができるので、かかる商品に対してユーザに興味を持たせることができ、この結果、ユーザの商品に対する購買意欲を向上させることができる。

また、実施形態に係る映像配信装置１１において、操作履歴記憶部１４は、商品を購入したか否かを示す購入履歴をさらに記憶する。また、抽出部２３は、購入履歴に基づいて、商品を購入したことがあるユーザを他のユーザとして抽出する。これにより、映像配信装置１１は、商品を購入した他のユーザが注目した商品の部位を閲覧させることができるので、ユーザの購買意欲をより向上させることができる。

また、実施形態に係る映像配信装置１１において、映像配信部２４は、他のユーザに対応する操作履歴に基づいて、視点条件の変更操作を受け付けないデモンストレーション用の自由視点映像を生成し、生成したデモンストレーション用の自由視点映像を端末装置３に配信した後に、視点条件の変更操作を受け付ける通常の自由視点映像を端末装置３に配信する。

これにより、映像配信装置１１は、購買意欲を高めることを目的としたデモ用の自由視点映像を閲覧させた後に、端末装置３のユーザが要求している通常の自由視点映像を閲覧させることができる。すなわち、端末装置３のユーザは、デモ用の自由視点映像を閲覧することで、商品の注目点を認識した後に、通常の自由視点映像に対して視点条件を変更する操作を行うことができる。このようなことから、映像配信装置１１は、自由視点映像の配信サービスを向上させることができる。

また、実施形態に係る映像配信装置１１において、抽出部２３は、複数の他のユーザを抽出する。また、映像配信部２４は、抽出部２３によって抽出された複数の他のユーザに対応する操作履歴に基づいて生成した自由視点映像を端末装置３に配信する。これにより、映像配信装置１１は、特定のユーザに偏った操作内容を閲覧させることを防止できるので、ユーザの購買意欲を安定して向上させることができる。

また、実施形態に係る映像配信装置１１において、映像配信部２４は、複数の他のユーザに対応する各操作履歴について、他のユーザと配信要求を送信したユーザとの類似度に応じた重みを付与した上で生成した自由視点映像を端末装置３に配信する。これにより、映像配信装置１１は、特定のユーザに偏った操作内容を閲覧させることを防止できるとともに、類似するユーザが行った操作内容を閲覧させることができるので、ユーザの購買意欲をより安定して向上させることができる。

以上、本願の実施形態のいくつかを図面に基づいて詳細に説明したが、これらは例示であり、発明の開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。

また、上述した映像配信装置１１は、複数のサーバコンピュータで実現してもよく、また、機能によっては外部のプラットフォーム等をＡＰＩ（Application Programming Interface）やネットワークコンピューティングなどで呼び出して実現するなど、構成は柔軟に変更できる。

また、特許請求の範囲に記載した「手段」は、「部（section、module、unit）」や「回路」などに読み替えることができる。例えば、抽出手段は、抽出部や抽出回路に読み替えることができる。

１ ネットワークシステム
２ 映像配信システム
３ 端末装置
１０ 撮像装置
１１ 映像配信装置
１２ 通信部
１３ ユーザ情報記憶部
１４ 操作履歴記憶部
１５ 制御部
２１ 映像取得部
２２ 配信要求受付部
２３ 抽出部
２４ 映像配信部

Claims (8)

1. ユーザに関するユーザ情報を記憶するユーザ情報記憶手段と、
   視点位置が異なる映像データに基づいて生成される被写体に関する自由視点映像に対して行われた視点条件を変更する操作の履歴である操作履歴として、変更後の視点条件と、１つ前の操作が行われてから今回の操作が行われるまでの経過時間とを記憶する操作履歴記憶手段と、
   第１ユーザが利用する端末装置から前記被写体に関する自由視点映像の配信要求を受け付けた場合に、前記ユーザ情報記憶手段に記憶されているユーザ情報に基づいて、前記第１ユーザとユーザ情報が類似する第２ユーザを抽出する抽出手段と、
   前記抽出手段によって抽出された第２ユーザに対応する操作履歴を前記操作履歴記憶手段から取得し、取得した操作履歴に基づいて、当該第２ユーザが操作した自由視点映像と同様に視点条件が変化する前記被写体に関する自由視点映像を生成し、生成した自由視点映像を前記端末装置に配信する映像配信手段と、
   を備えることを特徴とする映像配信装置。
2. 前記操作履歴記憶手段は、
   被写体を識別するための識別子毎に、当該被写体に関する自由視点映像に対するユーザの操作履歴を記憶し、
   前記抽出手段は、
   前記第１ユーザから前記被写体に関する自由視点映像の配信要求を受け付けた場合に、当該被写体に関する自由視点映像を操作したことがあるユーザを前記第２ユーザとして抽出する
   ことを特徴とする請求項１に記載の映像配信装置。
3. 前記操作履歴記憶手段は、
   前記被写体である商品を購入したか否かを示す購入履歴をさらに記憶し、
   前記抽出手段は、
   前記購入履歴に基づいて、前記商品を購入したことがあるユーザを前記第２ユーザとして抽出する
   ことを特徴とする請求項２に記載の映像配信装置。
4. 前記映像配信手段は、
   前記第２ユーザに対応する操作履歴に基づいて、視点条件の変更操作を受け付けないデモンストレーション用の自由視点映像を生成し、生成したデモンストレーション用の自由視点映像を前記端末装置に配信した後に、視点条件の変更操作を受け付ける自由視点映像を前記端末装置に配信する
   ことを特徴とする請求項１〜３のいずれか一つに記載の映像配信装置。
5. 前記抽出手段は、
   前記第１ユーザと類似する複数の第２ユーザを抽出し、
   前記映像配信手段は、
   前記抽出手段によって抽出された複数の第２ユーザに対応する操作履歴に基づいて生成した自由視点映像を前記端末装置に配信する
   ことを特徴とする請求項１〜４のいずれか一つに記載の映像配信装置。
6. 前記映像配信手段は、
   前記複数の第２ユーザに対応する各操作履歴について当該第２ユーザと前記第１ユーザとの類似度に応じた重みを付与した上で生成した自由視点映像を前記端末装置に配信する
   ことを特徴とする請求項５に記載の映像配信装置。
7. コンピュータが実行する映像配信方法であって、
   視点位置が異なる映像データに基づいて生成される被写体に関する自由視点映像の配信要求を第１ユーザが利用する端末装置から受け付けた場合に、ユーザに関するユーザ情報を記憶するユーザ情報記憶手段に記憶されているユーザ情報に基づいて、前記第１ユーザとユーザ情報が類似する第２ユーザを抽出する抽出ステップと、
   自由視点映像に対して行われた視点条件を変更する操作の履歴である操作履歴として、変更後の視点条件と、１つ前の操作が行われてから今回の操作が行われるまでの経過時間とを記憶する操作履歴記憶手段から前記抽出ステップによって抽出された第２ユーザに対応する操作履歴を取得し、取得した操作履歴に基づいて、当該第２ユーザが操作した自由視点映像と同様に視点条件が変化する前記被写体に関する自由視点映像を生成し、生成した自由視点映像を前記端末装置に配信する映像配信ステップと、
   を含んだことを特徴とする映像配信方法。
8. 視点位置が異なる映像データに基づいて生成される被写体に関する自由視点映像の配信要求を第１ユーザが利用する端末装置から受け付けた場合に、ユーザに関するユーザ情報を記憶するユーザ情報記憶手段に記憶されているユーザ情報に基づいて、前記第１ユーザとユーザ情報が類似する第２ユーザを抽出する抽出手順と、
   自由視点映像に対して行われた視点条件を変更する操作の履歴である操作履歴として、変更後の視点条件と、１つ前の操作が行われてから今回の操作が行われるまでの経過時間とを記憶する操作履歴記憶手段から前記抽出手順によって抽出された第２ユーザに対応する操作履歴を取得し、取得した操作履歴に基づいて、当該第２ユーザが操作した自由視点映像と同様に視点条件が変化する前記被写体に関する自由視点映像を生成し、生成した自由視点映像を前記端末装置に配信する映像配信手順と、
   をコンピュータに実行させることを特徴とする映像配信プログラム。

Images