JP6831027B1 - Distribution system, video generator, and video generation method - Google Patents
Distribution system, video generator, and video generation method Download PDFInfo
- Publication number
- JP6831027B1 JP6831027B1 JP2020034039A JP2020034039A JP6831027B1 JP 6831027 B1 JP6831027 B1 JP 6831027B1 JP 2020034039 A JP2020034039 A JP 2020034039A JP 2020034039 A JP2020034039 A JP 2020034039A JP 6831027 B1 JP6831027 B1 JP 6831027B1
- Authority
- JP
- Japan
- Prior art keywords
- product
- moving image
- link
- video
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 14
- 238000009877 rendering Methods 0.000 claims description 23
- 238000001514 detection method Methods 0.000 claims description 22
- 238000010586 diagram Methods 0.000 abstract description 12
- 230000033001 locomotion Effects 0.000 description 10
- 241001465754 Metazoa Species 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
【課題】配信動画に映りこんだ商品を容易に購入可能とする。【解決手段】配信サーバ１と視聴者端末７を備える配信システムである。配信サーバ１は、動画を配信するとともに、動画内に映った商品の表示位置に商品を購入可能な販売サイトへのリンクを付与したリンク情報を配信する配信部１１を有する。視聴者端末７は、動画とリンク情報を受信し、動画を画面に表示する表示部７１と、動画を表示する画面に対する選択操作を検出する操作検出部７３と、選択操作を検出した操作位置に販売サイトへのリンクが付与されている場合、販売サイトを表示部７１に表示させる制御部７２を有する。【選択図】図２PROBLEM TO BE SOLVED: To easily purchase a product reflected in a distributed video. A distribution system including a distribution server 1 and a viewer terminal 7. The distribution server 1 has a distribution unit 11 that distributes a moving image and distributes link information with a link to a sales site where the product can be purchased at a display position of the product shown in the moving image. The viewer terminal 7 is located at a display unit 71 that receives the moving image and link information and displays the moving image on the screen, an operation detecting unit 73 that detects a selection operation on the screen for displaying the moving image, and an operation position that detects the selection operation. When a link to the sales site is given, the control unit 72 for displaying the sales site on the display unit 71 is provided. [Selection diagram] Fig. 2
Description
本発明は、配信システム、視聴装置、動画生成装置、情報処理方法、および動画生成方法に関する。 The present invention relates to a distribution system, a viewing device, a moving image generating device, an information processing method, and a moving image generating method.
近年、個人による動画の配信が非常に盛んである。動画に広告を挿入したり、動画内で商品を紹介したりすることで、動画の配信者が報酬を得られるシステムも提案されている（特許文献１および特許文献２）。
In recent years, video distribution by individuals has become very popular. A system has also been proposed in which a video distributor can be rewarded by inserting an advertisement into a video or introducing a product in the video (
特許文献１の技術は、配信動画内の空いた領域に広告を表示するシステムである。視聴者が広告に興味を持ったとしても、視聴者自身で広告の商品を検索し、商品の販売サイトに到達しなければならない。
The technique of
特許文献２の技術は、配信者が紹介する商品を選択し、配信動画の周囲に紹介した商品の購入ページへのリンクを配置するシステムである。視聴者は、動画を見ながら、容易に商品の購入を行うことができる。しかしながら、紹介されている商品に興味がない場合、視聴者は動画そのものを見ないことが多い。 The technology of Patent Document 2 is a system that selects a product introduced by a distributor and arranges a link to a purchase page of the introduced product around the distributed video. Viewers can easily purchase products while watching the video. However, viewers often do not watch the video itself if they are not interested in the product being introduced.
一方で、視聴者が配信動画を見たときに、配信動画内に映る商品に興味を持つことがある。例えば、配信者の着ている服や配信者の部屋の隅に映るぬいぐるみなどに興味を持つことがある。その場合、視聴者自身でその商品を検索したり、コメント欄などで配信者に尋ねたりする必要がある。視聴者と配信者の双方にとって煩わしく、商品の購入に結びつきにくい。 On the other hand, when the viewer sees the delivered video, he / she may be interested in the product shown in the delivered video. For example, you may be interested in the clothes the distributor is wearing or the stuffed animals that appear in the corners of the distributor's room. In that case, it is necessary for the viewer to search for the product by himself or to ask the distributor in the comment section or the like. It is bothersome for both viewers and distributors, and is unlikely to lead to product purchases.
また、仮想空間でコンピュータグラフィックスキャラクタ（アバター）を操作し、仮想空間を撮影した動画の配信も盛んである。仮想空間内で現実世界の商品を紹介したいという要望もあるが、仮想空間内に現実世界の商品を配置することは容易ではない。例えば、商品を仮想空間内で紹介する際、商品の３次元モデルを作成して仮想空間内に配置することが考えられる。しかしながら、３次元モデルの作成に精通していない配信者にとって、現実世界の商品をリアルに再現した３次元モデルの作成は容易ではない。また、リアルな３次元モデルの作成には時間やコストがかかるので、商品を買ってきた当日に、商品に対する熱が冷めないうちに商品の３次元モデルを作成して紹介することは難しいという問題があった。 In addition, computer graphics characters (avatars) are operated in virtual space, and moving images of virtual space are also actively distributed. There is also a desire to introduce real-world products in virtual space, but it is not easy to place real-world products in virtual space. For example, when introducing a product in a virtual space, it is conceivable to create a three-dimensional model of the product and arrange it in the virtual space. However, it is not easy for a distributor who is not familiar with creating a 3D model to create a 3D model that realistically reproduces a product in the real world. In addition, it takes time and cost to create a realistic 3D model, so it is difficult to create and introduce a 3D model of a product on the day of purchase before the heat for the product cools down. was there.
本発明は、上記に鑑みてなされたものであり、配信動画に映りこんだ商品を容易に購入可能とすることを目的とする。 The present invention has been made in view of the above, and an object of the present invention is to make it possible to easily purchase a product reflected in a distributed moving image.
本発明の一態様の配信システムは、動画生成装置と配信サーバと視聴装置を備える配信システムであって、前記動画生成装置は、実際の商品を複数方向から撮影した多視点画像を入力し、複数の撮影角度のそれぞれに対応する商品画像で構成された商品画像群を生成する生成部と、前記商品画像群から選択した商品画像を貼り付けた商品オブジェクトを仮想空間に配置する配置部と、前記商品オブジェクトを配置した仮想空間を仮想カメラで撮影して動画を前記配信サーバへ送信するとともに、前記動画内に映った前記商品オブジェクトの表示位置に前記商品を購入可能な販売サイトへのリンクを付与したリンク情報を前記配信サーバへ送信するレンダリング部を有し、前記レンダリング部は、前記仮想カメラで前記商品オブジェクトを撮影する撮影角度に応じて前記商品画像群から商品画像を選択して前記商品オブジェクトに貼り付け、前記仮想カメラの移動範囲は前記商品画像群を構成する商品画像の撮影角度に応じて制限されており、前記配信サーバは、動画を配信するとともに、前記動画内に映った前記商品オブジェクトの表示位置に前記商品を購入可能な販売サイトへのリンクを付与したリンク情報を、前記動画から独立した情報として配信する配信部を有し、前記視聴装置は、前記動画と前記リンク情報を受信し、前記動画を画面に表示する表示部と、前記動画を表示する画面に対する選択操作を検出する操作検出部と、前記選択操作を検出した操作位置に前記販売サイトへのリンクが付与されている場合、前記販売サイトを前記表示部に表示させる制御部を有する。 The distribution system of one aspect of the present invention is a distribution system including a moving image generating device, a distribution server, and a viewing device, and the moving image generating device inputs a multi-viewpoint image of an actual product taken from a plurality of directions and a plurality of images. A generation unit that generates a product image group composed of product images corresponding to each of the shooting angles of the above, an arrangement unit that arranges a product object to which a product image selected from the product image group is pasted in a virtual space, and the above. A virtual space in which a product object is placed is photographed with a virtual camera, a video is transmitted to the distribution server, and a link to a sales site where the product can be purchased is added to the display position of the product object reflected in the video. The rendering unit has a rendering unit that transmits the linked information to the distribution server, and the rendering unit selects a product image from the product image group according to a shooting angle at which the product object is photographed by the virtual camera, and the product object. The moving range of the virtual camera is limited according to the shooting angle of the product images constituting the product image group, and the distribution server distributes the moving image and the product reflected in the moving image. The viewing device has a distribution unit that distributes link information with a link to a sales site where the product can be purchased at the display position of the object as information independent of the moving image, and the viewing device delivers the moving image and the link information. A link to the sales site is added to a display unit that receives and displays the moving image on the screen, an operation detecting unit that detects a selection operation on the screen that displays the moving image, and an operation position that detects the selection operation. If so, it has a control unit for displaying the sales site on the display unit.
本発明の一態様の動画生成装置は、仮想空間を撮影した動画を生成する動画生成装置であって、実際の商品を複数方向から撮影した多視点画像を入力し、複数の撮影角度のそれぞれに対応する商品画像で構成された商品画像群を生成する生成部と、前記商品画像群から選択した商品画像を貼り付けた商品オブジェクトを前記仮想空間に配置する配置部と、前記商品オブジェクトを配置した仮想空間を仮想カメラで撮影して動画を生成するとともに、前記動画内に映った前記商品オブジェクトの表示位置に前記商品を購入可能な販売サイトへのリンクを付与したリンク情報を生成するレンダリング部を有し、前記レンダリング部は、前記仮想カメラで前記商品オブジェクトを撮影する撮影角度に応じて前記商品画像群から商品画像を選択して前記商品オブジェクトに貼り付け、前記仮想カメラの移動範囲は前記商品画像群を構成する商品画像の撮影角度に応じて制限される。 The moving image generating device of one aspect of the present invention is a moving image generating device that generates a moving image of a virtual space, and inputs a multi-viewpoint image of an actual product taken from a plurality of directions and sets each of a plurality of shooting angles. A generation unit that generates a product image group composed of corresponding product images, an arrangement unit that arranges a product object to which a product image selected from the product image group is pasted in the virtual space, and an arrangement unit that arranges the product object are arranged. A rendering unit that captures a virtual space with a virtual camera to generate a moving image and generates link information with a link to a sales site where the product can be purchased at the display position of the product object reflected in the moving image. The rendering unit selects a product image from the product image group according to the shooting angle at which the product object is photographed by the virtual camera and attaches the product image to the product object, and the moving range of the virtual camera is the product. It is limited according to the shooting angle of the product images constituting the image group .
本発明によれば、配信動画に映りこんだ商品を容易に購入可能とすることができる。 According to the present invention, it is possible to easily purchase a product reflected in a distributed moving image.
以下、本発明の実施の形態について図面を用いて説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
［第１の実施形態］
図１を参照し、第１の実施形態の動画配信システムの全体構成の一例について説明する。本実施形態の動画配信システムは、動画を視聴するためのシステムであり、視聴者は、動画内に映った商品を画面上でタッチまたはクリックすると、その商品を購入可能な販売サイトにアクセスできる。なお、配信がなされる動画は、３Ｄ（three-dimension）コンテンツを構成する動画とすることは好適であり、その場合、動画内に映った商品は拡張現実（ＡＲ）技術で実写映像に合成した３Ｄオブジェクトとして実現することができる。
[First Embodiment]
An example of the overall configuration of the moving image distribution system of the first embodiment will be described with reference to FIG. The video distribution system of the present embodiment is a system for viewing a moving image, and the viewer can access a sales site where the product can be purchased by touching or clicking the product shown in the moving image on the screen. It is preferable that the video to be distributed is a video that constitutes 3D (three-dimension) content, and in that case, the product shown in the video is synthesized into a live-action video by augmented reality (AR) technology. It can be realized as a 3D object.
本実施形態の動画配信システムは、配信サーバ１、販売サーバ３、配信者端末５、および視聴者端末７を備える。配信サーバ１、販売サーバ３、配信者端末５、および視聴者端末７は、ネットワークに接続されている。配信サーバ１は、配信者端末５から動画を受信し、視聴者端末７へ配信する。販売サーバ３は、商品を購入できるＷｅｂサイトを視聴者端末７へ提供する。販売サーバ３で商品を販売する事業者は、配信サーバ１を運用する事業者と異なっていてもよい。図１では、各装置を１台ずつ示しているが、これに限定するものではなく、多数の装置が存在してもよい。
The video distribution system of the present embodiment includes a
配信サーバ１は配信者端末５から動画を受信し、動画内に映る商品を購入可能な販売サイトへのリンクが付与されたリンク付き動画を配信する。ここで、配信サーバ１は、配信を行う動画から独立したデータとして、上記販売サイトへのリンク情報を配信することができる。そのように構成すれば、動画を最初に製作する配信者は、動画にあらかじめリンク情報を埋め込む作業を行う必要がなく、配信サーバ１において、人手であるいはＡＩを利用するなどして自動で、動画に映っている商品を認識したうえでその商品を販売している販売サイトへのリンク情報を生成し、動画からは独立した情報としてリンク情報を視聴者端末７へ配信することが可能となる。配信者端末５は、録画制作した動画ばかりではなく、現在、生放送中の動画を配信サーバ１へ送信し、配信サーバ１において上記の方法により、適切なリンク情報を生成して、動画からは独立したデータとして、視聴者端末７へ配信することが可能となる。なお、上記のようにリンク情報を生成することにより、リンク情報は動画の個々のフレームデータに埋め込まれるのではなく、複数のフレーム画像にわたって共通するリンク情報を用いることもできる。視聴者端末７は、視聴者が動画内の商品をタッチまたはクリックしたことを検知すると、その商品の表示位置にあらかじめ付与されていたリンク情報を用いて販売サーバ３にアクセスして、その商品を購入可能な販売サイトを表示する。
The
次に、動画配信システムの備える各装置について説明する。 Next, each device provided in the video distribution system will be described.
図２ないし図４を参照し、配信サーバ１と配信者端末５について説明する。図２に示す配信サーバ１は、配信部１１とリンク設定部１２を備える。
The
配信部１１は、配信者端末５から受信した動画にリンクを付与したリンク付き動画を視聴者端末７に配信する。リンク付き動画は、動画とともに販売サイトへのリンクを取得するためのリンク情報が配信される動画であり、動画を表示している画面上で商品をタッチまたはクリックしたときに、その商品を購入可能な販売サイトへのリンクを取得できる。例えば、リンク情報は、動画の各フレームについて、フレーム内での商品の表示位置に対応させたリンク領域を設定し、リンク領域に販売サイトへのリンクを付与したものである。視聴者による商品の選択操作に応じてリンクを取得できるものであれば、リンク情報の形式は問わない。
The
図３に、リンク付き動画の一例を示す。図３の例では、動画１００内の、マグカップ、ぬいぐるみ、キャップ、およびＴシャツのそれぞれの表示位置に対応させてリンク領域１１０Ａ〜１１０Ｄが設定され、リンク領域１１０Ａ〜１１０Ｄのそれぞれに販売サイトへのリンクが付与されている。視聴者は、動画１００に設定されたリンク領域１１０Ａ〜１１０Ｄ内をタッチまたはクリックすることで、タッチまたはクリックした位置に対応する商品を購入可能な販売サイトを訪問できる。例えば、ぬいぐるみは実写映像に合成した３Ｄオブジェクトであってもよい。ぬいぐるみの３Ｄモデルは販売サイトから取得できてもよい。配信者は、紹介したい商品の３Ｄモデルとリンクを販売サイトから取得し、実写映像に合成する。
FIG. 3 shows an example of a moving image with a link. In the example of FIG. 3, link areas 110A to 110D are set corresponding to the display positions of the mug, the stuffed animal, the cap, and the T-shirt in the moving
配信部１１は、リンク付き動画に対応していない端末に対しては動画のみを配信し、リンク付き動画に対応する視聴者端末７に対しては動画とリンク情報を配信してもよい。配信部１１は、動画内に商品が映っているときのみリンク情報を配信してもよい。
The
配信部１１は、配信者端末５から受信した動画を蓄積しておき、視聴者端末７からの求めに応じて動画を配信してもよいし、配信者端末５から受信したライブ映像をリアルタイムに配信してもよい。
The
リンク設定部１２は、配信者端末５から商品リンク情報を受信し、動画と商品リンク情報とを対応付ける。例えば、リンク設定部１２は、商品が映っているときの動画の再生時間、フレーム内での商品の表示位置、および商品を購入可能な販売サイトへのリンクを含む商品リンク情報を配信者端末５から受信し、動画の各フレームに対して、リンク領域とリンクを付与する。リンクには、配信者を特定するための情報を付与しておき、視聴者が動画から販売サイトに訪れて商品を購入したことに対する報酬が配信者に支払われてもよい。
The
リンク設定部１２は、動画内に映る商品の表示位置にリンク領域を追従させてもよい。
The
配信者端末５は、配信者が動画を配信サーバ１へ送信するために用いる端末である。例えば、カメラで撮影した動画を編集し、配信者端末５は編集した動画を配信サーバ１に送信する。配信者端末５にカメラを接続し、カメラで撮影したライブ映像を配信サーバ１に送信してもよい。配信者端末５として、パーソナルコンピュータや携帯端末を用いることができる。
The
また、配信者端末５は、画面内での商品の表示位置および販売サイトへのリンクを含む商品リンク情報を配信サーバ１に送信する。配信者端末５は、動画と商品リンク情報を別々に送信せずに、動画に商品リンク情報を付与したリンク付き動画を配信サーバ１へ送信してもよい。
Further, the
ここで、商品リンク情報の作成方法の一例について説明する。配信者は、配信者端末５を操作し、動画を一時停止して静止画を表示させたうえでリンク領域を静止画上で設定し、商品の画面内での表示位置（例えば、画面左上を原点としたときのリンク領域の座標とリンク領域の大きさ）を入力するとともに、販売サイトへのリンクを入力する。配信者端末５は、入力されたリンク領域と販売サイトへのリンクから商品リンク情報を作成する。商品リンク情報は、商品が映っている期間を示す動画の再生時間を含んでもよい。配信者がフレームごとにリンク領域を設定してもよいが、配信者端末５がリンク領域を画面内での商品の移動に追従させてもよい。具体的には、配信者端末５は、リンク領域が設定された商品をフレームごとに検出し、検出枠に合わせてリンク領域を移動または変形させる。配信者が身につけているキャップおよびＴシャツのリンク領域１１０Ｃ，１１０Ｄは、配信者の顔を認識し、画面上の顔の表示位置からの相対的な位置にリンク領域を設定してもよい。前述したように、リンク設定部１２が、商品の移動にリンク領域を追従させてもよい。
Here, an example of how to create the product link information will be described. The distributor operates the
あるいは、図４に示すように、配信者端末５が商品検出部５２および商品情報蓄積部５３を備えて、商品検出部５２が動画を解析して動画内に映っている商品を自動で検出し、商品リンク情報を生成してもよい。図４に示す配信者端末５は、動画送信部５１、商品検出部５２、および商品情報蓄積部５３を備える。
Alternatively, as shown in FIG. 4, the
動画送信部５１は、動画を配信サーバ１へ送信する。
The
商品検出部５２は、動画の各フレームから商品を検出し、画面内での商品の表示位置と販売サイトへのリンクを含む商品リンク情報を生成し、配信サーバ１へ送信する。ＡＲ技術を用いて３Ｄオブジェクトを合成した場合は、３Ｄオブジェクトを合成した位置を表示位置とする。
The
商品情報蓄積部５３は、動画から検出する対象の商品の情報を格納する。商品の情報は、例えば、商品を画像認識で検出するための認識モデルと販売サイトへのリンクを含む。
The product
配信者は、動画内に映っている商品を配信者端末５に入力してもよい。この場合、商品検出部５２は、入力された商品のみを動画内から検出すればよい。商品にマーカーを貼り付けておき、商品の検出精度を上げてもよい。
The distributor may input the product shown in the moving image into the
なお、配信サーバ１または図示していない装置が、商品検出部５２と商品情報蓄積部５３を備え、配信者端末５から受信した動画を解析して商品リンク情報を生成してもよい。
The
また、配信者以外の視聴者または販売サイトを提供する事業者が、動画に対する商品リンク情報を生成してもよい。例えば、ある配信者が配信サーバ１にアップロードした動画に対して、その動画内に映っている商品を販売している事業者が商品リンク情報を生成して配信サーバ１に送信する。配信サーバ１は、商品リンク情報を受信すると、商品リンク情報に基づいて動画にリンクを付与する。動画へのリンクの付与は、配信者の承認後に行われてもよい。これにより、無関係なリンクが動画に付与されることを抑止できる。
In addition, a viewer other than the distributor or a business operator that provides a sales site may generate product link information for the video. For example, for a video uploaded by a distributor to the
図５および図６を参照し、視聴者端末７について説明する。視聴者端末７は、配信サーバ１からリンク付き動画を受信し、視聴者に提示する。視聴者が画面上を操作して商品を選択したときは、その商品を販売する販売サーバ３にアクセスし、販売サイトを表示する。
The
視聴者端末７は、表示部７１、制御部７２、および操作検出部７３を備える。
The
表示部７１は、配信サーバ１からリンク付き動画を受信し、表示部７１の備える画面に動画を表示する。リンク領域１１０Ａ〜１１０Ｄは画面上に表示しない。なお、視聴者端末７の設定でリンク領域１１０Ａ〜１１０Ｄを表示するようにできてもよい。
The
操作検出部７３は、視聴者が動画を表示する画面に対して行った選択操作を検出する。例えば、表示部７１がタッチパネルを備える場合、操作検出部７３は視聴者がタッチした画面上の位置を検出する。操作検出部７３は、画面上に表示されるポインタの位置を検出してもよい。例えば、入力デバイスとしてマウスが接続されている場合、操作検出部７３は、マウスでクリック操作が行われたときのポインタの画面上の位置を検出する。
The
なお、操作検出部７３は、動画を表示する動画表示領域内での商品の選択操作を検出するものであり、動画表示領域外に配置された操作ボタンなどに対する操作は検出しない。動画の一時停止、早送り、巻き戻しなどの動画に関する操作は、表示部７１が検出して制御する。動画表示領域内に操作ボタンが配置されている場合は、操作ボタンに対する操作が優先されてよい。
The
制御部７２は、選択操作を検出した時点のフレームに設定されたリンク領域を取得し、選択操作を検出した画面上の操作位置を含むリンク領域が存在するか否かを判定する。操作位置を含むリンク領域が存在する場合、制御部７２は、そのリンク領域に対応付けられたリンクを取得し、リンクの示す販売サイトを表示部７１に表示させる。図６に、販売サイトの一例を示す。図６は、図３で示した画面上でマグカップをタップした後に表示される販売サイトである。マグカップが表示された位置にリンク領域１１０Ａが設定されており、リンク領域１１０Ａには、図６に示す販売サイトへのリンクが対応付けられている。
The
図７を参照し、動画配信システムの処理の流れについて説明する。 The processing flow of the moving image distribution system will be described with reference to FIG. 7.
ステップＳ１１にて、配信者端末５は、動画を配信サーバ１へ送信し、ステップＳ１２にて、商品リンク情報を配信サーバ１へ送信する。
In step S11, the
ステップＳ１３にて、配信サーバ１は、動画と商品リンク情報からリンク付き動画を生成する。
In step S13, the
ステップＳ１４にて、配信サーバ１は、視聴者端末７から動画の配信要求を受信すると、ステップＳ１５にて、配信サーバ１は、要求された動画を視聴者端末７に配信する。このとき配信する動画は、ステップＳ１３で生成したリンク付き動画である。以降、視聴者端末７は配信サーバ１から受信した動画をユーザの視聴に供する。
In step S14, the
ステップＳ１６にて、視聴者端末７は、視聴者の画面に対する操作を検出すると、操作位置がリンク領域であれば、そのリンク領域に対応するリンクを取得する。
In step S16, when the
ステップＳ１７にて、視聴者端末７は、ステップＳ１６で取得したリンク先にアクセスして、販売サイトを表示する。
In step S17, the
視聴者が視聴者端末７を操作して購入の意思を示すと、ステップＳ１８にて、視聴者端末７は、販売サーバ３へ商品購入要求を送信する。
When the viewer operates the
ステップＳ１９にて、販売サーバ３は、商品の購入処理を実行する。
In step S19, the
図８を参照し、視聴者端末７の処理の流れについて説明する。
The processing flow of the
ステップＳ３１にて、表示部７１は、リンク付き動画の受信を開始して動画を表示する。表示部７１は、ストリーミング再生またはダウンロード再生のいずれで動画を表示してもよい。
In step S31, the
ステップＳ３２にて、操作検出部７３は、視聴者による画面への操作を検出する。操作検出部７３は、動画の再生中、操作の検出を継続する。
In step S32, the
画面への操作を検出すると、ステップＳ３３にて、制御部７２は、操作位置にリンク領域が設定されているか否かを判定する。例えば、制御部７２は、操作検出部７３が操作を検出した時の動画のフレームに設定されているリンク領域について操作位置を含むか否か判定する。操作位置がリンク領域外の場合、ステップＳ３２に戻り、表示部７１と操作検出部７３は、動画の再生処理と操作の検出処理を続ける。
When the operation on the screen is detected, in step S33, the
操作位置にリンク領域が設定されている場合、ステップＳ３４にて、制御部７２は、リンク領域に対応するリンクの示す販売サイトへアクセスする。例えば、制御部７２は、リンク先を示したダイアログを表示し、視聴者から販売サイトへのアクセスの承認を得てから、表示部７１に販売サイトを表示させる。視聴者が動画視聴用の専用アプリケーションを利用していたときは、リンク先の販売サイトを表示するためのアプリケーションを起動して販売サイトを表示させてもよい。視聴者がブラウザで動画を視聴していたときは、新しいタブで販売サイトを表示してもよい。
When the link area is set at the operation position, in step S34, the
あるいは、制御部７２は、動画の視聴を中断させずに、リンク領域に対応するリンクを記憶しておき、動画の視聴後に、リンクの示す販売サイトへアクセスしてもよい。制御部７２は、視聴者の画面への操作に対して、リンクを保存したことを表示したり、音を出力したりしてもよい。動画を最後まで再生した後、制御部７２は、表示部７１にリンクの示す販売サイトを表示させる。動画の視聴中に複数のリンクを記憶した場合、動画を最後まで再生した後、表示部７１がリンクの一覧を表示し、視聴者にリンクを選択させてもよい。このとき、表示部７１は、視聴者が操作したタイミングのフレームを表示し、選択した商品を確認させてもよい。
Alternatively, the
販売サーバ３へアクセスして販売サイトを表示した後、ステップＳ３５にて、視聴者端末７は、販売サーバ３において商品を購入する。視聴者端末７と販売サーバ３との間の商品購入処理は、一般的なネットショッピングと同じである。
After accessing the
以上説明したように、本実施形態の動画配信システムは配信サーバ１と視聴者端末７を備え、配信サーバ１は、動画内の商品に販売サイトへのリンクを付与したリンク付き動画を配信し、視聴者端末７は、リンク付き動画を画面に表示するとともに、画面に対する選択操作を検出する。選択操作を検出した操作位置にリンクが付与されている場合、視聴者端末７は、動画内の商品を販売する販売サイトへアクセスし、販売サイトを表示する。これにより、視聴者は、視聴中の動画に映りこんだ商品を容易に購入できる。
As described above, the video distribution system of the present embodiment includes a
［第２の実施形態］
第２の実施形態は、配信者が仮想空間内の配信者アバターを操作し、仮想空間内を撮影した動画を配信する点が第１の実施形態と異なる。仮想空間内には、商品を撮影した商品画像を貼り付けた商品オブジェクトが配置される。第１の実施形態と同様に、視聴者は動画内の商品オブジェクトを選択することで商品の販売サイトへ容易にアクセスできる。
[Second Embodiment]
The second embodiment is different from the first embodiment in that the distributor operates the distributor avatar in the virtual space and distributes the moving image shot in the virtual space. In the virtual space, a product object to which a product image of the product is pasted is placed. Similar to the first embodiment, the viewer can easily access the product sales site by selecting the product object in the moving image.
図９を参照し、配信者端末５の構成について説明する。図９に示す配信者端末５は、レンダリング部５５、配置部５６、生成部５７、および蓄積部５８を備える。配信者端末５には、配信者が装着するヘッドマウントディスプレイ（ＨＭＤ）６１と配信者が操作するコントローラ６２が接続される。
The configuration of the
レンダリング部５５は、配信者の動きを配信者アバターに反映する機能、仮想空間をレンダリングする機能、および動画内に映った商品オブジェクトの商品リンク情報を生成する機能を備える。
The
レンダリング部５５は、ＨＭＤ６１の動きおよびコントローラ６２による操作に応じて配信者アバターを制御する。配信者は、仮想空間内に配置された配信者アバターを制御して、仮想空間内を撮影した動画を生成する。
The
レンダリング部５５は、ＨＭＤ６１に表示するための映像および配信動画をレンダリングする。ＨＭＤ６１に表示するための映像は、ＨＭＤ６１の動きに応じた仮想カメラで撮影した仮想空間をレンダリングした映像であり、配信者が見る映像である。配信動画は、配信サーバ１へ送信される動画である。配信用仮想カメラは、仮想空間内の所定の位置に配置される。例えば、配信用仮想カメラは、仮想空間内の配信者アバターや商品オブジェクトを撮影するように配置される。配信用仮想カメラは、複数台配置されてもよいし、配置位置および撮影方向を変更できてもよい。なお、ＨＭＤ６１を用いずに、スマートフォンのフロントカメラで配信者の顔を撮影し、配信者アバターに配信者の動きを反映してもよい。
The
配信用仮想カメラの撮影範囲内に商品オブジェクトが存在する場合、レンダリング部５５は、画像内での商品オブジェクトの表示位置を求めてリンク領域を設定し、リンク領域に販売サイトへのリンクを付与して商品リンク情報を生成する。
When the product object exists within the shooting range of the virtual camera for distribution, the
レンダリング部５５は、配信動画と商品リンク情報を配信サーバ１へ送信する。
The
なお、配信サーバ１または視聴者端末７が仮想空間をレンダリングしてもよい。例えば、配信サーバ１が仮想空間をレンダリングする場合、配信サーバ１はレンダリングに必要な仮想空間の情報を保持しておき、配信者端末５からアバターのモーションデータおよび配信用仮想カメラの位置と方向を受信し、アバターの姿勢と配信用仮想カメラを制御して仮想空間をレンダリングする。配信サーバ１は、レンダリング部５５と同様に、画像内の商品オブジェクトの商品リンク情報も生成する。視聴者端末７がレンダリングする場合も同様である。
The
生成部５７は、実際の商品を複数方向から撮影した多視点画像を入力し、多視点画像それぞれにおける商品の向きに応じて撮影角度を求め、複数の撮影角度のそれぞれについて商品画像を作成した商品画像群を生成する。撮影角度は、ある撮影方向を基準として、基準に対する水平面上での角度である。例えば、商品の正面を０度とし、多視点画像それぞれに映った商品の角度に応じて、反時計回りに＋５度、＋８度というように撮影角度を設定する。生成部５７は、多視点画像のそれぞれから商品が存在する領域のみを抜き出し、商品画像のそれぞれに映る商品の大きさが均一となるように加工して商品画像を生成する。
The
多視点画像は、例えば図１０に示すように、実物のイス２００をカメラ２１０の位置を変えて複数方向から撮影した画像である。カメラ２１０を固定し、イス２００を水平面上で回転させて、イス２００を複数方向から撮影してもよい。イス２００の背景をグリーンバックまたはブルーバックにすると、商品画像としてイス２００だけを容易に抜き出すことができる。生成部５７は、イス２００の周囲をカメラ２１０で撮影した動画を入力し、動画から切り出したフレームを多視点画像として商品画像群を生成してもよい。動画のフレームと物体の撮影方向とを結びつけておき、視点の移動は動画の再生フレームをジャンプさせて実現できる。生成部５７は、商品の全周囲を撮影した多視点画像でなく、所定範囲の角度から撮影した多視点画像から商品画像群を生成してもよい。この場合、配信用仮想カメラの移動できる範囲を制限してもよい。例えば、商品の前方向からの商品画像しかない場合、配信用仮想カメラは商品オブジェクトの後ろに回り込むことができないように制限する。
The multi-viewpoint image is, for example, as shown in FIG. 10, an image of a
図１１（ａ）〜（ｃ）は、商品画像群の一例である。生成部５７は、図１１（ａ）〜（ｃ）に示す商品画像のそれぞれに、撮影角度を付与する。
11 (a) to 11 (c) are examples of product image groups. The
生成部５７は、多視点画像とともに、商品を購入することができるＷｅｂサイトへのリンクの情報を入力し、生成した商品画像群とリンクの情報を対応付けておく。
The
なお、多視点画像および商品画像群は静止画に限らなくてもよい。例えば、複数のカメラを配置して多視点映像を撮影し、Ｍｕｌｔｉ−ｖｉｅｗ Ｖｉｄｅｏ Ｃｏｄｉｎｇ（ＭＶＣ）と呼ばれる符号化方式で符号化した符号化データを商品画像群として用いてもよい。ＭＶＣはカメラ間で差分をとって圧縮するので圧縮効率が高く、符号化データから所望の視点映像の符号化データだけを取り出すことができる。 The multi-viewpoint image and the product image group do not have to be limited to still images. For example, a plurality of cameras may be arranged to capture a multi-viewpoint image, and coded data encoded by a coding method called Multi-view Video Coding (MVC) may be used as a product image group. Since MVC compresses by taking a difference between cameras, the compression efficiency is high, and only the coded data of the desired viewpoint image can be extracted from the coded data.
配信者端末５が生成部５７を備えると、配信者は、商品を複数方向から撮影するだけで、仮想空間内に商品オブジェクトを配置するための商品画像群を容易に作成できる。３次元モデルで表現した商品オブジェクトに比べると、商品画像を貼り付けた商品オブジェクトは仮想空間内で粗く見えるかもしれないが、簡易な作業で、実際の商品（商品オブジェクト）を仮想空間内に持ち込むことができる。
When the
なお、商品を販売する事業者から商品画像群が得られてもよい。商品画像群のそれぞれの商品画像は動画であってもよい。 A product image group may be obtained from a business operator who sells the product. Each product image in the product image group may be a moving image.
配置部５６は、商品画像を貼り付けた商品オブジェクトを仮想空間内に配置する。例えば、配置部５６は、板状の商品オブジェクトを配置し、商品画像群の中から選択した商品画像をオブジェクトに貼り付ける。商品オブジェクトは立方体または直方体でもよいし、球であってもよい。
The
レンダリング部５５が商品オブジェクトをレンダリングするときは、配信用仮想カメラに対して正面を向くように商品オブジェクトを水平面上で回転させ、撮影角度（商品オブジェクトの回転角）に応じた商品画像を選択し、商品オブジェクトに貼り付ける。撮影角度がピッタリの商品画像がないときは、撮影角度が近い商品画像を歪ませたり、幾何学的な変形を施したりするなどの加工を施してもよいし、複数視点の画像とＡＩを用いて新たな視点の商品画像を生成してもよい。ＭＶＣを用いると自由視点の映像を取得できる。
When the
配信用仮想カメラの移動範囲は、商品画像群に付与された撮影角度に応じて制限する。例えば、商品画像群が−４５度から４５度までの撮影角度が付与された商品画像を含む場合、配信用仮想カメラの移動範囲も商品オブジェクトの正面に対して−４５度から４５度までの範囲に制限する。商品オブジェクトが不自然に映らないように、配信用仮想カメラの仮想空間の上下方向の動きを制限するとよい。 The moving range of the virtual camera for distribution is limited according to the shooting angle given to the product image group. For example, when the product image group includes a product image with a shooting angle of -45 degrees to 45 degrees, the movement range of the virtual camera for distribution is also in the range of -45 degrees to 45 degrees with respect to the front of the product object. Limit to. It is advisable to limit the vertical movement of the virtual space of the distribution virtual camera so that the product object does not appear unnatural.
蓄積部５８は、仮想空間をレンダリングするために必要なオブジェクトの配置データ、モデルデータ、テクスチャデータなどを含む仮想空間情報を保持する。本実施形態では、仮想空間情報は、商品オブジェクトの配置データと商品画像群を含む。また、蓄積部５８は、商品オブジェクトに対応する販売サイトへのリンクを保持する。
The
図１２に、仮想空間を撮影した動画の一例を示す。図１２の例では、仮想空間を撮影した動画３００内に、商品オブジェクト３１０と配信者アバター３２０が映っている。商品オブジェクト３１０には、図１１（ａ）の商品画像が貼り付けられている。配信用仮想カメラを左に動かし、商品オブジェクト３１０の撮影角度が変化すると、レンダリング部５５は、商品オブジェクト３１０に貼り付ける商品画像を図１１（ａ）から図１１（ｂ）に変更する。
FIG. 12 shows an example of a moving image of a virtual space. In the example of FIG. 12, the
動画作成後の動画配信システムの処理は第１実施形態と同様である。視聴者が画面上で商品オブジェクト３１０をタッチまたはクリックすると、イス２００を購入可能な販売サイトへアクセスできる。
The processing of the moving image distribution system after creating the moving image is the same as that of the first embodiment. When the viewer touches or clicks the
商品オブジェクトを撮影する撮影角度によってリンク先を変化させてもよい。例えば、サングラスをかけ、ヘッドホンを装着している人を映した商品オブジェクトを配置した場合、商品オブジェクトを正面から撮影した映像ではリンク先をサングラスの販売サイトとし、商品オブジェクトを横方向から撮影した映像では、リンク先をヘッドホンの販売サイトに変更する。リンク情報では、撮影角度ごとにリンクを付与しておく。商品画像群の含む商品画像のそれぞれに個別のリンク情報を付与してもよいし、動画の各フレームに個別のリンク情報を付与してもよい。 The link destination may be changed depending on the shooting angle at which the product object is shot. For example, if a product object that shows a person wearing sunglasses and headphones is placed, the link destination is the sales site for sunglasses in the image of the product object taken from the front, and the image of the product object taken from the side. Now, change the link to the headphone sales site. In the link information, a link is given for each shooting angle. Individual link information may be added to each of the product images included in the product image group, or individual link information may be added to each frame of the moving image.
なお、視聴者端末７がＨＭＤを接続し、ＶＲ機能を備えて、視聴者が商品オブジェクトを配置した仮想空間内を自由に移動できてもよい。この場合も、視聴者の視点に応じて商品オブジェクトに貼り付ける商品画像を変更する。商品画像群に撮影角度の制限があるときは、仮想空間内での視聴者の移動を制限する。視聴者が仮想空間で商品オブジェクトに対して何らかの操作を行ったときに、その商品を購入可能な販売サイトにアクセスできるようにしてもよい。仮想空間内に商品オブジェクトを並べ、視聴者が自由に訪問できるようにして、ショールームのようにしてもよい。
The
視聴者（別の配信者）は、視聴中の番組の仮想空間から商品オブジェクトを取得できてもよい。例えば、配信者Ａと配信者Ｂのそれぞれが別々の仮想空間で番組を配信しているとする。配信者Ａの仮想空間内には商品オブジェクトが配置されている。配信者Ｂは自身の仮想空間内に配置したモニタオブジェクトに配信者Ａの番組を映して視聴している。配信者Ｂがモニタオブジェクトの表示画面上で商品オブジェクトを選択すると、配信者Ｂの操作する配信者端末５は、商品オブジェクトを表示するための商品画像群と商品オブジェクトに付与された商品リンク情報を配信サーバ１または配信者Ａの配信者端末５から取得し、配信者Ｂの仮想空間内にその商品オブジェクトを配置する。配信者Ｂは配信者Ａの仮想空間に突入して、商品オブジェクトと商品リンク情報を取得できてもよい。配信者Ｂの番組の視聴者は、配信者Ｂの仮想空間に配置された商品オブジェクトを選択すると、その商品を購入可能な販売サイトにアクセスできる。配信者Ｂの仮想空間に配置された商品オブジェクトの商品リンク情報には、配信者Ａと配信者Ｂの両方を特定する情報を含めておき、視聴者が商品を購入したことに対する報酬は、配信者Ａおよび配信者Ｂの両方に支払われてもよい。
The viewer (another distributor) may be able to acquire the product object from the virtual space of the program being viewed. For example, it is assumed that the distributor A and the distributor B each distribute a program in different virtual spaces. A product object is arranged in the virtual space of the distributor A. Distributor B projects and watches the program of distributor A on a monitor object arranged in his / her virtual space. When the distributor B selects a product object on the display screen of the monitor object, the
本発明の実施形態に係るシステムを上記のように構成することで得られる効果は、例えば次の点である。 The effects obtained by configuring the system according to the embodiment of the present invention as described above are, for example, the following points.
配信者（放送者）が自分の番組の中で、自分の好きな、あるいは紹介をしたい商品やグッズを紹介したい場合は頻繁に起こりうることであり、その場合、視聴者から視認しやすくするためには商品等の実写画像を用いることが望ましい。しかしＶＲ空間中にその商品の実写画像を取り込んで表示させるためには、３Ｄ画像データとしてその商品等のデータをあらかじめ用意しなければならず、これは配信者にとって容易ではない。一方、他の配信者の中には、上記の配信者Ａのようにたまたま、配信者Ｂのお気に入りの商品の３Ｄ画像を制作して表示をしている場合があるので、配信者Ｂとしては、配信者Ａが予め制作した商品等の画像を流用できれば好都合である。 This can happen frequently when a distributor (broadcaster) wants to introduce a product or goods that he / she likes or wants to introduce in his / her program, in which case, in order to make it easier for the viewer to see. It is desirable to use a live-action image of a product or the like. However, in order to capture and display a live-action image of the product in the VR space, it is necessary to prepare data of the product or the like as 3D image data in advance, which is not easy for the distributor. On the other hand, some other distributors happen to produce and display 3D images of the favorite products of distributor B like the above distributor A, so that distributor B , It would be convenient if the image of the product or the like produced in advance by the distributor A could be diverted.
このように配信者Ａが予め制作した商品等の画像は、全周から視認が可能なようにデータが作成されておらず視認可能な角度が、例えば背面のデータがそもそも存在しないなど、一定の範囲に限られる場合もあるので、その場合、この商品等の画像を利用した配信者Ｂの配信画像においても、その視認確度の制限を踏襲して、視聴者が視認可能な角度範囲に制限を設けるようにしてもよい。 In this way, the image of the product or the like produced in advance by the distributor A has no data created so that it can be visually recognized from the entire circumference, and the visible angle is constant, for example, the data on the back surface does not exist in the first place. Since it may be limited to the range, in that case, the distribution image of the distributor B using the image of this product or the like is also limited to the angle range that the viewer can see by following the limitation of the visibility accuracy. It may be provided.
以上説明したように、本実施形態の動画配信システムは、配信サーバ１、配信者端末５、および視聴者端末７を備える。配信サーバ１は、仮想空間を撮影した動画に、動画内の商品オブジェクトに販売サイトへのリンクを付与したリンク付き動画を配信する。視聴者端末７は、リンク付き動画を画面に表示するとともに、商品オブジェクトが選択されると、その商品を購入可能な販売サイトへアクセスする。配信者端末５は、実際の商品を複数の視点から撮影した多視点画像を入力し、複数の撮影角度のそれぞれについて商品画像を作成した商品画像群を生成し、商品画像を貼り付けた商品オブジェクトを仮想空間に配置し、仮想空間を仮想カメラで撮影して動画を生成するとともに、動画内に映った商品オブジェクトの表示位置に販売サイトへのリンクを付与したリンク情報を生成する。動画を生成する際、配信者端末５は、商品オブジェクトを撮影する撮影角度に応じて商品画像群から撮影角度に応じた商品画像を選択して商品オブジェクトに貼り付ける。これにより、配信者は、現実世界の商品を商品オブジェクトとして容易に仮想空間内に持ち込むことができ、商品オブジェクトに販売サイトへのリンクを付与することで、視聴者に商品の購入を促すことができる。
As described above, the video distribution system of the present embodiment includes a
なお、第２の実施形態の商品オブジェクトを第１の実施形態の３Ｄオブジェクトとして用いてもよい。 The product object of the second embodiment may be used as the 3D object of the first embodiment.
配信サーバ１、配信者端末５、および視聴者端末７が備える各部は、演算処理装置、記憶装置等を備えたコンピュータにより構成して、各部の処理がプログラムによって実行されるものとしてもよい。このプログラムは配信サーバ１、配信者端末５、および視聴者端末７が備える記憶装置に記憶されており、磁気ディスク、光ディスク、半導体メモリ等の記録媒体に記録することも、ネットワークを通して提供することも可能である。
Each part included in the
１…配信サーバ
１１…配信部
１２…リンク設定部
３…販売サーバ
５…配信者端末
５１…動画送信部
５２…商品検出部
５３…商品情報蓄積部
５５…レンダリング部
５６…配置部
５７…生成部
５８…蓄積部
６１…ＨＭＤ
６２…コントローラ
７…視聴者端末
７１…表示部
７２…制御部
７３…操作検出部
1 ...
62 ...
Claims (5)
前記動画生成装置は、
実際の商品を複数方向から撮影した多視点画像を入力し、複数の撮影角度のそれぞれに対応する商品画像で構成された商品画像群を生成する生成部と、
前記商品画像群から選択した商品画像を貼り付けた商品オブジェクトを仮想空間に配置する配置部と、
前記商品オブジェクトを配置した仮想空間を仮想カメラで撮影して動画を前記配信サーバへ送信するとともに、前記動画内に映った前記商品オブジェクトの表示位置に前記商品を購入可能な販売サイトへのリンクを付与したリンク情報を前記配信サーバへ送信するレンダリング部を有し、
前記レンダリング部は、前記仮想カメラで前記商品オブジェクトを撮影する撮影角度に応じて前記商品画像群から商品画像を選択して前記商品オブジェクトに貼り付け、
前記仮想カメラの移動範囲は前記商品画像群を構成する商品画像の撮影角度に応じて制限されており、
前記配信サーバは、
動画を配信するとともに、前記動画内に映った前記商品オブジェクトの表示位置に前記商品を購入可能な販売サイトへのリンクを付与したリンク情報を、前記動画から独立した情報として配信する配信部を有し、
前記視聴装置は、
前記動画と前記リンク情報を受信し、前記動画を画面に表示する表示部と、
前記動画を表示する画面に対する選択操作を検出する操作検出部と、
前記選択操作を検出した操作位置に前記販売サイトへのリンクが付与されている場合、前記販売サイトを前記表示部に表示させる制御部を有する
配信システム。 A distribution system equipped with a video generator, a distribution server, and a viewing device.
The moving image generator
A generator that inputs multi-viewpoint images of actual products taken from multiple directions and generates a product image group composed of product images corresponding to each of the multiple shooting angles.
An arrangement unit that arranges a product object to which a product image selected from the product image group is pasted in a virtual space,
A virtual space in which the product object is placed is photographed with a virtual camera, a moving image is transmitted to the distribution server, and a link to a sales site where the product can be purchased is displayed at the display position of the product object reflected in the moving image. It has a rendering unit that transmits the given link information to the distribution server.
The rendering unit selects a product image from the product image group according to a shooting angle at which the product object is photographed by the virtual camera, and pastes the product image onto the product object.
The moving range of the virtual camera is limited according to the shooting angle of the product images constituting the product image group.
The distribution server
In addition to distributing the video, it has a distribution unit that distributes link information with a link to a sales site where the product can be purchased at the display position of the product object shown in the video as information independent of the video. And
The viewing device is
A display unit that receives the moving image and the link information and displays the moving image on the screen.
An operation detection unit that detects a selection operation on the screen that displays the moving image,
A distribution system having a control unit for displaying the sales site on the display unit when a link to the sales site is given to the operation position where the selection operation is detected.
前記リンク情報は、前記販売サイトを提供する事業者または前記動画を視聴した視聴者が前記配信サーバへ送信した
配信システム。 The distribution system according to claim 1.
The link information is a distribution system transmitted to the distribution server by a business operator that provides the sales site or a viewer who has viewed the video.
前記制御部は、前記動画の再生終了後に、前記販売サイトを前記表示部に表示させる
配信システム。 The delivery system according to claim 1 or 2.
The control unit is a distribution system that displays the sales site on the display unit after the playback of the moving image is completed.
実際の商品を複数方向から撮影した多視点画像を入力し、複数の撮影角度のそれぞれに対応する商品画像で構成された商品画像群を生成する生成部と、
前記商品画像群から選択した商品画像を貼り付けた商品オブジェクトを前記仮想空間に配置する配置部と、
前記商品オブジェクトを配置した仮想空間を仮想カメラで撮影して動画を生成するとともに、前記動画内に映った前記商品オブジェクトの表示位置に前記商品を購入可能な販売サイトへのリンクを付与したリンク情報を生成するレンダリング部を有し、
前記レンダリング部は、前記仮想カメラで前記商品オブジェクトを撮影する撮影角度に応じて前記商品画像群から商品画像を選択して前記商品オブジェクトに貼り付け、
前記仮想カメラの移動範囲は前記商品画像群を構成する商品画像の撮影角度に応じて制限される
動画生成装置。 It is a video generator that generates a video of a virtual space.
A generator that inputs multi-viewpoint images of actual products taken from multiple directions and generates a product image group composed of product images corresponding to each of the multiple shooting angles.
An arrangement unit that arranges a product object to which a product image selected from the product image group is pasted in the virtual space, and
Link information in which a virtual space in which the product object is placed is photographed with a virtual camera to generate a moving image, and a link to a sales site where the product can be purchased is added to the display position of the product object reflected in the moving image. Has a rendering part that produces
The rendering unit selects a product image from the product image group according to a shooting angle at which the product object is photographed by the virtual camera, and pastes the product image onto the product object.
A moving range of the virtual camera is a moving image generating device in which the moving range of the virtual camera is limited according to the shooting angle of the product images constituting the product image group.
実際の商品を複数方向から撮影した多視点画像を入力し、複数の撮影角度のそれぞれについて商品画像を作成した商品画像群を生成するステップと、
前記商品画像群から選択した商品画像を貼り付けた商品オブジェクトを前記仮想空間に配置するステップと、
前記商品オブジェクトを配置した仮想空間を仮想カメラで撮影して動画を生成するとともに、前記動画内に映った前記商品オブジェクトの表示位置に前記商品を購入可能な販売サイトへのリンクを付与したリンク情報を生成するステップを有し、
前記仮想カメラで前記商品オブジェクトを撮影する撮影角度に応じて前記商品画像群から商品画像を選択して前記商品オブジェクトに貼り付け、
前記仮想カメラの移動範囲は前記商品画像群を構成する商品画像の撮影角度に応じて制限される
動画生成方法。 This is a video generation method using a video generator that generates a video of a virtual space.
A step of inputting multi-viewpoint images of actual products taken from multiple directions and generating a product image group in which product images are created for each of multiple shooting angles.
A step of arranging a product object to which a product image selected from the product image group is pasted in the virtual space, and
Link information in which a virtual space in which the product object is placed is photographed with a virtual camera to generate a moving image, and a link to a sales site where the product can be purchased is added to the display position of the product object reflected in the moving image. Has steps to generate
A product image is selected from the product image group according to the shooting angle at which the product object is photographed by the virtual camera and pasted on the product object.
A moving image generation method in which the moving range of the virtual camera is limited according to the shooting angle of the product images constituting the product image group.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020034039A JP6831027B1 (en) | 2020-02-28 | 2020-02-28 | Distribution system, video generator, and video generation method |
| JP2021010027A JP2021140761A (en) | 2020-02-28 | 2021-01-26 | Distribution system, viewing apparatus, video generation apparatus, information processing method, and video generation method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020034039A JP6831027B1 (en) | 2020-02-28 | 2020-02-28 | Distribution system, video generator, and video generation method |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021010027A Division JP2021140761A (en) | 2020-02-28 | 2021-01-26 | Distribution system, viewing apparatus, video generation apparatus, information processing method, and video generation method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP6831027B1 true JP6831027B1 (en) | 2021-02-17 |
| JP2021135951A JP2021135951A (en) | 2021-09-13 |
Family
ID=74562394
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020034039A Active JP6831027B1 (en) | 2020-02-28 | 2020-02-28 | Distribution system, video generator, and video generation method |
| JP2021010027A Pending JP2021140761A (en) | 2020-02-28 | 2021-01-26 | Distribution system, viewing apparatus, video generation apparatus, information processing method, and video generation method |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021010027A Pending JP2021140761A (en) | 2020-02-28 | 2021-01-26 | Distribution system, viewing apparatus, video generation apparatus, information processing method, and video generation method |
Country Status (1)
| Country | Link |
|---|---|
| JP (2) | JP6831027B1 (en) |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004048225A (en) * | 2002-07-10 | 2004-02-12 | Nobukatsu Adachi | Image expression method in television shopping |
| JP2007018198A (en) * | 2005-07-06 | 2007-01-25 | Sony Corp | Device for generating index information with link information, device for generating image data with tag information, method for generating index information with link information, method for generating image data with tag information, and program |
| JP2007019769A (en) * | 2005-07-06 | 2007-01-25 | Sony Corp | Tag information display control apparatus, information processing apparatus, display apparatus, and tag information display control method and program |
| JP2008117113A (en) * | 2006-11-02 | 2008-05-22 | Fresh Remix Kk | Image forming device and method, and image forming program |
| JP2010109773A (en) * | 2008-10-30 | 2010-05-13 | Koichi Sumida | Information providing system, content distribution apparatus and content viewing terminal device |
| JP5522789B2 (en) * | 2010-06-09 | 2014-06-18 | 日本放送協会 | Video playback device with link function and video playback program with link function |
| JP5857450B2 (en) * | 2011-05-30 | 2016-02-10 | ソニー株式会社 | Information processing apparatus, information processing method, and program |
| JP5977450B2 (en) * | 2013-06-28 | 2016-08-24 | 楽天株式会社 | Information processing apparatus, information processing method, and information processing program |
| JP5585716B1 (en) * | 2013-12-09 | 2014-09-10 | 株式会社Ｐｕｍｏ | Link destination designation interface device, viewer interface device, and computer program |
| JP5989708B2 (en) * | 2014-05-22 | 2016-09-07 | 株式会社コロプラ | Game program |
-
2020
- 2020-02-28 JP JP2020034039A patent/JP6831027B1/en active Active
-
2021
- 2021-01-26 JP JP2021010027A patent/JP2021140761A/en active Pending
Also Published As
| Publication number | Publication date |
|---|---|
| JP2021135951A (en) | 2021-09-13 |
| JP2021140761A (en) | 2021-09-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10948982B2 (en) | Methods and systems for integrating virtual content into an immersive virtual reality world based on real-world scenery | |
| US11738275B2 (en) | Virtual reality presentation of real world space | |
| US10691202B2 (en) | Virtual reality system including social graph | |
| CN106792228B (en) | Live broadcast interaction method and system | |
| CN112104594A (en) | Immersive interactive remote participation in live entertainment | |
| US20170085964A1 (en) | Interactive Object Placement in Virtual Reality Videos | |
| US10701426B1 (en) | Virtual reality system including social graph | |
| JP2021002288A (en) | Image processor, content processing system, and image processing method | |
| EP3829730B1 (en) | System and method for providing a computer-generated environment | |
| CN107911737A (en) | Methods of exhibiting, device, computing device and the storage medium of media content | |
| JP7489642B2 (en) | PROGRAM, OBJECT DRAWING METHOD AND INFORMATION PROCESSING SYSTEM | |
| US20170214980A1 (en) | Method and system for presenting media content in environment | |
| CN109996060B (en) | Virtual reality cinema system and information processing method | |
| US11961190B2 (en) | Content distribution system, content distribution method, and content distribution program | |
| JP6609078B1 (en) | Content distribution system, content distribution method, and content distribution program | |
| JP6831027B1 (en) | Distribution system, video generator, and video generation method | |
| US20240323497A1 (en) | Systems and methods for enabling an enhanced extended reality experience | |
| JP7284329B2 (en) | Video distribution system, video distribution method, and video distribution program for live distribution of video containing animation of character object generated based on movement of distribution user | |
| JP7563704B2 (en) | Video distribution system, video distribution method, and video distribution program for live-distributing video including animation of character object generated based on the movement of a broadcasting user | |
| JP7344084B2 (en) | Content distribution system, content distribution method, and content distribution program | |
| JP2024022807A (en) | Vr motion picture providing system, vr motion picture proving method, and program | |
| JP2024140697A (en) | Information processing device, information processing method, and program | |
| JP2020167654A (en) | Content distribution system, content distribution method, and content distribution program | |
| JP2024035671A (en) | Information processing method, program, and information processing apparatus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200228 |
|
| A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20200228 |
|
| A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20200305 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200714 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200914 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201006 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201201 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210112 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210127 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6831027 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |