JP6520262B2 - 動画データ再生方法 - Google Patents

Description

本発明は、携帯端末においてＡＲ技術により動画を再生するための印画物を作製する印画物作製装置に関する。また、本発明は、携帯端末へ動画データを配信するサーバ装置、及び動画データ再生方法に関する。

免許証、パスポート、履歴書等に貼付するための証明写真等を撮影するボックス型の印画物作製装置が知られている。印画物作製装置は、人物を撮影し、用途に応じた様々なサイズの写真をプリントして出力する。このような印画物作製装置においては、利用者のニーズが多様化しており、常に新たなサービスが求められている。

従来、タブレット端末やスマートフォン等の携帯端末で撮影した現実空間の画像上に、仮想物体等の画像を重畳して表示する拡張現実（ＡＲ：Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）技術が知られている（例えば特許文献１、２参照）。

特開２０１１−８７５２号公報 特表２０１２−５０３２２８号公報

本発明は、上記従来の実状に鑑みてなされたものであり、携帯端末で撮影することで動画が重畳して再生されるような印画物を作製する印画物作製装置、携帯端末へ動画データを配信するサーバ装置、及び動画データ再生方法を提供することを課題とする。

本発明の一態様による印画物作製装置は、サーバ装置から受信した画像データを記憶する記憶部と、被撮影者を撮影し、撮影画像を生成する撮影装置と、前記サーバ装置において前記画像データに対応する動画データが保存される場所を示す動画保存場所情報をコード化してコード画像を生成するコード化処理部と、前記画像データ、前記撮影画像、及び前記コード画像を合成して合成画像を生成する画像合成部と、前記合成画像を印画紙にプリントして出力するプリンタと、を備えるものである。

本発明の一態様による印画物作製装置は、前記撮影画像を前記サーバ装置へ送信する画像送信部をさらに備えることを特徴とする。

本発明の一態様による印画物作製装置は、前記動画データを前記サーバ装置へ送信する動画データ送信部をさらに備え、前記動画データは、前記撮影装置が前記被撮影者を撮影して生成することを特徴とする。

本発明の一態様による印画物作製装置は、サーバ装置から受信した画像データを記憶する記憶部と、被撮影者を撮影し、動画データを生成する撮影装置と、前記動画データを前記サーバ装置へ送信する動画データ送信部と、前記サーバ装置において前記動画データが保存される場所を示す動画保存場所情報をコード化してコード画像を生成するコード化処理部と、前記画像データ及び前記コード画像を合成して合成画像を生成する画像合成部と、前記合成画像を印画紙にプリントして出力するプリンタと、を備えるものである。

本発明の一態様によるサーバ装置は、画像データ及び動画データを記憶する記憶部と、前記画像データと、前記動画データの保存場所情報とを印画物作製装置へ送信する第１送信部と、前記印画物作製装置から撮影画像を受信する受信部と、前記動画データに前記撮影画像を合成する動画合成処理部と、前記保存場所情報をコード化したコード画像、前記画像データ、及び前記撮影画像が前記印画物作製装置によりプリントされたプリント物上の前記コード画像から前記保存場所情報を読み取ってアクセスしてきた携帯端末へ、前記撮影画像が合成された動画データを送信する第２送信部と、を備えるものである。

本発明の一態様によるサーバ装置は、印画物作製装置から動画データを受信する受信部と、画像データ及び前記動画データを記憶する記憶部と、前記画像データと、前記動画データの保存場所情報とを前記印画物作製装置へ送信する第１送信部と、前記保存場所情報をコード化したコード画像及び前記画像データが前記印画物作製装置によりプリントされたプリント物上の前記コード画像から前記保存場所情報を読み取ってアクセスしてきた携帯端末へ、前記動画データを送信する第２送信部と、を備えるものである。

本発明の一態様による動画データ再生方法は、携帯端末、画像データを記憶する印画物作製装置、及び前記画像データ及び動画データを記憶するサーバ装置を用いた動画データ再生方法であって、前記印画物作製装置が、前記サーバ装置における前記動画データの保存場所情報をコード化してコード画像を生成し、被撮影者を撮影した撮影画像と、前記画像データと、前記コード画像とを合成した合成画像を印画紙にプリントしてプリント物を出力し、前記携帯端末が、カメラを用いて、前記プリント物にプリントされたコード画像から前記保存場所情報を読み取り、前記保存場所情報に基づいて前記サーバ装置にアクセスして前記画像データを取得し、前記サーバ装置から取得した画像と、前記カメラを用いて取得した前記プリント物上の画像との特徴点を比較し、特徴点が一致した場合に、前記サーバ装置から前記動画データを受信し、受信した動画データを再生することを特徴とする。

本発明の一態様による動画データ再生方法において、前記サーバ装置は、前記印画物作製装置から前記撮影画像を受信し、前記動画データに前記撮影画像を合成することを特徴とする。

本発明の一態様による動画データ再生方法は、前記印画物作製装置が、前記被撮影者を撮影して前記動画データを生成し、この動画データを前記サーバ装置へ送信することを特徴とする。

本発明の一態様による動画データ再生方法は、携帯端末、画像データを記憶するサーバ装置、及び前記画像データを記憶する印画物作製装置を用いた動画データ再生方法であって、前記サーバ装置が、動画データを保存可能な場所を示す保存場所情報を前記印画物作製装置へ送信し、前記印画物作製装置が、前記保存場所情報をコード化してコード画像を生成し、被撮影者を撮影した撮影画像と、前記画像データと、前記コード画像とを合成した合成画像を印画紙にプリントしてプリント物を出力し、前記携帯端末が、カメラを用いて、前記プリント物にプリントされたコード画像から前記保存場所情報を読み取り、前記保存場所情報に基づいて前記サーバ装置にアクセスして自端末に記憶されている動画データを登録し、動画データの登録後に前記保存場所情報に基づいて前記サーバ装置にアクセスした場合は、前記サーバ装置から前記画像データを取得し、前記サーバ装置から取得した画像と、前記カメラを用いて取得した前記プリント物上の画像との特徴点を比較し、特徴点が一致した場合に、前記サーバ装置から前記動画データを受信し、受信した動画データを再生することを特徴とする。

本発明の一態様による動画データ再生方法は、携帯端末、画像データを記憶するサーバ装置、及び前記画像データを記憶する印画物作製装置を用いた動画データ再生方法であって、前記サーバ装置が、動画データを保存可能な場所を示す保存場所情報を前記印画物作製装置へ送信し、前記印画物作製装置が、前記保存場所情報をコード化してコード画像を生成し、前記画像データと、前記コード画像とを合成した合成画像を印画紙にプリントしてプリント物を出力し、被撮影者を撮影して生成した動画データを前記サーバ装置へ送信し、前記サーバ装置が、前記印画物作製装置から受信した動画データを前記保存場所情報と対応付けて保存し、前記携帯端末が、カメラを用いて、前記プリント物にプリントされたコード画像から前記保存場所情報を読み取り、前記保存場所情報に基づいて前記サーバ装置にアクセスして前記画像データを取得し、前記サーバ装置から取得した画像と、前記カメラを用いて取得した前記プリント物上の画像との特徴点を比較し、特徴点が一致した場合に、前記サーバ装置から前記動画データを受信し、受信した動画データを再生することを特徴とする。

本発明によれば、印画物作製装置で作製された印画物を携帯端末で撮影することで、印画物に動画が重畳して再生されるように携帯端末へ動画データを配信することができる。

第１の実施形態に係る動画データ再生システムの概略構成図である。 （ａ）はフレーム画像の一例を示す図であり、（ｂ）は印画物作製装置から出力されるプリント物の一例を示す図である。 印画物作製装置の構成図である。 印画物作製装置の演算制御装置のハードウェア構成図である。 画像販売プログラムを実行することで実現される機能ブロック図である。 サーバ装置の構成図である。 携帯端末の構成図である。 動画再生アプリを実行することで実現される機能ブロック図である。 第１の実施形態に係る動画データ再生方法を説明するシーケンス図である。 第２の実施形態に係る動画データ再生方法を説明するシーケンス図である。 第３の実施形態に係る動画データ再生方法を説明するシーケンス図である。 第４の実施形態に係る動画データ再生方法を説明するシーケンス図である。

以下、本発明の実施の形態を図面に基づいて説明する。

［第１の実施形態］
図１は、本発明の第１の実施形態に係る動画データ再生システムの概略構成図である。図１に示すように、動画データ再生システムは、サーバ装置１、印画物作製装置２、及び携帯端末４を備える。

サーバ装置１は、画像データと、この画像データに対応する動画データとを保存している。サーバ装置１は、画像データと、対応する動画データにアクセスするための保存場所情報（例えばＵＲＬ）とを印画物作製装置２へ送信する。

画像データは、例えば、図２（ａ）に示すように、スポーツ選手や有名人等の人物の画像３０と、印画物作製装置２が撮影したユーザ画像が挿入されるユーザ画像挿入領域３１とを含むフレーム画像のデータである。動画データは、例えば、画像３０の人物が動いたり音声を出したりしている動画のデータである。画像３０は人物に限定されず、動物やキャラクターなどでもよい。以下、画像３０を人物画像として説明を行う。

印画物作製装置２は、ボックス型の写真撮影装置であり、ユーザから料金が支払われると、ユーザを撮影し、ユーザ画像を生成する。また、印画物作製装置２は、サーバ装置１から受信した保存場所情報をコード化して二次元コードを生成する。そして、印画物作製装置２は、画像データのユーザ画像挿入領域３１にユーザ画像を挿入し、さらに二次元コード画像を合成し、合成画像を印画紙にプリントしてプリント物（印画物）３を出力する。これにより、図２（ｂ）に示すように、人物画像３０、ユーザ画像３２、及び二次元コード３３がプリントされたプリント物３が作製される。

ユーザは、スマートフォンやタブレット機器等の携帯端末４を有しており、この携帯端末４には動画データを再生するためのプログラム（動画再生アプリ）が記憶されている。携帯端末４がこのプログラムを実行すると、二次元コードを読み取るために携帯端末４のカメラ機能が起動する。ユーザが携帯端末４のカメラでプリント物３上の二次元コード３３を撮影すると、携帯端末４は二次元コード３３を読み取って保存場所情報を取得し、サーバ装置１にアクセスする。

携帯端末４は、サーバ装置１から画像データを取得するとともに、携帯端末４のカメラでプリント物３の人物画像３０を撮影するようユーザに指示する。ユーザが携帯端末４のカメラで人物画像３０を撮影すると、携帯端末４は、撮影された人物画像３０と、サーバ装置１から取得した画像との特徴点を比較して照合する。照合により２つの画像が一致した場合、携帯端末４はサーバ装置１から人物画像３０に対応する動画データを取得し、ディスプレイ上で動画を再生する。動画再生には公知のＡＲ技術が用いられ、携帯端末４のカメラで撮影しているプリント物３に動画が重畳して再生される。

このように、動画データ再生システムでは、印画物作製装置２が、ユーザを撮影し、ユーザ画像３２、人物画像３０、及び二次元コード３３がプリントされたプリント物３を販売する。ユーザは、自身の画像と、有名人等の画像とが合成された写真（プリント物３）を購入できる。また、ユーザは、購入したプリント物３の二次元コード３３を携帯端末４で読み取り、サーバ装置１にアクセスして動画データを受信・再生し、人物画像３０に対応する動画を楽しむことができる。

図３は、印画物作製装置２の概略構成を示す。印画物作製装置２は、ユーザ（被撮影者）Ｐを撮影し、撮影画像データを生成する撮影装置２１と、この撮影画像データに対して画像処理を施す演算制御装置２０と、印画物（写真）をプリントするプリンタ２３と、撮影装置２１がユーザＰを撮影する際にユーザＰに光を照射するストロボ２４と、サーバ装置１との通信を行う通信部２５とを備える。

また、印画物作製装置２は、ユーザＰから各種指示を受け付けると共に、撮影した画像のプレビュー表示を行うタッチパネル２２を備えている。さらに、印画物作製装置２には、ユーザＰが印画物の代金として支払う貨幣を受け入れたり、釣銭を払い出したりする課金部（図示せず）が設けられている。印画物作製装置２におけるユーザＰの背中側の壁紙は、クロマキー合成に適した色、例えば青色や黄緑色になっている。

撮影装置２１は、例えばデジタルカメラであり、レンズ、シャッタ、ＣＭＯＳセンサ、Ａ／Ｄ変換器等を有する。撮影装置２１がユーザＰを撮影する場合には、ＣＭＯＳセンサが、レンズにより収束された撮影光を、シャッタを介して受光すると共に、受光面に結像された光学像を光電変換し、画像信号として出力する。そして、Ａ／Ｄ変換器が、ＣＭＯＳセンサから出力された画像信号をＡ／Ｄ変換し、撮影画像データを生成する。撮影装置２１は、撮影画像データを演算制御装置２０へ出力する。

通信部２５は、サーバ装置１と通信を行い、サーバ装置１から人物画像３０を含む画像データ、及び保存場所情報を受信する。

演算制御装置２０は、撮影装置２１、タッチパネル２２、プリンタ２３、ストロボ２４、通信部２５、及び課金部に接続されており、各部の制御やデータの受け渡しを行う。

図４に、演算制御装置２０のハードウェア構成を示す。演算制御装置２０は、ＣＰＵ（中央演算処理部）２０１、メインメモリ２０２、ディスク装置２０３、及び入出力部２０４を有する。演算制御装置２０の各部はバスを介して接続されている。

ディスク装置２０３は、制御プログラム、画像販売プログラム、及びサーバ装置１から受信した画像データを記憶する。

ＣＰＵ２０１が制御プログラムを実行することで、印画物作製装置２の各部を制御する制御部として機能する。

ＣＰＵ２０１が画像販売プログラムを実行することで、図５に示すように、画像データ受信部２１０、サンプル画像表示部２１１、保存場所情報取得部２１２、コード化処理部２１３、撮影処理部２１４、切抜部２１５、画像合成部２１６、及びプリント処理部２１７が実現され、ユーザの撮影及びプリント物３の販売が行えるようになる。

画像データ受信部２１０は、サーバ装置１から画像データを受信し、ディスク装置２０３に格納する。

サンプル画像表示部２１１は、サーバ装置１から受信した画像データを用いて、タッチパネル２２にプリント物３のサンプル画像を表示する。ユーザが購入画像を選択して料金を支払うと、保存場所情報取得部２１２が、購入された画像に対応する保存場所情報をサーバ装置１から取得し、撮影処理部２１４が撮影装置２１を用いてユーザＰの撮影処理を行う。

コード化処理部２１３は、保存場所情報取得部２１２が取得した保存場所情報をコード化して二次元コード画像を生成する。

切抜部２１５は、撮影装置２１による撮影画像内の人物（ユーザ）と背景色（壁紙色）との色差を判別し、撮影画像からユーザ画像を切り抜く。ここで判別される色差とは、色相差、彩度差、又は色相差及び彩度差の組み合わせである。

画像合成部２１６は、購入された画像と、コード化処理部２１３により生成された二次元コード画像と、切抜部２１５により撮影画像から切り抜かれたユーザ画像とを合成して合成画像を作成する。例えば、画像合成部２１６は、図２（ａ）、（ｂ）に示すように、購入画像の画像データのユーザ画像挿入領域３１にユーザ画像３２を挿入し、さらに、人物画像３０及びユーザ画像３２に重ならない位置に二次元コード画像３３を合成して合成画像を作成する。

プリント処理部２１７は、作成された合成画像を、入出力部２０４を介してプリンタ２３へ転送し、印画紙にプリントするように制御する。これにより、プリンタ２３からプリント物３が出力される。

タッチパネル２２は、操作ボタンを表示し、操作ボタンが押されると、その操作ボタンに対応した操作指示を受け付ける。また、印画物作製装置２はライブビュー機能を有し、人物画像３０とユーザ画像３２とを合成した画像をタッチパネル２２の画面で確認できるようになっている。

タッチパネル２２上の撮影指示ボタンが押されると、ボタンタッチ後、所定のタイミングでプリント用画像生成のための撮影処理が行われ、合成画像が静止画表示される。ユーザＰは、表示された合成画像を確認し、承認ボタンを押すと、演算制御装置２０は、この合成画像（プリント用画像）のデータをプリンタ２３へ転送する。

プリンタ２３は、演算制御装置２０から受け取った合成画像を印画紙にプリントしてプリント物３を出力する。プリンタ２３のプリント方式は特に限定されず、インクジェット方式、昇華型熱転写方式、溶融型熱転写方式等を用いることができる。

図６はサーバ装置１の構成図である。サーバ装置１は、画像データ送信部１１、保存場所情報送信部１２、動画データ送信部１３、動画配信管理部１４、及び記憶部１５を備え、例えばコンピュータにより構成される。

記憶部１５は、画像データ、動画データ、及び管理情報を保存する。画像データ及び動画データは、ライセンサから提供されたものである。管理情報は、画像データ、動画データ、及び保存場所情報の対応関係や、データが登録された日付等の情報を含む。

記憶部１５は、フラッシュメモリタイプ、ハードディスクタイプ、マルチメディアカードマイクロタイプ、カードタイプのメモリ（例えば、ＳＤ又はＸＤメモリなど）、ＲＡＭ、ＳＲＡＭ、ＲＯＭ、ＥＥＰＲＯＭ、ＰＲＯＭ、磁気メモリの少なくとも１つのタイプの記憶媒体を含む。

画像データ送信部１１は、印画物作製装置２及び携帯端末４へ画像データを送信する。例えば、画像データ送信部１１は、ライセンサから提供された画像データ及び動画データがサーバ装置１に登録されると、印画物作製装置２へ画像データを送信する。また、画像データ送信部１１は、携帯端末４が保存場所情報に基づいてサーバ装置１にアクセスした場合、この保存場所情報に対応する画像データを携帯端末４へ送信する。

保存場所情報送信部１２は、サーバ装置１における動画データの保存場所を示す保存場所情報を印画物作製装置２へ送信する。保存場所情報は、携帯端末４が動画データ再生に際しサーバ装置１にアクセスするために使用されるものである。

動画データ送信部１３は、携帯端末４からの要求に応じて、携帯端末４へ動画データを送信する。携帯端末４へ送信する動画データは、携帯端末４へ送信した画像データに対応したものである。

動画配信管理部１４は、管理情報を参照し、携帯端末４がアクセスしてきた際の保存場所情報から、対応する画像データ及び動画データを特定する。

図７は、携帯端末４のブロック構成図である。携帯端末４は、ＣＰＵ４０、メモリ４１、カメラ４２、通信部４３、及びディスプレイ（タッチパネル）４４を備える。

メモリ４１は、動画再生アプリ（アプリケーションプログラム）を記憶する。メモリ４１は、フラッシュメモリタイプ、ハードディスクタイプ、マルチメディアカードマイクロタイプ、カードタイプのメモリ（例えば、ＳＤ又はＸＤメモリなど）、ＲＡＭ、ＳＲＡＭ、ＲＯＭ、ＥＥＰＲＯＭ、ＰＲＯＭ、磁気メモリの少なくとも１つのタイプの記憶媒体を含む。

ＣＰＵ４０が動画再生アプリを実行することで、図８に示すように、コード読取部４０１、画像取得部４０２、特徴点比較部４０３、及び動画再生部４０４が実現され、動画の再生が行えるようになる。

コード読取部４０１は、カメラ４２を用いてプリント物３にプリントされた二次元コード３３から保存場所情報を読み取る。画像取得部４０２は、読み取った保存場所情報を用いて、通信部４３を介してサーバ装置１にアクセスし、人物画像３０に対応する画像データを取得する。また、画像取得部４０２はカメラ４２を用いてプリント物３上の人物画像３０を取得する。

特徴点比較部４０３は、サーバ装置１から取得した画像と、カメラ４２で撮影したプリント物３の人物画像３０との特徴点を比較する。特徴点が合致した場合、動画再生部４０４は、サーバ装置１から動画データを受信する。特徴点が不一致の場合、ディスプレイ４４に再生不可であることが表示される。

動画再生部４０４は、公知のＡＲ技術を用いて、受信した動画データを、カメラ４２で撮影している人物画像３０に重畳させて再生する。例えば、検出した人物画像３０の特徴点を追跡してカメラ４２の位置姿勢を推定し、カメラ画像と動画の位置合わせを行う。

図９は、本実施形態によるプリント物の販売及び動画再生の処理の流れを示す図である。

ライセンサから提供された画像データ及び動画データが記憶部１５に登録される（ステップＳ１０１）。データの登録に伴い、サーバ装置１は保存場所情報を生成し、画像データ及び動画データとの対応関係を記憶部１５内の管理情報に登録する。

管理情報の登録後、サーバ装置１は印画物作製装置２へ画像データ及び保存場所情報を送信する（ステップＳ１０２）。サーバ装置１から印画物作製装置２への画像データの送信タイミングは任意である。

送信された画像データ及び保存場所情報はディスク装置２０３に記憶される。これにより、印画物作製装置２で合成画像の販売が開始される。サンプル画像表示部２１１は、画像データを用いて、タッチパネル２２にプリント物３のサンプル画像を表示する。

ユーザが、印画物作製装置２を操作して画像を購入し、料金を支払うと（ステップＳ１０３）、印画物作製装置２がユーザを撮影する（ステップＳ１０４）。印画物作製装置２のライブビュー機能により、画像データの人物画像とユーザ画像とを合成した画像がタッチパネル２２に表示される。ユーザは、タッチパネル２２の画面で写り具合を確認し、体の位置や角度を調整して、撮影指示を行う。

ユーザの撮影後、切抜部２１５が撮影画像からユーザ画像を切り抜く。また、コード化処理部２１３が、保存場所情報を示す二次元コード画像を生成する。そして、画像合成部２１６が、ステップＳ１０３で購入された画像データのユーザ画像挿入領域に切り抜いたユーザ画像を挿入し、さらに、二次元コード画像を合成して、合成画像を作成する（ステップＳ１０５）。

プリンタ２３が、この合成画像を印画紙にプリントして出力する（ステップＳ１０６）。これにより、ユーザは、人物画像３０、ユーザ画像３２、及び二次元コード３３がプリントされたプリント物３（図２（ｂ）参照）を入手することができる（ステップＳ１０７）。

ユーザが、携帯端末４の動画再生アプリを実行すると、カメラ４２が起動し、ディスプレイ４４上に二次元コードの読み取り指示が表示される（ステップＳ１０８）。カメラ４２でプリント物３の二次元コード３３を撮影することで、携帯端末４は保存場所情報を取得する（ステップＳ１０９）。

携帯端末４の画像取得部４０２は、保存場所情報に基づき、通信部４３を介してサーバ装置１にアクセスし、画像データを要求する（ステップＳ１１０）。サーバ装置１は、管理情報を参照し、携帯端末４からアクセスされた際の保存場所情報に対応する画像データを携帯端末４へ送信する（ステップＳ１１１）。

携帯端末４がサーバ装置１から画像データを受信すると、ディスプレイ４４上に人物画像３０の読み取り指示が表示される。カメラ４２でプリント物３の人物画像３０を撮影すると、特徴点比較部４０３が、サーバ装置１から受信した画像と、カメラ４２で撮影した人物画像３０との特徴点を比較する（ステップＳ１１２）。特徴点が合致すると、携帯端末４はサーバ装置１に対し動画データを要求する（ステップＳ１１３）。

サーバ装置１は、ステップＳ１１１で携帯端末４へ送信した画像データに対応する動画データを携帯端末４へ送信する（ステップＳ１１４）。携帯端末４が動画データを受信すると、動画再生部４０４が、公知のＡＲ技術を用いて、カメラ４２で撮影している人物画像３０に重畳させて動画データを再生する（ステップＳ１１５）。これにより、ディスプレイ４４では、プリント物３内の人物画像３０が動き出したように動画が再生される。

このように、本実施形態によれば、印画物作製装置２がユーザを撮影し、ライセンサが提供したフレーム画像に、撮影したユーザ画像を合成したプリント物３を作製する。また、プリント物３にプリントされた二次元コードを携帯端末４で読み取り、サーバ装置１にアクセスして、ライセンサから提供された動画データを受信・再生し、フレーム画像内の人物画像に対応する動画を楽しむことができる。

上記実施形態において、サーバ装置１はプリント物３の販売枚数に上限を設定し、この上限値と同数の互いに異なる保存場所情報を生成してもよい。複数の保存場所情報は異なるＵＲＬであるが、サーバ装置１の内部での変換処理により、同一の画像データ及び動画データに紐付けられる。

印画物作製装置２は、ユーザから画像が購入されると、サーバ装置１に対して保存場所情報を要求する。保存場所情報送信部１２は、印画物作製装置２からの要求に応じて、複数の保存場所情報のうち、未送信の保存場所情報のいずれかを印画物作製装置２へ送信する。これにより、印画物作製装置２で作製されるプリント物３は、人物画像３０が同じであっても、二次元コード３３が異なったものとなる。

プリント物３の販売枚数が販売可能数に達すると、未送信の保存場所情報がなくなるため、サーバ装置１は売り切れとなったことを印画物作製装置２に通知する。

さらに、サーバ装置１内の管理情報に、１枚のプリント物３で動画を再生できる携帯端末４の台数を示す再生可能デバイス数を設定してもよい。サーバ装置１は、アクセスしてきた携帯端末４を識別する情報、例えば端末の個体識別情報、又は携帯端末４にインストールされている動画再生アプリのアプリＩＤを取得する。動画配信管理部１４は、携帯端末４がサーバ装置１にアクセスしてきた際の保存場所情報と、携帯端末４の識別情報とを対応付けて記憶しておき、同一の保存場所情報を利用してアクセスした携帯端末４の台数をカウントする。カウント値が再生可能デバイス数に達した後、同じ保存場所情報を利用してさらに他の携帯端末４からアクセスがあった場合、動画配信管理部１４は動画再生を拒否する。

このように、販売可能数や再生可能デバイス数を設定することで、プリント物３の発行枚数や、動画再生端末数を制限することができる。例えば、発行枚数を制限することで、プリント物３の価値を上げることができる。また、動画再生端末数を制限することで、プリント物３の複製・頒布を抑制できる。

サーバ装置１に複数の動画データを登録し、ユーザ（携帯端末４）の位置や、動画再生時刻により、異なる動画が再生されるようにしてもよい。この場合、管理情報には、位置や時刻等の条件毎に再生する動画が定義される。ユーザの位置は、携帯端末４のＧＰＳ機能により取得される。例えば、イベント会場において動画再生を行うことで、イベントに関連した特別な動画を視聴可能にできる。また、朝、昼、夜で再生される動画を変えることができる。

印画物作製装置２で撮影したユーザ画像をサーバ装置１へ送信し、ユーザ画像が動画データに組み込まれるようにしてもよい。これにより、ユーザは、携帯端末４において、自身の画像を含む動画データを楽しむことができる。この場合、サーバ装置１は、印画物作製装置２で画像が購入される毎に、異なる保存場所情報を印画物作製装置２へ送信する。また、サーバ装置１は、動画データにユーザ画像を合成する動画合成処理部を有し、この動画データを、印画物作製装置２へ送信した保存場所情報と対応付けて保存する。サーバ装置１は、携帯端末４に対し、ユーザ画像が合成された動画データを送信する。

［第２の実施形態］
上記第１の実施形態では、ライセンサから提供された動画データを携帯端末４で再生する例について説明したが、動画データは印画物作製装置２でユーザを撮影した動画でもよい。

サーバ装置１は、印画物作製装置２で画像が購入される毎に、異なる保存場所情報を印画物作製装置２へ送信する。印画物作製装置２は、プリント物３にプリントする画像（静止画）の撮影後、動画の撮影を行う。動画の撮影後、印画物作製装置２の動画データ送信部が動画データをサーバ装置１へ送信する。

サーバ装置１は、印画物作製装置２へ送信した保存場所情報、印画物作製装置２から受信した動画データ、及び画像データを紐付けて保存する。サーバ装置１は、アクセスしてきた携帯端末４に対し、アクセス時の保存場所情報に対応する動画データを送信する。これにより、携帯端末４において、印画物作製装置２で撮影した動画データをプリント物３上に重畳させて再生することができる。

図１０は、本実施形態によるプリント物の販売及び動画再生の処理の流れを示す図である。

ライセンサから提供された画像データが記憶部１５に登録される（ステップＳ２０１）。その後、サーバ装置１は印画物作製装置２へ画像データを送信する（ステップＳ２０２）。サーバ装置１から印画物作製装置２への画像データの送信タイミングは任意である。

送信された画像データはディスク装置２０３に記憶される。これにより、印画物作製装置２で合成画像の販売が開始される。サンプル画像表示部２１１は、画像データを用いて、タッチパネル２２にプリント物３のサンプル画像を表示する。

ユーザが、印画物作製装置２を操作して画像を購入し、料金を支払うと（ステップＳ２０３）、印画物作製装置２はサーバ装置１に対して保存場所情報を要求する（ステップＳ２０４）。サーバ装置１は、印画物作製装置２からの要求に応じて、印画物作製装置２へ保存場所情報を送信する（ステップＳ２０５）。この保存場所情報は、後述するステップＳ２０８でサーバ装置１が印画物作製装置２から受信した動画データが保存される場所を示すものである。サーバ装置１は、印画物作製装置２からの要求の度に異なる保存場所情報を印画物作製装置２へ送信する。

印画物作製装置２がユーザの静止画を撮影する（ステップＳ２０６）。印画物作製装置２のライブビュー機能により、画像データのユーザ画像挿入領域にユーザ画像が挿入された画面がタッチパネル２２に表示される。ユーザは、タッチパネル２２の画面で写り具合を確認し、体の位置や角度を調整して、撮影指示を行う。このステップでは、プリント物３にプリントされるユーザ画像（静止画）が撮影される。

静止画の撮影後、撮影装置２１はユーザの動画を撮影して、動画データを作成する（ステップＳ２０７）。印画物作製装置２は、作成した動画データをサーバ装置１へ送信する（ステップＳ２０８）。サーバ装置１は、印画物作製装置２から受信した動画データを、ステップＳ２０１で送信した画像データ、及びステップＳ２０５で送信した保存場所情報と紐付けて、記憶部１５に保存する（ステップＳ２０９）。

印画物作製装置２の切抜部２１５は、ステップＳ２０６で撮影された撮影画像からユーザ画像を切り抜く。また、コード化処理部２１３が、ステップＳ２０５で受信した保存場所情報を示す二次元コード画像を生成する。そして、画像合成部２１６が、ステップＳ２０３で購入された画像データのユーザ画像挿入領域にユーザ画像を挿入し、さらに、二次元コード画像を合成して、合成画像を作成する（ステップＳ２１０）。

プリンタ２３が、この合成画像を印画紙にプリントして出力する（ステップＳ２１１）。これにより、ユーザは、人物画像３０、ユーザ画像３２、及び二次元コード３３がプリントされたプリント物３を入手することができる（ステップＳ２１２）。

ステップＳ２１０の合成画像作成処理、及びステップＳ２１１のプリント処理は、ステップＳ２０７の動画撮影処理と並行して行ってもよいし、動画撮影処理より前に行ってもよい。

その後の処理（ステップＳ２１３〜Ｓ２２０）は、図９のステップＳ１０８〜Ｓ１１５と同様であり、説明を省略する。サーバ装置１から携帯端末４へ送信され、再生される動画データは、ステップＳ２０８で印画物作製装置２からサーバ装置１へ送信された動画データである。携帯端末４のディスプレイ４４では、カメラ４２で撮影しているプリント物３にユーザ自身の動画が重畳して再生される。

このように、本実施形態によれば、印画物作製装置２がユーザの静止画及び動画を撮影し、ライセンサが提供したフレーム画像に、撮影したユーザ静止画を合成したプリント物３を作製する。また、プリント物３にプリントされた二次元コードを携帯端末４で読み取り、サーバ装置１にアクセスして、印画物作製装置２で撮影したユーザ自身の動画を楽しむことができる。

［第３の実施形態］
上記第２の実施形態では印画物作製装置２で動画データを撮影・作成していたが、ユーザの所有する携帯端末４に保存されている動画データをサーバ装置１に登録してもよい。

サーバ装置１は、印画物作製装置２で画像が購入される毎に、異なる保存場所情報を印画物作製装置２へ送信する。印画物作製装置２は、プリント物３にプリントするユーザ画像（静止画）を撮影し、画像データの人物画像、ユーザ画像、及び保存場所情報を示す二次元コードを合成した合成画像をプリント出力する。

携帯端末４が、プリント物３の二次元コードを読み取ってサーバ装置１にアクセスすると、サーバ装置１は携帯端末４に対して動画データを要求する。ユーザは、携帯端末４のメモリ４１に保存されている動画データを選択し、サーバ装置１に送信（アップロード）する。サーバ装置１は、携帯端末４から受信した動画データを、携帯端末４がアクセスしてきた時の保存場所情報及びこれに対応する画像データと紐付けて保存する。

動画データを登録する携帯端末４と、動画データを再生する携帯端末４とが異なっていてもよい。例えば、ユーザＡが、自身が写ったプリント物３を作製し、動画データを登録した後、プリント物３を動画付きの写真としてユーザＢに譲渡する。ユーザＢは、自身の携帯端末を用いて、プリント物３の二次元コード３３からサーバ装置１にアクセスして、ユーザＡが登録した動画を楽しむことができる。

上記第２の実施形態と比較して、印画物作製装置２で撮影した動画データでなく、携帯端末４内の動画データをサーバ装置１に登録できるため、より多様な動画データを楽しむことができる。

図１１は、本実施形態によるプリント物の販売及び動画再生の処理の流れを示す図である。図１１では、ユーザＡが携帯端末４Ａを用いて動画データを登録した後、プリント物をユーザＢに譲渡し、ユーザＢが携帯端末４Ｂを用いて動画データを再生する例について説明する。

ライセンサから提供された画像データが記憶部１５に登録される（ステップＳ３０１）。その後、サーバ装置１は印画物作製装置２へ画像データを送信する（ステップＳ３０２）。サーバ装置１から印画物作製装置２への画像データの送信タイミングは任意である。

送信された画像データはディスク装置２０３に記憶される。これにより、印画物作製装置２で合成画像の販売が開始される。サンプル画像表示部２１１は、画像データを用いて、タッチパネル２２にプリント物３のサンプル画像を表示する。

ユーザＡが、印画物作製装置２を操作して画像を購入し、料金を支払うと（ステップＳ３０３）、印画物作製装置２はサーバ装置１に対して保存場所情報を要求する（ステップＳ３０４）。サーバ装置１は、印画物作製装置２からの要求に応じて、印画物作製装置２へ保存場所情報を送信する（ステップＳ３０５）。この保存場所情報は、後述するステップＳ３１５でサーバ装置１が携帯端末４Ａから受信した動画データを保存する場所を示すものである。サーバ装置１は、印画物作製装置２からの要求の度に異なる保存場所情報を印画物作製装置２へ送信する。

印画物作製装置２がユーザＡの静止画を撮影する（ステップＳ３０６）。印画物作製装置２のライブビュー機能により、画像データのユーザ画像挿入領域にユーザ画像が挿入された画像がタッチパネル２２に表示される。ユーザＡは、タッチパネル２２の画面で写り具合を確認し、体の位置や角度を調整して、撮影指示を行う。このステップでは、プリント物３にプリントされるユーザ画像（静止画）が撮影される。

印画物作製装置２の切抜部２１５は、撮影された撮影画像からユーザ画像を切り抜く。また、コード化処理部２１３が、ステップＳ３０５で受信した保存場所情報を示す二次元コード画像を生成する。そして、画像合成部２１６が、ステップＳ３０３で購入された画像データのユーザ画像挿入領域にユーザ画像を挿入し、さらに、二次元コード画像を合成して、合成画像を作成する（ステップＳ３０７）。

プリンタ２３が、この合成画像を印画紙にプリントして出力する（ステップＳ３０８）。これにより、ユーザＡは、人物画像３０、ユーザ画像３２、及び二次元コード３３がプリントされたプリント物３を入手することができる（ステップＳ３０９）。

ユーザＡが、携帯端末４Ａの動画再生アプリを実行すると、カメラ４２が起動し、ディスプレイ４４上に二次元コードの読み取り指示が表示される（ステップＳ３１０）。カメラ４２でプリント物３の二次元コード３３を撮影することで、携帯端末４Ａは保存場所情報を取得する（ステップＳ３１１）。

携帯端末４Ａが、取得した保存場所情報に基づいてサーバ装置１にアクセスする（ステップＳ３１２）。サーバ装置１は、携帯端末４Ａのアクセス時の保存場所情報に対応する動画データが未登録であるため、携帯端末４Ａに対し動画データを要求する（ステップＳ３１３）。

ユーザＡは、携帯端末４Ａ内の動画データを選択する（ステップＳ３１４）。選択された動画データが、携帯端末４Ａからサーバ装置１へ送信される（ステップＳ３１５）。サーバ装置１は、受信した動画データを、画像データ及び保存場所情報に紐付けて保存する（ステップＳ３１６）。

動画登録後、ユーザＡはプリント物３をユーザＢに譲渡する（ステップＳ３１７）。ユーザＢが、携帯端末４Ｂの動画再生アプリを実行すると、カメラ４２が起動し、ディスプレイ４４上に二次元コードの読み取り指示が表示される（ステップＳ３１８）。カメラ４２でプリント物３の二次元コード３３を撮影することで、携帯端末４Ｂは保存場所情報を取得する（ステップＳ３１９）。

携帯端末４Ｂの画像取得部４０２は、保存場所情報に基づき、通信部４３を介してサーバ装置１にアクセスし、画像データを要求する（ステップＳ３２０）。サーバ装置１は、管理情報を参照し、携帯端末４Ｂからアクセスされた際の保存場所情報に対応する画像データを携帯端末４Ｂへ送信する（ステップＳ３２１）。

携帯端末４Ｂがサーバ装置１から画像データを受信すると、ディスプレイ４４上に人物画像３０の読み取り指示が表示される。カメラ４２でプリント物３の人物画像３０を撮影すると、特徴点比較部４０３が、サーバ装置１から受信した画像と、カメラ４２で撮影した人物画像３０との特徴点を比較する（ステップＳ３２２）。特徴点が合致すると、携帯端末４Ｂはサーバ装置１に対し動画データを要求する（ステップＳ３２３）。

サーバ装置１は、ステップＳ３２１で携帯端末４Ｂへ送信した画像データに対応する動画データを携帯端末４Ｂへ送信する（ステップＳ３２４）。この動画データは、ステップＳ３１５で携帯端末４Ａから登録された動画データである。携帯端末４Ｂが動画データを受信すると、動画再生部４０４が、公知のＡＲ技術を用いて、カメラ４２で撮影している人物画像３０に重畳させて動画データを再生する（ステップＳ３２５）。

このように、本実施形態によれば、印画物作製装置２がユーザの静止画を撮影し、ライセンサが提供したフレーム画像に、撮影したユーザ静止画を合成したプリント物３を作製する。また、プリント物３にプリントされた二次元コードを携帯端末４で読み取り、サーバ装置１にアクセスして、携帯端末４に保存されている動画データをサーバ装置１に登録することができる。以後、プリント物３にプリントされた二次元コードを携帯端末４で読み取ることで、この動画を再生することができる。

［第４の実施形態］
上記第２の実施形態では、印画物作製装置２でユーザの静止画及び動画を撮影していたが、動画のみ撮影するようにしてもよい。この場合、プリント物３にユーザ画像はプリントされず、ライセンサから提供された画像データ（コンテンツ画像）及び二次元コードがプリントされる。

図１２は、本実施形態によるプリント物の販売及び動画再生の処理の流れを示す図である。

ライセンサから提供された画像データが記憶部１５に登録される（ステップＳ４０１）。その後、サーバ装置１は印画物作製装置２へ画像データを送信する（ステップＳ４０２）。サーバ装置１から印画物作製装置２への画像データの送信タイミングは任意である。

送信された画像データはディスク装置２０３に記憶される。これにより、印画物作製装置２で合成画像の販売が開始される。サンプル画像表示部２１１は、画像データを用いて、タッチパネル２２にプリント物３のサンプル画像を表示する。

ユーザが、印画物作製装置２を操作して画像を購入し、料金を支払うと（ステップＳ４０３）、印画物作製装置２はサーバ装置１に対して保存場所情報を要求する（ステップＳ４０４）。サーバ装置１は、印画物作製装置２からの要求に応じて、印画物作製装置２へ保存場所情報を送信する（ステップＳ４０５）。この保存場所情報は、後述するステップＳ４０７でサーバ装置１が印画物作製装置２から受信した動画データを保存する場所を示すものである。サーバ装置１は、印画物作製装置２からの要求の度に異なる保存場所情報を印画物作製装置２へ送信する。

印画物作製装置２の撮影装置２１がユーザの動画を撮影して動画データを作成する（ステップＳ４０６）。印画物作製装置２は、動画データをサーバ装置１へ送信する（ステップＳ４０７）。サーバ装置１は、印画物作製装置２から受信した動画データを、ステップＳ４０１で送信した画像データ、及びステップＳ４０５で送信した保存場所情報と紐付けて、記憶部１５に保存する（ステップＳ４０８）。

コード化処理部２１３が、ステップＳ４０５で受信した保存場所情報を示す二次元コード画像を生成する。そして、画像合成部２１６が、ステップＳ４０３で購入された画像データに二次元コード画像を合成して、合成画像を作成する（ステップＳ４０９）。

プリンタ２３が、この合成画像を印画紙にプリントして出力する（ステップＳ４１０）。これにより、ユーザは、コンテンツ画像及び二次元コードがプリントされたプリント物３を入手することができる（ステップＳ４１１）。

その後の処理（ステップＳ４１２〜Ｓ４１９）は、図９のステップＳ１０８〜Ｓ１１５と同様であり、説明を省略する。サーバ装置１から携帯端末４へ送信され、再生される動画データは、ステップＳ４０７で印画物作製装置２からサーバ装置１へ送信された動画データである。携帯端末４のディスプレイ４４では、カメラ４２で撮影しているプリント物３にユーザ自身の動画が重畳して再生される。

このように、本実施形態によれば、印画物作製装置２がユーザの動画を撮影し、サーバ装置１に登録する。また、印画物作製装置２は、ライセンサが提供したコンテンツ画像に、二次元コードを合成したプリント物３を作製する。プリント物３にプリントされた二次元コードを携帯端末４で読み取り、サーバ装置１にアクセスして、印画物作製装置２で撮影したユーザ自身の動画を楽しむことができる。例えば、プリント物３は動画付きのグリーティングカードとして他人に譲渡することができる。

上記第１及び第３の実施形態において、画像データを格納した記憶媒体を印画物作製装置２に接続するなどにより、印画物作製装置２のディスク装置２０３に画像データを書き込んでもよい。

この場合、印画物作製装置２が保存場所情報を生成（発行）し、この保存場所情報をコード化して二次元コード画像を生成してもよい。例えば、サーバ装置１内の動画データを保存可能な場所を示す情報を、印画物作製装置２のディスク装置２０３に予め書き込んでおく。印画物作製装置２は、画像が購入される毎に異なる（又は同一の）保存場所情報を発行する。このように、印画物作製装置２が保存場所情報を生成することで、印画物作製装置２から、サーバ装置１との通信機能を省略できる。

上記第１の実施形態において、印画物作製装置２が、ユーザの撮影を行わずに、画像データ（コンテンツ画像）及び二次元コードのみをプリントしたプリント物を出力する機能を備えていてもよい。これにより、ユーザは、動画付きのブロマイド写真を購入することができる。

印画物作製装置２は、プリント物３の作製後、クーポン画像等を印画紙にプリントし、クーポン券等を出力してもよい。

上述した実施形態で説明した動画データ再生システムの少なくとも一部は、ハードウェアで構成してもよいし、ソフトウェアで構成してもよい。ソフトウェアで構成する場合には、動画データ再生システムの少なくとも一部の機能を実現するプログラムをフレキシブルディスクやＣＤ−ＲＯＭ等の記録媒体に収納し、コンピュータに読み込ませて実行させてもよい。記録媒体は、磁気ディスクや光ディスク等の着脱可能なものに限定されず、ハードディスク装置やメモリなどの固定型の記録媒体でもよい。

また、動画データ再生システムの少なくとも一部の機能を実現するプログラムを、インターネット等の通信回線（無線通信も含む）を介して頒布してもよい。さらに、同プログラムを暗号化したり、変調をかけたり、圧縮した状態で、インターネット等の有線回線や無線回線を介して、あるいは記録媒体に収納して頒布してもよい。

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

１ サーバ装置
２ 印画物作製装置
３ プリント物
４ 携帯端末

Claims (5)

1. 携帯端末、画像データを記憶する印画物作製装置、及び前記画像データ及び動画データを記憶するサーバ装置を用いた動画データ再生方法であって、
   前記印画物作製装置が、前記サーバ装置における前記動画データの保存場所情報をコード化してコード画像を生成し、被撮影者を撮影した撮影画像と、前記画像データと、前記コード画像とを合成した合成画像を印画紙にプリントしてプリント物を出力し、
   前記携帯端末が、カメラを用いて、前記プリント物にプリントされたコード画像から前記保存場所情報を読み取り、前記保存場所情報に基づいて前記サーバ装置にアクセスして前記画像データを取得し、前記サーバ装置から取得した画像と、前記カメラを用いて取得した前記プリント物上の画像との特徴点を比較し、特徴点が一致した場合に、前記サーバ装置から前記動画データを受信し、受信した動画データを再生することを特徴とする動画データ再生方法。
2. 前記サーバ装置は、前記印画物作製装置から前記撮影画像を受信し、前記動画データに前記撮影画像を合成することを特徴とする請求項１に記載の動画データ再生方法。
3. 前記印画物作製装置が、前記被撮影者を撮影して前記動画データを生成し、この動画データを前記サーバ装置へ送信することを特徴とする請求項１に記載の動画データ再生方法。
4. 携帯端末、画像データを記憶するサーバ装置、及び前記画像データを記憶する印画物作製装置を用いた動画データ再生方法であって、
   前記サーバ装置が、動画データを保存可能な場所を示す保存場所情報を前記印画物作製装置へ送信し、
   前記印画物作製装置が、前記保存場所情報をコード化してコード画像を生成し、被撮影者を撮影した撮影画像と、前記画像データと、前記コード画像とを合成した合成画像を印画紙にプリントしてプリント物を出力し、
   前記携帯端末が、カメラを用いて、前記プリント物にプリントされたコード画像から前記保存場所情報を読み取り、前記保存場所情報に基づいて前記サーバ装置にアクセスして自端末に記憶されている動画データを登録し、動画データの登録後に前記保存場所情報に基づいて前記サーバ装置にアクセスした場合は、前記サーバ装置から前記画像データを取得し、前記サーバ装置から取得した画像と、前記カメラを用いて取得した前記プリント物上の画像との特徴点を比較し、特徴点が一致した場合に、前記サーバ装置から前記動画データを受信し、受信した動画データを再生することを特徴とする動画データ再生方法。
5. 携帯端末、画像データを記憶するサーバ装置、及び前記画像データを記憶する印画物作製装置を用いた動画データ再生方法であって、
   前記サーバ装置が、動画データを保存可能な場所を示す保存場所情報を前記印画物作製装置へ送信し、
   前記印画物作製装置が、前記保存場所情報をコード化してコード画像を生成し、前記画像データと、前記コード画像とを合成した合成画像を印画紙にプリントしてプリント物を出力し、被撮影者を撮影して生成した動画データを前記サーバ装置へ送信し、
   前記サーバ装置が、前記印画物作製装置から受信した動画データを前記保存場所情報と対応付けて保存し、
   前記携帯端末が、カメラを用いて、前記プリント物にプリントされたコード画像から前記保存場所情報を読み取り、前記保存場所情報に基づいて前記サーバ装置にアクセスして前記画像データを取得し、前記サーバ装置から取得した画像と、前記カメラを用いて取得した前記プリント物上の画像との特徴点を比較し、特徴点が一致した場合に、前記サーバ装置から前記動画データを受信し、受信した動画データを再生することを特徴とする動画データ再生方法。

Images