JP5823013B1 - 動画再生表示システム - Google Patents

Abstract

【課題】写真が印刷される従来の印刷物に、今まで以上の驚きや感動を与える付加価値を加えることができる動画再生表示システムを提供する。【解決手段】 動画再生表示システム１は、動画対応写真画像形成システム２と携帯端末装置３とにより構成される。システム２は、写真データ１１と動画データ１２を外部から通信取得し、それらに対応関係を設定する形でデータベース２５に記憶するとともに、その動画データ１２の再生キーデータ１８を、対応する写真データ１１の写真画像である動画対応写真画像１０２から生成しておく。携帯端末装置３では、カメラ３５の撮影画像３００を画面表示部３４に即時表示し、そこに動画対応写真画像１０２が映し出されると、その画像１０２から再生キーデータ１８が認識され、その画像１０２に対応する動画データ１２の動画１０３が、対応する加飾表示部１０４を重畳させた形で表示される。【選択図】図２

Description

本発明は、携帯端末を用いて、印刷された写真から動画を再生させる動画再生表示システムに関する。

各ページに写真が印刷されたフォトアルバム等のフォトブックが存在する（特許文献１）。こうしたフォトブックでは、過去に撮影された静止画である写真を閲覧し、楽しむことが可能である。ところが、近年では、こうしたフォトブックに更なる付加価値を加えて提供することで、フォトブックを閲覧するユーザーに今まで以上の驚きや感動を与えたいとする、新たなフォトブックの開発の動きがある。

特開平９−４３８２７号公報

本発明の課題は、写真が印刷されるフォトブックやフォトカード等を含む印刷物に、今まで以上の驚きや感動を与える付加価値を加えることができる動画再生表示システムを提供することにある。

課題を解決するための手段及び発明の効果

上記課題を解決するために、本発明の動画再生表示システムの第一は、
写真データと動画データとを外部から通信取得する外部データ取得手段と、取得した前記写真データと前記動画データとを所定の基本データ記憶部に記憶する基本データ記憶手段と、取得した前記写真データと前記動画データとに対応関係を設定する対応関係設定手段と、前記対応関係が設定された前記写真データから、その写真データの写真画像である動画対応写真画像から認識可能となる再生キーデータを生成する再生キー生成手段と、画像を加飾する加飾表示部を表示させる加飾データを記憶する加飾データ記憶部と、を備える動画対応写真画像形成システムと、
画面表示部と、撮影手段と、撮影された画像を前記画面表示部内に即時表示する即時表示手段と、前記画面表示部内に即時表示される画像内に前記動画対応写真画像が映し出された場合に、該動画対応写真画像から前記再生キーデータを認識する再生キー認識手段と、当該動画対応写真画像に対応する動画データを通信取得する対応動画データ取得手段と、前記再生キーデータを認識した場合に、取得した前記動画データを再生する対応動画データ再生手段と、前記動画データが再生される際に、その動画データの動画を表示させる前記画面表示部内に動画表示領域を設定する動画表示領域設定手段と、を備え、さらに、前記加飾データを通信取得する加飾データ取得手段と、前記動画データが再生される際に、取得した前記加飾データに基づいて前記加飾表示部を前記動画表示領域内で表示される前記動画に重畳させる形で表示させる加飾表示手段と、を備える携帯端末装置と、
を有し、前記動画表示領域設定手段は、前記動画表示領域を、前記画面表示部内に表示される前記動画対応写真画像の当該画面表示部内における移動及び傾きに追従するように、当該画面表示部内に動的に設定することを特徴とする。
本発明の動画再生表示システムの第二は、
写真データと動画データとを外部から通信取得する外部データ取得手段と、取得した前記写真データと前記動画データとを所定の基本データ記憶部に記憶する基本データ記憶手段と、取得した前記写真データと前記動画データとに対応関係を設定する対応関係設定手段と、前記対応関係が設定された前記写真データから、その写真データの写真画像である動画対応写真画像から認識可能となる再生キーデータを生成する再生キー生成手段と、を備える動画対応写真画像形成システムと、
画面表示部と、撮影手段と、撮影された画像を前記画面表示部内に即時表示する即時表示手段と、前記画面表示部内に即時表示される画像内に前記動画対応写真画像が映し出された場合に、該動画対応写真画像から前記再生キーデータを認識する再生キー認識手段と、当該動画対応写真画像に対応する動画データを通信取得する対応動画データ取得手段と、前記再生キーデータを認識した場合に、取得した前記動画データを再生する対応動画データ再生手段と、前記動画データが再生される際に、その動画データの動画を表示させる前記画面表示部内に動画表示領域を設定する動画表示領域設定手段と、を備える携帯端末装置と、
を有し、前記動画表示領域設定手段は、前記動画表示領域を、前記画面表示部内に表示される前記動画対応写真画像の当該画面表示部内における移動及び傾きに追従するように、当該画面表示部内に動的に設定することを特徴とする。

上記本発明の構成によれば、動画対応写真画像形成システムにより生成される動画対応写真データに基づいて写真画像（写真）が印刷された印刷物を、携帯端末装置で画面に映し出すことによって、それを映し出した画面に動画が表示されるとともに、その動画に重畳して加飾表示がなされる。つまり、フォトブックのような写真が印刷されただけの紙面媒体であっても、写真だけでなく、写真に対応する動画と加飾表示を提供することができる。写真と動画と加飾表示とに関連性があれば、静止した写真だけでは与えられない驚きや感動を、関連する動画と、関連する加飾表示とを通して与えることが可能になる。

本発明の一実施例である動画再生表示システムの構成を簡略的に示したブロック図。 本発明の一実施例である動画再生表示システムにおいて、携帯端末装置によって写真から動画を再生させるための動作を説明する図。 図２の状態から、携帯端末装置に動画が表示されたときの第一の画面表示例を示す図。 図３の画面状態から変化した状態をなす第二の画面表示例を示す図。 注文アプリにより表示される第一の画面表示例を示す図。 注文アプリにより表示される第二の画面表示例を示す図。 注文アプリにより表示される第三の画面表示例を示す図。 注文アプリにより表示される第四の画面表示例を示す図。 注文アプリの処理及びデータベース登録処理の流れを示すフローチャート。 表示アプリの処理の流れを示すフローチャート。 加飾表示部が選択される第一の表示条件を示した図。 加飾表示部が選択される第二の表示条件を示した図。 加飾表示部が選択される第三の表示条件を示した図。 加飾表示部が選択される第四の表示条件を示した図。 再生キーデータを説明する図。

以下、本発明の実施例について図面を用いて説明する。

図１に示すように、本実施例の動画再生表示システム１は、動画対応写真画像形成システム２と、携帯端末装置３と、を備える。

動画対応写真画像形成システム２は、ＣＰＵ等のような制御部２１と、ＲＡＭやＲＯＭ等の記憶部２２と、を有し、さらにはキーボードやマウス等の操作入力部２３と、液晶ディスプレイ等の画面表示部２４と、を有して構成される周知のサーバー２である。本実施例のサーバー２はクラウドサーバーである。また、動画対応写真画像形成システム２は、データベース（基本データ記憶部）２５と、印刷装置（印刷部）２６と、通信部２７と、を有し、制御部２１はこれらと接続する。制御部２１は、通信部２７を介してインターネット等の周知の通信手段７と接続して、当該通信手段７と接続する他の端末装置４や携帯端末装置３と接続可能である。

印刷装置２６は、紙面等の所定のシート材に画像を印刷する印刷処理を実行可能な周知のプリンターである。さらに本実施例の印刷装置２６は、印刷された複数のシート材をステープルや加圧等の手法により綴じて冊子化する綴じ処理を実行可能なプリンターである。

動画対応写真画像形成システム２の制御部２１は、記憶部２２が記憶する印刷物作成プログラム（印刷物作成処理：図５参照）２Ｂを実行することにより、図３Ａに示すような形で動画１０３を再生させることが可能な写真画像（以下、動画対応写真画像）１０２が印刷されたフォトブックやフォトアルバムといった印刷物１００を作成することができる。

なお、動画対応写真画像１０２とは、所定の表示アプリケーション（後述の表示アプリ）３Ａを実行した携帯端末装置３において動画１０３を再生させることが可能な写真画像（写真）である。

また、制御部２１は、記憶部２２が記憶するデータ登録プログラム（データ登録処理：図５参照）２Ａを実行することにより、印刷物１００を作成するために必要となるデータを端末装置４から収集することができる。

端末装置４は、動画対応写真画像１０２が印刷された印刷物１００を注文するユーザーが使用する注文端末装置である。本実施例の端末装置４は、ＣＰＵ等のような制御部４１と、ＲＡＭやＲＯＭ等の記憶部４２と、を有し、さらにはキーボードやマウス等の操作入力部４３と、液晶ディスプレイ等の画面表示部４４と、インターネット等の周知の通信手段７と接続する通信部４７と、を有して構成される周知のパーソナルコンピュータである。

端末装置４の制御部４１は、記憶部４２が記憶する注文アプリケーション（以下、注文アプリと略す：図５参照）４Ａを実行することにより、携帯端末装置３において動画１０３を再生させることが可能な写真画像（動画対応写真画像）１０２が印刷されたフォトブックやフォトアルバムといった印刷物１００を作成することができる。

携帯端末装置３は、ＣＰＵ等のような制御部３１と、ＲＡＭやＲＯＭ等の記憶部３２と、を有し、さらにはタッチパネルやプッシュボタン等の操作入力部３３と、液晶ディスプレイ等の画面表示部３４と、外部の所定範囲を撮影するカメラ（撮影手段）３５と、を有して構成される装置である。本実施例の携帯端末装置３は、スマートフォンやタブレット端末である。

携帯端末装置３の制御部３１は、記憶部３２が記憶する表示アプリケーション（以下、表示アプリと略す：図６参照）３Ａを実行することにより、カメラ３５により撮影された画像３００（図２参照）を画面表示部３４内に即時表示させる（即時表示手段：図２参照）。さらに、制御部３１は、画面表示部３４内に即時表示される画像３００に、動画対応写真画像１０２が映し出された場合（図２参照）には、画面表示部３４内に動画表示領域３０３（図３Ａ参照）を設定して、その動画表示領域３０３内で、その動画対応写真画像１０２に対応する動画１０３を再生して表示することができる（図３Ａ及び図３Ｂ参照）。

なお、携帯端末装置３は、注文端末装置４と同様に通信部３７と注文アプリ４Ａを設けて、注文端末装置４として利用することもできる。

ここで、注文アプリ４Ａと、データ登録プログラム２Ａとの双方の処理の流れを、図５を用いて説明する。

注文端末装置４において、ユーザーが注文アプリ４Ａを起動すると、制御部４１は、ユーザー認証処理を開始する（Ｓ１：注文ユーザー認証手段）。具体的には、まずは制御部４１が、画面表示部４４にユーザー認証画面（図示無し）を表示し、操作入力部４３からのユーザー認証情報の入力を受け付ける。そして、制御部４１は、受け付けたユーザー認証情報を動画対応写真画像形成システム２に送信する。動画対応写真画像形成システム（サーバー）２の制御部２１は、これを受信すると、データベース２５に登録されているユーザー登録情報に基づいて認証処理を行い、認証結果を注文端末装置４に返信する。その返信結果が認証失敗の場合（Ｓ２：Ｎｏ）、制御部４１は、再度ユーザー認証画面を表示するか、あるいは処理を終了する。他方、認証成功の場合（Ｓ２：Ｙｅｓ）、制御部４１はそのユーザーをログイン状態とする（Ｓ３）。なお、未登録ユーザーの場合は、新規ユーザー登録を行ってログイン状態となるものとする。

ログイン状態となると、制御部４１は、画面表示部４４に注文情報の入力画面４０１〜４０４（図４Ａ〜図４Ｄ参照）を表示し、これにより印刷物１００の作成に必要となる基本データの入力を受け付ける（Ｓ４）。なお、印刷物１００の作成に必要なデータには、写真画像１０１（図示無し）を表示させる写真データ１１と、動画１０３を表示させる動画データ１２と、写真画像１０１の中から動画１０３を再生させる写真画像１０２を指定する動画指定データ（対応情報）１３と、再生される動画を加飾する加飾表示部（フレーム）１０４を表示させる加飾データ１４０（フレームデータ：図１参照）を指定するための加飾指定データ（フレーム情報）１４と、動画データ１２の保存期間を示す保存期間設定データ（保存期間情報）１５と、が含まれる。

写真データ１１及び動画データ１２は、写真選択画面４０１及び動画選択画面４０３（図４Ａ及び図４Ｃ参照）において決定される。本実施例の写真データ１１及び動画データ１２は、注文端末装置４あるいは注文端末装置４に接続する他装置の記憶部に記憶された複数の画像ファイル及び動画ファイルの中から、操作入力部４３への所定のユーザー操作に基づいて、ユーザーが選択して決定される。

なお、写真データ１１や動画データ１２は、選択・決定される段階で編集可能とし、編集されたデータ１１，１２を選択・決定できるようにしてもよい。

動画指定データ１３は、写真選択画面４０１の次に表示される動画再生写真指定画面４０２において決定される。本実施例の動画指定データ１３は、動画再生写真指定画面４０２において、先の写真選択画面４０１で選択された写真データ１１の中から、操作入力部４３への所定のユーザー操作に基づいて、ユーザーが選択して決定することにより生成される（図４Ｂ参照）。

加飾データ１４０は、動画再生写真指定画面４０２の次に表示される動画選択画面４０３において決定される。本実施例の加飾データ１４０は、動画対応写真画像形成システム２のデータベース２５に記憶される複数の加飾表示部１０４を表示させる加飾データ１４０の中から、動画１０３の再生表示中に重畳表示されるものを、ユーザーが選択することにより決定される（図４Ｃ参照）。

また、動画選択画面４０３では、写真画像１０２から再生される動画データ１２を選択できるだけでなく、選択された動画データ１２を再生して動画１０３を表示できる。さらに、動画選択画面４０３では、表示される動画１０３に、選択された加飾データ１４０によって加飾表示部１０４を重畳して表示できる。これにより、実際に再生表示される加飾表示部１０４付きの動画１０３（フレーム付き動画）を試し見することができ、見た上で動画データ１２や加飾データ１４０を決定できる。

なお、動画選択画面４０３における動画再生領域４０３Ａには、動画１０３が再生されていない時に、動画１０３を再生させる写真画像１０２（動画再生写真指定画面４０２で指定された写真データ１１）をサムネイル画像として表示させてもよい。

また、加飾表示部１０４は、これを決定する段階でユーザーに作成させたものでもよいし、予めユーザーによって作成されたものでもよい。これらの場合、制御部４１は、ユーザーに作成された加飾表示部１０４の加飾データ１４０そのものを加飾指定データ１４として動画対応写真画像形成システム２に送信し、動画対応写真画像形成システム２の制御部２１に、その新たな加飾データ１４０をデータベース２５に登録させる。そして、これ以降は、この加飾データ１４０も動画選択画面４０３においてユーザーが選択できるようになる。

また、加飾表示部１０４は、静止画でもよいが、本実施例では動画とされている。

保存期間設定データ１５は、動画選択画面４０３の次に表示される保存期間設定画面４０４において決定される。本実施例の保存期間設定データ１５は、動画対応写真画像形成システム２のデータベース２５に動画データ１２を記憶して保存しておく保存期間を示すデータであり、操作入力部４３への所定のユーザー操作に基づいて、ユーザーが選択して決定される（図４Ｄ参照）。また、その保存期間として１０年以上を選択可能とされている。本実施例では、１〜２０年の中から選択可能とされている。

次に制御部４１は、画面表示部４４に注文者情報１６の入力画面（図示無し）を表示し、これにより注文者情報１６の入力を受け付ける（Ｓ５）。本実施例における注文者情報１６とは、受取人や配送先を示す配送先情報である。

そして、これらすべての情報入力が確定すると、制御部４１は、これら一連の情報１１〜１６を対応付けた形で、動画対応写真画像形成システム２に送信（アップロード）し（Ｓ６）、処理を終了する。

送信された情報１１〜１６は、動画対応写真画像形成システム２が受信する（Ｓ１１：受信手段）。これをもって印刷物作成の注文を受け付けたことになる。

動画対応写真画像形成システム２の制御部２１は、送信されてくるこれらの情報１１〜１６を受信すると（Ｓ１１）、パスコード１７を新たに生成し（Ｓ１２：識別情報生成手段）、これらを受信したデータ（受領データ）１１〜１６に対応付けた形でデータベース２５に記憶する（Ｓ１４：基本データ記憶手段及び対応関係設定手段）。

パスコード１７は、今回受領したデータ１１〜１６、及びこれらデータ１１〜１６により生成される印刷物１００を識別可能にする識別情報である。このパスコードは、印刷物の写真画像１０２から動画１０３を再生表示される際に認証されるコードであり（後述する図６：Ｓ３２）、これにより、誤った動画１０３が再生表示されることを防ぐことができる。

また、制御部２１は、対応関係が設定された写真データ１１に基づいて、再生キーデータ（図中の再生キー）１８を生成し（Ｓ１３：再生キー生成手段）、生成された再生キーデータ１８を、これらの受領データ１１〜１６及びパスコード１７に対応付けてデータベース２５に記憶する（Ｓ１４）。

再生キーデータ１８は、携帯端末装置３によって対応する動画１０３を再生させるためのキーとなる情報であり、対応関係が設定された写真データ１１により表示される動画対応写真画像１０２から認識可能となる形で生成される情報である。本実施例の再生キーデータ１８は、動画対応写真画像１０２上に描画されている情報であって、具体的にいえば図８に示すように、動画対応写真画像１０２内に指定される複数の指定領域（マーカーポイント）１０８の位置データと、それら指定領域１０８の表示状態を示す表示状態データとを対応付けた形で有する情報（マーカーデータ）である。制御部２１は、受信した写真データ１１のうち、対応情報１３に基づいて動画対応写真画像１０２の写真データ１１を特定した上で、特定された写真データ１１の写真画像１０２上において指定領域１０８を所定数決定し、それぞれの指定領域１０８の表示状態データを、その写真画像１０２上におけるそれぞれの位置データ（座標データ）に対応付け、再生キーデータ１８としてデータベース２５に記憶する（Ｓ１４）。なお、写真画像１０２上での指定領域１０８の決定は、その写真画像１０２の描画内容において、色や形状に特徴ある複数の領域を抽出してそれらの中から所定数を選び出して決定する形で行ってもよいし、予め定められた位置の所定数の領域に決定する形で行ってもよい。

さらに制御部２１は、保存期間設定データ１５に基づいて、受信した動画データ１２に保存期間を設定する（Ｓ１５：保存期間設定手段）。この保存期間が過ぎた場合、制御部２１は、動画データ１２を消去する。なお、この消去時に、動画データ１２だけではなく、対応する他のデータ１１，１３〜１８についても消去される。

その後、制御部２１からの指令により、データーベース２５に記憶されているデータ１１〜１８に基づいて、印刷物１００が印刷装置２６によって印刷される（Ｓ１６：印刷手段）。したがって、この動画１０３を再生させる写真画像１０１は、画像データ１１に基づいて動画対応写真画像１０２として印刷されることになる。

作成された印刷物１００は、パスコード１７と共に、注文者情報１６が示す発送先へと発送され、閲覧ユーザーの手元に届く。本実施例の印刷物１００は、紙面上において少なくとも１枚の動画対応写真画像１０２を含む写真画像１０１が印刷され、冊子化されたフォトアルバムである。冊子化は、印刷装置２６の周知の機能を用いて、印刷処理時（Ｓ１６）になされる。つまり、印刷から冊子化までが印刷装置２６によって自動的に実行される。パスコード１７については、紙面に印刷した形で印刷物１００と共に届けられるてもよいし、注文確定時（Ｓ６）に画面表示部４４上でパスコード１７が表示されるようにしてもよいし、あるいはメール返信によって閲覧ユーザーに送付してもよい。

このように本実施例の動画対応写真画像形成システム２では、ユーザーからの注文を受け付けた際に、印刷物１００の生成までが自動で行われる。なお、印刷（Ｓ１６）については、マニュアルで実行されてもよい。

なお、本発明において、印刷処理及び綴じ処理（Ｓ１６）と、印刷装置２６とについては必須でなくともよく、少なくとも動画対応写真画像１０２のデータを形成する構成を有していればよい。具体的にいえば、動画対応写真画像１０２のデータを外部出力する出力部（図示なし）を有した構成とし、その出力部から出力されたデータに基づいて外部の印刷装置において印刷処理及び綴じ処理を行うようにしてもよい。出力部を、例えばメモリーカードのような記憶媒体（メディア）と接続する出力部とすれば、動画対応写真画像１０２のデータをその出力部から外部出力し（外部出力手段）、その出力データをその記憶媒体に記憶させ、その記憶媒体を介して外部の印刷装置にデータを移して印刷させる（印刷手段）ことができる。

次に、携帯端末装置３によって写真画像１０２から動画１０３を再生させる表示アプリ４Ａの処理の流れを、図６を用いて説明する。

携帯端末装置３のユーザーによって表示アプリ４Ａが起動されると、制御部３１は、画面表示部３４にパスコード１７の入力を受け付けるパスコード入力画面（図示無し）を表示させる（Ｓ２１）。パスコードが入力されると、制御部３１は、これを動画対応写真画像形成システム２に送信する（Ｓ２１）。

他方、動画対応写真画像形成システム２の制御部２１は、これを受信すると（Ｓ３１：対応情報取得手段）、パスコードの認証処理を行う（Ｓ３２：閲覧ユーザー認証手段）。認証が成功した場合（Ｓ３３：Ｙｅｓ）、制御部２１は、そのパスコードに対応する動画データ１２と加飾データ１４０と再生キーデータ１８とを特定し（Ｓ３４：対応動画データ特定手段）、特定したデータ１２，１４０，１８を送信元の携帯端末装置３に配信（送信）する（Ｓ３５：対応動画データ配信手段）。他方、認証が失敗した場合（Ｓ３３：Ｎｏ）、制御部２１は、送信元の携帯端末装置３にエラーを通知し（Ｓ３６）、処理を終える。

携帯端末装置３の制御部３１は、エラー通知を受信しなかった場合には（Ｓ２２：Ｙｅｓ）、動画対応写真画像形成システム（サーバー）２から送信されてくる動画データ１２と加飾データ１４０と再生キーデータ１８とを受信（ダウンロード）する（Ｓ２３：対応動画データ取得手段）。エラー通知を受信した場合には（Ｓ２２：Ｎｏ）、再度パスコード入力画面を表示するか（Ｓ２１に戻る）、あるいは処理を終了する。

携帯端末装置３の制御部３１は、動画データ１２と加飾データ１４０と再生キーデータ１８の受信が開始されると（Ｓ２３）、カメラ３５を起動して、カメラ３５による撮影を開始するとともに（Ｓ２４：撮影手段）、そのカメラ３５により撮影された撮影画像３００を画面表示部３４内に即時表示する（Ｓ２４：即時表示手段）。

そして、画面表示部３４内に即時表示される撮影画像（即時表示画像）３００に、動画対応写真画像１０２が映し出された場合、制御部３１は、該動画対応写真画像１０２の画像認識処理を行い、該動画対応写真画像１０２内から再生キーデータ１８を認識する認識処理を実行する（Ｓ２５）。即ち、制御部３１は、画面表示部３４内に映し出された動画対応写真画像１０２を画像認識するとともに、画像認識した動画対応写真画像１０２内において、Ｓ２３で受信した再生キーデータ１８が示す各指定領域１０８と表示状態が一致する領域を特定するとともに、特定された各領域の分布を特定する。そして、特定された各領域の分布がその再生キーデータ１８が示す各指定領域１０８の分布（図８参照）と一致した場合に、動画対応写真画像１０２内に再生キーデータ１８を認識したと判定し（Ｓ２５：Ｙｅｓ）、一致しなければ認識していないと判定する（Ｓ：２５：Ｎｏ）。

ただし、分布の一致判定は、撮影画像３００内において動画対応写真画像１０２がある程度傾倒ないし回転していても認識できるよう、一定の許容範囲を設定する形でなされる。

再生キーデータ１８が認識された場合（Ｓ２５：Ｙｅｓ）に限り、制御部３１は、ダウンロードされた動画データ１２を再生する（Ｓ２６，Ｓ２７）。なお、動画データ１２の再生に際して、制御部３１は、図３Ａに示すように、画面表示部３４内において、動画１０３を表示する所定の動画表示領域３０３を、即時表示されている撮影画像３００の中の動画対応写真画像１０２に重なる領域に設定する（Ｓ２６：動画表示領域設定手段）。その上で制御部３１は、ダウンロードされた動画データ１２を再生し、その動画１０３を、設定された動画表示領域３０３内で表示する（Ｓ２７：対応動画データ再生手段）。これにより、動画１０３は、動画対応写真画像１０２に重畳して表示される。

さらに動画データ１２の再生に際して制御部３１は、図３Ａに示すように、動画表示領域３０３に表示される動画１０３に重畳する形で、受信した加飾データ１４０に基づいて加飾表示部１０４を表示する。加飾表示部１０４は、動画表示領域３０３内に表示される画像であり、動画１０３に重畳して表示される、いわゆるフレーム画像である。

なお、本実施例における動画表示領域３０３は、図３Ａ及び図３Ｂに示すように、画面表示部３４内に即時表示される動画対応写真画像１０２の、当該画面表示部３４内における位置移動及び傾き（傾倒・回転）に追従するように、当該画面表示部３４内を移動し傾く形で動的に設定される。これにより、動画１０３の表示時の面白さがより一層増す。制御部３１は、画面表示部３４内に即時表示される動画対応写真画像１０２の外形形状を定期的に認識し、その外形形状の位置移動及び傾き（傾倒・回転）を算出することにより、その算出結果に基づいて、動画表示領域３０３の表示位置を決定する。

制御部３１は、この動画１０３の表示を、再生キーデータ１８が認識されなくなるまで継続する。動画１０３は、最終フレームまで表示が終わっても再び最初のフレームから再生が始まり、繰り返し表示される。ところが、動画対応写真画像１０２が映らなくなる等、再生キーデータ１８が認識されなくなると（Ｓ２８：Ｙｅｓ）、制御部３１は、この動画１０３の再生を停止する（Ｓ２９）。そして再び、画面表示部３４内に映し出された動画対応写真画像１０２内から再生キーデータ１８を認識する認識処理を実行する（Ｓ２５）。

なお、表示アプリ４Ａは、ユーザーによって終了されることにより、動画再生中であっても、強制的に処理を終える。

ここで本実施例の動画再生表示システム１を利用して提供可能な印刷物１００について説明する。

印刷物１００は、フォトブックやカレンダー等、様々なものに適用できる。印刷物１００をフォトブックとした場合の一例として、上記における写真データ１１を、少なくとも新生児が写された写真（親等、他の人も写っていてよい）とする商品を例示できる。具体的にいえば、新生児が生まれた直後に写された写真画像１０２を上記における写真データ１１とし、さらに、その新生児が出生直後にその親と共に撮影された動画１０３を上記における動画データ１２とする。このようにして生成されたフォトブック１００では、生まれた直後の新生児の写真だけでなく、その新生児の動く様子や、その時の親の様子までも、閲覧者に見せることができ、より大きな驚きや感動を与えることができる。また、こうしたフォトブック１００は、長年残されるフォトアルバムというべきものであり、動画の保存期間が１０年以上を設定できることで、より長く世に残すことができ、後世のより多くの人にも見てもらう機会を得ることができる。このような商品は、従来にはなく、新たな商品としてより多くの人に驚きと感動を与えることができる。

以上、本発明の一実施例を説明したが、これはあくまでも例示にすぎず、本発明はこれに限定されるものではなく、特許請求の範囲の趣旨を逸脱しない限りにおいて、当業者の知識に基づいて、追加及び省略等の種々の変更が可能である。

以下、本発明の他の実施例及び変形例について説明する。なお、上記実施例と共通の機能部や同様の機能部については詳細な説明を省略する。また、上記実施例と下記変形例は、技術的な矛盾を生じない範囲において適宜組み合わせて実施できる。

上記実施例において、加飾データ１４０は、注文時にユーザーに指定される形で固定的に設定されるが、加飾データ１４０がユーザーにより決定されず、自動決定される構成でもよい。例えば、データベース２５に、図７Ａ〜図７Ｄに示すように、複数の加飾データ１４０を、それぞれに表示条件を対応付けた形で記憶しておく。そして、動画対応写真画像形成システム２の制御部２１は、携帯端末装置３で動画１０３を再生表示する際に、予め定められた加飾表示部選択情報を取得し（加飾表示部選択情報取得手段）、取得した加飾表示部選択情報が満たす表示条件を、データベース２５に記憶された表示条件の中から特定して（表示条件特定手段）、その表示条件に対応する加飾データ１４０を特定する（図６のＳ３４：加飾データ特定手段）。加飾表示部選択情報は、動画対応写真画像形成システム２において取得される情報でもよいし、携帯端末装置３から通信取得する情報でもよい。特定された加飾データ１４０は携帯端末装置３に送信され（図６のＳ３４）、これを受信した携帯端末装置３の制御部３１は、受信した加飾データ１４０を受信し（図６のＳ２３：加飾データ取得手段）、動画１０３の再生の際に、受信した加飾データ１４０に基づいて加飾表示部１０４を重畳表示させる。これにより、表示条件に応じた加飾表示部１０４が動画１０３に重畳表示されることになる。

なお、この場合、注文時に必要であった加飾指定データ１４については、不要とするか、あるいは図４Ｃの選択欄４０３Ｂ内にある「自動選択」という形で加飾データ１４０を指定させるデータとすればよい。

上記加飾表示部選択情報は、動画１０３を再生表示する時の状態を示す予め定められた再生時点情報とすることができる。この場合、携帯端末装置３の制御部３１は、予め定められた再生時点情報を取得し、取得した再生時点情報が満たす表示条件を特定するように構成できる。ここでいう再生時点情報とは、動画１０３を再生表示するときの日時や時刻や場所等とすることができる。

例えば、データベース２５に、桜の花びらの加飾表示部１０４を表示させる動画又は静止画データを加飾データ１４０として記憶しておき、その表示条件として、例えば図７Ａのように、動画再生時の日付が３〜４月であるという条件を対応付けておく。この場合、動画対応写真画像形成システム２の制御部２１は、加飾データ１４０を特定する場合に（図６のＳ３４：加飾データ特定手段）、携帯端末装置３の記憶部３５が記憶するカレンダー情報や時計情報を再生時点情報として通信取得するとともに、取得した再生時点情報が示す月が３〜４月中であれば、動画１０３が再生される際に、対応する加飾表示部１０４、例えば桜の花びらが舞うフレーム動画１０４等を重畳して表示する。これにより、季節感を自動演出できる。また、同様にして、図７Ａのように、１月にはお正月のフレーム動画、２月には雪のフレーム動画、７〜８月には花火のフレーム動画、１０〜１１月には近傍紅葉のフレーム動画、１２月にはクリスマスのフレーム動画、等のように表示させることもできる。このように、動画１０３を再生する日時の変化に応じて加飾表示部１０４の表示内容を変化させてもよい。

また、例えば、データベース２５に、海の加飾表示部１０４を表示させる動画又は静止画データを加飾データ１４０として記憶しておき、その表示条件として、例えば図７Ｂのように、動画再生時の地点が海に対し所定距離以内（例えば３ｋｍ以内）となる海近傍エリアにいるという条件を対応付けておく。さらに、携帯端末装置３には、周知のＧＰＳ受信機等を有して構成されて自身の現在位置を検出可能な位置検出部３９を設け、動画対応写真画像形成システム２のデータベース２５には、上記表示条件となるエリアを示すデータを記憶しておく。この場合、動画対応写真画像形成システム２の制御部２１は、加飾データ１４０を特定する場合に（図６のＳ３４：加飾データ特定手段）、携帯端末装置３の位置検出部３９が検出する現在位置情報を再生時点情報として通信取得するとともに、取得した再生時点情報が示す現在位置が上記海近傍エリアであれば、動画１０３が再生される際に、対応する加飾表示部１０４、例えば海が波打つフレーム動画１０４等を重畳して表示する。これにより、地域感を自動演出できる。また、同様にして、図７Ｂ及び図７Ｃのように、東京都内であればスカイツリーのフレーム動画、大阪府内であれば道頓堀のフレーム動画、富士山近傍エリアであれば富士山のフレーム動画等のように表示させることもできる。このように、動画１０３を再生する位置の変化に応じて加飾表示部１０４の表示内容を変化させてもよい。

上記加飾表示部選択情報は、動画１０３の表示内容及び動画１０３を撮影した時の状態のいずれかを含む予め定められた動画関連情報とすることができる。この場合、注文時の加飾指定データ１４として、この動画関連情報を注文端末装置４から送信するようにするとともに、これを受信・記憶した動画対応写真画像形成システム２では、複数の加飾データ１４０を、それぞれに表示条件を対応付けた形でデータベース２５に記憶する。制御部２１は、加飾データ１４０を特定する場合に（図６のＳ３４：加飾データ特定手段）、加飾指定データ１４として受信した動画関連情報に基づいて、対応する加飾データ１４０を特定する。なお、ここでいう動画関連情報とは、動画１０３が撮影された日時と時刻と場所と動画１０３の再生表示時に登場する表示物とのいずれかとすることができる。例えば動画１０３が撮影された日時がクリスマスであれば、クリスマスのフレーム動画等を加飾表示部１０４として表示させることができる。

上記加飾表示部選択情報は、動画対応写真画像１０２の表示内容及び当該写真画像１０２を撮影した時の状態のいずれかを含む予め定められた写真関連情報とすることができる。この場合、注文時の加飾指定データ１４として、この写真関連情報を注文端末装置４から送信するようにするとともに、これを受信・記憶した動画対応写真画像形成システム２では、複数の加飾データ１４０を、それぞれに表示条件を対応付けた形でデータベース２５に記憶しておき、制御部２１は、加飾データ１４０を特定する場合には（図６のＳ３４：加飾データ特定手段）、加飾指定データ１４として受信した写真関連情報に基づいて、対応する加飾データ１４０を特定する。なお、ここでいう写真関連情報とは、写真画像１０２が撮影された日時と時刻と場所と写真画像１０２に写し出されている表示物とのいずれかとすることができる。例えば写真画像１０２が撮影された日時がクリスマスであれば、クリスマスのフレーム動画等を加飾表示部１０４として表示させることができる。

上記加飾表示部選択情報は、予め定められたユーザー情報とすることができる。この場合、ユーザー情報１９（図示無し）を、注文時の加飾指定データ１４として注文端末装置４から送信するか、あるいは新規ユーザー登録時に登録するかのいずれかにより、動画対応写真画像形成システム２のデータベース２５に記憶させる。そして、動画対応写真画像形成システム２の制御部２１は、注文時には、ログインの際（図５のＳ１）に受信する認証データに基づいて、対応するユーザー情報１９を特定し、これを注文時に記憶するデータ１１〜１８に対応付けて記憶する。加飾データ１４０を特定する際（図６のＳ３４：加飾データ特定手段）、制御部２１は、受信したパスコード１７（図６のＳ３１）に基づいて、対応するユーザー情報１９を特定するとともに、そのユーザー情報１９を満たす表示条件を特定し、その表示条件に対応する加飾データ１４０を特定する。なお、ここでいうユーザー情報１９とは、登録ユーザーの識別情報と年齢と現住所と出身地と生年月日とのいずれかとすることができる。

この場合、ユーザー情報１９には、写真画像１０２に写る人の誕生日や結婚記念日のような祝い日等を含むようにして、データベース２５には、それら特別日用のフレーム１０４を表示させる動画又は静止画データを加飾データ１４０として記憶して、それら加飾データ１４０に、例えば図７Ｄのように、動画再生時の日が予め定められた特別日であるという表示条件を対応付けておく。動画対応写真画像形成システム２の制御部２１は、加飾データ１４０を特定する場合に（図６のＳ３４：加飾データ特定手段）、携帯端末装置３の記憶部３２が記憶するカレンダー情報や時計情報を再生時点情報として通信取得するとともに、取得した再生時点情報が示す日時が表示条件として記憶されている特別日であれば、動画１０３が再生される際に、対応する特別日用のフレーム動画１０４（例えば誕生日であれば誕生日を祝うフレーム動画１０４）を重畳して表示する。これにより、自動で特別日に応じたお祝いを演出できる。

なお、予め定められた加飾表示部選択情報を取得する処理（加飾表示部選択情報取得手段）と、取得した加飾表示部選択情報が満たす表示条件を特定する処理（表示条件特定手段）については、携帯端末装置３と動画対応写真画像形成システム２とのいずれかまたは双方が備えていればよい。加飾表示部選択情報を動画対応写真画像形成システム２が取得する構成でもよいし、加飾表示部選択情報が満たす表示条件の特定と、対応する加飾データ１４０の特定とを携帯端末装置３が行う構成でもよい。

上記実施例において、動画保存期間は、１０年以上を含む形でユーザーが任意に設定可能であったが、１０年以上で固定設定されるものとしてもよい。

上記実施例において、動画表示領域３０３は、画面表示部３４に映し出された動画対応写真画像１０２の移動及び傾きに応じて、当該画面表示部３４内を移動し傾く形で動的に設定されるが、当該画面表示部３４内の予め定められた領域に固定設定されるようにしてもよい。

上記実施例において、印刷物１００には、冊子型をなす形で複数のページを有するフォトブックや、１枚の紙面からなるフォトカード等の紙面媒体を想定しているが、印刷物１００の少なくとも１ページに動画対応写真画像１０２が印刷されているものであればよい。また、印刷物１００は、シート状のものであれば、紙面に限るものではない。また、印刷物１００は、印刷可能なものであれば、シート状の媒体に限られるものでもない。

上記実施例において、動画対応写真画像形成システム２は、複数の装置から構成されてもよく、実行する各処理・各処理ステップ（各手段）については、それら複数の装置に分担されていてもよい。

１ 動画再生表示システム
２ 動画対応写真画像形成システム
３ 携帯端末装置
４ 注文端末装置
１１ 写真データ
１２ 動画データ
１３ 動画指定データ（対応情報）
１４ 加飾指定データ（フレーム情報）
１４０ 加飾データ
１５ 保存期間設定データ（保存期間情報）
２５ データベース
３４ 画面表示部
３５ カメラ
１００ 印刷物
１０１ 写真画像
１０２ 動画対応写真画像
１０３ 動画
１０４ 加飾表示部
３００ 撮影画像
３０３ 動画表示領域

Claims (10)

1. 写真データと動画データとを外部から通信取得する外部データ取得手段と、取得した前記写真データと前記動画データとを所定の基本データ記憶部に記憶する基本データ記憶手段と、取得した前記写真データと前記動画データとに対応関係を設定する対応関係設定手段と、前記対応関係が設定された前記写真データから、その写真データの写真画像である動画対応写真画像から認識可能となる再生キーデータを生成する再生キー生成手段と、画像を加飾する加飾表示部を表示させる加飾データを記憶する加飾データ記憶部と、を備える動画対応写真画像形成システムと、
   画面表示部と、撮影手段と、撮影された画像を前記画面表示部内に即時表示する即時表示手段と、前記画面表示部内に即時表示される画像内に前記動画対応写真画像が映し出された場合に、該動画対応写真画像から前記再生キーデータを認識する再生キー認識手段と、当該動画対応写真画像に対応する動画データを通信取得する対応動画データ取得手段と、前記再生キーデータを認識した場合に、取得した前記動画データを再生する対応動画データ再生手段と、前記動画データが再生される際に、その動画データの動画を表示させる前記画面表示部内に動画表示領域を設定する動画表示領域設定手段と、を備え、さらに、前記加飾データを通信取得する加飾データ取得手段と、前記動画データが再生される際に、取得した前記加飾データに基づいて前記加飾表示部を前記動画表示領域内で表示される前記動画に重畳させる形で表示させる加飾表示手段と、を備える携帯端末装置と、
   を有し、前記動画表示領域設定手段は、前記動画表示領域を、前記画面表示部内に表示される前記動画対応写真画像の当該画面表示部内における移動及び傾きに追従するように、当該画面表示部内に動的に設定することを特徴とする動画再生表示システム。
2. 写真データと動画データとを外部から通信取得する外部データ取得手段と、取得した前記写真データと前記動画データとを所定の基本データ記憶部に記憶する基本データ記憶手段と、取得した前記写真データと前記動画データとに対応関係を設定する対応関係設定手段と、前記対応関係が設定された前記写真データから、その写真データの写真画像である動画対応写真画像から認識可能となる再生キーデータを生成する再生キー生成手段と、を備える動画対応写真画像形成システムと、
   画面表示部と、撮影手段と、撮影された画像を前記画面表示部内に即時表示する即時表示手段と、前記画面表示部内に即時表示される画像内に前記動画対応写真画像が映し出された場合に、該動画対応写真画像から前記再生キーデータを認識する再生キー認識手段と、当該動画対応写真画像に対応する動画データを通信取得する対応動画データ取得手段と、前記再生キーデータを認識した場合に、取得した前記動画データを再生する対応動画データ再生手段と、前記動画データが再生される際に、その動画データの動画を表示させる前記画面表示部内に動画表示領域を設定する動画表示領域設定手段と、を備える携帯端末装置と、
   を有し、前記動画表示領域設定手段は、前記動画表示領域を、前記画面表示部内に表示される前記動画対応写真画像の当該画面表示部内における移動及び傾きに追従するように、当該画面表示部内に動的に設定することを特徴とする動画再生表示システム。
3. 前記加飾データ記憶部は、複数の前記加飾データにそれぞれ表示条件を対応付けた形で記憶しており、
   前記携帯端末装置と動画対応写真画像形成システムとの少なくとも一方は、予め定められた加飾表示部選択情報を取得する加飾表示部選択情報取得手段と、取得した加飾表示部選択情報が満たす前記表示条件を特定する表示条件特定手段と、を備えており、
   前記携帯端末装置の前記加飾データ取得手段は、特定された前記表示条件に対応する前記加飾データを通信取得する請求項１に記載の動画再生表示システム。
4. 前記表示条件は、前記動画を再生表示する時の状態に関連する予め定められた再生時点情報と、前記動画の表示内容及び前記動画を撮影した時の状態のいずれかを含む動画関連情報と、前記動画対応写真画像の表示内容及び前記動画対応写真画像を撮影した時の状態のいずれかを含む写真関連情報と、ユーザーに関連するユーザー情報と、のいずれかを含む請求項３に記載の動画再生表示システム。
5. 前記加飾データ記憶部は、複数の前記加飾データを前記動画データに対応付けた形で予め記憶しており、
   前記加飾データ取得手段は、当該動画データに対応する前記加飾データを通信取得する請求項１に記載の動画再生表示システム。
6. 前記動画対応写真画像形成システムは、前記基本データ記憶部に前記動画データを記憶して保存しておく保存期間を、外部のユーザーによる所定の保存期間設定操作に基づいて設定する保存期間設定手段を備えるとともに、その保存期間として１０年以上が設定可能とされている請求項１ないし請求項５のいずれか１項に記載の動画再生表示システム。
7. 前記動画表示領域設定手段は、前記動画表示領域を、前記画面表示部内において表示されている前記動画対応写真画像に重なる領域に設定する請求項１ないし請求項６のいずれか１項に記載の動画再生表示システム。
8. 前記動画対応写真画像形成システムは、前記動画対応写真画像のデータを外部出力する外部出力手段を備える請求項１ないし請求項７のいずれか１項に記載の動画再生表示システム。
9. 前記動画対応写真画像形成システムは、前記動画対応写真画像を印刷する印刷手段を備える請求項１ないし請求項８のいずれか１項に記載の動画再生表示システム。
10. 前記外部データ取得手段は、新生児が写された写真データとその新生児が出生直後にその親と共に撮影された動画データとを外部から通信取得するものである請求項１ないし請求項９のいずれか１項に記載の動画再生表示システム。

Images