JP2024063665A - 編集装置、画像処理装置、端末装置、編集方法、画像処理方法、及びプログラム - Google Patents

Abstract

【課題】ユーザに対して、第１画面に表示されている第１画像と第１画像の背景画像として表示されている第１動画像とが視覚的に対比可能な状態で第１画面内を編集させることができる編集装置、画像処理装置、端末装置、編集方法、画像処理方法、及びプログラムを提供する。【解決手段】編集装置は、第１プロセッサを備える。第１プロセッサは、第１画像を第１画面に表示し、かつ、第１画像の背景画像として第１動画像を第１画面に表示し、第１画面に第１画像と第１動画像とが表示された状態で、与えられた指示に応じて第１画面内を編集する。【選択図】図１

Description

本開示の技術は、編集装置、画像処理装置、端末装置、編集方法、画像処理方法、及びプログラムに関する。

特許文献１には、印刷物を用いたコンテンツ配信サービス方法が開示されている。特許文献１に記載のコンテンツ配信サービス方法は、第１～第９ステップを含む。

第１ステップでは、端末Ａにおいてサービスアップを起動し、イメージを選択する。第２ステップでは、アップ画面において選択されたイメージの上に複数のコンテンツを編集する。第３ステップでは、端末Ａがイメージ及びコンテンツの編集情報をサーバ側に転送する。第４ステップでは、サーバがイメージ及びコンテンツの編集情報を保存し、保存情報を端末Ａ側に転送する。第５ステップでは、端末Ａが保存情報を記録した所定の認識コードを生成し、イメージに埋め込む。第６ステップでは、端末Ａが、認識コードの埋め込まれたイメージを印刷機器側に転送して印刷する。第７ステップでは、端末Ｂにおいてサービスアップを起動し、オフラインで配信された印刷物において認識コードを認識して保存情報を検出する。第８ステップでは、検出された保存情報により端末Ｂがサーバにアクセスした後、サーバからイメージ及びコンテンツの編集情報が転送される。第９ステップでは、端末Ｂから転送された編集情報によりイメージ及び編集されたコンテンツを表現又は起動する。また、第９ステップでは、コンテンツは時系列的にイメージの上に重ね合わせて表現又は起動される。

特許文献２には、画像合成装置と、サーバと、遊技者所有の携帯端末と、を備える画像提供システムが開示されている。

特許文献２に記載の画像提供システムにおいて、画像合成装置は、遊技者を撮影手段により遊技者の静止画像及び動画像を含む撮影画像を撮影し、得られた静止画像を表示手段の表示画面に表示し、入力手段により入力される文字、図形等の編集画像を編集手段により静止画像に合成して合成画像を形成し、形成した合成画像を印刷手段によりシール台紙に印刷する。

特許文献２に記載の画像提供システムにおいて、サーバは、静止画像及び動画像を含む撮影画像及び編集手段による合成画像を特定する特定情報に関連付けて撮影画像及び合成画像をダウンロード可能にアップロードして保存させる。

特許文献２に記載の画像提供システムにおいて、携帯端末は、所望の撮影画像及び合成画像を特定する特定情報をサーバに送信することにより撮影画像及び合成画像をダウンロードする機能を有する。

特許文献２に記載の画像提供システムにおいて、画像合成装置は、マーカ生成手段及び送信手段を備える。マーカ生成手段は、撮影手段による撮影画像及び編集手段による合成画像を拡張現実技術により現実画像に合成表示するための画像の向き、位置や大きさなどを特定する表示情報を表す一次元コード又は二次元コードの図形コードから成る拡張現実マーカを生成して、印刷手段によりシール台紙に印刷させる。送信手段は、撮影手段による撮影画像及び編集手段による合成画像を保存すべくサーバに送信する。

特許文献２に記載の画像提供システムにおいて、携帯端末は、カメラ、読取手段、通信手段、及び合成手段を備える。

読取手段は、シール台紙に印刷された拡張現実マーカを読み取る。通信手段は、ダウンロードすべき撮影画像及び合成画像に対応する特定情報をサーバに送信して撮影画像及び合成画像を特定し、特定した撮影画像及び合成画像をサーバから呼び出して受信する。合成手段は、通信手段により受信した撮影画像である遊技者の静止画像、動画像、及び、合成画像のうち少なくとも１つを、読取手段により読み取られた拡張現実マーカが表す表示情報に基づきカメラにより撮影された画像に合成してモニタの画面に表示させる。

特許文献２に記載の画像提供システムにおいて、マーカ生成手段は、印刷手段に合成画像と共にシール台紙に拡張現実マーカを印刷させる。また、マーカ生成手段は、生成した拡張現実マーカを表示画面にも表示させ、携帯端末の読取手段は、表示画面に表示される拡張現実マーカを読み取る。

特許第６２６０８４０号 特開２０１７－０１１４６１号公報

本開示の技術に係る一つの実施形態は、ユーザに対して、第１画面に表示されている第１画像と第１画像の背景画像として表示されている第１動画像とが視覚的に対比可能な状態で第１画面内を編集させることができる編集装置、画像処理装置、端末装置、編集方法、画像処理方法、及びプログラムを提供する。

本開示の技術に係る第１の態様は、第１プロセッサを備え、第１プロセッサが、第１画像を第１画面に表示し、かつ、第１画像の背景画像として第１動画像を第１画面に表示し、第１画面に第１画像と第１動画像とが表示された状態で、与えられた指示に応じて第１画面内を編集する、編集装置である。

本開示の技術に係る第２の態様は、第１プロセッサが、第１画面内を編集した編集内容を第１画面に表示する、第１の態様に係る編集装置である。

本開示の技術に係る第３の態様は、第１動画像が、ライブビュー画像である、第１の態様又は第２の態様に係る編集装置である。

本開示の技術に係る第４の態様は、第１プロセッサが、第１画面内を編集することにより、第１画像に対する視覚的な印象を変える、第１の態様から第３の態様の何れか１つの態様に係る編集装置である。

本開示の技術に係る第５の態様は、第１プロセッサが、第１動画像の画質を調整することにより第１画面内を編集する、第１の態様から第４の態様の何れか１つの態様に係る編集装置である。

本開示の技術に係る第６の態様は、第１プロセッサが、第１動画像に対してフィルタを用いた処理を行うことにより画質を調整する、第５の態様に係る編集装置である。

本開示の技術に係る第７の態様は、第１プロセッサが、仮想画像を付与することにより第１画面内を編集する、第１の態様から第６の態様の何れか１つの態様に係る編集装置である。

本開示の技術に係る第８の態様は、第１プロセッサが、第１画面内を編集した編集内容を保存し、編集内容の保存先を特定可能な第２画像を取得し、取得した第２画像を第１画像に付与することで第３画像を生成し、生成した第３画像を出力する、第１の態様から第７の態様の何れか１つの態様に係る編集装置である。

本開示の技術に係る第９の態様は、第１プロセッサが、第１画面内に見本画像を表示し、見本画像が、第１画像に第２画像が付与される箇所を特定可能な画像であり、箇所に表示される、第８の態様に係る編集装置である。

本開示の技術に係る第１０の態様は、第２プロセッサを備え、第２プロセッサが、第８の態様又は第９の態様に係る編集装置から出力された第３画像が印刷されて得られた印刷物を撮像することにより、印刷物を示す第４画像を取得し、第４画像から第２画像を検出し、第２画像に基づいて保存先から編集内容を取得し、第４画像と編集内容とを第２画面に表示する第１表示処理を行い、第２画像と編集内容とを対応付けた履歴情報をメモリに格納し、履歴情報がメモリに格納されている状態で第４画像から第２画像を検出した場合に、検出した第２画像に対応する編集内容を履歴情報から取得し、履歴情報から取得した編集内容に対応する第２画像を含む第４画像と、履歴情報から取得した編集内容とを第２画面に表示する第２表示処理を行う、画像処理装置である。

本開示の技術に係る第１１の態様は、履歴情報の格納、及び、履歴情報からの編集内容の取得は、オフラインで実現される、第１０の態様に係る画像処理装置である。

本開示の技術に係る第１２の態様は、編集装置が、第１画面に第１動画像が第１画像の背景画像として表示された状態で第１動画像の画質を調整することにより第１画面内を編集し、第２表示処理が、第２画面に第４画像を含む第２動画像を表示する第１処理と、編集装置によって調整された画質を第２動画像内での第４画像の背景画像に適用する第２処理と、を含む、第１０の態様又は第１１の態様に係る画像処理装置である。

本開示の技術に係る第１３の態様は、第２動画像が、ライブビュー画像である、第１２の態様に係る画像処理装置である。

本開示の技術に係る第１４の態様は、画質の調整が、第１フィルタを用いて実現され、第２処理が、第２動画像内での第４画像の背景画像に対して、第１フィルタに相当する第２フィルタが適用されることによって実現される、第１２の態様又は第１３の態様に係る画像処理装置である。

本開示の技術に係る第１５の態様は、第２プロセッサが、第２動画像内での第４画像の背景画像の表示位置及び／又は表示サイズに対して、第２フィルタの適用位置及び適用サイズを追従させる、第１４の態様に係る画像処理装置である。

本開示の技術に係る第１６の態様は、第２プロセッサが、第４画像をライブビュー方式で第２画面に表示し、第２画面内で、編集内容を第４画像に追従させて表示する、第１０の態様から第１５の態様の何れか１つの態様に係る画像処理装置である。

本開示の技術に係る第１７の態様は、第２プロセッサが、第２画面内での第４画像の表示位置及び／又は表示サイズの変化に対して、第２画面内での編集内容の表示位置及び／又は表示サイズを追従させる、第１６の態様に係る画像処理装置である。

本開示の技術に係る第１８の態様は、第２プロセッサが、第４画像に対して編集内容が反映されることで得られた画像を記録用静止画像又は記録用動画像として取得する、第１０の態様から第１７の態様の何れか１つの態様に係る画像処理装置である。

本開示の技術に係る第１９の態様は、第１表示処理及び／又は第２表示処理が、アプリケーションが実行されることによって実現され、第２プロセッサが、アプリケーションが導入されていない場合に、アプリケーションを導入する導入処理、又は、アプリケーションの導入を補助する補助処理を行う、第１０の態様から第１８の態様の何れか１つの態様に係る画像処理装置である。

本開示の技術に係る第２０の態様は、第２プロセッサを備え、第２プロセッサが、第８の態様又は第９の態様に係る編集装置から出力された第３画像が印刷されて得られた印刷物を撮像することにより、印刷物を示す第４画像を取得し、第４画像から第２画像を検出し、第２画像に基づいて保存先から編集内容を取得し、第４画像と編集内容とを第２画面に表示する第３表示処理を行い、編集装置が、第１画面に第１動画像が第１画像の背景画像として表示された状態で第１動画像の画質を調整することにより第１画面内を編集し、第３表示処理が、第２画面に第４画像を含む第２動画像を表示する第３処理と、編集装置によって調整された画質を第２動画像内での第４画像の背景画像に適用する第４処理と、を含む、画像処理装置である。

本開示の技術に係る第２１の態様は、第２動画像が、ライブビュー画像である、第２０の態様に係る画像処理装置である。

本開示の技術に係る第２２の態様は、画質の調整が、第１フィルタを用いて実現され、第４処理が、第２動画像内での第４画像の背景画像に対して、第１フィルタに相当する第２フィルタが適用されることによって実現される、第２１の態様に係る画像処理装置である。

本開示の技術に係る第２３の態様は、第２プロセッサが、第２動画像内での第４画像の背景画像の表示位置及び／又は表示サイズに対して、第２フィルタの適用位置及び適用サイズを追従させる、第２２の態様に係る画像処理装置である。

本開示の技術に係る第２４の態様は、第２プロセッサが、第２画面内で、編集内容を第４画像に追従させる、第２０の態様から第２３の態様の何れか１つの態様に係る画像処理装置である。

本開示の技術に係る第２５の態様は、第２プロセッサが、第２画面内での第４画像の表示位置及び／又は表示サイズの変化に対して、第２画面内での編集内容の表示位置及び／又は表示サイズを追従させる、第２４の態様に係る画像処理装置である。

本開示の技術に係る第２６の態様は、第２プロセッサが、第４画像に対して編集内容が反映されることで得られた画像を記録用静止画像又は記録用動画像として取得する、第２０の態様から第２５の態様の何れか１つの態様に係る画像処理装置である。

本開示の技術に係る第２７の態様は、第３表示処理が、アプリケーションが実行されることによって実現され、第２プロセッサが、アプリケーションが導入されていない場合に、アプリケーションを導入する導入処理、又は、アプリケーションの導入を補助する補助処理を行う、第２０の態様から第２６の態様の何れか１つの態様に係る画像処理装置である。

本開示の技術に係る第２８の態様は、第１の態様から第９の態様の何れか１つの態様に係る編集装置と、編集装置と外部装置との間での通信を司る第１通信インタフェースと、を備える、端末装置である。

本開示の技術に係る第２９の態様は、第１０の態様から第２７の態様の何れか１つの態様に係る画像処理装置と、画像処理装置と外部装置との間での通信を司る第２通信インタフェースと、を備える、端末装置である。

本開示の技術に係る第３０の態様は、第１画像を第１画面に表示し、かつ、第１画像の背景画像として第１動画像を第１画面に表示すること、及び、第１画面に第１画像と第１動画像とが表示された状態で、与えられた指示に応じて第１画面内を編集することを含む、編集方法である。

本開示の技術に係る第３１の態様は、第８の態様又は第９の態様に係る編集装置から出力された第３画像が印刷されて得られた印刷物を撮像することにより、印刷物を示す第４画像を取得すること、第４画像から第２画像を検出すること、第２画像に基づいて保存先から編集内容を取得すること、第４画像と編集内容とを第２画面に表示する第１表示処理を行うこと、第２画像と編集内容とを対応付けた履歴情報を保持すること、履歴情報を保持している状態で第４画像から第２画像を検出した場合に、検出した第２画像に対応する編集内容を履歴情報から取得すること、及び、履歴情報から取得した編集内容に対応する第２画像を含む第４画像と、履歴情報から取得した編集内容とを第２画面に表示する第２表示処理を行うことを含む、画像処理方法である。

本開示の技術に係る第３２の態様は、第８の態様又は第９の態様に係る編集装置から出力された第３画像が印刷されて得られた印刷物を撮像することにより、印刷物を示す第４画像を取得すること、第４画像から第２画像を検出すること、第２画像に基づいて保存先から編集内容を取得すること、及び、第４画像と編集内容とを第２画面に表示する第３表示処理を行うことを含み、編集装置が、第１画面に第１動画像が第１画像の背景画像として表示された状態で第１動画像の画質を調整することにより第１画面内を編集し、第３表示処理が、第２画面に第４画像を含む第２動画像を表示する第３処理と、編集装置によって調整された画質を第２動画像内での第４画像の背景画像に適用する第４処理と、を含む、画像処理方法である。

本開示の技術に係る第３３の態様は、第１画像を第１画面に表示し、かつ、第１画像の背景画像として第１動画像を第１画面に表示すること、及び、第１画面に第１画像と第１動画像とが表示された状態で、与えられた指示に応じて第１画面内を編集することを含む編集処理をコンピュータに実行させるためのプログラムである。

本開示の技術に係る第３４の態様は、第８の態様又は第９の態様に係る編集装置から出力された第３画像が印刷されて得られた印刷物を撮像することにより、印刷物を示す第４画像を取得すること、第４画像から第２画像を検出すること、第２画像に基づいて保存先から編集内容を取得すること、第４画像と編集内容とを第２画面に表示する第１表示処理を行うこと、第２画像と編集内容とを対応付けた履歴情報を保持すること、履歴情報を保持している状態で第４画像から第２画像を検出した場合に、検出した第２画像に対応する編集内容を履歴情報から取得すること、及び、履歴情報から取得した編集内容に対応する第２画像を含む第４画像と、履歴情報から取得した編集内容とを第２画面に表示する第２表示処理を行うことを含む画像処理をコンピュータに実行させるためのプログラムである。

本開示の技術に係る第３５の態様は、画像処理をコンピュータに実行させるためのプログラムであって、画像処理が、第８の態様又は第９の態様に係る編集装置から出力された第３画像が印刷されて得られた印刷物を撮像することにより、印刷物を示す第４画像を取得すること、第４画像から第２画像を検出すること、及び、第２画像に基づいて保存先から編集内容を取得すること、第４画像と編集内容とを第２画面に表示する第３表示処理を行うことを含み、編集装置が、第１画面に第１動画像が第１画像の背景画像として表示された状態で第１動画像の画質を調整することにより第１画面内を編集し、第３表示処理が、第２画面に第４画像を含む第２動画像を表示する第３処理と、編集装置によって調整された画質を第２動画像内での第４画像の背景画像に適用する第４処理と、を含む、プログラムである。

画像処理システムの全体構成の一例を示す概念図である。 ユーザがスマートデバイスを使用している態様の一例を示す概念図である。 スマートデバイスの電気系のハードウェア構成の一例を示すブロック図である。 スマートデバイスの要部機能の一例を示すブロック図である。 第１表示制御部の処理内容の一例を示す概念図である。 複数の印刷対象画像が画面に一覧表示される態様の一例を示す概念図である。 選択された印刷対象画像を基に得られた印刷物画像とライブビュー画像とに基づいて生成された合成画像が画面に表示される態様の一例を示す概念図である。 編集部の処理内容の一例を示す概念図である。 編集内容データがサーバに保存され、サーバから保存先データがスマートデバイスに送信される態様の一例を示す概念図である。 マトリクス型二次元コード付きの印刷物画像がインスタントフィルムに印刷されることによって印刷物が生成されて排出される態様の一例を示す概念図である。 印刷物を含めた被写体が撮像されることによって得られたライブビュー画像が画面に表示される態様の一例を示す概念図である。 ライブビュー画像から取得された印刷物画像からマトリクス型二次元コードが検出される態様の一例を示す概念図である。 印刷物画像から検出されたマトリクス型二次元コードを利用して編集内容データが保存されている保存先が特定され、特定された保存先から編集内容データが取得される態様の一例を示すが概念図である。 印刷物画像を含むライブビュー画像に対して編集内容が適用された場合の画面内の表示態様の一例を示す概念図である。 履歴情報が生成されてＮＶＭに格納される態様の一例を示す概念図である。 履歴情報から編集内容データが取得される態様の一例を示す概念図である。 履歴情報から取得された編集内容データにより示される編集内容が、印刷物画像を含むライブビュー画像に対して適用された場合の画面内の表示態様の一例を示す概念図である。 印刷物画像に対して編集内容が適用されることによって得られた記録用画像がＮＶＭに格納される態様の一例を示す概念図である。 観賞プログラムが導入される態様の一例を示す概念図である。 編集処理の流れの一例を示すフローチャートである。 観賞処理の流れの一例を示すフローチャートである。 導入処理の流れの一例を示すフローチャートである。 画面内での印刷物画像の変化に応じて編集内容を追従させる態様の一例を示す概念図である。 スマートデバイスの要求に応じてコンテンツ提供処理が外部装置によって行われ、処理結果がスマートデバイスによって受け取られる形態例を示す概念図である。

以下、添付図面に従って本開示の技術に係る編集装置、画像処理装置、端末装置、編集方法、画像処理方法、及びプログラムの実施形態の一例について説明する。

一例として図１に示すように、画像処理システム１０は、複数のスマートデバイス１２及びサーバ１４を備えている。スマートデバイス１２は、本開示の技術に係る「端末装置」の一例である。サーバ１４は、本開示の技術に係る「外部装置」の一例である。

図１に示す例では、スマートデバイス１２として、スマートフォンが示されている。スマートフォンは、あくまでも一例に過ぎず、スマートウォッチ、タブレット端末、パーソナル・コンピュータ等であってもよい。また、図１に示す例では、複数のスマートデバイス１２として、スマートデバイス１２Ａ及び１２Ｂが示されている。スマートデバイス１２Ａは、ユーザＵ１によって使用され、スマートデバイス１２Ｂは、ユーザＵ２によって使用される。なお、以下では、説明の便宜上、スマートデバイス１２Ａとスマートデバイス１２Ｂとを区別して説明する必要がない場合、「スマートデバイス１２」と称する。また、以下では、説明の便宜上、ユーザＵ１とユーザＵ２とを区別して説明する必要がない場合、符号を付さずに「ユーザ」と称する。

複数のスマートデバイス１２及びサーバ１４は、ネットワーク１６を介して通信可能に接続されている。ネットワーク１６の一例としては、ＷＡＮ（Wide Area Network）又はＬＡＮ（Local Area Network）等が挙げられる。

サーバ１４は、スマートデバイス１２からの要求に応じたサービスをスマートデバイス１２に提供する。すなわち、サーバ１４は、スマートデバイス１２からの要求に応じた処理を実行し、実行した処理の結果を要求元のスマートデバイス１２に提供する。

スマートデバイス１２Ａは、印刷装置１８と通信可能に接続されている。印刷装置１８の一例としては、インスタントフィルム２０に印画するインスタントプリンタが挙げられる。ここでは、インスタントプリンタを例示しているが、これは、あくまでも一例に過ぎず、例えばスマートデバイス１２等の端末装置と通信可能な複合機等のように、通信機能及び印刷機能を有する装置であればよい。また、インスタントフィルム２０も、あくまでも一例に過ぎず、他種類のフィルム又は印画紙等であってもよく、画像が印刷可能な媒体（換言すると、画像が記録可能な媒体）であれば如何なる媒体であってもよい。なお、本実施形態では、印刷の概念に現像も含まれる。

図１に示す例において、印刷装置１８は、スマートデバイス１２Ａから与えられた指示に従って、インスタントフィルム２０の表面２２に画像２４（例えば、スマートデバイス１２Ａから送信された画像）を印刷することにより印刷物２５（図１に示す例では、名刺サイズのインスタント写真）を生成する。印刷装置１８は、生成した印刷物２５を印刷装置１８の外部に排出する。

一例として図２に示すように、スマートデバイス１２は、撮像装置２６を備えており、撮像装置２６は、ユーザＵ１から与えられた指示に応じて被写体を撮像する。

スマートデバイス１２は、タッチパネルディスプレイ２８を備えている。タッチパネルディスプレイ２８は、ディスプレイ３０（例えば、液晶ディスプレイ、又は、エレクトロルミネッセンスディスプレイ）及びタッチパネル３２を有しており、例えば、ディスプレイ３０の画面３４上にタッチパネル３２が重ねられることによって形成されている。

撮像装置２６は、ユーザＵ１からの指示に応じて被写体を撮像することにより記録用画像（例えば、記録用静止画像及び／又は記録用動画像）又はライブビュー画像３６を生成する。記録用画像は、メモリ（例えば、図３に示すＮＶＭ５０又はメモリカード等）に格納される。画面３４には、ライブビュー画像３６が表示される。ライブビュー画像３６は、表示用動画像であり、特定フレームレート（例えば、数十～数百フレーム／秒）で生成されて画面３４に表示される。

一例として図３に示すように、スマートデバイス１２は、コンピュータ４０、イメージセンサ４２、ＵＩ（User Interface）系装置４４、及び通信Ｉ／Ｆ（Interface）４６を備えている。コンピュータ４０は、本開示の技術に係る「編集装置」、「画像処理装置」及び「コンピュータ」の一例である。通信Ｉ／Ｆ４６は、本開示の技術に係る「第１通信インタフェース」及び「第２通信インタフェース」の一例である。

コンピュータ４０は、プロセッサ４８、ＮＶＭ（Non-volatile memory）５０、及びＲＡＭ（Random Access Memory）５２を備えている。プロセッサ４８、ＮＶＭ５０、及びＲＡＭ５２は、バス５４に接続されている。プロセッサ４８は、本開示の技術に係る「第１プロセッサ」及び「第２プロセッサ」の一例である。ＮＶＭ５０は、本開示の技術に係る「メモリ」の一例である。

プロセッサ４８は、ＤＳＰ（Digital Signal Processor）、ＣＰＵ（Central Processing Unit）、及びＧＰＵ（Graphics Processing Unit）を含む処理装置であり、ＤＳＰ及びＧＰＵは、ＣＰＵの制御下で動作し、画像に関する処理の実行を担う。ここでは、プロセッサ４８の一例として、ＤＳＰ、ＣＰＵ、及びＧＰＵを含む処理装置を挙げているが、これはあくまでも一例に過ぎず、プロセッサ４８は、１つ以上のＣＰＵ及び１つ以上のＧＰＵであってもよいし、ＧＰＵ機能を統合した１つ以上のＣＰＵ及びＤＳＰであってもよいし、ＧＰＵ機能を統合していない１つ以上のＣＰＵ及びＤＳＰであってもよいし、ＴＰＵ（Tensor Processing Unit）が搭載されていてもよい。

ＮＶＭ５０は、各種プログラム及び各種パラメータ等を記憶する不揮発性の記憶装置である。ＮＶＭ５０としては、例えば、フラッシュメモリ（例えば、ＥＥＰＲＯＭ（Electrically Erasable and Programmable Read Only Memory））が挙げられる。ＲＡＭ５２は、一時的に情報が記憶されるメモリであり、プロセッサ４８によってワークメモリとして用いられる。ＲＡＭ５２としては、例えば、ＤＲＡＭ（Dynamic Random Access Memory）又はＳＲＡＭ（Static Random Access Memory）等が挙げられる。

イメージセンサ４２は、バス５４に接続されている。イメージセンサ４２の一例としては、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサが挙げられる。イメージセンサ４２は、プロセッサ４８の制御下で、被写体を撮像することで画像データ５６を生成する。

ここでは、イメージセンサ４２の一例としてＣＭＯＳイメージセンサを挙げているが、これは、あくまでも一例に過ぎず、イメージセンサ４２は、ＣＣＤ（Charge Coupled Device）イメージセンサ等の他種類のイメージセンサであってもよい。

ＵＩ系装置４４は、バス５４に接続されている。ＵＩ系装置４４は、タッチパネルディスプレイ２８（図２参照）、１つ以上のハードキー（図示省略）、マイクロフォン（図示省略）、及びスピーカ（図示省略）等を含む。ＵＩ系装置４４は、ユーザからの指示を受け付け、受け付けた指示を示す信号をプロセッサ４８に出力する。また、ＵＩ系装置４４は、プロセッサ４８の制御下で、各種情報をユーザに提示する。各種情報の提示は、例えば、各種情報がディスプレイ３０（図２参照）に表示されたり、各種情報がスピーカから音声として出力されたりすることによって実現される。

通信Ｉ／Ｆ４６は、通信プロセッサ及びアンテナ等を含むインタフェースであり、バス５４に接続されている。通信Ｉ／Ｆ４６は、コンピュータ４０とサーバ１４等との間での通信を司る。通信Ｉ／Ｆ４６に対して適用される通信規格は、例えば、５Ｇ（5th Generation Mobile Communication System）、Ｗｉ－Ｆｉ（登録商標）、又はＢｌｕｅｔｏｏｔｈ（登録商標）等を含む無線通信規格であってもよいし、イーサネット（登録商標）、ファスト・イーサネット（登録商標）、又はギガビット・イーサネット（登録商標）等を含む有線通信規格であってもよい。

ところで、従来既知のサービスとして、画像がインスタントフィルムに印刷される前に、印刷物の全体の態様を仮想的に表現したデジタル画像である第１印刷物画像を第１スマートデバイスの画面を表示し、第１ユーザによって編集させるサービスが知られている。例えば、第１ユーザによる第１印刷物画像に対する編集内容は、サーバ等に保存され、編集内容が反映されていない印刷物が第２ユーザに提供される。印刷物は、第２スマートデバイスによって撮像されることで第２印刷物画像として第２スマートデバイスに取り込まれる。第２スマートデバイスは、第２ユーザからの指示に応じて、サーバ等から編集内容を取得し、編集内容を第２印刷物画像に反映させて画面に表示する。これにより、第２ユーザに対して、編集内容が反映された第２印刷物画像を観賞させることが可能となる。

本実施形態では、上述した従来既知のサービスを更に発展させたサービスが画像処理システム１０によってユーザに提供される。画像処理システム１０では、スマートデバイス１２Ｂの画面３４に、印刷物２５を含む被写体が撮像されることで得られたライブビュー画像が表示され、ライブビュー画像が表示されている画面３４内に、ユーザＵ１による編集内容が反映される。しかし、編集段階で、ユーザＵ１は、スマートデバイス１２Ｂの画面３４内に反映された編集内容がユーザＵ２に対して与える視覚的な効果がどの程度なのか（すなわち、ユーザＵ２が編集内容に対してどのような印象を持つのか）を具体的に想像するのが困難である。

そこで、このような事情に鑑み、本実施形態では、一例として図４に示すように、プロセッサ４８によって編集処理、観賞処理、及び導入処理が行われる。編集処理、観賞処理、及び導入処理は、プロセッサ４８によってプログラムＰＧが実行されることによって実現される。以下では、説明の便宜上、編集処理、観賞処理、及び導入処理を区別して説明する必要がない場合、「コンテンツ提供処理」と称する。

ＮＶＭ５０には、プログラムＰＧが格納されている。プログラムＰＧは、本開示の技術に係る「プログラム」の一例である。プログラムＰＧは、編集プログラム５８、観賞プログラム６０、及び導入プログラム６２を含む。

プロセッサ４８は、ＮＶＭ５０から編集プログラム５８を読み出し、読み出した編集プログラム５８をＲＡＭ５２上で実行することにより編集処理を行う。プロセッサ４８によって行われる編集処理は、本開示の技術に係る「編集処理」の一例である。編集処理は、プロセッサ４８がＲＡＭ５２上で実行する編集プログラム５８に従って、第１表示制御部４８Ａ、編集部４８Ｂ、保存実行部４８Ｃ、及び印刷実行部４８Ｄとして動作することによって実現される。

プロセッサ４８は、ＮＶＭ５０から観賞プログラム６０を読み出し、読み出した観賞プログラム６０をＲＡＭ５２上で実行することにより観賞処理を行う。観賞プログラム６０は、本開示の技術に係る「アプリケーション」の一例である。プロセッサ４８によって行われる観賞処理は、本開示の技術に係る「画像処理」の一例である。観賞処理は、プロセッサ４８がＲＡＭ５２上で実行する観賞プログラム６０に従って、第１取得部４８Ｇ、第２取得部４８Ｈ、第３取得部４８Ｉ、第４取得部４８Ｊ、検出部４８Ｋ、格納実行部４８Ｌ、及び第２表示制御部４８Ｍとして動作することによって実現される。

プロセッサ４８は、ＮＶＭ５０から導入プログラム６２を読み出し、読み出した導入プログラム６２をＲＡＭ５２上で実行することにより導入処理を行う。導入処理は、プロセッサ４８がＲＡＭ５２上で実行する導入プログラム６２に従って導入実行部４８Ｎとして動作することによって実現される。

次に、ユーザＵ１が使用するスマートデバイス１２Ａによって行われる処理内容の一例について図５～図１０を参照しながら説明する。

一例として図５に示すように、第１表示制御部４８Ａは、イメージセンサ４２から画像データ５６を取得し、取得した画像データ５６に基づいてライブビュー画像３６を生成する。そして、第１表示制御部４８Ａは、特定フレームレートに従ってライブビュー画像３６を画面３４に表示する。

一例として図６に示すように、ＮＶＭ５０には、複数の印刷対象画像７８が格納されている。印刷対象画像７８は、インスタントフィルム２０に印刷される対象となる画像である。第１表示制御部４８Ａは、ユーザＵ１から与えられた指示に従って、ＮＶＭ５０から複数の印刷対象画像７８を取得し、取得した複数の印刷対象画像７８を画面３４に表示する。例えば、画面３４には、複数の印刷対象画像７８が一覧表示される。

画面３４に複数の印刷対象画像７８が表示されると、画面３４に表示されている複数の印刷対象画像７８のうちの１つがユーザＵ１によって選択される。例えば、図７に示すように、スマートデバイス１２Ａには、ユーザＵ１から、画面３４に表示されている複数の印刷対象画像７８のうちの１つを選択する指示である選択指示７９が与えられる。第１表示制御部４８Ａは、ユーザＵ１から与えられた選択指示７９に従って１つの印刷対象画像７８を選択し、選択した印刷対象画像７８に基づいて印刷物画像８０を生成する。印刷物画像８０は、印刷対象画像７８がインスタントフィルム２０の表面２２に印刷された印刷物の全体の態様を仮想的に表現したデジタル画像である。

印刷物画像８０には、印刷対象画像７８と見本画像８２とが含まれている。印刷物画像８０において、印刷対象画像７８の周囲には余白領域８０Ａが設けられており、第１表示制御部４８Ａは、余白領域８０Ａ（図７に示す例では、正面視右下部）に見本画像８２を付与する。見本画像８２は、本開示の技術に係る「見本画像」の一例である。

見本画像８２は、マトリクス型二次元コード９８（図１０参照）の見本（すなわち、テンプレート式のマトリクス型二次元コード）であり、印刷物画像８０内において、実際のインスタントフィルム２０に印刷されるマトリクス型二次元コード９８の位置に対応する位置に付与される。見本画像８２は、実際のインスタントフィルム２０にマトリクス型二次元コード９８が付与される箇所を特定可能な画像として用いられる。すなわち、見本画像８２が付与された印刷物画像８０を画面３４に表示させることにより、ユーザＵ１に対して、実際のインスタントフィルム２０にマトリクス型二次元コード９８が印刷された態様を想像させることができる。換言すると、インスタントフィルム２０のどの位置にマトリクス型二次元コード９８が付与されるのかを視覚的に把握させることができる。

第１表示制御部４８Ａは、ライブビュー画像３６と、見本画像８２付きの印刷物画像８０とを合成することにより合成画像８３を生成し、生成した合成画像８３を画面３４に表示する。例えば、合成画像８３は、ライブビュー画像３６上に、見本画像８２付きの印刷物画像８０を重畳させることで得られた画像である。なお、合成画像８３は、ライブビュー画像３６に、見本画像８２付きの印刷物画像８０が埋め込まれることで得られた画像であってもよい。

合成画像８３は、印刷物画像８０の背景画像としてライブビュー画像３６が用いられた画像であり、印刷物画像８０に用いられるライブビュー画像３６は、特定フレームレートに従って更新される。

本実施形態において、画面３４は、本開示の技術に係る「第１画面」の一例である。印刷物画像８０は、本開示の技術に係る「第１画像」の一例である。ライブビュー画像３６は、本開示の技術に係る「第１動画像」及び「ライブビュー画像」の一例である。

画面３４に合成画像８３が表示されている状態で、例えば、図８に示すように、ユーザＵ１からスマートデバイス１２Ａに対して、合成画像８３が表示されている画面３４内を編集する指示である編集指示８１が与えられると、編集部４８Ｂは、編集指示８１に応じて合成画像８３を編集する。合成画像８３が編集されることによって画面３４内が編集され、これにより、印刷物画像８０に対する視覚的な印象が変えられる。ここで、編集指示８１は、本開示の技術に係る「指示」の一例である。

編集部４８Ｂは、合成画像８３を編集することにより編集合成画像８４を生成する。編集合成画像８４は、合成画像８３及び編集内容データ９４を含んで構成される。編集内容データ９４は、編集内容８６を示すデータである。

合成画像８３に対して編集部４８Ｂによって編集が行われることによって、合成画像８３には編集内容８６が付与される。編集内容８６の一例としては、編集結果（例えば、最終的に得られた結果物）が挙げられる。編集内容８６は、模様８６Ａ、テキスト８６Ｂ、ポップアップ画像８６Ｃ、仮想動画像８６Ｄ、及び背景画質８６Ｅ等によって規定される。

図８に示す例において、模様８６Ａは、印刷対象画像７８内に付与されることにより印刷対象画像７８内を装飾している。模様８６Ａは、手書き（例えば、落書き）の模様であってもよいし、定型の模様であってもよい。テキスト８６Ｂは、余白領域８０Ａ内に付与されることにより余白領域８０Ａ内を装飾している。テキスト８６Ｂは、手書き（例えば、落書き）のテキストであってもよいし、定型のテキストであってもよい。ポップアップ画像８６Ｃは、印刷対象画像７８内からライブビュー画像３６上にポップアップされた画像である。

仮想動画像８６Ｄは、コンピュータグラフィックスによって生成された仮想的な動画像（すなわち、非現実の動画像）であり、編集部４８Ｂによって合成画像８３内に付与される。合成画像８３の背景画像にはライブビュー画像３６が適用されているので、仮想動画像８６Ｄが合成画像８３内に付与されることによって、編集合成画像８４は、ＡＲ（Augmented Reality）動画像として表現される。図８に示す例では、ポップアップ画像８６Ｃ上に仮想動画像８６Ｄが配置されている。

背景画質８６Ｅは、ライブビュー画像３６の画質であり、編集部４８Ｂによって背景画質８６Ｅが調整されることにより画面３４内が編集される。背景画質８６Ｅの調整は、ライブビュー画像３６に対してフィルタ８８が適用されることによって実現される。フィルタ８８の一例としては、ユーザＵ１によって指定された画像変換フィルタが挙げられる。画像変換フィルタとは、例えば、ライブビュー画像３６を、モノクロにするフィルタ、セピアにするフィルタ、ビビッド調にするフィルタ、暈しを付与するフィルタ、輝度を変換するフィルタ、濃度を変換するフィルタ、ノイズを除去するフィルタ、及び／又は、ユーザＵ１によって選択された画像等で塗り潰しを行うフィルタを指す。本実施形態において、フィルタ８８は、本開示の技術に係る「フィルタ」及び「第１フィルタ」の一例である。

一例として図９に示すように、第１表示制御部４８Ａは、編集部４８Ｂによって得られた編集合成画像８４を画面３４に表示する。この状態で、ユーザＵ１からスマートデバイス１２Ａに対して、編集内容データ９４を保存する指示である保存指示９５が与えられると、保存実行部４８Ｃは、編集合成画像８４から編集内容データ９４を抽出し、抽出した編集内容データ９４をサーバ１４に保存する。サーバ１４は、編集内容データ９４の保存を完了すると、保存先を特定可能な保存先データ９６をスマートデバイス１２Ａに送信する。

保存実行部４８Ｃは、サーバ１４から送信された保存先データ９６を取得し、取得した保存先データ９６に基づいてマトリクス型二次元コード９８を取得する。マトリクス型二次元コード９８の取得は、保存先データ９６が暗号化されることによって実現される。マトリクス型二次元コード９８の一例としては、ＱＲコード（登録商標）が挙げられる。ここでは、ＱＲ（Quick Response）コードを例示しているが、これは、あくまでも一例に過ぎず、編集内容データ９４の保存先を特定可能な画像であれば、如何なる画像であってもよい。マトリクス型二次元コード９８は、本開示の技術に係る「第２画像」の一例である。

編集合成画像８４が画面３４に表示された状態で、例えば、図１０に示すように、ユーザＵ１からスマートデバイス１２に対して、印刷物画像８０をインスタントフィルム２０の表面２２に印刷する指示である印刷指示９７が与えられると、印刷実行部４８Ｄは、編集合成画像８４から印刷物画像８０を抽出する。また、印刷実行部４８Ｄは、保存実行部４８Ｃによって取得されたマトリクス型二次元コード９８を印刷物画像８０に付与する。マトリクス型二次元コード９８が付与される箇所は、見本画像８２が付与されていた箇所である。すなわち、印刷実行部４８Ｄは、見本画像８２をマトリクス型二次元コード９８に置き換えることにより、マトリクス型二次元コード９８を印刷物画像８０に付与する。マトリクス型二次元コード９８が付与された印刷物画像８０は、本開示の技術に係る「第３画像」の一例である。

印刷実行部４８Ｄは、印刷物画像８０を出力する。出力先は、印刷装置１８である。ここでは、出力先として、印刷装置１８を例示しているが、出力先としては、印刷装置１８の他に、例えば、サーバ１４等に内蔵されている記憶装置（例えば、ＮＶＭ等）、可搬型メモリ（例えば、ＵＳＢ（Universal Serial Bus）メモリ）、及び／又は、スマートデバイス１２Ｂ等の電子機器が挙げられる。

印刷実行部４８Ｄは、印刷装置１８に印刷物画像８０を出力することにより、印刷装置１８に対して、マトリクス型二次元コード９８を含む印刷物画像８０をインスタントフィルム２０の表面２２に印刷させる。これにより、印刷装置１８によって印刷物１００（図１０に示す例では、名刺サイズのインスタント写真）が生成されて印刷装置１８の外部に排出される。印刷物１００の表面２２において、印刷対象画像７８とマトリクス型二次元コード９８とのレイアウトは、印刷物画像８０内での印刷対象画像７８とマトリクス型二次元コード９８とのレイアウトと同じである。本実施形態において、印刷物１００は、本開示の技術に係る「印刷物」の一例である。

次に、ユーザＵ２が使用するスマートデバイス１２Ｂによって行われる処理内容の一例について図１１～図１９を参照しながら説明する。

一例として図１１に示すように、スマートデバイス１２Ｂでは、撮像装置２６の画角θで規定される被写体に印刷物１００が含められており、かつ、撮像装置２６の撮像面２６Ａと印刷物１００の表面２２とを正対させた状態で、イメージセンサ４２によって被写体が撮像される。これにより、イメージセンサ４２によって画像データ１０２が生成される。第２表示制御部４８Ｍは、画像データ１０２に基づいてライブビュー画像１０４を生成し、生成したライブビュー画像１０４を画面３４に表示する。ライブビュー画像１０４には、印刷物１００が写っている。すなわち、ライブビュー画像１０４には、印刷物１００を示す印刷物画像１０６が含まれている。換言すると、印刷物画像１０６は、背景画像（図１１に示す例では、飛行機及び雲が写っている画像）と共に、ライブビュー方式で画面３４に表示される。また、印刷物画像１０６には、マトリクス型二次元コード９８が電子像として含まれている。すなわち、マトリクス型二次元コード９８も、ライブビュー方式で画面３４に表示される。本実施形態において、印刷物画像１０６は、本開示の技術に係る「第４画像」の一例である。ライブビュー画像１０４は、本開示の技術に係る「第２動画像」の一例である。

一例として図１２に示すように、第１取得部４８Ｇは、ライブビュー画像１０４から印刷物画像１０６を取得する。検出部４８Ｋは、第１取得部４８Ｇによって取得された印刷物画像１０６からマトリクス型二次元コード９８を検出する。

一例として図１３に示すように、第２取得部４８Ｈは、検出部４８Ｋによって検出されたマトリクス型二次元コード９８に基づいてサーバ１４から編集内容データ９４を取得する。すなわち、第２取得部４８Ｈは、マトリクス型二次元コード９８を解読（すなわち、復号）することにより、マトリクス型二次元コード９８から保存先データ９６を取得し、保存先データ９６から編集内容データ９４の保存先（すなわち、サーバ１４内の編集内容データ９４が格納されている場所）を特定する。そして、第２取得部４８Ｈは、特定した保存先から編集内容データ９４を取得する。

一例として図１４に示すように、第２表示制御部４８Ｍは、第１表示処理１０８を行う。第１表示処理１０８は、印刷物画像１０６と編集内容データ９４により示される編集内容８６とを画面３４に表示する処理である。第１表示処理１０８は、本開示の技術に係る「第１表示処理」及び「第３表示処理」の一例である。

第１表示処理１０８は、ライブビュー表示処理１０８Ａ及び編集内容適用処理１０８Ｂを含む。ライブビュー表示処理１０８Ａは、本開示の技術に係る「第３処理」の一例であり、編集内容適用処理１０８Ｂは、本開示の技術に係る「第４処理」の一例である。

ライブビュー表示処理１０８Ａは、画面３４に、印刷物画像１０６を含むライブビュー画像１０４を表示する処理である。編集内容適用処理１０８Ｂは、編集内容８６（すなわち、模様８６Ａ、テキスト８６Ｂ、ポップアップ画像８６Ｃ、仮想動画像８６Ｄ、及び背景画質８６Ｅ等）をライブビュー画像１０４に対して適用する処理である。

背景画質８６Ｅは、ライブビュー画像１０４内での印刷物画像１０６の背景画像に適用される。この場合、ライブビュー画像１０４内での印刷物画像１０６の背景画像に対して、フィルタ８８が適用されることによって印刷物画像１０６の背景画像の画質が調整される。ここで、ライブビュー画像１０４内での印刷物画像１０６の背景画像に対して適用されるフィルタ８８は、本開示の技術に係る「第１フィルタに相当する第２フィルタ」の一例である。

なお、ここでは、図８に示す背景画質８６Ｅの調整に用いられたフィルタ８８そのものを、図１４に示す背景画質８６Ｅの調整に用いる形態例を挙げたが、これは、あくまでも一例に過ぎない。例えば、第２表示制御部４８Ｍが、図８に示す背景画質８６Ｅの調整に用いられたフィルタ８８のパラメータを参照して、図１４に示す背景画質８６Ｅの調整に用いるフィルタを生成してもよいし、図８に示す背景画質８６Ｅの調整に用いられたフィルタ８８のパラメータを参照して、既存のフィルタのパラメータを調整し、パラメータが調整されたフィルタを図１４に示す背景画質８６Ｅの調整に用いるようにしてもよい。

一例として図１５に示すように、格納実行部４８Ｌは、履歴情報１１０を取得し、取得した履歴情報１１０をＮＶＭ５０に格納する。編集内容データ９４のＮＶＭ５０への格納は、オフラインで実現される。また、履歴情報１１０の取得は、編集内容データ９４とマトリクス型二次元コード９８とに基づいて履歴情報１１０が生成されることによって実現される。履歴情報１１０は、互いに対応する編集内容データ９４とマトリクス型二次元コード９８とを対応付けた情報である。互いに対応する編集内容データ９４とマトリクス型二次元コード９８の一例としては、第２表示制御部４８Ｍで用いた編集内容データ９４と、サーバ１４から編集内容データ９４を得るために用いたマトリクス型二次元コード９８とが挙げられる。履歴情報１１０は、定期的に生成されてＮＶＭ５０に格納されてもよいし、検出部４８Ｋによってマトリクス型二次元コード９８が検出され、かつ、第２取得部４８Ｈによってサーバ１４から編集内容データ９４が取得される毎に生成されてＮＶＭ５０に格納されてもよい。履歴情報１１０は、本開示の技術に係る「履歴情報」の一例である。

一例として図１６に示すように、ＮＶＭ５０には、履歴情報１１０が格納されている。この状態で、検出部４８Ｋによってマトリクス型二次元コード９８が検出された場合、第３取得部４８Ｉは、検出部４８Ｋによって検出されたマトリクス型二次元コード９８に対応する編集内容データ９４を履歴情報１１０から取得する。すなわち、第３取得部４８Ｉは、ＮＶＭ５０に格納されている履歴情報１１０のうち、検出部４８Ｋによって検出されたマトリクス型二次元コード９８と一致するマトリクス型二次元コード９８を含む履歴情報１１０から編集内容データ９４を取得する。履歴情報１１０からの編集内容データ９４の取得は、オフラインで実現される。

一例として図１７に示すように、第２表示制御部４８Ｍは、第２表示処理１１２を行う。第２表示処理１１２は、印刷物画像１０６と第３取得部４８Ｉによって取得された編集内容データ９４により示される編集内容８６とを画面３４に表示する処理である。第２表示処理１１２は、本開示の技術に係る「第２表示処理」の一例である。

第２表示処理１１２は、ライブビュー表示処理１１２Ａ及び編集内容適用処理１１２Ｂを含む。ライブビュー表示処理１１２Ａは、本開示の技術に係る「第１処理」の一例であり、編集内容適用処理１１２Ｂは、本開示の技術に係る「第２処理」の一例である。

ライブビュー表示処理１１２Ａは、図１４に示すライブビュー表示処理１０８Ａに相当する処理である。編集内容適用処理１１２Ｂは、第３取得部４８Ｉによって取得された編集内容データ９４により示される編集内容８６（すなわち、模様８６Ａ、テキスト８６Ｂ、ポップアップ画像８６Ｃ、仮想動画像８６Ｄ、及び背景画質８６Ｅ等）をライブビュー画像１０４に対して適用する処理である。第３取得部４８Ｉによって取得された編集内容データ９４により示される編集内容８６に含まれる背景画質８６Ｅは、図１４に示す編集内容適用処理１０８Ｂと同じ要領でライブビュー画像１０４内での印刷物画像１０６の背景画像に適用される。

一例として図１８に示すように、第４取得部４８Ｊは、印刷物画像１０６に対して編集内容８６（すなわち、模様８６Ａ、テキスト８６Ｂ、ポップアップ画像８６Ｃ、仮想動画像８６Ｄ、及び背景画質８６Ｅ等）が反映されることで得られた画像を記録用画像１１４として取得する。そして、第４取得部４８Ｊは、記録用画像１１４をＮＶＭ５０に格納する。記録用画像１１４は、記録用静止画像（例えば、再生用静止画像）であってもよいし、記録用動画像（例えば、再生用動画像）であってもよい。例えば、記録用画像１１４として記録用静止画像が生成されてＮＶＭ５０に格納されるか、或いは、記録用画像１１４として記録用動画像が生成されてＮＶＭ５０に格納されるかは、ユーザＵ２からスマートデバイス１２Ｂに対して与えられた指示に応じて決められてもよいし、デフォルトで設定されていてもよい。

一例として図１９に示すように、導入実行部４８Ｎは、コンピュータ４０に観賞プログラム６０が導入済みであるか否かを判定する。導入済みである場合とは、例えば、ＮＶＭ５０に観賞プログラム６０が実行可能な状態で格納されている場合を指す。導入実行部４８Ｎは、コンピュータ４０に観賞プログラム６０が導入済みでないと判定した場合、観賞プログラム６０を導入する。例えば、サーバ１４には、観賞プログラム６０が格納されている場合、導入実行部４８Ｎは、サーバ１４から観賞プログラム６０をダウンロードし、ダウンロードした観賞プログラム６０をコンピュータ４０にインストールする。

次に、画像処理システム１０の本開示の技術に係る部分の作用について図２０～図２２を参照しながら説明する。

先ず、スマートデバイス１２Ａの本開示の技術に係る部分の作用について図２０を参照しながら説明する。図２０に示す編集処理の流れは、本開示の技術に係る「編集方法」の一例である。

図２０に示す編集処理では、先ず、ステップＳＴ１０で、第１表示制御部４８Ａは、イメージセンサ４２から画像データ５６を取得し、取得した画像データ５６に基づいてライブビュー画像３６を生成して画面３４に表示する（図６参照）。ステップＳＴ１０の処理が実行された後、編集処理はステップＳＴ１２へ移行する。

ステップＳＴ１２で、第１表示制御部４８Ａは、スマートデバイス１２Ａに対して与えられた選択指示７９に応じて印刷対象画像７８を選択する。ステップＳＴ１２の処理が実行された後、編集処理はステップＳＴ１４へ移行する。

ステップＳＴ１４で、第１表示制御部４８Ａは、ステップＳＴ１２で選択した印刷対象画像７８に基づいて印刷物画像８０を生成する（図７参照）。ステップＳＴ１４の処理が実行された後、編集処理はステップＳＴ１６へ移行する。

ステップＳＴ１６で、第１表示制御部４８Ａは、ステップＳＴ１４で生成した印刷物画像８０とライブビュー画像３６とに基づいて合成画像８３を生成して画面３４に表示する（図７参照）。ステップＳＴ１６の処理が実行された後、編集処理はステップＳＴ１８へ移行する。

ステップＳＴ１８で、編集部４８Ｂは、スマートデバイス１２Ａに対して与えられた編集指示８１に応じて合成画像８３を編集する。これにより、編集合成画像８４が生成される（図８参照）。ステップＳＴ１８の処理が実行された後、編集処理はステップＳＴ２０へ移行する。

ステップＳＴ２０で、第１表示制御部４８Ａは、編集合成画像８４を画面３４に表示する（図９参照）。ステップＳＴ２０の処理が実行された後、編集処理はステップＳＴ２２へ移行する。

ステップＳＴ２２で、保存実行部４８Ｃは、編集合成画像８４から編集内容データ９４を取得し、取得した編集内容データ９４をサーバ１４に保存する（図９参照）。これに応じて、サーバ１４は、スマートデバイス１２Ａに保存先データ９６を送信する（図９参照）。ステップＳＴ２２の処理が実行された後、編集処理はステップＳＴ２４へ移行する。

ステップＳＴ２４で、保存実行部４８Ｃは、サーバ１４から送信された保存先データ９６を取得し、保存先データ９６に基づいてマトリクス型二次元コード９８を生成する（図９参照）。ステップＳＴ２４の処理が実行された後、編集処理はステップＳＴ２６へ移行する。

ステップＳＴ２６で、印刷実行部４８Ｄは、編集合成画像８４から印刷物画像８０を抽出する。そして、印刷実行部４８Ｄは、ステップＳＴ２４で生成されたマトリクス型二次元コード９８を印刷物画像８０に付与する（図１０参照）。ステップＳＴ２６の処理が実行された後、編集処理はステップＳＴ２８へ移行する。

ステップＳＴ２８で、印刷実行部４８Ｄは、印刷装置１８に対して、マトリクス型二次元コード９８が付与された印刷物画像８０を印刷させる。これにより、印刷装置１８は、印刷物１００を生成して印刷装置１８の外部に排出する（図１０参照）。ステップＳＴ２８の処理が実行された後、編集処理が終了する。

次に、スマートデバイス１２Ｂの本開示の技術に係る部分の作用について図２１を参照しながら説明する。図２１に示す観賞処理の流れは、本開示の技術に係る「画像処理方法」の一例である。

図２１に示す観賞処理では、先ず、ステップＳＴ３０で、第２表示制御部４８Ｍは、イメージセンサ４２から画像データ１０２を取得し、取得した画像データ１０２に基づいてライブビュー画像１０４を生成して画面３４に表示する（図１１参照）。ステップＳＴ３０の処理が実行された後、観賞処理はステップＳＴ３２へ移行する。

ステップＳＴ３２で、第１取得部４８Ｇは、ライブビュー画像１０４から印刷物画像１０６を取得する（図１２参照）。ステップＳＴ３２の処理が実行された後、観賞処理はステップＳＴ３４へ移行する。

ステップＳＴ３４で、検出部４８Ｋは、ステップＳＴ３２で取得された印刷物画像１０６からマトリクス型二次元コード９８を検出する（図１２参照）。ステップＳＴ３４の処理が実行された後、観賞処理はステップＳＴ３６へ移行する。

ステップＳＴ３６で、第３取得部４８Ｉは、ＮＶＭ５０に履歴情報１１０が格納されているか否かを判定する。ステップＳＴ３６において、ＮＶＭ５０に履歴情報１１０が格納されていない場合は、判定が否定されて、観賞処理はステップＳＴ４２へ移行する。ステップＳＴ３６において、ＮＶＭ５０に履歴情報１１０が格納されている場合は、判定が肯定されて、観賞処理はステップＳＴ３８へ移行する。

ステップＳＴ３８で、第３取得部４８Ｉは、ステップＳＴ３４で検出されたマトリクス型二次元コード９８と一致するマトリクス型二次元コード９８を含む履歴情報１１０がＮＶＭ５０に格納されているか否かを判定する。ステップＳＴ３８において、ステップＳＴ３４で検出されたマトリクス型二次元コード９８と一致するマトリクス型二次元コード９８を含む履歴情報１１０がＮＶＭ５０に格納されていない場合は、判定が否定されて、観賞処理はステップＳＴ４２へ移行する。ステップＳＴ３８において、ステップＳＴ３４で検出されたマトリクス型二次元コード９８と一致するマトリクス型二次元コード９８を含む履歴情報１１０がＮＶＭ５０に格納されている場合は、判定が肯定されて、観賞処理はステップＳＴ４０へ移行する。

ステップＳＴ４０で、第３取得部４８Ｉは、ステップＳＴ３４で検出されたマトリクス型二次元コード９８と一致するマトリクス型二次元コード９８を含む履歴情報１１０から編集内容データ９４を取得する（図１６参照）。ステップＳＴ４０の処理が実行された後、観賞処理はステップＳＴ４８へ移行する。

ステップＳＴ４２で、第２取得部４８Ｈは、ステップＳＴ３４で検出されたマトリクス型二次元コード９８を解読することにより保存先データ９６を取得する（図１３参照）。ステップＳＴ４２の処理が実行された後、観賞処理はステップＳＴ４４へ移行する。

ステップＳＴ４４で、第２取得部４８Ｈは、ステップＳＴ４２で取得した保存先データ９６を用いて編集内容データ９４の保存先を特定する（図１３参照）。ステップＳＴ４４の処理が実行された後、観賞処理はステップＳＴ４６へ移行する。

ステップＳＴ４６で、第２取得部４８Ｈは、ステップＳＴ４４で特定した保存先から編集内容データ９４を取得する（図１３参照）。ステップＳＴ４６の処理が実行された後、観賞処理はステップＳＴ４８へ移行する。

ステップＳＴ４８で、第２表示制御部４８Ｍは、ライブビュー画像１０４に対して、ステップＳＴ４０又はステップＳＴ４６で取得された編集内容データ９４により示される編集内容８６を適用する（図１４及び図１７参照）。ステップＳＴ４８の処理が実行された後、観賞処理はステップＳＴ５０へ移行する。

ステップＳＴ５０で、格納実行部４８Ｌは、ステップＳＴ４０又はステップＳＴ４６で取得された編集内容データ９４とステップＳＴ３４で検出されたマトリクス型二次元コード９８とを対応付けることにより履歴情報１１０を生成し、生成した履歴情報１１０をＮＶＭ５０に格納する（図１５参照）。ステップＳＴ５０の処理が実行された後、観賞処理はステップＳＴ５２へ移行する。

ステップＳＴ５２で、第４取得部４８Ｊは、ステップＳＴ３２で取得された印刷物画像１０６に対して、ステップＳＴ４０又はステップＳＴ４６で取得された編集内容データ９４により示される編集内容８６を反映することにより記録用画像１１４を生成する。第４取得部４８Ｊは、記録用画像１１４をＮＶＭ５０に格納する（図１８参照）。ステップＳＴ５２の処理が実行された後、観賞処理が終了する。

次に、スマートデバイス１２Ｂの本開示の技術に係る部分の作用について図２２を参照しながら説明する。

図２２に示す導入処理では、ステップＳＴ６０で、導入実行部４８Ｎは、コンピュータ４０に観賞プログラム６０が導入されていないか否かを判定する。ステップＳＴ６０において、コンピュータ４０に観賞プログラム６０が導入されている場合は、判定が否定されて、導入処理が終了する。ステップＳＴ６０において、コンピュータ４０に観賞プログラム６０が導入されていない場合は、判定が肯定されて、導入処理はステップＳＴ６２へ移行する。

ステップＳＴ６２で、導入実行部４８Ｎは、サーバ１４から観賞プログラム６０を取得し、取得した観賞プログラム６０をコンピュータ４０に導入する。ステップＳＴ６２の処理が実行された後、導入処理が終了する。

以上説明したように、スマートデバイス１２Ａでは、印刷物画像８０が画面３４に表示され、かつ、印刷物画像８０の背景画像としてライブビュー画像３６が表示される。そして、画面３４に印刷物画像８０とライブビュー画像３６とが表示された状態（すなわち、画面３４に合成画像８３が表示された状態）で、スマートデバイス１２Ａに対して与えられた編集指示８１に応じて画面３４内（すなわち、合成画像８３）が編集される。これにより、ユーザＵ１に対して、スマートデバイス１２Ａの画面３４に表示されている印刷物画像８０と印刷物画像８０の背景画像として表示されているライブビュー画像３６とが視覚的に対比可能な状態で画面３４内（すなわち、合成画像８３）を編集することができる。この結果、ユーザＵ１は、スマートデバイス１２Ｂの画面３４内（すなわち、印刷物画像１０６を含むライブビュー画像１０４）に反映された編集内容８６がユーザＵ２に対して与える視覚的な効果がどの程度なのか（すなわち、ユーザＵ２が編集内容８６に対してどのような印象を持つのか）を具体的に想像することが可能となる。

また、スマートデバイス１２Ａでは、画面３４内を編集した編集内容８６が画面３４に表示される。これにより、ユーザＵ１に対して、画面３４内を編集した編集内容８６を視覚的に認識させることができる。

また、スマートデバイス１２Ａでは、画面３４内が編集されることにより印刷物画像８０に対する視覚的に印象が変えられる。これにより、印刷物画像８０に対する視覚的に印象を容易に変えることができる。

また、スマートデバイス１２Ａでは、ライブビュー画像３６の画質が調整されることにより画面３４内が編集される。これにより、画面３４内での印刷物画像８０に対する視覚的な印象を変えることができる。

また、スマートデバイス１２Ａでは、ライブビュー画像３６に対してフィルタ８８を用いた処理（すなわち、編集内容適用処理１０８Ｂ）が行われることにより、ライブビュー画像３６の画質が調整される。これにより、ライブビュー画像３６の画質を容易に調整することができる。

また、スマートデバイス１２Ａでは、画面３４内に仮想動画像８６Ｄが付与されることにより画面３４内が編集される。これにより、興趣性の高い編集合成画像８４を得ることができる。

また、スマートデバイス１２Ａでは、編集内容データ９４の保存先を特定可能な保存先データ９６が暗号化されたマトリクス型二次元コード９８が印刷物画像８０に付与される。そして、マトリクス型二次元コード９８が付与された印刷物画像８０が印刷物１００として出力される。従って、ユーザは、印刷物１００に写っているマトリクス型二次元コード９８を利用することで、編集内容データ９４の保存先を特定することができる。

また、スマートデバイス１２Ａでは、マトリクス型二次元コード９８が印刷物画像８０に付与される前に、印刷物画像８０に見本画像８２が付されている。見本画像８２が付された印刷物画像８０は、画面３４に表示される。これにより、ユーザＵ１は、印刷物画像８０の何れの箇所にマトリクス型二次元コード９８が付されるのかを想像することができる。この結果、例えば、印刷物画像８０に付されたマトリクス型二次元コード９８から、ユーザＵ１以外の者（例えば、ユーザＵ２）が受ける印象を把握することができる。

また、スマートデバイス１２Ｂでは、第１表示処理が行われた場合に、使用された編集内容データ９４とマトリクス型二次元コード９８とが対応付けられた履歴情報１１０がＮＶＭ５０に格納される。ＮＶＭ５０に履歴情報１１０が格納されている状態で検出部４８Ｋによってマトリクス型二次元コード９８が検出された場合に、検出されたマトリクス型二次元コード９８に対応付けられた編集内容データ９４が履歴情報１１０から取得される。履歴情報１１０のＮＶＭ５０への格納、及び履歴情報１１０からの編集内容データ９４取得はオフラインで実現される。そして、検出部４８Ｋによって検出されたマトリクス型二次元コード９８を含む印刷物画像１０６と、履歴情報１１０から取得された編集内容データ９４により示される編集内容８６とが画面３４に表示される。これにより、編集内容データ９４の格納及び取得がオンライン経由で行われる場合に比べ、ユーザＵ２に対して、印刷物画像１０６に対して編集内容８６が適用された態様を迅速に把握させることができる。

また、スマートデバイス１２Ｂでは、ユーザＵ１からの編集指示８１に応じてスマートデバイス１２Ａによってライブビュー画像３６に対して調整された画質が、ライブビュー画像１０４内での印刷物画像１０６の背景画像に適用される。これにより、ユーザＵ１は、スマートデバイス１２Ｂの画面３４に表示された印刷物画像１０６に対するユーザＵ２による視覚的な印象を調整することができる。

また、スマートデバイス１２Ｂでは、ユーザＵ１による編集時にスマートデバイス１２Ａの画面３４に印刷物画像８０の背景画像がライブビュー方式で表示されている状況と、印刷物画像１０６の背景画像がライブビュー方式で画面３４に表示されているという点で共通している状況下で、印刷物画像１０６が画面３４に表示される。これにより、画面３４に表示されている印刷物画像１０６を観賞しているユーザＵ２に対して、ユーザＵ１が印刷物画像８０から視覚的に受けた印象に近い印象を与えることができる。

また、スマートデバイス１２Ｂでは、ライブビュー画像１０４内での印刷物画像１０６の背景画像に対して、スマートデバイス１２Ａの画面３４に印刷物画像８０の背景画像として表示されたライブビュー画像３６に対して調整された画質が適用される。これにより、ライブビュー画像１０４内での印刷物画像１０６の背景画像の画質を、編集作業を行ったユーザＵ１が意図する画質に調整することができる。

また、スマートデバイス１２Ｂでは、ライブビュー画像１０４内での印刷物画像１０６の背景画像に対して、スマートデバイス１２Ａでの編集時に用いたフィルタ８８が適用される。これにより、ライブビュー画像１０４内での印刷物画像１０６の背景画像の画質を、編集作業を行ったユーザＵ１が意図する画質に容易に調整することができる。

また、スマートデバイス１２Ｂでは、印刷物画像１０６に対して編集内容８６が適用されることで得られた記録用画像１１４がＮＶＭ５０に格納される。これにより、ユーザが望むタイミングで記録用画像１１４を様々な処理で用いることができるので、ユーザにとっての利便性が高まる。

更に、スマートデバイス１２Ｂでは、観賞プログラム６０がコンピュータ４０に導入されていない場合に、導入実行部４８Ｎによって観賞プログラム６０がコンピュータ４０に導入される。これにより、観賞プログラム６０がコンピュータ４０に導入されていないために観賞処理が行われず、ユーザＵ２に対して、編集内容８６が適用されたライブビュー画像１０４を観賞させることができないという事態が生じないようにすることができる。

なお、上記実施形態では、図７に示す例において、合成画像８３の構成要素としてライブビュー画像３６を適用した形態例を挙げたが、本開示の技術はこれに限定されず、ライブビュー画像３６に代えて記録用動画像（例えば、再生用動画像）を適用してもよい。

上記実施形態では、編集内容８６として、編集部４８Ｂによって編集が行われた編集結果（すなわち、最終的な結果物）を例示したが、本発明はこれに限定されず、編集内容８６には、編集が行われている状態及び／又は過程が含まれていてもよい。

上記実施形態では、コンピュータ４０に観賞プログラム６０が導入済みでない場合、コンピュータ４０に観賞プログラム６０が導入される形態例を挙げて説明したが、これは、あくまでも一例に過ぎない。例えば、コンピュータ４０に観賞プログラム６０が導入済みでない場合、コンピュータ４０に観賞プログラム６０を導入することを補助する補助処理が行われるようにしてもよい。補助処理の一例としては、観賞プログラム６０の導入（例えば、コンピュータ４０に観賞プログラム６０をインストールすること）をユーザに促す情報を、ＵＩ系装置４４を介してユーザに提示する処理が挙げられる。

上記実施形態では、仮想動画像８６Ｄを例示したが、本開示の技術はこれに限定されない。例えば、仮想動画像８６Ｄに代えて、仮想的に表現された静止画像である仮想静止画像を用いてもよいし、仮想動画像８６Ｄと共に仮想静止画像を用いてもよい。

仮想動画像８６Ｄは、例えば、雨が降っている態様を示す仮想動画像、又は、雪が降っている態様を示す仮想動画像等であってもよく、非現実の二次元動画像又は非現実の三次元動画像であれば如何なる態様の仮想動画像であってもよい。また、仮想静止画像についても同様のことが言える。

上記実施形態では、スマートデバイス１２Ｂの画面３４に表示されている印刷物画像１０６の位置が画面３４で一定であることを前提として説明したが、本開示の技術はこれに限定されない。例えば、図２３に示すように、第２表示制御部４８Ｍは、画面３４内で編集内容８６を印刷物画像１０６に追従させて表示するようにしてもよい。この場合、例えば、第２表示制御部４８Ｍは、画面３４に表示されているライブビュー画像１０４内での印刷物画像１０６の表示位置及び／又は表示サイズの変化に対して、画面３４内での編集内容８６の表示位置及び／又は表示サイズを追従させる。これにより、画面３４内で印刷物画像１０６の表示位置が変わったり表示サイズが変わったりしても、ユーザＵ２に対して編集内容８６を視覚的に認識させ続けることができる。

また、第２表示制御部４８Ｍは、画面３４に表示されているライブビュー画像１０４内での印刷物画像１０６の表示位置及び／又は表示サイズに対して、フィルタ８８の適用位置及び適用サイズを追従させるようにしてもよい。これにより、画面３４に表示されているライブビュー画像１０４内での印刷物画像１０６の表示位置が変わったり表示サイズが変わったりしても、印刷物画像１０６の背景画像の画質を精度良く調整することができる。

上記実施形態では、スマートデバイス１２内のコンピュータ４０によってコンテンツ提供処理が実行される形態例を挙げて説明したが、本開示の技術はこれに限定されない。例えば、図２４に示すように、ネットワーク１６を介してスマートデバイス１２と通信可能に接続された外部装置１１６内のコンピュータ１１８によってコンテンツ提供処理が実行されるようにしてもよい。コンピュータ１１８の一例としては、クラウドサービス用のサーバコンピュータが挙げられる。コンピュータ１１８は、本開示の技術に係る「編集装置」、「画像処理装置」及び「コンピュータ」の一例である。

図２４に示す例では、コンピュータ１１８は、プロセッサ１２０、ＮＶＭ１２２、及びＲＡＭ１２４を備えている。ＮＶＭ１２２には、プログラムＰＧが格納されている。

スマートデバイス１２は、ネットワーク１６を介して外部装置１１６に対してコンテンツ提供処理の実行を要求する。これに応じて、外部装置１１６のプロセッサ１２０は、ＮＶＭ１２２からプログラムＰＧを読み出し、プログラムＰＧをＲＡＭ１２４上で実行する。プロセッサ１２０は、ＲＡＭ１２４上で実行するプログラムＰＧに従ってコンテンツ提供処理を行う。そして、プロセッサ１２０は、コンテンツ提供処理が実行されることで得られた処理結果を、ネットワーク１６を介してスマートデバイス１２に提供する。

図２４には、外部装置１１６に対してコンテンツ提供処理を実行させる形態例が示されているが、これは、あくまでも一例に過ぎない。例えば、スマートデバイス１２と外部装置１１６とがコンテンツ提供処理を分散して実行するようにしてもよいし、スマートデバイス１２と外部装置１１６を含む複数の装置とがコンテンツ提供処理を分散して実行するようにしてもよい。

上記実施形態では、ＮＶＭ５０にプログラムＰＧが格納されている形態例を挙げて説明したが、本開示の技術はこれに限定されない。例えば、プログラムＰＧがＳＳＤ（Solid State Drive）又はＵＳＢメモリなどの可搬型の非一時的格納媒体に格納されていてもよい。非一時的格納媒体に格納されているプログラムＰＧは、スマートデバイス１２のコンピュータ４０にインストールされる。プロセッサ４８は、プログラムＰＧに従ってコンテンツ提供処理を実行する。

また、ネットワーク１６を介してコンピュータ４０に接続される他のコンピュータ又はサーバ１４等の格納装置にプログラムＰＧを格納させておき、コンピュータ４０の要求に応じてプログラムＰＧがダウンロードされ、コンピュータ４０にインストールされるようにしてもよい。

なお、コンピュータ４０に接続される他のコンピュータ又はサーバ等の格納装置、又はＮＶＭ５０にプログラムＰＧの全てを格納させておく必要はなく、プログラムＰＧの一部を格納させておいてもよい。

コンテンツ提供処理を実行するハードウェア資源としては、次に示す各種のプロセッサを用いることができる。プロセッサとしては、例えば、ソフトウェア、すなわち、プログラムを実行することで、コンテンツ提供処理を実行するハードウェア資源として機能する汎用的なプロセッサであるＣＰＵが挙げられる。また、プロセッサとしては、例えば、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）、又はＰＬＤ（Programmable Logic Device）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路が挙げられる。何れのプロセッサにもメモリが内蔵又は接続されており、何れのプロセッサもメモリを使用することでコンテンツ提供処理を実行する。

コンテンツ提供処理を実行するハードウェア資源は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ、又はＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、コンテンツ提供処理を実行するハードウェア資源は１つのプロセッサであってもよい。

１つのプロセッサで構成する例としては、第１に、１つ以上のＣＰＵとソフトウェアの組み合わせで１つのプロセッサを構成し、このプロセッサが、コンテンツ提供処理を実行するハードウェア資源として機能する形態がある。第２に、ＳｏＣなどに代表されるように、コンテンツ提供処理を実行する複数のハードウェア資源を含むシステム全体の機能を１つのＩＣチップで実現するプロセッサを使用する形態がある。このように、コンテンツ提供処理は、ハードウェア資源として、上記各種のプロセッサの１つ以上を用いて実現される。

更に、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子などの回路素子を組み合わせた電気回路を用いることができる。また、上記のコンテンツ提供処理はあくまでも一例である。従って、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよいことは言うまでもない。

以上に示した記載内容及び図示内容は、本開示の技術に係る部分についての詳細な説明であり、本開示の技術の一例に過ぎない。例えば、上記の構成、機能、作用、及び効果に関する説明は、本開示の技術に係る部分の構成、機能、作用、及び効果の一例に関する説明である。よって、本開示の技術の主旨を逸脱しない範囲内において、以上に示した記載内容及び図示内容に対して、不要な部分を削除したり、新たな要素を追加したり、置き換えたりしてもよいことは言うまでもない。また、錯綜を回避し、本開示の技術に係る部分の理解を容易にするために、以上に示した記載内容及び図示内容では、本開示の技術の実施を可能にする上で特に説明を要しない技術常識等に関する説明は省略されている。

本明細書において、「Ａ及び／又はＢ」は、「Ａ及びＢのうちの少なくとも１つ」と同義である。つまり、「Ａ及び／又はＢ」は、Ａだけであってもよいし、Ｂだけであってもよいし、Ａ及びＢの組み合わせであってもよい、という意味である。また、本明細書において、３つ以上の事柄を「及び／又は」で結び付けて表現する場合も、「Ａ及び／又はＢ」と同様の考え方が適用される。

本明細書に記載された全ての文献、特許出願及び技術規格は、個々の文献、特許出願及び技術規格が参照により取り込まれることが具体的かつ個々に記された場合と同程度に、本明細書中に参照により取り込まれる。

１０ 画像処理システム
１２，１２Ａ，１２Ｂ スマートデバイス
１４ サーバ
１６ ネットワーク
１８ 印刷装置
２０ インスタントフィルム
２２ 表面
２４ 画像
２５，１００ 印刷物
２６ 撮像装置
２６Ａ 撮像面
２８ タッチパネルディスプレイ
３０ ディスプレイ
３２ タッチパネル
３４ 画面
３６，１０４ ライブビュー画像
４０，１１８ コンピュータ
４２ イメージセンサ
４４ ＵＩ系装置
４６ 通信Ｉ／Ｆ
４８，１２０ プロセッサ
４８Ａ 第１表示制御部
４８Ｂ 編集部
４８Ｃ 保存実行部
４８Ｄ 印刷実行部
４８Ｇ 第１取得部
４８Ｈ 第２取得部
４８Ｉ 第３取得部
４８Ｊ 第４取得部
４８Ｋ 検出部
４８Ｌ 格納実行部
４８Ｍ 第２表示制御部
４８Ｎ 導入実行部
５０，１２２ ＮＶＭ
５２，１２４ ＲＡＭ
５４ バス
５６，１０２ 画像データ
５８ 編集プログラム
６０ 観賞プログラム
６２ 導入プログラム
７８ 印刷対象画像
７９ 選択指示
８０，１０６ 印刷物画像
８０Ａ 余白領域
８１ 編集指示
８２ 見本画像
８３ 合成画像
８４ 編集合成画像
８６ 編集内容
８６Ａ 模様
８６Ｂ テキスト
８６Ｃ ポップアップ画像
８６Ｄ 仮想動画像
８６Ｅ 背景画質
８８ フィルタ
９４ 編集内容データ
９５ 保存指示
９６ 保存先データ
９７ 印刷指示
９８ マトリクス型二次元コード
１０８ 第１表示処理
１０８Ａ，１１２Ａ ライブビュー表示処理
１０８Ｂ，１１２Ｂ 編集内容適用処理
１１０ 履歴情報
１１２ 第２表示処理
１１４ 記録用画像
１１６ 外部装置
ＰＧ プログラム
Ｕ１，Ｕ２ ユーザ
θ 画角

Claims (35)

1. 第１プロセッサを備え、
   前記第１プロセッサは、
   第１画像を第１画面に表示し、かつ、前記第１画像の背景画像として第１動画像を前記第１画面に表示し、
   前記第１画面に前記第１画像と前記第１動画像とが表示された状態で、与えられた指示に応じて前記第１画面内を編集する
   編集装置。
2. 前記第１プロセッサは、前記第１画面内を編集した編集内容を前記第１画面に表示する
   請求項１に記載の編集装置。
3. 前記第１動画像は、ライブビュー画像である
   請求項１に記載の編集装置。
4. 前記第１プロセッサは、前記第１画面内を編集することにより、前記第１画像に対する視覚的な印象を変える
   請求項１に記載の編集装置。
5. 前記第１プロセッサは、前記第１動画像の画質を調整することにより前記第１画面内を編集する
   請求項１に記載の編集装置。
6. 前記第１プロセッサは、前記第１動画像に対してフィルタを用いた処理を行うことにより前記画質を調整する
   請求項５に記載の編集装置。
7. 前記第１プロセッサは、仮想画像を付与することにより前記第１画面内を編集する
   請求項１に記載の編集装置。
8. 前記第１プロセッサは、
   前記第１画面内を編集した編集内容を保存し、
   前記編集内容の保存先を特定可能な第２画像を取得し、
   取得した前記第２画像を前記第１画像に付与することで第３画像を生成し、
   生成した前記第３画像を出力する
   請求項１に記載の編集装置。
9. 前記第１プロセッサは、前記第１画面内に見本画像を表示し、
   前記見本画像は、前記第１画像に前記第２画像が付与される箇所を特定可能な画像であり、前記箇所に表示される
   請求項８に記載の編集装置。
10. 第２プロセッサを備え、
    前記第２プロセッサは、
    請求項８に記載の編集装置から出力された前記第３画像が印刷されて得られた印刷物を撮像することにより、前記印刷物を示す第４画像を取得し、
    前記第４画像から前記第２画像を検出し、
    前記第２画像に基づいて前記保存先から前記編集内容を取得し、
    前記第４画像と前記編集内容とを第２画面に表示する第１表示処理を行い、
    前記第２画像と前記編集内容とを対応付けた履歴情報をメモリに格納し、
    前記履歴情報が前記メモリに格納されている状態で前記第４画像から前記第２画像を検出した場合に、検出した前記第２画像に対応する前記編集内容を前記履歴情報から取得し、
    前記履歴情報から取得した前記編集内容に対応する前記第２画像を含む前記第４画像と、前記履歴情報から取得した前記編集内容とを前記第２画面に表示する第２表示処理を行う
    画像処理装置。
11. 前記履歴情報の格納、及び、前記履歴情報からの前記編集内容の取得は、オフラインで実現される
    請求項１０に記載の画像処理装置。
12. 前記編集装置は、前記第１画面に前記第１動画像が前記第１画像の背景画像として表示された状態で前記第１動画像の画質を調整することにより前記第１画面内を編集し、
    前記第２表示処理は、
    前記第２画面に前記第４画像を含む第２動画像を表示する第１処理と、
    前記編集装置によって調整された前記画質を前記第２動画像内での前記第４画像の背景画像に適用する第２処理と、を含む
    請求項１０に記載の画像処理装置。
13. 前記第２動画像は、ライブビュー画像である
    請求項１２に記載の画像処理装置。
14. 前記画質の調整は、第１フィルタを用いて実現され、
    前記第２処理は、前記第２動画像内での前記第４画像の背景画像に対して、前記第１フィルタに相当する第２フィルタが適用されることによって実現される
    請求項１２に記載の画像処理装置。
15. 前記第２プロセッサは、前記第２動画像内での前記第４画像の背景画像の表示位置及び／又は表示サイズに対して、前記第２フィルタの適用位置及び適用サイズを追従させる
    請求項１４に記載の画像処理装置。
16. 前記第２プロセッサは、
    前記第４画像をライブビュー方式で前記第２画面に表示し、
    前記第２画面内で、前記編集内容を前記第４画像に追従させて表示する
    請求項１０に記載の画像処理装置。
17. 前記第２プロセッサは、前記第２画面内での前記第４画像の表示位置及び／又は表示サイズの変化に対して、前記第２画面内での前記編集内容の表示位置及び／又は表示サイズを追従させる
    請求項１６に記載の画像処理装置。
18. 前記第２プロセッサは、前記第４画像に対して前記編集内容が反映されることで得られた画像を記録用静止画像又は記録用動画像として取得する
    請求項１０に記載の画像処理装置。
19. 前記第１表示処理及び／又は前記第２表示処理は、アプリケーションが実行されることによって実現され、
    前記第２プロセッサは、前記アプリケーションが導入されていない場合に、前記アプリケーションを導入する導入処理、又は、前記アプリケーションの導入を補助する補助処理を行う
    請求項１０に記載の画像処理装置。
20. 第２プロセッサを備え、
    前記第２プロセッサは、
    請求項８に記載の編集装置から出力された前記第３画像が印刷されて得られた印刷物を撮像することにより、前記印刷物を示す第４画像を取得し、
    前記第４画像から前記第２画像を検出し、
    前記第２画像に基づいて前記保存先から前記編集内容を取得し、
    前記第４画像と前記編集内容とを第２画面に表示する第３表示処理を行い、
    前記編集装置は、前記第１画面に第１動画像が前記第１画像の背景画像として表示された状態で前記第１動画像の画質を調整することにより前記第１画面内を編集し、
    前記第３表示処理は、
    前記第２画面に前記第４画像を含む第２動画像を表示する第３処理と、
    前記編集装置によって調整された前記画質を前記第２動画像内での前記第４画像の背景画像に適用する第４処理と、を含む
    画像処理装置。
21. 前記第２動画像は、ライブビュー画像である
    請求項２０に記載の画像処理装置。
22. 前記画質の調整は、第１フィルタを用いて実現され、
    前記第４処理は、前記第２動画像内での前記第４画像の背景画像に対して、前記第１フィルタに相当する第２フィルタが適用されることによって実現される
    請求項２１に記載の画像処理装置。
23. 前記第２プロセッサは、前記第２動画像内での前記第４画像の背景画像の表示位置及び／又は表示サイズに対して、前記第２フィルタの適用位置及び適用サイズを追従させる
    請求項２２に記載の画像処理装置。
24. 前記第２プロセッサは、前記第２画面内で、前記編集内容を前記第４画像に追従させる
    請求項２０に記載の画像処理装置。
25. 前記第２プロセッサは、前記第２画面内での前記第４画像の表示位置及び／又は表示サイズの変化に対して、前記第２画面内での前記編集内容の表示位置及び／又は表示サイズを追従させる
    請求項２４に記載の画像処理装置。
26. 前記第２プロセッサは、前記第４画像に対して前記編集内容が反映されることで得られた画像を記録用静止画像又は記録用動画像として取得する
    請求項２０に記載の画像処理装置。
27. 前記第３表示処理は、アプリケーションが実行されることによって実現され、
    前記第２プロセッサは、前記アプリケーションが導入されていない場合に、前記アプリケーションを導入する導入処理、又は、前記アプリケーションの導入を補助する補助処理を行う
    請求項２０に記載の画像処理装置。
28. 請求項１から請求項９の何れか一項に記載の編集装置と、
    前記編集装置と外部装置との間での通信を司る第１通信インタフェースと、を備える
    端末装置。
29. 請求項１０から請求項２７の何れか一項に記載の画像処理装置と、
    前記画像処理装置と外部装置との間での通信を司る第２通信インタフェースと、を備える
    端末装置。
30. 第１画像を第１画面に表示し、かつ、前記第１画像の背景画像として第１動画像を前記第１画面に表示すること、及び、
    前記第１画面に前記第１画像と前記第１動画像とが表示された状態で、与えられた指示に応じて前記第１画面内を編集することを含む
    編集方法。
31. 請求項８又は請求項９に記載の編集装置から出力された前記第３画像が印刷されて得られた印刷物を撮像することにより、前記印刷物を示す第４画像を取得すること、
    前記第４画像から前記第２画像を検出すること、
    前記第２画像に基づいて前記保存先から前記編集内容を取得すること、
    前記第４画像と前記編集内容とを第２画面に表示する第１表示処理を行うこと、
    前記第２画像と前記編集内容とを対応付けた履歴情報を保持すること、
    前記履歴情報を保持している状態で前記第４画像から前記第２画像を検出した場合に、検出した前記第２画像に対応する前記編集内容を前記履歴情報から取得すること、及び、
    前記履歴情報から取得した前記編集内容に対応する前記第２画像を含む前記第４画像と、前記履歴情報から取得した前記編集内容とを前記第２画面に表示する第２表示処理を行うことを含む
    画像処理方法。
32. 請求項８又は請求項９に記載の編集装置から出力された前記第３画像が印刷されて得られた印刷物を撮像することにより、前記印刷物を示す第４画像を取得すること、
    前記第４画像から前記第２画像を検出すること、
    前記第２画像に基づいて前記保存先から前記編集内容を取得すること、及び、
    前記第４画像と前記編集内容とを第２画面に表示する第３表示処理を行うことを含み、
    前記編集装置は、前記第１画面に前記第１動画像が前記第１画像の背景画像として表示された状態で前記第１動画像の画質を調整することにより前記第１画面内を編集し、
    前記第３表示処理は、
    前記第２画面に前記第４画像を含む第２動画像を表示する第３処理と、
    前記編集装置によって調整された前記画質を前記第２動画像内での前記第４画像の背景画像に適用する第４処理と、を含む
    画像処理方法。
33. 第１画像を第１画面に表示し、かつ、前記第１画像の背景画像として第１動画像を前記第１画面に表示すること、及び、
    前記第１画面に前記第１画像と前記第１動画像とが表示された状態で、与えられた指示に応じて前記第１画面内を編集することを含む編集処理をコンピュータに実行させるためのプログラム。
34. 請求項８又は請求項９に記載の編集装置から出力された前記第３画像が印刷されて得られた印刷物を撮像することにより、前記印刷物を示す第４画像を取得すること、
    前記第４画像から前記第２画像を検出すること、
    前記第２画像に基づいて前記保存先から前記編集内容を取得すること、
    前記第４画像と前記編集内容とを第２画面に表示する第１表示処理を行うこと、
    前記第２画像と前記編集内容とを対応付けた履歴情報を保持すること、
    前記履歴情報を保持している状態で前記第４画像から前記第２画像を検出した場合に、検出した前記第２画像に対応する前記編集内容を前記履歴情報から取得すること、及び、
    前記履歴情報から取得した前記編集内容に対応する前記第２画像を含む前記第４画像と、前記履歴情報から取得した前記編集内容とを前記第２画面に表示する第２表示処理を行うことを含む画像処理をコンピュータに実行させるためのプログラム。
35. 画像処理をコンピュータに実行させるためのプログラムであって、
    前記画像処理は、
    請求項８又は請求項９に記載の編集装置から出力された前記第３画像が印刷されて得られた印刷物を撮像することにより、前記印刷物を示す第４画像を取得すること、
    前記第４画像から前記第２画像を検出すること、
    前記第２画像に基づいて前記保存先から前記編集内容を取得すること、及び、
    前記第４画像と前記編集内容とを第２画面に表示する第３表示処理を行うことを含み、
    前記編集装置は、前記第１画面に前記第１動画像が前記第１画像の背景画像として表示された状態で前記第１動画像の画質を調整することにより前記第１画面内を編集し、
    前記第３表示処理は、
    前記第２画面に前記第４画像を含む第２動画像を表示する第３処理と、
    前記編集装置によって調整された前記画質を前記第２動画像内での前記第４画像の背景画像に適用する第４処理と、を含む
    プログラム。