JP2021015346A - 情報処理方法、画像処理装置、及びプログラム - Google Patents

Abstract

【課題】高画質なアルバムを作成するための処理時間を短縮すること。【解決手段】アルバム作成アプリケーション５０が、画像配置画面２０及び画像選択画面３０を表示し、画像群の中からユーザが選択した画像データを、画像配置画面２０においてユーザが選択した画像スロット２１に配置する。注文が確定したアルバムデータに含まれる画像スロット２１に配置された各画像データについて、高画質印刷の対象であるか否か解析する。解析結果に基づき、アルバムデータに含まれる画像データに対して選択的に解像度を上げるアップサンプリングを行う。画像印刷部へとアルバムデータを送信する。【選択図】図１

Description

本開示の技術は、アルバムデータの作成を行うための技術に関する。

近年、デジタルカメラ等で撮影されて得られた画像データからフォトアルバム等の印刷物を作成する際、より高精細の印刷物を作成するニーズが高まっている。高精細の印刷物を作成する手法としては、解像度の高い高画質画像データを使用する方法や、画像データに対して解像度を上げるアップサンプリングと呼ばれる画像処理を施し、高解像度化した画像データを用いる方法等がある。

また、データサイズの大きい画像データを効率よく扱う方法としては、アルバムサンプルとなる確認用のサムネイル画像に低画質画像データを用い、実際の印刷用には高画質画像データを用いてフォトアルバムを作成する方法がある（特許文献１参照）。

特開２００７−１９４９６６号公報

しかしながら、画像データを用いて印刷するためには、画像データが格納されている端末装置から印刷を行う印刷装置に画像データを転送する必要があるが、高画質画像データはデータサイズが大きいため、そのデータ転送には時間がかかる。これに対し、データ転送時の画像データをデータサイズの小さい低画質画像データにし、データ転送後に画像データの解像度を上げるアップサンプリングを行うことで、データ転送時間を短縮することが考えられる。しかしこの場合も、アップサンプリングする画像データが増えると、その処理時間が長くなる。

そこで本開示の技術は、上記課題に鑑みて、高画質なアルバムを作成するための処理時間を短縮することを目的とする。

本開示の技術は、アルバムデータに用いられる複数の画像それぞれの特性を解析する画像解析工程と、前記画像解析工程での解析結果に基づき、前記複数の画像のうち、前記特性が所定の条件を満たす画像の画素数を変更する画像変換工程と、前記画像変換工程で画素数が変更された前記画像を含むアルバムデータを送信する送信工程と、を備えたことを特徴とする情報処理方法である。

本開示の技術によれば、高画質なアルバムを作成するための処理時間を短縮することができる。

印刷システムの構成図である。 実施形態１のフローチャート図である。 実施形態１のフローチャート図である。 実施形態１のアプリケーションにおける画像選択・配置ＵＩ図である。 アルバムの表表紙の概略図である。 アルバムの裏表紙の概略図である。 アルバムの概略図である。 実施形態２のフローチャート図である。 実施形態３のフローチャート図である。 実施形態４のフローチャート図である。 実施形態５のフローチャート図である。 実施形態６のフローチャート図である。

以下、本開示の技術に係る印刷装置及び印刷方法を図面に則して説明する。

（情報処理装置）
図１に、本開示の技術に係る情報処理システム１０００の構成図を示す。まず図１を用いて、本開示の技術において用いる情報処理装置１００４の構成について説明する。

情報処理装置１００４は、ＲＯＭ１００９、ＲＡＭ１０１０、ＣＰＵ１０１１を備える。また、プリンタ１００５、モニタ１００６、入力装置１００７、記憶装置１００８等の外部装置、及びインターネット等のネットワーク１００３と接続するための入出力インターフェース（不図示）を備える。

ＣＰＵ１０１１は、中央演算装置であり、記憶装置１００８やＲＯＭ１００９、ＲＡＭ１０１０に記憶されているオペレーションシステムプログラム（以下、ＯＳと略す）を実行することにより情報処理装置１００４全体の制御を行う。また、ＣＰＵ１０１１は、ＲＯＭ１００９やＲＡＭ１０１０に記憶されているプログラムを実行することによって、入力されたデータに基づき演算を行い、データを加工して出力したり、各ハードを制御したりして、情報処理装置１００４の各機能を実現する。ＲＯＭ１００９は読み出し専用メモリであり、各プログラムが格納されている。ＲＡＭ１０１０は、ランダムアクセスメモリであり、ＣＰＵ１０１１のワークメモリとして使用されるが、不揮発性のＲＡＭであれば各プログラムを格納することもできる。

情報処理装置１００４は、ＲＯＭ１００９等に格納されたアルバム作成アプリケーション５０を備えており、アルバム作成アプリケーション５０により画像データの画像が配置されたアルバムに対応するアルバムデータを生成することができる。また情報処理装置１００４は、生成したアルバムデータを印刷データとしてプリンタ１００５に出力することや、ネットワーク１００３を介して外部サーバ１００２にアップロードすることが可能である。なお本開示では、アルバムには、フォトアルバムやフォトブックが含まれる。

ネットワーク１００３は、情報処理装置１００４、外部サーバ１００２の送信部および受信部と接続されており、接続されているそれぞれの情報の伝達を行うための通信網である。

外部サーバ１００２は、プリンタ１００１と接続するための入出力インターフェース（不図示）を有しており、入出力インターフェースを介してプリンタ１００１が接続されている。

情報処理装置１００４で作成されたアルバムデータは、ネットワーク１００３を介して外部サーバ１００２にアップロードされる。外部サーバ１００２では、アップロードされたアルバムデータが印刷可能であれば、プリンタ１００１に出力する。例えば、外部サーバ１００２はアルバム受注・管理サーバであり、ユーザにより情報処理装置１００４で作成したアルバムデータがアップロードされ、必要なアルバム購入手続きが取られると、プリンタ１００１を用いて出力する。その後、出力された印刷物は製本され、ユーザの手元に届けられる。

プリンタ１００５は、情報処理装置１００４から直接印刷するためのプリンタである。アルバムは、ユーザが所有し、情報処理装置１００４に接続されたプリンタ１００５で印刷し、ユーザが製本し、アルバムに仕上げてもよい。

モニタ１００６は、情報処理装置１００４から出力された画像情報を表示する表示装置である。

入力装置１００７は、ユーザが情報処理装置１００４に入力を行うためのキーボードやポインティングデバイス等の入力装置である。入力装置１００７には、モニタと一体となっており、モニタに直接触れ入力する構成の装置もある。

記憶装置１００８は、画像データや、画像を配置するための画像配置枠（スロット）を有するテンプレート等を保存するＨＤＤやＳＳＤ等の記憶装置である。

なお、図１に示すブロック図では、情報処理装置１００４は、モニタ１００６、入力装置１００７、及び記憶装置１００８と別の構成物として記載されている。しかし、情報処理装置１００４は、モニタ１００６、入力装置１００７、記憶装置１００８（情報処理装置のＲＡＭと共有となる場合もある）が情報処理装置１００４の構成物として情報処理装置１００４と一体化されているものであってもよい。

（印刷装置及び印刷方法）
＜実施形態１＞
続いて、本実施形態のアルバムデータ生成方法について図１〜７を用いて説明する。ここで、図２は本実施形態の情報処理システムにおけるフローチャート、図３は図２における条件分岐についてより詳細に記したフローチャートである。また、図４はアルバム作成アプリケーション５０における画像選択・配置ＵＩ、図５〜７は成果物の例としてのアルバムの概略図である。図５はアルバム１０を表側から見た斜視図、図６は裏側から見た斜視図、図７は開いた状態を示す斜視図であり、１１は表表紙に配置された画像、１２は裏表紙に配置された画像、１３は中身のページに配置された画像を表している。

本実施形態では、アルバム１０を作成するために、ユーザが情報処理装置１００４内のアルバム作成アプリケーション５０を用いて画像データを選択・配置してアルバムデータを生成し、アルバムデータを外部サーバ１００２にアップロードする。

ここで、図４における２０は画像配置画面（画像レイアウト画面）、２１は画像が配置される各々の画像スロットを表し、３０は画像選択画面、３１〜３８は選択可能な画像群である。

このようなアルバム作成の過程を図２のフローチャート及び図４のアルバム作成アプリケーション５０のＵＩを用いて説明する。

初めにＳ１０１において、アルバム作成アプリケーション５０が、画像配置画面２０及び画像選択画面３０を表示し、複数の画像の中からユーザが選択した画像データを、画像配置画面２０においてユーザが選択した画像スロット２１に配置する。このようにして、アルバム作成アプリケーション５０が、アルバムデータを生成する。画像スロット２１に配置された画像データは、プレビュー画面にてユーザによって確認されると共に、必要に応じてユーザによる編集が可能である。その編集には、例えばアルバム内における画像の配置位置の入れ替えや、アルバム内に配置されている画像をアルバムに配置されていない別の画像に置き換える処理等が含まれる。

また、画像データの選択・配置が行われた後、ユーザにより注文が行われることで、画像データとそれに対応する画像スロットとが確定する。そのため、Ｓ１０１においてアルバム作成アプリケーション５０は、アルバムの注文のための注文処理を実行する。具体的には、アルバム作成アプリケーション５０は、アルバム印刷の決済処理や配送先の入力等を行うＷｅｂサイトにアクセスするための処理を、注文処理として実行する。そのアクセスのために、アルバム作成アプリケーション５０は、例えば該ＷｅｂサイトのＵＲＬをＷｅｂブラウザに渡し、該Ｗｅｂブラウザにより該Ｗｅｂサイトにアクセスするようにしてもよい。そして、上記のＷｅｂサイトにおいて配送先等の各種の情報や決済のための情報が入力され、ユーザにより注文ボタンが押下されると、注文が確定する。

上記の注文処理により注文が確定すると、Ｓ１０２に処理が進む。Ｓ１０２において、アルバム作成アプリケーション５０が、注文が確定したアルバムデータに含まれる画像スロット２１に配置された各画像データについて、高画質印刷の対象であるか否か解析する。そして後述する図３で説明する所定の条件を満たすか否かに基づいて、画像データを高画質印刷の対象であると判別した場合Ｓ１０３に移行し、画像データを高画質印刷の対象でないと判別した場合Ｓ１０４に移行する。

Ｓ１０３において、アルバム作成アプリケーション５０が、アルバムデータに含まれる画像データのうち、解析結果に基づき高画質印刷の対象と判別された画像データに対して解像度を上げる（画素数を増やす）アップサンプリングを行う。Ｓ１０３におけるアップサンプリングの方法としては、種々の方法を用いることができる。例えば、縦横それぞれ２倍の画素数になるようアップサンプリングする場合、アップサンプリングの前の画像において隣り合う２画素の平均の画素値（輝度値等）を持つ画素を、該２画素の間の画素として設定する。また、アップサンプリングの前の画像において縦２×横２に並んだ４画素の中心の画素として、該４画素の平均の画素値（輝度値等）を持つ画素を設定する。以降の実施形態におけるアップサンプリングについても同様である。

Ｓ１０４において、アルバム作成アプリケーション５０が、画像印刷部、例えばプリンタ１００１へとアルバムデータを送信する。

最後にＳ１０５において、プリンタ１００１が、受信したアルバムデータを用いて印刷を行い、成果物としてのアルバムを完成させる。

尚、画像データの解像度を上げる（画素数を増やす）アップサンプリングの手法としては、ディープラーニングを用いたフィルタを使用してエッジの強調を行っている。また、本実施形態では一例として注文後に解析が行われているが、画像データがユーザによって画像スロット２１に配置された時点で注文前に解析を行うようにしてもよい。

ここで、本開示の技術の特徴である画像解析ステップＳ１０２の詳細について、図３を用いて説明する。図３は、図２の画像解析ステップＳ１０２をより詳細に記したフローチャートであり、画像解析において用いる、画像データが有する特性の具体的な判別条件として９つの例を示している。即ち、Ｓ１０１においてアルバムに配置された複数の画像のそれぞれについて、図３に示す判定処理が繰り返し実行される。

まずＳ１０２１において、アルバム作成アプリケーション５０は、判定対象の画像データが表表紙用の画像１１もしくは裏表紙用の画像１２として使用されるか否かを判別する。該当する場合はＳ１０３に移行し、上述のようにその画像データに対してアップサンプリングの画像変換が行われる。表表紙用の画像１１や裏表紙用の画像１２は、ユーザの最も目につき易い箇所に配置されるため、高画質化の利点を実感しやすく、また画像の枚数も少ないため高画質化に伴うデータサイズ増加の影響も少ない。そのため、これらの画像に高解像度画像データを用いるメリットが大きい。ステップＳ１０２１で表紙（表表紙又は裏表紙）用の画像データに該当しないと判別した場合は、Ｓ１０２２に移行する。

Ｓ１０２２において、アルバム作成アプリケーション５０は、画像データが配置される画像スロット２１のサイズに合わせて画像の拡大・縮小が行われた際の画像データの解像度が所定の閾値未満であるか否かを判別する。該当する場合はＳ１０３に移行し、上述のようにその画像データに対してアップサンプリングの画像変換が行われる。本実施形態においては、例えば、解像度の閾値を３００ｄｐｉに設定して解析を行い、３００ｄｐｉ未満の画像データを３００ｄｐｉにアップサンプリングすることで高画質化が図られる。一例として、図４における画像３１を画像スロット２１に配置した際の解像度が１５０ｄｐｉであった場合、上述のように３００ｄｐｉへとアップサンプリングが行われる。ステップＳ１０２２で画像スロット２１に配置後の画像データの解像度が所定の閾値以上と判別された場合は、Ｓ１０２３に移行する。

ステップＳ１０２３において、アルバム作成アプリケーション５０は、画像スロット２１に配置された画像データが自然画像を含むか否かを判別する。該当する場合はＳ１０３に移行し、上述のようにその画像データに対してアップサンプリングの画像変換が行われる。本実施形態においては、画像データの色空間が８ｂｉｔＧｒａｙ、２４ｂｉｔＲＧＢ、４８ｂｉｔＲＧＢのいずれかである場合、その画像データは自然画像を含むと判別し、画像データの解像度を２倍にアップサンプリングすることで高画質化が図られる。例えば、図４における画像３２の画像スロット２１に配置後の解像度が３００ｄｐｉであり、かつ上記いずれかの色空間に該当する場合、上述のように６００ｄｐｉへとアップサンプリングが行われる。ステップＳ１０２３で画像データが自然画像を含まなかった場合は、Ｓ１０２４に移行する。自然画像の場合、アップサンプリングの効果がより視認しやすいため、Ｓ１０２３における判定が行われる。

Ｓ１０２４において、アルバム作成アプリケーション５０は、画像データの周波数成分の解析を行い、高周波成分が閾値以上であるか否かを判別する。該当する場合はＳ１０３に移行し、上述のようにその画像データに対してアップサンプリングの画像変換が行われる。例えば、図４における画像データ３３の高周波成分が閾値以上である場合、アップサンプリングが行われ高画質化が図られる。アップサンプリングは画素値の変化が密な画像データに対して特に効果的であるため、高画質化の効果をより実感することができる。尚、周波数成分の解析手法の一例としては、フーリエ変換を行い、エッジ部近傍の画素値の差分により解析を行っている。ステップＳ１０２４で画像データの高周波成分が閾値未満であった場合は、Ｓ１０２５に移行する。なお、ステップＳ１０２４における判定の具体的方法として種々の方法を用いることができる。例えば、判定対象の画像の画素値を周波数のデータに変換し、該データ全体のデータ量における、所定の周波数以上のデータ量の割合が、所定の割合以上の場合に、該画像の高周波成分が閾値以上と判定される。

次に、Ｓ１０２５において、アルバム作成アプリケーション５０は、画像の撮影情報（Ｅｘｉｆ情報）の解析を行い、高品位の撮影条件で撮影した画像データであるか否かを判別する。該当する場合はＳ１０３に移行し、上述のようにその画像データに対してアップサンプリングの画像変換が行われる。ここで、解析に使用する撮影条件とは、撮影時に画像データに記録される情報であり、撮影に使用したカメラの種類やメーカ、レンズの種類、撮影モード（オートもしくはマニュアル）等である。画像データの保有するこれらの撮影情報（Ｅｘｉｆ情報）を元に解析が行われる。例えば、図４における画像３４が、特定のベンダーが提供する特定のシリーズである所定のカメラあるいは所定のレンズで撮影して得られた画像である場合、上述のようにアップサンプリングが行われ高画質化が図られるようにしてもよい。ステップＳ１０２５で高品位の撮影条件で撮影した画像データに該当しなかった場合は、Ｓ１０２６に移行する。

次に、Ｓ１０２６において、アルバム作成アプリケーション５０は、ユーザが高画質化の対象として選択した画像データであるか否かを判別する。該当する場合はＳ１０３に移行し、上述のようにその画像データに対してアップサンプリングの画像変換が行われる。例えば、図４おける画像データ３５がユーザにとって好みの画像であり高画質化の対象として選択した場合、アップサンプリングを行うことで高画質化が図られる。尚、ユーザが高画質化の対象として選択した画像データであるか否かは、画像レイアウト画面２０の各々の画像スロット２１毎にチェックボックスを設けて変更可能としてもよいし、他の画面から変更できるようにしてもよい。ステップＳ１０２６でユーザが高画質化の対象として選択した画像データに該当しなかった場合は、Ｓ１０２７に移行する。

次に、Ｓ１０２７において、アルバム作成アプリケーション５０は、予め設定された特定の顔画像を含む画像データであるか否かを判別する。該当する場合はＳ１０３に移行し、上述のようにその画像データに対してアップサンプリングの画像変換が行われる。例えば、特定の顔として子供やペット等の顔が設定された場合、それらの顔画像を含む画像データがアップサンプリングの対象として識別され、上述のようにアップサンプリングが行われることで高画質化が図られる。ステップＳ１０２７で特定の顔画像を含む画像データに該当しなかった場合は、Ｓ１０２８に移行する。

次に、Ｓ１０２８において、アルバム作成アプリケーション５０は、予め設定された特定の表情の人を含む画像データであるか否かを判別する。該当する場合はＳ１０３に移行し、上述のようにその画像データに対してアップサンプリングの画像変換が行われる。例えば、特定の表情として笑顔等の表情が設定された場合、その表情の顔画像を含む画像データがアップサンプリングの対象として識別され、上述のようにアップサンプリングが行われることで高画質化が図られる。ステップＳ１０２８で特定の表情を含む画像データに該当しなかった場合は、Ｓ１０２９に移行する。

次に、Ｓ１０２９において、アルバム作成アプリケーション５０は、Ｓｏｃｉａｌ Ｎｅｔｗｏｒｋｉｎｇ Ｓｅｒｖｉｃｅ（ＳＮＳ）から取得した画像データであるか否かを判別する。該当する場合はＳ１０３に移行し、上述のようにその画像データに対してアップサンプリングの画像変換が行われる。例えば、図４における画像スロット２１に配置された画像データがＳＮＳから取得した画像データである場合、アップサンプリングの対象として識別され、上述のようにアップサンプリングが行われることで高画質化が図られる。ユーザがＳＮＳにアップロードしている画像データは特にユーザにとって好みの画像である可能性が高いことから、これらの画像データを高画質化することによるメリットは大きい。尚、ＳＮＳにはＦａｃｅｂｏｏｋ（登録商標）やＩｎｓｔａｇｒａｍＶ（登録商標）等に代表される写真共有アプリケーションを含めてもよい。本実施形態のアルバム作成アプリケーション５０は、ネットワーク１００３を介してＳＮＳから画像データを取得する機能を備えている。

最後に、上述の全ての解析による判別条件に該当しなかった画像データについては、画像変換が行われずにＳ１０４に移行し、元の解像度のままアルバムデータに組み込まれて画像印刷部へと送信される。

これにより、高画質化の対象とした画像データのみを高解像度変換することで、全体の画像データのサイズを最適化することができる。

尚、上述の９つの解析条件の順序は、本実施形態の順序に基づくことにより高品位でユーザビリティの高いアルバム作成を行うことができる。つまり、最初のＳ１０２１及びＳ１０２２はアルバム作成に纏わる特徴を表しており、高品位なアルバムの作成に直結するものである。また、続くＳ１０２３〜Ｓ１０２５は設定条件に応じて自動検知が可能となることから、これらの判別を条件分岐の前半で行うことによりユーザに不必要な選択を促すことなくユーザビリティの高いアルバム作成を行うことができる。さらには、Ｓ１０２６〜Ｓ１０２９においてユーザの任意の選択に応じて判別を行うことが可能であることから、ユーザの意図を考慮したユーザビリティの高いアルバム作成を行うことができる。

但し、上述の９つの解析条件の順序はこれに限定するものではなく、任意で順序を変更してもよいし、不要な解析条件を省いてもよい。

上述のように本実施形態に係る情報処理システムにおいては、所定の条件を満たす画像データにのみ高解像度化する画像変換（アップサンプリング）を行い、その他の画像データは画像変換を行わずに元の解像度のまま使用する。これにより、高品位なアルバムの作成と、アルバムデータの転送及び画像変換の処理時間の短縮とを両立することができる。

なお、上述した例では、Ｓ１０１においてアルバムの注文が確定した後、アルバム内の各画像についてＳ２０２、Ｓ２０３の処理が実行されていた。即ち、印刷対象となることが確定した画像に対してＳ２０２、Ｓ２０３の処理が実行される。そのため、例えばある画像に対してＳ２０３の処理が実行された後に、その画像が別の画像に置き換えられ、印刷対象から外れることで、Ｓ２０２、Ｓ２０３における処理が無駄になることを防ぐことができる。

一方、例えば画像の置き換えが可能な状態において、Ｓ２０２、Ｓ２０３の処理が実行されてもよい。このときＳ２０１においてはじめに画像の選択、配置が実行された後、各画像についてＳ２０２の処理（及びＳ２０２の判定結果によってはＳ２０３の処理）が実行され、Ｓ２０３でのアップサンプリング後の画像が配置されたアルバムがプレビュー表示される。そして、画像の入れ替えが行われると、入れ替え後の画像について、Ｓ２０２の処理（及びＳ２０２の判定結果によってはＳ２０３の処理）が実行される。この処理により、アップサンプリングの結果を反映したプレビュー表示により、ユーザはアルバムの仕上がりをより正確に把握することができる。さらに、画像の入れ替えが行われると、入れ替え後の画像についても、アップサンプリングが反映されたプレビュー表示を行うことができる。

＜実施形態２＞
次に、本開示の第２の実施形態について、図８のフローチャート及び図４のアルバム作成アプリケーションのＵＩを用いて説明する。ここで、図４におけるＵＩ構成は第１の実施形態と同様であり、詳細な説明は省略する。

Ｓ２０１において、Ｓ１０１と同様に、アルバム作成アプリケーション５０が、画像配置画面２０及び画像選択画面３０を表示し、画像群の中からユーザが選択した画像データを、画像配置画面２０においてユーザが選択した画像スロット２１に配置する。画像データの選択・配置が行われた後、ユーザにより注文が行われることで、画像データとそれに対応する画像スロットとが確定する。

次にＳ２０２において、Ｓ１０２と同様に、アルバム作成アプリケーション５０が、注文が確定したアルバムデータに含まれる画像スロット２１に配置された各画像データについて、高画質印刷の対象であるか否か解析する。そして画像データを高画質印刷の対象でないと判別した場合Ｓ２０３に移行し、画像データを高画質印刷の対象であると判別した場合Ｓ２０４に移行する。

Ｓ２０３において、アルバム作成アプリケーション５０が、解析結果に基づき、アルバムデータに含まれる画像データに対して選択的に解像度を下げる（画素数を減らす）ダウンサンプリングを行う。なお、ダウンサンプリングの方法としては種々の方法を用いることができる。例えば、画像において所定間隔に画素を削除し、つまり画素を間引くことで、画素数を減らす方法が用いられる。以降の実施形態におけるダウンサンプリングについても同様である。

Ｓ２０４において、アルバム作成アプリケーション５０が、画像印刷部の外部サーバ１００２へとアルバムデータを送信する。

最後にＳ２０５において、外部サーバ１００２が、受信したアルバムデータを用いて画像印刷部のプリンタ１００１にて印刷を行い、成果物としてのアルバムを完成させる。

本開示の技術の特徴である画像解析ステップＳ２０２における高画質印刷の対象の画像データであるか否かの解析方法は、既に実施形態１で図３を用いて説明しているものと同様であるため、詳細な説明は省略する。但し、Ｓ２０２は、高画質印刷の対象の画像データでない場合に画像変換を行うＳ２０３に移行させ、高画質印刷の対象の画像データである場合に画像変換を行わないＳ２０４に移行させる点については実施形態１のＳ１０２とは異なる。

上述のように本実施形態に係る情報処理システムにおいては、高画質印刷の対象ではない画像データにのみを低解像度化する画像変換（ダウンサンプリング）を行い、その他の画像データは画像変換を行わずに元の解像度のまま使用する。これにより、高品位なアルバムの作成と、アルバムデータの転送及び画像変換の処理時間の短縮とを両立することができる。

なお、実施形態２についても、実施形態１と同様に、Ｓ２０１においてアルバムの注文が確定した後、アルバム内の各画像についてＳ２０２の処理（およびＳ２０２の判定結果によってはＳ２０３の処理）が実行される。ただし、実施形態１と同様に、例えば画像の置き換えが可能な状態において、Ｓ２０２、Ｓ２０３の処理が実行されてもよい。

＜実施形態３＞
次に、本開示の第３の実施形態について、図９のフローチャート及び図４のアルバム作成アプリケーションのＵＩを用いて説明する。ここで、図４におけるＵＩ構成は第１の実施形態と同様であり、詳細な説明は省略する。

本実施形態は、第１の実施形態に対し、高画質印刷の対象画像であるか否か解析された際（Ｓ３０２）の画像変換の工程をアルバム作成アプリケーション５０から画像印刷部へと変更したものである。

まずＳ３０１において、Ｓ１０１と同様に、アルバム作成アプリケーション５０が、画像配置画面２０及び画像選択画面３０を表示し、画像群の中からユーザが選択した画像データを、画像配置画面２０においてユーザが選択した画像スロット２１に配置する。画像データの選択・配置が行われた後、ユーザにより注文が行われることで、画像データとそれに対応する画像スロットとが確定する。

Ｓ３０２において、Ｓ１０２と同様に、アルバム作成アプリケーション５０が、注文が確定したアルバムデータに含まれる画像スロット２１に配置された各画像データについて、高画質印刷の対象であるか否か解析する。

Ｓ３０３において、アルバム作成アプリケーション５０が、解析結果に基づいてアルバムデータに含まれる画像データに対して選択的に識別フラグを設ける。

Ｓ３０４において、アルバム作成アプリケーション５０が、画像データに対して画像変換を行わずにアルバムデータを画像印刷部、例えば図１に示すプリンタ１００１へと送信する。

その後、Ｓ３０５において、プリンタ１００１に実装されたアプリケーションが、送信されたアルバムデータに含まれる画像データ群の識別フラグの有無を確認する。

Ｓ３０６において、プリンタ１００１に実装されたアプリケーションが、識別フラグに基づいて、アルバムデータに含まれる画像データのうち高画質印刷の対象の画像データに対して選択的に画像の解像度を上げるアップサンプリングを行う。

最後にＳ３０７において、プリンタ１００１が、アップサンプリングされた画像を含むアルバムデータを用いて印刷を行い、成果物としてのアルバムを完成させる。

本開示の技術の特徴である画像解析ステップＳ３０２の詳細については、既に実施例１で図３を用いて説明しているものと同様であるため、詳細な説明は省略する。

上述のように本実施形態に係る情報処理システムにおいては、高画質印刷の対象画像のみを高解像度化する画像変換（アップサンプリング）を行い、その他の画像データは画像変換を行わずに元の解像度のまま使用する。これにより、高品位なアルバムの作成と、アルバムデータの転送及び画像変換の処理時間の短縮とを両立することができる。

なお、本実施形態は、情報処理装置１００４が備えるアルバム作成アプリケーション５０と、プリンタ１００１が備えるアプリケーションとが協働することで実現される構成となっている。

なお、実施形態３についても、実施形態１と同様に、Ｓ３０１においてアルバムの注文が確定した後、アルバム内の各画像についてＳ３０２の処理（およびＳ３０２の判定結果によってはＳ３０３の処理）が実行される。ただし、実施形態１と同様に、例えば画像の置き換えが可能な状態において、Ｓ３０２、Ｓ３０３の処理が実行されてもよい。

＜実施形態４＞
次に、本開示の第４の実施形態について、図１０のフローチャート及び図４のアルバム作成アプリケーションのＵＩを用いて説明する。ここで、図４におけるＵＩ構成は第１の実施形態と同様であり、詳細な説明は省略する。

本実施形態は、第３の実施形態に対し、高画質印刷の対象画像であるか解析された際（Ｓ４０２）の画像変換の方法が異なるものである。

まずＳ４０１においてＳ１０１と同様に、アルバム作成アプリケーション５０が、画像配置画面２０及び画像選択画面３０を表示し、画像群の中からユーザが選択した画像データを、画像配置画面２０においてユーザが選択した画像スロット２１に配置する。画像データの選択・配置が行われた後、ユーザにより注文が行われることで、画像データとそれに対応する画像スロットとが確定する。

Ｓ４０２において、Ｓ１０２（図３のＳ１０２１〜Ｓ１０２９）と同様に、アルバム作成アプリケーション５０が、注文が確定したアルバムデータに含まれる画像スロット２１に配置された各画像データについて、高画質印刷の対象であるか解析する。

Ｓ４０３において、アルバム作成アプリケーション５０が、解析結果に基づいてアルバムデータに含まれる、高画質印刷の対象の画像データに対して選択的に識別フラグを設ける。

Ｓ４０４において、アルバム作成アプリケーション５０が、画像データに対して画像変換を行わずにアルバムデータを画像印刷部、例えば図１に示すプリンタ１００１へと送信する。

その後Ｓ４０５において、プリンタ１００１に実装されたアプリケーションが、送信されたアルバムデータに含まれる画像データ群の識別フラグの有無を確認する。

Ｓ４０６において、プリンタ１００１に実装されたアプリケーションが、識別フラグに基づいて、アルバムデータに含まれる画像データのうち高画質印刷の対象でない画像データに対して選択的に画像の解像度を下げるダウンサンプリングを行う。

最後にＳ４０７において、プリンタ１００１が、ダウンサンプリングされた画像を含むアルバムデータを用いて印刷を行い、成果物としてのアルバムを完成させる。

本開示の技術の特徴である画像解析ステップＳ４０２の詳細については、既に実施例１で図３を用いて説明しているものと同様であるため、詳細な説明は省略する。

上述のように本実施形態に係る情報処理システムにおいては、高画質印刷の対象ではない画像のみを低解像度化する画像変換（ダウンサンプリング）を行い、その他の画像データは画像変換を行わずに元の解像度のまま使用する。これにより、高品位なアルバムの作成と、画像変換及び印刷の処理時間の短縮とを両立することができる。

このように、本実施形態は、情報処理装置１００４が備えるアルバム作成アプリケーション５０と、プリンタ１００１が備えるアプリケーションとが協働することで実現される構成となっている。

なお、実施形態４についても、実施形態１と同様に、Ｓ４０１においてアルバムの注文が確定した後、アルバム内の各画像についてＳ４０２の処理（およびＳ４０２の判定結果によってはＳ４０３の処理）が実行される。ただし、実施形態１と同様に、例えば画像の置き換えが可能な状態において、Ｓ４０２、Ｓ４０３の処理が実行されてもよい。

＜実施形態５＞
次に、本開示の第５の実施形態について、図１１のフローチャート及び図４のアルバム作成アプリケーションのＵＩを用いて説明する。ここで、図４におけるＵＩ構成は第１の実施形態と同様であり、詳細な説明は省略する。

本実施形態は、第３の実施形態に対し、高画質印刷の対象画像であるか解析された際（Ｓ５０２）の画像変換の工程を印刷部から画像処理装置としての外部サーバ（管理サーバ）１００２へと変更したものである。

まずＳ５０１において、Ｓ１０１と同様に、アルバム作成アプリケーション５０が、画像配置画面２０及び画像選択画面３０を表示し、画像群の中からユーザが選択した画像データを、画像配置画面２０においてユーザが選択した画像スロット２１に配置する。画像データの選択・配置が行われた後、ユーザにより注文が行われることで、画像データとそれに対応する画像スロットとが確定する。

Ｓ５０２において、Ｓ１０２（図３のＳ１０２１〜Ｓ１０２９）と同様に、アルバム作成アプリケーション５０が、注文が確定したアルバムデータに含まれる画像スロット２１に配置された各画像データについて、高画質印刷の対象画であるか否か解析する。

Ｓ５０３において、アルバム作成アプリケーション５０が、解析結果に基づいてアルバムデータに含まれる、高画質印刷の対象の画像データに対して選択的に識別フラグを設ける。

Ｓ５０４において、アルバム作成アプリケーション５０が、画像データに対して画像変換を行わずにアルバムデータを管理サーバである外部サーバ１００２へと送信する。

その後、Ｓ５０５において、外部サーバ１００２に実装されたアプリケーションが、送信されたアルバムデータに含まれる画像データ群の識別フラグの有無を確認する。

Ｓ５０６において、外部サーバ１００２に実装されたアプリケーションが、識別フラグに基づいて、アルバムデータに含まれる画像データのうち高画質印刷の対象の画像データに対して選択的に画像の解像度を上げるアップサンプリングを行う。

Ｓ５０７において、外部サーバ１００２に実装されたアプリケーションが、選択的に画像変換が行われた画像データを含むアルバムデータを印刷部、例えばプリンタ１００１へと送信される。

最後にＳ５０８において、プリンタ１００１が、アップサンプリングされた画像データを含むアルバムデータを用いて印刷を行い、成果物としてのアルバムを完成させる。

本開示の技術の特徴である画像解析ステップＳ５０２の詳細については、既に実施例１で図３を用いて説明しているものと同様であるため、詳細な説明は省略する。

上述のように本実施形態に係る情報処理システムにおいては、高画質印刷の対象画像のみを高解像度化する画像変換（アップサンプリング）を行い、その他の画像は画像変換を行わずに元の解像度のまま使用している。これにより、高品位なアルバムの作成と、アルバムデータ転送及び画像変換の処理時間の短縮とを両立することができる。さらには、アルバムデータのデータサイズの低減により、管理サーバのストレージ容量削減による管理コスト低減も図ることができる。

このように、本実施形態は、情報処理装置１００４が備えるアルバム作成アプリケーション５０と、管理サーバである外部サーバ１００２が備えるアプリケーションとが協働することで実現される構成となっている。

なお、実施形態５についても、実施形態１と同様に、Ｓ５０１においてアルバムの注文が確定した後、アルバム内の各画像についてＳ５０２の処理（およびＳ３０２の判定結果によってはＳ３０３の処理）が実行される。ただし、実施形態１と同様に、例えば画像の置き換えが可能な状態において、Ｓ５０２、Ｓ５０３の処理が実行されてもよい。

＜実施形態６＞
次に、本開示の第６の実施形態について、図１２のフローチャート及び図４のアルバム作成アプリケーションのＵＩを用いて説明する。ここで、図４におけるＵＩ構成は第１の実施形態と同様であり、詳細な説明は省略する。

本実施形態は、第５の実施形態に対し、高画質印刷の対象画像であるか解析された際（Ｓ６０２）の画像変換の方法が異なるものである。

まずＳ６０１において、Ｓ１０１と同様に、アルバム作成アプリケーション５０が、画像配置画面２０及び画像選択画面３０を表示し、画像群の中からユーザが選択した画像データを、画像配置画面２０においてユーザが選択した画像スロット２１に配置する。画像データの選択・配置が行われた後、ユーザにより注文が行われることで、画像データとそれに対応する画像スロットとが確定する。

Ｓ６０２において、Ｓ１０２（図３のＳ１０２１〜Ｓ１０２９）と同様に、アルバム作成アプリケーション５０が、注文が確定したアルバムデータに含まれる各画像スロット２１に配置された画像データについて、高画質印刷の対象画像であるか否か解析する。

Ｓ６０３において、アルバム作成アプリケーション５０が、解析結果に基づいてアルバムデータに含まれる、高画質印刷の対象の画像データに対して選択的に識別フラグを設ける。

Ｓ６０４において、アルバム作成アプリケーション５０が、画像データに対して画像変換を行わずにアルバムデータを管理サーバである外部サーバ１００２へと送信する。

その後、Ｓ６０５において、外部サーバ１００２に実装されたアプリケーションが、送信されたアルバムデータに含まれる画像データ群の識別フラグの有無を確認する。

Ｓ６０６において、外部サーバ１００２に実装されたアプリケーションが、識別フラグに基づいて、アルバムデータに含まれる画像データのうち高画質印刷の対象でない画像データに対して選択的に画像の解像度を下げるダウンサンプリングを行う。

Ｓ６０７において、外部サーバ１００２に実装されたアプリケーションが、選択的に画像変換が行われた画像データを含むアルバムデータを印刷部、例えばプリンタ１００１へと送信する。

最後にＳ６０８において、プリンタ１００１が、ダウンサンプリングされた画像データを含むアルバムデータを用いて印刷を行い、成果物としてのアルバムを完成させる。

本開示の技術の特徴である画像解析ステップＳ６０２の詳細については、既に実施例１で図３を用いて説明しているものと同様であるため、詳細な説明は省略する。

上述のように本実施形態に係る情報処理システムにおいては、高画質印刷の対象ではない画像のみを低解像度化する画像変換（ダウンサンプリング）を行い、その他の画像は画像変換を行わずに元の解像度のまま使用している。これにより、高品位なアルバムの作成と、アルバムデータの転送及び画像変換の処理時間の短縮とを両立することができる。さらには、アルバムデータのデータサイズの低減により、管理サーバのストレージ容量削減による管理コスト低減も図ることができる。

このように、本実施形態は、情報処理装置１００４が備えるアルバム作成アプリケーション５０と、管理サーバである外部サーバ１００２が備えるアプリケーションとが協働することで実現される構成となっている。

なお、実施形態６についても、実施形態１と同様に、Ｓ６０１においてアルバムの注文が確定した後、アルバム内の各画像についてＳ６０２の処理（およびＳ６０２の判定結果によってはＳ６０３の処理）が実行される。ただし、実施形態１と同様に、例えば画像の置き換えが可能な状態において、Ｓ６０２、Ｓ６０３の処理が実行されてもよい。

尚、上記６つの実施形態ではアルバム（フォトアルバム、フォトブック）の作成を例に構成の説明を行っているが、実施形態としてはアルバムの作成に限定するものではなく、画像を印刷する情報処理システムおよび印刷システム全般に適用可能である。

また、各実施形態では、アップサンプリング又はダウンサンプリングを行う構成としているが、アップサンプリングとダウンサンプリングの両方を行う構成としてもよい。すなわち、高画質印刷の対象であると判別した画像データに対してアップサンプリングし、高画質印刷の対象でないと判別した画像データに対してダウンサンプリングを行うようにしてもよい。

さらに、図９〜図１２に示した処理において高画質印刷の対象画像を判定し、その高画質印刷の対象の画像にフラグを付与する例について説明したが、これに限らない。例えば高画質印刷の対象でない画像を判定し、その高画質印刷の対象でない画像にフラグを付与してもよい。そして、画像およびフラグの送信先の装置において、フラグが付与されていない画像に対してアップサンプリングが実行され、フラグが付与されている画像に対してダウンサンプリングが実行されてもよい。即ち、画像の送信される装置において画素値を変更する対象となる画像を特定可能な情報であればよい。

上述のアップサンプリング等の処理による高解像度の画像データを用いた高精細の印刷物の作成と、処理時間とはトレードオフの関係にある。そのため、フォトアルバムの作成に必要な全ての画像に高画質画像データを用いると、データ転送のための処理時間が長くなり、ユーザの待ち時間が長くなってユーザビリティが悪化することがあった。

これに対し、上述の６つの実施形態のように本開示の技術では、高画質印刷に適する画像であるか否かに基づいて選択的に解像度変換を行うことで、画像の高画質化と、画像群全体のデータサイズの適正化とを図っている。これにより、高品位なアルバムを作成可能であると共に、アルバム作成過程の解像度変換時間の短縮及びデータ転送時間の短縮を実現することができる。以上より、アルバム作成等において高画質化とユーザビリティとを両立する情報処理システムを提供することが可能となる。

（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

５０ ：アルバム作成アプリケーション
１０００ ：印刷システム
１００２ ：外部サーバ（管理サーバ）
１００４ ：情報処理装置

Claims (18)

1. アルバムデータに用いられる複数の画像それぞれの特性を解析する画像解析工程と、
   前記画像解析工程での解析結果に基づき、前記複数の画像のうち、前記特性が所定の条件を満たす画像の画素数を変更する画像変換工程と、
   前記画像変換工程で画素数が変更された前記画像を含むアルバムデータを送信する送信工程と、
   を備えたことを特徴とする情報処理方法。
2. 第１の装置が
   前記画像解析工程において前記解析を実行し、
   前記画像解析工程での解析結果に基づく情報と、前記複数の画像を第２の装置に送信し、
   前記第２の装置が、
   画像変換工程において、前記送信された情報に基づいて、前記送信された複数の画像のうち、前記特性が所定の条件を満たす画像の画素数を変更し、
   前記送信工程において、前記画像変換工程で画素数が変更された前記画像を含むアルバムデータを送信する、
   ことを特徴とする請求項１に記載の情報処理方法。
3. 前記第１の装置は、前記複数の画像と、前記複数の画像のうちの前記特性が前記所定の条件を満たす画像を示す情報とを前記第２の装置に送信し、
   前記第２の装置は、前記複数の画像のうちの、前記特性が前記所定の条件を満たすとして前記送信された情報により示された画像の画素数を変更する、
   ことを特徴とする請求項２に記載の情報処理方法。
4. 前記画像変換工程において、前記特性が前記所定の条件を満たす画像に対して画素数を増やす処理を実行することを特徴とする請求項１乃至３のいずれか１項に記載の情報処理方法。
5. 前記特性は、前記画像が自然画像を含むか否かであり、
   前記画像が自然画像を含む場合、前記画像変換工程において、前記画像の画素数を増やす画像変換が行われることを特徴とする請求項４に記載の情報処理方法。
6. 前記特性は、前記画像の周波数成分であり、
   前記画像の高周波成分が閾値以上の場合、前記画像変換工程において、前記画像の画素数を増やす画像変換が行われることを特徴とする請求項４または５に記載の情報処理方法。
7. 前記特性は、前記画像に撮影時に記録された撮影情報であり、
   前記撮影情報が、前記画像が所定のカメラまたはレンズで撮影された画像であることを示す場合、前記画像変換工程において、前記画像の画素数を増やす画像変換が行われることを特徴とする請求項４乃至６のいずれか１項に記載の情報処理方法。
8. 前記特性は、前記画像がユーザにより選択されたか否かであり、
   前記画像がユーザにより選択された画像である場合、前記画像変換工程において、前記画像の画素数を増やす画像変換が行われることを特徴とする請求項４乃至７のいずれか１項に記載の情報処理方法。
9. 前記特性は、前記画像が所定の顔画像を含むか否かであり、
   前記画像が所定の顔画像を含む場合、前記画像変換工程において、前記画像の画素数を増やす画像変換が行われることを特徴とする請求項４乃至８のいずれか１項に記載の情報処理方法。
10. 前記特性は、前記画像が所定の表情の顔画像を含むか否かであり、
    前記画像が前記所定の表情の顔画像を含む場合、前記画像変換工程において、前記画像の画素数を増やす画像変換が行われることを特徴とする請求項４乃至９のいずれか１項に記載の情報処理方法。
11. 前記特性は、前記画像がＳＮＳから取得した画像であるか否かであり、
    前記画像がＳＮＳから取得した画像である場合、前記画像変換工程において、前記画像の画素数を増やす画像変換が行われることを特徴とする請求項４乃至１０のいずれか１項に記載の情報処理方法。
12. 前記特性は、前記画像が前記アルバムの表紙に配置されるか否かであり、
    前記画像がアルバムの表紙に配置される場合、前記画像変換工程において、前記画像の画素数を増やす画像変換が行われることを特徴とする請求項４乃至１１のいずれか１項に記載の情報処理方法。
13. 前記特性は、前記画像が前記アルバムに配置された際の画像の解像度であり、
    前記解像度が閾値未満の場合、前記画像変換工程において、前記画像の画素数を増やす画像変換が行われることを特徴とする請求項４乃至１２のいずれか１項に記載の情報処理方法。
14. 前記画像変換工程において、前記特性が前記所定の条件を満たす画像に対して画素数を減らす処理を実行することを特徴とする請求項１乃至３のいずれか１項に記載の情報処理方法。
15. 前記画像変換工程において、前記特性が前記所定の条件を満たす第１の画像に対して画素数を増やす処理と減らす処理のいずれか一方を実行し、前記特性が前記所定の条件を満たさない第２の画像に対して画素数を増やす処理と減らす処理のうち、前記第１の画像に実行されていない処理を実行することを特徴とする請求項１乃至３のいずれか１項に記載の情報処理方法。
16. アルバムデータに用いられる複数の画像と、前記複数の画像のうちの、画像の特性が所定の条件を満たす画像を示す情報を受信する受信手段と、
    前記受信手段が受信した情報に基づいて、前記受信手段が受信した前記複数の画像のうち、前記所定の条件を満たす画像の画素数を変更する画像変換手段と、
    前記画像変換手段で画素数が変更された前記画像を含む前記複数の画像が配置されたアルバムデータを送信する送信手段と、
    を備えたことを特徴とする画像処理装置。
17. 前記画像処理装置は、サーバであり、
    前記受信手段は、インターネットを介して、前記複数の画像と前記情報を受信することを特徴とする請求項１６に記載の画像処理装置。
18. コンピュータを、
    アルバムデータに用いられる複数の画像それぞれの特性を解析する画像解析手段と、
    前記画像解析手段での解析結果に基づき、前記複数の画像のうち、前記特性が所定の条件を満たす画像を示す情報と、前記複数の画像を送信する送信手段と、
    として機能させ、
    前記送信手段により送信された前記複数の画像のうち、前記送信手段により送信された情報により示される、前記特性が前記所定の条件を満たす画像に、画素数を変更する処理が実行されることを特徴とするプログラム。

Images