JP7013859B2 - 操作表示装置及びプログラム - Google Patents

Description

本発明は、操作表示装置及びプログラムに関する。

スマートフォンやタブレット端末等の携帯機器で撮影した画像をネットワーク上にアップロードし、フォトブックを注文するサービスが提供されている。フォトブックの注文に際し、ユーザはレイアウト選択及び背景選択を行う。レイアウト選択では、１ページあたりの画像数や画像の配置位置を決定する。背景選択では、背景の色や柄等を選択する。

レイアウト及び背景の選択後、ユーザは、携帯機器に保存されている多数の画像の中から好みの画像を選択する。画像を選択すると、画像が自動配置され、プレビュー画面が表示される。

従来、プレビュー画面を確認したユーザがレイアウトや背景の変更を行う場合、例えばメニュー画面を呼び出して編集キーを押し、編集画面からレイアウト変更（又は背景変更）を選択し、レイアウト候補画面から別のレイアウトを選択する。プレビュー画面で確認後、さらに別のレイアウトに変更する場合は、レイアウト候補画面に戻り、レイアウトを選択し、再度、プレビュー画面で確認する。

このように、従来はレイアウト変更のために、レイアウト候補画面とプレビュー画面とを何度も切り替える必要があり、操作に手間がかかっていた。背景変更においても、同様に、背景候補画面とプレビュー画面とを何度も切り替えていた。

特表２００６－５１１４７１号公報 特許第４７６２８２７号明細書

本発明は、レイアウトや背景の変更を容易に行うことができる操作表示装置及びプログラムを提供することを課題とする。

本発明の操作表示装置は、複数のレイアウトに関するデータと、画像データとを記憶する記憶部と、前記複数のレイアウトのいずれかに応じて画像が配置されたプレビュー画面を表示する表示部と、を備える操作表示装置であって、前記操作表示装置の動作を検出するセンサと、前記センサが所定の動作を検出した場合に、レイアウトを変更する変更部と、を有し、前記表示部は、変更後のレイアウトに応じて画像が配置されたプレビュー画面を表示するものである。

本発明の一態様では、前記レイアウトは、複数のページを有するフォトブックのレイアウトであり、前記センサが検出した前記操作表示装置の振り幅が所定値以下の場合、前記変更部は前記表示部に表示されているページのレイアウトを変更し、前記センサが検出した前記操作表示装置の振り幅が所定値より大きい場合、前記変更部は全ページのレイアウトを変更する。

本発明の操作表示装置は、複数の背景に関するデータと、画像データとを記憶する記憶部と、前記複数の背景のいずれかに画像が合成されたプレビュー画面を表示する表示部と、を備える操作表示装置であって、前記操作表示装置の動作を検出するセンサと、前記センサが所定の動作を検出した場合に、背景を変更する変更部と、を有し、前記表示部は、変更後の背景に画像が合成されたプレビュー画面を表示するものである。

本発明の一態様では、各背景にはタグ情報が付与されており、前記変更部は、前記画像の撮影場所、撮影日時又は色情報と、各背景のタグ情報との関連度を算出し、前記センサが前記所定の動作を検出する毎に、関連度の高い順に背景を選択して変更する。

本発明の一態様では、前記変更部は、背景の変更回数が所定値に達した場合、選択済みの背景の一覧画面を前記表示部に表示させる。

本発明のプログラムは、表示部及び動作を検出するセンサを備えるコンピュータを制御するプログラムであって、第１レイアウトに応じて画像を配置したプレビュー画面を前記表示部に表示するステップと、前記センサが所定の動作を検出した場合に、前記第１レイアウトとは異なる第２レイアウトに応じて画像を配置するステップと、前記第２レイアウトに応じて画像を配置したプレビュー画面を前記表示部に表示するステップと、を前記コンピュータに実行させるものである。

本発明のプログラムは、表示部及び動作を検出するセンサを備えるコンピュータを制御するプログラムであって、第１背景に画像を合成したプレビュー画面を前記表示部に表示するステップと、前記センサが所定の動作を検出した場合に、前記第１背景とは異なる第２背景に画像を合成するステップと、前記第２背景に画像を合成したプレビュー画面を前記表示部に表示するステップと、を前記コンピュータに実行させるものである。

本発明によれば、レイアウトや背景の変更を容易に行うことができる。

（ａ）（ｃ）（ｄ）はプレビュー画面の変遷例を示す図であり、（ｂ）は操作表示装置をシェイクする様子を示す図である。 （ａ）～（ｃ）はプレビュー画面の変遷例を示す図である。 実施の形態に係る操作表示装置の概略構成を示すブロック図である。 フォトブック作製プログラムを実行することで実現される機能ブロック図である。 実施の形態に係るレイアウト変更方法を説明するフローチャートである。 フォトブック作製プログラムを実行することで実現される機能ブロック図である。 実施の形態に係る背景変更方法を説明するフローチャートである。 （ａ）～（ｃ）はレイアウト／背景変更画面の例を示す図である。

以下、図面を参照して実施の形態について説明する。

図１（ａ）は、本発明の実施の形態に係る操作表示装置１でフォトブックの注文を行う際のプレビュー画面を示す。操作表示装置１は、例えばスマートフォンやタブレット端末であり、タッチパネルＴにより様々な画面を表示したり、ユーザから各種の操作を受け付けたりする。

フォトブックの注文にあたり、まず、ユーザは、フォトブックのサイズやページ数、レイアウト、背景等を選択する。レイアウト選択は、１ページあたりに配置する画像の数や画像の割り当て位置等を指定する。背景選択は、背景の色や柄等を指定する。その後、ユーザは、操作表示装置１内に保存されている画像の中から好みの画像を選択する。操作表示装置１は、選択された画像をレイアウトに応じて配置する。

画像配置後、プレビュー画面が表示される。例えば、図１（ａ）に示すようなページ単位のプレビュー画面が表示される。図１（ａ）は、１ページに１枚の画像が配置され、画像領域Ｒがページの中央に位置するレイアウトＬ１の例を示す。

レイアウトを変更する場合、図１（ｂ）に示すように、ユーザは操作表示装置１を振る。例えば、操作表示装置１を把持し、タッチパネルＴが横を向くようにして操作表示装置１を上下に振る（シェイクする）。例えば、操作表示装置１を小刻みに振り、振った回数が所定値に達すると、図１（ｃ）に示すようにレイアウトが変更する。図１（ｃ）は、画像領域Ｒがページの左側に寄って位置するレイアウトＬ２の例を示す。

ユーザが再度、操作表示装置１を振ると、図１（ｄ）に示すように、さらに別のレイアウトに変更する。図１（ｄ）は、画像領域Ｒがページの下側に寄って位置するレイアウトＬ３の例を示す。

図２（ａ）～（ｃ）は１ページに６枚の画像が配置される場合のレイアウト変更の例を示す。ユーザが操作表示装置１を振ることで、図２（ａ）に示すレイアウトＬ１１から図２（ｂ）に示すレイアウトＬ１２に変更される。ユーザが操作表示装置１をさらに振ることで、図２（ｂ）に示すレイアウトＬ１２から図２（ｃ）に示すレイアウトＬ１３に変更される。

ユーザは、操作表示装置１を振り、タッチパネルＴに表示されるレイアウトを確認する。戻るボタンＢを押すことで、変更前のレイアウトに戻る。好みのレイアウトになったら確定ボタン７を押すことで、レイアウト変更処理が終了する。

レイアウト変更に際し、従来手法のように、レイアウト候補画面を呼び出してレイアウトを選択し、プレビュー画面で確認するという作業を繰り返すことは、操作に手間がかかる。これに対し、本実施形態では、操作表示装置１を振るだけで、レイアウトが順に変更される。そのため、レイアウトの変更を容易に行うことができる。

レイアウトの確定後、操作表示装置１は、フォトブックの全ページを画像化し、画像データを注文受付サーバ（図示略）へ送信する。注文受付サーバは、画像データを工場へ転送する。工場においてプリント処理が行われ、フォトブックが製造される。

操作表示装置１は、振り幅（移動距離）が小さい場合は現在表示中のページのみレイアウトを変更し、振り幅が大きい場合は全ページのレイアウトをまとめて変更するようにしてもよい。

図１、図２に示す例では、レイアウト変更にあたり、１ページあたりの画像数を同じとしているが、複数回のレイアウト変更後、１ページあたりの画像数が異なるレイアウトに変更してもよい。また、振り幅が大きい場合に、１ページあたりの画像数が異なるレイアウトに変更してもよい。

図３は、操作表示装置１の概略構成を示すブロック図である。操作表示装置１は、操作表示装置１の動作を統括的に制御する制御部としてのＣＰＵ（Central Processing Unit）１０を有している。ＣＰＵ１０には、バスを介して、ＲＯＭ（Read Only Memory）１１、ＲＡＭ（Random Access Memory）１２、不揮発性メモリ１３、操作部１４、表示部１５、撮影部１６、通信部１７、センサ１８等が接続されている。

ＣＰＵ１０は、ＯＳ（Operating System）プログラムをベースとし、その上で、ミドルウェアやアプリケーションプログラムなどを実行する。ＲＯＭ１１には、各種のプログラムが格納されており、これらのプログラムに従ってＣＰＵ１０が各種処理を実行することで操作表示装置１の各機能が実現される。

ＲＡＭ１２は、ＣＰＵ１０がプログラムに基づいて処理を実行する際にデータを一時的に格納するワークメモリとして使用される。

不揮発性メモリ１３は、画像データ、複数種類のレイアウトデータ、背景データ等の保存などに使用される。複数種類のレイアウトには、優先順位が定義されている。不揮発性メモリ１３は、例えばフラッシュメモリである。

操作部１４は、ユーザから各種の操作を受け付ける。表示部１５は、各種の操作画面を表示する。この実施の形態では、タッチパネルＴが、操作部１４及び表示部１５の機能を有する。

撮影部１６は例えばデジタルカメラである。撮影部１６で撮影した画像データは不揮発性メモリ１３に格納される。

通信部１７は、インターネット等を介して注文受付サーバと通信を行う。

センサ１８は、操作表示装置１の動作（振動、加速、回転等）を検出するモーションセンサを含む。センサ１８は、重力の作用方向を検出する重力センサ等の他のセンサをさらに備えていてもよい。

ＲＯＭ１１（又は不揮発性メモリ１３）にはフォトブック作製プログラムが格納されており、ＣＰＵ１０がフォトブック作製プログラムを実行することで、図４に示すように、選択部２０、画像配置部２１、表示処理部２２、モーション判定部２３、レイアウト変更部２４、及びフォトブックデータ送信部２５が実現される。

選択部２０は、フォトブックの商品サイズやページ数、レイアウト、背景等の選択を受け付ける。

画像配置部２１は、不揮発性メモリ１３に格納されている画像データのサムネイルをタッチパネルＴに表示し、フォトブックに使用する画像の選択を受け付ける。画像配置部２１は、選択された画像をレイアウトに応じて自動配置する。

表示処理部２２は、画像がレイアウトに応じて配置され、背景と合成されたプレビュー画面を作成し、タッチパネルＴに表示する。

モーション判定部２３は、センサ１８を用いて、操作表示装置１が所定の動作をしたか否かを判定する。例えば、モーション判定部２３は、操作表示装置１が所定回数振られたか否かを判定する。また、モーション判定部２３は、操作表示装置１の振り幅（移動距離）が所定値以下か否かを判定する。

レイアウト変更部２４は、操作表示装置１が所定回数振られた場合、レイアウトを変更する。レイアウト変更部２４は、レイアウトの優先順位に基づいて、レイアウトを順に変更する。画像配置部２１は、変更後のレイアウトで画像を再配置する。表示処理部２２は、画像再配置後のプレビュー画面を表示する。

操作表示装置１の振り幅が所定値以下の場合、レイアウト変更部２４は、タッチパネルＴに表示中の対象ページのみレイアウトを変更する。操作表示装置１の振り幅が所定値より大きい場合、レイアウト変更部２４は、全ページのレイアウトを変更する。

フォトブックデータ送信部２５は、レイアウトの確定後、フォトブックの全ページを画像化し、通信部１７を用いて画像データを注文受付サーバへ送信する。

次に、図５に示すフローチャートに沿って、フォトブック注文時のレイアウト変更方法について説明する。

ユーザが、フォトブックの商品選択を行い、サイズやページ数等を決定する。また、ユーザは、レイアウトや背景等を選択する（ステップＳ１）。

ユーザは、操作表示装置１内の画像フォルダからフォトブックに使用したい画像を選択する（ステップＳ２）。画像配置部２１は、選択された画像をレイアウトに応じて配置する（ステップＳ３）。画像が配置され、背景と合成されたプレビュー画面がタッチパネルＴに表示される。

プレビュー画面を確認したユーザは、レイアウト変更を希望する場合、操作表示装置１を振る。モーション判定部２３が、操作表示装置１が所定回数振られたことを検知し（ステップＳ４＿Ｙｅｓ）、振り幅が所定値以下である場合（ステップＳ５＿Ｙｅｓ）、レイアウト変更部２４は、現在タッチパネルＴに表示中のページのレイアウトを変更する（ステップＳ６）。

振り幅が所定値より大きい場合（ステップＳ５＿Ｎｏ）、レイアウト変更部２４は、全ページのレイアウトを変更する（ステップＳ７）。

レイアウト変更後のプレビュー画面がタッチパネルＴに表示される。ユーザは、変更後のレイアウトを承認する場合、確定ボタン７を押す（ステップＳ８＿Ｙｅｓ）。

さらに別のレイアウトにしたい場合、ユーザは操作表示装置１を再度振る。レイアウト変更部２４は、別のレイアウトに変更する。レイアウト変更部２４は、レイアウトの優先順位に基づいて、レイアウトを順に変更する。

本実施形態によれば、操作表示装置１を振るだけでレイアウトが変更する。レイアウト候補画面の呼び出しとプレビュー画面の確認とを交互に繰り返す従来の手法と比較して、レイアウトを容易に変更できる。

上記実施形態では、レイアウトを変更する例について説明したが、背景を変更できるようにしてもよい。この場合、フォトブック作製プログラムを実行することで、図６に示すように、選択部２０、画像配置部２１、表示処理部２２、モーション判定部２３、背景変更部２６、及びフォトブックデータ送信部２５が実現される。

また、不揮発性メモリ１３に格納されている複数種類の背景データには、それぞれタグ情報が付与されている。タグ情報は、季節、色、場所などである。

図７に示すフローチャートに沿って、背景変更方法を説明する。ステップＳ１１～Ｓ１３は図５のステップＳ１～Ｓ３と同じであるため、説明を省略する。

プレビュー画面を確認したユーザは、背景変更を希望する場合、操作表示装置１を振る。モーション判定部２３が、操作表示装置１が所定回数振られたことを検知し（ステップＳ１４＿Ｙｅｓ）、背景変更回数が所定値以下である場合（ステップＳ１５＿Ｙｅｓ）、背景変更部２６は、画像に好適な背景を選択する。

例えば、背景変更部２６は、画像がＥｘｉｆ（Exchangeable image file format、登録商標）に準拠している場合、画像に含まれるＧＰＳ位置情報や撮影日時と、背景データのタグ情報とのマッチングを行い、関連度の高い背景データを抽出する。例えば、画像のＧＰＳ位置情報が沖縄を示す場合、「沖縄」「海」「リゾート」等のタグ情報を持つ背景データを抽出する。画像の撮影時期が夏である場合、「夏」というタグ情報を持つ背景データを抽出する。逆に、「冬」というタグ情報を持つ背景データは抽出しないようにする。

また、ユーザが入力したフォトブックのタイトルと、タグ情報とを比較して、背景データを選択してもよい。例えば、「正月旅行」というタイトルが入力されている場合、「冬」「正月」等のタグ情報を持つ背景データを抽出する。

画像の色情報や画像に写っている人物の顔情報を利用してもよい。例えば、画像に女性が写っている場合は、かわいいデザインの背景データを抽出する。

このように、背景変更部２６は、フォトブックに使用されている画像やタイトルから抽出した情報と、背景データのタグ情報とを比較し、関連度の高い背景データを抽出し、背景を変更する（ステップＳ１６）。

背景が変更されたプレビュー画面がタッチパネルＴに表示される（ステップＳ１７）。ユーザは、変更後の背景を承認する場合、確定ボタンを押す（ステップＳ２０＿Ｙｅｓ）。操作表示装置１を振るだけで背景を容易に変更できる。

さらに別の背景に変更したい場合、ユーザは操作表示装置１を再度振る。背景変更部２６は、別の背景に変更する。背景変更部２４は、フォトブックに使用されている画像やタイトルから抽出した情報と、背景データのタグ情報とを比較し、関連度の高い順に背景を変更する。

背景の変更を繰り返すと、画像との関連の薄い（画像に相応しくない）背景となり得る。そこで、背景変更回数が所定値を超えた場合は（ステップＳ１５＿Ｎｏ）、これまで背景変更部２６が抽出した背景の一覧を表示する（ステップＳ１８）。ユーザは、背景の候補一覧の中から、背景を選択する（ステップＳ１９）。

図８（ｂ）に示すように、ドロップダウンリスト（プルダウンメニュー）５から、レイアウトを変更するか、背景を変更するか切り替えられるようにしてもよい。図８（ａ）に示す画面では、操作表示装置１を振ると、レイアウトが変更される。図８（ｃ）に示す画面では、操作表示装置１を振ると、背景が変更される。

上記実施形態において検出する操作表示装置１のモーションは、振る（シェイク）でなく、回転等の他の動きでもよい。

フォトブックでなく、カレンダー、ポスター、ポストカードなど他の印画物の注文を行ってもよい。

印画物の注文時の画像編集処理でなく、操作表示装置１内に保存されている画像に背景を合成したり、レイアウトに応じて画像を配置したりする場合にも、本実施形態に係る方法を適用できる。

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

１ 操作表示装置
１０ ＣＰＵ
１１ ＲＯＭ
１２ ＲＡＭ
１３ 不揮発性メモリ
１４ 操作部
１５ 表示部
１６ 撮影部
１７ 通信部
１８ センサ

Claims (2)

1. 複数のレイアウトに関するデータと、画像データとを記憶する記憶部と、
   前記複数のレイアウトのいずれかに応じて画像が配置されたプレビュー画面を表示する表示部と、
   を備える操作表示装置であって、
   前記操作表示装置の動作を検出するセンサと、
   前記センサが所定の動作を検出した場合に、レイアウトを変更する変更部と、
   を有し、
   前記表示部は、変更後のレイアウトに応じて画像が配置されたプレビュー画面を表示し、
   前記レイアウトは、複数のページを有するフォトブックのレイアウトであり、
   前記センサが検出した前記操作表示装置の振り幅が所定値以下の場合、前記変更部は前記表示部に表示されているページのレイアウトを変更し、
   前記センサが検出した前記操作表示装置の振り幅が所定値より大きい場合、前記変更部は全ページのレイアウトを変更することを特徴とする操作表示装置。
2. 表示部及び動作を検出するセンサを備える操作表示装置のコンピュータを制御するプログラムであって、
   第１レイアウトに応じて画像を配置したプレビュー画面を前記表示部に表示するステップと、
   前記センサが前記操作表示装置の所定の動作を検出した場合に、前記第１レイアウトとは異なる第２レイアウトに応じて画像を配置するステップと、
   前記第２レイアウトに応じて画像を配置したプレビュー画面を前記表示部に表示するステップと、
   を前記コンピュータに実行させ、
   前記第１レイアウト及び前記第２レイアウトは、複数のページを有するフォトブックのレイアウトであり、
   前記センサが検出した前記操作表示装置の振り幅が所定値以下の場合、前記表示部に表示されているページのレイアウトを前記第１レイアウトから前記第２レイアウトに変更し、
   前記センサが検出した前記操作表示装置の振り幅が所定値より大きい場合、全ページのレイアウトを前記第１レイアウトから前記第２レイアウトに変更することを特徴とするプログラム。

Images