JP5617730B2 - 表示制御装置及びプログラム - Google Patents

Description

本発明は、表示制御装置及びプログラムに関し、特に、加工した画像を表示させるための表示制御装置及びプログラムに関する。

デジタルデータ化された画像では編集や加工が容易である。例えば市販のアプリケーションプログラムを利用して、デジタルデータ化された写真画像に編集・加工をすることができる。また、デジタルカメラ自体に撮影した画像を編集・加工する機能を備えるものもある。

従来、画像を編集・加工する技術には、種々のものがある。そのような技術によれば、例えば、画像を示すデータに所定の変換処理を施すことによって、その画像を絵画風の画像に変換することができる（特許文献１参照）。また、直線、円など定形の図形や異なる画像を追加することや、ポインティングデバイスを利用して手書きの文字や絵を書き込むことなどもできる。

特開２００６−３１６８８号公報

しかしながら、変換処理を施した画像に、文字や絵を書いたり、別の画像を追加したりすると、書き加えた部分や追加した画像が変換処理を施した画像に馴染まず、違和感のある画像になるという問題がある。

本発明は上記の事情に鑑みてされたもので、変換画像に画像を追加した場合の違和感をなくす、又は軽減することができる表示制御装置及びプログラムを提供することを目的とする。

前記課題を達成するため、請求項１記載の発明は、変換方法が異なる第１の変換処理と第２の変換処理とを含み、前記第１の変換処理と前記第２の変換処理とが施された変換画像を示すデータを取得する変換画像取得手段と、前記第１の変換処理における第１の変換方法を示すデータと前記第２の変換処理における第２の変換方法を示すデータを取得する変換方法取得手段と、追加画像を示すデータを取得する追加画像取得手段と、表示手段に表示された変換画像内の指定位置を示すデータを取得する指定位置取得手段と、前記第１又は前記第２の変換方法に従って前記追加画像を変換した変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する合成画像生成手段と、前記合成画像を示すデータを取得し、表示手段に前記合成画像を表示させる表示制御手段と、を備え、前記変換画像取得手段は、前記変換画像内の第１の領域には前記第１の変換処理が施され、前記変換画像内の第２の領域には前記第２の変換処理が施された前記変換画像を示すデータを取得し、前記合成画像生成手段は、前記指定位置に対応する前記第１又は前記第２の変換方法に従って前記追加画像を変換した変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成することを特徴とする表示制御装置を提供するものである。
また、請求項２記載の発明は、変換処理が施された変換画像を示すデータを取得する変換画像取得手段と、前記変換処理における変換方法を示すデータを取得する変換方法取得手段と、追加画像を示すデータを取得する追加画像取得手段と、表示手段に表示された変換画像内の指定位置を示すデータを取得する指定位置取得手段と、前記変換方法に従って前記追加画像を示すデータを変換することによって得られる変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する合成画像生成手段と、前記合成画像を示すデータを取得し、表示手段に前記合成画像を表示させる表示制御手段と、を備え、前記合成画像生成手段は、前記変換方法取得手段によって取得されたデータを参照し、前記変換画像を変換前の原画像に戻す逆変換を施すことによって、当該原画像を示すデータを生成する逆変換手段と、前記指定位置に対応する前記原画像内の位置に前記追加画像を追加した原合成画像を示すデータを生成する第２合成手段と、前記原合成画像に前記変換方法に従って変換することによって前記合成画像を示すデータを生成する合成変換手段と、を備えることを特徴とする表示制御装置を提供するものである。

本発明によれば、追加画像には変換画像に施された変換方法に基づく変換が施される。そのため、追加画像と変換画像のタッチ、素材感、画調などを同じ又は似たものにすることができる。したがって、変換画像に追加画像を追加した場合の違和感をなくす、又は軽減することが可能になる。

本発明の一実施形態に係る表示制御装置の構成を示す図である。 原画像データの例を示す図である。 追加形状データが示す追加形状の例を示す図である。 変換種別データが示す変換種別の例を示す図である。 変換画像データの第１の例を示す図である。 変換画像データの第２の例を示す図である。 変換画像データの第３の例を示す図である。 領域設定データが示す内容の例を示す図である。 加工画像データが示す加工画像の例を示す図である。 加工プログラムデータに含まれるソフトウェアプログラムを実行することによってプログラム実行処理部が発揮する機能を示す図である。 合成画像生成部の構成の詳細を示す図である。 本発明の一実施形態に係る表示制御装置が実行する処理のフローチャートである。 原画像変換処理の詳細を示すフローチャートである。 加工処理の詳細を示すフローチャートである。 追加画像データの例を示す図である。 合成画像表示処理において表示部に表示される画像の一例を示す図である。 追加画像に変換を施さない場合の合成画像を示す図である。 スケッチ風球画像にスプレー画像が波状に連続的に追加された合成画像が表示部２１に表示された状態を示す図である。 合成画像生成処理の詳細を示すフローチャートである。 ２つの変換方法を含む変換画像の一例を示す図である。 図２０に示す変換画像に、図１８の合成画像と同様の波状に連続的にスプレー画像を追加した合成画像を示す図である。 モードIとモードIIとで異なる合成画像が作成される場合に、モードIによって作成された合成画像の例を示す図である。 モードIとモードIIとで異なる合成画像が作成される場合に、モードIIによって作成された合成画像の例を示す。

以下、本発明を実施するための形態を、図を参照して説明する。なお、図中同一又は相当する要素には同一符号を付す。

図１は、本発明の一実施形態に係る表示制御装置の構成を示す図である。

表示制御装置１は、加工・編集（以下、加工という。）した画像を表示部に表示させる制御装置であって、画像フィルタなどによって変換処理がなされた画像に別の画像（追加画像）が追加された合成画像を表示部に表示させる。表示制御装置１は、補助記憶部１０と、タッチパネル２０と、処理・制御部３０とを備える。

補助記憶部１０は、データ１１〜１７を含む各種データを記憶している記憶媒体であって、例えばフラッシュメモリ、ＨＤＤ（Ｈａｒｄ Ｄｉｓｃ Ｄｒｉｖｅ）などから構成される。

加工プログラムデータ１１は、ユーザがデジタルデータ化された原画像を加工するためのソフトウェアプログラムを含むデータである。

原画像データ１２は、原画像を示すデータである。原画像データ１２は、例えばユーザがデジタルカメラで撮影した画像を示すデータ、絵や画像をデジタルデータ化したものなど、任意の画像データであってよい。

図２は、原画像データ１２の例を示す。同図の「球．ｊｐｇ」は球を撮影した画像データ１２ａの例を示す。また、同図の「円柱．ｊｐｇ」は円柱を撮影した画像データ１２ｂを示す。

追加形状データ１３は、画像を加工する際に、加工元の画像に追加できる画像の形状を示すデータである。追加形状データ１３は任意に設定されてよい。加工元の画像に追加される画像（追加画像）は、追加形状データ１３によって示される形状に、大きさ、色などが特定されたものである。

図３は、追加形状データ１３が示す追加形状の例を示す。同図に示す追加形状データ１３は、定形のものとして、中実円形、中実の正方形、及びスプレーで吹き付けたような模様を有する円形（スプレー形状）を含む。また、追加形状データ１３は、球及び円柱を撮影した画像データ１２ａ，１２ｂをも含む。

変換種別データ１４は、画像を変換するためにユーザが利用可能な変換の種別、すなわち画像フィルタの種別を示すデータである。

図４は、変換種別データ１４が示す変換種別の例を示す。変換種別データ１４の「スケッチ風」は、画像をスケッチ風に変換する画像フィルタを示す。

変換種別データ１４の「歪み」は、ユーザが指定する方向及び角度で画像を歪ませる画像フィルタを示す。変換種別データ１４の「繰り返し」は、画像内に縮小したその画像をユーザが指定する回数だけ繰り返して埋め込む画像フィルタを示す。

変換画像データ１５は、変換種別データ１４に含まれる変換種別のいずれかの変換が施された画像（変換画像）を示すデータ（変換画像データ）である。また、変換画像データ１５は、そのデータが示す変換画像に施された変換方法を示す変換方法データをも含む。

図５〜図７は、変換画像データ１５が示す変換画像及び変換方法の例を示す。

図５は、スケッチ風の変換を施した変換画像を含む変換画像データ１５ａの例を示す。変換画像データ１５ａは、球を撮影した画像データ１２ａにスケッチ風の変換処理を施すことによって得られる画像（以下、スケッチ風球画像という。）を示すデータと、変換方法として、スケッチ風の変換処理を施したことを示すデータとを含む。

図６は、「歪み」の変換を施した変換画像を含む変換画像データ１５ｂの例を示す。変換画像データ１５ｂは、円柱を撮影した画像データ１２ｂに、右方向に４５度歪ませる変換処理を施すことによって得られる画像（以下、歪み円柱画像という。）を示すデータを含む。また、変換画像データ１５ｂは、変換方法として、右方向に４５度歪ませる変換処理を施すことを示すデータを含む。

図７は、「繰り返し」の変換を施した変換画像を含む変換画像データ１５ｃの例を示す。変換画像データ１５ｃは、球を撮影した画像データ１２ａに、繰り返しを３回行う変換処理を施すことによって得られる画像（以下、球繰り返し画像という。）を示すデータを含む。また、変換画像データ１５ｃは、変換方法として、繰り返しを３回行う変換処理を施すことを示すデータを含む。

領域設定データ１６は、加工元の画像に追加画像が追加された場合に、追加画像の外縁を加工元の画像に違和感なくなじませるための加工をする領域を設定するためのデータである。違和感なくなじませるための加工には、例えば、加工元の画像に施されている変換と同一の変換処理、平均化フィルタなどを用いたぼかし処理などを施すことが含まれる。また、その領域はユーザなどによって予め設定される。

図８は、領域設定データが示す内容の例を示す。図８の領域設定データ１６ａは、追加画像の外縁を中心として幅２０ピクセルの帯状領域を上記の加工をする領域として設定されている例を示す。

加工画像データ（合成画像データ）１７は、加工元の画像と追加画像とを合成した画像を示す画像データである。図９は、加工画像データ１７が示す合成画像の例を示す。同図に示す合成画像は、球を撮影した画像に円柱を撮影した画像を追加した画像１７ａを示す。

ここから、再び図１を参照して説明する。
タッチパネル２０は、ユーザに画像を提示するとともにユーザが指定する画面上の位置を検知する。タッチパネル２０は、表示部２１とタッチセンサ２２とを備える。

表示部２１は、画像を表示する表示画面を含み、例えば液晶パネルなどから構成される。タッチセンサ２２は、ユーザがタッチした画面上の位置を検出し、検出した画面上の位置を示すデータを生成する。タッチセンサ２２は、表示部２１の表示画面に重ねて配置された抵抗膜又は導電膜、電位又は電流を検知するセンサなどから構成される。

処理・制御部３０は、各種の処理及び制御を実行する部位であり、例えばプロセッサ、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、キャッシュメモリなどから構成される。処理・制御部３０は、図１に示すように、表示制御部３１と、タッチパネル制御部３２と、補助記憶制御部３３と、プログラム実行処理部３４とを備える。

表示制御部３１は、画像データを取得し、取得した画像データが示す画像を表示部２１に表示させる。

タッチパネル制御部３２は、ユーザがタッチした表示部２１上の位置に対応する画像内の位置（指定位置）を示すデータ（指定位置データ）を生成する。詳細には、タッチパネル制御部３２は、ユーザがタッチした表示部２１上の位置を示すデータをタッチセンサ２２から取得し、そのデータが示す表示部２１上の位置と表示部２１に表示されている画像とに基づいて、指定位置データを生成する。

また、タッチパネル制御部３２は、追加画像の特定、画像の加工処理の終了など、表示部２１に表示された内容に応じたユーザの指示を受け付ける。

補助記憶制御部３３は、補助記憶部１０が記憶しているデータの管理及び制御をする。詳細には、補助記憶制御部３３は、処理部及び制御部３１，３２，３４の各々からの要求に従って、補助記憶部１０が記憶しているデータを補助記憶部１０から取得し、取得したデータを処理部及び制御部３１，３２，３４の各々に引き渡す。補助記憶制御部３３は、処理部及び制御部３１，３２，３４の各々からデータを取得し、その処理部及び制御部３１，３２，３４の各々からの指示に従って、補助記憶部１０にデータを記憶させる。

プログラム実行処理部３４は、補助記憶部１０が記憶している加工プログラムデータ１１を取得し、加工プログラムデータ１１に含まれるソフトウェアプログラムを実行する処理部である。

図１０は、加工プログラムデータ１１に含まれるソフトウェアプログラムを実行するプログラム実行処理部３４が発揮する機能を示す図である。そのプログラム実行処理部３４は、同図に示すように、原画像取得部５１と、変換方法生成部５２と、変換部５３と、加工部５４とを含む。

原画像取得部５１は、ユーザが指定する原画像データ１２を取得する。

変換方法生成部５２は、変換種別データ１４などの画像変換をする際にユーザの指定に係るデータを取得し、取得したデータに基づいて上記の変換方法データを生成する。詳細には、変換方法データは、ユーザが指定する変換種別データ１４と、その変換種別データ１４によって画像変換をする際にユーザが指定する内容などを示すデータとを組み合わせることによって、生成される。

変換部５３は、ユーザが指定する変換方法に従って、原画像取得部５１によって取得された原画像データ１２に変換処理を施す。これによって、変換部５３は、原画像データ１２が示す原画像を上記の変換方法に従って変換した画像（変換画像）を示す変換画像データを生成する。変換部５３は、生成した変換画像データを、補助記憶制御部３３を介して補助記憶部１０に記憶させる。

加工部５４は、ユーザの指示に従って、加工元となる変換画像に追加画像を追加する。加工部５４は、その変換画像に施された変換と同様の変換を追加画像に施し、その同様の変換を施した追加画像を加工元となる変換画像の指定位置に追加する。

ここで、「同様の変換」とは、加工元となる変換画像に施された変換と同一の変換、又は、移動及び変形を伴う変換を除いて、加工元となる変換画像に施された変換と同一の変換を意味する。このような変換を追加画像に施すことによって、追加画像と変換画像とを違和感なく馴染ませることができる。

加工部５４は、その詳細を図１０に示すように、各処理部６１〜６７を含む。

追加画像取得部６１は、追加形状データ１３が示す形状の中からユーザによって選択された形状、またその形状に応じてユーザによって選択された大きさ、色などを有する画像を追加画像として示すデータ（追加画像データ）を取得する。

変換画像取得部６２は、変換画像データを取得する。変換画像データは、変換部５３から取得されてもよく、補助記憶制御部３３を介して補助記憶部１０から取得されてもよい。変換画像データに含まれる変換画像が加工元の画像となる。

変換方法取得部６３は、変換画像取得部６２によって取得された変換画像データに含まれる変換方法データを取得し、それによって、加工元の画像に施されている変換方法を特定する。

追加方法取得部６４は、加工元の画像である変換画像に追加画像を追加する方法のうち、ユーザが指定する方法を示すデータを取得する。変換画像に追加画像を追加する方法には、モードIとモードIIという２つの方法があり、ユーザはこれらから選択することができる。

モードIは、追加画像を変換し、その変換した追加画像を加工元となる変換画像の指定位置に追加する方法である。ここで、追加画像に施される変換は、変換画像に施された変換と同様の変換である。

モードIIは、加工元となる変換画像の原画像に追加画像を追加した合成画像（原合成画像）を生成し、その合成画像を変換する方法である。モードIIにおいて施される変換は、変換画像に施された変換と同一の変換である。

指定位置取得部６５は、タッチパネル制御部３２によって生成される指定位置データを取得する。

終了判断部６６は、加工処理を終了させる指示をユーザから受け付けたか否かを判断する。

合成画像生成部６７は、ユーザの指定に従って、加工元となる変換画像に施された変換と同様の変換が施された追加画像をその変換画像に追加した合成画像を示すデータ（合成画像データ）を生成する。

図１１は、合成画像生成部６７の詳細を示す図である。同図に示すように、合成画像生成部６７は、指定領域特定部７１と、指定位置変換特定部７２と、追加方法判断部７３と、追加画像変換部７４と、第１合成部７５と、逆変換部７６と、第２合成部７７と、合成画像変換部７８とを備える。

指定領域特定部７１は、追加画像データと指定位置データと領域設定データ１６とを取得し、これらのデータに基づいて指定領域を特定し、特定した指定領域を示すデータを生成する。

指定領域は、ユーザの指定に係る追加画像を指定位置に配置した場合のその追加画像の外縁に沿って、領域設定データ１６によって示される幅を有する帯状をなす領域である。指定領域の画像を示すデータには、追加画像の外縁を加工元の画像に違和感なくなじませるための加工処理が施される。

指定位置変換特定部７２は、追加方法としてモードIが選択された場合であって、加工元の変換画像に複数の変換方法に従った変換が施されているときに、指定位置に対応する変換方法を特定する。また、指定位置変換特定部７２は、特定した変換方法を示すデータ（指定位置変換方法データ）を生成する。

ここで、指定位置に対応する変換方法とは、変換画像に施された変換方法のうち、その指定位置において変換画像に施されている変換方法である。また、指定位置に対応する変換方法は、変換方法取得部６３によって特定された変換方法を参照することによって、その中から特定される。

追加方法判断部７３は、追加方法取得部６４が取得したデータによって示される追加方法がモードIとモードIIとのいずれであるかを判断する。

追加画像変換部７４は、追加方法としてモードIが選択された場合に、追加画像を変換し、変換した追加画像（変換追加画像）を示すデータを生成する。追加画像変換部７４での変換方法は、加工元の変換画像に施されている変換方法に基づく。すなわち、加工元の変換画像に施されている変換方法が１つである場合、追加画像変換部７４での変換方法は、加工元の変換画像に施されている変換方法から移動及び変形を除いたものと同じである。加工元の変換画像に複数の変換方法が施されている場合、その変換方法は、指定位置変換特定部７２によって特定された変換方法から移動及び変形を除いたものである。

第１合成部７５は、追加方法としてモードIが選択された場合に、追加元となる変換画像に変換追加画像を追加することによって得られる合成画像を示すデータを合成画像データとして生成する。

逆変換部７６は、変換画像データ１５を取得し、取得したデータに基づいて加工元の変換画像を逆変換し、逆変換することによって得られる原画像を示すデータ（原画像データ）を生成する。逆変換とは、変換画像データ１５に含まれるデータが示す変換方法の逆の変換である。逆変換を施すことによって、変換画像データ１５に含まれる変換画像を原画像に戻すことができる。

第２合成部７７は、追加方法としてモードIIが選択された場合に、加工元となる変換画像の原画像に追加画像を追加した合成画像（原合成画像）を示すデータ（原合成画像データ）を生成する。

合成画像変換部７８は、変換方法取得部６３によって取得された変換方法データが示す変換方法に従って、第２合成部７７によって生成された原合成画像データを変換する。これによって、合成画像変換部７８は、変換画像に変換追加画像が追加された画像である合成画像を示すデータを合成画像データとして生成する。

次に、これまで説明した構成を備える表示制御装置１が実行する処理について、具体例とともに図を参照して説明する。

図１２は、本実施形態に係る表示制御装置１が実行する処理の概要を示すフローチャートである。

タッチパネル制御部３２は、ユーザの操作による変換指示を受け付けたか否かを判断する（ステップＳ１０１）。変換指示を受け付けていないと判断した場合（ステップＳ１０１；Ｎｏ）、タッチパネル制御部３２は処理を終了する。

変換指示を受け付けたと判断した場合（ステップＳ１０１；Ｙｅｓ）、プログラム実行処理部３４は、ユーザの指示に従って、原画像データ１２を変換する（ステップＳ１０２）。この処理の詳細は後述する。

タッチパネル制御部３２は、ユーザの操作による加工指示を受け付けたか否かを判断する（ステップＳ１０３）。加工指示を受け付けていないと判断した場合（ステップＳ１０３；Ｎｏ）、タッチパネル制御部３２は処理を終了する。

変換指示を受け付けたと判断した場合（ステップＳ１０３；Ｙｅｓ）、プログラム実行処理部３４は、ユーザの指示に従って、変換画像に変換追加画像を追加した合成画像を示すデータを生成し（ステップＳ１０４）、その後処理を終了する。この処理の詳細は後述する。

図１３は、原画像変換処理（ステップＳ１０２）の詳細を示すフローチャートである。

原画像取得部５１は、ユーザが指定する原画像データ１２を取得する（ステップＳ２０１）。

変換方法生成部５２は、原画像取得部５１によって取得された原画像データ１２に適用する変換方法としてユーザが指定する変換方法を示すデータ（変換方法データ）を生成する（ステップＳ２０２）。例えば、図６に示す歪み円柱画像の場合、変換方法データは、「右方向に４５度歪ませること」を示すデータである。

変換部５３は、ユーザが指定する変換方法に従って、原画像取得部５１によって取得された原画像データ１２を変換する。そして、変換部５３は、変換方法データを含む変換画像データを生成する（ステップＳ２０３）。

補助記憶制御部３３は、変換部５３の指示を受けて、変換部５３によって生成された変換画像データ１５を補助記憶部１０に記憶させ（ステップＳ２０４）、原画像変換処理（ステップＳ１０２）を終了する。

図１４は、加工処理（ステップＳ１０４）の詳細を示すフローチャートである。

追加画像取得部６１は、ユーザによって選択された追加形状データ１３に基づいて、追加画像データを生成する（ステップＳ３０１）。

詳細には、追加画像取得部６１は、ユーザによって選択された追加形状データ１３を取得する。また、追加画像取得部６１は、その選択された追加形状データ１３に対して選択可能な要素について、ユーザが指定する具体的な値を示すデータを取得する。これによって、追加画像が特定される。選択可能な要素は、例えば追加形状データ１３が示す画像の大きさ、色などを含む。

図１５は、追加画像を示すデータの内容の例を示す図である。同図に示す追加画像を示すデータ８０は、形状がスプレー形状であり、大きさとしての直径が３０ピクセルであり、色が黒であることを含む。以下、図１５に示す追加画像を「スプレー画像」という。

変換画像取得部６２は、加工元となる変換画像を示すデータを含む変換画像データ１５を取得する（ステップＳ３０２）。変換画像データ１５は、変換部５３によって生成された変換画像データ１５、及び補助記憶部が記憶している変換画像データ１５の中からユーザが選択したものである。これにより、表示部２１には、変換画像データ１５に含まれるデータに基づき、加工元となる変換画像が表示される。

変換方法取得部６３は、変換画像取得部６２によって取得された変換画像データ１５に含まれる変換方法データを取得し、それによって、加工元の画像に施されている変換方法を特定する（ステップＳ３０３）。

追加方法取得部６４は、ユーザが指定する追加方法を示すデータを取得する（ステップＳ３０４）。追加方法は、上述のモードI又はモードIIである。

指定位置取得部６５は、タッチパネル制御部３２によって生成される指定位置データを取得する（ステップＳ３０５）。このとき、表示部２１には加工元の変換画像が表示されている。したがって、この処理においてタッチパネル制御部３２によって生成される指定位置データは、加工元の変換画像内の指定位置を示す。

合成画像生成部６７は、合成画像データを生成する（ステップＳ３０６）。合成画像生成処理（ステップＳ３０６）の詳細は後述する。

表示制御部３１は、合成画像生成部６７の第１合成部７５又は合成画像変換部７８によって生成された合成画像データを取得し、取得したデータが示す画像を表示部２１に表示させる（ステップＳ３０７）。

ここで、図１６は、合成画像表示処理（ステップＳ３０７）において表示部２１に表示される画像の一例を示す。

同図に示すように、表示部２１は、合成画像データが示す合成画像８１を大きく表示する。同図の合成画像８１では、追加画像として特定されたスプレー画像が、スケッチ風球画像内の指定位置に追加されている。同図では、説明のため、合成画像８１の指定位置にＸを付している。

合成画像８１の追加画像には、加工元の変換画像と同様にスケッチ風の変換が施されている。図１７は、追加画像に変換を施さない場合の合成画像を示す。図１６の合成画像８１と図１７に示す合成画像とを比較するとわかるように、図１６の合成画像８１では、追加画像に変換が施されることによって、追加画像と加工元の画像との違和感が少なくとも軽減している。

また、図示しないが、追加画像の外縁を中心として２０ピクセルの幅の中空円形（ドーナツ状）の部分が指定領域となる。

合成画像８１の下には、指定位置の座標（１４０，３２０）が表示されている。指定位置は、横をＸ方向、縦をＹ方向とし、合成画像の左下を原点（０，０）、右上を（１３００，１０００）とした場合のＸＹ座標点として表されている。

合成画像の左には、上から順に、追加画像として選択されたスプレー画像８２、各ボタン８３〜８５が表示されている。ボタン８３は、追加画像を切り替える指示を与えるためのボタンである。ボタン８４は、加工方法を切り替える指示を与えるためのボタンである。ボタン８５は、画像加工を終了させる指示を与えるためのボタンである。

再び、図１４を参照する。
終了判断部６６は、ユーザの操作に基づく終了指示を、タッチパネル制御部３２を介して取得したか否かを判断する（ステップＳ３０８）。終了指示は、例えばボタン８５にタッチすることによって与えられる。

終了指示を取得していないと判断された場合に（ステップＳ３０８；Ｎｏ）、第１合成部７５又は合成画像変換部７８によって生成された合成画像データが示す合成画像を加工元の変換画像として、上述のステップＳ３０５からステップＳ３０７までの処理が再び実行される。

これによって、ユーザは、加工元の変換画像の指定位置に順次、その変換画像と同様の変換が施された追加画像が追加された状態を表示部２１で確認することができる。図１８は、スケッチ風球画像にスプレー画像が波状に連続的に追加された合成画像８６が表示部２１に表示された状態を示す。ステップＳ３０５からステップＳ３０７までが繰り返されることによって、ユーザは、表示部２１を見ることによって、連続的に追加された追加画像が形成する文字や図形の状態をリアルタイムで確認しながら変換画像を加工することが可能になる。

終了指示を取得したと判断された場合に（ステップＳ３０８；Ｙｅｓ）、第１合成部７５又は合成画像変換部７８は、その判断結果を示すデータを取得する。そして、第１合成部７５又は合成画像変換部７８は、生成した合成画像データを補助記憶部１０に記憶させ、それによって、生成したデータを保存し（ステップＳ３０９）、加工処理（ステップＳ１０４）を終了する。

このように、加工処理（ステップＳ１０４）では、追加画像には加工元の変換画像と同様の変換が施される。これによって、追加画像と加工元の変換画像のタッチ、素材感、画調などを近づけることができる。そして、その変換が施された追加画像が加工元の変換画像に追加される。したがって、変換画像に画像を追加した場合の違和感をなくす、又は軽減することが可能になる。

また、追加画像の外縁の周辺には、指定領域として加工元の画像に違和感なくなじませるための加工が施される。これによって、変換画像に画像を追加した場合の違和感をなくす、又はさらに軽減することが可能になる。

次に、図１９を参照して、合成画像生成処理（ステップＳ３０６）の詳細について説明する。

指定領域特定部７１は、指定領域を特定し、特定した指定領域を示すデータを生成する（ステップＳ４０１）。

詳細には、指定領域特定部７１は、指定位置取得部６５によって取得された指定位置データと、追加画像取得部６１によって取得された追加画像データと、補助記憶部１０が記憶している領域設定データ１６とを取得する。そして、指定領域特定部７１は、取得した追加画像データ、指定位置データ、及び領域設定データ１６に基づいて指定領域を特定し、特定した指定領域を示すデータを生成する。

追加方法判断部７３は、追加方法取得部６４が取得したデータを参照し、そのデータが示すユーザによって選択された追加方法がモードIとモードIIとのいずれであるかを判断する（ステップＳ４０２）。

選択された追加方法がモードIであると判断された場合に（ステップＳ４０２；モードI）、指定位置変換特定部７２は、変換方法取得部６３によって特定された変換方法が複数あるか否かを判断する（ステップＳ４０３）。ここでは、変換を施していないことも１つの変換方法として数える。例えば、画像の一部にのみ変換が施されており、残部に変換が施されていない場合、その画像には変換方法が２つあると判断される。

また例えば、図５〜７に示す変換画像１５ａ〜１５ｃでは、全体に１つの変換が施されているため、変換方法が１つである。これに対して、図２０に示す変換画像８７は、スケッチ風球画像と歪み円柱画像とを含む。そのため、変換画像８７の場合、２つの変換方法があると判断される。

変換方法が複数あると判断した場合に（ステップＳ４０３；Ｙｅｓ）、指定位置変換特定部７２は、指定位置に対応する変換方法を特定し、特定した変換方法を示す指定位置変換方法データを生成する（ステップＳ４０４）。

追加画像変換部７４は、指定位置変換特定部７２によって生成された指定位置変換方法データと、追加画像取得部６１によって取得された追加画像データとを取得する。そして、追加画像変換部７４は、指定位置変換方法データが示す指定位置の変換方法に従って、追加画像データに変換処理を施す（ステップＳ４０５）。これによって、その変換方法に従って、追加画像が変換される。

追加画像変換部７４が施す変換は、指定位置の変換方法が移動又は変形を含まない場合、指定位置の変換方法と同じである。また、指定位置の変換方法が移動又は変形を含む場合、追加画像変換部７４が施す変換は、指定位置の変換方法のうち移動又は変形を除いたものと同じである。

変換方法が複数ではないと判断された場合に（ステップＳ４０３；Ｎｏ）、追加画像変換部７４は、変換方法取得部６３によって取得された変換方法データと、追加画像取得部６１によって取得された追加画像データとを取得する。そして、追加画像変換部７４は、変換方法データが示す変換方法に従って、追加画像データを変換する（ステップＳ４０６）。

追加画像変換部７４が施す変換は、変換方法取得部６３によって特定された変換方法が移動又は変形を含まない場合、その特定された変換方法と同じである。また、変換方法取得部６３によって特定された変換方法が移動又は変形を含む場合、追加画像変換部７４が施す変換は、その特定された変換方法のうち移動又は変形を除いたものと同じである。

第１合成部７５は、追加方法としてモードIが選択された場合に、追加元となる変換画像に変換追加画像を追加した合成画像を示すデータ（合成画像データ）を生成する（ステップＳ４０７）。

詳細には、第１合成部７５は、追加画像変換部７４によって生成されたデータと、追加元となる変換画像を示すデータとを取得する。この変換画像を示すデータは、変換画像取得部６２が取得する変換画像データに含まれるものである。そして、第１合成部７５は、取得したデータに基づいて、変換追加画像を加工元の変換画像の追加位置に追加した合成画像を示す合成画像データを生成する。

これにより、第１合成部７５は、合成画像生成処理（ステップＳ３０６）を終了する。

ここで、第１合成部７５によって生成される合成画像データの内容の具体例を図２１及び図２２に示す。

図２１は、図２０に示す変換画像８７に、図１８の合成画像８６と同様の波状に連続的にスプレー画像を追加した合成画像８８を示す。変換画像８７の歪み円柱画像に施されている変換は変形を伴う変換のみである。そのため、歪み円柱画像内の指定位置に追加される追加画像には変換が施されない。変換画像８７の歪み円柱画像以外の部分には、スケッチ風の変換が施されており、これは移動及び変形を伴わない変換方法である。そのため、変換画像８７の歪み円柱画像以外の指定位置に追加された追加画像には、スケッチ風の変換が施されている。

このように、指定位置に対応する変換を追加画像に施すことによって、変換画像が異なる複数の方法によって変換された画像を含む場合であっても、変換画像に追加画像を追加した際の違和感をなくす、又は軽減することが可能になる。

また、変換方法から移動及び変形を除くことによって、追加画像が指定位置と異なる位置に追加されること、及び追加画像が変形することを防ぐことができる。

なお、図２１に示す合成画像８８は、モードIIの場合も同じになる。

図２２は、モードIとモードIIとで異なる合成画像が作成される場合に、モードIによって作成された合成画像８９の例を示す。合成画像８９では、球繰り返し画像１５ｃに追加画像としての文字「Ａ」が追加されている。「繰り返し」の変換は、移動及び変形を含む。そのため、変換が施されていない追加画像が球繰り返し画像１５ｃに追加されている。

このように、移動又は変形を伴う変換を追加画像に施さないことによって、ユーザの意図するものとなるように、かつ、違和感がないか又は軽減されるように、追加画像を変換画像に追加することが可能になる。

再び、図１９を参照して説明する。
また、選択された追加方法がモードIIであると判断された場合に（ステップＳ４０２；モードII）、逆変換部７６は、加工元の変換画像を示す変換画像データを逆変換し、それによって、原画像データを生成する（ステップＳ４０８）。

詳細には、逆変換部７６は、変換画像データ１５を取得し、変換画像データ１５に含まれる変換方法の逆の変換方法を特定する。その逆の変換方法に従って、逆変換部７６は、変換画像データ１５に含まれる加工元の変換画像を示すデータに変換処理を施す。これによって、逆変換部７６は、加工元の変換画像の原画像を示すデータ（原画像データ）を生成する。

第２合成部７７は、原合成画像データを生成する（ステップＳ４０９）。詳細には、第２合成部７７は、逆変換部７６によって生成された原画像データと追加画像取得部６１によって取得された追加画像データとを取得する。そして、第２合成部７７は、取得した両データに基づいて、原画像の指定位置に対応する位置に追加画像を追加した画像である合成画像を示すデータ（原合成画像データ）を生成する。

合成画像変換部７８は、変換方法データが示す変換方法に従って原合成画像データを変換することによって、合成画像データを生成する（ステップＳ４１０）。

詳細には、合成画像変換部７８は、変換方法取得部６３によって取得された変換方法データと、第２合成部７７によって生成された原合成画像データとを取得する。そして、合成画像変換部７８は、変換方法データが示す変換方法に従って原合成画像データを変換する。これによって、合成画像変換部７８は、原合成画像が変換された画像を示すデータを合成画像データとして生成する。

これにより、合成画像変換部７８は、合成画像生成処理（ステップＳ３０６）を終了する。

図２３は、モードIとモードIIとで異なる合成画像が作成される場合に、モードIIによって作成された合成画像９０の例を示す。合成画像９０では、図２２に示す合成画像８９と同様に、球繰り返し画像１５ｃに追加画像としての文字「Ａ」が追加されている。モードIIでは、原画像に戻した後に追加画像を追加し、追加画像が追加された原画像が再度変換される。そのため、合成画像９０では、合成画像８９とは異なり、繰り返し埋め込まれる画像にも追加画像である文字「Ａ」が、埋め込まれる画像と同様の倍率で縮小されて追加されている。

このように、原合成画像データを介して合成画像データを生成することによって、ユーザの意図するものとなるように、かつ、違和感がないか又は軽減されるように、追加画像を変換画像に追加することが可能になる。

以上、本発明の実施形態について説明した。本発明は、上述の実施形態に限られない。本発明は、本発明の思想を逸脱しない範囲において、実施形態に適宜変更を加えたものを含む。

例えば、実施形態ではユーザが表示制御装置１に入力するためにタッチパネルを用いることとしたが、ユーザが表示制御装置１に入力する手段はこれに限られない。例えば、ボタン、キー、マウスのようなポインティングデバイスなどが採用されてもよい。

また例えば、実施形態では、プログラム実行処理部３４が加工プログラムデータ１１に含まれるソフトウェアプログラムを実行し、表示制御装置１の機能を発揮することとした。しかし、表示制御装置１がその機能を備える方法はこれに限られない。例えば、表示制御装置１が備える機能は、各機能を備える１つ又は複数のプロセッサにより実現されてもよい。また例えば、表示制御装置１が備える機能は、その機能の一部を備える１つ又は複数のプロセッサとソフトウェアプログラムを実行するプロセッサとの組み合わせによって実現されてもよい。

さらに例えば、実施形態では、変換画像データが変換方法データを含むこととしたが、変換画像データと変換方法データとは関連付けられた別データとして管理されてもよい。

さらに例えば、加工元となる変換画像の原画像を作成するために、その変換画像を逆変換することとしたが、原画像を示すデータを得る方法はこれに限られない。例えば、変換画像データが原画像データ１２を特定するためのデータを含み、その変換画像データを参照することによって、原画像データ１２が補助記憶部１０から取得されてもよい。これによれば、逆変換のための処理を省くことができ、表示制御装置１に掛かる処理負荷を軽減することができる。

さらに例えば、モードIにおける追加画像の変換では、移動及び変形を除くこととしたが、追加画像変換部７４が施す変換から移動及び変形のいずれか一方又は両方を除くか否かは、適宜設定されてよい。これによって、種々提供されている変換方法に応じて、又は、ユーザの趣向に応じて、変換画像に画像を追加した場合の違和感をなくす、又は軽減することが可能になる。

以下に、本願発明の当初の特許請求の範囲に記載された発明を付記する。
（付記１）
変換処理が施された変換画像を示すデータを取得する変換画像取得手段と、
前記変換処理における変換方法を示すデータを取得する変換方法取得手段と、
追加画像を示すデータを取得する追加画像取得手段と、
表示手段に表示された変換画像内の指定位置を示すデータを取得する指定位置取得手段と、
前記変換方法に従って前記追加画像を示すデータを変換することによって得られる変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する合成画像生成手段と、
前記合成画像を示すデータを取得し、表示手段に前記合成画像を表示させる表示制御手段とを備える
ことを特徴とする表示制御装置。

（付記２）
前記合成画像生成手段は、前記変換追加画像を前記変換画像の前記指定位置に追加するとともに、前記指定位置に追加される追加画像の外縁から所定の範囲に含まれる前記変換画像内の画像を変換した画像である合成画像を示すデータを生成する
ことを特徴とする付記１に記載の表示制御装置。

（付記３）
前記指定位置取得手段は、前記指定位置を示すデータを連続的に取得し、
前記合成画像生成手段は、前記変換追加画像を前記指定位置に連続的に追加した画像である合成画像を示すデータを生成する
ことを特徴とする付記１又は２に記載の表示制御装置。

（付記４）
原画像を示すデータを取得し、当該原画像を示すデータに変換処理を施すことによって前記変換画像を示すデータを生成するとともに、当該変換処理における変換方法を示すデータを生成する変換手段を、さらに備える
ことを特徴とする付記１から３のいずれか１つに記載の表示制御装置。

（付記５）
前記変換処理は、変換方法が異なる第１の変換処理と第２の変換処理とを含み、
前記変換画像取得手段は、前記第１の変換処理と前記第２の変換処理とが施された変換画像を示すデータを取得し、
前記変換方法取得手段は、前記第１の変換処理における第１の変換方法を示すデータと前記第２の変換処理における第２の変換方法を示すデータとを取得し、
前記合成画像生成手段は、前記第１又は前記第２の変換方法に従って前記追加画像を変換した前記変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する
ことを特徴とする付記１から４のいずれか１つに記載の表示制御装置。

（付記６）
前記変換画像取得手段は、前記変換画像内の第１の領域には前記第１の変換処理が施され、前記変換画像内の第２の領域には前記第２の変換処理が施された前記変換画像を示すデータを取得し、
前記合成画像生成手段は、前記指定位置に対応する前記第１又は前記第２の変換方法に従って前記追加画像を変換した変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する
ことを特徴とする付記５に記載の表示制御装置。

（付記７）
前記合成画像生成手段は、
前記変換処理のうち移動又は変形を除く変換方法を前記追加画像に施した前記変換追加画像を示すデータを生成する追加画像変換手段と、
前記追加画像変換手段によって生成されたデータが示す変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する第１合成手段とを備える
ことを特徴とする付記１から６のいずれか１つに記載の表示制御装置。

（付記８）
前記合成画像生成手段は、
前記変換方法取得手段によって取得されたデータを参照し、前記変換画像を変換前の原画像に戻す逆変換を施すことによって、当該原画像を示すデータを生成する逆変換手段と、
前記指定位置に対応する前記原画像内の位置に前記追加画像を追加した原合成画像を示すデータを生成する第２合成手段と、
前記原合成画像に前記変換方法に従って変換することによって前記合成画像を示すデータを生成する合成変換手段とを備える
ことを特徴とする付記１から６のいずれか１つに記載の表示制御装置。

（付記９）
前記追加画像を示すデータは、前記追加画像の形状と、大きさ及び色の少なくとも１つとを示すデータを含む
ことを特徴とする付記１から８のいずれか１つに記載の表示制御装置。

（付記１０）
コンピュータに、
変換処理が施された変換画像を示すデータを取得する処理、
前記変換処理における変換方法を示すデータを取得する処理、
追加画像を示すデータを取得する処理、
表示手段に表示された変換画像内の指定位置を示すデータを取得する処理、
前記変換方法に従って前記追加画像を示すデータを変換することによって得られる変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する処理、
前記合成画像を示すデータを取得し、表示手段に前記合成画像を表示させる処理、
を実行させることを特徴とするプログラム。

１…表示制御装置、１０…補助記憶部、１２…原画像データ、１３…追加形状データ、１４…変換種別データ、１５…変換画像データ、１６…領域設定データ、１７…加工画像データ、２０…タッチパネル、２１…表示部、２２…タッチセンサ、３０…処理・制御部、３１…表示制御部、３２…タッチパネル制御部、３３…補助記憶制御部、３４…プログラム実行処理部、５１…原画像取得部、５２…変換方法生成部、５３…変換部、５４…加工部、６１…追加画像取得部、６２…変換画像取得部、６３…変換方法取得部、６４…追加方法取得部、６５…指定位置取得部、６６…終了判断部、６７…合成画像生成部、７１…指定領域特定部、７２…指定位置変換特定部、７３…追加方法判断部、７４…追加画像変換部、７５…第１合成部、７６…逆変換部、７７…第２合成部、７８…合成画像変換部

Claims (9)

1. 変換方法が異なる第１の変換処理と第２の変換処理とを含み、前記第１の変換処理と前記第２の変換処理とが施された変換画像を示すデータを取得する変換画像取得手段と、
   前記第１の変換処理における第１の変換方法を示すデータと前記第２の変換処理における第２の変換方法を示すデータを取得する変換方法取得手段と、
   追加画像を示すデータを取得する追加画像取得手段と、
   表示手段に表示された変換画像内の指定位置を示すデータを取得する指定位置取得手段と、
   前記第１又は前記第２の変換方法に従って前記追加画像を変換した変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する合成画像生成手段と、
   前記合成画像を示すデータを取得し、表示手段に前記合成画像を表示させる表示制御手段と、を備え、
   前記変換画像取得手段は、前記変換画像内の第１の領域には前記第１の変換処理が施され、前記変換画像内の第２の領域には前記第２の変換処理が施された前記変換画像を示すデータを取得し、
   前記合成画像生成手段は、前記指定位置に対応する前記第１又は前記第２の変換方法に従って前記追加画像を変換した変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する
   ことを特徴とする表示制御装置。
2. 変換処理が施された変換画像を示すデータを取得する変換画像取得手段と、
   前記変換処理における変換方法を示すデータを取得する変換方法取得手段と、
   追加画像を示すデータを取得する追加画像取得手段と、
   表示手段に表示された変換画像内の指定位置を示すデータを取得する指定位置取得手段と、
   前記変換方法に従って前記追加画像を示すデータを変換することによって得られる変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する合成画像生成手段と、
   前記合成画像を示すデータを取得し、表示手段に前記合成画像を表示させる表示制御手段と、を備え、
   前記合成画像生成手段は、
   前記変換方法取得手段によって取得されたデータを参照し、前記変換画像を変換前の原画像に戻す逆変換を施すことによって、当該原画像を示すデータを生成する逆変換手段と、
   前記指定位置に対応する前記原画像内の位置に前記追加画像を追加した原合成画像を示すデータを生成する第２合成手段と、
   前記原合成画像に前記変換方法に従って変換することによって前記合成画像を示すデータを生成する合成変換手段と、を備える
   ことを特徴とする表示制御装置。
3. 前記合成画像生成手段は、前記変換追加画像を前記変換画像の前記指定位置に追加するとともに、前記指定位置に追加される追加画像の外縁から所定の範囲に含まれる前記変換画像内の画像を変換した画像である合成画像を示すデータを生成する
   ことを特徴とする請求項１又は２に記載の表示制御装置。
4. 前記指定位置取得手段は、前記指定位置を示すデータを連続的に取得し、
   前記合成画像生成手段は、前記変換追加画像を前記指定位置に連続的に追加した画像である合成画像を示すデータを生成する
   ことを特徴とする請求項１又は２に記載の表示制御装置。
5. 原画像を示すデータを取得し、当該原画像を示すデータに変換処理を施すことによって前記変換画像を示すデータを生成するとともに、当該変換処理における変換方法を示すデータを生成する変換手段を、さらに備える
   ことを特徴とする請求項１又は２に記載の表示制御装置。
6. 前記合成画像生成手段は、
   前記変換処理のうち移動又は変形を除く変換方法を前記追加画像に施した前記変換追加画像を示すデータを生成する追加画像変換手段と、
   前記追加画像変換手段によって生成されたデータが示す変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する第１合成手段とを備える
   ことを特徴とする請求項１から５のいずれか１項に記載の表示制御装置。
7. 前記追加画像を示すデータは、前記追加画像の形状と、大きさ及び色の少なくとも１つとを示すデータを含む
   ことを特徴とする請求項１から６のいずれか１項に記載の表示制御装置。
8. コンピュータを、
   変換方法が異なる第１の変換処理と第２の変換処理とを含み、前記第１の変換処理と前記第２の変換処理とが施された変換画像を示すデータを取得する変換画像取得手段と、
   前記第１の変換処理における第１の変換方法を示すデータと前記第２の変換処理における第２の変換方法を示すデータを取得する変換方法取得手段と、
   追加画像を示すデータを取得する追加画像取得手段と、
   表示手段に表示された変換画像内の指定位置を示すデータを取得する指定位置取得手段と、
   前記第１又は前記第２の変換方法に従って前記追加画像を変換した変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する合成画像生成手段と、
   前記合成画像を示すデータを取得し、表示手段に前記合成画像を表示させる表示制御手段と、して機能させ、
   前記変換画像取得手段は、前記変換画像内の第１の領域には前記第１の変換処理が施され、前記変換画像内の第２の領域には前記第２の変換処理が施された前記変換画像を示すデータを取得し、
   前記合成画像生成手段は、前記指定位置に対応する前記第１又は前記第２の変換方法に従って前記追加画像を変換した変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する
   ことを特徴とするプログラム。
9. コンピュータを、
   変換処理が施された変換画像を示すデータを取得する変換画像取得手段と、
   前記変換処理における変換方法を示すデータを取得する変換方法取得手段と、
   追加画像を示すデータを取得する追加画像取得手段と、
   表示手段に表示された変換画像内の指定位置を示すデータを取得する指定位置取得手段と、
   前記変換方法に従って前記追加画像を示すデータを変換することによって得られる変換追加画像を前記変換画像の前記指定位置に追加した合成画像を示すデータを生成する合成画像生成手段と、
   前記合成画像を示すデータを取得し、表示手段に前記合成画像を表示させる表示制御手段と、して機能させ、
   前記合成画像生成手段は、
   前記変換方法取得手段によって取得されたデータを参照し、前記変換画像を変換前の原画像に戻す逆変換を施すことによって、当該原画像を示すデータを生成する逆変換手段と、
   前記指定位置に対応する前記原画像内の位置に前記追加画像を追加した原合成画像を示すデータを生成する第２合成手段と、
   前記原合成画像に前記変換方法に従って変換することによって前記合成画像を示すデータを生成する合成変換手段と、を備える
   ことを特徴とするプログラム。

Images