JP7348380B2 - スケッチイメージの彩色装置及び方法 - Google Patents

Description

本開示は、イメージ処理分野に関する。さらに具体的には、スケッチイメージを彩色する装置及び方法に関する。

従来は、ユーザが、マンガ本などを介してオフラインでマンガを消費したが、最近、インターネットの発展により、ウェブトゥーンなどを介し、オンラインでマンガを消費する傾向が高くなった。マンガ本は、印刷などの問題により、黒白イメージからなる場合がほとんどであったが、ネットワーク速度、及び、ユーザ機器の解像度発達により、ウェブトゥーンは、カラーイメージで提供される場合が多い。

ウェブトゥーン制作者は、スケッチ作業を経て、彩色されていないスケッチイメージを生成した後で、該スケッチイメージを自分が所望する色相に彩色するが、今のところ、スケッチイメージを簡便に彩色することを可能にするプログラムやサービスが提供されていないのが実情である。

一実施形態による、スケッチイメージの彩色装置及び方法は、簡便な方法で迅速にスケッチイメージを彩色することを技術的課題にする。

また、一実施形態による、スケッチイメージの彩色装置及び方法は、彩色イメージのヒストリー管理機能を介して、所望する品質の彩色イメージを生成することを可能にすることを技術的課題にする。

本開示の一実施形態による、スケッチイメージの彩色方法は、ユーザの入力により、スケッチイメージ上に色相ポインタを追加する段階と、前記スケッチイメージを構成するオブジェクトのうち、前記色相ポインタが位置する地点と係わるオブジェクトを決定する段階と、前記色相ポインタの色相に基づいて、前記決定されたオブジェクトを彩色し、彩色イメージを生成する段階と、を含むものでもある。

一実施形態による、スケッチイメージの彩色装置及び方法は、簡便な方法で迅速にスケッチイメージを彩色することができる。

また、一実施形態による、スケッチイメージの彩色装置及び方法は、彩色イメージのヒストリー管理機能を介して、所望する品質の彩色イメージを生成することを可能にする。

ただし、一実施形態による、スケッチイメージの彩色装置及び方法が達成することができる効果は、以上で言及したところに制限されるものではなく、言及されていない他の効果は、以下の記載から、本開示が属する技術分野で当業者に明確に理解されるであろう。

本明細書で引用される図面をさらに十分に理解するために、各図面の簡単な説明が提供される。
一実施形態による彩色装置を図示する図である。 一実施形態による彩色装置によるスケッチイメージの彩色方法について説明するためのフローチャートである。 スケッチイメージの彩色のためのＵＩ画面を図示する例示的な図である。 スケッチイメージ上に位置した色相ポインタを含むＵＩ画面を図示する例示的な図である。 色相ポインタに基づいて彩色された彩色イメージを含むＵＩ画面を図示する例示的な図である。 色相ポインタの削除要請に対応する第２形態の色相ポインタを含むＵＩ画面を図示する例示的な図である。 色相ポインタが削除されることによって変更された彩色イメージを含むＵＩ画面を図示する例示的な図である。 彩色イメージ上に追加された第３形態の色相ポインタを含むＵＩ画面を図示する例示的な図である。 色相抽出メニューが選択されたときのＵＩ画面を図示する例示的な図である。 彩色未適用メニューが選択されたときのＵＩ画面を図示する例示的な図である。 ヒストリーパネルに含まれたサンプル彩色イメージのサムネイルイメージが選択されたときのＵＩ画面を図示する例示的な図である。 一実施形態による彩色装置の構成を図示するブロック図である。

本開示の一実施形態による、スケッチイメージの彩色方法は、ユーザの入力により、スケッチイメージ上に色相ポインタを追加する段階と、前記スケッチイメージを構成するオブジェクトのうち、前記色相ポインタが位置する地点と係わるオブジェクトを決定する段階と、前記色相ポインタの色相に基づいて、前記決定されたオブジェクトを彩色し、彩色イメージを生成する段階と、を含んでもよい。

本開示の他の実施形態による彩色装置は、プロセッサと、少なくとも１つのインストラクションを保存するメモリと、を含む。前記プロセッサは、前記少なくとも１つのインストラクションによって、ユーザの入力により、スケッチイメージ上に色相ポインタを追加し、前記スケッチイメージを構成するオブジェクトのうち、前記色相ポインタが位置する地点と係わるオブジェクトを決定し、前記色相ポインタの色相に基づいて、前記決定されたオブジェクトを彩色し、彩色イメージを生成することができる。

本開示は、多様な変更を加えることができ、さまざまな実施形態を有することができるが、特定実施形態を図面に例示し、それらについて、詳細な説明を介して説明する。しかし、それは、本開示を、特定の実施形態について限定するものではなく、本開示の思想及び技術範囲に含まれる全ての変更、均等物、および代替物を含むものと理解されなければならない。

本実施形態の説明において、関連公知技術に係わる具体的な説明が、要旨を不必要に曖昧にしてしまうと判断される場合、その詳細な説明を省略する。また、本実施形態の説明過程で利用される数（例えば、第１、第２など）は、１つの構成要素を、他の構成要素と区分するための識別記号に過ぎない。

また、本明細書において、一構成要素が他の構成要素と、「連結される」として、または、「接続される」として言及されたときには、前述の一構成要素が、前述の他の構成要素と直接連結されるか、あるいは、直接接続されることも可能であるが、特別に反対となる記載が存在しない限り、中間に、さらに他の構成要素を媒介して連結され、または、接続されるものと理解されなければならない。

また、本明細書において、「～部（ユニット）」、「モジュール」というように表現される構成要素は、２個以上の構成要素が１つの構成要素に組み合され、あるいは、１つの構成要素がさらに細分化されて、機能別に２個以上にも分化される。また、以下で説明される構成要素それぞれは、自体が担当する主機能以外にも、他の構成要素が担当する機能のうち、一部または全部のものをさらに遂行することもでき、構成要素それぞれが担当する主機能のうち、一部機能が他の構成要素によって専担されても遂行されるということは、言うまでもない。

以下、本開示の技術的思想による実施形態について順に詳細に説明する。

図１は、一実施形態による彩色装置１００を図示する図面である。

一実施形態による彩色装置１００は、スケッチイメージ１０を彩色し、彩色イメージ２０を生成する。ユーザは、後述するＵＩ（user interface）画面を介して、スケッチイメージ１０を彩色するための色相などを決定することができる。

彩色装置１００は、高品質の彩色イメージ２０を生成するために、ＡＩ（artificial intelligence）基盤で、彩色方法を学習することができる。例えば、彩色装置１００は、学習用彩色イメージに基づき、イメージを構成するオブジェクトの彩色方法を学習し、学習された方法、ユーザによって選択された色相、及び、当該色相の位置に基づいて、スケッチイメージ１０に含まれたオブジェクトを彩色することができる。すなわち、一実施形態によれば、ユーザが、スケッチイメージ１０のオブジェクトを、所定の色相で直接彩色する必要がなく、単にユーザが、色相、及び、当該色相の位置を選択するだけでも、彩色装置１００は、事前に学習された方法に基づいて、高品質の彩色イメージ２０を生成することができる。

一実施形態による彩色装置１００は、ユーザ端末でもある。該ユーザ端末は、例えば、スマートフォン、タブレットＰＣ（personal computer）、ノート型パソコン、デスクトップＰＣのように、イメージ処理を行うことができる多様な種類の機器を含んでもよい。ユーザ端末には、スケッチイメージ１０彩色のためのプログラムがインストールされ得る。該ユーザ端末は、ユーザによって選択されたスケッチイメージ１０を獲得し、獲得されたスケッチイメージ１０を彩色することができる。該ユーザ端末は、スケッチイメージ１０から生成された彩色イメージ２０をディスプレイに表示することができる。また、該ユーザ端末は、スケッチイメージ１０彩色のためのＵＩ画面をディスプレイに表示することもできる。

他の実施形態において、彩色装置１００は、ユーザ端末と通信するサーバでもある。該サーバは、ユーザ端末からスケッチイメージ１０を受信し、または、ネットワークを介して連結された他の装置からスケッチイメージ１０を受信して、受信されたスケッチイメージ１０を彩色することができる。該サーバは、彩色イメージ２０をユーザ端末に伝送することができる。また、該サーバは、スケッチイメージ１０彩色のためのＵＩ画面をユーザ端末に伝送することができる。

以下においては、図２を参照し、彩色装置１００の動作について具体的に説明する。

図２は、一実施形態による彩色装置１００によるスケッチイメージの彩色方法について説明するためのフローチャートである。

Ｓ２１０段階において、彩色装置１００は、ユーザ入力により、スケッチイメージ上に色相ポインタを追加する。一実施形態において、ユーザは、スケッチイメージの彩色に利用される色相を選択し、スケッチイメージ上において、色相ポインタが位置する地点を選択することができる。彩色装置１００は、ユーザが選択した色相の色相ポインタを、ユーザが選択した地点に位置させることができる。

スケッチイメージ上に追加される色相ポインタは、第１形態を有することができる。例えば、該第１形態の色相ポインタは、ユーザによって選択された色相の第１図形、及び、事前に決定された色相の第２図形を含んでもよいが、それについては、図４を参照して後述する。

Ｓ２２０段階において、彩色装置１００は、スケッチイメージを構成するオブジェクトのうち、色相ポインタが位置する地点と係わるオブジェクトを決定する。

スケッチイメージは、さまざまなオブジェクトによって構成される。該オブジェクトは、スケッチイメージの一部領域を意味する。該オブジェクトは、相互間で区別され得る。例えば、該スケッチイメージが人間を表現している場合、該オブジェクトは、人の毛髪、皮膚、トップス、ボトムスなどでもある。他の例として、該スケッチイメージが自動車を表現している場合、該オブジェクトは、自動車のガラス窓、タイヤ、ナンバープレート、板金などでもある。さらに他の例として、該オブジェクトは、線で取り囲まれた閉領域（closed region）でもある。

彩色装置１００は、彩色するスケッチイメージを構成するオブジェクトを識別することができる。例えば、ＡＩ基盤で事前に学習されたオブジェクト識別方法により、スケッチイメージを構成するオブジェクトを識別することができる。

一実施形態において、色相ポインタが位置する地点と係わるオブジェクトは、スケッチイメージを構成するオブジェクトのうち、色相ポインタが位置する地点を含むオブジェクトを含んでもよい。例えば、該スケッチイメージが人を示し、該色相ポインタが、人間の顔オブジェクト内に位置する場合、彩色装置１００は、該色相ポインタと係わるオブジェクトとして、顔オブジェクトを決定することができる。また、例えば、該色相ポインタが人間の顔オブジェクト内に位置する場合、彩色装置１００は、該色相ポインタと係わるオブジェクトとして、顔オブジェクトと、人の皮膚に該当する首オブジェクト及び手オブジェクトを決定することもできる。

他の実施形態において、彩色装置１００は、スケッチイメージを構成するオブジェクトのうち、色相ポインタが位置する地点から最も近いオブジェクト、または所定距離以内に位置するオブジェクトを、色相ポインタと係わるオブジェクトとして決定することもできる。

Ｓ２３０段階において、彩色装置１００は、色相ポインタの色相に基づいて、Ｓ２２０段階で決定されたオブジェクトを彩色し、彩色イメージを生成する。

一例として、彩色装置１００は、色相ポインタの色相でオブジェクトを彩色することができる。

他の例として、Ｓ２２０段階で決定されたオブジェクトと係わって既設定の色相が存在する場合、既設定の色相と、色相ポインタの色相とを利用して、オブジェクトを彩色することができる。それは、皮膚に該当するオブジェクトのように、人に親近感のある色相が存在する場合に有用である。例えば、顔オブジェクトに、赤色の色相ポインタが位置する場合、彩色装置１００は、顔オブジェクトにつき、既設定の色相と、色相ポインタの色相である赤色とを混合し、顔オブジェクトを彩色することができる。

彩色装置１００は、学習用彩色イメージに基づいて、事前に学習された彩色方法により、色相ポインタの色相、及び／または、オブジェクトにつき、既設定の色相でオブジェクトを彩色することができる。すなわち、事前に学習された彩色方法として、特定オブジェクトの陰影の位置、色相の明るさなどが決定されていれば、彩色装置１００は、事前に決定された陰影の位置、及び、明るさを考慮し、色相ポインタの色相、及び／または、オブジェクトに係わる既設定の色相で、オブジェクトを彩色することができる。

前述のように、ユーザは、ＵＩ画面を介し、スケッチイメージを彩色することができるが、以下においては、図３ないし図１１を参照して説明する。

図３は、スケッチイメージの彩色のためのＵＩ画面３００を図示する例示的な図面である。

彩色装置１００は、スケッチイメージの彩色のためのユーザ操作入力されるＵＩ画面３００を生成することができる。例えば、彩色装置１００がユーザ端末である場合、該ユーザ端末は、ＵＩ画面３００を生成し、ディスプレイに表示することができる。または、彩色装置１００がサーバである場合、該サーバは、ＵＩ画面３００を生成し、ユーザ端末に伝送し、該ユーザ端末は、受信されたＵＩ画面３００をディスプレイに表示することができる。

ユーザが彩色するスケッチイメージを選択すれば、図３に図示されているようなＵＩ画面３００が、彩色装置１００によっても生成される。

図３を参照すれば、ＵＩ画面３００は、彩色の対象になるスケッチイメージ３１０、ヒストリーパネル３２０、ツールメニュー３３０、及び色相スワッチ（color swatch）３４０を含んでもよい。図３は、スケッチイメージ３１０、ヒストリーパネル３２０、ツールメニュー３３０、及び色相スワッチ３４０が、ＵＩ画面３００上において、互いに異なる領域に位置するように図示されているが、それは、１つの例示に過ぎない。例えば、ツールメニュー３３０は、スケッチイメージ３１０上に位置するものの、ユーザの所定入力がないときには、表示されておらず、ユーザの所定入力があるときにだけ、ＵＩ画面３００に表示され得る。

スケッチイメージ３１０は、スケッチイメージ３１０の解像度と係わりなく、事前に決定された大きさで、ＵＩ画面３００内にも表示される。例えば、事前に決定された大きさが、横２００ｍｍ及び縦３００ｍｍである場合、スケッチイメージ３１０の解像度と係わりなく、スケッチイメージ３１０は、常時横２００ｍｍ及び縦３００ｍｍの大きさで、ＵＩ画面３００内にも表示される。

ヒストリーパネル３２０は、複数のサムネイルイメージ３２１，３２９を含む。具体的には、ヒストリーパネル３２０は、スケッチイメージ３１０のサムネイルイメージ３２１、及び、スケッチイメージ３１０に対応するサンプル彩色イメージのサムネイルイメージ３２９を含んでもよい。彩色装置１００は、ユーザが選択したスケッチイメージ３１０を、事前に保存された彩色方法によって彩色したサンプル彩色イメージを生成し、そのサムネイルイメージ３２９を、ヒストリーパネル３２０に含めることができる。後述するように、ユーザは、サンプル彩色イメージに対応するサムネイルイメージ３２９を選択し、サンプル彩色イメージを変更する方式により、彩色イメージを生成することもできる。

ツールメニュー３３０は、スケッチイメージ３１０の彩色に利用されるメニューを含んでもよい。例えば、ツールメニュー３３０は、色相ポインタ追加メニュー、色相ポインタ削除メニュー、色相抽出メニューなどを含んでもよいが、それらメニューについては、関連部分で説明する。

色相スワッチ３４０は、色相ポインタの色相を指定するのに利用される。ユーザは、色相スワッチ３４０を介して、色相ポインタの色相を決定することができる。ユーザは、色相スワッチ３４０内に例示された色相サンプルのうちいずれか１つの色相を選択することができ、直接ＲＧＢ値を入力し、色相ポインタの色相を選択することもできる。

図４は、スケッチイメージ３１０上に位置する色相ポインタ３１５ａ，３１５ｂ，３１５ｃ，…を含む、ＵＩ画面３００を図示する例示的な図面である。

本開示の一実施形態においては、ユーザが、スケッチイメージ３１０を、マウスなどを利用して直接彩色する必要はなく、単に、色相ポインタ３１５ａ，３１５ｂ，３１５ｃ，…を、スケッチイメージ３１０上に追加することだけによって、簡便にスケッチイメージ３１０を彩色することができる。具体的には、ユーザは、色相スワッチ３４０において所望する色相を選択し、ツールメニュー３３０の色相ポインタ追加メニュー３３１を、マウスクリック、タッチなどの方式で選択した後で、色相ポインタ３１５ａ，３１５ｂ，３１５ｃ，…が追加される地点を選択することができる。ユーザが選択した地点に、ユーザが選択した色相の色相ポインタ３１５ａ，３１５ｂ，３１５ｃ，…が位置することにもなる。

図４に図示されているように、ユーザは、スケッチイメージ３１０の毛髪オブジェクト、トップスオブジェクト、手袋オブジェクトに、色相ポインタ３１５ａ，３１５ｂ，３１５ｃを位置させることができる。スケッチイメージ３１０上に追加される色相ポインタ３１５ａ，３１５ｂ，３１５ｃ，…は、第１形態を有することができる。例えば、該第１形態の色相ポインタは、ユーザによって選択された色相の第１図形、及び、事前に決定された色相の第２図形を含んでもよい。図４に図示されているように、第１図形は、円形であり、第２図形は、ドーナツ形状でもあるが、それらに限定されるものではない。第１形態の色相ポインタは、後述する第２形態の色相ポインタ、及び、第３形態の色相ポインタとも区別される。

ユーザによる、色相ポインタ３１５ａ，３１５ｂ，３１５ｃ，…の追加が完了し、ユーザが適用メニュー３０５を選択した場合のＵＩ画面３００が、図５に図示されている。

図５は、色相ポインタ３１５ａ，３１５ｂ，３１５ｃ，…に基づいて彩色された彩色イメージ３５０を含む、ＵＩ画面３００を図示する例示的な図面である。

前述のように、彩色装置１００は、色相ポインタ３１５ａ，３１５ｂ，３１５ｃ，…が位置する地点と係わるオブジェクトを決定し、色相ポインタ３１５ａ，３１５ｂ，３１５ｃ，…の色相に基づいて、前記決定されたオブジェクトを彩色し、彩色イメージ３５０を生成することができる。ユーザが適用メニュー３０５を選択すれば、彩色イメージ３５０が生成されると共に、彩色イメージ３５０のサムネイルイメージ３２３が、ヒストリーパネル３２０に追加され得る。すなわち、ヒストリーパネル３２０には、ユーザの操作によって生成された彩色イメージのサムネイルイメージが、生成時間によって順次に含まれ得る。

図５を参照すれば、ユーザの適用メニュー３０５選択によって生成された彩色イメージ３５０と、当該彩色イメージ３５０について追加された色相ポインタ３１５ａ，３１５ｂ，３１５ｃ，…が、ＵＩ画面３００内にも表示される。

ユーザは、彩色イメージ３５０を修正することもできる。例えば、ユーザは、ヒストリーパネル３２０に含まれたサムネイルイメージのうちいずれか１つの彩色イメージに対応するサムネイルイメージを選択し、選択したサムネイルイメージに対応する彩色イメージを修正することができる。彩色イメージの修正過程については、図６ないし図８を参照して説明する。

図６は、色相ポインタの削除要請に対応する第２形態の色相ポインタ３１６ａを含む、ＵＩ画面３００を図示する例示的な図面である。

ユーザは、既生成の彩色イメージ３５０を修正するために、例えば、以前に追加された色相ポインタ３１５ａを削除することができる。具体的には、ユーザは、ツールメニュー３３０から、色相ポインタ削除メニュー３３３を選択した後で、例えば、以前に追加された色相ポインタ３１５ａを選択することができる。それにより、例えば、ユーザによって選択された第１形態の色相ポインタ３１５ａは、第２形態にも変更される。例えば、第２形態の色相ポインタ３１６ａは、透明度が調節された第１図形、及び、透明度が調節された第２図形を含んでもよい。言い換えれば、既存に追加された第１形態の色相ポインタ３１５ａは、ユーザの削除要請時、透明度が調節された第２形態の色相ポインタ３１６ａに変更されることにより、他の色相ポインタとも区別される。

また、ユーザは、ツールメニュー３３０から、全体削除メニュー３３７を選択し、以前に追加された全ての色相ポインタ３１５ａ，３１５ｂ，３１５ｃ，…を削除することもできる。

ユーザが、ヘアーオブジェクトに追加された色相ポインタ３１５ａを削除した後で、適用メニュー３０５を選択した場合のＵＩ画面３００が、図７に図示されている。

図７は、色相ポインタ３１５ａが削除されることによって変更された彩色イメージ３６０を含む、ＵＩ画面３００を図示する例示的な図面である。

図７に図示されているように、既存に生成された彩色イメージ３５０は、新たな彩色イメージ３６０に変更され、新たな彩色イメージ３６０のサムネイルイメージ３２５は、ヒストリーパネル３２０に追加され得る。新たな彩色イメージ３６０は、図６で削除された色相ポインタ３１５ａ以外の色相ポインタ３１５ｂ，３１５ｃ，…に基づいて生成されたものである。

図８は、彩色イメージ３６０上に追加された第３形態の色相ポインタ３１５ｄを含む、ＵＩ画面３００を図示する例示的な図面である。

ユーザは、既存に生成された彩色イメージに、新たな色相ポインタを追加することもできる。図８を参照すれば、ユーザは、ツールメニュー３３０から、色相ポインタ追加メニュー３３１を選択し、色相スワッチ３４０から、所望する色相を選択した後で、色相ポインタが追加される地点を選択することにより、新たな色相ポインタ３１５ｄを、彩色イメージ３６０上に追加することができる。ここで、彩色イメージ３６０に追加される色相ポインタ３１５ｄは、第３形態を有することができる。例えば、第３形態の色相ポインタ３１５ｄは、ユーザによって選択された色相の第１図形、及び、事前に決定された色相の第２図形を含んでもよい。第３形態の色相ポインタ３１５ｄに含まれた第２図形の色相は、前述の第１形態の色相ポインタに含まれた第２図形の色相とも異なる。それにより、第３形態の色相ポインタ３１５ｄは、第１形態の色相ポインタ、及び、第２形態の色相ポインタとも区別される。

既存に生成された彩色イメージが複数個である場合、ユーザは、ヒストリーパネル３２０から、いずれか１つの彩色イメージのサムネイルイメージを選択した後で、選択されたサムネイルイメージに対応する彩色イメージに、第３形態の色相ポインタを追加することができる。

本開示の一実施形態によれば、スケッチイメージ上に追加された色相ポインタ、削除される色相ポインタ、及び、彩色イメージ上に追加された色相ポインタの形態を、互いに区別されるように実施することにより、ユーザをして、彩色イメージがどのように変更されるかということを事前に予測させることができる。

彩色イメージ３６０上に、新たな色相ポインタ３１５ｄが追加された後で、ユーザが適用メニュー３０５を選択すれば、既存に追加され、削除されていない第１形態の色相ポインタ３１５ｂ，３１５ｃ，…、及び、新たに追加された第３形態の色相ポインタ３１５ｄに基づいて、新たな彩色イメージ（図示せず）が生成され得る。

図９は、色相抽出メニュー３３５が選択されたときのＵＩ画面３００を図示する例示的な図面である。

色相抽出メニュー３３５は、彩色イメージ３６０に含まれた色相を、色相ポインタの色相として指定するのに利用される。具体的には、ユーザが、色相抽出メニュー３３５を選択すれば、拡大ポインタ３３６がＵＩ画面３００内に表示され、ユーザは、拡大ポインタ３３６の位置を変更しながら、抽出する色相を選択することができる。

拡大ポインタ３３６が、彩色イメージ３６０内の一部領域を拡大表示している状態で、ユーザが、マウスクリック、タッチなどの入力を行えば、拡大ポインタ３３６内の一部領域の色相が、色相スワッチ３４０で選択される。そして、ユーザが、色相ポインタ追加メニュー３３１を選択した後で、所望する地点を選択すれば、拡大ポインタ３３６内の一部領域の色相を有する色相ポインタが、彩色イメージ３６０上に追加される。すなわち、色相スワッチ３４０から、所望する色相を選択し難い場合、ユーザは、彩色イメージ３６０に含まれた色相を利用し、色相ポインタの色相を容易に選択することができるのである。

図１０は、彩色未適用メニュー３９１が選択されたときのＵＩ画面３００を図示する例示的な図面である。

彩色イメージ３６０が、ＵＩ画面３００内に表示されている状態で、ユーザが彩色未適用メニュー３９１を選択すれば、彩色される前のスケッチイメージ３１０が、ＵＩ画面３００にも表示される。ユーザが、彩色未適用メニュー３９１をさらに選択すれば、彩色イメージ３６０が、ＵＩ画面３００にも表示される。図１０を参照すれば、ユーザが、彩色未適用メニュー３９１を選択し、彩色イメージ３６０の代わりに、スケッチイメージ３１０が表示されても、ユーザが追加した色相ポインタ３１５ｂ，３１５ｃ，…は、続けてＵＩ画面３００内にも表示されるが、実施例により、色相ポインタ３１５ｂ，３１５ｃ，……も、ＵＩ画面３００内に表示されないのである。

図１０を参照すれば、ＵＩ画面３００は、色相ポインタ表示メニュー３９２、拡大／縮小メニュー３９３、ダウンロードメニュー３９４などをさらに含んでもよい。

色相ポインタ表示メニュー３９２は、ＵＩ画面３００内に位置する色相ポインタ３１５ｂ，３１５ｃ，…の表示及び非表示を制御するためのメニューである。ユーザが、最初に色相ポインタ表示メニュー３９２を選択した場合には、ＵＩ画面３００内に位置する色相ポインタ３１５ｂ，３１５ｃ，…がＵＩ画面３００に表示されず、ユーザがさらに色相ポインタ表示メニュー３９２を選択すれば、ＵＩ画面３００に、色相ポインタ３１５ｂ，３１５ｃ，…が表示されるのである。

拡大／縮小メニュー３９３は、スケッチイメージ３１０または彩色イメージ３６０の大きさを調節するためのメニューである。

ダウンロードメニュー３９４は、スケッチイメージ３１０または彩色イメージ３６０のダウンロードを可能にするメニューであり、例えば、彩色装置１００がユーザ端末である場合には、ユーザのダウンロードメニュー３９４選択により、ユーザ端末は、スケッチイメージ３１０または彩色イメージ３６０をメモリに保存することができる。また、例えば、彩色装置１００がサーバである場合には、ユーザのダウンロードメニュー３９４選択により、サーバは、スケッチイメージ３１０または彩色イメージ３６０をユーザ端末で伝送することができる。

図１１は、ヒストリーパネル３２０に含まれたサンプル彩色イメージ３７０のサムネイルイメージ３２８が選択されたときのＵＩ画面３００を図示する例示的な図面である。

ユーザは、ヒストリーパネル３２０に含まれたサンプル彩色イメージ３７０のサムネイルイメージ３２８を選択し、サンプル彩色イメージ３７０を変更することもできる。具体的には、ユーザにより、いずれか１つのサムネイルイメージ３２８が選択されれば、選択されたサムネイルイメージ３２８に対応するサンプル彩色イメージ３７０が、ＵＩ画面３００内にも表示される。図１１に図示されているように、サンプル彩色イメージ３７０上に位置する色相ポインタ３７５ａ，３７５ｂも、ＵＩ画面３００に表示される。

ユーザは、色相ポインタ追加メニュー３３１、色相ポインタ削除メニュー３３３などを介して、新たな色相ポインタをサンプル彩色イメージ３７０上に位置させるか、あるいは、既存の色相ポインタ３７５ａ，３７５ｂを削除することができ、適用メニュー３０５の選択を介して、新たな彩色イメージを生成することができる。

図１２は、一実施形態による彩色装置１００の構成を図示するブロック図である。

図１２を参照すれば、彩色装置１００は、メモリ１２１０、制御部１２３０、及び通信部１２５０を含んでもよい。メモリ１２１０、制御部１２３０、及び通信部１２５０は、少なくとも１つのプロセッサとしても構成される。

メモリ１２１０は、スケッチイメージの彩色のためのプログラムを保存することができる。また、メモリ１２１０は、スケッチイメージ、彩色イメージ、及びサンプル彩色イメージをさらに保存することもできる。

制御部１２３０は、メモリ１２１０に保存されたプログラムが実行されることにより、スケッチイメージを彩色するためのＵＩ画面を生成することができる。制御部１２３０は、ＵＩ画面を介して入力されるユーザの操作により、スケッチイメージから、彩色イメージを生成することができる。前述のように、制御部１２３０は、ＵＩ画面を生成するとき、スケッチイメージを、既学習の彩色方法によって彩色したサンプル彩色イメージを生成し、サンプル彩色イメージのサムネイルイメージを、ＵＩ画面、具体的には、ヒストリーパネルに含めることができる。

ＵＩ画面を介するスケッチイメージの彩色過程については説明したので、ここでは、詳細な説明を省略する。

通信部１２５０は、ネットワークを介して、他の装置と通信を行う。例えば、通信部１２５０は、他の装置から、スケッチイメージの彩色のためのプログラムを受信することができる。一例において、通信部１２５０は、他の装置と、スケッチイメージ及び／または彩色イメージを送受信することもできる。

なお、前述の本開示の実施形態は、コンピュータで実行され得るプログラムまたはインストラクションによって作成可能であり、作成されたプログラムまたはインストラクションは、媒体にも保存される。

該媒体は、コンピュータで実行可能なプログラムを続けて保存するか、あるいは、実行またはダウンロードのために、臨時保存するものでもある。また、該媒体は、単一または数個のハードウェアが結合された形態の多様な記録手段または保存手段でもあるが、あるコンピュータシステムに直接接続される媒体に限定されるものではなく、ネットワーク上に分散存在するものでもある。該媒体の例示としては、ハードディスク、フロッピー（登録商標）ディスク、及び磁気テープのような磁気媒体；ＣＤ－ＲＯＭ及びＤＶＤのような光記録媒体；フロプティカルディスク（floptical disk）のような磁気・光媒体（magneto-optical medium）；及びＲＯＭ、ＲＡＭ、フラッシュメモリなどを含み、プログラム命令語が保存されるように構成されたものでもある。また、他の媒体の例示として、アプリケーションを流通するアプリストアや、その他の多様なソフトウェアを供給したり流通させたりするサイト、サーバなどで管理する記録媒体ないし記録媒体も挙げることができる。

以上、本開示の技術的思想について、望ましい実施形態を挙げて詳細に説明したが、本開示の技術的思想は、前記実施形態に限定されるものではなく、本開示の技術的思想の範囲内において、当分野で当業者により、さまざまな変形及び変更が可能である。

Claims (13)

1. 彩色装置によるスケッチイメージの彩色方法であって、
   ユーザの入力により、スケッチイメージ上に色相ポインタを追加する段階と、
   前記スケッチイメージを構成するオブジェクトのうち、前記色相ポインタが位置する地点と係わるオブジェクトを決定する段階と、
   前記色相ポインタの色相に基づいて、前記決定されたオブジェクトを彩色し、第１彩色イメージを生成する段階と、
   前記第１彩色イメージのサムネイルイメージをヒストリーパネルに追加する段階と、
   前記ヒストリーパネルに含まれたサムネイルイメージのうち、前記ユーザによって選択されたサムネイルイメージに対応する第２彩色イメージ、及び前記第２彩色イメージを彩色するのに用いられた色相ポインタを画面に表示する段階と、を含む、
   ことを特徴とする、方法。
2. 前記オブジェクトを決定する段階は、
   前記オブジェクトのうち、前記色相ポインタが位置する地点を含むオブジェクトを決定する段階、を含む、
   ことを特徴とする、請求項１に記載の方法。
3. 前記第１彩色イメージを生成する段階は、
   前記決定されたオブジェクトにつき、既設定の色相、及び、前記色相ポインタの色相に基づいて、前記決定されたオブジェクトを彩色する段階、を含む、
   ことを特徴とする、請求項２に記載の方法。
4. 前記スケッチイメージの彩色方法は、
   前記ユーザの削除要請により、前記色相ポインタの第１形態を第２形態に変更する段階と、
   前記第２形態の色相ポインタに基づいて、前記第１彩色イメージを変更する段階と、
   をさらに含む、
   ことを特徴とする、請求項１に記載の方法。
5. 前記第１形態の色相ポインタは、ユーザによって選択された色相の第１図形、及び、事前に決定された色相の第２図形を含み、
   前記第２形態の色相ポインタは、透明度が調節された前記第１図形、及び、透明度が調節された前記第２図形を含む、
   ことを特徴とする、請求項４に記載の方法。
6. 前記ヒストリーパネルは、
   前記スケッチイメージのサムネイルイメージ、及び、前記スケッチイメージに対応するサンプル彩色イメージのサムネイルイメージ、をさらに含む、
   ことを特徴とする、請求項１に記載の方法。
7. 前記方法は、
   前記ユーザの色相ポインタ追加要請により、前記第２彩色イメージ上において、前記ユーザによって選択された地点に、第３形態の色相ポインタを位置させる段階、をさらに含む、
   ことを特徴とする、請求項１に記載の方法。
8. 前記方法は、
   前記スケッチイメージの解像度と係わりなく、前記スケッチイメージを事前に決定された大きさで、前記画面に表示する段階、をさらに含む、
   ことを特徴とする、請求項１に記載の方法。
9. 前記画面には、
   ツールメニューがさらに示され、
   前記方法は、
   前記ツールメニューにおいて、色相抽出メニューが前記ユーザによって選択されると、前記第１彩色イメージの一部領域を拡大する拡大ポインタを、前記画面に表示する段階と、
   前記拡大ポインタによって選択された一部領域の色相を認識する段階と、
   前記ユーザの色相ポインタの追加要請により、前記認識された色相の色相ポインタを、前記第１彩色イメージ上に位置させる段階と、
   をさらに含む、
   ことを特徴とする、請求項１に記載の方法。
10. 前記画面には、
    前記色相ポインタの色相を選択するための色相スワッチがさらに表示される、
    ことを特徴とする、請求項１に記載の方法。
11. ハードウェアと結合し、請求項１に記載の方法を行うために媒体に保存されたプログラム。
12. スケッチイメージの彩色装置であって、
    プロセッサと、
    少なくとも１つのインストラクションを保存するメモリと、を含み、
    前記プロセッサは、前記少なくとも１つのインストラクションによって、
    ユーザの入力により、スケッチイメージ上に色相ポインタを追加し、
    前記スケッチイメージを構成するオブジェクトのうち、前記色相ポインタが位置する地点と係わるオブジェクトを決定し、
    前記色相ポインタの色相に基づいて前記決定されたオブジェクトを彩色し、第１彩色イメージを生成し、
    前記第１彩色イメージのサムネイルイメージをヒストリーパネルに追加し、
    前記ヒストリーパネルに含まれたサムネイルイメージのうち、前記ユーザによって選択されたサムネイルイメージに対応する第２彩色イメージ、及び前記第２彩色イメージを彩色するのに用いられた色相ポインタを画面に表示する、
    ことを特徴とする、装置。
13. 彩色装置によるスケッチイメージの彩色方法であって、
    ユーザの入力によってスケッチイメージ上に第１形態の色相ポインタを追加する段階と、
    前記スケッチイメージを構成するオブジェクトのうち、前記色相ポインタが位置する地点に係わるオブジェクトを決定する段階と、
    前記色相ポインタの色相に基づいて前記決定されたオブジェクトを彩色し、彩色イメージを生成する段階と、
    前記ユーザの削除要請によって前記第１形態の色相ポインタを第２形態に変更する段階と、
    前記第２形態の色相ポインタに基づいて前記彩色イメージを変更する段階と、を含むことを、
    特徴とする、方法。

Images