JP7363096B2 - 画像処理装置及び画像処理プログラム - Google Patents
画像処理装置及び画像処理プログラム Download PDFInfo
- Publication number
- JP7363096B2 JP7363096B2 JP2019096459A JP2019096459A JP7363096B2 JP 7363096 B2 JP7363096 B2 JP 7363096B2 JP 2019096459 A JP2019096459 A JP 2019096459A JP 2019096459 A JP2019096459 A JP 2019096459A JP 7363096 B2 JP7363096 B2 JP 7363096B2
- Authority
- JP
- Japan
- Prior art keywords
- processing
- image
- processed
- area
- assigned
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformation in the plane of the image
- G06T3/20—Linear translation of a whole image or part thereof, e.g. panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00405—Output means
- H04N1/00408—Display of information to the user, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformation in the plane of the image
- G06T3/60—Rotation of a whole image or part thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00405—Output means
- H04N1/00408—Display of information to the user, e.g. menus
- H04N1/00411—Display of information to the user, e.g. menus the display also being used for user input, e.g. touch screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
- Editing Of Facsimile Originals (AREA)
Description
本発明は、画像を加工するにあたって、操作メニューの表示を抑制する画像処理装置及び画像処理プログラムを提供することを目的としている。
請求項1の発明は、加工対象を有する画像を表示画面に表示させる表示手段、前記表示画面上の位置を受け付ける受付手段、前記位置と前記加工対象との関係に基づいて、該加工対象に対して加工処理を行う処理手段を備えた画像処理装置である。
請求項1の発明は、複数の文字を含む文字列について、該文字列内の一文字又は複数文字を表示するように制御する表示制御手段と、前記表示制御手段によって表示された文字を発声したユーザーの音声を受け付ける受付手段と、一文字又は複数文字の音声毎に認証する第1認証手段と、前記第1認証手段による複数の認証結果に対して予め定められた規則を適用することによって、前記音声を発したユーザーを認証する第2認証手段を有する情報処理装置である。
図1は、本実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア(「ソフトウェア」の解釈として、コンピュータ・プログラムを含む)、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、それらのモジュールとして機能させるためのコンピュータ・プログラム(例えば、コンピュータにそれぞれの手順を実行させるためのプログラム、コンピュータをそれぞれの手段として機能させるためのプログラム、コンピュータにそれぞれの機能を実現させるためのプログラム)、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するという意味である。また、モジュールは機能に一対一に対応していてもよいが、実装においては、1モジュールを1プログラムで構成してもよいし、複数モジュールを1プログラムで構成してもよく、逆に1モジュールを複数プログラムで構成してもよい。また、複数モジュールは1コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって1モジュールが複数コンピュータで実行されてもよい。なお、1つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続(例えば、データの授受、指示、データ間の参照関係、ログイン等)の場合にも用いる。「予め定められた」とは、対象としている処理の前に定まっていることをいい、本実施の形態による処理が始まる前はもちろんのこと、本実施の形態による処理が始まった後であっても、対象としている処理の前であれば、そのときの状況・状態にしたがって、又はそれまでの状況・状態にしたがって定まることの意を含めて用いる。「予め定められた値」が複数ある場合は、それぞれ異なった値であってもよいし、2以上の値(「2以上の値」には、もちろんのことながら、全ての値も含む)が同じであってもよい。また、「Aである場合、Bをする」という記載は、「Aであるか否かを判断し、Aであると判断した場合はBをする」の意味で用いる。ただし、Aであるか否かの判断が不要である場合を除く。また、「A、B、C」等のように事物を列挙した場合は、断りがない限り例示列挙であり、その1つのみを選んでいる場合(例えば、Aのみ)を含む。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク(「ネットワーク」には、一対一対応の通信接続を含む)等の通信手段で接続されて構成されるほか、1つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。もちろんのことながら、「システム」には、人為的な取り決めである社会的な「仕組み」(つまり、社会システム)にすぎないものは含まない。
また、各モジュールによる処理毎に又はモジュール内で複数の処理を行う場合はその処理毎に、対象となる情報を記憶装置から読み込み、その処理を行った後に、処理結果を記憶装置に書き出すものである。したがって、処理前の記憶装置からの読み込み、処理後の記憶装置への書き出しについては、説明を省略する場合がある。なお、ここでの記憶装置としては、ハードディスクドライブ、RAM(Random Access Memoryの略)、外部記憶媒体、通信回線を介した記憶装置、CPU(Central Processing Unitの略)内のレジスタ等を含んでいてもよい。
表示画面に表示されている画像は、加工対象となる領域とそれ以外の領域に分けられるものであって、例えば、加工対象として切抜処理モジュール120によって切り抜きされた画像と、その画像を貼り付ける背景となる画像である背景画像であってもよいし、2以上のレイヤーによって構成される画像である場合は、加工対象の画像があるレイヤーの画像と他のレイヤーの画像であってもよい。
なお、加工対象を指定する場合は、ユーザーの操作によって加工対象を指定してもよいし、アプリケーションプログラムが加工対象を指定してもよい。
操作受付モジュール105が受け付ける「操作」には、ジェスチャーを含めてもよい。例えば、マウス、キーボード等を用いた操作を受け付けるようにしてもよいし、前述したタッチパネル等を制御して、ユーザーの操作を受け付けてもよい。この他、カメラ、マイク等を用いたユーザーの操作(視線、音声等も含む)を受け付けるようにしてもよい。タッチパネルを用いた場合は、そのタッチパネルに触れた指の位置の軌跡やそのタッチパネルに触れる指(又はペン)の数に応じて、加工種類を選択するようにしてもよい。
切抜処理モジュール120は、画像受付モジュール110で受け付けられた画像から、加工対象となる領域の画像を切り抜く。例えば、加工対象となる領域の外周を、ユーザーの操作でなぞることによって、加工対象となる画像を切り抜くようにしてもよい。また、加工対象となる領域の内部をユーザーの操作で指定し、加工対象となる領域の外部をユーザーの操作で指定し、その2つの操作から、加工対象となる画像を切り抜くようにしてもよい。
また、加工処理モジュール125は、位置と加工対象との関係に対し複数の加工処理を保持していてもよい。
そして、加工処理モジュール125は、複数の加工処理のうちのいずれかの加工処理を選択して処理を行うようにしてもよい。
この場合、表示モジュール130は、操作受付モジュール105が位置を受け付けた際に、その位置の近傍に、現在選択されている加工処理を識別する情報を表示するようにしてもよい。
また、表示モジュール130は、操作受付モジュール105が位置を受け付けた際に、その位置の近傍に、複数の加工処理に対応した加工処理を識別する情報を、ユーザーが選択可能に表示するようにしてもよい。
「加工対象と表示画面との面積又は位置が予め定められた関係を有する場合」として、「加工対象の面積と表示画面の面積が予め定められた関係を有する場合」、「加工対象の位置と表示画面の位置が予め定められた関係を有する場合」がある。
(1)加工対象の面積が表示画面に対して、予め定められた割合より大きい又は以上である場合、
(2)加工対象以外の面積が予め定められた面積未満又は以下である場合、
(3)加工対象から表示画面の端までの距離が予め定められた距離未満又は以下である場合、
のいずれかである。
そして、加工処理モジュール125は、加工対象の外部の周辺に割り当てられている加工処理を、その加工対象の内部に割り当てる。
「加工対象の面積が表示画面に対して、予め定められた割合より大きい又は以上である場合」として、加工対象が表示画面に比べて大きいため、加工対象の外部の周辺領域を指定することが困難となる場合である。つまり、加工対象が表示画面のほとんどを占めるような場合が該当する。具体的には、加工対象の面積が、表示画面の面積のXa%(Xaとして、例えば、80等)以上を占める場合等が該当する。
「加工対象以外の面積が予め定められた面積未満又は以下である場合」は、「加工対象の面積が表示画面に対して、予め定められた割合より大きい又は以上である場合」と同様に、加工対象が表示画面に比べて大きいため、加工対象の外部の周辺領域を指定することが困難となる場合である。つまり、加工対象が表示画面のほとんどを占めるような場合が該当する。具体的には、加工対象以外の面積が、面積Yacm^2(Yaとして、例えば、10等)以下である場合等が該当する。
「加工対象から表示画面の端までの距離が予め定められた距離未満又は以下である場合」として、加工対象が表示画面に端に寄っているため、加工対象の外部の周辺領域を指定することが困難となる場合である。つまり、加工対象が表示画面の4辺のいずれかの辺に近いような場合が該当する。具体的には、加工対象の端から表示画面の端までの距離がYcm(Yとして、例えば、2等)以下である場合等が該当する。
これらの場合は、加工対象の外部の周辺がせまくなっており、加工対象の外部の周辺の位置を指定することが困難となっている状況である。そこで、加工対象の外部の周辺に割り当てられている加工処理を、その加工対象の内部に割り当てるようにしている。これによって、加工対象の内部の位置を指定した場合であっても、本来は、加工対象の外部の周辺に割り当てられている加工処理を実行させることができる。特に、割り当てる加工対象の内部として、加工対象の内部であるが周辺に近い領域としてもよい。そして、この場合、本来は、加工対象の内部に割り当てられている加工処理を、加工対象の中心部に割り当てるようにしてもよい。
(1)加工対象の面積が表示画面に対して、予め定められた割合より小さい又は以下である場合、
(2)加工対象以外の面積が予め定められた面積より大きい又は以上である場合、
(3)加工対象から表示画面の端までの距離が予め定められた距離より大きい又は以上である場合、のいずれかである。
そして、加工処理モジュール125は、加工対象の内部に割り当てられている加工処理を、その加工対象の外部の周辺に割り当てるようにしてもよい。
「加工対象の面積が表示画面に対して、予め定められた割合より小さい又は以下である場合」として、加工対象が表示画面に比べて小さいため、加工対象の内部の領域を指定することが困難となる場合である。具体的には、加工対象の面積が、表示画面の面積のXb%(Xbとして、例えば、10等)以下である場合等が該当する。
「加工対象以外の面積が予め定められた面積より大きい又は以上である場合」は、「加工対象の面積が表示画面に対して、予め定められた割合より小さい又は以下である場合」と同様に、加工対象が表示画面に比べて小さいため、加工対象の内部の領域を指定することが困難となる場合である。具体的には、加工対象以外の面積が、面積Ycm^2(Yとして、例えば、400等)以上である場合等が該当する。
「加工対象から表示画面の端までの距離が予め定められた距離より大きい又は以上である場合」として、加工対象が小さいため、加工対象の内部の領域を指定することが困難となる場合である。つまり、加工対象が表示画面の4辺全てに遠いような場合が該当する。具体的には、加工対象の端から表示画面の4辺である端までの距離が全てYbcm(Ybとして、例えば、10等)以上である場合等が該当する。
これらの場合は、加工対象が小さくなっており、加工対象の内部の位置を指定することが困難となっている状況である。そこで、加工対象の内部に割り当てられている加工処理を、その加工対象の外部の周辺に割り当てるようにしている。これによって、加工対象の外部の周辺の位置を指定した場合であっても、本来は、加工対象の内部に割り当てられている加工処理を実行させることができる。特に、加工対象の外部の周辺として、加工対象の外部であるが周辺に近い領域としてもよい。そして、この場合、本来は、加工対象の内部に割り当てられている加工処理を、加工対象の中心部に割り当てるようにしてもよい。
ここでの「中心部」は、中心一点のみであってもよいし、その中心を含む領域であってもよい。そして、中心部の領域は、閉領域であればよく、例えば、円、楕円、矩形等が該当する。
この場合、操作受付モジュール105は、連続した位置を受け付けてもよい。つまり、1点を指定する操作だけでなく、直線、曲線等の線を描く操作を受け付けるようにしてもよい。
そして、加工処理モジュール125は、操作受付モジュール105が受け付けた連続した位置のうち最初の位置が区分内である場合に、その区分に割り当てられている加工処理を行うようにしてもよい。
この場合、操作受付モジュール105は、連続した位置を受け付けてもよい。
そして、加工処理モジュール125は、操作受付モジュール105が受け付けた連続した位置のうち最後の位置が区分内である場合に、その区分に割り当てられている加工処理を行うようにしてもよい。
また、操作受付モジュール105が受け付けた連続した位置のうち最初の位置と最後の位置が異なる区分内である場合、加工処理モジュール125は、加工処理を行わないようにしてもよい。
ここでの「位置」は、操作受付モジュール105が受け付けた連続した位置のうち最初の位置が区分内である場合に、その区分に割り当てられている加工処理を行うときにあっては、連続した位置のうちの「最初の位置」が該当する。そして、ここでの「位置」は、操作受付モジュール105が受け付けた連続した位置のうち最後の位置が区分内である場合に、その区分に割り当てられている加工処理を行うときにあっては、連続した位置のうちの「最後の位置」が該当する。
また、「位置の軌跡」として、いわゆるジェスチャーが該当し、単なる指定(発生する位置が1つである場合)、発生する位置が連続してある場合がある。さらに、後者の例として、直線的な移動、回転等がある。また、タッチパネルの場合にあっては、操作する指(又はペン)の本数によって異なるジェスチャーと認識してもよい。
ここで「加工対象の上部又は下部」には、加工対象内部と加工対象の外部である周辺領域を含む、具体的には、加工対象内部の上部又は下部、加工対象の外部である上部の周辺領域又は外部である下部の周辺領域を含む。
ここで「加工対象の左部又は右部」には、加工対象内部と加工対象の外部である周辺領域を含む、具体的には、加工対象内部の左部又は右部、加工対象の外部である左部の周辺領域又は外部である右部の周辺領域を含む。
情報処理装置100、画像記憶装置210、画像処理装置250は、通信回線290を介してそれぞれ接続されている。通信回線290は、無線、有線、これらの組み合わせであってもよく、例えば、通信インフラとしてのインターネット、イントラネット等であってもよい。また、情報処理装置100による機能は、クラウドサービスとして実現してもよい。
情報処理装置100の画像受付モジュール110は、画像記憶装置210に記憶されている画像、又は、画像処理装置250のスキャナーが読み込んだ画像を受け付ける。
そして、情報処理装置100は、受け付けた画像を、ユーザーの操作にしたがって加工する。加工後の画像を、画像記憶装置210に記憶させる、又は、画像処理装置250のプリンターで印刷する。
・操作メニューが多岐にわたるため、実施したい操作までたどり着くことに時間がかかったり、そもそも実施したい操作までたどり着くことができなかったりする。例えば、メニューの階層が深い、実施したい操作がどのカテゴリのメニューになるのか分からない等がある。
・操作メニューが多すぎて、メニュー自体を小さくする必要があり、メニューが見づらい、又は、選択しづらくなっている。
・操作メニューが多すぎて、メニューフィールドが画像を加工するフィールドを圧迫し、画像を加工するフィールドが狭くなってしまうことがある。
また近年は、スマートフォンやタブレット端末等のタッチを前提とした端末も増えており、画像加工等のソフトウェアも対応している。しかし、スマートフォンやタブレット端末等は、元々小さい画面であり、かつマウスポインタよりも大きな指での操作が強いられることもあり、上記の事態がより顕著になってきたと言える。
情報処理装置100は、画像の加工処理のユーザーインタフェースにおいて、画面上の所定の領域にメニューフィールドを設けることなく、加工処理の切り替えを実現する。又は、情報処理装置100は、メニューフィールドを設けた場合であっても、画像の加工用のフィールドを広く使えるようになる。
また、スマートフォンやタブレット端末等のように操作手段が限定される環境であっても、情報処理装置100を用いた場合、豊富な加工処理の切り替えを実現できることとなる。
ステップS302では、画像受付モジュール110は、ユーザーの操作にしたがって、合成する画像領域が存在する画像を選択する。
ステップS304では、切抜処理モジュール120は、ユーザーの操作にしたがって、選択した画像から貼り付ける画像領域を指定する。つまり、加工対象となる画像を指定する処理である。
ステップS308では、画像受付モジュール110は、ユーザーの操作にしたがって、貼り付け先となる背景画像を選択する。
ステップS312では、加工処理モジュール125は、指定した箇所を中心として、メモリに保持している画素データを上書きする。また、背景画像と加工対象となる画像を、例えば、背景画像・加工対象画像管理テーブル500を用いて管理してもよい。図5は、背景画像・加工対象画像管理テーブル500のデータ構造例を示す説明図である。
背景画像・加工対象画像管理テーブル500は、背景画像欄505、加工対象画像欄510を有している。背景画像欄505は、背景画像を記憶している。加工対象画像欄510は、加工対象となる画像を記憶している。
図6(a)の例は、加工対象となる画像が含まれている元の画像600であって、加工対象の領域を指定する前の状態を示している。
図6(b)の例は、加工対象となる画像を張り付ける背景画像650であって、加工対象の画像を合成する前の状態を示している。
図6(a2)の例は、加工対象画像615を抽出する。つまり、対象指定操作604を含む領域、対象外指定操作602を含む領域を区別して、加工対象画像615を抽出すればよい。これについては、既に知られている技術を用いればよい。
図6(c)の例は、背景画像650に加工対象画像615を合成した例を示している。この場合、画像680は、背景画像650と加工対象画像615の2つの画像を有している。
ステップS702では、合成済の画像中の任意の位置を指定する。具体的には、ユーザーは、合成済の画像中にある箇所を指定する。ユーザーが指定した箇所(位置)によって、加工処理が異なることになる。位置は、例えば、指定位置情報800によって管理されている。図8は、指定位置情報800のデータ構造例を示す説明図である。指定位置情報800は、指定位置欄810を有しており、指定位置欄810は、X欄812、Y欄814を有している。指定位置欄810は、指定位置を記憶している。X欄812は、指定位置のX座標を記憶している。Y欄814は、指定位置のY座標を記憶している。
ステップS704では、指定した位置と合成した画像領域(加工対象の画像)の位置関係を取得する。位置関係として、例えば、加工対象の画像内、その画像以外の領域等がある。
ステップS708では、ステップS706で受け付けたジェスチャーの種類を特定する。
位置関係・処理対応テーブル900は、位置関係欄910、処理欄920を有しており、位置関係欄910は、加工対象画像内/外欄912、上下左右欄914、クリック/移動欄916を有している。位置関係欄910は、位置関係を記憶している。加工対象画像内/外欄912は、加工対象画像内であるか加工対象画像外であるかの情報を記憶している。上下左右欄914は、上下左右を記憶している。クリック/移動欄916は、操作受付モジュール105が受け付けた操作がクリックであるか移動であるかの情報を記憶している。ここでの「移動」は、操作受付モジュール105が受け付けた操作が「連続した位置」であることを示している。処理欄920は、位置関係欄910に対応する加工処理を記憶している。
図9の例に示す位置関係・処理対応テーブル900の1行目は、操作の位置が、加工対象画像の「外」であって、加工対象画像の「直上、直下」であって、その操作が「クリック」である場合、メニューとしての加工処理は「上下反転」であることを示している。2行目は、加工対象画像の「外」であって、加工対象画像の「直左、直右」であって、その操作が「クリック」である場合、メニューとしての加工処理は「左右反転」であることを示している。3行目は、加工対象画像の「内」であって、加工対象画像の「中心部」であって、その操作が「移動」である場合、メニューとしての加工処理は「移動」であることを示している。4行目は、加工対象画像の「外」であって、加工対象画像の「周辺」であって、その操作が「移動」である場合、メニューとしての加工処理は「回転」であることを示している。5行目は、加工対象画像の「内」であって、加工対象画像の「周辺」であって、その操作が「移動」である場合、メニューとしての加工処理は「移動、拡大、色変換」であることを示している。
ステップS716では、ステップS714で表示したメニューのうち、実施したいメニューの選択を受け付ける。つまり、ユーザーは、ステップS714で表示されたメニューのなかから、実施したいメニューを選択する。
ステップS718では、対象となる画像加工メニューを実施する。
図10(a)の例は、図6(c)の例で示した画像680上で、ユーザーがクリックの操作1010を行ったことを示している。
この場合、操作1010の位置は、加工対象画像615の外部の周辺の上部であり、クリックであることから、上下反転の加工処理を行う。
図10(b)の例は、その加工処理が完了した後の状態を示している。つまり、加工対象画像615が上下反転している。
図11(a)の例は、図6(c)の例で示した画像680上で、ユーザーがクリックの操作1110を行ったことを示している。
この場合、操作1110の位置は、加工対象画像615の外部の周辺の右部であり、クリックであることから、左右反転の加工処理を行う。
図11(b)の例は、その加工処理が完了した後の状態を示している。つまり、加工対象画像615が左右反転している。
図12(a)の例は、図6(c)の例で示した画像680上で、ユーザーが移動(ドラッグ)の操作1210を行ったことを示している。
この場合、操作1210の位置は、加工対象画像615の中心部であり、移動であることから、操作1210に合わせた移動の加工処理を行う。
図12(b)の例は、その加工処理が完了した後の状態を示している。つまり、加工対象画像615が操作1210に合わせて左側に移動している。
図13(a)の例は、図6(c)の例で示した画像680上で、ユーザーが移動(ドラッグ)の操作1310を行ったことを示している。
この場合、操作1310の位置は、加工対象画像615の外部の周辺部であり、移動であることから、操作1310に合わせた回転の加工処理を行う。
図13(b)の例は、その加工処理が完了した後の状態を示している。つまり、加工対象画像615が操作1310に合わせて回転している。例えば、操作1310の最初の位置から操作1310の最後の位置まで移動した場合において、加工対象画像615の中心から最初の位置までを結ぶ直線と加工対象画像615の中心から最後の位置までを結ぶ直線とがなす角度、回転方向に合わせて回転を行うようにすればよい。
図14(a)の例は、図6(c)の例で示した画像680上で、ユーザーが移動(ドラッグ)の操作1410を行ったことを示している。
この場合、操作1410の位置は、加工対象画像615の内部の周辺部であり、操作1410は移動であることから、移動、拡大、色変換の加工処理が対応しているので、現在の操作1410の近傍にメニュー1450を表示する。メニュー1450には、移動、拡大、色変換の3つの加工処理を表示する。なお、その操作に割り当てられている加工処理、又は、その加工処理に関連する加工処理を表示するようにしてもよい。また、メニューを表示するタイミングは、その操作1410の終了時又は対応している加工処理が判明した時点としてもよい。ユーザーは、メニュー1450内の処理を選択する。
図14(b)の例は、メニュー1450の「移動」が選択された場合の処理を示しており、操作1410に合わせて加工対象画像615を右側に移動させたことを示している。
図14(c)の例は、メニュー1450の「拡大」が選択された場合の処理を示しており、操作1410に合わせて加工対象画像615が拡大されたことを示している。
図14(d)の例は、メニュー1450の「色変換」が選択された場合の処理を示しており、操作1410に合わせて加工対象画像615の色変換が行われたことを示している。
図14では、複数の加工処理が対応している場合に、メニューを表示するようにしているが、1つの加工処理の場合であっても、現在対応している加工処理を識別する情報を表示するようにしてもよい。
図15の例では、操作1510は、加工対象画像615の中心部からの移動であるので、「Drag(移動)」を処理説明1512として表示する。
また、操作1520は、加工対象画像615の外部である周辺部からの移動であるので、「Drag(回転)」を処理説明1522として表示する。
このように、移動と回転等のように類似した操作である場合に、どちらの加工処理であるのかをユーザーにとって判別しやすくするために、対応している加工処理を識別するためのアイコンを現在の操作位置に表示している。
図16(a)に示す例は、移動の加工処理であることを示す移動用アイコン1610を表示している。例えば、移動用アイコン1610として、赤色の上下左右の矢印であってもよい。
図16(b)に示す例は、回転の加工処理であることを示す回転用アイコン1620を表示している。例えば、回転用アイコン1620として、赤色の円矢印であってもよい。
図17(a)の例は、図6(c)の例で示した画像680と同等である。この場合、図9の例に示した位置関係・処理対応テーブル900をそのまま用いる。なお、加工対象画像615の外部であるか否かは、加工対象画像615の外接矩形1710を用いて判断してもよい。
図18の例は、図6(c)の例で示した画像680と同等である。加工対象画像615の外部であるか否かは、加工対象画像615の外接矩形を用いて判断している。
そして、加工対象画像615の内部として、外接矩形を4つの区分領域、つまり、内・右上区分領域1810、内・右下区分領域1812、内・左下区分領域1814、内・左上区分領域1816に分割している例を示している。さらに、加工対象画像615の外部として、外接矩形の外側を4つの区分領域、つまり、外・右上区分領域1820、外・右下区分領域1822、外・左下区分領域1824、外・左上区分領域1826に分割している例を示している。
もちろんのことながら、4つの区分以外に、さらに多くの区分に分割してもよいし、2つ又は3つの区分としてもよい。また、区分の形状として矩形だけでなく、任意の形状であってもよい。例えば、三角形、六角形等の多角形であってもよい。
また、操作受付モジュール105が受け付けた操作がクリックである場合、操作受付モジュール105が受け付けた位置が、これらのいずれかの区分内である場合に、その区分に割り当てられている加工処理を行うようにしてもよい。
操作受付モジュール105が受け付けた操作が移動(連続した位置)である場合、操作受付モジュール105が受け付けた最初の位置が、これらのいずれかの区分内である場合に、その最初の区分に割り当てられている加工処理を行うようにしてもよい。
また、操作受付モジュール105が受け付けた操作が移動(連続した位置)である場合、操作受付モジュール105が受け付けた最後の位置が、これらのいずれかの区分内である場合に、その最後の区分に割り当てられている加工処理を行うようにしてもよい。
なお、図19に示すハードウェア構成は、1つの構成例を示すものであり、本実施の形態は、図19に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェア(例えば特定用途向け集積回路(Application Specific Integrated Circuit:ASIC)や再構成可能な集積回路(field-programmable gate array:FPGA)等)で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続している形態でもよく、さらに図19に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、特に、パーソナルコンピュータの他、携帯情報通信機器(携帯電話、スマートフォン、モバイル機器、ウェアラブルコンピュータ等を含む)、情報家電、ロボット、複写機、ファックス、スキャナー、プリンター、複合機(スキャナー、プリンター、複写機、ファックス等のいずれか2つ以上の機能を有している画像処理装置)などに組み込まれていてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通等のために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク(DVD)であって、DVDフォーラムで策定された規格である「DVD-R、DVD-RW、DVD-RAM等」、DVD+RWで策定された規格である「DVD+R、DVD+RW等」、コンパクトディスク(CD)であって、読出し専用メモリ(CD-ROM)、CDレコーダブル(CD-R)、CDリライタブル(CD-RW)等、ブルーレイ・ディスク(Blu-ray(登録商標) Disc)、光磁気ディスク(MO)、フレキシブルディスク(FD)、磁気テープ、ハードディスク、読出し専用メモリ(ROM)、電気的消去及び書換可能な読出し専用メモリ(EEPROM(登録商標))、フラッシュ・メモリ、ランダム・アクセス・メモリ(RAM)、SD(Secure Digitalの略)メモリーカード等が含まれる。
そして、前記のプログラムの全体又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク(LAN)、メトロポリタン・エリア・ネットワーク(MAN)、ワイド・エリア・ネットワーク(WAN)、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、又は無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分若しくは全部であってもよく、又は別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して記録されていてもよい。また、圧縮や暗号化等、復元可能であればどのような態様で記録されていてもよい。
105…操作受付モジュール
110…画像受付モジュール
115…処理モジュール
120…切抜処理モジュール
125…加工処理モジュール
130…表示モジュール
210…画像記憶装置
250…画像処理装置
290…通信回線
Claims (15)
- 加工対象を有する画像を表示画面に表示させる表示手段、
前記表示画面上の位置を受け付ける受付手段、
前記位置と前記加工対象との関係に基づいて、該加工対象に対して加工処理を行う処理手段、
(1)前記加工対象の領域の面積が、前記表示画面全体の面積に占める割合として、予め定められた割合より大きい又は以上である場合、(2)前記加工対象以外の領域の面積が予め定められた面積未満又は以下である場合、のいずれかである場合は、前記位置と前記加工対象との関係に割り当てられている加工処理を変更する変更手段
を備えた画像処理装置。 - 前記位置と前記加工対象との関係に対し複数の加工処理を保持し、
前記処理手段は、前記複数の加工処理のうちのいずれかの加工処理を選択して処理を行う、
請求項1に記載の画像処理装置。 - 前記表示手段は、前記位置を受け付けた際に、該位置に、現在選択されている加工処理を識別する情報を表示する、
請求項2に記載の画像処理装置。 - 前記表示手段は、前記位置を受け付けた際に、該位置に、前記複数の加工処理に対応した加工処理を識別する情報を、ユーザーが選択可能に表示する、
請求項2に記載の画像処理装置。 - 前記変更手段は、前記加工対象と前記表示画面との面積が前記(1)における予め定められた関係を有していた場合であっても、前記加工対象の中心に割り当てられている加工処理は変更しない、
請求項1に記載の画像処理装置。 - 前記加工対象及び該加工対象の外部の領域を分割した区分に、加工処理を割り当てられており、
前記受付手段は、連続した位置を受け付け、
前記処理手段は、前記受付手段が受け付けた連続した位置のうち最初の位置が前記区分内である場合に、該区分に割り当てられている加工処理を行う、
請求項1に記載の画像処理装置。 - 前記加工対象及び該加工対象の外部の領域を分割した区分に、加工処理を割り当てられており、
前記受付手段は、連続した位置を受け付け、
前記処理手段は、前記受付手段が受け付けた連続した位置のうち最後の位置が前記区分内である場合に、該区分に割り当てられている加工処理を行う、
請求項1に記載の画像処理装置。 - 前記処理手段は、前記位置と該位置の軌跡と前記加工対象との関係に基づいて、該加工対象に対して加工処理を行う、
請求項6又は7に記載の画像処理装置。 - 前記位置が、前記加工対象の上部又は下部である場合は、該加工対象の画像を上下に反転させる、
請求項1に記載の画像処理装置。 - 前記位置が、前記加工対象の左部又は右部である場合は、該加工対象の画像を左右に反転させる、
請求項1に記載の画像処理装置。 - 前記受付手段が受け付けた連続した位置のうち最初の位置が、前記加工対象の内部である場合、前記位置の移動に応じて加工対象の画像を移動させる、
請求項8に記載の画像処理装置。 - 前記受付手段が受け付けた連続した位置のうち最初の位置が、前記加工対象の外部である場合、前記位置の移動に応じて加工対象の画像を回転させる、
請求項8に記載の画像処理装置。 - 前記受付手段が受け付けた連続した位置のうち最初の位置が内部であり、最後の位置が外部である場合、前記位置の移動に応じて加工対象の拡大処理を行う、
請求項8に記載の画像処理装置。 - 前記受付手段が受け付けた連続した位置のうち最初の位置が外部であり、最後の位置が内部である場合、前記位置の移動に応じて加工対象の縮小処理を行う、
請求項8に記載の画像処理装置。 - コンピュータを、
加工対象を有する画像を表示画面に表示させる表示手段、
前記表示画面上の位置を受け付ける受付手段、
前記位置と前記加工対象との関係に基づいて、該加工対象に対して加工処理を行う処理手段、
(1)前記加工対象の領域の面積が、前記表示画面全体の面積に占める割合として、予め定められた割合より大きい又は以上である場合、(2)前記加工対象以外の領域の面積が予め定められた面積未満又は以下である場合、のいずれかである場合は、前記位置と前記加工対象との関係に割り当てられている加工処理を変更する変更手段
として機能させるための画像処理プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019096459A JP7363096B2 (ja) | 2019-05-23 | 2019-05-23 | 画像処理装置及び画像処理プログラム |
US16/726,191 US11631157B2 (en) | 2019-05-23 | 2019-12-23 | Image processing apparatus and non-transitory computer readable medium storing image processing program |
CN202010080697.3A CN111988482A (zh) | 2019-05-23 | 2020-02-05 | 图像处理装置、记录媒体及图像处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019096459A JP7363096B2 (ja) | 2019-05-23 | 2019-05-23 | 画像処理装置及び画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020190966A JP2020190966A (ja) | 2020-11-26 |
JP7363096B2 true JP7363096B2 (ja) | 2023-10-18 |
Family
ID=73441741
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019096459A Active JP7363096B2 (ja) | 2019-05-23 | 2019-05-23 | 画像処理装置及び画像処理プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11631157B2 (ja) |
JP (1) | JP7363096B2 (ja) |
CN (1) | CN111988482A (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11245801B2 (en) * | 2020-03-31 | 2022-02-08 | Kyocera Document Solutions Inc. | Image forming apparatus and image forming method capable of changing guidance screen from terminal |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010079589A (ja) | 2008-09-26 | 2010-04-08 | Nintendo Co Ltd | 画像処理プログラムおよび画像処理装置 |
WO2012043255A1 (ja) | 2010-09-27 | 2012-04-05 | 富士フイルム株式会社 | 画像編集方法及び装置並びに画像編集プログラム |
JP2014029673A (ja) | 2012-07-04 | 2014-02-13 | Canon Inc | 表示装置及びその制御方法 |
JP2017182343A (ja) | 2016-03-29 | 2017-10-05 | ブラザー工業株式会社 | プログラムおよび情報処理装置 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4702583B2 (ja) | 2001-07-12 | 2011-06-15 | ソニー株式会社 | リモコンシステム |
KR101527014B1 (ko) * | 2008-12-02 | 2015-06-09 | 엘지전자 주식회사 | 이동 단말기 및 이것의 디스플레이 제어 방법 |
KR101761612B1 (ko) * | 2010-07-16 | 2017-07-27 | 엘지전자 주식회사 | 이동 단말기 및 이것의 메뉴 화면 구성 방법 |
US9830681B2 (en) * | 2014-01-31 | 2017-11-28 | Hover Inc. | Multi-dimensional model dimensioning and scale error correction |
US9436369B2 (en) * | 2014-09-26 | 2016-09-06 | Disney Enterprises, Inc. | Touch interface for precise rotation of an object |
-
2019
- 2019-05-23 JP JP2019096459A patent/JP7363096B2/ja active Active
- 2019-12-23 US US16/726,191 patent/US11631157B2/en active Active
-
2020
- 2020-02-05 CN CN202010080697.3A patent/CN111988482A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010079589A (ja) | 2008-09-26 | 2010-04-08 | Nintendo Co Ltd | 画像処理プログラムおよび画像処理装置 |
WO2012043255A1 (ja) | 2010-09-27 | 2012-04-05 | 富士フイルム株式会社 | 画像編集方法及び装置並びに画像編集プログラム |
JP2014029673A (ja) | 2012-07-04 | 2014-02-13 | Canon Inc | 表示装置及びその制御方法 |
JP2017182343A (ja) | 2016-03-29 | 2017-10-05 | ブラザー工業株式会社 | プログラムおよび情報処理装置 |
Also Published As
Publication number | Publication date |
---|---|
US20200372606A1 (en) | 2020-11-26 |
CN111988482A (zh) | 2020-11-24 |
US11631157B2 (en) | 2023-04-18 |
JP2020190966A (ja) | 2020-11-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11119635B2 (en) | Fanning user interface controls for a media editing application | |
JP6329230B2 (ja) | メディア編集アプリケーション用の扇形編出ユーザインタフェースコントロール | |
US10747391B2 (en) | Method and device for executing applications through application selection screen | |
JP6559403B2 (ja) | コンテンツ表示装置、コンテンツ表示方法及びプログラム | |
EP2306307A2 (en) | Terminal apparatus, server apparatus, display control method, and program | |
KR20110021755A (ko) | 가상 데스크톱 뷰 스크롤 | |
US20150091804A1 (en) | Technique for improving operability in switching character types in software keyboard | |
EP3831044A1 (en) | Multi-region detection for images | |
US9753548B2 (en) | Image display apparatus, control method of image display apparatus, and program | |
US20200089332A1 (en) | Information processing apparatus and non-transitory computer readable medium | |
JP7363096B2 (ja) | 画像処理装置及び画像処理プログラム | |
KR20190138798A (ko) | 실시간 협업을 위한 라이브 잉크 프레즌스 | |
JP2017211494A (ja) | 画像処理装置、画像処理システム、画像処理方法及びプログラム | |
JP5870839B2 (ja) | 情報処理装置及び情報処理プログラム | |
US20150324100A1 (en) | Preview Reticule To Manipulate Coloration In A User Interface | |
JP6720387B2 (ja) | コンテンツ表示装置、コンテンツ表示方法及びプログラム | |
JP6507939B2 (ja) | 携帯端末及びプログラム | |
EP3909231A1 (en) | Multi-region image scanning | |
US10802675B2 (en) | Information processing apparatus and non-transitory computer readable medium storing information processing program | |
US11256399B2 (en) | Information processing apparatus and non-transitory computer readable medium | |
JP6451428B2 (ja) | 情報処理装置及び情報処理プログラム | |
JP6565603B2 (ja) | 情報処理装置及び情報処理プログラム | |
US20200272289A1 (en) | Information processing apparatus and non-transitory computer readable medium | |
JP2020101669A (ja) | データ管理装置及びデータ管理プログラム | |
JP2021086546A (ja) | 情報処理装置、ホーム画面表示方法、及び、ホーム画面表示プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220228 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230124 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230419 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230509 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230619 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230704 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230822 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230918 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7363096 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |