JP2007073034A - Image processing content determination apparatus, image processing content determination program, and image processing content determination method - Google Patents

Image processing content determination apparatus, image processing content determination program, and image processing content determination method Download PDF

Info

Publication number
JP2007073034A
JP2007073034A JP2006168742A JP2006168742A JP2007073034A JP 2007073034 A JP2007073034 A JP 2007073034A JP 2006168742 A JP2006168742 A JP 2006168742A JP 2006168742 A JP2006168742 A JP 2006168742A JP 2007073034 A JP2007073034 A JP 2007073034A
Authority
JP
Japan
Prior art keywords
graphic
deformed
image
processing content
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006168742A
Other languages
Japanese (ja)
Other versions
JP4793114B2 (en
Inventor
Masaru Hoshino
勝 星野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2006168742A priority Critical patent/JP4793114B2/en
Publication of JP2007073034A publication Critical patent/JP2007073034A/en
Application granted granted Critical
Publication of JP4793114B2 publication Critical patent/JP4793114B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

【課題】簡便な操作で画像処理の処理内容を決定できる画像処理内容決定装置100、画像処理内容決定プログラムおよび画像処理内容決定方法を提供する。
【解決手段】基準図形400を生成する基準図形生成部と、外部から受信した変形指示に従って基準図形400を変形した変形図形410、420、430、440を入力画像310、320、340、350に重畳して表示させる変形図形表示部を含む変形図形生成部140と、外部から受信した決定指示に応じて、そのときに表示されている変形図形410、420、430、440を基準図形400へと変換するための変換処理の内容を算出する変換量算出部160を含む処理内容算出部とを備える。
【選択図】図1
An image processing content determination apparatus 100, an image processing content determination program, and an image processing content determination method that can determine the processing content of image processing with a simple operation.
A reference graphic generation unit that generates a reference graphic 400 and a deformed graphic 410, 420, 430, 440 obtained by deforming the reference graphic 400 according to a deformation instruction received from the outside are superimposed on an input image 310, 320, 340, 350. The deformed figure generating unit 140 including the deformed figure display unit to be displayed and the deformed figure 410, 420, 430, and 440 displayed at that time are converted into the reference figure 400 according to the determination instruction received from the outside. A processing content calculation unit including a conversion amount calculation unit 160 that calculates the content of the conversion processing for performing the processing.
[Selection] Figure 1

Description

本発明は、画像処理内容決定装置、画像処理内容決定プログラムおよび画像処理内容決定方法に関する。より詳細には、離散化された画像情報を処理する場合に、処理の方法および処理量を含む処理内容を決定する装置、プログラムおよび方法に関する。   The present invention relates to an image processing content determination device, an image processing content determination program, and an image processing content determination method. More specifically, the present invention relates to an apparatus, a program, and a method for determining a processing content including a processing method and a processing amount when processing discretized image information.

ラスタイメージは、それ自体は配列に関する情報を含まない画素の集合なので、これを編集するためにはベクトルデータよりも計算処理が多い。特に昨今は、ラスタイメージの色深度、階調の範囲等が大きくなっており、編集結果を画像データに反映させるためのデータの処理量が増大している。従って、画面上でユーザの操作に応じてリアルタイムで画像を変化させると、画面の反応がかえって遅くなり、操作性が低下することがある。このため、多くの画像編集手段では、処理方法と処理量とを予め数値等により指定して、画像全体に対する処理を一括して実行する。   Since a raster image itself is a set of pixels that do not include information on the arrangement, it requires more calculation processing than vector data to edit it. Particularly in recent years, the color depth, gradation range, and the like of raster images have increased, and the amount of data processing for reflecting editing results on image data has increased. Therefore, if the image is changed in real time on the screen according to the user's operation, the response of the screen may be delayed and the operability may be lowered. For this reason, in many image editing means, the processing method and the processing amount are designated in advance by numerical values or the like, and the processing for the entire image is executed collectively.

一方、例えばデジタルカメラ等で撮影された画像は、撮影時に光学系で不可避に発生する各種の歪みを伴っている。このため、画像処理ソフトウェア、画像処理装置等の使用に熟練していない一般的なユーザでも、画像の歪みを補正する画像編集を行うことが多い。しかしながら、練度の低いユーザが、数値等による間接的な指定を伴う編集操作で所望の編集結果を得ることは極めて難しい。   On the other hand, for example, an image photographed with a digital camera or the like is accompanied by various distortions that inevitably occur in the optical system during photographing. For this reason, even general users who are not skilled in using image processing software, image processing apparatuses, and the like often perform image editing to correct image distortion. However, it is extremely difficult for a low-level user to obtain a desired editing result by an editing operation involving indirect designation by numerical values or the like.

そこで、下記特許文献1には、画像情報の中にグリッド情報を埋め込んで、編集履歴のリファレンスとすることが提案されている。これにより、編集履歴を遡ること、および、編集前の状態に戻すことを容易にする技術を開示している。また、編集に失敗した場合でも原型を担保して試行錯誤を許すので、練度の低いユーザが画像編集をしやすくなるという効果がある。
特開2004−310585号公報
Therefore, Patent Document 1 below proposes that grid information is embedded in image information and used as a reference for editing history. Thus, a technique is disclosed that makes it easy to trace back the editing history and return to the state before editing. Also, even if editing fails, the prototype is secured and trial and error is allowed, so that it is easy for a low-level user to edit an image.
JP 2004-310585 A

しかしながら、上記特許文献1においては、直交するグリッドを基準として、画像が変形されるのと同じ変形によりグリッドも変形される。すなわち、直交するグリッドと編集前の画像とが対応し、変形後のグリッドと編集後の画像とが対応する。よって、編集前の画像に光学系の歪がありこの歪を補正する場合に、上記特許文献1においては、歪みを取り除くための適切な変形方法と編集後の画像の変形量とを予測して、画像処理装置に指示を入力する。したがって、例えば当該画像から歪を取り除いて補正するには、変形量について試行錯誤または熟練がいるという問題があった。   However, in Patent Document 1, the grid is also deformed by the same deformation as the image is deformed with reference to the orthogonal grid. That is, the orthogonal grid corresponds to the image before editing, and the deformed grid corresponds to the image after editing. Therefore, when there is distortion of the optical system in the image before editing and the distortion is corrected, in Patent Document 1, an appropriate deformation method for removing the distortion and the deformation amount of the image after editing are predicted. An instruction is input to the image processing apparatus. Therefore, for example, in order to remove the distortion from the image and correct it, there is a problem that there is trial and error or skill in the deformation amount.

そこで、本発明の第1の形態として、基準図形を生成する基準図形生成部と、外部から受信した変形指示に従って基準図形を変形した変形図形を入力画像に重畳して表示させる変形図形表示部と、外部から受信した決定指示に応じて、そのときに表示されている変形図形を基準図形へと変換するための変換処理の内容を算出する処理内容算出部とを備える画像処理内容決定装置が提供される。これにより、多様な処理方法を適切に選択して、適切な処理量で実行できる。従って、例えば画像の歪みを容易且つ確実に補正できる画像補正装置を形成できる。   Therefore, as a first aspect of the present invention, a reference graphic generation unit that generates a reference graphic, a modified graphic display unit that displays a deformed graphic obtained by deforming the reference graphic in accordance with a deformation instruction received from the outside, superimposed on the input image, and An image processing content determination device provided with a processing content calculation unit that calculates the content of conversion processing for converting the deformed graphic displayed at that time into a reference graphic in response to a determination instruction received from outside Is done. Accordingly, various processing methods can be appropriately selected and executed with an appropriate processing amount. Therefore, for example, an image correction apparatus that can easily and reliably correct image distortion can be formed.

また、ひとつの実施形態によると、上記画像処理内容決定装置において、変形図形表示部は、表示された変形図形および基準図形の少なくとも一方に対してポインティング装置を介して入力される変形指示を受け付けてもよい。これにより、処理内容を容易に決定できると共に、ユーザの指示を加味して処理内容を調整できる。   According to one embodiment, in the image processing content determination device, the deformed graphic display unit accepts a deformation instruction input via a pointing device to at least one of the displayed deformed graphic and reference graphic. Also good. Thereby, while being able to determine the processing content easily, a processing content can be adjusted in consideration of a user's instruction.

また他の実施形態によると、上記画像処理内容決定装置において、基準図形および入力画像の相対関係に関する相関指示を外部から受け付ける相関指示受付部をさらに備え、基準図形生成部は、相関指示受付部の受け付けた相関指示に基づいて基準図形を生成してもよい。これにより、直感的な操作で処理内容を決定できる。   According to another embodiment, the image processing content determination apparatus further includes a correlation instruction receiving unit that receives a correlation instruction related to the relative relationship between the reference graphic and the input image from the outside, and the reference graphic generation unit includes: A reference graphic may be generated based on the received correlation instruction. Thereby, the processing content can be determined by an intuitive operation.

また他の実施形態によると、処理内容算出部は、変換処理における処理量を算出し、算出された処理量に基づいた処理内容を決定してもよい。これにより、操作に関する知識の習得なしに、適切な処理量を容易且つ確実に決定できる。   According to another embodiment, the processing content calculation unit may calculate the processing amount in the conversion process and determine the processing content based on the calculated processing amount. As a result, it is possible to easily and reliably determine an appropriate processing amount while learning knowledge about the operation.

また他の実施形態によると、変形図形表示部が、変形指示に従って、入力画像に歪曲収差、キーストン歪または傾きが生じた場合と等価に基準図形を変形させた変形図形を表示してもよい。これにより、歪曲収差、キーストン歪み、傾き等の多様な歪みを容易且つ確実に補正できる画像補正装置を形成できる。   According to another embodiment, the deformed graphic display unit may display a deformed graphic obtained by deforming the reference graphic in an equivalent manner to the case where distortion, keystone distortion, or tilt occurs in the input image in accordance with the deformation instruction. As a result, an image correction apparatus that can easily and reliably correct various distortions such as distortion, keystone distortion, and tilt can be formed.

また他の実施形態によると、基準図形が、鉛直線および水平線を含んでいてもよい。これにより、処理対象の画像の要素に対して変形図形を合わせやすくなり、操作が一段と容易になる。   According to another embodiment, the reference graphic may include a vertical line and a horizontal line. This makes it easier to match the deformed figure to the element of the image to be processed, and the operation becomes easier.

また他の実施形態によると、変形図形表示部が、入力画像に含まれる線のうち水平または鉛直であるべき線の1本に沿うように基準図形を変形させた変形図形を表示してもよい。これにより、処理内容の決定に係る手順を減らすことができる。また、次に実行すべき操作を示唆して、ユーザの操作を補助できる。   According to another embodiment, the deformed graphic display unit may display a deformed graphic obtained by deforming the reference graphic so as to be along one of the lines included in the input image that should be horizontal or vertical. . Thereby, the procedure concerning determination of the processing content can be reduced. Further, it is possible to assist a user operation by suggesting an operation to be executed next.

また他の実施形態によると、処理内容算出部により算出された処理内容に従って入力画像を変換して処理画像を生成する処理画像生成部をさらに備えてもよい。これにより、ユーザは望ましい処理が行われた画像を得ることができる。   According to another embodiment, the image processing apparatus may further include a processing image generation unit that converts the input image according to the processing content calculated by the processing content calculation unit and generates a processing image. As a result, the user can obtain an image on which desirable processing has been performed.

更に、本発明の第2の形態として、基準図形を生成する基準図形生成手順と、外部から受信した変形指示に従って基準図形を変形した変形図形を入力画像に重畳して表示させる変形図形表示手順と、外部から受信した決定指示に応じて、そのときに表示されている変形図形を基準図形へと変換するための変換処理の内容を算出する処理内容算出手順とを情報処理装置に実行させる画像処理内容決定プログラムが提供される。これにより、専用機はもちろん、汎用情報処理装置等を用いても、上記の効果を享受できる。   Furthermore, as a second embodiment of the present invention, a reference graphic generation procedure for generating a reference graphic, and a modified graphic display procedure for superimposing and displaying a deformed graphic obtained by deforming the reference graphic in accordance with a deformation instruction received from the outside on the input image, Image processing for causing the information processing apparatus to execute a processing content calculation procedure for calculating the content of conversion processing for converting the deformed graphic displayed at that time into a reference graphic in response to a determination instruction received from the outside A content determination program is provided. As a result, the above-described effects can be enjoyed using a general-purpose information processing apparatus or the like as well as a dedicated machine.

また更に、本発明の第3の形態として、基準図形を生成する基準図形生成ステップと、外部から受信した変形指示に従って基準図形を変形した変形図形を入力画像に重畳して表示させる変形図形表示ステップと、外部から受信した決定指示に応じて、そのときに表示されている変形図形を基準図形へと変換するための変換処理の内容を算出する処理内容算出ステップとを含む画像処理内容決定方法が提供される。これにより、ハードウェア資源の如何にかかわらず、上記の効果を享受できる。   Still further, as a third aspect of the present invention, a reference graphic generation step for generating a reference graphic, and a modified graphic display step for superimposing and displaying a deformed graphic obtained by deforming the reference graphic in accordance with a deformation instruction received from the outside on the input image. And a processing content calculation step for calculating the content of the conversion processing for converting the deformed graphic displayed at that time into a reference graphic in response to a determination instruction received from the outside. Provided. Thereby, the above effects can be enjoyed regardless of hardware resources.

以下、発明の実施の形態を通じて本発明を説明する。ただし、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。   Hereinafter, the present invention will be described through embodiments of the invention. However, the following embodiments do not limit the invention according to the claims. In addition, not all the combinations of features described in the embodiments are essential for the solving means of the invention.

図1は、画像処理内容決定装置の一実施形態としての画像補正装置100の構造を模式的に示す図である。同図に示すように、この画像補正装置100は、デジタルカメラ112、スキャナ114等によりラスタライズされた画像を入力画像情報122として格納する格納部120と、後述する各処理段階での情報処理を実行する基準図形生成部130、変形図形生成部140、対応関係算出部150、変換量算出部160および補正画像生成部170を備えている。   FIG. 1 is a diagram schematically illustrating the structure of an image correction apparatus 100 as an embodiment of an image processing content determination apparatus. As shown in the figure, the image correction apparatus 100 executes a storage unit 120 that stores an image rasterized by a digital camera 112, a scanner 114, or the like as input image information 122, and information processing at each processing stage described later. A reference graphic generation unit 130, a deformed graphic generation unit 140, a correspondence calculation unit 150, a conversion amount calculation unit 160, and a corrected image generation unit 170.

基準図形生成部130は、キーボード116、ポインティングデバイス118等の入力機器を介してユーザから補正処理開始の指示を受けると、格納部120から入力画像情報122を読み込む一方、補正処理の指標となる基準図形情報132を生成して保持する。また、基準図形生成部130は、入力画像情報122および基準図形情報132を重畳して、表示装置180に両者を複合した画像を表示させる。   When receiving a correction processing start instruction from the user via an input device such as the keyboard 116 and the pointing device 118, the reference graphic generation unit 130 reads the input image information 122 from the storage unit 120, while serving as a reference for the correction processing. Graphic information 132 is generated and held. Further, the reference graphic generation unit 130 superimposes the input image information 122 and the reference graphic information 132 and causes the display device 180 to display an image in which both are combined.

変形図形生成部140は、上記キーボード116、ポインティングデバイス118等の入力機器を介してユーザから変形の指示を受けると、上記基準図形生成部130により生成された基準図形情報132に対して変形処理を実行し、変形図形情報142を生成する。また、変形図形生成部140は、基準図形情報132に代わって変形図形情報142を入力画像情報122と重畳して表示装置180に表示する変形図形表示部としての機能も有する。変形図形生成部140は、変形方法の種類に対応付けて基準画像を変形画像に変形する変換式を格納しており、ユーザからの変形方法の種類の指定及び変形量の入力に基づいて、当該変換式に基づいて変形画像を生成する。ここで「変形方法の種類」とは、いわゆる樽形歪み、糸巻歪み等の歪曲収差を補正するための変形処理、あおり撮影により生じたキーストン歪みを補正するための変形処理、撮影機の傾きにより生じた画像の傾きを補正するための回転処理等である。   When the deformed graphic generation unit 140 receives a deformation instruction from the user via the input device such as the keyboard 116 and the pointing device 118, the deformed graphic generation unit 140 performs a deformation process on the reference graphic information 132 generated by the reference graphic generation unit 130. Executed to generate deformed graphic information 142. The deformed graphic generation unit 140 also has a function as a deformed graphic display unit that superimposes the deformed graphic information 142 on the input image information 122 and displays it on the display device 180 instead of the reference graphic information 132. The deformed figure generation unit 140 stores a conversion formula for deforming the reference image into a deformed image in association with the type of the deformation method, and based on the designation of the type of deformation method and the input of the deformation amount from the user A deformed image is generated based on the conversion formula. Here, “type of deformation method” refers to deformation processing for correcting distortion aberrations such as barrel distortion and pincushion distortion, deformation processing for correcting keystone distortion caused by tilt shooting, and tilt of the camera. For example, rotation processing for correcting the tilt of the generated image.

対応関係算出部150は、上記キーボード116、ポインティングデバイス118等の入力機器を介してユーザから変形処理における変形量を決定した旨の指示を受けると、その時点で表示装置180に表示されている変形図形の情報を確定図形情報144として格納する。さらに、確定図形情報144と入力画像情報122との対応関係を算出する。これにより、確定図形情報144と入力画像情報122とが関連付けられる。また、変換量算出部160は、確定図形情報144を参照して、確定図形情報144を基準図形情報132へと変換する処理に必要な変換量情報162を算出する。   When the correspondence calculation unit 150 receives an instruction from the user via the input device such as the keyboard 116 and the pointing device 118 that the amount of deformation in the deformation process has been determined, the deformation displayed on the display device 180 at that time. The graphic information is stored as the fixed graphic information 144. Further, the correspondence between the fixed graphic information 144 and the input image information 122 is calculated. Thereby, the fixed figure information 144 and the input image information 122 are associated. In addition, the conversion amount calculation unit 160 refers to the confirmed graphic information 144 and calculates conversion amount information 162 necessary for processing for converting the confirmed graphic information 144 into the reference graphic information 132.

補正画像生成部170は、対応関係情報152および変換量情報162を参照して、確定図形情報144を基準図形情報132に戻す変換処理と等価な変換処理を、入力画像情報122に対して実行する。これにより、入力画像情報122から補正画像情報172が生成される。さらに、補正画像生成部170は、補正画像情報172を画像として表示装置180に表示させる。   The corrected image generation unit 170 refers to the correspondence information 152 and the conversion amount information 162 and executes a conversion process equivalent to the conversion process for returning the confirmed graphic information 144 to the reference graphic information 132 for the input image information 122. . As a result, corrected image information 172 is generated from the input image information 122. Further, the corrected image generation unit 170 displays the corrected image information 172 on the display device 180 as an image.

図2は、上記のような画像補正装置100で実行されるプログラムにおける処理手順を示す流れ図F100である。同図に示すように、画像補正装置100の基準図形生成部130は、補正処理開始の指示が入力されるのを待つ(S101)。同指示の入力を受け取ると(S101:Yes)、基準図形生成部130は、基準図形を生成し(S102)、この基準図形を入力画像に重畳して、表示装置180に表示する(S103)。なお、この補正処理開始の指示は、補正処理に適した変形方法の種類も含んでいる。   FIG. 2 is a flowchart F100 showing a processing procedure in a program executed by the image correction apparatus 100 as described above. As shown in the figure, the reference graphic generation unit 130 of the image correction apparatus 100 waits for an instruction to start correction processing (S101). When the input of the instruction is received (S101: Yes), the reference graphic generation unit 130 generates a reference graphic (S102), and the reference graphic is superimposed on the input image and displayed on the display device 180 (S103). The instruction for starting the correction process includes the type of deformation method suitable for the correction process.

次に、変形図形生成部140は、指定された変形方法におけるパラメータの値である変形量の指定を待つ(S104)。変形量を指定する指示の入力を受け取ると(S104:Yes)、変形図形生成部140は、入力された変形量に従って基準図形を変形した変形図形を生成する(S105)。さらに、変形図形生成部140は、生成した変形図形を基準図形に換えて、入力画像に重畳して表示装置180に表示する(S106)。   Next, the deformed figure generation unit 140 waits for the designation of a deformation amount, which is a parameter value in the designated deformation method (S104). Upon receiving an instruction to specify the deformation amount (S104: Yes), the deformed graphic generation unit 140 generates a deformed graphic obtained by deforming the reference graphic according to the input deformation amount (S105). Further, the deformed figure generation unit 140 replaces the generated deformed figure with a reference figure and superimposes it on the input image and displays it on the display device 180 (S106).

従って、S105において変形量を指示したユーザは、ステップS106においてその変形量を視覚的に認識できる。また、この変形量に対応した変形図形を入力画像に重畳して表示することにより、ユーザは、適正な補正に必要な変形量を容易に把握できる。このステップS104からS105に至る一連の処理は、変形量を決定する旨の指示が対応関係算出部150に入力されるまで繰り返される(S107:No)。   Therefore, the user who instructed the deformation amount in S105 can visually recognize the deformation amount in Step S106. Further, by displaying the deformed figure corresponding to the deformation amount superimposed on the input image, the user can easily grasp the deformation amount necessary for proper correction. The series of processing from step S104 to step S105 is repeated until an instruction to determine the deformation amount is input to the correspondence calculation unit 150 (S107: No).

即ち、ステップS107において変形量を決定する旨の指示が入力されると(S107:Yes)、対応関係算出部150は、そのときに表示されていた変形図形を確定変形図形として取り込み、確定変形図形と入力画像との対応関係を算出する(S108)。なお、本形態における「対応関係」は、画素の集合として形成された入力画像の各画素と確定された変形図形との相対位置を示す情報を含む。   That is, when an instruction to determine the deformation amount is input in step S107 (S107: Yes), the correspondence calculation unit 150 takes in the deformed figure displayed at that time as a confirmed deformed figure, and confirms the confirmed deformed figure. And the input image are calculated (S108). Note that the “correspondence” in the present embodiment includes information indicating the relative position between each pixel of the input image formed as a set of pixels and the determined deformed figure.

さらに、変換量算出部160が、確定図形情報に基づいて、変形図形を元の基準図形に戻す変換処理を実行するために必要な変換量を算出する(S109)。この変換量の算出は、元の基準図形と確定された変形図形とを参照して新規に算出してもよいし、ステップS104において変形図形生成部140に入力された指示を蓄積したものから算出してもよい。   Furthermore, the conversion amount calculation unit 160 calculates a conversion amount necessary for executing the conversion process for returning the deformed graphic to the original reference graphic based on the fixed graphic information (S109). The conversion amount may be newly calculated with reference to the original reference graphic and the confirmed deformed graphic, or may be calculated from the instruction stored in the deformed graphic generation unit 140 in step S104. May be.

続いて、補正画像生成部170が、ステップS108で算出された対応関係と、ステップS109で算出された変換量とを参照して、変形図形を基準図形に変換する処理と等価な変形処理を、入力画像に対して実行する。これにより、補正画像生成部170は補正画像を生成する(S110)。更に、補正画像生成部170は生成した補正画像を表示装置180に表示する(S111)。   Subsequently, the modified image generation unit 170 refers to the correspondence calculated in step S108 and the conversion amount calculated in step S109, and performs a deformation process equivalent to the process of converting the deformed graphic into the reference graphic. Run on the input image. Thereby, the corrected image generation unit 170 generates a corrected image (S110). Further, the corrected image generation unit 170 displays the generated corrected image on the display device 180 (S111).

以上の説明から明らかなように、上記の一連の処理手順において、ステップS102、S104、S105、S106、S107、S108およびS109により、画像処理の方法と処理量を含む処理内容が決定される。なお、変形図形は補正前の入力画像に対応し、基準図形は補正後の補正画像に対応する。よって、ユーザは、表示装置180の画面上の変形図形を見ながら変形量を入力して、入力画像に含まれている歪に合うように画面上で変形図形を変形させることより、歪を補正した補正画像を容易に得ることができる。   As is clear from the above description, in the series of processing procedures described above, the processing contents including the image processing method and the processing amount are determined by steps S102, S104, S105, S106, S107, S108, and S109. The deformed graphic corresponds to the input image before correction, and the reference graphic corresponds to the corrected image after correction. Therefore, the user corrects the distortion by inputting the amount of deformation while viewing the deformed figure on the screen of the display device 180, and deforming the deformed figure on the screen to match the distortion included in the input image. The corrected image can be easily obtained.

図3は、上記流れ図F100のステップS103において、基準図形生成部130が表示装置180の画面300表示させる表示画面10の一例を示す図である。同図において、画面300には、入力画像310と、基準図形400とが重ねて表示されている。   FIG. 3 is a diagram illustrating an example of the display screen 10 that the reference graphic generation unit 130 displays on the screen 300 of the display device 180 in step S103 of the flowchart F100. In the figure, an input image 310 and a reference graphic 400 are displayed on a screen 300 so as to overlap each other.

なお、この図において表示されている入力画像310は、いわゆる糸巻歪みを含んでいる。また、基準図形400は、それぞれ複数の水平線402および鉛直線404を含むグリッド図形である。更に、基準図形400は、矩形のガイド図形409と、ガイド図形409の各辺の中央に配置されたハンドル408と、中央に配置された黒丸状のハンドル406とを含んでいる。   Note that the input image 310 displayed in this drawing includes so-called pincushion distortion. The reference graphic 400 is a grid graphic including a plurality of horizontal lines 402 and vertical lines 404, respectively. Furthermore, the reference graphic 400 includes a rectangular guide graphic 409, a handle 408 disposed at the center of each side of the guide graphic 409, and a black circle-shaped handle 406 disposed at the center.

上記ハンドル406、408は、例えば、ポインティングデバイス118によるドラッグ操作により画面300上で移動させることができる。これにより、変形図形生成部140に変形量を指示して、画面300上で基準図形400を変形図形410へと変形させることができる。なお、「ドラッグ操作」とは、ポインティングデバイス118自体に設けられたスイッチあるいはキーボード116のモディファイアキー等を操作しながらポインタを移動させる操作を意味する。   The handles 406 and 408 can be moved on the screen 300 by a drag operation by the pointing device 118, for example. As a result, the deformation figure generation unit 140 can be instructed to change the deformation amount, and the reference figure 400 can be transformed into the deformation figure 410 on the screen 300. The “drag operation” means an operation of moving the pointer while operating a switch provided on the pointing device 118 itself or a modifier key of the keyboard 116.

図4は、上記の表示画像を参照しながら実行されるステップS104からS107の操作における表示装置180の画面300に表示される表示画面20を示す図である。なお、図3と同じ構成要素には同じ参照符号を付して重複する説明を省いている。   FIG. 4 is a diagram showing the display screen 20 displayed on the screen 300 of the display device 180 in the operations of steps S104 to S107 executed while referring to the display image. Note that the same components as those in FIG. 3 are denoted by the same reference numerals, and redundant description is omitted.

同図に示すように、ここでは、基準図形400に替わって、変形図形生成部140が生成した変形図形410が表示されている。また、ガイド図形409も変形図形410に従って変形している。このときに変形図形410およびガイド図形409を形成する各曲線は、撮影機の光学系の歪曲収差によって画像に生じる歪みと同じ曲線を描いている。   As shown in the figure, here, a deformed figure 410 generated by the deformed figure generating unit 140 is displayed instead of the reference figure 400. The guide graphic 409 is also deformed according to the deformed graphic 410. At this time, each curve forming the deformed figure 410 and the guide figure 409 is the same curve as the distortion generated in the image due to the distortion aberration of the optical system of the photographing machine.

このような変形は、ユーザがポインティングデバイス118を介してハンドル408を操作し、ハンドル408が画面300の中央に寄るように移動させた結果である。このとき、ユーザは、ハンドル408の移動量により、変形図形410の変形量の指示を入力できる。また、ユーザは、変形図形410およびガイド図形409を形成する水平線または鉛直線が、入力画像に含まれる水平線または鉛直線と判断できる図形に沿うように変形させることにより、糸巻歪みの補正に適した変形量を指示できる。   Such a deformation is a result of the user operating the handle 408 via the pointing device 118 and moving the handle 408 toward the center of the screen 300. At this time, the user can input an instruction for the amount of deformation of the deformed figure 410 according to the amount of movement of the handle 408. Further, the user can modify the horizontal line or the vertical line forming the deformed figure 410 and the guide figure 409 so as to follow the figure that can be determined as the horizontal line or the vertical line included in the input image, so that it is suitable for correcting pincushion distortion. The amount of deformation can be indicated.

なお、図4において、ユーザから決定の指示の入力を受け付けるまでは、画面300の入力画像310は変形させずに表示している。よって、入力画像310のデータ量が大きい場合であっても、ユーザからの変形量の入力に対して、当該入力画像310よりも非常にデータ量が小さい基準図形400の方を変形図形410に変形して表示するので、変形量に対応してリアルタイムで入力画像310自体を補正して表示する場合に比べて、画面300上の反応が早く、ユーザに対する操作性がおちることを防ぐことができる。   In FIG. 4, the input image 310 on the screen 300 is displayed without being deformed until an input of a determination instruction is received from the user. Therefore, even when the data amount of the input image 310 is large, the reference graphic 400 having a much smaller data amount than the input image 310 is deformed into the deformed graphic 410 with respect to the input of the deformation amount from the user. Therefore, compared with the case where the input image 310 itself is corrected and displayed in real time according to the deformation amount, the response on the screen 300 is quicker and it is possible to prevent the operability for the user from being lowered.

図5は、前記したステップS111において、補正画像生成部170が表示装置180の画面300に表示させる表示画面30を示す図である。同図に示すように、ここには、糸巻歪みが取り除かれた補正画像330が表示されている。   FIG. 5 is a diagram showing the display screen 30 that the corrected image generation unit 170 displays on the screen 300 of the display device 180 in step S111 described above. As shown in the figure, a correction image 330 from which the pincushion distortion is removed is displayed here.

よって、上述のように、変形図形410は補正前の入力画像310に対応し、基準図形400は補正後の補正画像330に対応する。従って、ユーザは、表示装置180の画面300上の変形図形410を見ながら変形量を入力して、入力画像310に含まれている歪に合うように画面300上で変形図形410を変形させることより、歪を補正した補正画像330を容易に得ることができる。   Therefore, as described above, the deformed graphic 410 corresponds to the input image 310 before correction, and the reference graphic 400 corresponds to the corrected image 330 after correction. Therefore, the user inputs the deformation amount while viewing the deformed graphic 410 on the screen 300 of the display device 180, and deforms the deformed graphic 410 on the screen 300 so as to match the distortion included in the input image 310. Accordingly, it is possible to easily obtain the corrected image 330 in which the distortion is corrected.

なお、例えば、図6に示す表示画面40に表示されている入力画像320のように、入力画像320が歪曲収差に起因する樽形歪みを含むものであった場合も、ハンドル408を画面300の外側に向かって移動させることにより、変形図形420を入力画像320に沿わせることができる。こうして、同じ手順で樽形歪みも正確に補正できる。   Note that, for example, when the input image 320 includes barrel distortion caused by distortion, such as the input image 320 displayed on the display screen 40 shown in FIG. The deformed figure 420 can be made to follow the input image 320 by moving outward. In this way, barrel distortion can be accurately corrected by the same procedure.

また、動作の図示は省略したが、基準図形400および変形図形410の中央に表示されている黒丸状のハンドル406は、これを操作することにより、基準図形400全体または変形図形410全体を移動させることができる。これにより、変形処理の基準になる中心位置を変化させることができる。   Although illustration of the operation is omitted, the black circular handle 406 displayed in the center of the reference graphic 400 and the deformed graphic 410 moves the entire reference graphic 400 or the entire deformed graphic 410 by operating this. be able to. Thereby, the center position used as the reference | standard of a deformation | transformation process can be changed.

更に、図5では補正画像330に併せて基準図形400を表示しているが、この段階では基準図形400を表示しなくてもよい。   Furthermore, although the reference graphic 400 is displayed together with the corrected image 330 in FIG. 5, the reference graphic 400 may not be displayed at this stage.

また更に、ステップS106における変形図形生成部140による変形図形410、420の変形処理はある程度自動化することもできる。即ち、画像に含まれる大きな線分等から、入力画像310に含まれる水平線あるいは鉛直線を推定できる場合があり、その場合は、基準図形400を自動的にそれに合わせて変形図形410とすることができる。しかしながら、自動的に抽出された入力画像310内の水平線または鉛直線を、ユーザの入力に基づいて他の線分に変更できることが好ましい。また、変形図形生成の自動化に至らないまでも、基準図形400を形成する水平線402または鉛直線404を、入力図形から抽出した大きな線分に沿わせて表示させることにより、ユーザの次の操作を容易にすることもできる。なお、当初より変形図形410を表示させる場合は、図2における基準図形の表示(S103)は省略できる。   Furthermore, the deformation process of the deformed figures 410 and 420 by the deformed figure generating unit 140 in step S106 can be automated to some extent. That is, in some cases, a horizontal line or a vertical line included in the input image 310 can be estimated from a large line segment included in the image. In this case, the reference graphic 400 is automatically set to the deformed graphic 410 in accordance therewith. it can. However, it is preferable that a horizontal line or a vertical line in the input image 310 that is automatically extracted can be changed to another line segment based on a user input. In addition, even if the generation of the deformed figure is not automated, the horizontal line 402 or the vertical line 404 forming the reference figure 400 is displayed along the large line segment extracted from the input figure, so that the user's next operation can be performed. It can also be made easier. When displaying the deformed figure 410 from the beginning, the display of the reference figure (S103) in FIG. 2 can be omitted.

図7は、他の入力画像340と基準図形400とを重畳して画面300に表示された表示画面50を示す図である。同図に示すように、この入力画像340は傾いている。従って、この入力画像340を補正するためには、画像を回転させる補正処理を実行させる。   FIG. 7 is a diagram showing the display screen 50 displayed on the screen 300 by superimposing the other input image 340 and the reference graphic 400. As shown in the figure, the input image 340 is inclined. Therefore, in order to correct the input image 340, a correction process for rotating the image is executed.

同図に示すように、画面300に表示された入力画像340には基準図形400が重畳して表示されている。ただし、ここで実施される変形処理、即ち回転処理は、図3および図6に示した入力画像310に対する歪曲収差に対する補正処理とは異なる。そこで、ここで表示されている基準図形400に含まれるガイド図形403の形状とハンドル408の配置は、図3の場合と異なっている。これにより、ユーザは、自身が指定した変形処理の種類が回転処理であったことを直感的に確認できる。   As shown in the figure, the reference graphic 400 is superimposed on the input image 340 displayed on the screen 300. However, the deformation process, that is, the rotation process performed here is different from the correction process for distortion aberration for the input image 310 shown in FIGS. 3 and 6. Therefore, the shape of the guide graphic 403 included in the reference graphic 400 displayed here and the arrangement of the handles 408 are different from those in FIG. Thereby, the user can intuitively confirm that the type of the deformation process designated by the user is the rotation process.

図8は、図7に示した入力画像340に対して、ステップS104からS107において変形図形生成部140、対応関係算出部150および変換量算出部160において実行される処理に対応した表示画面60を示す図である。なお、図8と同じ構成要素には同じ参照符号を付して重複する説明を省いている。   FIG. 8 shows a display screen 60 corresponding to the processing executed in the deformed figure generation unit 140, the correspondence calculation unit 150, and the conversion amount calculation unit 160 in steps S104 to S107 with respect to the input image 340 shown in FIG. FIG. Note that the same components as those in FIG. 8 are denoted by the same reference numerals, and redundant description is omitted.

同図に示すように、ハンドル408を操作することにより変形図形生成部140により表示される変形図形430は、基準図形400に含まれる水平線402または鉛直線404が、入力画像340に含まれる水平線また鉛直線と平行になるように、ハンドル406を中心として回転されている。従って、ステップS110において、補正画像生成部170は、変形図形430を基準図形400に戻す処理と等価な変形処理を入力画像340に対して実行する。こうして、ステップS111において、補正画像生成部170は、図5に示した表示画面30と同様に正立した補正画像330を、表示装置180に表示させる。   As shown in the figure, the deformed figure 430 displayed by the deformed figure generating unit 140 by operating the handle 408 includes a horizontal line 402 or a vertical line 404 included in the reference graphic 400, and a horizontal line or vertical line included in the input image 340. It is rotated around the handle 406 so as to be parallel to the vertical line. Therefore, in step S <b> 110, the corrected image generation unit 170 performs a deformation process equivalent to the process of returning the deformed graphic 430 to the reference graphic 400 on the input image 340. In this way, in step S111, the corrected image generation unit 170 causes the display device 180 to display the corrected image 330 that is erected similarly to the display screen 30 shown in FIG.

図9は、また他の入力画像350に対して、基準図形生成部130が基準図形400を重畳して表示装置180に表示させた表示画面70示す図である。同図に示すように、この入力画像350は、いわゆるキーストン歪み(台形歪み)を含んでいる。このため、この入力画像350を補正するために補正画像生成部170で実行される変形処理は、図3、図6および図7に示した入力画像310、320、340に対する補正処理の場合とは異なる。従って、基準図形生成部130により表示される基準図形400でも、そこに含まれるガイド図形405の形状とハンドル408の配置は独自のものとなっている。   FIG. 9 is a diagram showing the display screen 70 displayed on the display device 180 by the reference graphic generation unit 130 superimposing the reference graphic 400 on another input image 350. As shown in the figure, this input image 350 includes so-called keystone distortion (trapezoid distortion). Therefore, the deformation process executed by the correction image generation unit 170 to correct the input image 350 is different from the correction process for the input images 310, 320, and 340 shown in FIGS. Different. Therefore, even in the reference graphic 400 displayed by the reference graphic generation unit 130, the shape of the guide graphic 405 included therein and the arrangement of the handles 408 are unique.

図10は、図9に示した入力画像350に対して、ステップS104からS107において変形図形生成部140が表示装置180に表示させる表示画面80を示す図である。なお、図9と同じ構成要素には同じ参照符号を付して重複する説明を省いている。   FIG. 10 is a diagram showing a display screen 80 that the deformed graphic generation unit 140 displays on the display device 180 in steps S104 to S107 with respect to the input image 350 shown in FIG. Note that the same components as those in FIG. 9 are denoted by the same reference numerals, and redundant description is omitted.

同図に示すように、ここでは、入力画像350の台形歪みに従って基準図形400の下部が拡がるように変形された台形の変形図形440が表示されている。ここでも、変形図形440に含まれる水平線および鉛直線が入力画像350に沿うように、変形図形440を変形させた上で、ステップS107において変形量を決定することにより、変換量算出部160は適切な変形量を得る。従って、補正画像生成部170は、ステップS111において、キーストン歪みを補正した補正画像330を表示装置180に表示させることができる。   As shown in the figure, here, a trapezoidal deformed figure 440 that is deformed so that the lower part of the reference figure 400 expands according to the trapezoidal distortion of the input image 350 is displayed. Also in this case, the transformation amount calculation unit 160 appropriately determines the transformation amount in step S107 after deforming the transformation graphic 440 so that the horizontal line and the vertical line included in the transformation graphic 440 are along the input image 350. To obtain an appropriate amount of deformation. Accordingly, the corrected image generation unit 170 can display the corrected image 330 corrected for keystone distortion on the display device 180 in step S111.

なお、入力画像350の台形歪みは、例えば画像の左右あるいは上下で非対称に生じる場合もある。従って、変形図形生成部140は、各ハンドル408が個別に操作された場合に、左右および上下に非対象な変形図形440を生成できることが好ましい。   Note that the trapezoidal distortion of the input image 350 may occur asymmetrically, for example, on the left or right or top and bottom of the image. Therefore, it is preferable that the deformed graphic generation unit 140 can generate the non-target deformed graphic 440 left and right and up and down when each handle 408 is individually operated.

図11は、補正処理を実施できる画像補正装置200の他の構造を模式的に示す図である。なお、図1に示した画像補正装置100と同じ構成要素には同じ参照符号を付して重複する説明を省いている。   FIG. 11 is a diagram schematically illustrating another structure of the image correction apparatus 200 that can perform the correction process. The same components as those in the image correction apparatus 100 shown in FIG. 1 are denoted by the same reference numerals, and redundant description is omitted.

同図に示すように、この画像補正装置200では、対応関係算出部250が、基準図形生成部130と変形図形生成部140との間に配置されている点において、図1に示した画像補正装置100と異なっている。また、この画像補正装置200にいて対応関係算出部250が算出する対応関係情報252は、入力画像情報122と基準図形情報132との対応関係を示す情報である点で、図1に示した画像補正装置100と異なっている。   As shown in the figure, in the image correction apparatus 200, the correspondence calculation unit 250 is arranged between the reference graphic generation unit 130 and the deformed graphic generation unit 140, so that the image correction shown in FIG. Different from the device 100. The correspondence relationship information 252 calculated by the correspondence relationship calculation unit 250 in the image correction apparatus 200 is information indicating the correspondence relationship between the input image information 122 and the reference graphic information 132, and the image shown in FIG. Different from the correction device 100.

しかしながら、この画像補正装置200においても、補正画像生成部170が、対応関係情報252および変換量情報262を参照して、入力画像情報122から補正画像情報172を生成することができる。また、この一連の処理に対するユーザ側の操作は、図1に示した画像補正装置100の場合と全く変わらない。また、この画像補正装置200においても、変形図形生成部140は変形図形表示部としての機能も有し、基準図形生成部130、変形図形生成部140および変換量算出部260が、画像処理内容決定装置の一例である。   However, also in this image correction apparatus 200, the corrected image generation unit 170 can generate the corrected image information 172 from the input image information 122 with reference to the correspondence relationship information 252 and the conversion amount information 262. Further, the operation on the user side for this series of processing is not different from the case of the image correction apparatus 100 shown in FIG. Also in this image correction apparatus 200, the deformed graphic generation unit 140 also has a function as a deformed graphic display unit, and the reference graphic generation unit 130, the modified graphic generation unit 140, and the conversion amount calculation unit 260 determine the image processing content. It is an example of an apparatus.

図12は、図11に示した画像補正装置200における補正処理の手順を示す流れ図F200である。なお、同図において、ステップS201〜S203、S205〜S208およびS209〜S211の各手順は、図2に示した流れ図F100のS101〜S103、S104〜S107、S109〜S111と同じであり、処理内容も実質的に同じである。ただし、基準図形生成部130が入力画像および基準図形を表示させるステップS203の次に、対応関係算出部250が対応関係情報252を算出するステップS204を実行する点が異なっている。前記したように、この手順でもユーザ側の操作に変化はないが、この手順では、対応関係算出および変換量算出という処理負荷の大きな処理を別のステップ分散させることができる。また、上記の一連の処理手順において、ステップS202、S205、S206、S207、S208およびS209により、画像処理の方法と処理量を含む画像処理内容が決定される。   FIG. 12 is a flowchart F200 showing a procedure of correction processing in the image correction apparatus 200 shown in FIG. In the figure, steps S201 to S203, S205 to S208, and S209 to S211 are the same as S101 to S103, S104 to S107, and S109 to S111 in the flowchart F100 shown in FIG. It is substantially the same. However, the difference is that, after step S203 in which the reference graphic generation unit 130 displays the input image and the reference graphic, the correspondence calculation unit 250 executes step S204 in which the correspondence information 252 is calculated. As described above, there is no change in the operation on the user side even in this procedure. However, in this procedure, processing with a large processing load such as correspondence calculation and conversion amount calculation can be distributed in different steps. In the above-described series of processing procedures, the image processing contents including the image processing method and the processing amount are determined in steps S202, S205, S206, S207, S208, and S209.

以上、本実施形態によれば、歪み等を含んで表示された入力画像に対して基準図形を変形した変形図形を合わせるので、入力画像の変形量を予測しながら基準図形を変形しなくてもよく、簡易な操作により、画像の歪みを確実に補正することができる。また、本発明は、画像の歪みを補正する処理に限らず、移動、回転、変形等の処理を含む様々な画像処理に適用できる。   As described above, according to the present embodiment, since the deformed figure obtained by deforming the reference graphic is matched with the input image displayed including distortion or the like, it is not necessary to deform the reference graphic while predicting the deformation amount of the input image. Well, it is possible to reliably correct image distortion by a simple operation. Further, the present invention is not limited to processing for correcting image distortion, but can be applied to various image processing including processing such as movement, rotation, and deformation.

更に、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加え得ることは当業者に明らかである。また、その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。   Furthermore, although the present invention has been described using the embodiment, the technical scope of the present invention is not limited to the scope described in the embodiment. It will be apparent to those skilled in the art that various modifications or improvements can be added to the above-described embodiment. Further, it is apparent from the description of the scope of claims that embodiments with such changes or improvements can also be included in the technical scope of the present invention.

画像処理内容決定装置の一実施形態としての画像補正装置100の構造を示す概念図である。It is a conceptual diagram which shows the structure of the image correction apparatus 100 as one Embodiment of an image processing content determination apparatus. 画像補正装置100における処理の手順を示す流れ図である。5 is a flowchart showing a processing procedure in the image correction apparatus 100. ステップS103における表示装置180の画面300を示す。The screen 300 of the display apparatus 180 in step S103 is shown. ステップS104からS107における表示装置180の画面300を示す。The screen 300 of the display apparatus 180 in step S104 to S107 is shown. ステップ111における表示装置180の画面300を示す。The screen 300 of the display apparatus 180 in step 111 is shown. ステップS104からS107における表示装置180の他の画面300を示す。The other screen 300 of the display apparatus 180 in step S104 to S107 is shown. ステップS103における表示装置180の他の画面300を示す。The other screen 300 of the display apparatus 180 in step S103 is shown. ステップS104からS107における表示装置180の他の画面300を示す。The other screen 300 of the display apparatus 180 in step S104 to S107 is shown. ステップS103における表示装置180の更に他の画面300を示す。The other screen 300 of the display apparatus 180 in step S103 is shown. ステップS104からS107における表示装置180の更に他の画面300を示す。Still another screen 300 of the display device 180 in steps S104 to S107 is shown. 画像処理内容決定装置の他の実施形態に係る画像補正装置200の全体の構成を示す概念図である。It is a conceptual diagram which shows the whole structure of the image correction apparatus 200 which concerns on other embodiment of an image processing content determination apparatus. 画像補正装置200の処理手順を示す流れ図である。5 is a flowchart showing a processing procedure of the image correction apparatus 200.

符号の説明Explanation of symbols

10、20、30、40、50、60、70、80 表示画面、100、200 画像補正装置、112 デジタルカメラ、114 スキャナ、116 キーボード、118 ポインティングデバイス、120 格納部、130 基準図形生成部、132 基準図形情報、140 変形図形生成部、142 変形図形情報、144 確定図形情報、150、250 対応関係算出部、152、252 対応関係情報、160、260 変換量算出部、162、262 変換量情報、170 補正画像生成部、172 補正画像情報、180 表示装置、300 画面、310、320、340、350 入力画像、330 補正画像、400 基準図形、402 水平線、404 鉛直線、401、403、405、409 ガイド図形、406、408 ハンドル、410、420、430、440 変形図形 10, 20, 30, 40, 50, 60, 70, 80 Display screen, 100, 200 Image correction device, 112 Digital camera, 114 Scanner, 116 Keyboard, 118 Pointing device, 120 Storage unit, 130 Standard figure generation unit, 132 Reference graphic information, 140 Deformed graphic generation unit, 142 Deformed graphic information, 144 Fixed graphic information, 150, 250 Correspondence calculation unit, 152, 252 Correspondence relationship information, 160, 260 Conversion amount calculation unit, 162, 262 Conversion amount information, 170 correction image generation unit, 172 correction image information, 180 display device, 300 screen, 310, 320, 340, 350 input image, 330 correction image, 400 reference graphic, 402 horizontal line, 404 vertical line, 401, 403, 405, 409 Guide shape, 406, 408 Han Le, 410, 420, 430 and 440 deformation figure

Claims (10)

基準図形を生成する基準図形生成部と、
外部から受信した変形指示に従って前記基準図形を変形した変形図形を入力画像に重畳して表示させる変形図形表示部と、
外部から受信した決定指示に応じて、そのときに表示されている前記変形図形を前記基準図形へと変換するための変換処理の内容を算出する処理内容算出部と
を備える画像処理内容決定装置。
A reference graphic generation unit for generating a reference graphic;
A deformed figure display unit that displays a deformed figure obtained by deforming the reference figure in accordance with a deformation instruction received from the outside, superimposed on the input image;
An image processing content determination apparatus comprising: a processing content calculation unit that calculates the content of conversion processing for converting the deformed graphic displayed at that time into the reference graphic in response to a determination instruction received from outside.
前記変形図形表示部は、前記表示された変形図形および前記基準図形の少なくとも一方に対してポインティング装置を介して入力される前記変形指示を受け付ける請求項1に記載の画像処理内容決定装置。   The image processing content determination device according to claim 1, wherein the deformed graphic display unit receives the deformation instruction input via at least one of the displayed deformed graphic and the reference graphic through a pointing device. 前記基準図形および前記入力画像の相対関係に関する相関指示を外部から受け付ける相関指示受付部をさらに備え、
前記基準図形生成部は、前記相関指示受付部の受け付けた前記相関指示に基づいて前記基準図形を生成する請求項1に記載の画像処理内容決定装置。
A correlation instruction receiving unit that receives a correlation instruction related to a relative relationship between the reference graphic and the input image from the outside;
The image processing content determination device according to claim 1, wherein the reference graphic generation unit generates the reference graphic based on the correlation instruction received by the correlation instruction reception unit.
前記処理内容算出部は、前記変換処理における処理量を算出し、算出された前記処理量に基づいた処理内容を決定する請求項1に記載の画像処理内容決定装置。   The image processing content determination apparatus according to claim 1, wherein the processing content calculation unit calculates a processing amount in the conversion processing and determines processing content based on the calculated processing amount. 前記変形図形表示部が、前記変形指示に従って、前記入力画像に歪曲収差、キーストン歪または傾きが生じた場合と等価に前記基準図形を変形させた前記変形図形を表示する請求項1に記載の画像処理内容決定装置。   The image according to claim 1, wherein the deformed graphic display unit displays the deformed graphic obtained by deforming the reference graphic equivalent to a case where distortion, keystone distortion, or inclination occurs in the input image in accordance with the deformation instruction. Processing content determination device. 前記基準図形が、鉛直線および水平線を含む請求項1に記載の画像処理内容決定装置。   The image processing content determination apparatus according to claim 1, wherein the reference graphic includes a vertical line and a horizontal line. 前記変形図形表示部が、前記入力画像に含まれる線のうち水平または鉛直であるべき線の1本に沿うように前記基準図形を変形させた変形図形を表示する請求項1に記載の画像処理内容決定装置。   The image processing according to claim 1, wherein the deformed graphic display unit displays a deformed graphic obtained by deforming the reference graphic so as to be along one of the lines that should be horizontal or vertical among the lines included in the input image. Content determination device. 前記処理内容算出部により算出された処理内容に従って前記入力画像を変換して処理画像を生成する処理画像生成部をさらに備える画像処理内容決定装置。   An image processing content determination device further comprising a processing image generation unit that converts the input image according to the processing content calculated by the processing content calculation unit to generate a processing image. 基準図形を生成する基準図形生成手順と、
外部から受信した変形指示に従って前記基準図形を変形した変形図形を入力画像に重畳して表示させる変形図形表示手順と、
外部から受信した決定指示に応じて、そのときに表示されている前記変形図形を前記基準図形へと変換するための変換処理の内容を算出する処理内容算出手順と
を情報処理装置に実行させる画像処理内容決定プログラム。
A standard graphic generation procedure for generating a standard graphic;
A deformed figure display procedure for displaying a deformed figure obtained by deforming the reference figure in accordance with a deformation instruction received from the outside, superimposed on the input image;
An image that causes an information processing apparatus to execute a processing content calculation procedure for calculating the content of conversion processing for converting the deformed graphic displayed at that time into the reference graphic in response to a determination instruction received from the outside Processing content determination program.
基準図形を生成する基準図形生成ステップと、
外部から受信した変形指示に従って前記基準図形を変形した変形図形を入力画像に重畳して表示させる変形図形表示ステップと、
外部から受信した決定指示に応じて、そのときに表示されている前記変形図形を前記基準図形へと変換するための変換処理の内容を算出する処理内容算出ステップと
を含む画像処理内容決定方法。
A reference graphic generation step for generating a reference graphic;
A deformed figure display step for superimposing and displaying a deformed figure obtained by deforming the reference figure in accordance with a deformation instruction received from outside;
A processing content determination method including a processing content calculation step of calculating content of conversion processing for converting the deformed graphic displayed at that time into the reference graphic in response to a determination instruction received from outside.
JP2006168742A 2005-08-10 2006-06-19 Image processing content determination apparatus, image processing content determination program, and image processing content determination method Active JP4793114B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006168742A JP4793114B2 (en) 2005-08-10 2006-06-19 Image processing content determination apparatus, image processing content determination program, and image processing content determination method

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2005232125 2005-08-10
JP2005232125 2005-08-10
JP2006168742A JP4793114B2 (en) 2005-08-10 2006-06-19 Image processing content determination apparatus, image processing content determination program, and image processing content determination method

Publications (2)

Publication Number Publication Date
JP2007073034A true JP2007073034A (en) 2007-03-22
JP4793114B2 JP4793114B2 (en) 2011-10-12

Family

ID=37934389

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006168742A Active JP4793114B2 (en) 2005-08-10 2006-06-19 Image processing content determination apparatus, image processing content determination program, and image processing content determination method

Country Status (1)

Country Link
JP (1) JP4793114B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008228071A (en) * 2007-03-14 2008-09-25 Nikon Corp Distortion correction method, distortion correction program, distortion correction apparatus, and imaging apparatus
JP2020106974A (en) * 2018-12-26 2020-07-09 株式会社クボタ Travel assistance device, work vehicle equipped with the same, and travel assistance method

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS57196366A (en) * 1981-05-28 1982-12-02 Nec Corp Picture positioning device
JPH05252352A (en) * 1992-03-06 1993-09-28 Fuji Xerox Co Ltd Method and device for reading out image
JPH08161424A (en) * 1994-12-05 1996-06-21 Canon Inc Method and device for processing image
JPH1196299A (en) * 1997-09-24 1999-04-09 Canon Inc Image recognition device and its method
JP2002057879A (en) * 2000-08-10 2002-02-22 Ricoh Co Ltd Apparatus and method for image processing, and computer readable recording medium
JP2004013431A (en) * 2002-06-05 2004-01-15 Noritsu Koki Co Ltd Image processing apparatus, image processing method and program thereof, and recording medium with the program recorded thereon
JP2004310585A (en) * 2003-04-09 2004-11-04 Canon Inc Image processor, method, program, and storage medium

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS57196366A (en) * 1981-05-28 1982-12-02 Nec Corp Picture positioning device
JPH05252352A (en) * 1992-03-06 1993-09-28 Fuji Xerox Co Ltd Method and device for reading out image
JPH08161424A (en) * 1994-12-05 1996-06-21 Canon Inc Method and device for processing image
JPH1196299A (en) * 1997-09-24 1999-04-09 Canon Inc Image recognition device and its method
JP2002057879A (en) * 2000-08-10 2002-02-22 Ricoh Co Ltd Apparatus and method for image processing, and computer readable recording medium
JP2004013431A (en) * 2002-06-05 2004-01-15 Noritsu Koki Co Ltd Image processing apparatus, image processing method and program thereof, and recording medium with the program recorded thereon
JP2004310585A (en) * 2003-04-09 2004-11-04 Canon Inc Image processor, method, program, and storage medium

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008228071A (en) * 2007-03-14 2008-09-25 Nikon Corp Distortion correction method, distortion correction program, distortion correction apparatus, and imaging apparatus
JP2020106974A (en) * 2018-12-26 2020-07-09 株式会社クボタ Travel assistance device, work vehicle equipped with the same, and travel assistance method
JP7154997B2 (en) 2018-12-26 2022-10-18 株式会社クボタ Driving support device, work vehicle equipped with driving support device, and driving support method

Also Published As

Publication number Publication date
JP4793114B2 (en) 2011-10-12

Similar Documents

Publication Publication Date Title
JP4120677B2 (en) Generation of still images from multiple frame images
US9747664B2 (en) Image processing apparatus
JP2008079026A (en) Image processor, image processing method, and program
US8031971B2 (en) Image processing content determining apparatus, computer readable medium storing thereon image processing content determining program and image processing content determining method
JP5751254B2 (en) Image processing system, image processing method, and image processing program
JP4793114B2 (en) Image processing content determination apparatus, image processing content determination program, and image processing content determination method
KR101038690B1 (en) Image signal processing apparatus and method, and recording medium
JP2008092011A (en) Projector and correction method
JP6676299B2 (en) Image processing apparatus, image processing method, and computer program
JP5245805B2 (en) Projector, control method therefor, and control program therefor
JPH10108003A (en) Image compositing device and image compositing method
CN110692235B (en) Image processing apparatus, image processing program, and image processing method
JP5687370B2 (en) Image processing apparatus, image processing method, image processing program, and recording medium
JP4689243B2 (en) Image processing apparatus, image processing method, and digital camera
JP4628406B2 (en) Image processing apparatus, method, and program
JPH05250467A (en) Picture signal processor
JP4854042B2 (en) Image generation method, image generation apparatus, and image generation program
JP2005196444A (en) Image data processor, image data processing method and its program
JP2005217721A (en) Still image generation apparatus and generation method
JP4872715B2 (en) Image processing apparatus and program
JP2000182026A (en) Image processor, image processing method and computer readable recording medium in which program to make computer to execute image processing method is recorded
JP4645918B2 (en) Image signal processing apparatus and method
JP4853571B2 (en) Boundary setting method, boundary setting device, program, and printing system
JP2007336370A (en) Projector and view angle control method
WO2020235400A1 (en) Image processing device, image processing method, and program

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20080415

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20081002

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20081008

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110125

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110324

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110412

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110610

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110628

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110711

R150 Certificate of patent or registration of utility model

Ref document number: 4793114

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140805

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250