JP2003283819A - Image correction method and apparatus, and program - Google Patents
Image correction method and apparatus, and programInfo
- Publication number
- JP2003283819A JP2003283819A JP2002079348A JP2002079348A JP2003283819A JP 2003283819 A JP2003283819 A JP 2003283819A JP 2002079348 A JP2002079348 A JP 2002079348A JP 2002079348 A JP2002079348 A JP 2002079348A JP 2003283819 A JP2003283819 A JP 2003283819A
- Authority
- JP
- Japan
- Prior art keywords
- area
- image data
- camera
- image
- terminal device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Facsimile Image Signal Circuits (AREA)
- Telephone Function (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、カメラ付き携帯端
末装置において取得された画像データの幾何学的な歪み
を補正する画像補正方法および装置並びに画像補正方法
をコンピュータに実行させるためのプログラムに関する
ものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image correction method and apparatus for correcting geometric distortion of image data acquired in a camera-equipped mobile terminal device, and a program for causing a computer to execute the image correction method. Is.
【０００２】[0002]
【従来の技術】携帯電話の普及には目覚ましいものがあ
るが、近年、撮影により画像データを取得する電子スチ
ルカメラ（以下カメラとする）を有するカメラ付き携帯
電話等のカメラ付き携帯端末装置が普及しつつある（例
えば特開平６−２３３０２０号公報、特開２０００−２
５３２９０号公報等）。また、ＰＤＡ等の携帯端末装置
においてカメラを内蔵させたカメラ付き携帯端末装置も
提案されている（特開平８−１４００７２号公報、同９
−６５２６８号公報）。2. Description of the Related Art Although the spread of mobile phones is remarkable, in recent years, camera-equipped mobile terminal devices such as camera-equipped mobile phones having an electronic still camera (hereinafter referred to as a camera) that acquires image data by photographing have become popular. (For example, Japanese Patent Laid-Open Nos. 6-2333020 and 2000-2
53290 publication). Further, a mobile terminal device with a camera in which a camera is built in a mobile terminal device such as a PDA has also been proposed (Japanese Patent Laid-Open Nos. 8-140072 and 9-9).
-65268).
【０００３】このようなカメラ付きの携帯端末装置を用
いることにより、撮影により取得した自分の好みの画像
データを携帯端末装置の液晶モニタにおいて待ち受け画
面に設定できる。また、撮影により取得した画像データ
を電子メールに添付して友人に送信することができるた
め、約束をキャンセルせざるを得ないような状況になっ
たとき、あるいは待ち合わせ時刻に遅刻しそうなとき
に、申し訳なさそうな自分の表情を撮影して友人に送信
する等、現在の自分の状況を友人に知らせることができ
ることから、友人とのコミュニケーションを図るのに便
利である。By using such a portable terminal device with a camera, the user's favorite image data obtained by photographing can be set on the standby screen on the liquid crystal monitor of the portable terminal device. Also, since you can attach the image data acquired by shooting to an email and send it to a friend, when you have to cancel your appointment or when you are likely to be late for the meeting time, This is useful for communicating with friends because it can inform their friends of their current situation, such as taking a photo of their apologetic expression and sending it to a friend.
【０００４】しかしながら、このような携帯端末装置に
設けられるカメラは、サイズの制約からズーム機能を備
えたり望遠レンズを備えたものとすることは困難であ
る。また、カメラ自体が携帯端末装置に埋め込まれて構
成されていることから、レンズの交換も困難である。However, it is difficult for a camera provided in such a portable terminal device to have a zoom function or a telephoto lens because of size restrictions. Further, since the camera itself is embedded in the mobile terminal device, it is difficult to replace the lens.
【０００５】このため、携帯端末装置に設けるカメラの
レンズを広角レンズとすることが現実的である。さら
に、魚眼レンズのように超広角レンズを用いることによ
り、１ショットで撮影地点を基準とした半球状の広範囲
を撮影することが可能となる。Therefore, it is practical to use a wide-angle lens as the lens of the camera provided in the portable terminal device. Furthermore, by using an ultra wide-angle lens such as a fisheye lens, it is possible to photograph a hemispherical wide area with the shot point as a reference with one shot.
【０００６】[0006]
【発明が解決しようとする課題】ところで、カメラ付き
携帯端末装置に設けられている液晶モニタは画面サイズ
が制限されているため、とくにカメラを構成する撮像デ
バイスの画素数が液晶モニタの画素数よりも大きい場合
においては、画像を縮小して表示する必要がある。しか
しながら、風景画像等を撮影した場合、画像を縮小する
と画像中に何が写っているのかよく分からないことが多
い。さらに、広角レンズを用いたカメラにより得られる
画像は、その周辺部において幾何学的な歪みが大きいた
め、例えば特開平５−９１４０９号公報に記載されてい
るような画像の幾何学的歪みを補正する装置を用いて、
歪みを補正してから画像を表示する必要がある。その一
方で、カメラの高画素化が進み、画像データの容量が大
きくなっていることから、画像の全領域に対して歪みを
補正する処理を施すことは、演算に長時間を要するもの
となる。さらに、携帯端末装置においては、画像データ
をサーバ等に送信することが多いため、通信費用の観点
から画像データの容量は小さいことが好ましい。By the way, since the liquid crystal monitor provided in the camera-equipped mobile terminal device has a limited screen size, the number of pixels of the image pickup device constituting the camera is particularly larger than that of the liquid crystal monitor. If it is too large, it is necessary to reduce the size of the image for display. However, when a landscape image or the like is photographed, it is often difficult to understand what is in the image when the image is reduced. Further, since an image obtained by a camera using a wide-angle lens has a large geometrical distortion in its peripheral portion, for example, the geometrical distortion of the image as described in JP-A-5-91409 is corrected. Using the device
It is necessary to correct the distortion before displaying the image. On the other hand, since the number of pixels in the camera is increasing and the amount of image data is increasing, it takes a long time to perform the process of correcting the distortion on the entire area of the image. . Further, in the mobile terminal device, since image data is often transmitted to a server or the like, it is preferable that the amount of image data is small from the viewpoint of communication cost.
【０００７】本発明は上記事情に鑑みなされたものであ
り、画像の幾何学的歪みを効率よく補正して効率よく画
像データの送信を行うことを目的とする。The present invention has been made in view of the above circumstances, and an object thereof is to efficiently correct geometric distortion of an image and to efficiently transmit image data.
【０００８】[0008]
【課題を解決するための手段】本発明による第１の画像
補正方法は、カメラ付き携帯端末装置において取得され
た画像データにより表される画像の幾何学的歪みを補正
する画像補正方法であって、前記カメラ付き携帯端末装
置において前記画像上に指定された領域を表す領域情報
および前記画像データを取得し、前記領域情報に基づい
て、該画像データから前記指定された領域に対応する領
域画像データを生成し、前記カメラの歪み特性を表す歪
み特性情報に基づいて、前記領域画像データを幾何学的
に補正して補正領域画像データを生成し、該補正領域画
像データを前記カメラ付き携帯端末装置に送信すること
を特徴とするものである。A first image correction method according to the present invention is an image correction method for correcting geometric distortion of an image represented by image data acquired by a camera-equipped mobile terminal device. Area information representing a specified area on the image and the image data in the camera-equipped portable terminal device, and area image data corresponding to the specified area from the image data based on the area information For correcting the region image data geometrically based on the distortion characteristic information representing the distortion characteristic of the camera to generate corrected region image data, and the corrected region image data is used for the portable terminal device with camera. It is characterized by transmitting to.
【０００９】画像上においての領域の指定はカメラ付き
携帯端末装置において行われるが、所望とする領域の範
囲を指定することにより行ってもよく、画像上のある一
点を指定することにより行ってもよい。前者の場合、領
域情報は画像上における指定された領域を特定するため
の座標値（例えば領域が矩形なら四隅の座標値）が用い
られる。後者の場合、カメラ付き携帯端末装置におい
て、指定された一点を含む所定範囲の領域が設定され、
設定された領域を特定するための座標値（例えば領域が
矩形なら四隅の座標値）が領域情報として用いられる。
また、指定された領域を囲むように別の領域を設定し、
設定された別の領域を特定するための座標値を領域情報
として用いてもよい。The area on the image is specified by the portable terminal device with a camera, but may be specified by specifying the range of the desired area or by specifying a certain point on the image. Good. In the former case, the area information uses the coordinate values for specifying the specified area on the image (for example, the coordinate values of the four corners if the area is a rectangle). In the latter case, in the camera-equipped mobile terminal device, an area of a predetermined range including one designated point is set,
Coordinate values for specifying the set area (for example, coordinate values of four corners if the area is a rectangle) are used as area information.
Also, set another area to surround the specified area,
Coordinate values for specifying another set area may be used as the area information.
【００１０】「カメラの歪み特性を表す歪み特性情報」
とは、カメラに用いられている撮影レンズを透過した透
過像上における各点の座標とカメラに設けられたＣＣＤ
等の撮像デバイスを構成する各光電変換素子の位置を表
す座標との対応関係を表す情報である。具体的には、カ
メラに使用されている撮影レンズが魚眼レンズである場
合、歪み特性情報は魚眼レンズを透過した透過像上にお
ける極座標と、撮像デバイス上の光電変換素子の位置座
標との関係を表す情報となる。“Distortion characteristic information indicating distortion characteristics of camera”
Is the coordinates of each point on the transmission image transmitted through the photographing lens used in the camera and the CCD provided in the camera.
Is information indicating the correspondence with the coordinates indicating the position of each photoelectric conversion element forming the image pickup device. Specifically, when the taking lens used in the camera is a fisheye lens, the distortion characteristic information is information indicating the relationship between the polar coordinates on the transmission image transmitted through the fisheye lens and the position coordinates of the photoelectric conversion element on the imaging device. Becomes
【００１１】ここで、歪み特性情報は、カメラ付き携帯
端末装置の機種によって異なるものである。したがっ
て、カメラ付き携帯端末装置の機種毎に複数の歪み特性
情報を用意しておき、画像データを取得したカメラ付き
携帯端末装置の機種に応じた歪み特性情報に基づいて、
領域画像データを補正することが好ましい。Here, the distortion characteristic information varies depending on the model of the portable terminal device with a camera. Therefore, a plurality of distortion characteristic information is prepared for each model of the camera-equipped mobile terminal device, and based on the distortion characteristic information corresponding to the model of the camera-equipped mobile terminal device that acquires the image data,
It is preferable to correct the area image data.
【００１２】なお、本発明による第１の画像補正方法に
おいては、さらに、前記領域情報により表される領域と
は異なる他の領域を表す他の領域情報を取得し、該他の
領域情報に基づいて、前記画像データから該他の領域に
対応する他の領域画像データを生成し、前記カメラの歪
み特性を表す歪み特性情報に基づいて、前記他の領域画
像データを幾何学的に補正して他の補正領域画像データ
を生成し、該他の補正領域画像データを前記カメラ付き
携帯端末装置に送信するようにしてもよい。In the first image correction method according to the present invention, further, other area information indicating another area different from the area represented by the area information is acquired, and based on the other area information. Then, other area image data corresponding to the other area is generated from the image data, and the other area image data is geometrically corrected based on distortion characteristic information indicating distortion characteristics of the camera. Other correction area image data may be generated and the other correction area image data may be transmitted to the camera-equipped mobile terminal device.
【００１３】本発明による第２の画像補正方法は、カメ
ラ付き携帯端末装置において取得された画像データによ
り表される画像の幾何学的歪みを補正する画像補正方法
であって、前記カメラ付き携帯端末装置において生成さ
れた、前記画像上に指定された領域に対応する領域画像
データを取得し、前記カメラの歪み特性を表す歪み特性
情報に基づいて、前記領域画像データを幾何学的に補正
して補正領域画像データを生成し、該補正領域画像デー
タを前記カメラ付き携帯端末装置に送信することを特徴
とするものである。A second image correction method according to the present invention is an image correction method for correcting geometrical distortion of an image represented by image data acquired by a camera-equipped mobile terminal device, wherein Obtained in the apparatus, the area image data corresponding to the area specified on the image, based on the distortion characteristic information representing the distortion characteristics of the camera, geometrically correct the area image data. The correction area image data is generated and the correction area image data is transmitted to the camera-equipped mobile terminal device.
【００１４】本発明による第１の画像補正装置は、カメ
ラ付き携帯端末装置において取得された画像データによ
り表される画像の幾何学的歪みを補正する画像補正装置
であって、前記カメラ付き携帯端末装置において前記画
像上に指定された領域を表す領域情報および前記画像デ
ータを取得する取得手段と、前記領域情報に基づいて、
該画像データから前記指定された領域に対応する領域画
像データを生成する領域画像生成手段と、前記カメラの
歪み特性を表す歪み特性情報に基づいて、前記領域画像
データを幾何学的に補正して補正領域画像データを生成
する画像補正手段と、該補正領域画像データを前記カメ
ラ付き携帯端末装置に送信する送信手段とを備えたこと
を特徴とするものである。A first image correction device according to the present invention is an image correction device for correcting geometrical distortion of an image represented by image data acquired by a camera-equipped portable terminal device, wherein the camera-equipped portable terminal device. In the device, based on the area information and area information representing the area designated on the image and the image data, the area information,
Area image generation means for generating area image data corresponding to the specified area from the image data, and geometrically correcting the area image data based on distortion characteristic information indicating distortion characteristics of the camera. It is characterized by comprising image correction means for generating correction area image data, and transmission means for transmitting the correction area image data to the camera-equipped mobile terminal device.
【００１５】なお、本発明による第１の画像補正装置に
おいては、前記取得手段は、さらに、前記領域情報によ
り表される領域とは異なる他の領域を表す他の領域情報
を取得する手段であり、前記領域画像生成手段は、前記
他の領域情報に基づいて、前記画像データから該他の領
域に対応する他の領域画像データを生成する手段であ
り、前記画像補正手段は、前記カメラの歪み特性を表す
歪み特性情報に基づいて、前記他の領域画像データを幾
何学的に補正して他の補正領域画像データを生成する手
段であり、前記送信手段は、該他の補正領域画像データ
を前記カメラ付き携帯端末装置に送信する手段であるこ
とを特徴とするものである。In the first image correction apparatus according to the present invention, the acquisition means is means for further acquiring other area information indicating another area different from the area represented by the area information. The area image generation means is means for generating other area image data corresponding to the other area from the image data based on the other area information, and the image correction means is for distortion of the camera. Means for geometrically correcting the other area image data to generate another area image data for correction, based on the distortion characteristic information indicating characteristics, wherein the transmitting means outputs the other area image data for correction. It is a means for transmitting to the portable terminal device with a camera.
【００１６】本発明による第２の画像補正装置は、カメ
ラ付き携帯端末装置において取得された画像データによ
り表される画像の幾何学的歪みを補正する画像補正装置
であって、前記カメラ付き携帯端末装置において生成さ
れた、前記画像上に指定された領域に対応する領域画像
データを取得する取得手段と、前記カメラの歪み特性を
表す歪み特性情報に基づいて、前記領域画像データを幾
何学的に補正して補正領域画像データを生成する画像補
正手段と、該補正領域画像データを前記カメラ付き携帯
端末装置に送信する送信手段とを備えたことを特徴とす
るものである。A second image correction device according to the present invention is an image correction device for correcting geometrical distortion of an image represented by image data acquired by a camera-equipped portable terminal device, wherein the camera-equipped portable terminal device. The area image data is generated geometrically on the basis of an acquisition unit that acquires area image data corresponding to an area specified on the image and distortion characteristic information that represents distortion characteristics of the camera. Image correction means for correcting and generating correction area image data, and transmission means for transmitting the correction area image data to the camera-equipped mobile terminal device are provided.
【００１７】なお、本発明による第１および第２の画像
補正方法をコンピュータに実行させるためのプログラム
として提供してもよい。The first and second image correction methods according to the present invention may be provided as a program for causing a computer to execute.
【００１８】[0018]
【発明の効果】本発明による第１の画像補正方法および
装置によれば、まず、カメラ付き携帯端末装置において
撮像により画像データが取得され、この画像データによ
り表される画像上に領域が指定され、さらに指定された
領域を表す領域情報が生成される。そして、このように
して生成された領域情報が画像データとともに本発明に
よる第１の画像補正方法および装置において取得され
る。次いで、領域情報に基づいて画像データから領域画
像データが生成され、さらに、カメラの歪み特性を表す
歪み特性情報に基づいて、領域画像データが幾何学的に
補正されて補正領域画像データが生成される。そして、
補正領域画像データがカメラ付き携帯端末装置に送信さ
れ、カメラ付き携帯端末装置において補正領域画像デー
タが表示される。According to the first image correction method and apparatus of the present invention, first, image data is acquired by imaging in a portable terminal device with a camera, and an area is designated on the image represented by this image data. Area information representing the further specified area is generated. Then, the area information thus generated is acquired together with the image data in the first image correction method and apparatus according to the present invention. Then, region image data is generated from the image data based on the region information, and further, the region image data is geometrically corrected based on the distortion characteristic information representing the distortion characteristic of the camera to generate corrected region image data. It And
The correction area image data is transmitted to the camera-equipped mobile terminal device, and the correction area image data is displayed on the camera-equipped mobile terminal device.
【００１９】このように、本発明による第１の画像補正
方法および装置においては、カメラ付き携帯端末装置に
設けられたカメラの歪み特性情報に基づいて、領域画像
データを幾何学的に補正し、補正により生成された補正
領域画像データをカメラ付き携帯端末装置に送信するよ
うにしたため、カメラ付き携帯端末装置においては、幾
何学的歪みが補正された画像を表示することができる。
また、指定された領域の画像のみがカメラ付き携帯端末
装置において表示されるため、画像全体を縮小して表示
する場合よりも鮮明な画像をカメラ付き携帯端末装置に
おいて表示することができる。As described above, in the first image correction method and apparatus according to the present invention, the regional image data is geometrically corrected based on the distortion characteristic information of the camera provided in the camera-equipped portable terminal device, Since the correction region image data generated by the correction is transmitted to the camera-equipped mobile terminal device, the camera-equipped mobile terminal device can display an image in which the geometric distortion has been corrected.
Further, since only the image of the designated area is displayed on the camera-equipped mobile terminal device, a clearer image can be displayed on the camera-equipped mobile terminal device than when the entire image is reduced and displayed.
【００２０】さらに、カメラ付き携帯端末装置において
は、画像データの一部の領域のみを補正した補正領域画
像データを受信すればよいため、画像データの全体を補
正した画像データを受信する場合と比較して通信コスト
を低減することができる。とくに携帯端末装置の料金体
系は、送受信したデータ容量に応じて料金が加算される
パケット制であるため、データ容量の低減による通信コ
スト低減の効果は非常に大きい。Further, since the camera-equipped mobile terminal device only needs to receive the corrected area image data in which only a partial area of the image data is corrected, it is compared with the case of receiving the image data in which the entire image data is corrected. Therefore, the communication cost can be reduced. In particular, the charge system of the mobile terminal device is a packet system in which a charge is added according to the amount of transmitted / received data, and therefore the effect of reducing the communication cost by reducing the data amount is very large.
【００２１】なお、一旦補正領域画像データを生成した
後に、カメラ付き携帯端末装置において表示したい領域
が変更された場合には、変更された他の領域を表す他の
領域情報のみを取得し、この他の領域情報に基づいて他
の補正領域画像データを生成してカメラ付き携帯端末装
置に送信することにより、カメラ付き携帯端末装置から
は再度の画像データの送信を行う必要がなくなるため、
さらに通信コストを低減することができる。If the area to be displayed on the camera-equipped mobile terminal device is changed after the correction area image data is once generated, only other area information indicating the changed other area is acquired, By generating another correction area image data based on the other area information and transmitting the correction area image data to the camera-equipped mobile terminal device, it is not necessary to retransmit the image data from the camera-equipped mobile terminal device.
Further, the communication cost can be reduced.
【００２２】また、本発明による第２の画像補正方法お
よび装置によれば、まず、カメラ付き携帯端末装置にお
いて撮像により画像データが取得され、この画像データ
により表される画像上に領域が指定されると、カメラ付
き携帯端末装置において、指定された領域に対応する領
域画像データが生成される。そして、このようにして生
成された領域画像データが、本発明による第２の画像補
正方法および装置により取得される。次いで、カメラの
歪み特性を表す歪み特性情報に基づいて、領域画像デー
タが幾何学的に補正されて補正領域画像データが生成さ
れ、補正領域画像データがカメラ付き携帯端末装置に送
信され、カメラ付き携帯端末装置において補正領域画像
データが表示される。Further, according to the second image correction method and apparatus of the present invention, first, image data is acquired by imaging in a portable terminal device with a camera, and an area is designated on the image represented by this image data. Then, in the mobile terminal device with camera, area image data corresponding to the specified area is generated. Then, the region image data thus generated is acquired by the second image correction method and apparatus according to the present invention. Then, based on the distortion characteristic information indicating the distortion characteristic of the camera, the area image data is geometrically corrected to generate corrected area image data, and the corrected area image data is transmitted to the camera-equipped mobile terminal device, and The correction area image data is displayed on the mobile terminal device.
【００２３】このように、本発明による第２の画像補正
方法および装置においては、カメラ付き携帯端末装置に
設けられたカメラの歪み特性情報に基づいて、カメラ付
き携帯端末装置において生成された領域画像データを幾
何学的に補正して補正領域画像データを生成し、これを
カメラ付き携帯端末装置に送信するようにしたため、カ
メラ付き携帯端末装置においては、幾何学的歪みが補正
された画像を表示することができる。また、指定された
領域の画像のみがカメラ付き携帯端末装置において表示
されるため、画像全体を表示するよりも鮮明な画像をカ
メラ付き携帯端末装置において表示することができる。As described above, in the second image correction method and apparatus according to the present invention, the area image generated in the camera-equipped mobile terminal device based on the distortion characteristic information of the camera provided in the camera-equipped mobile terminal device. The data is geometrically corrected to generate corrected area image data, which is transmitted to the camera-equipped mobile terminal device, so that the image with geometric distortion corrected is displayed on the camera-equipped mobile terminal device. can do. Further, since only the image in the designated area is displayed on the camera-equipped mobile terminal device, a clearer image than the entire image can be displayed on the camera-equipped mobile terminal device.
【００２４】また、カメラ付き携帯端末装置において
は、画像データにより表される画像の一部の領域のみを
表す領域画像データの送信および補正領域画像データの
受信を行えばよいため、画像データを送信し、画像デー
タを補正することにより得られる補正画像データを受信
する場合と比較して通信コストを低減することができ
る。とくに携帯端末装置の料金体系は、送受信したデー
タ容量に応じて料金が加算されるパケット制であるた
め、データ容量の低減による通信コスト低減の効果は非
常に大きい。Further, in the camera-equipped portable terminal device, since it is sufficient to transmit the area image data representing only a partial area of the image represented by the image data and receive the corrected area image data, the image data is transmitted. However, the communication cost can be reduced as compared with the case where the corrected image data obtained by correcting the image data is received. In particular, the charge system of the mobile terminal device is a packet system in which a charge is added according to the amount of transmitted / received data, and therefore the effect of reducing the communication cost by reducing the data amount is very large.
【００２５】[0025]
【発明の実施の形態】以下図面を参照して本発明の実施
形態について説明する。図１は本発明の第１の実施形態
による画像補正装置を適用した画像送信システムの構成
を示す概略ブロック図である。図１に示すように、本発
明の第１の実施形態による画像送信システムは、カメラ
付き携帯電話１と、本実施形態による画像補正装置を備
えた画像サーバ２との間において、公衆回線３を介して
データのやり取りを行うものである。BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is a schematic block diagram showing the configuration of an image transmission system to which an image correction apparatus according to the first embodiment of the present invention is applied. As shown in FIG. 1, the image transmission system according to the first embodiment of the present invention connects a public line 3 between a camera-equipped mobile phone 1 and an image server 2 equipped with an image correction device according to the present embodiment. Data is exchanged via this.
【００２６】カメラ付き携帯電話１は、撮像により被写
体を表す画像データＳ０を取得する撮像部１１と、画像
や種々の情報を表示する液晶モニタ等からなる表示部１
２と、十字キーを含む複数の入力キーからなるキー入力
部１３と、公衆回線３を介して通話、メールの送受信お
よびデータの送受信を行う通信部１４と、撮像部１１に
おいて取得された画像データＳ０をメモリカード等に記
憶する記憶部１５と、表示部１２に表示された画像上に
おいて指定された領域を表す領域情報Ｒ０を生成する領
域情報生成部１６とを備える。The camera-equipped mobile phone 1 includes an image pickup section 11 for acquiring image data S0 representing a subject by image pickup, and a display section 1 including a liquid crystal monitor for displaying images and various information.
2, a key input unit 13 including a plurality of input keys including a cross key, a communication unit 14 for making a call, sending and receiving mail, and sending and receiving data via the public line 3, and image data acquired by the image pickup unit 11. A storage unit 15 that stores S0 in a memory card or the like, and a region information generation unit 16 that generates region information R0 indicating a designated region on the image displayed on the display unit 12 are provided.
【００２７】撮像部１１は、撮影レンズ、シャッタ、撮
像デバイス等からなるカメラ１１Ａと、撮像により取得
された撮像画像データに対して画像処理を施して画像デ
ータＳ０を得る画像処理部１１Ｂとを備える。なお、撮
影レンズは３５ｍｍカメラ換算でｆ≦２８ｍｍの広角レ
ンズが使用されるが、本実施形態においては魚眼レンズ
を使用し、撮影地点を基準とした半球状の広範囲を撮影
することが可能となっている。また、撮像デバイスとし
ては、例えばカラーＣＭＯＳセンサやカラーＣＣＤセン
サを用いることができる。なお、撮像デバイスの画素数
としては、例えば２４０×１６０画素〜２０００×３０
００画素程度のものが用いられるが、本実施形態におい
ては、１２８０×９６０画素のものを用いるものとす
る。The image pickup section 11 is provided with a camera 11A including a taking lens, a shutter, an image pickup device, etc., and an image processing section 11B for performing image processing on the picked-up image data obtained by image pickup to obtain image data S0. . Note that a wide-angle lens with f ≦ 28 mm in terms of a 35 mm camera is used as the photographing lens, but in the present embodiment, it is possible to photograph a hemispherical wide area based on the photographing point by using a fisheye lens. There is. Further, as the image pickup device, for example, a color CMOS sensor or a color CCD sensor can be used. The number of pixels of the imaging device is, for example, 240 × 160 pixels to 2000 × 30.
Although a pixel having about 00 pixels is used, a pixel having 1280 × 960 pixels is used in this embodiment.
【００２８】表示部１２の表示サイズとしては、例えば
本実施形態においては、２４０×１６０画素程度のもの
が用いられる。また、本実施形態においては、画像デー
タＳ０を縮小して得られた画像の全体が表示部１２に表
示されるようにしてもよいが、後述するように画像上に
領域を指定する場合には、画像データＳ０が縮小される
ことなくそのまま表示部１２に表示される。この場合
は、カメラ付き携帯電話１のユーザは、キー入力部１３
の十字キーを用いて表示された画像をスクロールするこ
とにより、画像上の全領域を把握することができる。As the display size of the display section 12, for example, in the present embodiment, a display size of about 240 × 160 pixels is used. Further, in the present embodiment, the entire image obtained by reducing the image data S0 may be displayed on the display unit 12. However, when an area is designated on the image as described later, , The image data S0 is displayed on the display unit 12 without being reduced. In this case, the user of the camera-equipped mobile phone 1 uses the key input unit 13
By scrolling the displayed image using the cross key of, the entire area on the image can be grasped.
【００２９】領域情報生成部１６は、表示部１２に表示
された画像上において、カメラ付き携帯電話１のユーザ
がキー入力部１３を用いて指定した領域を表す領域情報
Ｒ０を生成する。本実施形態においては、図２に示すよ
うに表示部１２に表示された画像上にカーソルＫを表示
し、これを画像上において移動させて表示したい領域の
中心点を指定することにより、その中心点を含む矩形の
領域が指定される。そして、この矩形の領域の四隅の座
標値が領域情報Ｒ０として生成される。なお、領域情報
Ｒ０には、カメラ付き携帯電話１の機種情報も含まれ
る。また、領域の指定時には、領域の中心点のみなら
ず、所望とする領域の四隅を指定するようにしてもよ
い。The area information generation unit 16 generates area information R0 indicating the area specified by the user of the camera-equipped mobile phone 1 using the key input unit 13 on the image displayed on the display unit 12. In the present embodiment, as shown in FIG. 2, the cursor K is displayed on the image displayed on the display unit 12, and the cursor K is moved on the image to specify the center point of the area to be displayed, thereby A rectangular area containing points is specified. Then, the coordinate values of the four corners of this rectangular area are generated as the area information R0. The area information R0 also includes model information of the camera-equipped mobile phone 1. Further, when the area is designated, not only the center point of the area but also the four corners of the desired area may be designated.
【００３０】画像サーバ２は、公衆回線３を介してのデ
ータの送受信を行う通信部２１と、カメラ付き携帯電話
１から送信された画像データＳ０を記憶する記憶部２２
と、カメラ付き携帯電話１の機種毎に、カメラ１１Ａの
歪み特性を表す複数の歪み特性情報Ｈ０を記憶する特性
記憶部２３と、領域情報Ｒ０に基づいて、カメラ付き携
帯電話１において指定された領域に対応する領域画像デ
ータＳＲ０を画像データＳ０から生成する領域画像生成
部２４と、画像データＳ０を送信したカメラ付き携帯電
話１の機種に応じた歪み特性情報Ｈ０に基づいて、後述
するように領域画像データＳＲ０を補正して補正領域画
像データＳＲ１を生成する画像補正部２５とを備える。The image server 2 has a communication section 21 for transmitting / receiving data via the public line 3 and a storage section 22 for storing the image data S0 transmitted from the camera-equipped mobile phone 1.
A characteristic storage unit 23 that stores a plurality of distortion characteristic information H0 representing the distortion characteristics of the camera 11A for each model of the camera-equipped mobile phone 1 and the camera-equipped mobile phone 1 is specified based on the area information R0. As will be described later, based on the region image generation unit 24 that generates the region image data SR0 corresponding to the region from the image data S0 and the distortion characteristic information H0 according to the model of the camera-equipped mobile phone 1 that transmitted the image data S0. An image correction unit 25 that corrects the area image data SR0 to generate corrected area image data SR1.
【００３１】なお、画像サーバ２に、プリンタおよびプ
リントについての注文を受け付ける注文処理部を設け、
画像データＳ０や後述する補正領域画像データＳＲ１の
プリント注文を受け付けるようにしてもよい。It should be noted that the image server 2 is provided with a printer and an order processing unit for receiving orders for printing,
A print order for the image data S0 or the correction area image data SR1 described later may be accepted.
【００３２】特性記憶部２３に記憶されている歪み特性
情報Ｈ０は、カメラ付き携帯電話１の機種に応じて、カ
メラ１１Ａの魚眼レンズを透過した像である透過像上の
座標である極座標（θ、φ）と、撮像デバイス上におけ
る光電変換素子の位置を表すピクセル座標（ｘ，ｙ）と
の関係を表すものとなっている。The distortion characteristic information H0 stored in the characteristic storage unit 23 is polar coordinates (θ, which is the coordinate on the transmission image which is an image transmitted through the fisheye lens of the camera 11A, depending on the model of the camera-equipped mobile phone 1. φ) and the pixel coordinates (x, y) representing the position of the photoelectric conversion element on the image pickup device.
【００３３】ここで、本実施形態のように魚眼レンズを
用いたカメラ付き携帯電話１において、撮像時における
魚眼レンズの透過像は、図３（ａ）に示すように極座標
に対応して撮像デバイス平面に投影される。カメラ１１
において、十分な画素数を有する撮像デバイス（例えば
本実施形態のように１２８０×９６０画素）を使用すれ
ば、風景を撮像しても魚眼レンズの透過像は魚眼レンズ
の周辺部を含めて全て画像として得ることができる。し
かしながら、魚眼レンズの透過像は極座標に投影された
像を表すものであるため、得られた画像をそのまま表示
すると、画像の周囲の幾何学的歪みが非常に強いものと
なる。さらに、カメラ付き携帯電話１の表示部１２は、
本実施形態の場合２４０×１６０ピクセルとそれほど大
きくないことから、表示部１２に画像全体を表示するた
めに画像を縮小すると、とくに風景の画像については鮮
鋭度が非常に低くなり、画像中に何が写っているのかが
分からなくなってしまう。Here, in the camera-equipped mobile phone 1 using the fisheye lens as in the present embodiment, the transmission image of the fisheye lens at the time of image pickup is on the plane of the image pickup device corresponding to the polar coordinates as shown in FIG. 3A. Projected. Camera 11
In the above, if an imaging device having a sufficient number of pixels (for example, 1280 × 960 pixels as in the present embodiment) is used, the transmission image of the fisheye lens including the peripheral portion of the fisheye lens can be obtained as an image even if a landscape is imaged. be able to. However, since the transmission image of the fisheye lens represents the image projected in polar coordinates, if the obtained image is displayed as it is, the geometric distortion around the image becomes very strong. Furthermore, the display unit 12 of the camera-equipped mobile phone 1 is
In the case of the present embodiment, the size is not so large as 240 × 160 pixels. Therefore, when the image is reduced in order to display the entire image on the display unit 12, the sharpness becomes extremely low especially for the landscape image, and the I don't know what is in the image.
【００３４】このため、本実施形態においては、カメラ
付き携帯電話１の表示部１２に画像データＳ０を縮小す
ることなくそのまま表示して画像の鮮鋭度を確保し、撮
像により得られた画像を見やすくしている。Therefore, in the present embodiment, the image data S0 is displayed as it is on the display unit 12 of the camera-equipped mobile phone 1 without being reduced, and the sharpness of the image is ensured so that the image obtained by the image pickup can be easily viewed. is doing.
【００３５】しかしながら、画像を縮小することなくそ
のまま表示しても、やはりその画像は極座標投影された
ものであるため、画像の周辺部ほど幾何学的歪みが大き
い。したがって、表示部１２に表示された領域が画像の
周辺部であるほど鑑賞には耐え難いものとなる。However, even if the image is displayed as it is without being reduced, since the image is also projected by polar coordinates, the geometrical distortion is larger in the peripheral portion of the image. Therefore, the closer the area displayed on the display unit 12 is to the peripheral portion of the image, the more difficult it is for viewing.
【００３６】本実施形態においては、画像サーバ２の領
域画像生成部２４において、領域情報Ｒ０に基づいて、
指定された領域に対応する領域画像データＳＲ０を画像
データＳ０から生成し、画像補正部２５において、領域
画像データＳＲ０により表される領域画像について、歪
み特性情報Ｈ０に基づいて極座標からＸＹ直交座標への
変換を行って補正領域画像データＳＲ１を生成するよう
にしたものである。In the present embodiment, the area image generator 24 of the image server 2 uses the area information R0 to
The area image data SR0 corresponding to the designated area is generated from the image data S0, and the image correction unit 25 converts the area image represented by the area image data SR0 from polar coordinates to XY orthogonal coordinates based on the distortion characteristic information H0. Is performed to generate the correction area image data SR1.
【００３７】ここで、カメラ付き携帯電話１において表
示部１２に表示される、画像データＳ０により表される
画像は、図３（ａ）に示すように魚眼レンズの透過像を
表すものであるため、元々は直交座標上にあった像が極
座標に投影されたものとなっている。カメラ付き携帯電
話１の表示部１２において画像上に点Ｐ０が指定された
とすると、カメラ付き携帯電話１の領域情報生成部１６
において、例えば点Ｐ０を含む矩形の領域Ａ１の四隅Ｐ
１〜Ｐ４の座標値が領域情報Ｒ０として生成される。Since the image represented by the image data S0 displayed on the display unit 12 of the camera-equipped mobile phone 1 is a transmission image of the fisheye lens as shown in FIG. 3A, The image originally on Cartesian coordinates is projected on polar coordinates. If a point P0 is designated on the image on the display unit 12 of the camera-equipped mobile phone 1, the area information generation unit 16 of the camera-equipped mobile phone 1 is assumed.
, For example, the four corners P of the rectangular area A1 including the point P0
The coordinate values 1 to P4 are generated as the area information R0.
【００３８】画像サーバ２の領域画像生成部２４は、領
域情報Ｒ０に含まれる四隅Ｐ１〜Ｐ４の座標値から、四
隅Ｐ１〜Ｐ４に囲まれる領域を領域画像データＳＲ０と
して生成する。そして、画像補正部２５において、歪み
特性情報Ｈ０に基づいて四隅Ｐ１〜Ｐ４により囲まれる
領域内の各画素をＸＹ直交座標に変換して、図３（ｂ）
に示すように、四隅Ｐ１〜Ｐ４が四隅Ｐ１′〜Ｐ４′に
変換された直交座標変換済みの画像を得る。そして、カ
メラ付き携帯電話１の表示部１２のサイズを考慮して、
得られた画像から表示部１２に表示可能な範囲を切り出
し、切り出された範囲の画像を表す画像データが補正領
域画像データＳＲ１として生成される。The area image generator 24 of the image server 2 generates the area surrounded by the four corners P1 to P4 as the area image data SR0 from the coordinate values of the four corners P1 to P4 included in the area information R0. Then, in the image correction unit 25, each pixel in the area surrounded by the four corners P1 to P4 is converted into XY orthogonal coordinates based on the distortion characteristic information H0, and FIG.
As shown in FIG. 5, the four corners P1 to P4 are converted into the four corners P1 'to P4' to obtain an image after the orthogonal coordinate conversion. Then, considering the size of the display unit 12 of the camera-equipped mobile phone 1,
A range that can be displayed on the display unit 12 is cut out from the obtained image, and image data representing the image of the cut out range is generated as the correction area image data SR1.
【００３９】次いで、第１の実施形態の動作について説
明する。図４は、第１の実施形態において行われる処理
を示すフローチャートである。まず、撮像部１１のカメ
ラ１１Ａにより被写体の撮像が行われて撮像画像データ
が取得され、さらに画像処理部１１Ｂにおいて撮像画像
データに対して画像処理が施されて画像データＳ０が取
得される（ステップＳ１）。続いて、画像データＳ０が
表示部１２に表示される（ステップＳ２）。そして、ユ
ーザにより領域の指定がなされたか否かが判定され（ス
テップＳ３）、ステップＳ３が肯定されると、領域情報
生成部１６においてカメラ付き携帯電話１の機種情報を
含む領域情報Ｒ０が生成される（ステップＳ４）。さら
に、ユーザにより画像データＳ０の画像サーバ２への送
信指示がなされたか否かが判定され（ステップＳ５）、
ステップＳ５が肯定されると、通信部１４により画像デ
ータＳ０および領域情報Ｒ０が画像サーバ２に送信され
る（ステップＳ６）。Next, the operation of the first embodiment will be described. FIG. 4 is a flowchart showing the processing performed in the first embodiment. First, the camera 11A of the imaging unit 11 captures an image of a subject to acquire captured image data, and the image processing unit 11B performs image processing on the captured image data to acquire image data S0 (step S1). Then, the image data S0 is displayed on the display unit 12 (step S2). Then, it is determined whether or not the user has designated the area (step S3), and when step S3 is affirmed, the area information generation unit 16 generates the area information R0 including the model information of the camera-equipped mobile phone 1. (Step S4). Further, it is determined whether or not the user has instructed to transmit the image data S0 to the image server 2 (step S5),
When step S5 is affirmed, the communication unit 14 transmits the image data S0 and the region information R0 to the image server 2 (step S6).
【００４０】画像サーバ２においては通信部２１により
画像データＳ０および領域情報Ｒ０が受信され、記憶部
２２に一旦記憶される（ステップＳ７）。続いて、領域
情報Ｒ０に含められたカメラ付き携帯電話１の機種情報
に基づいて、特性記憶部２３からその機種に応じた歪み
特性情報Ｈ０が読み出され（ステップＳ８）、さらに、
領域画像生成部２４により記憶部２２から画像データＳ
０および領域情報Ｒ０が読み出され、領域情報Ｒ０に基
づいて画像データＳ０から領域画像データＳＲ０が生成
される（ステップＳ９）。そして、画像補正部２５によ
り歪み特性情報Ｈ０に基づいて領域画像データＳＲ０が
補正されて補正領域画像データＳＲ１が生成される（ス
テップＳ１０）。補正領域画像データＳＲ１は通信部２
１においてカメラ付き携帯電話１に送信される（ステッ
プＳ１１）。In the image server 2, the image data S0 and the area information R0 are received by the communication section 21 and temporarily stored in the storage section 22 (step S7). Subsequently, based on the model information of the camera-equipped mobile phone 1 included in the region information R0, the distortion characteristic information H0 corresponding to the model is read from the characteristic storage unit 23 (step S8), and further,
The area image generation unit 24 stores the image data S from the storage unit 22.
0 and the area information R0 are read, and the area image data SR0 is generated from the image data S0 based on the area information R0 (step S9). Then, the image correction unit 25 corrects the area image data SR0 based on the distortion characteristic information H0 to generate corrected area image data SR1 (step S10). The correction area image data SR1 is transmitted to the communication unit 2
1 is transmitted to the camera-equipped mobile phone 1 (step S11).
【００４１】カメラ付き携帯電話１においては補正領域
画像データＳＲ１が受信され（ステップＳ１２）、これ
が表示部１２に表示され（ステップＳ１３）、処理を終
了する。The camera-equipped mobile phone 1 receives the correction area image data SR1 (step S12), displays it on the display unit 12 (step S13), and ends the processing.
【００４２】このように、第１の実施形態においては、
カメラ付き携帯電話１に設けられたカメラの歪み特性情
報Ｈ０に基づいて、領域画像データＳＲ０を幾何学的に
補正し、補正領域画像データＳＲ１をカメラ付き携帯電
話１に送信するようにしたため、カメラ付き携帯電話１
においては、表示部１２にカメラ１１の幾何学的歪みが
補正された画像を表示することができる。また、指定さ
れた領域の画像のみがカメラ付き携帯電話１の表示部１
２において表示されるため、画像全体を縮小して表示す
る場合よりも鮮明な画像をカメラ付き携帯電話１におい
て表示することができる。As described above, in the first embodiment,
The area image data SR0 is geometrically corrected based on the distortion characteristic information H0 of the camera provided in the camera-equipped mobile phone 1, and the corrected area image data SR1 is transmitted to the camera-equipped mobile phone 1. Mobile phone 1
In, the display unit 12 can display an image in which the geometric distortion of the camera 11 is corrected. Also, only the image of the designated area is displayed on the display unit 1 of the camera-equipped mobile phone 1.
Since it is displayed in 2, it is possible to display a clearer image in the camera-equipped mobile phone 1 than in the case where the entire image is reduced and displayed.
【００４３】さらに、カメラ付き携帯電話１において
は、画像データＳ０の一部の領域のみを補正した補正領
域画像データＳＲ１を受信すればよいため、画像データ
Ｓ０の全体を補正した画像データを受信する場合と比較
して通信コストを低減することができる。とくに携帯電
話の料金体系は、送受信したデータ容量に応じて料金が
加算されるパケット制であるため、データ容量の低減に
よる通信コスト低減の効果は非常に大きい。Further, since the camera-equipped mobile phone 1 only needs to receive the corrected area image data SR1 in which only a partial area of the image data S0 is corrected, the image data in which the entire image data S0 is corrected is received. The communication cost can be reduced as compared with the case. In particular, the charge system of a mobile phone is a packet system in which charges are added according to the amount of data transmitted / received, and therefore the effect of reducing communication costs by reducing the amount of data is very large.
【００４４】なお、一旦補正領域画像データＳＲ１を生
成した後に、カメラ付き携帯電話１において表示したい
領域が変更された場合には、カメラ付き携帯電話１から
は変更された他の領域を表す他の領域情報（Ｒ０′とす
る）のみが画像サーバ２に送信される。画像サーバ２
は、他の領域情報Ｒ０′を取得し、この他の領域情報Ｒ
０′に基づいて、記憶部２２に記憶された画像データＳ
０から他の領域画像データ（ＳＲ０′とする）を生成す
るとともにこれを補正して他の補正領域画像データ（Ｓ
Ｒ１′とする）を生成してカメラ付き携帯電話１に送信
する。これにより、カメラ付き携帯電話１からは再度の
画像データＳ０の送信を行う必要がなくなるため、さら
に通信コストを低減することができる。If the area to be displayed on the camera-equipped mobile phone 1 is changed after the correction area image data SR1 is once generated, another area indicating another changed area is displayed on the camera-equipped mobile phone 1. Only the area information (denoted as R0 ′) is transmitted to the image server 2. Image server 2
Obtains the other area information R0 ', and acquires the other area information R0'.
The image data S stored in the storage unit 22 based on 0 '.
Other region image data (SR0 ′) is generated from 0 and is corrected to correct other region image data (S0 ′).
R1 ′) is generated and transmitted to the camera-equipped mobile phone 1. As a result, it is not necessary to transmit the image data S0 again from the camera-equipped mobile phone 1, so that the communication cost can be further reduced.
【００４５】なお、上記第１の実施形態においては、画
像データＳ０を撮像したカメラ付き携帯電話１に補正領
域画像データＳＲ１を送信しているが、画像データＳ０
を撮像したカメラ付き携帯電話１以外の他の携帯電話に
も同様に補正領域画像データＳＲ１を送信して、他の携
帯電話において歪みのない画像を表示することもでき
る。In the first embodiment, the correction area image data SR1 is transmitted to the camera-equipped mobile phone 1 which has captured the image data S0.
It is also possible to similarly transmit the correction region image data SR1 to a mobile phone other than the camera-equipped mobile phone 1 that has captured the image, and display an image without distortion on the other mobile phone.
【００４６】また、他の携帯電話に補正領域画像データ
ＳＲ１を送信した場合、他の携帯電話のユーザが補正領
域画像データＳＲ１により表される領域以外の他の領域
の表示を所望する場合がある。しかしながら、他の携帯
電話のユーザは表示中の画像が他の領域を有するもので
あるか否かが分からない場合が多い。このため、他の携
帯電話に補正領域画像データＳＲ１を送信する場合に
は、他の領域があることを分かりやすくするために、図
５に示すように画像の縁部に矢印を表示することが好ま
しい。When the correction area image data SR1 is transmitted to another mobile phone, the user of the other mobile phone may desire to display an area other than the area represented by the correction area image data SR1. . However, users of other mobile phones often do not know whether or not the image being displayed has another area. Therefore, when the correction area image data SR1 is transmitted to another mobile phone, an arrow may be displayed at the edge of the image as shown in FIG. 5 in order to make it easy to understand that there is another area. preferable.
【００４７】この場合、送信された補正領域画像データ
ＳＲ１により表される領域以外の他の領域の画像の表示
を所望する他の携帯電話のユーザは、十字キーを用いて
表示された画像をスクロールし、表示したい領域を指定
する。なお、送信された補正領域画像データＳＲ１に対
応する領域以外の領域は例えば白色表示される。そし
て、表示したい領域の指定を行い、その旨を画像サーバ
２に送信すると、その領域に対応する領域画像データＳ
Ｒ０が画像データＳ０から生成され、さらに領域画像デ
ータＳＲ０が補正されて補正領域画像データＳＲ１が生
成され、これが他の携帯電話に送信される。これによ
り、他の携帯電話においては、所望とする領域が歪みの
ない状態で表示部に表示されることとなる。In this case, a user of another mobile phone desiring to display an image of an area other than the area represented by the transmitted correction area image data SR1 scrolls the displayed image using the cross key. And specify the area you want to display. The area other than the area corresponding to the transmitted correction area image data SR1 is displayed in white, for example. Then, when the area to be displayed is designated and the fact is transmitted to the image server 2, the area image data S corresponding to the area is displayed.
R0 is generated from the image data S0, the area image data SR0 is further corrected to generate corrected area image data SR1, which is transmitted to another mobile phone. As a result, the desired area is displayed on the display unit in another mobile phone in a state without distortion.
【００４８】また、上記第１の実施形態においては、カ
メラ付き携帯電話１の機種情報に基づいて、特性記憶部
２３から歪み特性情報Ｈ０を読み出しているが、カメラ
付き携帯電話１においては機種に応じて電話番号が割り
振られている。このため、特性情報記憶部２３に電話番
号と機種との対応関係を記憶しておき、機種情報に代え
てカメラ付き携帯電話１の電話番号を画像データＳ０と
ともに画像サーバ２に送信し、上記対応関係を参照して
電話番号に応じた機種の歪み特性情報Ｈ０を特性記憶部
２３から読み出すようにしてもよい。Further, in the first embodiment, the distortion characteristic information H0 is read from the characteristic storage unit 23 based on the model information of the camera-equipped mobile phone 1, but in the camera-equipped mobile phone 1, the distortion characteristic information H0 is read. A telephone number is assigned accordingly. Therefore, the correspondence relation between the phone number and the model is stored in the characteristic information storage unit 23, and the phone number of the camera-equipped mobile phone 1 is transmitted to the image server 2 together with the image data S0 in place of the model information, and the correspondence is obtained. The distortion characteristic information H0 of the model corresponding to the telephone number may be read from the characteristic storage unit 23 with reference to the relationship.
【００４９】次いで、本発明の第２の実施形態について
説明する。図６は本発明の第２の実施形態による画像補
正装置を適用した画像送信システムの構成を示す概略ブ
ロック図である。なお、第２の実施形態において第１の
実施形態と同一の構成については同一の参照番号を付
し、詳細な説明は省略する。Next, a second embodiment of the present invention will be described. FIG. 6 is a schematic block diagram showing the configuration of an image transmission system to which the image correction apparatus according to the second embodiment of the present invention is applied. In the second embodiment, the same components as those in the first embodiment are designated by the same reference numerals, and detailed description thereof will be omitted.
【００５０】第２の実施形態においては、カメラ付き携
帯電話１から画像データＳ０を送信するのに代えて、カ
メラ付き携帯電話１において領域画像データＳＲ０を生
成して画像サーバ２に送信するようにした点が第１の実
施形態と異なるものである。このため第２の実施形態に
おいては、カメラ付き携帯電話１において第１の実施形
態における領域情報生成部１６に代えて、指定された領
域を含む領域を表す領域画像データＳＲ０を画像データ
Ｓ０から生成する領域画像生成部１７を備えてなり、画
像サーバ２において領域画像生成部２４を省略してなる
ものである。なお、領域画像生成部１７は、第１の実施
形態において画像サーバ２に設けられた領域画像生成部
２４と同様の機能を有するものである。また、第２の実
施形態においては、カメラ付き携帯電話１の機種情報
は、例えば領域画像データＳＲ０のタグ情報に付与され
て画像サーバ２に送信される。In the second embodiment, instead of sending the image data S0 from the camera-equipped mobile phone 1, the camera-equipped mobile phone 1 generates the area image data SR0 and sends it to the image server 2. This is the difference from the first embodiment. Therefore, in the second embodiment, in the camera-equipped mobile phone 1, instead of the area information generation unit 16 in the first embodiment, area image data SR0 representing an area including a designated area is generated from the image data S0. The area image generator 17 is provided, and the area image generator 24 is omitted in the image server 2. The area image generation unit 17 has the same function as the area image generation unit 24 provided in the image server 2 in the first embodiment. Further, in the second embodiment, the model information of the camera-equipped mobile phone 1 is added to the tag information of the area image data SR0 and transmitted to the image server 2.
【００５１】領域画像生成部１７は、第１の実施形態に
おける領域情報生成部１６と同様に、表示部１２に表示
された画像上において、カメラ付き携帯電話１のユーザ
がキー入力部１３を用いて指定した領域を表す領域情報
Ｒ０を生成する。そして、第１の実施形態における画像
サーバ２の領域画像生成部２４と同様に、領域情報Ｒ０
に基づいて指定された領域に対応する領域画像データＳ
Ｒ０を画像データＳ０から生成する。The area image generation unit 17 uses the key input unit 13 on the image displayed on the display unit 12 by the user of the camera-equipped mobile phone 1 in the same manner as the area information generation unit 16 in the first embodiment. Area information R0 representing the area specified by the above is generated. Then, similar to the area image generation unit 24 of the image server 2 in the first embodiment, the area information R0
Area image data S corresponding to the area specified based on
R0 is generated from the image data S0.
【００５２】次いで、第２の実施形態の動作について説
明する。図７は、第２の実施形態において行われる処理
を示すフローチャートである。まず、撮像部１１のカメ
ラ１１Ａにより被写体の撮像が行われて撮像画像データ
が取得され、さらに画像処理部１１Ｂにおいて撮像画像
データに対して画像処理が施されて画像データＳ０が取
得される（ステップＳ２１）。続いて、画像データＳ０
が表示部１２に表示される（ステップＳ２２）。そし
て、ユーザにより領域の指定がなされたか否かが判定さ
れ（ステップＳ２３）、ステップＳ３が肯定されると、
領域画像生成部１７において指定された領域を含む領域
を表す領域画像データＳＲ０が生成される（ステップＳ
２４）。次いで、ユーザにより画像データＳ０の画像サ
ーバ２への送信指示がなされたか否かが判定され（ステ
ップＳ２５）、ステップＳ２５が肯定されると、通信部
１４により領域画像データＳＲ０が画像サーバ２に送信
される（ステップＳ２６）。Next, the operation of the second embodiment will be described. FIG. 7 is a flowchart showing the processing performed in the second embodiment. First, the camera 11A of the imaging unit 11 captures an image of a subject to acquire captured image data, and the image processing unit 11B performs image processing on the captured image data to acquire image data S0 (step S21). Then, the image data S0
Is displayed on the display unit 12 (step S22). Then, it is determined whether or not the area is designated by the user (step S23), and if step S3 is positive,
The region image generation unit 17 generates region image data SR0 representing a region including the designated region (step S
24). Next, it is determined whether or not the user has instructed to transmit the image data S0 to the image server 2 (step S25), and if step S25 is positive, the communication unit 14 transmits the region image data SR0 to the image server 2. (Step S26).
【００５３】画像サーバ２においては通信部２１により
領域画像データＳＲ０が受信され、記憶部２２に一旦記
憶される（ステップＳ２７）。続いて、領域画像データ
ＳＲ０とともに送信されたカメラ付き携帯電話１の機種
情報に基づいて、特性記憶部２３からその機種に応じた
歪み特性情報Ｈ０が読み出され（ステップＳ２８）、さ
らに、画像補正部２５により記憶部２２から領域画像デ
ータＳＲ０が読み出され、歪み特性情報Ｈ０に基づいて
領域画像データＳＲ０が補正されて補正領域画像データ
ＳＲ１が生成される（ステップＳ２９）。補正領域画像
データＳＲ１は通信部２１によりカメラ付き携帯電話１
に送信される（ステップＳ３０）。In the image server 2, the area image data SR0 is received by the communication section 21 and temporarily stored in the storage section 22 (step S27). Then, based on the model information of the camera-equipped mobile phone 1 transmitted together with the region image data SR0, the distortion characteristic information H0 corresponding to the model is read from the characteristic storage unit 23 (step S28), and the image correction is further performed. The area image data SR0 is read from the storage unit 22 by the unit 25, the area image data SR0 is corrected based on the distortion characteristic information H0, and the corrected area image data SR1 is generated (step S29). The correction area image data SR1 is transmitted from the communication unit 21 to the camera-equipped mobile phone 1
(Step S30).
【００５４】カメラ付き携帯電話１においては補正領域
画像データＳＲ１が受信され（ステップＳ３１）、これ
が表示部１２に表示され（ステップＳ３２）、処理を終
了する。The camera-equipped mobile phone 1 receives the correction area image data SR1 (step S31), displays it on the display unit 12 (step S32), and ends the processing.
【００５５】このように、第２の実施形態においては、
カメラ付き携帯電話１に設けられたカメラの歪み特性情
報Ｈ０に基づいて、領域画像データＳＲ０を幾何学的に
補正し、補正領域画像データＳＲ１をカメラ付き携帯端
末電話１に送信するようにしたため、カメラ付き携帯電
話１においては、表示部１２にカメラ１１の幾何学的歪
みが補正された画像を表示することができる。また、指
定された領域の画像のみがカメラ付き携帯電話１の表示
部１２において表示されるため、画像全体を縮小して表
示する場合よりも鮮明な画像をカメラ付き携帯電話１に
おいて表示することができる。As described above, in the second embodiment,
Since the region image data SR0 is geometrically corrected based on the distortion characteristic information H0 of the camera provided in the camera-equipped mobile phone 1, and the corrected region image data SR1 is transmitted to the camera-equipped mobile terminal phone 1. In the camera-equipped mobile phone 1, an image in which the geometric distortion of the camera 11 is corrected can be displayed on the display unit 12. Further, since only the image of the designated area is displayed on the display unit 12 of the camera-equipped mobile phone 1, a clearer image can be displayed on the camera-equipped mobile phone 1 than when the entire image is reduced and displayed. it can.
【００５６】また、カメラ付き携帯電話１からは、撮像
により取得された画像データＳ０により表される画像の
一部の領域のみを表す領域画像データＳＲ０の送信およ
び領域画像データＳＲ０を補正することにより得られた
補正量域画像データＳＲ１の受信を行えばよいため、画
像データＳ０の全体を送信して画像データＳ０の全体を
補正した画像データを受信する場合と比較して通信コス
トを低減することができる。とくに携帯電話の料金体系
は、送受信したデータ容量に応じて料金が加算されるパ
ケット制であるため、データ容量の低減による通信コス
ト低減の効果は非常に大きい。Further, by transmitting the area image data SR0 representing only a partial area of the image represented by the image data S0 acquired by the image pickup from the mobile phone with camera 1 and correcting the area image data SR0. Since the obtained correction amount area image data SR1 only needs to be received, the communication cost can be reduced as compared with the case where the entire image data S0 is transmitted and the image data obtained by correcting the entire image data S0 is received. You can In particular, the charge system of a mobile phone is a packet system in which charges are added according to the amount of data transmitted / received, and therefore the effect of reducing communication costs by reducing the amount of data is very large.
【００５７】なお、上記第１および第２の実施形態にお
いては、歪み特性情報Ｈ０に基づいて領域画像データＳ
Ｒ０を補正しているが、カメラにおいて取得された画像
データのみからカメラのレンズの歪み特性を算出する方
法が提案されている（Blindremoval of lens distortio
n, Hany Farid and Alin C.Popescu, Optical Society
of America, A/Vol.18, No.9/September 2001, pp2072-
2077）。したがって、特性記憶部２３に記憶された歪み
特性情報Ｈ０に代えて、領域画像データＳＲ０から歪み
特性情報を算出し、算出された歪み特性情報に基づいて
領域画像データＳＲ０を補正して補正領域画像データＳ
Ｒ１を生成するようにしてもよい。In the first and second embodiments, the area image data S is calculated based on the distortion characteristic information H0.
Although R0 is corrected, a method of calculating the distortion characteristic of the camera lens only from the image data acquired by the camera has been proposed (Blindremoval of lens distortio
n, Hany Farid and Alin C. Popescu, Optical Society
of America, A / Vol.18, No.9 / September 2001, pp2072-
2077). Therefore, instead of the distortion characteristic information H0 stored in the characteristic storage unit 23, the distortion characteristic information is calculated from the area image data SR0, and the area image data SR0 is corrected based on the calculated distortion characteristic information to correct the corrected area image. Data S
R1 may be generated.
【図１】本発明の第１の実施形態による画像補正装置を
適用した画像送信システムの構成を示す概略ブロック図FIG. 1 is a schematic block diagram showing the configuration of an image transmission system to which an image correction device according to a first embodiment of the present invention is applied.
【図２】表示部に表示されたカーソルを示す図FIG. 2 is a diagram showing a cursor displayed on a display unit.
【図３】（ａ）は撮像デバイスに極座標投影された投影
像を示す図、（ｂ）は領域画像データＸＹ直交座標に変
換することにより得られた補正領域画像データＳＲ１に
より表される画像を示す図FIG. 3A is a diagram showing a projected image polar-projected on an image pickup device, and FIG. 3B is an image represented by corrected region image data SR1 obtained by conversion into region image data XY orthogonal coordinates. Figure
【図４】表示部に表示された矢印を示す図FIG. 4 is a diagram showing arrows displayed on a display unit.
【図５】第１の実施形態において行われる処理を示すフ
ローチャートFIG. 5 is a flowchart showing a process performed in the first embodiment.
【図６】本発明の第２の実施形態による画像補正装置を
適用した画像送信システムの構成を示す概略ブロック図FIG. 6 is a schematic block diagram showing the configuration of an image transmission system to which an image correction device according to a second embodiment of the present invention is applied.
【図７】第２の実施形態において行われる処理を示すフ
ローチャートFIG. 7 is a flowchart showing a process performed in the second embodiment.
１ カメラ付き携帯電話 ２ 画像サーバ ３ 公衆回線 １１ 撮像部 １１Ａ カメラ １１Ｂ 画像処理部 １２ 表示部 １３ キー入力部 １４，２１ 通信部 １５，２２ 記憶部 １６ 領域情報生成部 １７，２４ 領域画像生成部 ２３ 特性記憶部 ２５ 画像補正部 1 Camera-equipped mobile phone 2 Image server 3 public line 11 Imaging unit 11A camera 11B Image processing unit 12 Display 13 Key input section 14,21 Communication unit 15,22 Memory 16 area information generator 17, 24 area image generator 23 Characteristic Storage Unit 25 Image correction section
Claims (9)
れた画像データにより表される画像の幾何学的歪みを補
正する画像補正方法であって、 前記カメラ付き携帯端末装置において前記画像上に指定
された領域を表す領域情報および前記画像データを取得
し、 前記領域情報に基づいて、該画像データから前記指定さ
れた領域に対応する領域画像データを生成し、 前記カメラの歪み特性を表す歪み特性情報に基づいて、
前記領域画像データを幾何学的に補正して補正領域画像
データを生成し、 該補正領域画像データを前記カメラ付き携帯端末装置に
送信することを特徴とする画像補正方法。1. An image correction method for correcting geometric distortion of an image represented by image data acquired by a camera-equipped mobile terminal device, the method being specified on the image by the camera-equipped mobile terminal device. Acquiring area information representing the area and the image data, based on the area information, to generate area image data corresponding to the specified area from the image data, to distortion characteristic information representing the distortion characteristics of the camera On the basis of,
An image correction method comprising geometrically correcting the area image data to generate correction area image data, and transmitting the correction area image data to the camera-equipped mobile terminal device.
域とは異なる他の領域を表す他の領域情報を取得し、 該他の領域情報に基づいて、前記画像データから該他の
領域に対応する他の領域画像データを生成し、 前記カメラの歪み特性を表す歪み特性情報に基づいて、
前記他の領域画像データを幾何学的に補正して他の補正
領域画像データを生成し、 該他の補正領域画像データを前記カメラ付き携帯端末装
置に送信することを特徴とする請求項１記載の画像補正
方法。2. Further, other area information representing another area different from the area represented by the area information is acquired, and the image data is associated with the other area based on the other area information. Other area image data to be generated, based on the distortion characteristic information representing the distortion characteristic of the camera,
2. The other area image data is geometrically corrected to generate another area image data for correction, and the other area image data for correction is transmitted to the portable terminal device with a camera. Image correction method.
れた画像データにより表される画像の幾何学的歪みを補
正する画像補正方法であって、 前記カメラ付き携帯端末装置において生成された、前記
画像上に指定された領域に対応する領域画像データを取
得し、 前記カメラの歪み特性を表す歪み特性情報に基づいて、
前記領域画像データを幾何学的に補正して補正領域画像
データを生成し、 該補正領域画像データを前記カメラ付き携帯端末装置に
送信することを特徴とする画像補正方法。3. An image correction method for correcting geometric distortion of an image represented by image data acquired by a camera-equipped mobile terminal device, the method comprising: Acquire area image data corresponding to the area specified in, based on the distortion characteristics information representing the distortion characteristics of the camera,
An image correction method comprising geometrically correcting the area image data to generate correction area image data, and transmitting the correction area image data to the camera-equipped mobile terminal device.
れた画像データにより表される画像の幾何学的歪みを補
正する画像補正装置であって、 前記カメラ付き携帯端末装置において前記画像上に指定
された領域を表す領域情報および前記画像データを取得
する取得手段と、 前記領域情報に基づいて、該画像データから前記指定さ
れた領域に対応する領域画像データを生成する領域画像
生成手段と、 前記カメラの歪み特性を表す歪み特性情報に基づいて、
前記領域画像データを幾何学的に補正して補正領域画像
データを生成する画像補正手段と、 該補正領域画像データを前記カメラ付き携帯端末装置に
送信する送信手段とを備えたことを特徴とする画像補正
装置。4. An image correction device for correcting geometric distortion of an image represented by image data acquired by a camera-equipped mobile terminal device, the image correction device being designated on the image by the camera-equipped mobile terminal device. Acquisition means for acquiring area information indicating an area and the image data; area image generation means for generating area image data corresponding to the specified area from the image data based on the area information; Based on the distortion characteristic information that represents the distortion characteristics,
Image correction means for geometrically correcting the area image data to generate correction area image data, and transmission means for transmitting the correction area image data to the camera-equipped mobile terminal device are provided. Image correction device.
により表される領域とは異なる他の領域を表す他の領域
情報を取得する手段であり、 前記領域画像生成手段は、前記他の領域情報に基づい
て、前記画像データから該他の領域に対応する他の領域
画像データを生成する手段であり、 前記画像補正手段は、前記カメラの歪み特性を表す歪み
特性情報に基づいて、前記他の領域画像データを幾何学
的に補正して他の補正領域画像データを生成する手段で
あり、 前記送信手段は、該他の補正領域画像データを前記カメ
ラ付き携帯端末装置に送信する手段であることを特徴と
する請求項４記載の画像補正装置。5. The acquiring means is means for acquiring other area information indicating another area different from the area represented by the area information, and the area image generating means is for the other area. Is a means for generating other area image data corresponding to the other area from the image data based on information, wherein the image correction means is based on distortion characteristic information representing distortion characteristics of the camera, Is geometrically corrected to generate other corrected area image data, and the transmitting means is means for transmitting the other corrected area image data to the camera-equipped mobile terminal device. The image correction device according to claim 4, wherein
れた画像データにより表される画像の幾何学的歪みを補
正する画像補正装置であって、 前記カメラ付き携帯端末装置において生成された、前記
画像上に指定された領域に対応する領域画像データを取
得する取得手段と、 前記カメラの歪み特性を表す歪み特性情報に基づいて、
前記領域画像データを幾何学的に補正して補正領域画像
データを生成する画像補正手段と、 該補正領域画像データを前記カメラ付き携帯端末装置に
送信する送信手段とを備えたことを特徴とする画像補正
装置。6. An image correction device for correcting geometric distortion of an image represented by image data acquired by a camera-equipped mobile terminal device, wherein the image correction device generates the image on the image generated by the camera-equipped mobile terminal device. Based on the distortion characteristic information indicating the distortion characteristic of the camera, an acquisition unit that acquires area image data corresponding to the area specified in
Image correction means for geometrically correcting the area image data to generate correction area image data, and transmission means for transmitting the correction area image data to the camera-equipped mobile terminal device are provided. Image correction device.
れた画像データにより表される画像の幾何学的歪みを補
正する画像補正方法をコンピュータに実行させるための
プログラムであって、 前記カメラ付き携帯端末装置において前記画像上に指定
された領域を表す領域情報および前記画像データを取得
する手順と、 前記領域情報に基づいて、該画像データから前記指定さ
れた領域に対応する領域画像データを生成する手順と、 前記カメラの歪み特性を表す歪み特性情報に基づいて、
前記領域画像データを幾何学的に補正して補正領域画像
データを生成する手順と、 該補正領域画像データを前記カメラ付き携帯端末装置に
送信する手順とを有するプログラム。7. A program for causing a computer to execute an image correction method for correcting geometric distortion of an image represented by image data acquired by a camera-equipped mobile terminal device, the camera-equipped mobile terminal device. A step of acquiring area information representing the area specified on the image and the image data, and a step of generating area image data corresponding to the specified area from the image data based on the area information. , Based on distortion characteristic information representing the distortion characteristic of the camera,
A program having a procedure of geometrically correcting the area image data to generate corrected area image data, and a procedure of transmitting the corrected area image data to the camera-equipped mobile terminal device.
域とは異なる他の領域を表す他の領域情報を取得する手
順と、 該他の領域情報に基づいて、前記画像データから該他の
領域に対応する他の領域画像データを生成する手順と、 前記カメラの歪み特性を表す歪み特性情報に基づいて、
前記他の領域画像データを幾何学的に補正して他の補正
領域画像データを生成する手順と、 該他の補正領域画像データを前記カメラ付き携帯端末装
置に送信する手順とを有する請求項７記載のプログラ
ム。8. A procedure for acquiring other area information representing another area different from the area represented by the area information, and the other area from the image data based on the other area information. Based on the distortion characteristic information representing the distortion characteristic of the camera, and the procedure of generating another area image data corresponding to,
8. The method comprises geometrically correcting the other area image data to generate another area image data, and transmitting the other area image data to the camera-equipped mobile terminal device. The listed program.
れた画像データにより表される画像の幾何学的歪みを補
正する画像補正方法をコンピュータに実行させるための
プログラムであって、 前記カメラ付き携帯端末装置において生成された、前記
画像上に指定された領域に対応する領域画像データを取
得する手順と、 前記カメラの歪み特性を表す歪み特性情報に基づいて、
前記領域画像データを幾何学的に補正して補正領域画像
データを生成する手順と、 該補正領域画像データを前記カメラ付き携帯端末装置に
送信する手順とを有するプログラム。9. A program for causing a computer to execute an image correction method for correcting geometric distortion of an image represented by image data acquired by a camera-equipped mobile terminal device, the camera-equipped mobile terminal device. Generated on the basis of the procedure for obtaining the area image data corresponding to the area specified on the image, based on the distortion characteristic information representing the distortion characteristic of the camera,
A program having a procedure of geometrically correcting the area image data to generate corrected area image data, and a procedure of transmitting the corrected area image data to the camera-equipped mobile terminal device.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002079348A JP3957156B2 (en) | 2002-03-20 | 2002-03-20 | Image correction method, apparatus, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002079348A JP3957156B2 (en) | 2002-03-20 | 2002-03-20 | Image correction method, apparatus, and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003283819A true JP2003283819A (en) | 2003-10-03 |
| JP3957156B2 JP3957156B2 (en) | 2007-08-15 |
Family
ID=29228857
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002079348A Expired - Lifetime JP3957156B2 (en) | 2002-03-20 | 2002-03-20 | Image correction method, apparatus, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3957156B2 (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007138846A1 (en) | 2006-05-29 | 2007-12-06 | Opt Corporation | Method for compressing imaging data by using wide-angle lens, decompressed display method, compression device, wide-angle camera device, and monitor system |
| WO2007138845A1 (en) | 2006-05-29 | 2007-12-06 | Opt Corporation | Method for compressing imaging data by wide-angle lens, compression device, wide-angle camera device, and monitor system |
| JP2009109322A (en) * | 2007-10-30 | 2009-05-21 | National Institute Of Information & Communication Technology | Camera, camera array and camera array system |
| JP2009526458A (en) * | 2006-02-08 | 2009-07-16 | リアルアイズスリーディー | How to use a camera to enter, store, browse and send documents to a receiver |
-
2002
- 2002-03-20 JP JP2002079348A patent/JP3957156B2/en not_active Expired - Lifetime
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009526458A (en) * | 2006-02-08 | 2009-07-16 | リアルアイズスリーディー | How to use a camera to enter, store, browse and send documents to a receiver |
| WO2007138846A1 (en) | 2006-05-29 | 2007-12-06 | Opt Corporation | Method for compressing imaging data by using wide-angle lens, decompressed display method, compression device, wide-angle camera device, and monitor system |
| WO2007138845A1 (en) | 2006-05-29 | 2007-12-06 | Opt Corporation | Method for compressing imaging data by wide-angle lens, compression device, wide-angle camera device, and monitor system |
| JP2009109322A (en) * | 2007-10-30 | 2009-05-21 | National Institute Of Information & Communication Technology | Camera, camera array and camera array system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3957156B2 (en) | 2007-08-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109729279B (en) | Image shooting method and terminal equipment | |
| JP4479679B2 (en) | Captured image display system, image receiving apparatus and control method thereof | |
| JP2005312085A (en) | Digital still camera | |
| JP2001346173A (en) | Image data communication system and method, and image pickup device and image data processing method | |
| CN107948505B (en) | Panoramic shooting method and mobile terminal | |
| JP2004336536A (en) | Photographing device, method, and program | |
| CN113364976B (en) | Image display method and electronic equipment | |
| US8411133B2 (en) | Mobile terminal and panoramic photographing method for the same | |
| JP3875133B2 (en) | Image transmission method, apparatus, and program | |
| JP2003319311A (en) | Image processing apparatus and system | |
| JP3957156B2 (en) | Image correction method, apparatus, and program | |
| JP2004032372A (en) | Image data processing method, portable terminal device and program | |
| JP5562101B2 (en) | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND PROGRAM | |
| JP2003348327A (en) | Information detection method and apparatus, and program for the method | |
| JP2009267663A (en) | Imaging device, imaging method, imaging control program, and mobile terminal device | |
| CN112738399B (en) | Image processing method and device and electronic equipment | |
| CN110913213B (en) | Method, device and system for evaluating and processing video quality | |
| US7522206B2 (en) | Photographed image display device and photographed image display method | |
| JP2004032373A (en) | Method, apparatus and program for reproducing image | |
| JP2003242009A (en) | Method, device, and program for image processing | |
| JP2007282257A (en) | Information detection method, apparatus, and program | |
| JP2002197038A (en) | Image communication system, portable communication terminal, and image processor | |
| JP2003319034A (en) | Portable terminal equipment, image processing method therein image processing parameter generation equipment and method therefor, and program | |
| JP2004032371A (en) | Method, apparatus and program for processing image | |
| JP2003250073A (en) | Electronic camera and mobile terminal |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040308 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060511 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060516 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060718 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061204 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070130 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070330 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20070409 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070501 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070502 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 3957156 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110518 Year of fee payment: 4 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110518 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120518 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130518 Year of fee payment: 6 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140518 Year of fee payment: 7 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |