JP2002373168A - Method and system for retrieving picture based on position information - Google Patents

Method and system for retrieving picture based on position information

Info

Publication number
JP2002373168A
JP2002373168A JP2001181040A JP2001181040A JP2002373168A JP 2002373168 A JP2002373168 A JP 2002373168A JP 2001181040 A JP2001181040 A JP 2001181040A JP 2001181040 A JP2001181040 A JP 2001181040A JP 2002373168 A JP2002373168 A JP 2002373168A
Authority
JP
Japan
Prior art keywords
position information
image
information
original image
method based
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2001181040A
Other languages
Japanese (ja)
Inventor
Teizou Osaku
禎蔵 尾作
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to JP2001181040A priority Critical patent/JP2002373168A/en
Publication of JP2002373168A publication Critical patent/JP2002373168A/en
Pending legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To realize picture retrieval based on position information using the tag of position information management in a preservation format of a picture. SOLUTION: This picture retrieving system is constituted of a home page 2 opened to the public on a Web 1, a Web browser 3, an Exif retrieval DB 4, and a user terminal equipment or the like. Then, latitude/longitude information is set at a GPS extended tag part in an Exif format so that an original picture with position information can be generated, and the picture is opened to the public on the home page on the Web 1, and the file of the original picture with the position information is retrieved, and the retrieved file is acquired, and information related to GPS described in the Exif format of the original picture with the position information is extracted, and preserved in the Exif retrieval DB 4 (steps S1-S5). Then, a user retrieves the Exif retrieval DB 4 by using arbitrary spot information such as the present position as a key, and acquires the photographic spot list of places near the arbitrary spot.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、位置情報検索技術
に関し、特に緯度経度付デジタル画像の位置情報に基づ
く検索技術に適用して有効な技術に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a position information search technology, and more particularly to a technology effective when applied to a search technology based on position information of a digital image with latitude and longitude.

【0002】[0002]

【従来の技術】本発明者が検討した技術として、位置情
報検索技術に関しては、以下のような技術が考えられ
る。たとえば、情報の一例としての位置情報の検索シス
テムは、任意の地点(緯度経度)を中心に最寄りの店舗
や施設を中心点からの直線距離や道のり(時間)順に検
索するもので、対象となる店舗や施設の緯度経度は住所
から特定したり、あるいは電子地図上に1点1点プロッ
トすることにより求める方法などを採っている。
2. Description of the Related Art As a technique studied by the present inventor, the following techniques can be considered as a position information search technique. For example, a location information search system as an example of information searches for the nearest store or facility centered on an arbitrary point (latitude and longitude) in the order of a linear distance or a distance (time) from the center point, and is an object. The latitude and longitude of stores and facilities are specified from addresses or obtained by plotting each point on an electronic map.

【0003】[0003]

【発明が解決しようとする課題】しかしながら、前記の
ような位置情報検索技術について、本発明者が検討した
結果、以下のようなことが明らかとなった。たとえば、
前記のような位置情報の検索システムにおいて、利用者
が探したいと思う場所は、住宅地図に載っているような
店舗や施設ばかりではなく、風景写真の撮影ポイントの
ような住所では特定しにくい場所である場合もある。
However, as a result of the present inventor's study on the above-described position information search technology, the following has been clarified. For example,
In the location information search system as described above, the places that the user wants to search are not only the shops and facilities shown on the house map, but also the places that are difficult to identify by the address such as the photographing point of the landscape photograph. It may be.

【0004】さらに、公園、ゴルフ場、複合施設のよう
に対象物が広い場合、住所のようなデータだけでは、ど
こに利用者を案内していいか判らず、建物や施設の代表
点(たとえば中心点)など、利用者には意味のないポイ
ントを案内してしまっている。
[0004] Further, when the target object is wide such as a park, a golf course, and a complex, it is difficult to know where to guide the user only with data such as an address, and a representative point of a building or a facility (for example, a center point). ), Etc., points that are meaningless to the user.

【0005】また、このような風景写真の撮影ポイント
や、広い施設の一部を案内する場合、利用者に対して画
像を提示することは非常に効果的である。
[0005] In addition, when guiding a photographing point of such a landscape photograph or a part of a large facility, presenting an image to a user is very effective.

【0006】そこで、本発明者は、デジタルスチルカメ
ラなどで撮影した画像の保存形式と、この画像の保存形
式の一部分にGPSなどから得られる位置情報を管理す
る場所が定義されることに着目し、画像の保存形式の位
置情報管理のタグを利用した位置情報に基づく画像検索
が可能となることを考え付いた。
Accordingly, the present inventor has noticed that a storage format of an image captured by a digital still camera or the like and a place for managing position information obtained from a GPS or the like are defined as a part of the storage format of the image. The present inventor has conceived that it is possible to perform an image search based on position information using a position information management tag in an image storage format.

【0007】すなわち、位置情報に関して、住所から緯
度経度を特定するというような根本的な考え方を覆し、
単にデジタルスチルカメラなどで写真を撮るだけで緯度
経度を特定できるようにして、利用者を本当に案内した
いポイントにピンポイントに誘導可能な画期的なサービ
スが提供できるようにするものである。よって、撮影し
たポイントで緯度経度を取得できるため、まさにその撮
影ポイントに利用者を導いたり、あるいは広い施設の任
意の地点でシャッターを切ることにより、そのポイント
へ利用者を案内できるようになる。
That is, regarding the position information, the fundamental idea of specifying the latitude and longitude from the address is reversed,
It is possible to specify the latitude and longitude by simply taking a picture with a digital still camera or the like, and to provide an innovative service that can guide a user to a point that he really wants to guide. Therefore, since the latitude and longitude can be acquired at the point where the image was taken, the user can be guided to the point just by guiding the user to that point or releasing the shutter at an arbitrary point in a wide facility.

【0008】そこで、本発明の目的は、画像の保存形式
の位置情報管理のタグを利用した位置情報に基づく画像
検索を実現することができる技術を提供することにあ
る。
An object of the present invention is to provide a technique capable of realizing an image search based on position information using a tag for position information management in an image storage format.

【0009】[0009]

【課題を解決するための手段】本発明は、前記目的を達
成するために、ネットワーク上に構築されたデータベー
スおよび端末装置を有する構成において、以下のような
特徴を有するものである。
SUMMARY OF THE INVENTION The present invention has the following features in a configuration having a database and a terminal device built on a network in order to achieve the above object.

【0010】すなわち、本発明による位置情報に基づく
画像検索方法は、画像の中に位置情報を付加した位置情
報付オリジナル画像を生成し、この位置情報付オリジナ
ル画像をネットワーク上で公開し、この公開された位置
情報付オリジナル画像を探索し、この探索された位置情
報付オリジナル画像から画像検索に必要な見出し情報を
抽出し、この見出し情報をデータベースに保存し、この
保存された見出し情報を、端末装置から任意の地点の地
点情報をもとに検索し、任意の地点に近い場所の位置情
報付画像情報を取得する、各ステップを有するものであ
る。
That is, in the image search method based on position information according to the present invention, an original image with position information is generated by adding position information to an image, and the original image with position information is made public on a network. The searched original image with position information is searched, heading information necessary for image search is extracted from the searched original image with position information, the heading information is stored in a database, and the stored heading information is stored in a terminal. Each step includes searching from the device based on the point information of an arbitrary point, and acquiring image information with position information of a place near the arbitrary point.

【0011】また、前記位置情報に基づく画像検索方法
において、位置情報付オリジナル画像は、所定の保存形
式による画像データと、この画像データの保存形式の一
部分に定義される緯度経度データなどからなるものであ
る。さらに、画像データと緯度経度データは、デジタル
スチルカメラとGPSユニットのような位置属性(緯度
経度)が取得可能な装置との組み合わせ、または電子地
図ソフトウェアのような位置属性が取得可能なソフトウ
ェアなどから得るようにしたものである。
In the image search method based on the position information, the original image with position information includes image data in a predetermined storage format, and latitude and longitude data defined as a part of the storage format of the image data. It is. Further, the image data and the latitude / longitude data are obtained from a combination of a digital still camera and a device such as a GPS unit capable of acquiring position attributes (latitude / longitude), or software capable of acquiring position attributes such as electronic map software. It is something that you get.

【0012】また、前記位置情報に基づく画像検索方法
において、見出し情報は、位置情報付オリジナル画像の
緯度、経度、タイトルのような検索に必要な項目などか
らなるものである。
In the image search method based on the position information, the heading information includes items necessary for the search, such as the latitude, longitude, and title of the original image with position information.

【0013】また、前記位置情報に基づく画像検索方法
において、位置情報付画像情報は、任意の地点に近い場
所の見出し情報の一覧と、この一覧の各地点の位置情報
付オリジナル画像に対応するサムネイル画像などからな
るものである。さらに、位置情報付画像情報は、サムネ
イル画像に対応する位置情報付オリジナル画像にアクセ
スできる情報などを含むようにしたものである。
In the image search method based on the position information, the image information with position information includes a list of heading information of a place near an arbitrary point and a thumbnail corresponding to the original image with position information of each point in the list. It consists of images and the like. Further, the image information with position information includes information that can access the original image with position information corresponding to the thumbnail image.

【0014】また、前記位置情報に基づく画像検索方法
において、ネットワーク上で公開された位置情報付オリ
ジナル画像に含まれる地点情報を基点として、位置情報
付画像情報を検索できるタグを利用することにより、基
点の付近で撮影した人々のコミュニケーション広場を動
的に作ることを可能にしたものである。
Further, in the image search method based on the position information, a tag capable of searching for the image information with the position information is used by using the point information included in the original image with the position information published on the network as a base point. This makes it possible to dynamically create a communication plaza for people photographed near the base point.

【0015】また、本発明による位置情報に基づく画像
検索システムは、ネットワーク上には、画像の中に位置
情報を付加して生成された位置情報付オリジナル画像が
公開され、またデータベースには、ネットワーク上で公
開された位置情報付オリジナル画像が探索され、この探
索された位置情報付オリジナル画像から抽出された画像
検索に必要な見出し情報が保存され、さらに端末装置
は、データベースに保存された見出し情報を任意の地点
の地点情報をもとに検索し、任意の地点に近い場所の位
置情報付画像情報を取得するものである。
Further, in the image search system based on position information according to the present invention, an original image with position information generated by adding position information to an image is disclosed on a network, and a network is stored in a database. The original image with position information published above is searched, and the heading information necessary for the image search extracted from the searched original image with position information is stored, and the terminal device further stores the heading information stored in the database. Is searched based on the point information of an arbitrary point, and image information with position information of a place close to the arbitrary point is obtained.

【0016】[0016]

【発明の実施の形態】以下、本発明の実施の形態を図面
に基づいて詳細に説明する。
Embodiments of the present invention will be described below in detail with reference to the drawings.

【0017】まず、図1により、本発明の一実施の形態
の画像検索方法を実現するためのシステム、このシステ
ムにおける画像検索方法の一例の概略構成および概略手
順を説明する。図1は画像検索方法を実現するためのシ
ステム、このシステムにおける画像検索方法を示す概念
図である。
First, referring to FIG. 1, a system for realizing an image search method according to an embodiment of the present invention and a schematic configuration and a schematic procedure of an example of an image search method in this system will be described. FIG. 1 is a conceptual diagram showing a system for realizing an image search method and an image search method in this system.

【0018】本実施の形態の画像検索方法を実現するた
めのシステムは、たとえばデジタルスチルカメラおよび
周辺機器との間で自由に画像を交換するための画像の保
存形式であるExif形式を採用し、このExif形式
の拡張タグ部分に定義されたGPSのデータを利用した
位置情報に基づく画像検索システムである。
A system for realizing the image search method according to the present embodiment employs, for example, an Exif format which is a format for storing images for freely exchanging images with a digital still camera and peripheral devices. This is an image search system based on positional information using GPS data defined in the Exif format extended tag portion.

【0019】この画像検索システムは、ネットワークの
一例としてのWeb1上に公開された、画像の中に位置
情報を付加して生成された位置情報付オリジナル画像を
含むホームページ2、公開された位置情報付オリジナル
画像を表示するWebブラウザ3、探索された位置情報
付オリジナル画像から抽出された画像検索に必要な見出
し情報を保存するExif索引DB4や、図示しない利
用者の端末装置などから構成されている。
This image search system includes a home page 2 including an original image with position information generated by adding position information to an image, published on Web 1 as an example of a network; The Web browser 3 includes a Web browser 3 for displaying an original image, an Exif index DB 4 for storing heading information necessary for an image search extracted from the searched original image with position information, a user terminal device (not shown), and the like.

【0020】この画像検索システムにおける画像検索方
法は、以下のような手順により行われる。
The image search method in this image search system is performed according to the following procedure.

【0021】(1)Exif形式の拡張タグ部分に定義
されたGPSのデータを管理する場所に緯度、経度を付
与し、この緯度経度の位置情報付オリジナル画像を生成
する(ステップS1)。この位置情報付オリジナル画像
は、各画像の所有者が開設したホームページ2で公開さ
れる(ステップS2)。
(1) A latitude and longitude are assigned to a location for managing the GPS data defined in the Exif extended tag part, and an original image with position information of the latitude and longitude is generated (step S1). This original image with position information is made public on the homepage 2 established by the owner of each image (step S2).

【0022】(2)画像の所有者は、Exif形式の位
置情報付オリジナル画像を自分のホームページ2で公開
していることを、画像検索サービスの提供者へ、そのU
RLを通知する(ステップS3)。
(2) The owner of the image informs the provider of the image search service of the fact that the original image with the position information in Exif format has been made public on his homepage 2.
The RL is notified (step S3).

【0023】(3)通知されたURLをもとに、これら
Exif形式の位置情報付オリジナル画像のファイルを
Exifファイル探索プログラムで探索し(ステップS
4)、探索されたファイルを取得して位置情報付オリジ
ナル画像のExif形式の中に記述されたGPSの関連
情報を抽出し(ステップS5)、Exif索引DB4に
保存する。これらの処理は、たとえば一例として画像検
索サービスの提供者側で実行され、Exifファイル探
索プログラム、Exif索引DB4などは画像検索サー
ビスの提供者により設けられ、また処理のためのソフト
ウェアなども画像検索サービスの提供者により作成され
る。
(3) Based on the notified URL, an Exif file search program is used to search for these Exif format original image files with position information (step S).
4) Acquire the searched file, extract GPS related information described in the Exif format of the original image with position information (step S5), and save it in the Exif index DB4. These processes are executed by, for example, the provider of the image search service as an example. An Exif file search program, an Exif index DB 4 and the like are provided by the provider of the image search service, and software for processing is also provided by the image search service. Created by the provider.

【0024】(4)Exif索引DB4を、現在位置な
どの任意の地点情報をキーに検索し(ステップS6)、
その任意の地点に近い場所の撮影スポット一覧を情報と
して得る。この処理は、たとえば一例として利用者によ
り実行される。よって、利用者は、Exif索引DB4
を検索して撮影スポット一覧の情報を得ることができ
る。また、Web1上の画像の所有者のホームページ2
にアクセスして位置情報付オリジナル画像を得ることも
可能である。
(4) The Exif index DB 4 is searched using arbitrary point information such as the current position as a key (step S6),
A list of photographing spots near the arbitrary point is obtained as information. This process is executed by the user as an example. Therefore, the user can use the Exif index DB4
Can be obtained to obtain information of the photographing spot list. Also, the homepage 2 of the owner of the image on Web1
To access the original image with position information.

【0025】次に、図2〜図8により、本実施の形態の
画像検索システムにおいて、画像検索方法の一例の手順
の詳細を順に説明する。図2は位置情報付オリジナル画
像のデータを示す説明図、図3(a),(b)は位置情
報付オリジナル画像の生成を説明するための説明図、図
4は位置情報付オリジナル画像のWeb上での公開を説
明するための説明図、図5は位置情報付オリジナル画像
の探索による見出しデータのデータベース化を説明する
ための説明図、図6および図7は任意の地点からの検索
を説明するための説明図、図8は異次元コミュニティを
説明するための説明図である。
Next, referring to FIGS. 2 to 8, details of an example of an image search method in the image search system according to the present embodiment will be described in order. FIG. 2 is an explanatory diagram showing data of an original image with position information, FIGS. 3A and 3B are explanatory diagrams for explaining generation of an original image with position information, and FIG. 4 is a Web of the original image with position information. FIG. 5 is an explanatory diagram for explaining the above disclosure, FIG. 5 is an explanatory diagram for explaining the conversion of heading data into a database by searching for an original image with position information, and FIGS. 6 and 7 illustrate a search from an arbitrary point. FIG. 8 is an explanatory diagram for explaining a different-dimensional community.

【0026】1.位置情報付オリジナル画像の生成(図
2、図3) 位置情報付オリジナル画像5としては、たとえば一例と
して、図2に示すようなExif形式の画像に含まれる
データがある。画像に関するデータとしては、Exif
Version、FlashPix Version
に対応するメーカー名、モデル名、ソフトウェア、メー
カーノート、・・・、露出プログラムなどの各種データ
がある。拡張タグ部分で定義される位置情報に関するデ
ータとしては、GPS Versionに対応する北緯
/南緯、緯度、東経/西経、経度、・・・、測位地図な
どの各種データがある。
1. Generation of Original Image with Position Information (FIGS. 2 and 3) The original image with position information 5 includes, for example, data included in an Exif-format image as shown in FIG. The data about the image includes Exif
Version, FlashPix Version
There are various data such as maker name, model name, software, maker note,. The data related to the position information defined by the extended tag portion includes various data such as north / south latitude, latitude, east / west longitude, longitude,..., And a positioning map corresponding to GPS Version.

【0027】このような位置情報付オリジナル画像5の
生成は、たとえば一例として、図3に示すような仕組み
により生成する。図3(a)のように、デジタルスチル
カメラ11にGPSユニット12を接続して、デジタル
スチルカメラ11で撮影したExif形式の画像の中
に、GPSユニット12で得た緯度経度情報を付加す
る。あるいは、図3(b)のように、地図ソフトウェア
13を用い、この地図ソフトウェア13上で任意の地点
をポイントすることによって、Exif形式の画像の中
に緯度経度情報を付加する。このようにして位置情報付
オリジナル画像5を生成することができる。
The generation of such an original image 5 with position information is performed, for example, by a mechanism as shown in FIG. As shown in FIG. 3A, the GPS unit 12 is connected to the digital still camera 11, and the latitude and longitude information obtained by the GPS unit 12 is added to the Exif image captured by the digital still camera 11. Alternatively, as shown in FIG. 3B, the latitude and longitude information is added to the image in the Exif format by using the map software 13 and pointing to an arbitrary point on the map software 13. Thus, the original image 5 with position information can be generated.

【0028】このような位置情報付オリジナル画像5の
生成において、デジタルスチルカメラ11で撮影した画
像に図2のようなデータを含めることによって、画像デ
ータを見るだけで、撮影位置の情報が判るようになる。
In the generation of the original image 5 with position information, by including data as shown in FIG. 2 in the image photographed by the digital still camera 11, the photographing position information can be determined only by looking at the image data. become.

【0029】2.位置情報付オリジナル画像のWeb上
での公開(図4) 位置情報付オリジナル画像5のWeb1上での公開は、
たとえば一例として図4に示すように、前記のように生
成された位置情報付オリジナル画像5のデータをWeb
1上のホームページ2で公開する。
2. Publication of the original image with position information on the Web (FIG. 4) Publication of the original image with position information 5 on Web1
For example, as shown in FIG. 4 as an example, the data of the original image 5 with position information generated as described above is
Publish on home page 2 on 1.

【0030】3.位置情報付オリジナル画像の探索によ
る見出しデータのデータベース化(図5) 位置情報付オリジナル画像5の探索による見出しデータ
のデータベース化は、たとえば一例として、図5に示す
ような仕組みによりデータベース化する。
3. Creating a database of index data by searching for the original image with position information (FIG. 5) The database of index data by searching for the original image 5 with position information is, for example, a database as shown in FIG.

【0031】(1)画像データの取得では、Web1上
のホームページ2で公開された位置情報付オリジナル画
像5のファイルを取得する(ステップS11)。この際
には、Web1のオーナーから位置情報付オリジナル
画像5が含まれるURLを通知してもらって画像ファイ
ルを取得したり、通知されたURLを対象に探索プロ
グラムが画像ファイルを取得する、方法などがある。
(1) In the acquisition of image data, a file of the original image 5 with position information published on the homepage 2 on the Web 1 is acquired (step S11). In this case, a method of obtaining an image file by notifying the URL containing the original image 5 with position information from the owner of the Web 1 or a method of obtaining an image file by a search program for the notified URL may be used. is there.

【0032】(2)Exif解析では、取得したファイ
ルの位置情報付オリジナル画像5を解析して(ステップ
S12)、Exif形式の画像で緯度経度情報が付与さ
れているかどうかをチェックする(ステップS13)。
(2) In the Exif analysis, the original image 5 with position information of the acquired file is analyzed (step S12), and it is checked whether or not latitude and longitude information is added to the image in the Exif format (step S13). .

【0033】(3)DB追加では、チェックの結果、E
xif形式の位置情報付オリジナル画像5であれば、そ
の画像の検索対象となる項目をExif形式の項目の中
から抽出し、見出しデータとしてExif索引DB4に
保存する(ステップS14)。この際に、保存対象のデ
ータとしては、たとえば緯度、経度、撮影日時、
URL、写真タイトル、撮影者、コメントなど
があり、このうち〜までの情報を必須項目として抽
出する。また、オリジナルの位置情報付オリジナル画像
5からサムネイルの画像を自動生成し、一覧表示用の画
像としてサムネイル画像DB6に保存する。
(3) In the DB addition, as a result of the check, E
In the case of the original image 5 with position information in xif format, an item to be searched for the image is extracted from the items in Exif format and stored in the Exif index DB 4 as index data (step S14). At this time, the data to be saved include, for example, latitude, longitude, shooting date and time,
There are a URL, a photo title, a photographer, a comment, and the like, and the information up to is extracted as essential items. In addition, a thumbnail image is automatically generated from the original image 5 with position information, and is stored in the thumbnail image DB 6 as a list display image.

【0034】4.任意の地点からの検索(図6、図7) たとえば一例として、図6に示すように、地図上の任意
のポイント、あるいは駅や名所などのようなランドマー
ク、あるいは利用者が現在いる地点など、任意の位置情
報(緯度、経度)をサーバに伝え、その地点情報をもと
にExif索引DB4を検索する。
4. Retrieval from an arbitrary point (FIGS. 6 and 7) For example, as shown in FIG. 6, an arbitrary point on a map, a landmark such as a station or a famous place, or a point where a user is currently located, as shown in FIG. , Any position information (latitude, longitude) is transmitted to the server, and the Exif index DB 4 is searched based on the point information.

【0035】(1)地点情報の取得では、地図7上の任
意の地点の緯度経度の情報、あるいはこれに変換可能な
住所、郵便番号などのデータを取得する(ステップS2
1)。
(1) In obtaining point information, information on the latitude and longitude of an arbitrary point on the map 7 or data such as an address and a postal code which can be converted into the information is obtained (step S2).
1).

【0036】(2)最寄検索では、前記の緯度経度の情
報をもとにして、Exif索引DB4から最寄の撮影ポ
イントデータを検索する(ステップS22)。
(2) In the nearest search, the nearest photographing point data is searched from the Exif index DB 4 based on the latitude and longitude information (step S22).

【0037】(3)検索結果表示では、前記で得られた
検索結果の最寄の撮影ポイントを一覧表示する(ステッ
プS23)。たとえば一例として図7に示すように、富
士山火口付近での検索結果を、見出しデータやサムネイ
ル画像を含めて一覧で表示する。また、1つの位置情報
付画像が選択された場合、位置情報付オリジナル画像5
が存在するURL情報をもとに、Web1を介して画像
所有者のホームページ2にアクセスして、位置情報付オ
リジナル画像5を表示することができる。
(3) In the search result display, a list of the closest photographing points of the search result obtained as described above is displayed (step S23). For example, as shown in FIG. 7, search results near the crater of Mt. Fuji are displayed in a list including heading data and thumbnail images. When one image with position information is selected, the original image with position information 5
Can access the home page 2 of the image owner via the Web 1 based on the URL information in which the URL exists, and can display the original image 5 with position information.

【0038】5.位置情報付オリジナル画像の利用 位置情報付オリジナル画像5を利用することで、地図で
の確認はもちろん、カーナビのようなルート探索と連動
して、写真の撮影スポットまで利用者をナビゲートする
ことが可能となる。
5. Use of the original image with location information By using the original image with location information 5, it is possible to navigate the user to the photographing spot in conjunction with route search such as car navigation as well as checking on the map. It becomes possible.

【0039】具体的には、地図ソフトウェア側でExi
f形式のGPS管理タグを認識することで、地図上の任
意の地点の位置の表示が可能となる。また、カーナビ側
でメモリカードに記録したExif形式の画像を取り込
んだり、ネット上からExif形式の画像を取り込むこ
とにより、その位置をカーナビ側に知らせ、目的地の設
定などができるようになる。
Specifically, the Exi on the map software side
By recognizing the f-type GPS management tag, the position of an arbitrary point on the map can be displayed. In addition, by taking in the Exif format image recorded on the memory card on the car navigation system side, or by taking in the Exif format image from the net, the position can be notified to the car navigation system side and the destination can be set.

【0040】6.異次元コミュニティ(図8) 異次元コミュニティとしては、画像所有者がホームペー
ジ上で公開した位置情報付オリジナル画像を基点にして
付近で撮影した情報を一覧する方法などがある。この方
法は、たとえば一例として図8に示すように、以下のよ
うに実行する。
6. Different Dimension Community (FIG. 8) As the different dimensional community, there is a method of listing information photographed in the vicinity of an original image with position information published by an image owner on a homepage. This method is executed as follows, for example, as shown in FIG. 8 as an example.

【0041】(1)画像の所有者が、Web1上のホー
ムページ2で位置情報付オリジナル画像5を公開し、そ
のURLを通知する(ステップS31)。
(1) The owner of the image publishes the original image 5 with position information on the home page 2 on the Web 1 and notifies the URL thereof (step S31).

【0042】(2)画像検索サービスの提供者側は、E
xif形式の位置情報付オリジナル画像5を取得する
(ステップS32)。
(2) The provider of the image search service sets E
An original image 5 with position information in xif format is obtained (step S32).

【0043】(3)画像検索サービスの提供者側は、E
xif形式の位置情報付オリジナル画像5のExif索
引DB4への追加を行い、画像の所有者に対し最寄検索
のサービスが可能な、たとえばHTMLのタグ情報を提
供する(ステップS33)。
(3) The provider of the image search service sets E
The original image 5 with the positional information in the xif format is added to the Exif index DB 4, and the owner of the image is provided with, for example, HTML tag information that enables a nearest search service (step S33).

【0044】(4)画像の所有者は、上記タグをホーム
ページ2に埋め込むことによって、あたかも自分のホー
ムページ2上で、自分の画像を基点にして付近で撮影し
た情報を一覧することができる(ステップS34)。た
とえば、画像の所有者は、地点“AAA”付近の位置情
報付オリジナル画像5を公開し、画像検索サービスの提
供者側から取得したタグをホームページ2に埋め込む。
このタグによって生成されたボタン8などで最寄検索を
行うと、地点“AAA”付近で撮影したものをリストと
して得ることができるようになる。これによって、自分
の画像を中心として、この付近で撮影した人々のコミュ
ニケーション広場を動的に作ることができる。
(4) By embedding the tag in the homepage 2, the owner of the image can list information photographed in the vicinity of the user's own image on the homepage 2 with his or her image as a base point (step). S34). For example, the owner of the image publishes the original image 5 with position information near the point “AAA”, and embeds the tag acquired from the provider of the image search service in the homepage 2.
When the nearest search is performed using the button 8 or the like generated by this tag, it is possible to obtain a list of the images taken near the point “AAA”. With this, it is possible to dynamically create a communication plaza for people who have photographed the area around their own image.

【0045】従って、本実施の形態の画像検索方法を実
現するためのシステム、このシステムにおける画像検索
方法によれば、Exif形式のGPS管理タグを利用し
た位置情報に基づく画像検索を実現することができる。
この結果、利用者は、このような仕組みを利用して以下
のような効果を得ることができる。
Therefore, according to the system for realizing the image search method of the present embodiment, and the image search method in this system, it is possible to realize the image search based on the position information using the Exif GPS management tag. it can.
As a result, the user can obtain the following effects by using such a mechanism.

【0046】(1)Web1上に公開されている位置情
報付オリジナル画像5の中で、任意の地点から最寄の撮
影スポットを簡単に検索することができる。
(1) It is possible to easily search for the nearest photographing spot from an arbitrary point in the original image 5 with position information published on the Web 1.

【0047】(2)Web1上に公開されている撮影ス
ポットの位置情報付オリジナル画像5を取り込み、地図
に緯度経度情報を渡すことで、詳細な撮影ポイントを容
易に知ることができる。
(2) By taking in the original image 5 with the positional information of the photographing spot published on the Web 1 and passing the latitude and longitude information to the map, the detailed photographing point can be easily known.

【0048】(3)Web1上に公開されている位置情
報付オリジナル画像5の緯度経度をカーナビのようなル
ート検索のシステムに渡すことによって、撮影ポイント
までのナビゲートができるようになる。
(3) By passing the latitude and longitude of the original image 5 with position information published on the Web 1 to a route search system such as a car navigation system, navigation to the photographing point can be performed.

【0049】(4)利用者自ら、Web1上に位置情報
付オリジナル画像5を公開することにより、ある任意の
ポイントを中心にしたコミュニティを生成することがで
きる。
(4) The user himself / herself publishes the original image 5 with position information on the Web 1 to generate a community centered on an arbitrary point.

【0050】以上、本発明者によってなされた発明をそ
の実施の形態に基づき一例を具体的に説明したが、本発
明は前記実施の形態に限定されるものではなく、その要
旨を逸脱しない範囲で種々変更可能であることはいうま
でもない。
Although the invention made by the present inventor has been specifically described by way of an example based on the embodiment, the present invention is not limited to the above-described embodiment, and the invention is not limited thereto. It goes without saying that various changes can be made.

【0051】[0051]

【発明の効果】以上説明したように、本発明の画像検索
技術によれば、以下のような効果を得ることができる。
As described above, according to the image search technique of the present invention, the following effects can be obtained.

【0052】(1)画像検索サービス提供者は、画像の
保存形式の位置情報管理のタグを利用した位置情報に基
づく画像検索を実現することが可能となる。
(1) The image search service provider can realize an image search based on position information using a position information management tag in an image storage format.

【0053】(2)利用者は、ネットワーク上に公開さ
れている位置情報付オリジナル画像の中で、任意の地点
から最寄の撮影スポットを簡単に検索することが可能と
なる。
(2) The user can easily search for the nearest photographing spot from an arbitrary point in the original image with position information published on the network.

【0054】(3)利用者は、ネットワーク上に公開さ
れている撮影スポットの位置情報付オリジナル画像を取
り込み、地図に緯度経度情報を渡すことで、詳細な撮影
ポイントを容易に知ることが可能となる。
(3) A user can easily know a detailed photographing point by fetching an original image with position information of a photographing spot published on a network and passing latitude and longitude information to a map. Become.

【0055】(4)利用者は、ネットワーク上に公開さ
れている位置情報付オリジナル画像の緯度経度をカーナ
ビのようなルート検索のシステムに渡すことで、撮影ポ
イントまでのナビゲートを得ることが可能となる。
(4) The user can obtain the navigation to the photographing point by passing the latitude and longitude of the original image with position information published on the network to a route search system such as a car navigation system. Becomes

【0056】(5)利用者は、自らネットワーク上に位
置情報付オリジナル画像を公開することで、ある任意の
ポイントを中心にしたコミュニティを生成することが可
能となる。
(5) By publishing the original image with position information on the network by itself, the user can generate a community centered on a certain point.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の一実施の形態の画像検索方法を実現す
るためのシステム、このシステムにおける画像検索方法
を示す概念図である。
FIG. 1 is a conceptual diagram showing a system for realizing an image search method according to an embodiment of the present invention, and an image search method in this system.

【図2】本発明の一実施の形態において、位置情報付オ
リジナル画像のデータを示す説明図である。
FIG. 2 is an explanatory diagram showing data of an original image with position information according to an embodiment of the present invention.

【図3】(a),(b)は本発明の一実施の形態におい
て、位置情報付オリジナル画像の生成を説明するための
説明図である。
FIGS. 3A and 3B are explanatory diagrams for explaining generation of an original image with position information in one embodiment of the present invention.

【図4】本発明の一実施の形態において、位置情報付オ
リジナル画像のWeb上での公開を説明するための説明
図である。
FIG. 4 is an explanatory diagram for explaining disclosure of an original image with position information on a Web in one embodiment of the present invention.

【図5】本発明の一実施の形態において、位置情報付オ
リジナル画像の探索による見出しデータのデータベース
化を説明するための説明図である。
FIG. 5 is an explanatory diagram for describing creation of a database of index data by searching for an original image with position information in the embodiment of the present invention.

【図6】本発明の一実施の形態において、任意の地点か
らの検索を説明するための説明図である。
FIG. 6 is an explanatory diagram illustrating a search from an arbitrary point in the embodiment of the present invention.

【図7】本発明の一実施の形態において、図6に続き、
任意の地点からの検索を説明するための説明図である。
FIG. 7 shows an embodiment of the present invention, following FIG.
It is an explanatory view for explaining search from an arbitrary point.

【図8】本発明の一実施の形態において、異次元コミュ
ニティを説明するための説明図である。
FIG. 8 is an explanatory diagram for explaining a different-dimensional community in one embodiment of the present invention.

【符号の説明】[Explanation of symbols]

1 Web 2 ホームページ 3 Webブラウザ 4 Exif索引DB 5 位置情報付オリジナル画像 6 サムネイル画像DB 7 地図 8 ボタン 11 デジタルスチルカメラ 12 GPSユニット 13 地図ソフトウェア 1 Web 2 Home page 3 Web browser 4 Exif index DB 5 Original image with location information 6 Thumbnail image DB 7 Map 8 Button 11 Digital still camera 12 GPS unit 13 Map software

Claims (8)

【特許請求の範囲】[Claims] 【請求項1】 ネットワーク上に構築されたデータベー
スおよび端末装置を有し、 画像の中に位置情報を付加した位置情報付オリジナル画
像を生成し、この位置情報付オリジナル画像を前記ネッ
トワーク上で公開するステップと、 前記ネットワーク上で公開された位置情報付オリジナル
画像を探索し、この探索された位置情報付オリジナル画
像から画像検索に必要な見出し情報を抽出し、この見出
し情報を前記データベースに保存するステップと、 前記データベースに保存された見出し情報を、前記端末
装置から任意の地点の地点情報をもとに検索し、前記任
意の地点に近い場所の位置情報付画像情報を取得するス
テップと、を有することを特徴とする位置情報に基づく
画像検索方法。
1. An image processing apparatus comprising: a database and a terminal device constructed on a network; generating an original image with position information in which position information is added to the image; and publishing the original image with position information on the network. Searching for an original image with position information published on the network, extracting heading information necessary for image search from the searched original image with position information, and storing the heading information in the database. And searching the headline information stored in the database from the terminal device based on the point information of an arbitrary point, and acquiring position information-added image information of a place near the arbitrary point. An image search method based on position information.
【請求項2】 請求項1記載の位置情報に基づく画像検
索方法において、 前記位置情報付オリジナル画像は、所定の保存形式によ
る画像データと、この画像データの保存形式の一部分に
定義される緯度経度データとからなることを特徴とする
位置情報に基づく画像検索方法。
2. The image search method based on position information according to claim 1, wherein the original image with position information is image data in a predetermined storage format, and latitude and longitude defined in a part of the storage format of the image data. An image search method based on position information, comprising: data.
【請求項3】 請求項2記載の位置情報に基づく画像検
索方法において、 前記画像データと前記緯度経度データは、デジタルスチ
ルカメラとGPSユニットのような位置属性が取得可能
な装置との組み合わせ、または電子地図ソフトウェアの
ような位置属性が取得可能なソフトウェアから得ること
を特徴とする位置情報に基づく画像検索方法。
3. The image search method based on position information according to claim 2, wherein the image data and the latitude / longitude data are a combination of a digital still camera and a device capable of acquiring a position attribute such as a GPS unit, or An image retrieval method based on position information, wherein the position attribute is obtained from software capable of acquiring position attributes, such as electronic map software.
【請求項4】 請求項1記載の位置情報に基づく画像検
索方法において、 前記見出し情報は、前記位置情報付オリジナル画像の緯
度、経度、タイトルのような検索に必要な項目からなる
ことを特徴とする位置情報に基づく画像検索方法。
4. The image search method based on position information according to claim 1, wherein the index information includes items necessary for search, such as the latitude, longitude, and title of the original image with position information. An image search method based on positional information to be performed.
【請求項5】 請求項1記載の位置情報に基づく画像検
索方法において、 前記位置情報付画像情報は、前記任意の地点に近い場所
の見出し情報の一覧と、この一覧の各地点の位置情報付
オリジナル画像に対応するサムネイル画像とからなるこ
とを特徴とする位置情報に基づく画像検索方法。
5. The image search method based on position information according to claim 1, wherein the image information with position information includes a list of heading information of a place close to the arbitrary point, and a position information of each point in the list. An image search method based on position information, comprising: a thumbnail image corresponding to an original image.
【請求項6】 請求項5記載の位置情報に基づく画像検
索方法において、 前記位置情報付画像情報は、前記サムネイル画像に対応
する前記位置情報付オリジナル画像にアクセスできる情
報を含むことを特徴とする位置情報に基づく画像検索方
法。
6. The image search method based on position information according to claim 5, wherein the image information with position information includes information that can access the original image with position information corresponding to the thumbnail image. Image search method based on location information.
【請求項7】 請求項1記載の位置情報に基づく画像検
索方法において、 前記ネットワーク上で公開された位置情報付オリジナル
画像に含まれる地点情報を基点として、前記位置情報付
画像情報を検索できるタグを利用することにより、前記
基点の付近で撮影した人々のコミュニケーション広場を
動的に作ることを可能にすることを特徴とする位置情報
に基づく画像検索方法。
7. The image search method based on position information according to claim 1, wherein the tag capable of searching for the image information with position information is based on point information included in the original image with position information published on the network. A method for dynamically creating a communication plaza for people photographed in the vicinity of the base point by using the information retrieval method.
【請求項8】 ネットワーク上に構築されたデータベー
スおよび端末装置を有し、 前記ネットワーク上には、画像の中に位置情報を付加し
て生成された位置情報付オリジナル画像が公開され、 前記データベースには、前記ネットワーク上で公開され
た位置情報付オリジナル画像が探索され、この探索され
た位置情報付オリジナル画像から抽出された画像検索に
必要な見出し情報が保存され、 前記端末装置は、前記データベースに保存された見出し
情報を任意の地点の地点情報をもとに検索し、前記任意
の地点に近い場所の位置情報付画像情報を取得する、も
のであることを特徴とする位置情報に基づく画像検索シ
ステム。
8. A database and a terminal device constructed on a network, wherein an original image with position information generated by adding position information to an image is published on the network, Is searched for the original image with position information published on the network, and the heading information necessary for the image search extracted from the searched original image with position information is stored. An image search based on position information, wherein the stored heading information is searched based on the point information of an arbitrary point, and image information with position information of a place close to the arbitrary point is obtained. system.
JP2001181040A 2001-06-15 2001-06-15 Method and system for retrieving picture based on position information Pending JP2002373168A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001181040A JP2002373168A (en) 2001-06-15 2001-06-15 Method and system for retrieving picture based on position information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001181040A JP2002373168A (en) 2001-06-15 2001-06-15 Method and system for retrieving picture based on position information

Publications (1)

Publication Number Publication Date
JP2002373168A true JP2002373168A (en) 2002-12-26

Family

ID=19021368

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001181040A Pending JP2002373168A (en) 2001-06-15 2001-06-15 Method and system for retrieving picture based on position information

Country Status (1)

Country Link
JP (1) JP2002373168A (en)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004328134A (en) * 2003-04-22 2004-11-18 Fuji Photo Film Co Ltd Image processing server
JP2005129056A (en) * 2003-09-17 2005-05-19 Navteq North America Llc Location-referenced photograph repository
WO2011136341A1 (en) 2010-04-28 2011-11-03 楽天株式会社 Information providing device, method of providing information, information providing processing program, and recording medium on which an information providing processing program is recorded
JP2012063900A (en) * 2010-09-15 2012-03-29 Clarion Co Ltd Store information provision apparatus
JP2012088792A (en) * 2010-10-15 2012-05-10 Hitachi Solutions Ltd Search index generation system, document search system, index generation method, document search method, and program
JP2012137882A (en) * 2010-12-24 2012-07-19 Nec Corp Information processing unit and program
JP2012203289A (en) * 2011-03-28 2012-10-22 Casio Comput Co Ltd Display device, display system, display method and program
WO2012164685A1 (en) * 2011-05-31 2012-12-06 楽天株式会社 Information providing device, information providing method, information providing processing program, recording medium recording information providing processing program, and information providing system
KR101416231B1 (en) * 2007-10-09 2014-07-07 삼성전자주식회사 Searching system for image and the method of the smae
CN104199906A (en) * 2014-08-27 2014-12-10 腾讯科技(深圳)有限公司 Recommending method and device for shooting region
US9064020B2 (en) 2010-04-28 2015-06-23 Rakuten, Inc. Information providing device, information providing processing program, recording medium having information providing processing program recorded thereon, and information providing method
CN106126657A (en) * 2016-03-23 2016-11-16 四川长虹电器股份有限公司 A kind of recommendation is taken a picture the method in place and mobile electronic terminal
CN107251045A (en) * 2015-03-05 2017-10-13 欧姆龙株式会社 Object detector, object identification method and program

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001160058A (en) * 1999-12-03 2001-06-12 Sony Corp Device and method for processing information and medium with program stored therein

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001160058A (en) * 1999-12-03 2001-06-12 Sony Corp Device and method for processing information and medium with program stored therein

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
CSND200000629019, 深川 岳志, "これは使える!実用ホームページ 第6回", Touch PC, 19990624, 第4巻 第6号, 第102頁、第103頁, JP, 株式会社毎日コミュニケーションズ *
CSND200000724010, 犬飼 裕一, "マルチメディアビジネスの展開:第21回", ビジネスコミュニケーション 第34巻 第12号, 19971201, 第34巻第12号, 第100頁乃至第106頁, JP, 株式会社ビジネスコミュニケーション社 *
CSNG200401281001, 白井 良成, "実世界指向インタフェース", ヒューマンインタフェース学会誌, 20001125, Vol.2 No.4, 第1頁乃至第8頁, JP, ヒューマンインタフェース学会 *
CSNH200200245015, 飯田 尚武, "マルチメディア・システムソリューション", Matsushita Technical Journal, 20000818, 第46巻 第4号, 第121頁乃至第127頁, JP, 松下電器産業株式会社 *

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004328134A (en) * 2003-04-22 2004-11-18 Fuji Photo Film Co Ltd Image processing server
JP2005129056A (en) * 2003-09-17 2005-05-19 Navteq North America Llc Location-referenced photograph repository
US8116598B2 (en) 2003-09-17 2012-02-14 Navteq B.V. Location-referenced photograph repository
KR101416231B1 (en) * 2007-10-09 2014-07-07 삼성전자주식회사 Searching system for image and the method of the smae
US8918414B2 (en) 2010-04-28 2014-12-23 Rakuten, Inc. Information providing device, information providing method, information providing processing program, and recording medium having information providing processing program recorded thereon
WO2011136341A1 (en) 2010-04-28 2011-11-03 楽天株式会社 Information providing device, method of providing information, information providing processing program, and recording medium on which an information providing processing program is recorded
JP5223034B2 (en) * 2010-04-28 2013-06-26 楽天株式会社 Information providing apparatus, information providing method, information providing processing program, and recording medium on which information providing processing program is recorded
US9064020B2 (en) 2010-04-28 2015-06-23 Rakuten, Inc. Information providing device, information providing processing program, recording medium having information providing processing program recorded thereon, and information providing method
JP2012063900A (en) * 2010-09-15 2012-03-29 Clarion Co Ltd Store information provision apparatus
JP2012088792A (en) * 2010-10-15 2012-05-10 Hitachi Solutions Ltd Search index generation system, document search system, index generation method, document search method, and program
JP2012137882A (en) * 2010-12-24 2012-07-19 Nec Corp Information processing unit and program
JP2012203289A (en) * 2011-03-28 2012-10-22 Casio Comput Co Ltd Display device, display system, display method and program
WO2012164685A1 (en) * 2011-05-31 2012-12-06 楽天株式会社 Information providing device, information providing method, information providing processing program, recording medium recording information providing processing program, and information providing system
JP5467177B2 (en) * 2011-05-31 2014-04-09 楽天株式会社 INFORMATION PROVIDING DEVICE, INFORMATION PROVIDING METHOD, INFORMATION PROVIDING PROCESSING PROGRAM, RECORDING MEDIUM CONTAINING INFORMATION PROVIDING PROCESSING PROGRAM, AND INFORMATION PROVIDING SYSTEM
US9886789B2 (en) 2011-05-31 2018-02-06 Rakuten, Inc. Device, system, and process for searching image data based on a three-dimensional arrangement
CN104199906A (en) * 2014-08-27 2014-12-10 腾讯科技(深圳)有限公司 Recommending method and device for shooting region
CN107251045A (en) * 2015-03-05 2017-10-13 欧姆龙株式会社 Object detector, object identification method and program
CN106126657A (en) * 2016-03-23 2016-11-16 四川长虹电器股份有限公司 A kind of recommendation is taken a picture the method in place and mobile electronic terminal

Similar Documents

Publication Publication Date Title
CN101506764B (en) Panoramic ring user interface
US8051089B2 (en) Systems and methods for location-based real estate service
US8416309B2 (en) Camera-fitted information retrieval device
EP1797707B1 (en) Place name picture annotation on camera phones
CN107404598B (en) Imaging device, information acquisition system, program, and recording medium
KR20060034249A (en) Enhanced organization and retrieval of digital images
KR100882025B1 (en) Method for searching geographic information system images based on web, geographical postion service and blog service and providing regional blog service
US20100250136A1 (en) Computer based location identification using images
US20050104976A1 (en) System and method for applying inference information to digital camera metadata to identify digital picture content
KR20010093654A (en) Multimedia data searching method, index information providing method, multimedia data searching device, index server and multimedia data searching server
WO2007005032B1 (en) Systems, methods and devices for trip management functions
CN101911072B (en) The method searched in collection of data items
JP5223034B2 (en) Information providing apparatus, information providing method, information providing processing program, and recording medium on which information providing processing program is recorded
JP2002373168A (en) Method and system for retrieving picture based on position information
CN104298678B (en) Method, system, device and server for searching interest points on electronic map
JP5072464B2 (en) Image providing apparatus, image providing method, image providing program, and computer-readable recording medium recording the program
JP2003099434A (en) Electronic album device
JP2009123160A (en) Content information distribution device, content information distribution system and content information distributing method
JP3984155B2 (en) Subject estimation method, apparatus, and program
KR101461590B1 (en) Method for Providing Multimedia Contents based on Location
JP2004226170A (en) Positional information providing system
JP5535671B2 (en) Information providing apparatus, information providing processing program, and information providing method
JP2008191893A (en) Landscape delivery device, landscape delivery system, landscape image registration method, landscape delivery method, guide map preparation system and data structure
KR101762514B1 (en) Method and apparatus for providing information related to location of shooting based on map
JP2004310373A (en) Point information database system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080609

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100824

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110426