JP6011335B2 - Photo image processing apparatus and program - Google Patents

Photo image processing apparatus and program Download PDF

Info

Publication number
JP6011335B2
JP6011335B2 JP2012288780A JP2012288780A JP6011335B2 JP 6011335 B2 JP6011335 B2 JP 6011335B2 JP 2012288780 A JP2012288780 A JP 2012288780A JP 2012288780 A JP2012288780 A JP 2012288780A JP 6011335 B2 JP6011335 B2 JP 6011335B2
Authority
JP
Japan
Prior art keywords
photographic image
image data
additional information
photographic
processing apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012288780A
Other languages
Japanese (ja)
Other versions
JP2014130533A (en
Inventor
勇人 加藤
勇人 加藤
賢治 ▲高▼橋
賢治 ▲高▼橋
博章 川▲崎▼
博章 川▲崎▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Buffalo Inc
Original Assignee
Buffalo Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Buffalo Inc filed Critical Buffalo Inc
Priority to JP2012288780A priority Critical patent/JP6011335B2/en
Publication of JP2014130533A publication Critical patent/JP2014130533A/en
Application granted granted Critical
Publication of JP6011335B2 publication Critical patent/JP6011335B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、写真画像処理装置及びプログラムに関する。   The present invention relates to a photographic image processing apparatus and a program.

ディジタルカメラによって撮影された写真を整理するために、写真の画像データに対して撮影対象等に関する情報をタグとして関連付けて記録することが行われている。一般にこのタグは、利用者が任意に設定可能であり、画像データの整理や検索のために有効に利用されている。   In order to organize photographs taken by a digital camera, information related to a subject to be photographed is recorded in association with the image data of the photograph as a tag. In general, this tag can be arbitrarily set by the user, and is effectively used for organizing and searching image data.

特開2011-188171号公報JP 2011-188171 A

しかしながら、写真の画像データが多くなると、このタグ情報を設定することが面倒であり、一旦設定されれば有効に利用可能であるにも関わらず、タグ情報が殆ど設定されない場合も多い。なお、特許文献1には、カメラによって付加されるExif情報に基づき、画像データの撮影日時や撮影した位置の情報を取得する。また、予めイベントの開催場所や日時を記憶したイベントデータベースを参照し、画像データの撮影日時、撮影した位置の情報に関連するイベントの情報を検索する。そして検索して見出したイベントの情報に係るタグ情報を、当該画像データに関連付ける、という技術が開示されている。   However, when the amount of photo image data increases, it is troublesome to set the tag information, and even if the tag information can be effectively used once set, the tag information is hardly set. Note that Patent Document 1 acquires information about the shooting date and time of image data and the shooting position based on Exif information added by the camera. In addition, by referring to an event database in which the event holding location and date / time are stored in advance, event information related to the shooting date / time of the image data and the information of the shooting position is searched. A technique is disclosed in which tag information related to event information found by searching is associated with the image data.

しかし、この特許文献1の例では、イベントデータベースに記憶されているイベント情報が関連付けられるのみであるため、タグ情報として付加される情報が限られたものとなってしまう。   However, in the example of Patent Document 1, since only event information stored in the event database is associated, information to be added as tag information is limited.

本発明は上記実情に鑑みて為されたもので、より多くの場面に対応したタグ情報を人為的操作なしに設定できる写真画像処理装置、及びプログラムを提供することを、その目的の一つとする。   The present invention has been made in view of the above circumstances, and an object thereof is to provide a photographic image processing apparatus and program capable of setting tag information corresponding to more scenes without human operation. .

上記従来例の問題点を解決する本発明は、写真画像データを保持するデータベースにアクセス可能な写真画像処理装置であって、前記写真画像データは撮影場所と撮影日時との情報を含み、付加情報が関連付けられており、撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れる受入手段と、前記データベースに保持された写真画像データのうち、前記処理対象となった写真画像データの撮影日時及び撮影場所との差がそれぞれ所定範囲にある撮影日時及び撮影場所を含む写真画像データを探索対象として設定し、探索対象として設定した写真画像データに関連付けられた付加情報を取得し、取得した付加情報のうちから出現頻度が所定しきい値より高い付加情報を選択し、当該選択した付加情報を前記処理対象となった写真画像に関連付ける手段と、を含むこととしたものである。   The present invention for solving the problems of the conventional example is a photographic image processing apparatus capable of accessing a database holding photographic image data, wherein the photographic image data includes information on a shooting location and a shooting date and time, and additional information Is received, receiving means for receiving photographic image data including a shooting location and shooting date and time as a processing target, and the shooting date and time of the photographic image data as the processing target among the photographic image data held in the database And photographic image data including the shooting date and time and the shooting location whose difference from the shooting location is within a predetermined range, respectively, is set as a search target, additional information associated with the photographic image data set as the search target is acquired, and the acquired addition From the information, additional information whose appearance frequency is higher than a predetermined threshold value is selected, and the selected additional information is selected as the processing target. In which it was decided to include a means for associating the image.

これより、データベースに保持された写真画像データを利用して、より多くの場面に対応したタグ情報を人為的操作なしに設定できる。   As a result, it is possible to set tag information corresponding to a larger number of scenes without human operation by using photographic image data held in the database.

また本発明の一態様は、写真画像データを保持するデータベースにアクセス可能な写真画像処理装置であって、前記写真画像データは撮影場所と撮影日時との情報を含み、付加情報が関連付けられており、少なくとも撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れる受入手段と、前記データベースに保持された写真画像データのうち、前記処理対象となった写真画像データの撮影日時、撮影場所との差がそれぞれ所定範囲にある撮影日時及び撮影場所を含む写真画像データを探索対象として設定し、探索対象として設定した写真画像データから付加情報と撮影者を特定する情報とを取得し、互いに異なる付加情報ごとに、各付加情報が関連付けられた写真画像データの撮影者の人数を演算し、当該人数が所定しきい値より高い付加情報を選択し、当該選択した付加情報を処理対象となった写真画像に関連付ける手段と、を含むこととしたものである。   According to another aspect of the present invention, there is provided a photographic image processing apparatus capable of accessing a database holding photographic image data, wherein the photographic image data includes information on a shooting location and a shooting date and time, and additional information is associated therewith. Receiving means for receiving, as a processing target, photographic image data including at least a photographic location and a photographic date, and the photographic date and time of the photographic image data to be processed among the photographic image data held in the database; Photographic image data including shooting date and time and shooting location where the difference between them is within a predetermined range is set as a search target, and additional information and information for specifying a photographer are acquired from the photographic image data set as the search target, and are different from each other. For each additional information, the number of photographers of the photographic image data associated with each additional information is calculated, and the number of photographers is a predetermined threshold value. Ri select high added information is obtained by the fact that comprises means for associating the selected additional information to be processed and become photographic image.

このことによっても、データベースに保持された、複数の人物が撮影した写真画像データを利用して、より多くの場面に対応したタグ情報を人為的操作なしに設定できる。   This also makes it possible to set tag information corresponding to more scenes without human manipulation by using photographic image data taken by a plurality of persons stored in the database.

ここで前記探索対象を設定する際に、撮影場所に係る前記所定範囲は、前記データベースに保持された写真画像データの撮影者の数に基づいて定めてもよい。これにより過去付加した撮影者の少ない、意図しない付加情報が関連付けられることがなくなる。   Here, when setting the search target, the predetermined range related to the shooting location may be determined based on the number of photographers of the photo image data held in the database. Thus, unintended additional information with a small number of photographers added in the past is not associated.

また、各付加情報を、予め定めた付加情報分類のいずれかに分類する手段を含み、前記所定範囲は、各付加情報分類ごとに予め定められた範囲としてもよい。これにより付加情報の種類(分類)に応じて付加情報の探索範囲を設定できる。   Further, it may include means for classifying each additional information into one of predetermined additional information classifications, and the predetermined range may be a predetermined range for each additional information classification. Thereby, the search range of additional information can be set according to the type (classification) of additional information.

さらに保持された写真画像データに関連付けられた付加情報のうち、予め定めた禁止ワードに一致する付加情報については、出現頻度が所定しきい値より高い場合でも選択しないよう制御してもよい。これによりいつでもどこでも付加され得る付加情報が意図せず付加されることが防止される。   Furthermore, among the additional information associated with the stored photographic image data, additional information that matches a predetermined prohibited word may be controlled not to be selected even when the appearance frequency is higher than a predetermined threshold. This prevents additional information that can be added anytime and anywhere from being added unintentionally.

また本発明の別の態様は、写真画像データを保持するデータベースにアクセス可能な写真画像処理装置であって、前記写真画像データは撮影場所と撮影日時との情報を含み、付加情報が関連付けられており、前記データベースに保持された写真画像データに関連付けられた付加情報ごとに、撮影場所や撮影日時の範囲を表す範囲情報に関連付けて記録する手段と、撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れて、当該撮影場所と撮影日時との情報を抽出する受入手段と、当該抽出した撮影場所と撮影日時とが含まれる前記範囲情報を検索し、検索により見出された範囲情報に関連する付加情報を取得する手段と、を含むこととしたものである。   According to another aspect of the present invention, there is provided a photographic image processing apparatus capable of accessing a database holding photographic image data, wherein the photographic image data includes information on a shooting location and a shooting date and time, and additional information is associated therewith. In addition, for each additional information associated with the photographic image data stored in the database, photographic image data including means for recording in association with range information indicating a shooting location and a range of the shooting date, and the shooting location and the shooting date Receiving means for extracting information on the shooting location and shooting date and time, and searching for the range information including the extracted shooting location and shooting date and time, and finding the range information found by the search And means for acquiring additional information related to.

これより、データベースに保持された写真画像データを利用して、より多くの場面に対応したタグ情報を人為的操作なしに設定できる。   As a result, it is possible to set tag information corresponding to a larger number of scenes without human operation by using photographic image data held in the database.

また本発明のさらに別の態様に係るプログラムは、撮影場所と撮影日時との情報を含み、付加情報が関連付けられた写真画像データを保持するデータベースに、アクセス可能なコンピュータを、撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れる受入手段と、前記データベースに保持された写真画像データのうち、前記処理対象となった写真画像データの撮影日時及び撮影場所との差がそれぞれ所定範囲にある撮影日時及び撮影場所を含む写真画像データを探索対象として設定し、探索対象として設定した写真画像データに関連付けられた付加情報を取得し、取得した付加情報のうちから出現頻度が所定しきい値より高い付加情報を選択し、当該選択した付加情報を前記処理対象となった写真画像に関連付ける手段と、して機能させることとしたものである。   According to still another aspect of the present invention, there is provided a program including information on a shooting location and a shooting date and time, a computer that can access a database holding photographic image data associated with additional information, the shooting location and the shooting date and time. And receiving means for receiving photographic image data as a processing target, and of the photographic image data held in the database, the difference between the shooting date and the shooting location of the photographic image data to be processed is within a predetermined range, respectively. Photo image data including a certain shooting date / time and shooting location is set as a search target, additional information associated with the photo image data set as the search target is acquired, and the appearance frequency is a predetermined threshold value from the acquired additional information Means for selecting higher additional information and associating the selected additional information with the photographic image to be processed; In which it was decided to function Te.

さらに本発明のまた別の態様に係るプログラムは、撮影場所と撮影日時との情報を含み、付加情報が関連付けられた写真画像データを保持するデータベースに、アクセス可能なコンピュータを、少なくとも撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れる受入手段と、前記データベースに保持された写真画像データのうち、前記処理対象となった写真画像データの撮影日時、撮影場所との差がそれぞれ所定範囲にある撮影日時及び撮影場所を含む写真画像データを探索対象として設定し、探索対象として設定した写真画像データから付加情報と撮影者を特定する情報とを取得し、互いに異なる付加情報ごとに、各付加情報が関連付けられた写真画像データの撮影者の人数を演算し、当該人数が所定しきい値より高い付加情報を選択し、当該選択した付加情報を処理対象となった写真画像に関連付ける手段と、して機能させることとしたものである。   Furthermore, a program according to still another aspect of the present invention includes a computer that includes information on a shooting location and a shooting date and time and stores a photographic image data associated with additional information. Acceptance means for accepting photographic image data including the date and time as a processing target, and the difference between the photographic date and time and the shooting location of the photographic image data as the processing target among the photographic image data held in the database, respectively, within a predetermined range Photographic image data including the shooting date and time and the shooting location are set as search targets, additional information and information for identifying the photographer are acquired from the photographic image data set as the search targets, and for each additional information different from each other, The number of photographers of the photographic image data associated with the additional information is calculated, and the number of photographers is higher than a predetermined threshold. It selects information is obtained by means for associating the selected additional information to be processed and become photographic images, thereby to function with.

さらに本発明の別の態様は、プログラムであって、撮影場所と撮影日時との情報を含み、付加情報が関連付けられた写真画像データを保持するデータベースに、アクセス可能なコンピュータを、前記データベースに保持された写真画像データに関連付けられた付加情報ごとに、撮影場所や撮影日時の範囲を表す範囲情報に関連付けて記録する手段と、撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れて、当該撮影場所と撮影日時との情報を抽出する受入手段と、当該抽出した撮影場所と撮影日時とが含まれる前記範囲情報を検索し、検索により見出された範囲情報に関連する付加情報を取得する手段と、として機能させることとしたものである。   Furthermore, another aspect of the present invention is a program that includes information about a shooting location and a shooting date and time, stores a photographic image data associated with additional information, and stores an accessible computer in the database. For each additional information associated with the photographed image data, a means for recording in association with the range information indicating the photographing location and the photographing date and time, and the photograph image data including the photographing location and the photographing date and time are accepted as a processing target. Receiving means for extracting information of the shooting location and shooting date and time, searching the range information including the extracted shooting location and shooting date and time, and adding additional information related to the range information found by the search It is supposed to function as an acquisition means.

本発明によると、データベースに保持された写真画像データを利用して、より多くの場面に対応したタグ情報を人為的操作なしに設定できる。   According to the present invention, it is possible to set tag information corresponding to a larger number of scenes without human operation by using photographic image data held in a database.

本発明の実施の形態に係る写真画像処理装置1の構成例を表すブロック図である。1 is a block diagram illustrating a configuration example of a photographic image processing apparatus 1 according to an embodiment of the present invention. 本発明の実施の形態に係る写真画像処理装置1が処理の対象とする、データベースに格納された写真画像に係るデータの例を表す説明図である。It is explanatory drawing showing the example of the data concerning the photographic image stored in the database which the photographic image processing apparatus 1 which concerns on embodiment of this invention makes into the object of processing. 本発明の実施の形態に係る写真画像処理装置1の例を表す機能ブロック図である。It is a functional block diagram showing the example of the photographic image processing apparatus 1 which concerns on embodiment of this invention. 本発明の実施の形態に係る写真画像処理装置1による処理の例を表すフローチャート図である。It is a flowchart figure showing the example of the process by the photographic image processing apparatus 1 which concerns on embodiment of this invention. 本発明の実施の形態に係る写真画像処理装置1による処理の別の例を表すフローチャート図である。It is a flowchart figure showing another example of the process by the photographic image processing apparatus 1 which concerns on embodiment of this invention. 本発明の実施の形態に係る写真画像処理装置1による処理のまた別の例を表すフローチャート図である。It is a flowchart figure showing another example of the process by the photographic image processing apparatus 1 which concerns on embodiment of this invention. 本発明の実施の形態に係る写真画像処理装置1による付加情報取得処理の例を表すフローチャート図である。It is a flowchart figure showing the example of the additional information acquisition process by the photographic image processing apparatus 1 which concerns on embodiment of this invention. 本発明の実施の形態に係る写真画像処理装置1が参照する範囲データベースの内容例を表す説明図である。It is explanatory drawing showing the example of the content of the range database which the photographic image processing apparatus 1 which concerns on embodiment of this invention refers. 本発明の実施の形態に係る写真画像処理装置1が範囲データベースを用いて実行する処理の例を表す説明図である。It is explanatory drawing showing the example of the process which the photographic image processing apparatus 1 which concerns on embodiment of this invention performs using a range database.

本発明の実施の形態について図面を参照しながら説明する。本発明の実施の形態に係る写真画像処理装置1は、図1に例示するように、制御部11と、記憶部12と、操作部13と、表示部14と、通信部15とを含んで構成されている。また本実施の形態では、この写真画像処理装置1は、ネットワークを介して、写真画像データを保持するデータベース2にアクセス可能に接続されている。なお、ここでは写真画像データを保持するデータベースが、ネットワークを介して写真画像処理装置1に接続されている例としているが、本実施の形態はこれに限られず、データベース2は記憶部12に格納されていてもよい。またこの写真画像処理装置1が利用するデータベース2は一つとは限らず、複数あってもよい。   Embodiments of the present invention will be described with reference to the drawings. As illustrated in FIG. 1, the photographic image processing apparatus 1 according to the embodiment of the present invention includes a control unit 11, a storage unit 12, an operation unit 13, a display unit 14, and a communication unit 15. It is configured. In the present embodiment, the photographic image processing apparatus 1 is connected to a database 2 that holds photographic image data via a network. In this example, the database that holds the photographic image data is connected to the photographic image processing apparatus 1 via a network. However, the present embodiment is not limited to this, and the database 2 is stored in the storage unit 12. May be. Further, the database 2 used by the photographic image processing apparatus 1 is not limited to one but may be a plurality.

また本実施の形態において、データベース2に格納された写真画像データには、図2に例示するように撮影場所(L)と撮影日時(T)との情報が含まれており、またこの写真画像データには付加情報(A)が関連付けられている。   In the present embodiment, the photographic image data stored in the database 2 includes information on the shooting location (L) and the shooting date and time (T) as illustrated in FIG. Additional information (A) is associated with the data.

制御部11は、CPU(Central Processing Unit)等のプログラム制御デバイスであり、記憶部12に格納されたプログラムに従って動作する。本実施の形態では、この制御部11は、撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れる受入手段として機能する。また、この制御部11は、当該処理対象として受け入れた写真画像データの撮影日時及び撮影場所を取得する。そして制御部11は、データベース2に保持された写真画像データのうち、処理対象の写真画像データから取得した撮影日時及び撮影場所との差が、それぞれ所定範囲にある撮影日時及び撮影場所を含む写真画像データを探索対象として設定し、当該探索対象として設定した写真画像データに関連付けられた付加情報を取得し、取得した付加情報のうち所定の条件を満足する付加情報を選択し、当該選択した付加情報を処理対象となった写真画像に関連付けて記憶する手段として機能する。この制御部11の詳しい動作の内容については、後に述べる。   The control unit 11 is a program control device such as a CPU (Central Processing Unit) and operates according to a program stored in the storage unit 12. In the present embodiment, the control unit 11 functions as a receiving unit that accepts photographic image data including a shooting location and a shooting date and time as a processing target. In addition, the control unit 11 acquires the shooting date and the shooting location of the photographic image data received as the processing target. And the control part 11 is a photograph including the shooting date and time and the shooting location in which the difference between the shooting date and the shooting location acquired from the processing target photo image data is within a predetermined range among the photographic image data held in the database 2. Set image data as a search target, acquire additional information associated with the photo image data set as the search target, select additional information satisfying a predetermined condition from the acquired additional information, and select the selected additional It functions as a means for storing information in association with a photographic image to be processed. Details of the operation of the control unit 11 will be described later.

記憶部12は、メモリデバイス等であり、制御部11によって実行されるプログラムを保持する。この記憶部12はまた、制御部11のワークメモリとしても機能する。本実施の形態のある例では、この記憶部12には、写真画像データが、付加情報に関連付けられて保持されていてもよい。   The storage unit 12 is a memory device or the like and holds a program executed by the control unit 11. The storage unit 12 also functions as a work memory for the control unit 11. In an example of the present embodiment, the storage unit 12 may hold photographic image data in association with additional information.

操作部13は、ポインティングデバイスや、キーボード、あるいはリモートコントローラからの信号受信する受信器であり、利用者からの指示操作を受け入れて、制御部11に当該指示操作の内容を出力する。   The operation unit 13 is a receiver that receives a signal from a pointing device, a keyboard, or a remote controller. The operation unit 13 receives an instruction operation from the user and outputs the content of the instruction operation to the control unit 11.

表示部14は、例えばディスプレイあるいはテレビ受像機のインタフェースである。この表示部14は、制御部11から入力される指示に従って、ディスプレイあるいはテレビ受像機に対して当該指示された画像を出力する。   The display unit 14 is, for example, a display or an interface of a television receiver. The display unit 14 outputs the instructed image to the display or the television receiver in accordance with the instruction input from the control unit 11.

通信部15は、ネットワークインタフェース等であり、ネットワークを介して受信したデータを制御部11に出力する。またこの通信部15は、制御部11から入力される指示に従って、種々のデータをネットワークを介して、指示された宛先に対して送出する。   The communication unit 15 is a network interface or the like, and outputs data received via the network to the control unit 11. The communication unit 15 sends various data to the instructed destination via the network in accordance with the instruction input from the control unit 11.

次に、本実施の形態の一例に係る制御部11の動作について述べる。本実施の形態の制御部11は、機能的には、図3に例示するように、受入部21と、探索対象設定部22と、付加情報取得部23と、選択部24と、関連付け部25とを含んで構成される。   Next, the operation of the control unit 11 according to an example of the present embodiment will be described. Functionally, the control unit 11 according to the present embodiment functionally includes a receiving unit 21, a search target setting unit 22, an additional information acquisition unit 23, a selection unit 24, and an association unit 25 as illustrated in FIG. It is comprised including.

受入部21は、撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れる。探索対象設定部22は、処理対象となった写真画像データに含まれる撮影場所と撮影日時とを読み出す。またこの探索対象設定部22は、データベース2にアクセスし、当該処理対象となった写真画像データから読み出した撮影日時との差が所定範囲にある撮影日時の情報を含み、かつ、当該処理対象となった写真画像データから読み出した撮影場所との差が所定範囲にある撮影場所の情報を含む写真画像データを、データベース2に保持されている写真画像データのうちから抽出する。そしてこの探索対象設定部22は、当該抽出した写真画像データを探索対象として設定する。   The receiving unit 21 receives photographic image data including a shooting location and a shooting date and time as a processing target. The search target setting unit 22 reads the shooting location and the shooting date / time included in the photographic image data to be processed. The search target setting unit 22 accesses the database 2 and includes information on the shooting date and time that is within a predetermined range from the shooting date and time read from the photographic image data that is the processing target. The photographic image data including the information on the photographic location whose difference from the photographic location read from the photographic image data is within a predetermined range is extracted from the photographic image data held in the database 2. The search target setting unit 22 sets the extracted photographic image data as a search target.

具体的に、ここでの撮影日時に係る所定範囲や、撮影場所に係る所定範囲は、予め設定されたものとしておいてもよい。例えば撮影日時に係る所定範囲を12時間、撮影場所に係る所定範囲を2kmなどと設定しておいてもよい。このようにすると、処理対象となった写真画像データの撮影日時との差が12時間以内である撮影日時の情報を含み、かつ、処理対象となった写真画像データの撮影場所との差が2km以内である撮影場所の情報を含んだ写真画像データが、探索対象として、データベース2から選び出されることとなる。   Specifically, the predetermined range related to the shooting date and time and the predetermined range related to the shooting location may be set in advance. For example, the predetermined range related to the shooting date and time may be set to 12 hours, and the predetermined range related to the shooting location may be set to 2 km. In this way, the information on the shooting date and time that is within 12 hours is included in the difference between the shooting date and time of the photographic image data to be processed, and the difference from the shooting location of the photographic image data to be processed is 2 km. The photographic image data including the shooting location information within the range is selected from the database 2 as a search target.

付加情報取得部23は、当該探索対象として設定した写真画像データに関連付けられた付加情報を取得して選択部24に出力する。選択部24では、付加情報取得部23が取得した付加情報のうち所定の条件を満足する付加情報を選択して、関連付け部25に出力する。ここで所定の条件は、例えば、出現頻度が所定しきい値より高いことを条件としてもよい。   The additional information acquisition unit 23 acquires additional information associated with the photographic image data set as the search target and outputs the additional information to the selection unit 24. The selection unit 24 selects additional information satisfying a predetermined condition from the additional information acquired by the additional information acquisition unit 23 and outputs the selected additional information to the association unit 25. Here, for example, the predetermined condition may be that the appearance frequency is higher than a predetermined threshold value.

一例として、探索対象として選択された写真画像データに関連づけられている付加情報のうちに「XX川の河原」が2回出現し、「花火大会」が6回出現したとする。このときしきい値が「4」と設定されているならば、選択部24は「花火大会」の付加情報を選択して出力することとなる。   As an example, it is assumed that “XX River Kawahara” appears twice and “Fireworks Festival” appears six times in the additional information associated with the photo image data selected as the search target. At this time, if the threshold value is set to “4”, the selection unit 24 selects and outputs the additional information of “Fireworks display”.

関連付け部25は、選択部24が出力する付加情報を、処理対象となった写真画像データに関連付けて、記憶部12等、予め定められている記録先に格納する。   The associating unit 25 associates the additional information output from the selecting unit 24 with the photographic image data to be processed and stores it in a predetermined recording destination such as the storage unit 12.

本実施の形態の写真画像処理装置1は以上のように構成されており、次のように動作する。なお、以下の例では、データベース2には、少なくとも、2012年8月10日にXX川のY河原で撮影された鳥の写真Pa,及び花火大会の写真Pb,Pc,Pd,Peと、2012年8月17日にXX川のY河原で撮影された釣り大会の写真Pf,Pg,Ph,Piと、8月10日に、XX川の河原から2km以上離れたZ町で開催された別の花火大会の写真Pj,Pkとが格納されているものとする。また、PaからPkにはそれぞれ付加情報として、
Pa:XX川Y河原,鳥の写真
Pb,Pc,Pd:XX川Y河原,花火大会
Pe:XX川Y河原,花火大会,Y河原橋遠景
Pf,Pg,Ph,Pi:XX川Y河原,釣り大会
Pj,Pk:Z町,花火大会
といった情報が関連付けられているものとする。
The photographic image processing apparatus 1 of the present embodiment is configured as described above and operates as follows. In the following example, the database 2 includes at least a picture Pa of a bird photographed in the Y river field of the XX river on August 10, 2012, and pictures Pb, Pc, Pd, Pe of a fireworks display 2012. A picture of the fishing tournament, Pf, Pg, Ph, Pi, taken on August 17th in the Y River on the XX River, and another on August 10th in Z Town, more than 2 km away from the River XX River It is assumed that photos Pj and Pk of the fireworks display are stored. Further, Pa to Pk have additional information as
Pa: XX river Y Kawahara, bird photos Pb, Pc, Pd: XX river Y Kawahara, fireworks display Pe: XX river Y Kawahara, fireworks display, Y Kawarabashi distant view Pf, Pg, Ph, Pi: XX river Y Kawahara, Assume that information such as fishing tournaments Pj, Pk: Z town, fireworks display is associated.

本実施の形態の写真画像処理装置1は、図4に示すように、利用者から、2012年8月10日に、XX川のY河原で撮影した写真画像データPrを処理対象として受け入れると(S1)、この受け入れた写真画像データPrに含まれる撮影日時Rdと撮影場所Rlの情報とを取得する(S2)。   As shown in FIG. 4, the photographic image processing apparatus 1 according to the present embodiment receives, as a processing target, photographic image data Pr photographed on the Y riverbank of the XX river on August 10, 2012 from a user ( S1), the photographing date and time Rd and the information of the photographing location Rl included in the accepted photographic image data Pr are acquired (S2).

写真画像処理装置1は、取得した撮影日時Rdを用いて、最小値Rd-ΔD、最大値Rd+ΔDを撮影日時範囲として設定し、また取得した撮影場所Rlを用いて、Rlを中心としてΔLの範囲を撮影場所範囲として設定する(S3)。   The photographic image processing apparatus 1 sets the minimum value Rd−ΔD and the maximum value Rd + ΔD as the shooting date / time range using the acquired shooting date / time Rd, and uses the acquired shooting location Rl to set a range of ΔL around Rl. Is set as the shooting location range (S3).

写真画像処理装置1は、データベース2に格納されている写真画像データのうち、含まれている撮影日時が設定された撮影日時範囲内にあり、かつ、含まれている撮影場所が、設定された撮影場所範囲にある写真画像データを探索対象として抽出する(S4)。ここでΔDを24時間、ΔLを2kmと設定しておくと、データベース2からは、写真画像データPa,Pb,Pc,Pd,Peが抽出される。   The photographic image processing apparatus 1 includes the photographic image data stored in the database 2 within the photographic date / time range in which the included photographic date / time is set, and the included photographic location is set. Photo image data in the shooting location range is extracted as a search target (S4). Here, when ΔD is set to 24 hours and ΔL is set to 2 km, photographic image data Pa, Pb, Pc, Pd, and Pe are extracted from the database 2.

そして写真画像処理装置1は、探索対象として抽出された写真画像データに関連付けられている付加情報について、出現頻度を調べる(S5)。上記の例では、「XX川Y河原」が、写真画像データPa,Pb,Pc,Pd,Peに関連付けられているため出現頻度「5」となり、「花火大会」が写真画像データPb,Pc,Pd,Peに関連付けられているため出現頻度「4」となり、「鳥の写真」及び「Y河原橋遠景」は、それぞれ写真画像データPa,Peにのみ関連付けられているために出現頻度は「1」となる。   Then, the photographic image processing apparatus 1 checks the appearance frequency of the additional information associated with the photographic image data extracted as the search target (S5). In the above example, “XX River Y Kawara” is associated with the photographic image data Pa, Pb, Pc, Pd, Pe, so the appearance frequency is “5”, and “Fireworks Festival” is the photographic image data Pb, Pc, The appearance frequency is “4” because it is associated with Pd and Pe, and the appearance frequency is “1” because “bird photo” and “Y Kawarabashi distant view” are associated only with the photographic image data Pa and Pe, respectively. "

写真画像処理装置1は、予め定めてあるしきい値Tt(例えば「4」とする)を超える(例えばそれ以上とする)出現頻度で現れる付加情報を選択する(S6)。ここではしきい値Tt=「4」以上で出現する付加情報として、「XX川Y河原」(出現頻度5)と、「花火大会」(出現頻度4)とが選択される。   The photographic image processing apparatus 1 selects additional information that appears with an appearance frequency that exceeds (for example, exceeds) a predetermined threshold value Tt (for example, “4”) (S6). Here, “XX river Y Kawara” (appearance frequency 5) and “fireworks display” (appearance frequency 4) are selected as additional information that appears when the threshold value Tt = “4” or more.

写真画像処理装置1は、ここで選択した付加情報、「XX川Y河原」及び「花火大会」を処理対象となった写真画像データPrに関連付けて(S7)、記憶部12に格納する。   The photographic image processing apparatus 1 stores the additional information selected here, “XX River Y Kawara” and “Fireworks Display” in the storage unit 12 in association with the photographic image data Pr to be processed (S7).

なお、ここでは出現頻度に基づいて付加情報を選択したが、本実施の形態はこれに限られない。例えば、花火大会が行われている近傍で、花火大会とは関わりなく「花」の写真を数多く撮影している個人がいた場合には、付加情報として「花」が選択されてしまう場合もあり得る。そこで出現頻度ではなく、付加情報ごとに、当該付加情報に関連付けられた写真画像データを撮影した撮影者の人数を演算し、当該人数が所定のしきい値Tt_pより高い付加情報を選択することとしてもよい。   Although the additional information is selected here based on the appearance frequency, the present embodiment is not limited to this. For example, if there is an individual who has taken many photos of “flowers” in the vicinity of the fireworks display, regardless of the fireworks display, “flowers” may be selected as additional information. obtain. Therefore, instead of the appearance frequency, for each additional information, the number of photographers who photographed the photographic image data associated with the additional information is calculated, and the additional information is selected to be higher than a predetermined threshold value Tt_p. Also good.

この例では、写真画像データには撮影者の情報が含まれるものとする(撮影者の情報は撮影者名ではなく、カメラの機種名等、撮像装置の情報であってもよい)。例えば上記の例で花火大会の写真Pb,Pc,Pd,Peがそれぞれ別の(花火大会に来場した)撮影者により撮影された写真であるとする。また2012年8月10日にXX川のY河原から2km以内の場所である1名の撮影者により撮影され、付加情報「花」に関連付けられた15件の写真画像データがデータベース2に格納されていたとする。この場合、「花火大会」の付加情報に関連付けられた写真画像データの撮影者の人数は4、「花」に関連付けられた写真画像データの撮影者の人数は1となり、例えばしきい値Tt_pを「4以上」としておくと、「花」の付加情報は選択されず、「花火大会」の付加情報が選択される。そしてこの選択された「花火大会」の付加情報が、写真画像処理装置1により、処理対象の写真画像データPrに関連付けて記録される。   In this example, it is assumed that the photographer image data includes photographer information (the photographer information may not be the photographer name but may be information on the imaging device such as the camera model name). For example, in the above example, it is assumed that the pictures Pb, Pc, Pd, and Pe of the fireworks display are photographs taken by different photographers (who visited the fireworks display). On August 10, 2012, 15 photograph image data taken by one photographer who is within 2 km from the Y river in the XX river and associated with the additional information “flower” are stored in the database 2. Suppose that In this case, the number of photographers of photographic image data associated with the additional information of “Fireworks” is 4, and the number of photographers of photographic image data associated with “flowers” is 1. For example, the threshold value Tt_p is set to If “4 or more” is set, the additional information of “flower” is not selected, but the additional information of “fireworks display” is selected. The additional information of the selected “fireworks display” is recorded by the photographic image processing apparatus 1 in association with the photographic image data Pr to be processed.

さらに本実施の形態のある例では、探索対象を設定する際の撮影日時や撮影場所に係る所定範囲を、データベース2に保持された写真画像データの撮影者の数に基づいて定めてもよい。具体的には撮影者の数が多いほど、所定範囲を狭く設定してもよい。   Furthermore, in an example of the present embodiment, the predetermined range related to the shooting date and time and the shooting location when setting the search target may be determined based on the number of photographers of the photographic image data held in the database 2. Specifically, the predetermined range may be set narrower as the number of photographers increases.

具体的には、写真画像処理装置1は、撮影日時及び撮影場所の所定範囲の初期値Dini,Liniを予め設定しておく。写真画像処理装置1は、図4に例示した処理S3,S4に代えて図5に例示する処理を行う。すなわち、写真画像処理装置1は、当初はΔD=Dini、ΔL=Liniとして、図4での処理S2で取得した撮影日時Rdを用いて、最小値Rd-ΔD、最大値Rd+ΔDを撮影日時範囲として設定し、また図4での処理S2で取得した撮影場所Rlを用いて、Rlを中心としてΔLの範囲を撮影場所範囲として設定する(S11)。   Specifically, the photographic image processing apparatus 1 sets in advance initial values Dini and Lini of a predetermined range of shooting date and time and shooting location. The photographic image processing apparatus 1 performs the process illustrated in FIG. 5 instead of the processes S3 and S4 illustrated in FIG. That is, the photographic image processing apparatus 1 initially sets ΔD = Dini and ΔL = Lini, and uses the shooting date / time Rd acquired in step S2 in FIG. 4 as the shooting date / time range with the minimum value Rd−ΔD and the maximum value Rd + ΔD. In addition, using the shooting location Rl acquired in the process S2 in FIG. 4, a range of ΔL centering on Rl is set as the shooting location range (S11).

写真画像処理装置1は、データベース2に格納されている写真画像データのうち、含まれている撮影日時が設定された撮影日時範囲内にあり、かつ、含まれている撮影場所が、設定された撮影場所範囲にある写真画像データを探索対象として抽出し(S12)、抽出した探索対象が予め定めた条件を満足するか否かを調べる(S13)。ここで、抽出した探索対象が予め定めた条件を満足するならば(Yesならば)、写真画像処理装置1は、図4の処理S5に処理を移行する。   The photographic image processing apparatus 1 includes the photographic image data stored in the database 2 within the photographic date / time range in which the included photographic date / time is set, and the included photographic location is set. Photo image data within the shooting location range is extracted as a search target (S12), and it is checked whether or not the extracted search target satisfies a predetermined condition (S13). Here, if the extracted search target satisfies a predetermined condition (if Yes), the photographic image processing apparatus 1 shifts the processing to step S5 in FIG.

また抽出した探索対象が予め定めた条件を満足しない場合(Noの場合)は、写真画像処理装置1は、後述する所定の方法でΔD、またはΔLの少なくとも一方を変更するとともに、図4での処理S2で取得した撮影日時Rdを用いて、最小値Rd-ΔD、最大値Rd+ΔDを撮影日時範囲として設定し、また図4での処理S2で取得した撮影場所Rlを用いて、Rlを中心としてΔLの範囲を撮影場所範囲として設定する(S14)。そして処理S12に戻って処理を続ける。   If the extracted search target does not satisfy a predetermined condition (in the case of No), the photographic image processing apparatus 1 changes at least one of ΔD and ΔL by a predetermined method described later, and also in FIG. The minimum value Rd−ΔD and the maximum value Rd + ΔD are set as the shooting date / time range by using the shooting date / time Rd acquired in the process S2, and the shooting location R1 acquired in the process S2 in FIG. The range of ΔL is set as the shooting location range (S14). And it returns to process S12 and continues a process.

ここで処理S13における条件は、例えば探索対象として抽出された写真画像データの数が予め定めた件数しきい値を超えたか否かの条件であってもよい。また、写真画像データに撮影者の情報が含まれる(撮影者の情報は撮影者名ではなく、カメラの機種名等、撮像装置の情報であってもよい)場合は、上記の条件は、探索対象として抽出された写真画像データの撮影者の数が予め定めた人数しきい値を超えたか否かの条件であってもよい。   Here, the condition in step S13 may be, for example, a condition as to whether or not the number of photographic image data extracted as a search target has exceeded a predetermined number threshold. If the photographer's information is included in the photographic image data (the photographer's information is not the photographer's name but may be the information of the imaging device such as the model name of the camera), the above condition is the search It may be a condition as to whether or not the number of photographers of the photographic image data extracted as the target exceeds a predetermined number threshold.

また処理S14におけるΔD、またはΔLの調整方法は、例えば次のようにすればよい。すなわち写真画像処理装置1は、処理S13において探索対象として抽出された写真画像データの数が予め定めた件数しきい値Tminを超えていなければ、現在のΔLに、予め定めておいた数Linclを加算してΔLを更新する。あるいは、写真画像処理装置1は、処理S13において探索対象として抽出された写真画像データの撮影者の数が予め定めた人数しきい値Tp_minを超えていなければ、現在のΔLに、予め定めておいた数Linclを加算してΔLを更新してもよい。また、ΔLではなく、ΔDに予め定めた数Dinclを加算してΔDを更新してもよいし、ΔL,ΔDに、それぞれ予め定めた数であるLincl,Dinclを加算してそれぞれを更新してもよい。   Moreover, the adjustment method of ΔD or ΔL in step S14 may be as follows, for example. That is, if the number of photographic image data extracted as search targets in step S13 does not exceed the predetermined number threshold Tmin, the photographic image processing apparatus 1 sets the predetermined number Lincl to the current ΔL. Add and update ΔL. Alternatively, if the number of photographers of the photographic image data extracted as the search target in process S13 does not exceed the predetermined number of people threshold value Tp_min, the photographic image processing apparatus 1 sets the current ΔL in advance. ΔL may be updated by adding the existing number Lincl. Alternatively, ΔD may be updated by adding a predetermined number Dincl to ΔD instead of ΔL, or each predetermined number of Lincl and Dincl may be added to ΔL and ΔD to update each. Also good.

さらに処理S13における条件として、探索対象として抽出された写真画像データの数が予め定めた最大件数しきい値Tmaxを超えたか否かの条件であってもよい。探索対象として抽出された写真画像データの数が予め定めた最大件数しきい値Tmaxを超えた場合、処理S14において写真画像処理装置1は、現在のΔLに予め定めておいた数r(0<r<1とする)を乗じてΔLを更新してもよい。あるいは、写真画像処理装置1は、処理S13において探索対象として抽出された写真画像データの撮影者の数が予め定めた最大人数しきい値Tp_maxを超えていれば、現在のΔLに、予め定めておいた数r(0<r<1とする)を乗じてΔLを更新してもよい。また、ΔLではなく、ΔDに予め定めた数rd(0<rd<1とする)を乗じてΔDを更新してもよいし、ΔL,ΔDに、それぞれ予め定めた数であるr,rd(0<r,rd<1とする)を加算してそれぞれを更新してもよい。   Further, the condition in the process S13 may be a condition as to whether or not the number of photographic image data extracted as a search target exceeds a predetermined maximum number threshold Tmax. When the number of photographic image data extracted as a search target exceeds a predetermined maximum number threshold Tmax, the photographic image processing apparatus 1 in process S14 determines a number r (0 < ΔL may be updated by multiplying by r <1). Alternatively, if the number of photographers of the photographic image data extracted as the search target in process S13 exceeds the predetermined maximum number of people threshold value Tp_max, the photographic image processing apparatus 1 sets the current ΔL to a predetermined value. ΔL may be updated by multiplying the number r (0 <r <1). Alternatively, ΔD may be updated by multiplying ΔD by a predetermined number rd (0 <rd <1) instead of ΔL, or ΔL and ΔD may be respectively predetermined numbers r, rd ( Each may be updated by adding (0 <r, rd <1).

さらにΔD,ΔLが際限なく大きくなる場合、あるいはΔD,ΔLがあまりにも小さくなる場合に対処するため、処理S14において調整したΔD,ΔLがそれぞれについて予め定められた範囲ΔDminからΔDmax、並びにΔLminからΔLmaxを逸脱する場合には、その時点で図4の処理S5に移行することとしてもよい。   Further, in order to cope with the case where ΔD and ΔL are infinitely increased or the case where ΔD and ΔL are too small, ΔD and ΔL adjusted in step S14 are predetermined ranges ΔDmin to ΔDmax and ΔLmin to ΔLmax, respectively. 4 may be shifted to step S5 in FIG. 4 at that time.

さらに図5に例示した処理を行う場合の範囲ΔDminからΔDmax、並びにΔLminからΔLmax、あるいはDincl,Lincl,r,rd、またはTmin,Tmax,Tp_min,Tp_maxは、抽出情報に含まれるタグ情報に応じて異ならされてもよい。   Further, the ranges ΔDmin to ΔDmax and ΔLmin to ΔLmax, or Dincl, Lincl, r, rd, or Tmin, Tmax, Tp_min, Tp_max when performing the processing illustrated in FIG. 5 are performed according to the tag information included in the extraction information. May be different.

一例として、本実施の形態の写真画像処理装置1は、予め定めた付加情報分類ごとにDincl,Lincl等の値を関連付けたデータテーブルを記憶しておいてもよい。この場合、写真画像処理装置1は次のように処理を行う。すなわち、図6に例示するように、利用者から写真画像データPrを処理対象として受け入れると(S21)、この受け入れた写真画像データPrに含まれる撮影日時Rdと撮影場所Rlの情報とを取得する(S22)。   As an example, the photographic image processing apparatus 1 of the present embodiment may store a data table in which values such as Dincl and Lincl are associated with each predetermined additional information classification. In this case, the photographic image processing apparatus 1 performs processing as follows. That is, as illustrated in FIG. 6, when photographic image data Pr is accepted as a processing target from a user (S21), information on the photographing date and time Rd and the photographing location Rl included in the accepted photographic image data Pr is acquired. (S22).

また写真画像処理装置1は、当初はΔD=Dini、ΔL=Liniとして、上記処理S22で取得した撮影日時Rdを用いて、最小値Rd-ΔD、最大値Rd+ΔDを撮影日時範囲として設定し、また取得した撮影場所Rlを用いて、Rlを中心としてΔLの範囲を撮影場所範囲として設定する(S23)。   Further, the photographic image processing apparatus 1 initially sets ΔD = Dini and ΔL = Lini, sets the minimum value Rd−ΔD and the maximum value Rd + ΔD as the shooting date / time range using the shooting date / time Rd acquired in the processing S22, and Using the acquired shooting location Rl, a range of ΔL centering on Rl is set as the shooting location range (S23).

写真画像処理装置1は、データベース2に格納されている写真画像データのうち、含まれている撮影日時が設定された撮影日時範囲内にあり、かつ、含まれている撮影場所が、設定された撮影場所範囲にある写真画像データを探索対象として抽出する(S24)。そして抽出した探索対象が予め定めた条件を満足するか否かを調べる(S25)。ここで、抽出した探索対象が予め定めた条件を満足するならば(Yesならば)、写真画像処理装置1は、探索対象として抽出された写真画像データに関連付けられている付加情報について、出現頻度を調べる(S26)。   The photographic image processing apparatus 1 includes the photographic image data stored in the database 2 within the photographic date / time range in which the included photographic date / time is set, and the included photographic location is set. Photo image data within the shooting location range is extracted as a search target (S24). Then, it is checked whether or not the extracted search target satisfies a predetermined condition (S25). Here, if the extracted search target satisfies a predetermined condition (if Yes), the photographic image processing apparatus 1 uses the appearance frequency for the additional information associated with the photographic image data extracted as the search target. (S26).

この処理S25における条件は、例えば探索対象として抽出された写真画像データの数が予め定めた件数しきい値を超えたか否かの条件であってもよい。また、写真画像データに撮影者の情報が含まれる(撮影者の情報は撮影者名ではなく、カメラの機種名等、撮像装置の情報であってもよい)場合は、上記の条件は、探索対象として抽出された写真画像データの撮影者の数が予め定めた人数しきい値を超えたか否かの条件であってもよい。   The condition in this process S25 may be, for example, a condition as to whether or not the number of photographic image data extracted as a search target has exceeded a predetermined number threshold. If the photographer's information is included in the photographic image data (the photographer's information is not the photographer's name but may be the information of the imaging device such as the model name of the camera), the above condition is the search It may be a condition as to whether or not the number of photographers of the photographic image data extracted as the target exceeds a predetermined number threshold.

写真画像処理装置1は、予め定めてあるしきい値Ttを超える(例えばしきい値Tt以上とする)出現頻度で現れる付加情報を選択する(S27)。そして写真画像処理装置1は、当該選択した付加情報を処理対象となった写真画像データPrに関連付けて(S28)、記憶部12に格納する。   The photographic image processing apparatus 1 selects additional information that appears with an appearance frequency exceeding a predetermined threshold value Tt (eg, not less than the threshold value Tt) (S27). Then, the photographic image processing apparatus 1 associates the selected additional information with the photographic image data Pr to be processed (S28) and stores it in the storage unit 12.

一方、処理S25において、抽出した探索対象が予め定めた条件を満足しない場合(Noの場合)は、写真画像処理装置1は、探索対象として抽出した写真画像データに関連付けられている付加情報を取り出す(S29)。   On the other hand, if the extracted search target does not satisfy the predetermined condition in the process S25 (No), the photo image processing apparatus 1 takes out additional information associated with the photo image data extracted as the search target. (S29).

そして写真画像処理装置1は、当該取り出した付加情報を、予め定めた付加情報分類のいずれかに分類する(S30)。この分類の方法は、種々の方法を採用できるが、一例としては、「イベント」,「店舗名」等といった付加情報分類(文字列でよい)のそれぞれに対して、当該付加情報分類に分類されるべき付加情報の文字列(複数)を関連付けたデータを用い、写真画像処理装置1がこのデータを参照して、取り出した付加情報のそれぞれに関連付けられた付加情報分類を取り出すこととすればよい。この、写真画像処理装置1が参照するデータは、いわば代表的な語(付加情報分類を表す)に対して、互いに類似する語を関連付けたシソーラスデータである。   The photographic image processing apparatus 1 classifies the extracted additional information into one of predetermined additional information classifications (S30). Various methods can be used as this classification method. For example, each of the additional information classifications (which may be character strings) such as “event” and “store name” is classified into the additional information classification. The data associated with the character string of the additional information to be used is used, and the photographic image processing apparatus 1 refers to this data and extracts the additional information classification associated with each of the extracted additional information. . The data referred to by the photographic image processing apparatus 1 is so-called thesaurus data in which words similar to each other are associated with typical words (representing additional information classification).

写真画像処理装置1は、処理S30で得られた付加情報分類を順次、注目付加情報分類として選択し(S31)、注目付加情報分類について、次の図7に示す付加情報取得処理を行う(S32)。   The photographic image processing apparatus 1 sequentially selects the additional information classification obtained in step S30 as the attention additional information classification (S31), and performs the additional information acquisition process shown in FIG. 7 for the attention additional information classification (S32). ).

すなわち写真画像処理装置1は、付加情報取得処理として、データテーブルを参照して、注目付加情報分類に関連付けられているDincl,Lincl等の値を読み出す(S41)。   That is, the photographic image processing apparatus 1 reads values such as Dincl and Lincl associated with the attention additional information classification with reference to the data table as additional information acquisition processing (S41).

写真画像処理装置1は、例えば現在のΔLに対応する一時的なΔLtmpを生成し、ΔLtmp=ΔLとする。そして写真画像処理装置1は、処理S41で読出したLinclをΔLtmpに加算する(S42)。また写真画像処理装置1は、現在のΔDにに対応する一時的なΔDtmpを生成し、ΔDtmp=ΔDとする。そして処理S41で読出したDinclを加算してΔDtmpを更新することとしてもよい。さらに写真画像処理装置1は、ΔLtmp,ΔDtmpに、それぞれ処理S41で読出したLincl,Dinclを加算してそれぞれを更新してもよい。   For example, the photographic image processing apparatus 1 generates a temporary ΔLtmp corresponding to the current ΔL, and sets ΔLtmp = ΔL. The photographic image processing apparatus 1 adds Lincl read in step S41 to ΔLtmp (S42). The photographic image processing apparatus 1 generates a temporary ΔDtmp corresponding to the current ΔD, and sets ΔDtmp = ΔD. The Dincl read in step S41 may be added to update ΔDtmp. Further, the photographic image processing apparatus 1 may update each of the ΔLtmp and ΔDtmp by adding the Lincl and Dincl read in step S41.

写真画像処理装置1は、注目付加情報分類について、処理S42で得られたΔLtmp,ΔDtmpと、処理S22で取得した撮影日時Rdを用いて、最小値Rd-ΔDtmp、最大値Rd+ΔDtmpを撮影日時範囲として設定し、また取得した撮影場所Rlを用いて、Rlを中心としてΔLtmpの範囲を撮影場所範囲として設定し、データベース2に格納されている写真画像データのうち、含まれている撮影日時が設定された撮影日時範囲内にあり、かつ、含まれている撮影場所が、設定された撮影場所範囲にある写真画像データを探索対象として抽出する(S43)。そして抽出した探索対象が予め定めた条件を満足するか否かを調べる(S44)。ここでの条件は処理S25における条件と同じで構わない。写真画像処理装置1は、ここで、抽出した探索対象が予め定めた条件を満足するならば(Yesならば)、写真画像処理装置1は、探索対象として抽出された写真画像データに関連付けられている付加情報のうち、注目付加情報分類に分類される付加情報について、出現頻度を調べる(S45)。そして写真画像処理装置1は、予め定めてあるしきい値Ttを超える(例えばしきい値Tt以上とする)出現頻度で現れる付加情報(注目付加情報分類に分類される付加情報)を選択して出力する(S46)。なお、しきい値Ttを超える出現頻度で現れる付加情報(注目付加情報分類に分類される付加情報)がなければ、処理S46では何も出力せず、付加情報取得処理を終了する。   The photographic image processing apparatus 1 uses the minimum value Rd−ΔDtmp and the maximum value Rd + ΔDtmp as the shooting date / time range by using ΔLtmp, ΔDtmp obtained in step S42 and the shooting date / time Rd acquired in step S22 for the attention additional information classification. Using the acquired shooting location Rl, the range of ΔLtmp centered on Rl is set as the shooting location range, and the shooting date and time included in the photo image data stored in the database 2 is set. The photograph image data within the shooting date and time range and the included shooting location is in the set shooting location range is extracted as a search target (S43). Then, it is checked whether or not the extracted search target satisfies a predetermined condition (S44). The conditions here may be the same as the conditions in step S25. Here, if the extracted search target satisfies a predetermined condition (if Yes), the photographic image processing apparatus 1 is associated with the photographic image data extracted as the search target. Of the additional information, the appearance frequency of the additional information classified into the attention additional information classification is examined (S45). Then, the photographic image processing apparatus 1 selects additional information (additional information classified into the attention additional information classification) that appears with an appearance frequency exceeding a predetermined threshold Tt (for example, greater than or equal to the threshold Tt). Output (S46). If there is no additional information that appears with an appearance frequency exceeding the threshold value Tt (additional information classified into the attention additional information classification), nothing is output in the process S46, and the additional information acquisition process is terminated.

一方、処理S44において抽出した探索対象が予め定めた条件を満足しないならば(Noならば)、処理S42に戻って処理を続ける。また、さらにΔDtmp,ΔLtmpが際限なく大きくなる場合、あるいはΔDtmp,ΔLtmpがあまりにも小さくなる場合に対処するため、処理S42において調整したΔDtmp,ΔLtmpがそれぞれについて予め定められた範囲(注目付加情報分類に関連して処理S41で読み出された値)ΔDminからΔDmax、並びにΔLminからΔLmaxを逸脱する場合には、その時点で処理S46に移行することとしてもよい。   On the other hand, if the search target extracted in the process S44 does not satisfy the predetermined condition (if No), the process returns to the process S42 to continue the process. Further, in order to cope with the case where ΔDtmp and ΔLtmp are infinitely increased or the case where ΔDtmp and ΔLtmp are too small, ΔDtmp and ΔLtmp adjusted in step S42 are predetermined ranges for each of the attention additional information classifications. If the value deviated from ΔDmin to ΔDmax and ΔLmin to ΔLmax), the process may proceed to step S46 at that time.

写真画像処理装置1は、この図7に例示した付加情報取得処理を、処理S30で得られた付加情報分類ごとに行い(ループし)、出力された付加情報を処理対象となった写真画像データPrに関連付けて(S33)、記憶部12に格納する。   The photographic image processing apparatus 1 performs the additional information acquisition process illustrated in FIG. 7 for each additional information classification obtained in process S30 (loops), and outputs the additional information as photographic image data to be processed. It is associated with Pr (S33) and stored in the storage unit 12.

この処理によると、例えば花火大会のような「屋外イベント」ならば時間範囲はたかだか2時間ほどであり、観覧できる地理的範囲は大きいと考えられ、絵画展のような「展覧会」ならば時間範囲は2週間ほどに亘るが、地理的範囲は小さいと考えられる。また、ラーメン屋等の「店舗」ならば時間範囲はなく、地理的範囲はかなり小さいと考えられる。そこで、付加情報分類「屋外イベント」については、Linclを比較的大きくし、また、ΔDmaxを定める場合は2、3時間程度を表す値としてデータテーブルに設定しておく。また付加情報分類「店舗」については、Dinclを比較的大きくし、また、ΔLmaxを定める場合は20メートル程度を表す値としてデータテーブルに設定しておくようにすればよい。   According to this process, if it is an “outdoor event” such as a fireworks display, the time range is at most about 2 hours, and the geographical range that can be viewed is considered large. The range spans about two weeks, but the geographic range is considered small. In addition, if it is a “store” such as a ramen shop, there is no time range and the geographical range is considered to be quite small. Therefore, for the additional information classification “outdoor event”, Lincl is set relatively large, and when ΔDmax is determined, it is set in the data table as a value representing about a few hours. For the additional information classification “store”, Dincl is set to be relatively large, and ΔLmax may be set in the data table as a value representing about 20 meters.

また本実施の形態のここまでの説明において、写真画像処理装置1は、データベースに保持されている写真画像データに関連付けられた付加情報であって、予め定めた禁止ワードに一致する付加情報については、出現頻度が所定しきい値Ttより高い場合であっても選択しないよう制御してもよい。具体的にここでいう禁止ワードは、「晴れ」、「雨」、「空」など、いつでも、また、どこででも付加され得るものとすればよい。これにより、いつでもどこででも設定され得るような付加情報が、処理対象となった写真画像データに付加されることで、意図しない付加情報が関連付けられる機会を低減できる。   In the above description of the present embodiment, the photographic image processing apparatus 1 has added information associated with the photographic image data stored in the database, and is additional information that matches a predetermined prohibited word. Even if the appearance frequency is higher than the predetermined threshold value Tt, it may be controlled not to select. Specifically, the prohibited word here may be added at any time and anywhere, such as “sunny”, “rain”, and “sky”. Thereby, the additional information that can be set anytime and anywhere is added to the photographic image data to be processed, thereby reducing the chance that the unintended additional information is associated.

また、本実施の形態の写真画像処理装置1は、ここまでに説明した例に限られるものではない。例えば、本実施の形態の写真画像処理装置1は予めデータベースに保持された写真画像データに関連付けられた付加情報ごとに、撮影場所や撮影日時の範囲を表す範囲情報に関連付けて範囲データベースとして記憶部12等に記録しておいてもよい。   Further, the photographic image processing apparatus 1 of the present embodiment is not limited to the examples described so far. For example, the photographic image processing apparatus 1 according to the present embodiment stores, for each additional information associated with photographic image data stored in advance in a database, as a range database in association with range information indicating a shooting location and a shooting date / time range. It may be recorded at 12 mag.

具体的にこの範囲データベースは、図8に例示するように、「X花火大会」に対して日時:「*/8/12;19時〜21時の範囲」,場所:「X川から1.5km範囲内」(ここで「*」は任意の値であることを意味する)との範囲情報が関連付けられる。また、「バーベキュー」に対して日時:「*/7/20〜*/8/31;12時〜18時の範囲」,場所:「Y河原から2km範囲内」との範囲情報が関連付けられ…といったようなものとなる。   Specifically, as illustrated in FIG. 8, this range database has a date and time of “X fireworks display”: “* / 8/12; a range from 19:00 to 21:00”, a place: “1. Range information such as “within 5 km range” (where “*” means an arbitrary value) is associated. Also, “BBQ” is associated with date / time: “* / 7/20 to * / 8/31; range from 12:00 to 18:00”, location: “within 2 km range from Y Kawahara” ... It will be something like that.

そしてこの例では、写真画像処理装置1は、図9に例示するように動作する。写真画像処理装置1は、利用者から写真画像データPrを処理対象として受け入れると(S51)、この受け入れた写真画像データPrに含まれる撮影日時Rdと撮影場所Rlの情報とを取得する(S52)。   In this example, the photographic image processing apparatus 1 operates as illustrated in FIG. When the photographic image processing apparatus 1 accepts the photographic image data Pr as a processing target from the user (S51), the photographic image processing apparatus 1 acquires the shooting date / time Rd and the information of the shooting location Rl included in the received photographic image data Pr (S52). .

写真画像処理装置1は、範囲データベースを参照し、処理S52で取得した撮影日時Rdと撮影場所Rlを含む日時の範囲及び場所の範囲を表す範囲情報を検索する(S53)。写真画像処理装置1は、この検索の結果、見出した範囲情報(複数あってもよい)に関連付けられる付加情報を範囲データベースから取得する(S54)。   The photographic image processing apparatus 1 refers to the range database and searches for the date / time range including the shooting date / time Rd and the shooting location R1 acquired in step S52 and the range information representing the location range (S53). As a result of this search, the photographic image processing apparatus 1 acquires, from the range database, additional information associated with the found range information (which may be plural) (S54).

そして写真画像処理装置1は、ここで取得した付加情報を処理対象となった写真画像データPrに関連付けて(S55)、記憶部12に格納する。   The photographic image processing apparatus 1 stores the additional information acquired here in the storage unit 12 in association with the photographic image data Pr to be processed (S55).

一例として範囲データベースが図8に例示したものである場合に、処理S51において受け入れた写真画像データPrに含まれる撮影日時Rdが「2012/7/31、14時」、撮影場所Rlが「Y河原」であるとする。このとき、この撮影日時Rd,撮影場所Rlは、「バーベキュー」に関連付けられた範囲情報「*/7/20〜*/8/31;12時〜18時の範囲」,場所:「Y河原から2km範囲内」に含まれるので、写真画像処理装置1は、この範囲情報に関連付けられた「バーベキュー」を付加情報として取得し、写真画像データPrに対してこの取得した「バーベキュー」の文字列を付加情報として関連付けて記憶する。   As an example, when the range database is the one illustrated in FIG. 8, the shooting date and time Rd included in the photographic image data Pr received in the process S51 is “2012/7/31, 14:00”, and the shooting location Rl is “Y Kawahara. ”. At this time, the shooting date / time Rd and shooting location Rl are the range information “* / 7/20 to * / 8/31; range from 12:00 to 18:00” associated with “barbecue”, location: “from Y Kawahara Since it is included in “2 km range”, the photographic image processing apparatus 1 acquires “barbecue” associated with the range information as additional information, and uses the acquired character string of “barbecue” for the photographic image data Pr. It is stored in association as additional information.

なお、この範囲データベースは、データベース2に格納された写真画像データに基づいて、人為的に生成してもよいし、データベース2に格納された写真画像データに基づいて、人為的操作なしに生成してもよい。   This range database may be generated artificially based on the photographic image data stored in the database 2, or generated without human operation based on the photographic image data stored in the database 2. May be.

具体的に人為的操作なしに生成する場合、データベース2に格納された写真画像データに含まれる付加情報と撮影日時、撮影場所の情報を統計的に、あるいはパターン認識処理により分析することで、範囲データベースを得ることができる。このための具体的な処理の内容は種々あり、広く知られている統計的処理、あるいはパターン認識処理を用いることができるため、ここでの詳しい説明は省略する。   Specifically, when generating without manual operation, additional information, shooting date and time, and shooting location information included in the photographic image data stored in the database 2 are analyzed statistically or by pattern recognition processing, You can get a database. There are various specific processing contents for this purpose, and widely known statistical processing or pattern recognition processing can be used. Therefore, detailed description thereof is omitted here.

1 写真画像処理装置、2 データベース、11 制御部、12 記憶部、13 操作部、14 表示部、15 通信部、21 受入部、22 探索対象設定部、23 付加情報取得部、24 選択部、25 関連付け部。
DESCRIPTION OF SYMBOLS 1 Photo image processing apparatus, 2 Database, 11 Control part, 12 Storage part, 13 Operation part, 14 Display part, 15 Communication part, 21 Reception part, 22 Search object setting part, 23 Additional information acquisition part, 24 Selection part, 25 Association section.

Claims (8)

写真画像データを保持するデータベースにアクセス可能な写真画像処理装置であって、前記写真画像データは撮影場所と撮影日時との情報を含み、付加情報が関連付けられており、
撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れる受入手段と、
前記データベースに保持された写真画像データのうち、前記処理対象となった写真画像データの撮影日時及び撮影場所との差がそれぞれ所定範囲にある撮影日時及び撮影場所を含む写真画像データを探索対象として設定し、探索対象として設定した写真画像データに関連付けられた付加情報を取得し、取得した付加情報のうちから出現頻度が所定しきい値より高い付加情報を選択し、当該選択した付加情報を前記処理対象となった写真画像に関連付ける手段と、
を含む写真画像処理装置。
A photographic image processing apparatus capable of accessing a database holding photographic image data, wherein the photographic image data includes information on a shooting location and a shooting date and time, and additional information is associated therewith,
A receiving means for accepting photographic image data including a shooting location and a shooting date and time as a processing target;
Of the photographic image data stored in the database, photographic image data including a shooting date and a shooting location in which the difference between the shooting date and the shooting location of the photographic image data to be processed is within a predetermined range, respectively, is searched. Set, acquire additional information associated with the photographic image data set as the search target, select additional information whose appearance frequency is higher than a predetermined threshold from the acquired additional information, and select the selected additional information Means for associating with the photographic image to be processed;
A photographic image processing apparatus.
写真画像データを保持するデータベースにアクセス可能な写真画像処理装置であって、前記写真画像データは撮影場所と撮影日時との情報を含み、付加情報が関連付けられており、
少なくとも撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れる受入手段と、
前記データベースに保持された写真画像データのうち、前記処理対象となった写真画像データの撮影日時、撮影場所との差がそれぞれ所定範囲にある撮影日時及び撮影場所を含む写真画像データを探索対象として設定し、探索対象として設定した写真画像データから付加情報と撮影者を特定する情報とを取得し、互いに異なる付加情報ごとに、各付加情報が関連付けられた写真画像データの撮影者の人数を演算し、当該人数が所定しきい値より高い付加情報を選択し、当該選択した付加情報を処理対象となった写真画像に関連付ける手段と、
を含む写真画像処理装置。
A photographic image processing apparatus capable of accessing a database holding photographic image data, wherein the photographic image data includes information on a shooting location and a shooting date and time, and additional information is associated therewith,
Receiving means for accepting at least photographic image data including a shooting location and shooting date and time as a processing target;
Of the photographic image data stored in the database, photographic image data including the photographic date and time and the photographic location where the difference between the photographic date and time and the photographic location of the photographic image data to be processed is within a predetermined range is set as a search target. The additional information and the information specifying the photographer are acquired from the photographic image data set and searched, and the number of photographers of the photographic image data associated with each additional information is calculated for each additional information different from each other. Means for selecting additional information in which the number of persons is higher than a predetermined threshold, and associating the selected additional information with a photographic image to be processed;
A photographic image processing apparatus.
請求項2記載の写真画像処理装置において、
前記探索対象を設定する際に、撮影場所に係る前記所定範囲は、前記データベースに保持された写真画像データの撮影者の数に基づいて定める。
The photographic image processing apparatus according to claim 2,
When the search target is set, the predetermined range related to the shooting location is determined based on the number of photographers of the photographic image data held in the database.
請求項2または3に記載の写真画像処理装置において、The photographic image processing apparatus according to claim 2 or 3,
前記撮影者を特定する情報は、撮影者名または撮影装置の情報である写真画像処理装置。The information for identifying the photographer is a photograph image processing apparatus that is information of a photographer name or a photographing apparatus.
請求項1からのいずれか一項に記載の写真画像処理装置において、
各付加情報を、予め定めた付加情報分類のいずれかに分類する手段を含み、
前記所定範囲は、各付加情報分類ごとに予め定められた範囲とする写真画像処理装置。
In the photographic image processing apparatus according to any one of claims 1 to 4 ,
Means for classifying each additional information into one of predetermined additional information classifications;
The photographic image processing apparatus, wherein the predetermined range is a range predetermined for each additional information classification.
請求項1からのいずれか一項に記載の写真画像処理装置において、
保持された写真画像データに関連付けられた付加情報のうち、予め定めた禁止ワードに一致する付加情報については、出現頻度が所定しきい値より高い場合でも選択しないよう制御する写真画像処理装置。
In the photographic image processing apparatus according to any one of claims 1 to 5 ,
A photographic image processing apparatus that controls to not select additional information that matches a predetermined prohibited word among additional information associated with held photographic image data even when the appearance frequency is higher than a predetermined threshold.
撮影場所と撮影日時との情報を含み、付加情報が関連付けられた写真画像データを保持するデータベースに、アクセス可能なコンピュータを、
撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れる受入手段と、
前記データベースに保持された写真画像データのうち、前記処理対象となった写真画像データの撮影日時及び撮影場所との差がそれぞれ所定範囲にある撮影日時及び撮影場所を含む写真画像データを探索対象として設定し、探索対象として設定した写真画像データに関連付けられた付加情報を取得し、取得した付加情報のうちから出現頻度が所定しきい値より高い付加情報を選択し、当該選択した付加情報を前記処理対象となった写真画像に関連付ける手段と、
として機能させるプログラム。
A computer that has access to a database that stores photographic image data that includes information on the shooting location and shooting date and time, and associated additional information.
A receiving means for accepting photographic image data including a shooting location and a shooting date and time as a processing target;
Of the photographic image data stored in the database, photographic image data including a shooting date and a shooting location in which the difference between the shooting date and the shooting location of the photographic image data to be processed is within a predetermined range, respectively, is searched. Set, acquire additional information associated with the photographic image data set as the search target, select additional information whose appearance frequency is higher than a predetermined threshold from the acquired additional information, and select the selected additional information Means for associating with the photographic image to be processed;
Program to function as.
撮影場所と撮影日時との情報を含み、付加情報が関連付けられた写真画像データを保持するデータベースに、アクセス可能なコンピュータを、
少なくとも撮影場所と撮影日時とを含む写真画像データを処理対象として受け入れる受入手段と、
前記データベースに保持された写真画像データのうち、前記処理対象となった写真画像データの撮影日時、撮影場所との差がそれぞれ所定範囲にある撮影日時及び撮影場所を含む写真画像データを探索対象として設定し、探索対象として設定した写真画像データから付加情報と撮影者を特定する情報とを取得し、互いに異なる付加情報ごとに、各付加情報が関連付けられた写真画像データの撮影者の人数を演算し、当該人数が所定しきい値より高い付加情報を選択し、当該選択した付加情報を処理対象となった写真画像に関連付ける手段と、
として機能させるプログラム。

A computer that has access to a database that stores photographic image data that includes information on the shooting location and shooting date and time, and associated additional information.
Receiving means for accepting at least photographic image data including a shooting location and shooting date and time as a processing target;
Of the photographic image data stored in the database, photographic image data including the photographic date and time and the photographic location where the difference between the photographic date and time and the photographic location of the photographic image data to be processed is within a predetermined range is set as a search target. The additional information and the information specifying the photographer are acquired from the photographic image data set and searched, and the number of photographers of the photographic image data associated with each additional information is calculated for each additional information different from each other. Means for selecting additional information in which the number of persons is higher than a predetermined threshold, and associating the selected additional information with a photographic image to be processed;
Program to function as.

JP2012288780A 2012-12-28 2012-12-28 Photo image processing apparatus and program Active JP6011335B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012288780A JP6011335B2 (en) 2012-12-28 2012-12-28 Photo image processing apparatus and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012288780A JP6011335B2 (en) 2012-12-28 2012-12-28 Photo image processing apparatus and program

Publications (2)

Publication Number Publication Date
JP2014130533A JP2014130533A (en) 2014-07-10
JP6011335B2 true JP6011335B2 (en) 2016-10-19

Family

ID=51408856

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012288780A Active JP6011335B2 (en) 2012-12-28 2012-12-28 Photo image processing apparatus and program

Country Status (1)

Country Link
JP (1) JP6011335B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6602245B2 (en) * 2016-03-18 2019-11-06 株式会社Nttドコモ Information processing device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007052581A (en) * 2005-08-17 2007-03-01 Sony Corp Metadata generation device, metadata generation system, processing method in them and program making computer execute the method
JP2008165303A (en) * 2006-12-27 2008-07-17 Fujifilm Corp Content registration device, content registration method and content registration program
JP5127554B2 (en) * 2008-05-08 2013-01-23 富士フイルム株式会社 Keyword setting method, program and apparatus
JP2011188171A (en) * 2010-03-08 2011-09-22 Panasonic Corp Digital photograph data processing apparatus, digital photograph data server, digital photograph data processing system and digital photograph data processing method

Also Published As

Publication number Publication date
JP2014130533A (en) 2014-07-10

Similar Documents

Publication Publication Date Title
EP2380093B1 (en) Generation of annotation tags based on multimodal metadata and structured semantic descriptors
JP5006195B2 (en) Image data management apparatus and image data management method
JP5371224B2 (en) Map display method, map display system, and map display program
KR20090087670A (en) Method and system for extracting the photographing information
US20050185861A1 (en) Digital pictorial book system, pictorial book searching method, and machine readable medium storing thereon pictorial book searching program
JP2006072614A (en) Image file preservation method and related technology thereof
JP2007027945A (en) Photographing information presenting system
US20070070217A1 (en) Image analysis apparatus and image analysis program storage medium
KR20100003898A (en) Method of controlling image processing apparatus, image processing apparatus and image file
JP5223034B2 (en) Information providing apparatus, information providing method, information providing processing program, and recording medium on which information providing processing program is recorded
JP5096863B2 (en) Search device
US20140059079A1 (en) File search apparatus, file search method, image search apparatus, and non-transitory computer readable storage medium
JPWO2015145769A1 (en) Imaging apparatus, information processing apparatus, photographing assistance system, photographing assistance program, and photographing assistance method
US10880478B2 (en) Camera, system and method of selecting camera settings
JP2008257358A (en) Automatic document creation apparatus, automatic document creation method and program
US20150082248A1 (en) Dynamic Glyph-Based Search
JP2005065048A (en) Picture processing method, picture processor and picture processing program
JP6011335B2 (en) Photo image processing apparatus and program
US9762767B2 (en) Imaging operation terminal, imaging system, software extraction method, and computer-readable device
JP4870503B2 (en) Camera and blog management system
JP2010041527A (en) Photographing support method, system, program
JP2005275847A (en) Image storage method and image storage device
JP2015026105A (en) Image evaluation server
TWI636424B (en) Device and method for generating panorama image
JP2013131234A (en) Automatic document creation apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150810

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160606

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160621

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160722

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160823

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160905

R150 Certificate of patent or registration of utility model

Ref document number: 6011335

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250