JP5362427B2 - Search result display method and apparatus, and search result display program - Google Patents

Search result display method and apparatus, and search result display program Download PDF

Info

Publication number
JP5362427B2
JP5362427B2 JP2009105851A JP2009105851A JP5362427B2 JP 5362427 B2 JP5362427 B2 JP 5362427B2 JP 2009105851 A JP2009105851 A JP 2009105851A JP 2009105851 A JP2009105851 A JP 2009105851A JP 5362427 B2 JP5362427 B2 JP 5362427B2
Authority
JP
Japan
Prior art keywords
search
content
image
search result
result display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009105851A
Other languages
Japanese (ja)
Other versions
JP2010257169A (en
Inventor
嘉國 西浦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2009105851A priority Critical patent/JP5362427B2/en
Publication of JP2010257169A publication Critical patent/JP2010257169A/en
Application granted granted Critical
Publication of JP5362427B2 publication Critical patent/JP5362427B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、コンテンツの検索結果を表示する検索結果表示方法及び装置、並びに検索結果表示プログラムに関する。   The present invention relates to a search result display method and apparatus for displaying content search results, and a search result display program.

最近、パーソナルコンピュータや携帯電話などの情報端末機器が普及している。情報端末機器によれば、映像、画像、音楽、ゲームといった様々なコンテンツを大量かつ容易に管理することができる。管理されたコンテンツを検索する場合、キーワード検索が広く用いられている。   Recently, information terminal devices such as personal computers and mobile phones have become widespread. According to the information terminal device, various contents such as video, images, music, and games can be easily managed in large quantities. When searching for managed content, keyword search is widely used.

キーワード検索では、ユーザにより入力されたキーワードが検索条件として用いられ、予めコンテンツに付されたタグに基づいてコンテンツが探し出される。コンテンツが探し出されると、検索結果として文字や画像などの項目が一覧表示される。検索結果の表示態様は、ユーザに大きく影響を与えるので、検索結果の表示態様に関して様々な提案がなされている。例えば、特許文献1に記載の検索・表示手法では、入力されたキーワードに関連する単語に基づいて画像が検索され、単語とともに画像が一覧表示される。   In keyword search, a keyword input by a user is used as a search condition, and content is searched for based on a tag previously attached to the content. When content is found, items such as characters and images are displayed in a list as search results. Since the display form of the search result greatly affects the user, various proposals have been made regarding the display form of the search result. For example, in the search / display method described in Patent Document 1, an image is searched based on a word related to an input keyword, and a list of images is displayed together with the word.

特開2008−217117号公報JP 2008-217117 A

特許文献1に記載の検索・表示手法によれば、ユーザは、一覧表示された各コンテンツがいかなる条件に基づいて検索されたかを視覚的に容易に把握することができる。その一方、検索対象となる各コンテンツが所定の序列(例えば、コンテンツの作成日時の順番)で管理されている場合には、検索対象となるコンテンツ全体の序列の中に、検索条件に合致するコンテンツがどのように分布しているかを把握することができない。   According to the search / display method described in Patent Document 1, the user can easily visually grasp what conditions the listed contents are searched for. On the other hand, if each content to be searched is managed in a predetermined order (for example, the order of creation date and time of content), the content that matches the search condition in the order of the entire content to be searched It is not possible to grasp how is distributed.

本発明は、上記課題を鑑みてなされたものであり、検索対象となる各コンテンツが所定の序列で管理されている場合に、検索対象となるコンテンツ全体の序列の中に、検索条件に合致するコンテンツがどのように分布しているかを把握させる検索結果表示方法及び装置、並びに検索結果表示プログラムを提供することを目的とする。   The present invention has been made in view of the above problems, and when each content to be searched is managed in a predetermined order, the search condition is matched in the order of the entire content to be searched. It is an object of the present invention to provide a search result display method and apparatus for ascertaining how content is distributed, and a search result display program.

上記目的を達成するために、本発明の検索結果表示装置は、複数のキーワードを受け付けて、受け付けたキーワードに基づく検索条件で、1つ以上の単語がタグ付けされた複数の検索対象コンテンツの中からコンテンツを検索するコンテンツ検索部と、各検索対象コンテンツに一対一で対応する複数の小領域を所定の序列で1列に連接した複数の分布表示領域を各キーワードに一対一に対応して互いに隙間を空けて平行に配し、分布表示領域ごとに対応するキーワードと同一の単語がタグ付けされた検索対象コンテンツに対応する前記小領域に所定の印を示し、さらに検索されたコンテンツに対応する、各分布表示領域の前記小領域を互いに結ぶ帯を各分布表示領域と直交するように前記隙間に示した検索結果表示画像を作成する画像作成部と、前記検索結果表示画像をモニタに表示する表示制御部とを備えていることを特徴とする。 In order to achieve the above object, the search result display device of the present invention receives a plurality of keywords, and includes a plurality of search target contents tagged with one or more words under a search condition based on the received keywords. A content search unit for searching for content from a plurality of distribution display regions in which a plurality of small regions corresponding to each search target content in a one-to-one correspondence are connected in one row in a predetermined order, corresponding to each keyword on a one-to-one basis arranged in parallel with a gap, the same words and keywords corresponding to each distribution display area indicates a predetermined mark on the small region corresponding to the retrievable contents are tagged, corresponding to more searched content , an image creation unit to create a search result display image showing the band connecting the small region of each distribution display areas from one another in the gap so as to be perpendicular to each distribution display areas , Characterized in that a display control unit that displays the search result display image on the monitor.

なお、前記画像作成部は、前記分布表示領域と同一の長さを有した所定の幅の線分を前記分布表示領域と平行に配した前記検索結果表示画像を作成することが好ましい。   It is preferable that the image creation unit creates the search result display image in which a line segment having a predetermined width having the same length as the distribution display area is arranged in parallel with the distribution display area.

また、操作信号を入力する操作部を備え、前記表示制御部は、前記操作部から入力された前記操作信号に応答して、前記モニタに表示していた前記検索結果表示画像を拡大するとともに、前記所定の印が示された前記小領域に、その小領域に対応するコンテンツを表示することが好ましい。   In addition, an operation unit for inputting an operation signal is provided, and the display control unit expands the search result display image displayed on the monitor in response to the operation signal input from the operation unit, It is preferable that the content corresponding to the small area is displayed in the small area indicated by the predetermined mark.

また、前記画像作成部は、各検索対象コンテンツに一対一で対応する複数の矩形を前記所定の序列で1列に連接した前記線分を配し、検索されたコンテンツに対応する前記矩形を、それ以外の前記矩形と異なる態様で示した前記検索結果表示画像を作成することが好ましい。   In addition, the image creation unit arranges the line segments that are connected in a row in the predetermined order with a plurality of rectangles corresponding to each search target content in a one-to-one manner, and the rectangle corresponding to the searched content is It is preferable to create the search result display image shown in a different form from the other rectangles.

また、操作信号を入力する操作部を備え、前記表示制御部は、前記操作部から入力された前記操作信号に応答して、前記モニタに表示していた前記検索結果表示画像を拡大するとともに、前記コンテンツ検索部で検索されたコンテンツに対応する前記矩形に、その矩形に対応するコンテンツを表示することが好ましい。   In addition, an operation unit for inputting an operation signal is provided, and the display control unit expands the search result display image displayed on the monitor in response to the operation signal input from the operation unit, It is preferable that content corresponding to the rectangle is displayed on the rectangle corresponding to the content searched by the content search unit.

また、検索条件を指定する条件指定部を備えていることが好ましい。前記コンテンツ検索部は、受け付けた複数のキーワードと同一の単語のうち、指定された数以上がタグ付けされた検索対象コンテンツを検索するAND条件、受け付けた複数のキーワードと同一の単語のいずれか1つ以上がタグ付けされた検索対象コンテンツを検索するOR条件、受け付けたキーワードのうち、指定されたキーワードを検索条件から除外するOFF条件、受け付けたキーワードのうちの指定されたキーワードと同一の単語がタグ付けされた検索対象コンテンツを検索の対象から除外するNOT条件でコンテンツを検索することが好ましい。   In addition, it is preferable that a condition designating unit for designating a search condition is provided. The content search unit selects either one of an AND condition for searching a search target content tagged with a specified number or more among the same words as a plurality of received keywords and a word that is the same as a plurality of received keywords. OR condition to search for search target content tagged with one or more, OFF condition to exclude specified keyword from search condition among received keywords, same word as specified keyword among received keywords It is preferable to search for content under a NOT condition that excludes tagged search target content from search targets.

本発明の検索結果表示方法は、複数のキーワードを受け付けて、受け付けたキーワードに基づく検索条件で、1つ以上の単語がタグ付けされた複数の検索対象コンテンツの中からコンテンツを検索するコンテンツ検索ステップと、各検索対象コンテンツに一対一で対応する複数の小領域を所定の序列で1列に連接した複数の分布表示領域を各キーワードに一対一に対応して互いに隙間を空けて平行に配し、分布表示領域ごとに対応する前記キーワードと同一の単語がタグ付けされた検索対象コンテンツに対応する前記小領域に所定の印を示し、さらに検索されたコンテンツに対応する、各分布表示領域の前記小領域を互いに結ぶ帯を各分布表示領域と直交するように前記隙間に示した検索結果表示画像を作成する画像作成ステップと、前記検索画像表示画像をモニタに表示する表示ステップとをコンピュータが実行することを特徴とする。 The search result display method of the present invention is a content search step for receiving a plurality of keywords and searching for contents from a plurality of search target contents tagged with one or more words under a search condition based on the received keywords. And a plurality of distribution display areas in which a plurality of small areas corresponding one-to-one with each search target content are connected in a predetermined order in a single column , corresponding to each keyword in a one-to-one correspondence, and arranged in parallel with a gap therebetween. , the same words and the keyword corresponding to each distribution display area indicates a predetermined mark on the small region corresponding to the retrievable contents are tagged, corresponding to more searched content, the each distribution display areas an image generation step of generating a search result display image showing the band connecting the small areas to each other in the gap so as to be perpendicular to each distribution display areas, said analyzing Characterized in that the display step of displaying the image display image on the monitor computer executes.

本発明の検索結果表示プログラムは、複数のキーワードを受け付けて、受け付けたキーワードに基づく検索条件で、1つ以上の単語がタグ付けされた複数の検索対象コンテンツの中からコンテンツを検索するコンテンツ検索ステップと、各検索対象コンテンツに一対一で対応する複数の小領域を所定の序列で1列に連接した複数の分布表示領域を各キーワードに一対一に対応して互いに隙間を空けて平行に配し、分布表示領域ごとに対応する前記キーワードと同一の単語がタグ付けされた検索対象コンテンツに対応する前記小領域に所定の印を示し、さらに検索されたコンテンツに対応する、各分布表示領域の前記小領域を互いに結ぶ帯を各分布表示領域と直交するように前記隙間に示した検索結果表示画像を作成する画像作成ステップと、前記検索結果表示画像をモニタに表示する表示ステップとをコンピュータに実行させるためのものであるThe search result display program of the present invention receives a plurality of keywords and searches for content from a plurality of search target contents tagged with one or more words under a search condition based on the received keywords. And a plurality of distribution display areas in which a plurality of small areas corresponding one-to-one with each search target content are connected in a predetermined order in a single column , corresponding to each keyword in a one-to-one correspondence, and arranged in parallel with a gap therebetween. , the same words and the keyword corresponding to each distribution display area indicates a predetermined mark on the small region corresponding to the retrievable contents are tagged, corresponding to more searched content, the each distribution display areas an image generation step of generating a search result display image showing the band connecting the small areas to each other in the gap so as to be perpendicular to each distribution display areas, It is intended to execute the display step of displaying the serial search result display image on the monitor to the computer.

本発明の検索結果表示方法及び装置、並びに検索結果表示プログラムによれば、受け付けたキーワードに基づく検索条件で検索した結果を表示する検索結果表示画像に、各検索対象コンテンツに一対一で対応する複数の小領域を所定の序列で1列に連接した分布表示領域を配し、受け付けたキーワードと同一の単語がタグ付けされたコンテンツに対応する小領域に所定の印が示されるから、検索対象となるコンテンツ全体の序列の中に、検索条件に合致するコンテンツがどのように分布しているかを把握させることができる。   According to the search result display method and apparatus and the search result display program of the present invention, a plurality of search result display images that display the search result based on the search condition based on the accepted keyword, one to one corresponding to each search target content. A distribution display area is arranged in which the small areas are connected to each other in a predetermined order, and a predetermined mark is displayed in the small area corresponding to the content tagged with the same word as the received keyword. It is possible to grasp how the content that matches the search condition is distributed in the order of the entire content.

パーソナルコンピュータの構成を示す概略図である。It is the schematic which shows the structure of a personal computer. パーソナルコンピュータの内部構成を示すブロック図である。It is a block diagram which shows the internal structure of a personal computer. HDDに格納されたデータなどを説明するブロック図である。It is a block diagram explaining the data etc. which were stored in HDD. 画像一覧テーブルの構成を示す図である。It is a figure which shows the structure of an image list table. タグ一覧テーブルの構成を示す図である。It is a figure which shows the structure of a tag list table. 撮影日時一覧テーブルの構成を示す図である。It is a figure which shows the structure of an imaging | photography date list table. CPUの機能を説明するブロック図である。It is a block diagram explaining the function of CPU. 検索条件を説明するベン図であり、(A)は完全AND条件、(B)は不完全AND条件、(C)は一部のキーワードをOFF条件とする完全AND条件、(D)は一部のキーワードをNOT条件とする完全AND条件、(E)はOR条件、(F)は一部のキーワードをOFF条件とするOR条件、(G)は一部のキーワードをNOT条件とするOR条件を示すベン図である。It is a Venn diagram explaining search conditions, (A) is a complete AND condition, (B) is an incomplete AND condition, (C) is a complete AND condition in which some keywords are OFF conditions, (D) is a part of (E) is an OR condition, (F) is an OR condition using some keywords as an OFF condition, and (G) is an OR condition using some keywords as a NOT condition. It is a Venn diagram. 検索結果表示画像を示す図である。It is a figure which shows a search result display image. 5つのキーワードを用いたAND条件で検索した結果を表示した検索結果表示画像を示す図である。It is a figure which shows the search result display image which displayed the result searched by AND condition using five keywords. 5つのキーワードの中の任意の3つを用いたAND条件で検索した結果を表示した検索結果表示画像を示す図である。It is a figure which shows the search result display image which displayed the result searched by AND conditions using arbitrary three of five keywords. 5つのキーワードの中の指定された2つをOFF条件とし、残りの3つを用いたAND条件で検索した結果を表示した検索結果表示画像を示す図である。It is a figure which shows the search result display image which displayed the result searched by AND condition using the designated two of five keywords as OFF conditions, and remaining three. 5つのキーワードの中の指定された2つをNOT条件とし、残りの3つを用いたAND条件で検索した結果を表示した検索結果表示画像を示す図である。It is a figure which shows the search result display image which displayed the result searched by the AND conditions using the two designated among 5 keywords as NOT condition, and remaining three. 2つのキーワードを用いたOR条件で検索した結果を表示した検索結果表示画像を示す図である。It is a figure which shows the search result display image which displayed the result searched by OR condition using two keywords. 検索結果表示装置の処理手順を説明するフローチャートである。It is a flowchart explaining the process sequence of a search result display apparatus. 1つのキーワードを用いた検索の結果を表示した検索結果表示画像を示す図である。It is a figure which shows the search result display image which displayed the result of the search using one keyword. 図16に示す検索結果表示画像を拡大し、検索された画像を一覧表示した場合を示す図である。It is a figure which shows the case where the search result display image shown in FIG. 16 is expanded and the searched image is displayed as a list. 図17に示す検索結果表示画像をさらに拡大し、検索された画像を1つずつ表示した場合を示す図である。It is a figure which shows the case where the search result display image shown in FIG. 17 is expanded further, and the searched image is displayed one by one.

図1に示す検索結果表示装置は、クライアント端末11に検索結果表示プログラム34(図3参照)をインストールすることによって構成される。検索結果表示装置は、種々の条件による画像検索の結果をモニタ12に表示する。   The search result display device shown in FIG. 1 is configured by installing a search result display program 34 (see FIG. 3) in the client terminal 11. The search result display device displays the results of image search under various conditions on the monitor 12.

クライアント端末11は、例えばパーソナルコンピュータやワークステーションであり、各種ウインドウなどを表示するモニタ12と、操作信号を入力するマウス13やキーボード14からなる操作部15とを備えている。利用者は、操作部15を操作してキーワードを入力し、画像検索を行う。   The client terminal 11 is, for example, a personal computer or a workstation, and includes a monitor 12 that displays various windows and the like, and an operation unit 15 that includes a mouse 13 and a keyboard 14 for inputting operation signals. The user operates the operation unit 15 to input a keyword and perform an image search.

クライアント端末11には、デジタルカメラ16で撮影して得られた画像や、メモリカードやCD−Rなどの記録媒体17に記録された画像が送信され、あるいは、インターネット18を経由して画像がダウンロードされる。   The client terminal 11 is sent with an image captured by the digital camera 16 or an image recorded on a recording medium 17 such as a memory card or CD-R, or the image is downloaded via the Internet 18. Is done.

デジタルカメラ16は、例えば、IEEE1394、USB(Universal Serial Bus)などに準拠した通信ケーブルや、無線LANなどによりクライアント端末11に接続され、クライアント端末11とのデータの相互通信が可能となっている。また、記録媒体17も同様に、専用のドライバを介してクライアント端末11とのデータの遣り取りが可能となっている。   The digital camera 16 is connected to the client terminal 11 by a communication cable compliant with, for example, IEEE 1394, USB (Universal Serial Bus), a wireless LAN, or the like, and data communication with the client terminal 11 is possible. Similarly, the recording medium 17 can exchange data with the client terminal 11 via a dedicated driver.

図2に示すように、クライアント端末11は、CPU21を備え、このCPU21は、操作部15から入力される操作信号などにしたがってクライアント端末11全体を統括的に制御する。CPU21には、操作部15の他に、データバス22を介して、RAM23、ハードディスクドライブ(以下、HDDと略す。)24、通信インターフェース(以下、通信I/Fと略す。)25、及びモニタ12が接続されている。   As illustrated in FIG. 2, the client terminal 11 includes a CPU 21, and the CPU 21 controls the entire client terminal 11 in accordance with an operation signal input from the operation unit 15. In addition to the operation unit 15, the CPU 21 includes a RAM 23, a hard disk drive (hereinafter abbreviated as HDD) 24, a communication interface (hereinafter abbreviated as communication I / F) 25, and a monitor 12 via a data bus 22. Is connected.

RAM23は、CPU21が処理を実行するために用いられる作業用のメモリである。HDD24には、クライアント端末11を動作させるための各種プログラムやデータが格納されている。CPU21は、HDD24からプログラムを読み出してRAM23に展開し、読み出したプログラムを逐次実行する。   The RAM 23 is a work memory used for the CPU 21 to execute processing. The HDD 24 stores various programs and data for operating the client terminal 11. The CPU 21 reads out the program from the HDD 24, develops it in the RAM 23, and sequentially executes the read program.

通信I/F25は、例えばモデムやルータであり、インターネット18に適合した通信プロトコルの制御を行い、インターネット18を経由したデータの遣り取りをする。また、通信I/F25は、デジタルカメラ16や記録媒体17などの外部機器とのデータ通信も行う。   The communication I / F 25 is a modem or a router, for example, and controls a communication protocol suitable for the Internet 18 and exchanges data via the Internet 18. The communication I / F 25 also performs data communication with external devices such as the digital camera 16 and the recording medium 17.

図3に示すように、HDD24には、複数の画像データとともに、画像一覧テーブル31、タグ一覧テーブル32、撮影日時一覧テーブル33、及び検索結果表示プログラム34が格納されている。   As shown in FIG. 3, the HDD 24 stores an image list table 31, a tag list table 32, a shooting date / time list table 33, and a search result display program 34 along with a plurality of image data.

図4に示すように、画像一覧テーブル31は、画像データの取込み時に自動的に付されるID(取込み順に付される通し番号)を見出しとして、画像の名称を記憶している。HDD24に格納された画像は、画像一覧テーブル31によってID管理される。   As shown in FIG. 4, the image list table 31 stores the name of an image with the ID (serial number assigned in the order of acquisition) automatically given when the image data is taken in as a heading. The images stored in the HDD 24 are ID-managed by the image list table 31.

図5に示すように、タグ一覧テーブル32は、IDを見出しとして画像にタグ付けされた単語を記憶している。画像にタグ付けされた単語には、画像に元々付されたもの、画像を取り込んだ際にファイルシステムなどの外部データベースから取得したもの(画像のタイトル、ジャンル、イメージなど)などがある。HDD24に格納された画像にタグ付けされた単語は、タグ一覧テーブル32によってID管理される。   As shown in FIG. 5, the tag list table 32 stores words tagged with images using IDs as headings. The words tagged to the image include those originally attached to the image and those obtained from an external database such as a file system when the image is captured (image title, genre, image, etc.). IDs of words tagged to images stored in the HDD 24 are managed by the tag list table 32.

図6に示すように、撮影日時一覧テーブル33は、IDを見出しとして画像が撮影された日時を記憶している。画像が撮影された日時は、画像データが作成された日時のことであり、画像が付帯情報として有している。HDD24に格納された画像が撮影された日時は、タグ一覧テーブル32によってID管理される。なお、画像一覧テーブル31、タグ一覧テーブル32、及び撮影日時一覧テーブル34を統合して、一つのデータテーブルとしてもよい。   As illustrated in FIG. 6, the shooting date / time list table 33 stores the date and time when an image was shot with an ID as a heading. The date and time when the image was taken is the date and time when the image data was created, and the image has additional information. The date and time when the image stored in the HDD 24 is taken is managed by the tag list table 32. The image list table 31, the tag list table 32, and the shooting date / time list table 34 may be integrated into one data table.

検索結果表示プログラム34が実行されると、図7に示すように、CPU21には、画像検索部35、結果画像作成部36、及び表示制御部37が構築される。これら35、36が構築されることで、クライアント端末11は、検索結果表示装置として機能する。   When the search result display program 34 is executed, an image search unit 35, a result image creation unit 36, and a display control unit 37 are constructed in the CPU 21, as shown in FIG. By constructing these 35 and 36, the client terminal 11 functions as a search result display device.

画像検索部35は、操作部15から入力されたキーワードに基づく検索条件に合致する画像を、HDD24に格納された複数の画像の中から検索する。この時、画像検索部35は、画像及びタグ付けされた単語をIDによって識別する。   The image search unit 35 searches the plurality of images stored in the HDD 24 for an image that matches the search condition based on the keyword input from the operation unit 15. At this time, the image search unit 35 identifies the image and the tagged word by the ID.

検索条件には、(a)入力された複数のキーワードと同一の単語の全てがタグ付けされた画像を検索するAND条件(以下、完全AND条件と称す。)、(b)入力された複数の単語のキーワードと同一の単語のうち、指定された数以上がタグ付けされた画像を検索するAND条件(以下、不完全AND条件と称す。)、(c)入力された複数のキーワードと同一の単語のいずれか1つ以上がタグ付けされた画像を検索するOR条件、(d)完全AND条件、不完全AND条件、OR条件の各々において、入力されたキーワードのうち、指定されたキーワードを検索条件から除外するOFF条件、(e)完全AND条件、不完全AND条件、OR条件の各々において、入力されたキーワードのうちの指定されたキーワードと同一の単語がタグ付けされた画像を検索の対象から除外するNOT条件がある。   Search conditions include (a) an AND condition (hereinafter referred to as a complete AND condition) for searching for an image in which all of the same words as the input keywords are tagged, and (b) the input plural AND condition (hereinafter referred to as an incomplete AND condition) for searching for an image tagged with a specified number or more of the same words as the keyword of the word, (c) the same as a plurality of input keywords Search for the specified keyword among the input keywords in each of the OR condition for searching for an image tagged with one or more of the words, (d) the complete AND condition, the incomplete AND condition, and the OR condition. In each of the OFF condition to be excluded from the condition, (e) the complete AND condition, the incomplete AND condition, and the OR condition, the same word as the specified keyword among the input keywords is a tag. This morning the image there are excluded NOT condition from the search of the target.

ここで、キーワードとして「父」、「太郎」、「花子」の3つが入力された場合を例に、各検索条件について、ベン図を用いて概略的に説明する。図8(A)〜図8(G)では、円Venn1で囲われた領域は単語「父」がタグ付けされた画像を、円Venn2で囲われた領域は単語「太郎」がタグ付けされた画像を、円Venn3で囲われた領域は単語「花子」がタグ付けされた画像をそれぞれ要素とする。また、ハッチングが付された領域は、検索条件に合致する画像(検索にヒットする画像)を要素とする。   Here, each search condition will be schematically described with reference to a Venn diagram, taking as an example the case where three keywords “Father”, “Taro”, and “Hanako” are input as keywords. In FIG. 8 (A) to FIG. 8 (G), the region enclosed by the circle Venn1 is tagged with the word “Father”, and the region enclosed by the circle Venn2 is tagged with the word “Taro”. In the area surrounded by the circle Venn3, an image tagged with the word “Hanako” is used as an element. In addition, the hatched area has an element that matches the search condition (an image that hits the search).

図8(A)に示すように、完全AND条件では、単語「父」、「太郎」、「花子」の全てがタグ付けされた画像が検索条件に合致する。すなわち、「父」に対応する円Venn1、「太郎」に対応する円Venn2、「花子」に対応する円Venn3の全てが重なる領域(ハッチングが付された領域)の要素が検索条件に合致する。   As shown in FIG. 8A, in the complete AND condition, an image in which all of the words “Father”, “Taro”, and “Hanako” are tagged matches the search condition. That is, the elements of the region (hatched region) where the circle Venn1 corresponding to “Father”, the circle Venn2 corresponding to “Taro”, and the circle Venn3 corresponding to “Hanako” overlap all match the search condition.

図8(B)に示すように、指定された単語数が「2」の不完全AND条件では、単語「父」、「太郎」、「花子」の2つ以上がタグ付けされた画像が検索条件に合致する。すなわち、「父」に対応する円Venn1、「太郎」に対応する円Venn2、「花子」に対応する円Venn3の2つ以上が重なる領域(ハッチングが付された領域)の要素が検索条件に合致する。   As shown in FIG. 8B, in the incomplete AND condition where the designated word count is “2”, an image in which two or more of the words “father”, “Taro”, and “Hanako” are tagged is searched. It meets the conditions. That is, the elements of a region where two or more of the circle Venn1 corresponding to “Father”, the circle Venn2 corresponding to “Taro”, and the circle Venn3 corresponding to “Hanako” overlap (hatched region) match the search condition. To do.

図8(C)に示すように、キーワード「花子」をOFF条件とする完全AND条件では、単語「父」、「太郎」の全てがタグ付けされた画像が検索条件に合致する。すなわち、「父」に対応する円Venn1、「太郎」に対応するVenn2が重なる領域(ハッチングが付された領域)の要素が検索条件に合致する。   As shown in FIG. 8C, in the complete AND condition using the keyword “Hanako” as an OFF condition, images tagged with all of the words “Father” and “Taro” match the search condition. That is, the elements of the area (hatched area) where the circle Venn1 corresponding to “Father” and Venn2 corresponding to “Taro” overlap each other match the search condition.

図8(D)に示すように、キーワード「花子」をNOT条件とする完全AND条件では、単語「父」、「太郎」の全てがタグ付けされ、かつ、単語「花子」がタグ付けされていない画像が検索条件に合致する。すなわち、「父」に対応する円Venn1、「太郎」に対応する円Venn2が重なり、かつ、「花子」に対応する円Venn3が重ならない領域(ハッチングが付された領域)の要素が検索条件に合致する。   As shown in FIG. 8D, in the complete AND condition using the keyword “Hanako” as a NOT condition, all of the words “Father” and “Taro” are tagged and the word “Hanako” is tagged. No image matches the search criteria. That is, an element of a region (hatched region) where the circle Venn1 corresponding to “Father” and the circle Venn2 corresponding to “Taro” overlap and the circle Venn3 corresponding to “Hanako” does not overlap is used as the search condition. Match.

図8(E)に示すように、OR条件では、単語「父」、「太郎」、「花子」のいずれか1つ以上がタグ付けされた画像が検索条件に合致する。すなわち、「父」に対応する円Venn1、「太郎」に対応する円Venn2、「花子」に対応する円Venn3のいずれかで囲われた領域(ハッチングが付された領域)の要素が検索条件に合致する。   As shown in FIG. 8E, in the OR condition, an image tagged with one or more of the words “father”, “Taro”, and “Hanako” matches the search condition. That is, an element of a region (hatched region) surrounded by any one of a circle Venn1 corresponding to “Father”, a circle Venn2 corresponding to “Taro”, and a circle Venn3 corresponding to “Hanako” is used as a search condition. Match.

図8(F)に示すように、キーワード「花子」をOFF条件とするOR条件では、単語「父」、「太郎」のいずれか1つ以上がタグ付けされた画像が検索条件に合致する。すなわち、「父」に対応する円Venn1、「太郎」に対応する円Venn2のいずれかで囲われた領域(ハッチングが付された領域)の要素が検索条件に合致する。   As shown in FIG. 8F, in the OR condition using the keyword “Hanako” as an OFF condition, an image tagged with one or more of the words “Father” and “Taro” matches the search condition. That is, an element in a region (hatched region) surrounded by either the circle Venn1 corresponding to “Father” or the circle Venn2 corresponding to “Taro” matches the search condition.

図8(G)に示すように、キーワード「花子」をNOT条件とするOR条件では、単語「父」、「太郎」のいずれか1つ以上がタグ付けされ、かつ、単語「花子」がタグ付けされていない画像が検索条件に合致する。すなわち、「父」に対応する円Venn1、「太郎」に対応する円Venn2のいずれかで囲われ、かつ、「花子」に対応する円Venn3が重ならない領域(ハッチングが付された領域)の要素が検索条件に合致する。   As shown in FIG. 8G, in the OR condition using the keyword “Hanako” as a NOT condition, at least one of the words “Father” and “Taro” is tagged, and the word “Hanako” is tagged. Unattached images meet the search criteria. That is, an element of a region (hatched region) surrounded by either the circle Venn1 corresponding to “Father” or the circle Venn2 corresponding to “Taro” and not overlapping the circle Venn3 corresponding to “Hanako” Matches the search criteria.

図7に戻って、結果画像作成部36は、キーワード、検索条件、及び画像検索部35による検索結果に基づいて、モニタ12に表示する検索結果表示画像42(図9参照)を作成する。表示制御部37は、検索結果表示画像42のモニタ12への表示、モニタ12へ表示した検索結果表示画像42の拡縮、画像検索部35で検索された画像のモニタ12への表示などをする。   Returning to FIG. 7, the result image creation unit 36 creates a search result display image 42 (see FIG. 9) to be displayed on the monitor 12 based on the keyword, the search condition, and the search result by the image search unit 35. The display control unit 37 displays the search result display image 42 on the monitor 12, enlarges / reduces the search result display image 42 displayed on the monitor 12, displays the image searched by the image search unit 35 on the monitor 12, and the like.

画像の検索を行う際、ユーザは、操作部15を操作して検索結果表示プログラム34を起動する。検索結果表示プログラム34が起動されると、表示制御部37は、モニタ12に、図9に示す検索ウインドウ41を立ち上げ、検索結果表示画像42を表示させる。検索ウインドウ41上には、選択操作に用いるポインタ43が表示される。ポインタ43は、マウス13が操作されることで検索ウインドウ41上を移動する。   When searching for an image, the user operates the operation unit 15 to start the search result display program 34. When the search result display program 34 is activated, the display control unit 37 starts up the search window 41 shown in FIG. 9 on the monitor 12 and displays the search result display image 42. On the search window 41, a pointer 43 used for the selection operation is displayed. The pointer 43 moves on the search window 41 when the mouse 13 is operated.

検索結果表示画像42には、HDD24に格納された画像の数を示す棒状の線分44、検索用のキーワードを入力するための複数のブランク45、各ブランク45に対応する複数の棒状の分布表示領域46、AND条件で検索を実行するためのAND条件ボタン47、OR条件で検索を実行するためのOR条件ボタン48、各ブランク45に対応する複数のOFF条件ボタン49、各ブランク45に対応する複数のNOT条件ボタン50、単語の数を指定するポップアップメニュー51、及びブランク45に入力されたキーワードの並替えをするための並替えボタン52が配されている。   The search result display image 42 includes a bar-shaped line segment 44 indicating the number of images stored in the HDD 24, a plurality of blanks 45 for inputting search keywords, and a plurality of bar-shaped distribution displays corresponding to the blanks 45. An area 46, an AND condition button 47 for executing a search with an AND condition, an OR condition button 48 for executing a search with an OR condition, a plurality of OFF condition buttons 49 corresponding to each blank 45, and corresponding to each blank 45 A plurality of NOT condition buttons 50, a pop-up menu 51 for designating the number of words, and a rearrangement button 52 for rearranging the keywords input to the blank 45 are arranged.

線分44は、HDD24に格納された画像の数と同数の矩形を所定の序列で1列に連接したものであり、各矩形は、HDD24に格納された画像に一対一で対応する。すなわち、線分44は、HDD24に格納された全ての画像を一直線上に並べたイメージである。線分44を構成する各矩形は、内部的な取決めであってモニタ12には表示されるものではない。なお、本実施形態では、撮影日時一覧テーブル33に記憶された撮影日時の順番を所定の序列とするが、これに限定されず、IDの順番、画像のファイルサイズの順番、ファイル名の50音の順番などを所定の序列としてもよい。   The line segment 44 is formed by connecting the same number of rectangles as the number of images stored in the HDD 24 in a predetermined order in one column, and each rectangle corresponds to the image stored in the HDD 24 on a one-to-one basis. That is, the line segment 44 is an image in which all the images stored in the HDD 24 are arranged on a straight line. Each rectangle constituting the line segment 44 is an internal rule and is not displayed on the monitor 12. In this embodiment, the order of the shooting date and time stored in the shooting date and time list table 33 is a predetermined order, but is not limited to this, and the order of the ID, the order of the file size of the image, and the 50 sounds of the file name The order may be a predetermined order.

線分44は、検索された画像に対応する矩形が、それ以外の矩形と比較して幅広に示される(図10など参照)。なお、検索された画像に対応する矩形が、それ以外の矩形と異なる態様で示されればよく、幅広に示されることに限定されることはない。例えば、異なる色で示すようにしてもよい。   In the line segment 44, a rectangle corresponding to the searched image is shown wider than other rectangles (see FIG. 10 and the like). Note that the rectangle corresponding to the searched image may be shown in a different form from the other rectangles, and is not limited to being shown wide. For example, you may make it show with a different color.

ブランク45にポインタ43を合わせてマウス13でクリックし、キーボード14で文字列を打ち込むことで、キーワードを入力することができる。各ブランク45には、1つのキーワードが入力可能である。キーワードが入力されると、入力されたキーワードがブランク45内に表示されるとともに、入力されたキーワードに基づく検索条件で画像が検索される。デフォルトでは、完全AND条件となっている。1つだけのキーワードが入力された場合には、当該キーワードに合致する単語がタグ付けされた画像が検索される。   A keyword can be input by placing the pointer 43 on the blank 45 and clicking with the mouse 13 and typing a character string with the keyboard 14. In each blank 45, one keyword can be input. When a keyword is input, the input keyword is displayed in the blank 45, and an image is searched with a search condition based on the input keyword. The default is a complete AND condition. When only one keyword is input, an image tagged with a word that matches the keyword is searched.

各分布表示領域46はそれぞれ、HDD24に格納された画像の数と同数の小領域を所定の序列(線分44を構成する矩形の序列と同一の序列)で1列に連接したものであり、互いに隙間を空けて平行に配されている。各小領域は、HDD24に格納された画像に一対一で対応する。すなわち、各分布表示領域46はそれぞれ、HDD24に格納された全ての画像を一直線上に並べたイメージである。なお、本実施形態では、撮影日時一覧テーブル33に記憶された撮影日時の順番を所定の序列とするが、線分44を構成する矩形の序列と同一の序列であれば撮影日時の順番であることに限定されず、IDの順番、画像のファイルサイズの順番、ファイル名の50音の順番などを所定の序列としてもよい。   Each distribution display area 46 is formed by concatenating the same number of small areas as the number of images stored in the HDD 24 into one column in a predetermined order (the same order as the rectangular order constituting the line segment 44). They are arranged in parallel with a gap between them. Each small area corresponds to the image stored in the HDD 24 on a one-to-one basis. That is, each distribution display area 46 is an image in which all the images stored in the HDD 24 are arranged in a straight line. In this embodiment, the order of the shooting date and time stored in the shooting date and time list table 33 is set as a predetermined order. However, if the order is the same as the order of the rectangles constituting the line segment 44, the order of the shooting date and time is used. The order of IDs, the order of file sizes of images, the order of 50 sounds of file names, and the like may be used as the predetermined order.

キーワードが入力されたブランク45に対応する分布表示領域46には、入力されたキーワードと同一の単語がタグ付けされた画像に対応する小領域に印56(図10など参照)が示される。印56は、ブランク45に入力されたキーワードがタグ付けされた画像の分布を意味する。   In the distribution display area 46 corresponding to the blank 45 in which the keyword is input, a mark 56 (see FIG. 10 or the like) is shown in a small area corresponding to an image tagged with the same word as the input keyword. The mark 56 means the distribution of images tagged with the keyword input to the blank 45.

AND条件ボタン47にポインタ43を合わせてマウス13でクリックすると、ブランク45に打ち込まれた文字列をキーワードとしてAND条件で画像が検索される。OR条件ボタン48にポインタ43を合わせてマウス13でクリックすると、ブランク45に打ち込まれた文字列をキーワードとしてOR条件で画像が検索される。なお、AND条件で検索されていた場合にAND条件ボタン47がクリックされた場合、あるいはOR条件で検索されていた場合にOR条件ボタン48がクリックされた場合には、既に検索されていた結果と同一の結果が得られる。このため、これらの場合には処理を無効にし、検索を行わないようにしてもよい。   When the pointer 43 is placed on the AND condition button 47 and the mouse 13 is clicked, an image is retrieved under the AND condition using the character string typed in the blank 45 as a keyword. When the pointer 43 is placed on the OR condition button 48 and the mouse 13 is clicked, an image is retrieved under the OR condition using the character string typed in the blank 45 as a keyword. If the AND condition button 47 is clicked when the AND condition is searched, or if the OR condition button 48 is clicked when the OR condition is searched, the result of the search has already been performed. Identical results are obtained. Therefore, in these cases, the processing may be invalidated and the search may not be performed.

OFF条件ボタン49にポインタ43を合わせてマウス13でクリックすると、クリックされたOFF条件ボタン49に対応する分布表示領域46に示されていた印56(図10など参照)が非表示状態になる。また、クリックされたOFF条件ボタン49に対応するブランク43から入力されたキーワードをOFF条件として、AND条件又はOR条件で画像が検索される。OFF条件ボタン49がクリックされる直前にAND条件で画像が検索されていた場合には、AND条件で画像が検索される。一方、OFF条件ボタン49がクリックされる直前にOR条件で画像が検索されていた場合には、OR条件で画像が検索される。なお、既にOFF条件となっている場合にOFF条件ボタン49がクリックされた場合には、該当するキーワードについてのOFF条件が解除されてから、AND条件又はOR条件で画像が検索される。   When the pointer 43 is placed on the OFF condition button 49 and the mouse 13 is clicked, the mark 56 (see FIG. 10 or the like) shown in the distribution display area 46 corresponding to the clicked OFF condition button 49 is hidden. In addition, an image is searched under an AND condition or an OR condition with the keyword input from the blank 43 corresponding to the clicked OFF condition button 49 as an OFF condition. If an image has been searched under the AND condition immediately before the OFF condition button 49 is clicked, the image is searched under the AND condition. On the other hand, if an image has been searched under the OR condition immediately before the OFF condition button 49 is clicked, the image is searched under the OR condition. If the OFF condition button 49 is clicked when the OFF condition has already been established, the image is searched under the AND condition or the OR condition after the OFF condition for the corresponding keyword is canceled.

NOT条件ボタン50にポインタ43を合わせてマウス13でクリックすると、クリックされたNOT条件ボタン50に対応する分布表示領域46に示されていた印56(図10など参照)が非表示状態になる。また、クリックされたNOT条件ボタン50に対応するブランク43から入力されたキーワードをNOT条件として、AND条件又はOR条件で画像が検索される。NOT条件ボタン50がクリックされる直前にAND条件で画像が検索されていた場合には、AND条件で画像が検索される。一方、NOT条件ボタン50がクリックされる直前にOR条件で画像が検索されていた場合には、OR条件で画像が検索される。なお、既にNOT条件となっている場合にNOT条件ボタン50がクリックされた場合には、該当するキーワードについてのNOT条件が解除されてから、AND条件又はOR条件で画像が検索される。   When the pointer 43 is placed on the NOT condition button 50 and the mouse 13 is clicked, the mark 56 (see FIG. 10 or the like) shown in the distribution display area 46 corresponding to the clicked NOT condition button 50 is hidden. In addition, an image is searched under an AND condition or an OR condition using a keyword input from the blank 43 corresponding to the clicked NOT condition button 50 as a NOT condition. If an image has been searched under the AND condition immediately before the NOT condition button 50 is clicked, the image is searched under the AND condition. On the other hand, if an image has been searched under the OR condition immediately before the NOT condition button 50 is clicked, the image is searched under the OR condition. If the NOT condition button 50 is clicked when the NOT condition has already been reached, the image is searched under the AND condition or the OR condition after the NOT condition for the corresponding keyword is canceled.

ポップアップメニュー51にポインタ43を合わせてマウス13でクリックすると、完全AND条件における単語数(1〜MAX(入力されたキーワードの数))のリストが表示される。表示されたリストの中からいずれかの数にポインタ43を合わせてマウス13でクリックすることで数が選択される。選択された数に応じて、完全AND条件、又は不完全AND条件で画像が検索される。このように、マウス13は、検索条件を指定する条件指定部として機能する。   When the pointer 43 is placed on the pop-up menu 51 and clicked with the mouse 13, a list of the number of words (1 to MAX (number of input keywords)) under the complete AND condition is displayed. The number is selected by placing the pointer 43 on any number from the displayed list and clicking with the mouse 13. Depending on the number selected, the image is retrieved with a complete AND condition or an incomplete AND condition. As described above, the mouse 13 functions as a condition designating unit for designating a search condition.

並替えボタン52にポインタ43を合わせてマウス13でクリックすると、各ブランク45に入力されていたキーワードの並替えが行われる。各ブランク45に入力されていたキーワードは、該当するキーワードと同一の単語がタグ付けされた画像の数が多い順に並び替えられる。なお、完全AND条件で検索されていた場合には、検索された各画像に、入力されていた全てのキーワードがタグ付けされているので、並替えボタン52がクリックされたとしても、キーワードの並替えは行われない。   When the pointer 43 is placed on the rearrangement button 52 and the mouse 13 is clicked, the keywords input to the blanks 45 are rearranged. The keywords input to each blank 45 are rearranged in descending order of the number of images tagged with the same word as the corresponding keyword. If the search is performed under the complete AND condition, all the keywords that have been input are tagged in each searched image, so even if the sort button 52 is clicked, the keywords are not sorted. There is no replacement.

各分布表示領域46相互の隙間には、検索された画像に対応する小領域を互いに結ぶ帯57(図10など参照)が示される。各分布表示領域46はそれぞれ、帯57と直交する。帯57は、検索された画像の分布を意味する。   In the gap between the distribution display areas 46, a band 57 (see FIG. 10 and the like) that connects the small areas corresponding to the searched image to each other is shown. Each distribution display area 46 is orthogonal to the band 57. A band 57 means a distribution of searched images.

図10は、5つのキーワード「夏」、「海」、「父」、「太郎」、「花子」が入力され、完全AND条件で画像が検索された結果を表示した検索結果表示画像42を示す。この場合、入力された5つのキーワードと同一の単語の全てがタグ付けされた画像が検索され、その結果が表示される。全ての分布表示領域46で印56が示された小領域を互いに結ぶ帯57が示される。   FIG. 10 shows a search result display image 42 in which five keywords “summer”, “sea”, “father”, “Taro”, and “Hanako” are input and the result of searching the image under the complete AND condition is displayed. . In this case, an image in which all of the same words as the five input keywords are tagged is searched, and the result is displayed. A band 57 connecting the small areas indicated by the marks 56 in all the distribution display areas 46 is shown.

図11は、5つのキーワード「夏」、「海」、「父」、「太郎」、「花子」が入力され、数「3」が指定された不完全AND条件で画像が検索された結果を表示した検索結果表示画面42を示す。この場合、入力された5つのキーワードと同一の単語が3つ以上タグ付けされた画像が検索され、その結果が表示される。3つ以上の分布表示領域46で印56が示された小領域を互いに結ぶ帯57が示される。   FIG. 11 shows the result of searching an image using an incomplete AND condition in which five keywords “summer”, “sea”, “father”, “Taro”, “Hanako” are input and the number “3” is specified. The displayed search result display screen 42 is shown. In this case, an image in which three or more words identical to the five input keywords are tagged is searched, and the result is displayed. A band 57 that connects the small areas indicated by the marks 56 in three or more distribution display areas 46 is shown.

図12は、5つのキーワード「夏」、「海」、「父」、「太郎」、「花子」が入力され、そのうちのキーワード「父」、「花子」がOFF条件として指定された完全AND条件で画像が検索された結果を表示した検索結果表示画像42を示す。この場合、キーワード「父」、「花子」が検索条件から除外されて、キーワード「夏」、「海」、「太郎」と同一の単語の全てがタグ付けされた画像が検索され、その結果が表示される。キーワード「夏」、「海」、「太郎」に対応する3つの分布表示領域46で印56が示された小領域を互いに結ぶ帯57が示される。   FIG. 12 shows a complete AND condition in which five keywords “summer”, “sea”, “father”, “Taro”, and “Hanako” are input, and the keywords “father” and “Hanako” are specified as OFF conditions. The search result display image 42 which displayed the result by which the image was searched is shown. In this case, the keywords “Father” and “Hanako” are excluded from the search conditions, and an image in which all of the same words as the keywords “Summer”, “Sea”, and “Taro” are tagged is searched, and the result is Is displayed. A band 57 connecting the small areas indicated by the marks 56 in the three distribution display areas 46 corresponding to the keywords “summer”, “sea”, and “Taro” is shown.

図13は、5つのキーワード「夏」、「海」、「父」、「太郎」、「花子」が入力され、そのうちのキーワード「父」、「花子」がNOT条件として指定された完全AND条件で画像が検索された結果を表示した検索結果表示画像42を示す。この場合、キーワード「父」又は「花子」と同一の単語がタグ付けされた画像が検索条件から除外されて、キーワード「夏」、「海」、「太郎」と同一の単語の全てがタグ付けされた画像が検索され、その結果が表示される。キーワード「父」又は「花子」に対応するいずれか1つ以上の分布表示領域46で印56が非表示状態になった小領域以外の小領域であって、かつ、キーワード「夏」、「海」、「太郎」に対応する3つの分布表示領域46で印56が示された小領域を互いに結ぶ帯57が示される。   FIG. 13 shows a complete AND condition in which five keywords “summer”, “sea”, “father”, “Taro”, and “Hanako” are input, and the keywords “father” and “Hanako” are designated as NOT conditions. The search result display image 42 which displayed the result by which the image was searched is shown. In this case, images tagged with the same word as the keyword “Father” or “Hanako” are excluded from the search conditions, and all the same words as the keywords “Summer”, “Umi”, and “Taro” are tagged. The retrieved image is searched and the result is displayed. A small area other than the small area where the mark 56 is not displayed in any one or more of the distribution display areas 46 corresponding to the keywords “Father” or “Hanako”, and the keywords “Summer”, “Sea ”, A band 57 connecting the small areas indicated by the marks 56 in the three distribution display areas 46 corresponding to“ Taro ”.

図14は、2つのキーワード「夏」、「海」が入力され、OR条件で画像が検索された結果を表示した検索結果表示画像42を示す。この場合、入力された2つのキーワードと同一の単語のいずれか1つ以上がタグ付けされた画像が検索され、その結果が表示される。いずれかの分布表示領域46で印56が示された小領域を互いに結ぶ帯57が示される。   FIG. 14 shows a search result display image 42 in which two keywords “summer” and “sea” are input and the result of the image search under the OR condition is displayed. In this case, an image tagged with one or more of the same words as the two input keywords is searched, and the result is displayed. A band 57 connecting the small areas indicated by the marks 56 in any of the distribution display areas 46 is shown.

次に、上記クライアント端末11が検索結果表示装置として機能したときの検索結果を表示する処理手順について、図15のフローチャートを参照しながら説明する。操作部15が操作され、検索結果表示プログラム34が実行されると、モニタ12に検索ウインドウ41(図9参照)が立ち上がり、検索結果表示画像42が表示されるとともに、CPU21に画像検索部35、結果画像作成部36、及び表示制御部37が構築される。これにより、クライアント端末11は、検索結果表示装置として機能する(ステップ(以下、Sと略す。)11)。   Next, a processing procedure for displaying a search result when the client terminal 11 functions as a search result display device will be described with reference to a flowchart of FIG. When the operation unit 15 is operated and the search result display program 34 is executed, a search window 41 (see FIG. 9) is started on the monitor 12, a search result display image 42 is displayed, and the image search unit 35, A result image creation unit 36 and a display control unit 37 are constructed. Thereby, the client terminal 11 functions as a search result display device (step (hereinafter abbreviated as S) 11).

操作部15が操作され、ブランク45にキーワードが入力される(S12)と、入力されたキーワードは、RAM23に記憶される。   When the operation unit 15 is operated and a keyword is input to the blank 45 (S12), the input keyword is stored in the RAM 23.

ブランク45に入力されたキーワードは、RAM23から検索条件(デフォルトでは、完全AND条件)とともに画像検索部35に読み出される。画像検索部35では、読み出されたキーワードに基づく検索条件でHDD24から画像が検索される(S13)。検索された画像(検索結果)は、HDD24から読み出され、RAM23に記憶される。   The keyword input in the blank 45 is read from the RAM 23 to the image search unit 35 together with the search condition (by default, the complete AND condition). In the image search unit 35, an image is searched from the HDD 24 under a search condition based on the read keyword (S13). The searched image (search result) is read from the HDD 24 and stored in the RAM 23.

ブランク45に入力されたキーワード、検索条件、及び画像検索部35による検索結果は、RAM23から結果画像作成部36に読み出される。結果画像作成部36では、読み出されたキーワード、検索条件、及び検索結果に基づいて検索結果表示画像42が作成される(S14)。作成された検索結果表示画像42は、RAM23に記憶される。   The keyword input to the blank 45, the search condition, and the search result by the image search unit 35 are read from the RAM 23 to the result image creation unit 36. The result image creation unit 36 creates a search result display image 42 based on the read keywords, search conditions, and search results (S14). The created search result display image 42 is stored in the RAM 23.

結果画像作成部36で作成された検索結果表示画像42は、RAM23から表示制御部37に読み出される。表示制御部37は、読み出された検索結果表示画像42をモニタ12に表示する(S15)。   The search result display image 42 created by the result image creation unit 36 is read from the RAM 23 to the display control unit 37. The display control unit 37 displays the read search result display image 42 on the monitor 12 (S15).

操作部15が操作され、ブランク45にキーワードが入力される(S16でYES)と、S13〜S15と同様のステップが繰り返される。   When the operation unit 15 is operated and a keyword is input to the blank 45 (YES in S16), the same steps as S13 to S15 are repeated.

S16でNOの場合に操作部15が操作され、AND条件ボタン47、OR条件ボタン48、キーワードが入力されているブランク45に対応するOFF条件ボタン49のいずれか、キーワードが入力されているブランク45に対応するNOT条件ボタン50のいずれか、又はポップアップメニュー51がクリックされる(S17でYES)と、クリックされたボタン47〜50又はポップアップメニュー51に応じた検索条件がRAM23に記憶されるとともに、S13〜S15と同様のステップが繰り返される。   If NO in S16, the operation unit 15 is operated, and either the AND condition button 47, the OR condition button 48, the OFF condition button 49 corresponding to the blank 45 in which the keyword is input, or the blank 45 in which the keyword is input. When one of the NOT condition buttons 50 corresponding to the above or the pop-up menu 51 is clicked (YES in S17), the search conditions corresponding to the clicked buttons 47 to 50 or the pop-up menu 51 are stored in the RAM 23, and The same steps as S13 to S15 are repeated.

以上説明したように、入力されたキーワードに基づく検索条件で検索した結果を表示する検索結果表示画像42に、HDD24に格納された画像と一対一で対応する複数の小領域を所定の序列で1列に連接した分布表示領域46を配し、入力されたキーワードと同一の単語がタグ付けされた画像に対応する小領域に印56が示されるから、検索対象となる画像全体の序列の中に、検索条件に合致する画像がどのように分布しているかを把握させることができる。   As described above, in the search result display image 42 that displays the search result based on the search condition based on the input keyword, a plurality of small areas that correspond one-to-one with the image stored in the HDD 24 are displayed in a predetermined order. Since a distribution display area 46 connected to the column is arranged and a mark 56 is shown in a small area corresponding to an image tagged with the same word as the input keyword, it is included in the order of the entire image to be searched. It is possible to grasp how images matching the search condition are distributed.

また、検索結果表示画像42に、キーワードが入力される複数のブランク45に対応する各分布表示領域46を互いに隙間を空けて配し、各分布表示領域46相互の隙間に、検索された画像に対応する小領域を互いに結ぶ帯57が示されるから、検索対象となる画像全体の序列の中に、検索された画像がどのように分布しているかを把握させることができる。   In addition, distribution display areas 46 corresponding to a plurality of blanks 45 to which keywords are input are arranged in the search result display image 42 with a gap between them, and the searched images are displayed in the gaps between the distribution display areas 46. Since the bands 57 connecting the corresponding small regions are shown, it is possible to grasp how the searched images are distributed in the order of the entire images to be searched.

なお、画像を検索する場合を例に説明したが、映像、音楽、ゲームといったその他のコンテンツを検索する場合にも本発明は適用可能である。   Note that the case of searching for an image has been described as an example, but the present invention can also be applied to the case of searching for other contents such as video, music, and games.

また、クライアント端末11が検索結果表示装置として機能する場合を例に説明したが、フォトストレージ、デジタルカメラ、携帯電話機といったコンテンツを取り扱うその他の電子機器に本発明を適用することも可能である。   Further, although the case where the client terminal 11 functions as a search result display device has been described as an example, the present invention can also be applied to other electronic devices that handle content such as a photo storage, a digital camera, and a mobile phone.

また、キーワードが1つだけ入力され、画像が検索された場合に、分布表示領域46に示された印56が操作部15によって選択されると、検索結果表示画像42が拡大され、印56が示されていた小領域に、その小領域に対応する画像を表示するようにしてもよい。   When only one keyword is input and an image is searched, if the mark 56 shown in the distribution display area 46 is selected by the operation unit 15, the search result display image 42 is enlarged and the mark 56 is displayed. An image corresponding to the small area may be displayed in the small area shown.

図16は、1つのキーワード「夏」が入力され、入力されたキーワードと同一の単語「夏」がタグ付けされた画像が検索された結果を表示した検索結果表示画像42を示す。この検索結果表示画像42に配された印56にポインタ43を合わせてマウス13でクリックすると、図17に示すように、クリックした箇所を中心に検索結果表示画像42が拡大される。   FIG. 16 shows a search result display image 42 in which one keyword “summer” is input, and a result of searching for an image tagged with the same word “summer” as the input keyword is displayed. When the pointer 43 is placed on the mark 56 arranged on the search result display image 42 and the mouse 13 is clicked, the search result display image 42 is enlarged around the clicked portion as shown in FIG.

印56が示されていた小領域には、各小領域に対応する画像61が表示される。また、検索ウインドウ41の左下には、拡大される前の検索結果表示画像42(図16参照)と同一の内容を示すナビゲーション画像62が表示される。ナビゲーション画像62には、拡大表示されている現在位置を表すナビゲーションマーク63が示されている。ナビゲーションマーク63が示されたナビゲーション画像62が表示されるので、検索結果表示画像42におけるどこの箇所が拡大して表示されているかをユーザに認識させることができる。   In the small area where the mark 56 is shown, an image 61 corresponding to each small area is displayed. In addition, a navigation image 62 showing the same content as the search result display image 42 (see FIG. 16) before being enlarged is displayed at the lower left of the search window 41. The navigation image 62 shows a navigation mark 63 representing the current position displayed in an enlarged manner. Since the navigation image 62 showing the navigation mark 63 is displayed, it is possible to make the user recognize which part of the search result display image 42 is enlarged and displayed.

画像61にポインタ43を合わせてマウス13でドラッグすると、検索結果表示画像42がスクロールされる。隣接する小領域に画像61が表示されていない場合には、画像61が表示されている小領域にジャンプしてから画像61が表示される。検索結果表示画像42のスクロールにより、表示されていなかった画像61を表示させることができる。ナビゲーション画像62にポインタ43を合わせてマウス13でドラッグすると、ナビゲーション画像62が移動する。ナビゲーションマーク63にポインタ43を合わせてマウス13でドラッグすると、ナビゲーションマーク63が移動するとともに、ナビゲーションマーク63の移動に連動して検索結果表示画像42がスクロールされる。   When the pointer 43 is placed on the image 61 and dragged with the mouse 13, the search result display image 42 is scrolled. When the image 61 is not displayed in the adjacent small area, the image 61 is displayed after jumping to the small area where the image 61 is displayed. By scrolling the search result display image 42, the image 61 that has not been displayed can be displayed. When the pointer 43 is placed on the navigation image 62 and dragged with the mouse 13, the navigation image 62 moves. When the pointer 43 is placed on the navigation mark 63 and dragged with the mouse 13, the navigation mark 63 moves and the search result display image 42 is scrolled in conjunction with the movement of the navigation mark 63.

図17に示す検索結果表示画像42に表示された画像61にポインタ43を合わせてマウス13でクリックすると、図18に示すように、クリックした画像61を中心に検索結果表示画像42がさらに拡大される。なお、図18に示す検索結果表示画像42のマウス13による操作は、図17に示す検索結果表示画像42のマウス13による操作と同様であり、その説明は省略する。   When the pointer 43 is placed on the image 61 displayed on the search result display image 42 shown in FIG. 17 and the mouse 13 is clicked, the search result display image 42 is further enlarged around the clicked image 61 as shown in FIG. The The operation of the search result display image 42 shown in FIG. 18 using the mouse 13 is the same as the operation of the search result display image 42 shown in FIG. 17 using the mouse 13, and the description thereof is omitted.

なお、分布表示領域46に示された印56が選択された場合に限定されず、線分44を構成する幅広に示された矩形が選択された場合にも検索結果表示画像42が拡大され、幅広に示された矩形に、その矩形に対応する画像を表示するようにしてもよい。   Note that the present invention is not limited to the case where the mark 56 shown in the distribution display area 46 is selected, and the search result display image 42 is enlarged even when a wide rectangle constituting the line segment 44 is selected, You may make it display the image corresponding to the rectangle on the rectangle shown wide.

また、複数のキーワードが入力され、画像が検索された場合にも、キーワードが1つだけ入力され、画像が検索された場合と同様に、検索結果表示画像42を拡大表示するようにしてもよい。   Further, when a plurality of keywords are input and an image is searched, only one keyword is input and the search result display image 42 may be enlarged as in the case where an image is searched. .

11 クライアント端末
12 モニタ
13 マウス
14 キーボード
15 操作部
21 CPU
24 ハードディスクドライブ(HDD)
31 画像一覧テーブル
32 タグ一覧テーブル
33 撮影日時一覧テーブル
34 検索結果表示プログラム
35 画像検索部
36 結果画像作成部
37 表示制御部
41 検索ウインドウ
42 検索結果表示画像
44 線分
46 分布表示領域
47 AND条件ボタン
48 OR条件ボタン
49 OFF条件ボタン
50 NOT条件ボタン
51 ポップアップメニュー
56 印
57 帯
61 画像
11 Client Terminal 12 Monitor 13 Mouse 14 Keyboard 15 Operation Unit 21 CPU
24 Hard disk drive (HDD)
31 Image List Table 32 Tag List Table 33 Shooting Date / Time List Table 34 Search Result Display Program 35 Image Search Unit 36 Result Image Creation Unit 37 Display Control Unit 41 Search Window 42 Search Result Display Image 44 Line Segment 46 Distribution Display Area 47 AND Condition Button 48 OR condition button 49 OFF condition button 50 NOT condition button 51 Pop-up menu 56 Mark 57 Band 61 Image

Claims (12)

複数のキーワードを受け付けて、受け付けたキーワードに基づく検索条件で、1つ以上の単語がタグ付けされた複数の検索対象コンテンツの中からコンテンツを検索するコンテンツ検索部と、
各検索対象コンテンツに一対一で対応する複数の小領域を所定の序列で1列に連接した複数の分布表示領域を各キーワードに一対一に対応して互いに隙間を空けて平行に配し、前記分布表示領域ごとに対応する前記キーワードと同一の単語がタグ付けされた検索対象コンテンツに対応する前記小領域に所定の印を示し、さらに検索されたコンテンツに対応する、各分布表示領域の前記小領域を互いに結ぶ帯を各分布表示領域と直交するように前記隙間に示した検索結果表示画像を作成する画像作成部と、
前記検索結果表示画像をモニタに表示する表示制御部とを備えたことを特徴とする検索結果表示装置。
A content search unit that receives a plurality of keywords and searches for content from a plurality of search target contents tagged with one or more words under a search condition based on the received keywords;
A plurality of distribution display region continuously connected to one column a corresponding plurality of small regions in a predetermined hierarchy to correspond one-to-one to each keyword arranged in parallel with a gap to each other in one-to-one to each search object content, the A predetermined mark is shown in the small area corresponding to the search target content tagged with the same word as the keyword corresponding to each distribution display area, and the small in each distribution display area corresponding to the searched content. An image creation unit for creating a search result display image shown in the gap so that a band connecting the regions to each other is orthogonal to each distribution display region ;
A search result display device comprising: a display control unit for displaying the search result display image on a monitor.
前記画像作成部は、前記分布表示領域と同一の長さを有した所定の幅の線分を前記分布表示領域と平行に配した前記検索結果表示画像を作成することを特徴とする請求項1記載の検索結果表示装置。 Wherein the image creating unit according to claim 1, characterized in that to create the search result display image of a line segment of a predetermined width having the distribution display area the same length and arranged in parallel with the distribution display region serial mounting of the search results display device. 操作信号を入力する操作部を備え、
前記表示制御部は、前記操作部から入力された前記操作信号に応答して、前記モニタに表示していた前記検索結果表示画像を拡大するとともに、前記所定の印が示された前記小領域に、その小領域に対応するコンテンツを表示することを特徴とする請求項1また2記載の検索結果表示装置。
An operation unit for inputting operation signals is provided.
In response to the operation signal input from the operation unit, the display control unit enlarges the search result display image displayed on the monitor, and displays the predetermined mark on the small region. , claim 1 or 2 Symbol placement search result display unit and displaying the content corresponding to the small region.
前記画像作成部は、各検索対象コンテンツに一対一で対応する複数の矩形を前記所定の序列で1列に連接した前記線分を配し、検索されたコンテンツに対応する前記矩形を、それ以外の前記矩形と異なる態様で示した前記検索結果表示画像を作成することを特徴とする請求項記載の検索結果表示装置。 The image creation unit arranges the line segments in which a plurality of rectangles corresponding to each search target content on a one-to-one basis are connected in a row in the predetermined order, and the rectangle corresponding to the searched content is assigned to the other rectangles. The search result display device according to claim 2 , wherein the search result display image shown in a different form from the rectangle is created. 操作信号を入力する操作部を備え、
前記表示制御部は、前記操作部から入力された前記操作信号に応答して、前記モニタに表示していた前記検索結果表示画像を拡大するとともに、前記コンテンツ検索部で検索されたコンテンツに対応する前記矩形に、その矩形に対応するコンテンツを表示することを特徴とする請求項記載の検索結果表示装置。
An operation unit for inputting operation signals is provided.
In response to the operation signal input from the operation unit, the display control unit enlarges the search result display image displayed on the monitor and corresponds to the content searched by the content search unit. The search result display device according to claim 4 , wherein content corresponding to the rectangle is displayed on the rectangle.
検索条件を指定する条件指定部を備えたことを特徴とする請求項1ないし5のいずれか1項に記載の検索結果表示装置。 Results display device according to any one of claims 1, characterized in that with a condition designating section that designates search conditions 5. 前記コンテンツ検索部は、受け付けた複数のキーワードと同一の単語のうち、指定された数以上がタグ付けされた検索対象コンテンツを検索するAND条件でコンテンツを検索することを特徴とする請求項記載の検索結果表示装置。 7. The content search unit according to claim 6 , wherein the content search unit searches for content using an AND condition for searching for search target content tagged with a specified number or more of the same words as a plurality of received keywords. Search result display device. 前記コンテンツ検索部は、受け付けた複数のキーワードと同一の単語のいずれか1つ以上がタグ付けされた検索対象コンテンツを検索するOR条件でコンテンツを検索することを特徴とする請求項6または7記載の検索結果表示装置。 The content search unit, a plurality of keywords identical any one or more words, characterized in that the search for content in OR condition for searching a search target content tagged claim 6 or 7, wherein the accepted Search result display device. 前記コンテンツ検索部は、受け付けたキーワードのうち、指定されたキーワードを検索条件から除外するOFF条件でコンテンツを検索することを特徴とする請求項6ないし8のいずれか1項に記載の検索結果表示装置。 The content search unit, among the received keyword, the search result display according to any one of 6 to claim, characterized in that search for content to exclude OFF conditions specified keyword from the search criteria 8 apparatus. 前記コンテンツ検索部は、受け付けたキーワードのうちの指定されたキーワードと同一の単語がタグ付けされた検索対象コンテンツを検索の対象から除外するNOT条件でコンテンツを検索することを特徴とする請求項6ないし9のいずれか1項に記載の検索結果表示装置。 Claim 6, wherein the content retrieval unit, characterized in that the same words and specified keyword of the received keyword to search for content to exclude NOT condition the retrievable contents are tagged from scanning 10. The search result display device according to any one of items 9 to 9 . 複数のキーワードを受け付けて、受け付けたキーワードに基づく検索条件で、1つ以上の単語がタグ付けされた複数の検索対象コンテンツの中からコンテンツを検索するコンテンツ検索ステップと、
各検索対象コンテンツに一対一で対応する複数の小領域を所定の序列で1列に連接した複数の分布表示領域を各キーワードに一対一に対応して互いに隙間を空けて平行に配し、前記分布表示領域ごとに対応する前記キーワードと同一の単語がタグ付けされた検索対象コンテンツに対応する前記小領域に所定の印を示し、さらに検索されたコンテンツに対応する、各分布表示領域の前記小領域を互いに結ぶ帯を各分布表示領域と直交するように前記隙間に示した検索結果表示画像を作成する画像作成ステップと、
前記検索画像表示画像をモニタに表示する表示ステップとをコンピュータが実行することを特徴とする検索結果表示方法。
A content search step of receiving a plurality of keywords and searching for content from a plurality of search target contents tagged with one or more words under a search condition based on the received keywords;
A plurality of distribution display region continuously connected to one column a corresponding plurality of small regions in a predetermined hierarchy to correspond one-to-one to each keyword arranged in parallel with a gap to each other in one-to-one to each search object content, the A predetermined mark is shown in the small area corresponding to the search target content tagged with the same word as the keyword corresponding to each distribution display area, and the small in each distribution display area corresponding to the searched content. An image creation step of creating a search result display image shown in the gap so that a band connecting the regions to each other is orthogonal to each distribution display region ;
A search result display method, wherein a computer executes a display step of displaying the search image display image on a monitor.
複数のキーワードを受け付けて、受け付けたキーワードに基づく検索条件で、1つ以上の単語がタグ付けされた複数の検索対象コンテンツの中からコンテンツを検索するコンテンツ検索ステップと、
各検索対象コンテンツに一対一で対応する複数の小領域を所定の序列で1列に連接した複数の分布表示領域を各キーワードに一対一に対応して互いに隙間を空けて平行に配し、
前記分布表示領域ごとに対応する前記キーワードと同一の単語がタグ付けされた検索対象コンテンツに対応する前記小領域に所定の印を示し、さらに検索されたコンテンツに対応する、各分布表示領域の前記小領域を互いに結ぶ帯を各分布表示領域と直交するように前記隙間に示した検索結果表示画像を作成する画像作成ステップと、
前記検索結果表示画像をモニタに表示する表示ステップとをコンピュータに実行させるための検索結果表示プログラム。
A content search step of receiving a plurality of keywords and searching for content from a plurality of search target contents tagged with one or more words under a search condition based on the received keywords;
A plurality of distribution display areas in which a plurality of small areas corresponding one-to-one to each search target content are connected in a predetermined order in a row are arranged in parallel with a gap between each keyword in a one-to-one correspondence ,
The distribution display indicates a predetermined mark on the small region in which the keyword same words and correspond to the retrievable contents are tagged corresponding to each area, corresponding to the additional search content, wherein each distribution display areas An image creation step for creating a search result display image shown in the gap so that a band connecting the small areas to each other is orthogonal to each distribution display area ;
A search result display program for causing a computer to execute a display step of displaying the search result display image on a monitor.
JP2009105851A 2009-04-24 2009-04-24 Search result display method and apparatus, and search result display program Expired - Fee Related JP5362427B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009105851A JP5362427B2 (en) 2009-04-24 2009-04-24 Search result display method and apparatus, and search result display program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009105851A JP5362427B2 (en) 2009-04-24 2009-04-24 Search result display method and apparatus, and search result display program

Publications (2)

Publication Number Publication Date
JP2010257169A JP2010257169A (en) 2010-11-11
JP5362427B2 true JP5362427B2 (en) 2013-12-11

Family

ID=43318010

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009105851A Expired - Fee Related JP5362427B2 (en) 2009-04-24 2009-04-24 Search result display method and apparatus, and search result display program

Country Status (1)

Country Link
JP (1) JP5362427B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101501462B1 (en) * 2013-06-10 2015-03-11 이용재 Unified Data Object Management System and the Method
KR20210101583A (en) * 2020-02-10 2021-08-19 삼성전자주식회사 Electronic device and method for operating contents using the same

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005063283A (en) * 2003-08-19 2005-03-10 Ricoh Co Ltd Document browsing device, document browsing method, program and recording medium
JP4719921B2 (en) * 2005-11-15 2011-07-06 独立行政法人情報通信研究機構 Data display device and data display program
JP4894252B2 (en) * 2005-12-09 2012-03-14 ソニー株式会社 Data display device, data display method, and data display program
US7793230B2 (en) * 2006-11-30 2010-09-07 Microsoft Corporation Search term location graph

Also Published As

Publication number Publication date
JP2010257169A (en) 2010-11-11

Similar Documents

Publication Publication Date Title
US7793209B2 (en) Electronic apparatus with a web page browsing function
JP5167821B2 (en) Document search apparatus, document search method, and document search program
US7542994B2 (en) Graphical user interface for rapid image categorization
US9619469B2 (en) Adaptive image browsing
US20090007014A1 (en) Center locked lists
JP2008108200A (en) Information extraction device, method, program and storage medium
JP2007286864A (en) Image processor, image processing method, program, and recording medium
JPH1011458A (en) Information retrieval device
JP2007317034A (en) Image processing apparatus, image processing method, program, and recording medium
JP2010165030A (en) Document management system, and method and program of the same
JP2001337994A (en) Thumbnail display system and method and recording medium with processing program therefor recorded therein
JP5362427B2 (en) Search result display method and apparatus, and search result display program
JP2009069875A (en) Content retrieval device, content retrieval method, program and recording medium
US20040177067A1 (en) Directory search method, directory search apparatus, program for implementing and operating the same, and memory medium
JP2003303210A (en) Information processing method, information processing device, and recording medium
JP2005275979A (en) Image retrieving program
JP5138617B2 (en) Information processing apparatus, information processing method, and program
JP4466174B2 (en) SEARCH DEVICE, SEARCH METHOD, AND PROGRAM
JP2007018408A (en) Image retrieval apparatus having function for retrieving image by periodical date and time, and image retrieval program
JP2004259040A (en) Content retrieval method, and storage medium storing content retrieval program
JP2006171891A (en) Image management device, image management method, and image management program
JP3933407B2 (en) Document processing apparatus, document processing method, and storage medium storing document processing program
JPH10222528A (en) Information processor and method for controlling the same
JP5396926B2 (en) Image display device
JP2005190188A (en) Electronic business form system, electronic business form server, electronic business form browsing method, and program of the same

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111206

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130529

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130711

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130807

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130904

R150 Certificate of patent or registration of utility model

Ref document number: 5362427

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees