JP2003244579A - Image processing system, program and system - Google Patents
Image processing system, program and systemInfo
- Publication number
- JP2003244579A JP2003244579A JP2002040756A JP2002040756A JP2003244579A JP 2003244579 A JP2003244579 A JP 2003244579A JP 2002040756 A JP2002040756 A JP 2002040756A JP 2002040756 A JP2002040756 A JP 2002040756A JP 2003244579 A JP2003244579 A JP 2003244579A
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- related information
- environment
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、画像処理システ
ム、プログラム、及びシステムに関する。特に本発明
は、撮像した画像を、撮像した画像と関連する情報と共
に提供することができる画像処理システムに関する。TECHNICAL FIELD The present invention relates to an image processing system, a program, and a system. In particular, the present invention relates to an image processing system capable of providing a captured image together with information related to the captured image.
【０００２】[0002]
【従来の技術】従来、デジタル画像に効果音を組み合わ
せて表示する方法が、特開平８−８３４６８及び特開平
９ー２２４１６に開示されている。また、デジタル画像
を表示する際に、台紙、装飾画像、及び音を付加して表
示する方法が特開平９−２１４６５４に開示されてい
る。また、デジタル画像を印刷する際にデジタル画像を
撮像した地名等を共に印刷する方法が特開平９−３７２
０３に開示されている。2. Description of the Related Art Conventionally, Japanese Patent Laid-Open No. 8-83468 and Japanese Patent Laid-Open No. 9-22416 disclose a method of displaying a combination of sound effects on a digital image. Japanese Patent Laid-Open No. 9-214654 discloses a method of displaying a digital image by adding a mount, a decorative image, and a sound. Further, there is a method of printing a place name or the like of a digital image when printing the digital image.
03.
【０００３】[0003]
【発明が解決しようとする課題】しかし、上記の方法で
は、撮像した画像に関連する音声又は画像を付加するこ
とが困難であった。したがって、撮像者が、上記に開示
された装置に表示された画像を見て、撮像時の喜びや楽
しみ等の記憶を思い起こすことは困難であった。However, in the above method, it is difficult to add a sound or an image related to the captured image. Therefore, it is difficult for the photographer to look at the image displayed on the device disclosed above and to remember the joy and enjoyment at the time of photographing.
【０００４】そこで本発明は、上記の課題を解決するこ
とのできる画像処理システム、プログラム、及びシステ
ムを提供することを目的とする。この目的は特許請求の
範囲における独立項に記載の特徴の組み合わせにより達
成される。また従属項は本発明の更なる有利な具体例を
規定する。Therefore, an object of the present invention is to provide an image processing system, a program, and a system which can solve the above problems. This object is achieved by a combination of features described in independent claims of the invention. The dependent claims define further advantageous specific examples of the present invention.
【０００５】[0005]
【課題を解決するための手段】即ち、本発明の第１の形
態によると、撮像した画像を処理するシステムは、撮像
したときの環境を示す環境情報を、画像に対応付けて取
得する取得部と、環境情報に対応付けて、撮像環境に関
連する音声及び画像の少なくとも一つを含む関連情報を
予め保存する関連情報保存部と、当該画像に対応付けら
れた環境情報に対応する関連情報を関連情報保存部から
検索して画像と共に出力する検索部とを備える。That is, according to the first aspect of the present invention, a system for processing a picked-up image acquires an environment information indicating an environment at the time of picking-up the image in association with the image. And a related information storage unit that stores in advance related information including at least one of a sound and an image related to the imaging environment in association with the environment information, and related information corresponding to the environment information associated with the image. And a search unit that searches the related information storage unit and outputs it together with the image.
【０００６】更に、画像処理システムは、撮像したとき
の環境を示す環境情報を、画像に対応付けて格納する格
納部を更に備えることが好ましい。また、環境情報は、
撮像が行われた位置を示す位置情報であり、検索部は、
当該位置情報に対応した関連情報を関連情報保存部から
検索し、画像と共に出力してもよい。また、環境情報
は、撮像が行われた時間を示す時間情報であり、検索部
は、当該時間情報に対応した関連情報を関連情報保存部
から検索し、画像と共に出力してもよい。また、環境情
報は、撮像が行われた日を示す日情報であり、検索部
は、当該日情報に対応した関連情報を関連情報保存部か
ら検索し、画像と共に出力してもよい。Further, it is preferable that the image processing system further comprises a storage unit for storing environment information indicating the environment at the time of capturing the image in association with the image. Also, environmental information is
It is position information indicating the position where the image was taken, and the search unit
The related information corresponding to the position information may be retrieved from the related information storage unit and output together with the image. Further, the environment information is time information indicating the time at which the image was captured, and the search unit may search the related information storage unit for related information corresponding to the time information and output the related information together with the image. Further, the environment information is day information indicating the day on which the image was captured, and the search unit may search the related information storage unit for related information corresponding to the day information and output the related information together with the image.
【０００７】更に、検索部は、日情報から撮像が行われ
た季節を判断し、当該季節に対応した関連情報を関連情
報保存部から検索し、画像と共に出力してもよい。環境
情報は、日情報及び撮像が行われた時間を示す時間情報
を含み、検索部は、当該日情報及び時間情報に対応した
関連情報を関連情報保存部から検索し、画像と共に出力
してもよい。Further, the retrieval unit may determine the season in which the image was taken from the day information, retrieve the relevant information corresponding to the season from the relevant information storage unit, and output it together with the image. The environmental information includes day information and time information indicating the time at which the image was captured, and the search unit searches the related information storage unit for related information corresponding to the day information and the time information, and outputs the information together with the image. Good.
【０００８】また、環境情報は、撮像が行われた位置及
び時間を示す位置時間情報であり、検索部は、位置時間
情報に対応した関連情報を関連情報保存部から検索し、
画像と共に出力してもよい。また、環境情報は、季節に
関する季節情報であり、検索部は、季節情報に基づいて
関連情報を関連情報保存部から検索し、画像と共に出力
してもよい。また、環境情報は、撮像時の明るさであ
り、検索部は、撮像時の明るさに基づいて関連情報を関
連情報保存部から検索し、画像と共に出力してもよい。
また、環境情報は、被写体までの距離を示す距離情報で
あり、検索部は、距離情報に基づいて関連情報を関連情
報保存部から検索し、画像と共に出力してもよい。The environment information is position / time information indicating the position and time at which the image was taken, and the search unit searches the related information storage unit for related information corresponding to the position / time information.
You may output with an image. Further, the environmental information is seasonal information about the season, and the search unit may search the related information storage unit for related information based on the seasonal information and output the related information together with the image. Further, the environment information is brightness at the time of image capturing, and the search unit may search the related information storage unit for related information based on the brightness at the time of image capturing, and may output the related information together with the image.
The environment information is distance information indicating the distance to the subject, and the search unit may search the related information storage unit for related information based on the distance information and output the related information together with the image.
【０００９】更に、検索部は、環境情報に対応する画像
を含む関連情報を関連情報保存部から検索し、関連情報
に含まれる画像を台紙として撮像した画像に合成して合
成画像を生成し、合成画像を出力することが好ましい。
また、検索部は、環境情報に対応する音声を含む関連情
報を関連情報保存部から検索し、関連情報に含まれる音
声が、関連情報を開封する指示を条件として再生される
ように音声再生情報を生成し、、音声再生情報を画像と
共に出力することが好ましい。Further, the search unit searches the related information storage unit for related information including an image corresponding to the environmental information, combines the image included in the related information with an image picked up as a mount to generate a combined image, It is preferable to output a composite image.
Further, the search unit searches the related information storage unit for related information including the sound corresponding to the environmental information, and reproduces the sound included in the related information such that the sound is reproduced on condition that the instruction to open the related information is given. Is generated and the audio reproduction information is output together with the image.
【００１０】本発明の第２の形態によると、撮像した画
像を処理するプログラムは、撮像したときの環境を示す
環境情報を、画像に対応付けて取得する取得モジュール
と、環境情報に対応付けて、撮像環境に関連する音声及
び画像の少なくとも一つを含む関連情報を予め保存する
関連情報保存モジュールと、当該画像に対応付けられた
環境情報に対応する関連情報を関連情報保存モジュール
から検索して画像と共に出力する検索モジュールとを備
える。プログラムは、撮像したときの環境を示す環境情
報を、画像に対応付けて格納する格納モジュールを更に
備えることが好ましい。According to the second aspect of the present invention, the program for processing the picked-up image associates the environment information indicating the environment at the time of picking up with the acquisition module and the environment information. A related information storage module that stores in advance related information including at least one of a voice and an image related to an imaging environment, and a related information storage module that searches for related information corresponding to environment information associated with the image. And a search module for outputting together with the image. It is preferable that the program further includes a storage module that stores environment information indicating an environment when the image is captured in association with the image.
【００１１】本発明の第３の形態によると、撮像した画
像を表示するシステムは、画像を撮像する撮像手段と、
撮像したときの環境を示す環境情報を画像に対応付けて
取得する取得部と、環境情報に対応付けて、撮像環境に
関連する音声及び画像の少なくとも一つを含む関連情報
を予め保存する関連情報保存部と、当該画像に対応付け
られた環境情報に対応する関連情報を関連情報保存部か
ら検索して画像と共に出力する検索部と、画像を検索部
に要求し、得られた画像を関連情報と共に表示する表示
手段とを備える。更に、システムは、撮像したときの環
境を示す環境情報を、画像に対応付けて格納する格納部
を更に備える。According to a third aspect of the present invention, a system for displaying a picked-up image includes an image pickup means for picking up an image,
An acquisition unit that acquires environment information indicating an environment when the image was captured by associating it with an image, and related information that associates with the environment information and previously stores related information including at least one of a sound and an image related to the imaging environment. A storage unit, a search unit that searches the related information storage unit for related information corresponding to the environmental information associated with the image and outputs the related information together with the image, and requests the image to the search unit, and acquires the obtained image as the related information. And display means for displaying the same. Furthermore, the system further includes a storage unit that stores environment information indicating the environment when the image was captured in association with the image.
【００１２】なお上記の発明の概要は、本発明の必要な
特徴の全てを列挙したものではなく、これらの特徴群の
サブコンビネーションも又発明となりうる。The above summary of the invention does not enumerate all the necessary features of the present invention, and sub-combinations of these feature groups can also be the invention.
【００１３】[0013]
【発明の実施の形態】以下、発明の実施の形態を通じて
本発明を説明するが、以下の実施形態はクレームにかか
る発明を限定するものではなく、又実施形態の中で説明
されている特徴の組み合わせの全てが発明の解決手段に
必須であるとは限らない。BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, the present invention will be described through embodiments of the invention, but the following embodiments do not limit the claimed invention, and the features described in the embodiments Not all combinations are essential to the solution of the invention.
【００１４】図１は、本発明の一実施例である画像処理
システムの構成の概略を示す。画像処理システム１００
は、画像を撮像する撮像手段１０、画像が撮像された位
置を検出する位置情報検出手段１２、画像を処理する画
像処理部１４、及び画像を画像処理部１４に要求し、画
像処理部１４から得られた画像を表示する表示手段２４
を備える。位置情報検出手段１２は、撮像された位置の
情報として、例えば、ＧＰＳ情報を取得することにより
撮像された場所の緯度及び経度を検出する。FIG. 1 schematically shows the configuration of an image processing system which is an embodiment of the present invention. Image processing system 100
Requests the image pickup means 10 for picking up an image, the position information detection means 12 for detecting the position where the image is picked up, the image processing section 14 for processing the image, and the image processing section 14 from the image processing section 14. Display means 24 for displaying the obtained image
Equipped with. The position information detection means 12 detects the latitude and longitude of the imaged place by acquiring GPS information, for example, as the information of the imaged position.
【００１５】画像処理部１４は、取得部１６、格納部２
８、検索部２２、及び関連情報保存部１８を有する。取
得部１６は、撮像手段１０から撮像した画像を取得し、
撮像手段１０及び位置情報検出手段１２から撮像したと
きの環境を示す環境情報を画像に対応付けて取得する。
取得部１６が取得する環境情報としては、例えば、撮像
が行われた位置を示す位置情報、撮像が行われた時間を
示す時間情報、撮像が行われた日を示す日情報、撮像が
行われた位置及び時間を示す位置時間情報、季節に関す
る季節情報、撮像時の明るさ、及び被写体までの距離を
示す距離情報の少なくとも一つを含む。環境情報は、上
記の位置情報、時間情報、日情報、位置時間情報、季節
情報、撮像時の明るさの情報、及び距離情報のうち複数
の情報を含んでもよい。The image processing section 14 includes an acquisition section 16 and a storage section 2.
8, a search unit 22, and a related information storage unit 18. The acquisition unit 16 acquires the imaged image from the imaging unit 10,
The environment information indicating the environment when the image is captured is acquired from the image capturing unit 10 and the position information detecting unit 12 in association with the image.
As the environment information acquired by the acquisition unit 16, for example, position information indicating the position where the image capturing is performed, time information indicating the time when the image capturing is performed, day information indicating the date when the image capturing is performed, and image capturing are performed. At least one of position / time information indicating a position and time, seasonal information regarding a season, brightness at the time of image capturing, and distance information indicating a distance to a subject. The environment information may include a plurality of pieces of information among the above position information, time information, day information, position time information, season information, brightness information at the time of image pickup, and distance information.
【００１６】関連情報保存部１８は、取得部１６が取得
した環境情報に対応付けて関連情報を予め保存する。関
連情報は、撮像環境に関連する音声及び画像の少なくと
も一つを含む。検索部２２は、撮像された画像に対応付
けられた環境情報に対応する関連情報を関連情報保存部
１８から検索して画像と共に表示手段２４に出力する。
表示手段２４は、検索部２２から得られた画像を関連情
報と共に表示する。格納部２８は、撮像したときの環境
を示す環境情報を、画像に対応付けて格納する。The related information storage unit 18 stores the related information in advance in association with the environment information acquired by the acquisition unit 16. The related information includes at least one of audio and images related to the imaging environment. The search unit 22 searches the related information storage unit 18 for related information corresponding to the environment information associated with the captured image, and outputs it to the display unit 24 together with the image.
The display unit 24 displays the image obtained from the search unit 22 together with the related information. The storage unit 28 stores environment information indicating the environment when the image was captured in association with the image.
【００１７】関連情報保存部１８は、場所情報データベ
ース２０及び関連情報データベース２６を含む。場所情
報データベース２０は、位置情報に対応づいた関連情報
を予め保存する。関連情報データベース２６は、時間情
報、日情報、位置時間情報、季節情報、撮像時の明る
さ、及び距離情報等に対応付いた関連情報を予め保存す
る。The related information storage unit 18 includes a place information database 20 and a related information database 26. The location information database 20 stores in advance related information corresponding to the location information. The related information database 26 stores in advance related information associated with time information, day information, position / time information, season information, brightness at the time of imaging, distance information, and the like.
【００１８】このように、本実施例の画像処理システム
１００は、環境情報に対応付いた環境情報を関連情報保
存部１８から検索し、関連情報を撮像した画像と共に表
示手段２４に表示することにより、画像を撮像したとき
の喜びや楽しみを画像の撮像者に思い起こさせることが
できる。As described above, the image processing system 100 according to the present embodiment retrieves the environmental information associated with the environmental information from the related information storage section 18 and displays the related information on the display means 24 together with the captured image. , It is possible to remind the photographer of the image of the joy and enjoyment of capturing the image.
【００１９】図２は、画像処理部１４のハードウェア構
成を示す。画像処理部14は、それぞれバス７３０に接続
されたＣＰＵ７００と、ＲＯＭ７０２と、ＲＡＭ７０４
と、通信インタフェース７０６と、ハードディスクドラ
イブ７０８と、データベースインタフェース７１０と、
フロッピー（登録商標）ディスクドライブ７１２と、Ｃ
Ｄ−ＲＯＭドライブ７１４とを備える。ＣＰＵ７００
は、ＲＯＭ７０２及びＲＡＭ７０４に格納されたプログ
ラムに基づいて動作する。通信インタフェース７０６
は、インターネット１０を介して外部と通信する。デー
タベースインタフェース７１０は、データベースへのデ
ータの書込、及びデータベースの内容の更新を行う。格
納装置の一例としてのハードディスクドライブ７０８
は、設定情報及びＣＰＵ７００が動作するプログラムを
格納する。FIG. 2 shows the hardware configuration of the image processing unit 14. The image processing unit 14 includes a CPU 700, a ROM 702, and a RAM 704, each of which is connected to the bus 730.
A communication interface 706, a hard disk drive 708, a database interface 710,
Floppy disk drive 712, C
And a D-ROM drive 714. CPU700
Operates based on the programs stored in the ROM 702 and the RAM 704. Communication interface 706
Communicates with the outside via the Internet 10. The database interface 710 writes data to the database and updates the contents of the database. Hard disk drive 708 as an example of a storage device
Stores setting information and a program for operating the CPU 700.
【００２０】フロッピーディスクドライブ７１２はフロ
ッピーディスク７２０からデータまたはプログラムを読
み取りＣＰＵ７００に提供する。ＣＤ−ＲＯＭドライブ
７１４はＣＤ−ＲＯＭ７２２からデータまたはプログラ
ムを読み取りＣＰＵ７００に提供する。通信インタフェ
ース７０６は、インターネット１０に接続してデータを
送受信する。データベースインタフェース７１０は、各
種データベース７２４と接続してデータを送受信する。The floppy disk drive 712 reads data or programs from the floppy disk 720 and provides them to the CPU 700. The CD-ROM drive 714 reads data or programs from the CD-ROM 722 and provides them to the CPU 700. The communication interface 706 connects to the Internet 10 to send and receive data. The database interface 710 connects to various databases 724 to send and receive data.
【００２１】ＣＰＵ７００が実行するソフトウエアは、
フロッピーディスク７２０またはＣＤ−ＲＯＭ７２２等
の記録媒体に格納されて利用者に提供される。記録媒体
に格納されたソフトウエアは圧縮されていても非圧縮で
あっても良い。ソフトウエアは記録媒体からハードディ
スクドライブ７０８にインストールされ、ＲＡＭ７０４
に読み出されてＣＰＵ７００により実行される。The software executed by the CPU 700 is
It is stored in a recording medium such as a floppy disk 720 or a CD-ROM 722 and provided to the user. The software stored in the recording medium may be compressed or uncompressed. The software is installed in the hard disk drive 708 from the recording medium, and the RAM 704
Read out and executed by the CPU 700.
【００２２】記録媒体に格納されて提供されるソフトウ
エア、即ちハードディスクドライブ７０８にインストー
ルされるソフトウェアは、機能構成として、撮像したと
きの環境を示す環境情報を、画像に対応付けて取得する
取得モジュールと、環境情報に対応付けて、撮像環境に
関連する音声及び画像の少なくとも一つを含む関連情報
を予め保存する関連情報保存モジュールと、当該画像に
対応付けられた環境情報に対応する関連情報を関連情報
保存モジュールから検索して画像と共に出力する検索モ
ジュールとを備える。前記各モジュールがコンピュータ
に働きかけて、ＣＰＵ７００に行わせる処理は、それぞ
れ本実施例の図１に示す画像処理部１４における、対応
する部材の機能及び動作と同一であるので説明を省略す
る。The software stored in the recording medium and provided, that is, the software installed in the hard disk drive 708, is an acquisition module that acquires, as a functional configuration, environment information indicating the environment when the image is captured in association with the image. And a related information storage module that stores in advance related information including at least one of a voice and an image related to the imaging environment in association with the environment information, and related information corresponding to the environment information associated with the image. And a search module that searches from the related information storage module and outputs together with the image. The processing that each module causes the computer to cause the CPU 700 to perform is the same as the function and operation of the corresponding member in the image processing unit 14 shown in FIG.
【００２３】図２に示した、記録媒体の一例としてのフ
ロッピーディスク７２０またはＣＤ−ＲＯＭ７２２に
は、本出願で説明した全ての実施形態における画像処理
部14の動作の一部または全ての機能を格納することがで
きる。A floppy disk 720 or a CD-ROM 722 as an example of a recording medium shown in FIG. 2 stores some or all functions of the operation of the image processing unit 14 in all the embodiments described in the present application. can do.
【００２４】これらのプログラムは記録媒体から直接Ｒ
ＡＭに読み出されて実行されても、一旦ハードディスク
ドライブにインストールされた後にＲＡＭに読み出され
て実行されても良い。更に、上記プログラムは単一の記
録媒体に格納されても複数の記録媒体に格納されても良
い。又、符号化した形態で格納されていてもよい。These programs are read directly from the recording medium.
It may be read out to the AM and executed, or once installed in the hard disk drive and then read out to the RAM and executed. Further, the program may be stored in a single recording medium or a plurality of recording media. It may also be stored in encoded form.
【００２５】記録媒体としては、フロッピーディスク、
ＣＤ−ＲＯＭの他にも、ＤＶＤ等の光学記録媒体、ＭＤ
等の磁気記録媒体、ＰＤ等の光磁気記録媒体、テープ媒
体、磁気記録媒体、ＩＣカードやミニチュアーカードな
どの半導体メモリー等を用いることができる。又、専用
通信ネットワークやインターネットに接続されたサーバ
システムに設けたハードディスクまたはＲＡＭ等の格納
装置を記録媒体として使用し、通信網を介してプログラ
ムを画像処理部１４に提供してもよい。The recording medium is a floppy disk,
In addition to CD-ROM, optical recording media such as DVD, MD
And the like, a magneto-optical recording medium such as a PD, a tape medium, a magnetic recording medium, a semiconductor memory such as an IC card and a miniature card, and the like can be used. A storage device such as a hard disk or a RAM provided in a server system connected to a dedicated communication network or the Internet may be used as a recording medium to provide the program to the image processing unit 14 via the communication network.
【００２６】図３は、図１に示す画像処理システム１０
０の変形例を示す。図３の画像処理システム２００は、
取得部１６、検索部２２、関連情報保存部１８、及び格
納部２８の機能がそれぞれ異なるコンピュータによって
実現される点以外は、図１の画像処理システム１００と
同様の構成を有する。取得部１６は、電気通信回線によ
って撮像手段１０、位置情報検出手段１２，格納部２
８、関連情報保存部１８、及び検索部２２に接続され
る。検索部２２は、電気通信回線によって格納部２８、
関連情報保存部１８、及び表示手段２４に接続される。
図３の取得部１６、検索部２２、関連情報保存部１８、
及び格納部２８のそれぞれの機能は、図１に示す取得部
１６、検索部２２、関連情報保存部１８、及び格納部２
８のそれぞれの機能と同様であるので説明を省略する。FIG. 3 shows the image processing system 10 shown in FIG.
A modified example of 0 is shown. The image processing system 200 of FIG.
It has the same configuration as the image processing system 100 of FIG. 1 except that the functions of the acquisition unit 16, the search unit 22, the related information storage unit 18, and the storage unit 28 are realized by different computers. The acquisition unit 16 includes an image pickup unit 10, a position information detection unit 12, and a storage unit 2 via an electric communication line.
8, the related information storage unit 18, and the search unit 22 are connected. The search unit 22 uses a telecommunication line to store the storage unit 28,
It is connected to the related information storage unit 18 and the display means 24.
3, the acquisition unit 16, the search unit 22, the related information storage unit 18,
The respective functions of the storage unit 28 and the storage unit 28 are the acquisition unit 16, the search unit 22, the related information storage unit 18, and the storage unit 2 illustrated in FIG.
Since each function is the same as that of No. 8, description thereof will be omitted.
【００２７】取得部１８、検索部２２、関連情報保存部
１８、及び格納部２８のそれぞれの機能は、それぞれ取
得部１８、検索部２２、関連情報保存部１８、及び格納
部２８として機能するコンピュータにそれぞれ格納さ
れ、実行されるソフトウェアとして実現されてもよい。
この場合、取得部１６には、環境情報を、画像に対応付
けて取得する取得プログラムが格納される。また、関連
情報保存部２０には、環境情報に対応付けて関連情報を
予め保存する関連情報保存プログラムが格納される。更
に、検索部には、画像に対応付けられた環境情報に対応
する関連情報を関連情報保存モジュールから検索して画
像と共に出力する検索プログラムが格納される。The functions of the acquisition unit 18, the search unit 22, the related information storage unit 18, and the storage unit 28 are the functions of the computer functioning as the acquisition unit 18, the search unit 22, the related information storage unit 18, and the storage unit 28, respectively. May be realized as software stored and executed in each.
In this case, the acquisition unit 16 stores an acquisition program that acquires the environment information in association with the image. The related information storage unit 20 also stores a related information storage program that stores the related information in advance in association with the environment information. Further, the search unit stores a search program for searching the related information storage module for the related information corresponding to the environment information associated with the image and outputting the searched information together with the image.
【００２８】図４は、場所情報データベース２０のデー
タ構成の一例を木構造の形式で示す。場所情報データベ
ース２０において用いられる環境情報は、撮像が行われ
た位置を示す位置情報である。位置情報は、大きい場所
の概念から小さい場所の概念の順にカテゴリ１、カテゴ
リ２、カテゴリ３、及びカテゴリ４へと階層分けされ
る。例えば、カテゴリ１には、日本、米国、及び中国等
の「国」のカテゴリに対応する位置情報が格納される。
図４の場合、カテゴリ１に格納された位置情報は、日本
である。カテゴリ１に日本の位置情報が格納されるの
で、カテゴリ１の下位に属するカテゴリ２には、日本国
内の都市の位置情報が格納される。例えば、図４に示す
ように、カテゴリ２には東京及び大阪の位置情報が格納
される。FIG. 4 shows an example of the data structure of the location information database 20 in the form of a tree structure. The environment information used in the place information database 20 is position information indicating the position where the image was captured. The position information is hierarchically divided into a category 1, a category 2, a category 3, and a category 4 in order from a concept of a large place to a concept of a small place. For example, the category 1 stores location information corresponding to categories of “countries” such as Japan, the United States, and China.
In the case of FIG. 4, the location information stored in category 1 is Japan. Since the location information of Japan is stored in the category 1, the location information of cities in Japan is stored in the category 2 which belongs to the subordinate of the category 1. For example, as shown in FIG. 4, category 2 stores position information of Tokyo and Osaka.
【００２９】カテゴリ２の東京の下位に属するカテゴリ
３には、東京都内の各場所の位置情報が格納される。例
えば、図４に示すように、東京タワー及びお台場の位置
情報が格納される。一方、カテゴリ２の大阪の下位に属
するカテゴリ３には、大阪内の各場所の位置情報が格納
される。例えば、図４に示すように、通天閣及び大阪城
の位置情報が格納される。更に、カテゴリ３のお台場の
下位に属するカテゴリ４には、お台場内の各場所の位置
情報が格納される。例えば、図４に示すようにカテゴリ
４には、レインボーブリッジ及びお台場海浜公園の位置
情報が格納される。In the category 3, which is subordinate to the category 2 in Tokyo, position information of each place in Tokyo is stored. For example, as shown in FIG. 4, location information of Tokyo Tower and Odaiba is stored. On the other hand, in the category 3, which is subordinate to the category 2 in Osaka, position information of each place in Osaka is stored. For example, as shown in FIG. 4, position information of Tsutenkaku and Osaka Castle is stored. Further, in the category 4, which is subordinate to the category 3 in Odaiba, position information of each place in the Odaiba is stored. For example, as shown in FIG. 4, category 4 stores position information of the rainbow bridge and Odaiba Kaihin Park.
【００３０】更に、場所情報データベース２０は、関連
情報を各カテゴリの位置情報に対応付けて予め保存す
る。例えば、場所情報データベース２０は、カテゴリ１
に日本に対応する関連情報を格納し、カテゴリ２に東京
に対応する関連情報を格納し、カテゴリ３に、お台場に
対応する関連情報を格納し、カテゴリ４にレインボーブ
リッジに対応する関連情報を格納する。Further, the place information database 20 stores the related information in advance in association with the position information of each category. For example, the place information database 20 is category 1
The relevant information corresponding to Japan is stored in, the relevant information corresponding to Tokyo is stored in category 2, the relevant information corresponding to Odaiba is stored in category 3, and the relevant information corresponding to Rainbow Bridge is stored in category 4. Store.
【００３１】検索部２２は、位置情報検出手段１２が検
出した位置情報が、場所情報データベース２０の位置情
報のいずれに該当するかを、図４に示す上位のカテゴリ
から下位のカテゴリへとたどることにより特定する。場
所情報データベース２０において位置情報は、カテゴリ
ごとに階層化されているので、検出部２２は、カテゴリ
を上位から下位へとたどることにより、詳細に特定され
た位置情報に対応する関連情報を得ることができる。The search unit 22 traces which of the position information of the place information database 20 the position information detected by the position information detecting means 12 corresponds to from the upper category to the lower category shown in FIG. Specified by. Since the location information is hierarchically classified for each category in the location information database 20, the detection unit 22 obtains related information corresponding to the location information specified in detail by tracing the categories from the higher order to the lower order. You can
【００３２】図５は、場所情報データベース２０のデー
タ構成の一例を表形式で示す。図５の各カテゴリの位置
情報毎に、各位置情報に対応する音楽、効果音、画像、
及び動画の関連情報が保存される。例えば、カテゴリ１
では「日本」の位置情報に対応する関連情報として、音
楽としては君が代が、効果音としては琴の音などの日本
的な音が、画像としては平安神宮等の画像が、動画とし
ては京都で振り袖の人が歩く姿が場所情報データベース
２０に保存されている。FIG. 5 shows an example of the data structure of the location information database 20 in a table format. For each position information of each category in FIG. 5, music, sound effects, images corresponding to each position information,
And related information of the moving image is saved. For example, category 1
Then, as related information corresponding to the position information of "Japan", Kimigayo as music, Japanese sounds such as koto sound as sound effects, images such as Heian Jingu Shrine as images, and Kyoto as video. A figure of a person in a furisode walking is stored in the location information database 20.
【００３３】例えば、検出部２２は、日本に来国した観
光客が成田空港で日本に入国する際の画像に対しては、
カテゴリ１の位置情報「日本」に対応する関連情報を検
出する。更に、検出部２２は、その観光客が東京都内に
移動したときの画像には、カテゴリ２の位置情報の「東
京」に対応する関連情報を検出する。更に、検出部２２
は、観光客がお台場に移動したときの画像には、カテゴ
リ３の位置情報「お台場」に対応する関連情報を検出す
る。For example, the detecting unit 22 detects, for an image when a tourist who has come to Japan enters Japan at Narita Airport,
The related information corresponding to the position information “Japan” of category 1 is detected. Further, the detection unit 22 detects related information corresponding to “Tokyo” in the position information of category 2 in the image when the tourist moves into Tokyo. Furthermore, the detection unit 22
Detects related information corresponding to the position information “Odaiba” of category 3 in the image when the tourist moves to Odaiba.
【００３４】このように、本実施例の画像処理システム
１００は、場所情報データベース２０を用いることによ
り位置情報に対応する音楽、効果音、画像、及び動画等
の関連情報を、撮像した画像と共に表示手段２４に表示
することができるので、画像を撮像したときの喜びや楽
しみを画像の撮像者に思い起こさせることができる。As described above, the image processing system 100 of the present embodiment uses the location information database 20 to display related information such as music, sound effects, images, and moving images corresponding to position information together with the captured image. Since it can be displayed on the means 24, it is possible to remind the photographer of the image of the joy and enjoyment of capturing the image.
【００３５】図６は、関連情報データベース２６のデー
タ構成の一例を表形式で示す。図６の場合、環境情報
は、撮像が行われた時間を示す時間情報である。図６に
示す時間情報は、図４に示す場所情報データベース２０
の位置情報に対応するように関連情報データベース２６
に保存される。例えば、図６ではカテゴリ３のお台場の
位置情報に対応して、お台場の各時間帯、例えば午前９
時から午前１０時までの時間帯における、音楽、効果
音、画像、及び動画等の関連情報が、関連情報データベ
ース２６に保存される。FIG. 6 shows an example of the data structure of the related information database 26 in a table format. In the case of FIG. 6, the environment information is time information indicating the time when the image capturing was performed. The time information shown in FIG. 6 corresponds to the location information database 20 shown in FIG.
Related information database 26 so as to correspond to the position information of
Stored in. For example, in FIG. 6, corresponding to the position information of Odaiba of category 3, each time zone of Odaiba, for example, 9 am
Related information such as music, sound effects, images, and moving images in the time zone from 10 am to 10 am is stored in the related information database 26.
【００３６】例えば、画像がお台場において午前９時３
０分に撮像された場合、検索部２２は、位置情報が場所
情報データベース２０のカテゴリ３のお台場であること
を特定し、更に「お台場」に対応する関連情報データベ
ース２０の午前９時３０分に対応する関連情報を検索す
る。図６に示すように、お台場の午前９時から午前１０
時に対応する関連情報として、効果音として海の波の
音、画像としてレインボーブリッジ、動画としてゆりか
もめの移動の様子が関連情報データベース２６に保存さ
れているので、検索部２２は、以上の関連情報を画像と
共に表示手段２４に出力する。For example, the image is at Odaiba at 9:03 am
When the image is captured at 0 minutes, the search unit 22 identifies that the position information is Odaiba of category 3 of the place information database 20, and further, 9:30 am of the related information database 20 corresponding to “Odaiba”. Find relevant information for minutes. As shown in Figure 6, from 9:00 am to 10 am in Odaiba
As the related information corresponding to the time, the sound of the sea wave as the sound effect, the rainbow bridge as the image, and the movement of Yurikamome as the moving image are stored in the related information database 26. Therefore, the search unit 22 retrieves the above related information. It is output to the display means 24 together with the image.
【００３７】図６の場合、関連情報データベース２６の
時間情報は、場所情報データベース２０の位置情報に対
応付けられている。しかし、検索部２２は、場所情報デ
ータベース２０を介さずに、時間情報のみに基づいて、
関連情報データベース２６から関連情報を取得してもよ
い。この場合、関連情報データベース２６は、時間情報
のみに対応する関連情報を保存する。例えば、関連情報
データベース２６は、午前６時に対応して日の出の画像
を保存する。したがって、検索部２２は、時間情報が午
前６時である場合、関連情報データベース２６から夕日
の画像を取得し、撮像画像と共に表示手段２４に出力す
る。In the case of FIG. 6, the time information of the related information database 26 is associated with the position information of the place information database 20. However, the search unit 22 does not use the location information database 20, but only based on the time information,
The related information may be acquired from the related information database 26. In this case, the related information database 26 stores the related information corresponding to only the time information. For example, the related information database 26 stores the image of sunrise corresponding to 6:00 am. Therefore, when the time information is 6:00 am, the search unit 22 acquires the image of the sunset from the related information database 26 and outputs it to the display unit 24 together with the captured image.
【００３８】このように、本実施例の画像処理システム
１００は、場所情報データベース２０及び関連情報デー
タベース２６を用いることで時間情報に対応する音楽、
効果音、画像、及び動画等の関連情報を、撮像した画像
と共に表示手段２４に表示することができるので、画像
を撮像したときの喜びや楽しみを画像の撮像者に思い起
こさせることができる。As described above, the image processing system 100 according to the present embodiment uses the place information database 20 and the related information database 26 to reproduce music corresponding to time information.
Since related information such as sound effects, images, and moving images can be displayed on the display unit 24 together with the captured image, it is possible to remind the photographer of the image of the joy and enjoyment of capturing the image.
【００３９】図７は、関連情報データベース２６のデー
タ構成の他の例を表形式で示す。図７の場合、環境情報
は、撮像が行われた日を示す日情報である。図７に示す
日情報は、図４に示す場所情報データベース２０の位置
情報に対応するように関連情報データベース２６に保存
される。例えば、図７ではカテゴリ３のお台場の位置情
報に対応して、お台場のそれぞれの日における関連情
報、例えば１２月２５日における、音楽、効果音、画
像、及び動画等の関連情報が、関連情報データベース２
６に保存される。FIG. 7 shows another example of the data structure of the related information database 26 in a table format. In the case of FIG. 7, the environment information is day information indicating the day when the image was captured. The date information shown in FIG. 7 is stored in the related information database 26 so as to correspond to the position information of the place information database 20 shown in FIG. For example, in FIG. 7, the related information on each day of Odaiba, for example, the related information such as music, sound effects, images, and videos on December 25 is associated with the position information of Odaiba of category 3. Related information database 2
Stored in 6.
【００４０】例えば、画像がお台場において１２月２５
日に撮像された場合、検索部２２は、位置情報が場所情
報データベース２０のカテゴリ３のお台場であることを
特定し、更に「お台場」に対応する関連情報データベー
ス２０の１２月２５日に対応する関連情報を検索する。
図７に示すように、お台場の１２月２５日に対応する関
連情報として、音楽としてクリスマスソング、効果音と
して雑踏の音、画像としてクリスマスツリー、動画とし
て観覧車が関連情報データベース２６に保存されている
ので、検索部２２は、以上の関連情報を画像と共に表示
手段２４に出力する。For example, the image is in Odaiba on December 25th.
When imaged on the day, the search unit 22 identifies that the position information is Odaiba of category 3 of the place information database 20, and further, on December 25 of the related information database 20 corresponding to “Odaiba”. Find corresponding relevant information.
As shown in FIG. 7, related information corresponding to December 25th in Odaiba is stored in the related information database 26 as Christmas songs as music, crowded sounds as sound effects, Christmas trees as images, and Ferris wheel as videos. Therefore, the search unit 22 outputs the above related information to the display unit 24 together with the image.
【００４１】図７の場合、関連情報データベース２６の
日情報は、場所情報データベース２０の位置情報に対応
付けられている。しかし、検索部２２は、場所情報デー
タベース２０を介さずに、日情報のみに基づいて、関連
情報データベース２６から関連情報を取得してもよい。
この場合、関連情報データベース２６は、日情報のみに
対応する関連情報を保存する。例えば、関連情報データ
ベース２６は、１２月２５日に対応してクリスマスツリ
ーの画像を保存を保存する。したがって、検索部２２
は、日情報が１２月２５日である場合、関連情報データ
ベース２６からクリスマスツリーの画像を取得し、撮像
画像と共に表示手段２４に出力する。In the case of FIG. 7, the date information of the related information database 26 is associated with the position information of the place information database 20. However, the search unit 22 may acquire the related information from the related information database 26 based on only the day information without using the place information database 20.
In this case, the related information database 26 stores the related information corresponding to only the day information. For example, the related information database 26 stores the image of the Christmas tree corresponding to December 25. Therefore, the search unit 22
When the day information is December 25, the image information of the Christmas tree is acquired from the related information database 26 and is output to the display unit 24 together with the captured image.
【００４２】このように、本実施例の画像処理システム
１００は、場所情報データベース２０及び関連情報デー
タベース２６を用いることで日情報に対応する音楽、効
果音、画像、及び動画等の関連情報を、撮像した画像と
共に表示手段２４に表示することができるので、画像を
撮像したときの喜びや楽しみを画像の撮像者に思い起こ
させることができる。As described above, the image processing system 100 according to the present embodiment uses the place information database 20 and the related information database 26 to display related information such as music, sound effects, images, and moving images corresponding to day information, Since it can be displayed on the display unit 24 together with the captured image, it is possible to remind the photographer of the image of the joy and enjoyment of capturing the image.
【００４３】図８は、関連情報データベース２６のデー
タ構成の更に他の例を表形式で示す。図８の場合、環境
情報は、日情報及び撮像が行われた時間を示す時間情報
を含む。図８に示す日情報及び時間情報は、図４に示す
場所情報データベース２０の位置情報に対応するように
関連情報データベース２６に保存される。例えば、図８
ではカテゴリ３のお台場の位置情報に対応して、お台場
のそれぞれの日及び時間、例えば１２月３１日の午前９
時から午前１０時までの時間における、音楽、効果音、
画像、及び動画等の関連情報が、関連情報データベース
２６に保存される。FIG. 8 shows another example of the data structure of the related information database 26 in the form of a table. In the case of FIG. 8, the environment information includes day information and time information indicating the time when the image capturing was performed. The date information and the time information shown in FIG. 8 are stored in the related information database 26 so as to correspond to the position information of the place information database 20 shown in FIG. For example, in FIG.
Then, according to the location information of Odaiba of Category 3, each day and time of Odaiba, for example, 9 am on December 31st
Music, sound effects during the hours from 10 am to 10 am
Related information such as images and moving images is stored in the related information database 26.
【００４４】例えば、画像がお台場において１２月３１
日の午前９時３０分に撮像された場合、検索部２２は、
位置情報が場所情報データベース２０のカテゴリ３のお
台場であることを特定し、更に「お台場」に対応する関
連情報データベース２０の１２月３１日の午前９時３０
分に対応する関連情報を検索する。図８に示すように、
お台場の１２月３１日の午前９時から午前１０時に対応
する関連情報として、効果音として海の波の音、画像と
してレインボーブリッジ、動画としてゆりかもめの移動
の様子が関連情報データベース２６に保存されているの
で、検索部２２は、以上の関連情報を画像と共に表示手
段２４に出力する。For example, the image is in Odaiba on December 31st.
When the image is captured at 9:30 am on the day, the search unit 22
It specifies that the location information is Odaiba of Category 3 in the location information database 20, and further, 9:30 am on December 31 of the related information database 20 corresponding to "Odaiba".
Find relevant information for minutes. As shown in FIG.
As related information corresponding to 9am to 10am on December 31st in Odaiba, the sound of the sea waves as a sound effect, the rainbow bridge as an image, and the movement of Yurikamome as a moving image are saved in the related information database 26. Therefore, the search unit 22 outputs the above related information to the display unit 24 together with the image.
【００４５】図８の場合、関連情報データベース２６の
日情報及び時間情報は、場所情報データベース２０の位
置情報に対応付けられている。しかし、検索部２２は、
場所情報データベース２０を介さずに、日情報及び時間
情報のみに基づいて、関連情報データベース２６から関
連情報を取得してもよい。この場合、関連情報データベ
ース２６は、日情報及び時間情報のみに対応する関連情
報を保存する。例えば、関連情報データベース２６は、
１月１日の午前５時に対応して初日の出の画像を保存す
る。したがって、検索部２２は、日情報及び時間情報が
１月１日の午前５時である場合、関連情報データベース
２６から初日の出の画像を取得し、撮像画像と共に表示
手段２４に出力する。In the case of FIG. 8, the date information and the time information of the related information database 26 are associated with the position information of the place information database 20. However, the search unit 22
The related information may be acquired from the related information database 26 based on only the day information and the time information without using the place information database 20. In this case, the related information database 26 stores the related information corresponding to only the day information and the time information. For example, the related information database 26 is
Save the image of the first sunrise of the year at 5 am on January 1. Therefore, when the date information and the time information are 5:00 am on January 1, the search unit 22 acquires the image of the first sunrise from the related information database 26 and outputs it to the display unit 24 together with the captured image.
【００４６】このように、本実施例の画像処理システム
１００は、場所情報データベース２０及び関連情報デー
タベース２６を用いることで日情報及び時間情報に対応
する音楽、効果音、画像、及び動画等の関連情報を、撮
像した画像と共に表示手段２４に表示することができる
ので、画像を撮像したときの喜びや楽しみを画像の撮像
者に思い起こさせることができる。As described above, the image processing system 100 of the present embodiment uses the place information database 20 and the related information database 26 to relate music, sound effects, images, moving images, etc. corresponding to day information and time information. Since the information can be displayed on the display unit 24 together with the captured image, it is possible to remind the photographer of the image of the joy and enjoyment of capturing the image.
【００４７】図９は、関連情報データベース２６のデー
タ構成の更に他の例を表形式で示す。図９の場合、環境
情報は、撮像が行われた位置及び時間を示す位置時間情
報である。図９に示す位置時間情報は、関連情報データ
ベース２６に保存される。例えば、図９ではレインボー
ブリッジの午前９時から午前１０時の位置時間情報に対
応して、音楽、効果音、画像、及び動画等の関連情報
が、関連情報データベース２６に保存される。FIG. 9 shows still another example of the data structure of the related information database 26 in the form of a table. In the case of FIG. 9, the environment information is position / time information indicating the position and time at which the image was captured. The position / time information shown in FIG. 9 is stored in the related information database 26. For example, in FIG. 9, related information such as music, sound effects, images, and moving images is stored in the related information database 26 in correspondence with the position / time information of the Rainbow Bridge from 9 am to 10 am.
【００４８】例えば、画像が撮像された位置がレインボ
ーブリッジであって、撮像された時間が午前９時３０分
であった場合、検索部２２は、位置時間情報のうちの位
置がレインボーブリッジで時間が午前９時３０分に対応
する関連情報を検索する。図９に示すように、レインボ
ーブリッジの午前９時から午前１０時に対応する関連情
報として、効果音として海の波の音、画像としてレイン
ボーブリッジ、動画としてゆりかもめの移動の様子が関
連情報データベース２６に保存されているので、検索部
２２は、以上の関連情報を画像と共に表示手段２４に出
力する。For example, if the position at which the image was captured is the rainbow bridge and the captured time is 9:30 am, the search unit 22 determines that the position in the position time information is the time at the rainbow bridge. Searches for relevant information corresponding to 9:30 am. As shown in FIG. 9, as the related information corresponding to 9 am to 10 am on the Rainbow Bridge, the sound of the sea waves is used as the sound effect, the Rainbow Bridge is used as the image, and the movement of Yurikamome is used as the moving image in the related information database 26. Since it is stored, the search unit 22 outputs the above-mentioned related information to the display unit 24 together with the image.
【００４９】このように、本実施例の画像処理システム
１００は、場所情報データベース２０及び関連情報デー
タベース２６を用いることで位置時間情報に対応する音
楽、効果音、画像、及び動画等の関連情報を、撮像した
画像と共に表示手段２４に表示することができるので、
画像を撮像したときの喜びや楽しみを画像の撮像者に思
い起こさせることができる。As described above, the image processing system 100 according to the present embodiment uses the location information database 20 and the related information database 26 to store related information such as music, sound effects, images, and moving images corresponding to position / time information. Since it can be displayed on the display means 24 together with the captured image,
It is possible to remind the photographer of the image of the joy and enjoyment of capturing the image.
【００５０】図１０は、関連情報データベース２６のデ
ータ構成の更に他の例を表形式で示す。図１０の場合、
環境情報は、季節に関する季節情報である。図１０に示
す季節情報は、図４に示す場所情報データベース２０の
位置情報に対応するように関連情報データベース２６に
保存される。例えば、図１０ではカテゴリ１の日本の季
節情報に対応して、日本の各季節、例えば１月の季節に
おける、音楽、効果音、画像、及び動画等の関連情報
が、関連情報データベース２６に保存される。FIG. 10 shows another example of the data structure of the related information database 26 in the form of a table. In the case of FIG.
The environmental information is seasonal information about the season. The season information shown in FIG. 10 is stored in the related information database 26 so as to correspond to the position information of the place information database 20 shown in FIG. For example, in FIG. 10, corresponding information such as music, sound effects, images, and movies in each season of Japan, for example, the season of January, is stored in the relevant information database 26 in correspondence with the season information of Japan in category 1. To be done.
【００５１】画像が日本において１月に撮像された場
合、検索部２２は、位置情報が場所情報データベース２
０のカテゴリ１の日本であることを特定し、更に「日
本」に対応する関連情報データベース２０の１月に対応
する関連情報を検索する。図１０に示すように、日本の
１月に対応する関連情報として、音楽として正月の歌、
効果音として琴の音などの日本的な音、画像として明治
神宮、動画として振り袖の人の歩く姿が関連情報データ
ベース２６に保存されているので、検索部２２は、以上
の関連情報を画像と共に表示手段２４に出力する。When the image is taken in January in Japan, the retrieval unit 22 determines that the position information is the location information database 2
It is specified that Japan is a category 1 of 0, and the related information corresponding to January in the related information database 20 corresponding to “Japan” is searched. As shown in FIG. 10, as the related information corresponding to January of Japan, a song of the New Year as music,
Since the Japanese sound such as the sound of a koto as a sound effect, the Meiji Shrine as an image, and the walking figure of a person in a furisode as a video are stored in the related information database 26, the search unit 22 includes the above related information together with the image. It is output to the display means 24.
【００５２】図１０の場合、関連情報データベース２６
の季節情報は、場所情報データベース２０の位置情報に
対応付けられている。しかし、検索部２２は、場所情報
データベース２０を介さずに、季節情報のみに基づい
て、関連情報データベース２６から関連情報を取得して
もよい。この場合、関連情報データベース２６は、季節
情報のみに対応する関連情報を保存する。例えば、関連
情報データベース２６は、１月に対応して明治神宮の画
像を保存する。したがって、検索部２２は、季節情報が
１月である場合、関連情報データベース２６から明治神
宮の画像を取得し、撮像画像と共に表示手段２４に出力
する。In the case of FIG. 10, the related information database 26
The seasonal information of is associated with the position information of the place information database 20. However, the search unit 22 may acquire the related information from the related information database 26 based on only the season information without using the place information database 20. In this case, the related information database 26 stores the related information corresponding to only the seasonal information. For example, the related information database 26 stores images of the Meiji Shrine corresponding to January. Therefore, when the season information is January, the search unit 22 acquires the image of the Meiji Shrine from the related information database 26 and outputs it to the display unit 24 together with the captured image.
【００５３】このように、本実施例の画像処理システム
１００は、場所情報データベース２０及び関連情報デー
タベース２６を用いることで季節情報に対応する音楽、
効果音、画像、及び動画等の関連情報を、撮像した画像
と共に表示手段２４に表示することができるので、画像
を撮像したときの喜びや楽しみを画像の撮像者に思い起
こさせることができる。As described above, the image processing system 100 according to the present embodiment uses the place information database 20 and the related information database 26 so that the music corresponding to the season information,
Since related information such as sound effects, images, and moving images can be displayed on the display unit 24 together with the captured image, it is possible to remind the photographer of the image of the joy and enjoyment of capturing the image.
【００５４】図１１は、関連情報データベース２６のデ
ータ構成の更に他の例を表形式で示す。図１１の場合、
環境情報は、撮像時の明るさを示す情報である。図１１
に示す明るさの情報は、図４に示す場所情報データベー
ス２０の位置情報に対応するように関連情報データベー
ス２６に保存される。例えば、図１１ではカテゴリ３の
お台場の位置情報に対応して、撮像時の明るさの度合い
に応じた音楽、効果音、画像、及び動画等の関連情報
が、関連情報データベース２６に保存される。FIG. 11 shows still another example of the data structure of the related information database 26 in the form of a table. In the case of FIG. 11,
The environment information is information indicating the brightness at the time of image capturing. Figure 11
The brightness information indicated by is stored in the related information database 26 so as to correspond to the position information in the place information database 20 shown in FIG. For example, in FIG. 11, related information such as music, sound effects, images, and videos corresponding to the degree of brightness at the time of image capturing is stored in the related information database 26 in correspondence with the position information of Odaiba in category 3. It
【００５５】検索部２２は、位置情報が場所情報データ
ベース２０のカテゴリ３のお台場であることを特定し、
撮像時の明るさが明るい場合、更に撮像時の明るさが明
るい場合に対応する関連情報を関連情報データベース２
６から検索する。図１１に示すように、撮像時の明るさ
が明るい場合に対応する関連情報として、効果音として
海の波の音、画像として海の風景、動画としてウィンド
サーフィンをする人の姿が関連情報データベース２６に
保存されているので、検索部２２は、以上の関連情報を
画像と共に表示手段２４に出力する。The search unit 22 specifies that the position information is Odaiba in category 3 of the place information database 20,
The related information database 2 stores the related information corresponding to the case where the brightness at the time of image capturing is bright, and the case where the brightness at the time of image capturing is bright.
Search from 6. As shown in FIG. 11, as the related information corresponding to the case where the brightness at the time of image capturing is bright, the sound of the sea wave as the sound effect, the scenery of the sea as the image, and the figure of the windsurfer as the moving image are related information databases. Since it is stored in 26, the search unit 22 outputs the above-mentioned related information to the display unit 24 together with the image.
【００５６】図１１の場合、関連情報データベース２６
の撮像時の明るさに対応する関連情報は、場所情報デー
タベース２０の位置情報に対応付けられている。しか
し、検索部２２は、場所情報データベース２０を介さず
に、撮像時の明るさの情報のみに基づいて、関連情報デ
ータベース２６から関連情報を取得してもよい。この場
合、関連情報データベース２６は、撮像時の明るさの情
報のみに対応する関連情報を保存する。例えば、関連情
報データベース２６は、撮像時の明るさが明るい場合に
対応して小鳥のさえずりの効果音を保存する。したがっ
て、検索部２２は、撮像時の明るさが明るい場合、関連
情報データベース２６から小鳥のさえずりの効果音を取
得し、撮像画像と共に表示手段２４に出力する。In the case of FIG. 11, the related information database 26
The related information corresponding to the brightness at the time of image capturing is associated with the position information of the place information database 20. However, the search unit 22 may acquire the related information from the related information database 26 based on only the information on the brightness at the time of image capturing, not through the place information database 20. In this case, the related information database 26 stores the related information corresponding to only the brightness information at the time of image capturing. For example, the related information database 26 stores the sound effect of the chirping of a bird corresponding to the case where the brightness at the time of imaging is bright. Therefore, when the brightness at the time of imaging is bright, the search unit 22 acquires the sound effect of the song of the bird from the related information database 26 and outputs it to the display unit 24 together with the captured image.
【００５７】このように、本実施例の画像処理システム
１００は、場所情報データベース２０及び関連情報デー
タベース２６を用いることで撮像時の明るさに対応する
音楽、効果音、画像、及び動画等の関連情報を、撮像し
た画像と共に表示手段２４に表示することができるの
で、画像を撮像したときの喜びや楽しみを画像の撮像者
に思い起こさせることができる。As described above, the image processing system 100 of this embodiment uses the place information database 20 and the related information database 26 to relate music, sound effects, images, moving images, etc. corresponding to the brightness at the time of image pickup. Since the information can be displayed on the display unit 24 together with the captured image, it is possible to remind the photographer of the image of the joy and enjoyment of capturing the image.
【００５８】図１２は、関連情報データベース２６のデ
ータ構成の更に他の例を表形式で示す。図１２の場合、
環境情報は、被写体までの距離を示す距離情報である。
図１２に示す距離情報は、図４に示す場所情報データベ
ース２０の位置情報に対応するように関連情報データベ
ース２６に保存される。例えば、図１２ではカテゴリ４
のお台場海浜公園の位置情報に対応して、お台場海浜公
園における撮像時の距離情報、例えば被写体までの距離
が３ｍ未満の場合における、音楽、効果音、画像、及び
動画等の関連情報が、関連情報データベース２６に保存
される。FIG. 12 shows another example of the data structure of the related information database 26 in the form of a table. In the case of FIG.
The environment information is distance information indicating the distance to the subject.
The distance information shown in FIG. 12 is stored in the related information database 26 so as to correspond to the position information of the place information database 20 shown in FIG. For example, in FIG. 12, category 4
Corresponding to the position information of Odaiba Seaside Park, related information such as music, sound effects, images, and moving images when the distance to the subject is less than 3 m , Are stored in the related information database 26.
【００５９】お台場海浜公園において、被写体までの距
離が２ｍの画像が撮像された場合、検索部２２は、位置
情報が場所情報データベース２０のカテゴリ４のお台場
海浜公園であることを特定し、更に被写体までの距離が
２ｍに対応する関連情報を関連情報データベース２６か
ら検索する。図１２に示すように、距離情報が３ｍ未満
に対応する関連情報として、効果音として人の声、画像
として砂浜、動画として日光浴をする人の姿が関連情報
データベース２６に保存されているので、検索部２２
は、以上の関連情報を画像と共に表示手段２４に出力す
る。When an image of a distance to the subject is 2 m is taken in Odaiba Kaihin Koen, the search unit 22 specifies that the position information is Odaiba Kaihin Koen of Category 4 in the place information database 20, Further, the related information database 26 is searched for related information corresponding to a distance of 2 m to the subject. As shown in FIG. 12, as the related information corresponding to the distance information of less than 3 m, the voice of the person as the sound effect, the beach as the image, and the figure of the person sunbathing as the moving image are stored in the related information database 26. Search unit 22
Outputs the above related information to the display means 24 together with the image.
【００６０】図１２の場合、関連情報データベース２６
の距離情報は、場所情報データベース２０の位置情報に
対応付けられている。しかし、検索部２２は、場所情報
データベース２０を介さずに、距離情報のみに基づい
て、関連情報データベース２６から関連情報を取得して
もよい。この場合、関連情報データベース２６は、距離
情報のみに対応する関連情報を保存する。例えば、関連
情報データベース２６は、１０ｍ以上の距離情報に対応
して海の画像を保存する。したがって、検索部２２は、
距離情報が１０ｍ以上である場合、関連情報データベー
ス２６から海の画像を取得し、撮像画像と共に表示手段
２４に出力する。In the case of FIG. 12, the related information database 26
The distance information of is associated with the position information of the location information database 20. However, the search unit 22 may acquire the related information from the related information database 26 based on only the distance information without using the place information database 20. In this case, the related information database 26 stores the related information corresponding to only the distance information. For example, the related information database 26 stores the image of the sea corresponding to the distance information of 10 m or more. Therefore, the search unit 22
When the distance information is 10 m or more, the image of the sea is acquired from the related information database 26 and output to the display unit 24 together with the captured image.
【００６１】このように、本実施例の画像処理システム
１００は、場所情報データベース２０及び関連情報デー
タベース２６を用いることで距離情報に対応する音楽、
効果音、画像、及び動画等の関連情報を、撮像した画像
と共に表示手段２４に表示することができるので、画像
を撮像したときの喜びや楽しみを画像の撮像者に思い起
こさせることができる。As described above, the image processing system 100 according to the present embodiment uses the place information database 20 and the related information database 26 to reproduce the music corresponding to the distance information.
Since related information such as sound effects, images, and moving images can be displayed on the display unit 24 together with the captured image, it is possible to remind the photographer of the image of the joy and enjoyment of capturing the image.
【００６２】図１３は、画像処理部１４の制御フローの
一例を示す。取得部１６は、撮像手段１０から撮像され
た画像及び画像が撮像された日時等の情報を取得する。
更に、取得部１６は、位置情報検出手段１２から位置情
報を、撮像手段１０によって撮像された画像に対応付け
て取得する（Ｓ１０）。FIG. 13 shows an example of the control flow of the image processing section 14. The acquisition unit 16 acquires the image captured by the image capturing unit 10 and information such as the date and time when the image was captured.
Further, the acquisition unit 16 acquires the position information from the position information detection unit 12 in association with the image captured by the image capturing unit 10 (S10).
【００６３】検索部２２は、位置情報に対応する関連情
報を場所情報データベース２０から検索する。更に、検
索部２２は、時間情報、日情報、日情報及び時間情報、
位置時間情報、季節情報、撮像時の明るさ、及び距離情
報等の環境情報の少なくとも１つに基づいて関連情報を
関連情報データベース２６から検索する（Ｓ１２）。検
索部２２は、検索した関連情報を、撮像画像と共に表示
手段２４に出力する（Ｓ１４）。The search unit 22 searches the location information database 20 for relevant information corresponding to the location information. Furthermore, the search unit 22 uses time information, date information, date information and time information,
Related information is searched from the related information database 26 based on at least one of environmental information such as position / time information, seasonal information, brightness at the time of image capturing, and distance information (S12). The search unit 22 outputs the searched related information to the display unit 24 together with the captured image (S14).
【００６４】図１４は、関連情報データベース２６のデ
ータ構成の更に他の例を表形式で示す。図１４に示す日
情報は季節ごとに分類されているので、それぞれの日に
ちがどの季節情報に属するかについては、関連情報デー
タベースに基づいて判断することができる。FIG. 14 shows another example of the data structure of the related information database 26 in the form of a table. Since the day information shown in FIG. 14 is classified according to seasons, it can be determined based on the related information database which season information each day belongs to.
【００６５】図１４の季節情報は、図４に示す場所情報
データベース２０の位置情報に対応するように関連情報
データベース２６に保存される。例えば、図１４ではカ
テゴリ１の日本の位置情報に対応して、日本の季節、例
えば１月の季節における、音楽、効果音、画像、及び動
画等の関連情報が、関連情報データベース２６に保存さ
れる。The season information of FIG. 14 is stored in the related information database 26 so as to correspond to the position information of the location information database 20 shown in FIG. For example, in FIG. 14, related information such as music, sound effects, images, and videos in the Japanese season, for example, the January season, is stored in the related information database 26 in correspondence with the position information of Japan in category 1. It
【００６６】画像が日本において１月１日に撮像された
場合、検索部２２は、位置情報が場所情報データベース
２０のカテゴリ１の日本であることを特定し、日情報に
基づいて撮像された季節が１月であると判断し、１月に
対応する関連情報を関連情報データベース２０から検索
する。図１４に示すように、１月の季節に対応する関連
情報としては、効果音として正月の歌、効果音として日
本的な音、画像として明治神宮、動画として振り袖の人
が歩く様子が保存されているので、検索部２２は、以上
の関連情報を画像と共に表示手段２４に出力する。When the image is taken on January 1st in Japan, the search unit 22 specifies that the position information is Japan in category 1 of the place information database 20, and the season taken based on the day information. Is determined to be January, and the related information database 20 is searched for related information corresponding to January. As shown in FIG. 14, as related information corresponding to the January season, a New Year's song as a sound effect, a Japanese sound as a sound effect, a Meiji Jingu shrine as an image, and a state in which a person in a furisode is walking as a video are saved. Therefore, the search unit 22 outputs the above related information to the display unit 24 together with the image.
【００６７】図１４の場合、関連情報データベース２６
の日情報は、場所情報データベース２０の位置情報に対
応付けられている。しかし、検索部２２は、場所情報デ
ータベース２０を介さずに、日情報から判断された季節
情報に基づいて、関連情報データベース２６から関連情
報を取得してもよい。この場合、関連情報データベース
２６は、日情報から判断された季節情報に対応する関連
情報を保存する。例えば、関連情報データベース２６
は、１月に対応して明治神宮の画像を保存する。したが
って、検索部２２は、日情報が１月１日である場合、関
連情報データベース２６から明治神宮の画像を取得し、
撮像画像と共に表示手段２４に出力する。In the case of FIG. 14, the related information database 26
The day information of is associated with the position information of the place information database 20. However, the search unit 22 may acquire the related information from the related information database 26 based on the seasonal information determined from the day information, without using the place information database 20. In this case, the related information database 26 stores the related information corresponding to the seasonal information determined from the day information. For example, the related information database 26
Saves images of Meiji Shrine for January. Therefore, when the day information is January 1, the search unit 22 acquires the image of the Meiji Shrine from the related information database 26,
It outputs to the display means 24 with a captured image.
【００６８】このように、本実施例の画像処理システム
１００は、場所情報データベース２０及び関連情報デー
タベース２６を用いることで日情報から判断された季節
情報に対応する音楽、効果音、画像、及び動画等の関連
情報を、撮像した画像と共に表示手段２４に表示するが
できるので、画像を撮像したときの喜びや楽しみを画像
の撮像者に思い起こさせることができる。As described above, the image processing system 100 according to the present embodiment uses the place information database 20 and the related information database 26 so that the music, the sound effect, the image, and the moving image corresponding to the seasonal information determined from the day information are used. Since related information such as the above can be displayed on the display unit 24 together with the captured image, it is possible to remind the photographer of the image of the joy and enjoyment of capturing the image.
【００６９】図１５は、関連情報データベース２６が図
１４に示すデータ構成を有する場合における画像処理部
１４の制御フローの実施例を示す。取得部１６は、環境
情報として撮像が行われた日を示す日情報を取得する
（Ｓ２２）。検索部２２は、日情報から撮像が行われた
季節を判断し（Ｓ２８）、当該季節に対応した関連情報
を関連情報保存部１８から検索する（Ｓ３０）。最後
に、検索部２２は、関連情報を撮像した画像と共に表示
手段２４に出力する（Ｓ３２）。すなわち、図１０に示
すように取得部１６が、季節に関する環境情報を直接取
得しなくとも、取得部１６が日情報を取得することによ
って検索部２２は、撮像が行われた季節を判断すること
ができる。FIG. 15 shows an example of the control flow of the image processing unit 14 when the related information database 26 has the data structure shown in FIG. The acquisition unit 16 acquires, as environment information, date information indicating the date when the image was captured (S22). The search unit 22 determines the season in which the image was taken from the day information (S28), and searches the related information storage unit 18 for related information corresponding to the season (S30). Finally, the search unit 22 outputs the related information to the display unit 24 together with the captured image (S32). That is, as shown in FIG. 10, even if the acquisition unit 16 does not directly acquire the environmental information regarding the season, the acquisition unit 16 acquires the day information, so that the search unit 22 can determine the season when the image capturing is performed. You can
【００７０】図１６は、画像処理部１４の制御フローの
他の例を示す。取得部１６は、撮像手段１０から撮像さ
れた画像を取得し、位置情報検出手段１２から環境情報
を、撮像された画像に対応付けて取得する（Ｓ６４）。
検索部２２は、撮像された画像に対応付けられた環境情
報に対応する画像を含む関連情報を関連情報保存部１８
から検索する（Ｓ６６）。更に、検索部２２は、関連情
報に含まれる画像を台紙として、撮像した画像に合成す
ることにより合成画像を生成し（Ｓ６８）、生成した合
成画像を出力する（Ｓ７０）。したがって、ユーザが表
示手段２４に撮像された画像を表示すると、撮像された
画像が、撮像された画像に関連する台紙に合成されて表
示手段２４に表示される。FIG. 16 shows another example of the control flow of the image processing section 14. The acquisition unit 16 acquires the image captured by the imaging unit 10, and acquires the environment information from the position information detection unit 12 in association with the captured image (S64).
The search unit 22 searches the related information storage unit 18 for the related information including the image corresponding to the environmental information associated with the captured image.
Is searched from (S66). Further, the search unit 22 generates a combined image by combining the captured image with the image included in the related information as a mount (S68), and outputs the generated combined image (S70). Therefore, when the user displays the captured image on the display unit 24, the captured image is displayed on the display unit 24 after being combined with the mount associated with the captured image.
【００７１】このように、本実施例の画像処理システム
１００は、関連情報保存部１８を用いることで関連情報
に含まれる画像を台紙として撮像画像に合成し、表示手
段２４に表示することができるので、画像を撮像したと
きの喜びや楽しみを画像の撮像者に思い起こさせること
ができる。As described above, the image processing system 100 according to the present embodiment can combine the image included in the related information with the captured image as a mount by using the related information storage unit 18 and display it on the display means 24. Therefore, it is possible to remind the photographer of the image of the joy and enjoyment of capturing the image.
【００７２】図１７は、画像処理部１４の制御フローの
更に他の例を示す。取得部１６は、撮像手段１０から撮
像された画像を取得し、位置情報検出手段１２から環境
情報を、撮像された画像に対応付けて取得する（Ｓ７
２）。検索部２２は、環境情報に対応する音声を含む関
連情報を関連情報保存部１８から検索する（Ｓ７２）。
更に、検索部２２は、関連情報に含まれる音声が、関連
情報を開封する指示を条件として再生されるように音声
再生情報を生成し（Ｓ７６）、生成した音声再生情報を
画像と共に表示手段２４に出力する（Ｓ７８）。FIG. 17 shows still another example of the control flow of the image processing section 14. The acquisition unit 16 acquires the image captured by the imaging unit 10, and acquires the environment information from the position information detection unit 12 in association with the captured image (S7).
2). The search unit 22 searches the related information storage unit 18 for related information including voice corresponding to the environment information (S72).
Further, the search unit 22 generates voice reproduction information so that the voice included in the related information is reproduced on condition that an instruction to open the related information is given (S76), and the generated voice reproduction information is displayed together with the image on the display unit 24. (S78).
【００７３】このように、本実施例の画像処理システム
１００は、関連情報保存部１８を用いることで音声再生
情報を生成し、撮像した画像と共に表示手段２４に表示
することができるので、画像を撮像したときの喜びや楽
しみを画像の撮像者に思い起こさせることができる。As described above, the image processing system 100 of the present embodiment can generate the audio reproduction information by using the related information storage unit 18 and display it on the display means 24 together with the captured image. It is possible to remind the photographer of the image of the joy and enjoyment of taking the image.
【００７４】以上、本発明を実施例を用いて説明した
が、本発明の技術的範囲は上記実施例に記載の範囲には
限定されない。上記実施例に、多様な変更または改良を
加えることができる。そのような変更または改良を加え
た形態も本発明の技術的範囲に含まれ得ることが、特許
請求の範囲の記載から明らかである。Although the present invention has been described with reference to the embodiments, the technical scope of the present invention is not limited to the scope described in the above embodiments. Various changes or improvements can be added to the above-described embodiments. It is apparent from the scope of the claims that the embodiments added with such changes or improvements can be included in the technical scope of the present invention.
【００７５】[0075]
【発明の効果】上記説明から明らかなように、本発明に
よれば、撮像した画像を、撮像した画像と関連する情報
と共に提供することができる。As is apparent from the above description, according to the present invention, a captured image can be provided together with information related to the captured image.
【図１】本発明の一実施例である画像処理システムの構
成の概略を示す。FIG. 1 schematically shows the configuration of an image processing system that is an embodiment of the present invention.
【図２】画像処理部１４のハードウェア構成を示す。FIG. 2 shows a hardware configuration of an image processing unit 14.
【図３】図１に示す画像処理システム１００の変形例を
示す。FIG. 3 shows a modification of the image processing system 100 shown in FIG.
【図４】場所情報データベース２０のデータ構成の一例
を木構造の形式で示す。FIG. 4 shows an example of the data structure of the location information database 20 in the form of a tree structure.
【図５】場所情報データベース２０のデータ構成の一例
を表形式で示す。FIG. 5 shows an example of a data structure of the location information database 20 in a table format.
【図６】関連情報データベース２６のデータ構成の一例
を表形式で示す。FIG. 6 shows an example of a data structure of a related information database 26 in a table format.
【図７】関連情報データベース２６のデータ構成の他の
例を表形式で示す。FIG. 7 shows another example of the data structure of the related information database 26 in a table format.
【図８】関連情報データベース２６のデータ構成の更に
他の例を表形式で示す。FIG. 8 shows still another example of the data structure of the related information database 26 in a table format.
【図９】関連情報データベース２６のデータ構成の更に
他の例を表形式で示す。FIG. 9 shows still another example of the data structure of the related information database 26 in a table format.
【図１０】関連情報データベース２６のデータ構成の更
に他の例を表形式で示す。FIG. 10 shows still another example of the data structure of the related information database 26 in a table format.
【図１１】関連情報データベース２６のデータ構成の更
に他の例を表形式で示す。FIG. 11 shows still another example of the data structure of the related information database 26 in a table format.
【図１２】関連情報データベース２６のデータ構成の更
に他の例を表形式で示す。FIG. 12 shows still another example of the data structure of the related information database 26 in a table format.
【図１３】画像処理部１４の制御フローの一例を示す。FIG. 13 shows an example of a control flow of the image processing unit 14.
【図１４】関連情報データベース２６のデータ構成の更
に他の一例を表形式で示す。FIG. 14 shows still another example of the data structure of the related information database 26 in a table format.
【図１５】関連情報データベース２６が図１４に示すデ
ータ構成を有する場合における画像処理部１４の制御フ
ローの実施例を示す。15 shows an example of a control flow of the image processing unit 14 when the related information database 26 has the data structure shown in FIG.
【図１６】画像処理部１４の制御フローの他の例を示
す。FIG. 16 shows another example of the control flow of the image processing unit 14.
【図１７】画像処理部１４の制御フローの更に他の例を
示す。FIG. 17 shows still another example of the control flow of the image processing unit 14.
１０・・・撮像手段、１２・・・位置情報検出手段、１
４・・・画像処理部、１６・・・取得部、１８・・・関
連情報保存部、２０・・・場所情報データベース、２２
・・・検索部、２４・・・表示手段、２６・・・関連情
報データベース、２８・・・格納部、１００、２００・
・・画像処理システム10 ... Imaging means, 12 ... Position information detection means, 1
4 ... Image processing unit, 16 ... Acquisition unit, 18 ... Related information storage unit, 20 ... Location information database, 22
... Search unit, 24 ... Display means, 26 ... Related information database, 28 ... Storage unit, 100,200 ...
..Image processing system
───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C022 AA13 AC01 AC42 AC69 AC71 5C052 AA16 AC08 DD02 DD04 DD08 EE03 5C053 FA07 FA23 FA27 FA29 JA01 JA22 JA23 KA01 KA24 LA02 LA11 LA15 ─────────────────────────────────────────────────── ─── Continued front page F term (reference) 5C022 AA13 AC01 AC42 AC69 AC71 5C052 AA16 AC08 DD02 DD04 DD08 EE03 5C053 FA07 FA23 FA27 FA29 JA01 JA22 JA23 KA01 KA24 LA02 LA11 LA15
Claims (23)
て、 撮像したときの環境を示す環境情報を、前記画像に対応
付けて取得する取得部と、 前記環境情報に対応付けて、前記撮像環境に関連する音
声及び画像の少なくとも一つを含む関連情報を予め保存
する関連情報保存部と、 当該画像に対応付けられた環境情報に対応する前記関連
情報を前記関連情報保存部から検索して前記画像と共に
出力する検索部とを備えたことを特徴とする画像処理シ
ステム。1. A system for processing a captured image, comprising: an acquisition unit that acquires environment information indicating the environment when the image was captured in association with the image; and the image capturing environment in association with the environment information. Related information storage unit that stores in advance related information including at least one of a voice and an image related to the image, and the related information corresponding to the environmental information associated with the image is searched from the related information storage unit and the An image processing system, comprising: a search unit that outputs together with an image.
記画像に対応付けて格納する格納部を更に備えることを
特徴とする請求項１に記載の画像処理システム。2. The image processing system according to claim 1, further comprising a storage unit that stores environment information indicating an environment at the time of image capturing in association with the image.
置を示す位置情報であり、 前記検索部は、当該位置情報に対応した前記関連情報を
前記関連情報保存部から検索し、前記画像と共に出力す
ることを特徴とする請求項１に記載の画像処理システ
ム。3. The environment information is position information indicating a position where the image capturing is performed, and the search unit searches the related information storage unit for the related information corresponding to the position information, The image processing system according to claim 1, wherein the image processing system outputs the image.
間を示す時間情報であり、 前記検索部は、当該時間情報に対応した前記関連情報を
前記関連情報保存部から検索し、前記画像と共に出力す
ることを特徴とする請求項１に記載の画像処理システ
ム。4. The environment information is time information indicating a time at which the image capturing is performed, and the search unit searches the related information storage unit for the related information corresponding to the time information, The image processing system according to claim 1, wherein the image processing system outputs the image.
を示す日情報であり、 前記検索部は、当該日情報に対応した前記関連情報を前
記関連情報保存部から検索し、前記画像と共に出力する
ことを特徴とする請求項１に記載の画像処理システム。5. The environment information is day information indicating a day on which the image was taken, and the search unit searches the related information storage unit for the related information corresponding to the day information, The image processing system according to claim 1, wherein the image processing system outputs the image.
が行われた季節を判断し、当該季節に対応した前記関連
情報を前記関連情報保存部から検索し、前記画像と共に
出力することを特徴とする請求項５に記載の画像処理シ
ステム。6. The retrieval unit determines the season in which the image was captured from the day information, retrieves the relevant information corresponding to the season from the relevant information storage unit, and outputs the relevant information together with the image. The image processing system according to claim 5, which is characterized in that.
像が行われた時間を示す時間情報を含み、 前記検索部は、当該日情報及び前記時間情報に対応した
前記関連情報を前記関連情報保存部から検索し、前記画
像と共に出力することを特徴とする請求項５に記載の画
像処理システム。7. The environment information includes the day information and time information indicating a time at which the image was captured, and the search unit includes the related information corresponding to the day information and the time information as the related information. The image processing system according to claim 5, wherein the image is retrieved from a storage unit and output together with the image.
置及び時間を示す位置時間情報であり、 前記検索部は、前記位置時間情報に対応した前記関連情
報を前記関連情報保存部から検索し、前記画像と共に出
力することを特徴とする請求項１に記載の画像処理シス
テム。8. The environment information is position / time information indicating a position and time at which the image capturing is performed, and the search unit searches the related information storage unit for the related information corresponding to the position / time information. The image processing system according to claim 1, wherein the image is output together with the image.
であり、 前記検索部は、前記季節情報に基づいて前記関連情報を
前記関連情報保存部から検索し、前記画像と共に出力す
ることを特徴とする請求項１に記載の画像処理システ
ム。9. The environmental information is seasonal information about a season, and the search unit searches the related information storage unit for the related information based on the seasonal information and outputs the related information together with the image. The image processing system according to claim 1.
り、 前記検索部は、前記撮像時の明るさに基づいて前記関連
情報を前記関連情報保存部から検索し、前記画像と共に
出力することを特徴とする請求項１に記載の画像処理シ
ステム。10. The environment information is brightness at the time of image pickup, and the search unit searches the related information storage unit for the related information based on the brightness at the time of image pickup, and outputs the related information together with the image. The image processing system according to claim 1, wherein:
示す距離情報であり、 前記検索部は、前記距離情報に基づいて前記関連情報を
前記関連情報保存部から検索し、前記画像と共に出力す
ることを特徴とする請求項１に記載の画像処理システ
ム。11. The environment information is distance information indicating a distance to a subject, and the search unit searches the related information storage unit for the related information based on the distance information and outputs the related information together with the image. The image processing system according to claim 1, wherein:
像を含む前記関連情報を前記関連情報保存部から検索
し、前記関連情報に含まれる画像を台紙として前記撮像
した画像に合成して合成画像を生成し、前記合成画像を
出力することを特徴とする請求項１に記載の画像処理シ
ステム。12. The search unit searches the related information storage unit for the related information including an image corresponding to environmental information, and combines the image included in the related information as a mount with the captured image to combine the images. The image processing system according to claim 1, wherein an image is generated and the composite image is output.
声を含む前記関連情報を前記関連情報保存部から検索
し、前記関連情報に含まれる音声が、前記関連情報を開
封する指示を条件として再生されるように音声再生情報
を生成し、、前記音声再生情報を前記画像と共に出力す
ることを特徴とする請求項１に記載の画像処理システ
ム。13. The search unit searches the related information storage unit for the related information including a sound corresponding to environment information, and the sound included in the related information is conditional on an instruction to open the related information. The image processing system according to claim 1, wherein the audio reproduction information is generated so as to be reproduced, and the audio reproduction information is output together with the image.
あって、 撮像したときの環境を示す環境情報を、前記画像に対応
付けて取得する取得モジュールと、 前記環境情報に対応付けて、前記撮像環境に関連する音
声及び画像の少なくとも一つを含む関連情報を予め保存
する関連情報保存モジュールと、 当該画像に対応付けられた前記環境情報に対応する前記
関連情報を前記関連情報保存モジュールから検索して前
記画像と共に出力する検索モジュールとを備えたことを
特徴とするプログラム。14. A program for processing a captured image, the acquisition module acquiring environment information indicating an environment at the time of capturing the image in association with the image, and the image capturing environment in association with the environment information. A related information storage module that stores in advance related information including at least one of a voice and an image related to, and the related information corresponding to the environment information associated with the image, retrieved from the related information storage module. A program comprising a search module for outputting together with the image.
前記画像に対応付けて格納する格納モジュールを更に備
えることを特徴とする請求項１４に記載のプログラム。15. Environmental information indicating an environment at the time of image capturing,
The program according to claim 14, further comprising a storage module that stores the image in association with the image.
位置を示す位置情報であり、 前記検索モジュールは、当該位置情報に対応した前記関
連情報を前記関連情報保存モジュールから検索し、前記
画像と共に出力することを特徴とする請求項１４に記載
のプログラム。16. The environment information is position information indicating a position where the image capturing is performed, and the search module searches the related information storage module for the related information corresponding to the position information, The program according to claim 14, which is output together with the program.
時間を示す時間情報であり、 前記検索モジュールは、当該時間情報に対応した前記関
連情報を前記関連情報保存モジュールから検索し、前記
画像と共に出力することを特徴とする請求項１４に記載
のプログラム。17. The environment information is time information indicating a time at which the imaging is performed, and the search module searches the related information storage module for the related information corresponding to the time information, The program according to claim 14, which is output together with the program.
日を示す日情報であり、 前記検索モジュールは、当該日情報に対応した前記関連
情報を前記関連情報保存モジュールから検索し、前記画
像と共に出力することを特徴とする請求項１４に記載の
プログラム。18. The environment information is day information indicating a day on which the image was taken, and the search module searches the related information storage module for the related information corresponding to the day information, The program according to claim 14, which is output together with the program.
って、 画像を撮像する撮像手段と、 撮像したときの環境を示す環境情報を前記画像に対応付
けて取得する取得部と前記環境情報に対応付けて、前記
撮像環境に関連する音声及び画像の少なくとも一つを含
む関連情報を予め保存する関連情報保存部と、 当該画像に対応付けられた前記環境情報に対応する前記
関連情報を前記関連情報保存部から検索して前記画像と
共に出力する検索部と、 前記画像を前記検索部に要求し、得られた前記画像を前
記関連情報と共に表示する表示手段とを備えたことを特
徴とするシステム。19. A system for displaying a captured image, the image capturing means capturing the image, an acquisition unit for acquiring environment information indicating an environment at the time of capturing the image in association with the image, and the environment unit. In addition, a related information storage unit that stores in advance related information including at least one of a sound and an image related to the imaging environment, and the related information corresponding to the environment information associated with the image. A system comprising: a search unit that searches the storage unit and outputs the image together with the image; and a display unit that requests the image from the search unit and displays the obtained image together with the related information.
前記画像に対応付けて格納する格納部を更に備えること
を特徴とする請求項１９に記載のシステム。20. Environmental information indicating the environment at the time of imaging,
The system according to claim 19, further comprising a storage unit that stores the image in association with the image.
位置を示す位置情報であり、 前記検索部は、当該位置情報に対応した前記関連情報を
前記関連情報保存部から検索し、前記画像と共に出力す
ることを特徴とする請求項１９に記載のシステム。21. The environment information is position information indicating a position where the image capturing is performed, and the search unit searches the related information storage unit for the related information corresponding to the position information, 20. The system according to claim 19, wherein the system is output together with.
時間を示す時間情報であり、 前記検索部は、当該時間情報に対応した前記関連情報を
前記関連情報保存部から検索し、前記画像と共に出力す
ることを特徴とする請求項１９に記載のシステム。22. The environment information is time information indicating a time when the image capturing is performed, and the search unit searches the related information storage unit for the related information corresponding to the time information, 20. The system according to claim 19, wherein the system is output together with.
日を示す日情報であり、 前記検索部は、当該日情報に対応した前記関連情報を前
記関連情報保存部から検索し、前記画像と共に出力する
ことを特徴とする請求項１９に記載のシステム。23. The environment information is day information indicating a day on which the image was taken, and the search unit searches the related information storage unit for the related information corresponding to the day information, 20. The system according to claim 19, wherein the system is output together with.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002040756A JP2003244579A (en) | 2002-02-18 | 2002-02-18 | Image processing system, program and system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002040756A JP2003244579A (en) | 2002-02-18 | 2002-02-18 | Image processing system, program and system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2003244579A true JP2003244579A (en) | 2003-08-29 |
Family
ID=27781397
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002040756A Pending JP2003244579A (en) | 2002-02-18 | 2002-02-18 | Image processing system, program and system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2003244579A (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007194948A (en) * | 2006-01-19 | 2007-08-02 | Fujifilm Corp | Image-editing device and image-editing program |
| JP2009020836A (en) * | 2007-07-13 | 2009-01-29 | Xing Inc | Electronic album system, device and method for creating electronic album, and computer program |
| JP2009294767A (en) * | 2008-06-03 | 2009-12-17 | Sony Corp | Evaluation device, evaluation method, evaluation program, and evaluation system |
| US9002094B2 (en) | 2011-12-28 | 2015-04-07 | Kenyence Corporation | Image processing device and image processing method |
-
2002
- 2002-02-18 JP JP2002040756A patent/JP2003244579A/en active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007194948A (en) * | 2006-01-19 | 2007-08-02 | Fujifilm Corp | Image-editing device and image-editing program |
| JP2009020836A (en) * | 2007-07-13 | 2009-01-29 | Xing Inc | Electronic album system, device and method for creating electronic album, and computer program |
| JP2009294767A (en) * | 2008-06-03 | 2009-12-17 | Sony Corp | Evaluation device, evaluation method, evaluation program, and evaluation system |
| US9002094B2 (en) | 2011-12-28 | 2015-04-07 | Kenyence Corporation | Image processing device and image processing method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Hori et al. | Context-based video retrieval system for the life-log applications | |
| US8868585B2 (en) | Contents replay apparatus and contents replay method | |
| US7499918B2 (en) | Information processing apparatus and method, program, and recording medium | |
| US8145034B2 (en) | Contents replay apparatus and contents replay method | |
| US20070206101A1 (en) | Information processing apparatus and method, and program | |
| KR20060132755A (en) | System and method for encapsulation of representative sample of media object | |
| JP3835679B2 (en) | Information processing system, information processing method, information processing apparatus, information processing method, recording medium, and program | |
| JP3781715B2 (en) | Metadata production device and search device | |
| JP2005293339A (en) | Information processor and information processing method | |
| FR2830714A1 (en) | AUTOMATIC DIGITAL IMAGE ENRICHMENT PROCESS | |
| JP2003244579A (en) | Image processing system, program and system | |
| US20140047068A1 (en) | Video information control apparatus and method | |
| JPH09163276A (en) | Information recording and reproducing device with marking function | |
| JP4350635B2 (en) | Image recording / playback system and electronic album creation system | |
| JP5478960B2 (en) | Video search server and video search method | |
| JPH10307532A (en) | Map display device | |
| JP2006252758A (en) | Reproduction device and reproduction method, recording medium and program | |
| JP2005191892A (en) | Information acquisition device and multi-media information preparation system using it | |
| CN100508583C (en) | Data edition system, data edition method, data processing device, and server device | |
| JP2003125346A (en) | Recording and regenerating equipment and method, recording medium and program | |
| JP2003116094A (en) | Electronic album system | |
| JP2002245071A (en) | Device and method for managing image, image database unit and storage medium | |
| US20180267971A1 (en) | Multimedia playing method and system for moving vehicle | |
| JP2000235576A (en) | System for aiding preparation of data base | |
| JP2005339138A (en) | Database for retrieval, its manufacturing method, computer-readable recording medium for recording program of method for manufacturing database for retrieval, retrieving method and computer-readable recording medium for recording program of its retrieving method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040304 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060914 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20061017 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061208 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061218 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070313 |