JP2002010178A - Image managing system and method for managing image as well as storage medium - Google Patents
Image managing system and method for managing image as well as storage mediumInfo
- Publication number
- JP2002010178A JP2002010178A JP2000182557A JP2000182557A JP2002010178A JP 2002010178 A JP2002010178 A JP 2002010178A JP 2000182557 A JP2000182557 A JP 2000182557A JP 2000182557 A JP2000182557 A JP 2000182557A JP 2002010178 A JP2002010178 A JP 2002010178A
- Authority
- JP
- Japan
- Prior art keywords
- information
- image data
- image
- context
- image management
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、ビデオ・カメラや
デジタル・スチル・カメラなどの撮像装置を介して取得
された画像データを管理するための画像管理システム及
び画像管理方法に係り、特に、多数の画像データを撮像
装置から取得・収集して編集・整理・検索するための画
像管理システム及び画像管理方法に関する。[0001] 1. Field of the Invention [0002] The present invention relates to an image management system and an image management method for managing image data obtained through an imaging device such as a video camera or a digital still camera. The present invention relates to an image management system and an image management method for acquiring, collecting, editing, organizing, and retrieving image data from an imaging device.
【０００２】更に詳しくは、本発明は、画像データに付
随する各種の属性情報及び／又はユーザ情報に従って画
像データを編集・整理・検索するための画像管理システ
ム及び画像管理方法に係り、特に、画像データに付随す
る属性情報及び／又はユーザ情報に従って画像データの
コンテキストを解析して編集・整理・検索を行う画像管
理システム及び画像管理方法に関する。More specifically, the present invention relates to an image management system and an image management method for editing, organizing, and retrieving image data according to various attribute information and / or user information attached to the image data. The present invention relates to an image management system and an image management method for editing, organizing, and searching by analyzing the context of image data in accordance with attribute information and / or user information attached to data.
【０００３】[0003]
【従来の技術】近年、ビデオ・カメラやデジタル・スチ
ル・カメラのような撮像装置が広汎に普及してきてい
る。撮像された画像データは、例えば、ビデオ・テープ
に記録される。あるいは、画像データをコンピュータラ
イズして、ハード・ディスク装置（ＨＤＤ）などの計算
機システムの周辺機器に蓄積することもできる。2. Description of the Related Art In recent years, imaging devices such as video cameras and digital still cameras have become widespread. The captured image data is recorded on, for example, a video tape. Alternatively, the image data can be computerized and stored in a peripheral device of the computer system such as a hard disk drive (HDD).
【０００４】蓄積された画像データ数が増大するにつ
れ、これら情報資源の死蔵を防止し有効に活用するため
には、各画像データに対するタイトル付けや、編集、分
類整理、検索などの手法が重要になってくる。[0004] As the number of stored image data increases, in order to prevent and effectively utilize these information resources, techniques such as title assigning, editing, sorting, and retrieving each image data are important. It is becoming.
【０００５】しかしながら、従来の画像管理装置や画像
データベースでは、ユーザ自らがあらかじめキーワード
を設定し、撮像画像をデータベースのあるカテゴリに登
録するなど、煩雑な作業を要していた。[0005] However, in the conventional image management apparatus and image database, complicated operations were required, such as a user setting keywords in advance and registering captured images in a certain category of the database.
【０００６】撮影場所や撮影日、撮影時刻、タイトルな
どを記入したラベル・シールをビデオ・テープ・カート
リッジなどに貼設して分類・整理することは、従来から
行われている。しかしながら、ラベル・シールに記入し
た内容はコンピュータライズされたものではなく、ビデ
オ・テープに記録された画像データをデータベース管理
するためには、改めてラベルの記入内容をコンピュータ
入力しなければならない。そもそも、ラベル・シールの
作成は手間が掛かるばかりで、時間がない場合はユーザ
が省いてしまうことが多い。後者の場合、やがて記憶が
曖昧になり、正確な情報をラベルに記入できなくなって
しまう。Conventionally, labels and stickers on which a photographing place, a photographing date, a photographing time, a title, and the like are written are pasted on a video tape cartridge or the like to classify and organize them. However, the contents entered on the label / seal are not computerized, and in order to manage the image data recorded on the videotape in the database, the contents of the label must be entered again by computer. In the first place, creating labels and stickers is troublesome, and if there is no time, the user often skips them. In the latter case, the memory becomes vague in time, and accurate information cannot be written on the label.
【０００７】例えば、ビデオ・カメラにＧＰＳ（Global
Positioning System）などの測位装置を接続又は内蔵
して撮像画像とともに位置情報を記録するシステムが提
案されている。この場合、位置情報を基に撮像像の撮影
場所を検出・特定することができ、撮影場所を用いて画
像データを分類・整理・検索することができる。[0007] For example, a GPS (Global
A system that connects or incorporates a positioning device such as a Positioning System and records position information together with a captured image has been proposed. In this case, the shooting location of the captured image can be detected and specified based on the position information, and the image data can be classified, arranged, and searched using the shooting location.
【０００８】例えば、本出願人に既に譲渡されている特
開平１１−２０５７２５号公報に記載の映像情報記録再
生装置によれば、ＧＰＳアンテナにより受信された人工
衛星からの電波を解析して、撮影位置を検出し、この撮
影位置情報をビデオ・テープ上の映像・音声信号とは別
エリアのシステム・データ領域に記録する点について開
示されている。For example, according to the video information recording / reproducing apparatus described in Japanese Patent Application Laid-Open No. H11-205725, which has already been assigned to the present applicant, radio waves from artificial satellites received by a GPS antenna are analyzed and photographing is performed. It is disclosed that the position is detected and this shooting position information is recorded in a system data area in an area different from the video / audio signal on the video tape.
【０００９】また、ビデオ・カメラなどの撮像装置に本
来内蔵されているシステム時計の時刻情報を撮影した画
像データとともに記録することは、従来から既に行われ
ている。[0009] Recording of time information of a system clock originally incorporated in an image pickup apparatus such as a video camera together with photographed image data has already been performed.
【００１０】しかしながら、位置情報や時刻情報によっ
て画像データベースを管理するためには、緯度や経度な
ど登録する項目が追加されてしまい、ユーザにさらに労
力を強いることになる。However, in order to manage the image database based on the position information and the time information, items to be registered such as latitude and longitude are added, and the user is forced to work more.
【００１１】また、画像データベースを構築する際、各
々の画像データに対してタイトル（名前）を付すことは
極めて有効であるが、データ保管時などにユーザが逐次
タイトルを考え出して入力しなければならず、煩わし
い。When constructing an image database, it is extremely effective to assign a title (name) to each image data. However, when storing data, it is necessary for a user to come up with a title one by one and input it. Not bothersome.
【００１２】例えば、画像データに関する日付・時刻情
報と位置情報を基に、いつどこで撮影したかを特定する
ことができる。観光旅行での撮影などでは、「○月△日
京都」や「○月□日 金閣寺」などのようなタイトル
を画像データに付すなど、その程度でも充分に役に立
つ。For example, it is possible to specify when and where a photograph was taken based on date / time information and position information relating to image data. For shooting on a sightseeing trip, etc., such a degree can be sufficiently useful, for example, by attaching a title such as “○ / △ / Kyoto” or “// 月 / □ Kinkakuji” to the image data.
【００１３】しかしながら、時刻情報や位置情報をほと
んどそのまま利用するようなタイトル付与の手法では、
何をしているところを撮影したのかなど、その場面での
コンテキストまで踏み込んではいない。例えば、子供の
入学式を撮影した画像に対して、位置情報に基づいて
「××小学校」などのようなタイトルを画像データに付
すことはできるが、それで充分な情報とは言い難い。[0013] However, in a method of assigning a title in which time information and position information are used almost as they are,
It doesn't go into the context of the scene, such as what it was doing. For example, a title such as "xx elementary school" can be given to image data based on location information for an image of a child's entrance ceremony, but that is not enough information.
【００１４】また、従来から、動画像のキーフレームを
用いて管理するという技術がある。しかしながら、キー
フレームなどの特定のフレームやシーンを画像認識して
その撮影内容、例えば撮影場所や露光条件、撮影した場
面のコンテキストなどを推定することは、一般に、非常
に困難である。[0014] In addition, there is a technique for managing a moving image using a key frame. However, it is generally very difficult to recognize a specific frame or scene, such as a key frame, by image recognition and to estimate its shooting contents, for example, the shooting location, exposure conditions, and the context of the shot scene.
【００１５】[0015]
【発明が解決しようとする課題】本発明の目的は、ビデ
オ・カメラやデジタル・スチル・カメラなどの撮像装置
を介して取得された画像データを管理することができ
る、優れた画像管理システム及び画像管理方法を提供す
ることにある。SUMMARY OF THE INVENTION An object of the present invention is to provide an excellent image management system and an image management system capable of managing image data obtained through an imaging device such as a video camera or a digital still camera. To provide a management method.
【００１６】本発明の更なる目的は、多数の画像データ
を撮像装置から取得・収集して編集・整理・検索するこ
とができる、優れた画像管理システム及び画像管理を提
供することにある。It is a further object of the present invention to provide an excellent image management system and image management capable of acquiring, collecting, editing, organizing, and retrieving a large number of image data from an imaging device.
【００１７】本発明の更なる目的は、画像データに付随
する各種の属性情報及び／又はユーザ情報に従って画像
データを編集・整理・検索することができる、優れた画
像管理システム及び画像管理方法を提供することにあ
る。A further object of the present invention is to provide an excellent image management system and image management method capable of editing, organizing, and retrieving image data according to various attribute information and / or user information attached to the image data. Is to do.
【００１８】本発明の更なる目的は、画像データに付随
する属性情報及び／又はユーザ情報に従って画像データ
のコンテキストを解析して編集・整理・検索を行うこと
ができる、優れた画像管理システム及び画像管理方法を
提供することにある。A further object of the present invention is to provide an excellent image management system and an image management system capable of analyzing, editing, organizing, and retrieving the context of image data according to attribute information and / or user information attached to the image data. To provide a management method.
【００１９】[0019]
【課題を解決するための手段】本発明は、上記課題を参
酌してなされたものであり、その第１の側面は、画像デ
ータを分類及び／又は整理するための画像管理システム
又は方法であって、付随情報付きの画像データを保持す
る画像データ保持手段又はステップと、画像データ保持
手段から付随情報のみを取り出して解析する付随情報解
析手段又はステップと、付随情報及び／又は付随情報の
解析結果を基に画像データのコンテキストを推定するコ
ンテキスト推定手段又はステップと、を具備することを
特徴とする画像管理システム又は方法である。SUMMARY OF THE INVENTION The present invention has been made in consideration of the above problems, and a first aspect of the present invention is an image management system or method for classifying and / or organizing image data. Image data holding means or step for holding image data with accompanying information, accompanying information analyzing means or step for extracting and analyzing only the accompanying information from the image data holding means, and analysis results of the accompanying information and / or accompanying information And a context estimating means or step for estimating the context of the image data based on the image management system.
【００２０】ここで、前記付随情報とは、画像データに
関する撮影日時情報、撮影位置情報、撮影条件、撮影者
に関するユーザ情報などである。Here, the accompanying information includes photographing date and time information relating to image data, photographing position information, photographing conditions, user information relating to a photographer, and the like.
【００２１】また、本発明の第１の側面に係る画像管理
システムは、さらに、地図データベースを備えていても
よい。このような場合、前記付随情報解析手段又はステ
ップは、付随情報に含まれる撮影位置情報を該地図デー
タベースと照合して、画像データを撮影した地名及び／
又は施設名を推定することができる。The image management system according to the first aspect of the present invention may further include a map database. In such a case, the incidental information analyzing means or the step compares the photographing position information included in the incidental information with the map database to determine the name of the place where the image data was photographed and / or
Alternatively, the facility name can be estimated.
【００２２】また、本発明の第１の側面に係る画像管理
システムは、さらに、季節行事・社会慣習知識ベースを
備えていてもよい。このような場合、前記付随情報解析
手段又はステップは、付随情報に含まれる撮影日時情報
及び／又はユーザ情報を該季節行事・社会慣習知識ベー
スと照合して、画像データの撮影と関連する季節行事・
社会慣習を推定することができる。Further, the image management system according to the first aspect of the present invention may further include a seasonal event / social custom knowledge base. In such a case, the incidental information analysis means or step compares the shooting date and time information and / or user information included in the incidental information with the seasonal event / social customs knowledge base to determine the seasonal event associated with image data imaging.・
Social customs can be estimated.
【００２３】また、本発明の第１の側面に係る画像管理
システムは、さらに、各ユーザ毎の家族情報データベー
スを備えていてもよい。このような場合、前記付随情報
解析手段又はステップは、付随情報に含まれるユーザ情
報を該家族情報データベースと照合し、画像データを撮
影したユーザの家族構成などの家族情報を特定すること
ができる。The image management system according to the first aspect of the present invention may further include a family information database for each user. In such a case, the incidental information analyzing means or step can match the user information included in the incidental information with the family information database and specify family information such as the family structure of the user who captured the image data.
【００２４】また、本発明の第１の側面に係る画像管理
システム又は方法は、さらに、１以上の情報提供サーバ
が設置された外部ネットワークに接続する通信手段又は
ステップを備えていてもよい。このような場合、前記コ
ンテキスト推定手段又はステップは、付随情報に適合す
る気象情報及び／又はイベント情報などを該通信手段又
はステップ経由で外部ネットワーク上の情報提供サーバ
から取得し、該取得した情報をコンテキストの推定に利
用することができる。Further, the image management system or method according to the first aspect of the present invention may further include a communication unit or a step for connecting to an external network in which one or more information providing servers are installed. In such a case, the context estimating means or step obtains weather information and / or event information or the like matching the incidental information from the information providing server on the external network via the communication means or step, and converts the obtained information. It can be used for context estimation.
【００２５】また、本発明の第１の側面に係る画像管理
システム又は方法は、地図データベース及び／又は季節
行事・社会慣習知識ベースなどの各データベースの更新
情報を、該通信手段又はステップ経由で外部ネットワー
ク上の情報提供サーバから取得するようにしてもよい。In addition, the image management system or method according to the first aspect of the present invention provides an update information of each database such as a map database and / or a seasonal event / social custom knowledge base via the communication means or the step. It may be obtained from an information providing server on a network.
【００２６】また、本発明の第１の側面に係る画像管理
システム又は方法は、前記コンテキスト推定手段又はス
テップは、コンテキストの推定結果に基づいて当該画像
データのタイトル候補を生成するようにしてもよい。Further, in the image management system or method according to the first aspect of the present invention, the context estimating means or step may generate a title candidate of the image data based on a context estimation result. .
【００２７】また、前記コンテキスト推定手段により生
成されたタイトル候補を、ディスプレイなどの出力装置
を介してユーザ・フィードバックするようにしてもよ
い。The title candidate generated by the context estimating means may be fed back to the user via an output device such as a display.
【００２８】また、タイトル候補の素材となるタイトル
・テンプレートを前記コンテキスト推定手段又はステッ
プに投入するようにしてもよい。Further, a title template serving as a title candidate material may be input to the context estimating means or step.
【００２９】また、本発明の第２の側面は、画像データ
を分類及び／又は整理するための画像管理をコンピュー
タ・システム上で実行するように記述されたコンピュー
タ・ソフトウェアをコンピュータ可読形式で物理的に格
納した記憶媒体であって、前記コンピュータ・ソフトウ
ェアは、付随情報付きの画像データを保持する画像デー
タ保持ステップと、画像データ保持手段から付随情報の
みを取り出して解析する付随情報解析ステップと、付随
情報及び／又は付随情報の解析結果を基に画像データの
コンテキストを推定するコンテキスト推定ステップと、
を具備することを特徴とする記憶媒体である。According to a second aspect of the present invention, computer software written to execute image management for classifying and / or organizing image data on a computer system is physically readable in a computer readable format. A computer-readable storage medium storing an image data holding step of holding image data with accompanying information; an accompanying information analyzing step of extracting and analyzing only the accompanying information from the image data holding means; A context estimation step of estimating the context of the image data based on the analysis result of the information and / or the accompanying information;
A storage medium characterized by comprising:
【００３０】本発明の第２の側面に係る記憶媒体は、例
えば、様々なプログラム・コードを実行可能な汎用コン
ピュータ・システムに対して、コンピュータ・ソフトウ
ェアをコンピュータ可読な形式で物理的に提供する媒体
である。このような媒体は、例えば、ＣＤ（Compact Di
sc）やＦＤ（Floppy Disc）、ＭＯ（Magneto-Opticaldi
sc）などの着脱自在で可搬性の記憶媒体である。あるい
は、ネットワーク（ネットワークは無線、有線の区別を
問わない）などの伝送媒体などを経由してコンピュータ
・ソフトウェアを特定のコンピュータ・システムにコン
ピュータ可読形式で提供することも技術的に可能であ
る。The storage medium according to the second aspect of the present invention is, for example, a medium for physically providing computer software in a computer-readable format to a general-purpose computer system capable of executing various program codes. It is. Such a medium is, for example, a CD (Compact Di
sc), FD (Floppy Disc), MO (Magneto-Opticaldi)
sc) and other removable and portable storage media. Alternatively, it is technically possible to provide computer software to a specific computer system in a computer-readable form via a transmission medium such as a network (a network may be either wireless or wired).
【００３１】このような記憶媒体は、コンピュータ・シ
ステム上で所定のコンピュータ・ソフトウェアの機能を
実現するための、コンピュータ・ソフトウェアと記憶媒
体との構造上又は機能上の協働的関係を定義したもので
ある。換言すれば、本発明の第２の側面に係る記憶媒体
を介して所定のコンピュータ・ソフトウェアをコンピュ
ータ・システムにインストールすることによって、コン
ピュータ・システム上では協働的作用が発揮され、本発
明の第１の側面に係る画像管理システム又は方法と同様
の作用効果を得ることができる。Such a storage medium defines a structural or functional cooperative relationship between the computer software and the storage medium in order to realize predetermined computer software functions on a computer system. It is. In other words, by installing predetermined computer software into the computer system via the storage medium according to the second aspect of the present invention, a cooperative action is exerted on the computer system, and the second aspect of the present invention is realized. The same operation and effect as those of the image management system or method according to one aspect can be obtained.
【００３２】[0032]
【作用】本発明に係る画像管理システム又は方法によれ
ば、画像に付随する日時、位置情報、露光情報などの属
性情報と、あらかじめ登録されているユーザ・プロファ
イル情報、地図情報、季節行事の知識、暦の知識、気象
情報、イベント情報などから、記録された画像データの
コンテキストを推定することができる。言い換えれば、
画像データのコンテキスト推定のために、画像データ自
体の画像認識結果に頼る必要がない。According to the image management system or method according to the present invention, attribute information such as date and time, position information, exposure information, etc., and user profile information, map information, and seasonal event knowledge registered in advance are attached to the image. From the knowledge of the calendar, weather information, event information, and the like, the context of the recorded image data can be estimated. In other words,
It is not necessary to rely on the image recognition result of the image data itself for estimating the context of the image data.
【００３３】また、このような推定結果に基づいて、画
像データのタイトル付け、分類整理、検索などを行うこ
とができる、ユーザビリティに富むとともに親しみ易い
画像蓄積・編集環境を提供することができる。Further, it is possible to provide an image storage / editing environment which is rich in usability and which is friendly to the user, in which titles, classification and arrangement, search and the like of image data can be performed based on such estimation results.
【００３４】本発明のさらに他の目的、特徴や利点は、
後述する本発明の実施例や添付する図面に基づくより詳
細な説明によって明らかになるであろう。[0034] Still other objects, features and advantages of the present invention are:
It will become apparent from the following more detailed description based on the embodiments of the present invention and the accompanying drawings.
【００３５】[0035]
【発明の実施の形態】以下、図面を参照しながら本発明
の実施例を詳解する。Embodiments of the present invention will be described below in detail with reference to the drawings.
【００３６】図１には、本発明の実施に供される画像管
理システム１の機能構成を概略的に示している。FIG. 1 schematically shows a functional configuration of an image management system 1 provided for implementing the present invention.
【００３７】図示のように、画像管理システム１は、複
数の画像データを蓄積する画像データベース２０と、地
図データベース１３や家族情報データベース１４などの
複数のデータベースと、季節行事・社会慣習知識ベース
１５などの知識ベースと、これらデータベースや知識ベ
ースやその他の情報資源に基づいて画像データ・コンテ
ンツの解析・推論を行うルールベース推論エンジン１６
とで構成される。ここで、知識ベースとは、知識をコン
ピュータが理解できる形式（例えば述語形式）で表現し
てデータベース化して、特定の対象分野（図１に示す例
では季節行事や社会慣習）の専門知識や知識間を関連付
けるルールの集合体である。ルールベース推論エンジン
１６は、例えば、ファジーロックに基づいて構成され
る。As shown in the figure, the image management system 1 includes an image database 20 for storing a plurality of image data, a plurality of databases such as a map database 13 and a family information database 14, a seasonal event / social custom knowledge base 15, and the like. And a rule-based inference engine 16 for analyzing and inferring image data and content based on these databases, knowledge bases and other information resources
It is composed of Here, the knowledge base is a database that expresses knowledge in a format that can be understood by a computer (for example, a predicate format) and stores the knowledge and knowledge in a specific target field (a seasonal event or social custom in the example shown in FIG. 1). It is a set of rules that associate between them. The rule-based inference engine 16 is configured based on, for example, fuzzy lock.
【００３８】また、画像管理システム１は、インターネ
ットなどの外部ネットワーク８０と接続するための通信
インターフェース１２を備えている。The image management system 1 includes a communication interface 12 for connecting to an external network 80 such as the Internet.
【００３９】インターネット８０は、ＴＣＰ／ＩＰ（Tr
ansmission Control Protocol/Internet Protocol）プ
ロトコルに従って膨大数の計算機システムが相互接続を
繰り返すことで構築された、字義通りの広域ネットワー
クである（周知）。インターネット８０上にはＷＷＷ
（World Wide Web）を始めとする情報検索サービスが提
供されており、例えばＵＲＬ（Uniform Resource Locat
or）で指定することによって所望の情報資源にアクセス
したりインターネット８０上の情報空間を探索したりす
ることができるようになっている。The Internet 80 is based on TCP / IP (Tr
It is a literally wide area network constructed by repeating a large number of computer systems in accordance with an Ansmission Control Protocol / Internet Protocol (well-known). WWW on the Internet 80
(World Wide Web) and other information search services, such as URL (Uniform Resource Locat)
By specifying (or), a desired information resource can be accessed or an information space on the Internet 80 can be searched.
【００４０】本実施例に係る画像管理システム１は、例
えば、インターネット８０経由で所定の情報提供サーバ
にアクセスすることで、気象情報や、社会一般で開催さ
れるイベント情報等を取得することができる。また、地
図情報や季節行事・社会慣習などの情報の変更内容も、
定期又は不定期でインターネット８０経由で取得して、
地図データベース１３や季節行事・社会慣習知識ベース
１５の内容を適宜、自動又は半自動で更新することがで
きる。The image management system 1 according to this embodiment can acquire weather information, event information held in general society, and the like by accessing a predetermined information providing server via the Internet 80, for example. . In addition, changes in information such as map information and seasonal events / social customs,
Acquired via the Internet 80 regularly or irregularly,
The contents of the map database 13 and the seasonal event / social custom knowledge base 15 can be updated automatically or semi-automatically as appropriate.
【００４１】また、画像管理システム１は、ユーザ・イ
ンターフェース１１を介して、画像データの供給装置と
してのビデオ・カメラ５０や、画像データを表示出力す
る出力装置７０、キーボード７５やマウス７６などから
なるユーザ入力装置に接続されている。The image management system 1 includes a video camera 50 as a device for supplying image data, an output device 70 for displaying and outputting image data, a keyboard 75 and a mouse 76 via the user interface 11. Connected to a user input device.
【００４２】出力装置７０は、画像管理システム１から
のＲＧＢ出力を基にした表示能力を持つ通常のテレビ受
信機でもよい。あるいは、コンピュータライズされた画
像データを画像データベース２０から取り出して、これ
をデコードして表示する能力を持つ装置（例えば、パー
ソナル・コンピュータやワークステーションなどの計算
機システム）であってもよい。後者の場合、出力ターゲ
ットは、ＣＲＴ（Cathode Ray Tube）モニタやＬＣＤ
（液晶表示ディスプレイ）などの表示装置である以外
に、画像データを印刷出力するプリンタ、あるいは画像
データをＣＤ−ＲやＤＶＤなどの他のメディアに複製す
る記録装置であってもよい。The output device 70 may be a normal television receiver having a display capability based on the RGB output from the image management system 1. Alternatively, it may be a device (for example, a computer system such as a personal computer or a workstation) capable of taking out computerized image data from the image database 20 and decoding and displaying the image data. In the latter case, the output target is a CRT (Cathode Ray Tube) monitor or LCD
In addition to a display device such as a (liquid crystal display), a printer that prints out image data or a recording device that copies image data to another medium such as a CD-R or DVD may be used.
【００４３】キーボード７５やマウス７６などのユーザ
入力装置からは、キャラクタ・ベース若しくはグラフィ
ック・ベースのコマンドを入力することができる。例え
ば、ユーザは、ユーザ入力装置を介して自身のユーザ識
別情報を画像管理システム１に入力したり、あるいは家
族情報データベースに登録すべき家族構成などの情報を
入力することができる。また、ユーザのスケジュールを
キーボード７５やマウス７６を介して入力することで、
画像管理システム１上でスケジュール管理を併せて行な
うことができる。From a user input device such as a keyboard 75 or a mouse 76, a character-based or graphic-based command can be input. For example, the user can input his / her user identification information to the image management system 1 via the user input device, or can input information such as a family structure to be registered in the family information database. Also, by inputting the user's schedule via the keyboard 75 and the mouse 76,
Schedule management can also be performed on the image management system 1.
【００４４】画像データの供給源としてのビデオ・カメ
ラ５０は、より好ましくは、撮影時の位置情報や露光情
報（若しくは撮影環境情報）、時刻情報などの画像デー
タ本体に関する各種の属性情報や、ユーザ識別情報など
を、付随情報として画像データとともに記録するように
なっている。例えば、ビデオ・テープその他の記録メデ
ィア上で、画像データ本体とは別エリアのデータ領域に
これら付随情報を記録して、画像データ本体をアクセス
することなしに付随情報のみを引き出せるようにしてお
く。The video camera 50 as a supply source of the image data is more preferably provided with various kinds of attribute information relating to the image data itself, such as position information at the time of shooting, exposure information (or shooting environment information), time information, etc. Identification information and the like are recorded together with image data as accompanying information. For example, on a video tape or other recording medium, such additional information is recorded in a data area in an area different from the image data main body, so that only the additional information can be extracted without accessing the image data main body.
【００４５】図２には、本実施例に係る画像管理システ
ム１に適用可能なビデオ・カメラ５０の構成例を図解し
ている。同図に示すビデオ・カメラ５０は、カメラ部５
１と、信号処理部５２と、制御部５３と、ＧＰＳアンテ
ナ５４と、システム時計５５と、ユーザ入力部５６と、
記憶部５７と、記録メディアへの撮像画像の記録動作を
制御する記録制御部５８とで構成される。FIG. 2 illustrates a configuration example of a video camera 50 applicable to the image management system 1 according to the present embodiment. The video camera 50 shown in FIG.
1, a signal processing unit 52, a control unit 53, a GPS antenna 54, a system clock 55, a user input unit 56,
The storage unit 57 includes a storage unit 57 and a recording control unit 58 that controls a recording operation of a captured image on a recording medium.
【００４６】カメラ部５１は、レンズ５１Ａと撮像素子
５１Ｂとで構成される。レンズ５１Ａは、被写体の画像
を撮像素子５１Ｂの撮像面に結像する。また、撮像素子
５１Ｂは、例えばＣＣＤ（Charge Coupled Device：電
荷結合素子）で構成され、撮像面上の被写体画像を電気
信号に変換して、これを信号処理部５２に出力する。The camera section 51 comprises a lens 51A and an image sensor 51B. The lens 51A forms an image of the subject on the imaging surface of the imaging element 51B. The imaging element 51B is configured by, for example, a charge coupled device (CCD), converts a subject image on an imaging surface into an electric signal, and outputs the electric signal to the signal processing unit 52.
【００４７】信号処理部５２は、カメラ部５１からの電
気信号を、記録メディア５９に記録する形式の映像信号
に変換して記録制御部５８に出力する。また、信号処理
部５２は、カメラ部５１における露光情報やその他の撮
影条件を記録制御部５８に出力する。The signal processing section 52 converts the electric signal from the camera section 51 into a video signal of a format to be recorded on a recording medium 59 and outputs the video signal to a recording control section 58. In addition, the signal processing unit 52 outputs exposure information and other shooting conditions in the camera unit 51 to the recording control unit 58.
【００４８】制御部５３は、例えば、プロセッサ本体と
ＲＡＭ（Random Access Memory）とＲＯＭ（Read Only
Memory）とを備えたマイクロコンピュータで構成され、
ビデオ・カメラ５０内の動作を統括的に制御する機能を
持つ。The control unit 53 includes, for example, a processor body, a RAM (Random Access Memory), and a ROM (Read Only).
Memory) and a microcomputer with
It has a function of totally controlling the operation in the video camera 50.
【００４９】また、制御部５３は、例えば、ＧＰＳアン
テナ５４により受信される人工衛星からの電波を解析す
ることにより得られる、このビデオ・カメラ５０の撮像
位置を示す位置情報（例えば、経度及び緯度の情報を含
む）を検出して、記録制御部５８に出力する。Further, the control unit 53 provides position information (for example, longitude and latitude) indicating the image pickup position of the video camera 50 obtained by analyzing radio waves from artificial satellites received by the GPS antenna 54, for example. ) And outputs it to the recording control unit 58.
【００５０】ユーザ入力部５６は、ビデオ・カメラ５０
における、記録、再生、早送り、巻き戻し、一時停止な
どの操作指示や、その他のデータ入力を行うためのユー
ザ操作装置である。また、ユーザ入力部５６を介してユ
ーザ識別情報などのユーザ情報を入力することもでき
る。The user input unit 56 is provided for the video camera 50.
Is a user operation device for inputting operation instructions such as recording, reproduction, fast forward, rewind, and pause, and other data input. Further, user information such as user identification information can be input via the user input unit 56.
【００５１】記憶部５７は、このビデオ・カメラ５０の
ユーザ識別情報やその他の属性情報・制御情報を保管す
るためのメモリ領域である。例えば、ユーザ識別情報
は、ユーザ入力部５６を介して入力される。また、制御
部５３は、記憶部５７からユーザ識別情報を取り出し
て、記録制御部５８に出力する。The storage unit 57 is a memory area for storing the user identification information of the video camera 50 and other attribute information and control information. For example, the user identification information is input via the user input unit 56. Further, the control unit 53 extracts the user identification information from the storage unit 57 and outputs the user identification information to the recording control unit 58.
【００５２】システム時計５５は、実時間を計時して制
御部５３に供給するようになっている。また、制御部５
３は、供給された実時間を撮影時の時刻情報として記録
制御部５８に出力する。The system clock 55 measures the actual time and supplies it to the control unit 53. The control unit 5
Reference numeral 3 outputs the supplied real time to the recording control unit 58 as time information at the time of shooting.
【００５３】記録制御部５８は、信号処理部５２から供
給される画像データや、制御部５３から供給されるユー
ザ識別情報や位置情報や時刻情報などの付随情報を、記
録メディア５９上に記録する。但し、付随情報は、画像
データ本体とは別エリアのデータ領域に記録して、画像
データ本体をアクセスすることなしに付随情報のみを引
き出せるようにしておく。The recording control section 58 records on the recording medium 59 the image data supplied from the signal processing section 52 and the accompanying information such as user identification information, position information and time information supplied from the control section 53. . However, the accompanying information is recorded in a data area in an area different from the image data body, so that only the accompanying information can be extracted without accessing the image data body.
【００５４】記録メディア５９の一例はビデオ・テープ
であり、他の例は、ハード・ディスク装置である。One example of the recording medium 59 is a video tape, and another example is a hard disk device.
【００５５】次いで、本実施例に係る画像管理システム
１において画像データを管理する処理手順について、図
３を参照しながら説明する。Next, a processing procedure for managing image data in the image management system 1 according to the present embodiment will be described with reference to FIG.
【００５６】ビデオ・カメラ５０で撮影された画像デー
タは、ユーザ・インターフェース１１経由で、画像管理
システム１内の画像データベース２０に蓄積される（Ｓ
１）。ビデオ・カメラ５０は、例えば、ｉ−ｌｉｎｋ
（ＩＥＥＥＥ １３９４）ポートなどを経由して、画像
管理システム１に接続される。The image data captured by the video camera 50 is stored in the image database 20 in the image management system 1 via the user interface 11 (S
1). The video camera 50 is, for example, an i-link
It is connected to the image management system 1 via an (IEEE 1394) port or the like.
【００５７】画像管理システム１内では、まず、画像デ
ータベース２０から特定の画像データに関する付随情報
を読み出す（Ｓ２）。In the image management system 1, first, accompanying information relating to specific image data is read from the image database 20 (S2).
【００５８】ここで言う付随情報は、画像データに関す
る日付・時刻情報、位置情報、露光情報などである。付
随情報は、画像データ本体とは別エリアのデータ領域に
保管しておくことで、画像データ自体にアクセスするこ
となく、付随情報のみを取り出すことができる。また、
付随情報には、画像データの撮影者に関するユーザ情報
を含んでいてもよい。あるいは、ユーザ情報は、例え
ば、キーボード７５やマウス７６などのユーザ入力装置
並びにユーザ・インターフェース１１を介して、画像管
理システム１に直接入力されてもよい。The accompanying information referred to here includes date / time information, position information, exposure information, etc. relating to image data. By storing the accompanying information in a data area in an area different from the image data body, only the accompanying information can be extracted without accessing the image data itself. Also,
The accompanying information may include user information regarding the photographer of the image data. Alternatively, the user information may be directly input to the image management system 1 via a user input device such as the keyboard 75 and the mouse 76 and the user interface 11.
【００５９】付随情報に含まれる位置情報すなわち撮影
位置情報を地図データベース１３と照合することで、撮
影位置の地名又は施設名を推定することができる（Ｓ
３）。また、露光情報を用いて、撮影場所の屋内／屋外
判定を行うことができる（Ｓ４）。The location name or facility name of the photographing position can be estimated by comparing the position information, ie, the photographing position information, included in the accompanying information with the map database 13 (S).
3). Further, the indoor / outdoor determination of the shooting location can be performed using the exposure information (S4).
【００６０】また、ユーザ情報を家族情報データベース
１４と照合することで、該当するユーザの家族構成その
他の家族情報を引き出すことができる（Ｓ５）。Further, by comparing the user information with the family information database 14, the family structure and other family information of the corresponding user can be extracted (S5).
【００６１】ルールベース推論エンジン１６は、日付情
報、推定された地名又は施設名、奥内／屋外判定結果、
家族情報データベース１４などの各データと、季節行事
・社会慣習知識ベース１５から取り出されるデータとを
利用して、画像データに関する可能性の高い文脈（コン
テキスト）を推定する（Ｓ６）。The rule-based inference engine 16 calculates the date information, the estimated place name or facility name, the inner / outdoor judgment result,
Using data such as the family information database 14 and data extracted from the seasonal event / social customary knowledge base 15, a context having a high possibility of image data is estimated (S6).
【００６２】さらに、ルールベース推論エンジン１６
は、推論の確からしさを補強するために、気象情報やイ
ベント情報などを、通信インターフェース１２を介して
インターネット８０上の情報提供サーバ（ＷＷＷサー
バ）から取り寄せて（Ｓ７）、コンテキスト推定に利用
することができる。Further, the rule-based inference engine 16
Retrieves weather information, event information, and the like from an information providing server (WWW server) on the Internet 80 via the communication interface 12 to reinforce the certainty of the inference (S7) and use it for context estimation. Can be.
【００６３】ルールベース推定エンジン１６は、推定し
たコンテキストを基に、例えば、画像データのタイトル
付け又はタイトル候補の生成を行うことができる。ま
た、ルールベース推定エンジン１６にテンプレート・タ
イトル（雛型）を投入することで（Ｓ８）、ルールベー
ス推定エンジン１６は、該テンプレートを利用してタイ
トル候補を作成することができる。さらに、作成された
１以上のタイトル候補を、ユーザ・インターフェース１
１経由で出力装置７０上でユーザに提示することができ
る（Ｓ９）。The rule-based estimation engine 16 can, for example, assign a title to image data or generate a title candidate based on the estimated context. Also, by inputting a template title (template) into the rule-based estimation engine 16 (S8), the rule-based estimation engine 16 can create a title candidate using the template. Further, the created one or more title candidates are displayed on the user interface 1.
1 can be presented to the user on the output device 70 (S9).
【００６４】これに対し、ユーザは、キーボード７５や
マウス７６などのユーザ入力装置を用いて、提示された
タイトル候補を取捨選択したり可否判断を入力したりす
ることができる（Ｓ１０）。必ずしも第１候補が的中す
るとは限らないが、ユーザは対話的にタイトル候補を選
択することができる。また、ルールベース推論エンジン
１６は、ユーザからの取捨選択結果を学習することで、
次回以降、タイトルの推定精度をさらに向上させること
ができる。On the other hand, the user can use the user input device such as the keyboard 75 and the mouse 76 to select the presented title candidate and to input a determination as to whether or not it is possible (S10). Although the first candidate is not always successful, the user can interactively select a title candidate. Further, the rule-based inference engine 16 learns the selection result from the user,
From the next time onward, the accuracy of title estimation can be further improved.
【００６５】また、地図データベース１４や季節行事・
社会慣習知識ベース１５は、通信インターフェース１２
経由でインターネット８０上の情報提供サーバから適宜
最新情報を取得して、その内容を更新することができる
（Ｓ１１）。In addition, the map database 14 and seasonal events
The social custom knowledge base 15 includes the communication interface 12
The latest information can be appropriately acquired from the information providing server on the Internet 80 via the Internet, and the content can be updated (S11).
【００６６】次いで、本実施例に係る画像管理システム
１によって画像データのタイトル候補を自動生成する例
を挙げておく。Next, an example of automatically generating a title candidate of image data by the image management system 1 according to the present embodiment will be described.
【００６７】（例１）画像データの付随情報は以下の通
りであるとする。 ・ 家族情報…登録家族の次男（健二）の年齢が就学年
齢（６歳）である。 ・ 撮影日時情報…４月７日（金曜日） 午前 ・ 撮影位置情報…○△小学校、並びにその近傍Example 1 Assume that the accompanying information of the image data is as follows.・ Family information: The age of the second son (Kenji) of the registered family is the school age (6 years old).・ Shooting date and time information: April 7 (Friday) morning ・ Shooting position information: ○ △ Elementary school and its vicinity
【００６８】上述の条件では、次男の入学式を撮影した
可能性が極めて高いと推定できる。（この例では、日本
国では一般に４月に入学式が行われるという季節行事・
社会慣習知識ベースが利用されている。）Under the above conditions, it can be estimated that the possibility that the entrance ceremony of the second son was photographed is extremely high. (In this example, in Japan, the entrance ceremony is generally held in April.
Social custom knowledge base is used. )
【００６９】したがって、画像データに対するタイトル
挿入において、例えば「健二の入学式」といったタイト
ルを第１候補として挙げることができる。Therefore, in inserting a title into image data, a title such as “Kenji's entrance ceremony” can be given as a first candidate.
【００７０】（例２）画像データの付随情報は以下の通
りとする。 ・ 撮影日時情報…７月２５日（火曜日） 午後 ・ 撮影位置情報…江ノ島海岸 ・ 露光条件…周囲が非常に明るいことを示す値 ・ 気象条件…快晴 気温３０度(Example 2) The accompanying information of the image data is as follows.・ Shooting date and time information: Tuesday, July 25, in the afternoon ・ Shooting position information: Enoshima coast ・ Exposure conditions: Values indicating that the surroundings are extremely bright ・ Weather conditions: Sunny temperature 30 degrees
【００７１】本実施例に係る画像管理システム１では、
画像データには撮影日時情報や撮影位置情報が付随す
る。これら日時情報や位置情報を基に、インターネット
８０上の所定の情報提供サーバから、撮影当日の現地の
気象情報を検索・取得することができる。In the image management system 1 according to the present embodiment,
The image data is accompanied by shooting date and time information and shooting position information. Based on the date and time information and the position information, it is possible to search and acquire local weather information on the day of shooting from a predetermined information providing server on the Internet 80.
【００７２】また、露光情報により屋外で撮影されたこ
とが推定されるので、撮影日時、場所、気象条件とか
ら、海水浴を行った可能性が高いことが推定される。ま
た、日時情報と季節行事・社会慣習知識ベースとから、
学校の夏休み期間中であることが推定される。Since it is presumed that the image was taken outdoors based on the exposure information, it is presumed from the photographing date and time, the place and the weather conditions that the possibility of sea bathing is high. Also, based on the date and time information and the knowledge base of seasonal events and social customs,
It is estimated that the school is on summer vacation.
【００７３】したがって、この画像データのタイトル挿
入においては、タイトル・テンプレートを使用して、例
えば「夏休みの思い出〜江ノ島で海水浴」のようなもの
を第１候補として挙げることができる。Therefore, in the insertion of the title of the image data, for example, "summer vacation memories-bathing in Enoshima" can be given as the first candidate using the title template.
【００７４】本実施例に係る画像管理システム１は、例
えば、いわゆる「ホーム・サーバ」の機能の一部として
実装され、一般家庭内に設置して利用に供される。ま
た、画像管理をユーザのスケジュール管理と連動させる
と、コンテキスト推定の精度をさらに向上させることが
できる。The image management system 1 according to the present embodiment is implemented, for example, as a part of the function of a so-called “home server”, and is installed in a general home for use. Further, when the image management is linked with the user's schedule management, the accuracy of context estimation can be further improved.
【００７５】［追補］以上、特定の実施例を参照しなが
ら、本発明について詳解してきた。しかしながら、本発
明の要旨を逸脱しない範囲で当業者が該実施例の修正や
代用を成し得ることは自明である。すなわち、例示とい
う形態で本発明を開示してきたのであり、限定的に解釈
されるべきではない。本発明の要旨を判断するために
は、冒頭に記載した特許請求の範囲の欄を参酌すべきで
ある。[Supplement] The present invention has been described in detail with reference to the specific embodiments. However, it is obvious that those skilled in the art can modify or substitute the embodiment without departing from the scope of the present invention. That is, the present invention has been disclosed by way of example, and should not be construed as limiting. In order to determine the gist of the present invention, the claims described at the beginning should be considered.
【００７６】[0076]
【発明の効果】以上詳記したように、本発明によれば、
ビデオ・カメラやデジタル・スチル・カメラなどの撮像
装置を介して取得・収集された画像データを管理するこ
とができる、優れた画像管理システム及び画像管理方法
を提供することができる。As described above in detail, according to the present invention,
It is possible to provide an excellent image management system and an excellent image management method that can manage image data acquired and collected via an imaging device such as a video camera or a digital still camera.
【００７７】また、本発明によれば、多数の画像データ
を撮像装置から取得・収集して編集・整理・検索するこ
とができる、優れた画像管理システム及び画像管理を提
供することができる。Further, according to the present invention, it is possible to provide an excellent image management system and an excellent image management capable of acquiring, collecting, editing, organizing, and retrieving a large number of image data from an imaging device.
【００７８】また、本発明によれば、画像データに付随
する各種の属性情報及び／又はユーザ情報に従って画像
データを編集・整理・検索することができる、優れた画
像管理システム及び画像管理方法を提供することができ
る。Further, according to the present invention, there is provided an excellent image management system and image management method capable of editing, organizing, and retrieving image data in accordance with various attribute information and / or user information attached to the image data. can do.
【００７９】また、本発明によれば、画像データに付随
する属性情報及び／又はユーザ情報に従って画像データ
のコンテキストを解析して編集・整理・検索を行うこと
ができる、優れた画像管理システム及び画像管理方法を
提供することができる。Further, according to the present invention, an excellent image management system and image management system capable of analyzing, editing, organizing, and retrieving the context of image data in accordance with attribute information and / or user information attached to the image data. Management methods can be provided.
【００８０】本発明によれば、画像に付随する日時、位
置情報、露光情報などの属性情報と、あらかじめ登録さ
れているユーザ・プロファイル情報、地図情報、季節行
事の知識、暦の知識、気象情報、イベント情報などか
ら、記録された画像データのコンテキストを推定するこ
とができる。言い換えれば、画像データのコンテキスト
推定のために、画像データ自体の画像認識結果に頼る必
要がない。また、このような推定結果に基づいて、画像
データのタイトル付け、分類整理、検索などを行うこと
ができる、ユーザビリティに富むとともに親しみ易い画
像蓄積・編集環境を提供することができる。According to the present invention, attribute information such as date and time, position information, exposure information, etc. attached to an image, user profile information, map information, knowledge of seasonal events, knowledge of calendar, weather information, From the event information, the context of the recorded image data can be estimated. In other words, it is not necessary to rely on the image recognition result of the image data itself for estimating the context of the image data. In addition, it is possible to provide an image storage / editing environment that is rich in usability and is friendly to the user, in which titles, classification rearrangement, search, and the like of image data can be performed based on the estimation result.
【図１】本発明の実施に供される画像管理システム１の
機能構成を概略的に示した図である。FIG. 1 is a diagram schematically showing a functional configuration of an image management system 1 provided for implementing the present invention.
【図２】本実施例に係る画像管理システム１に適用可能
なビデオ・カメラ５０の構成例を示した図である。FIG. 2 is a diagram showing a configuration example of a video camera 50 applicable to the image management system 1 according to the embodiment.
【図３】本実施例に係る画像管理システム１の処理動作
を説明するための図である。FIG. 3 is a diagram for explaining a processing operation of the image management system 1 according to the embodiment.
１…画像管理システム １１…ユーザ・インターフェース １２…通信インターフェース １３…地図データベース １４…家族情報データベース １５…季節行事・社会慣習知識ベース １６…ルールベース推論エンジン ２０…画像データベース ５０…ビデオ・カメラ ５１…カメラ部，５１Ａ…レンズ，５１Ｂ…撮像素子 ５２…信号処理部 ５３…制御部 ５４…ＧＰＳアンテナ ５５…システム時計 ５６…ユーザ入力部 ５７…記憶部 ５８…記録制御部 ５９…記録メディア ７０…出力装置 ７５…キーボード，７６…マウス ８０…インターネット DESCRIPTION OF SYMBOLS 1 ... Image management system 11 ... User interface 12 ... Communication interface 13 ... Map database 14 ... Family information database 15 ... Seasonal event / social custom knowledge base 16 ... Rule-based inference engine 20 ... Image database 50 ... Video camera 51 ... Camera Unit 51A lens 51B image sensor 52 signal processing unit 53 control unit 54 GPS antenna 55 system clock 56 user input unit 57 storage unit 58 recording control unit 59 recording medium 70 output device 75 ... keyboard, 76 ... mouse 80 ... Internet
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 5/91 Ｈ０４Ｎ 5/91 Ｎ (72)発明者 藤波 順久 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5B050 AA09 BA10 BA15 CA07 FA02 GA08 5B075 ND03 ND06 ND23 ND36 NK46 NR02 NR12 NS10 PQ02 PQ32 PR08 QP01 UU14 UU40 5C052 AA01 AB04 AC08 CC06 DD04 5C053 FA07 FA14 FA22 FA23 GB21 HA29 JA21 KA01 KA24 LA01 LA11 LA14 ──────────────────────────────────────────────────続 き Continued on the front page (51) Int.Cl. 7 Identification symbol FI Theme court ゛ (Reference) H04N 5/91 H04N 5/91 N (72) Inventor Junhisa Fujinami 6-35 Kita Shinagawa, Shinagawa-ku, Tokyo No. Sony Corporation F term (reference) 5B050 AA09 BA10 BA15 CA07 FA02 GA08 5B075 ND03 ND06 ND23 ND36 NK46 NR02 NR12 NS10 PQ02 PQ32 PR08 QP01 UU14 UU40 5C052 AA01 AB04 AC08 CC06 DD04 5C053 FA07 FA21 FA21 FA21 FA21 LA11 LA14
Claims (21)
の画像管理システムであって、 付随情報付きの画像データを保持する画像データ保持手
段と、 画像データ保持手段から付随情報のみを取り出して解析
する付随情報解析手段と、 付随情報及び／又は付随情報の解析結果を基に画像デー
タのコンテキストを推定するコンテキスト推定手段と、
を具備することを特徴とする画像管理システム。An image management system for classifying and / or organizing image data, comprising: image data holding means for holding image data with accompanying information; and extracting and analyzing only the accompanying information from the image data holding means. Additional information analyzing means, and context estimating means for estimating the context of the image data based on the additional information and / or the analysis result of the additional information;
An image management system comprising:
日時情報、撮影位置情報、撮影条件、撮影者に関するユ
ーザ情報のうち少なくとも１つを含むことを特徴とする
請求項１に記載の画像管理システム。2. The image management system according to claim 1, wherein the accompanying information includes at least one of shooting date and time information on image data, shooting position information, shooting conditions, and user information on a photographer. .
情報を該地図データベースと照合して、画像データを撮
影した地名及び／又は施設名を推定することを特徴とす
る請求項１に記載の画像管理システム。3. The apparatus according to claim 1, further comprising a map database, wherein the incidental information analysis means compares the photographing position information included in the incidental information with the map database to estimate a place name and / or a facility name at which the image data is photographed. The image management system according to claim 1, wherein:
備え、 前記付随情報解析手段は、付随情報に含まれる撮影日時
情報及び／又はユーザ情報を該季節行事・社会慣習知識
ベースと照合して、画像データの撮影と関連する季節行
事・社会慣習を推定することを特徴とする請求項１に記
載の画像管理システム。4. A seasonal event / social custom knowledge base, wherein the incidental information analysis means compares the shooting date / time information and / or user information included in the incidental information with the seasonal event / social custom knowledge base. 2. The image management system according to claim 1, wherein seasonal events and social customs related to image data shooting are estimated.
スを備え、 前記付随情報解析手段は、付随情報に含まれるユーザ情
報を該家族情報データベースと照合し、画像データを撮
影したユーザの家族情報を特定することを特徴とする請
求項１に記載の画像管理システム。5. The system according to claim 1, further comprising a family information database for each user, wherein said accompanying information analyzing means checks user information included in the accompanying information with said family information database, and outputs family information of a user who has taken image data. The image management system according to claim 1, wherein the identification is specified.
れた外部ネットワークに接続する通信手段を備え、 前記コンテキスト推定手段は、付随情報に適合する気象
情報及び／又はイベント情報などを該通信手段経由で外
部ネットワーク上の情報提供サーバから取得し、該取得
した情報をコンテキストの推定に利用することを特徴と
する請求項１に記載の画像管理システム。6. A communication unit connected to an external network in which one or more information providing servers are installed, wherein the context estimating unit transmits weather information and / or event information matching the accompanying information. 2. The image management system according to claim 1, wherein the information is acquired from an information providing server on an external network via the external network, and the acquired information is used for estimating a context.
行事・社会慣習知識ベースなどの１以上のデータベース
と、１以上の情報提供サーバが設置された外部ネットワ
ークに接続する通信手段とを備え、 各データベースの更新情報を該通信手段経由で外部ネッ
トワーク上の情報提供サーバから取得することを特徴と
する請求項１に記載の画像管理システム。7. A database comprising at least one database such as a map database and / or a seasonal event / social customs knowledge base, and communication means for connecting to an external network provided with at least one information providing server. 2. The image management system according to claim 1, wherein the updated information is obtained from an information providing server on an external network via the communication unit.
トの推定結果に基づいて当該画像データのタイトル候補
を生成することを特徴とする請求項１に記載の画像管理
システム。8. The image management system according to claim 1, wherein said context estimating means generates a title candidate of the image data based on a context estimation result.
補を該出力装置を介してユーザ・フィードバックするこ
とを特徴とする請求項８に記載の画像管理システム。9. The image management system according to claim 8, further comprising an output device, wherein the title candidate generated by the context estimating means is fed back to the user via the output device.
トル・テンプレートを前記コンテキスト推定手段に投入
する手段を備えることを特徴とする請求項８に記載の画
像管理システム。10. The image management system according to claim 8, further comprising means for inputting a title template serving as a title candidate material to said context estimating means.
めの画像管理方法であって、 付随情報付きの画像データを保持する画像データ保持ス
テップと、 画像データ保持手段から付随情報のみを取り出して解析
する付随情報解析ステップと、 付随情報及び／又は付随情報の解析結果を基に画像デー
タのコンテキストを推定するコンテキスト推定ステップ
と、を具備することを特徴とする画像管理方法。11. An image management method for classifying and / or organizing image data, comprising: an image data holding step of holding image data with accompanying information; and extracting and analyzing only the accompanying information from the image data holding means. And a context estimating step of estimating a context of the image data based on the accompanying information and / or a result of the analysis of the accompanying information.
影日時情報、撮影位置情報、撮影条件、撮影者に関する
ユーザ情報のうち少なくとも１つを含むことを特徴とす
る請求項１１に記載の画像管理方法。12. The image management method according to claim 11, wherein said accompanying information includes at least one of photographing date and time information relating to image data, photographing position information, photographing conditions, and user information relating to a photographer. .
報に含まれる撮影位置情報を所定の地図データベースと
照合して、画像データを撮影した地名及び／又は施設名
を推定することを特徴とする請求項１１に記載の画像管
理方法。13. The method according to claim 13, wherein in the additional information analyzing step, the photographing position information included in the additional information is collated with a predetermined map database to estimate a place name and / or a facility name where the image data was captured. Item 12. The image management method according to Item 11.
報に含まれる撮影日時情報及び／又はユーザ情報を所定
の季節行事・社会慣習知識ベースと照合して、画像デー
タの撮影と関連する季節行事・社会慣習を推定すること
を特徴とする請求項１１に記載の画像管理方法。14. The incidental information analyzing step, wherein the photographing date and time information and / or user information included in the incidental information is compared with a predetermined seasonal event / social custom knowledge base to determine the seasonal event / event associated with image data photographing. The image management method according to claim 11, wherein social customs are estimated.
報に含まれるユーザ情報を所定の家族情報データベース
と照合し、画像データを撮影したユーザの家族情報を特
定することを特徴とする請求項１１に記載の画像管理方
法。15. The method according to claim 11, wherein in the accompanying information analyzing step, user information included in the accompanying information is compared with a predetermined family information database, and the family information of the user who captured the image data is specified. Image management method described.
された外部ネットワークに接続する通信ステップを備
え、 前記コンテキスト推定ステップでは、付随情報に適合す
る気象情報及び／又はイベント情報などを該通信ステッ
プにおいて外部ネットワーク上の情報提供サーバから取
得し、該取得した情報をコンテキストの推定に利用する
ことを特徴とする請求項１１に記載の画像管理方法。16. A communication step for connecting to an external network in which one or more information providing servers are installed, wherein in the context estimating step, weather information and / or event information or the like matching the incidental information is included in the communication step. 12. The image management method according to claim 11, wherein the acquired information is obtained from an information providing server on an external network, and the obtained information is used for estimating a context.
された外部ネットワークに接続する通信ステップを備
え、 付随情報の解析並びにコンテキスト推定に利用する各デ
ータベースの更新情報を該通信ステップにおいて外部ネ
ットワーク上の情報提供サーバから取得することを特徴
とする請求項１１に記載の画像管理方法。17. A communication step for connecting to an external network in which one or more information providing servers are installed, and updating information of each database used for analysis of accompanying information and context estimation is performed on the external network in the communication step. The image management method according to claim 11, wherein the image management method obtains the information from the information providing server.
ンテキストの推定結果に基づいて当該画像データのタイ
トル候補を生成することを特徴とする請求項１１に記載
の画像管理方法。18. The image management method according to claim 11, wherein in the context estimating step, a title candidate of the image data is generated based on a result of estimating the context.
成されたタイトル候補をユーザ・フィードバックするス
テップをさらに備えることを特徴とする請求項１８に記
載の画像管理方法。19. The image management method according to claim 18, further comprising the step of providing user feedback on a title candidate generated in the context estimation step.
イトル候補の素材となるタイトル・テンプレートを利用
することを特徴とする請求項１８に記載の画像管理方
法。20. The image management method according to claim 18, wherein in the context estimation step, a title template serving as a title candidate material is used.
めの画像管理をコンピュータ・システム上で実行するよ
うに記述されたコンピュータ・ソフトウェアをコンピュ
ータ可読形式で物理的に格納した記憶媒体であって、前
記コンピュータ・ソフトウェアは、 付随情報付きの画像データを保持する画像データ保持ス
テップと、 画像データ保持手段から付随情報のみを取り出して解析
する付随情報解析ステップと、 付随情報及び／又は付随情報の解析結果を基に画像デー
タのコンテキストを推定するコンテキスト推定ステップ
と、 を具備することを特徴とする記憶媒体。21. A storage medium physically storing computer software in a computer-readable form, the computer software being written to execute image management for classifying and / or organizing image data on a computer system. The computer software includes: an image data holding step of holding image data with accompanying information; an accompanying information analyzing step of extracting and analyzing only the accompanying information from the image data holding means; and an analysis result of the accompanying information and / or the accompanying information. A context estimating step of estimating a context of the image data based on the storage medium.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000182557A JP2002010178A (en) | 2000-06-19 | 2000-06-19 | Image managing system and method for managing image as well as storage medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000182557A JP2002010178A (en) | 2000-06-19 | 2000-06-19 | Image managing system and method for managing image as well as storage medium |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2002010178A true JP2002010178A (en) | 2002-01-11 |
Family
ID=18683291
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000182557A Pending JP2002010178A (en) | 2000-06-19 | 2000-06-19 | Image managing system and method for managing image as well as storage medium |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2002010178A (en) |
Cited By (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005122488A (en) * | 2003-10-16 | 2005-05-12 | Sony Corp | Private information storage apparatus, private information management apparatus, information management method, and program executing information management processing |
| JP2006338097A (en) * | 2005-05-31 | 2006-12-14 | Hitachi Ltd | Photographic device and management center computer |
| JP2007528626A (en) * | 2003-12-15 | 2007-10-11 | 松下電器産業株式会社 | Recording apparatus and method for supporting creation of video title, and control program therefor |
| US7447418B2 (en) | 2003-01-17 | 2008-11-04 | Matsushita Electric Industrial Co., Ltd. | Image reproducing device and image recording/reproducing device |
| WO2010047336A1 (en) * | 2008-10-20 | 2010-04-29 | 株式会社キャメロット | Image photographing system and image photographing method |
| JP2010118056A (en) * | 2008-11-11 | 2010-05-27 | Samsung Electronics Co Ltd | Device for making album of content and method for making album of content |
| KR20110016936A (en) * | 2008-05-12 | 2011-02-18 | 구글 인코포레이티드 | Automatic discovery of popular landmarks |
| US7956905B2 (en) | 2005-02-28 | 2011-06-07 | Fujifilm Corporation | Titling apparatus, a titling method, and a machine readable medium storing thereon a computer program for titling |
| US8069170B2 (en) | 2003-10-10 | 2011-11-29 | Sony Corporation | Private information storage device and private information management device |
| CN102467578A (en) * | 2010-11-11 | 2012-05-23 | 巴比禄股份有限公司 | Content data management device, content data management system and method thereof |
| US20120268618A1 (en) * | 2011-04-19 | 2012-10-25 | Canon Kabushiki Kaisha | Adaptive color imaging by using an imaging assembly with tunable spectral sensitivities |
| WO2012147256A1 (en) * | 2011-04-25 | 2012-11-01 | パナソニック株式会社 | Image-processing device |
| JP2013051691A (en) * | 2006-04-10 | 2013-03-14 | Yahoo Inc | Topic specific generation and editing of media assets |
| US8553990B2 (en) | 2009-09-29 | 2013-10-08 | Fujifilm Corporation | Image classifying device, image classifying system, image classifying method, and recording medium |
| US8868465B2 (en) | 2006-01-13 | 2014-10-21 | Yahoo! Inc. | Method and system for publishing media content |
| US9020247B2 (en) | 2009-05-15 | 2015-04-28 | Google Inc. | Landmarks from digital photo collections |
| JP2016103833A (en) * | 2015-12-22 | 2016-06-02 | 株式会社バッファロー | Image information processing apparatus and program |
| US9413974B2 (en) | 2013-07-22 | 2016-08-09 | Canon Kabushiki Kaisha | Information processing apparatus, image sensing apparatus, control method, and recording medium for conversion processing |
| WO2018042959A1 (en) * | 2016-08-29 | 2018-03-08 | 京セラドキュメントソリューションズ株式会社 | Video data analysis device and video data analysis method |
| CN108292311A (en) * | 2015-11-11 | 2018-07-17 | 三星电子株式会社 | Device and method for handling metadata |
| CN110377765A (en) * | 2018-04-13 | 2019-10-25 | 富士施乐株式会社 | Media object grouping and classification for prediction type enhancing |
-
2000
- 2000-06-19 JP JP2000182557A patent/JP2002010178A/en active Pending
Cited By (38)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7447418B2 (en) | 2003-01-17 | 2008-11-04 | Matsushita Electric Industrial Co., Ltd. | Image reproducing device and image recording/reproducing device |
| US8069170B2 (en) | 2003-10-10 | 2011-11-29 | Sony Corporation | Private information storage device and private information management device |
| JP2005122488A (en) * | 2003-10-16 | 2005-05-12 | Sony Corp | Private information storage apparatus, private information management apparatus, information management method, and program executing information management processing |
| JP2007528626A (en) * | 2003-12-15 | 2007-10-11 | 松下電器産業株式会社 | Recording apparatus and method for supporting creation of video title, and control program therefor |
| US8953065B2 (en) | 2005-02-28 | 2015-02-10 | Facebook, Inc. | Titling apparatus, a titling method, and a machine readable medium storing thereon a computer program for titling |
| US7956905B2 (en) | 2005-02-28 | 2011-06-07 | Fujifilm Corporation | Titling apparatus, a titling method, and a machine readable medium storing thereon a computer program for titling |
| US8411167B2 (en) | 2005-02-28 | 2013-04-02 | Fujifilm Corporation | Titling apparatus, a titling method, and a machine readable medium storing thereon a computer program for titling |
| JP2006338097A (en) * | 2005-05-31 | 2006-12-14 | Hitachi Ltd | Photographic device and management center computer |
| US8868465B2 (en) | 2006-01-13 | 2014-10-21 | Yahoo! Inc. | Method and system for publishing media content |
| JP2013051691A (en) * | 2006-04-10 | 2013-03-14 | Yahoo Inc | Topic specific generation and editing of media assets |
| KR101579634B1 (en) | 2008-05-12 | 2016-01-05 | 구글 인코포레이티드 | Automatic discovery of popular landmarks |
| US8676001B2 (en) | 2008-05-12 | 2014-03-18 | Google Inc. | Automatic discovery of popular landmarks |
| US10289643B2 (en) | 2008-05-12 | 2019-05-14 | Google Llc | Automatic discovery of popular landmarks |
| US9483500B2 (en) | 2008-05-12 | 2016-11-01 | Google Inc. | Automatic discovery of popular landmarks |
| US9014511B2 (en) | 2008-05-12 | 2015-04-21 | Google Inc. | Automatic discovery of popular landmarks |
| JP2011520208A (en) * | 2008-05-12 | 2011-07-14 | グーグル インコーポレイテッド | Automatic discovery of popular landmarks |
| KR20110016936A (en) * | 2008-05-12 | 2011-02-18 | 구글 인코포레이티드 | Automatic discovery of popular landmarks |
| WO2010047336A1 (en) * | 2008-10-20 | 2010-04-29 | 株式会社キャメロット | Image photographing system and image photographing method |
| JPWO2010047336A1 (en) * | 2008-10-20 | 2012-03-22 | 株式会社キャメロット | Image photographing system and image photographing method |
| US20110199511A1 (en) * | 2008-10-20 | 2011-08-18 | Camelot Co., Ltd. | Image photographing system and image photographing method |
| JP2010118056A (en) * | 2008-11-11 | 2010-05-27 | Samsung Electronics Co Ltd | Device for making album of content and method for making album of content |
| US9721188B2 (en) | 2009-05-15 | 2017-08-01 | Google Inc. | Landmarks from digital photo collections |
| US9020247B2 (en) | 2009-05-15 | 2015-04-28 | Google Inc. | Landmarks from digital photo collections |
| US8553990B2 (en) | 2009-09-29 | 2013-10-08 | Fujifilm Corporation | Image classifying device, image classifying system, image classifying method, and recording medium |
| CN102467578A (en) * | 2010-11-11 | 2012-05-23 | 巴比禄股份有限公司 | Content data management device, content data management system and method thereof |
| JP2012103963A (en) * | 2010-11-11 | 2012-05-31 | Buffalo Inc | Content data management device, content data management system, content data management program and content data management method |
| US8836808B2 (en) * | 2011-04-19 | 2014-09-16 | Canon Kabushiki Kaisha | Adaptive color imaging by using an imaging assembly with tunable spectral sensitivities |
| US20120268618A1 (en) * | 2011-04-19 | 2012-10-25 | Canon Kabushiki Kaisha | Adaptive color imaging by using an imaging assembly with tunable spectral sensitivities |
| US9008438B2 (en) | 2011-04-25 | 2015-04-14 | Panasonic Intellectual Property Corporation Of America | Image processing device that associates photographed images that contain a specified object with the specified object |
| JP5848336B2 (en) * | 2011-04-25 | 2016-01-27 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ | Image processing device |
| WO2012147256A1 (en) * | 2011-04-25 | 2012-11-01 | パナソニック株式会社 | Image-processing device |
| CN102959551A (en) * | 2011-04-25 | 2013-03-06 | 松下电器产业株式会社 | Image-processing device |
| US9413974B2 (en) | 2013-07-22 | 2016-08-09 | Canon Kabushiki Kaisha | Information processing apparatus, image sensing apparatus, control method, and recording medium for conversion processing |
| CN108292311B (en) * | 2015-11-11 | 2022-11-15 | 三星电子株式会社 | Apparatus and method for processing metadata |
| CN108292311A (en) * | 2015-11-11 | 2018-07-17 | 三星电子株式会社 | Device and method for handling metadata |
| JP2016103833A (en) * | 2015-12-22 | 2016-06-02 | 株式会社バッファロー | Image information processing apparatus and program |
| WO2018042959A1 (en) * | 2016-08-29 | 2018-03-08 | 京セラドキュメントソリューションズ株式会社 | Video data analysis device and video data analysis method |
| CN110377765A (en) * | 2018-04-13 | 2019-10-25 | 富士施乐株式会社 | Media object grouping and classification for prediction type enhancing |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2002010178A (en) | Image managing system and method for managing image as well as storage medium | |
| US7734654B2 (en) | Method and system for linking digital pictures to electronic documents | |
| US6629104B1 (en) | Method for adding personalized metadata to a collection of digital images | |
| US7414651B2 (en) | Efficient image categorization | |
| US6549913B1 (en) | Method for compiling an image database, an image database system, and an image data storage medium | |
| US7127164B1 (en) | Method for rating images to facilitate image retrieval | |
| US8934717B2 (en) | Automatic story creation using semantic classifiers for digital assets and associated metadata | |
| JP2892901B2 (en) | Automation system and method for presentation acquisition, management and playback | |
| US20040135815A1 (en) | Method and apparatus for image metadata entry | |
| US6850695B1 (en) | Natural language labeling of images using multiple words | |
| US20060218481A1 (en) | System and method for annotating multi-modal characteristics in multimedia documents | |
| US9277089B2 (en) | Method to control image processing apparatus, image processing apparatus, and image file | |
| US20020040360A1 (en) | Data management system, data management method, and program | |
| US20040174443A1 (en) | System and method for storing of records in a database | |
| WO2000051342A1 (en) | Methods and apparatus for associating descriptive data with digital image files | |
| JPH1056609A (en) | Image recording method, communication method, image recording device, communication equipment and medium | |
| JP2000276484A (en) | Device and method for image retrieval and image display device | |
| JP3915106B2 (en) | Image search device | |
| JPH0765021A (en) | Information retrieving device | |
| JPH11134365A (en) | Device and method for information access | |
| JP2003303210A (en) | Information processing method, information processing device, and recording medium | |
| US20040177067A1 (en) | Directory search method, directory search apparatus, program for implementing and operating the same, and memory medium | |
| US20040135894A1 (en) | Method, apparatus and program for image classification | |
| JP2006350550A (en) | Album content automatic preparation method and system | |
| JP4521669B2 (en) | Video editing support system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070119 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080829 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080902 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081029 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20090929 |