JP2010187320A - Image recording device, image classifying device, image display device, and program - Google Patents

Image recording device, image classifying device, image display device, and program Download PDF

Info

Publication number
JP2010187320A
JP2010187320A JP2009031543A JP2009031543A JP2010187320A JP 2010187320 A JP2010187320 A JP 2010187320A JP 2009031543 A JP2009031543 A JP 2009031543A JP 2009031543 A JP2009031543 A JP 2009031543A JP 2010187320 A JP2010187320 A JP 2010187320A
Authority
JP
Japan
Prior art keywords
display
image data
recording medium
image
interest level
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2009031543A
Other languages
Japanese (ja)
Inventor
Takako Hanai
孝子 花井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2009031543A priority Critical patent/JP2010187320A/en
Publication of JP2010187320A publication Critical patent/JP2010187320A/en
Withdrawn legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To classify image data which reflect the reactions of an operator and persons around the operator. <P>SOLUTION: A camera control unit 20 acquires display information associated with a display time of image data and interest level information, associated with levels of interest in the image data that a plurality of persons have during display of the image data, and a recording unit 15 records the acquired display information and level-of-interest information in a recording medium associated with the image data being displayed. Then the image data recorded in the recording medium is classified, based on the display information and the level-of-interest information recorded in the recording medium. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、画像データを記録媒体に記録する画像記録装置、記録媒体に記録された画像データを分類する画像分類装置、及び、その分類結果に基づく画像データの表示を行う画像表示装置、並びに、コンピュータをそのような画像記録装置、画像分類装置又は画像表示装置として機能させるためのプログラムに関する。   The present invention relates to an image recording apparatus that records image data on a recording medium, an image classification apparatus that classifies image data recorded on the recording medium, an image display apparatus that displays image data based on the classification result, and The present invention relates to a program for causing a computer to function as such an image recording device, an image classification device, or an image display device.

特許文献1には、複数の画像データの中から何れかの画像データを選択して表示するための画像観賞用ソフトウェアが提案されている。この提案は、多数の画像データを閲覧回数を基準にして、必要なものと不要なものとに自動的に分類することができるソフトウェアに関するものである。   Patent Document 1 proposes image viewing software for selecting and displaying any one of a plurality of image data. This proposal relates to software that can automatically classify a large number of image data into necessary and unnecessary based on the number of browsing times.

特開2007−42228号公報JP 2007-42228 A

上記特許文献1に開示の画像観賞用ソフトウェアは、画像データの分類には操作者の反応に関する情報しか反映されておらず、一緒に観賞している周りの人の反応に関する情報を反映できていない。これらを改善することで、さらに使い易い表示装置を実現できる余地が残されている。   The image viewing software disclosed in Patent Document 1 reflects only information on the response of the operator in the classification of image data, and cannot reflect information on the response of surrounding people who are watching together. . By improving these, there is still room for realizing an easy-to-use display device.

本発明は、上記の点に鑑みてなされたもので、操作者だけでなく周囲の人の反応を反映させて画像データを分類できるような情報を画像データに関連付けて記録する画像記録装置、そのような情報を使って画像データを分類する画像分類装置、及び、その分類結果を用いることで周囲の人の反応を反映した複数の画像データの表示方法を変更することが可能な表示装置、並びに、コンピュータをそのような画像記録装置、画像分類装置又は画像表示装置として機能させるためのプログラムを提供することを目的とする。   The present invention has been made in view of the above points, and an image recording apparatus that records information associated with image data so that the image data can be classified by reflecting the reactions of not only the operator but also the surrounding people, An image classification device that classifies image data using such information, a display device that can change the display method of a plurality of image data reflecting the reaction of surrounding people by using the classification result, and An object of the present invention is to provide a program for causing a computer to function as such an image recording device, an image classification device, or an image display device.

本発明の画像記録装置の一態様は、
画像データの表示中の、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段と、
上記画像データの表示中の、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段と、
上記表示情報取得手段で取得した表示情報及び上記関心度情報取得手段で取得した関心度情報を、上記表示中の画像データに関連付けて記録媒体に記録する記録手段と、
を具備することを特徴とする。
One aspect of the image recording apparatus of the present invention is:
Display information acquisition means for acquiring display information relating to the display time of the image data during display of the image data;
Interest level information acquisition means for acquiring interest level information related to the level of interest of the image data of a plurality of persons during the display of the image data;
Recording means for recording the display information acquired by the display information acquisition means and the interest level information acquired by the interest level information acquisition means on a recording medium in association with the image data being displayed;
It is characterized by comprising.

また、本発明の画像分類装置の一態様は、
画像データの表示中の、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段と、
上記画像データの表示中の、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段と、
上記表示情報取得手段で取得した表示情報及び上記関心度情報取得手段で取得した関心度情報を、上記表示中の画像データに関連付けて記録媒体に記録する記録手段と、
上記記録媒体に記録されている上記表示情報と上記関心度情報とに基づいて、上記記録媒体に記録されている画像データを分類する分類手段と、
を具備することを特徴とする。
Also, one aspect of the image classification device of the present invention is:
Display information acquisition means for acquiring display information relating to the display time of the image data during display of the image data;
Interest level information acquisition means for acquiring interest level information related to the level of interest of the image data of a plurality of persons during the display of the image data;
Recording means for recording the display information acquired by the display information acquisition means and the interest level information acquired by the interest level information acquisition means on a recording medium in association with the image data being displayed;
Classification means for classifying image data recorded on the recording medium based on the display information and the interest level information recorded on the recording medium;
It is characterized by comprising.

また、本発明の画像表示装置の一態様は、
画像データを表示中、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段と、
画像データを表示中、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段と、
上記表示情報取得手段で取得した表示情報及び上記関心度情報取得手段で取得した関心度情報を、上記表示中の画像データに関連付けて記録媒体に記録する記録手段と、
上記記録媒体に記録されている上記表示情報と上記関心度情報とに基づいて、上記記録媒体に記録されている画像データを分類する分類手段と、
上記記録媒体に記録されている複数の画像データを表示する表示手段と、
上記分類手段による分類結果に従って、上記記録媒体に記録されている複数の画像データの上記表示手段による表示方法を変更する表示方法変更手段と、
を具備することを特徴とする。
One aspect of the image display device of the present invention is:
Display information acquisition means for acquiring display information regarding the display time of the image data while displaying the image data;
Interest level information acquisition means for acquiring interest level information related to the level of interest of the image data of a plurality of persons while displaying the image data;
Recording means for recording the display information acquired by the display information acquisition means and the interest level information acquired by the interest level information acquisition means on a recording medium in association with the image data being displayed;
Classification means for classifying image data recorded on the recording medium based on the display information and the interest level information recorded on the recording medium;
Display means for displaying a plurality of image data recorded on the recording medium;
Display method changing means for changing a display method by the display means of a plurality of image data recorded on the recording medium according to a classification result by the classification means;
It is characterized by comprising.

一方、本発明のプログラムの一態様は、
コンピュータを、
画像データの表示中の、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段、
上記画像データの表示中の、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段、
上記取得した表示情報及び関心度情報を、上記表示中の画像データに関連付けて記録媒体に記録する記録手段、
として機能させる。
On the other hand, one aspect of the program of the present invention is as follows.
Computer
Display information acquisition means for acquiring display information relating to the display time of the image data during display of the image data;
Interest level information acquisition means for acquiring interest level information relating to the level of interest of the image data of a plurality of persons during display of the image data,
Recording means for recording the acquired display information and interest level information on a recording medium in association with the image data being displayed;
To function as.

また、本発明のプログラムの別の態様は、
コンピュータを、
画像データの表示中の、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段、
上記画像データの表示中の、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段、
上記取得した表示情報及び関心度情報を、上記表示中の画像データに関連付けて記録媒体に記録する記録手段、
上記記録媒体に記録されている上記表示情報と上記関心度情報とに基づいて、上記記録媒体に記録されている画像データを分類する分類手段、
として機能させる。
Another aspect of the program of the present invention is as follows:
Computer
Display information acquisition means for acquiring display information relating to the display time of the image data during display of the image data;
Interest level information acquisition means for acquiring interest level information relating to the level of interest of the image data of a plurality of persons during display of the image data,
Recording means for recording the acquired display information and interest level information on a recording medium in association with the image data being displayed;
Classification means for classifying image data recorded on the recording medium based on the display information and the interest level information recorded on the recording medium,
To function as.

また、本発明のプログラムの更に別の態様は、
コンピュータを、
画像データの表示中の、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段、
上記画像データの表示中の、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段、
上記取得した表示情報及び関心度情報を、上記表示中の画像データに関連付けて記録媒体に記録する記録手段、
上記記録媒体に記録されている上記表示情報と上記関心度情報とに基づいて、上記記録媒体に記録されている画像データを分類する分類手段、
上記記録媒体に記録されている複数の画像データを表示する表示手段、
上記分類結果に従って、上記記録媒体に記録されている複数の画像データの表示方法を変更する表示方法変更手段、
として機能させる。
Further, another aspect of the program of the present invention is as follows:
Computer
Display information acquisition means for acquiring display information relating to the display time of the image data during display of the image data;
Interest level information acquisition means for acquiring interest level information relating to the level of interest of the image data of a plurality of persons during display of the image data,
Recording means for recording the acquired display information and interest level information on a recording medium in association with the image data being displayed;
Classification means for classifying image data recorded on the recording medium based on the display information and the interest level information recorded on the recording medium,
Display means for displaying a plurality of image data recorded on the recording medium;
Display method changing means for changing the display method of the plurality of image data recorded on the recording medium according to the classification result;
To function as.

本発明によれば、画像データの表示中に、当該画像データの表示時間に関する情報と複数人の当該画像データに対する関心度に関する情報とを取得して記録媒体に記録するので、操作者だけでなく周囲の人の反応を反映させて画像データを分類できるような情報を画像データに関連付けて記録することが可能な画像記録装置を提供することができ、また、そのような情報に基づいて画像データを分類することで、操作者以外の周りの人の反応を反映させて画像データを分類可能となる画像分類装置を提供でき、更には、そうして分類された結果を用いることで複数の画像データの表示方法を周囲の人の反応を反映したものに変更することが可能となる画像表示装置を提供できる。   According to the present invention, during the display of the image data, the information related to the display time of the image data and the information related to the degree of interest in the image data of a plurality of persons are acquired and recorded on the recording medium. It is possible to provide an image recording apparatus capable of recording information that can categorize image data by reflecting the reaction of surrounding people and to record the image data in association with the image data, and image data based on such information. By classifying the image data, it is possible to provide an image classification device that can classify the image data by reflecting the reactions of people around the operator other than the operator. Furthermore, by using the results of the classification, a plurality of images can be provided. It is possible to provide an image display device capable of changing the data display method to reflect the reaction of surrounding people.

また、コンピュータをそのような画像記録装置、画像分類装置又は画像表示装置として機能させるためのプログラムを提供できる。   In addition, it is possible to provide a program for causing a computer to function as such an image recording device, an image classification device, or an image display device.

図1は、本発明の第1実施形態を適用したデジタルカメラの構成を示す図である。FIG. 1 is a diagram showing a configuration of a digital camera to which the first embodiment of the present invention is applied. 図2(A)は、表示情報と関心度情報を画像データに関連付けて記録媒体に記録する方法を説明するための記録構造を示す図であり、図2(B)は、表示情報と関心度情報を画像データに関連付けて記録媒体に記録する別の方法を説明するための記録構造を示す図である。FIG. 2A is a diagram showing a recording structure for explaining a method of recording display information and interest level information in a recording medium in association with image data, and FIG. 2B shows display information and interest level. It is a figure which shows the recording structure for demonstrating another method of associating information with image data, and recording on a recording medium. 図3は、表示情報取得処理を説明するためのフローチャートを示す図である。FIG. 3 is a flowchart illustrating the display information acquisition process. 図4は、関心度情報取得処理を説明するためのフローチャートを示す図である。FIG. 4 is a flowchart illustrating the interest level information acquisition process. 図5は、画像再生処理を説明するためのフローチャートを示す図である。FIG. 5 is a flowchart for explaining the image reproduction process. 図6(A)は、閲覧時間と会話量に基づく分類レベルの設定と、分類結果に従った表示方法の変更とを説明するための図であり、図6(B)は、分類結果に従った表示方法の変更例を示す図である。FIG. 6A is a diagram for explaining the setting of the classification level based on the browsing time and the conversation amount, and the change of the display method according to the classification result, and FIG. 6B is based on the classification result. It is a figure which shows the example of a change of the displayed method. 図7(A)は、閲覧時間と会話量に基づく分類レベルの設定と、分類結果に従った表示方法の変更との別の例を説明するための図であり、図7(B)は、閲覧時間と会話量に基づく分類レベルの設定と、分類結果に従った表示方法の変更との更に別の例を説明するための図である。FIG. 7A is a diagram for explaining another example of the setting of the classification level based on the browsing time and the conversation amount, and the change of the display method according to the classification result, and FIG. It is a figure for demonstrating another example of the setting of the classification level based on browsing time and the amount of conversation, and the change of the display method according to a classification result. 図8は、本発明の第2実施形態における関心度情報取得処理を説明するためのフローチャートを示す図である。FIG. 8 is a diagram illustrating a flowchart for explaining interest level information acquisition processing according to the second embodiment of the present invention. 図9は、本発明の第3実施形態における画像再生処理を説明するためのフローチャートを示す図である。FIG. 9 is a flowchart for explaining the image reproduction processing in the third embodiment of the present invention.

以下、本発明を実施するための形態を図面を参照して説明する。   Hereinafter, embodiments for carrying out the present invention will be described with reference to the drawings.

[第1実施形態]
図1に示すように、本発明の第1実施形態を適用したデジタルカメラは、レンズ10、CCDエリアセンサ11、プリプロセス回路12、A/D変換回路13、画像信号処理部14、記録部15、表示制御部16、表示部17、音入力部18、操作部19、及びカメラ制御部20から構成される。
[First Embodiment]
As shown in FIG. 1, the digital camera to which the first embodiment of the present invention is applied includes a lens 10, a CCD area sensor 11, a preprocess circuit 12, an A / D conversion circuit 13, an image signal processing unit 14, and a recording unit 15. , A display control unit 16, a display unit 17, a sound input unit 18, an operation unit 19, and a camera control unit 20.

ここで、操作部19は、特に図示はしていないが、電源スイッチに加え、ズーム釦やシャッタ釦等の撮影に関する操作部材と、メニュー釦やカーソル移動釦等の各種設定を行うための操作部材と、撮影や再生といった動作モードを指示するためのモード釦を備えている。勿論、モード釦は、メニュー釦の操作に応じたメニューの中から切り替えるものとして、独立の操作釦として設けない場合もある。   Here, the operation unit 19 is not particularly illustrated, but in addition to the power switch, an operation member related to photographing such as a zoom button and a shutter button, and an operation member for performing various settings such as a menu button and a cursor movement button. And a mode button for instructing an operation mode such as shooting or reproduction. Of course, the mode button is not provided as an independent operation button because it is switched from the menu according to the operation of the menu button.

操作部19の電源スイッチのオン操作に応じて、カメラ制御部20は、該デジタルカメラの各部の動作を開始させる。   In response to turning on the power switch of the operation unit 19, the camera control unit 20 starts the operation of each unit of the digital camera.

レンズ10は、被写体からの光を結像するための撮影レンズであり、カメラ制御部20は、このレンズ10の合焦動作やズーム動作を制御する。レンズ10から入射された光像は、図示しない色フィルタを介して、CCDエリアセンサ11に結像される。CCDエリアセンサ11から出力された画像信号は、アナログ回路で構成されるプリプロセス回路12で増幅、波形整形、ノイズ除去等の所定の処理が行われた後、A/D変換回路13でデジタルデータ化される。このデジタルデータ化された画像データは、画像信号処理部14で種々の画像処理が行われる。   The lens 10 is a photographing lens for imaging light from the subject, and the camera control unit 20 controls the focusing operation and zooming operation of the lens 10. The light image incident from the lens 10 is formed on the CCD area sensor 11 through a color filter (not shown). The image signal output from the CCD area sensor 11 is subjected to predetermined processing such as amplification, waveform shaping, noise removal, and the like by a preprocess circuit 12 configured by an analog circuit, and then converted to digital data by an A / D conversion circuit 13. It becomes. The image data converted into digital data is subjected to various image processing by the image signal processing unit 14.

この画像処理された画像データは、表示制御部16によって、カメラの背面に配された液晶ディスプレイ等の表示部17の解像度に合わせた低解像度の画像データに変換されて、表示部17に表示されることで、所謂ライブビュー表示がなされる。また、上記デジタルデータ化された画像データを用いて、カメラ制御部20により合焦動作の制御が行われる。   This image processed image data is converted by the display control unit 16 into low-resolution image data that matches the resolution of the display unit 17 such as a liquid crystal display disposed on the back of the camera, and is displayed on the display unit 17. Thus, so-called live view display is performed. Further, the focusing operation is controlled by the camera control unit 20 using the digitalized image data.

操作部19のシャッタ釦が操作されると、カメラ制御部20は、記録部15を制御して、画像信号処理部14によって画像処理された画像データを画像ファイルとして記録媒体に記録させる。この記録媒体は、当該デジタルカメラに内蔵固定されたものであっても良いし、当該デジタルカメラに対して着脱自在なものであっても構わない。   When the shutter button of the operation unit 19 is operated, the camera control unit 20 controls the recording unit 15 to record the image data processed by the image signal processing unit 14 on the recording medium as an image file. This recording medium may be a built-in and fixed medium in the digital camera, or a recording medium that is detachable from the digital camera.

また、操作部19の操作により再生モードが指定されると、カメラ制御部20は、記録部15を制御して、記録媒体に記録されている画像ファイルを読み出させ、画像データを表示制御部16を介して表示部17に再生表示させる。なお、当該デジタルカメラが備える表示部17に表示するだけでなく、当該デジタルカメラをモニタ装置等の外部表示装置に接続し、表示制御部16からその外部表示装置に画像データを出力して表示させることも可能である。   When the playback mode is designated by the operation of the operation unit 19, the camera control unit 20 controls the recording unit 15 to read out the image file recorded on the recording medium and display the image data as a display control unit. 16 is reproduced and displayed on the display unit 17. In addition to displaying on the display unit 17 included in the digital camera, the digital camera is connected to an external display device such as a monitor device, and image data is output from the display control unit 16 to the external display device for display. It is also possible.

この再生表示時、カメラ制御部20は、その画像データを表示している時間つまり画像データの観賞時間を計時し、その結果を表示情報として、記録部15によって当該画像データの画像ファイルに関連付けて記録媒体に記録させる。即ち、カメラ制御部20は、画像データの表示時間に関する表示情報を取得する表示情報取得手段として機能し、記録部15は、取得した表示情報を表示中の画像データに関連付けて記録媒体に記録する記録手段として機能する。   At the time of this reproduction display, the camera control unit 20 measures the time during which the image data is displayed, that is, the viewing time of the image data, and the result is displayed as display information by the recording unit 15 in association with the image file of the image data. Record on a recording medium. That is, the camera control unit 20 functions as a display information acquisition unit that acquires display information relating to the display time of the image data, and the recording unit 15 records the acquired display information on the recording medium in association with the displayed image data. It functions as a recording means.

更に、カメラ制御部20は、上記再生表示時、マイクロフォンやA/D変換回路等からなる音入力部18によって入力された音から、詳細は後述するような画像を観賞している周囲の複数人の会話に関する会話情報を取得し、それを記録部15によって当該画像データの画像ファイルに関連付けて記録媒体に記録させる。即ち、カメラ制御部20は、複数人の画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段として機能し、記録部15は、取得した関心度情報を表示中の画像データに関連付けて記録媒体に記録する記録手段として機能する。   In addition, the camera control unit 20 uses a sound input unit 18 composed of a microphone, an A / D conversion circuit, and the like at the time of the above-mentioned reproduction display. The conversation information relating to the conversation is acquired, and the recording unit 15 associates the conversation information with the image file of the image data and records it on the recording medium. In other words, the camera control unit 20 functions as interest level information acquisition means for acquiring interest level information regarding the level of interest in the image data of a plurality of persons, and the recording unit 15 associates the acquired interest level information with the image data being displayed. Function as recording means for recording on the recording medium.

このように、記録部15、音入力部18及びカメラ制御部20によって、本発明の第1実施形態に係る画像記録装置が構成される。   As described above, the recording unit 15, the sound input unit 18, and the camera control unit 20 constitute the image recording apparatus according to the first embodiment of the present invention.

また、カメラ制御部20は、上記記録媒体に記録された表示情報と関心度情報とに基づいて、詳細は後述するようにして、記録媒体に記録されている画像データを分類する。即ち、カメラ制御部20は、分類手段として機能する。このように、記録部15、音入力部18及びカメラ制御部20によって、本発明の第1実施形態に係る画像分類装置が構成される。   The camera control unit 20 classifies the image data recorded on the recording medium based on the display information and interest level information recorded on the recording medium, as will be described in detail later. That is, the camera control unit 20 functions as a classification unit. As described above, the recording unit 15, the sound input unit 18, and the camera control unit 20 constitute the image classification device according to the first embodiment of the present invention.

また、カメラ制御部20は、操作部19の操作により、記録媒体に記録されている複数の画像データを表示するモードが指定されると、上記分類結果に従って、それら複数の画像データの表示方法を変更するよう表示制御部16を制御して、表示部17に表示させる。即ち、表示制御部16及び表示部17は、記録媒体に記録されている複数の画像データを表示する表示手段として機能し、カメラ制御部20は、分類結果に従って記録媒体に記録されている複数の画像データの表示方法を変更する表示方法変更手段として機能する。このように、記録部15、表示制御部16、表示部17、音入力部18及びカメラ制御部20によって、本発明の第1実施形態に係る画像分類装置が構成される。   In addition, when a mode for displaying a plurality of image data recorded on the recording medium is designated by the operation of the operation unit 19, the camera control unit 20 changes the display method of the plurality of image data according to the classification result. The display control unit 16 is controlled so as to be changed and displayed on the display unit 17. That is, the display control unit 16 and the display unit 17 function as display means for displaying a plurality of image data recorded on the recording medium, and the camera control unit 20 includes a plurality of recording data recorded on the recording medium according to the classification result. It functions as display method changing means for changing the display method of image data. As described above, the recording unit 15, the display control unit 16, the display unit 17, the sound input unit 18, and the camera control unit 20 constitute the image classification device according to the first embodiment of the present invention.

なお、記録部15による上記表示情報及び関心度情報の表示中の画像データに関連付けた記録媒体への記録の手法としては、図2(A)に示すように、記録媒体151に各画像ファイル152とは別に情報テーブル153として表示情報と関心度情報とを記録する方法が考えられる。この場合、画像ファイル152を構成するヘッダ154に記録されたファイルIDにより関連付けることができる。   As a method for recording on the recording medium associated with the display data of the display information and the interest level information by the recording unit 15, as shown in FIG. 2A, each image file 152 is stored in the recording medium 151. Apart from that, a method of recording display information and interest level information as the information table 153 is conceivable. In this case, the file ID recorded in the header 154 constituting the image file 152 can be associated.

あるいは、図2(B)に示すように、画像ファイル152のヘッダ154に表示情報と関心度情報とを記録するようにしても構わない。更には、特に図示はしていないが、電子透かしのような手法で、画像データ155の中に埋め込むことも可能である。   Alternatively, as shown in FIG. 2B, display information and interest level information may be recorded in the header 154 of the image file 152. Further, although not specifically shown, it can be embedded in the image data 155 by a technique such as digital watermarking.

次に、上記表示情報の記録動作について説明する。操作部19の操作により再生モードが指定されると、カメラ制御部20は、図3に示すような表示情報取得処理を実施する。   Next, the display information recording operation will be described. When the playback mode is designated by the operation of the operation unit 19, the camera control unit 20 performs display information acquisition processing as shown in FIG.

即ち、まず、記録部15を制御して、記録媒体151から再生を指示された一つの画像ファイル152を読み出させ、その画像データ155を表示制御部16を介して表示部17に再生表示させる(ステップS11)。そして、その再生表示を開始してからの経過時間(画像切替時間)を、図示しない内蔵タイマによって計測する(ステップS12)。この再生表示並びに画像切替時間計測は、操作部19の操作により当該画像ファイル152の再生終了または別の画像ファイルの再生指示がなされるまで継続する(ステップS13)。そして、当該画像ファイル152の再生表示が終了したならば、画像切替時間の計測結果を表示情報として取得して、記録部15によって記録媒体151に当該画像ファイル152に関連付けて記録させる(ステップS14)。   That is, first, the recording unit 15 is controlled to read one image file 152 instructed to be reproduced from the recording medium 151, and the image data 155 is reproduced and displayed on the display unit 17 via the display control unit 16. (Step S11). Then, an elapsed time (image switching time) since the start of the reproduction display is measured by a built-in timer (not shown) (step S12). The reproduction display and the image switching time measurement are continued until the reproduction of the image file 152 is finished or a reproduction instruction for another image file is given by the operation of the operation unit 19 (step S13). When the reproduction display of the image file 152 is completed, the measurement result of the image switching time is acquired as display information, and is recorded in the recording medium 151 in association with the image file 152 by the recording unit 15 (step S14). .

次に、上記関心度情報の記録動作について説明する。ここでは、関心度情報である会話情報は、画像を観賞している周囲の複数人の会話量とする。これは、多くの場合、会話量は表示されている画像データに対する関心度に比例すると考えられるからである。   Next, the recording operation of the interest level information will be described. Here, the conversation information, which is the interest level information, is the conversation amount of a plurality of surrounding people who are viewing the image. This is because in many cases, the amount of conversation is considered to be proportional to the degree of interest in the displayed image data.

操作部19の操作により再生モードが指定されると、カメラ制御部20は、図4に示すような関心度情報取得処理を実施する。即ち、まず、記録部15を制御して、記録媒体151から再生を指示された画像ファイル152を読み出させ、その画像データ155を表示制御部16を介して表示部17に再生表示させる(ステップS21)。そして、その再生表示を開始してからの会話を音入力部18から取得し(ステップS22)、会話量を計測する(ステップS23)。即ち、音声をテキストに変換し、文字数をカウントすることで会話量を計測する。この再生表示並びに会話量計測は、操作部19の操作により当該画像ファイル152の再生終了または別の画像ファイルの再生指示がなされるまで継続する(ステップS24)。そして、当該画像ファイル152の再生表示が終了したならば、会話量の計測結果を関心度情報として取得して、記録部15によって記録媒体151に当該画像ファイル152に関連付けて記録させる(ステップS25)。   When the playback mode is designated by the operation of the operation unit 19, the camera control unit 20 performs an interest level information acquisition process as shown in FIG. That is, first, the recording unit 15 is controlled to read out the image file 152 instructed to be reproduced from the recording medium 151, and the image data 155 is reproduced and displayed on the display unit 17 via the display control unit 16 (step S1). S21). And the conversation after starting the reproduction | regeneration display is acquired from the sound input part 18 (step S22), and the amount of conversation is measured (step S23). That is, the amount of conversation is measured by converting speech into text and counting the number of characters. The reproduction display and the conversation amount measurement are continued until the reproduction of the image file 152 is finished or a reproduction instruction for another image file is given by the operation of the operation unit 19 (step S24). When the reproduction and display of the image file 152 is completed, the conversation amount measurement result is acquired as interest level information, and is recorded in the recording medium 151 in association with the image file 152 by the recording unit 15 (step S25). .

なお、表示情報取得処理と関心度情報取得処理とを別々に説明したが、カメラ制御部20は、表示情報の取得と関心度情報の取得は同時に行うことができることは言うまでもない。   Although the display information acquisition process and the interest level information acquisition process have been described separately, it is needless to say that the camera control unit 20 can simultaneously acquire the display information and the interest level information.

次に、上記記録媒体151に記録された表示情報と関心度情報とに基づく画像データの分類処理及びその分類結果に従った複数の画像データの表示方法の変更処理について説明する。ここでは、記録媒体151に記録された複数の画像データの表示方法として、記録媒体151に記録されている複数の画像データの縮小画像を並べて一覧表示するサムネイル表示を例に説明する。   Next, image data classification processing based on display information and interest level information recorded on the recording medium 151 and processing for changing a plurality of image data display methods according to the classification results will be described. Here, as a method of displaying a plurality of image data recorded on the recording medium 151, a thumbnail display in which reduced images of a plurality of image data recorded on the recording medium 151 are displayed in a list will be described as an example.

操作部19の操作によりサムネイル表示が指定されると、カメラ制御部20は、図5に示すような画像再生処理を実施する。即ち、まず、記録部15により記録媒体151に記録されている一つの画像ファイル152に関し、表示情報が取得済みか否か、つまり当該画像ファイル152の画像データ155に関連付けて記録された表示情報があるか否かを判断する(ステップS31)。ここで、表示情報が取得済みであれば、当該画像ファイル152に関し、更に、関心度情報が取得済みか否か、つまり当該画像ファイル152の画像データ155に関連付けて記録された関心度情報があるか否かを判断する(ステップS32)。   When thumbnail display is designated by the operation of the operation unit 19, the camera control unit 20 performs an image reproduction process as shown in FIG. That is, first, regarding one image file 152 recorded on the recording medium 151 by the recording unit 15, whether display information has been acquired, that is, display information recorded in association with the image data 155 of the image file 152 is displayed. It is determined whether or not there is (step S31). Here, if the display information has been acquired, regarding the image file 152, there is further interest level information recorded in association with whether or not the interest level information has been acquired, that is, in association with the image data 155 of the image file 152. Whether or not (step S32).

そして、上記表示情報及び上記関心度情報の何れも取得済みであれば、それらの情報に基づいて当該画像ファイル152の画像データ155を分類し、その分類結果を図示しない内部メモリに記憶する又は記録媒体151に記録する(ステップS33)。この分類は、図6(A)に示すような表示情報(表示時間)と関心度情報(会話量)の関係に基づいて、例えばそれぞれの閾値Th1,Th2により4種類の分類レベルL1〜L4に分類する。   If both the display information and the interest level information have been acquired, the image data 155 of the image file 152 is classified based on the information, and the classification result is stored or recorded in an internal memory (not shown). Recording is performed on the medium 151 (step S33). This classification is based on the relationship between display information (display time) and interest level information (conversation volume) as shown in FIG. 6 (A), for example, to four classification levels L1 to L4 by respective threshold values Th1 and Th2. Classify.

また、上記表示情報及び上記関心度情報の何れかが取得されていない場合には、当該画像ファイル152の画像データ155をデフォルトの分類レベルに分類し、その分類結果を図示しない内部メモリに記憶する又は記録媒体151に記録する(ステップS34)。   If either the display information or the interest level information is not acquired, the image data 155 of the image file 152 is classified into a default classification level, and the classification result is stored in an internal memory (not shown). Or it records on the recording medium 151 (step S34).

そして、それら記憶又は記録された分類レベルに従って、表示制御部16が生成する当該画像ファイル152の画像データ155の縮小画像の表示方法、ここでは縮小画像の大きさを変更して(ステップS35)、表示部17にその縮小画像を表示させる(ステップS36)。   Then, according to the stored or recorded classification level, the display method of the reduced image of the image data 155 of the image file 152 generated by the display control unit 16, here, the size of the reduced image is changed (step S 35). The reduced image is displayed on the display unit 17 (step S36).

このような画像再生処理を、表示部17に一覧表示可能な個数の画像ファイルに対して実施することで、図6(B)に示すように、大きさが変更された縮小画像が一覧表示される。   By performing such an image reproduction process on the number of image files that can be displayed as a list on the display unit 17, reduced images whose sizes have been changed are displayed in a list as shown in FIG. 6B. The

この場合、縮小画像の大きさは、図6(A)に示すように、表示時間が長く会話量が多い画像データ(分類レベルL4)のサイズを大きくし、表示時間が短く会話量が少ない画像分類レベルL1)のサイズを小さくする例である。   In this case, as shown in FIG. 6A, the size of the reduced image is an image in which the display time is long and the amount of conversation data is large (classification level L4), and the display time is short and the conversation amount is small. This is an example of reducing the size of the classification level L1).

表示時間と会話量から、どのように分類するか、及びどのように縮小画像の大きさを変更するかは、操作者が操作部19の操作により、例えば図7(A)及び(B)に示すように、自由に決定することができる。即ち、操作部19及びカメラ制御部20は、表示情報及び関心度情報に基づく分類レベルを設定する分類レベル設定手段として機能すると共に、分類結果と変更される表示方法との関係を設定する関係設定手段として機能する。また、デフォルトの分類レベルをどのようにするかも、操作者が任意に設定できるものとする。これらの設定は、カメラ制御部20の図示しない内部メモリに記憶されて利用される。これにより、操作者の好みや見易いと感じる形態に合わせて分類、表示を行うことが可能となる。   How to classify from the display time and the amount of conversation and how to change the size of the reduced image are shown in FIGS. 7A and 7B by the operator operating the operation unit 19, for example. As shown, it can be determined freely. That is, the operation unit 19 and the camera control unit 20 function as a classification level setting unit that sets a classification level based on display information and interest level information, and set a relationship between a classification result and a changed display method. Functions as a means. It is also assumed that the operator can arbitrarily set the default classification level. These settings are stored in an internal memory (not shown) of the camera control unit 20 and used. As a result, it is possible to classify and display according to the preference of the operator and the form that is easy to see.

以上のように、本第1実施形態によれば、画像データの表示中に、当該画像データの表示時間に関する情報と、操作者とその周囲の鑑賞者を含む複数人の当該画像データに対する関心度に関する情報である会話情報としての会話量を取得して記録媒体151に記録するので、操作者だけでなく周囲の人の反応を反映させて画像データを分類できるような情報を画像データに関連付けて記録することが可能な画像記録装置を提供することができる。   As described above, according to the first embodiment, during the display of the image data, the information regarding the display time of the image data and the degree of interest in the image data of a plurality of persons including the operator and the surrounding viewers are displayed. Since the conversation volume as the conversation information, which is information related to the information, is acquired and recorded in the recording medium 151, information that can classify the image data by reflecting the reaction of not only the operator but also the surrounding people is associated with the image data. An image recording apparatus capable of recording can be provided.

また、そのような情報に基づいて画像データを分類することで、操作者以外の周りの人の反応を反映させて画像データを分類可能となる画像分類装置を提供できる。   Further, by classifying image data based on such information, it is possible to provide an image classification device that can classify image data by reflecting the reactions of people around the operator.

更には、そうして分類された結果を用いることで複数の画像データをサムネイル表示する場合の各縮小画像の大きさを周囲の人の反応つまり興味を反映したものに変更することが可能となる画像表示装置を提供できる。   Furthermore, by using the results classified in such a manner, it is possible to change the size of each reduced image when displaying a plurality of image data as thumbnails to reflect the reaction of the surrounding people, that is, the interest. An image display device can be provided.

なお、図5に示した画像再生処理では、表示情報と関心度情報の両方を取得している場合の縮小画像の大きさを変更する例を示したが、表示情報と関心度情報のどちらか一方の情報を取得している場合においても、画像の大きさを変更して表示するようにしても構わない。   In the image reproduction process shown in FIG. 5, the example of changing the size of the reduced image when both the display information and the interest level information are acquired has been shown, but either the display information or the interest level information is displayed. Even when one piece of information is acquired, the image size may be changed and displayed.

また、分類に従った表示方法の変更として縮小画像の大きさを例に説明したが、大きさではなく、明るさを変更したり、太さや色の異なる枠を付加する等、どのようなものであっても構わない。勿論、それら大きさ、太さ、枠の種類を任意に組み合わせても良い。このように、分類レベルの差異を識別可能な識別表示を行うことで、操作者を含めた複数人の各画像データに対する反応を識別可能に提示することが可能となる。   In addition, the size of the reduced image has been explained as an example of changing the display method according to the classification. However, what kind of things are changed such as changing the brightness instead of the size or adding frames with different thicknesses and colors? It does not matter. Of course, the size, thickness, and type of frame may be arbitrarily combined. In this way, by performing the identification display that can identify the difference between the classification levels, it is possible to present the responses of the plurality of persons including the operator to each image data in an identifiable manner.

また、関心度情報である会話情報として会話量を例に説明したが、会話時の声の大きさ(関心度が高いほど大きな声になる)や声のトーン(関心度が高いほど声のトーンが高くなる)を数値化して会話情報としても良い。更には、テキスト化した会話の内容をマッチングテーブル等により弁別して、例えば「良い」等はプラス点数を、「ピントが合っていない」等はマイナス点数を加算するというよう手法で採点を行い、その採点結果を会話情報とすることもできる。勿論、それら会話量、声の大きさ、声のトーン、会話内容を任意に組み合わせても良い。このように、会話情報を関心度情報とすることで、操作者を含めた複数人の各画像データに対する反応を反映した分類が可能となる。また、音として入力された会話それ自体を記録するのではなく会話量という数値化して記録するので記録容量は少なくて済む。   In addition, the conversation amount is described as an example of the conversation information that is the interest level information. However, the voice volume during conversation (the higher the interest level, the louder the voice) and the voice tone (the higher the interest level, the higher the voice tone). Can be converted into numerical values as conversation information. Furthermore, the contents of the conversation made into text are discriminated by a matching table etc., and for example, “Good” is scored by a method such as adding a positive score, “Not in focus”, etc., adding a negative score, The scoring result can also be used as conversation information. Of course, the conversation volume, voice volume, voice tone, and conversation content may be arbitrarily combined. In this way, by using conversation information as interest level information, it is possible to perform classification that reflects the reaction of each person including an operator to each image data. In addition, since the conversation input as sound is not recorded but is numerically recorded as the conversation amount, the recording capacity can be reduced.

[第2実施形態]
上記第1実施形態では、関心度情報として周囲の複数人の会話に関する会話情報を取得する例を説明したが、関心度情報はそのような会話情報に限定されるものではない。
[Second Embodiment]
In the first embodiment, an example has been described in which conversation information relating to conversations between a plurality of people is acquired as interest level information. However, interest level information is not limited to such conversation information.

例えば、特開2004−213486号公報に開示されているような視線検出手法を用いることで、周囲の複数人の視線に関する視線情報を関心度情報として取得することができる。   For example, by using a gaze detection method as disclosed in Japanese Patent Application Laid-Open No. 2004-213486, gaze information relating to gazes of a plurality of surrounding people can be acquired as interest level information.

この場合には、操作部19の操作により再生モードが指定された際の関心度情報取得処理は、図8に示すようになる。   In this case, the interest level information acquisition process when the reproduction mode is designated by the operation of the operation unit 19 is as shown in FIG.

即ち、カメラ制御部20は、まず、記録部15を制御して、記録媒体151から再生を指示された画像ファイル152を読み出させ、その画像データ155を表示制御部16を介して不図示の外部表示装置に再生させる(ステップS21)。これは、撮像した画像データから視線検出を行うため、表示部17が配されたデジタルカメラの裏面側を操作者を含めた複数の人の側に向けることができないからである。   That is, the camera control unit 20 first controls the recording unit 15 to read the image file 152 instructed to be reproduced from the recording medium 151, and the image data 155 is not shown via the display control unit 16. It is played back by the external display device (step S21). This is because the line of sight is detected from the captured image data, and the back side of the digital camera on which the display unit 17 is arranged cannot be directed toward a plurality of people including the operator.

そして、外部表示装置に表示された画像データを閲覧している複数人の視線を、画像信号処理部14からの画像データより検出して(ステップS26)、各人の注視時間の累計を計測する(ステップS27)。これは、注視している時間は表示されている画像データに対する関心度に比例すると考えられるからである。よって、本実施形態では、デジタルカメラを、操作者を含めた複数の人を視野に含めた状態で、且つ、外部表示装置の表示面近傍に配置することが必要である。   Then, the line of sight of a plurality of people viewing the image data displayed on the external display device is detected from the image data from the image signal processing unit 14 (step S26), and the total gaze time of each person is measured. (Step S27). This is because the gaze time is considered to be proportional to the degree of interest in the displayed image data. Therefore, in this embodiment, it is necessary to arrange the digital camera in a state in which a plurality of people including the operator are included in the visual field and in the vicinity of the display surface of the external display device.

上記再生表示並びに注視時間計測は、操作部19の操作により当該画像ファイル152の再生終了または別の画像ファイルの再生指示がなされるまで継続する(ステップS24)。そして、当該画像ファイル152の再生表示が終了したならば、注視時間の計測結果を関心度情報として取得して、記録部15によって記録媒体151に当該画像ファイル152に関連付けて記録させる(ステップS28)。   The reproduction display and the gaze time measurement continue until the reproduction of the image file 152 is finished or another image file is instructed by the operation of the operation unit 19 (step S24). When the reproduction and display of the image file 152 is completed, the measurement result of the gaze time is acquired as the interest level information, and is recorded in the recording medium 151 in association with the image file 152 by the recording unit 15 (step S28). .

それ以外は、上記第1実施形態と同様であるので、その説明は省略する。   Since other than that is the same as that of the said 1st Embodiment, the description is abbreviate | omitted.

以上のように、本第2実施形態によれば、画像データの表示中に、当該画像データの表示時間に関する情報と、操作者とその周囲の鑑賞者を含む複数人の当該画像データに対する関心度に関する情報である視線情報としての注視時間を取得して記録媒体151に記録するので、操作者だけでなく周囲の人の反応を反映させて画像データを分類できるような情報を画像データに関連付けて記録することが可能な画像記録装置を提供することができる。   As described above, according to the second embodiment, during the display of the image data, the information regarding the display time of the image data and the degree of interest in the image data of a plurality of persons including the operator and the surrounding viewers are displayed. Since the gaze time as the line-of-sight information, which is information related to the image data, is acquired and recorded in the recording medium 151, information that can classify the image data by reflecting not only the operator but also the reactions of surrounding people is associated with the image data. An image recording apparatus capable of recording can be provided.

また、そのような情報に基づいて画像データを分類することで、操作者以外の周りの人の反応を反映させて画像データを分類可能となる画像分類装置を提供できる。   Further, by classifying image data based on such information, it is possible to provide an image classification device that can classify image data by reflecting the reactions of people around the operator.

更には、そうして分類された結果を用いることで複数の画像データをサムネイル表示する場合の各縮小画像の大きさを周囲の人の反応つまり興味を反映したものに変更することが可能となる画像表示装置を提供できる。この場合の表示は、デジタルカメラの表示部17、外部表示装置の何れで行うものでも良い。   Furthermore, by using the results classified in such a manner, it is possible to change the size of each reduced image when displaying a plurality of image data as thumbnails to reflect the reaction of the surrounding people, that is, the interest. An image display device can be provided. The display in this case may be performed on either the display unit 17 of the digital camera or an external display device.

なお、上記第1実施形態で説明したような会話情報と組み合わせても構わない。この場合、表示情報と視線情報と会話情報の3軸の座標により分類を行っても良いし、視線情報と会話情報とを加算或いは重み付け加算して表示情報との2軸の座標により分類を行うようにすることも考えられる。   Note that it may be combined with the conversation information as described in the first embodiment. In this case, classification may be performed based on the three-axis coordinates of the display information, the line-of-sight information, and the conversation information, or the line-of-sight information and the conversation information may be added or weighted to perform classification based on the two-axis coordinates of the display information. It is also possible to do so.

[第3実施形態]
上記第1及び第2実施形態では、記録媒体151に記録された複数の画像データの表示方法として、記録媒体151に記録されている複数の画像データの縮小画像を並べて一覧表示するサムネイル表示を例に説明したが、表示方法はそのようなサムネイル表示に限定されるものではない。
[Third Embodiment]
In the first and second embodiments, as a method for displaying a plurality of image data recorded on the recording medium 151, a thumbnail display in which reduced images of the plurality of image data recorded on the recording medium 151 are displayed in a list is shown as an example. As described above, the display method is not limited to such thumbnail display.

例えば、そのような表示法として、記録媒体に記録されている複数の画像データを時系列に切り替え表示するスライドショー表示が知られている。   For example, as such a display method, a slide show display in which a plurality of image data recorded on a recording medium is switched and displayed in time series is known.

操作部19の操作によりスライドショー表示が指定されると、カメラ制御部20は、図9に示すような画像再生処理を実施する。   When a slide show display is designated by the operation of the operation unit 19, the camera control unit 20 performs an image reproduction process as shown in FIG.

即ち、まず、記録部15により記録媒体151に記録されている一つの画像ファイル152に関し、表示情報が取得済みか否か、つまり当該画像ファイル152の画像データ155に関連付けて記録された表示情報があるか否かを判断する(ステップS31)。ここで、表示情報が取得済みであれば、当該画像ファイル152に関し、更に、関心度情報が取得済みか否か、つまり当該画像ファイル152の画像データ155に関連付けて記録された関心度情報があるか否かを判断する(ステップS32)。   That is, first, regarding one image file 152 recorded on the recording medium 151 by the recording unit 15, whether display information has been acquired, that is, display information recorded in association with the image data 155 of the image file 152 is displayed. It is determined whether or not there is (step S31). Here, if the display information has been acquired, regarding the image file 152, there is further interest level information recorded in association with whether or not the interest level information has been acquired, that is, in association with the image data 155 of the image file 152. Whether or not (step S32).

そして、上記表示情報及び上記関心度情報の何れも取得済みであれば、それらの情報に基づいて当該画像ファイル152の画像データ155を分類し、その分類結果を図示しない内部メモリに記憶する又は記録媒体151に記録する(ステップS33)。また、上記表示情報及び上記関心度情報の何れかが取得されていない場合には、当該画像ファイル152の画像データ155をデフォルトの分類レベルに分類し、その分類結果を図示しない内部メモリに記憶する又は記録媒体151に記録する(ステップS34)。   If both the display information and the interest level information have been acquired, the image data 155 of the image file 152 is classified based on the information, and the classification result is stored or recorded in an internal memory (not shown). Recording is performed on the medium 151 (step S33). If either the display information or the interest level information is not acquired, the image data 155 of the image file 152 is classified into a default classification level, and the classification result is stored in an internal memory (not shown). Or it records on the recording medium 151 (step S34).

そして、それら記憶又は記録された分類レベルに従って、表示制御部16が生成する当該画像ファイル152の画像データ155の表示方法、ここでは画像データの表示時間を変更して(ステップS37)、表示部17又は外部表示装置にその解像度に合わせた画像データを表示させる(ステップS38)。その後、上記変更した表示時間が経過するまでその画像データを表示する(ステップS39)。   Then, according to the stored or recorded classification level, the display method of the image data 155 of the image file 152 generated by the display control unit 16, here, the display time of the image data is changed (step S 37), and the display unit 17. Alternatively, image data matching the resolution is displayed on the external display device (step S38). Thereafter, the image data is displayed until the changed display time elapses (step S39).

このような画像再生処理を、記録媒体151に記録された複数の画像ファイル152に対し順番に実施することで、スライドショー表示が行われる。   Such an image reproduction process is sequentially performed on the plurality of image files 152 recorded on the recording medium 151, whereby a slide show display is performed.

それ以外は、上記第1実施形態と同様であるので、その説明は省略する。   Since other than that is the same as that of the said 1st Embodiment, the description is abbreviate | omitted.

以上のように、本第3実施形態によれば、画像データの表示中に、当該画像データの表示時間に関する情報と、操作者とその周囲の鑑賞者を含む複数人の当該画像データに対する関心度に関する情報を取得して記録媒体151に記録するので、操作者だけでなく周囲の人の反応を反映させて画像データを分類できるような情報を画像データに関連付けて記録することが可能な画像記録装置を提供することができる。   As described above, according to the third embodiment, during the display of the image data, the information regarding the display time of the image data and the degree of interest in the image data of a plurality of persons including the operator and the surrounding viewers are displayed. Since the information on the recording medium 151 is acquired and recorded in the recording medium 151, the image recording can be recorded in association with the image data so that the image data can be classified by reflecting the reaction of not only the operator but also the surrounding people. An apparatus can be provided.

また、そのような情報に基づいて画像データを分類することで、操作者以外の周りの人の反応を反映させて画像データを分類可能となる画像分類装置を提供できる。   Further, by classifying image data based on such information, it is possible to provide an image classification device that can classify image data by reflecting the reactions of people around the operator.

更には、そうして分類された結果を用いることで複数の画像データをスライドショー表示する場合の各画像データの表示時間を周囲の人の反応つまり興味を反映したものに変更することが可能となる画像表示装置を提供できる。   Furthermore, by using the results classified in such a manner, it becomes possible to change the display time of each image data when displaying a plurality of image data as a slide show to reflect the reaction of the surrounding people, that is, the interest. An image display device can be provided.

なお、図9に示した画像再生処理では、表示情報と関心度情報の両方を取得している場合の表示時間を変更する例を示したが、表示情報と関心度情報のどちらか一方の情報を取得している場合においても、画像データの表示時間を変更して表示するようにしても構わない。   In the image reproduction process shown in FIG. 9, an example in which the display time is changed when both the display information and the interest level information are acquired is shown. However, either the display information or the interest level information is displayed. Even when the image data is acquired, the display time of the image data may be changed and displayed.

また、スライドショー表示中にも、関心度情報取得処理を実施することで、関心度情報を更新するようにしても良い。   Further, the interest level information may be updated by executing the interest level information acquisition process during the slide show display.

以上実施形態に基づいて本発明を説明したが、本発明は上述した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。   Although the present invention has been described above based on the embodiments, the present invention is not limited to the above-described embodiments, and various modifications and applications are naturally possible within the scope of the gist of the present invention.

例えば、上記実施形態は、デジタルカメラに搭載した場合を例に説明したが、画像データと表示情報及び関心度情報とを記録媒体へ記録する画像記録装置、そのような情報が記録された記録媒体から情報を読み出して画像データを分類し、その分類結果を記録媒体に追記する画像分類装置、記録媒体から分類結果を読み出しそれに基づいて画像データの表示方法を変更して表示する画像表示装置として、それぞれ独立に構成することも可能である。   For example, although the above embodiment has been described by taking the case of being mounted on a digital camera as an example, an image recording apparatus that records image data, display information, and interest level information on a recording medium, and a recording medium on which such information is recorded As an image classification device that reads out information from the image data, classifies the image data, and appends the classification result to the recording medium, reads the classification result from the recording medium, and changes the display method of the image data based on the classification result, It is also possible to configure each independently.

また、それら画像記録装置、画像分類装置、画像表示装置の機能を実現するソフトウェアのプログラムをコンピュータに供給し、当該コンピュータがこのプログラムを実行することによって、上記機能を実現することも可能である。   It is also possible to realize the above functions by supplying a software program for realizing the functions of the image recording device, the image classification device, and the image display device to a computer and executing the program by the computer.

10…レンズ、 11…CCDエリアセンサ、 12…プリプロセス回路、 13…A/D変換回路、 14…画像信号処理部、 15…記録部、 16…表示制御部、 17…表示部、 18…音入力部、 19…操作部、 20…カメラ制御部、 151…記録媒体、 152…画像ファイル、 153…情報テーブル、 154…ヘッダ、 155…画像データ。     DESCRIPTION OF SYMBOLS 10 ... Lens, 11 ... CCD area sensor, 12 ... Pre-processing circuit, 13 ... A / D conversion circuit, 14 ... Image signal processing part, 15 ... Recording part, 16 ... Display control part, 17 ... Display part, 18 ... Sound Input unit, 19 ... operation unit, 20 ... camera control unit, 151 ... recording medium, 152 ... image file, 153 ... information table, 154 ... header, 155 ... image data.

Claims (15)

画像データの表示中の、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段と、
前記画像データの表示中の、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段と、
前記表示情報取得手段で取得した表示情報及び前記関心度情報取得手段で取得した関心度情報を、前記表示中の画像データに関連付けて記録媒体に記録する記録手段と、
を具備することを特徴とする画像記録装置。
Display information acquisition means for acquiring display information relating to the display time of the image data during display of the image data;
Interest level information acquisition means for acquiring interest level information related to the level of interest of the image data of a plurality of persons during display of the image data;
Recording means for recording the display information acquired by the display information acquisition means and the interest level information acquired by the interest level information acquisition means on a recording medium in association with the image data being displayed;
An image recording apparatus comprising:
前記関心度情報取得手段は、前記関心度情報として、周囲の複数人の会話に関する会話情報を取得することを特徴とする請求項1に記載の画像記録装置。   The image recording apparatus according to claim 1, wherein the interest level information acquisition unit acquires conversation information regarding conversations of a plurality of people as the interest level information. 前記会話情報は、会話量、声の大きさ、声のトーン、及び会話内容、の少なくとも一つに基づくことを特徴とする請求項2に記載の画像記録装置。   The image recording apparatus according to claim 2, wherein the conversation information is based on at least one of a conversation volume, a voice volume, a voice tone, and a conversation content. 前記関心度情報取得手段は、前記関心度情報として、周囲の複数人の視線に関する視線情報を取得することを特徴とする請求項1に記載の画像記録装置。   The image recording apparatus according to claim 1, wherein the interest level information acquisition unit acquires line-of-sight information relating to the lines of sight of a plurality of people as the interest level information. 請求項1に記載の画像記録装置によって記録媒体に記録された前記表示情報と前記関心度情報とに基づいて、前記記録媒体に記録されている画像データを分類する分類手段を具備することを特徴とする画像分類装置。   A classification unit for classifying image data recorded on the recording medium based on the display information and the interest level information recorded on the recording medium by the image recording apparatus according to claim 1. An image classification device. 前記表示情報及び前記関心度情報に基づく分類レベルを設定する分類レベル設定手段を更に具備することを特徴とする請求項5に記載の画像分類装置。   6. The image classification apparatus according to claim 5, further comprising a classification level setting unit that sets a classification level based on the display information and the interest level information. 記録媒体に記録されている複数の画像データを表示する表示手段と、
請求項5に記載の分類装置による分類結果に従って、前記記録媒体に記録されている複数の画像データの前記表示手段による表示方法を変更する表示方法変更手段と、
を具備することを特徴とする画像表示装置。
Display means for displaying a plurality of image data recorded on a recording medium;
Display method changing means for changing a display method by the display means of a plurality of image data recorded on the recording medium according to the classification result by the classification device according to claim 5;
An image display device comprising:
前記分類結果と前記表示方法変更手段によって変更される表示方法との関係を設定する関係設定手段を更に具備することを特徴とする請求項7に記載の画像表示装置。   The image display device according to claim 7, further comprising a relationship setting unit that sets a relationship between the classification result and the display method changed by the display method changing unit. 前記表示手段は、前記記録媒体に記録されている複数の画像データの縮小画像を並べて一覧表示し、
前記表示方法変更手段は、前記記録媒体に記録されている複数の画像データの各縮小画像の、大きさ、明るさ、及び枠の種類、の少なくとも一つを、前記分類結果に従って変更することを特徴とする請求項7に記載の画像表示装置。
The display means displays a list of reduced images of a plurality of image data recorded on the recording medium,
The display method changing means changes at least one of size, brightness, and frame type of each reduced image of the plurality of image data recorded on the recording medium according to the classification result. 8. The image display device according to claim 7, wherein
前記表示手段は、前記記録媒体に記録されている複数の画像データを時系列に切り替え表示し、
前記表示方法変更手段は、前記記録媒体に記録されている複数の画像データのそれぞれの表示時間を前記分類結果に従って変更することを特徴とする請求項7に記載の画像表示装置。
The display means switches and displays a plurality of image data recorded on the recording medium in time series,
The image display device according to claim 7, wherein the display method changing unit changes a display time of each of the plurality of image data recorded on the recording medium according to the classification result.
画像データの表示中の、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段と、
前記画像データの表示中の、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段と、
前記表示情報取得手段で取得した表示情報及び前記関心度情報取得手段で取得した関心度情報を、前記表示中の画像データに関連付けて記録媒体に記録する記録手段と、
前記記録媒体に記録されている前記表示情報と前記関心度情報とに基づいて、前記記録媒体に記録されている画像データを分類する分類手段と、
を具備することを特徴とする画像分類装置。
Display information acquisition means for acquiring display information relating to the display time of the image data during display of the image data;
Interest level information acquisition means for acquiring interest level information related to the level of interest of the image data of a plurality of persons during display of the image data;
Recording means for recording the display information acquired by the display information acquisition means and the interest level information acquired by the interest level information acquisition means on a recording medium in association with the image data being displayed;
Classification means for classifying image data recorded on the recording medium based on the display information and interest level information recorded on the recording medium;
An image classification apparatus comprising:
画像データを表示中、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段と、
画像データを表示中、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段と、
前記表示情報取得手段で取得した表示情報及び前記関心度情報取得手段で取得した関心度情報を、前記表示中の画像データに関連付けて記録媒体に記録する記録手段と、
前記記録媒体に記録されている前記表示情報と前記関心度情報とに基づいて、前記記録媒体に記録されている画像データを分類する分類手段と、
前記記録媒体に記録されている複数の画像データを表示する表示手段と、
前記分類手段による分類結果に従って、前記記録媒体に記録されている複数の画像データの前記表示手段による表示方法を変更する表示方法変更手段と、
を具備することを特徴とする画像表示装置。
Display information acquisition means for acquiring display information regarding the display time of the image data while displaying the image data;
Interest level information acquisition means for acquiring interest level information related to the level of interest of the image data of a plurality of persons while displaying the image data;
Recording means for recording the display information acquired by the display information acquisition means and the interest level information acquired by the interest level information acquisition means on a recording medium in association with the image data being displayed;
Classification means for classifying image data recorded on the recording medium based on the display information and interest level information recorded on the recording medium;
Display means for displaying a plurality of image data recorded on the recording medium;
Display method changing means for changing a display method by the display means of a plurality of image data recorded on the recording medium according to a classification result by the classification means;
An image display device comprising:
コンピュータを、
画像データの表示中の、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段、
前記画像データの表示中の、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段、
前記取得した表示情報及び関心度情報を、前記表示中の画像データに関連付けて記録媒体に記録する記録手段、
として機能させるためのプログラム。
Computer
Display information acquisition means for acquiring display information relating to the display time of the image data during display of the image data;
Interest level information acquisition means for acquiring interest level information related to the level of interest of the image data of a plurality of persons during display of the image data,
Recording means for recording the acquired display information and interest level information in a recording medium in association with the image data being displayed;
Program to function as.
コンピュータを、
画像データの表示中の、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段、
前記画像データの表示中の、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段、
前記取得した表示情報及び関心度情報を、前記表示中の画像データに関連付けて記録媒体に記録する記録手段、
前記記録媒体に記録されている前記表示情報と前記関心度情報とに基づいて、前記記録媒体に記録されている画像データを分類する分類手段、
として機能させるためのプログラム。
Computer
Display information acquisition means for acquiring display information relating to the display time of the image data during display of the image data;
Interest level information acquisition means for acquiring interest level information related to the level of interest of the image data of a plurality of persons during display of the image data,
Recording means for recording the acquired display information and interest level information in a recording medium in association with the image data being displayed;
Classification means for classifying image data recorded on the recording medium based on the display information and interest level information recorded on the recording medium,
Program to function as.
コンピュータを、
画像データの表示中の、当該画像データの表示時間に関する表示情報を取得する表示情報取得手段、
前記画像データの表示中の、複数人の当該画像データに対する関心度に関する関心度情報を取得する関心度情報取得手段、
前記取得した表示情報及び関心度情報を、前記表示中の画像データに関連付けて記録媒体に記録する記録手段、
前記記録媒体に記録されている前記表示情報と前記関心度情報とに基づいて、前記記録媒体に記録されている画像データを分類する分類手段、
前記記録媒体に記録されている複数の画像データを表示する表示手段、
前記分類結果に従って、前記記録媒体に記録されている複数の画像データの表示方法を変更する表示方法変更手段、
として機能させるためのプログラム。
Computer
Display information acquisition means for acquiring display information relating to the display time of the image data during display of the image data;
Interest level information acquisition means for acquiring interest level information related to the level of interest of the image data of a plurality of persons during display of the image data,
Recording means for recording the acquired display information and interest level information in a recording medium in association with the image data being displayed;
Classification means for classifying image data recorded on the recording medium based on the display information and interest level information recorded on the recording medium,
Display means for displaying a plurality of image data recorded in the recording medium;
Display method changing means for changing a display method of a plurality of image data recorded on the recording medium according to the classification result;
Program to function as.
JP2009031543A 2009-02-13 2009-02-13 Image recording device, image classifying device, image display device, and program Withdrawn JP2010187320A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009031543A JP2010187320A (en) 2009-02-13 2009-02-13 Image recording device, image classifying device, image display device, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009031543A JP2010187320A (en) 2009-02-13 2009-02-13 Image recording device, image classifying device, image display device, and program

Publications (1)

Publication Number Publication Date
JP2010187320A true JP2010187320A (en) 2010-08-26

Family

ID=42767678

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009031543A Withdrawn JP2010187320A (en) 2009-02-13 2009-02-13 Image recording device, image classifying device, image display device, and program

Country Status (1)

Country Link
JP (1) JP2010187320A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018016464A1 (en) * 2016-07-19 2018-01-25 富士フイルム株式会社 Image display system, head-mounted-display control device, and method and program for actuating same
JP2020184217A (en) * 2019-05-08 2020-11-12 株式会社リコー Communication system, terminal device, communication method, and program
WO2022208719A1 (en) * 2021-03-31 2022-10-06 日本電気株式会社 Product design generation support device, product design generation support method, and program storage medium

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018016464A1 (en) * 2016-07-19 2018-01-25 富士フイルム株式会社 Image display system, head-mounted-display control device, and method and program for actuating same
JPWO2018016464A1 (en) * 2016-07-19 2019-04-25 富士フイルム株式会社 Image display system, controller for head mounted display, and method and program for operating the same
US10705605B2 (en) 2016-07-19 2020-07-07 Fujifilm Corporation Image display system, and control apparatus for head-mounted display and operation method therefor
JP2020184217A (en) * 2019-05-08 2020-11-12 株式会社リコー Communication system, terminal device, communication method, and program
JP7272097B2 (en) 2019-05-08 2023-05-12 株式会社リコー Communication system, terminal device, communication method, program
WO2022208719A1 (en) * 2021-03-31 2022-10-06 日本電気株式会社 Product design generation support device, product design generation support method, and program storage medium

Similar Documents

Publication Publication Date Title
JP4489608B2 (en) DIGITAL STILL CAMERA, IMAGE REPRODUCTION DEVICE, FACE IMAGE DISPLAY DEVICE, AND CONTROL METHOD THEREOF
JP4730569B2 (en) Imaging apparatus, imaging method, and program
JP4645685B2 (en) Camera, camera control program, and photographing method
JP4431547B2 (en) Image display control device, control method therefor, and control program therefor
JP5617603B2 (en) Display control apparatus, display control method, and program
US8532345B2 (en) Camera and image recording program product
JP4732303B2 (en) Imaging device
JPH104531A (en) Information processor
EP2018065A1 (en) Camera apparatus and image recording/reproducing method
JP2007174378A (en) Image filing method, digital camera, image filing processing program, and moving picture recording and reproducing device
JP2008278458A (en) Image pickup apparatus, image display device, and program therefor
JP2012231237A (en) Image recording apparatus and imaging apparatus
JP2011250340A (en) Imaging apparatus and control method of same
JP5181841B2 (en) Imaging apparatus, imaging control program, image reproducing apparatus, and image reproducing program
JP2007228453A (en) Imaging apparatus, reproduction device, program, and storage medium
JP2010187320A (en) Image recording device, image classifying device, image display device, and program
JP2007226606A (en) Imaging apparatus, image output method, reproduction apparatus, program, and storage medium
JP4570171B2 (en) Information processing apparatus and recording medium
JP2010171849A (en) Image reproducing apparatus and electronic camera
JP4360395B2 (en) Information processing device
JP2012029119A (en) Display control device, camera and display device
JP2011050107A (en) Camera, camera control program, and imaging method
JP2010183216A (en) Photographing device, image reproducing device, and photographing result notifying method
JP2009212867A (en) Shot image processing apparatus, shooting control program, and phiotographing control method
JP2010039795A (en) Data generation device and electronic camera for recognition, data generation program for recognition, and data generation method for recognition

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20120501