JP4403990B2 - Image processing apparatus and program - Google Patents

Image processing apparatus and program Download PDF

Info

Publication number
JP4403990B2
JP4403990B2 JP2005075147A JP2005075147A JP4403990B2 JP 4403990 B2 JP4403990 B2 JP 4403990B2 JP 2005075147 A JP2005075147 A JP 2005075147A JP 2005075147 A JP2005075147 A JP 2005075147A JP 4403990 B2 JP4403990 B2 JP 4403990B2
Authority
JP
Japan
Prior art keywords
time
image
information
shooting
reproduction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005075147A
Other languages
Japanese (ja)
Other versions
JP2006261933A (en
Inventor
秀夫 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2005075147A priority Critical patent/JP4403990B2/en
Publication of JP2006261933A publication Critical patent/JP2006261933A/en
Application granted granted Critical
Publication of JP4403990B2 publication Critical patent/JP4403990B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)

Description

本発明は、複数の撮影画像を表示画面上に順次表示する画像処理装置及びプログラムに関する。   The present invention relates to an image processing apparatus and a program for sequentially displaying a plurality of captured images on a display screen.

撮影時に設定された撮影情報が付加された複数の撮影画像を記憶し、当該撮影画像をLCD(Liquid Crystal Display)等の表示部に表示することができる画像処理装置がある。例えば、GPS衛星からの電波を受信し、自己の現在地の位置情報を取得し、取得した位置情報に基づいて位置関連情報を取得し、取得した位置関連情報と撮影した画像情報とを関連付けて記憶する技術が開示されている(特許文献1又は2参照)。   There are image processing apparatuses that can store a plurality of captured images to which shooting information set at the time of shooting is added and display the captured images on a display unit such as an LCD (Liquid Crystal Display). For example, it receives radio waves from GPS satellites, acquires position information of its current location, acquires position related information based on the acquired position information, and stores the acquired position related information and captured image information in association with each other. The technique to do is disclosed (refer patent document 1 or 2).

また、このような画像処理装置は、記憶されている複数の撮影画像を連続的に切り替えてスライドショー表示する機能を有している。例えば、フィルムの各駒毎に記憶されている特定情報(タイトル情報、位置情報、地名情報)を読み取り、読み取った特定情報を分別し、分別内容に基づいて表示順序を決定する画像再生装置が開示されている(特許文献3参照)。   Such an image processing apparatus has a function of continuously switching a plurality of stored captured images and displaying a slide show. For example, an image reproducing apparatus that reads specific information (title information, position information, place name information) stored for each frame of a film, classifies the read specific information, and determines the display order based on the classification content is disclosed. (See Patent Document 3).

しかし、スライドショー表示される撮影画像は、表示される画像は、無地の背景に一人の人が表示されている画像であったり、屋外で多数の人が表示されている画像であったりするため、画像毎にユーザが画像内容を認識する時間が異なる場合がある。そこで、表示する画像の複雑度を評価し、評価結果に従って、複雑度の高い画像ほど表示する時間を長くして、視聴者が画像を認識し易くする画像表示システムが開示されている(特許文献4参照)。
特開平9−135416号公報 特開平11−72348号公報 特開平11−344771号公報 特開2004−78927号公報
However, because the shot images displayed in the slide show are images where one person is displayed on a plain background or images where many people are displayed outdoors, There are cases where the time for the user to recognize the image content differs for each image. Therefore, an image display system is disclosed in which the complexity of an image to be displayed is evaluated, and according to the evaluation result, the higher the complexity of the image, the longer the display time is, and the viewer can easily recognize the image (Patent Literature). 4).
JP-A-9-135416 JP-A-11-72348 JP-A-11-344771 JP 2004-79927 A

しかしながら、従来のスライドショー表示は、表示される複数の撮影画像の撮影日時や撮影場所(時間的・空間的な間隔)が非常に近接しており撮影内容が類似している撮影画像である場合や、撮影日時や撮影場所に大きな隔たりがあり撮影内容が異なる撮影画像がある場合であっても、予め設定された表示時間で順次画像が表示されている。   However, the conventional slide show display is a case where the shooting date and time and shooting location (temporal / spatial interval) of a plurality of displayed images are very close and the shooting contents are similar. Even when there is a photographed image with different photographing contents and a large difference in photographing date and time or photographing location, images are sequentially displayed at a preset display time.

スライドショー表示される撮影画像を鑑賞するユーザにとっては、撮影日時や撮影場所が大きく異なる撮影画像を、撮影日時や撮影場所が類似している撮影画像と同一の表示時間で鑑賞することは、違和感があるものである。屋内撮影の場合と屋外撮影の場合のように撮影時の環境が異なる場合も同様である。更に、複数の撮像装置によって撮影された複数の撮影画像がスライドショー表示される場合も、撮像装置の性能が異なるため、同一の表示時間で表示されることには、違和感があるものである。   For a user viewing a shot image displayed in a slide show, it is uncomfortable to view a shot image with a significantly different shooting date / time and shooting location at the same display time as a shot image with a similar shooting date / time and shooting location. There is something. The same applies when the shooting environment is different, such as indoor shooting and outdoor shooting. Furthermore, even when a plurality of captured images taken by a plurality of imaging devices are displayed as a slide show, it is uncomfortable to display the images for the same display time because the performance of the imaging devices is different.

従って、本発明の課題は、複数の撮影画像を時間的・空間的に違和感のないスライドショー表示を実現することである。   Accordingly, an object of the present invention is to realize a slide show display in which a plurality of photographed images are not uncomfortable in terms of time and space.

請求項に記載の発明は、撮影日時情報と撮影画像が撮影された際にユーザが撮像装置に対して指定した撮影制御情報とを含む付加情報が付加された複数の撮影画像を記憶する記憶手段と、前記撮影画像を表示する表示手段と、前記記憶手段に記憶されている前記複数の撮影画像から前記表示手段に表示する複数の再生対象画像を選択する選択操作手段と、撮影日時順に並べ替えられた前記複数の再生対象画像に対し、撮影日時が隣接する再生対象画像相互間の前記付加情報に含まれる撮影日時情報と撮影制御情報を比較する比較手段と、前記複数の再生対象画像を前記表示手段に順次表示させる場合は、前記撮影制御情報の比較結果に基づいて再生対象画像の再生時間を制御する制御手段と、を備える画像処理装置であること、を特徴としている。
更に、コンピュータに対して、上述した請求項1に記載の発明に示した主要手段を機能させるためのプログラムを提供する(請求項に記載の発明)。
The invention according to claim 1 stores a plurality of captured images to which additional information including imaging date / time information and imaging control information designated by the user for the imaging device when the captured image is captured is added. Means, display means for displaying the photographed image, selection operation means for selecting a plurality of reproduction target images to be displayed on the display means from the plurality of photographed images stored in the storage means, arranged in order of photographing date and time. Comparison means for comparing shooting date and time information and shooting control information included in the additional information between the playback target images adjacent to each other with respect to the plurality of playback target images replaced, and the plurality of playback target images. the case of sequentially displayed on the display unit, wherein it a control means for controlling the reproduction time of the reproduction target image based on the comparison result of the photographing control information, an image processing apparatus comprising, characterized by There.
Furthermore, a program is provided for causing a computer to function the main means shown in the invention described in claim 1 (the invention described in claim 6 ).

請求項に記載の発明は、請求項に記載の画像処理装置において、前記付加情報は、前記撮影画像が撮影された位置を示す撮影位置情報を含み、前記比較手段は、前記撮影日時が隣接する再生対象画像相互間の撮影位置情報を比較し、前記制御手段は、当該比較結果に基づいて前記再生時間を制御すること、を特徴としている。 The invention according to claim 2, the image processing apparatus according to claim 1, wherein the additional information includes shooting position information indicating a position where the captured image was captured, the comparison means, said photographing date The photographing position information between adjacent reproduction target images is compared, and the control means controls the reproduction time based on the comparison result.

請求項に記載の発明は、請求項に記載の画像処理装置において、前記比較手段は、前記撮影日時が隣接する再生対象画像相互間の撮影位置の距離を算出し、算出された撮影位置の距離が予め設定されている基準距離以上であるか否かを判別し、前記制御手段は、前記撮影位置の距離が前記基準距離以上であると判別された場合、前記再生時間を次順位の再生対象画像の再生時間よりも長くなるように制御すること、を特徴としている。 The invention according to claim 3, in the image processing apparatus according to claim 2, wherein the comparison means calculates a distance between the photographing position between reproduced images mutually the shooting date and time are adjacent, calculated photographing position Is determined to be equal to or greater than a preset reference distance, and the control means determines that the reproduction time is set to the next rank when it is determined that the distance of the photographing position is equal to or greater than the reference distance. It is characterized by controlling so as to be longer than the reproduction time of the reproduction target image.

請求項に記載の発明は、請求項に記載の画像処理装置において、前記付加情報は、前記撮影画像を撮影した撮像装置を判別する機種情報を含み、前記比較手段は、前記撮影日時が隣接する再生対象画像相互間の機種情報を比較し、前記制御手段は、当該比較結果に基づいて前記再生時間を制御すること、を特徴としている。 Invention according to claim 4, the image processing apparatus according to claim 1, wherein the additional information includes model information to determine imaging apparatus photographs the shot image, the comparison means, said photographing date The model information between adjacent reproduction target images is compared, and the control means controls the reproduction time based on the comparison result.

請求項に記載の発明は、請求項からのいずれか一項に記載の画像処理装置において、前記付加情報は、複数の情報を有し、前記比較手段は、前記撮影日時が隣接する再生対象画像相互間において、前記付加情報に含まれる複数の情報毎に比較を行い、前記制御手段は、当該複数の比較結果に基づいて前記再生時間を制御すること、を特徴としている。 The invention according to claim 5, in the image processing apparatus according to any one of claims 1 to 4, wherein the additional information includes a plurality of information, said comparison means, the photographing date is adjacent The reproduction target images are compared for each of a plurality of pieces of information included in the additional information, and the control unit controls the reproduction time based on the plurality of comparison results.

請求項1、6に記載の発明によれば、撮影日時順に並べ替えられた複数の再生対象画像が順次表示される場合、撮影日時が隣接する再生対象画像相互間の撮影日時情報と撮影制御情報の比較結果に基づいて、表示される再生対象画像の再生時間を制御することができるため、ユーザに対して違和感のない再生対象画像を順次表示させることができる。 According to the first and sixth aspects of the present invention, when a plurality of reproduction target images rearranged in order of photographing date / time are sequentially displayed, the photographing date / time information and the photographing control information between the reproduction target images adjacent to each other. Since the reproduction time of the displayed reproduction target image can be controlled based on the comparison result, it is possible to sequentially display the reproduction target image without any sense of incongruity to the user.

請求項に記載の発明によれば、請求項と同様の効果を得られるのは勿論のこと、付加情報が撮影位置情報を含み、隣接する再生対象画像相互間の撮影位置情報の比較結果に基づいて再生時間を制御することができ、空間的に違和感のなく再生対象画像を順次表示させることができる。 According to the invention described in claim 2, claim 1 of course that the resulting the same effect as, include additional information image position information, the comparison result of the photographing position information between reproduced images mutually adjacent The playback time can be controlled based on the above, and the playback target images can be sequentially displayed without a spatial discomfort.

請求項に記載の発明によれば、請求項と同様の効果を得られるのは勿論のこと、隣接する再生対象画像相互間の撮影位置の距離が予め設定されている基準距離以上である場合、再生時間が次順位の再生対象画像の再生時間よりも長くなるように再生時間を制御することができ、順次表示される再生対象画像間が空間的な違和感なく再生対象画像を順次表示させることができる。 According to the third aspect of the present invention, the same effect as in the second aspect can be obtained, and the distance of the shooting position between adjacent reproduction target images is equal to or larger than a preset reference distance. In this case, the playback time can be controlled so that the playback time is longer than the playback time of the next playback target image, and the playback target images are sequentially displayed without spatial discomfort between the sequentially displayed playback target images. be able to.

請求項に記載の発明によれば、請求項と同様の効果を得られるのは勿論のこと、付加情報が機種情報を含み、隣接する再生対象画像相互間の機種情報の比較結果に基づいて再生時間を制御することができ、順次表示される再生対象画像の撮像装置毎に異なる性能の差異によって異なる空間的な違和感を低減することができる。 According to the invention described in claim 4, that of course obtain the same effect as claimed in claim 1, the additional information comprises model information, based on the comparison of model information between reproduced images mutually adjacent Thus, it is possible to control the reproduction time, and it is possible to reduce the spatial discomfort that is different depending on the difference in performance for each imaging device of images to be reproduced that are sequentially displayed.

請求項に記載の発明によれば、請求項からのいずれか一項と同様の効果を得られるのは勿論のこと、隣接する再生対象画像相互間において、付加情報に含まれる複数の情報毎に比較し、複数の比較結果に基づいて再生時間を制御することができるため、順次表示される再生対象画像の違和感の低減を向上させることができる。 According to the invention of claim 5, that of course obtain the same effects as any one of claims 1 to 4, in between the reproduced image mutually adjacent, the plurality included in the additional information Since the reproduction time can be controlled for each information and based on a plurality of comparison results, it is possible to improve the reduction in the uncomfortable feeling of sequentially displayed reproduction target images.

以下、図を参照して本発明の実施の形態を詳細に説明する。なお、この発明にはこの実施の形態に限定されるものではない。また、この発明の実施の形態は、発明の最も好ましい形態を示すものであり、この発明の用語はこれに限定されない。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. The present invention is not limited to this embodiment. The embodiment of the present invention shows the most preferable mode of the present invention, and the terminology of the present invention is not limited to this.

[実施の形態1]
まず、構成を説明する。
図1に、本実施の形態1における画像処理装置1の構成を示すブロック図を示す。
[Embodiment 1]
First, the configuration will be described.
FIG. 1 is a block diagram showing the configuration of the image processing apparatus 1 according to the first embodiment.

図1に示すように、画像処理装置1は、CPU(Central Processing Unit)10、記憶部11、記録媒体読出部12、入力部13、表示部14、通信部15を備え、各部はバス16により互いに電気的に接続されてなる。   As shown in FIG. 1, the image processing apparatus 1 includes a CPU (Central Processing Unit) 10, a storage unit 11, a recording medium reading unit 12, an input unit 13, a display unit 14, and a communication unit 15. They are electrically connected to each other.

CPU10は、記憶部11に記憶されているシステムプログラムを読み出し、記憶部11内に形成されたワークエリアに展開し、該システムプログラムに従って各部を制御する。また、CPU10は、記録部11に記憶されているスライドショー表示プログラムを始めとする各種処理プログラムを読み出してワークエリアに展開し、各種処理を実行する。   The CPU 10 reads out a system program stored in the storage unit 11, develops it in a work area formed in the storage unit 11, and controls each unit in accordance with the system program. Further, the CPU 10 reads out various processing programs including a slide show display program stored in the recording unit 11, develops them in the work area, and executes various processes.

CPU10は、記憶部11との協働によって、本実施の形態1を実現させるために、記録媒体読出部12から読み出された又は通信部15を介して受信した撮影画像及び撮影画像に付加された撮影日時情報を記憶部11に記憶させ、記憶部11に記憶されている撮影画像を表示部14に表示させ、入力部13からの操作信号に基づいて選択された複数の再生対象画像を各再生対象画像の撮影日時情報に基づいて撮影日時順に並べ替える。そしてCPU10は、当該撮影日時順に並べ替えられた複数の再生対象画像に対し、撮影日時が隣接する再生対象画像相互間の撮影日時情報に基づく時間間隔(時間経過状況情報)を取得する取得手段であり、また、選択された複数の再生対象画像を表示部14に順次表示(スライドショー表示)させる場合は、取得された時間間隔に基づいて再生対象画像が次の再生対象画像に切り替わるまでの再生時間を制御する制御手段である。   The CPU 10 is added to the captured image and the captured image read from the recording medium reading unit 12 or received through the communication unit 15 in order to realize the first embodiment in cooperation with the storage unit 11. The shooting date / time information is stored in the storage unit 11, the shot image stored in the storage unit 11 is displayed on the display unit 14, and each of a plurality of reproduction target images selected based on the operation signal from the input unit 13 is displayed. The images are rearranged in order of shooting date / time based on the shooting date / time information of the reproduction target image. Then, the CPU 10 is an acquisition unit that acquires time intervals (time-lapse status information) based on the shooting date / time information between the reproduction target images adjacent to each other with respect to the plurality of reproduction target images rearranged in order of the shooting date / time. In addition, when the plurality of selected reproduction target images are sequentially displayed on the display unit 14 (slide show display), the reproduction time until the reproduction target image is switched to the next reproduction target image based on the acquired time interval. It is a control means to control.

記憶部11は、プログラム記憶エリア、データ記憶エリア、及びワークエリアを有している。プログラム記憶エリアには、画像処理装置1に対応するシステムプログラム、本実施の形態1を実現させるためのスライドショー表示プログラム等の各種処理プログラムが予め記憶されており、データ記憶エリアには、各種データ等が予め記憶されており、また、記録媒体読出部12から読み出された又は通信部15を介して受信した撮影画像及び撮影画像に付加された撮影日時情報等の各種データを記憶する記憶手段である。   The storage unit 11 has a program storage area, a data storage area, and a work area. The program storage area stores in advance various processing programs such as a system program corresponding to the image processing apparatus 1 and a slide show display program for realizing the first embodiment, and the data storage area stores various data and the like. Is stored in advance, and is also a storage means for storing various data such as a captured image read from the recording medium reading unit 12 or received via the communication unit 15 and shooting date / time information added to the captured image. is there.

撮影画像は、静止画像及び動画像を含む意である。撮影日時情報は、撮影画像が撮影されたときの撮影時間及び撮影年月日(撮影日付)である。なお、撮影画像が動画像である場合、撮影時間は、動画像が撮影開始時の時間又は撮影終了時の時間のいずれか一方を示す。   The captured image includes a still image and a moving image. The shooting date / time information is the shooting time and shooting date (shooting date) when the shot image was shot. When the captured image is a moving image, the shooting time indicates either the time when the moving image starts shooting or the time when the shooting ends.

この記録部11は、磁気的、光学的記録媒体、若しくは半導体メモリなどCPU10で読み取り可能な電気的に消去及び書き替えが可能な不揮発メモリや、揮発メモリなどの記憶媒体を含んだ構成であり、この記憶媒体はCD−ROM(Compact Disc Read Only Memory)、メモリカード等の可搬型の媒体やハードディスク等の固定的な媒体を含む。   The recording unit 11 includes a storage medium such as a magnetic or optical recording medium, a non-volatile memory that can be read and erased electrically by the CPU 10 such as a semiconductor memory, or a volatile memory. This storage medium includes a portable medium such as a CD-ROM (Compact Disc Read Only Memory) and a memory card, and a fixed medium such as a hard disk.

記録媒体読出部12は、例えばフラッシュメモリカード、スマートメディアカード、フロッピー(登録商標)ディスク、CD(Compact Disk)等の各種記録媒体に対応した記録媒体挿入口を備え、記録媒体挿入口に装着された記録媒体から撮影画像及び撮影画像に付加された撮影日時情報を読み出して取得する。なお、記録媒体としては上述したものに限らず、例えばSD(Secure Digital)カード、PCカード、MO(Magneto Optic)等、その他の半導体メモリ、磁気的又は光学的記録媒体であってもよい。   The recording medium reading unit 12 includes a recording medium insertion slot corresponding to various recording media such as a flash memory card, a smart media card, a floppy (registered trademark) disk, and a CD (Compact Disk), and is attached to the recording medium insertion slot. The captured image and the captured date / time information added to the captured image are read out from the recorded medium. The recording medium is not limited to the one described above, and may be another semiconductor memory such as an SD (Secure Digital) card, a PC card, an MO (Magneto Optic), or a magnetic or optical recording medium.

入力部13は、カーソルキー、数字入力キー及び各種機能キー等を備えたキーボード、ポインティングデバイスであるマウス等を備え、キーボードで押下されたキーの押下信号をCPU10に出力するとともに、マウスによる操作信号をCPU10に出力することで、複数の撮影画像からスライドショー表示される再生対象画像を選択する操作選択手段である。   The input unit 13 includes a keyboard having cursor keys, numeric input keys, various function keys, and the like, a mouse that is a pointing device, and the like. Is output to the CPU 10 to select a reproduction target image to be displayed as a slide show from a plurality of photographed images.

表示部14は、例えば、LCD(Liquid Crystal Display)などからなる表示画面によって構成され、CPU10から入力される表示信号の指示に従って、表示画面上に、撮影画像及び各種操作画面等の各種情報を表示する表示手段である。   The display unit 14 is configured by a display screen such as an LCD (Liquid Crystal Display), for example, and displays various information such as a photographed image and various operation screens on the display screen according to instructions of a display signal input from the CPU 10. Display means.

通信部15は、モデム(MODEM:MOdulater/DEModulater)又はターミナルアダプタ(TA:Terminal Adapter)、ネットワークカード等によって構成され、WAN(Wide Area Network)やLAN(Local Area Network)等の通信ネットワークを介して外部機器との通信を行うための制御を行う。例えば、通信部15は、通信ネットワークを介して外部機器から撮影画像及び撮影画像に付加された撮影日時情報を受信しCPU10に出力することが可能である。   The communication unit 15 is configured by a modem (MODEM / DEModulater), a terminal adapter (TA), a network card, or the like, via a communication network such as a WAN (Wide Area Network) or a LAN (Local Area Network). Controls to communicate with external devices. For example, the communication unit 15 can receive a captured image and captured date / time information added to the captured image from an external device via a communication network and output the captured image information to the CPU 10.

次に、本実施の形態1の動作を説明する。
図2は、本実施の形態1おけるスライドショー表示処理を示す。当該処理及びその処理において実行される各処理は、CPU10と記憶部11に記憶されたプログラム及びデータとの協働によるソフトウェア処理により実現するものである。
Next, the operation of the first embodiment will be described.
FIG. 2 shows a slide show display process according to the first embodiment. The processing and each processing executed in the processing are realized by software processing in cooperation with the CPU 10 and programs and data stored in the storage unit 11.

まず、スライドショー表示処理が開始されると、記憶部11に記憶されている複数の撮影画像が読出され、読み出された複数の撮影画像は、表示部14の表示画面上に表示される。表示画面上に表示された複数の撮影画像からスライドショー表示の対象となる撮影画像が入力部13をユーザが操作することにより選択され再生対象画像として設定される(ステップS1)。   First, when the slide show display process is started, a plurality of photographed images stored in the storage unit 11 are read, and the plurality of read photographed images are displayed on the display screen of the display unit 14. A photographed image to be displayed as a slide show is selected from a plurality of photographed images displayed on the display screen by the user operating the input unit 13 and set as a reproduction target image (step S1).

また、ユーザが入力部13を操作することにより、各再生対象画像が表示される時間(再生時間)としての基準再生時間Tが設定される(ステップS2)。   Further, when the user operates the input unit 13, a reference playback time T as a time (playback time) for displaying each playback target image is set (step S2).

基準再生時間Tが設定された後、設定された複数の再生対象画像は、各再生対象画像に付加された撮影日時情報が参照され、撮影日時順に並び替えられる(ステップS3)。   After the reference playback time T is set, the set plurality of playback target images are rearranged in order of shooting date and time with reference to shooting date / time information added to each playback target image (step S3).

複数の再生対象画像が撮影日時順に並び替えられた後(ステップS3後)、先頭の再生対象画像が指定され(ステップS4)、指定された再生対象画像が表示部14の表示画面上に表示される(ステップS5)。   After the plurality of reproduction target images are rearranged in order of shooting date and time (after step S3), the first reproduction target image is designated (step S4), and the designated reproduction target image is displayed on the display screen of the display unit 14. (Step S5).

そして、指定された再生対象画像に付加されている撮影日時情報が読出される(ステップS6)と共に、指定された再生対象画像の次順位の再生対象画像に付加されている撮影日時情報が読み出される(ステップS7)。   Then, the shooting date / time information added to the designated reproduction target image is read (step S6), and the shooting date / time information added to the reproduction target image next in order of the designated reproduction target image is read. (Step S7).

読み出された指定された再生対象画像の撮影日時情報と次順位の再生対象画像の撮影日時情報とが比較され、時間経過状況情報としての相互間の時間間隔Ti(時間差)が取得される(ステップS8)。   The readout shooting date / time information of the designated playback target image is compared with the shooting date / time information of the next playback target image, and a time interval Ti (time difference) is obtained as time lapse status information ( Step S8).

取得された時間間隔Tiは、1時間以上であるか否かが判別され(ステップS9)、時間間隔Tiが1時間以上であると判別された場合(ステップS9;Yes)、時間間隔Tiは24時間以上であるか否かが判別される(ステップS10)。   It is determined whether or not the acquired time interval Ti is 1 hour or more (step S9). When it is determined that the time interval Ti is 1 hour or more (step S9; Yes), the time interval Ti is 24. It is determined whether or not the time is over (step S10).

時間間隔Tiが24時間以上であると判別された場合(ステップS10;Yes)、再生時間Tpが基準再生時間Tの4倍として設定される(ステップS11)。   When it is determined that the time interval Ti is 24 hours or more (step S10; Yes), the reproduction time Tp is set as four times the reference reproduction time T (step S11).

時間間隔Tiが24時間未満であると判別された場合(ステップS10;No)、再生時間Tpが基準再生時間Tの2倍として設定される(ステップS12)。   When it is determined that the time interval Ti is less than 24 hours (step S10; No), the reproduction time Tp is set as twice the reference reproduction time T (step S12).

一方、時間間隔Tiが1時間未満であると判別された場合(ステップS9;No)、時間間隔Tiが1分未満か否かが判別される(ステップS13)。   On the other hand, when it is determined that the time interval Ti is less than 1 hour (step S9; No), it is determined whether or not the time interval Ti is less than 1 minute (step S13).

時間間隔Tiが1分未満であると判別された場合(ステップS13;Yes)、再生時間Tpが基準再生時間Tの0.5倍として設定される(ステップS14)。   When it is determined that the time interval Ti is less than 1 minute (step S13; Yes), the reproduction time Tp is set as 0.5 times the reference reproduction time T (step S14).

時間間隔Tiが1分以上であると判別された場合(ステップS13;No)、再生時間Tpは、基準再生時間Tと同時間として設定される(ステップS15)。   When it is determined that the time interval Ti is 1 minute or more (step S13; No), the reproduction time Tp is set as the same time as the reference reproduction time T (step S15).

ステップS9〜15によって、複数の設定再生時間のうちいずれか1つを選択することが実現される。また、ステップS9、ステップS10、ステップS13に示すように時間間隔Tiと比較される1時間、24時間、1分は、予め設定された比較時間情報の一例である。   Through steps S9 to S15, one of a plurality of set playback times is selected. Moreover, as shown in step S9, step S10, and step S13, 1 hour, 24 hours, and 1 minute compared with the time interval Ti are examples of preset comparison time information.

このように、予め設定されている比較時間情報との比較結果に基づいて基準再生時間が変更されることにより再生時間を設定することができ、スライドショー表示する際の制御負荷を低減させることができる。また、時間間隔Tiが大きいほど再生時間が長くなるように再生時間が設定されるため、順次表示される再生対象画像間の時間的な違和感を低減することができる。   Thus, the reproduction time can be set by changing the reference reproduction time based on the comparison result with the comparison time information set in advance, and the control load when displaying the slide show can be reduced. . Further, since the playback time is set so that the playback time becomes longer as the time interval Ti is larger, it is possible to reduce the temporal discomfort between the images to be played back that are sequentially displayed.

再生時間Tpが設定された後(ステップS11、S12、S14又はS15後)、設定された再生時間Tpで指定された再生対象画像が表示されると共に再生時間Tpの計時が開始され、再生時間Tpが経過したか否かが判別される(ステップS16)。   After the playback time Tp is set (after steps S11, S12, S14, or S15), the playback target image specified by the set playback time Tp is displayed and the playback time Tp is started to be measured. It is determined whether or not elapses (step S16).

再生時間Tpが経過していないと判別した場合(ステップS16;No)、再生時間Tpが経過するまで待機する(ステップS16に戻る)。   When it is determined that the reproduction time Tp has not elapsed (step S16; No), the process waits until the reproduction time Tp has elapsed (return to step S16).

再生時間Tpが経過したと判別された場合(ステップS16;Yes)、設定された全再生対象画像が全て表示されたか否かが判別され(ステップS17)、未表示の再生対象画像がある場合(ステップS17;No)、指定された再生対象画像の次順位の再生対象画像が指定され(ステップS18)、ステップS5に戻る。   If it is determined that the playback time Tp has elapsed (step S16; Yes), it is determined whether all the set playback target images have been displayed (step S17), and if there is an undisplayed playback target image (step S17). In step S17; No), the reproduction target image next to the designated reproduction target image is designated (step S18), and the process returns to step S5.

全再生対象画像が表示されたと判別された場合(ステップS17;Yes)、スライドショー表示が終了される。   When it is determined that all the reproduction target images are displayed (step S17; Yes), the slide show display ends.

図3(a)に、撮影日時順に並び替えられた複数の再生対象画像の一覧を示し、図3(b)に、スライドショー表示される再生対象画像毎の再生時間を示す。なお、図3(a)に示すように、撮影日時順に並び替えられた複数の再生対象画像は、先頭からスライドショー表示される際の表示番号が付加される(例えば、「0001」)。   FIG. 3A shows a list of a plurality of reproduction target images rearranged in order of shooting date and time, and FIG. 3B shows a reproduction time for each reproduction target image displayed as a slide show. As shown in FIG. 3A, a display number when a slide show is displayed from the top is added to a plurality of reproduction target images rearranged in order of shooting date and time (for example, “0001”).

図3(a)、(b)に示すように、例えば、表示番号0001の再生対象画像と表示番号0002の再生対象画像との間の時間間隔Tiが5分である場合、表示番号0001の再生時間Tpとして基準再生時間Tが選択され設定されるように、時間間隔Tiが1時間未満1分以上である場合、再生時間Tpは基準再生時間Tに選択され設定される。   As shown in FIGS. 3A and 3B, for example, when the time interval Ti between the reproduction target image with the display number 0001 and the reproduction target image with the display number 0002 is 5 minutes, the reproduction with the display number 0001 is performed. When the time interval Ti is less than 1 hour and 1 minute or longer so that the reference playback time T is selected and set as the time Tp, the playback time Tp is selected and set as the reference playback time T.

例えば、表示番号0003の再生対象画像と表示番号0004の再生対象画像との間の時間間隔Tiが48時間である場合、表示番号0003の再生時間Tpとして基準再生時間Tの4倍の時間が選択され設定されるように、時間間隔Tiが24時間以上である場合、再生時間Tpは基準再生時間Tの4倍の時間が選択され設定される。   For example, when the time interval Ti between the reproduction target image with the display number 0003 and the reproduction target image with the display number 0004 is 48 hours, a time four times the reference reproduction time T is selected as the reproduction time Tp with the display number 0003. Thus, when the time interval Ti is 24 hours or more, the reproduction time Tp is selected and set to be four times the reference reproduction time T.

また、例えば、表示番号0005の再生対象画像と表示番号0006の再生対象画像との間の時間間隔Tpが20時間である場合、表示番号0005の再生時間Tpとして基準再生時間Tの2倍の時間が選択され設定されるように、時間間隔Tiが1時間以上24時間未満である場合、再生時間Tpは基準再生時間Tの2倍の時間が選択され設定される。   For example, when the time interval Tp between the reproduction target image with the display number 0005 and the reproduction target image with the display number 0006 is 20 hours, the reproduction time Tp with the display number 0005 is twice the reference reproduction time T. Is selected and set, when the time interval Ti is not less than 1 hour and less than 24 hours, the playback time Tp is selected and set twice as long as the reference playback time T.

更に、例えば、表示番号0007の再生対象画像と表示番号0008の再生対象画像との間の時間間隔Tpが5秒でる場合、表示番号0007の再生時間Tpとして基準再生時間Tの0.5倍の時間が選択され設定されるように、時間間隔Tiが1分未満である場合、再生時間Tpは基準再生時間Tの0.5倍の時間が選択され設定される。   Further, for example, when the time interval Tp between the reproduction target image with the display number 0007 and the reproduction target image with the display number 0008 is 5 seconds, the reproduction time Tp with the display number 0007 is 0.5 times the reference reproduction time T. As the time is selected and set, when the time interval Ti is less than 1 minute, the playback time Tp is selected and set to 0.5 times the reference playback time T.

このように、撮影日時順に並べ替えられた複数の再生対象画像が順次表示される場合(スライドショー表示される場合)、撮影日時が隣接する再生対象画像相互間の撮影日時情報に基づく時間間隔Tiに基づいて、表示される再生対象画像の再生時間を制御することができるため、ユーザに対して順次表示される再生対象画像間の時間的な違和感のないスライドショー表示を実現することができる。また、時間間隔Tiの取得が再生対象画像が表示される度に算出されるため、事前に時間間隔Tiの取得という準備動作が必要なくなり、ユーザに対して待ち時間なく直ちにスライドショー表示を行うことができる。   As described above, when a plurality of reproduction target images rearranged in order of shooting date / time are sequentially displayed (when a slide show is displayed), the shooting date / time is set to the time interval Ti based on the shooting date / time information between adjacent reproduction target images. Based on this, it is possible to control the playback time of the playback target images to be displayed, so that it is possible to realize a slide show display that does not cause temporal discomfort among the playback target images that are sequentially displayed to the user. Further, since the acquisition of the time interval Ti is calculated every time the playback target image is displayed, a preparatory operation of acquiring the time interval Ti in advance is not necessary, and a slide show display can be performed immediately without waiting for the user. it can.

[実施の形態2]
以下、本発明の実施の形態2を詳細に説明する。
まず、構成を説明する。
図4に、本実施の形態2における画像処理装置2の構成を示すブロック図を示す。
[Embodiment 2]
Hereinafter, the second embodiment of the present invention will be described in detail.
First, the configuration will be described.
FIG. 4 is a block diagram showing the configuration of the image processing apparatus 2 according to the second embodiment.

図4に示すように、画像処理装置2は、CPU(Central Processing Unit)20、記憶部21、記録媒体読出部12、入力部13、表示部14、通信部15を備え、各部はバス16により互いに電気的に接続されてなる。なお、実施の形態1と同様の部位には同様の符号を付し、説明は省略する。   As shown in FIG. 4, the image processing apparatus 2 includes a CPU (Central Processing Unit) 20, a storage unit 21, a recording medium reading unit 12, an input unit 13, a display unit 14, and a communication unit 15. They are electrically connected to each other. In addition, the same code | symbol is attached | subjected to the site | part similar to Embodiment 1, and description is abbreviate | omitted.

CPU20は、記憶部21に記憶されているシステムプログラムを読み出し、記憶部21内に形成されたワークエリアに展開し、該システムプログラムに従って各部を制御する。また、CPU20は、記録部21に記憶されているスライドショー表示プログラムを始めとする各種処理プログラムを読み出してワークエリアに展開し、各種処理を実行する。   CPU20 reads the system program memorize | stored in the memory | storage part 21, expand | deploys to the work area formed in the memory | storage part 21, and controls each part according to this system program. Further, the CPU 20 reads out various processing programs including a slide show display program stored in the recording unit 21, develops them in the work area, and executes various processes.

CPU20は、記憶部21との協働によって、本実施の形態2を実現させるために、記録媒体読出部12から読み出された又は通信部15を介して受信した撮影画像及び撮影画像に付加された撮影日時情報を含む付加情報を記憶部21に記憶させ、記憶部21に記憶されている撮影画像を表示部14に表示させ、入力部13からの操作信号に基づいて選択された複数の再生対象画像を各再生対象画像の撮影日時情報に基づいて撮影日時順に並べ替える。そしてCPU20は、撮影日時順に並べ替えられた複数の再生対象画像に対し、撮影日時が隣接する再生対象画像相互間の付加情報を比較する比較手段であり、また、選択された複数の再生対象画像を表示部14に順次表示(スライドショー表示)させる場合は、付加情報の比較結果に基づいて表示される再生対象画像が次の再生対象画像に切り替わる再生時間を制御する制御手段である。   The CPU 20 is added to the captured image and the captured image read from the recording medium reading unit 12 or received through the communication unit 15 in order to realize the second embodiment in cooperation with the storage unit 21. The additional information including the shooting date / time information is stored in the storage unit 21, the captured image stored in the storage unit 21 is displayed on the display unit 14, and a plurality of reproductions selected based on the operation signal from the input unit 13 are displayed. The target images are rearranged in order of shooting date and time based on the shooting date and time information of each reproduction target image. The CPU 20 is a comparison unit that compares the additional information between the reproduction target images adjacent to each other with respect to the plurality of reproduction target images rearranged in order of the photographing date and time, and the plurality of selected reproduction target images. Are sequentially displayed on the display unit 14 (slide show display), the control means for controlling the reproduction time for switching the reproduction target image displayed on the basis of the comparison result of the additional information to the next reproduction target image.

記憶部21は、プログラム記憶エリア、データ記憶エリア、及びワークエリアを有している。プログラム記憶エリアには、画像処理装置2に対応するシステムプログラム、本実施の形態2を実現させるためのスライドショー表示プログラム等の各種処理プログラムが予め記憶されており、データ記憶エリアには、各種データ等が予め記憶されており、また、記録媒体読出部12から読み出された又は通信部15を介して受信した撮影画像及び撮影画像に付加された付加情報等の各種データを記憶する記憶手段である。   The storage unit 21 has a program storage area, a data storage area, and a work area. In the program storage area, various processing programs such as a system program corresponding to the image processing apparatus 2 and a slide show display program for realizing the second embodiment are stored in advance, and various data etc. are stored in the data storage area. Is stored in advance, and is a storage unit that stores various data such as a captured image read from the recording medium reading unit 12 or received via the communication unit 15 and additional information added to the captured image. .

撮影画像は、静止画像及び動画像を含む意である。付加情報は、撮影画像が撮影された位置を示す撮影位置情報、撮影画像が撮影された際にユーザが撮像装置に対して指定した露出値や望遠値等の撮影制御情報、撮影画像を撮影した撮像装置を判別する機種情報、撮影画像が撮影されたときの撮影時間及び撮影年月日(撮影日付)を示す撮影日時情報を含む。なお、撮影画像が動画像である場合、撮影時間は、動画像が撮影開始時の時間又は撮影終了時の時間のいずれか一方を示す。   The captured image includes a still image and a moving image. Additional information includes shooting position information indicating the position where the shot image was shot, shooting control information such as an exposure value and a telephoto value specified by the user when the shot image was shot, and a shot image was shot. It includes model information for determining the imaging device, shooting date and time information indicating the shooting time and shooting date (shooting date) when the shot image was shot. When the captured image is a moving image, the shooting time indicates either the time when the moving image starts shooting or the time when the shooting ends.

撮影位置情報は、撮影画像の撮影時において、撮像装置がGPS(Global Positioning System)衛星や無線基地局等から受信する電波に基づいて、撮像装置の現在地の緯度及び経度を示す位置信号を算出することにより得られる情報である。   The shooting position information calculates a position signal indicating the latitude and longitude of the current location of the imaging device based on radio waves received by the imaging device from a GPS (Global Positioning System) satellite, a wireless base station, or the like when shooting a captured image. It is the information obtained by this.

図5に、記憶部21に記憶される付加情報が付加された撮影画像の画像データ構成の一例を示す。図5に示すように、画像データD1は、撮影時等に付加される撮影画像を識別する画像番号d1、機種情報としてのメーカ名d2及び機種名d3、撮影日時情報d4、撮影位置情報d5、撮影制御情報としての露出値d6及び撮影画像の実画像データd10などから構成されている。   FIG. 5 shows an example of the image data configuration of a captured image to which additional information stored in the storage unit 21 is added. As shown in FIG. 5, the image data D1 includes an image number d1 for identifying a captured image added at the time of shooting or the like, a manufacturer name d2 and a model name d3 as model information, shooting date / time information d4, shooting position information d5, It consists of an exposure value d6 as shooting control information, actual image data d10 of the shot image, and the like.

また、記憶部21は、スライドショー表示処理が実行される際、撮影日時順に並べ替えられた複数の再生対象画像に対し、撮影日時が隣接する再生対象画像相互間の付加情報の比較結果に基づいて、再生時間を調整するための区切テーブルDTを記憶する。   In addition, when the slide show display process is executed, the storage unit 21 is based on the comparison result of the additional information between the reproduction target images adjacent to each other with respect to the plurality of reproduction target images rearranged in order of the shooting date. The partition table DT for adjusting the reproduction time is stored.

図6に、記憶部21に記憶される区切テーブルDTの一例を示す。
図6に示すように、区切テーブルDTは、撮影日時が隣接する再生対象画像相互間の付加情報の比較結果に基づいて、例えば、「0002」等の画像番号が記憶されている。
FIG. 6 shows an example of the partition table DT stored in the storage unit 21.
As illustrated in FIG. 6, the partition table DT stores an image number such as “0002” based on the comparison result of the additional information between the reproduction target images adjacent to each other with the shooting date and time.

この記録部21は、磁気的、光学的記録媒体、若しくは半導体メモリなどCPU10で読み取り可能な電気的に消去及び書き替えが可能な不揮発メモリや、揮発メモリなどの記憶媒体を含んだ構成であり、この記憶媒体はCD−ROM(Compact Disc Read Only Memory)、メモリカード等の可搬型の媒体やハードディスク等の固定的な媒体を含む。   The recording unit 21 includes a storage medium such as a magnetic or optical recording medium, a non-volatile memory that can be read and erased electrically by the CPU 10 such as a semiconductor memory, or a volatile memory. This storage medium includes a portable medium such as a CD-ROM (Compact Disc Read Only Memory) and a memory card, and a fixed medium such as a hard disk.

次に、本実施の形態2の動作を説明する。
図7、8は、本実施の形態2おけるスライドショー表示処理を示す。当該処理及びその処理において実行される各処理は、CPU20と記憶部21に記憶されたプログラム及びデータとの協働によるソフトウェア処理により実現するものである。
Next, the operation of the second embodiment will be described.
7 and 8 show the slide show display process in the second embodiment. The processing and each processing executed in the processing are realized by software processing in cooperation with the CPU 20 and programs and data stored in the storage unit 21.

まず、スライドショー表示処理が開始されると、記憶部21に記憶されている複数の撮影画像が読出され、読み出された複数の撮影画像は、表示部14の表示画面上に表示される。表示画面上に表示された複数の撮影画像からスライドショー表示の対象となる撮影画像が入力部13をユーザが操作することにより選択され再生対象画像として設定される(ステップS21)。   First, when the slide show display process is started, a plurality of photographed images stored in the storage unit 21 are read, and the plurality of read photographed images are displayed on the display screen of the display unit 14. A photographed image to be displayed as a slide show is selected from a plurality of photographed images displayed on the display screen by the user operating the input unit 13 and set as a reproduction target image (step S21).

また、ユーザが入力部13を操作することにより、各再生対象画像が表示される時間(再生時間)としての基準再生時間Tが設定される(ステップS22)。   Further, when the user operates the input unit 13, a reference playback time T as a time (playback time) for displaying each playback target image is set (step S22).

基準再生時間Tが設定された後、設定された複数の再生対象画像は、各再生対象画像に付加された撮影日時情報が参照され、撮影日時順に並び替えられる(ステップS23)。   After the reference playback time T has been set, the set plurality of playback target images are sorted in order of shooting date and time with reference to shooting date / time information added to each playback target image (step S23).

複数の再生対象画像が撮影日時順に並び替えられた後(ステップS23後)、先頭の再生対象画像が第1画像Aとして指定され(ステップS24)、指定された第1画像Aの次順位の再生対象画像が第2画像Bとして指定される(ステップS25)。   After the plurality of reproduction target images are rearranged in order of shooting date and time (after step S23), the first reproduction target image is designated as the first image A (step S24), and the reproduction of the next order of the designated first image A is performed. The target image is designated as the second image B (step S25).

指定された第1画像A及び第2画像Bの付加情報からそれぞれの撮影位置情報が読み出され(ステップS26)、第1画像Aと第2画像Bとの間の距離Lが読み出された撮影位置情報に基づいて算出される(ステップS27)。   The respective shooting position information is read from the designated additional information of the first image A and the second image B (step S26), and the distance L between the first image A and the second image B is read. It is calculated based on the photographing position information (step S27).

そして、算出された第1画像Aと第2画像Bとの間の距離Lが、予め設定されている基準距離(例えば、10km)以上であるか否かが判別される(ステップS28)。   Then, it is determined whether or not the calculated distance L between the first image A and the second image B is equal to or greater than a preset reference distance (for example, 10 km) (step S28).

距離Lが基準距離(10km)未満であると判別された場合(ステップ28;No)、第1画像A及び第2画像Bの付加情報からそれぞれの撮影日時情報が読み出され(ステップS29)、第1画像Aと第2画像Bの日付が異なるか否かが判別される(ステップS30)。   When it is determined that the distance L is less than the reference distance (10 km) (step 28; No), the respective shooting date / time information is read from the additional information of the first image A and the second image B (step S29). It is determined whether or not the dates of the first image A and the second image B are different (step S30).

第1画像Aと第2画像Bの日付が異なると判別された場合(ステップS30;Yes)又は距離Lが基準距離(10km)以上であると判別された場合(ステップS28;Yes)、第1画像Aの画像番号が区切テーブルに記憶される(ステップS31)。   When it is determined that the dates of the first image A and the second image B are different (step S30; Yes), or when it is determined that the distance L is greater than or equal to the reference distance (10 km) (step S28; Yes), the first The image number of the image A is stored in the partition table (step S31).

第1画像Aの画像番号が区切テーブルに記憶された後(ステップS31後)又は第1画像Aと第2画像Bの日付が同一日付と判別された場合(ステップS30;No)、第2画像Bは、撮影日時順に並べ替えられた再生対象画像のうち、最終番目の再生対象画像であるか否かが判別される(ステップS32)。   After the image number of the first image A is stored in the separation table (after step S31) or when the dates of the first image A and the second image B are determined to be the same date (step S30; No), the second image Whether or not B is the last reproduction target image among the reproduction target images rearranged in order of shooting date and time is determined (step S32).

第2画像Bが最終番目の再生対象画像ではないと判別された場合(ステップS32;No)、第2画像Bが第1画像Aとして指定され(ステップS33)、ステップS25に戻る。   When it is determined that the second image B is not the final reproduction target image (step S32; No), the second image B is designated as the first image A (step S33), and the process returns to step S25.

第2画像Bが最終番目の再生対象画像であると判別された場合(ステップS32;Yes)、先頭の再生対象画像が指定され(ステップS34)、指定された再生対象画像の画像番号は、区切テーブルに記憶されているか否かが判別される(ステップS35)。   When it is determined that the second image B is the last reproduction target image (step S32; Yes), the first reproduction target image is designated (step S34), and the image number of the designated reproduction target image is delimited. It is determined whether or not it is stored in the table (step S35).

指定された再生対象画像の画像番号が区切テーブルに記憶されていると判別された場合(ステップS35;Yes)、指定された再生対象画像の再生時間Tpは、基準再生時間Tの2倍として設定される(ステップS36)。   When it is determined that the image number of the designated reproduction target image is stored in the separation table (step S35; Yes), the reproduction time Tp of the designated reproduction target image is set as twice the reference reproduction time T. (Step S36).

指定された再生対象画像の画像番号が区切テーブルに記憶されていないと判別された場合(ステップS35;No)、指定された対象画像の再生時間Tpは、基準再生時間Tとして設定される(ステップS37)。   When it is determined that the image number of the designated reproduction target image is not stored in the separation table (Step S35; No), the reproduction time Tp of the designated target image is set as the reference reproduction time T (Step S35). S37).

ステップS28〜37によって、撮影日時が隣接する再生対象画像相互間の距離Lが基準距離以上であると判別された場合、再生時間を次順位の再生対象画像の再生時間よりも長くなるよう設定される。また、ステップS28に示す基準距離、ステップS36、37に示す再生時間Tpを設定する倍率はこれに限らない。   If it is determined in steps S28 to 37 that the distance L between the reproduction target images whose shooting dates are adjacent is equal to or greater than the reference distance, the reproduction time is set to be longer than the reproduction time of the next reproduction target image. The Further, the magnification for setting the reference distance shown in step S28 and the reproduction time Tp shown in steps S36 and 37 is not limited to this.

指定された再生対象画像の再生時間Tpが設定された後、指定された再生対象画像が表示部14の表示画面上に表示される(ステップS38)。   After the reproduction time Tp of the designated reproduction target image is set, the designated reproduction target image is displayed on the display screen of the display unit 14 (step S38).

設定された再生時間Tpで指定された再生対象画像が表示されると共に再生時間Tpの計時が開始され、再生時間Tpが経過したか否かが判別される(ステップS39)。   The reproduction target image designated by the set reproduction time Tp is displayed and the reproduction time Tp is started to be measured, and it is determined whether or not the reproduction time Tp has passed (step S39).

再生時間Tpが経過していないと判別した場合(ステップS39;No)、再生時間Tpが経過するまで待機する(ステップS39に戻る)。   When it is determined that the reproduction time Tp has not elapsed (step S39; No), the process waits until the reproduction time Tp has elapsed (return to step S39).

再生時間Tpが経過したと判別された場合(ステップS39;Yes)、設定された全再生対象画像が全て表示されたか否かが判別され(ステップS40)、未表示の再生対象画像がある場合(ステップS40;No)、指定された再生対象画像の次順位の再生対象画像が指定され(ステップS41)、ステップS34に戻る。   When it is determined that the reproduction time Tp has elapsed (step S39; Yes), it is determined whether or not all the set reproduction target images have been displayed (step S40), and there is an undisplayed reproduction target image (step S40). (Step S40; No), the reproduction target image of the next order of the designated reproduction target image is designated (step S41), and the process returns to step S34.

全再生対象画像が表示されたと判別された場合(ステップS40;Yes)、スライドショー表示が終了される。   When it is determined that all the reproduction target images are displayed (step S40; Yes), the slide show display ends.

図9(a)に、撮影日時順に並び替えられた複数の再生対象画像の一覧を示し、図9(b)に、スライドショー表示される再生対象画像毎の再生時間を示す。   FIG. 9A shows a list of a plurality of reproduction target images rearranged in order of shooting date and time, and FIG. 9B shows a reproduction time for each reproduction target image displayed as a slide show.

図3(a)、(b)に示すように、例えば、画像番号0001の再生対象画像と画像番号0002の再生対象画像との間の距離Lが1kmであり、相互の撮影日付が同一である場合、画像番号0001の再生対象画像の画像番号は区切テーブルに記憶されず、表示番号0001の再生時間Tpとして基準再生時間Tが設定されるように、距離Lが10km未満であり、かつ同一日付である場合、再生時間Tpは基準再生時間Tに選択され設定される。   As shown in FIGS. 3A and 3B, for example, the distance L between the reproduction target image with the image number 0001 and the reproduction target image with the image number 0002 is 1 km, and the shooting dates are the same. In this case, the image number of the reproduction target image with the image number 0001 is not stored in the separation table, and the distance L is less than 10 km and the same date so that the reference reproduction time T is set as the reproduction time Tp with the display number 0001. In this case, the reproduction time Tp is selected and set as the reference reproduction time T.

一方、画像番号0002の再生対象画像と画像番号0003の再生対象画像との間の距離Lが15kmである場合、画像番号0002の再生対象画像の画像番号が区切テーブルに記憶されるため、画像番号0002の再生対象画像の再生時間Tpとして基準再生時間Tの2倍の時間が設定されるように、距離Lが基準距離以上である場合、基準距離L未満である場合よりも長い再生時間が設定される。   On the other hand, when the distance L between the reproduction target image with the image number 0002 and the reproduction target image with the image number 0003 is 15 km, the image number of the reproduction target image with the image number 0002 is stored in the partition table. When the distance L is greater than or equal to the reference distance, a longer reproduction time than when the distance is less than the reference distance L is set so that the reproduction time Tp of the reproduction target image of 0002 is set to be twice the reference reproduction time T. Is done.

また、画像番号0003の再生対象画像と画像番号0004の再生対象画像との間の距離Lが3kmであるが相互の撮影日付が異なる場合、画像番号0003の再生対象画像の画像番号が区切テーブルに記憶されるため、画像番号0003の再生対象画像の再生時間Tpとして基準再生時間Tの2倍の時間が設定されるように、日付が異なる場合、日付が同一の場合よりも長い再生時間が設定される。   If the distance L between the reproduction target image with the image number 0003 and the reproduction target image with the image number 0004 is 3 km but the shooting dates are different, the image number of the reproduction target image with the image number 0003 is stored in the delimiter table. Therefore, when the dates are different, a longer playback time is set than when the dates are the same so that a time twice as long as the reference playback time T is set as the playback time Tp of the playback target image with the image number 0003. Is done.

このように、撮影日時順に並べ替えられた複数の再生対象画像が順次表示される場合(スライドショー表示される場合)、撮影日時が隣接する再生対象画像相互間の撮影位置情報の比較結果に基づく相互間の距離Lと撮影日時情報に基づく撮影月日の変化の有無との結果の組み合わせ基づいて、相互間の距離Lが予め定められた基準距離よりも大きい場合又は撮影日付が異なる場合は、表示される再生対象画像の再生時間が、次順位の再生対象画像の再生時間よりも長くなるように設定されるため、ユーザに対して順次表示される再生対象画像間の空間的及び時間的な違和感のないスライドショー表示を実現することができる。また、予め全ての再生対象画像に対して撮影日付の変化の有無の判定が行われた後、スライドショー表示されるため、制御負荷を低減させることができる。   In this way, when a plurality of reproduction target images rearranged in order of shooting date / time are displayed sequentially (when a slide show is displayed), the shooting date / time is determined based on a comparison result of shooting position information between adjacent reproduction target images. Displayed when the distance L between the distances is greater than a predetermined reference distance or when the shooting dates are different, based on the combination of the results of the distance L between them and whether or not there is a change in the shooting date based on the shooting date / time information Since the playback time of the playback target images to be played is set to be longer than the playback time of the playback target images of the next order, spatial and temporal discomfort between the playback target images that are sequentially displayed to the user Slide show display without any problem can be realized. In addition, since it is displayed as a slide show after the presence / absence of a change in the shooting date is previously determined for all the reproduction target images, the control load can be reduced.

(変形例)
実施の形態2の変形例を説明する。本変形例は、実施の形態2と装置構成が同様であり、撮影日時が隣接する再生対象画像相互間の撮影位置情報の比較に代えて撮影制御情報(例えば、露出値)を比較し、更に撮影日時情報の比較に代えて機種情報を比較して、スライドショー表示が実行される際の再生時間を制御するため、その他同様の部分の説明を省略する。
(Modification)
A modification of the second embodiment will be described. This modified example has the same apparatus configuration as that of the second embodiment, and compares shooting control information (for example, exposure value) instead of comparing shooting position information between images to be reproduced that have adjacent shooting dates and times. In order to control the playback time when the slide show display is executed by comparing the model information instead of the comparison of the shooting date / time information, description of other similar parts is omitted.

図10に、本変形例におけるスライドショー表示処理を示す。当該処理及びその処理において実行される各処理は、CPU20と記憶部21に記憶されたプログラム及びデータとの協働によるソフトウェア処理により実現するものである。   FIG. 10 shows a slide show display process in this modification. The processing and each processing executed in the processing are realized by software processing in cooperation with the CPU 20 and programs and data stored in the storage unit 21.

図10に示すステップS51〜55は、実施の形態2のステップS21〜25と同様の動作であるため、説明は省略する。また、図10に示すステップS62以降の動作は、実施の形態2のステップS34〜41と同様であるため、図示及び説明は省略する。   Steps S51 to S55 shown in FIG. 10 are the same operations as steps S21 to S25 of the second embodiment, and a description thereof will be omitted. Further, since the operations after step S62 shown in FIG. 10 are the same as steps S34 to S41 of the second embodiment, illustration and description thereof are omitted.

複数の再生対象画像が撮影日時順に並び替えられ、第1画像A及び第2画像Bが指定された後、指定された第1画像A及び第2画像Bの付加情報からそれぞれの撮影制御情報としての露出値が読み出され(ステップS56)、第1画像Aの露出値と第2画像Bの露出値が比較される(ステップS57)。   After a plurality of reproduction target images are rearranged in order of shooting date and time, and the first image A and the second image B are designated, the additional information of the designated first image A and the second image B is used as respective shooting control information. Is read (step S56), and the exposure value of the first image A and the exposure value of the second image B are compared (step S57).

そして、第1画像Aと第2画像Bとの露出値の比較結果が、一方の露出値よりも他方の露出値が予め設定されている倍率(例えば、2倍)以上であるか否かが判別される(ステップS58)。   Then, whether the comparison result of the exposure values of the first image A and the second image B is equal to or greater than a preset magnification (for example, 2 times) of the other exposure value than the one exposure value. A determination is made (step S58).

露出値の比較結果が2倍未満であると判別された場合(ステップ58;No)、第1画像A及び第2画像Bの付加情報からそれぞれの機種情報(例えば、機種名)が読み出され(ステップS59)、第1画像Aと第2画像Bの機種名が異なるか否かが判別される(ステップS60)。   When it is determined that the comparison result of the exposure values is less than twice (step 58; No), each model information (for example, model name) is read from the additional information of the first image A and the second image B. (Step S59), it is determined whether or not the model names of the first image A and the second image B are different (Step S60).

第1画像Aと第2画像Bの機種名が異なると判別された場合(ステップS60;Yes)又は露出値の比較結果が2倍以上であると判別された場合(ステップS58;Yes)、第1画像Aの画像番号が区切テーブルに記憶される(ステップS61)。   When it is determined that the model names of the first image A and the second image B are different (step S60; Yes), or when it is determined that the comparison result of the exposure values is twice or more (step S58; Yes), The image number of one image A is stored in the separation table (step S61).

第1画像Aの画像番号が区切テーブルに記憶された後(ステップS61後)又は第1画像Aと第2画像Bの機種名が異ならない(同一機種名)と判別された場合(ステップS60;No)、第2画像Bは、撮影日時順に並べ替えられた再生対象画像のうち、最終番目の再生対象画像であるか否かが判別される(ステップS62)。   After the image number of the first image A is stored in the separation table (after step S61) or when it is determined that the model names of the first image A and the second image B are not different (same model name) (step S60; No), it is determined whether or not the second image B is the last reproduction target image among the reproduction target images rearranged in order of photographing date and time (step S62).

第2画像Bが最終番目の再生対象画像ではないと判別された場合(ステップS62;No)、第2画像Bが第1画像Aとして指定され(ステップS63)、ステップS55に戻る。   When it is determined that the second image B is not the final reproduction target image (step S62; No), the second image B is designated as the first image A (step S63), and the process returns to step S55.

第2画像Bが最終番目の再生対象画像であると判別された場合(ステップS62;Yes)実施の形態2のステップS34に進む。   When it is determined that the second image B is the final reproduction target image (step S62; Yes), the process proceeds to step S34 of the second embodiment.

このように、撮影日時順に並べ替えられた複数の再生対象画像が順次表示される場合(スライドショー表示される場合)、撮影日時が隣接する再生対象画像相互間の露出値の比較結果と機種名の比較結果との組み合わせ基づいて、相互間の露出値の差が予め設定された値よりも大きい場合又は機種名が異なる場合は、表示される再生対象画像の再生時間が、次順位の再生対象画像の再生時間よりも長くなるように設定されるため、ユーザに対して順次表示される再生対象画像間の露出値の差異によって異なる空間的な違和感及び撮像装置の性能の差異によって異なる空間的な違和感のないスライドショー表示を実現することができる。   In this way, when a plurality of playback target images rearranged in order of shooting date / time are displayed sequentially (when a slide show is displayed), the comparison result of the exposure value between the playback target images adjacent to each other and the model name Based on the combination with the comparison result, when the difference between the exposure values is larger than a preset value or the model name is different, the playback time of the displayed playback target image is the next playback target image. Since the playback time is set to be longer than the playback time, the spatial discomfort varies depending on the exposure value difference between the images to be reproduced that are sequentially displayed to the user, and the spatial discomfort varies depending on the performance of the imaging device. Slideshow display without any problem can be realized.

実施の形態1における画像処理装置1の構成を示すブロック図である。1 is a block diagram illustrating a configuration of an image processing apparatus 1 according to Embodiment 1. FIG. 実施の形態1おけるスライドショー表示処理である。It is a slide show display process in the first embodiment. 図3(a)は、実施の形態1における撮影日時順に並び替えられた複数の再生対象画像の一覧であり、図3(b)は、図3(a)においてスライドショー表示される再生対象画像毎の再生時間である。FIG. 3A shows a list of a plurality of reproduction target images rearranged in order of shooting date and time in the first embodiment, and FIG. 3B shows each reproduction target image displayed as a slide show in FIG. Playback time. 実施の形態2における画像処理装置2の構成を示すブロック図である。6 is a block diagram illustrating a configuration of an image processing apparatus 2 according to Embodiment 2. FIG. 記憶部21に記憶される付加情報が付加された撮影画像の画像データ構成の一例である。It is an example of the image data structure of the picked-up image to which the additional information memorize | stored in the memory | storage part 21 was added. 記憶部21に記憶される区切テーブルDTの一例である。It is an example of the division | segmentation table DT memorize | stored in the memory | storage part 21. FIG. 実施の形態2おけるスライドショー表示処理である。It is a slide show display process in Embodiment 2. 実施の形態2おけるスライドショー表示処理である(図7の続き)。This is a slide show display process in the second embodiment (continuation of FIG. 7). 図9(a)は、実施の形態2における撮影日時順に並び替えられた複数の再生対象画像の一覧であり、図9(b)は、図9(a)においてスライドショー表示される再生対象画像毎の再生時間である。FIG. 9A shows a list of a plurality of reproduction target images rearranged in order of shooting date and time in the second embodiment, and FIG. 9B shows each reproduction target image displayed as a slide show in FIG. Is the playback time. 実施の形態2の変形例におけるスライドショー表示処理である。It is a slide show display process in the modification of Embodiment 2. FIG.

符号の説明Explanation of symbols

1、2 画像処理装置
10、20 CPU
11、21 記憶部
12 記録媒体読出部
13 入力部
14 表示部
15 通信部
16 バス
D1 画像データ
d1 画像番号
d2 メーカ名
d3 機種名
d4 撮影日時情報
d5 撮影位置情報
d6 露出値
d10 実画像データ
DT 区切テーブル
d21、d22 画像番号
L 距離
T 基準再生時間
Ti 時間間隔
Tp 再生時間
1, 2 Image processing device 10, 20 CPU
11, 21 Storage unit 12 Recording medium reading unit 13 Input unit 14 Display unit 15 Communication unit 16 Bus D1 Image data d1 Image number d2 Manufacturer name d3 Model name d4 Shooting date / time information d5 Shooting position information d6 Exposure value d10 Actual image data DT Delimiter Tables d21 and d22 Image number L Distance T Reference playback time Ti Time interval Tp Playback time

Claims (6)

撮影日時情報と撮影画像が撮影された際にユーザが撮像装置に対して指定した撮影制御情報とを含む付加情報が付加された複数の撮影画像を記憶する記憶手段と、
前記撮影画像を表示する表示手段と、
前記記憶手段に記憶されている前記複数の撮影画像から前記表示手段に表示する複数の再生対象画像を選択する選択操作手段と、
撮影日時順に並べ替えられた前記複数の再生対象画像に対し、撮影日時が隣接する再生対象画像相互間の前記付加情報に含まれる撮影日時情報と撮影制御情報を比較する比較手段と、
前記複数の再生対象画像を前記表示手段に順次表示させる場合は、前記撮影日時情報と撮影制御情報の比較結果に基づいて再生対象画像の再生時間を制御する制御手段と、
を備える画像処理装置。
Storage means for storing a plurality of captured images to which additional information including imaging date and time information and imaging control information designated by the user when the captured image is captured is added;
Display means for displaying the captured image;
Selection operation means for selecting a plurality of reproduction target images to be displayed on the display means from the plurality of photographed images stored in the storage means;
Comparison means for comparing the shooting control information with the shooting date and time information included in the additional information between the playback target images adjacent to each other for the plurality of playback target images rearranged in order of shooting date and time ;
In the case where the plurality of reproduction target images are sequentially displayed on the display unit, a control unit that controls a reproduction time of the reproduction target image based on a comparison result between the shooting date / time information and the shooting control information;
An image processing apparatus comprising:
前記付加情報は、前記撮影画像が撮影された位置を示す撮影位置情報を含み、
前記比較手段は、
前記撮影日時が隣接する再生対象画像相互間の撮影位置情報を比較し、
前記制御手段は、当該比較結果に基づいて前記再生時間を制御すること、
を特徴とする請求項に記載の画像処理装置。
The additional information includes shooting position information indicating a position where the shot image is shot,
The comparison means includes
Compare the shooting position information between the reproduction target images adjacent to each other with the shooting date and time,
The control means controls the playback time based on the comparison result;
The image processing apparatus according to claim 1 .
前記比較手段は、前記撮影日時が隣接する再生対象画像相互間の撮影位置の距離を算出し、算出された撮影位置の距離が予め設定されている基準距離以上であるか否かを判別し、
前記制御手段は、前記撮影位置の距離が前記基準距離以上であると判別された場合、前記再生時間を次順位の再生対象画像の再生時間よりも長くなるように制御すること、
を特徴とする請求項に記載の画像処理装置。
The comparison means calculates the distance between the shooting positions of the reproduction target images adjacent to each other with the shooting date and time, and determines whether or not the calculated distance between the shooting positions is equal to or greater than a preset reference distance.
The control means, when it is determined that the distance of the shooting position is greater than or equal to the reference distance, controlling the playback time to be longer than the playback time of the next playback target image;
The image processing apparatus according to claim 2 .
前記付加情報は、前記撮影画像を撮影した撮像装置を判別する機種情報を含み、
前記比較手段は、
前記撮影日時が隣接する再生対象画像相互間の機種情報を比較し、
前記制御手段は、当該比較結果に基づいて前記再生時間を制御すること、
を特徴とする請求項に記載の画像処理装置。
The additional information includes model information for determining an imaging device that captured the captured image,
The comparison means includes
Compare the model information between the playback target images adjacent to the shooting date and time,
The control means controls the playback time based on the comparison result;
The image processing apparatus according to claim 1 .
前記付加情報は、複数の情報を有し、
前記比較手段は、
前記撮影日時が隣接する再生対象画像相互間において、前記付加情報に含まれる複数の情報毎に比較を行い、
前記制御手段は、当該複数の比較結果に基づいて前記再生時間を制御すること、
を特徴とする請求項からのいずれか一項に記載の画像処理装置。
The additional information includes a plurality of information,
The comparison means includes
A comparison is made for each of a plurality of pieces of information included in the additional information, between the reproduction target images adjacent to each other with the shooting date and time,
The control means controls the playback time based on the plurality of comparison results;
The image processing apparatus according to any one of claims 1 to 4 , wherein
コンピュータを、
撮影日時情報と撮影画像が撮影された際にユーザが撮像装置に対して指定した撮影制御情報とを含む付加情報が付加された複数の撮影画像を記憶する記憶手段と、
前記撮影画像を表示する表示手段と、
前記記憶手段に記憶されている前記複数の撮影画像から前記表示手段に表示する複数の再生対象画像を選択する選択操作手段と、
撮影日時順に並べ替えられた前記複数の再生対象画像に対し、撮影日時が隣接する再生対象画像相互間の前記付加情報に含まれる撮影日時情報と撮影制御情報を比較する比較手段と、
前記複数の再生対象画像を前記表示手段に順次表示させる場合は、前記撮影制御情報の比較結果に基づいて再生対象画像の再生時間を制御する制御手段と、
として機能させることを特徴とするプログラム。
Computer
Storage means for storing a plurality of captured images to which additional information including imaging date / time information and imaging control information designated by the user for the imaging device when the captured image is captured ;
Display means for displaying the captured image;
Selection operation means for selecting a plurality of reproduction target images to be displayed on the display means from the plurality of photographed images stored in the storage means;
Comparison means for comparing the shooting control information with the shooting date and time information included in the additional information between the playback target images adjacent to each other for the plurality of playback target images rearranged in order of shooting date and time ;
In the case of sequentially displaying the plurality of reproduction target images on the display unit, a control unit that controls a reproduction time of the reproduction target image based on a comparison result of the shooting control information;
A program characterized by functioning as
JP2005075147A 2005-03-16 2005-03-16 Image processing apparatus and program Expired - Fee Related JP4403990B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005075147A JP4403990B2 (en) 2005-03-16 2005-03-16 Image processing apparatus and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005075147A JP4403990B2 (en) 2005-03-16 2005-03-16 Image processing apparatus and program

Publications (2)

Publication Number Publication Date
JP2006261933A JP2006261933A (en) 2006-09-28
JP4403990B2 true JP4403990B2 (en) 2010-01-27

Family

ID=37100697

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005075147A Expired - Fee Related JP4403990B2 (en) 2005-03-16 2005-03-16 Image processing apparatus and program

Country Status (1)

Country Link
JP (1) JP4403990B2 (en)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009088578A (en) * 2007-09-27 2009-04-23 Fujifilm Corp Image display device and image display method
JP2009303003A (en) * 2008-06-16 2009-12-24 Nikon Corp Slide show automatic creation system and slide show automatic creation program
JP5217669B2 (en) * 2008-06-16 2013-06-19 株式会社ニコン Automatic slide show creation system
JP5217670B2 (en) * 2008-06-16 2013-06-19 株式会社ニコン Automatic slide show creation system
JP2010177731A (en) * 2009-01-27 2010-08-12 Nikon Corp Image reproducing device and imaging apparatus
US9023273B2 (en) 2009-08-18 2015-05-05 Lifecell Corporation Method for processing tissues
WO2011048780A1 (en) * 2009-10-23 2011-04-28 パナソニック株式会社 Image playback device and image playback method
JP5733615B2 (en) * 2011-03-30 2015-06-10 カシオ計算機株式会社 Image display device, image display program, and image display system
JP5644814B2 (en) * 2011-06-30 2014-12-24 キヤノンマーケティングジャパン株式会社 Information processing apparatus, information processing system, control method, information processing method, and program thereof
JP2012070435A (en) * 2011-12-09 2012-04-05 Casio Comput Co Ltd Image reproduction controlling device, image reproduction controlling program, and image reproduction controlling method
CN105447150B (en) 2015-11-26 2019-04-16 小米科技有限责任公司 Method for playing music, device and terminal device based on face photograph album

Also Published As

Publication number Publication date
JP2006261933A (en) 2006-09-28

Similar Documents

Publication Publication Date Title
JP4403990B2 (en) Image processing apparatus and program
JP2006260029A (en) Image processor and program
JP5374016B2 (en) Method and apparatus for managing image display of a digital image display device
US8824745B2 (en) Map information display apparatus, map information display method, and program
US20130242042A1 (en) Monitoring system, monitoring method, computer program, and storage medium
US20050158028A1 (en) Image processing apparatus
CN101304466B (en) Information processing apparatus an image display method
US20060039674A1 (en) Image editing apparatus, method, and program
US7672977B2 (en) Image reproducing apparatus, method of controlling same and control program therefor
CN102148935A (en) Image composition determining apparatus and image composition determining method
JP2005110097A (en) Imaging apparatus and image pickup method
US20090103817A1 (en) Digital image processing apparatus, a method of controlling the same, and a digital image compression method
JP2006279119A (en) Image reproducing device and program
JP4573716B2 (en) Display control device, camera, display control method, program
JP2011009976A (en) Video reproducing apparatus
US20050120307A1 (en) Image taking apparatus
JP2001249653A (en) Picture display method and device, and electronic camera
US6469698B2 (en) Image display apparatus
JP2006279118A (en) Image reproducing device and program
WO2015183666A1 (en) Camera for still images and videos with segment-summarization by content reduction
JP2006500678A (en) Portable computer device
JP2006041586A (en) Video reproducing and displaying apparatus
CN100442823C (en) Image display device, camera and their display method
JP4366487B2 (en) Image processing apparatus and program
JP2007241353A (en) Information processing device, method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070625

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090814

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090818

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090914

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091013

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091026

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121113

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4403990

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131113

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees