JP4347752B2 - Electronic album display system, electronic album display method, remote controller, and remote control program - Google Patents

Electronic album display system, electronic album display method, remote controller, and remote control program Download PDF

Info

Publication number
JP4347752B2
JP4347752B2 JP2004170326A JP2004170326A JP4347752B2 JP 4347752 B2 JP4347752 B2 JP 4347752B2 JP 2004170326 A JP2004170326 A JP 2004170326A JP 2004170326 A JP2004170326 A JP 2004170326A JP 4347752 B2 JP4347752 B2 JP 4347752B2
Authority
JP
Japan
Prior art keywords
music
image
images
unit
schedule
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004170326A
Other languages
Japanese (ja)
Other versions
JP2005341511A (en
Inventor
史都男 土生田
和生 塩田
一 白坂
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2004170326A priority Critical patent/JP4347752B2/en
Publication of JP2005341511A publication Critical patent/JP2005341511A/en
Application granted granted Critical
Publication of JP4347752B2 publication Critical patent/JP4347752B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Details Of Television Systems (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Television Signal Processing For Recording (AREA)

Description

本発明は、電子アルバム表示システム、電子アルバム表示方法、リモートコントローラ、及びリモートコントロールプログラムに関する。特に本発明は、複数の画像を含む電子アルバムを表示する電子アルバム表示システム、及び電子アルバム表示方法、並びに当該電子アルバム表示システムにおいて用いられるリモートコントローラ、及びリモートコントロールプログラムに関する。   The present invention relates to an electronic album display system, an electronic album display method, a remote controller, and a remote control program. In particular, the present invention relates to an electronic album display system for displaying an electronic album including a plurality of images, an electronic album display method, a remote controller used in the electronic album display system, and a remote control program.

近年、デジタルカメラが急速に普及しており、デジタルカメラの利用者は、プリントされていないデジタル画像データを数多く所有している。また、近年、ネガフィルムやプリント済みの写真をデジタイズし、デジタル画像データを作成するサービスが行われている。しかし、利用者がこれらのデジタル画像データを参照するためには、パーソナルコンピュータ等の情報機器を利用する必要があり、手軽さに欠けていた。   In recent years, digital cameras have been rapidly spread, and users of digital cameras have many unprinted digital image data. In recent years, services for digitizing negative films and printed photographs to create digital image data have been provided. However, in order for a user to refer to these digital image data, it is necessary to use an information device such as a personal computer, which is not easy.

そこで、デジタル画像データをMPEG2フォーマット等のビデオストリームとして加工して、DVD−Videoディスク等を作成することにより、利用者が、DVDプレイヤー等を用いて、当該デジタル画像データをスライドショー形式で参照することができる技術が公開されている(例えば、特許文献1参照。)。   Therefore, by processing the digital image data as a video stream of the MPEG2 format or the like and creating a DVD-Video disc or the like, the user can refer to the digital image data in a slide show format using a DVD player or the like. The technique which can do is published (for example, refer patent document 1).

特開2003−259303JP 2003-259303 A

しかしながら、特許文献1に記載の技術によれば、既に作成されたDVD−Videoディスクに対して、スライドショーとして表示される画像の構成及び順序を変更することはできず、異なる構成及び順序で画像を表示する場合には、元のデジタル画像データから他のDVD−Videoディスクを作成する必要があった。このため、利用者が、作成されたDVD−Videoディスクを用いたスライドショーの内容に満足していない場合であっても、その内容を手軽に修正することができないという問題があった。   However, according to the technique described in Patent Document 1, the configuration and order of images displayed as a slide show cannot be changed with respect to an already created DVD-Video disc. In the case of display, it was necessary to create another DVD-Video disc from the original digital image data. For this reason, even if the user is not satisfied with the contents of the slide show using the created DVD-Video disc, there is a problem that the contents cannot be easily corrected.

また、特許文献1に記載の技術において、スライドショーのBGM(Background Music)をDVD−Videoディスクのオーディオストリームとして格納している場合、利用者が、そのBGMを、表示される画像により適したBGMに変更したいと所望しても、手軽に変更することができないという問題があった。   In the technique described in Patent Document 1, when a slide show BGM (Background Music) is stored as an audio stream of a DVD-Video disc, the user can convert the BGM into a BGM more suitable for the displayed image. There is a problem that even if it is desired to change, it cannot be easily changed.

そこで本発明は、上記の課題を解決することができ電子アルバム表示システム、電子アルバム表示方法、リモートコントローラ、及びリモートコントロールプログラムを提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。   Accordingly, an object of the present invention is to provide an electronic album display system, an electronic album display method, a remote controller, and a remote control program that can solve the above-described problems. This object is achieved by a combination of features described in the independent claims. The dependent claims define further advantageous specific examples of the present invention.

上記課題を解決するために、本発明の第1の形態においては、複数の画像を含む電子アルバムを表示する電子アルバム表示システムであって、複数の画像をフレーム画像として含むビデオストリームを格納しているビデオストリーム格納部と、ビデオストリームを再生する再生部と、無線通信によって再生部を遠隔操作するリモートコントローラと、再生部により再生されるビデオストリームを表示する表示部とを備え、リモートコントローラは、複数の画像のうち、少なくとも一部の画像を再生するスケジュール、及び当該少なくとも一部の画像のそれぞれについて、当該画像に固有の情報である画像情報を格納しているスケジュール格納部と、複数の楽曲のそれぞれを、当該楽曲に固有の情報である楽曲情報に対応付けて格納している楽曲格納部と、少なくとも一部の画像のそれぞれをスケジュールに従って再生させるべく、再生部を遠隔操作する遠隔操作部と、再生部により再生されている一の画像における画像情報、及び複数の楽曲のそれぞれにおける楽曲情報の関連度に基づいて、一の画像に対応する楽曲を、複数の楽曲から選択する楽曲選択部と、一の画像を含む、連続して再生される複数の画像が、再生部により再生されている場合に、当該一の画像に対応する楽曲を再生する楽曲再生部とを有する。   In order to solve the above problems, in a first aspect of the present invention, an electronic album display system for displaying an electronic album including a plurality of images, the video stream including the plurality of images as frame images is stored. A video stream storage unit, a playback unit that plays back the video stream, a remote controller that remotely controls the playback unit by wireless communication, and a display unit that displays the video stream played back by the playback unit, A schedule for reproducing at least some of the plurality of images, and a schedule storage unit that stores image information that is unique to each of the at least some of the images, and a plurality of music pieces Stored in association with music information, which is information unique to the music. A storage unit, a remote control unit for remotely operating the playback unit to play back each of at least some images according to a schedule, image information in one image played by the playback unit, and each of a plurality of music pieces Based on the degree of relevance of the music information, a music selection unit that selects a music corresponding to one image from a plurality of music, and a plurality of images that are continuously played back including the one image are reproduced by the reproduction unit. A music playback unit that plays back the music corresponding to the one image.

スケジュール格納部は、スケジュール、及び少なくとも一部の画像のそれぞれについて、当該画像の撮像日時を示す撮像日時情報を格納しており、楽曲格納部は、複数の楽曲のそれぞれを、当該楽曲について予め定められた期間を示す期間情報に対応付けて格納しており、楽曲選択部は、一の画像における撮像日時が含まれる期間を示す期間情報に対応する楽曲を、複数の楽曲から選択してもよい。楽曲選択部は、一の画像に対応する楽曲を選択する場合に、一の画像における撮像日時、及び表示部によって一の画像の直前に表示される他の画像における撮像日時の差が、予め定められた基準値より小さい場合、他の画像に対応するとして選択した楽曲を選択し、楽曲再生部は、他の画像に対応するとして選択された楽曲が、一の画像に対応するとして選択された場合、再生部による一の画像の再生時に、当該選択された楽曲を引き続き再生してもよい。   The schedule storage unit stores, for each of the schedule and at least a part of the images, imaging date / time information indicating the imaging date / time of the images, and the music storage unit predetermines each of the plurality of songs for the music. The music selection unit may select music corresponding to the period information indicating the period including the imaging date and time in one image from a plurality of music. . When the music selection unit selects music corresponding to one image, a difference between the imaging date and time in one image and the imaging date and time in another image displayed immediately before the one image by the display unit is determined in advance. If the selected reference value is smaller than the selected reference value, the music selected as corresponding to the other image is selected, and the music reproducing unit is selected as corresponding to the other image. In this case, the selected music piece may be continuously played back when the playback unit plays back one image.

スケジュール格納部は、スケジュール、及び少なくとも一部の画像のそれぞれについて、当該画像の撮像地点を示す撮像地点情報を格納しており、楽曲格納部は、複数の楽曲のそれぞれを、当該楽曲に関連する地域を示す地域情報に対応付けて格納しており、楽曲選択部は、一の画像における撮像地点が含まれる地域、及び複数の楽曲のそれぞれにおける地域情報の関連度に基づいて、複数の楽曲から楽曲を選択してもよい。スケジュール格納部は、スケジュール、及び少なくとも一部の画像のそれぞれについて、当該画像の内容を示す画像内容情報を格納しており、楽曲格納部は、複数の楽曲のそれぞれを、当該楽曲の内容を示す楽曲内容情報に対応付けて格納しており、楽曲選択部は、一の画像における画像内容情報、及び複数の楽曲のそれぞれにおける楽曲内容情報の関連度に基づいて、複数の楽曲から楽曲を選択してもよい。スケジュール格納部は、スケジュール、及び少なくとも一部の画像のそれぞれについて、当該画像の特徴を示すキーワードを格納しており、楽曲格納部は、複数の楽曲のそれぞれを、当該楽曲の特徴を示すキーワードに対応付けて格納しており、楽曲選択部は、一の画像におけるキーワード、及び複数の楽曲のそれぞれにおけるキーワードの関連度に基づいて、複数の楽曲から楽曲を選択してもよい。   The schedule storage unit stores, for each of the schedule and at least a part of the images, imaging point information indicating the imaging point of the image, and the music storage unit relates each of the plurality of songs to the music. The music selection unit is stored in association with the area information indicating the area, and the music selection unit is based on the area including the imaging point in one image and the relevance of the area information in each of the music. A song may be selected. The schedule storage unit stores, for each of the schedule and at least a part of the image, image content information indicating the content of the image, and the music storage unit indicates each of the plurality of music pieces and the content of the music piece. The music selection unit selects music from a plurality of music based on the image content information in one image and the relevance of the music content information in each of the plurality of music. May be. The schedule storage unit stores, for each of the schedule and at least some of the images, a keyword indicating the characteristics of the image, and the music storage unit sets each of the plurality of songs as a keyword indicating the characteristics of the music. The music selection unit may select music from a plurality of music based on a keyword in one image and a relevance degree of the keyword in each of the plurality of music.

楽曲再生部は、遠隔操作部が一の画像を再生させるべく再生部を遠隔操作したタイミングに同期して、当該一の画像に対応する楽曲の再生を開始してもよい。リモートコントローラは、楽曲再生部が楽曲を再生することにより出力する音声信号を、音声として出力する音声出力部を更に有してもよい。リモートコントローラは、楽曲再生部が楽曲を再生することにより出力する音声信号を、無線通信によって送信する音声信号送信部を更に有し、当該電子アルバム表示システムは、音声信号送信部により送信された音声信号を受信し、受信した音声信号を音声として出力する音声出力部を更に備えてもよい。   The music playback unit may start playback of the music corresponding to the one image in synchronization with the timing at which the remote control unit remotely operates the playback unit to play back one image. The remote controller may further include an audio output unit that outputs an audio signal that is output when the music reproducing unit reproduces the music as audio. The remote controller further includes an audio signal transmission unit that transmits, by wireless communication, an audio signal output by the music reproduction unit reproducing the music, and the electronic album display system includes the audio signal transmitted by the audio signal transmission unit. You may further provide the audio | voice output part which receives a signal and outputs the received audio | voice signal as an audio | voice.

また、本発明の第2の形態においては、複数の画像を含む電子アルバムを表示する電子アルバム表示方法であって、ビデオストリーム格納部は、複数の画像をフレーム画像として含むビデオストリームを格納しており、当該電子アルバム表示方法は、再生部がビデオストリームを再生する再生段階と、リモートコントローラが無線通信によって再生部を遠隔操作するリモートコントロール段階と、再生段階において再生されるビデオストリームを表示する表示段階とを備え、リモートコントローラは、複数の画像のうち、少なくとも一部の画像を再生するスケジュール、及び当該少なくとも一部の画像のそれぞれについて、当該画像に固有の情報である画像情報を格納しているスケジュール格納部と、複数の楽曲のそれぞれを、当該楽曲に固有の情報である楽曲情報に対応付けて格納している楽曲格納部とを有し、リモートコントロール段階は、少なくとも一部の画像のそれぞれをスケジュールに従って再生させるべく、再生部を遠隔操作する遠隔操作段階と、再生部により再生されている一の画像における画像情報、及び複数の楽曲のそれぞれにおける楽曲情報の関連度に基づいて、一の画像に対応する楽曲を、複数の楽曲から選択する楽曲選択段階と、一の画像を含む、連続して再生される複数の画像が、再生部により再生されている場合に、当該一の画像に対応する楽曲を再生する楽曲再生段階とを有する。   According to a second aspect of the present invention, there is provided an electronic album display method for displaying an electronic album including a plurality of images, wherein the video stream storage unit stores a video stream including the plurality of images as frame images. The electronic album display method includes a playback stage in which a playback section plays back a video stream, a remote control stage in which a remote controller remotely controls the playback section through wireless communication, and a display that displays the video stream played back in the playback stage. The remote controller stores a schedule for reproducing at least some of the plurality of images, and image information that is information specific to each of the at least some of the images. Each schedule storage unit and multiple songs A remote control stage for remotely operating the playback section to play back each of at least some of the images according to a schedule. And a music selection step of selecting music corresponding to one image from the plurality of music based on the image information in the one image being reproduced by the reproduction unit and the degree of relevance of the music information in each of the plurality of music And a music playback stage for playing back music corresponding to the one image when a plurality of continuously played images including the one image are played back by the playback unit.

また、本発明の第3の形態においては、ビデオストリームを再生する再生部を、無線通信によって遠隔操作するリモートコントローラであって、ビデオストリームは複数の画像をフレーム画像として含み、当該リモートコントローラは、複数の画像のうち、少なくとも一部の画像を再生するスケジュール、及び当該少なくとも一部の画像のそれぞれについて、当該画像に固有の情報である画像情報を格納しているスケジュール格納部と、複数の楽曲のそれぞれを、当該楽曲に固有の情報である楽曲情報に対応付けて格納している楽曲格納部と、少なくとも一部の画像のそれぞれをスケジュールに従って再生させるべく、再生部を遠隔操作する遠隔操作部と、再生部により再生されている一の画像における画像情報、及び複数の楽曲のそれぞれにおける楽曲情報の関連度に基づいて、一の画像に対応する楽曲を、複数の楽曲から選択する楽曲選択部と、一の画像を含む、連続して再生される複数の画像が、再生部により再生されている場合に、当該一の画像に対応する楽曲を再生する楽曲再生部とを備える。   Further, in the third embodiment of the present invention, the playback unit that plays back the video stream is a remote controller that is remotely operated by wireless communication, and the video stream includes a plurality of images as frame images, A schedule for reproducing at least some of the plurality of images, and a schedule storage unit that stores image information that is unique to each of the at least some of the images, and a plurality of music pieces Are stored in association with music information that is information unique to the music, and a remote control unit that remotely controls the playback unit to play back at least some of the images according to the schedule. Image information in one image being reproduced by the reproduction unit, and each of a plurality of music pieces Based on the degree of relevance of the music information in the music, a music selection unit that selects a music corresponding to one image from a plurality of music, and a plurality of images that are continuously played back including the one image are And a music playback unit that plays back the music corresponding to the one image when played back.

また、本発明の第4の形態においては、ビデオストリームを再生する再生部を無線通信によって遠隔操作するリモートコントローラを機能させるリモートコントロールプログラムであって、ビデオストリームは複数の画像をフレーム画像として含み、当該リモートコントロールプログラムは、リモートコントローラを、複数の画像のうち、少なくとも一部の画像を再生するスケジュール、及び当該少なくとも一部の画像のそれぞれについて、当該画像に固有の情報である画像情報を格納しているスケジュール格納部と、複数の楽曲のそれぞれを、当該楽曲に固有の情報である楽曲情報に対応付けて格納している楽曲格納部と、少なくとも一部の画像のそれぞれをスケジュールに従って再生させるべく、再生部を遠隔操作する遠隔操作部と、再生部により再生されている一の画像における画像情報、及び複数の楽曲のそれぞれにおける楽曲情報の関連度に基づいて、一の画像に対応する楽曲を、複数の楽曲から選択する楽曲選択部と、一の画像を含む、連続して再生される複数の画像が、再生部により再生されている場合に、当該一の画像に対応する楽曲を再生する楽曲再生部とを備えるリモートコントローラとして機能させる。   Further, in the fourth aspect of the present invention, a remote control program for causing a remote controller to remotely operate a playback unit for playing back a video stream by wireless communication, the video stream includes a plurality of images as frame images, The remote control program stores a remote controller, a schedule for reproducing at least some of the plurality of images, and image information that is information specific to the at least some of the images. A schedule storage unit, a music storage unit storing each of a plurality of pieces of music in association with music information that is information unique to the music, and at least a part of the images to be reproduced according to the schedule A remote control unit for remote control of the playback unit A music selection unit that selects music corresponding to one image from a plurality of music based on the image information in one image being reproduced by the unit and the degree of relevance of the music information in each of the plurality of music; In the case where a plurality of images that are continuously played back, including the above-described image, are played back by the playback unit, the remote controller is made to function as a remote controller including a music playback unit that plays back the music corresponding to the one image.

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた、発明となりうる。   The above summary of the invention does not enumerate all the necessary features of the present invention, and sub-combinations of these feature groups can also be the invention.

本発明によれば、電子アルバムに含まれる画像を、既に作成されたビデオストリームにおける構成及び順序とは異なる構成及び順序で、スライドショーとして表示することができると共に、表示される画像に適した楽曲をBGMとして再生することができる。   According to the present invention, images included in an electronic album can be displayed as a slide show in a configuration and order different from the configuration and order in an already created video stream, and music suitable for the displayed image can be displayed. It can be played back as BGM.

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。   Hereinafter, the present invention will be described through embodiments of the invention. However, the following embodiments do not limit the invention according to the scope of claims, and all combinations of features described in the embodiments are included. It is not necessarily essential for the solution of the invention.

図1は、本発明の実施形態に係る電子アルバム表示システム10の構成の一例を示すブロック図である。電子アルバム表示システム10は、複数の画像を含む電子アルバムを、当該複数の画像が順次切り替わるスライドショーとして表示する。電子アルバム表示システム10は、DVD−Videoディスク100、DVD−Video再生装置110、スケジュール生成装置120、リモートコントローラ130、及び表示部140を備える。また、リモートコントローラ130は、メモリカード200、遠隔操作部210、楽曲選択部220、楽曲再生部230、及び音声出力部240を有する。   FIG. 1 is a block diagram showing an example of the configuration of an electronic album display system 10 according to an embodiment of the present invention. The electronic album display system 10 displays an electronic album including a plurality of images as a slide show in which the plurality of images are sequentially switched. The electronic album display system 10 includes a DVD-Video disc 100, a DVD-Video playback device 110, a schedule generation device 120, a remote controller 130, and a display unit 140. In addition, the remote controller 130 includes a memory card 200, a remote operation unit 210, a music selection unit 220, a music playback unit 230, and an audio output unit 240.

DVD−Videoディスク100は、本発明におけるビデオストリーム格納部の一例であり、電子アルバムに含まれる複数の画像をフレーム画像として含むビデオストリームを格納している。具体的には、当該ビデオストリームは、MPEG2フォーマットのビデオストリームであり、電子アルバムに含まれる複数の画像のそれぞれを、例えば3秒等の予め定められた時間だけ連続するフレーム画像として含む。例えば、当該ビデオストリームは、電子アルバムに含まれる複数の画像のそれぞれを、MPEG2フォーマットにおける、他のフレーム画像を用いることなく再生可能なフレーム画像であるIピクチャとして含むと共に、当該Iピクチャに予め定められた時間だけ続くフレーム画像として、差分が0であるBピクチャまたはPピクチャを含んでいてよい。   The DVD-Video disc 100 is an example of a video stream storage unit in the present invention, and stores a video stream including a plurality of images included in an electronic album as frame images. Specifically, the video stream is an MPEG2 format video stream, and each of the plurality of images included in the electronic album is included as a frame image that is continuous for a predetermined time such as 3 seconds. For example, the video stream includes each of a plurality of images included in the electronic album as an I picture that is a frame image that can be reproduced without using other frame images in the MPEG2 format, and is determined in advance as the I picture. As a frame image that lasts for a predetermined time, a B picture or a P picture with a difference of 0 may be included.

また、当該ビデオストリームは、電子アルバムに含まれる複数の画像を示すフレーム画像に加えて、それぞれの画像が切り替わる位置に、例えばワイプ等のトランジション効果を示すフレーム画像を含んでいてもよく、また、それぞれの画像もしくは連続する一連の画像に先だって、当該画像のタイトル等を示すフレーム画像を含んでいてもよい。また、当該ビデオストリームは、電子アルバムに含まれる複数の画像のそれぞれに対するアクセスを容易にするべく、当該画像を示す1以上の連続するフレーム画像を、DVD−Video規格におけるPTT(Part of Title)、即ちチャプターとして定義してよい。   The video stream may include a frame image showing a transition effect such as a wipe at a position where each image is switched in addition to a frame image showing a plurality of images included in the electronic album. Prior to each image or a series of consecutive images, a frame image indicating the title of the image may be included. In addition, in order to facilitate access to each of the plurality of images included in the electronic album, the video stream includes one or more continuous frame images indicating the images as PTT (Part of Title) in the DVD-Video standard, That is, it may be defined as a chapter.

DVD−Videoディスク100は、DVD−ROMやDVD−R等の書き換え不可能な記録媒体、及びDVD−RW等の書き換え可能な記録媒体の何れであってもよいが、記録されたビデオストリームを利用者が誤って消去してしまう危険性が低いので、書き換え不可能な記録媒体であることが好ましい。DVD−Videoディスク100は、例えば、利用者からの依頼を受けたラボ等のサービスプロバイダによって、利用者により提出されたネガフィルム、プリント済みの写真、及びデジタルカメラの記録媒体等を用いて作成されてよい。そして、利用者は、作成されたDVD−Videoディスク100をDVDプレイヤー等で再生することにより、電子アルバムに含まれる複数の画像が、DVD−Videoディスク100の作成時に予め定められたスケジュールで切り替わって表示されるスライドショーとして楽しむことができる。   The DVD-Video disc 100 may be either a non-rewritable recording medium such as a DVD-ROM or DVD-R or a rewritable recording medium such as a DVD-RW, but uses a recorded video stream. It is preferable that the recording medium is not rewritable because the risk of accidental erasure by a user is low. The DVD-Video disc 100 is created by using, for example, a negative film submitted by the user, a printed photograph, a recording medium of a digital camera, or the like by a service provider such as a laboratory that has received a request from the user. It's okay. Then, the user reproduces the created DVD-Video disc 100 with a DVD player or the like, so that a plurality of images included in the electronic album are switched according to a schedule predetermined when the DVD-Video disc 100 is created. You can enjoy it as a slide show that is displayed.

ここで、スケジュールとは、スライドショーとして再生及び表示される画像の構成、画像が再生及び表示される順序、及びそれぞれの画像が再生及び表示される時間等を示す情報を含んでいる。つまり、予め定められたスケジュールとは、電子アルバムに含まれる複数の画像が、DVD−Videoディスク100に格納されたビデオストリームにフレーム画像として含まれる順序で、それぞれの画像を示すフレーム画像が連続する時間だけ、順次表示されるスケジュールを示す。   Here, the schedule includes information indicating the configuration of images to be reproduced and displayed as a slide show, the order in which the images are reproduced and displayed, the time for which each image is reproduced and displayed, and the like. That is, the predetermined schedule means that a plurality of images included in the electronic album are consecutively included in a video stream stored in the DVD-Video disc 100 in the order in which the images are included as frame images. Shows a schedule that is displayed sequentially by time.

本発明の実施形態に係る電子アルバム表示システム10は、電子アルバムに含まれる画像が予め定められたスケジュールで表示されるべく作成されたビデオストリームを格納しているDVD−Videoディスク100を用いる場合であっても、電子アルバムに含まれる画像を、当該ビデオストリームにおける予め定められたスケジュールとは異なるスケジュールでスライドショーとして表示することを目的とする。
また、本発明の実施形態に係る電子アルバム表示システム10は、ビデオストリームにおける予め定められたスケジュールとは異なるスケジュールでスライドショーを表示する場合に、表示する画像に適した楽曲をBGMとして再生することを更なる目的とする。
The electronic album display system 10 according to the embodiment of the present invention uses a DVD-Video disc 100 that stores a video stream created so that images included in the electronic album are displayed on a predetermined schedule. Even if it exists, it aims at displaying the image contained in an electronic album as a slide show on a schedule different from the predetermined schedule in the said video stream.
In addition, the electronic album display system 10 according to the embodiment of the present invention reproduces music suitable for an image to be displayed as BGM when a slide show is displayed with a schedule different from a predetermined schedule in a video stream. For further purposes.

DVD−Video再生装置110は、例えばDVDプレイヤーであり、DVD−Videoディスク100に格納されているビデオストリームを再生し、当該ビデオストリームを示す映像信号を表示部140に出力する。また、DVD−Video再生装置110は、赤外線受光器等の無線通信手段を有し、リモートコントローラ130と無線通信を行う。なお、DVD−Video再生装置110は、本発明における再生部の一例である。   The DVD-Video playback device 110 is, for example, a DVD player, plays a video stream stored on the DVD-Video disc 100, and outputs a video signal indicating the video stream to the display unit 140. The DVD-Video playback device 110 includes wireless communication means such as an infrared receiver, and performs wireless communication with the remote controller 130. The DVD-Video playback device 110 is an example of a playback unit in the present invention.

スケジュール生成装置120は、例えばパーソナルコンピュータであり、利用者の指示に従い、DVD−Videoディスク100に格納されている情報に基づいてスライドショーのスケジュールを生成する。また、スケジュール生成装置120は、スライドショーにおいて再生される楽曲を、例えば、DVD−Videoディスク100やネットワークを経由して接続したサーバーホスト等から取得する。そして、スケジュール生成装置120は、生成したスケジュール、及び取得した楽曲をメモリカード200に記録する。   The schedule generation device 120 is a personal computer, for example, and generates a slide show schedule based on information stored in the DVD-Video disc 100 in accordance with a user instruction. Further, the schedule generation device 120 acquires the music played in the slide show from, for example, the DVD-Video disk 100 or a server host connected via a network. Then, the schedule generation device 120 records the generated schedule and the acquired music on the memory card 200.

リモートコントローラ130は、例えば赤外線通信等の無線通信によってDVD−Video再生装置110を遠隔操作する。メモリカード200は、リモートコントローラ130に対して交換可能に設けられる書き換え可能な記録媒体であり、スケジュール格納部202、及び楽曲格納部204を含む。メモリカード200は、例えば、フラッシュメモリ等の不揮発性メモリを有し、リモートコントローラ130に設けられたスロットに挿入されることにより、リモートコントローラ130に対して交換可能に設けられてよい。スケジュール格納部202は、DVD−Videoディスク100に格納されているビデオストリームに含まれる複数の画像のうち、スライドショーとして表示される少なくとも一部の画像を再生するスケジュールと、当該少なくとも一部の画像のそれぞれについて、当該画像に固有の情報である画像情報とを格納している。ここで、画像情報とは、例えば画像の撮像日時や撮像地点等を示す情報であってよい。楽曲格納部204は、スライドショーにおいて再生される複数の楽曲のそれぞれを、当該楽曲に固有の情報である楽曲情報に対応付けて格納している。ここで、楽曲情報とは、例えば、楽曲の内容に適した季節を示す期間等を示す情報であってよい。   The remote controller 130 remotely operates the DVD-Video playback device 110 by wireless communication such as infrared communication. The memory card 200 is a rewritable recording medium that is replaceable with respect to the remote controller 130, and includes a schedule storage unit 202 and a music storage unit 204. The memory card 200 has a non-volatile memory such as a flash memory, for example, and may be provided so as to be exchangeable with the remote controller 130 by being inserted into a slot provided in the remote controller 130. The schedule storage unit 202 reproduces at least a part of images displayed as a slide show among a plurality of images included in the video stream stored on the DVD-Video disc 100, and the at least part of the images. For each, image information that is unique to the image is stored. Here, the image information may be information indicating, for example, an image capturing date and time, an image capturing point, or the like. The music storage unit 204 stores each of a plurality of music reproduced in the slide show in association with music information that is information unique to the music. Here, the music information may be information indicating a period indicating a season suitable for the content of the music, for example.

遠隔操作部210は、電子アルバムに含まれる複数の画像のうち、少なくとも一部の画像のそれぞれを、スケジュール格納部202が格納しているスケジュールに従って再生させるべく、DVD−Video再生装置110を赤外線通信等の無線通信によって遠隔操作する。例えば、遠隔操作部210は、赤外線LED等を用いて、DVD−Video再生装置110に赤外線信号を送信することにより、DVD−Video再生装置110を遠隔操作する。ここで、遠隔操作部210が行うDVD−Video再生装置110の操作とは、例えば、再生の開始、再生の停止、再生の一時停止、次のチャプターへの再生位置の変更、前のチャプターへの再生位置の変更、及び任意のチャプターへの再生位置の変更等である。   The remote control unit 210 performs infrared communication with the DVD-Video playback device 110 so that at least some of the images included in the electronic album are played according to the schedule stored in the schedule storage unit 202. Remote control by wireless communication. For example, the remote operation unit 210 remotely operates the DVD-Video playback device 110 by transmitting an infrared signal to the DVD-Video playback device 110 using an infrared LED or the like. Here, the operations of the DVD-Video playback device 110 performed by the remote control unit 210 include, for example, playback start, playback stop, playback pause, change of playback position to the next chapter, and change to the previous chapter. For example, the playback position is changed, and the playback position is changed to an arbitrary chapter.

一般に、DVD−Video再生装置110が赤外線通信により遠隔操作される場合の通信内容は、DVD−Video再生装置110の機種毎に異なる。そこで、遠隔操作部210が、特定の機種のDVD−Video再生装置110のみに対応可能としてではなく、多様な機種のDVD−Video再生装置110に対応可能として設けられる場合、遠隔操作部210は、例えば、DVD−Video再生装置110の機種毎、及び当該機種における操作種別毎の、赤外線信号の波形等により示される通信内容を予め格納しており、利用者により指定されたDVD−Video再生装置110の機種に応じた波形の赤外線信号を送出することにより、多様な機種のDVD−Video再生装置110を制御してよい。なお、遠隔操作部210は、赤外線通信に代えて、ブルートゥース等の他の無線通信によりDVD−Video再生装置110を遠隔操作してもよい。また、遠隔操作部210は、遠隔操作することにより再生を指示した画像を示す情報を楽曲選択部220に出力する。   In general, the content of communication when the DVD-Video playback device 110 is remotely operated by infrared communication differs depending on the model of the DVD-Video playback device 110. Therefore, when the remote control unit 210 is provided not only for a specific model of the DVD-Video playback device 110 but also for various types of the DVD-Video playback device 110, the remote control unit 210 For example, the communication contents indicated by the waveform of the infrared signal and the like for each model of the DVD-Video playback device 110 and for each operation type in the model are stored in advance, and the DVD-Video playback device 110 specified by the user is stored. Various types of DVD-Video playback devices 110 may be controlled by sending infrared signals having waveforms corresponding to the models. Note that the remote operation unit 210 may remotely operate the DVD-Video playback device 110 by other wireless communication such as Bluetooth instead of infrared communication. Further, the remote operation unit 210 outputs information indicating an image instructed to be reproduced by remote operation to the music selection unit 220.

楽曲選択部220は、DVD−Video再生装置110により再生されている一の画像における画像情報と、楽曲格納部204に格納されている複数の楽曲のそれぞれにおける楽曲情報との関連度に基づいて、当該一の画像に対応する楽曲を、当該複数の楽曲から選択する。そして、楽曲選択部220は、選択した楽曲を楽曲再生部230に出力する。楽曲再生部230は、DVD−Video再生装置110により再生されている一の画像を含む、連続して再生される複数の画像が、DVD−Video再生装置110により再生されている場合に、楽曲選択部220により選択された当該一の画像に対応する楽曲を再生する。そして、楽曲再生部230は、再生している楽曲を示す音声信号を、音声出力部240に出力する。音声出力部240は、例えばリモートコントローラ130に設けられたスピーカであり、楽曲再生部230が楽曲を再生することにより出力した音声信号を、音声として出力する。表示部140は、例えば外部映像入力端子を備えるテレビ受像機であり、DVD−Video再生装置110により再生されるビデオストリームを示す映像信号を受け取って表示する。   The music selection unit 220 is based on the degree of association between the image information in one image being played back by the DVD-Video playback device 110 and the music information in each of a plurality of songs stored in the music storage unit 204. The music corresponding to the one image is selected from the plurality of music. Then, the music selection unit 220 outputs the selected music to the music playback unit 230. The music playback unit 230 selects a music when a plurality of continuously played images including one image played back by the DVD-Video playback device 110 are played back by the DVD-Video playback device 110. The music corresponding to the one image selected by the unit 220 is reproduced. Then, the music reproduction unit 230 outputs an audio signal indicating the music being reproduced to the audio output unit 240. The audio output unit 240 is, for example, a speaker provided in the remote controller 130, and outputs an audio signal output by the music reproduction unit 230 as a sound is output as sound. The display unit 140 is a television receiver including an external video input terminal, for example, and receives and displays a video signal indicating a video stream played by the DVD-Video playback device 110.

本発明の実施形態に係る電子アルバム表示システム10によれば、DVD−Videoディスク100に格納されているビデオストリームをDVD−Video再生装置110により再生する際に、リモートコントローラ130がDVD−Video再生装置110を遠隔操作することにより、当該ビデオストリームにおける予め定められたスケジュールとは異なるスケジュール、具体的にはスケジュール格納部202に格納されているスケジュールでスライドショーを表示することができる。従来の電子アルバム表示システムにおいては、利用者は、DVD−Videoディスク100に格納されているビデオストリームにおけるスケジュールとは異なるスケジュールでスライドショーを表示させたい場合、ラボ等に当該スケジュールに基づく新たなDVD−Videoディスクの作成を依頼したり、また、新たなDVD−Videoディスクを自ら作成したりする必要があった。しかし、本発明の実施形態に係るリモートコントローラ130を用いることによって、DVD−Videoディスク100と、DVDプレイヤーやテレビ受像機等の一般的な家庭用電気機器とを用いながらも、予め定められたスケジュールとは異なるスケジュールでスライドショーを表示することができるので、利用者の負担を軽減することができる。   According to the electronic album display system 10 according to the embodiment of the present invention, when the video stream stored in the DVD-Video disc 100 is played back by the DVD-Video playback device 110, the remote controller 130 is the DVD-Video playback device. By remotely operating 110, a slide show can be displayed with a schedule different from a predetermined schedule in the video stream, specifically, a schedule stored in the schedule storage unit 202. In the conventional electronic album display system, when the user wants to display a slide show with a schedule different from the schedule in the video stream stored on the DVD-Video disc 100, a new DVD- It was necessary to request creation of a Video disc or to create a new DVD-Video disc by itself. However, by using the remote controller 130 according to the embodiment of the present invention, a predetermined schedule can be used while using a DVD-Video disk 100 and general household electric appliances such as a DVD player and a television receiver. Since the slide show can be displayed with a different schedule, the burden on the user can be reduced.

また、本発明の実施形態に係る電子アルバム表示システム10によれば、リモートコントローラ130として、赤外線通信機能等の無線通信機能を有する携帯電話端末を利用することもできる。こうすることにより、リモートコントローラ130を別途購入するといった負担を利用者に強いることなく、予め定められたスケジュールとは異なるスケジュールでスライドショーを表示することができる。   Moreover, according to the electronic album display system 10 according to the embodiment of the present invention, a mobile phone terminal having a wireless communication function such as an infrared communication function can be used as the remote controller 130. By doing so, it is possible to display a slide show with a schedule different from a predetermined schedule without imposing the burden of separately purchasing the remote controller 130 on the user.

更に、本発明の実施形態に係る電子アルバム表示システム10によれば、スライドショーを鑑賞する複数の利用者のそれぞれがリモートコントローラ130を有することができる。これにより、1枚のDVD−Videoディスク100の再生時に、それぞれの利用者が有するリモートコントローラ130に挿入されたメモリカード200に格納されているスケジュールのそれぞれを順次切り替えつつ用いて、スライドショーを表示することができる。   Furthermore, according to the electronic album display system 10 according to the embodiment of the present invention, each of a plurality of users who appreciate a slide show can have the remote controller 130. As a result, during playback of one DVD-Video disc 100, a slide show is displayed using each schedule stored in the memory card 200 inserted in the remote controller 130 of each user while being sequentially switched. be able to.

また、従来の電子アルバム表示システムにおいては、DVD−Videoディスク100にオーディオストリームとして格納されている音声が、スライドショーにおけるBGMとして利用される場合がある。この場合、画像毎の表示時間が、通常、数秒程度であることから、複数の画像に渡って同一の楽曲がBGMとして利用されることが多い。すると、本発明の実施形態に係る電子アルバム表示システム10において、DVD−Video再生装置110におけるビデオストリームの再生位置を遠隔操作してスライドショーを表示する場合に、DVD−Videoディスク100に格納されているオーディオストリームをBGMとして利用すると、表示されている画像が切り替わる毎に、BGMが変化したり、また、楽曲の途中から再生されたりする場合があり、利用者に耳障りだと感じさせてしまう。しかし、本発明の実施形態に係る電子アルバム表示システム10によれば、DVD−Videoディスク100に格納されているオーディオストリームに代えて、リモートコントローラ130が有する楽曲格納部204に格納されている楽曲をBGMとして利用することができる。これにより、ビデオストリームのスケジュールとは異なるスケジュールでスライドショーを表示する場合であっても、複数の画像に渡って同一の楽曲をBGMとして再生したり、また、表示されている画像が切り替わるタイミングで楽曲を切り替えたりすることができるので、利用者にとって聴き心地のよいBGMを提供することができる。   In the conventional electronic album display system, the audio stored as an audio stream on the DVD-Video disc 100 may be used as BGM in a slide show. In this case, since the display time for each image is usually about several seconds, the same music is often used as BGM across a plurality of images. Then, in the electronic album display system 10 according to the embodiment of the present invention, when a slide show is displayed by remotely controlling the playback position of the video stream in the DVD-Video playback device 110, the DVD-Video disc 100 is stored. When an audio stream is used as BGM, every time the displayed image is switched, the BGM may change or may be played from the middle of the music, which makes the user feel uncomfortable. However, according to the electronic album display system 10 according to the embodiment of the present invention, the music stored in the music storage unit 204 of the remote controller 130 is used instead of the audio stream stored in the DVD-Video disc 100. It can be used as BGM. As a result, even when a slide show is displayed with a schedule different from the schedule of the video stream, the same music is played as BGM over a plurality of images, or the music is displayed at the timing when the displayed images are switched. Therefore, it is possible to provide a BGM that is comfortable for the user to listen to.

また、表示されている画像の画像情報に対して関連度の高い楽曲情報を有する楽曲をBGMとして選択することができるので、画像と楽曲との一体感を利用者に強く感じさせることのできる、品質の高いスライドショーを提供することができる。更に、これにより、利用者が、BGMとなる楽曲を画像毎に指定する必要がなくなるので、利用者の負担を軽減することができる。また、DVD−Videoディスク100に格納されているオーディオストリームではなく、リモートコントローラ130が有するメモリカード200に格納されている楽曲をBGMとして再生することにより、利用者が、自分自身の好みに応じた楽曲をBGMとして利用することができる。更に、BGMとして再生される楽曲の音声を、リモートコントローラ130が有する音声出力部240を用いて出力することにより、DVD−Video再生装置110や表示部140として、DVDプレイヤーやテレビ受像機等の一般的な家庭用電気機器を用いながらも、楽曲格納部204に格納されている楽曲をBGMとして再生することができる。   Moreover, since the music which has music information with high relevance with respect to the image information of the displayed image can be selected as BGM, it is possible to make the user feel a sense of unity between the image and the music. A high-quality slide show can be provided. Furthermore, this eliminates the need for the user to designate the music to be BGM for each image, thereby reducing the burden on the user. In addition, by playing music stored in the memory card 200 of the remote controller 130 as BGM instead of the audio stream stored in the DVD-Video disc 100, the user can respond to his / her own preference. The music can be used as BGM. Furthermore, by outputting the sound of the music played back as BGM using the audio output unit 240 of the remote controller 130, the DVD-Video playback device 110 and the display unit 140 can be used as a DVD player, a television receiver, or the like. The music stored in the music storage unit 204 can be reproduced as BGM while using a typical household electric appliance.

なお、電子アルバム表示システム10の構成は、本図に示した構成には限定されず、本図に示した構成に多様な変更を加えてもよい。例えば、DVD−Videoディスク100に格納されているビデオストリームは、MPEG2フォーマットによるビデオストリームでなく、例えばMPEGフォーマットやMPEG4フォーマット等の、他のフォーマットによるビデオストリームであってもよい。また、DVD−Videoディスク100は、VideoCDディスク等の、他のフォーマットまたは他の規格に基づいた、光学記録媒体、磁気記録媒体、光磁気記録媒体、半導体記録媒体等の記録媒体であってもよい。この場合、DVD−Video再生装置110は、それらの記録媒体を用いてビデオストリームを再生することのできる再生装置であってよい。また、リモートコントローラ130は、メモリカード200に代えて、他の交換可能な記録媒体を有してよく、また、交換可能な記録媒体に代えて、交換不可能な不揮発性メモリ等の記録媒体を有してもよい。ここで、リモートコントローラ130が交換不可能な記録媒体を有している場合、スケジュール生成装置120は、リモートコントローラ130と有線通信または無線通信を行うことにより、生成したスケジュールを当該記録媒体に格納していてよい。また、リモートコントローラ130は、有線通信または無線通信を行う通信手段を有し、DVD−Videoディスク100の作成元等により作成されたスケジュールをインターネット等のネットワークを介して取得すると共に、取得したスケジュールに基づいてDVD−Video再生装置110を制御することにより、当該スケジュールに基づいたスライドショーを表示させてもよい。   The configuration of the electronic album display system 10 is not limited to the configuration shown in the figure, and various changes may be made to the configuration shown in the figure. For example, the video stream stored in the DVD-Video disc 100 may not be a video stream in the MPEG2 format but a video stream in another format such as the MPEG format or the MPEG4 format. The DVD-Video disc 100 may be a recording medium such as an optical recording medium, a magnetic recording medium, a magneto-optical recording medium, or a semiconductor recording medium based on other formats or other standards such as a Video CD disk. . In this case, the DVD-Video playback device 110 may be a playback device that can play back video streams using these recording media. In addition, the remote controller 130 may have another exchangeable recording medium instead of the memory card 200, and a non-replaceable recording medium such as a non-volatile memory instead of the exchangeable recording medium. You may have. Here, when the remote controller 130 has a non-replaceable recording medium, the schedule generation device 120 stores the generated schedule in the recording medium by performing wired communication or wireless communication with the remote controller 130. It may be. In addition, the remote controller 130 has communication means for performing wired communication or wireless communication. The remote controller 130 acquires a schedule created by the creator of the DVD-Video disk 100 via a network such as the Internet, and A slide show based on the schedule may be displayed by controlling the DVD-Video playback device 110 based on the schedule.

また、本例においては、リモートコントローラ130は、音声出力部240を含むとして説明したが、これに変えて、楽曲再生部230が楽曲を再生することにより出力した音声信号を、例えば赤外線通信等の無線通信によって送信する音声信号送信部を含んでいてもよい。この場合、電子アルバム表示システム10は、当該音声信号送信部により送信された音声信号を受信すると共に、受信した音声信号を音声として出力する音声出力部を、リモートコントローラ130の外部に備えていてもよい。こうすることにより、リモートコントローラ130がスピーカ等の音声出力手段を有していない場合であっても、楽曲格納部204に格納されている楽曲を、スライドショーのBGMとして再生することができる。   Further, in this example, the remote controller 130 has been described as including the audio output unit 240, but instead of this, the audio signal output by the music reproducing unit 230 reproducing the music is converted into, for example, infrared communication or the like. An audio signal transmitting unit that transmits by wireless communication may be included. In this case, the electronic album display system 10 may include an audio output unit that receives the audio signal transmitted by the audio signal transmission unit and outputs the received audio signal as audio outside the remote controller 130. Good. By doing so, even if the remote controller 130 does not have an audio output means such as a speaker, the music stored in the music storage unit 204 can be reproduced as a slide show BGM.

図2は、本発明の実施形態に係るスケジュール格納部202の第1の例を示す。また、図3は、本発明の実施形態に係る楽曲格納部204の第1の例を示す。スケジュール格納部202は、スライドショーのスケジュールとして、電子アルバムに含まれる複数の画像のうち、少なくとも一部の画像の再生順序、及び当該少なくとも一部の画像のそれぞれの、ビデオストリームにおける位置を示す情報を格納している。具体的には、スケジュール格納部202は、スライドショーのスケジュールとして、当該少なくとも一部の画像の再生順序、及び当該少なくとも一部の画像のそれぞれが含まれるチャプターを示す情報を格納している。より具体的には、スケジュール格納部202は、図2に示すように、電子アルバムに含まれる複数の画像のうち、スライドショーにおいて表示される少なくとも一部の画像について、それぞれの画像が含まれるチャプター、即ちPTTを示す情報を、スライドショーとして表示される順に格納している。例えば、図2に示したスケジュールにおいては、スライドショーで最初に表示される画像は、3番目のチャプターにフレーム画像として含まれる。また、スケジュール格納部202は、スライドショーにおいて表示される画像のそれぞれの位置を示す情報として、当該画像が含まれるチャプターを示す情報に代えて、例えばビデオストリームの先頭等の予め定められた位置から当該画像までの再生時間を格納していてもよい。   FIG. 2 shows a first example of the schedule storage unit 202 according to the embodiment of the present invention. FIG. 3 shows a first example of the music storage unit 204 according to the embodiment of the present invention. The schedule storage unit 202 includes, as a slide show schedule, information indicating the playback order of at least some of the plurality of images included in the electronic album and the position of each of the at least some images in the video stream. Storing. Specifically, the schedule storage unit 202 stores information indicating a playback order of the at least some images and a chapter including each of the at least some images as a slide show schedule. More specifically, as shown in FIG. 2, the schedule storage unit 202 includes, for at least some images displayed in the slide show among a plurality of images included in the electronic album, a chapter including each image, That is, information indicating PTT is stored in the order in which the slide show is displayed. For example, in the schedule shown in FIG. 2, the first image displayed in the slide show is included as a frame image in the third chapter. Also, the schedule storage unit 202 replaces the information indicating the position of each image displayed in the slide show with the information indicating the chapter including the image, for example, from the predetermined position such as the head of the video stream. The playback time up to the image may be stored.

更に、スケジュール格納部202は、スライドショーのスケジュールとして、スライドショーにおいて表示される画像のそれぞれについて、DVD−Video再生装置110が当該画像を再生させ続ける時間である再生持続時間、即ちスライドショーにおける当該画像の表示時間を格納している。例えば、図2に示したスケジュールにおいては、スライドショーで最初に表示される画像の再生持続時間は3秒である。   Furthermore, the schedule storage unit 202 displays the display duration of the images in the slide show, that is, the time during which the DVD-Video playback device 110 continues to play the images for each of the images displayed in the slide show as the slide show schedule. Stores time. For example, in the schedule shown in FIG. 2, the reproduction duration of the image displayed first in the slide show is 3 seconds.

更に、スケジュール格納部202は、スライドショーにおいて表示される画像のそれぞれについて、画像情報の一例である、当該画像の撮像日時を示す撮像日時情報を格納している。ここで、撮像日時情報とは、例えば、デジタルカメラ等がそれぞれの画像を撮像した際に、当該デジタルカメラが備えるカレンダー機能及び時計機能により取得された情報であってよい。また、楽曲格納部204は、例えば図3に示すように、スライドショーにおいて再生される複数の楽曲のそれぞれを、楽曲情報の一例である、当該楽曲について予め定められた期間を示す期間情報に対応付けて格納している。ここで、期間情報により示される期間とは、例えば「冬の曲」といった、それぞれの楽曲の内容に合った季節等を示す期間であってよく、また、例えば「1980年に流行した曲」といった、それぞれの楽曲に関連する時代や年代等を示す期間であってもよい。   Further, the schedule storage unit 202 stores imaging date / time information indicating the imaging date / time of the image, which is an example of image information, for each of the images displayed in the slide show. Here, the imaging date / time information may be, for example, information acquired by a calendar function and a clock function provided in the digital camera when the digital camera or the like captures each image. Further, for example, as shown in FIG. 3, the music storage unit 204 associates each of a plurality of music played in the slide show with period information indicating a predetermined period for the music, which is an example of music information. Stored. Here, the period indicated by the period information may be a period indicating a season suitable for the contents of each song such as “winter song”, for example, and “a song popular in 1980”, for example. It may be a period indicating an era or age related to each piece of music.

そして、楽曲選択部220は、DVD−Video再生装置110により再生されている画像における撮像日時が含まれる期間を示す期間情報に対応する楽曲を、楽曲格納部204に格納されている複数の楽曲から選択する。例えば、再生されている画像の撮像日時が、12月1日から2月28日の期間に含まれる場合、楽曲選択部220は、当該画像の再生中にBGMとして再生される楽曲として、楽曲300を選択する。   Then, the music selection unit 220 selects music corresponding to the period information indicating the period including the imaging date and time in the image being played back by the DVD-Video playback device 110 from the plurality of music stored in the music storage unit 204. select. For example, when the imaged date and time of the image being reproduced is included in the period from December 1st to February 28th, the music selection unit 220 sets the music 300 as music that is reproduced as BGM during the reproduction of the image. Select.

本発明の実施形態に係る電子アルバム表示システム10によれば、再生されている画像の撮像日時が含まれる季節、及び正月やクリスマスといった年次の行事等に合った楽曲、並びに当該画像の撮像日時が含まれる年代に流行した楽曲等を、当該画像の再生中にBGMとして再生することができる。これにより、スライドショーにおける、画像と楽曲との一体感を、利用者により強く感じさせることができる。   According to the electronic album display system 10 according to the embodiment of the present invention, the season including the date and time of the image being reproduced, the music suitable for the annual event such as the New Year or Christmas, and the image date and time of the image Can be reproduced as BGM during reproduction of the image. Thereby, the user can feel a sense of unity between the image and the music in the slide show more strongly.

図4は、本発明の実施形態に係るスケジュール格納部202の第2の例を示す。また、図5は、本発明の実施形態に係る楽曲格納部204の第2の例を示す。スケジュール格納部202は、スライドショーのスケジュールとして、電子アルバムに含まれる複数の画像のうち、スライドショーにおいて表示される少なくとも一部の画像の再生順序、及び当該少なくとも一部の画像のそれぞれの、ビデオストリームにおける位置を示す情報を格納している。更に、スケジュール格納部202は、スライドショーのスケジュールとして、スライドショーにおいて表示される画像のそれぞれについて、DVD−Video再生装置110が当該画像を再生させ続ける時間である再生持続時間、即ちスライドショーにおける当該画像の表示時間を格納している。   FIG. 4 shows a second example of the schedule storage unit 202 according to the embodiment of the present invention. FIG. 5 shows a second example of the music storage unit 204 according to the embodiment of the present invention. The schedule storage unit 202 includes, as a slide show schedule, a playback order of at least some images displayed in the slide show among a plurality of images included in the electronic album, and a video stream of each of the at least some images. Information indicating the position is stored. Furthermore, the schedule storage unit 202 displays the display duration of the images in the slide show, that is, the time during which the DVD-Video playback device 110 continues to play the images for each of the images displayed in the slide show as the slide show schedule. Stores time.

更に、スケジュール格納部202は、スライドショーにおいて表示される画像のそれぞれについて、画像情報の一例である、当該画像の撮像地点を示す撮像地点情報を格納している。ここで、撮像地点情報とは、例えば、デジタルカメラ等がそれぞれの画像を撮像した際に、当該デジタルカメラが備えるGPS(Global Positioning System)機能により取得された、撮像地点の緯度及び経度を示す情報であってよい。また、楽曲格納部204は、例えば図5に示すように、スライドショーにおいて再生される複数の楽曲のそれぞれを、楽曲情報の一例である、当該楽曲に関連する地域を示す地域情報に対応付けて格納している。ここで、地域情報とは、例えば「山の曲」や「海の曲」といった、それぞれの楽曲の内容、例えば歌詞の内容等により示される地域の種類を示す情報であってよく、また、例えば「東京の曲」といった、それぞれの楽曲の内容、例えば歌詞の内容等により示される地名を示す情報であってもよい。   Furthermore, the schedule storage unit 202 stores imaging point information indicating an imaging point of the image, which is an example of image information, for each of the images displayed in the slide show. Here, the imaging point information is, for example, information indicating the latitude and longitude of an imaging point acquired by a GPS (Global Positioning System) function provided in the digital camera when the digital camera or the like captures each image. It may be. Further, for example, as illustrated in FIG. 5, the music storage unit 204 stores each of a plurality of music played in the slide show in association with area information indicating an area related to the music, which is an example of music information. is doing. Here, the regional information may be information indicating the type of the region indicated by the content of each song, such as the content of the lyrics, such as “mountain song” and “sea song”, for example, Information indicating the place name indicated by the contents of each song, such as the contents of lyrics, such as “Tokyo songs” may be used.

そして、楽曲選択部220は、DVD−Video再生装置110により再生されている画像における撮像地点が含まれる地域と、楽曲格納部204に格納されている複数の楽曲のそれぞれにおける地域情報との関連度に基づいて、当該複数の楽曲から、当該画像の再生中にBGMとして再生される楽曲を選択する。例えば、楽曲選択部220は、地図情報を有しており、再生されている画像の撮像地点が含まれる地域の種類を、当該地図情報に基づいて、例えば海岸部であると検出することにより、複数の楽曲のうち、検出結果に対する関連度が他の楽曲に比べて高い、例えば「海」という地域情報が対応付けられている楽曲510を選択してよい。   And the music selection part 220 is the relevance degree of the area | region where the imaging location in the image currently reproduced | regenerated by the DVD-Video reproduction | regeneration apparatus 110 is included, and the regional information in each of the some music stored in the music storage part 204 Based on the above, the music to be reproduced as BGM during the reproduction of the image is selected from the plurality of music. For example, the music selection unit 220 has map information, and detects, for example, a coastal area based on the map information, based on the map information, the type of the area including the imaged spot of the reproduced image. Among a plurality of music pieces, a music piece 510 having a higher degree of relevance to the detection result than that of other music pieces, for example, associated with regional information “sea” may be selected.

本発明の実施形態に係る電子アルバム表示システム10によれば、再生されている画像の撮像地点が含まれる地域の種類または地名等に対して関連度の高い楽曲を、当該画像の再生中にBGMとして再生することができる。これにより、スライドショーにおける、画像と楽曲との一体感を、利用者により強く感じさせることができる。   According to the electronic album display system 10 according to the embodiment of the present invention, a music having a high degree of relevance with respect to the type or place name of the area including the image pickup point of the image being reproduced is reproduced during reproduction of the image. Can be played as. Thereby, the user can feel a sense of unity between the image and the music in the slide show more strongly.

図6は、本発明の実施形態に係るスケジュール格納部202の第3の例を示す。また、図7は、本発明の実施形態に係る楽曲格納部204の第3の例を示す。スケジュール格納部202は、スライドショーのスケジュールとして、電子アルバムに含まれる複数の画像のうち、スライドショーにおいて表示される少なくとも一部の画像の再生順序、及び当該少なくとも一部の画像のそれぞれの、ビデオストリームにおける位置を示す情報を格納している。更に、スケジュール格納部202は、スライドショーのスケジュールとして、スライドショーにおいて表示される画像のそれぞれについて、DVD−Video再生装置110が当該画像を再生させ続ける時間である再生持続時間、即ちスライドショーにおける当該画像の表示時間を格納している。   FIG. 6 shows a third example of the schedule storage unit 202 according to the embodiment of the present invention. FIG. 7 shows a third example of the music storage unit 204 according to the embodiment of the present invention. The schedule storage unit 202 includes, as a slide show schedule, a playback order of at least some images displayed in the slide show among a plurality of images included in the electronic album, and a video stream of each of the at least some images. Information indicating the position is stored. Furthermore, the schedule storage unit 202 displays the display duration of the images in the slide show, that is, the time during which the DVD-Video playback device 110 continues to play the images for each of the images displayed in the slide show as the slide show schedule. Stores time.

更に、スケジュール格納部202は、スライドショーにおいて表示される画像のそれぞれについて、画像情報の一例である、当該画像の内容を示す画像内容情報を格納している。ここで、画像内容情報とは、例えば、画像に含まれる被写体の種類等を示す情報であってよい。具体的には、スケジュール格納部202は、公知の画像認識技術を用いることにより、それぞれの画像について予め抽出された被写体の種類、例えば「海」や「ウェディングドレス」等を示す情報を、当該画像に対応付けて格納していてよい。また、楽曲格納部204は、スライドショーにおいて再生される複数の楽曲のそれぞれを、楽曲情報の一例である、当該楽曲の内容を示す楽曲内容情報に対応付けて格納している。ここで、楽曲内容情報とは、例えば、楽曲の歌詞における主題や、当該楽曲が多く用いられる場面等を示す情報であってよい。例えば、楽曲格納部204は、それぞれの楽曲が、海を主題とした楽曲である場合には「海」という楽曲内容情報を、また、結婚式においてよく演奏される楽曲である場合には「結婚式」という楽曲内容情報を、当該楽曲に対応付けて格納していてよい。   Furthermore, the schedule storage unit 202 stores image content information indicating the content of the image, which is an example of image information, for each image displayed in the slide show. Here, the image content information may be information indicating the type of subject included in the image, for example. Specifically, the schedule storage unit 202 uses a known image recognition technique to display information indicating the type of subject extracted in advance for each image, for example, “sea”, “wedding dress”, and the like. May be stored in association with each other. In addition, the music storage unit 204 stores each of a plurality of music reproduced in the slide show in association with music content information indicating the content of the music, which is an example of music information. Here, the music content information may be information indicating, for example, the subject in the lyrics of the music, a scene where the music is frequently used, or the like. For example, the music storage unit 204 displays the music content information “Umi” when each song is a song with the theme of the ocean, and “marriage” when the song is a song often played at weddings. The music content information “expression” may be stored in association with the music.

そして、楽曲選択部220は、DVD−Video再生装置110により再生されている画像における画像内容情報と、楽曲格納部204に格納されている複数の楽曲のそれぞれにおける楽曲内容情報との関連度に基づいて、当該複数の楽曲から、当該画像の再生中にBGMとして再生される楽曲を選択する。例えば、楽曲選択部220は、再生されている画像における画像内容情報として「ウェディングドレス」を検出した場合、複数の楽曲のうち、検出した画像内容情報に対する関連度が他の楽曲に比べて高い、「結婚式」という楽曲内容情報に対応する楽曲710を、当該画像の再生中にBGMとして再生される楽曲として選択する。   Then, the music selection unit 220 is based on the degree of association between the image content information in the image being played back by the DVD-Video playback device 110 and the music content information in each of a plurality of songs stored in the music storage unit 204. Then, the music to be played back as BGM during playback of the image is selected from the plurality of music. For example, when the music selection unit 220 detects “wedding dress” as the image content information in the image being played back, the degree of relevance to the detected image content information is higher than other music among a plurality of music. The music 710 corresponding to the music content information “wedding” is selected as the music to be played back as BGM during the playback of the image.

本発明の実施形態に係る電子アルバム表示システム10によれば、再生されている画像の内容に対して関連度の高い内容を示す楽曲を、当該画像の再生中にBGMとして再生することができる。これにより、スライドショーにおける、画像と楽曲との一体感を、利用者により強く感じさせることができる。   According to the electronic album display system 10 according to the embodiment of the present invention, it is possible to reproduce a musical piece showing content highly relevant to the content of the image being reproduced as BGM while the image is being reproduced. Thereby, the user can feel a sense of unity between the image and the music in the slide show more strongly.

なお、スケジュール格納部202及び楽曲格納部204は、図2から図7にかけて例に挙げて説明した画像情報及び楽曲情報の他に、多様な画像情報及び楽曲情報を格納していてよい。例えば、スケジュール格納部202は、電子アルバムに含まれる複数の画像のうち、スライドショーにおいて表示される少なくとも一部の画像のそれぞれについて、当該画像の特徴を示すキーワードを格納していてよい。また、例えば、楽曲格納部204は、スライドショーにおいて再生される複数の楽曲のそれぞれを、当該楽曲の特徴を示すキーワードに対応付けて格納していてよい。ここで、キーワードとは、例えば、それぞれの画像または楽曲に対して、利用者によって予め対応付けられたキーワードであってよい。これらの場合、楽曲選択部220は、DVD−Video再生装置110により再生されている画像に対応するキーワードと、楽曲格納部204に格納されている複数の楽曲のそれぞれに対応するキーワードとの関連度に基づいて、当該複数の楽曲から、当該画像の再生中にBGMとして再生される楽曲を再生選択する。具体的には、楽曲選択部220は、再生されている画像に対応するキーワードと、一の楽曲に対応するキーワードとが、一致している場合、または他の楽曲に対応するキーワードに比べて関連度が高い場合に、当該一の楽曲を、当該画像の再生中にBGMとして再生される楽曲として選択する。これにより、再生されている画像に対応付けられたキーワードに対して関連度の高いキーワードを有する楽曲を、BGMとして再生することができるので、表示する画像と再生する楽曲との一体感を、利用者により強く感じさせることができる。   The schedule storage unit 202 and the music storage unit 204 may store various image information and music information in addition to the image information and music information described with reference to FIGS. 2 to 7. For example, the schedule storage unit 202 may store, for each of at least some images displayed in the slide show among a plurality of images included in the electronic album, a keyword indicating the characteristics of the image. Further, for example, the music storage unit 204 may store each of a plurality of music played in the slide show in association with a keyword indicating the characteristics of the music. Here, the keyword may be, for example, a keyword associated with each image or music in advance by the user. In these cases, the music selection unit 220 has a degree of relevance between a keyword corresponding to an image being played back by the DVD-Video playback device 110 and a keyword corresponding to each of a plurality of songs stored in the music storage unit 204. From the plurality of songs, a music to be played back as BGM during playback of the image is selected for playback. Specifically, the music selection unit 220 relates to a case where the keyword corresponding to the image being reproduced matches the keyword corresponding to one music, or compared to a keyword corresponding to another music. When the degree is high, the one music piece is selected as a music piece to be reproduced as BGM during the reproduction of the image. As a result, music having a keyword that is highly relevant to the keyword associated with the image being reproduced can be reproduced as BGM, so that the sense of unity between the displayed image and the music to be reproduced is utilized. Can make it feel stronger.

また、図2から図7にかけて説明したスケジュール格納部202のそれぞれは、単一の画像情報のみを画像に対応付けて格納しているが、これに代えて、スケジュール格納部202は、複数の画像情報を1つの画像に対応付けて格納していてもよい。また、同様に、楽曲格納部204は、複数の楽曲情報を1つの楽曲に対応付けて格納していてもよい。   Each of the schedule storage units 202 described with reference to FIGS. 2 to 7 stores only single image information in association with an image. Instead, the schedule storage unit 202 includes a plurality of images. Information may be stored in association with one image. Similarly, the music storage unit 204 may store a plurality of music information in association with one music.

図8は、本発明の実施形態に係る電子アルバム表示システム10における処理の流れの一例を示すフローチャートである。本例において、DVD−Videoディスク100は、既にDVD−Video再生装置110に挿入されているとする。また、遠隔操作部210は、例えば、再生の開始を示す赤外線信号をDVD−Video再生装置110に送信することにより、DVD−Video再生装置110にビデオストリームの再生を開始させているとする。以下、電子アルバム表示システム10が、DVD−Videoディスク100に格納されているビデオストリームにより定められたスケジュールとは異なるスケジュールに従ってスライドショーを表示する処理の流れを説明する。   FIG. 8 is a flowchart showing an example of a processing flow in the electronic album display system 10 according to the embodiment of the present invention. In this example, it is assumed that the DVD-Video disc 100 is already inserted in the DVD-Video playback device 110. Further, it is assumed that the remote operation unit 210 causes the DVD-Video playback device 110 to start playback of a video stream by transmitting an infrared signal indicating the start of playback to the DVD-Video playback device 110, for example. Hereinafter, the flow of processing in which the electronic album display system 10 displays a slide show according to a schedule different from the schedule defined by the video stream stored in the DVD-Video disc 100 will be described.

電子アルバム表示システム10は、以下の処理を、スケジュール格納部202に格納されたスケジュールにより示される、電子アルバムに含まれる複数の画像のうち少なくとも一部の画像における再生順序に従って、当該少なくとも一部の画像のそれぞれについて繰り返す(S1000)。   The electronic album display system 10 performs the following processing according to the reproduction order of at least some of the plurality of images included in the electronic album indicated by the schedule stored in the schedule storage unit 202. Repeat for each image (S1000).

まず、遠隔操作部210は、DVD−Video再生装置110におけるビデオストリームの再生位置を、スケジュール格納部202に格納されているスケジュールが示す当該画像の位置に変更させるべく、DVD−Video再生装置110を遠隔操作する(S1010)。具体的には、遠隔操作部210は、ビデオストリームの再生位置を、スケジュール格納部202に格納されているスケジュールが示す、当該画像が含まれるチャプターの先頭位置に変更させるべく、DVD−Video再生装置110を遠隔操作する。例えば、遠隔操作部210は、当該チャプターの先頭位置へ再生位置を変更する旨を示す赤外線信号をDVD−Video再生装置110に送信することにより、ビデオストリームの再生位置を所望のチャプターに変更させる。このようにして、遠隔操作部210は、DVD−Video再生装置110に当該画像を再生させると共に、表示部140に当該画像を表示させる。また、DVD−Video再生装置110は、遠隔操作部210から遠隔操作されない場合には、通常通りにビデオストリームの再生を続行してよい。これにより、電子アルバム表示システム10は、例えば、遠隔操作部210からの無線通信信号が、一時的にDVD−Video再生装置110に届かない場合であっても、スライドショーの表示を中断することなく続行することができる。また、これにより、電子アルバム表示システム10は、スケジュール格納部202に格納されているスケジュールにおいて、前後して表示するべく示されている2つの画像のそれぞれが含まれるチャプターが、同様に前後して存在している場合に、遠隔操作部210がDVD−Video再生装置110を遠隔操作しなくとも、スケジュールに従って画像を表示させることができる。なお、遠隔操作部210は、ビデオストリームの再生位置を、当該画像が含まれるチャプターの先頭位置に変更するのに代えて、チャプター内の他の位置に変更してもよい。   First, the remote control unit 210 causes the DVD-Video playback device 110 to change the playback position of the video stream on the DVD-Video playback device 110 to the position of the image indicated by the schedule stored in the schedule storage unit 202. Remote control is performed (S1010). Specifically, the remote operation unit 210 changes the playback position of the video stream to the start position of the chapter including the image indicated by the schedule stored in the schedule storage unit 202. 110 is remotely controlled. For example, the remote control unit 210 changes the playback position of the video stream to a desired chapter by transmitting an infrared signal indicating that the playback position is changed to the head position of the chapter to the DVD-Video playback device 110. In this way, the remote control unit 210 causes the DVD-Video playback device 110 to play the image and causes the display unit 140 to display the image. Further, when the DVD-Video playback device 110 is not remotely operated from the remote control unit 210, the playback of the video stream may be continued as usual. Thereby, the electronic album display system 10 continues without interrupting the display of the slide show, for example, even when the wireless communication signal from the remote control unit 210 does not reach the DVD-Video playback device 110 temporarily. can do. Accordingly, in the electronic album display system 10, in the schedule stored in the schedule storage unit 202, the chapters including each of the two images shown to be displayed before and after are similarly moved back and forth. If the remote control unit 210 exists, the image can be displayed according to the schedule even if the remote control unit 210 does not remotely control the DVD-Video playback device 110. Note that the remote control unit 210 may change the playback position of the video stream to another position in the chapter instead of changing the playback position of the video stream to the start position of the chapter including the image.

続いて、楽曲選択部220は、当該画像における画像情報と、楽曲格納部204に格納されている複数の楽曲のそれぞれにおける楽曲情報との関連度に基づいて、当該画像に対応する楽曲を、当該複数の楽曲から選択する(S1020)。ここで、楽曲選択部220は、当該画像における撮像日時と、表示部140によって当該画像の直前に表示された他の画像における撮像日時との差が、予め定められた基準値より小さい場合、当該他の画像に対応するとして選択した楽曲を、当該画像に対応する楽曲として選択してよい。ここで、予め定められた基準値とは、当該画像と、当該画像の直前に表示された他の画像とにおいて、例えば一度の旅行中に撮像された場合等、それぞれの画像の内容が類似していると利用者が考える場合における撮像日時の差の基準値であり、例えば3日等として定められていてよい。なお、ここで、画像情報として撮像日時を用いる例を説明したが、楽曲選択部220における処理はこの例に限定されず、楽曲選択部220は、撮像地点等の他の画像情報に基づいて、当該画像に対応する楽曲を選択してよい。   Subsequently, the music selection unit 220 selects the music corresponding to the image based on the degree of association between the image information in the image and the music information in each of the plurality of music stored in the music storage unit 204. A plurality of pieces of music are selected (S1020). Here, when the difference between the imaging date / time in the image and the imaging date / time in another image displayed immediately before the image by the display unit 140 is smaller than a predetermined reference value, the music selection unit 220 The music selected as corresponding to another image may be selected as the music corresponding to the image. Here, the predetermined reference value is similar to the content of each image when the image is captured during one trip, for example, between the image and another image displayed immediately before the image. This is a reference value for the difference in imaging date and time when the user thinks that the image is, for example, 3 days or the like. In addition, although the example which uses an imaging date as image information was demonstrated here, the process in the music selection part 220 is not limited to this example, The music selection part 220 is based on other image information, such as an imaging point. You may select the music corresponding to the said image.

続いて、楽曲再生部230は、楽曲選択部220により選択された楽曲の再生を開始し、当該楽曲を示す音声信号を音声出力部240に出力することにより、音声出力部240に、当該楽曲を音声として出力させる(S1030)。ここで、楽曲再生部230は、楽曲選択部220により、当該画像の直前に表示された他の画像に対応するとして選択された楽曲が、当該画像に対応するとして選択された場合、既に再生されている当該楽曲を引き続き再生してよい。こうすることにより、互いの撮像日時が近接しているといった、画像の内容についても関連する、連続して再生及び表示される2つ以上の画像において、共通の楽曲をBGMとして再生することができるので、再生する楽曲の切り替わりが頻繁に発生して、利用者に耳障りであると感じさせることを防止することができる。また、撮像日時が大きく変化するといった、画像の内容についての関連度が低い画像が切り替わって再生及び表示される場合には、BGMとして再生する楽曲を切り替えることができる。これにより、スライドショーにおける、画像と楽曲との一体感を、利用者により強く感じさせることができる。   Subsequently, the music playback unit 230 starts playback of the music selected by the music selection unit 220, and outputs an audio signal indicating the music to the audio output unit 240, whereby the music output unit 240 receives the music. Output as voice (S1030). Here, the music playback unit 230 is already played back when the music selection unit 220 selects the music selected as corresponding to the other image displayed immediately before the image as corresponding to the image. The music in question may be played continuously. By doing this, it is possible to reproduce a common music as BGM in two or more images that are continuously reproduced and displayed, which are also related to the contents of the image, such as the shooting date and time of each other being close to each other. Therefore, it is possible to prevent the music to be played frequently from being switched and causing the user to feel uncomfortable. In addition, when an image having a low degree of relevance with respect to the content of the image is switched and reproduced and displayed, such as when the imaging date changes greatly, the music to be reproduced as BGM can be switched. Thereby, the user can feel a sense of unity between the image and the music in the slide show more strongly.

また、楽曲再生部230は、遠隔操作部210が当該画像を再生させるべくDVD−Video再生装置110を遠隔操作したタイミングに同期して、当該画像に対応する楽曲の再生を開始してもよい。こうすることにより、画像の再生が開始された直後に、当該画像に対応する楽曲の再生を開始することができるので、スライドショーにおける、画像と楽曲との一体感を、利用者により強く感じさせることができる。   In addition, the music playback unit 230 may start playback of music corresponding to the image in synchronization with the timing at which the remote operation unit 210 remotely operates the DVD-Video playback device 110 to play back the image. By doing so, the reproduction of the music corresponding to the image can be started immediately after the reproduction of the image is started, so that the sense of unity between the image and the music in the slide show is more strongly felt by the user. Can do.

続いて、遠隔操作部210は、DVD−Video再生装置110により当該画像が再生された状態で、ビデオストリームの再生を一時停止させるべく、DVD−Video再生装置110を遠隔操作する(S1040)。例えば、遠隔操作部210は、再生の一時停止を示す赤外線信号をDVD−Video再生装置110に送信することにより、ビデオストリームの再生を一時停止させる。続いて、遠隔操作部210は、DVD−Video再生装置110にビデオストリームの再生を一時停止させた後、スケジュール格納部202に格納されているスケジュールにより示される、当該画像における再生持続時間が経過したか否かを判定する(S1050)。そして、遠隔操作部210が、未だ再生持続時間が経過していないと判定した場合(S1050:No)、電子アルバム表示システム10は、処理をS1050に戻し、遠隔操作部210に、再生持続時間が経過したか否かを再度判定させる。   Subsequently, the remote operation unit 210 remotely operates the DVD-Video playback device 110 to temporarily stop playback of the video stream in a state where the image is played back by the DVD-Video playback device 110 (S1040). For example, the remote control unit 210 temporarily stops playback of the video stream by transmitting an infrared signal indicating suspension of playback to the DVD-Video playback device 110. Subsequently, the remote operation unit 210 causes the DVD-Video playback device 110 to temporarily stop playback of the video stream, and then the playback duration of the image indicated by the schedule stored in the schedule storage unit 202 has elapsed. It is determined whether or not (S1050). If the remote operation unit 210 determines that the playback duration has not yet elapsed (S1050: No), the electronic album display system 10 returns the process to S1050, and the remote operation unit 210 sends the playback duration to the remote operation unit 210. It is determined again whether or not it has passed.

一方、再生持続時間が経過していると判定した場合、つまり、再生持続時間の間、DVD−Video再生装置110において一時停止状態が持続されていると判定した場合(S1050:Yes)、遠隔操作部210は、DVD−Video再生装置110におけるビデオストリームの再生の一時停止を解除させる(S1060)。具体的には、遠隔操作部210は、再生の一時停止の解除を示す赤外線信号をDVD−Video再生装置110に送信することにより、ビデオストリームの再生の一時停止を解除させる。   On the other hand, if it is determined that the playback duration has elapsed, that is, if it is determined that the pause state is maintained in the DVD-Video playback device 110 for the playback duration (S1050: Yes), remote control is performed. The unit 210 releases the pause of the video stream playback in the DVD-Video playback device 110 (S1060). Specifically, the remote control unit 210 transmits the infrared signal indicating the cancellation of the playback pause to the DVD-Video playback device 110 to release the pause of the video stream playback.

そして、電子アルバム表示システム10は、以上の処理を、電子アルバムに含まれる複数の画像のうち、少なくとも一部の画像のそれぞれについて繰り返す(S1070)。   The electronic album display system 10 repeats the above processing for each of at least some of the images included in the electronic album (S1070).

本発明の実施形態に係る電子アルバム表示システム10によれば、スケジュール格納部202に格納されているスケジュールに従って、DVD−Video再生装置110におけるビデオストリームの再生位置を順次変更することにより、ビデオストリームにおける構成及び順序とは異なる構成及び順序で、電子アルバムに含まれる画像をスライドショーとして順次表示することができる。   According to the electronic album display system 10 according to the embodiment of the present invention, by sequentially changing the playback position of the video stream in the DVD-Video playback device 110 according to the schedule stored in the schedule storage unit 202, Images included in the electronic album can be sequentially displayed as a slide show with a configuration and order different from the configuration and order.

また、本発明の実施形態に係る電子アルバム表示システム10によれば、スライドショーとして表示する画像が再生された状態で、ビデオストリームの再生を一時停止すると共に、スケジュール格納部202に格納されているスケジュールにより示される再生持続時間の間、一時停止状態を持続することにより、ビデオストリームにおいて予め定められた画像毎の表示時間とは異なる表示時間で、それぞれの画像を表示することができる。   Further, according to the electronic album display system 10 according to the embodiment of the present invention, the video stream playback is paused and the schedule stored in the schedule storage unit 202 in a state where the images to be displayed as the slide show are played back. By maintaining the pause state during the playback duration indicated by, each image can be displayed with a display time different from the display time for each image predetermined in the video stream.

更に、ビデオストリームの再生を一時停止して、それぞれの画像を表示させ続けることにより、ビデオストリームにおいてそれぞれの画像がフレーム画像として含まれる時間を、表示時間より短くすることができる。これにより、ビデオストリームの再生位置を変更したり、また再生を一時停止したりすることなくスライドショーを表示する場合に比べて、1枚のDVD−Videoディスク100に、より多くの画像を格納することができる。   Furthermore, by pausing the playback of the video stream and continuing to display each image, the time during which each image is included as a frame image in the video stream can be made shorter than the display time. Thus, more images can be stored on one DVD-Video disc 100 than when a slide show is displayed without changing the playback position of the video stream or pausing playback. Can do.

なお、電子アルバム表示システム10における処理の流れは、本図に示した内容に限定されず、本図に示した内容に多様な変更を加えてもよい。例えば、遠隔操作部210は、ビデオストリームの再生の一時停止を、次の画像を表示すべく再生位置を変更させた後で解除させてもよい。これにより、再生の一時停止を解除した後で、次の画像を示すフレーム画像に再生位置を変更する場合に、他の画像を示す不適切なフレーム画像が再生される様な、各画像の収録時間が短いビデオストリームを用いる場合であっても、不適切なフレーム画像が再生されることを防止することができる。また、DVD−Video再生装置110が、ビデオストリームの再生位置の変更に伴い、再生の一時停止を自動的に解除する場合には、遠隔操作部210は、再生の一時停止の解除を行わなくともよい。また、例えば、電子アルバムに含まれる複数の画像のそれぞれが含まれるチャプター内のPGC(Program Chain)の再生後に実行されるポストコマンドとして再生の一時停止が登録されている場合等のように、それぞれの画像を再生した状態で、DVD−Video再生装置110がビデオストリームの再生を一時停止するべく、ビデオストリームが作成されている場合、遠隔操作部210は、ビデオストリームの再生を一時停止させるべくDVD−Video再生装置110を遠隔操作しなくともよい。   Note that the flow of processing in the electronic album display system 10 is not limited to the content shown in the figure, and various changes may be made to the content shown in the figure. For example, the remote control unit 210 may release the pause of the video stream playback after changing the playback position to display the next image. As a result, after canceling the pause of playback, when changing the playback position to the frame image showing the next image, recording of each image such that an inappropriate frame image showing another image is played back. Even when a video stream with a short time is used, an inappropriate frame image can be prevented from being reproduced. Further, when the DVD-Video playback device 110 automatically cancels the pause of the playback in accordance with the change of the playback position of the video stream, the remote control unit 210 does not need to release the pause of the playback. Good. In addition, for example, when pause of playback is registered as a post command executed after playback of PGC (Program Chain) in a chapter including each of a plurality of images included in the electronic album, respectively, When the video stream is created so that the DVD-Video playback device 110 pauses the playback of the video stream while the image of the video is played back, the remote control unit 210 causes the DVD to pause the playback of the video stream. -The video playback device 110 may not be remotely operated.

また、本例において、楽曲選択部220は、DVD−Video再生装置110により再生されている画像の画像情報のみに基づいて、当該画像の再生中にBGMとして再生する楽曲を選択したが、これに代えて、連続して再生される複数の画像の画像情報に基づいて、当該複数の画像の再生中にBGMとして再生される楽曲を選択してもよい。具体的には、楽曲選択部220は、連続して再生される複数の画像における撮像日時のすべてが含まれる期間を示す期間情報に対応する楽曲を、当該複数の画像の再生中にBGMとして再生される楽曲として選択してもよい。また、楽曲選択部220は、連続して再生される複数の画像における撮像地点のすべてが含まれる地域を示す地域情報に対応する楽曲を、当該複数の画像の再生中にBGMとして再生される楽曲として選択してもよい。また、楽曲選択部220は、連続して再生される複数の画像に共通する画像内容情報またはキーワードに対して高い関連度を示す楽曲内容情報またはキーワードに対応する楽曲を、当該複数の画像の再生中にBGMとして再生される楽曲として選択してもよい。こうすることにより、連続して再生される複数の画像の何れにも適した楽曲を、一貫してBGMとして再生することができるので、スライドショーにおける、画像と楽曲との一体感を、より強く利用者に感じさせることができる。   In this example, the music selection unit 220 selects music to be played back as BGM during playback of the image based only on the image information of the image being played back by the DVD-Video playback device 110. Instead, based on the image information of a plurality of images that are continuously played back, music that is played back as BGM may be selected during playback of the plurality of images. Specifically, the music selection unit 220 reproduces music corresponding to period information indicating a period including all of the imaging dates and times in a plurality of images that are continuously reproduced as BGM during reproduction of the plurality of images. May be selected as the music to be played. The music selection unit 220 also plays music corresponding to the area information indicating the area including all of the imaging points in a plurality of images that are continuously played back as BGM during playback of the plurality of images. You may choose as In addition, the music selection unit 220 reproduces the music corresponding to the music content information or the keyword having a high degree of relevance with respect to the image content information or the keyword common to the plurality of images that are continuously played back. You may select as music reproduced | regenerated as BGM inside. By doing this, music suitable for any of a plurality of images that are continuously played back can be played back consistently as BGM, so the sense of unity between images and music in a slide show can be used more strongly. Can make people feel.

図9は、本発明の実施形態に係るコンピュータ1500のハードウェア構成の一例を示すブロック図である。本発明の実施形態に係るコンピュータ1500は、ホスト・コントローラ1582により相互に接続されるCPU1505、RAM1520、グラフィック・コントローラ1575、及び表示装置1580を有するCPU周辺部と、入出力コントローラ1584によりホスト・コントローラ1582に接続される通信インターフェイス1530、ハードディスクドライブ1540、及びDVD−ROMドライブ1560を有する入出力部と、入出力コントローラ1584に接続されるROM1510、フレキシブルディスク・ドライブ1550、及び入出力チップ1570を有するレガシー入出力部とを備える。   FIG. 9 is a block diagram showing an example of a hardware configuration of a computer 1500 according to the embodiment of the present invention. A computer 1500 according to an embodiment of the present invention includes a CPU peripheral unit having a CPU 1505, a RAM 1520, a graphic controller 1575, and a display device 1580 connected to each other by a host controller 1582, and a host controller 1582 by an input / output controller 1584. An input / output unit having a communication interface 1530, a hard disk drive 1540, and a DVD-ROM drive 1560, and a legacy input having a ROM 1510, a flexible disk drive 1550, and an input / output chip 1570 connected to an input / output controller 1584. And an output unit.

ホスト・コントローラ1582は、RAM1520と、高い転送レートでRAM1520をアクセスするCPU1505及びグラフィック・コントローラ1575とを接続する。CPU1505は、ROM1510及びRAM1520に格納されたプログラムに基づいて動作し、各部の制御を行う。グラフィック・コントローラ1575は、CPU1505等がRAM1520内に設けたフレーム・バッファ上に生成する画像データを取得し、表示装置1580上に表示させる。これに代えて、グラフィック・コントローラ1575は、CPU1505等が生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。   The host controller 1582 connects the RAM 1520 to the CPU 1505 and the graphic controller 1575 that access the RAM 1520 at a high transfer rate. The CPU 1505 operates based on programs stored in the ROM 1510 and the RAM 1520 and controls each unit. The graphic controller 1575 acquires image data generated by the CPU 1505 and the like on a frame buffer provided in the RAM 1520 and displays the image data on the display device 1580. Alternatively, the graphic controller 1575 may include a frame buffer that stores image data generated by the CPU 1505 or the like.

入出力コントローラ1584は、ホスト・コントローラ1582と、比較的高速な入出力装置である通信インターフェイス1530、ハードディスクドライブ1540、DVD−ROMドライブ1560を接続する。また、入出力コントローラ1584は、コンピュータ1500に設けられたスロットに挿入される等してコンピュータ1500に接続されたメモリカード200と通信し、メモリカード200からプログラム又はデータを入力すると共に、メモリカード200に、プログラム、又は、例えばコンピュータ1500において作成されたスケジュールや楽曲データを出力する。通信インターフェイス1530は、ネットワークを介して他の装置と通信する。ハードディスクドライブ1540は、コンピュータ1500内のCPU1505が使用するプログラム及びデータを格納する。DVD−ROMドライブ1560は、DVD−ROM1595からプログラム又はデータを読み取り、RAM1520を介してハードディスクドライブ1540に提供する。   The input / output controller 1584 connects the host controller 1582 to the communication interface 1530, the hard disk drive 1540, and the DVD-ROM drive 1560, which are relatively high-speed input / output devices. Further, the input / output controller 1584 communicates with the memory card 200 connected to the computer 1500 by being inserted into a slot provided in the computer 1500, etc., and inputs a program or data from the memory card 200. In addition, a program or, for example, a schedule or music data created in the computer 1500 is output. The communication interface 1530 communicates with other devices via a network. The hard disk drive 1540 stores programs and data used by the CPU 1505 in the computer 1500. The DVD-ROM drive 1560 reads a program or data from the DVD-ROM 1595 and provides it to the hard disk drive 1540 via the RAM 1520.

また、入出力コントローラ1584には、ROM1510と、フレキシブルディスク・ドライブ1550、及び入出力チップ1570の比較的低速な入出力装置とが接続される。ROM1510は、コンピュータ1500が起動時に実行するブート・プログラムや、コンピュータ1500のハードウェアに依存するプログラム等を格納する。フレキシブルディスク・ドライブ1550は、フレキシブルディスク1590からプログラム又はデータを読み取り、RAM1520を介してハードディスクドライブ1540に提供する。入出力チップ1570は、フレキシブルディスク・ドライブ1550や、例えばパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポート等を介して各種の入出力装置を接続する。   The input / output controller 1584 is connected to the ROM 1510, the flexible disk drive 1550, and the relatively low-speed input / output device of the input / output chip 1570. The ROM 1510 stores a boot program executed when the computer 1500 is started up, a program depending on the hardware of the computer 1500, and the like. The flexible disk drive 1550 reads a program or data from the flexible disk 1590 and provides it to the hard disk drive 1540 via the RAM 1520. The input / output chip 1570 connects various input / output devices via a flexible disk drive 1550 and, for example, a parallel port, a serial port, a keyboard port, a mouse port, and the like.

RAM1520を介してハードディスクドライブ1540に提供されるプログラムは、フレキシブルディスク1590、DVD−ROM1595、又はICカード等の記録媒体に格納されて利用者によって提供される。プログラムは、記録媒体から読み出され、RAM1520を介してコンピュータ1500内のハードディスクドライブ1540にインストールされ、CPU1505において実行される。コンピュータ1500にインストールされて実行されるプログラムは、CPU1505等に働きかけて、コンピュータ1500を、図1から図8にかけて説明したスケジュール生成装置120として機能させるスケジュール生成プログラムである。   A program provided to the hard disk drive 1540 via the RAM 1520 is stored in a recording medium such as the flexible disk 1590, the DVD-ROM 1595, or an IC card and provided by the user. The program is read from the recording medium, installed in the hard disk drive 1540 in the computer 1500 via the RAM 1520, and executed by the CPU 1505. The program that is installed and executed on the computer 1500 is a schedule generation program that works on the CPU 1505 or the like to cause the computer 1500 to function as the schedule generation device 120 described with reference to FIGS.

また、メモリカード200に出力されるプログラムは、フレキシブルディスク1590、DVD−ROM1595、又はICカード等の記録媒体に格納されて利用者によって提供される。プログラムは、記録媒体から読み出され、RAM1520を介してメモリカード200に出力され、リモートコントローラ130に提供される。リモートコントローラ130に提供されるプログラムは、リモートコントローラ130においてインストールされて実行される。リモートコントローラ130にインストールされて実行されるプログラムは、リモートコントローラ130を、図1から図8にかけて説明したリモートコントローラ130として機能させるリモートコントロールプログラムである。なお、リモートコントローラ130に提供されるプログラムは、本図に示した形態に限定されず、他の形態でリモートコントローラ130に提供されてもよい。   The program output to the memory card 200 is stored in a recording medium such as the flexible disk 1590, the DVD-ROM 1595, or an IC card and provided by the user. The program is read from the recording medium, output to the memory card 200 via the RAM 1520, and provided to the remote controller 130. A program provided to the remote controller 130 is installed and executed in the remote controller 130. The program installed and executed in the remote controller 130 is a remote control program that causes the remote controller 130 to function as the remote controller 130 described with reference to FIGS. The program provided to the remote controller 130 is not limited to the form shown in the figure, and may be provided to the remote controller 130 in other forms.

以上に示したプログラムは、外部の記憶媒体に格納されてもよい。記憶媒体としては、フレキシブルディスク1590、DVD−ROM1595の他に、CDやPD等の光学記録媒体、MD等の光磁気記録媒体、テープ媒体、ICカード等の半導体メモリ等を用いることができる。また、専用通信ネットワークやインターネットに接続されたサーバシステムに設けたハードディスク又はRAM等の記憶装置を記録媒体として使用し、ネットワークを介してプログラムをコンピュータ1500に提供してもよい。   The program shown above may be stored in an external storage medium. As the storage medium, in addition to the flexible disk 1590 and the DVD-ROM 1595, an optical recording medium such as a CD or PD, a magneto-optical recording medium such as an MD, a tape medium, a semiconductor memory such as an IC card, or the like can be used. Further, a storage device such as a hard disk or a RAM provided in a server system connected to a dedicated communication network or the Internet may be used as a recording medium, and the program may be provided to the computer 1500 via the network.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。   As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment. It will be apparent to those skilled in the art that various modifications or improvements can be added to the above-described embodiment. It is apparent from the scope of the claims that the embodiments added with such changes or improvements can be included in the technical scope of the present invention.

本発明の実施形態に係る電子アルバム表示システム10の構成の一例を示すブロック図である。It is a block diagram showing an example of composition of electronic album display system 10 concerning an embodiment of the present invention. 本発明の実施形態に係るスケジュール格納部202の第1の例を示す図である。It is a figure which shows the 1st example of the schedule storage part 202 which concerns on embodiment of this invention. 本発明の実施形態に係る楽曲格納部204の第1の例を示す図である。It is a figure which shows the 1st example of the music storage part 204 which concerns on embodiment of this invention. 本発明の実施形態に係るスケジュール格納部202の第2の例を示す図である。It is a figure which shows the 2nd example of the schedule storage part 202 which concerns on embodiment of this invention. 本発明の実施形態に係る楽曲格納部204の第2の例を示す図である。It is a figure which shows the 2nd example of the music storage part 204 which concerns on embodiment of this invention. 本発明の実施形態に係るスケジュール格納部202の第3の例を示す図である。It is a figure which shows the 3rd example of the schedule storage part 202 which concerns on embodiment of this invention. 本発明の実施形態に係る楽曲格納部204の第3の例を示す図である。It is a figure which shows the 3rd example of the music storage part 204 which concerns on embodiment of this invention. 本発明の実施形態に係る電子アルバム表示システム10における処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of a process in the electronic album display system 10 which concerns on embodiment of this invention. 本発明の実施形態に係るコンピュータ1500のハードウェア構成の一例を示すブロック図である。It is a block diagram which shows an example of the hardware constitutions of the computer 1500 concerning embodiment of this invention.

符号の説明Explanation of symbols

10 電子アルバム表示システム、100 DVD−Videoディスク、110 DVD−Video再生装置、120 スケジュール生成装置、130 リモートコントローラ、140 表示部、200 メモリカード、210 遠隔操作部、220 楽曲選択部、230 楽曲再生部、240 音声出力部 10 electronic album display system, 100 DVD-Video disc, 110 DVD-Video playback device, 120 schedule generation device, 130 remote controller, 140 display unit, 200 memory card, 210 remote operation unit, 220 music selection unit, 230 music playback unit , 240 Audio output unit

Claims (26)

複数の画像を含む電子アルバムを表示する電子アルバム表示システムであって、
前記複数の画像をフレーム画像として含むビデオストリームを再生する再生部と、
無線通信によって前記再生部を遠隔操作するリモートコントローラと
を備え、
前記リモートコントローラは、
前記複数の画像のうち、少なくとも一部の画像を再生するスケジュール、及び当該少なくとも一部の画像のそれぞれについて、当該画像に固有の情報である画像情報を格納しているスケジュール格納部と、
複数の楽曲のそれぞれを、当該楽曲に固有の情報である楽曲情報に対応付けて格納している楽曲格納部と、
前記少なくとも一部の画像のそれぞれを前記スケジュールに従って再生させるべく、前記少なくとも一部の画像の表示を切り替える度に前記再生部を遠隔操作する遠隔操作部と、
前記再生部により再生されている一の前記画像における前記画像情報、及び前記複数の楽曲のそれぞれにおける前記楽曲情報の関連度に基づいて、前記一の画像に対応する前記楽曲を、前記複数の楽曲から選択する楽曲選択部と、
前記一の画像を含む、連続して再生される複数の前記画像が、前記再生部により再生されている場合に、当該一の画像に対応する前記楽曲を再生する楽曲再生部と
を有する電子アルバム表示システム。
An electronic album display system for displaying an electronic album including a plurality of images,
A playback unit for playing back a video stream including the plurality of images as frame images;
A remote controller for remotely operating the playback unit by wireless communication,
The remote controller is
A schedule storage unit that stores, for each of the at least some images, a schedule for reproducing at least some of the plurality of images, and image information that is information unique to the images;
A music storage unit that stores each of the plurality of music pieces in association with music information that is information unique to the music piece;
A remote control unit that remotely controls the playback unit each time the display of the at least some image is switched to play back each of the at least some images according to the schedule;
Based on the image information in the one image being reproduced by the reproduction unit and the degree of relevance of the music information in each of the plurality of songs, the music corresponding to the one image is converted into the plurality of songs. A music selection section to select from,
An electronic album comprising: a music playback unit that plays back the music corresponding to the one image when the playback unit plays back the plurality of images that are continuously played, including the one image Display system.
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の撮像日時を示す撮像日時情報を格納しており、
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲について予め定められた期間を示す期間情報に対応付けて格納しており、
前記楽曲選択部は、前記一の画像における撮像日時が含まれる前記期間を示す前記期間情報に対応する前記楽曲を、前記複数の楽曲から選択する
請求項1に記載の電子アルバム表示システム。
The schedule storage unit stores imaging date / time information indicating the imaging date / time of the image for each of the schedule and the at least some images,
The music storage unit stores each of the plurality of music in association with period information indicating a predetermined period for the music,
The electronic album display system according to claim 1, wherein the music selection unit selects the music corresponding to the period information indicating the period including the imaging date and time in the one image from the plurality of music.
前記再生部により再生される前記ビデオストリームを表示する表示部を更に備え、
前記楽曲選択部は、前記一の画像に対応する前記楽曲を選択する場合に、前記一の画像における撮像日時、及び前記表示部によって前記一の画像の直前に表示される他の前記画像における撮像日時の差が、予め定められた基準値より小さい場合、前記他の画像に対応するとして選択した前記楽曲を選択し、
前記楽曲再生部は、前記他の画像に対応するとして選択された前記楽曲が、前記一の画像に対応するとして選択された場合、前記再生部による前記一の画像の再生時に、当該選択された楽曲を引き続き再生する
請求項2に記載の電子アルバム表示システム。
A display unit for displaying the video stream played by the playback unit;
The music selection unit, when selecting the music corresponding to the one image, imaging date and time in the one image, and imaging in the other image displayed immediately before the one image by the display unit When the difference in date and time is smaller than a predetermined reference value, select the music selected as corresponding to the other image,
When the music selected as corresponding to the other image is selected as corresponding to the one image, the music reproducing unit is selected at the time of reproducing the one image by the reproducing unit. The electronic album display system according to claim 2, wherein the music is continuously reproduced.
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の撮像地点を示す撮像地点情報を格納しており、
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲に関連する地域を示す地域情報に対応付けて格納しており、
前記楽曲選択部は、前記一の画像における撮像地点が含まれる地域、及び前記複数の楽曲のそれぞれにおける前記地域情報の関連度に基づいて、前記複数の楽曲から前記楽曲を選択する
請求項1に記載の電子アルバム表示システム。
The schedule storage unit stores imaging point information indicating an imaging point of the image for each of the schedule and the at least some images,
The music storage unit stores each of the plurality of music in association with area information indicating an area related to the music,
The music selection unit selects the music from the plurality of music based on the region including the imaging point in the one image and the relevance of the area information in each of the plurality of music. The electronic album display system described.
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の内容を示す画像内容情報を格納しており、
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲の内容を示す楽曲内容情報に対応付けて格納しており、
前記楽曲選択部は、前記一の画像における前記画像内容情報、及び前記複数の楽曲のそれぞれにおける前記楽曲内容情報の関連度に基づいて、前記複数の楽曲から前記楽曲を選択する
請求項1に記載の電子アルバム表示システム。
The schedule storage unit stores image content information indicating the content of the image for each of the schedule and the at least some images,
The music storage unit stores each of the plurality of music in association with music content information indicating the content of the music,
The said music selection part selects the said music from the said several music based on the said image content information in the said one image, and the relevance degree of the said music content information in each of these several music. Electronic album display system.
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の特徴を示すキーワードを格納しており、
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲の特徴を示すキーワードに対応付けて格納しており、
前記楽曲選択部は、前記一の画像におけるキーワード、及び前記複数の楽曲のそれぞれにおけるキーワードの関連度に基づいて、前記複数の楽曲から前記楽曲を選択する
請求項1に記載の電子アルバム表示システム。
The schedule storage unit stores, for each of the schedule and the at least some of the images, a keyword indicating a feature of the image,
The music storage unit stores each of the plurality of music in association with a keyword indicating the characteristics of the music,
2. The electronic album display system according to claim 1, wherein the music selection unit selects the music from the plurality of music based on a keyword in the one image and a degree of association of the keyword in each of the plurality of music.
前記楽曲再生部は、前記遠隔操作部が前記一の画像を再生させるべく前記再生部を遠隔操作したタイミングに同期して、当該一の画像に対応する前記楽曲の再生を開始する請求項1から6の何れかに記載の電子アルバム表示システム。 The music reproduction unit, the remote control unit in synchronism with the timing of remotely operating the reproduction unit so as to reproduce the image of the one, of claims 1 to start playing of the music corresponding to the one image 6. The electronic album display system according to any one of 6 . 前記リモートコントローラは、
前記楽曲再生部が楽曲を再生することにより出力する音声信号を、音声として出力する音声出力部
を更に有する
請求項1から7の何れかに記載の電子アルバム表示システム。
The remote controller is
The electronic album display system according to any one of claims 1 to 7, further comprising: an audio output unit that outputs an audio signal output by the music reproducing unit as the audio is reproduced.
前記リモートコントローラは、
前記楽曲再生部が楽曲を再生することにより出力する音声信号を、無線通信によって送信する音声信号送信部
を更に有し、
当該電子アルバム表示システムは、
前記音声信号送信部により送信された前記音声信号を受信し、受信した前記音声信号を音声として出力する音声出力部
を更に備える
請求項1から7の何れかに記載の電子アルバム表示システム。
The remote controller is
An audio signal transmitting unit for transmitting an audio signal output by reproducing the music by the music reproducing unit by wireless communication;
The electronic album display system
The electronic album display system according to claim 1, further comprising an audio output unit that receives the audio signal transmitted by the audio signal transmission unit and outputs the received audio signal as audio.
前記複数の画像をフレーム画像として含むビデオストリームを格納しているビデオストリーム格納部と、  A video stream storage unit storing a video stream including the plurality of images as frame images;
前記再生部により再生される前記ビデオストリームを表示する表示部と  A display unit for displaying the video stream reproduced by the reproduction unit;
を備える請求項1から9の何れかに記載の電子アルバム表示システム。An electronic album display system according to any one of claims 1 to 9.
複数の画像を含む電子アルバムを表示する電子アルバム表示方法であって、
当該電子アルバム表示方法は、
再生部が前記複数の画像をフレーム画像として含むビデオストリームビデオストリームを再生する再生段階と、
リモートコントローラが無線通信によって前記再生部を遠隔操作するリモートコントロール段階と
を備え、
前記リモートコントローラは、
前記複数の画像のうち、少なくとも一部の画像を再生するスケジュール、及び当該少なくとも一部の画像のそれぞれについて、当該画像に固有の情報である画像情報を格納しているスケジュール格納部と、
複数の楽曲のそれぞれを、当該楽曲に固有の情報である楽曲情報に対応付けて格納している楽曲格納部と
を有し、
前記リモートコントロール段階は、
前記少なくとも一部の画像のそれぞれを前記スケジュールに従って再生させるべく、前記少なくとも一部の画像の表示を切り替える度に前記再生部を遠隔操作する遠隔操作段階と、
前記再生部により再生されている一の前記画像における前記画像情報、及び前記複数の楽曲のそれぞれにおける前記楽曲情報の関連度に基づいて、前記一の画像に対応する前記楽曲を、前記複数の楽曲から選択する楽曲選択段階と、
前記一の画像を含む、連続して再生される複数の前記画像が、前記再生部により再生されている場合に、当該一の画像に対応する前記楽曲を再生する楽曲再生段階と
を有する電子アルバム表示方法。
An electronic album display method for displaying an electronic album including a plurality of images,
The electronic album display method is
A playback stage in which a playback unit plays back a video stream including the plurality of images as frame images ; and
A remote controller for remotely controlling the playback unit by wireless communication, and
The remote controller is
A schedule storage unit that stores, for each of the at least some images, a schedule for reproducing at least some of the plurality of images, and image information that is information unique to the images;
A music storage unit that stores each of a plurality of music pieces in association with music information that is information unique to the music piece;
The remote control step includes
A remote operation step of remotely operating the reproduction unit every time the display of the at least some images is switched to reproduce each of the at least some images according to the schedule;
Based on the image information in the one image being reproduced by the reproduction unit and the degree of relevance of the music information in each of the plurality of songs, the music corresponding to the one image is converted into the plurality of songs. A music selection stage to select from,
An electronic album comprising: a music playback stage for playing back the music corresponding to the one image when the playback section plays back the plurality of images that are continuously played back, including the one image Display method.
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の撮像日時を示す撮像日時情報を格納しており、  The schedule storage unit stores imaging date / time information indicating the imaging date / time of the image for each of the schedule and the at least some images,
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲について予め定められた期間を示す期間情報に対応付けて格納しており、  The music storage unit stores each of the plurality of music in association with period information indicating a predetermined period for the music,
前記楽曲選択段階は、前記一の画像における撮像日時が含まれる前記期間を示す前記期間情報に対応する前記楽曲を、前記複数の楽曲から選択する  In the music selection step, the music corresponding to the period information indicating the period including the imaging date and time in the one image is selected from the plurality of music.
請求項11に記載の電子アルバム表示方法。The electronic album display method according to claim 11.
表示部が前記再生段階において再生される前記ビデオストリームを表示する表示段階を更に備え、  The display unit further comprising a display step of displaying the video stream played back in the playback step;
前記楽曲選択段階は、前記一の画像に対応する前記楽曲を選択する場合に、前記一の画像における撮像日時、及び前記表示部によって前記一の画像の直前に表示される他の前記画像における撮像日時の差が、予め定められた基準値より小さい場合、前記他の画像に対応するとして選択した前記楽曲を選択し、  In the music selection step, when selecting the music corresponding to the one image, the imaging date and time in the one image and the imaging in the other image displayed immediately before the one image by the display unit When the difference in date and time is smaller than a predetermined reference value, select the music selected as corresponding to the other image,
前記楽曲再生段階は、前記他の画像に対応するとして選択された前記楽曲が、前記一の画像に対応するとして選択された場合、前記再生部による前記一の画像の再生時に、当該選択された楽曲を引き続き再生する  In the music reproduction step, when the music selected as corresponding to the other image is selected as corresponding to the one image, the selected music image is selected when the reproduction unit reproduces the one image. Continue playing the song
請求項12に記載の電子アルバム表示方法。The electronic album display method according to claim 12.
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の撮像地点を示す撮像地点情報を格納しており、  The schedule storage unit stores imaging point information indicating an imaging point of the image for each of the schedule and the at least some images,
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲に関連する地域を示す地域情報に対応付けて格納しており、  The music storage unit stores each of the plurality of music in association with area information indicating an area related to the music,
前記楽曲選択段階は、前記一の画像における撮像地点が含まれる地域、及び前記複数の楽曲のそれぞれにおける前記地域情報の関連度に基づいて、前記複数の楽曲から前記楽曲を選択する  The music selection step selects the music from the plurality of music based on the region including the imaging point in the one image and the relevance of the regional information in each of the plurality of music.
請求項11に記載の電子アルバム表示方法。The electronic album display method according to claim 11.
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の内容を示す画像内容情報を格納しており、  The schedule storage unit stores image content information indicating the content of the image for each of the schedule and the at least some images,
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲の内容を示す楽曲内容情報に対応付けて格納しており、  The music storage unit stores each of the plurality of music in association with music content information indicating the content of the music,
前記楽曲選択段階は、前記一の画像における前記画像内容情報、及び前記複数の楽曲のそれぞれにおける前記楽曲内容情報の関連度に基づいて、前記複数の楽曲から前記楽曲を選択する  The music selection step selects the music from the plurality of music based on the image content information in the one image and the relevance of the music content information in each of the plurality of music.
請求項11に記載の電子アルバム表示方法。The electronic album display method according to claim 11.
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の特徴を示すキーワードを格納しており、  The schedule storage unit stores, for each of the schedule and the at least some of the images, a keyword indicating a feature of the image,
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲の特徴を示すキーワードに対応付けて格納しており、  The music storage unit stores each of the plurality of music in association with a keyword indicating the characteristics of the music,
前記楽曲選択段階は、前記一の画像におけるキーワード、及び前記複数の楽曲のそれぞれにおけるキーワードの関連度に基づいて、前記複数の楽曲から前記楽曲を選択する  The music selection step selects the music from the plurality of music based on the keyword in the one image and the relevance of the keyword in each of the plurality of music.
請求項11に記載の電子アルバム表示方法。The electronic album display method according to claim 11.
前記楽曲再生段階は、前記遠隔操作段階が前記一の画像を再生させるべく前記再生部を遠隔操作したタイミングに同期して、当該一の画像に対応する前記楽曲の再生を開始する請求項11から16の何れかに記載の電子アルバム表示方法。  12. The music playback step starts playback of the music corresponding to the one image in synchronization with the timing when the remote operation step remotely controls the playback unit to play back the one image. The electronic album display method according to any one of 16. ビデオストリーム格納部は、前記複数の画像をフレーム画像として含むビデオストリームを格納しており、  The video stream storage unit stores a video stream including the plurality of images as frame images,
前記電子アルバム表示方法は、前記再生段階において再生される前記ビデオストリームを表示する表示段階を更に備える請求項11から17の何れかに記載の電子アルバム表示方法。  The electronic album display method according to any one of claims 11 to 17, wherein the electronic album display method further includes a display step of displaying the video stream reproduced in the reproduction step.
ビデオストリームを再生する再生部を、無線通信によって遠隔操作するリモートコントローラであって、
前記ビデオストリームは複数の画像をフレーム画像として含み、
当該リモートコントローラは、
前記複数の画像のうち、少なくとも一部の画像を再生するスケジュール、及び当該少なくとも一部の画像のそれぞれについて、当該画像に固有の情報である画像情報を格納しているスケジュール格納部と、
複数の楽曲のそれぞれを、当該楽曲に固有の情報である楽曲情報に対応付けて格納している楽曲格納部と、
前記少なくとも一部の画像のそれぞれを前記スケジュールに従って再生させるべく、前記少なくとも一部の画像の表示を切り替える度に前記再生部を遠隔操作する遠隔操作部と、
前記再生部により再生されている一の前記画像における前記画像情報、及び前記複数の楽曲のそれぞれにおける前記楽曲情報の関連度に基づいて、前記一の画像に対応する前記楽曲を、前記複数の楽曲から選択する楽曲選択部と、
前記一の画像を含む、連続して再生される複数の前記画像が、前記再生部により再生されている場合に、当該一の画像に対応する前記楽曲を再生する楽曲再生部と
を備えるリモートコントローラ。
A remote controller for remotely operating a playback unit for playing back a video stream by wireless communication,
The video stream includes a plurality of images as frame images,
The remote controller
A schedule storage unit that stores, for each of the at least some images, a schedule for reproducing at least some of the plurality of images, and image information that is information unique to the images;
A music storage unit that stores each of the plurality of music pieces in association with music information that is information unique to the music piece;
A remote control unit that remotely controls the playback unit each time the display of the at least some image is switched to play back each of the at least some images according to the schedule;
Based on the image information in the one image being reproduced by the reproduction unit and the degree of relevance of the music information in each of the plurality of songs, the music corresponding to the one image is converted into the plurality of songs. A music selection section to select from,
A remote controller comprising: a music playback unit that plays back the music corresponding to the one image when the playback unit plays back the plurality of images that are continuously played, including the one image .
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の撮像日時を示す撮像日時情報を格納しており、  The schedule storage unit stores imaging date / time information indicating the imaging date / time of the image for each of the schedule and the at least some images,
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲について予め定められた期間を示す期間情報に対応付けて格納しており、  The music storage unit stores each of the plurality of music in association with period information indicating a predetermined period for the music,
前記楽曲選択部は、前記一の画像における撮像日時が含まれる前記期間を示す前記期間情報に対応する前記楽曲を、前記複数の楽曲から選択する  The music selection unit selects the music corresponding to the period information indicating the period including the imaging date and time in the one image from the plurality of music.
請求項19に記載のリモートコントローラ。The remote controller according to claim 19.
前記楽曲選択部は、前記一の画像に対応する前記楽曲を選択する場合に、前記一の画像における撮像日時、及び前記再生部により再生される前記ビデオストリームを表示する表示部によって前記一の画像の直前に表示される他の前記画像における撮像日時の差が、予め定められた基準値より小さい場合、前記他の画像に対応するとして選択した前記楽曲を選択し、  When the music selection unit selects the music corresponding to the one image, the one image is displayed by the display unit that displays the imaging date and time in the one image and the video stream reproduced by the reproduction unit. If the difference in imaging date and time in the other image displayed immediately before is smaller than a predetermined reference value, select the music selected as corresponding to the other image,
前記楽曲再生部は、前記他の画像に対応するとして選択された前記楽曲が、前記一の画像に対応するとして選択された場合、前記再生部による前記一の画像の再生時に、当該選択された楽曲を引き続き再生する  When the music selected as corresponding to the other image is selected as corresponding to the one image, the music reproducing unit is selected at the time of reproducing the one image by the reproducing unit. Continue playing the song
請求項20に記載のリモートコントローラ。The remote controller according to claim 20.
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の撮像地点を示す撮像地点情報を格納しており、  The schedule storage unit stores imaging point information indicating an imaging point of the image for each of the schedule and the at least some images,
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲に関連する地域を示す地域情報に対応付けて格納しており、  The music storage unit stores each of the plurality of music in association with area information indicating an area related to the music,
前記楽曲選択部は、前記一の画像における撮像地点が含まれる地域、及び前記複数の楽曲のそれぞれにおける前記地域情報の関連度に基づいて、前記複数の楽曲から前記楽曲を選択する  The music selection unit selects the music from the plurality of music based on the area including the imaging point in the one image and the relevance of the area information in each of the plurality of music.
請求項19に記載のリモートコントローラ。The remote controller according to claim 19.
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の内容を示す画像内容情報を格納しており、  The schedule storage unit stores image content information indicating the content of the image for each of the schedule and the at least some images,
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲の内容を示す楽曲内容情報に対応付けて格納しており、  The music storage unit stores each of the plurality of music in association with music content information indicating the content of the music,
前記楽曲選択部は、前記一の画像における前記画像内容情報、及び前記複数の楽曲のそれぞれにおける前記楽曲内容情報の関連度に基づいて、前記複数の楽曲から前記楽曲を選択する  The music selection unit selects the music from the plurality of music based on the image content information in the one image and the relevance of the music content information in each of the plurality of music.
請求項19に記載のリモートコントローラ。The remote controller according to claim 19.
前記スケジュール格納部は、前記スケジュール、及び前記少なくとも一部の画像のそれぞれについて、当該画像の特徴を示すキーワードを格納しており、  The schedule storage unit stores, for each of the schedule and the at least some of the images, a keyword indicating a feature of the image,
前記楽曲格納部は、前記複数の楽曲のそれぞれを、当該楽曲の特徴を示すキーワードに対応付けて格納しており、  The music storage unit stores each of the plurality of music in association with a keyword indicating the characteristics of the music,
前記楽曲選択部は、前記一の画像におけるキーワード、及び前記複数の楽曲のそれぞれにおけるキーワードの関連度に基づいて、前記複数の楽曲から前記楽曲を選択する  The music selection unit selects the music from the plurality of music based on a keyword in the one image and a degree of relevance of the keyword in each of the plurality of music.
請求項19に記載のリモートコントローラ。The remote controller according to claim 19.
前記楽曲再生部は、前記遠隔操作部が前記一の画像を再生させるべく前記再生部を遠隔操作したタイミングに同期して、当該一の画像に対応する前記楽曲の再生を開始する請求項19から24の何れかに記載のリモートコントローラ。  The music playback unit starts playback of the music corresponding to the one image in synchronization with a timing at which the remote control unit remotely operates the playback unit to play back the one image. The remote controller according to any one of 24. コンピュータを、請求項19から25の何れかに記載のリモートコントローラとして機能させるリモートコントロールプログラム。  A remote control program for causing a computer to function as the remote controller according to any one of claims 19 to 25.
JP2004170326A 2004-04-28 2004-06-08 Electronic album display system, electronic album display method, remote controller, and remote control program Expired - Fee Related JP4347752B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004170326A JP4347752B2 (en) 2004-04-28 2004-06-08 Electronic album display system, electronic album display method, remote controller, and remote control program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2004134750 2004-04-28
JP2004170326A JP4347752B2 (en) 2004-04-28 2004-06-08 Electronic album display system, electronic album display method, remote controller, and remote control program

Publications (2)

Publication Number Publication Date
JP2005341511A JP2005341511A (en) 2005-12-08
JP4347752B2 true JP4347752B2 (en) 2009-10-21

Family

ID=35494517

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004170326A Expired - Fee Related JP4347752B2 (en) 2004-04-28 2004-06-08 Electronic album display system, electronic album display method, remote controller, and remote control program

Country Status (1)

Country Link
JP (1) JP4347752B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007165957A (en) * 2005-12-09 2007-06-28 Nikon Corp Image display
JP5419539B2 (en) * 2009-05-14 2014-02-19 キヤノン株式会社 Playback device
JP5424707B2 (en) * 2009-05-14 2014-02-26 キヤノン株式会社 Playback device
JP5520585B2 (en) * 2009-12-04 2014-06-11 株式会社ソニー・コンピュータエンタテインメント Information processing device
JP5663953B2 (en) * 2010-05-26 2015-02-04 ヤマハ株式会社 Music generator

Also Published As

Publication number Publication date
JP2005341511A (en) 2005-12-08

Similar Documents

Publication Publication Date Title
TWI287399B (en) Information processing apparatus and method and recording medium storing program therefor
JP2004215281A5 (en)
KR20040111363A (en) Moving picture data generation system, moving picture data generation method, moving picture data generation program, and information recording medium
US20050259949A1 (en) Electronic-album displaying system. electronic-album displaying method, remote controller, machine readable medium storing remote control program, schedule generating device, and machine readable medium storing schedule generating program
JP2010187374A (en) Summary video-generating apparatus and summary video generating method
US20050168453A1 (en) Information recording medium and manufacturing method thereof
JP2003274352A (en) Content recording and reproducing device and content editing method
JP2010118859A (en) Information processor, information processing method, information processing program and imaging device
JP2007329833A (en) Information processing system, recording and reproducing device, reproducing terminal, information processing method and program
JP2008178090A (en) Video processing apparatus
JP4030440B2 (en) Message reproducing apparatus, message recording and reproducing method, and program
JP4347752B2 (en) Electronic album display system, electronic album display method, remote controller, and remote control program
JP2008167256A (en) Information processor and information processing method, and program
JP4399315B2 (en) Electronic album display system, electronic album display method, remote controller, and remote control program
JP2003153140A (en) Information recorder
JP4399317B2 (en) Electronic album display system, electronic album display method, remote controller, and remote control program
JP2008112495A (en) Recording and reproducing device
JP5074847B2 (en) Video / audio playback apparatus and video / audio playback method
JP2010251913A (en) Contents reproducing device, program, and semiconductor integrated circuit
JP4892162B2 (en) Information recording medium and production method thereof
JP4347779B2 (en) Electronic album display system, electronic album display method, remote controller, and remote control program
JP3566216B2 (en) Digital audio / video information recording device
JP4399316B2 (en) Electronic album display system, electronic album display method, remote controller, and remote control program
KR101483995B1 (en) A electronic album and a method reproducing the electronic album
JP2004328185A (en) Reproduction information file generating program

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20061211

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070201

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090407

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090526

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090714

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090716

R150 Certificate of patent or registration of utility model

Ref document number: 4347752

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120724

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120724

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130724

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees