JP2009032340A - Video audio reproduction device and video audio reproduction method - Google Patents

Video audio reproduction device and video audio reproduction method Download PDF

Info

Publication number
JP2009032340A
JP2009032340A JP2007196468A JP2007196468A JP2009032340A JP 2009032340 A JP2009032340 A JP 2009032340A JP 2007196468 A JP2007196468 A JP 2007196468A JP 2007196468 A JP2007196468 A JP 2007196468A JP 2009032340 A JP2009032340 A JP 2009032340A
Authority
JP
Japan
Prior art keywords
file
audio
image
files
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007196468A
Other languages
Japanese (ja)
Other versions
JP5074847B2 (en
Inventor
Koji Akita
幸治 秋田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Alpine Automotive Technology Inc
Original Assignee
Toshiba Alpine Automotive Technology Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Alpine Automotive Technology Inc filed Critical Toshiba Alpine Automotive Technology Inc
Priority to JP2007196468A priority Critical patent/JP5074847B2/en
Publication of JP2009032340A publication Critical patent/JP2009032340A/en
Application granted granted Critical
Publication of JP5074847B2 publication Critical patent/JP5074847B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Management Or Editing Of Information On Record Carriers (AREA)
  • Television Signal Processing For Recording (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a video audio reproduction device which associates music and image by a simple method while reflecting user's preference and allows users to view and listen to the associated music and image simultaneously in the video audio reproduction device which reproduces a recording medium in which both a music file and an image file are recorded. <P>SOLUTION: The video audio reproduction device is provided with a file edit section which receives file management information from the recording medium and associates an audio file and an image file based on the input file management information; and a video audio reproduction section which decodes the audio file and the image file and reproduces both audio and image in the audio and image files which are associated in the file edit section so that they can be simultaneously viewed and listened in the video audio reproduction device which reproduces the recording medium in which both the audio file and the image file are recorded. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は映像音声再生装置及び映像音声再生方法に係り、特に、夫々個別に作成された映像ファイルと音声ファイルとを連携して再生する映像音声再生装置及び映像音声再生方法に関する。   The present invention relates to a video / audio reproduction device and a video / audio reproduction method, and more particularly, to a video / audio reproduction device and a video / audio reproduction method for reproducing an individually created video file and audio file in cooperation with each other.

近時、メモリカード等のリムーバブル半導体メモリや記録型光ディスク等の記録媒体が急速に普及してきている。これに伴って、ユーザがパーソナルコンピュータ等を利用して映像ファイルや音声ファイルをこれらの記録媒体に記録し、記録した映像や音声を様々な状況で視聴する形態が増えてきている。   Recently, a recording medium such as a removable semiconductor memory such as a memory card or a recordable optical disk has been rapidly spread. Along with this, there are increasing forms in which a user records video and audio files on these recording media using a personal computer or the like, and views the recorded video and audio in various situations.

例えば、映像や音楽を家庭内で視聴するだけではなく、携帯型の再生装置や車載型の再生装置によって屋外や車の中で視聴する形態も一般的になってきている。   For example, not only watching video and music at home, but also a form of viewing outdoors or in a car with a portable playback device or a vehicle-mounted playback device has become common.

ユーザが視聴するファイルには、映像と音声とが一連のストリームとして組み込まれている映像音声ファイルの他、JPEG等の静止画ファイルやMP3等の音声ファイルなどのように映像と音声とが夫々別個に格納されているファイルも多い。   The files viewed by the user are separate from video and audio files such as JPEG still image files and MP3 audio files, in addition to video and audio files in which video and audio are incorporated as a series of streams. There are many files stored in.

後者の場合、例えば1つの音声ファイルを再生して音楽を聴きながら、ある1つの曲の再生期間中に複数の静止画ファイルを順次再生してディスプレイに表示する、といった視聴形態で音声ファイルと静止画ファイルを再生する場合がある。特許文献1にはこのような視聴形態に対応する技術が開示されている。
特開2007−142546号公報
In the latter case, for example, while playing a single audio file and listening to music, a plurality of still image files are sequentially played and displayed on the display during the playback period of a certain song, and the audio file and the still image are displayed in a viewing mode. The image file may be played back. Patent Document 1 discloses a technique corresponding to such a viewing mode.
JP 2007-142546 A

上述したように、パーソナルコンピュータ等の普及によって、ユーザ各自が自分の好みに応じた音楽や映像を記録型光ディスク(例えば、CD−R、CD−RW、CD−RAM、DVD−R、DVD−RW、DVD−RAM等)や半導体メモリに記録する形態が増えてきている。例えば、インターネットからMP3等の音楽ファイルをダウンロードしてCD−Rに記録し、或いはデジタルカメラやスキャナで取得したJPEG等の画像(以下、画像というときは主に静止画を指すものとする)ファイルをCD−Rに記録する。   As described above, with the widespread use of personal computers and the like, each user can record music and video according to his / her preference on a recordable optical disc (for example, CD-R, CD-RW, CD-RAM, DVD-R, DVD-RW). , DVD-RAM, etc.) and the form of recording in a semiconductor memory are increasing. For example, a music file such as MP3 downloaded from the Internet and recorded on a CD-R, or an image such as JPEG obtained by a digital camera or scanner (hereinafter referred to as an image mainly refers to a still image) file On the CD-R.

ところで、1つの記録媒体(例えば、1枚のCD−R)に音楽ファイルと画像ファイルを混在して記録した場合、従来からある通常の映像音声再生装置では、記録した順番で順次再生されることになる。例えば、1枚のCD−Rに、音楽(1)ファイル、画像(1)ファイル、音楽(2)ファイル、画像(2)ファイルの順で2つの音楽ファイルと2つの画像ファイルとを記録したとする。このCD−Rをスピーカとディスプレイ装置とを具備する映像音声再生装置で再生した場合、最初に音楽(1)ファイルが再生されスピーカから対応する音楽が出力されるものの、このときディスプレイ装置には音楽(1)ファイルの属性を示す文字情報等が表示されるだけである。音楽(1)ファイルの再生が終了すると次に画像(1)ファイルが再生されるが、このときは、ディスプレイ装置には対応する画像が表示されるものの、この間スピーカからは何も音声は出力されない。続く音楽(2)ファイル、及び画像(2)ファイルの再生についても同様である。   By the way, when a music file and an image file are mixedly recorded on one recording medium (for example, one CD-R), a conventional normal video / audio reproduction device sequentially reproduces them in the order of recording. become. For example, when two music files and two image files are recorded in the order of music (1) file, image (1) file, music (2) file, and image (2) file on one CD-R. To do. When this CD-R is played back by a video / audio playback device having a speaker and a display device, the music (1) file is played back first and the corresponding music is output from the speaker. (1) Only character information indicating file attributes is displayed. When the reproduction of the music (1) file is completed, the image (1) file is reproduced next. At this time, although the corresponding image is displayed on the display device, no sound is output from the speaker during this time. . The same applies to the reproduction of the subsequent music (2) file and image (2) file.

このような再生形態は必ずしもユーザの嗜好に合致するものではない。多くのユーザは自らの好みで音楽ファイルや画像ファイルを選択し記録する。1つのCD−Rに音楽ファイルと画像ファイルを記録した場合、音楽と画像とを同時に視聴したいという願望は極めて自然なものである。   Such a reproduction form does not necessarily match the user's preference. Many users select and record music files and image files according to their own preference. When music files and image files are recorded on one CD-R, the desire to view music and images at the same time is very natural.

また、車載型の映像音声再生装置の場合、ドライバは連続的に音楽を聴きながら、その一方で後部座席にいるユーザは音楽だけでなく映像も楽しみたいというニーズがある。しかしながら、従来の再生方法では画像ファイルを再生している場合には音楽の再生が中断されることになり、その結果ドライバに対しては快適な音楽環境を提供することができなかった。   In the case of an in-vehicle video / audio playback device, the driver continuously listens to music, while the user in the rear seat needs to enjoy not only music but also video. However, in the conventional reproduction method, music reproduction is interrupted when an image file is reproduced, and as a result, a comfortable music environment cannot be provided to the driver.

既存の映像音声再生装置の中には音楽と映像とを同時に視聴することができる機能を有するものもあるが、同時再生の方法はその映像音声再生装置に固定されたものであり、ユーザの嗜好が十分に反映されたものとはなっていない。   Some existing video / audio playback devices have a function to allow simultaneous viewing of music and video, but the simultaneous playback method is fixed to the video / audio playback device, and the user's preference Is not fully reflected.

本発明は上記事情に鑑みてなされたものであり、音楽ファイルと画像ファイルとが混在して記録された記録媒体を再生する映像音声再生装置において、音楽と画像とをユーザの好みを反映しつつも簡便な方法で関連付け、関連付けられた音楽と画像とを同時に視聴することができる映像音声再生装置及び映像音声再生方法を提供することを目的とする。   The present invention has been made in view of the above circumstances, and in a video / audio reproduction apparatus for reproducing a recording medium in which music files and image files are mixedly recorded, music and images are reflected on user's preference. It is another object of the present invention to provide a video / audio reproduction device and a video / audio reproduction method capable of simultaneously associating the associated music and images with a simple method.

上記課題を解決するため、本発明に係る映像音声再生装置は、請求項1に記載したように、音声ファイルと画像ファイルとが混在して記録されている記録媒体を再生する映像音声再生装置において、前記記録媒体からファイル管理情報を入力し、入力した前記ファイル管理情報に基づいて前記音声ファイルと前記画像ファイルとを関連付けるファイル編集部と、前記音声ファイルと前記画像ファイルとをデコードし、前記ファイル編集部にて関連付けられた前記音声ファイルの音声と前記画像ファイルの画像とを同時に視聴できるように再生する映像音声再生部と、を備えたことを特徴とする。   In order to solve the above-described problem, a video / audio reproduction device according to the present invention is a video / audio reproduction device that reproduces a recording medium in which an audio file and an image file are mixedly recorded. A file editing unit that inputs file management information from the recording medium, associates the audio file and the image file based on the input file management information, decodes the audio file and the image file, and And a video / audio reproduction unit configured to reproduce the audio of the audio file and the image of the image file associated with each other in an editing unit so that the audio file can be viewed simultaneously.

また、上記課題を解決するため、本発明に係る映像音声再生方法は、請求項10に記載したように、音声ファイルと画像ファイルとが混在して記録されている記録媒体を再生する映像音声再生方法において、前記記録媒体からファイル管理情報を入力し、入力した前記ファイル管理情報に基づいて前記音声ファイルと前記画像ファイルとを関連付け、前記音声ファイルと前記画像ファイルとをデコードし、関連付けられた前記音声ファイルの音声と前記画像ファイルの画像とを同時に視聴できるように再生する、ステップを備えたことを特徴とする。   Further, in order to solve the above-mentioned problem, the video / audio reproduction method according to the present invention is a video / audio reproduction for reproducing a recording medium in which an audio file and an image file are recorded in a mixed manner as described in claim 10. In the method, file management information is input from the recording medium, the audio file and the image file are associated based on the input file management information, the audio file and the image file are decoded, and the associated A step of reproducing the sound of the sound file and the image of the image file so as to be simultaneously viewable is provided.

本発明に係る映像音声再生装置及び映像音声再生方法によれば、音楽ファイルと画像ファイルとが混在して記録された記録媒体を再生する映像音声再生装置において、音楽と画像とをユーザの好みを反映しつつも簡便な方法で関連付け、関連付けられた音楽と画像とを同時に視聴することができる。   According to the video / audio reproduction device and the video / audio reproduction method according to the present invention, in a video / audio reproduction device for reproducing a recording medium in which a music file and an image file are mixedly recorded, music and images can be selected according to user preference. It is possible to view the associated music and images at the same time by associating them with a simple method while reflecting them.

本発明に係る映像音声再生装置及び映像音声再生方法の実施形態について、添付図面を参照して説明する。   Embodiments of a video / audio reproduction device and a video / audio reproduction method according to the present invention will be described with reference to the accompanying drawings.

(1)映像音声再生装置の構成
図1は、本発明の一実施形態に係る映像音声再生装置1の構成例を示すブロック図である。
(1) Configuration of Video / Audio Playback Device FIG. 1 is a block diagram showing a configuration example of a video / audio playback device 1 according to an embodiment of the present invention.

映像音声再生装置1は、記録媒体の一例としての光ディスク100を再生する光ディスクドライブ10、AVデコーダ(映像音声再生部)20、ファイル編集部30、モード設定部40、リモートコントローラ50等を備えて構成されている。   The video / audio reproduction device 1 includes an optical disc drive 10 that reproduces an optical disc 100 as an example of a recording medium, an AV decoder (video / audio reproduction unit) 20, a file editing unit 30, a mode setting unit 40, a remote controller 50, and the like. Has been.

光ディスクドライブ10は、CD−R、CD−RW、CD−RAM、DVD−R、DVD−RW、DVD−RAM等の記録型光ディスク100を再生する装置であり、図示しない光ピックアップやスピンドルモータ等を内蔵している。   The optical disk drive 10 is a device for reproducing a recordable optical disk 100 such as a CD-R, CD-RW, CD-RAM, DVD-R, DVD-RW, DVD-RAM, etc. Built-in.

本実施形態に係る映像音声再生装置1は、音声ファイルと画像ファイルとが混在して記録されている光ディスク100の再生方法に特徴を有するが、音楽CDやオーディオDVD等のように音声ファイルのみが記録されている光ディスクや、DVDビデオ等のように音声と映像とがストリームとして記録されている光ディスクの再生を排除するものではない。   The video / audio reproduction device 1 according to the present embodiment has a feature in the reproduction method of the optical disc 100 in which the audio file and the image file are mixedly recorded. However, only the audio file such as a music CD or an audio DVD can be used. It does not exclude the reproduction of an optical disc in which audio and video are recorded as a stream, such as a recorded optical disc or a DVD video.

ここでいう音声ファイルは、MP3(MPEG-1 Audio Layer-3)形式[.mp3]、WMA(Windows Media Audio)形式[.wma]、AAC(Advanced Audio Coding)形式[.aac]、WAVE形式[.wav]等を含む音声専用のファイルであり、特定の具体的なファイル形式に限定するものではない。また、ここでいう画像ファイルは、JPEG(Joint Photographic Experts Group)形式[.jpg]、GIF(Graphics Interchange Format)形式[.gif]、PNG(Portable Network Graphics)形式[.png]、BMP形式[.bmp]等を含む、主に静止画のファイルであり、特定の具体的なファイル形式に限定するものではない。なお、上記の[ ]内は各ファイル形式に対応する拡張子を示している。   The audio files here are MP3 (MPEG-1 Audio Layer-3) format [.mp3], WMA (Windows Media Audio) format [.wma], AAC (Advanced Audio Coding) format [.aac], WAVE format [ .wav] etc., which are audio-only files, and are not limited to a specific specific file format. The image file referred to here is a JPEG (Joint Photographic Experts Group) format [.jpg], GIF (Graphics Interchange Format) format [.gif], PNG (Portable Network Graphics) format [.png], BMP format [.jpg]. bmp] and the like are mainly still image files, and are not limited to a specific specific file format. In the above [], the extension corresponding to each file format is shown.

AVデコーダ20は、光ディスクドライブ10から音声ファイルを入力し、デコード処理した後DA変換し、アナログ信号としての音声信号を外部のスピーカ300に出力する。同様に、AVデコーダ20は、光ディスクドライブ10から画像ファイルを入力し、デコード処理した後DA変換し、アナログ信号としてのビデオ信号を外部のディスプレイ装置200に出力する。   The AV decoder 20 receives an audio file from the optical disc drive 10, decodes and then DA-converts it, and outputs an audio signal as an analog signal to the external speaker 300. Similarly, the AV decoder 20 receives an image file from the optical disc drive 10, decodes and then DA converts, and outputs a video signal as an analog signal to the external display device 200.

ファイル編集部30は、光ディスク100に記録されているファイル管理情報を読み取り、ファイル管理情報に基づいて光ディスク100に混在して記録されている音声ファイルと画像ファイルとを関連付ける処理を行う。また、ファイル編集部30は、関連付けられた音声ファイルの音声と画像ファイルの静止画が同時に視聴できるように、光ディスクドライブ10に対する読み取り制御と、AVデコーダ20に対する再生制御とを行う。これらの動作については後述する。   The file editing unit 30 reads the file management information recorded on the optical disc 100 and performs a process of associating the audio file and the image file recorded together on the optical disc 100 based on the file management information. Further, the file editing unit 30 performs reading control on the optical disc drive 10 and reproduction control on the AV decoder 20 so that the sound of the associated audio file and the still image of the image file can be viewed simultaneously. These operations will be described later.

モード設定部40は、本実施形態に係る映像音声再生装置1が有する複数の再生モードを設定する。例えば音声優先モードや画像優先モードといった再生モードを設定する。これの再生モードの設定は、ユーザがリモートコントローラ50を操作することによって行われる。   The mode setting unit 40 sets a plurality of playback modes of the video / audio playback device 1 according to the present embodiment. For example, a playback mode such as a voice priority mode or an image priority mode is set. The reproduction mode is set by the user operating the remote controller 50.

図1に示した映像音声再生装置1は、光ディスク100を記録媒体としたときの構成例であるが、本発明にて再生の対象とする記録媒体は光ディスク100に限定されるものではない。例えば、HDD(Hard Disk Drive)で再生される磁気ディスクや、MO(Magneto-Optical disk)ドライブで再生される光磁気ディスクも本発明にて再生の対象とする記録媒体となる。   The video / audio reproduction device 1 shown in FIG. 1 is a configuration example when the optical disc 100 is used as a recording medium, but the recording medium to be reproduced in the present invention is not limited to the optical disc 100. For example, a magnetic disk reproduced by an HDD (Hard Disk Drive) and a magneto-optical disk reproduced by an MO (Magneto-Optical disk) drive are also recording media to be reproduced by the present invention.

また、USBメモリ、SDカード、コンパクトフラッシュ、メモリスティック等のリムーバブル半導体メモリ等も本発明にて再生の対象とする記録媒体となる。   In addition, a removable semiconductor memory such as a USB memory, an SD card, a compact flash, a memory stick, or the like is a recording medium to be reproduced in the present invention.

(2)動作(映像音声再生方法)
上記のように構成された映像音声再生装置1の動作について、特に、音声と静止画とを同時に再生する映像音声再生方法について以下に説明する。
(2) Operation (Video / audio playback method)
Regarding the operation of the video / audio reproduction device 1 configured as described above, a video / audio reproduction method for reproducing audio and still images at the same time will be described below.

図2は、映像音声再生装置1で再生する光ディスク100(例えばCD−R)に記録されたファイルの一例を示す図である。図2に示した例では、MP3形式の7つの音楽ファイル(ファイル名として、音楽ファイル(1)〜音楽ファイル(7))と、JPEG形式の5つの画像ファイル(ファイル名として、画像ファイル(1)〜画像ファイル(5))とが混在して記録されている。   FIG. 2 is a diagram showing an example of a file recorded on the optical disc 100 (for example, CD-R) reproduced by the video / audio reproduction device 1. In the example shown in FIG. 2, seven music files in MP3 format (music files (1) to music file (7) as file names) and five image files in JPEG format (image file (1 as file names) ) To image file (5)) are recorded together.

各音声ファイルは、例えば、ユーザがインターネットを介して取得し、或いは音楽CDから個人ユースとして複製して作成したものである。また、各画像ファイルは、例えば、スキャナやデジタルカメラで取得したものである。   Each audio file is, for example, acquired by the user via the Internet or created by copying from a music CD for personal use. Each image file is acquired by, for example, a scanner or a digital camera.

図2は、これらの音声ファイルや画像ファイルをパーソナルコンピュータのディスク記録用アプリケーションソフトウェアを使用して光ディスク100に適宜の順序で記録したものを例示している。   FIG. 2 shows an example in which these audio files and image files are recorded on the optical disc 100 in an appropriate order using disc recording application software of a personal computer.

図3は、本実施形態に係る映像音声再生方法との比較のため、従来の再生方法を用いて、これらのファイルが記録された光ディスク100を再生したときの状況を示した図である。   FIG. 3 is a diagram showing a situation when the optical disc 100 in which these files are recorded is reproduced using a conventional reproduction method for comparison with the video / audio reproduction method according to the present embodiment.

従来の再生方法では、トラック番号を個別にいちいち指定するといった特別の操作をしない限り、通常は光ディスク100の記録順に先頭から再生されることになる。本例での光ディスク100には、図2に示したように、先頭から、音声ファイル(1)、音声ファイル(2)、画像ファイル(1)、画像ファイル(2)、音声ファイル(3)、音声ファイル(4)といった順序で記録されている。   In the conventional reproduction method, reproduction is usually performed from the top in the recording order of the optical disc 100 unless a special operation such as specifying track numbers individually is performed. In the optical disc 100 in this example, as shown in FIG. 2, from the top, an audio file (1), an audio file (2), an image file (1), an image file (2), an audio file (3), The audio files (4) are recorded in the order.

従って、図3(a)に示したように、まず、先頭の音楽ファイル(1)が光ディスク100から読み取られ、引き続き図3(b)に示したように音声のデコードと再生が行われる。音声ファイル(1)の再生が終了すると、次に音声ファイル(2)が光ディスク100から読み取られ、音声のデコードと再生が行われる。この間、画像ファイルに対する処理は行われないため、ディスプレイ装置には画像は表示されない。なお、音声ファイルの再生中にその属性情報を表わす文字情報等がディスプレイ装置に表示される場合があるが、ここではこれらの文字情報等の表示は画像表示とは呼ばないものとする。   Therefore, as shown in FIG. 3A, the first music file (1) is first read from the optical disc 100, and the audio is decoded and reproduced as shown in FIG. 3B. When the reproduction of the audio file (1) is completed, the audio file (2) is then read from the optical disc 100, and the audio is decoded and reproduced. During this time, since no processing is performed on the image file, no image is displayed on the display device. It should be noted that character information representing the attribute information may be displayed on the display device during reproduction of the audio file, but here the display of these character information is not called image display.

音楽ファイル(2)の再生が終了すると、次に光ディスク100から画像ファイル(1)が読み出されデコードされる。デコードされた静止画はAVデコーダ20の適宜のメモリに保持され、所定のフレームタイムで繰り返し読み出されて再生され、ディスプレイ装置200に表示される。静止画は予め定めた表示期間Tだけ継続的に再生され、表示期間Tの経過後画像ファイル(1)の再生が終了する。   When the reproduction of the music file (2) is completed, the image file (1) is then read from the optical disc 100 and decoded. The decoded still image is held in an appropriate memory of the AV decoder 20, repeatedly read out at a predetermined frame time, reproduced, and displayed on the display device 200. The still image is continuously reproduced for a predetermined display period T, and the reproduction of the image file (1) ends after the display period T elapses.

画像ファイル(1)の再生が終了すると画像ファイル(2)が光ディスク100から読み出され同様にして表示期間Tだけ継続的に再生される。画像ファイル(1)、(2)の再生中には音声ファイルの処理は行われないため、この間はスピーカ300からは音声が途切れてしまうことになる。   When the reproduction of the image file (1) is completed, the image file (2) is read from the optical disc 100 and continuously reproduced during the display period T in the same manner. Since the audio file is not processed during the reproduction of the image files (1) and (2), the audio is interrupted from the speaker 300 during this period.

画像ファイル(2)の次に記録されているのは音声ファイル(3)であるため、画像ファイル(2)の再生が終了した後、音声ファイル(3)の再生が行われる。   Since the audio file (3) is recorded next to the image file (2), the audio file (3) is reproduced after the reproduction of the image file (2) is completed.

このように、光ディスク100に音声ファイルと画像ファイルとが混在して記録されている場合、従来の再生方法ではそれぞれのファイルが順番に処理されて再生されるため、スピーカ300から音楽を再生しているときにはディスプレイ装置200には画像が表示されず、逆にディスプレイ装置200に画像が表示されているときにはスピーカ300からの音声が途絶えることになる。このような視聴形態は、音楽と画像とを同時に楽しみたいとするユーザに対して十分な満足感を与えるものではない。   As described above, when the audio file and the image file are mixedly recorded on the optical disc 100, each file is processed and reproduced in the conventional reproduction method, so that music is reproduced from the speaker 300. When an image is displayed, no image is displayed on the display device 200. Conversely, when an image is displayed on the display device 200, the sound from the speaker 300 is interrupted. Such a viewing mode does not give sufficient satisfaction to a user who wants to enjoy music and images at the same time.

そこで、本実施形態に係る映像音声再生装置1では、光ディスク100に音声ファイルと画像ファイルとが混在して記録されている場合であっても、音声と画像とを同時に視聴することが可能な再生モードを具備させている。また、いくつかのヴァリエーションを持った複数の再生モードを具備させ、複数の再生モードの中からユーザの好みに応じた再生モードを選択できるようにしている。以下、具体的に説明する。   Therefore, in the video / audio reproduction device 1 according to the present embodiment, even when the audio file and the image file are mixedly recorded on the optical disc 100, reproduction capable of simultaneously viewing the audio and the image is possible. Mode. Also, a plurality of playback modes having several variations are provided, and a playback mode according to the user's preference can be selected from the plurality of playback modes. This will be specifically described below.

本実施形態では、再生モードとして、音声優先モードと画像優先モードとを有している。さらに夫々の再生モードはノーマルモードとランダムモードと呼ぶ2つの再生モードを有している。   In this embodiment, the audio priority mode and the image priority mode are provided as playback modes. Further, each reproduction mode has two reproduction modes called a normal mode and a random mode.

(3)音声優先モード
図4は、再生モードとして音声優先モード及びノーマルモード(以下、音声優先モード(ノーマル)と略す)が選択されたときのファイル編集部30の処理を示す図である。ファイル編集部30の重要な機能に1つは、音声ファイルと画像ファイルとを関連付ける機能である。
(3) Voice Priority Mode FIG. 4 is a diagram showing processing of the file editing unit 30 when the voice priority mode and the normal mode (hereinafter, abbreviated as voice priority mode (normal)) are selected as the playback modes. One important function of the file editing unit 30 is a function of associating an audio file with an image file.

まず、ファイル編集部30は、光ディスク100に記録されているファイル管理情報を読込む。ファイル管理情報には、光ディスク100に実際に記録されているファイルのファイル名称やファイルの種類を示す拡張子が含まれており、その配列は光ディスク100に記録されているファイルの順序に対応している。   First, the file editing unit 30 reads file management information recorded on the optical disc 100. The file management information includes the file name of the file actually recorded on the optical disc 100 and an extension indicating the file type, and the arrangement corresponds to the order of the files recorded on the optical disc 100. Yes.

音声優先モード(ノーマル)では、光ディスク100に含まれているファイルの中から音声ファイルだけをまず抽出して音声ファイルの記録順に配列する。つぎに、光ディスク100のファイルの中から画像ファイルを抽出し、配列した音声ファイルの1つ1つに対して画像ファイルを1対1に関連付けていく。このときも画像ファイルの記録順に1対1に関連付けていく。   In the audio priority mode (normal), only audio files are first extracted from the files included in the optical disc 100 and arranged in the recording order of the audio files. Next, an image file is extracted from the files on the optical disc 100, and the image file is associated one-to-one with each of the arranged audio files. Also at this time, the image files are associated one-to-one in the recording order.

光ディスク100に記録されている音声ファイルの数と画像ファイルの数が同一である場合には、単純に1対1に関連付けが行われる。一方、音声ファイルの数と画像ファイルの数が異なる場合はそのまま単純に1対1の関連付けができない。   When the number of audio files recorded on the optical disc 100 and the number of image files are the same, the association is simply performed one-to-one. On the other hand, if the number of audio files and the number of image files are different, the one-to-one association cannot be performed as it is.

この場合、音声ファイルの数よりも画像ファイルの数が多い場合は、記録順序の古いほうから余った画像ファイルを切り捨てて音声ファイルの数と画像ファイルの数を一致させた後、1対1の関連付けを行う。一方、音声ファイルの数よりも画像ファイルの数が少ない場合は、図4に示したように、画像ファイルの一部を記録順序の新しい方から繰り返して不足分を補充する。このように音声優先モード(ノーマル)では、光ディスク100に含まれる音声ファイルを基準とした関連付けが行われる。   In this case, if the number of image files is larger than the number of audio files, the remaining image files from the oldest recording order are cut off to match the number of audio files and the number of image files, and then one-to-one. Make an association. On the other hand, when the number of image files is smaller than the number of audio files, as shown in FIG. 4, a part of the image file is repeated from the newest recording order to fill the shortage. As described above, in the audio priority mode (normal), the association is performed with the audio file included in the optical disc 100 as a reference.

音声ファイルと画像ファイルの関連付け処理が終了すると、ファイル編集部30は、音声と静止画とを同時に視聴することができように、光ディスク100とAVデコーダ20に対して制御を行う。即ち、関連付けられた音声ファイルの音声と、画像ファイルの静止画とを同時に再生するための制御を行う。   When the process of associating the audio file with the image file is completed, the file editing unit 30 controls the optical disc 100 and the AV decoder 20 so that the audio and the still image can be viewed simultaneously. That is, control is performed to simultaneously reproduce the audio of the associated audio file and the still image of the image file.

図5は、ファイル編集部30の制御によって実現される、ファイルの読み取り、デコード、及び再生のシーケンスの一例を示す図である。   FIG. 5 is a diagram illustrating an example of a file reading, decoding, and playback sequence realized by the control of the file editing unit 30.

まず、音声ファイル(1)の再生に先立ち、音声ファイル(1)と関連付けられている画像ファイル(1)を光ディスク100から読み取り、これをデコードする(図5(c)参照)。デコードされた静止画はAVデコーダ20内の適宜の画像メモリに保持され、所定のフレームレートで繰り返し読み出され、ディスプレイ装置200に継続的に表示される(図5(d)参照)。   First, prior to reproduction of the audio file (1), the image file (1) associated with the audio file (1) is read from the optical disc 100 and decoded (see FIG. 5C). The decoded still image is held in an appropriate image memory in the AV decoder 20, repeatedly read out at a predetermined frame rate, and continuously displayed on the display device 200 (see FIG. 5D).

一方、画像ファイル(1)の読み出しが終了した後は、光ディスク100に対して直ちにアクセスして、音声ファイル(1)を読み取り(図5(a)参照)、これとほぼ並行して読み出した音声ファイル(1)をデコードし再生する(図5(b)参照)。この再生は音声ファイル(1)の再生が総て終了するまでが行われる。   On the other hand, after the reading of the image file (1) is finished, the optical file 100 is immediately accessed to read the audio file (1) (see FIG. 5A), and the audio read almost in parallel therewith. File (1) is decoded and played back (see FIG. 5B). This reproduction is performed until the reproduction of the audio file (1) is completed.

音声ファイル(1)の再生が終了すると直ぐに次の音声ファイル(2)の再生が開始されるが、音声ファイル(2)の再生に先立ち、光ディスク100から画像ファイル(2)の読み取りが行われる。音声ファイル(1)の再生が終了する前に既に光ディスク100からの音声ファイル(1)の読み取りは終了している。従って音声ファイル(1)の再生が終了する前であっても画像ファイル(2)の読み取りは可能である。   Immediately after the reproduction of the audio file (1) is finished, the reproduction of the next audio file (2) is started, but the image file (2) is read from the optical disc 100 prior to the reproduction of the audio file (2). Reading of the audio file (1) from the optical disc 100 has already been completed before the reproduction of the audio file (1) is completed. Therefore, the image file (2) can be read even before the reproduction of the audio file (1) is completed.

光ディスク100から読み取られた画像ファイル(2)は直ぐにデコードされ、音楽ファイル(2)の再生開始とほぼ同時に画像ファイル(2)の再生が開始される。   The image file (2) read from the optical disc 100 is immediately decoded, and the reproduction of the image file (2) is started almost simultaneously with the start of the reproduction of the music file (2).

このように、本実施形態に係る映像音声再生装置1及び映像音声再生方法によれば、光ディスク100に記録された音声ファイルが順次途切れることなくスピーカ300から再生される一方、各音声ファイルに関連付けられた画像ファイルの静止画をディスプレイ装置200に音声と同時再生することが可能となる。   As described above, according to the video / audio reproduction device 1 and the video / audio reproduction method according to the present embodiment, the audio files recorded on the optical disc 100 are reproduced sequentially from the speaker 300 without interruption, and are associated with the respective audio files. The still image of the image file can be reproduced on the display device 200 simultaneously with the sound.

図6は、音声優先モード及びランダムモード(音声優先モード(ランダム))を選択したときの音声ファイルと画像ファイルとの関連付けを例示する図である。音声優先モード(ランダム)では、音声ファイルを記録順に配列した後、光ディスク100の中から画像ファイルをランダムに抽出して音声ファイルと1対1に関連付けている。この結果、音声は光ディスク100の記録順にスピーカ300から再生されるものの、静止画は記録の順序に関わらずランダムな順序でディスプレイ装置200に表示されることになる。   FIG. 6 is a diagram illustrating the association between an audio file and an image file when the audio priority mode and the random mode (audio priority mode (random)) are selected. In the audio priority mode (random), after the audio files are arranged in the recording order, the image files are randomly extracted from the optical disc 100 and associated with the audio files on a one-to-one basis. As a result, audio is reproduced from the speaker 300 in the recording order of the optical disc 100, but still images are displayed on the display device 200 in a random order regardless of the recording order.

このほか、一旦自動的に関連付けた画像ファイルをユーザが自由に変更できるようにしてもよい。例えば、音声優先モード(ノーマル)によって関連付けられた音声ファイルの名称と画像ファイルの名称とをディスプレイ装置200に表示し、ユーザが表示画面を見ながら自由に組合せを変更できるようにしてもよい。   In addition, the image file once automatically associated may be freely changed by the user. For example, the name of the audio file and the name of the image file associated in the audio priority mode (normal) may be displayed on the display device 200 so that the user can freely change the combination while viewing the display screen.

ここまでの説明では、音声ファイルと画像ファイルの関連付けを1対1としてきたが、1対n(nは2以上)としてもよい。   In the description so far, the association between the audio file and the image file has been made 1: 1, but it may be made 1-to-n (n is 2 or more).

図7は、音声ファイルと画像ファイルの関連付けを1対2としたときの例を示す図である。例えば、音声ファイル(1)に対して画像ファイル(1)と画像ファイル(2)の2つの画像ファイルを関連付ける。同様に、音声ファイル(2)に対して画像ファイル(3)と画像ファイル(4)の2つの画像ファイルを関連付ける。   FIG. 7 is a diagram illustrating an example when the association between the audio file and the image file is 1: 2. For example, the image file (1) and the image file (2) are associated with the audio file (1). Similarly, the image file (3) and the image file (4) are associated with the audio file (2).

図8は、1対2によって関連付けられた音声ファイルと画像ファイルの読み取り、デコード、再生のシーケンスの一例を示す図である。   FIG. 8 is a diagram illustrating an example of a sequence of reading, decoding, and reproduction of an audio file and an image file that are associated in a one-to-two manner.

この場合、音声ファイル(1)の再生に先立ち、関連付けられた2つの画像ファイル(1)及び(2)が光ディスク100から読み取られる(図8(c)参照)。読み取られた2つの画像ファイルはデコードされてAVデコーダ20内の適宜の画像メモリに保持される。   In this case, prior to reproduction of the audio file (1), the two associated image files (1) and (2) are read from the optical disc 100 (see FIG. 8C). The two read image files are decoded and held in an appropriate image memory in the AV decoder 20.

光ディスク100から音声ファイル(1)の読み取りが開始されると、これとほぼ同時並行して音声ファイル(1)のデコードと再生も開始される(図8(a)及び(b)参照)。   When reading of the audio file (1) from the optical disc 100 is started, decoding and playback of the audio file (1) are also started almost simultaneously (see FIGS. 8A and 8B).

一方、保持されている画像ファイル(1)の静止画の再生も、音声ファイル(1)の再生と同時に開始される。この静止画の再生は、音声ファイル(1)の再生期間の1/2まで継続され、その後画像ファイル(2)の静止画の再生に切り換える。画像ファイル(2)の再生は音声ファイル(1)の再生が終了するまで行われる。   On the other hand, the reproduction of the still image of the held image file (1) is started simultaneously with the reproduction of the audio file (1). The reproduction of the still image is continued until half of the reproduction period of the audio file (1), and then switched to the reproduction of the still image of the image file (2). The reproduction of the image file (2) is performed until the reproduction of the audio file (1) is completed.

音声ファイル(1)の再生が終了すると直ぐに音声ファイル(2)の再生が開始されるが、音声ファイル(2)の再生に先立ち、画像ファイル(3)及び(4)の読み取りとデコードが行われる。この処理自体は先に説明した1対1の関連付けのときと同様のものである。   As soon as the reproduction of the audio file (1) is finished, the reproduction of the audio file (2) is started. However, prior to the reproduction of the audio file (2), the image files (3) and (4) are read and decoded. . This process itself is the same as the one-to-one association described above.

音楽ファイルと画像ファイルとを1対nで関連付けた場合、音楽ファイルを記録順に連続的に再生する一方、1つの音楽ファイルに関連付けられたn個の画像ファイル(n枚の静止画)を、対応する音楽ファイルの再生期間中に順次切り換えながら同時に再生することが可能となる。   When a music file and an image file are associated in a one-to-n correspondence, the music file is continuously played in the recording order, while n image files (n still images) associated with one music file are supported. It is possible to simultaneously play music files while sequentially switching them during the music file playing period.

(4)画像優先モード
次に、画像優先モードについて説明する。
(4) Image priority mode Next, the image priority mode will be described.

図9は、再生モードとして画像優先モード及びノーマルモード(以下、画像優先モード(ノーマル)と略す)が選択されたときのファイル編集部30の処理を示す図である。   FIG. 9 is a diagram illustrating processing of the file editing unit 30 when the image priority mode and the normal mode (hereinafter, abbreviated as image priority mode (normal)) are selected as the playback modes.

画像優先モード(ノーマル)では、光ディスク100に含まれているファイルの中から画像ファイルだけをまず抽出して画像ファイルの記録順に配列する。つぎに、光ディスク100のファイルの中から音声ファイルを抽出し、配列した画像ファイルの1つ1つに対して音声ファイルを1対1に関連付けていく。このときも音声ファイルの記録順に1対1に関連付けていく。   In the image priority mode (normal), only image files are first extracted from the files included in the optical disc 100 and arranged in the recording order of the image files. Next, an audio file is extracted from the files on the optical disc 100, and the audio file is associated one-to-one with each of the arranged image files. Also at this time, the audio files are associated one by one in the recording order.

画像優先モード(ノーマル)では、光ディスク100に含まれる画像ファイルを基準とした関連付けが行われる。即ち、光ディスク100に記録されている画像ファイルの数と音声ファイルの数が同一である場合には、単純に1対1に関連付けが行われるが、画像ファイルの数よりも音声ファイルの数が多い場合は、記録順序の古いほうから余った音声ファイルが切り捨てられる。図9の例では、光ディスク100に記録されている画像ファイルの数は5つであり、音声ファイルの数は7つである。このような場合、音声ファイル(6)と音声ファイル(7)の2つの音声ファイルが切り捨てられ、残った5つの音声ファイルが画像ファイルと1対1に関連付けられる。   In the image priority mode (normal), the association is performed based on the image file included in the optical disc 100. That is, when the number of image files recorded on the optical disc 100 is the same as the number of audio files, the association is simply made one-to-one, but the number of audio files is larger than the number of image files. In this case, the remaining audio file is cut off from the oldest recording order. In the example of FIG. 9, the number of image files recorded on the optical disc 100 is five, and the number of audio files is seven. In such a case, the two audio files of the audio file (6) and the audio file (7) are cut off, and the remaining five audio files are associated with the image file on a one-to-one basis.

一方、画像ファイルの数よりも音声ファイルの数が少ない場合は、音声ファイルの一部を記録順序の新しい方から繰り返して不足分を補充する。   On the other hand, if the number of audio files is smaller than the number of image files, a part of the audio files is repeated from the newest recording order to fill the shortage.

図10は、画像優先モード(ノーマル)が設定されたときにファイル編集部30の制御によって実現される、ファイルの読み取り、デコード、及び再生のシーケンスの一例を示す図である。   FIG. 10 is a diagram illustrating an example of a file reading, decoding, and reproduction sequence realized by the control of the file editing unit 30 when the image priority mode (normal) is set.

画像優先モードでは再生シーケンスにおいても画像の再生が優先される。即ち、静止画の再生期間として予め設定された期間Tを基準にして、この再生期間T毎に静止画を順次切り換えて表示するシーケンスである。   In the image priority mode, image reproduction is given priority in the reproduction sequence. In other words, this is a sequence in which still images are sequentially switched and displayed for each reproduction period T with reference to a preset period T as a still image reproduction period.

まず、光ディスク100の先頭側に記録されている画像ファイル(1)を光ディスク100から読み取り、これをデコードする(図10(c)参照)。デコードされた静止画はAVデコーダ20内の適宜の画像メモリに保持され、所定のフレームレートで繰り返し読み出され、ディスプレイ装置200に継続的に表示される(図10(d)参照)。画像ファイル(1)の読み出しが終了した後は、光ディスク100に対して直ちにアクセスして、音声ファイル(1)を読み取り(図10(a)参照)、これとほぼ並行して読み出した音声ファイル(1)をデコードし再生する(図10(b)参照)。   First, the image file (1) recorded on the head side of the optical disc 100 is read from the optical disc 100 and decoded (see FIG. 10C). The decoded still image is held in an appropriate image memory in the AV decoder 20, repeatedly read out at a predetermined frame rate, and continuously displayed on the display device 200 (see FIG. 10D). After the reading of the image file (1) is finished, the optical file 100 is immediately accessed to read the audio file (1) (see FIG. 10A), and the audio file read almost in parallel ( 1) is decoded and reproduced (see FIG. 10B).

画像ファイル(1)の静止画は、設定されている再生期間Tの間継続的に表示され、再生期間Tが経過すると直ちに次の画像ファイル(2)の静止画に切り替えられる。このため、画像ファイル(1)の再生が終了する前に画像ファイル(2)が光ディスク100から読み出されデコード処理が行われる。   The still image of the image file (1) is continuously displayed during the set reproduction period T, and immediately after the reproduction period T elapses, the still image of the next image file (2) is switched. For this reason, the image file (2) is read from the optical disc 100 and the decoding process is performed before the reproduction of the image file (1) is completed.

一方、音声ファイル(1)の再生は、画像ファイル(1)の再生が終了すると次の音楽ファイル(2)の再生に切り換えられる。   On the other hand, the reproduction of the audio file (1) is switched to the reproduction of the next music file (2) when the reproduction of the image file (1) is completed.

予め設定されている静止画の再生期間Tと音楽ファイルの再生時間は必ずしも一致しない。このため、例えば、音楽ファイル(2)のように再生時間が静止画の再生期間Tよりも長い場合は再生の途中で強制的に打ち切られる。逆に、音楽ファイル(3)や音楽ファイル(4)のように再生時間が静止画の再生期間Tよりも短い場合は、再生期間Tに達するまで音楽ファイルの先頭からリピートして再生される。   The reproduction period T of the still image set in advance and the reproduction time of the music file do not necessarily match. For this reason, for example, when the playback time is longer than the still image playback period T as in the music file (2), the playback is forcibly terminated during the playback. Conversely, when the playback time is shorter than the still image playback period T, such as the music file (3) or the music file (4), the music file is repeatedly played from the beginning until the playback period T is reached.

このように、画像優先モード(ノーマル)では画像の再生が優先されるが、関連付けられた画像ファイルの静止画と音声ファイルの音声が同時に再生されるという点に関しては音声優先モード(ノーマル)と同様である。   As described above, image playback is prioritized in the image priority mode (normal), but the sound of the associated image file and the sound of the audio file are played back at the same time as in the sound priority mode (normal). It is.

図11は、画像優先モード及びランダムモード(画像優先モード(ランダム))を選択したときの画像ファイルと音声ファイルとの関連付けを例示する図である。画像優先モード(ランダム)では、画像ファイルを記録順に配列した後、光ディスク100の中から音声ファイルをランダムに抽出して画像ファイルと1対1に関連付けている。この結果、静止画は光ディスク100の記録順にディスプレイ装置200に表示されるものの、音声、例えば音楽は、記録の順序に関わらずランダムな曲順でスピーカ300から再生されることになる。なお、一旦自動的に関連付けた音声ファイルをユーザが自由に変更できるようにしてもよい。   FIG. 11 is a diagram illustrating an association between an image file and an audio file when the image priority mode and the random mode (image priority mode (random)) are selected. In the image priority mode (random), after the image files are arranged in the recording order, audio files are randomly extracted from the optical disc 100 and associated with the image files in a one-to-one relationship. As a result, although the still image is displayed on the display device 200 in the recording order of the optical disc 100, the sound, for example, music is reproduced from the speaker 300 in a random song order regardless of the recording order. Note that the voice file once automatically associated may be freely changed by the user.

音声優先モード或いは画像優先モードにおける音声ファイルと画像ファイルとの関連付けの方法には、上述した記録順やランダム順の他にも種々の形態が考えられる。例えば、ファイル名称を用いた関連付けとしてもよい。   Various methods other than the recording order and the random order described above can be considered as a method of associating the audio file and the image file in the audio priority mode or the image priority mode. For example, the association may be made using a file name.

図12は、音声優先モードにおいて、同一のファイル名称の音楽ファイルと画像ファイルとを関連付ける形態について例示したものである。   FIG. 12 illustrates a form in which a music file having the same file name is associated with an image file in the voice priority mode.

ユーザは光ディスク100にファイルを記録するときに任意のファイル名称を付けることができる。そこで、同時に視聴したい音声ファイルと画像ファイルに対して同じファイル名称を付けて記録する。ファイル編集部30では、光ディスク100のファイル管理情報の中から同一のファイル名称の音楽ファイルと画像ファイルとを検索し、これら2つのファイルを互いに関連付ける。関連付けられた音声ファイルと画像ファイルとは前述した処理によって同時に再生される。つまり、同じファイル名称の音声(例えば音楽)と静止画とを同時に視聴することができる。   The user can give an arbitrary file name when recording a file on the optical disc 100. Therefore, the same file name is assigned to the audio file and the image file that are desired to be simultaneously viewed and recorded. The file editing unit 30 searches the file management information on the optical disc 100 for a music file and an image file having the same file name, and associates these two files with each other. The associated audio file and image file are reproduced simultaneously by the above-described processing. That is, it is possible to simultaneously view a sound (for example, music) having the same file name and a still image.

以上説明してきたように、本実施形態に係る映像音声再生装置1及び映像音声再生方法によれば、音声ファイルと画像ファイルとが混在して記録された記録媒体であっても、音楽と画像とをユーザの好みを反映しつつも簡便な方法で関連付け、関連付けられた音楽と画像とを同時に視聴することができる。   As described above, according to the video / audio reproduction device 1 and the video / audio reproduction method according to the present embodiment, music and images can be recorded even on a recording medium in which audio files and image files are mixedly recorded. Can be associated with a simple method while reflecting the user's preference, and the associated music and images can be viewed simultaneously.

なお、本発明は上記の実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせても良い。   Note that the present invention is not limited to the above-described embodiments as they are, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. In addition, various inventions can be formed by appropriately combining a plurality of components disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, the constituent elements over different embodiments may be appropriately combined.

本発明の実施形態に係る映像音声再生装置の構成例を示すブロック図。1 is a block diagram showing a configuration example of a video / audio reproduction device according to an embodiment of the present invention. 記録媒体に混在して記録されている音声ファイルと画像ファイルの一例を示す図。The figure which shows an example of the audio | voice file currently recorded on the recording medium, and the image file. 従来の再生方法による、読み取り、デコード、及び再生のシーケンス例を示す図。The figure which shows the example of a sequence of reading, decoding, and reproduction | regeneration by the conventional reproduction | regeneration method. 音声優先モード(ノーマル)における、音声ファイルと画像ファイルとの関連付けの一例を説明する図。The figure explaining an example of correlation with an audio file and an image file in audio | voice priority mode (normal). 音声優先モード(ノーマル)における、読み取り、デコード、及び再生のシーケンス例を示す図。The figure which shows the example of a sequence of reading, decoding, and reproduction | regeneration in audio | voice priority mode (normal). 音声優先モード(ランダム)における、音声ファイルと画像ファイルとの関連付けの一例を説明する図。The figure explaining an example of correlation with an audio | voice file and an image file in audio | voice priority mode (random). 音声ファイルと画像ファイルとの関連付けを1対複数とした場合の関連付けの一例を説明する図。The figure explaining an example of the association when the association between the audio file and the image file is one-to-multiple. 音声ファイルと画像ファイルとの関連付けを1対複数とした場合の、読み取り、デコード、及び再生のシーケンス例を示す図。The figure which shows the example of a sequence of a reading, a decoding, and a reproduction | regeneration in case the correlation of an audio | voice file and an image file is made into one-to-multiple. 画像優先モード(ノーマル)における、音声ファイルと画像ファイルとの関連付けの一例を説明する図。The figure explaining an example of correlation with an audio file and an image file in image priority mode (normal). 画像優先モード(ノーマル)における、読み取り、デコード、及び再生のシーケンス例を示す図。The figure which shows the example of a sequence of a reading, decoding, and reproduction | regeneration in image priority mode (normal). 画像優先モード(ランダム)における、音声ファイルと画像ファイルとの関連付けの一例を説明する図。The figure explaining an example of correlation with an audio file and an image file in image priority mode (random). ファイル名称によって関連付けを行った場合の関連付けの一例を説明する図。The figure explaining an example of association at the time of performing association by a file name.

符号の説明Explanation of symbols

1 映像音声再生装置
10 光ディスクドライブ
20 AVデコーダ(映像音声再生部)
30 ファイル編集部
40 モード設定部
50 リモートコントローラ
1 Video / Audio Playback Device 10 Optical Disc Drive 20 AV Decoder (Video / Audio Playback Unit)
30 File editing unit 40 Mode setting unit 50 Remote controller

Claims (18)

音声ファイルと画像ファイルとが混在して記録されている記録媒体を再生する映像音声再生装置において、
前記記録媒体からファイル管理情報を入力し、入力した前記ファイル管理情報に基づいて前記音声ファイルと前記画像ファイルとを関連付けるファイル編集部と、
前記音声ファイルと前記画像ファイルとをデコードし、前記ファイル編集部にて関連付けられた前記音声ファイルの音声と前記画像ファイルの画像とを同時に視聴できるように再生する映像音声再生部と、
を備えたことを特徴とする映像音声再生装置。
In a video / audio reproduction device for reproducing a recording medium in which audio files and image files are recorded together,
A file editing unit that inputs file management information from the recording medium, and associates the audio file and the image file based on the input file management information;
A video / audio reproduction unit that decodes the audio file and the image file, and reproduces the audio of the audio file and the image of the image file associated with each other in the file editing unit;
An audio / video playback device comprising:
外部からの入力情報によって、少なくとも音声優先モードと画像優先モードとを含む再生モードが設定可能なモード設定部をさらに備え、
前記音声優先モードに設定されたときには、
前記ファイル編集部は、
前記ファイル管理情報の中から音声ファイルの管理情報を抽出し前記記録媒体に記録されている音声ファイルの記録順に配列する一方、前記ファイル管理情報の中から画像ファイルの管理情報を抽出し、前記音声ファイルに対して前記画像ファイルを1対1又は1対複数に関連付け、
前記映像音声再生部は、
前記ファイル編集部にて配列された順に前記記録媒体から前記音声ファイルを読み出して順次再生する一方、各音声ファイルの再生に先立って各音声ファイルに関連付けられた前記画像ファイルを前記記録媒体から読み出し、各音声ファイルの再生が終了するまで前記画像ファイルをデコードして得られる1枚又は複数枚の静止画像を継続的に再生し続ける、
ことを特徴とする請求項1に記載の映像音声再生装置。
A mode setting unit capable of setting a playback mode including at least a voice priority mode and an image priority mode according to external input information;
When the voice priority mode is set,
The file editing unit
The audio file management information is extracted from the file management information and arranged in the recording order of the audio files recorded on the recording medium, while the image file management information is extracted from the file management information, and the audio Associating the image file with the file one-to-one or one-to-one,
The video / audio reproduction unit includes:
The audio files are read from the recording medium in the order arranged in the file editing unit and sequentially reproduced, while the image files associated with the audio files are read from the recording medium prior to the reproduction of the audio files, Continue to play back one or more still images obtained by decoding the image file until playback of each audio file is completed,
The video / audio reproduction device according to claim 1.
前記ファイル編集部は、
前記画像ファイルの数が前記音声ファイルの数よりも多い場合には前記画像ファイルの一部を切り捨てて関連付け、前記画像ファイルの数が前記音声ファイルの数よりも少ない場合には前記画像ファイルの一部を重複して関連付ける、
ことを特徴とする請求項2に記載の映像音声再生装置。
The file editing unit
When the number of the image files is larger than the number of the audio files, a part of the image files is cut off and associated, and when the number of the image files is smaller than the number of the audio files, one of the image files Associate parts in duplicate,
The video / audio reproduction device according to claim 2.
前記モード設定部は、ノーマル再生モード及びランダム再生モードがさらに設定可能であり、
前記ファイル編集部は、
前記ノーマル再生モードに設定された場合には、前記記録媒体に記録された順に前記画像ファイルの管理情報を抽出して前記音声ファイルに関連付け、
前記ランダム再生モードに設定された場合には、前記記録媒体からランダムに前記画像ファイルの管理情報を抽出して前記音声ファイルに関連付ける、
ことを特徴とする請求項2に記載の映像音声再生装置。
The mode setting unit can further set a normal playback mode and a random playback mode,
The file editing unit
When the normal playback mode is set, the management information of the image file is extracted in the order recorded in the recording medium and associated with the audio file,
When the random playback mode is set, management information of the image file is randomly extracted from the recording medium and associated with the audio file.
The video / audio reproduction device according to claim 2.
外部からの入力情報によって、少なくとも音声優先モードと画像優先モードとを含む再生モードを設定するモード設定部をさらに備え、
前記画像優先モードに設定されたときには、
前記ファイル編集部は、
前記ファイル管理情報の中から画像ファイルの管理情報を抽出し前記記録媒体に記録されている画像ファイルの記録順に配列する一方、前記ファイル管理情報の中から音声ファイルの管理情報を抽出し、前記画像ファイルに対して前記音声ファイルを1対1に関連付け、
前記映像音声再生部は、
前記ファイル編集部にて配列された順に前記記録媒体から前記画像ファイルを読み出し、予め定められた再生期間中、前記画像ファイルをデコードして得られる静止画像を継続的に再生する一方、前記各静止画像の再生期間中、各画像ファイルに関連付けられた前記各音声ファイルを読み出して再生する、
ことを特徴とする請求項1に記載の映像音声再生装置。
A mode setting unit for setting a playback mode including at least a voice priority mode and an image priority mode according to external input information;
When the image priority mode is set,
The file editing unit
Image file management information is extracted from the file management information and arranged in the recording order of the image files recorded on the recording medium, while audio file management information is extracted from the file management information, and the image One-to-one association of the audio file to the file,
The video / audio reproduction unit includes:
The image files are read from the recording medium in the order arranged in the file editing unit, and the still images obtained by decoding the image files are continuously reproduced during a predetermined reproduction period, while the still images are During the playback period of the image, each audio file associated with each image file is read and played,
The video / audio reproduction device according to claim 1.
前記映像音声再生部は、
前記各音声ファイルの再生時間が前記各静止画像の再生期間よりも長い場合は、前記各静止画像の再生期間が終了した時点で前記各音声ファイルの再生を終了し、
前記各音声ファイルの再生時間が前記各静止画像の再生期間よりも短い場合は、前記各静止画像の再生期間中前記各音声ファイルを繰り返し再生する、
ことを特徴とする請求項5に記載の映像音声再生装置。
The video / audio reproduction unit includes:
If the playback time of each audio file is longer than the playback period of each still image, the playback of each audio file is terminated when the playback period of each still image ends,
When the reproduction time of each audio file is shorter than the reproduction period of each still image, the audio file is repeatedly reproduced during the reproduction period of each still image.
The video / audio reproduction device according to claim 5.
前記ファイル編集部は、
前記音声ファイルの数が前記画像ファイルの数よりも多い場合には前記音声ファイルの一部を切り捨てて関連付け、前記音声ファイルの数が前記画像ファイルの数よりも少ない場合には前記音声ファイルの一部を重複して関連付ける、
ことを特徴とする請求項5に記載の映像音声再生装置。
The file editing unit
When the number of the audio files is larger than the number of the image files, a part of the audio files is cut off and associated, and when the number of the audio files is smaller than the number of the image files, one of the audio files Associate parts in duplicate,
The video / audio reproduction device according to claim 5.
前記モード設定部は、ノーマル再生モード及びランダム再生モードがさらに設定可能であり、
前記ファイル編集部は、
前記ノーマル再生モードに設定された場合には、前記記録媒体に記録された順に前記音声ファイルの管理情報を抽出して前記画像ファイルに関連付け、
前記ランダム再生モードに設定された場合には、前記記録媒体からランダムに前記音声ファイルの管理情報を抽出して前記画像ファイルに関連付ける、
ことを特徴とする請求項5に記載の映像音声再生装置。
The mode setting unit can further set a normal playback mode and a random playback mode,
The file editing unit
When the normal playback mode is set, the management information of the audio file is extracted in the order recorded in the recording medium and associated with the image file.
When the random playback mode is set, management information of the audio file is randomly extracted from the recording medium and associated with the image file.
The video / audio reproduction device according to claim 5.
前記ファイル編集部は、
前記ファイル管理情報に含まれるファイル名称と拡張子とを判別し、
音楽ファイルの拡張子を有するファイルと、画像ファイルの拡張子を有するファイルとが同一のファイル名称である場合には、これらのファイルを互いに関連付ける、
ことを特徴とする請求項1に記載の映像音声再生装置。
The file editing unit
Determine the file name and extension included in the file management information,
When a file having an extension of a music file and a file having an extension of an image file have the same file name, these files are associated with each other.
The video / audio reproduction device according to claim 1.
音声ファイルと画像ファイルとが混在して記録されている記録媒体を再生する映像音声再生方法において、
前記記録媒体からファイル管理情報を入力し、入力した前記ファイル管理情報に基づいて前記音声ファイルと前記画像ファイルとを関連付け、
前記音声ファイルと前記画像ファイルとをデコードし、関連付けられた前記音声ファイルの音声と前記画像ファイルの画像とを同時に視聴できるように再生する、
ステップを備えたことを特徴とする映像音声再生方法。
In a video / audio reproduction method of reproducing a recording medium in which audio files and image files are recorded together,
Input file management information from the recording medium, and associate the audio file and the image file based on the input file management information,
Decoding the audio file and the image file, and playing the audio of the associated audio file and the image of the image file so that they can be viewed simultaneously;
A video / audio reproduction method comprising steps.
外部からの入力情報によって、少なくとも音声優先モードと画像優先モードとを含む再生モードを設定するステップをさらに備え、
前記音声優先モードに設定されたときには、
前記関連付けステップでは、
前記ファイル管理情報の中から音声ファイルの管理情報を抽出し前記記録媒体に記録されている音声ファイルの記録順に配列する一方、前記ファイル管理情報の中から画像ファイルの管理情報を抽出し、前記音声ファイルに対して前記画像ファイルを1対1又は1対複数に関連付け、
前記再生ステップでは、
前記ファイル編集部にて配列された順に前記記録媒体から前記音声ファイルを読み出して順次再生する一方、各音声ファイルの再生に先立って各音声ファイルに関連付けられた前記画像ファイルを前記記録媒体から読み出し、各音声ファイルの再生が終了するまで前記画像ファイルをデコードして得られる1枚又は複数枚の静止画像を継続的に再生し続ける、
ことを特徴とする請求項10に記載の映像音声再生方法。
A step of setting a playback mode including at least a voice priority mode and an image priority mode according to input information from outside;
When the voice priority mode is set,
In the association step,
The audio file management information is extracted from the file management information and arranged in the recording order of the audio files recorded on the recording medium, while the image file management information is extracted from the file management information, and the audio Associating the image file with the file one-to-one or one-to-one,
In the reproduction step,
The audio files are read from the recording medium in the order arranged in the file editing unit and sequentially reproduced, while the image files associated with the audio files are read from the recording medium prior to the reproduction of the audio files, Continue to play back one or more still images obtained by decoding the image file until playback of each audio file is completed,
The video / audio reproduction method according to claim 10.
前記関連付けステップでは、
前記画像ファイルの数が前記音声ファイルの数よりも多い場合には前記画像ファイルの一部を切り捨てて関連付け、前記画像ファイルの数が前記音声ファイルの数よりも少ない場合には前記画像ファイルの一部を重複して関連付ける、
ことを特徴とする請求項11に記載の映像音声再生方法。
In the association step,
When the number of the image files is larger than the number of the audio files, a part of the image files is cut off and associated, and when the number of the image files is smaller than the number of the audio files, one of the image files Associate parts in duplicate,
The video / audio reproduction method according to claim 11.
前記設定ステップでは、ノーマル再生モードとランダム再生モードとがさらに設定可能であり、
前記関連付けステップでは、
前記ノーマル再生モードに設定された場合には、前記記録媒体に記録された順に前記画像ファイルの管理情報を抽出して前記音声ファイルに関連付け、
前記ランダム再生モードに設定された場合には、前記記録媒体からランダムに前記画像ファイルの管理情報を抽出して前記音声ファイルに関連付ける、
ことを特徴とする請求項11に記載の映像音声再生方法。
In the setting step, a normal playback mode and a random playback mode can be further set.
In the association step,
When the normal playback mode is set, the management information of the image file is extracted in the order recorded in the recording medium and associated with the audio file,
When the random playback mode is set, management information of the image file is randomly extracted from the recording medium and associated with the audio file.
The video / audio reproduction method according to claim 11.
外部からの入力情報によって、少なくとも音声優先モードと画像優先モードとを含む再生モードを設定するステップをさらに備え、
前記画像優先モードに設定されたときには、
前記関連付けステップでは、
前記ファイル管理情報の中から画像ファイルの管理情報を抽出し前記記録媒体に記録されている画像ファイルの記録順に配列する一方、前記ファイル管理情報の中から音声ファイルの管理情報を抽出し、前記画像ファイルに対して前記音声ファイルを1対1に関連付け、
前記再生ステップでは、
前記ファイル編集部にて配列された順に前記記録媒体から前記画像ファイルを読み出し、予め定められた再生期間中、前記画像ファイルをデコードして得られる静止画像を継続的に再生する一方、前記各静止画像の再生期間中、各画像ファイルに関連付けられた前記各音声ファイルを読み出して再生する、
ことを特徴とする請求項10に記載の映像音声再生方法。
A step of setting a playback mode including at least a voice priority mode and an image priority mode according to input information from outside;
When the image priority mode is set,
In the association step,
Image file management information is extracted from the file management information and arranged in the recording order of the image files recorded on the recording medium, while audio file management information is extracted from the file management information, and the image One-to-one association of the audio file to the file,
In the reproduction step,
The image files are read from the recording medium in the order arranged in the file editing unit, and the still images obtained by decoding the image files are continuously reproduced during a predetermined reproduction period, while the still images are During the playback period of the image, each audio file associated with each image file is read and played,
The video / audio reproduction method according to claim 10.
前記再生ステップでは、
前記各音声ファイルの再生時間が前記各静止画像の再生期間よりも長い場合は、前記各静止画像の再生期間が終了した時点で前記各音声ファイルの再生を終了し、
前記各音声ファイルの再生時間が前記各静止画像の再生期間よりも短い場合は、前記各静止画像の再生期間中前記各音声ファイルを繰り返し再生する、
ことを特徴とする請求項14に記載の映像音声再生方法。
In the reproduction step,
If the playback time of each audio file is longer than the playback period of each still image, the playback of each audio file is terminated when the playback period of each still image ends,
When the reproduction time of each audio file is shorter than the reproduction period of each still image, the audio file is repeatedly reproduced during the reproduction period of each still image.
The video / audio reproduction method according to claim 14.
前記関連付けステップでは、
前記音声ファイルの数が前記画像ファイルの数よりも多い場合には前記音声ファイルの一部を切り捨てて関連付け、前記音声ファイルの数が前記画像ファイルの数よりも少ない場合には前記音声ファイルの一部を重複して関連付ける、
ことを特徴とする請求項14に記載の映像音声再生方法。
In the association step,
When the number of the audio files is larger than the number of the image files, a part of the audio files is cut off and associated, and when the number of the audio files is smaller than the number of the image files, one of the audio files Associate parts in duplicate,
The video / audio reproduction method according to claim 14.
前記設定ステップでは、ノーマル再生モードとランダム再生モードとがさらに設定可能であり、
前記関連付けステップでは、
前記ノーマル再生モードに設定された場合には、前記記録媒体に記録された順に前記音声ファイルの管理情報を抽出して前記画像ファイルに関連付け、
前記ランダム再生モードに設定された場合には、前記記録媒体からランダムに前記音声ファイルの管理情報を抽出して前記画像ファイルに関連付ける、
ことを特徴とする請求項14に記載の映像音声再生方法。
In the setting step, a normal playback mode and a random playback mode can be further set.
In the association step,
When the normal playback mode is set, the management information of the audio file is extracted in the order recorded in the recording medium and associated with the image file.
When the random playback mode is set, management information of the audio file is randomly extracted from the recording medium and associated with the image file.
The video / audio reproduction method according to claim 14.
前記関連付けステップでは、
前記ファイル管理情報に含まれるファイル名称と拡張子とを判別し、
音楽ファイルの拡張子を有するファイルと、画像ファイルの拡張子を有するファイルとが同一のファイル名称である場合には、これらのファイルを互いに関連付ける、
ことを特徴とする請求項10に記載の映像音声再生方法。
In the association step,
Determine the file name and extension included in the file management information,
When a file having an extension of a music file and a file having an extension of an image file have the same file name, these files are associated with each other.
The video / audio reproduction method according to claim 10.
JP2007196468A 2007-07-27 2007-07-27 Video / audio playback apparatus and video / audio playback method Expired - Fee Related JP5074847B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007196468A JP5074847B2 (en) 2007-07-27 2007-07-27 Video / audio playback apparatus and video / audio playback method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007196468A JP5074847B2 (en) 2007-07-27 2007-07-27 Video / audio playback apparatus and video / audio playback method

Publications (2)

Publication Number Publication Date
JP2009032340A true JP2009032340A (en) 2009-02-12
JP5074847B2 JP5074847B2 (en) 2012-11-14

Family

ID=40402705

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007196468A Expired - Fee Related JP5074847B2 (en) 2007-07-27 2007-07-27 Video / audio playback apparatus and video / audio playback method

Country Status (1)

Country Link
JP (1) JP5074847B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010258778A (en) * 2009-04-24 2010-11-11 Sharp Corp Content playback apparatus
CN111935116A (en) * 2020-07-30 2020-11-13 安徽华速达电子科技有限公司 Intelligent optical network unit file loading method

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11203769A (en) * 1998-01-09 1999-07-30 Sony Corp Recorder and reproducing device
JP2003348535A (en) * 2002-05-28 2003-12-05 Ricoh Co Ltd Digital camera apparatus, mobile terminal and mail processing method
JP2006041706A (en) * 2004-07-23 2006-02-09 Matsushita Electric Ind Co Ltd Voice still image simultaneous reproducing apparatus, method therefor, and method of editing still image data additional information
WO2006059563A1 (en) * 2004-11-30 2006-06-08 Matsushita Electric Industrial Co., Ltd. Program list reproduction method and display method
JP2006179069A (en) * 2004-12-21 2006-07-06 Funai Electric Co Ltd Disk reproducing apparatus and information reproducing apparatus
JP2006238012A (en) * 2005-02-24 2006-09-07 Sony Corp Reproducer, display control method
JP2008054208A (en) * 2006-08-28 2008-03-06 Funai Electric Co Ltd Reproduction apparatus

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11203769A (en) * 1998-01-09 1999-07-30 Sony Corp Recorder and reproducing device
JP2003348535A (en) * 2002-05-28 2003-12-05 Ricoh Co Ltd Digital camera apparatus, mobile terminal and mail processing method
JP2006041706A (en) * 2004-07-23 2006-02-09 Matsushita Electric Ind Co Ltd Voice still image simultaneous reproducing apparatus, method therefor, and method of editing still image data additional information
WO2006059563A1 (en) * 2004-11-30 2006-06-08 Matsushita Electric Industrial Co., Ltd. Program list reproduction method and display method
JP2006179069A (en) * 2004-12-21 2006-07-06 Funai Electric Co Ltd Disk reproducing apparatus and information reproducing apparatus
JP2006238012A (en) * 2005-02-24 2006-09-07 Sony Corp Reproducer, display control method
JP2008054208A (en) * 2006-08-28 2008-03-06 Funai Electric Co Ltd Reproduction apparatus

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010258778A (en) * 2009-04-24 2010-11-11 Sharp Corp Content playback apparatus
CN111935116A (en) * 2020-07-30 2020-11-13 安徽华速达电子科技有限公司 Intelligent optical network unit file loading method

Also Published As

Publication number Publication date
JP5074847B2 (en) 2012-11-14

Similar Documents

Publication Publication Date Title
JP2004215281A5 (en)
JP2003178553A (en) Information storage medium for recording user defined unified information file, apparatus and method thereof
JP5074847B2 (en) Video / audio playback apparatus and video / audio playback method
JPWO2006059563A1 (en) Program list playback method and display method
JP2006277852A (en) Slide show system, rule server, music play back device and control method of them
JP3889383B2 (en) Recording / reproducing apparatus, music data recording / reproducing method, and music data recording / reproducing program
JP4919287B2 (en) Music data playback apparatus and playback method thereof
JP2008112495A (en) Recording and reproducing device
JP2005341511A (en) Electronic-album displaying system, electronic-album displaying method, remote controller, and remote control program
JP2004328185A (en) Reproduction information file generating program
JP2006155769A (en) Reproducing device, reproducing program, and method for reproducing
JP2000284787A (en) Mood video editing method for karaoke system
JP2002074850A (en) Voice information recording device and method voice information reproducing device and method, voice information recording medium
JP2005004904A (en) Recording medium player
JP4962133B2 (en) Audio data reproducing apparatus and audio data reproducing program
JP3412630B1 (en) Recording method
JP2005071548A (en) Audio reproducing device
KR20060069670A (en) Apparatus and method for reproducing link multiple files
JP2003123448A (en) Recording medium player and method for selectively playing back piece of music
WO2005093749A1 (en) Information reproduction device, information reproduction method, information reproduction program, and recording medium containing the program
JP2008269747A (en) Recording and reproducing device
JP2004343471A (en) Reproduction information file creating program
JP2004120402A (en) Method, device, and program for reproducing data
JP2004158183A (en) Digital audio disk and reproducing device
JP2006331493A (en) Optical disk apparatus

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20100416

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100512

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110808

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111018

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20111129

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111216

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120807

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120824

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150831

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees