WO2001069924A1 - Device and method for reproducing image and voice - Google Patents

Device and method for reproducing image and voice Download PDF

Info

Publication number
WO2001069924A1
WO2001069924A1 PCT/JP2001/002000 JP0102000W WO0169924A1 WO 2001069924 A1 WO2001069924 A1 WO 2001069924A1 JP 0102000 W JP0102000 W JP 0102000W WO 0169924 A1 WO0169924 A1 WO 0169924A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
data
file
audio
recorded
Prior art date
Application number
PCT/JP2001/002000
Other languages
English (en)
French (fr)
Inventor
Hiroya Kusaka
Shigeo Sakaue
Michiharu Uematsu
Original Assignee
Matsushita Electric Industrial Co., Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2000070029A external-priority patent/JP3646607B2/ja
Priority claimed from JP2000070031A external-priority patent/JP3646609B2/ja
Priority claimed from JP2000070024A external-priority patent/JP3614074B2/ja
Priority claimed from JP2000070025A external-priority patent/JP3646606B2/ja
Priority claimed from JP2000070033A external-priority patent/JP3646610B2/ja
Priority claimed from JP2000070030A external-priority patent/JP3646608B2/ja
Application filed by Matsushita Electric Industrial Co., Ltd. filed Critical Matsushita Electric Industrial Co., Ltd.
Priority to EP01912343A priority Critical patent/EP1199892A4/en
Priority to US09/979,491 priority patent/US7231134B2/en
Publication of WO2001069924A1 publication Critical patent/WO2001069924A1/ja
Priority to US11/552,179 priority patent/US8204358B2/en

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32106—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file
    • H04N1/32112—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file in a separate computer file, document page or paper sheet, e.g. a fax cover sheet
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/309—Table of contents
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00—Still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3242—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document of processing required or performed, e.g. for reproduction or before recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3261—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of multimedia information, e.g. a sound signal
    • H04N2201/3264—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of multimedia information, e.g. a sound signal of sound signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3274—Storage or retrieval of prestored additional information
    • H04N2201/3277—The additional information being stored in the same storage device as the image data

Definitions

  • the present invention relates to an image and audio reproducing apparatus and method for automatically and continuously reproducing an image signal and an audio signal acquired by an image acquiring apparatus such as a digital still camera and a digital video camera.
  • an image acquiring apparatus such as a digital still camera and a digital video camera.
  • FIG. 37 As an example of an image display system using a digital camera, there is an apparatus disclosed in Japanese Patent Application Laid-Open No. 11-88808. As shown in Fig. 37, this creates the file name of the video file 3701 selected by the user on the digital camera as a display management information file 3702 on a memory card (flash memory card). .
  • the display control means 3705 for controlling the display means 3703 of the liquid crystal display device or the like shown in Fig. 37 is provided by the display management information acquisition means 3.704, and the display management information file 3710 of the memory card.
  • the file name of the video to be displayed is obtained from 2 and displayed on the display means 3703 in order. '
  • the only file handled is a file in which an image signal is recorded.
  • audio-only data or audio data recorded simultaneously with image acquisition must be reproduced in synchronization with the image.
  • Etc. are not assumed, and no technical proposal has been made for that. Disclosure of the invention
  • the present invention has been made to address the above-described problems, and a user can freely and easily combine image data, audio data, and data in which images and sounds are multiplexed, and
  • the purpose of the present invention is to provide an apparatus and a method for regenerating by means of the method.
  • an image and audio reproducing apparatus and method include: data recording an image signal; data recording an audio signal; At least one of data in which signals are multiplex-recorded, data in which the image signal is recorded, data in which the audio signal is recorded, and at least one of data in which the image signal and the audio signal are multiplex-recorded, or at least one of them.
  • the reproduction information data describing the information on the reproduction of the arbitrarily combined information is stored in at least one storage means independently of each other.
  • a data file in which the image signal is recorded a data file in which the audio signal is recorded, and a data file in which the image signal and the audio signal are multiplex-recorded in accordance with the information relating to the reproduction.
  • the user can freely and easily combine different types of data such as, synchronize image and audio signals, or add various additional information to images and audio: change the playback order, etc. It can be easily and continuously played back with the changes.
  • the reproduction information data may include information for specifying data to be reproduced among the data held in the storage unit.
  • the order in which the data held in the storage means is reproduced can be described.
  • the reproduction information data may include information indicating a time for reproducing the data held in the storage unit.
  • the reproduction information data may include information indicating a time at which the data held in the storage unit is reproduced.
  • the reproduction information data specifies data in which an image signal and an audio signal are multiplex-recorded
  • the image signal portion and the audio signal portion of the data in which the image signal and the audio signal are multiplex-recorded are separately reproduced. Can be specified as a target.
  • the reproduction information data includes at least information on data reproduction. Each group is collectively described. In the group, one of the data in which the image signal is recorded or the image signal portion of the data in which the image signal and the audio signal are multiplex-recorded, and the data or the image signal in which the audio signal is recorded are included. And information for specifying one of the audio signal portions of the data in which the audio signal is multiplex-recorded can be described one by one.
  • a new reproduction information data can be generated by editing the reproduction information data in units of groups.
  • the data format of data recording an image signal reproduced in accordance with the reproduction information data, data recording an audio signal, or data recording a multiplexed image signal and an audio signal is formatted. It can be converted by conversion means.
  • the image signal and the audio signal reproduced according to the reproduction information data can be encoded by encoder means.
  • combined information data storing information to be combined with at least one of data in which an image signal is recorded, data in which an audio signal is recorded, or data in which an image signal and an audio signal are multiplex-recorded Can be stored in the storage means
  • the reproduction information data can include information for specifying data to be reproduced and information for specifying one or more pieces of the combined information data.
  • the information for specifying the data to be played back may be a name given to the data to be played back.
  • the reproduction of the image signal and the audio signal from the data held in the storage means is performed according to the reproduction information data using the reproduction means. It is characterized by performing.
  • At least one of a decoder for decoding data, a reading means for reading data from a storage means, and a decoder for decoding data can be used as the reproducing means.
  • those which use synthesis information include the synthesis information file included in a data file in which an image signal is recorded, a data file in which an audio signal is recorded, or a data file in which an image signal and an audio signal are multiplex-recorded. It can be any of the images, sounds, or text that is created.
  • FIG. 1 is a block diagram showing an image and sound reproducing apparatus according to Embodiments 1 to 5 of the present invention
  • FIG. 2 is an arrangement diagram of an operation surface of the image and sound reproduction device according to the first to fourth embodiments
  • FIG. 3 is a schematic diagram showing an image file, an audio file, and an image Z audio multiplex file stored in the storage unit according to the first to fourth embodiments.
  • FIG. 4 is a diagram showing the contents of the automatic reproduction control file according to the first embodiment.
  • FIG. 5 is a flowchart of the automatic reproduction operation according to the first embodiment.
  • FIG. 6 is an explanatory diagram for explaining images and sounds that are automatically played back in the first embodiment
  • FIG. 7 is a diagram showing the contents of an automatic playback control file according to the second embodiment.
  • FIG. 8 is an explanatory diagram for explaining images and sounds to be automatically played back according to the second embodiment.
  • FIG. 9 is a diagram showing the contents of the automatic playback control file according to the third embodiment.
  • FIG. 10 is a flowchart of the automatic playback operation according to the third embodiment.
  • FIG. 11 is an explanatory diagram for explaining images and sounds that are automatically played back in Embodiment 3.
  • FIG. 12 is a diagram showing the contents of the automatic playback control file according to the fourth embodiment.
  • FIG. 13 is a flowchart of the automatic playback operation according to the fourth embodiment.
  • FIG. 14 is an explanatory diagram for explaining images and sounds that are automatically played back in Embodiment 4.
  • FIG. 15 is an explanatory diagram for explaining an example of a description method in a file group specified by a character string “CMP-SRC” in Embodiment 4.
  • Fig. 16 shows an example of inappropriate contents of the automatic playback control file for explaining an example of a description method in a file group specified by the character string "CMP-SRC" in the fourth embodiment.
  • FIG. 17 shows an example of an appropriate description content of the automatic reproduction control file for explaining an example of a description method in a file group specified by a character string “CMP-SRC” in the fourth embodiment.
  • FIG. 18 is a layout diagram of an operation surface of the image and sound reproducing apparatus according to the fifth embodiment
  • FIG. 19 is a diagram showing contents of an automatic reproduction control file according to the fifth embodiment
  • FIG. 21 is an explanatory diagram for explaining the concept of a method for editing a new automatic reproduction control file from a plurality of automatic reproduction control files in Embodiment 5;
  • FIG. 22 is a block diagram showing an image and sound reproducing device according to the sixth embodiment
  • FIG. 23 is a block diagram showing another example of the image and sound reproducing device according to the sixth embodiment
  • FIG. 24 is a block diagram showing a video and audio reproducing apparatus according to the seventh embodiment
  • FIG. 25 is a block diagram showing a decoding / synthesizing means according to the seventh embodiment
  • FIG. 26 is an image according to the seventh embodiment.
  • FIG. 27 is a schematic diagram showing an additional information file stored on a storage unit in the seventh embodiment.
  • FIG. 28 is a diagram showing the contents of the automatic playback control file in the seventh embodiment.
  • FIG. 29 is a flowchart of the automatic playback operation in the seventh embodiment.
  • FIG. 30 is an explanatory diagram for explaining the combination of the image and sound automatically reproduced and the additional information file in the seventh embodiment.
  • FIG. 31 is a layout view of the operation surface of the image and sound reproduction device according to the eighth embodiment
  • FIG. 32 is a diagram showing the contents of the automatic playback control file in the eighth embodiment
  • FIG. 33 is a flowchart of the automatic playback operation in the eighth embodiment
  • FIG. 34 is automatically played back in the eighth embodiment. Explanatory diagram for explaining the playback time of images and sounds,
  • FIG. 35 is a diagram showing another example of the automatic playback control file according to the eighth embodiment
  • FIG. 36 is a diagram showing another example of the automatic playback control file according to the eighth embodiment
  • FIG. FIG. 3 is a block diagram showing an example of an automatic playback device in FIG. BEST MODE FOR CARRYING OUT THE INVENTION
  • FIG. 1 is a block diagram showing a configuration of an image and sound reproducing apparatus according to Embodiments 1 to 5 of the present invention.
  • a storage unit 101 stores image and audio digital data obtained (encoded) by a device such as a digital still camera, a digital video camera, or a scanner.
  • the storage means 101 may be a means fixed to a device such as a hard disk drive or a removable means such as a flash memory card in all the following embodiments.
  • the storage medium may be a semiconductor memory, a magnetic disk, a magnetic tape, an optical disk, or the like.
  • the image file 102 is a file of image data recorded in the storage means 101
  • the audio file 103 is a file of audio data
  • the image audio multiplex file 104 is the image data and audio also. This is a file in which data is multiplexed and stored in one file.
  • the automatic playback control file 105 contains information indicating the playback data and playback order when the image file 102, the audio file 103, and the image Z audio multiplex file 104 are combined for continuous playback. This is the file that stores the information. However, in FIG. 1, only one image file 102, one audio file 103, one image / audio multiplex file 104, and one automatic playback control file 105 are shown for simplicity.
  • image file 102, audio file 103, image audio multiplex file 1 Not all of 04 are necessarily recorded in the storage means 101.
  • the image file 102 may not be recorded in the storage means 101.
  • the reading means 106 reads out each file recorded in the storage means 101 and is one of the reproducing means.
  • the writing means 107 is a means for writing the automatic reproduction control file 105 into the storage means 101.
  • the decoder 108 is one of the reproducing means, and decodes and reproduces the image file 102, the sound file 103, and the image Z sound multiplexed file 104 read from the storage means 101. It is a means for doing.
  • the reproducing means may refer to only the decoder 108, or may refer to the decoder 108 and the reading means 106 together.
  • the synchronization control means 109 converts the image signal and the audio signal output from the decoder 108 based on the information of the automatic reproduction control file 105 according to the information of the automatic reproduction control file 105.
  • the decoding in the decoder 108 is controlled so as to have a predetermined synchronization relationship.
  • the Central Processing Unit (CPU) 110 generates the automatic playback control file 105 according to the input from the operation keys 111, and reads out the information based on the information of the automatic playback control file 105. 6.
  • the synchronization control means 109 is controlled to control reading of an image file or the like and decoding and reproduction of the read file by the decoder 108.
  • the display means 112 is a display device such as a liquid crystal display device or a Cathode Ray Tube (CRT) for displaying an image signal decoded by the decoder 108, and the speaker 113 is a decoder 108. This is for reproducing the decoded audio signal.
  • a display device such as a liquid crystal display device or a Cathode Ray Tube (CRT) for displaying an image signal decoded by the decoder 108
  • CTR Cathode Ray Tube
  • FIG. 2 is a layout diagram of an operation surface of the image and sound reproduction device according to the first to fourth embodiments.
  • Keys 201 to 209 are various keys constituting the operation key 111 shown in FIG. 1, and a key input signal is sent to the CPU 110 shown in FIG.
  • the main functions of each are as follows.
  • the image file playback mode selection key 201 becomes the playback mode of the image file on the storage means 101, and the CPU 110 reads out. Controlling the means 106 to read one of the image file and the image / audio multiplex file recorded in the storage means 101, and after decoding by the decoder 108, reading to the display means 112; The image of the file is displayed.
  • the playback mode of the audio file on the storage means 101 is set, and the CPU 110 controls the reading means 106 to the storage means 101.
  • One of the recorded audio file and image / audio multiplex file is read, and after decoding by the decoder 108, the audio of the file read by the speaker 113 is reproduced.
  • the mode of the image Z audio multiplex file on the storage means 101 becomes the playback mode, and the CPU 110 controls the reading means 106.
  • One of the images and audio multiplex files recorded in the storage means 101 is read out, and after decoding by the decoder 108, the image of the read out file is displayed on the display means 112. Sound is played on speakers 1 1 3.
  • the forward key 204 is a key pressed to play a file different from the currently playing file
  • the return key 205 is a key pressed to play the file played back immediately before It is.
  • the enter key 206 is a key to be pressed when a reproduced file is selected as a target for automatic reproduction.
  • the CPU 110 assigns a group ID number to a specific file group, and writes a file name along with a specific character string in the automatic playback control file.
  • the CPU 110 controls the writing means 107 to newly create an automatic playback control file on the storage means 101.
  • the CPU 110 controls the reading means 106 and the synchronization control means 109 based on the information of the automatic playback control file 105, and the storage means 110 Read the file on 1 and play it automatically.
  • FIG. 3 is a schematic diagram showing an image file, an audio file, and an image Z audio multiplex file stored in the storage unit 101 according to the first to fourth embodiments.
  • Image files A, B, and C are files storing image data, respectively.
  • Audio files A, B, and C are files that store audio data.
  • Image and audio multiplex files A and B are files in which image and audio data are multiplexed and stored in one file.
  • the description will be made assuming that the eight files shown in FIG. 3 are recorded on the storage unit 101.
  • the user plays back the image part of the image file B and the image part of the image / audio multiplex file A in this order, and the audio file A and the image If you want to play back the audio part of audio multiplex file B continuously in this order, and also want to play back audio file A in synchronization with the start of playback of image file B, the contents of the automatic playback control file shown in Fig. 4 This will be described with reference to the drawings.
  • the user presses the new playback control file creation key 208.
  • the editing of the automatic playback control file is newly started, and the CPU 110 controls the writing means 107 to create a file, for example, a file name "AUTOPLY1" on the storage means 101. I do.
  • the user presses an image file playback mode selection key 201 to select an image to be automatically played back, and causes the display means 112 to play back and display the image file on the storage means 101.
  • the image file A is played on the display means 112, and the display image is changed by the forward key 204 or the return key 205, so that the image file B, the image file C, and the image / audio multiplex file are changed. It is assumed that the image portion of A and the image portion of the image multiplexed audio file B are sequentially displayed on the display means 112.
  • the enter key 206 is pressed.
  • the CPU 110 has a temporary memory for temporarily storing information therein.
  • the enter key 206 is depressed, the user can store the image in the temporary file in the image file playback mode.
  • the image of the image / audio multiplex file A is displayed by using the forward key 204 or the return key 205.
  • the enter key 206 is pressed again.
  • an audio file reproduction mode selection key 202 is pressed to select an audio to be automatically reproduced, and the audio file on the storage means 101 is reproduced by the speaker 113.
  • the audio file A is reproduced by the speaker 1 1 3 and the audio to be reproduced is changed by the forward key 204 or the return key 205 so that the audio file B, the audio file (:, image Z audio) are reproduced.
  • the audio portion of the multiplex file A and the audio portion of the image Z audio multiplex file B are reproduced in sequence through the speakers 113.
  • the user places the audio portion of the audio file A and the audio portion of the image Z audio multiplex file B in this order.
  • use the forward key 204 or the return key 205 to play the audio part of the image Z audio multiplex file B. Then, press the enter key 206 again.
  • the CPU 110 sets the previously selected image file B and image / audio multiplex file A, and audio file A and image Z audio multiplex file B as one group.
  • FIG. 4 shows the contents of the written autoplay control file "AUTOLY1".
  • "GID” shown in Figure 4 is the ID number of the group. Yes, 0 0 1 in the example of FIG.
  • IMG_SRC is a character string indicating the image part of the image file or the image / audio multiplex file, and the image parts of the image file B and the image Z audio multiplex file A are converted to the image to be reproduced selected by the user. Is specified.
  • SND—SRC is a character string indicating the audio part of the audio file or the image / audio multiplex file, and the audio parts of the audio file A and the image / audio multiplex file B are selected by the user for playback. It clearly indicates that the sound should be played.
  • the image part and the audio part can be specified separately by the character strings “IMG-SRC” and “SND-SRC”. It is assumed that it can be handled as an image file consisting only of data or an audio file consisting only of audio data.
  • the file with the smaller number of lines is the file that is played earlier in time.
  • the procedure for generating the automatic playback control file 105 has been described above. Next, reproduction of a file based on the automatic reproduction control file 105 shown in FIG. 4 will be described.
  • the CPU 110 controls the reading means 106, reads the automatic reproduction control file 105, and acquires the contents.
  • the CPU 110 searches for the GID from the first line of the automatic playback control file 105, and recognizes the group from the first "GID" to immediately before the next "GID" as one group.
  • the last group in the automatic playback control file 105 is from the last GID to the last line of the file. In the present embodiment, there is one group, and the group from the first GID to the last line of the automatic playback control file 105 is one group.
  • the automatic reproduction control file 105 file names are described in the order of reproduction.
  • the image part of the image file or image / audio multiplex file is specified by the character string "IMG-SRC".
  • the sound part of the audio file or image / audio multiplex file is specified by the character string "SND-SRC”. Specified in the column. Therefore, the CPU 110 determines from these character strings whether the target file is related to image playback or audio playback. As a result, for the image, the image part of the image file B and the image / audio multiplex file A are arranged in this order, and for the audio, the audio part of the audio file A and the image Z audio multiplex file B are arranged in this order.
  • the data is read out from the storage means 101, decoded, and reproduced.
  • these file groups are one group to which a group ID is assigned, and the image files included in the group are determined.
  • the synchronization control means 109 so that the reproduction start of the image file B reproduced first among the audio files A and the reproduction start of the audio file A reproduced first among the audio files included in the same group are synchronized. Control decryption in 108.
  • the CPU 110 sends information indicating images and sounds to be reproduced synchronously to the synchronous control means 109.
  • the decoder 108 has a temporary memory for temporarily storing the result of the decoding inside, and decodes the file read from the storage unit 101 and temporarily writes the file temporarily to this temporary memory. . This is a measure to compensate for the difference in the time required for decoding depending on the file.
  • the synchronization control means 109 monitors the progress of the decoding of the image and audio to be reproduced synchronously, and when the decoding is completed to the point where the image and the audio can be output simultaneously, the decoding is stored in the temporary memory. Output the image and the sound at the same time. In this way, the reproduction of the image and the sound is synchronized.
  • Fig. 5 shows the flow of playback of a series of these files in a flowchart. become.
  • step 501 is waiting for an input from the automatic reproduction key 209.
  • the flow proceeds to step 502.
  • the CPU 110 controls the reading means 106 to read the automatic reproduction control file 105 from the storage means 101.
  • the CPU 110 searches for the group ID number from the read automatic reproduction control file 105 to detect the group.
  • step 504 a file name specified by a character string “IMG—SRC” indicating an image is detected for each detected group.
  • a character string “SND— The file name specified by "SRC” is detected.
  • step 506 as described above, the file is read from the storage means 101, the decoding is performed by the decoder 108, and the synchronization control means 1 is read. Controls synchronized playback of image and audio by 09.
  • FIG. 6 schematically shows the state of such image and sound reproduction. That is, the image is reproduced in the order of file B, image Z, and the image portion of the audio multiplex file, and the file A is reproduced in synchronization with the start of reproduction of the image file B. Then, the audio portion of the image / audio multiplex file B is reproduced. Reproduce. This allows the user to play back the images and sounds as specified by the user.
  • the image file and the audio file whose playback start is to be synchronized are described in a grouped form in the automatic playback control file 105 as shown in FIG. .
  • the automatic playback control file 105 the start of reproduction of the first image file among the image files included in the group and the start of reproduction of the first audio file among the audio files included in the same group are determined.
  • the reading of the file from the storage unit 101 and the decoding by the decoder 108 are controlled so as to be synchronized.
  • the user can freely and easily combine the image data, the audio data, and the data in which the image and the sound are multiplexed, and start the reproduction of the predetermined image and the sound in synchronization.
  • the configuration in which one group including a plurality of files is described in the automatic playback control file 105 has been described.
  • An embodiment assuming such a case will be described below with reference to FIG. 7 showing the contents of the automatic playback control file.
  • the configuration of the image and sound reproducing apparatus described in the present embodiment is the same as the block diagram shown in FIG. 1, and the layout of the operation surface of the image and sound reproducing apparatus is the same as that of FIG. Is omitted.
  • the automatic playback control file 105 is first generated by the following procedure.
  • the user presses a new reproduction control file creation key 208 as in the first embodiment.
  • a file having a file name of, for example, "AUTOPLY2" is created on the storage means 101.
  • the user presses the image file playback mode selection key 201 to select an image to be automatically played, and causes the image file on the storage unit 101 to be played back and displayed on the display unit 112, and then sent.
  • Use key 204 or return key 205 to change the displayed image and display image file A.
  • the enter key 206 is pressed.
  • the audio file playback mode selection key 202 is pressed to select the audio to be automatically played, and the audio file on the storage means 101 is reproduced by the speaker 113, and the send key 204 Alternatively, the playback sound is changed by the return key 205 to play the audio file B.
  • the CPU 110 recognizes the selected image file A and audio file B as one group and A unique ID number (for example, 0 01) is assigned, and the writing means 1 107 is controlled to control the writing means 1 0 1. Write the contents stored in the temporary memory.
  • the image file B and the audio portion of the image Z audio multiplex file B are reproduced and selected, and the grouping key 207 is pressed.
  • the CPU 110 recognizes the audio portions of the image file B and the image Z audio multiplex file B as one group, and assigns a unique ID number (for example, 02) to the group.
  • the writing means 107 is controlled to add the ID number unique to the group and the contents stored in the temporary memory of the CPU 110 to the automatic playback control file "AUTOLY2" on the storage means 101.
  • Figure 7 shows the contents of the created auto play control file "AUTOLY2".
  • “GID” shown in FIG. 7 is the ID number of the group. In the example of FIG.
  • IMG-SRC is a character string indicating the image part of an image file or image Z audio multiplex file
  • SND-SRC is the character string indicating the audio file or audio part of an image audio multiplex file. Character string.
  • the file group having the GID with the smaller number of lines is the file group to be played first.
  • the procedure for generating the automatic playback control file 105 has been described above. Next, reproduction of a file based on the automatic reproduction control file 105 shown in FIG. 7 will be described.
  • the CPU 110 controls the reading means 106 to read the automatic reproduction control file 105 and acquire the contents.
  • the CPU 110 searches for the GID from the first line of the automatic playback control file 105, and recognizes the group from the first "GID" to immediately before the next "GID" as one group.
  • the last group in the automatic playback control file 105 is from the last GID to the last line of the file.
  • the image file A and the audio file B are recognized as one group, and the audio part of the image file B and the image / audio multiplex file B are recognized as one group.
  • image file A and image file B are stored in that order, and for audio, audio file B and image and audio multiplex file B are stored in the audio part in that order.
  • the file is read from the means 101, decrypted and reproduced.
  • image file A and audio file B are in one group, and image file B and image Z audio multiplex file B are in one audio group, playback of image file A and audio file B are started.
  • the decoding control by the decoder 108 is controlled by the synchronization control means 109 so that the reproduction start of the image file B is synchronized with the reproduction start of the image file B and the reproduction start of the audio portion of the image Z audio multiplex file B are synchronized.
  • the flowchart for reproducing the series of files is the same as that in FIG. 5 shown in the first embodiment of the present invention.
  • FIG. 8 schematically shows such a state of reproduction of an image and a sound, and the user can reproduce the image and the sound as specified by the user.
  • the second embodiment of the present invention by setting a plurality of groups including a plurality of files in one automatic playback control file, it is possible to precisely set the synchronization at the time of playing back images and sounds. The user can freely and easily combine the image data, the audio data, and the data in which the image and the sound are multiplexed, and start the reproduction of the image and the sound in synchronization.
  • a group ID number is assigned to a plurality of files in the automatic playback control file 105, and the plurality of files are regarded as one group, and synchronous playback of images and sounds is performed.
  • the image Z audio multiplex file is described on the automatic playback control file 105 in a form divided into an image portion and an audio portion.
  • image and audio files acquired by digital still cameras and digital video cameras are considered to be originally audio and audio files at the same time, and it is a natural assumption that images and audio are synchronized. It is a recorded file. Therefore, when a file of such a property is played back, if it is intentionally described in the automatic playback control file in the form of being divided into an image portion and an audio portion, it is troublesome for the user and may not cause confusion. Absent.
  • an image / audio multiplex file is not divided into an image part and an audio part, but is played back by an automatic playback control file while maintaining the synchronous relationship between the image and audio.
  • the form will be described with reference to the figure showing the contents of the automatic reproduction control file in FIG.
  • the configuration of the image and sound reproducing apparatus described in the present embodiment is the same as the block diagram shown in FIG. 1, and the layout of the operation surface of the image and sound reproducing apparatus is the same as that of FIG. Description is omitted.
  • the user presses a new reproduction control file creation key 208 as in the first embodiment of the present invention. This allows, for example,
  • the user presses the image / audio multiplex file reproduction mode selection key 203 to select the image / audio multiplex file to be automatically reproduced, and reproduces the image Z audio multiplex file on the storage means 101.
  • the temporary memory in the CPU 110 contains a “CMP” file that clearly indicates that the user should select this file as a multiplexed image and audio to play this file in the image Z audio multiplex file playback mode.
  • File name is recorded.
  • the CPU 110 recognizes the selected image / audio multiplex file A and image / audio multiplex file B as one group, and an ID unique to the group. Assign a number (for example, 0 0 1). Then, the writing control means 107 is controlled to write the group-specific ID number and the temporary memory of the CPU 110 in the automatic reproduction control file "AUTOPLY3" on the storage means 101. Write the remembered contents.
  • Fig. 9 shows the contents of the written automatic playback control file "AUTOPLY3". “GID” shown in FIG.
  • CMP—SRC is a character string indicating a video / audio multiplex file, whereby the video / audio multiplex files A and B are selected by the user.
  • the file and GID with the smaller number of lines are the files to be played first.
  • the procedure for generating the automatic playback control file 105 has been described above. Next, reproduction of a file based on the automatic reproduction control file 105 shown in FIG. 9 will be described.
  • CPU 1 1 0 controls the read-out means 1 0 6 reads out the automatic reproduction control file 1 0 5, get its contents.
  • file names are described in the order of playback. Since the image Z audio multiplex file is specified by the character string "CMP_SRC", it is determined from this character string that the target file is recorded by multiplexing the image and the audio. Then, as a result, the image Z audio multiplex file A and the image / audio multiplex file B are read out from the storage means 101, decoded by the decoder 108, and reproduced synchronously with the image and the audio.
  • the CPU 110 sends information indicating a file to be synchronously reproduced to the synchronous control means 109.
  • the decoder 108 has a temporary memory for temporarily storing the result of the decoding inside, and decodes the file read from the storage unit 101 and temporarily writes the file temporarily to this temporary memory. . This is a measure to compensate for the difference in decoding time between the image part and the audio part in the image / audio multiplex file.
  • the synchronization control means 109 monitors the progress of the decoding of the image to be reproduced and the audio, and when the decoding is completed to the point where the image and the audio can be output simultaneously, the image stored in the temporary memory is compared with the image. Output audio simultaneously. Thus, the reproduction of the image and the sound is synchronized.
  • FIG. 10 is a flowchart showing the flow of playback of a series of these files.
  • steps 501 to 503 are the same as those in FIG.
  • Step 1001 is a step of detecting a file name specified by a character string “CMP SRC” indicating an image for each detected group. Soshi
  • the CPU 110 reads the specified image / audio multiplex file from the storage means 101 in ascending order of the group-specific ID number, decodes the data by the decoder 108, and controls synchronization. The synchronous reproduction of the image and the sound by the means 109 is controlled.
  • FIG. 11 the appearance of such image and sound reproduction is schematically shown in FIG. 11, and the user can reproduce the image and sound as specified by himself / herself.
  • the image and audio multiplexed data are not divided into the image portion and the audio portion, and the synchronization relationship between the image and the audio is maintained.
  • the format allows the user to freely and easily combine and play back images and sounds in synchronization.
  • FIG. 12 showing the contents of the automatic reproduction control file.
  • the configuration of the image and audio reproducing apparatus described in the present embodiment is the same as that of the block diagram shown in FIG. 1, and the layout of the operation surface of the image and audio reproducing apparatus is also the same as that of FIG. Is omitted.
  • the user plays back image file B, image Z audio multiplex file B, and image file C in this order, and then starts playing image file B and audio file A. If you want to synchronize the audio part of the image / audio multiplex file A with the image part of the image / audio multiplex file B, and synchronize the start of the playback of the audio part of the image / file multiplex file A with the following procedure, First, an automatic playback control file is generated.
  • the user presses a new reproduction control file creation key 208 as in the first embodiment of the present invention. This allows, for example,
  • a file named "AUTOPLY4" is created.
  • the user presses the image file playback mode selection key 201 to select an image to be automatically played, and causes the image file on the storage unit 101 to be played back and displayed on the display unit 112, and then sent.
  • the enter key 206 is pressed.
  • the file name of image file B is recorded.
  • the audio file playback mode selection key 202 is pressed to select the audio to be automatically played, and the audio file on the storage means 101 is reproduced by the speaker 113, and the send key 204 Alternatively, change the playback audio using the return key 204 to play audio file A.
  • the CPU 110 recognizes the selected image file B and audio file A as one group, and assigns a unique ID number (for example, 001) to the group.
  • the automatic playback control file "AUTOPLY4" on the storage means 101 controls the writing means 107 to store the ID number unique to the group and the contents stored in the temporary memory of the CPU 110. Write.
  • the user presses the image Z audio multiplex file reproduction mode selection key 203 to reproduce the image / audio multiplex file in the storage means 101.
  • the "CMP--" file indicating that the user has selected this file as a multiplexed image and audio file to be reproduced in the reproduction mode of the image / audio multiplex file is displayed.
  • the CPU 110 When the grouping key 207 is pressed next time in this state, the CPU 110 recognizes the selected image Z audio multiplex file B as one group and An ID number (for example, 0 2) is assigned, the writing means 1 07 is controlled, and the group-specific ID number and the temporary memory of the CPU 110 are stored in the automatic playback control file “AUTOPLY4” on the storage means 101. Add and write the stored contents.
  • An ID number for example, 0 2 2
  • the writing means 1 07 is controlled
  • the group-specific ID number and the temporary memory of the CPU 110 are stored in the automatic playback control file “AUTOPLY4” on the storage means 101. Add and write the stored contents.
  • the audio file playback mode selection key 202 is pressed again to select the audio to be automatically played, and the audio file on the storage means 101 is reproduced by the speaker 113, and the send key 200 4 or Use the return key 205 to change the playback audio and play the audio portion of the image Z audio multiplex file A.
  • the enter key 206 is pressed.
  • the CPU 110 recognizes the audio parts of the selected image file C and image Z audio multiplex file A as one group, and an ID number unique to the group. (For example, 0 3), and control the writing means 107 to store the group-specific ID number and the temporary memory of the CPU 110 in the automatic playback control file "AUTOLY4" on the storage means 101. Add and write the contents that were already written.
  • Fig. 12 shows the contents of the written automatic playback control file "AUTOPLY4". “GID” shown in FIG. 12 is the ID number of the group, and in the example of FIG. 12, different numbers are assigned to the three groups. Also, as in Fig.
  • IMG-SRC is a character string indicating the image portion of an image file or image-noise multiplex file
  • SND-SRC ' is a sound file or the sound of an image-Z sound multiplex file.
  • This is a character string that indicates the part
  • CMP—SRC is a character string that indicates an image / audio multiplex file, as in Fig. 9.
  • the group with the GID with the smaller number of lines is reproduced first.
  • the same character string among the files represented by character strings such as "IMG SRC” It is assumed that a file having a small number of lines indicated by is reproduced first.
  • the procedure for generating the automatic playback control file 105 has been described above. Next, reproduction of a file based on the automatic reproduction control file 105 shown in FIG. 12 will be described.
  • the CPU 110 controls the reading means 106 to read the automatic reproduction control file 105 and acquire the contents.
  • the CPU 110 searches for the GID from the first line of the automatic playback control file, and recognizes one group from the first "GID" to immediately before the next "GID".
  • the last group in the automatic playback control file 105 shall be from the last GID to the last line of the file.
  • image file B and audio file A are in one group, image / audio multiplex file B is one group, image file C and image / audio multiplex file A audio part are Recognized as one group. Then, the image file B, the audio file A, the image / audio multiplex file B, and the image file (:, the audio portion of the image / audio multiplex file A are read from the storage means 101, and the decoder 108 decodes and reproduces the audio portion. At that time, image file B and audio file A are in one group, image / audio multiplex file B is one group, and image file C and image Z audio multiplex file A are in one audio group. As shown in the explanatory diagram of FIG.
  • steps 501 to 505 are the same as in FIG. 5, and step 1001 is the same as in FIG. Step 1301 is a step of reproducing a file for each detected group.
  • the CPU 110 stores the file from the storage unit 101 , Decoding by the decoder 108, and synchronous reproduction of the image and audio by the synchronization control means 109. In this way, the user can play back the images and sounds as specified by the user.
  • Embodiment 4 of the present invention when an image and a sound are automatically reproduced by combining three types of files, an image file, an audio file, and an image Z audio multiplex file, The user does not divide the multiplexed data into image and audio parts, but divides the data in a format that maintains the synchronous relationship between the image and audio, or divides the data into image and audio parts as necessary. You can freely and easily combine three types of files and synchronize images and audio for playback.
  • an image Z audio multiplex file specified by a character string “CMP_SRC” and a character string “IMG-SRC” and “SND-SRC” are used.
  • the file specified is not mixed, that is, the image specified by the character string "CMP-SRC” in one group
  • the image specified by the character string "CMP-SRC” One group consists of only the / audio multiplex file, for example, the group whose GID is 0 2 in Figure 12 contains only the image / audio multiplex file specified by the character string "CMP_SRC". This is it
  • playback is started by synchronizing image file B and audio file A, audio file B is played after audio file A, and then image of audio / audio multiplex file B
  • image file playback mode selection key 201, forward key 204, and return key 205 For example, as shown in Fig. 15, playback is started by synchronizing image file B and audio file A, audio file B is played after audio file A, and then image of audio / audio multiplex file B
  • the following procedure can be considered as an example of a method of creating the automatic playback control file as described above.
  • press the new playback control file creation key 208 to start editing the automatic playback control file 105, and operate the image file playback mode selection key 201, forward key 204, and return key 205.
  • This file name is stored in the CPU 110 following the character string '' IMG—SRC ', so that the image file B, image / audio multiplex file B, and image file C are played back in the temporary memory of the CPU 110 in this order.
  • the name of the file is stored.
  • audio file A For audio files, in the order in which you want to play them, audio file A, audio file 8, image audio multiplex file A, audio file file playback mode selection key 202, forward key 204, return key Operate 205 and play the audio part of audio file 8, audio file B, and image Z audio multiplex file A on the speakers 113, and then use the Enter key 206 to enter the character string "SND-SRC". After that, these file names are stored in the CPU 110. Then, the selected files are grouped by pressing the grouping key 207, and the files are grouped together with the group ID number (for example, 001) for automatic playback control. Write to file.
  • group ID number for example, 001
  • FIG. 16 shows the automatic playback control file 105 created by the above procedure.
  • the automatic playback control file 105 as shown in FIG. 16, six files are grouped in one group ID (GID).
  • GID group ID
  • the image file B, the image Z audio multiplex file B, and the image file C are arranged in this order, and it can be determined that the images should be reproduced in this order.
  • the audio part of audio file A, audio file B, and image audio multiplex file A are played in this order, and the image file that is played first among the image files included in the group starts playing.
  • the audio files that are played first should be synchronized so that the first audio file that is included in the same group is played, that is, the audio file A and the audio file A start playing. Synchronize I can judge what should be done.
  • the temporal position relationship between the audio portion of the image / audio multiplex file B and the audio portions of the audio file B and the image Z audio multiplex file A cannot be determined from the description of the automatic playback control file 105 in FIG. .
  • audio file A that needs to be synchronized with image file B that is played before image / audio multiplex file B needs to be played before the audio portion of image Z audio multiplex file B
  • the audio portion of audio file B and image Z audio multiplex file A cannot be determined from the automatic playback control file in Fig. 16 except that it is played after audio file A.
  • the automatic playback control file is created by the procedure described above, the temporal relationship between the audio part of the image Z audio multiplex file B and the audio parts of the audio file B and the image audio multiplex file A It is necessary to add information to specify the file name to the auto-play control file.
  • the description of the automatic playback control file becomes complicated, and the equipment that automatically plays back images and sounds based on this automatic playback control file also places a heavy burden on the analysis of the automatic playback control file. Become. Specifically, it becomes necessary for the reproducing apparatus to have hardware or software for analyzing a more complicated automatic reproduction control file. In addition, the time and effort required to create an automatic playback control file is increased, which imposes a burden on the user.
  • the automatic playback control file when playing back images and audio in a synchronous relationship as shown in FIG. 15 an example as shown in FIG. 17 can be considered.
  • An automatic playback control file in which the user mistakenly specifies the file specified by the character string "CMP-SRC” and the files specified by the character strings "IMG-SRC” and “SND_SRC” in the same group
  • an error message or the like indicating an operation error may be displayed on the display means 112 to guide the user to create an automatic playback control file correctly. Conceivable.
  • FIG. 18 is a layout diagram of the operation surface of the image and sound reproduction device described in the fifth embodiment of the present invention.
  • the only difference between the layout diagram shown in Fig. 2 and the layout diagram shown in Fig. 18 is that the group playback mode selection key 1801 and the group edit end key 1802 in Fig. 18 are newly provided. It is.
  • the display means 112 and the speaker 113 are also the same as those in FIG.
  • the keys 201 to 209 have the same functions as those of the image and sound reproducing apparatus shown in FIG.
  • the main functions of the group playback mode selection key 1801 and the group edit end key 1802 are as follows.
  • the mode is set to play images and sounds for each group described in the automatic playback control file 105 on the storage means 101, and the CPU 110
  • the reading means 106 is controlled to read the image file, the audio file, and the image / audio multiplex file recorded in the storage means 101, and the group unit is read.
  • the group edit end key 1802 is a key to end group rearrangement.
  • the storage unit 101 stores the file shown in FIG. 3 and the automatic playback control file “AUTOPLY4” having the contents shown in FIG. 12 used in the description of the fourth embodiment of the present invention.
  • the autoplay control file “AUTOPLY4” having the contents shown in FIG. 12 used in the description of the fourth embodiment of the present invention.
  • a group with a group ID number of 01 group consisting of image file B and audio file A
  • a group with a group ID number of 03 image file C and image audio multiplexing
  • the user presses a new reproduction control file creation key 208 as in the first embodiment of the present invention. This allows, for example,
  • the user selects the group play mode to select the group to autoplay.
  • the referenced auto-playback control file is "AUTOPLY4", and by pressing the group play mode selection key 1801, playback of the grouped images and sounds is performed based on the description of "AUTOPLY4".
  • a group consisting of the image file B and the audio file A is played on the display means 112 and the speaker 113, and the forward key 204 or The playback target is changed according to the return key 205.
  • the group consisting of the image and sound of the image Z sound multiplex file B, and the group consisting of the image file C and the sound part of the image Z sound multiplex file A. is played.
  • the user wants to play the audio part of image file C and audio / video multiplex file A first, then play the image and audio of image / audio multiplex file B, and finally play image file B and audio file A.
  • the user operates the forward key 204 or the return key 205 to play the group consisting of the image file C to be played first and the audio portion of the image Z audio multiplex file A first.
  • the enter key 206 is pressed.
  • the CPU 110 stores the group ID number of the reproduced group and the character string and file name described in the group in the internal temporary memory. That is, the description from the sixth line to the eighth line in FIG. 12 is stored in the temporary memory as it is.
  • the group to be played back second that is, the group consisting of the image and sound of the image / audio multiplex file B is played back in the same procedure as above, and the group ID number of the played back group is obtained by pressing the enter key 206.
  • the character string and file name described in the group are added and stored in the internal temporary memory. That is, the description from the fourth line to the fifth line in FIG. 12 is additionally stored in the temporary memory as it is.
  • the group to be played last that is, the group consisting of the image file B and the audio file A, is also played in the same procedure as described above, and by pressing the enter key 206, the group ID number of the played group and the description within the group Strings and fire
  • the file name is added to the internal temporary memory and stored. That is, the description from the first line to the third line in FIG. 12 is additionally stored in the temporary memory as it is.
  • the CPU 110 controls the writing means 107 to store the automatic reproduction control file "AUTOPLY5" on the storage means 101 into the CPU 110. Write the contents stored in the temporary memory.
  • the group ID numbers are newly assigned in ascending order of the number of rows.
  • Fig. 19 shows the contents of the written automatic playback control file "AUTOLY5".
  • the ⁇ GI string '' shown in Fig. 19 is the ID number of the target group.
  • the three groups shown in Fig. 12 change their order and further change the GID. The content has been newly added.
  • automatic reproduction control is performed when images and sounds are automatically reproduced by combining three types of files: an image file, an audio file, and an image / audio multiplex file.
  • the groups described in the file 105 can be freely rearranged and played.
  • the automatic playback control file referred to after pressing the group playback mode selection key 1801 is “AUTOPLY4”, but is not limited thereto. 0
  • Figure 21 shows the situation when the image and sound were reproduced by editing to "AUTOPLY5-1". As shown in Fig. 21, a new auto-play control file can be generated by editing two auto-play control files.
  • the image and audio playback device described so far can play back images and audio according to the contents of the automatic playback control file.
  • Image and sound playback cannot be performed. Therefore, if the image and sound to be automatically reproduced are converted into another versatile format, it can be reproduced on other devices. Therefore, in a sixth embodiment of the present invention, a description will be given of a configuration for newly creating a data file that can obtain a reproduction result equivalent to a result of reproducing an image and a sound according to the description of the automatic reproduction control file 105. .
  • FIG. 22 is a block diagram of an image and sound reproducing apparatus according to Embodiment 6 of the present invention.
  • the portions denoted by reference numerals 101 to 113 are the same as those in the first embodiment of the present invention described with reference to FIG. Only the following will be described.
  • the format conversion means 222 is a means for converting the format of the image file 102, the audio file 103, and the image / audio multiplex file 104 read from the storage means 101. is there.
  • the recording means 222 is a means for recording a file whose format has been converted by the format conversion means 222, and may be a means fixed to a device such as a hard disk device or a flash memory card. Removable means may be used.
  • the CPU 110 When converting images and sounds to be played back according to the description in "AUTOPLY4" and saving them in another format, the CPU 110 reads the necessary image files, sound files, and image Z sound multiplex files from the storage unit 101.
  • Readout and format conversion means 2 201 control these files to convert these files into a format consisting of different image data and audio data so that the synchronized relationship between the images and audio as described in the automatic playback control file is maintained.
  • a method of combining various files read from the storage unit 101 into one image / audio multiplex file format can be considered. In this way, the image Z audio multiplex file created by the format conversion means 2 201 can be reproduced on a device that can reproduce the image audio multiplex file.
  • the image and sound reproduced by the image and sound reproducing device described in the first to fifth embodiments of the present invention are based on the automatic reproduction control file. It is possible to play in the same way on other devices that do not have the function of performing automatic playback.
  • the present invention is effective in any format of the file format after the conversion by the format conversion means 222.
  • the converted file format is described as an image / audio multiplex file in which an image and an audio are multiplexed and stored in one file format, but the present invention is not limited to this.
  • the device that plays back images and sounds there may be a device that plays back images and sounds simultaneously by considering independent image files and sound files as one pair. Considering the image, only the image data is combined into one file, the sound is combined only the audio data into one file, and the pair of the image file and the audio file, in which the image and the sound are combined, is converted into a format.
  • a configuration in which the data is generated in 2 201 is also conceivable. Also, it is not always necessary to create both a file relating to an image and a sound by the format conversion means 2201, and if necessary, a file which records only one of the image and the sound may be created.
  • the present invention is effective in any encoding by the encoder 2301.
  • the signal encoded by the encoder 2301 may be one of an image signal and an audio signal.
  • the information recorded in the recording means 222 and 2302 may be digitized information or an analog signal, or both. Further, the recording means 222 and 2302 may be a disk device such as a hard disk, a semiconductor memory, or a magnetic tape.
  • information converted or encoded by the format conversion means 2201 and the encoder 2301 may be stored in the storage means 101.
  • two recording means on the same device It is not necessary to have a device, and it is possible to reduce the size and power consumption of equipment. (Embodiment 7)
  • the automatic playback control file 105 a group consisting of a plurality of files is described in the automatic playback control file 105, so that three types of image files, audio files, and image Z audio multiplex files are provided.
  • the method of synchronizing and reproducing images and sounds by combining files has been described.
  • an example will be described in which, when an image and a sound are reproduced according to the description of the automatic reproduction control file 105, information other than these is added and the reproduction is performed.
  • FIG. 24 is a block diagram illustrating a configuration of an image and sound reproduction device described in Embodiment 7 of the present invention.
  • the difference between the block diagram of the first to fourth embodiments of the present invention shown in FIG. 1 and the block diagram shown in FIG. 24 is that, in FIG. 24, the storage unit 101 stores the additional information file 2401 And that decoding Z combining means 2402 is newly provided.
  • the additional information file 2401 is a file that stores composite information added to the image file 102, audio file 103, and image / audio multiplex file 104.
  • Text such as the frame image and title image to be recorded, or the shooting date and time, shooting location, file name, photographer's name, contact information, comments on the image, etc., or numerical data indicating the shooting conditions and shooting status. And symbols, and special sound effects that are played over the audio.
  • the decoding synthesizing means 2402 includes the image file 102 read from the storage means 101, the audio file 103, the image / audio multiplex file 104, and the additional information file 2401. Are means for obtaining a combined signal. However, in FIG.
  • FIG. 25 is a block diagram showing a configuration of the decoding Z combining means 2402.
  • a decoder 2501 is a means for decoding an image file, an audio file, and an image / audio multiplex file similar to the decoder 108 shown in FIG.
  • the decoder 2502 is the same means, but is provided for decoding the additional information file 2401.
  • the synthesizing means 2503 is means for performing a synthesizing process such as superimposing signals decoded by the decoders 2501 and 2502 and outputting the resulting signal.
  • FIG. 26 is a layout diagram of the operation surface of the image and sound reproduction device described in the seventh embodiment of the present invention.
  • the difference between the layout shown in FIG. 2 and the layout shown in FIG. 26 is that an additional information reproduction mode selection key 2601 is newly provided in FIG. Keys 201 to 209 are the same keys as those of the image and sound reproducing apparatus shown in FIG.
  • the main functions of the additional information playback mode selection key 2601 are as follows.
  • the display means 112 and the speaker 113 shown in FIG. 26 are the same as those shown in FIG.
  • the CPU 1 10 controls the reading means 1 6 to control the additional information file 2 4 0 1 recorded in the storage means 1 0 1 Is read out from the decoder, and after decoding by the decoder 2402, the content of the additional information file is reproduced by the display means 112 or the speaker 113.
  • the signal decoded by the decoder 2502 is output through the synthesizing means 2503, but the synthesizing means 2503 does not perform any synthesizing processing. Assume that the output of 2 is output as it is.
  • FIG. 27 is a schematic diagram showing the additional information file stored in the storage unit 101.
  • the frame image files A and B and the text files A and B are additional information files that are combined with the image files to decorate the image files and add information using characters.
  • Sound effect files A and B are additional information files that are synthesized into an audio file to superimpose a special sound effect on the playback sound.
  • the description will be made assuming that the six additional information files shown in FIG. 27 are recorded on the storage unit 101 together with the eight image files, audio files, and image / audio multiplex files shown in FIG. I do.
  • Embodiment 7 of the present invention configured as described above, Embodiment of the present invention The operation will be described focusing on the parts different from 1.
  • the automatic playback control file shown in Fig. 28 is generated by the following procedure.
  • the user reproduces an image and a sound from the eight files shown in FIG. 3 in the same combination as in the first embodiment of the present invention.
  • the user presses a new reproduction control file creation key 208.
  • the editing of the automatic playback control file is newly started, and the CPU 110 controls the writing means 107 to create a file, for example, a file name "AUTOLY6" on the storage means 101. I do.
  • the user presses the image file playback mode selection key 201 to select an image to be automatically played, and displays the image file on the storage unit 101.
  • the playback means is displayed on the means 111, and the image file B to be played first is displayed on the display means 112 by operating the forward key 204 or the return key 205.
  • the enter key 206 is pressed.
  • press the additional information playback mode selection key 2601 to play back the additional information file 2401 in the storage means 101.
  • the target additional information file is a frame image file
  • the image is displayed on display means 1 1 2, if it is a text file, the text contained in the file is displayed on display means 1 1 2, if it is a sound effect file, Then, the sound effect is played back with the speed of 113.
  • the additional information file to be superimposed is played back in the same manner as the image file is selected, and the additional information is pressed by pressing the enter key 206.
  • Change the file name to CPU 1 1 0 1 It is stored in the memory. In this case, connection to the string "ADD SRC" in order to clearly show that this is a pressurized information file with Then, the file name of the frame image file B is stored.
  • the CPU 110 selects the image portion of the image file B and the image Z of the previously selected audio multiplex file A, and the audio of the audio file A and the image audio multiplex file B. Recognizing the frame image file B, text file A, and sound effect file B, which are the part and the additional information, as one group, assigning a unique ID number (for example, 01) to the group, and writing means 1 By controlling 07, the ID number unique to the group and the contents stored in the temporary memory of the CPU 110 are written in the order of storage in the automatic reproduction control file "AUTOPLY6" on the storage means 101.
  • Figure 28 shows the contents of the written automatic playback control file "AUTOLY6".
  • the procedure for generating the automatic playback control file 105 has been described above. Next, reproduction of a file based on the automatic reproduction control file 105 shown in FIG. 28 will be described.
  • the CPU 110 controls the reading means 106, reads the automatic reproduction control file 105, and acquires the contents.
  • the CPU 110 searches for a GID from the first line of the automatic reproduction control file, and recognizes a group from the first "GID" to immediately before the next "GID" as one group.
  • the last group in the automatic playback control file 105 shall be from the last GID to the last line of the file.
  • file names are described in the order of playback.
  • the file specified by “ADD—SRC” is an additional information file
  • this additional information file is synthesized.
  • the CPU 110 sends information indicating a file to be combined to the combining means 2503 via the synchronization control means 109.
  • the synthesizing means 2503 sends the signal to be synthesized from the signals sent from the decoders 2501 and 2502 to the instruction of the CPU 110 via the synchronization control means 109. Based on the judgment, the combining process is executed.
  • the frame image file B is synthesized when the image file B is played, the text file A is synthesized when the image part of the image / audio multiplex file A is played, and the sound effect file B is played when the audio file A is played.
  • the synthesis of the additional information file is not instructed for the audio portion of the image / audio multiplex file B, the audio portion of the image Z audio multiplex file B is reproduced as it is.
  • Fig. 29 is a flowchart showing the flow of playback of a series of these files.
  • steps 501 to 505 are the same as those in FIG.
  • Step 2901 is a step of detecting a file name designated by a character string "ADD_SRC" indicating an additional information file for each detected group.
  • the CPU 110 reads out the specified files and the additional information file from the storage means 101, decodes them by the decoders 2501, 2502, and 03 Controls the combination of the image or sound by 3 and the additional information file. .
  • FIG. 30 schematically shows how such image and sound are reproduced.
  • the image is played back in the order of the image part of the image file B in which the frame image B is synthesized and the image part of the audio / multiplex file A in which the text file A is synthesized.
  • the user can reproduce the image and the sound in a form in which the additional information file is synthesized as specified by the user.
  • the image and the audio are synchronized by combining three types of files: the image file, the audio file, and the image / audio multiplex file.
  • the image file the audio file
  • the image / audio multiplex file the image / audio multiplex file.
  • Embodiment 7 of the present invention two decoders 2501 and 2502 shown in FIG. 25 are not necessarily required. A configuration in which one decoder is shared may be used.
  • Embodiment 7 of the present invention as an example of the additional information file, a frame image file, a text file, and a sound effect file are given, but the information added to the reproduced image and the sound is not limited to this. is not.
  • the automatic playback control file 105 a group consisting of a plurality of files is described in the automatic playback control file 105, so that three types of files, ie, an image file, an audio file, and an image / audio multiplex file, The method of synchronizing and reproducing images and audio by combining the above has been described.
  • no particular reference was made to the playback time of images and sounds so that when playing back images and sounds in accordance with the description of the automatic playback control file 105, the playback time of each image and sound was The following describes an example in which reproduction is performed by designating.
  • FIG. 31 is a layout diagram of an operation surface of the image and sound reproduction device described in Embodiment 8 of the present invention. The difference between the arrangement diagram shown in FIG. 2 and the arrangement diagram shown in FIG. 31 is that a reproduction time setting key 3101 and a numeric input dial 3102 are newly provided in FIG.
  • Keys 201 to 209 are the same keys as those of the image and sound reproducing apparatus shown in FIG. Playback time setting key 3 1 0 1 and numeric input diamond
  • the main functions of the rule 3102 are as follows.
  • the playback time setting key 3101 When the playback time setting key 3101 is pressed, the mode for setting the playback time of the selected file is entered. Rotate the numeric input dial 3 1 0 2 to enter an arbitrary number.
  • the user presses the new playback control file creation key 208.
  • the editing of the automatic reproduction control file shown in FIG. 32 is newly started, and the CPU 110 controls the writing means 107 and stores a file such as "AUTOPLY7" in the storage means 101. Create a first name file.
  • the user presses the image file playback mode selection key 201 to select an image to be automatically played, and displays the image file on the storage unit 101.
  • the playback means is displayed on the means 111, and the image file B to be played first is displayed on the display means 112 by operating the forward key 204 or the return key 205.
  • the enter key 206 is pressed.
  • a candidate value of the playback time is displayed on the display means 112, for example, in units of seconds.
  • the candidate value of the playback time changes according to this rotation, and the playback is started.
  • the time reaches a desired value, the rotation of the numeric input dial is stopped.
  • the numeric input dial 3102 may be rotated so that the reproduction time displayed on the display means 112 becomes 10 seconds.
  • the enter key 206 is pressed, the reproduction time displayed on the display means 112 is stored in the temporary memory of the CPU 110.
  • the playback time is stored in seconds, following the character string "PLY-DUR" to indicate that this indicates the playback time.
  • pressing the grouping key 207 causes the CPU 110 to select the two selected image files B and the image / audio multiplex file A and audio. Recognize the audio portion of file A and image Z audio multiplexed file B as one group, assign a unique ID number (for example, 0 1) to the group, control writing means 107, and store means 100 Write the ID number unique to the group and the contents stored in the temporary memory of the CPU 110 to the automatic playback control file "AUTOPLY7" on 1 in the order in which they were stored.
  • Figure 32 shows the contents of the written autoplay control file "AUTOLY7".
  • the file with the smaller number of lines is the file that is played earlier in time, and the number specified by "PLY_DUR” indicates the playback time in seconds. It is shown in units.
  • the playback time of image file B is 10 seconds
  • the playback time of the image portion of image / audio multiplex file A is 15 seconds
  • the playback time of audio file A is 20 seconds
  • the playback time specified by "PLY-DUR” is the playback time of the file described in the line immediately before, counting from the smallest number of lines.
  • the procedure for generating the automatic playback control file 105 has been described above. Next, reproduction of a file based on the automatic reproduction control file 105 shown in FIG. 32 will be described.
  • the CPU 110 controls the reading means 106 to read the automatic reproduction control file 105 and acquire its contents.
  • the CPU 110 searches for a GID from the first line of the automatic reproduction control file, and recognizes a group from the first "GID" to immediately before the next "GID" as one group.
  • the last group in the automatic playback control file 105 shall be from the last GID to the last line of the file.
  • the CPU 110 sends information indicating a file to be synchronously reproduced and information on a reproduction time to the synchronous control means 109.
  • the synchronization control means 109 monitors the progress of the decoding of the reproduced image and sound, and when the decoding of the data corresponding to the specified reproduction time of the image and sound is completed, the decoder 108 controls the decoding by the decoder 108. Is stopped, and then the decoding of the image and audio to be decoded is started. In this way, the playback time of images and sounds is controlled.
  • image file B is played for 10 seconds, and the image portion of the following image Z audio multiplex file A is played for 15 seconds. Also, the playback of the audio file A starts in synchronization with the playback of the image file B, and after 20 seconds, the audio part of the subsequent image / audio multiplex file B is played for 5 seconds, and a series of images and audio Playback ends.
  • Fig. 33 shows the flow of playback of a series of these files in a flowchart.
  • steps 501 to 505 are the same as those in FIG.
  • Step 3301 is a step of detecting a numerical value designated by a character string “TLY_DUR” indicating a playback time of each file for each detected group. Then, each designated file is read from the storage means 101, and the file to be reproduced synchronously and the reproduction time are instructed to the synchronization control means 109.
  • the synchronization control means 109 reads out the data from the decoder 108. It controls decoding, performs synchronous playback of images and audio, and controls playback time.
  • Fig. 34 The appearance of such image and sound reproduction is schematically shown in Fig. 34.
  • the user can play the image and sound for the time specified by the user.
  • an image file, an audio file, and an image Z audio multiplex file are combined to create an image and an audio file.
  • the playback time of each file can be specified, which makes it possible to play back images and audio for the specified time freely.
  • the specification of the reproduction time is described as the reproduction time of each file.
  • the reproduction start time of the first reproduced file is set to 0.
  • a method of setting the file playback time based on the absolute time from the playback start time is also conceivable.
  • the total playback time of each file to be automatically played is specified by the character string "PLY-TTL”
  • the playback start time of each file is specified by "PLY-TIM”.
  • the total time of automatic playback is specified as 25 seconds
  • the playback start time of the image file B to be played first is specified as 0 seconds by a character string "PLY_TIM”.
  • Next image to be played back If the playback start time of the image portion of the audio multiplex file A is specified as 10 seconds by the character string "PLY-TIM", the same as described with reference to FIGS. , File playback is possible.
  • the reproduction time candidate value displayed on the display means 112 is set as an initial value preset in the device.
  • the present invention is not limited to this.
  • the time required for originally reproducing all the data stored in each of the image file, the audio file, and the image / audio multiplex file for example, a moving image of 5 seconds is required. 5 seconds for stored image files and 10 seconds for audio files containing 10 seconds of audio data) from the data in each file, and displays this first.
  • a configuration shown in 1 1 and 2 is also conceivable.
  • the reproduction time is set in units of seconds.
  • the present invention is not limited to this, and the reproduction time may be set in any unit of time, including fractions. Is valid.
  • the image portion of the image file and the image / audio multiplex file is not limited to a moving image including a plurality of frames or a still image including a single frame. It is effective, and if the image is a still image, a configuration that keeps displaying the still image for a specified time can be considered.
  • Embodiment 8 of the present invention when the image portion of the image file and the image Z audio multiplex file is a moving image, a method of reproducing the moving image from the beginning when reproducing the file for a designated time period Then, there is a method of setting the place where the user starts playback arbitrarily.
  • the playback start location of the moving image is indicated by the time from the first part of the moving image, and for example, 'TLY_STR' is prepared as a character string indicating this Then, it is possible to put the character string “PLY—DUR” in the auto-playback control file, etc.
  • the time specified for playback is set to all image data stored in each of the image file and the image Z audio multiplex file. If the playback time is longer than the time required to play back the original video, after the playback of the moving image within the specified time is completed, an image prepared in advance by a device such as a blue screen may be displayed. . Specifically, if a 10-second playback command is given to a 3-second moving image, the image is displayed for the first 3 seconds, and a blue screen is displayed for the remaining 7 seconds. .
  • the time specified for playback is the same as audio file, image Z audio If it is longer than the time required to originally play all the audio data stored in each file of the multiple files, after the audio playback within the specified time is completed, the device is prepared in advance. The sound may be reproduced or silenced. Also, in Embodiment 8 of the present invention, when the file to be played back is a moving image, the time designated for playback means that all the image data stored in each of the image file and the image / audio multiplex file is deleted. If the time is longer than the time required for the original playback, an error message etc. is displayed on the display means 112, and the time required for the user to play the entire image It may be possible to guide the user to set
  • PLY—DUR In Embodiment 8 of the present invention, “PLY—DUR”, “PLY—TTL”, “PLY—TIM”, and “PLY—STR” are used as character strings for specifying the playback time and the like. These are only examples, and are not limited to these.
  • the encoding method and the file format of the image file, the audio file, and the image Z audio multiplex file are not specified in detail, but these files are not encoded. It is obvious that the present invention is effective for a file encoded by the system and a file of any file format. Further, the present invention is effective even if the image file, the audio file, and the image Z audio multiplex file are information-compressed files, uncompressed files, and files having additional information such as headers. It is clear that
  • “′ IMG—SRC”, “SND—SRC”, and “CMP_SRC” are used as character strings for specifying files, but these are only examples. However, it is not limited to this.
  • the decoder 108 includes a digital-analog converter that converts a digital signal into an analog signal is also conceivable.
  • the key input of the operation key 111 has been described using the key input by pressing as shown by the keys 201 to 208 in FIG.
  • the present invention is not limited to this. It is also conceivable to select the required operation from the touch panel or menu display.
  • the automatic playback control file used at the time of playback exists as if there is only one in the storage unit 101, but the present invention is not limited to this.
  • all the automatic reproduction control files on the storage unit 101 are displayed on the display unit 112, and the user can freely select the automatic reproduction control file by key input or the like. There are many ways to do this, but of course this is not a limitation.
  • the automatic playback control file is described to be recorded on the storage unit 101.
  • the present invention is not limited to this.
  • the automatic reproduction control file may be stored separately from the storage unit 101. It is also conceivable to store it in a means.
  • a configuration has been described in which an image and a sound are reproduced when the automatic reproduction control file is created.
  • the present invention is not limited to this.
  • the image and the sound may not be reproduced.
  • a method of displaying the file names on the display means 1 1 and 2 and selecting a file to be automatically played from the file name can be considered.
  • a configuration has been described in which an image and a sound are reproduced when an automatic reproduction control file is created.
  • a configuration in which a thumbnail image is displayed for an image is also conceivable.
  • a configuration may be considered in which a part of the audio is reproduced, for example, only the beginning part.
  • the number of frames in the image portion of the image file and the image / audio multiplex file is not particularly mentioned. But it doesn't matter.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Description

明 細 書 画像及び音声の再生装置及び方法 技術分野
本発明はデジタルスチルカメラ、 デジタルビデオカメラ等の画像取得装置で 取得された画像信号及び音声信号を自動連続再生する画像及び音声の再生装置 及び方法に関する。 背景技術
デジタルカメラを利用した画像表示システムの一例としては、 特開平 1 1 _ 8 8 8 0 8号公報に開示の装置がある。 これは、 図 3 7に示すように、 ユーザ 一がデジタルカメラ上で選択した映像ファイル 3 7 0 1のファイル名をメモリ カード （フラッシュメモリカード） 上に表示管理情報ファイル 3 7 0 2として 作成する。 図 3 7の液晶表示装置等の表示手段 3 7 0 3を制御する表示制御手 段 3 7 0 5は、 表示管理情報取得手段 3 7 0 4により、 メモリカードの表示管 理情報ファイル 3 7 0 2から表示すべき映像のファイル名を得て、 順番に表示 手段 3 7 0 3に表示を行うものである。 '
しかしながら、 上記従来の例においては、 取り扱うファイルが画像信号を記 録したファイルのみであり、 例えば、 音声単独のデータや画像取得と同時に記 録された音声データを、 画像と同期させて再生すること等は想定されておらず、 且つそのための技術的な提案もなされていない。 発明の開示
本発明は以上のような課題に対応するためになされたものであり、 画像デー 夕、 音声デ一夕、 画像と音声が多重されたデータをユーザ一が自由に且つ容易 に組み合わせて、 連続して再生する装置及び 法を提供することを目的とする。
この課題を解決するために本発明の画像及び音声の再生装置および方法は、 画像信号を記録したデータ、 音声信号を記録したデータ、 及び画像信号と音声 信号を多重記録したデータのうち少なくとも 1つと、 前記画像信号を記録した データ、 前記音声信号を記録したデータ、 及び前記画像信号と音声信号を多重 記録したデ一夕のうち少なくとも 1つまたはそれらを任意に組み合わせたもの の再生に関する情報を記載する再生情報デ一夕とをそれぞれ独立に少なくとも 1つの記憶手段に保持することを特徴とするものである。
この構成または方法、 および以下のさまざまな展開によって、 前記再生に 関する情報に従い、 前記画像信号を記録したデータファイル、 音声信号を記録 したデータファイル、 画像信号と音声信号を多重記録したデ一夕ファイルのよ うな異なる形式のデータをユーザーが自由に且つ簡単に組み合わせて、 また画 像信号と音声信号を同期させて、 または画像や音声にいろいろな付加情報を加 えたり： 再生順を変更するなどの変更を加えて、 容易に連続的に再生すること ができるものである。
上記本発明において、 前記再生情報データには、 前記記憶手段に保持され ているデータのうち、 再生対象であるデータを特定するための情報を記載して おくことができる。
また、 前記再生情報デ一夕には、 前記記憶手段に保持されでいるデータを 再生する順番を記載しておくことができる。
また、 前記再生情報データには、 前記記憶手段に保持されているデータを 再生する時間を示す情報を記載しておくことができる。
また、 前記再生情報データには、 前記記憶手段に保持されているデータを 再生する時刻を示す情報を記載しておくことができる。
また、 前記再生情報データにおいて、 画像信号と音声信号を多重記録した データを指定する場合には、 前記画像信号と音声信号を多重記録したデータの 画像信号部分と音声信号部分とをそれぞれ別個に再生対象として指定可能であ る。
また、 前記再生情報データには、 前記データの再生に関する情報が、 少な くとも 1つのグループごとにまとめて記載し、 前記グループ内には、 再生対象 であるデータを特定するための情報が少なくとも 1つ記載することができる。 また、 前記再生情報データには、 データの再生に関する情報が少なくとも 1つのグループごとにまとめて記載し、 前記グループ内には、 画像信号を記録 したデータまたは画像信号と音声信号を多重記録したデータの画像信号部分の いずれかと、 音声信号を記録したデータまたは画像信号と音声信号を多重記録 したデータの音声信号部分のいずれかを特定するための情報が、 それぞれ 1つ ずつ記載することができる。
さらに、 前記再生情報データのグループにおいて、 画像信号と音声信号を 多重記録したデータを特定するための情報を記載する場合には、 同一のグルー プ内に画像信号を記録したデータ、 画像信号と音声信号を多重記録したデータ の画像信号部分、 音声信号を記録したデータ、 または画像信号と音声信号を多 重記録したデータの音声信号部分を特定するための情報を記載しないことを特 徵とする。
本発明及び上記の各種の展開において、 グループを単位に再生情報データ を編集することで、 新規の再生情報デ一夕を生成することができる。
本発明及び上記の展開において、 前記再生情報デ一夕に従って再生される画 像信号を記録したデータ、 音声信号を記録したデータ、 または画像信号と音声 信号を多重記録したデータのデータフォーマツトをフォーマツト変換手段で変 換することができる。 ·
本発明及び上記の展開において、 前記再生情報データに従って再生された 画像信号と音声信号とをェンコ一ダ手段で符号化することができる。
本発明及び上記の展開において、 画像信号を記録したデータ、 音声信号を 記録したデータ、 または画像信号と音声信号を多重記録したデータの少なくと も 1つと合成される情報を格納した合成情報デー夕を前記記憶手段に記憶し、 前記再生情報データには、 再生対象であるデータを特定するための情報と、 1 つ以上の前記合成情報データを特定するための情報とを記載することができる。 本発明及び上記の展開の一部において、 前記再生対象であるデータを特定 するための情報とは、 再生対象であるデータに与えられた名称とすることがで さる。
本発明及び上記の展開において、 再生手段を用いて前記再生情報データに 従って、 前記記憶手段に保持されたデータから画像信号と音声信号との再生を 行うことを特徴とする。
前項の展開において、 前記再生手段として、 データを複合化するデコーダ か、 記憶手段からデータを読み出す読み出し手段およびデータを復号化するデ コーダか、 の少なくともいずれかを用いることができる。
上記の展開のうち合成情報を用いるものについては、 前記合成情報フアイ ルは、 画像信号を記録したデータファイル、 音声信号を記録したデータフアイ ルまたは画像信号と音声信号を多重記録したデータファイルに含成される画像、 音声、 テキストのいずれかとすることができる。 図面の簡単な説明
図 1は本発明の実施の形態 1〜 5における画像及び音声の再生装置を示すブ ロック図、
図 2は同実施の形態 1〜 4における画像及び音声の再生装置の操作面の配置 図、
図 3は同実施の形態 1〜 4における記憶手段上に記憶されている画像フアイ ル、 音声ファイル、 画像 Z音声多重ファイルを示す模式図、
図 4は同実施の形態 1における自動再生制御ファイルの内容を示す図、 図 5は同実施の形態 1における自動再生動作のフローチヤ一ト、
図 6は同実施の形態 1における自動再生される画像と音声を説明するための 説明図、
図 7は同実施の形態 2における自動再生制御ファイルの内容を示す図、 図 8は同実施の形態 2における自動再生される画像と音声を説明するための 説明図、
図 9は同実施の形態 3における自動再生制御ファイルの内容を示す図、 図 1 0は同実施の形態 3における自動再生動作のフローチヤ一卜、
図 1 1は同実施の形態 3における自動再生される画像と音声を説明するため の説明図、
図 1 2は同実施の形態 4における自動再生制御ファイルの内容を示す図、 図 1 3は同実施の形態 4における自動再生動作のフローチヤ一ト、 図 1 4は同実施の形態 4における自動再生される画像と音声を説明するため の説明図、
図 1 5は同実施の形態 4において文字列" CMP—SRC"で指定されるフアイ ルのグループ内での記載方法の例を説明するための説明図、
図 1 6は同実施の形態 4において文字列'' CMP—SRC"で指定されるフアイ ルのグループ内での記載方法の例を説明するための自動再生制御ファイルの不 適切な記載内容の例を示す図、
図 1 7は同実施の形態 4において文字列'' CMP—SRC"で指定されるフアイ ルのグループ内での記載方法の例を説明するための自動再生制御ファイルの適 切な記載内容の例を示す図、
図 1 8は同実施の形態 5における画像及び音声の再生装置の操作面の配置図、 図 1 9は同実施の形態 5における自動再生制御ファイルの内容を示す図、 図 2 0は同実施の形態 5における自動再生される画像と音声を説明するため の説明図、
図 2 1は同実施の形態 5における複数の自動再生制御ファイルから新規の自 動再生制御ファイルを編集する方法の概念を説明するための説明図、
図 2 2は同実施の形態 6における画像及び音声の再生装置を示すプロック図、 図 2 3は同実施の形態 6における画像及び音声の再生装置の別の例を示すブ ロック図、
図 2 4は同実施の形態 7における画像及び音声の再生装置を示すプロック図、 図 2 5は同実施の形態 7におけるデコード 合成手段を示すブロック図、 図 2 6は同実施の形態 7における画像及び音声の再生装置の操作面の配置図、 図 2 7は同実施の形態 7における記憶手段上に記憶されている付加情報ファ ィルを示す模式図、
図 2 8は同実施の形態 7における自動再生制御ファイルの内容を示す図、 図 2 9は同実施の形態 7における自動再生動作のフローチヤ一卜、
図 3 0は同実施の形態 7において自動再生される画像、 音声と付加情報ファ ィルの合成を説明するための説明図、
図 3 1は同実施の形態 8における画像及び音声の再生装置の操作面の配置図、 図 3 2は同実施の形態 8における自動再生制御ファイルの内容を示す図、 図 3 3は同実施の形態 8における自動再生動作のフローチャート、 図 3 4は同実施の形態 8において自動再生される画像と音声の再生時間を説 明するための説明図、
図 3 5は同実施の形態 8における自動再生制御ファイルの別の例を示す図、 図 3 6は同実施の形態 8における自動再生制御ファイルの別の例を示す図、 図 3 7は従来例における自動再生装置の例を示すブロック図である。 発明を実施するための最良の形態
以下、 本発明の実施の形態について、 図面を用いて説明する。
(実施の形態 1 )
図 1は、 本発明の実施の形態 1〜 5における画像及び音声の再生装置の構成 を示すブロック図である。 図 1において、 記憶手段 1 0 1は、 デジ夕ルスチル カメラ、 デジタルビデオカメラ、 またはスキャナ等の機器により取得 （符号 化） された画像及び音声のデジタルデータを記憶する。 記憶手段 1 0 1は、 以 下のすべての実施形態において、 ハードディスク装置のような機器に固定の手 段でも、 フラッシュメモリカードのような取り外し可能な手段でも構わない。 そして記憶媒体は半導体メモリ、 磁気ディスク、 磁気テープ、 光ディスク等何 であっても構わない。 画像ファイル 1 0 2は記憶手段 1 0 1に記録されている 画像デ一夕のファイル、 音声ファイル 1 0 3は同じく音声デ一夕のファイル、 画像 音声多重ファイル 1 0 4は同じく画像データと音声データが 1つのファ ィル内に多重して格納されているファイルである。 また、 自動再生制御フアイ ル 1 0 5は画像ファイル 1 0 2、 音声ファイル 1 0 3、 画像 Z音声多重フアイ ル 1 0 4を組み合わせて連続的に再生する際の再生データや再生順序を示す情 報を格納しているファイルである。 但し、 図 1においては、 簡略化のために画 像ファイル 1 0 2、 音声ファイル 1 0 3、 画像/音声多重ファイル 1 0 4、 自 動再生制御ファイル 1 0 5をそれぞれ 1つしか図示していないが、 これに限る ものではなく、 現実にはそれぞれのファイルが複数ずつ存在する場合がある。 また、 画像ファイル 1 0 2、 音声ファイル 1 0 3、 画像 音声多重ファイル 1 0 4のすべてが必ず記憶手段 1 0 1に記録されているわけではなく、 例えば画 像ファイル 1 0 2が記憶手段 1 0 1に記録されていない場合も考えられる。 読み出し手段 1 0 6は、 記憶手段 1 0 1に記録されている各ファイルの読み 出しを行う手段であり、 再生手段の一つである。 書き込み手段 1 0 7は、 記憶 手段 1 0 1への自動再生制御ファイル 1 0 5の書き込みを行う手段である。 デ コーダ 1 0 8は再生手段の一つで、 記憶手段 1 0 1から読み出された画像ファ ィル 1 0 2、 音声ファイル 1 0 3、 画像 Z音声多重ファイル 1 0 4を復号化し て再生するための手段である。 再生手段としてはデコーダ 1 0 8だけを指すこ ともあり、 またデコーダ 1 0 8と読み出し手段 1 0 6を合わせて指すこともあ る。 このとき、 同期制御手段 1 0 9は自動再生制御ファイル 1 0 5の情報に基 づきデコーダ 1 0 8から出力される画像信号と音声信号が、 自動再生制御ファ ィル 1 0 5の情報通りに所定の同期関係になるようにデコーダ 1 0 8での復号 化を制御する。
Central Processing Unit ( C P U) 1 1 0は、 操作キー 1 1 1からの入力 に応じて自動再生制御ファイル 1 0 5を生成したり、 自動再生制御ファイル 1 0 5の情報に基づき、 読み出し手段 1 0 6、 同期制御手段 1 0 9を制御し、 画 像ファイル等の読み出しや、 読み出したファイルのデコーダ 1 0 8での復号化 及び再生を制御する。
表示手段 1 1 2は、 デコーダ 1 0 8で復号化された画像信号を表示する液晶 表示装置や Cathode Ray Tube ( C R T) のような表示装置であり、 スピーカ 一 1 1 3はデコーダ 1 0 8で復号化された音声信号を再生するためのものであ る。
図 2は、 実施の形態 1〜 4における画像及び音声の再生装置の操作面の配置 図である。
キー 2 0 1から 2 0 9は、 図 1に示した操作キー 1 1 1を構成する各種キー であり、 キー入力信号は図 1に示した C P U 1 1 0に送られる。 それぞれの主 な機能は、 以下の通りである。
画像ファイル再生モード選択キー 2 0 1は、 このキーが押下されると、 記 憶手段 1 0 1上の画像ファイルの再生モードとなり、 C P U 1 1 0は読み出し 手段 1 0 6を制御して記憶手段 1 0 1に記録されている画像ファイル及び画像 音声多重ファイルのうちから 1つを読み出し、 デコーダ 1 0 8による復号化 の後、 表示手段 1 1 2に読み出されたファイルの画像が表示される。
音声ファイル再生モード選択キー 2 0 2が押下されると、 記憶手段 1 0 1上 の音声ファイルの再生モードとなり、 C P U 1 1 0は読み出し手段 1 0 6を制 御して記憶手段 1 0 1に記録されている音声ファイル及び画像 音声多重ファ ィルのうちから 1つを読み出し、 デコーダ 1 0 8による復号化の後、 スピーカ 一 1 1 3で読み出されたファイルの音声が再生される。
画像 音声多重ファイル再生モード選択キー 2 0 3が押下されると、 記憶手 段 1 0 1上の画像 Z音声多重ファイルの再生モードとなり、 C P U 1 1 0は読 み出し手段 1 0 6を制御して記憶手段 1 0 1に記録されている画像 音声多重 ファイルのうちから 1つを読み出し、 デコーダ 1 0 8による復号化の後、 表示 手段 1 1 2に読み出されたファイルの画像が表示され、 スピーカー 1 1 3で音 声が再生される。
送りキー 2 0 4は、 現在再生中のファイルとは別のファイルを再生する際に 押下するキー、 戻しキ一 2 0 5は、 1つ前に再生されたファイルを再生する際 に押下するキーである。 決定キー 2 0 6は、 再生されたファイルを、 自動再生 の対象として選択する際に押下するキーである。
グループ化キ一 2 0 7が押下されると、 C P U 1 1 0は、 特定のファイル群 にグループ I D番号を付与し、 自動再生制御ファイルに特定の文字列と共にフ アイル名を書き込む。
新規再生制御ファイル作成キー 2 0 8が押下されると、 C P U 1 1 0は書き 込み手段 1 0 7を制御して、 新規に自動再生制御ファイルを記憶手段 1 0 1上 に作成する。
自動再生キ一 2 0 9が押下されると、 C P U 1 1 0は自動再生制御ファイル 1 0 5の情報に基づき、 読み出し手段 1 0 6、 同期制御手段 1 0 9を制御し、 記憶手段 1 0 1上のファイルを読み出し自動的に再生する。
図 3は、 実施の形態 1〜4における、 記憶手段 1 0 1に記憶されている画像 ファイル、 音声ファイル、 画像 Z音声多重ファイルを示す模式図である。 図 3 において、 画像ファイル A、 B、 Cは、 それぞれ画像データが格納されている ファイルである。 音声ファイル A、 B、 Cは、 それぞれ音声データが格納され ているファイルである。 画像 音声多重ファイル A、 Bは、 それぞれ画像と音 声のデータが 1つのファイルの中に多重されて格納されているファイルである。 以下、 図 3に示した 8個のファイルが記憶手段 1 0 1上に記録されているもの として説明を行う。
以上のように構成された本実施の形態に関し、 以下に、 その動作を説明す る。
ユーザーが、 記憶手段 1 0 1上に記録されている画像ファイル、 音声ファ ィル、 画像 Z音声多重ファイルを自由につなぎ合わせて再生する場合、 まず次 のような手順により、 自動再生制御ファイル 1 0 5を生成する。
まず、 ユーザーが図 3に示した 8個のファイルのうち、 画像に関しては画像 ファイル Bと画像 音声多重ファイル Aの画像部分をこの順番で連続して再生 し、 音声に関しては音声ファイル Aと画像ノ音声多重ファイル Bの音声部分を この順番で連続して再生し、 更に音声ファイル Aの再生を画像ファイル Bの再 生開始に同期して行いたい場合について、 図 4の自動再生制御ファイルの内容 を示す図を用いて説明する。
最初にユーザーは、 新規再生制御ファイル作成キー 2 0 8を押下する。 この キー入力を受けて新規に自動再生制御ファイルの編集が開始され、 C P U 1 1 0は、 書き込み手段 1 0 7を制御し記憶手段 1 0 1上に例えば" AUTOPLY1" というファイル名のファイルを作成する。
次にユーザーは、 自動再生する画像を選択するために画像ファイル再生モー ド選択キー 2 0 1を押下して、 記憶手段 1 0 1上の画像ファイルを表示手段 1 1 2に再生表示させる。 この際に例えば、 表示手段 1 1 2には画像ファイル A が再生され、 送りキー 2 0 4もしくは戻しキー 2 0 5により表示画像を変える ことで、 画像ファイル B、 画像ファイル C、 画像 音声多重ファイル Aの画像 部分、 画像 音声多重ファイル Bの画像部分が表示手段 1 1 2に順次表示され るものとする。 そして、 ユーザーが画像ファイル Bと画像 Z音声多重ファイル Aの画像部分をこの順番で連続して再生したい場合、 ユーザーは、 送りキー 2 0 4もしくは戻しキー 2 0 5を操作して最初に再生したい画像ファイル Bを表 示手段 1 1 2に表示させる。 そして決定キー 2 0 6を押下する。 C P U 1 1 0 はその内部に一時的に情報を記憶する一時メモリを有し、 決定キー 2 0 6の押 下により、 その一時メモリに画像ファィルの再生モードでュ一ザ一がこのファ ィルを再生すべき画像として選択したことを明示するための" IMG—SRC="と いう文字列に続けて、 画像ファイル Bのファイル名が記録される。 次に、 送り キー 2 0 4もしくは戻しキー 2 0 5により画像/音声多重ファイル Aの画像を 表示させる。 そして再び決定キー 2 0 6を押下する。 これにより C P U 1 1 0 内の一時メモリに、 同じく" IMG—SRC= "という文字列に続けて、 画像 音声 多重ファイル Aのファイル名が記録される。 以上の手順により、 画像ファイル Bと画像 音声多重ファイル Aが選択され、 そのファイル名が再生したい順番 に" IMG— SRC= "という文字列とともに C P U 1 1 0内に記録される。
次に、 自動再生する音声を選択するために音声ファイル再生モード選択キー 2 0 2を押下して、 記憶手段 1 0 1上の音声ファイルをスピーカー 1 1 3で再 生させる。 この際に例えば、 スピーカ一 1 1 3では音声ファイル Aが再生され、 送りキー 2 0 4もしくは戻しキー 2 0 5により再生する音声を変えることで、 音声ファイル B、 音声ファイル (：、 画像 Z音声多重ファイル Aの音声部分、 画 像 Z音声多重ファイル Bの音声部分がスピーカー 1 1 3で順次再生されるもの とする。 そしてユーザーが音声ファイル Aと画像 Z音声多重ファイル Bの音声 部分をこの順番で連続して再生したい場合、 ユーザーは、 送りキー 2 0 4もし くは戻しキー 2 0 5を操作して最初に再生したい音声ファイル Aをスピーカ一 1 1 3で再生させる。 そして決定キー 2 0 6を押下する。 これにより C P U 1 1 0内の一時メモリには、 音声ファイルの再生モードでユーザ一がこのフアイ ルを再生すべき音声として選択したことを明示するための" SND— SRC= "と いう文字列に続けて、 音声ファイル Aのファイル名が記録される。 次に、 送り キ一2 0 4もしくは戻しキー 2 0 5により画像 Z音声多重ファイル Bの音声部 分を再生させる。 そして再び決定キー 2 0 6を押下する。 これにより C P U 1 1 0内の一時メモリに、 同じく" SND—SRC= "という文字列に続けて、 画像 音声多重ファイル Bのファイル名が記録される。 以上の手順により、 音声フ アイル Aと画像/音声多重ファイル Bが選択され、 そのファイル名が再生した い順番に" SND— SRC= "という文字列とともに C P U 1 1 0内に記録される。 この状態で次にグループ化キー 2 0 7を押下すると C P U 1 1 0は、 先ほど 選択した画像ファイル Bと画像/音声多重ファイル A、 及び音声ファイル Aと 画像 Z音声多重ファイル Bを 1つのグループとして認識してグループに固有の I D番号 （例えば 0 0 1 ) を付与し、 書き込み手段 1 0 7を制御して記憶手段 1 0 1上の自動再生制御ファイル'' AUTOPLY1"に、 グループ固有の I D番号 と C P U 1 1 0の一時メモリに記憶されていた内容を書き込む。 図 4に、 書き 込まれた自動再生制御ファイル" AUTOPLY1"の内容を示す。 図 4に示す "GID"はグループの I D番号であり、 図 4の例では 0 0 1とする。 また、
"IMG_SRC"は画像ファイルもしくは画像/音声多重フアイルの画像部分を示 す文字列であり、 これにより画像ファイル Bと画像 Z音声多重ファイル Aの画 像部分が、 ユーザーに選択された再生すべき画像であることを明示している。 また、 "SND—SRC"は音声ファイルもしくは画像 音声多重ファイルの音声 部分を示す文字列であり、 これにより音声ファイル Aと画像 音声多重フアイ ル Bの音声部分が、 ユーザーに再生を選択された再生すべき音声であることを 明示している。 特に、 画像 Z音声多重ファイルに関しては、 文字列' 'IMG— SRC"及び" SND— SRC"により、 その画像部分と音声部分を分離して指定する ことができ、 あたかも画像 音声多重ファイルを、 画像デ一夕のみからなる画 像ファイル、 もしくは音声データのみからなる音声ファイルのように扱うこと が可能であるとする。
"IMG— SRC"、 "SND— SRC"で示されるファイルのうち、 それぞれ行数の 若い方のファイルが時間的に先に再生されるファイルとする。
以上が自動再生制御ファイル 1 0 5の生成手順である。 次に、 図 4に示した 自動再生制御ファイル 1 0 5に基づいたファイルの再生について説明する。 ユーザーが自動再生キー 2 0 9を押下すると、 C P U 1 1 0は読み出し手段 1 0 6を制御し、 自動再生制御ファイル 1 0 5を読み出し、 その内容を取得す る。 C P U 1 1 0は自動再生制御ファイル 1 0 5の第 1行目から GIDをサ一 チし、 初めの" GID"から次の" GID"の直前までを 1つのグループと認識する。 なお、 自動再生制御ファイル 1 0 5中の一番最後のグループは、 一番最後の GIDからファイルの最終行までとする。 本実施の形態においては、 グループ は 1つであり、 最初の GIDから自動再生制御ファイル 1 0 5の最終行までが、 1つのグループである。
自動再生制御ファイル 1 0 5には、 再生する順番にファイル名が記載されて いる。 また画像ファイルもしくは画像 音声多重ファイルの画像部分に関して は、 "IMG—SRC"なる文字列で指定されており、 また音声ファイルもしくは画 像 音声多重ファイルの音声部分に関しては、 "SND— SRC"なる文字列で指 定されている。 そのため、 C P U 1 1 0は、 対象となるファイルが画像再生に かかわるものか、 音声再生にかかわるものかをこれらの文字列から判断する。 そして、 その結果、 画像に関しては、 画像ファイル B、 画像/音声多重フアイ ル Aの画像部分をこの順で、 また音声に関しては、 音声ファイル A、 画像 Z音 声多重ファイル Bの音声部分をこの順で、 記憶手段 1 0 1から読み出し、 復号 化し再生する。 そしてその際に、 自動再生制御ファイル 1 0 5の第 1行目の記 載から、 これらのファイル群がグループ I Dを付与された 1つのグループであ ることを判断し、 グループに含まれる画像ファイルのうち最初に再生される画 像ファイル Bの再生開始と、 同じグループに含まれる音声ファイルのうち最初 に再生される音声ファイル Aの再生開始が同期するように、 同期制御手段 1 0 9によりデコーダ 1 0 8での復号化を制御する。
具体的には、 C P U 1 1 0は同期再生すべき画像と音声を示す情報を同期制 御手段 1 0 9に送る。 デコーダ 1 0 8は、 内部に復号化した結果を一時的に記 憶する一時メモリを有し、 記憶手段 1 0 1から読み出されたファイルを復号化 して、 一旦、 この一時メモリに逐次書き込む。 これはファイルによって復号化 にかかる時間に差が生じた場合、 この時間差を補償するための措置である。 同 期制御手段 1 0 9は、 同期再生すべき画像と音声の復号化の進渉をモニタし、 画像と音声が同時に出力できるところまで復号化が完了した時点で、 一時メモ リに記憶されている画像と音声を同時に出力させる。 このようにして画像と音 声の再生を同期させる。
これら一連のファイルの再生の流れをフローチヤ一卜で表すと、 図 5のよう になる。 図 5において、 ステップ 5 0 1は自動再生キー 2 0 9からの入力待ち であり、 自動再生キー 2 0 9が押下されると、 ステップ 5 0 2へ進む。 ステツ プ 5 0 2で C P U 1 1 0は読み出し手段 1 0 6を制御して、 自動再生制御ファ ィル 1 0 5を記憶手段 1 0 1から読み出す。 ステップ 5 0 3で C P U 1 1 0は、 読み出した自動再生制御ファイル 1 0 5からグループ I D番号をサーチし、 グ ループを検出する。 更に、 ステップ 5 0 4では検出したグループ毎に画像を示 す文字列' 'IMG— SRC"で指定されたファイル名を検出し、 ステップ 5 0 5では 同様に、 音声を示す文字列" SND—SRC"で指定されたファイル名を検出する。 そしてステップ 5 0 6において上記に説明したように記憶手段 1 0 1からのフ アイルの読み出しと、 デコーダ 1 0 8による復号化と、 同期制御手段 1 0 9に よる画像と音声の同期再生を制御する。
また、 このような画像と音声の再生の様子を模式的に表すと図 6のようにな る。 すなわち画像はファイル B、 画像 Z音声多重ファイルの画像部分の順で 再生し、 この画像ファイル Bの再生開始に同期して音声はファイル Aが再生さ れ、 次いで画像音声多重ファイル Bの音声部分を再生する。 これによりュ一ザ 一は、 自らが指定した通りに画像と音声を再生することができる。
以上のように、 本実施の形態によれば、 再生開始を同期させたい画像フアイ ルと音声ファイルを、 図 4に示すように自動再生制御ファイル 1 0 5にグルー プ化された形で記載する。 この自動再生制御ファイル 1 0 5に従い、 グループ に含まれる画像ファイルのうち最初に再生される画像ファイルの再生開始と、 同じグループに含まれる音声ファイルのうち最初に再生される音声ファイルの 再生開始が同期するように、 記憶手段 1 0 1からのファイルの読み出しや、 デ コーダ 1 0 8での復号化を制御する。 これにより、 画像デ一夕、 音声データ、 画像と音声が多重されたデータをユーザ一が自由に且つ容易に組み合わせて、 所定の画像と音声の再生開始を同期させて実行することができる。
(実施の形態 2 )
本発明の実施の形態 1においては、 自動再生制御ファイル 1 0 5内に複数の ファイルからなる 1つのグループを記載する構成に関して説明したが、 この場 合、 グループに含まれるファイル群の再生開始時点での画像と音声の同期のみ が実現可能であり、 次の画像と次の音声とは必ずしも同期しない。 しかし、 更 に細かく画像と音声を同期させて再生したい場合も考えられる。 このような場 合を想定した実施の形態について図 7の自動再生制御ファイルの内容を示す図 を用いて以下に説明する。 本実施の形態で説明する画像及び音声の再生装置の 構成は、 図 1に示したブロック図と同様で、 また画像及び音声の再生装置の操 作面の配置図も図 2と同様なので、 説明は省略する。
例えば、 図 3に示したファイルのうち、 画像ファイル A、 画像ファイル Bを この順で再生し、 その際に、 画像ファイル Aと音声ファイル Bの再生開始を同 期させ、 更に画像ファイル Bと画像ノ音声多重ファイル Bの音声部分の再生開 始を同期させたい場合、 次のような手順により、 まずは自動再生制御ファイル 1 0 5を生成する。
最初にユーザーは、 実施の形態 1と同様に新規再生制御ファイル作成キ一 2 0 8を押下する。 これにより記憶手段 1 0 1上に例えば" AUTOPLY2"という ファイル名のファイルが作成される。
次にユーザーは、 自動再生する画像を選択するために画像ファイル再生モー ド選択キー 2 0 1を押下して、 記憶手段 1 0 1上の画像ファイルを表示手段 1 1 2に再生表示させ、 送りキー 2 0 4もしくは戻しキー 2 0 5により表示画像 を変えて画像ファイル Aを表示させる。 そして決定キー 2 0 6を押下する。 こ れにより C P U 1 1 0内の一時メモリに、 "IMG— SRC="という文字列に続け て、 画像ファイル Aのファイル名が記録される。 次に、 自動再生する音声を選 択するために音声ファイル再生モード選択キー 2 0 2を押下して、 記憶手段 1 0 1上の音声ファイルをスピーカー 1 1 3で再生させ、 送りキー 2 0 4もしく は戻しキー 2 0 5により再生音声を変えて音声ファイル Bを再生させる。 そし て決定キー 2 0 6を押下する。 これにより C P U 1 1 0内の一時メモリに、 "SND— SRC="という文字列に続けて、 音声ファイル Bのフアイル名が記録 される。
この状態で次にグループ化キー 2 0 7を押下すると C P U 1 1 0は選択した 画像ファイル Aと音声ファイル Bを 1つのグループとして認識してグループに 固有の I D番号 （例えば 0 0 1 ) を付与し、 書き込み手段 1 0 7を制御して記 憶手段 1 0 1上の自動再生制御ファイル" AUTOPLY2"にグループ固有の I D 番号と C P U 1 1 0の一時メモリに記憶されていた内容を書き込む。
次に、 上記と同様に、 画像ファイル Bと画像 Z音声多重ファイル Bの音声部 分とをそれぞれ再生させて選択し、 グループ化キー 2 0 7を押下する。 これに より C P U 1 1 0は、 画像ファイル Bと画像 Z音声多重ファイル Bの音声部分 を 1つのグループとして認識してグループに固有の I D番号 （例えば 0 0 2 ) を付与する。 そして書き込み手段 1 0 7を制御して記憶手段 1 0 1上の自動再 生制御ファイル" AUTOPLY2"にグループ固有の I D番号と C P U 1 1 0の一 時メモリに記憶されていた内容を追加して書き込む。 図 7に、 作成された自動 再生制御ファイル" AUTOPLY2"の内容を示す。 図 7に示す" GID"はグループ の I D番号であり、 図 7の例ではグループ化した 2つのグループにそれぞれ別 の番号を付与している。 また、 図 4と同様に" IMG— SRC"は画像ファイルもし くは画像 Z音声多重ファイルの画像部分を示す文字列であり、 "SND— SRC" は音声ファイルもしくは画像 音声多重ファイルの音声部分を示す文字列とす る。 そして行数の若い方の GIDを持つファイル群が先に再生されるファイル 群とする。
以上が自動再生制御ファイル 1 0 5の生成手順である。 次に、 図 7に示した 自動再生制御ファイル 1 0 5に基づいたファイルの再生について説明する。 ユーザ一が自動再生キー 2 0 9を押下すると、 C P U 1 1 0は読み出し手段 1 0 6を制御し、 自動再生制御ファイル 1 0 5を読み出し、 その内容を取得す る。 C P U 1 1 0は自動再生制御ファイル 1 0 5の第 1行目から GIDをサー チし、 初めの" GID"から次の" GID"の直前までを 1つのグループと認識する。 なお、 自動再生制御ファイル 1 0 5中の一番最後のグループは、 一番最後の GIDからファイルの最終行までとする。 自動再生制御ファイル 1 0 5の記載 より、 画像ファイル Aと音声ファイル Bが 1つのグループ、 画像ファイル Bと 画像 音声多重ファイル Bの音声部分が 1つのグループとして認識される。 そ して、 画像に関しては、 画像ファイル A、 画像ファイル Bの順に、 また音声に 関しては、 音声ファイル B、 画像 音声多重ファイル Bの音声部分の順に記憶 手段 1 0 1からファイルを読み出し、 復号化し再生する。 そしてその際に、 画 像ファイル Aと音声ファイル Bが 1つのグループ、 画像ファイル Bと画像 Z音 声多重ファイル Bの音声部分が 1つのグループであるため、 画像ファイル Aの 再生開始と音声ファイル Bの再生開始が同期し、 画像ファイル Bの再生開始と 画像 Z音声多重ファイル Bの音声部分の再生開始が同期するように、 同期制御 手段 1 0 9によりデコーダ 1 0 8での復号化を制御する。 これら一連のフアイ ルの再生のフローチャートは、 本発明の実施の形態 1で示した図 5と同様であ る。 また、 このような画像と音声の再生の様子を模式的に表すと図 8のように なり、 ユーザ一は、 自らが指定した通りに画像と音声を再生することができる。 以上のように、 本発明の実施の形態 2によれば、 複数のファイルからなるグ ループを、 1つの自動再生制御ファイル内に複数個置くことで、 画像と音声の 再生時の同期を細かく設定でき、 画像データ、 音声データ、 画像と音声が多重 されたデ一夕をユーザ一が自由に且つ容易に組み合わせて、 画像と音声の再生 開始を同期させて実行することができる。
(実施の形態 3 )
本発明の実施の形態 1及び 2においては、 自動再生制御ファイル 1 0 5内の 複数のファイルに対してグループ I D番号を付与し、 複数のファイルを 1つの グループとみなして画像と音声の同期再生を行う構成に関して説明した。 これ らの例において、 画像 Z音声多重ファイルは、 画像部分と音声部分に分割され た形で自動再生制御ファイル 1 0 5上に記載されていた。 しかし、 デジ夕ルス チルカメラやデジタルビデオカメラで取得された画像 音声多童ファイルは、 本来画像取得と同時に音声も取得されたファイルと考えられ、 画像と音声が同 期していることが当然の前提として記録されたファイルと言える。 よって、 そ のような性質のファイルを再生する場合に、 あえて画像部分と音声部分に分割 した形で自動再生制御フアイルに記載することは、 ユーザーにとつて煩雑であ り、 混乱を生じさせかねない。
そこで、 画像 音声多重ファイルを画像部分と音声部分に分割せずに、 画像 と音声の同期関係を維持したまま自動再生制御ファイルにより再生する実施の 形態に関して図 9の自動再生制御ファイルの内容を示す図を用いて説明する。 本実施の形態で説明する画像及び音声の再生装置の構成は、 図 1に示したプロ ック図と同様で、 また画像及び音声の再生装置の操作面の配置図も図 2と同様 なので、 説明は省略する。
例えば、 図 3に示したファイルのうち、 ユーザ一が画像 音声多重ファイル Aと画像 音声多重ファイル Bをこの順で連続して再生させたい場合、 次のよ うな手順により、 まずは自動再生制御ファイルを生成する。
最初にユーザーは、 本発明の実施の形態 1と同様に新規再生制御ファイル作 成キー 2 0 8を押下する。 これにより記憶手段 1 0 1上に例えば
"AUTOPLY3"というファイル名のフアイルが作成され'る。
次にユーザーは、 自動再生する画像 音声多重ファイルを選択するために画 像 音声多重ファイル再生モード選択キー 2 0 3を押下して、 記憶手段 1 0 1 上の画像 Z音声多重ファイルを再生させる。 送りキー 2 0 4もしくは戻しキー 2 0 5により再生するファイルを変えて画像 Z音声多重ファイル Aを再生させ た後、 決定キー 2 0 6を押下する。 これにより C P U 1 1 0内の一時メモリに は、 画像 Z音声多重ファイルの再生モードでユーザーがこのファイルを再生す べき、 画像と音声が多重されたファイルとして選択したことを明示するための "CMP—SRC = "という文字列に続けて、 画像 Z音声多重ファイル Aのフアイ ル名が記録される。 同様に画像 Z音声多重ファイル Bを再生し、 決定キー 2 0 6の押下により C P U 1 1 0内の一時メモリに、 "CMP— SRC= "という文字 列に続けて、 画像 Z音声多重ファイル Bのファイル名が記録される。 以上の手 順により、 画像 音声多重ファイル Aと画像 音声多重ファイル Bが選択され、 そのファイル名が再生したい順番に" CMP—SRC= "という文字列とともに C P U 1 1 0内に記憶される。
この状態で次にグループ化キ一 2 0 7を押下すると C P U 1 1 0は、 選択し た画像 音声多重ファイル Aと画像 音声多重フアイル Bを 1つのグループと して認識してグループに固有の I D番号 （例えば 0 0 1 ) を付与する。 そして 書き込み制御手段 1 0 7を制御して記憶手段 1 0 1上の自動再生制御ファイル "AUTOPLY3"に、 グループ固有の I D番号と C P U 1 1 0の一時メモリに記 憶されていた内容を書き込む。 図 9に、 書き込まれた自動再生制御ファイル "AUTOPLY3"の内容を示す。 図 9に示す' 'GID"はグループの I D番号であり、 "CMP— SRC"は画像 音声多重フアイルを示す文字列であり、 これにより画 像 音声多重フアイル A及び Bが、 ユーザーに選択された再生すべき画像と音 声のデ一夕であることを明示している。 また、 行数の若い方の GIDを持つフ アイル群が先に再生されるファイル群とする。
以上が自動再生制御ファイル 1 0 5の生成手順である。 次に、 図 9に示した 自動再生制御ファイル 1 0 5に基づいたファイルの再生について説明する。 ユーザーが自動再生キー 2 0 9を押下すると、 C P U 1 1 0は読み出し手段 1 0 6を制御し、 自動再生制御ファイル 1 0 5を読み出し、 その内容を取得す る。 自動再生制御ファイル 1 0 5には、 再生する順番にファイル名が記載され ている。 画像 Z音声多重ファイルは、 "CMP_SRC"なる文字列で指定されて いるために、 対象となるフアイルが画像と音声が多重して記録されていること をこの文字列 ら判断する。 そしてその結果、 画像 Z音声多重ファイル A、 画 像ノ音声多重ファイル Bを記憶手段 1 0 1から読み出し、 デコーダ 1 0 8で復 号化し画像及び音声を同期して再生する。
具体的には、 C P U 1 1 0は、 同期再生すべきファイルを示す情報を同期制 御手段 1 0 9に送る。 デコーダ 1 0 8は、 内部に復号化した結果を一時的に記 憶する一時メモリを有し、 記憶手段 1 0 1から読み出されたファイルを復号化 して、 一旦、 この一時メモリに逐次書き込む。 これは画像ノ音声多重ファイル において画像部分と音声部分で復号化にかかる時間に差が生じた場合、 この時 間差を補償するための措置である。 同期制御手段 1 0 9は、 再生する画像と音 声の復号化の進渉をモニタし、 画像と音声が同時に出力できるところまで復号 化が完了した時点で、 一時メモリに記憶されている画像と音声を同時に出力さ せる。 このようにして画像と音声の再生を同期させる。
これら一連のファイルの再生の流れをフローチャートで表すと、 図 1 0のよ うになる。 図 1 0において、 ステップ 5 0 1から 5 0 3は図 5と同様であるた め説明は省略する。 ステップ 1 0 0 1は、 検出したグループ毎に画像を示す文 字列" CMP SRC"で指定されたファイル名を検出するステップである。 そし てステップ 1 0 0 2において C P U 1 1 0は、 グループ固有の I D番号の若い 順に記憶手段 1 0 1から指定された画像 音声多重ファイルを読み出し、 デコ ーダ 1 0 8による復号化と、 同期制御手段 1 0 9による画像と音声の同期再生 を制御する。
また、 このような画像と音声の再生の様子を模式的にあらわすと図 1 1のよ うになり、 ユーザ一は、 自らが指定した通りに画像と音声を再生することがで さる。
以上のように、 本発明の実施の形態 3によれば、 画像と音声が多重されたデ 一夕を画像部分と音声部分に分割せずに、 画像と音声の同期関係を維持したま まの形式で、 ユーザーが自由に且つ容易に組み合わせて、 画像と音声を同期さ せて再生することができる。
(実施の形態 4 )
本発明実施の形態 3においては、 自動再生制御ファイル 1 0 5内に画像 Z音 声多重ファイルのみからなるグループを記載して、 自動再生を行う例を説明し た。 次に、 ユーザーが画像ファイル、 音声ファイルも含めて、 自動再生を行う 場合の実施の形態に関して、 図 1 2の自動再生制御ファイルの内容を示す図を 用いて説明する。 本実施の形態で説明する画像及び音声の再生装置の構成は、 図 1に示したブロック図と同様で、 また画像及び音声の再生装置の操作面の配 置図も図 2と同様なので、 説明は省略する。
例えば、 図 3に示したファイルのうち、 ユーザーが、 画像ファイル B、 画像 Z音声多重ファイル B、 画像ファイル Cをこの順で再生し、 その際に、 画像フ アイル Bと音声ファイル Aの再生開始を同期させ、 画像 音声多重ファイル B の画像部分には同ファイルの音声部分を同期させ、 画像ファイル Cと画像 音 声多重ファイル Aの音声部分の再生開始を同期させたい場合、 次のような手順 により、 まずは自動再生制御ファイルを生成する。
最初にユーザーは、 本発明の実施の形態 1と同様に新規再生制御ファイル作 成キ一 2 0 8を押下する。 これにより記憶手段 1 0 1上に例えば
"AUTOPLY4"というフアイル名のフアイルが作成される。 次にユーザーは、 自動再生する画像を選択するために画像ファイル再生モー ド選択キー 2 0 1を押下して、 記憶手段 1 0 1上の画像ファイルを表示手段 1 1 2に再生表示させ、 送りキー 2 0 4もしくは戻しキー 2 0 5により表示画像 を変えて画像ファイル Bを表示させる。 そして決定キー 2 0 6を押下する。 こ れにより C P U 1 1 0内の一時メモリに、 画像ファイルの再生モードで、 ユー ザ一がこのファイルを再生すべき画像として選択したことを明示するための "IMG— SRC="という文字列に続けて、 画像ファイル Bのフアイル名が記録さ れる。 次に、 自動再生する音声を選択するために音声ファイル再生モード選択 キー 2 0 2を押下して、 記憶手段 1 0 1上の音声ファイルをスピーカ一 1 1 3 で再生させ、 送りキー 2 0 4または戻しキー 2 0 4により再生音声を変えて音 声ファイル Aを再生させる。 そして決定キー 2 0 6を押下する。 これにより C P U 1 1 0内の一時メモリに、 音声ファイルの再生モードでユーザーがこのフ アイルを再生すべき音声として選択したことを明示するための" SND—SRC= "という文字列に続けて、 音声ファイル Aのファイル名が記録される。
この状態で次にグループ化キ一 2 0 7を押下すると C P U 1 1 0は選択した 画像ファイル Bと音声ファイル Aを 1つのグループとして認識してグループに 固有の I D番号 （例えば 0 0 1 ) を付与し、 書き込み手段 1 0 7を制御して記 憶手段 1 0 1上の自動再生制御フアイ.ル" AUTOPLY4"にグループ固有の I D 番号と C P U 1 1 0の一時メモリに記憶されていた内容を書き込む。
次に、 自動再生する画像ノ音声多重ファイルを選択するために画像 Z音声多 重ファイル再生モード選択キー 2 0 3を押下して、 記憶手段 1 0 1上の画像 音声多重ファイルを再生する。 送りキー 2 0 4もしくは戻しキー 2 0 5により 表示画像を変えて画像 Z音声多重ファイル Bを再生後、 決定キー 2 0 6を押下 する。 これにより C P U 1 1 0内の一時メモリに、 画像ノ音声多重ファイルの 再生モードでユーザーがこのフアイルを再生すべき画像と音声が多重されたフ アイルとして選択したことを明示するための" CMP— SRC = "という文字列に 続けて、 画像 Z音声多重ファイル Bのファイル名が記録される。
この状態で次にグループ化キー 2 0 7を押下すると C P U 1 1 0は選択した 画像 Z音声多重ファイル Bを 1つのグループとして認識してグループに固有の I D番号 （例えば 0 0 2 ) を付与し、 書き込み手段 1 0 7を制御して記憶手段 1 0 1上の自動再生制御ファイル" AUTOPLY4"にグループ固有の I D番号と C P U 1 1 0の一時メモリに記憶されていた内容を追加して書き込む。
次に再度、 自動再生する画像を選択するために画像ファイル再生モード選択 キー 2 0 1を押下して、 記憶手段 1 0 1上の画像ファイルを表示手段 1 1 2に 再生表示させ、 送りキー 2 0 4もしくは戻しキー 2 0 5により表示画像を変え て画像ファイル Cを表示させる。 そして決定キー 2 0 6を押下する。 これによ り C P U 1 1 0内の一時メモリに、 "IMG_SRC= "という文字列に続けて、 画 像ファイル Cのファイル名が記録される。 次に再度、 自動再生する音声を選択 するために音声ファイル再生モード選択キ一2 0 2を押下して、 記憶手段 1 0 1上の音声ファイルをスピーカー 1 1 3で再生させ、 送りキー 2 0 4もしくは 戻しキー 2 0 5により再生音声を変えて画像 Z音声多重ファイル Aの音声部分 を再生させる。 そして決定キー 2 0 6を押下する。 これにより C P U 1 1 0内 の一時メモリに、 "SND—SRC= "という文字列に続けて、 画像 音声多重フ アイル Aのファイル名が記録される。
この状態で次にグループ化キ一 2 0 7を押下すると C P U 1 1 0は選択した 画像ファイル Cと画像 Z音声多重ファイル Aの音声部分を 1つのグループとし て認識してグループに固有の I D番号 （例えば 0 0 3 ) を付与し、 書き込み手 段 1 0 7を制御して記憶手段 1 0 1上の自動再生制御ファイル" AUTOPLY4" にグループ固有の I D番号と C P U 1 1 0の一時メモリに記憶されていた内容 を更に追加して書き込む。 図 1 2に、 書き込まれた自動再生制御ファイル "AUTOPLY4"の内容を示す。 図 1 2に示す" GID"はグループの I D番号であ り、 図 1 2の例ではグループ化した 3つのグループにそれぞれ別の番号を付与 している。 また、 図 4と同様に" IMG—SRC"は画像ファイルもしくは画像ノ音 声多重ファイルの画像部分を示す文字列であり、 "SND— SRC' 'は音声フアイ ルもしくは画像 Z音声多重ファイルの音声部分を示す文字列であり、 また図 9 と同様に" CMP— SRC"は画像 音声多重フアイルを示す文字列である。 そし て行数の若い方の GIDを持つグループが先に再生されるグループとし、 ダル ープ内では、 "IMG SRC"等の文字列で示されるファイルのうち、 同じ文字列 で示される行数の若いファイルが先に再生されるものとする。
以上が自動再生制御ファイル 1 0 5の生成手順である。 次に、 図 1 2に示し た自動再生制御ファイル 1 0 5に基づいたファイルの再生について説明する。 ユーザ一が自動再生キー 2 0 9を押下すると、 C P U 1 1 0は読み出し手段 1 0 6を制御し、 自動再生制御ファイル 1 0 5を読み出し、 その内容を取得す る。 C P U 1 1 0は自動再生制御ファイルの第 1行目から GIDをサーチし、 初めの" GID"から次の" GID"の直前までを 1つのグループと認識する。 なお、 自動再生制御ファイル 1 0 5中の一番最後のグループは、 一番最後の GIDか らファイルの最終行までとする。 自動再生制御ファイル 1 0 5の記載より、 画 像ファイル Bと音声ファイル Aとが 1つのグループ、 画像/音声多重ファイル Bが 1つのグループ、 画像ファイル Cと画像 音声多重ファイル Aの音声部分 とが 1つのグループとして認識される。 そして、 記憶手段 1 0 1から画像ファ ィル B、 音声ファイル A、 画像 音声多重ファイル B、 画像ファイル (：、 画像 ノ音声多重ファイル Aの音声部分を読み出し、 デコーダ 1 0 8で復号化し再生 する。 そしてその際に、 画像ファイル Bと音声ファイル Aが 1つのグループ、 画像 音声多重ファイル Bが 1つのグループ、 画像ファイル Cと画像 Z音声多 重ファイル Aの音声部分が 1つのグループである。 そのため、 図 1 4の説明図 のように、 画像ファイル Bの再生と音声ファイル Aの再生が同期して開始され、 その後、 画像 Z音声多重ファイル Bの画像部分と音声部分が同期して再生され、 最後に画像フアイル Cの再生開始が画像 Z音声多重フアイル Aの音声部分の再 生開始と同期するように、 同期制御手段 1 0 9によりデコーダ 1 0 8での復号 化を制御する。 これら一連のファイルの再生の流れをフローチヤ一卜で表すと、 図 1 3のようになる。
図 1 3において、 ステップ 5 0 1から 5 0 5は図 5と同様であり、 またステ ップ 1 0 0 1は図 1 0と同様であるため説明は省略する。 ステップ 1 3 0 1は、 検出したグループ毎にファイルを再生するステップであり、 本発明の実施の形 態 1から 3において説明したように、 C P U 1 1 0は、 記憶手段 1 0 1からの ファイルの読み出しと、 デコーダ 1 0 8による復号化と、 同期制御手段 1 0 9 による画像と音声の同期再生を制御する。 このようにユーザーは、 自らが指定した通りに画像と音声を再生することが できる。
以上のように、 本発明の実施の形態 4によれば、 画像ファイル、 音声フアイ ル、 画像 Z音声多重ファイルの 3種類のファイルを組み合わせて画像と音声を 自動で再生する場合において、 画像と音声が多重化されたデータを画像部分と 音声部分に分割せずに、 画像と音声の同期関係を維持したままの形式で、 また は必要に応じて画像部分と音声部分に分割して、 ユーザーが自由に且つ容易に 3種類のファイルを組み合わせて、 画像と音声を同期させて再生することがで きる。
なお、 本発明の実施の形態 4において、 ファイルをグループ化する場合に、 文字列" CMP_SRC"で指定される画像 Z音声多重ファイルと、 文字列'' IMG— SRC"及び" SND— SRC"で指定されるファイルとを混在させていない。 つまり 1つのグループ内に文字列" CMP— SRC"で指定される画像 音声多重フアイ ルを置く場合は、 文字列" CMP— SRC"で指定される画像/音声多重ファイル のみで 1つのグループを構成している。 例えば図 1 2において GIDが 0 0 2 であるグループには文字列" CMP_SRC"で指定される画像 音声多重フアイ ルのみが含まれる形にしている。 このよ
うな形とする理由を以下に説明する。
例えば、 図 1 5に示したように、 画像ファイル Bと音声ファイル Aを同期さ せて再生を開始し、 音声ファイル Aの次に音声ファイル Bを再生し、 その後、 画像 音声多重ファイル Bの画像と音声を同期再生し、 最後に、 画像ファイル Cと画像 Z音声多重ファイル Aの音声部分を同期させて再生したいとする。 こ の場合、 自動再生制御ファイルを作成する方法の例としてはこれまで説明した ように次のような手順が考えられる。 まず、 新規再生制御ファイル作成キー 2 0 8の押下により自動再生制御ファイル 1 0 5の編集を開始し、 画像ファイル 再生モード選択キー 2 0 1、 送りキー 2 0 4、 戻しキー 2 0 5を操作し、 画像 ファイル Bを表示手段 1 1 2に表示させた後、 決定キ一 2 0 6により文字列 "IMG— SRC"に続けてこのファイル名を C P U 1 1 0に記憶させる。 次に、 同 じょうに画像/音声多重ファイル再生モード選択キー 2 0 3、 送りキー 2 0 4、 戻しキー 2 0 5を操作し、 画像 音声多重ファイル Bを再生させた後、 決定キ —2 0 6により文字列" CMP—SRC"に続けてこのファイル名を C P U 1 1 0 に記憶させる。 そして再度、 画像ファイル再生モード選択キー 2 0 1、 送りキ 一 2 0 4、 戻しキー 2 0 5を操作し、 画像ファイル Cを表示手段 1 1 2に表示 させた後、 決定キー 2 0 6により文字列' 'IMG— SRC"に続けてこのファイル名 を C P U 1 1 0に記憶させる。 これにより、 画像ファイル B、 画像 音声多重 ファイル B、 画像ファイル Cの順に C P U 1 1 0の一時メモリに再生すベぎフ アイル名が記憶される。
音声ファイルに関しては、 再生したい順番に、 音声ファイル A、 音声フアイ ル8、 画像 音声多重ファイル Aの音声部分を、 音声ファイルファイル再生モ ード選択キー 2 0 2、 送りキー 2 0 4、 戻しキー 2 0 5を操作し、 音声フアイ ル八、 音声ファイル B、 画像 Z音声多重ファイル Aの音声部分をスピーカー 1 1 3で再生した後、 それぞれ決定キー 2 0 6により文字列'' SND— SRC"に続 けてこれらのファイル名を C P U 1 1 0に記憶させる。 そしてグループ化キー 2 0 7の押下により選択したファイルをグループ化し、 これをグループ I D番 号 （例えば 0 0 1 ) と共に自動再生制御ファイルに書き込む。
以上のような手順で、 作成される自動再生制御ファイル 1 0 5を図 1 6に示 す。 この自動再生制御ファイル 1 0 5は、 図 1 6に示すように 1つのグループ I D (GID) で、 6つのファイルがグループ化されている。
次に、 図 1 6に示した自動再生制御ファイル 1 0 5によって複数ファイルの 自動再生を行う場合を考える。
図 1 6の自動再生制御ファイル 1 0 5では、 画像ファイル B、 画像 Z音声多 重ファイル B、 画像ファイル Cが順に並んでおり、 画像はこの順番に再生すれ ばよいことは判断できる。 しかし、 音声ファイルに関しては、 音声ファイル A、 音声ファイル B、 画像 音声多重ファイル Aの音声部分をこの順に再生するこ とと、 グループに含まれる画像ファイルのうち最初に再生される画像ファイル の再生開始と、 同じグループに含まれる音声ファイルのうち最初に再生される 音声ファイルの再生開始が同期するように、 音声ファイルを再生すればよいこ と、 つまり画像ファイル Bの再生開始と音声ファイル Aの再生開始を同期させ ればよいことは判断できる。 しかし画像/音声多重ファイル Bの音声部分と、 音声ファイル B及び画像 Z音声多重ファイル Aの音声部分との時間的な位置関 係は図 1 6の自動再生制御ファイル 1 0 5の記載では判断できない。 具体的に は、 画像 音声多重ファイル Bより先に再生される画像ファイル Bと同期する 必要がある音声ファイル Aは、 画像 Z音声多重ファイル Bの音声部分よりも先 に再生する必要があるが、 音声ファイル Bと画像 Z音声多重ファイル Aの音声 部分は、 音声ファイル Aよりも後に再生されること以外は図 1 6の自動再生制 御ファイルからは判断できない。
そのため、 これまで説明したような手順で自動再生制御ファイルを作成する ならば、 画像 Z音声多重ファイル Bの音声部分と、 音声ファイル B及び画像 音声多重ファイル Aの音声部分との時間的な位置関係を明示するための情報を 自動再生制御ファイルに追加して記載する必要が生じる。 しかしその場合、 自 動再生制御フアイルの記載が複雑になり、 またこの自動再生制御ファイルをも とに、 自動で画像及び音声を再生する機器も、 自動再生制御ファイル解析のた めの負担が大きくなる。 具体的には再生機器がより複雑な自動再生制御フアイ ル解析のためのハードウェアもしくはソフトウエアを具備する必要が生じる。 また、 自動再生制御ファイルを作成する手間も大きくなり、 ユーザーに対して も負担を負わせることになる。
そこで、 図 1 2及び図 1 4に示したように、 画像 Z音声多重ファイルを文字 列' 'CMP— SRC"で指定し、 画像と音声が同期して再生される 1つのファイル として扱う場合は、 文字列' 'IMG— SRC"及び" SND— SRC"で指定されるファ ィルとを混在させずに、 文字列" CMP— SRC"で指定される画像/音声多重フ アイルのみで 1つのグループを構成させる。 つまり、 画像ノ音声多重ファイル のような、 ファイルの性質上、 画像と音声の同期関係が 1つのファイル内で完 結しているファイルは、 同じ形式のファイルだけを 1つのグループとしてまと めれば、 他の画像と音声の同期関係を本来持たないファイルと一緒に自動再生 制御ファイルを構成しても、 ファイル間の時間的位置関係が不明瞭になること はない。
なお、 "CMP SRC"で指定されるファイルを 1つのグループ内に複数個、 置いても問題がないことは本発明の実施の形態 3からも明らかである。
以上のようにファイルの作成方法を定義することで、 音声ファイルもしくは 画像 Z音声多重ファイルの音声部分同士の時間的な位置関係を明示するための 情報を自動再生制御ファイルに追加して記載する必要がなく、 簡単な自動再生 制御ファイルの記述により、 ファイル間の時間的な位置関係を明瞭に指定でき る。 そして、 このことにより自動で画像及び音声を再生する機器の、 自動再生 制御ファイル解析のための負担を大きくすることもなく、 ユーザーが自動再生 制御ファイルを作成する負担も大きくならない。
なお、 図 1 5に示したような同期関係で画像と音声を再生する場合の自動再 生制御ファイルの例としては、 図 1 7に示すような例が考えられる。 図 1 7に 示すように、 画像 音声多重ファイル Bの再生を示す部分を、 GID= 0 0 2と して、
他のファイルを指定する GIDと分離すれば、 各ファイル間の時間的位置関係 が明
確に規定できることは、 これまでの説明で明らかである。
なお、 ユーザーが誤って文字列" CMP—SRC"で指定されるファイルと、 文 字列" IMG— SRC"及び" SND_SRC"で指定されるファイルが同一のグループ に混在するような自動再生制御ファイルを作成する場合も考えられるが、 この ような場合には表示手段 1 1 2上に操作の誤りを示すエラーメッセージなどを 表示して、 ユーザーが正しく自動再生制御ファイルを作成できるように導くこ とも考えられる。
(実施の形態 5 )
本発明の実施の形態 1から 4においては、 自動再生制御ファイル 1 0 5内に 複数のファイルからなるグループを記載することで、 画像ファイル、 音声ファ ィル、 画像 音声多重フアイルの 3種類のフアイルを組み合わせて画像と音声 を同期させて再生する方法に関して説明した。 次に、 自動再生制御ファイル 1 0 5に記載されたグループを並べ替えて、 再生を行う例について説明する。 本実施の形態 5で説明する画像及び音声の再生装置の構成は、 図 1に示した ブロック図と同様であるので、 説明は省略する。 図 1 8は、 本発明の実施の形 態 5で説明する画像及び音声の再生装置の操作面の配置図である。 図 2に示し た配置図と図 1 8に示した配置図の差異は、 図 1 8においてグループ再生モー ド選択キー 1 8 0 1とグループ編集終了キー 1 8 0 2を新規に設けた点のみで ある。 なお、 表示手段 1 1 2、 スピーカ一 1 1 3も図 2と同様である。
キ一2 0 1から 2 0 9は、 図 2に示した画像及び音声の再生装置と同様の機 能であるため、 説明を省略する。 グループ再生モード選択キ一 1 8 0 1とダル ープ編集終了キー 1 8 0 2の主な機能は以下の通りである。
グループ再生モード選択キー 1 8 0 1が押下されると、 記憶手段 1 0 1上の 自動再生制御ファイル 1 0 5に記載されたグループごとに画像及び音声を再生 するモードとなり、 C P U 1 1 0は、 自動再生制御ファイル 1 0 5の記載に従 つて、 読み出し手段 1 0 6を制御して記憶手段 1 0 1に記録されている画像フ アイル、 音声ファイル、 画像 音声多重ファイルを読み出して、 グループ単位 で画像と音声の再生を行う。 グループ編集終了キー 1 8 0 2は、 グループの並 ベ替えを終了するキーである。
以上のように構成された本発明の実施の形態 5に関し、 図 1 9の自動再生制 御ファイルの内容を示す図も用いてその動作を説明する。
例えば、 記憶手段 1 0 1に、 図 3に示したファイルと、 本発明の実施の形態 4において説明に用いた、 図 1 2に示したような内容の自動再生制御ファイル "AUTOPLY4"が記憶されているとする。 ここで、 自動再生制御ファイル
"AUTOPLY4"に記載されている、 グループ I D番号が 0 0 1のグループ （画 像ファイル Bと音声ファイル Aからなるグループ） と、 グループ I D番号が 0 0 3のグループ （画像ファイル Cと画像 音声多重ファイル Aの音声部分から なるグループ） の再生順序を逆転して再生したい場合を考える。 この場合、 次 のような手順により、 まずは新規の自動再生制御ファイルを生成する。
最初にユーザーは、 本発明の実施の形態 1と同様に新規再生制御ファイル作 成キ一 2 0 8を押下する。 これにより記憶手段 1 0 1上に例えば
"AUTOPLY5"というフアイル名のフアイルが作成される。
次にユーザーは、 自動再生するグループを選択するためにグループ再生モー ド選択キー 1 8 0 1を押下して、 自動再生制御ファイルに記載されているダル ープ毎に画像及び音声を再生する。 この際に、 例えば記憶手段 1 0 1上に複数 の自動再生制御ファイルが記憶されている場合も考えられるが、 本発明の実施 の形態 5において、 グループ再生モード選択キー 1 8 0 1の押下後に参照され る自動再生制御ファイルは、 上記の" AUTOPLY4"とし、 グループ再生モード 選択キー 1 8 0 1の押下によつで' AUTOPLY4"の記載に基づき、 グループ化 された画像と音声の再生が行われるものとする。 グループ再生モード選択キー 1 8 0 1の押下後、 表示手段 1 1 2及びスピーカー 1 1 3で、 画像ファイル B と音声ファイル Aからなるグループが再生され、 送りキー 2 0 4もしくは戻し キ一2 0 5により再生対象を変える。 これにより画像 Z音声多重ファイル Bの 画像と音声からなるグループ、 画像フアイル Cと画像 Z音声多重ファイル Aの 音声部分からなるグループが再生される。
そしてユーザ一が画像ファイル Cと画像ノ音声多重ファイル Aの音声部分を 初めに再生し、 次に画像 音声多重ファイル Bの画像と音声を再生し、 最後に 画像ファイル Bと音声ファイル Aを再生したい場合を考える。 この場合、 ユー ザ一は送りキー 2 0 4もしくは戻しキ一 2 0 5を操作して最初に再生したい画 像ファイル Cと画像 Z音声多重フアイル Aの音声部分からなるグループをまず 再生する。 そして決定キー 2 0 6を押下する。 C P U 1 1 0は決定キー 2 0 6 の押下により、 再生したグループのグループ I D番号と、 グループ内に記載さ れている文字列とファイル名を内部の一時メモリに記憶する。 つまり、 図 1 2 の 6行目から 8行目までの記載をそのまま一時メモリに記憶する。
次に、 2番目に再生したいグループ、 つまり画像 音声多重ファイル Bの画 像と音声からなるグループを上記と同じ手順で再生し、 決定キー 2 0 6の押下 により、 再生したグループのグループ I D番号と、 グループ内に記載されてい る文字列とファイル名を内部の一時メモリに追加して記憶する。 つまり、 図 1 2の 4行目から 5行目までの記載をそのまま一時メモリに追記憶する。 そして 最後に再生したいグループ、 つまり画像ファイル Bと音声ファイル Aからなる グループも上記と同じ手順で再生し、 決定キー 2 0 6の押下により、 再生した グループのグループ I D番号と、 グループ内に記載されている文字列とフアイ ル名を内部の一時メモリに追加して記憶する。 つまり、 図 1 2の 1行目から 3 行目までの記載をそのまま一時メモリに追記憶する。
この状態で次にグループ編集終了キー 1 8 0 2を押下すると C P U 1 1 0は、 書き込み手段 1 0 7を制御して記憶手段 1 0 1上の自動再生制御ファイル "AUTOPLY5"に C P U 1 1 0の一時メモリに記憶されていた内容を書き込む。 このとき、 グループ I D番号 （GID) は、 行数の若い方から順に、 新たに付与 しなおす。
例えば、 最初のグループ I D番号を 0 0 1、 2番目のグループ I D番号を 0 0 2、 最後のグループ I D番号を 0 0 3とする。 図 1 9に、 書き込まれた自 動再生制御ファイル" AUTOPLY5"の内容を示す。 図 1 9に示す'' GIひ'はダル —プの I D番号であり、 図 1 9の例では、 図 1 2に示したグループ化された 3 つのグループが、 その順番を変え、 更に GIDを新規に付与しなおした内容と なっている。
以上が自動再生制御ファイル" AUTOPLY5"の生成手順である。 このように 生成した自動再生制御ファイル" AUTOPLY5"を用いれば、 本発明の実施の形 態 4で示したように、 画像と音声の再生開始がグループ毎に同期された状態で 再生が行われる。 この際に、 自動再生制御ファイル" AUTOPLY5"を用いた再 生では、 本発明の実施の形態 4で示した自動再生制御フアイル" AUTOPLY4" の場合とは異なる再生順序で画像と音声を再生することができる。 自動再生制 御ファイル" AUTOPLY5"を用いた画像と音声の再生の様子を模式的に表すと 図 2 0のようになる。
以上のように、 本発明の実施の形態 5によれば、 画像ファイル、 音声フアイ ル、 画像/音声多重ファイルの 3種類のファイルを組み合わせて画像と音声を 自動で再生する場合に、 自動再生制御ファイル 1 0 5に記載されたグループを 自由に並べ替えて、 再生を行うことができる。
なお、 本発明の実施の形態 5において、 グループ再生モード選択キー 1 8 0 1の押下後に参照される自動再生制御ファイルは、 上記の" AUTOPLY4"とし たがこれに限るものではなく、 例えばメモリ 1 0 1上に複数の自動再生制御フ アイルが存在し、 ユーザーはそのうちから任意に自動再生に使用する自動再生 制御ファイルを選択することができる構成としても構わない。 その場合、 複数 の自動再生制御ファイルに記載されているグループを並び替えて新規の自動再 生制御ファイルを生成することも考えられる。 例えば、 グループ再生モード選 択キー 1 8 0 1の押下後に、 再生時に参照する自動再生制御ファイルを複数個 選択する機能を追加し、 これら複数の自動再生制御ファイルに記載されている グループ毎に画像及び音声をこれまでに説明したような手順でキーを操作して 再生し、 自動再生したいものを決定キー 2 0 6の押下により選択し、 新規の自 動再生制御ファイル （例えば、 "AUTOPLY5-1"とする） を編集すればよい。 一例として、 これまでの説明で使用した自動再生制御フアイル'' AUTOPLY2" と" AUTOPLY5"に記載されたグループを、 例えば、 図 7に示した
"AUTOPLY2"に記載の画像ファイル Aと音声ファイル Bからなるグループと、 図 1 9に示した" AUTOPLY5"に記載の画像ファイル Cと画像 Z音声多重ファ ィル Aの音声部分からなるグループを、 新たに自動再生制御ファイル
"AUTOPLY5-1"に編集し、 これにより画像と音声を再生した場合の様子を図 2 1に示す。 図 2 1に示すように 2つの自動再生制御ファイルを編集して、 新 たな自動再生制御ファイルを生成することができる。
(実施の形態 6 )
これまで説明した画像及び音声の再生装置は、 自動再生制御ファイルの内容 に従い、 画像と音声の再生が可能であるが、 このような自動再生機能を有さな い機器では、 当然、 このような画像と音声の再生は実行できない。 そこで、 自 動再生する画像と音声を別の汎用性のあるフォーマツ卜に変換すれば、 これを 他の機器において再生することは可能である。 そこで本発明の実施の形態 6で は、 自動再生制御ファイル 1 0 5の記述に従って画像と音声を再生した結果と 同等の再生結果が得られるデ一夕ファイルを新たに作成する構成に関し説明す る。
図 2 2は本発明の実施の形態 6における画像及び音声の再生装置のプロック 図である。 同図において、 符号 1 0 1から 1 1 3の部分は、 図 1を用いて説明 した本発明の実施の形態 1と同様であるため説明は省略し、 図 1と異なる部分 のみ以下に説明する。
図 2 2において、 フォーマツト変換手段 2 2 0 1は記憶手段 1 0 1から読み 出された画像ファイル 1 0 2、 音声ファイル 1 0 3、 画像ノ音声多重ファイル 1 0 4のフォーマットを変換する手段である。 記録手段 2 2 0 2は、 フォーマ ット変換手段 2 2 0 1によりフォーマツトを変換されたファイルを記録する手 段であり、 ハードディスク装置のような機器に固定の手段でも、 フラッシュメ モリカードのような取り外し可能な手段でも構わない。
以上のように構成された本発明の実施の形態 6に関し、 その動作を説明する。 例えば、 記憶手段 1 0 1に、 図 3に示したファイルと、 本発明の実施の形 態 4において説明に用いた、 図 1 2に示したような内容の自動再生制御フアイ ル" AUTOPLY4"が記憶されているとする。 自動再生制御ファイル
"AUTOPLY4"の記載に従って再生される画像と音声を別フォーマツ卜に変換 して保存する場合、 C P U 1 1 0は、 記憶手段 1 0 1から必要な画像ファイル、 音声ファイル、 画像 Z音声多重ファイルを読み出し、 フォーマット変換手段 2 2 0 1を制御して、 これらのファイルを自動再生制御ファイルの記載通りの画 像と音声の同期関係が保たれるように、 別の画像データと音声データからなる フォーマットのデ一夕に変換する。 変換後のフォーマットとしては例えば、 画 像と音声が自動再生の対象であるため、 記憶手段 1 0 1から読み出した各種フ アイルを 1つの画像 音声多重ファイルのフォーマツ卜にまとめる方法が考え られる。 このようにすれば、 フォーマツト変換手段 2 2 0 1により作成された 画像 Z音声多重ファイルは、 画像 音声多重ファイルを再生できる機器におい ては再生が可能である。
以上のように、 本発明の実施の形態 6によれば、 本発明の実施の形態 1か ら 5において説明した画像及び音声の再生装置により再生される画像と音声が、 自動再生制御ファイルに基づいて自動再生を行う機能を持たない別の機器でも 同じように再生することが可能である。
なお、 図 2 2に示した構成では、 記憶手段 1 0 1から読み出した各種フアイ ルをフォーマツト変換手段 2 2 0 1によりフォーマツト変換する構成としたが、 他にも図 2 3に示すように、 デコーダ 1 0 8により復号化された画像信号と音 声信号を再度、 エンコーダ 2 3 0 1により符号化して記録手段 2 3 0 2に記録 する方法も考えられる。 この場合でも、 本発明の実施の形態 1から 5において 説明した画像及び音声の再生装置により再生される画像と音声を、 自動再生制 御ファイルに基づいて自動再生を行う機能を持たない別の機器においても同じ ように再生することが可能となる。
なお、 本発明の実施の形態 6において、 フォーマット変換手段 2 2 0 1によ る変換後のファイルフォーマツトは、 いかなるフォーマツトでも本発明が有効 であることは明らかである。 また、 上記において、 変換後のファイルフォーマ ットとして、 画像と音声が 1つのファイル形式内に多重して格納される画像/ 音声多重ファイルとするように説明したが、 これに限るものではない。 例えば、 画像と音声を再生する機器によっては、 独立した画像ファイルと音声ファイル を 1つのペアと考えて画像と音声を同時に再生するような機器も考えられるた め、 このような機器での再生を考慮すると、 画像は画像データだけを 1つのフ アイルにまとめ、 音声は音声データだけを 1つのファイルにまとめ、 これら画 像と音声がそれぞれまとめられた画像ファイルと音声ファイルのペアをフォー マット変換手段 2 2 0 1で生成する構成も考えられる。 また、 必ずしも画像と 音声に関するファイルの双方をフォーマツト変換手段 2 2 0 1にて作成する必 要はなく、 必要に応じては画像、 音声の片方だけを記録したファイルを作成し てもよい。
同様に、 エンコーダ 2 3 0 1による符号化がいかなる方式でも本発明が有効 であることは明らかである。 更に、 エンコーダ 2 3 0 1により符号化される信 号は画像信号と音声信号のうち、 どちらか一方でも構わない。
また、 本発明の実施の形態 6において、 記録手段 2 2 0 2及び 2 3 0 2に記 録される情報は、 デジタル化された情報でもアナログ信号でも、 どちらでも構 わない。 更に、 記録手段 2 2 0 2及び 2 3 0 2は、 ハードディスクのようなデ イスク装置でも、 半導体メモリでも、 磁気テープでも構わない。
また、 本発明の実施の形態 6において、 フォーマット変換手段 2 2 0 1及び エンコーダ 2 3 0 1によりフォーマット変換もしくは符号化された情報を記憶 手段 1 0 1に記憶させても構わない。 この場合、 同一の機器で 2つの記録手段 を有する必要がなく、 機器の小型化や省電力化などが図れる。 (実施の形態 7 )
本発明の実施の形態 1から 4においては、 自動再生制御ファイル 1 0 5内に 複数のファイルからなるグループを記載することで、 画像ファイル、 音声ファ ィル、 画像 Z音声多重フアイルの 3種類のファィルを組み合わせて画像と音声 を同期させて再生する方法に関して説明した。 次に、 自動再生制御ファイル 1 0 5の記載に従って画像及び音声を再生する際に、 これらとは別の情報を付加 して再生を行う例について説明する。
図 2 4は、 本発明の実施の形態 7で説明する画像及び音声の再生装置の構成 を示すブロック図である。 図 1に示した本発明の実施の形態 1から 4のブロッ ク図と図 2 4に示したブロック図の差異は、 図 2 4においては、 記憶手段 1 0 1に付加情報ファイル 2 4 0 1を記憶させることとした点と、 デコード Z合成 手段 2 4 0 2を新規に設けた点である。
図 2 4中の符号 1 0 1から 1 1 3に示す部分は、 図 1に示した画像及び音声 の再生装置と同様であるため説明を省略し、 図 1の構成と異なる部分のみ説明 する。
付加情報ファイル 2 4 0 1は、 画像ファイル 1 0 2、 音声ファイル 1 0 3、 画像/音声多重ファイル 1 0 4に付加される合成情報を格納したファイルであ り、 例えば、 画像に重ねて表示する枠画像やタイトル画像、 もしくは文字コー ドで示される撮影日時、 撮影場所、 ファイル名、 撮影者の氏名、 連絡先、 画像 に対するコメントなどのテキスト、 もしくは撮影条件、 撮影状態を示す数値デ 一夕や記号、 また、 音声に重ねて再生する特殊な効果音などが考えられる。 デ コードノ合成手段 2 4 0 2は、 記憶手段 1 0 1から読み出された画像ファイル 1 0 2、 音声ファイル 1 0 3、 画像/音声多重ファイル 1 0 4と付加情報ファ ィル 2 4 0 1とが合成された信号を得るための手段である。 但し、 図 2 4にお いては簡略化のために付加情報ファイル 2 4 0 1を 1つしか図示していないが、 これに限るものではなく、 現実にはファイルが複数ずつ存在する場合もある。 図 2 5は、 デコード Z合成手段 2 4 0 2の構成を示すブロック図である。 図 2 5において、 デコーダ 2 5 0 1は、 図 1に示したデコーダ 1 0 8と同様の画 像ファイル、 音声ファイル、 画像/音声多重ファイルを復号化する手段である。 また、 デコーダ 2 5 0 2も同様の手段であるが、 これは付加情報ファイル 2 4 0 1を復号化するために設けられている。 合成手段 2 5 0 3は、 デコーダ 2 5 0 1及び 2 5 0 2で復号化された信号同士を重ね合わせる等の合成処理を施し、 出力する手段である。
図 2 6は、 本発明の実施の形態 7で説明する画像及び音声の再生装置の操作 面の配置図である。 図 2に示した配置図と図 2 6に示した配置図の差異は、 図 2 6において付加情報再生モード選択キー 2 6 0 1を新規に設けた点である。 キ一2 0 1から 2 0 9は図 2に示した画像及び音声の再生装置と同様のキー であるため、 説明を省略する。 付加情報再生モード選択キー 2 6 0 1の主な機 能は以下の通りである。 なお、 図 2 6の表示手段 1 1 2、 スピーカ一 1 1 3も 図 2と同様のものである。
付加情報再生モード選択キー 2 6 0 1が押下されると、 C P U 1 1 0は読み 出し手段 1 0 6を制御して記憶手段 1 0 1に記録されている付加情報ファイル 2 4 0 1のうちから 1つを読み出し、 デコーダ 2 4 0 2による復号化の後、 付 加情報ファイルの内容が表示手段 1 1 2もしくはスピーカ 1 1 3で再生される。 このとき、 デコーダ 2 5 0 2で復号化された信号は、 合成手段 2 5 0 3を経て 出力されるが、 合成手段 2 5 0 3では何の合成処理も施されずに、 デコーダ 2 5 0 2の出力がそのまま出力されるものとする。
図 2 7は記憶手段 1 0 1に記憶されている付加情報ファイルを示す模式図で ある。 図 2 7において、 枠画像ファイル A、 B及びテキストファイル A、 Bは 画像ファイルと合成されることで、 画像ファイルを装飾したり、 文字による情 報を付加するための付加情報ファイルである。 効果音ファイル A、 Bは音声フ アイルに合成されることで、 再生音声に特殊な効果音を重畳させるための付加 情報ファイルである。 以下、 図 2 7に示した 6個の付加情報ファイルが、 図 3 に示した 8個の画像ファイル、 音声ファイル、 画像 音声多重ファイルと共に、 記憶手段 1 0 1上に記録されているものとして説明を行う。
以上のように構成された本発明の実施の形態 7に関し、 本発明の実施の形態 1と異なる部分を中心にその動作を説明する。
記憶手段 1 0 1上に記録されている付加情報ファイル 2 4 0 1を、 画像ファ ィル 1 0 2、 音声ファイル 1 0 3、 画像 Z音声多重ファイル 1 0 4に付加して 再生する場合、 次のような手順により図 2 8に示す自動再生制御ファイルを生 成する。
まず、 ユーザーが図 3に示した 8個のファイルから、 本発明の実施の形態 1 と同様の組み合わせで画像と音声を再生し、 且つ、 画像ファイル Bに枠画像フ アイル Bを、 画像 Z音声多重ファイル Aの画像部分にテキストファイル Aを、 そして音声ファイル Aには効果音ファイル Bを合成させて再生したいとする。 最初にユーザ一は、 新規再生制御ファイル作成キー 2 0 8を押下する。 この キー入力を受けて新規に自動再生制御ファイルの編集が開始され、 C P U 1 1 0は、 書き込み手段 1 0 7を制御し記憶手段 1 0 1上に例えば" AUTOPLY6" というファイル名のファイルを作成する。
次にユーザーは、 本発明の実施の形態 1と同様に、 自動再生する画像を選択 するために画像ファイル再生モード選択キー 2 0 1を押下して、 記憶手段 1 0 1上の画像ファイルを表示手段 1 1 2に再生表示させ、 送りキー 2 0 4もしく は戻しキー 2 0 5を操作して最初に再生したい画像ファイル Bを表示手段 1 1 2に表示させる。 そして決定キー 2 0 6を押下する。 決定キー 2 0 6の押下に より、 C P U 1 1 0はその内部の一時メモリに' 'IMG— SRC = "という文字列に 続けて、 画像ファイル Bのファイル名を記録する。 次に画像ファイル Bと合成 する付加情報ファイルを選択するために、 付加情報再生モード選択キー 2 6 0 1を押下して、 記憶手段 1 0 1上の付加情報ファイル 2 4 0 1を再生する。 こ のとき、 再生対象の付加情報ファイルが、 枠画像ファイルなら表示手段 1 1 2 上にその画像を表示し、 テキストファイルならば表示手段 1 1 2上にファイル に含まれるテキストを表示し、 効果音ファイルの場合は、 その効果音をスピー 力 1 1 3で再生する。 そうして、 画像ファイルを選択したのと同じ要領で重畳 したい付加情報ファイルを再生し、 決定キー 2 0 6の押下により、 この付加情 報ファイル名を C P U 1 1 0の一時メモリに記憶させる。 このとき、 これが付 加情報ファイルであることを明示するための" ADD SRC"という文字列に続 けて、 枠画像ファイル Bのファイル名が記憶される。
以上に説明したような手順で同様に、 画像 Z音声多重ファィル Aの画像部分 の選択後に、 付加情報ファイルとしてテキストファイル Aを選択し、 そして音 声フアイル Aの選択後に付加情報ファイルとして効果音ファイル Bを選択し、 ついで音声情報として画像 音声多重ファイル Bのファイル名を選択する、 と いうように、 再生したい画像ファイル、 音声ファイル、 画像 Z音声多重フアイ ルのファイル名と付加情報ファイルのファイル名を上記に説明した文字列と共 に C P U 1 1 0の一時メモリに記憶させる。
そしてこの状態でグループ化キー 2 0 7を押下すると C P U 1 1 0は、 先ほ ど選択した画像ファイル Bと画像 Z音声多重ファイル Aの画像部分、 及び音声 ファイル Aと画像 音声多重ファイル Bの音声部分、 及びそれぞれの付加情報 である枠画像ファイル B、 テキストファイル A、 効果音ファイル Bを 1つのグ ループとして認識してグループに固有の I D番号 （例えば 0 0 1 ) を付与し、 書き込み手段 1 0 7を制御して記憶手段 1 0 1上の自動再生制御ファイル "AUTOPLY6"に、 グループ固有の I D番号と C P U 1 1 0の一時メモリに記 憶されていた内容を記憶した順番で書き込む。 図 2 8に、 書き込まれた自動再 生制御ファイル" AUTOPLY6"の内容を示す。
"IMG_SRC" "SND— SRC"で示されるファイルのうち、 行数の若い方の ファイルが時間的に先に再生されるファイルとし、 "ADD_SRC"で指定され るファイルは、 行数の若い方から数えて直前の行に記載されたファイルに合成 される付加情報ファイルとする。
以上が自動再生制御ファイル 1 0 5の生成手順である。 次に、 図 2 8に示し た自動再生制御ファイル 1 0 5に基づいたファイルの再生について説明する。 ユーザーが自動再生キー 2 0 9を押下すると、 C P U 1 1 0は読み出し手段 1 0 6を制御し、 自動再生制御ファイル 1 0 5を読み出し、 その内容を取得す る。 C P U 1 1 0は自動再生制御ファイルの第 1行目から GID をサーチし、 初めの" GID"から次の" GID"の直前までを 1つのグループと認識する。 なお、 自動再生制御ファイル 1 0 5中の一番最後のグループは、 一番最後の GIDか らファイルの最終行までとする。 自動再生制御ファイルには、 再生する順番にファイル名が記載されている。 また、 "ADD— SRC"で指定されるファイルは付加情報ファイルであるため、 "ADD— SRC"が記載されている直前の行に記載のファイルを再生する際に、 この付加情報ファイルを合成して再生する。 具体的には、 C P U 1 1 0は合成 すべきファイルを示す情報を同期制御手段 1 0 9を介して合成手段 2 5 0 3に 送る。 合成手段 2 5 0 3は、 デコーダ 2 5 0 1と 2 5 0 2から送られてきた信 号のうち、 合成すべきものを同期制御手段 1 0 9を介しての C P U 1 1 0の指 示に基づき判別し、 合成処理を実行する。
その結果、 画像ファイル Bの再生時には枠画像ファイル Bが合成され、 画像 音声多重ファイル Aの画像部分の再生時にはテキストファイル Aが合成され、 また音声に関しては、 音声ファイル Aの再生時には効果音ファイル Bが合成さ れる。 画像 音声多重ファイル Bの音声部分に対しては、 付加情報ファイルの 合成は指示されていないので、 そのまま画像 Z音声多重ファイル Bの音声部分 が再生される。
これら一連のファイルの再生の流れをフローチャートで表すと、 図 2 9のよ うになる。 図 2 9においてステップ 5 0 1から 5 0 5は図 5と同様であるため 説明は省略する。 ステップ 2 9 0 1は、 検出したグループ毎に付加情報フアイ ルを示す文字列" ADD_SRC"で指定されたフアイル名を検出するステツプで ある。 そしてステップ 2 9 0 2において C P U 1 1 0は、 記憶手段 1 0 1から 指定された各ファイルと付加情報ファイルを読み出し、 デコーダ 2 5 0 1、 2 5 0 2による復号化と、 合成手段 2 5 0 3による画像もしくは音声と、 付加情 報ファイルとの合成を制御する。 .
また、 このような画像と音声の再生の様子を模式的にあらわすと図 3 0のよ うになる。 すなわち画像は枠画 Bが合成された像画像ファイル B、 テキストフ アイル Aが合成された画像 音声多重ファイル Aの画像部分の順序で再生され、 画像アイル Bの再生開始に同期して効果音ファイルが合成された音声ファイル A、 画像ノ音声多重ファイル Aの画像部分に同期して画像ノ音声多重ファイル Bの音声部分の順で再生される。 このようにユーザーは、 自らが指定した通り に、 付加情報ファイルを合成した形で画像と音声を再生することができる。 以上のように、 本発明の実施の形態 7によれば、 自動再生制御ファイル 1 0 5の記載に従い、 画像ファイル、 音声ファイル、 画像 音声多重ファイルの 3 種類のファイルを組み合わせて画像と音声を同期させて再生する際に、 付加情 報ファイルの合成を指示することができ、 これにより画像と音声を付加情報フ アイルと合成した形で自由に再生することが可能である。
なお、 本発明の実施の形態 7において、 図 2 5に示したデコーダ 2 5 0 1及 び 2 5 0 2は必ずしも 2つ必要ではなく、 . 1つのデコーダを共用する構成でも 構わない。
また、 本発明の実施の形態 7において、 付加情報ファイルの例として、 枠画 像ファイル、 テキストファイル、 効果音ファイルをあげたが、 再生される画像 及び音声に付加される情報はこれに限るものではない。
'また、 本発明の実施の形態 7において、 付加情報ファイルを指定する文字列 として、 "ADD— SRC"を使用したが、 これらはあくまでも一例であり、 これ に限るものではない。
(実施の形態 8 )
本発明の実施の形態 1から 4においては、 自動再生制御ファイル 1 0 5内に 複数のファイルからなるグループを記載することで、 画像ファイル、 音声ファ ィル、 画像 音声多重ファイルの 3種類のフアイルを組み合わせて画像と音声 を同期させて再生する方法に関して説明した。 これらにおいては、 画像及び音 声の再生時間に関しては特に言及しなかったため、 次に、 自動再生制御フアイ ル 1 0 5の記載に従って画像及び音声を再生する際に、 各画像と音声の再生時 間を指定して再生を行う例について説明する。
図 3 1は、 本発明の実施の形態 8で説明する画像及び音声の再生装置の操作 面の配置図である。 図 2に示した配置図と図 3 1に示した配置図の差異は、 図 3 1において再生時間設定キー 3 1 0 1と数値入力用ダイヤル 3 1 0 2を新規 に設けた点である。
キ一2 0 1から 2 0 9は図 2に示した画像及び音声の再生装置と同様のキー であるため、 説明を省略する。 再生時間設定キー 3 1 0 1と数値入力用ダイヤ ル 3 1 0 2の主な機能は以下の通りである。
再生時間設定キー 3 1 0 1が押下されると、 選択したファイルの再生時間設 定を行うモードに入る。 数値入力用ダイヤル 3 1 0 2を回転することで、 任意 の数値を入力する。
本発明の実施の形態 8で説明する画像及び音声の再生装置の構成は、 図 1に 示したブロック図と同様であるので説明は省略する。
以上のように構成された本発明の実施の形態 8に関し、 本発明の実施の形態 1と異なる部分を中心にその動作を説明する。
記憶手段 1 0 1上に記録されている画像ファイル 1 0 2、 音声ファイル 1 0 3、 画像 Z音声多重ファイル 1 0 4を、 その再生時間を指定して再生する場合、 次のような手順により自動再生制御ファイルを生成する。
まず、 ユーザーが図 3に示した 8個のファイルから、 本発明の実施の形態 1 と同様の組み合わせで画像と音声を再生し、 且つ、 それぞれの再生時間を指定 したいとする。
最初にユーザーは、 新規再生制御ファイル作成キー 2 0 8を押下する。 この キー入力を受けて新規に図 3 2に示す自動再生制御ファイルの編集が開始され、 C P U 1 1 0は、 書き込み手段 1 0 7を制御し記憶手段 1 0 1上に例えば "AUTOPLY7"というファイル名のフアイルを作成する。
次にユーザーは、 本発明の実施の形態 1と同様に、 自動再生する画像を選択 するために画像ファイル再生モード選択キー 2 0 1を押下して、 記憶手段 1 0 1上の画像ファイルを表示手段 1 1 2に再生表示させ、 送りキー 2 0 4もしく は戻しキー 2 0 5を操作して最初に再生したい画像ファイル Bを表示手段 1 1 2に表示させる。 そして決定キー 2 0 6を押下する。 決定キー 2 0 6の押下に より、 C P U l 1 0はその内部の一時メモリに' 'IMG— SRC = "という文字列に 続けて、 画像ファイル Bのファイル名を記録する。 次に、 再生時間を指定する ために、 再生時間設定キ一 3 1 0 1を押下すると、 表示手段 1 1 2に再生時間 の候補値が例えば秒単位で表示される。 この候補値とは、 例えば機器に予め設 定されている初期値でも良い。 そしてユーザーが数値入力用ダイヤル 3 1 0 2 を回転させると、 この回転に応じて、 上記の再生時間の候補値が変化し、 再生 時間が所望の値となったときに数値入力用ダイヤルの回転を停止する。 例えば、 画像ファイル Bを 1 0秒間再生したい場合は、 表示手段 1 1 2に表示される再 生時間が 1 0秒となるように数値入力用ダイヤル 3 1 0 2を回転させればよい。 次に、 決定キー 2 0 6を押下すると、 この表示手段 1 1 2に表示された再生時 間が C P U 1 1 0の一時メモリに記憶させる。 このとき、 これが再生時間を示 すことを明示するための "PLY— DUR"という文字列に続けて、 再生時間が秒 単位で記憶される。
以上に説明したような手順で同様に、 画像 Z音声多重ファイル Aの画像部分 の選択後に、 再生時間 1 5秒を設定し、 そして音声ファイル Aの選択後にも再 生時間 2 0秒を設定し、 最後に画像ノ音声多重ファイル Bの音声部分の再生時 間 5秒を設定する。
そして再生するファイルの選択と、 再生時間の設定が完了してから、 グルー プ化キー 2 0 7を押下すると C P U 1 1 0は、 選択した 2つの画像ファイル B と画像 音声多重フアイル A、 及び音声ファイル Aと画像 Z音声多重ファイル Bの音声部分を 1つのグループとして認識してグループに固有の I D番号 （例 えば 0 0 1 ) を付与し、 書き込み手段 1 0 7を制御して記憶手段 1 0 1上の自 動再生制御ファイル" AUTOPLY7"に、 グループ固有の I D番号と C P U 1 1 0の一時メモリに記憶されていた内容を記憶した順番で書き込む。 図 3 2に、 書き込まれた自動再生制御ファイル" AUTOPLY7"の内容を示す。
"IMG— SRC"、 "SND— SRC"で示されるファイルのうち、 行数の若い方の ファイルが時間的に先に再生されるファイルとし、 "PLY_DUR"で指定され る数字は再生時間を秒単位で示したものである。 図 3 2の自動再生制御フアイ ル" AUTOPLY7"の例では、 画像ファイル Bの再生時間を 1 0秒、 画像 音声 多重ファイル Aの画像部分の再生時間を 1 5秒、 音声ファイル Aの再生時間を 2 0秒、 画像 音声多重ファイル Bの音声部分の再生時間を 5秒とした場合を 示す。 なお、 "PLY— DUR"で指定される再生時間は、 行数の若い方から数え て直前の行に記載されたファイルの再生時間とする。
以上が自動再生制御ファイル 1 0 5の生成手順である。 次に、 図 3 2に示し た自動再生制御ファイル 1 0 5に基づいたファイルの再生について説明する。 ユーザ—が自動再生キー 2 0 9を押下すると、 C P U 1 1 0は読み出し手段 1 0 6を制御し、 自動再生制御ファイル 1 0 5を読み出し、 その内容を取得す る。 C P U 1 1 0は自動再生制御ファイルの第 1行目から GID をサーチし、 初めの" GID"から次の" GID"の直前までを 1つのグループと認識する。 なお、 自動再生制御ファイル 1 0 5中の一番最後のグループは、 一番最後の GIDか らファイルの最終行までとする。
自動再生制御ファイルには、 再生する順番にファイル名が記載されている。 また、 "PLY— DUR"で指定される数値は秒単位の再生時間であるため、 "PLY —DUR"が記載されている直前の行に記載のファイルを再生する際に、 この再 生時間だけ再生を行う。 具体的には、 C P U 1 1 0は同期再生すべきファイル を示す情報と再生時間に関する情報を同期制御手段 1 0 9に送る。 同期制御手 段 1 0 9は、 再生される画像と音声の復号化の進埗をモニタし、 画像と音声が 指定された再生時間に相当するデータの復号化が完了したら、 デコーダ 1 0 8 での復号化を停止し、 次に復号化すべき画像と音声の復号化を開始させる。 こ のようにして画像と音声の再生時間を制御する。
その結果、 画像ファイル Bは 1 0秒間再生され、 続く画像 Z音声多重フアイ ル Aの画像部分は 1 5秒間再生される。 また、 画像ファイル Bの再生と同期し て音声ファイル Aの再生が開始され、 2 0秒間再生された後、 続く画像/音声 多重ファイル Bの音声部分が 5秒間再生されて、 一連の画像と音声の再生が終 了する。
これら一連のファイルの再生の流れをフローチャートで表すと、 図 3 3のよ うになる。 図 3 3においてステップ 5 0 1から 5 0 5は図 5と同様であるため 説明は省略する。 ステップ 3 3 0 1は、 検出したグループ毎に各ファイルの再 生時間を示す文字列' TLY_DUR"で指定された数値を検出するステップであ る。 そしてステップ 3 3 0 2において C P U 1 1 0は、 記憶手段 1 0 1から指 定された各ファイルを読み出し、 同期制御手段 1 0 9に同期再生すべきフアイ ルと再生時間を指示する。 同期制御手段 1 0 9は、 デコーダ 1 0 8での復号化 を制御し、 画像と音声の同期再生と、 再生時間の制御を行う。
また、 このような画像と音声の再生の様子を模式的に表すと図 3 4のように なり、 ユーザーは、 自らが指定した通りの時間だけ、 画像と音声を再生するこ とができる。
以上のように、 本発明の実施の形態 8によれば、 自動再生制御ファイル 1 0 5の記載に従い、 画像ファイル、 音声ファイル、 画像 Z音声多重ファイルの 3 種類のファイルを組み合わせて画像と音声を同期させて再生する際に、 各ファ ィルの再生時間を指定することができ、 これにより画像と音声を自由に指定し た時間だけ再生することが可能である。
なお、 本発明の実施の形態 8において、 再生時間の指定を、 各ファイルの再 生時間として説明したがこれに限るものではなく、 例えば、 一番最初に再生さ れるファイルの再生開始時刻を 0とし、 この再生開始時刻からの絶対時間でフ アイルの再生時間を設定する方法も考えられる。 例えば、 図 3 5に示すように、 自動再生する各ファイルの再生時間の総計を文字列" PLY— TTL"で指定し、 各 ファイルの再生開始時刻を、 "PLY— TIM"で指定するようにしても、 上記の説 明と同様に、 再生するフアイルの再生時間をフアイル毎に設定することは可能 である。 図 3 5の例では、 自動再生の総時間を 2 5秒と指定し、 一番最初に再 生される画像ファイル Bの再生開始時刻を" PLY_TIM"なる文字列で 0秒に指 定し、 次に再生される画像 音声多重ファイル Aの画像部分の再生開始時刻を "PLY— TIM"なる文字列で 1 0秒に指定すれば、 図 3 2及び図 3 4で説明した ことと同じように、 ファイルの再生が可能である。
また、 本発明の実施の形態 8において、 再生時間設定キー 3 1 0 1を押下し たときに表示手段 1 1 2に表示される再生時間の候補値を機器に予め設定され ている初期値として説明したがこれに限るものではなく、 例えば、 画像フアイ ル、 音声ファイル、 画像 音声多重ファイルの各ファイルに格納されている全 データを本来再生するのに必要な時間 （例えば 5秒分の動画が格納されている 画像ファイルの場合は 5秒。 1 0秒の音声データが格納されている音声フアイ ルの場合は 1 0秒） を、 各ファイル内のデータから判断し、 これを最初に表示 手段 1 1 2に表示する構成も考えられる。
また、 本発明の実施の形態 8において、 再生時間は秒単位で設定することと したがこれに限るものではなく、 端数を含め、 いかなる時間の単位でも本発明 は有効である。
また、 本発明の実施の形態 8において、 画像ファイル及び画像 音声多重フ アイルの画像部分は、 複数のコマからなる動画像でも、 1枚のコマからなる静 止画像のどちらの場合でも本発明は有効であり、 画像が静止画像の場合は、 指 定された時間だけ静止画像を表示し続けるような構成が考えられる。
また、 本発明の実施の形態 8において、 画像ファイル及び画像 Z音声多重フ アイルの画像部分が動画像の場合、 指定された時間だけファイルを再生する際 に、 その動画像の最初から再生する方法と、 ユーザーが任意に再生開始する場 所を設定する方法が考えられる。 ユーザーが任意に再生開始する場所を設定す る場合、 例えば動画像の再生開始場所を、 動画像の最初の部分からの時間で示 すこととし、 これを示す文字列として例えば' TLY_STR"を用意して、 自動再 生制御ファイル中に文字列" PLY— DUR"に続けて記載するなどの方法が考え られる。 図 3 2に示した自動再生制御ファイルをもとに、 一例をあげると、 画 像ファイル Bが 3 0秒の動画像であったとし、 この最初から 3秒後の位置から 1 0秒間、 画像ファイル Bを再生する場合、 自動再生制御ファイルの記載は図 3 6のようになる。 文字列" PLY— STR"は動画像の再生開始場所を示すものと して、 これで 「3」 を指定することで、 画像ファイル Bの再生開始場所を指定 することができる。 なお、 文字列" PLY_STR"では、 画像ファイルだけではな く、 画像 Z音声多重フアイルの画像部分や音声ファイルの再生開始位置を指定 しても構わない。 また文字列" PLY— STR"で再生開始場所が指定されていない 場合は、 例えば無条件に動画像の最初から再生するように決めればよい。 また、 本発明の実施の形態 8において、 再生対象のファイルが動画像の場合 に、 再生を指定された時間が、 画像ファイル、 画像 Z音声多重ファイルの各フ アイルに格納されている全画像データを本来再生するのに必要な時間よりも長 いような場合は、 指定された時間内での動画像の再生が終了後、 ブルーバック などの予め機器が用意した画像を表示するなどすればよい。 具体的には、 3秒 間の動画像に対し、 1 0秒間の再生が指示された場合などは、 初めの 3秒間は 画像を表示し、 残りの 7秒間はブルーバックを表示するなどである。 なお、 音 声に関しても同様に、 再生を指定された時間が、 音声ファイル、 画像 Z音声多 重ファイルの各ファイルに格納されている全音声データを本来再生するのに必 要な時間よりも長いような場合は、 指定された時間内での音声の再生が終了後、 予め機器が用意した音声を再生する、 もしくは無音とするなどすればよい。 また、 本発明の実施の形態 8において、 再生対象のファイルが動画像の場合 に、 再生を指定された時間が、 画像ファイル、 画像 音声多重ファイルの各フ アイルに格納されている全画像データを本来再生するのに必要な時間よりも長 いような場合は、 表示手段 1 1 2上にエラーメッセージなどを表示して、 ユー ザ一が全画像デ一夕を本来再生するのに必要な時間を設定するように導くこと も考えられる。
また、 本発明の実施の形態 8において、 再生時間等を指定する文字列として、 "PLY— DUR"、 "PLY— TTL"、 "PLY— TIM"、 "PLY— STR"を使用したが、 こ れらはあくまでも一例であり、 これに限るものではない。
なお、 本発明のすべての実施の形態において、 画像ファイル、 音声ファイル、 画像 Z音声多重ファイルの符号化方式、 ファイルフォーマツト等に関しては特 に詳細に規定していないが、 これらファイルがいかなる符号化方式により符号 化されたファイルであっても、 いかなるファイルフォーマツ卜のファイルであ つても本発明が有効であることは明らかである。 更に、 画像ファイル、 音声フ アイル、 画像 Z音声多重ファイルが情報圧縮されたファイルでも、 非圧縮のフ アイルであっても、 更に、 ヘッダーなどの付加情報を有するファイルであって も本発明が有効であることは明らかである。
また、 本発明のすべての実施の形態において、 ファイルを指定する文字列と して' 'IMG— SRC"、 "SND— SRC"、 "CMP_SRC"を使用したが、 これらはあ くまでも一例であり、 これに限るものではない。
また、 本発明のすべての実施の形態において、 デコーダ 1 0 8は、 デジタル 信号をアナログ信号に変換するデジタル—アナログコンバーターを含む構成も 考えられる。
また、 本発明のすべての実施の形態において、 操作キー 1 1 1のキー入力は、 図 2のキー 2 0 1から 2 0 8に示したような押下によりキー入力を行うものを 用いて説明したが、 これに限るものではなく、 液晶表示装置上に表示される夕 ッチパネルや、 メニュー表示から必要な操作を選択するような方法も考えられ る。
また、 本発明のすべての実施の形態において、 再生の際に使用される自動再 生制御ファイルは、 あたかも記憶 段 1 0 1上に 1つしか存在しないかのよう に説明したが、 これに限るものではなく、 例えば記憶手段 1 0 1上に複数の自 動再生制御フアイルが存在し、 ユーザーはそのうちから任意に自動再生に使用 する自動再生制御ファイルを選択することができる構成も考えられる。 この場 合、 例えば記憶手段 1 0 1上のすべての自動再生制御ファイルが表示手段 1 1 2上に表示され、 この中からユーザーがキー入力等で自由に自動再生制御ファ ィルを選択できるような方法が考えられるが、 もちろんこれに限るものではな い。
また、 本発明のすべての実施の形態において、 自動再生制御ファイルは記憶 手段 1 0 1上に記録するように説明したが、 これに限るものではなく、 例えば 記憶手段 1 0 1とは別の記憶手段に記憶することも考えられる。
また、 本発明のすべての実施の形態において、 自動再生制御ファイルの作成 時には、 画像や音声を再生するような構成を説明したが、 これに限るものでは なく、 例えば画像や音声を再生しなくても、 表示手段 1 1 2にそれらのフアイ ル名を表示し、 このファイル名から自動再生するファイルを選択する方法など も考えられる。
また、 本発明のすべての実施の形態において、 自動再生制御ファイルの作成 時には、 画像や音声を再生するような構成を説明したが、 画像に関してはその サムネイル画像を表示する構成も考えられる。 また、 音声に関してはその一部 を、 例えば冒頭部分のみを再生する構成も考えられる。
また、 本発明のすべての実施の形態において、 画像ファイル及び画像/音声 多重ファイルの画像部分のコマ数に関しては特に言及しなかったが、 これは 1 コマの静止画でも複数のコマからなる動画像でも構わない。
また、 本発明のすべての実施の形態において、 自動再生制御ファイルの作成 時には、 画像や音声を再生するような構成を説明したが、 画像が複数のコマか らなる動画像の場合は、 その一部の画像のみを表示する構成も考えられる。 また、 本発明のすべての実施の形態において、 少なくとも C P U 1 1 0によ る処理は、 ソフトウェアで実現可能であることは言うまでもなく、 そのソフト ウェアは、 予めメモリに記憶しておいても、 別途記録媒体から与えても構わな い ° 産業上の利用の可能性
以上のように本発明によれば、 画像信号を記録したデータファイル、 音声信 号を記録したデータファイル及び画像信号と音声信号を多重記録したデータフ アイルのような異なる形式のファイルを、 ユーザ一が自由に且つ簡単に組み合 わせて、 または画像や音声にいろいろな付加情報を加えたり、 再生順を変更す るなどの変更を加えて、 連続的に再生し、 その際に、 所定の画像と音声の再生 開始を同期させて実行することが可能な機器を実現することができる。

Claims

請 求 の 範 囲
1 . 画像信号を記録したデータ、 音声信号を記録したデータ、 及び画 像信号と音声信号を多重記録したデ一夕のうち少なくとも 1つと、
前記画像信号を記録したデータ、 前記音声信号を記録したデータ、 及び前 記画像信号と音声信号を多重記録したデータのうち少なくとも 1つまたはそれ らを任意に組み合わせたものの再生に関する情報を記載する再生情報データと をそれぞれ独立に保持する少なくとも 1つの記億手段を有することを特徴とす る画像及び音声の再生装置。
2 . 前記再生情報データには、 前記記憶手段に保持されているデータのうち、 再生対象であるデータを特定するための情報が記載されていることを特徴とす る請求の範囲 1項に記載の画像及び音声の再生装置。
3 . 前記再生情報デ一夕には、 前記記憶手段に保持されているデータを再生 する順番が記載されていることを特徴とする請求の範囲第 1項に記載の画像及 び音声の再生装置。
4 . 前記再生情報データには、 前記記憶手段に保持されているデータを再生 する時間を示す情報が記載されることを特徴とする請求の範囲第 1項に記載の 画像及び音声の再生装置。
5 . 前記再生情報データには、 前記記憶手段に保持されているデータを再生 する時刻を す情報が記載されることを特徴とする請求の範囲第 1項に記載の 画像及び音声の再生装置。
6 . 前記再生情報データにおいて、 画像信号と音声信号を多重記録したデー 夕を指定する場合には、 前記画像信号と音声信号を多重記録したデータの画像 信号部分と音声信号部分とをそれぞれ別個に再生対象として指定可能であるこ とを特徴とする請求の範囲第 1項または第 2項に記載の画像及び音声の再生装 置。
7 . 前記再生情報データには、 前記データの再生に関する情報が、 少なくと も 1つのグループごとにまとめられて記載され、 前記グループ内には、 再生対 象であるデータを特定するための情報が少なくとも 1つ記載されることを特徴 とする請求の範囲第 1項または第 2項に記載の画像及び音声の再生装置。
8 . 前記再生情報データには、 データの再生に関する情報が少なくとも 1つ のグループごとにまとめられて記載され、 前記グループ内には、 画像信号を記 録したデータまたは画像信号と音声信号を多重記録したデー夕の画像信号部分 のいずれかと、 音声信号を記録したデータまたは画像信号と音声信号を多重記 録したデータの音声信号部分のいずれかを特定するための情報が、 それぞれ 1 つずつ記載されることを特徴とする請求の範囲第 1項または第 2項に記載の画 像及び音声の再生装置。
9 . 前記再生情報データのグループにおいて、 画像信号と音声信号を多重記 録したデータを特定するための情報を記載する場合には、 同一のグループ内に 画像信号を記録したデータ、 画像信号と音声信号を多重記録したデ一夕の画像 信号部分、 音声信号を記録したデータ、 または画像信号と音声信号を多重記録 したデータの音声信号部分を特定するための情報を記載しないことを特徴とす る請求の範囲第 1項、 第 2項および第 7項のいずれか 1に記載の画像及び音声 の再生装置。
1 0 . グループを単位に再生情報デ一夕を編集することで、 新規の再生情報 データを生成することを特徵とする請求の範囲第 1項ないし第 9項のいずれか 1に記載の画像及び音声の再生装置。
1 1 . 前記再生情報データに従って再生される、 画像信号を記録したデータ、 音声信号を記録したデータ、 または画像信号と音声信号を多重記録したデータ のデ一夕フォーマツトを変換するフォーマツト変換手段を有することを特徴と する請求の範囲第 1項ないし第 1 0項のいずれか 1に記載の画像及び音声の再
1 2 . 前記再生情報データに従って再生された画像信号と音声信号とを符号 化するエンコーダ手段を有することを特徴とする請求の範囲第 1項ないし第 1 1項のいずれか 1に記載の画像及び音声の再生装置。
1 3 . 画像信号を記録したデータ、 音声信号を記録したデータ、 または画像 信号と音声信号を多重記録したデータの少なくとも 1つと合成される情報を格 納した合成情報デー夕を前記記憶手段に記憶し、 前記再生情報データには、 再生対象であるデータを特定するための情報と、 1つ以上の前記合成情報デ一夕を特定するための情報とが記載されることを特 徴とする請求の範囲第 1項ないし第 1 2項記載の画像及び音声の再生装置。
1 4 . 前記再生対象であるデータを特定するための情報とは、 再生対象であ るデータに与えられた名称であることを特徴とする請求の範囲第 1項、 第 2項、 第 6項ないし第 1 3項のいずれか 1に記載の画像及び音声の再生装置。
1 5 . 前記再生情報データに従って、 前記記憶手段に保持されたデータから 画像信号と音声信号との再生を行う再生手段を有することを特徴とする請求の 範囲第 1項ないし第 1 4項のいづれか 1に記載の画像及び音声の再生装置。
1 6 . 前記再生手段は、 データを複合化するデコーダか、 記憶手段からデー 夕を読み出す読み出し手段およびデ一夕を復号化するデコーダか、 の少なくと もいずれかであることを特徴とする請求の範囲第 1 5項に記載の画像及び音声 の再生装置。
1 7 . 前記合成情報ファイルは、 画像信号を記録したデータファイル、 音声 信号を記録したデータファイルまたは画像信号と音声信号を多重記録したデー 夕ファイルに含成される画像、 音声、 テキストのいずれかであることを特徴と する請求の範囲第 1 3項に記載の画像及び音声の再生装置。
1 8 . 画像信号を記録したデータ、 音声信号を記録したデータ、 及び画像信 号と音声信号を多重記録したデ一夕のうち少なくとも 1つと、
前記画像信号を記録したデータ、 前記音声信号を記録したデ一夕、 及び前 記画像信号と音声信号を多重記録したデータのうち少なくとも · 1つまたはそれ らを任意に組み合わせたものの再生に関する情報を記載する再生情報データと を、 それぞれ独立に少なくとも 1つの記億手段に保持することを特徴とする画 像及び音声の再生方法。
1 9 . 前記再生情報データには、 前記記憶手段に保持されているデータのう ち、 再生対象であるデータを特定するための情報が記載されていることを特徴 とする請求の範囲第 1 8項に記載の画像及び音声の再生方法。
2 0 . 前記再生情報データには、 前記記憶手段に保持されでいるデータを再 生する順番が記載されていることを特徴とする請求の範囲第 1 8項に記載の画 像及び音声の再生方法。
2 1 . 前記再生情報データには、 前記記憶手段に保持されているデータを再 生する時間を示す情報が記載されることを特徴とする請求の範囲第 1 8項に記 載の画像及び音声の再生方法。
2 2 . 前記再生情報データには、 前記記憶手段に保持されているデータを再 生する時刻を示す情報が記載されることを特徴とする請求の範囲第 1 8項に記 載の画像及び音声の再生方法。
2 3 . 前記再生情報データにおいて、 画像信号と音声信号を多重記録したデ 一夕を指定する場合には、 前記画像信号と音声信号を多重記録したデータの画 像信号部分と音声信号部分とをそれぞれ別個に再生対象として指定可能である ことを特徴とする請求の範囲第 1 8項または第 1 9項に記載の画像及び音声の 再生方法。
2 4 . 前記再生情報デ一夕には、 前記データの再生に関する情報が、 少なく とも 1つのグループごとにまとめられて記載され、 前記グループ内には、 再生 対象であるデータを特定するための情報が少なくとも 1つ記載されることを特 徴とする請求の範囲第 1 8項または第 1 9項に記載の画像及び音声の再生方法。
2 5 . 前記再生情報データには、 デ一夕の再生に関する情報が少なくとも 1 つのグループごとにまとめられて記載され、 前記グループ内には、 画像信号を 記録したデー夕または画像信号と音声信号を多重記録したデー夕の画像信号部 分のいずれかと、 音声信号を記録したデータまたは画像信号と音声信号を多重 記録したデータの音声信号部分のいずれかを特定するための情報が、 それぞれ
1つずつ記載されることを特徴とする請求の範囲第 1 8項または第 1 9項に記 載の画像及び音声の再生方法。
2 6 . 前記再生情報データのグループにおいて、 画像信号と音声信号を多重 記録したデータを特定するための情報を記載する場合には、 同一のグループ内 に画像信号を記録したデータ、 画像信号と音声信号を多重記録したデ一夕の画 像信号部分、 音声信号を記録したデータ、 または画像信号と音声信号を多重記 録したデータの音声信号部分を特定するための情報を記載しないことを特徴と する請求の範囲第 1 8項、 第 1 9項および第 2 4項のいずれか 1に記載の画像 及び音声の再生方法。
2 7 . グループを単位に再生情報データを編集することで、 新規の再生情報 データを生成することを特徴とする請求の範囲第 1 8項ないし第 2 6項のいず れか 1に記載の画像及び音声の再生方法。
2 8 . 前記再生情報データに従って再生される、 画像信号を記録したデータ、 音声信号を記録したデータ、 または画像信号と音声信号を多重記録したデ一夕 のデータフォーマツトをフォーマツト変換手段で変換することを特徴とする請 求の範囲第 1 8項ないし第 2 7項のいずれか 1に記載の画像及び音声の再生方 法。
2 9 . 前記再生情報デ一夕に従って再生された画像信号と音声信号とをェン コーダ手段で符号化することを特徵とする請求の範囲第 1 8項ないし第 2 8項 のいずれか 1に記載の画像及び音声の再生方法。
3 0 . 画像信号を記録したデ一夕、 音声信号を記録したデータ、 または画像 信号と音声信号を多重記録したデータの少なくとも 1つと合成される情報を格 納した合成情報データを前記記憶手段に記憶し、
前記再生情報デ一夕には、 再生対象であるデータを特定するための情報と、 1つ以上の前記合成情報データを特定するための情報とを記載することを特徴 とする請求の範囲第 1 8項ないし第 2 9項のいずれか 1に記載の画像及び音声 の再生方法。
3 1 . 前記再生対象であるデータを特定するための情報とは、 再生対象であ るデータに与えられた名称であることを特徴とする請求の範囲第 1 8項、 第 1 9項、 第 2 3項ないし第 3 0項のいずれか 1に記載の画像及び音声の再生方法。
3 2 . 再生手段を用いて前記再生情報データに従って、 前記記憶手段に保持 されたデ一夕から画像信号と音声信号との再生を行うことを特徴とする請求の 範囲第 1 8項ないし第 3 1項のいずれか 1に記載の画像及び音声の再生方法。
3 3 . 前記再生手段として、 データを複合化するデコーダか、 記憶手段から データを読み出す読み出し手段およびデータを復号化するデコーダか、 の少な くともいずれかを用いることを特徴とする請求の範囲第 3 2に記載の画像及び 音声の再生方法。
3 4 . 前記合成情報ファイルは、 画像信号を記録したデータファイル、 音声 信号を記録したデータファイルまたは画像信号と音声信号を多重記録したデー 夕ファイルに含成される画像、 音声、 テキストのいずれかであることを特徴と する請求の範囲第 3 0項に記載の画像及び音声の再生方法。
PCT/JP2001/002000 2000-03-14 2001-03-14 Device and method for reproducing image and voice WO2001069924A1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP01912343A EP1199892A4 (en) 2000-03-14 2001-03-14 DEVICE AND METHOD FOR REPRODUCING IMAGES AND VOICE
US09/979,491 US7231134B2 (en) 2000-03-14 2001-03-14 Image and audio reproducing apparatus and method
US11/552,179 US8204358B2 (en) 2000-03-14 2006-10-24 Image and audio reproducing apparatus and method

Applications Claiming Priority (12)

Application Number Priority Date Filing Date Title
JP2000-70025 2000-03-14
JP2000-70031 2000-03-14
JP2000070029A JP3646607B2 (ja) 2000-03-14 2000-03-14 自動再生制御ファイル作成装置、自動再生制御ファイル作成方法、データファイル再生装置及びデータファイル再生方法
JP2000-70029 2000-03-14
JP2000-70024 2000-03-14
JP2000-70033 2000-03-14
JP2000070031A JP3646609B2 (ja) 2000-03-14 2000-03-14 自動再生制御ファイル作成装置及び自動再生制御ファイル作成方法
JP2000-70030 2000-03-14
JP2000070024A JP3614074B2 (ja) 2000-03-14 2000-03-14 画像及び音声の再生装置及び方法
JP2000070025A JP3646606B2 (ja) 2000-03-14 2000-03-14 自動再生制御ファイル作成装置、自動再生制御ファイル作成方法、データファイル再生装置及びデータファイル再生方法
JP2000070033A JP3646610B2 (ja) 2000-03-14 2000-03-14 自動再生制御ファイル作成装置、自動再生制御ファイル作成方法、データファイル再生装置及びデータファイル再生方法
JP2000070030A JP3646608B2 (ja) 2000-03-14 2000-03-14 自動再生制御ファイル作成装置、自動再生制御ファイル作成方法、データファイル再生装置及びデータファイル再生方法

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US09979491 A-371-Of-International 2001-03-14
US11/552,179 Continuation US8204358B2 (en) 2000-03-14 2006-10-24 Image and audio reproducing apparatus and method

Publications (1)

Publication Number Publication Date
WO2001069924A1 true WO2001069924A1 (en) 2001-09-20

Family

ID=27554741

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2001/002000 WO2001069924A1 (en) 2000-03-14 2001-03-14 Device and method for reproducing image and voice

Country Status (4)

Country Link
US (2) US7231134B2 (ja)
EP (1) EP1199892A4 (ja)
CN (2) CN1225117C (ja)
WO (1) WO2001069924A1 (ja)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001256097A (ja) 2000-03-14 2001-09-21 Matsushita Electric Ind Co Ltd ファイルの自動送信システム
CN1225117C (zh) * 2000-03-14 2005-10-26 松下电器产业株式会社 图像以及声音的重放装置及方法
JP3849640B2 (ja) * 2000-10-26 2006-11-22 松下電器産業株式会社 印刷画像指定装置
US20040201681A1 (en) * 2001-06-21 2004-10-14 Jack Chen Multimedia data file producer combining image and sound information together in data file
JP3948979B2 (ja) * 2002-02-18 2007-07-25 パイオニア株式会社 情報記録媒体、情報記録装置及び方法、情報再生装置及び方法、情報記録再生装置及び方法、記録又は再生制御用のコンピュータプログラム、並びに制御信号を含むデータ構造
JP3954406B2 (ja) * 2002-02-18 2007-08-08 パイオニア株式会社 情報記録媒体、情報記録装置及び方法、情報再生装置及び方法、情報記録再生装置及び方法、記録又は再生制御用のコンピュータプログラム、並びに制御信号を含むデータ構造
TWI260931B (en) * 2002-04-01 2006-08-21 Matsushita Electric Ind Co Ltd Image presentation device and image presentation method
CN100515017C (zh) * 2002-08-28 2009-07-15 卡西欧计算机株式会社 图像与声频再现设备、图像与声频再现方法
WO2004025945A2 (en) * 2002-09-12 2004-03-25 Thomson Licensing S.A. Personal video message system
CN100466713C (zh) * 2002-11-28 2009-03-04 索尼株式会社 再现装置和再现方法
CN1314010C (zh) * 2003-02-27 2007-05-02 腾研科技股份有限公司 数字相片的烧录装置及处理方法
NZ544650A (en) * 2003-06-17 2008-03-28 Pioneer Corp Information reproduction apparatus and method using audio repeat information
CN100338952C (zh) * 2003-08-19 2007-09-19 仁宝电脑工业股份有限公司 处理图像声音讯号的方法
JP2005117447A (ja) * 2003-10-09 2005-04-28 Nec Corp 動画記録装置、動画記録方法および動画記録プログラム
FR2872660B1 (fr) * 2004-07-05 2006-12-22 Eastman Kodak Co Appareil de prise de vue et procede pour la formation d'images annotees
US7796858B2 (en) * 2004-07-23 2010-09-14 Via Technologies, Inc. System of mix mode multimedia player
US7757174B2 (en) * 2004-11-30 2010-07-13 Panasonic Corporation Program list reproduction method and display method
US7638058B2 (en) * 2005-04-07 2009-12-29 Matheson Tri-Gas Fluid storage and purification method and system
JP2006339991A (ja) * 2005-06-01 2006-12-14 Matsushita Electric Ind Co Ltd マルチチャンネル収音装置、マルチチャンネル音声再生装置、およびマルチチャンネル収音再生装置
KR100726258B1 (ko) 2006-02-14 2007-06-08 삼성전자주식회사 휴대단말의 사진파일 및 음성파일을 이용한 영상물 제작방법
US8111326B1 (en) 2007-05-23 2012-02-07 Adobe Systems Incorporated Post-capture generation of synchronization points for audio to synchronize video portions captured at multiple cameras
JP2014017779A (ja) * 2012-07-11 2014-01-30 Sony Corp 編集装置、編集方法、プログラム、および記録媒体
US9865069B1 (en) * 2014-11-25 2018-01-09 Augmented Reality Concepts, Inc. Method and system for generating a 360-degree presentation of an object
CN104916298B (zh) * 2015-05-28 2018-05-11 努比亚技术有限公司 编解码方法、编解码装置、电子设备及有声图片生成方法
US9877056B1 (en) * 2016-11-10 2018-01-23 Google Inc. Compressed media with still images selected from a video stream

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09146918A (ja) * 1995-11-20 1997-06-06 Fujitsu Ltd マルチメディア情報の管理方法及び装置
JPH1097639A (ja) * 1996-09-20 1998-04-14 Nikon Corp 画像再生装置
JPH10234002A (ja) * 1997-02-21 1998-09-02 Hitachi Ltd ディジタル映像音声記録再生装置
JPH1188808A (ja) * 1997-09-04 1999-03-30 Matsushita Electric Ind Co Ltd デジタルカメラ、プリント装置、映像表示装置、および映像送信装置
JPH11313273A (ja) * 1998-04-28 1999-11-09 Sanyo Electric Co Ltd 表示装置
JP2000041212A (ja) * 1998-04-08 2000-02-08 Matsushita Electric Ind Co Ltd 光ディスク、記録装置および方法、並びに再生装置および方法

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3883817T2 (de) 1987-03-20 1994-02-03 Canon Kk Datenübertragungssystem.
US5802314A (en) 1991-12-17 1998-09-01 Canon Kabushiki Kaisha Method and apparatus for sending and receiving multimedia messages
JPH05274232A (ja) 1992-03-26 1993-10-22 Shikoku Nippon Denki Software Kk 報告書イメージ配信方式
DE69318259T2 (de) 1992-11-18 1998-09-17 Canon Kk Verfahren und Vorrichtung zur Implementierung einer Zweiwegeschnittstelle zwischen einem lokalen Netzwerk und einem Peripheriegerät
JPH06214904A (ja) 1993-01-19 1994-08-05 Nagano Japan Radio Co 外部記憶媒体のデータ転送方法
US5493335A (en) 1993-06-30 1996-02-20 Eastman Kodak Company Single sensor color camera with user selectable image record size
JPH07114634A (ja) 1993-08-27 1995-05-02 Victor Co Of Japan Ltd マルチメディアシナリオプログラム編集方法およびその装置
JP3500635B2 (ja) * 1993-12-10 2004-02-23 ソニー株式会社 情報再生装置
JP3379730B2 (ja) 1994-09-09 2003-02-24 オリンパス光学工業株式会社 画像取扱装置
US5933478A (en) 1994-09-28 1999-08-03 Hitachi, Ltd. Data transfer system and handheld terminal device used therefor
JPH08115278A (ja) 1994-10-19 1996-05-07 Fuji Xerox Co Ltd ファイル配付システム
US5930450A (en) 1995-02-28 1999-07-27 Kabushiki Kaisha Toshiba Recording medium, apparatus and method of recording data on the same, and apparatus and method of reproducing data from the recording medium
JP3160177B2 (ja) 1995-03-06 2001-04-23 松下電器産業株式会社 ファクシミリ型電子メール装置
JPH09128408A (ja) * 1995-08-25 1997-05-16 Hitachi Ltd インタラクティブ記録再生用メディア及び再生装置
JPH09179806A (ja) 1995-12-27 1997-07-11 Mitsubishi Electric Corp ファイル転送システム
JPH1051733A (ja) 1996-04-12 1998-02-20 Hitachi Denshi Ltd 動画像編集方法および動画像編集装置および動画像編集手順を有するプログラムコードを記録する記録媒体
US5806005A (en) 1996-05-10 1998-09-08 Ricoh Company, Ltd. Wireless image transfer from a digital still video camera to a networked computer
TW400487B (en) 1996-10-24 2000-08-01 Tumbleweed Software Corp Electronic document delivery system
JPH10224745A (ja) 1997-02-10 1998-08-21 Nikon Corp 情報処理装置
US6573927B2 (en) 1997-02-20 2003-06-03 Eastman Kodak Company Electronic still camera for capturing digital image and creating a print order
US6784924B2 (en) 1997-02-20 2004-08-31 Eastman Kodak Company Network configuration file for automatically transmitting images from an electronic still camera
JPH10283759A (ja) 1997-04-04 1998-10-23 Sony Corp 編集装置
JP2996229B2 (ja) 1997-06-30 1999-12-27 カシオ計算機株式会社 電子カメラ装置、電子装置、送信システム、電子カメラ装置の制御方法及び電子装置の制御方法
JPH1120275A (ja) 1997-07-08 1999-01-26 Toshiba Corp 画像印刷システム及び画像印刷方法
JPH1155324A (ja) 1997-07-31 1999-02-26 Fujitsu Ltd コンピュータネットワークの通信システム
US6442252B1 (en) 1997-09-05 2002-08-27 Canon Kabushiki Kaisha Communication apparatus
US6181870B1 (en) * 1997-09-17 2001-01-30 Matushita Electric Industrial Co., Ltd. Optical disc having an area storing original and user chain information specifying at least part of a video object stored on the disc, and a computer program and recording apparatus for recording and editing the chain information
DE69835489T2 (de) 1997-10-27 2007-02-15 Canon K.K. Dokumentübertragungsvorrichtung und -verfahren
US6507887B1 (en) * 1998-01-13 2003-01-14 Koninklijke Philips Electronics N.V. Binary data memory design with data stored in low-power sense
JPH11232440A (ja) 1998-02-18 1999-08-27 Casio Comput Co Ltd 画像処理装置
EP0981246A4 (en) 1998-03-16 2001-05-30 Seiko Epson Corp MACHINE AND SYSTEM FOR PRINTING PHOTOGRAPHIC IMAGES, COMPUTER READABLE MEMORY MEDIUM WITH STORED PRINTING PROGRAM FOR PHOTOGRAPHIC IMAGES
JP3356991B2 (ja) * 1998-06-17 2002-12-16 株式会社日立製作所 光ディスク、記録方法、記録装置、再生方法及び再生装置
JP2000029800A (ja) 1998-07-15 2000-01-28 Mitsubishi Electric Corp 自動送信装置
JP3646582B2 (ja) 1998-09-28 2005-05-11 富士通株式会社 電子情報表示方法、電子情報閲覧装置および電子情報閲覧プログラム記憶媒体
CN1169150C (zh) * 1998-10-12 2004-09-29 松下电器产业株式会社 用于记录或再现信息记录介质中的数据的装置和方法
JP4144961B2 (ja) 1999-01-14 2008-09-03 富士フイルム株式会社 画像データ通信システム，サーバ・システムおよびその制御方法ならびにサーバ・システムを制御するためのプログラムを格納した記録媒体
JP2000276418A (ja) 1999-03-29 2000-10-06 Casio Comput Co Ltd 電子メールシステム及び電子メール処理プログラムを記録した記録媒体
JP2001256097A (ja) 2000-03-14 2001-09-21 Matsushita Electric Ind Co Ltd ファイルの自動送信システム
CN1225117C (zh) 2000-03-14 2005-10-26 松下电器产业株式会社 图像以及声音的重放装置及方法
US6529941B2 (en) 2000-03-23 2003-03-04 Fraunhofer Center For Research In Computer Graphics, Inc. Extensible information distribution mechanism for session management
JP3849640B2 (ja) 2000-10-26 2006-11-22 松下電器産業株式会社 印刷画像指定装置
US20050144189A1 (en) 2002-07-19 2005-06-30 Keay Edwards Electronic item management and archival system and method of operating the same

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09146918A (ja) * 1995-11-20 1997-06-06 Fujitsu Ltd マルチメディア情報の管理方法及び装置
JPH1097639A (ja) * 1996-09-20 1998-04-14 Nikon Corp 画像再生装置
JPH10234002A (ja) * 1997-02-21 1998-09-02 Hitachi Ltd ディジタル映像音声記録再生装置
JPH1188808A (ja) * 1997-09-04 1999-03-30 Matsushita Electric Ind Co Ltd デジタルカメラ、プリント装置、映像表示装置、および映像送信装置
JP2000041212A (ja) * 1998-04-08 2000-02-08 Matsushita Electric Ind Co Ltd 光ディスク、記録装置および方法、並びに再生装置および方法
JPH11313273A (ja) * 1998-04-28 1999-11-09 Sanyo Electric Co Ltd 表示装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP1199892A4 *

Also Published As

Publication number Publication date
US8204358B2 (en) 2012-06-19
CN1364381A (zh) 2002-08-14
CN1684186A (zh) 2005-10-19
CN1225117C (zh) 2005-10-26
US7231134B2 (en) 2007-06-12
EP1199892A1 (en) 2002-04-24
US20070041714A1 (en) 2007-02-22
CN100517489C (zh) 2009-07-22
US20030012559A1 (en) 2003-01-16
EP1199892A4 (en) 2006-08-09

Similar Documents

Publication Publication Date Title
US8204358B2 (en) Image and audio reproducing apparatus and method
US5794251A (en) Information file processing apparatus and method
US5262877A (en) Image and voice editing system for allowing various images and voices to be reproduced as associated with each other
JPH0620443A (ja) 音声・画像同時再生装置及び音声・画像同時再生方法
KR960038899A (ko) 재생 데이타를 전송하는 통신 시스템
JPH0447876A (ja) ディジタル信号の記録再生方式
JPH11205718A (ja) 情報再生装置及び情報記録再生装置
JP3646610B2 (ja) 自動再生制御ファイル作成装置、自動再生制御ファイル作成方法、データファイル再生装置及びデータファイル再生方法
JP3614074B2 (ja) 画像及び音声の再生装置及び方法
JP3646606B2 (ja) 自動再生制御ファイル作成装置、自動再生制御ファイル作成方法、データファイル再生装置及びデータファイル再生方法
JP3646609B2 (ja) 自動再生制御ファイル作成装置及び自動再生制御ファイル作成方法
JP2914936B2 (ja) 多種言語対応型記録媒体の信号記録方法及び装置
JP3646607B2 (ja) 自動再生制御ファイル作成装置、自動再生制御ファイル作成方法、データファイル再生装置及びデータファイル再生方法
JP2708214B2 (ja) 画像および音声の編集システムおよび方法
JP3646608B2 (ja) 自動再生制御ファイル作成装置、自動再生制御ファイル作成方法、データファイル再生装置及びデータファイル再生方法
JP3566216B2 (ja) デジタル音声映像情報の記録装置
JP4186949B2 (ja) 情報記録再生装置
JP4697273B2 (ja) 記録装置、記録方法、再生装置、再生方法及び記録媒体
JP4400684B2 (ja) 情報処理装置、記録再生装置
JPH02149975A (ja) 画像信号および音声信号のディジタルオーディオテープ記録方式
JPH0447879A (ja) ディジタル信号の記録再生方式
JPH0447880A (ja) ディジタル信号の記録再生方式
JPH05333885A (ja) カラオケ再生装置
JPH07182371A (ja) 文書ファイリング装置
JPH05308616A (ja) 情報記録再生装置

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 01800490.3

Country of ref document: CN

AK Designated states

Kind code of ref document: A1

Designated state(s): CN US

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE TR

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2001912343

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 09979491

Country of ref document: US

WWP Wipo information: published in national office

Ref document number: 2001912343

Country of ref document: EP