WO2009095971A1 - オーディオレジューム再生装置及びオーディオレジューム再生方法 - Google Patents
オーディオレジューム再生装置及びオーディオレジューム再生方法 Download PDFInfo
- Publication number
- WO2009095971A1 WO2009095971A1 PCT/JP2008/003674 JP2008003674W WO2009095971A1 WO 2009095971 A1 WO2009095971 A1 WO 2009095971A1 JP 2008003674 W JP2008003674 W JP 2008003674W WO 2009095971 A1 WO2009095971 A1 WO 2009095971A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- stream
- information
- compressed
- frame
- encoded
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 19
- 230000005236 sound signal Effects 0.000 claims description 79
- 238000001514 detection method Methods 0.000 claims description 11
- 230000006835 compression Effects 0.000 claims description 7
- 238000007906 compression Methods 0.000 claims description 7
- 230000033458 reproduction Effects 0.000 description 105
- 238000010586 diagram Methods 0.000 description 36
- 239000000284 extract Substances 0.000 description 10
- 230000006870 function Effects 0.000 description 6
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/167—Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes
Definitions
- the present invention relates to a resume playback function for restarting playback after a playback is interrupted due to a power failure or the like for a compressed audio stream in which encoded information is dispersed in some encoded frames and multiplexed asynchronously.
- the present invention relates to an audio playback apparatus having a special playback function such as fast-forward rewind and a playback method.
- reference numeral 2401 denotes a recording medium capable of storing a compressed stream in which time-series digital audio signals are collected in units of encoded frames.
- Reference numeral 2402 denotes an interruption information storage memory for recording a position to be resumed when receiving a next reproduction instruction when reproduction is interrupted as resume information.
- 2403 reads out the compressed audio stream from the recording medium 2401.
- the frame information at the interruption is stored in the interruption information storage memory 2402.
- the resume information is received from the interruption information storage memory 2402.
- This is a compression stream control unit that determines the compressed stream read position from the read recording medium 2401 and the output start position.
- a compressed stream decoding unit 2404 can decode the compressed audio stream read by the compressed stream control unit 2403 into a digital audio signal and transmit the obtained decoding information to the compressed stream control unit 2403.
- the resume playback function of the conventional audio playback device uses the resumed playback of the compressed stream from the interrupted position, regardless of the position at which playback is interrupted, or when the interrupted position is near the beginning of the file. Control is resumed from the beginning, and when it is near the end of the file, it resumes from the beginning of the next file.
- FIG. 25 shows an example of the case where reproduction is interrupted with encoded data D (n + 3) that is not near the beginning or end of the file and another process is executed, and then restarted from encoded data D (n + 3).
- reference numeral 2501 denotes a frame number for each encoded frame of the compressed audio stream X.
- Reference numeral 2502 denotes a compressed audio stream X for each encoded frame input to the compressed stream decoding unit 2404.
- Reference numeral 2503 denotes encoded information H applied to each encoded frame.
- Reference numeral 2504 denotes a reproduction bandwidth of the reproduction audio signal Y output from the compressed stream decoding unit 2404 for each encoded frame.
- the vertical axis of 2504 indicates frequency, and the horizontal axis indicates time.
- the compressed stream decoding unit 2404 When the compressed audio stream X is input to the compressed stream decoding unit 2404, the compressed stream decoding unit 2404 extracts the encoded data D and the encoded information H, and outputs a reproduction audio signal Y from the encoded data D and the encoded information H. To do. In this case, since the compressed stream decoding unit 2404 is input from the frame number n + 3, the encoded information H for decoding the encoded data D (n + 3) to D (n + 5) up to the frame numbers n + 3, n + 4, and n + 5 is obtained. The compressed stream decoding unit 2404 does not exist.
- frame numbers n + 7 and n + 8 in which encoded information is not multiplexed are decoded from core encoded data because encoded information H (n + 6) is multiplexed with preceding encoded data D (n + 6).
- the frequency bands of the audio signals Y (n + 7) and Y (n + 8) are expanded to F1.
- the encoded audio signal in which the encoded information is distributed in a part of the encoded frames and multiplexed asynchronously, is decoded and the reproduced audio signal is decoded and output, the power is cut off, etc.
- the decoding is performed on the encoded frame in which the encoded information is not multiplexed and the encoded information for performing the decoding process cannot be extracted and applied. Some or all of the processes cannot be performed, and the reproduced audio signal is not output, or the quality of the reproduced audio signal is deteriorated.
- the audio reproduction apparatus of the present invention is configured by multiplexing encoded information asynchronously with an encoded frame into a compressed stream in which time-series digital audio signals are grouped in units of encoded frames.
- an audio playback device capable of playing back a compressed audio stream, when playback is interrupted and restarted, the correct frequency band can be obtained without a time period that is not played back based on information about the compressed audio stream recorded before the interruption. It is characterized by restarting playback with an expanded waveform.
- the audio playback device of the present invention holds the recording medium on which the compressed audio stream is recorded and the frame information of the compressed audio stream before the playback is interrupted, and the decoded audio frame is asynchronously resumed when the playback is restarted.
- Compressed stream control means for calculating a read position of the compressed audio stream from the recording medium based on the resume additional information for determining whether the encoded information is multiplexed and the audio frame information; and the compressed stream control The compressed audio stream read by the means, and the resume additional information based on the decoded information obtained by decoding the frame and sent to the compressed stream control means; Characterized in that it comprises an output control means for determining the output permission of the arm of the decoded result to output.
- the audio reproducing apparatus of the present invention holds a recording medium on which a compressed audio stream is recorded and frame information of the compressed audio stream at the time of reproduction interruption, and calculates and reads out a reading position of the compressed audio stream from the recording medium. And decoding whether the compressed audio stream read by the compressed stream control means is decoded and at least the frame in which the encoded information is multiplexed asynchronously among the decoded information obtained by decoding the frame.
- a compressed stream decoding means for configuring the resume additional information so as to include discriminable information and sending it to the compressed stream control means; an output control means for determining whether or not to output a decoding result of the compressed audio stream;
- An interruption information storage memory for storing resume information necessary for resuming reproduction when the reproduction of the stream is interrupted, and resume additional information sent from the compressed stream decoding means and the frame at the time of interruption when the reproduction is temporarily interrupted and resumed
- the compressed stream control means reads a compressed audio stream from the recording medium when receiving a playback start instruction or a playback restart instruction, and writes compressed stream information to the interrupt information storage memory when receiving a playback interrupt instruction.
- a reproduction start position control means for instructing the compressed stream read control means to read a compressed audio stream from the recording medium when interruption information is stored in the interruption information storage memory, and the compressed stream decoding means
- the resume additional information sent from the interrupt information storage memory to the interrupt information storage memory includes information that can be determined that a frame in which encoded information is multiplexed asynchronously is decoded
- the resume additional information is stored in the interrupt information storage memory.
- an information write determination means may perform the determination of the output start frame by the output control means and the determination of the reading position by the reproduction start position control means from the resume information and the additional resume information when the reproduction is resumed.
- the compressed stream decoding means analyzes the encoded frame of the compressed audio stream, extracts the encoded information asynchronously multiplexed, and asynchronously extracts the encoded information or the decoding auxiliary information obtained from the encoded information.
- a coding information analysis unit that stores one or both of the frame indexes of the multiplexed encoded information and the decoding information together as resume additional information and stores it in the interruption information storage memory, and a signal for decoding
- a processing unit and a frame skip circuit that discards a frame that does not need to be input to the signal processing unit, and the frame skip circuit includes the asynchronous information of the resume information stored in the interruption information storage memory and the resume additional information.
- the resume additional information may be composed of both information stored in the SBR header of the AAC + SBR stream extracted by the encoded information analysis unit and a frame index having the header, or a frame index having the header.
- the resume additional information includes the frame index of the encoded frame including the start of the main data necessary for decoding the frame of the MP3 stream extracted by the encoded information analysis unit or the start of the main data. You may comprise by the frame index of the encoding frame in an own frame.
- an audio recording / reproducing apparatus of the present invention is configured by multiplexing encoded information asynchronously with an encoded frame into a compressed stream in which time-series digital audio signals are grouped in units of encoded frames.
- the recording medium for recording the compressed audio stream and the encoded information for holding the index of the frame in which the encoded information is multiplexed asynchronously with the encoded frame
- a compressed stream control unit that calculates a compressed audio stream input position, a compressed stream decoding unit that decodes the compressed audio stream input from the compressed stream control unit, and an output control unit that determines whether a decoding result can be output, At the time of reproduction, the compressed audio stream input by the
- the compressed stream decoding means detects encoded information asynchronously multiplexed from the compressed audio stream and writes the frame position in the encoded information index table; and index information about the compressed audio stream to be decoded
- An index table determination unit that determines whether or not the encoded information index table already exists, and when the index table determination unit determines that there is no index information regarding the compressed audio stream to be decoded, By adding index information to the coded information index table by the coded information detection unit, it is possible to reproduce a section that cannot be played back in time during playback from an arbitrary position of the compressed audio stream during the second playback or later. It may be configured to play frequency band without household.
- the AV stream reproducing apparatus of the present invention is configured by multiplexing encoded information asynchronously with an encoded frame into a compressed stream in which time-series digital audio signals are grouped in encoded frames.
- reproduction is resumed with a waveform extended to a correct frequency band without a time reproduction period at least for an audio signal based on information on a compressed audio stream recorded before the interruption.
- the AV stream playback apparatus of the present invention holds the recording medium on which the multiplexed stream is recorded and the frame information of the compressed audio stream before the playback is interrupted, and the decoded audio frame is asynchronous when restarted when the playback is interrupted.
- AV multiplexing for calculating the read position of the AV multiplexed stream from the recording medium based on the resume additional information for determining whether the encoded information is multiplexed, the audio frame information and the compressed video stream resume information Stream control means, AV demultiplexing means for separating the compressed audio stream and the compressed video stream from the AV multiplexed stream read by the AV multiplexed stream control means, and the compressed audio separated by the AV demultiplexing means Stream And the compressed additional audio stream decoding means for sending the resume additional information and the audio frame information composed of the decoded information obtained by decoding the frame to the AV multiplexed stream control means, and the AV demultiplexing means
- a compressed video stream decoding means for decoding the compressed video stream and
- the AV stream playback apparatus of the present invention holds a recording medium on which an AV multiplexed stream is recorded, and audio frame information and video frame information at the time when playback is interrupted, and also reads out the read position of the AV multiplexed stream from the recording medium.
- AV multiplexed stream control means for calculating and reading
- AV demultiplexing means for separating the AV multiplexed stream read by the AV multiplexed stream control means into a compressed audio stream and a compressed video stream
- Resume additional information is included so as to include information capable of determining whether or not the decoded information obtained by decoding the separated compressed audio stream and at least asynchronously multiplexed encoded information is decoded.
- Compressed audio stream decoding means for sending to the AV multiplexed stream control means, and compressed video for decoding the compressed video stream separated by the AV demultiplexing means and sending compressed video stream resume information to the AV multiplexed stream control means
- a stream decoding unit an audio output control unit that determines whether or not to output a decoding result of the compressed audio stream; and outputs a video output control unit that determines whether or not to output a decoding result of the compressed video stream
- AV synchronization means for synchronizing the decoding result and the compressed video stream decoding result, and resuming the compressed audio stream resume information and the compressed video stream necessary for resuming the reproduction of the compressed audio stream when the reproduction of the AV multiplexed stream is interrupted
- An interruption information storage memory for storing necessary compressed biostream resume information, and when reproduction is temporarily interrupted and resumed, from the resume additional information sent from the compressed audio stream decoding means and the frame information at the time of interruption
- the AV multiplexed stream control means reads an AV multiplexed stream from the recording medium when receiving a playback start instruction or playback restart instruction, and writes the stream information being played back into the interrupt information storage memory when receiving a playback interrupt instruction.
- Multiplexed stream read control means, and reproduction start position control for instructing the AV multiplexed stream read control means where to read an AV multiplexed stream from the recording medium when interruption information is stored in the interruption information storage memory
- a resume additional information write determination means for writing the resume additional information to the interrupt information storage memory as needed, and at least for resume playback of audio, the playback start position control from the compressed audio stream resume information and the resume additional information at the time of playback restart The reading position may be determined by the means, and the output start frame may be determined by the audio output control means.
- the compressed audio stream decoding means analyzes an encoded audio frame, extracts encoded information asynchronously multiplexed, and asynchronously multiplexes the extracted encoded information or decoding auxiliary information obtained from the encoded information.
- a coded information analysis unit for storing one or both of the frame indices of the frame having the coded information and the decoding information as resume additional information in the interruption information storage memory, and a signal processing unit for decoding And a frame skip circuit for discarding a frame that does not need to be input to the signal processing unit, the frame skip circuit asynchronously multiplexing the resume information and the resume additional information stored in the interruption information storage memory.
- the signal processing unit from a frame index of a frame having encoded information And restarts playback from the correct position by skipping unnecessary encoded frames until the encoded frame having the frame index of the resume information is input without being input to the signal processing unit. You may comprise.
- the encoded information is Even when instructed to start playback from a non-multiplexed encoded frame, decoding can be performed based on the asynchronously multiplexed encoded information. It is possible to prevent a sudden change in sound quality due to the occurrence of a frequency band that is not reproduced until a recorded frame appears.
- FIG. 1 is a block diagram showing the configuration of the audio playback apparatus according to the first embodiment.
- FIG. 2 is a block diagram showing the configuration of the audio playback apparatus according to the second embodiment.
- FIG. 3 is a diagram illustrating the encoded audio information applied to each compressed audio stream and each encoded frame in the second embodiment.
- FIG. 4 is a diagram illustrating a configuration example of the resume additional information according to the second embodiment.
- FIG. 5 is a block diagram showing a configuration of an audio playback apparatus according to the third embodiment.
- FIG. 6 is a diagram illustrating encoding information applied to each compressed audio stream and each encoded frame in the third embodiment.
- FIG. 7 is a diagram illustrating the compressed audio stream and the encoded information applied to each encoded frame at the time of resuming reproduction in the third embodiment.
- FIG. 8 is a block diagram showing the configuration of the audio playback apparatus in the fourth embodiment.
- FIG. 9 is a diagram illustrating encoded audio information applied to each compressed audio stream and each encoded frame when resuming reproduction according to the fourth embodiment.
- FIG. 10 is a diagram illustrating a configuration example of the resume additional information according to the fifth embodiment.
- FIG. 11 is a block diagram showing a configuration of an audio recording / reproducing apparatus according to the sixth embodiment.
- FIG. 12 is a diagram for explaining a method for reproducing a compressed audio stream recorded by the audio recording / reproducing apparatus according to the sixth embodiment.
- FIG. 13 is a block diagram showing a configuration of an audio recording / reproducing apparatus according to the sixth embodiment.
- FIG. 14 is a diagram illustrating the relationship between the encoded information index table and the compressed stream according to the seventh embodiment.
- FIG. 15 is a diagram illustrating a compressed audio reproduction method according to the seventh embodiment.
- FIG. 16 is a diagram illustrating a configuration example of an audio reproduction device according to the eighth embodiment.
- FIG. 17 is a block diagram showing a configuration of an AV stream playback device according to the ninth embodiment.
- FIG. 18 is a diagram illustrating an AV multiplexed stream, a compressed video stream and a compressed audio stream separated from the AV multiplexed stream, and encoding information applied to each encoded frame in the ninth embodiment.
- FIG. 19 is a diagram illustrating a configuration example of resume additional information according to the ninth embodiment.
- FIG. 19 is a diagram illustrating a configuration example of resume additional information according to the ninth embodiment.
- FIG. 20 is a block diagram showing the configuration of the AV stream playback device in the tenth embodiment.
- FIG. 21 is a block diagram showing the configuration of the AV stream playback device in the eleventh embodiment.
- FIG. 22 is a block diagram showing the configuration of the AV stream playback device in the twelfth embodiment.
- FIG. 23 is a diagram illustrating a configuration example of an AV stream playback device in the thirteenth embodiment.
- FIG. 24 is a block diagram showing a configuration of a conventional audio playback apparatus.
- FIG. 25 is a diagram showing the compressed audio stream, the encoded information for each encoded frame, and the frequency of the output waveform at the time of resuming reproduction in the conventional audio reproducing apparatus.
- Index table determination unit 1303 Compressed stream decoding unit 1702,2003 ... AV multiplexed stream control unit 1703,2004... AV demultiplexer 1704,2005 ... Compressed video stream decoder 1705,2006 ... Compressed audio stream decoder 1706,2007... AV synchronization section 1707,2008,2105 ... Video output controller 1708,2009,2106 ... Audio output controller
- FIG. 1 is a block diagram showing an audio playback apparatus according to the first embodiment.
- reference numeral 101 denotes a recording medium capable of storing a compressed stream in which time-series digital audio signals are grouped in encoded frames.
- 102 holds the frame information before the interruption of reproduction, and when resuming at the time of reproduction interruption, based on the resume additional information for determining whether the decoded frame is asynchronously multiplexed and the frame information, It is a compression stream control unit that calculates the read position of the compressed stream from the recording medium 101.
- a compressed stream decoding unit 103 decodes the compressed audio stream read out by the compressed stream control unit 102 into a digital audio signal and configures the resume additional information based on the obtained decoding information and sends the resume additional information to the compressed stream control unit 102. is there.
- An output control unit 104 performs output while performing mute and fade control according to the decoding result.
- FIG. 3 shows, in time series, the relationship between the compressed audio stream X input to the audio playback apparatus and the encoded information H necessary for decoding the compressed audio stream X into a digital audio signal Y.
- reference numeral 301 denotes the frame number of the encoded frame of the compressed audio stream X.
- Reference numeral 302 denotes a compressed audio stream X for each encoded frame.
- Reference numeral 303 denotes encoded information H used for each encoded frame.
- Reference numeral 305 denotes a reproduced digital audio signal Y output from the compressed stream decoding unit 103 for each encoded frame.
- the vertical axis of 305 indicates frequency, and the horizontal axis indicates time.
- the compressed stream control unit 102 outputs the encoded data D of the frame number specified by the frame index N to the compressed stream decoding unit 103. For example, when the frame index N specifies frame number 1, the compressed stream control unit 102 outputs encoded data D (1) corresponding to the frame number 1 to the compressed stream decoding unit 103.
- the compressed stream decoding unit 103 extracts the encoded information H when decoding the compressed audio stream X. Then, resume additional information I (n) in which the encoded information H and the frame index N of the encoded frame are associated with each other is generated and sent to the compressed stream control unit 102.
- FIG. 4 is a configuration example in the case where the resume additional information I (n) is composed of the encoded information frame index A associated with the encoded information H and the frame index N of the decoded encoded frame.
- the compressed stream control unit 102 holds the resume additional information I (n) at the time when the reproduction interruption instruction is received among the resume additional information transmitted every frame, and when the reproduction resume instruction is received, the resume addition is performed.
- Information is read from the information I (n), and is input to the compressed stream decoding unit 103 from a frame that matches the encoded information frame index A stored as the compressed stream read position.
- the reproduced audio signals Y (2) to Y ( 5) can be output as a waveform having a correct frequency band expanded to the frequency band F1.
- FIG. 2 is a block diagram showing the configuration of the audio playback apparatus in the second embodiment.
- reference numeral 201 denotes a recording medium capable of storing a compressed stream in which time-series digital audio signals are grouped in encoded frames.
- Reference numeral 202 denotes an interruption information storage memory for recording a position to be resumed when a next reproduction instruction is received at the time of reproduction interruption as resume information.
- the interruption information storage memory 202 is preferably composed of a non-volatile memory so that information is not lost even if the power is cut off.
- 203 reads the compressed audio stream from the recording medium 201. When a reproduction interruption instruction is received, frame information at the time of interruption is stored in the interruption information storage memory 202.
- resume information is received from the interruption information storage memory 202.
- This is a compression stream control unit that determines a compressed stream read position from the read recording medium 201 and an output start position.
- a compressed stream decoding unit 204 can decode the compressed audio stream read by the compressed stream control unit 203 into a digital audio signal and transmit the obtained decoding information to the compressed stream control unit 203.
- An output control unit 205 performs output while performing mute and fade control according to the decoding result.
- FIG. 3 shows, in time series, the relationship between the compressed audio stream X input to the audio playback apparatus and the encoded information H necessary for decoding the compressed audio stream X into a digital audio signal Y.
- reference numeral 301 denotes the frame number of the encoded frame of the compressed audio stream X.
- Reference numeral 302 denotes a compressed audio stream X for each encoded frame.
- Reference numeral 303 denotes encoded information H used for each encoded frame.
- Reference numeral 305 denotes a reproduced digital audio signal Y output from the compressed stream decoding unit 204 for each encoded frame.
- the vertical axis of 305 indicates frequency, and the horizontal axis indicates time.
- the compressed stream control unit 203 outputs the encoded data D of the frame number specified by the frame index N to the compressed stream decoding unit 204. For example, when the frame index N specifies frame number 1, the compressed stream control unit 203 outputs encoded data D (1) corresponding to the frame number 1 to the compressed stream decoding unit 204.
- the compressed stream decoding unit 204 extracts the encoded information H when decoding the compressed audio stream X. Then, resume additional information I (n) in which the encoded information H and the frame index N of the encoded frame are associated with each other is generated and sent to the compressed stream control unit 203.
- FIG. 4 is a configuration example in the case where the resume additional information I (n) is composed of the encoded information frame index A associated with the encoded information H and the frame index N of the decoded encoded frame.
- the compressed stream control unit 203 writes the resume additional information I (n) sent every frame in the interruption information storage memory 202, and when receiving the reproduction interruption instruction, the frame index N of the encoded frame at the time when the interruption instruction is received. Write.
- the interruption information storage memory 202 stores the encoded information frame index A as a compressed stream reading position and the frame index N as an output start frame position.
- the reproduced audio signals Y (2) to Y ( 5) can be output as a waveform having a correct frequency band expanded to the frequency band F1.
- FIG. 5 is a block diagram showing the configuration of an audio playback apparatus according to the third embodiment.
- 504 is a modification of the output control unit 205 in FIG. 1 so that whether or not to output the playback digital audio signal decoded by the compressed stream decoding unit 204 as sound can be controlled according to the instruction of the playback start position control unit 503. Output control unit.
- the compressed stream control unit 203 includes a stream read control unit 501, a resume additional information write determination unit 502, and a reproduction start position control unit 503.
- the stream read control unit 501 reads the compressed audio stream from the recording medium 201 and sends it to the compressed stream decoding unit 204.
- the resume additional information write determination unit 502 analyzes the resume additional information I (n) generated by the compressed stream decoding unit 204, and only stores the encoded information frame index A and the frame index N in the interruption information storage memory 202. Write.
- the playback start position control unit 503 reads the resume information from the interruption information storage memory 202, instructs the stream read control unit 501 to read from the frame indicated by the encoded information frame index A, and instructs the output control unit 504 to use the frame index. The start of output from the frame indicated by N is instructed.
- reference numeral 601 denotes the frame number of the encoded frame of the compressed audio stream X.
- Reference numeral 602 denotes a compressed audio stream X for each encoded frame.
- Reference numeral 603 denotes encoded information H used for each encoded frame.
- Reference numeral 604 denotes resume additional information I (n) generated by the compressed stream decoding unit 204 for each encoded frame.
- Reference numeral 605 denotes a timing at which the resume additional information I (n) is written to the interruption information storage memory 202 by the resume additional information write determination unit 502.
- Reference numeral 606 denotes a reproduced digital audio signal Y output from the compressed stream decoding unit 204 for each encoded frame.
- the vertical axis of 606 indicates frequency, and the horizontal axis indicates time.
- the resume additional information I (n) is generated every frame by the compressed stream decoding unit 204
- the frame in which the encoded information H is multiplexed is decoded into the interruption information storage memory 202.
- the bus load to the interruption information storage memory 202 can be reduced.
- FIG. 7 shows an example in which reproduction is resumed from encoded data D (3) in which encoded information is not multiplexed.
- reference numeral 701 denotes the frame number of the encoded frame of the compressed audio stream X.
- Reference numeral 702 denotes a compressed audio stream X for each encoded frame.
- Reference numeral 703 denotes the timing at which the resume additional information I (n) is written in the interruption information storage memory 202.
- Reference numeral 704 denotes a decoded signal Y passed from the compressed stream decoding unit 204 to the output control unit 504 for each encoded frame.
- Reference numeral 705 denotes a reproduction digital audio signal Z output from the output control unit 504 to the outside.
- the vertical axes of 704 and 705 indicate frequency, and the horizontal axis indicates time.
- the encoded data D (1) of the frame index indicated by the resume additional information I (n) read from the interruption information storage memory 202 is input to the compressed stream decoding unit 204.
- the decoded signals Y (1) and Y (2) of the encoded data D (1) and D (2) are passed to the output control unit 504, and the reproduction start position control unit 503 sends a D signal to the output control unit 504.
- Z ((), which is the correct restart position, is output without outputting unnecessary decoded signals Y (1) and Y (2). From 3), the reproduced audio signal Z can be output in a waveform having a correct frequency band extended to the frequency band F1.
- FIG. 8 is a block diagram showing the configuration of an audio playback apparatus according to the fourth embodiment.
- reference numeral 804 denotes a reproduction start position control unit that is provided in place of the reproduction start position control unit 503 in FIG. 5 and can notify the compressed stream decoding unit 204 of the reproduction start frame.
- the compressed stream decoding unit 204 includes an encoded information analysis unit 801, a frame skip circuit 802, and a signal processing unit 803.
- the encoded information analysis unit 801 analyzes the compressed audio stream, extracts and stores encoded information in advance, and generates resume additional information I (n).
- the frame skip circuit 802 determines whether the frame is an unnecessary frame based on the instruction from the reproduction start position control unit 804 and the encoded information extracted by the encoded information analysis unit 801. If unnecessary, the frame skip circuit 802 transmits the encoded data to the signal processing unit 803. Control not to supply to The signal processing unit 803 performs signal processing on the encoded data and decodes it.
- FIG. 9 shows the operation when reproduction is resumed from the encoded data D (3) in time series.
- reference numeral 901 denotes the frame number of the encoded frame of the compressed audio stream X.
- Reference numeral 902 denotes a compressed audio stream X for each encoded frame that is input to the compressed stream decoding unit 204 after reproduction is resumed.
- Reference numeral 903 denotes encoded information H used for each encoded frame.
- Reference numeral 904 denotes resume additional information I (n) generated for each encoded frame by the encoded information analysis unit 801.
- Reference numeral 905 denotes a compressed audio stream X for each encoded frame input to the signal processing unit 803.
- Reference numeral 906 denotes a reproduced digital audio signal Y decoded by the signal processing unit 803 after the frame skip circuit 802 determines whether the frame is an unnecessary frame.
- the vertical axis of 906 indicates frequency, and the horizontal axis indicates time.
- the compressed stream decoding unit 204 is sequentially input from the encoded data D (1) of the frame index indicated by the resume additional information I (n), but the encoded data D (1), D (2) is skipped as an unnecessary frame by the frame skip circuit 802 and input to the signal processing unit 803 from the encoded data D (3) which is a reproduction restart frame, so that unnecessary frames D (1) and D (2) are input.
- the playback audio signal Y can be output from the correct restart position Z (3) as a waveform having a correct frequency band extended to the frequency band F1, without reducing the signal processing load. .
- FIG. 10 is a configuration example of the resume additional information I (n) in the fifth embodiment.
- the input compressed audio stream is AAC + SBR
- both the encoded information frame index A and the encoded information H are shown. It is a figure at the time of comprising resume additional information I (n) using.
- the resume additional information I (n) uses the frame index of the encoded frame including the SBR header as the encoded information frame index A, and the reproduced digital audio signal Y obtained by analyzing the SBR header.
- Coding information H is composed of a group of parameters used for frequency extension.
- the encoded information H is directly extracted from the interruption information storage memory 202 and used in the compressed stream decoding unit 204, and the stream input to the compressed stream decoding unit 204 is resumed from the interruption frame. It may be.
- the resume additional information I (n) is composed of both the encoded information frame index A and the encoded information H.
- the resume additional information is composed only of the encoded information frame index A.
- I (n) may be configured.
- the encoded information frame index A includes the frame index of the encoded frame whose main data is in its own frame, or the start of the main data necessary for decoding the frame.
- FIG. 11 is a block diagram showing a configuration of an audio recording / reproducing apparatus according to the sixth embodiment.
- reference numeral 1101 denotes a recording medium capable of storing a compressed stream in which time-series digital audio signals are grouped in encoded frames.
- Reference numeral 1102 denotes an encoded information index table that holds an index of a frame in which encoded information is multiplexed.
- Reference numeral 1103 denotes a compressed stream encoding unit that encodes an input audio signal into a compressed stream.
- Reference numeral 1104 denotes a compression stream controller that reads a compressed audio stream from the recording medium 1101 and determines a compressed stream reading position from the recording medium 1101 and an output start position when receiving a reproduction restart instruction.
- a compressed stream decoding unit 1105 can decode the compressed audio stream read by the compressed stream control unit 1104 into a digital audio signal and transmit the obtained decoding information to the compressed stream control unit 1104.
- An output control unit 1106 controls whether or not the reproduced digital audio signal decoded by the compressed stream decoding unit 1105 is output as sound according to an instruction of the reproduction start position signal Z.
- FIG. 12 illustrates the case where the compressed audio stream X recorded by the audio recording / playback apparatus is played back.
- 1201 indicates the frame number of the encoded frame of the compressed audio stream X.
- Reference numeral 1202 denotes the compressed stream X encoded by the compressed stream encoding unit 1103.
- Reference numeral 1203 denotes a frame number in which the encoded information H is multiplexed by the compressed stream encoding unit 1103.
- Reference numeral 1204 denotes the frame number of the compressed stream input to the compressed stream decoding unit 1105 during reproduction.
- Reference numeral 1205 denotes a reproduced digital audio signal Y output from the compressed stream decoding unit 1105 for each encoded frame and then output from the output control unit 1106.
- the vertical axis of 1205 indicates frequency, and the horizontal axis indicates time.
- the compressed stream encoding unit 1103 encodes the input audio signal S into a compressed stream and stores the encoded audio signal S in the recording medium 1101, and also encodes a frame index obtained by multiplexing the encoded information H into the encoded information index table 1102. To record.
- the compressed stream X is input to the compressed stream decoding unit 1105 from the position.
- the compressed stream decoding unit 1105 decodes the compressed stream X, and transmits the decoded reproduction audio signal Y and the decoded frame index N to the output control unit 1106 together.
- the reproduced audio signal Y ( 2), Y (4), Y (7), Y (8) can be output as a waveform having a correct frequency band obtained by extending the frequency band F1.
- FIG. 13 is a diagram showing an audio recording / reproducing apparatus according to the seventh embodiment.
- reference numeral 1301 denotes a coding information detection unit that detects coding information that is asynchronously multiplexed from the compressed stream and writes the frame position in the coding information index table 1102.
- Reference numeral 1302 denotes an index table determination unit that determines whether index information regarding a compressed stream to be decoded already exists in the encoded information index table 1102.
- a compressed stream decoding unit 1303 decodes the compressed stream.
- FIG. 14B shows the contents of the encoded information index table 1102 before reproducing the compressed stream X (3).
- FIG. 14C shows the contents of the encoded information index table 1102 after the compressed stream X (3) is reproduced.
- FIG. 15 is a diagram for explaining the reproduction of the compressed audio X (3) after the second time.
- 1501 indicates the compressed audio X (3).
- Reference numeral 1502 denotes a frame number of a compressed stream input to the compressed stream decoding unit 1105 during reproduction.
- Reference numeral 1503 denotes a reproduced digital audio signal Y output from the compressed stream decoding unit 1303 for each encoded frame and then output from the output control unit 1106.
- the vertical axis of 1503 indicates frequency, and the horizontal axis indicates time.
- the compressed stream control unit 1104 inputs the compressed stream X (3) into the compressed stream decoding unit 1303, the index table determination unit 1302, and the encoded information detection unit 1301.
- the index table determination unit 1302 determines whether an index table corresponding to the input compressed stream X (3) exists in the encoded information index table 1102 and gives the determination result to the encoded information detection unit 1301. Since it is determined that there is no index table corresponding to the compressed stream X (3), the encoded information detection unit 1301 detects encoded information from the compressed stream X (3), and as shown in FIG. An index table corresponding to the compressed stream X (3) based on the detection position of the encoded information is generated in the encoded information index table 1102.
- the compressed stream decoding unit 1105 decodes the compressed stream X by the compressed stream decoding unit 1303, and transmits the decoded reproduction audio signal Y and the decoded frame index N to the output control unit 1106.
- the playback audio signal can be output in a waveform having a correct frequency band that is expanded to the frequency band F1.
- FIG. 16 shows an example of an audio playback device in the eighth embodiment.
- reference numeral 1601 denotes a recording medium capable of recording compressed audio content. Although it is described as a medium that can be taken out from the device in the drawing, it may be realized by a flash memory or an optical disk that can be taken out from the device such as an SD card, or may be realized by an HDD built in the device.
- Reference numeral 1602 denotes a compressed audio playback device, and the components inside the device are configured to include at least one of the audio playback devices described in the first to seventh embodiments.
- Reference numeral 1603 denotes a speaker device such as a headphone.
- FIG. 17 is a block diagram showing a configuration of an AV stream reproducing apparatus according to the ninth embodiment.
- reference numeral 1701 denotes an AV configured by multiplexing a compressed audio stream in which time-series digital audio signals are grouped in units of encoded frames and a compressed video stream in which time-series digital video signals are grouped in units of pictures.
- This is a recording medium that can store multiplexed streams.
- the AV multiplexed stream control unit calculates the read position of the AV multiplexed stream from the recording medium 1701 on the basis of the resume additional information for determining whether or not it, the audio frame information, and the compressed video stream resume information.
- 1703 is an AV demultiplexing unit that separates the compressed audio stream and the compressed video stream from the AV multiplexed stream read by the AV multiplexed stream control unit 1702.
- Reference numeral 1704 denotes a compressed video stream decoding unit that decodes the compressed video stream into a digital video signal, constructs the compressed video stream resume information from the obtained decoding information, and sends the compressed video stream resume information to the AV multiplexed stream control unit 1702.
- Reference numeral 1705 denotes a compressed audio stream decoding unit that decodes the compressed audio stream into a digital audio signal and constructs the resume additional information based on the obtained decoding information and sends it to the AV multiplexed stream control unit 1702.
- 1706 is an AV synchronization unit that synchronizes temporally the decoding results output from the compressed video stream decoding unit 1704 and the compressed audio stream decoding unit 1705.
- Reference numeral 1707 denotes a video output control unit that determines whether or not output is possible according to the decoding result of the compressed video stream, and performs output.
- 1708 is an audio output control unit that outputs audio while performing mute and fade control according to the decoding result of the compressed audio stream.
- FIG. 18 shows an AV multiplexed stream V input to the AV stream reproducing apparatus, a compressed video stream W and a compressed audio stream X separated from the AV multiplexed stream V, and a compressed audio stream X decoded into a digital audio signal Y. It shows the relationship with the encoded information H necessary for conversion into a time series.
- reference numeral 1801 denotes an AV multiplexed stream V packet.
- Reference numeral 1802 denotes a compressed video stream W obtained by being separated from the AV multiplexed stream V.
- Reference numeral 1803 denotes a compressed audio stream X obtained by being separated from the AV multiplexed stream V.
- Reference numeral 1804 denotes encoded information H used for each encoded frame.
- Reference numeral 1806 denotes a reproduced digital audio signal Y output from the compressed audio stream decoding unit 1705 for each encoded frame.
- the vertical axis 1806 indicates frequency, and the horizontal axis indicates time.
- the AV multiplexed stream control unit 1702 reads the AV multiplexed stream packet including the encoded data D of the frame number specified by the frame index N from the recording medium 1701, and demultiplexes the compressed audio stream by the AV demultiplexing unit 1703.
- the corresponding encoded data is output to the compressed audio stream decoding unit 1705.
- the audio frame index N specifies frame number 1
- the AV multiplexed stream control unit 1702 reads the AV multiplexed packet V (1) including the audio frame number 1 and separates it by the AV demultiplexing unit 1703.
- the encoded data D (1) is output to the compressed audio stream decoding unit 1705.
- the compressed audio stream decoding unit 1705 extracts the encoded information H when decoding the compressed audio stream X.
- Resume additional information I (n) in which the encoded information H and the frame index N of the encoded frame are associated with each other is generated and sent to the AV multiplexed stream control unit 1702.
- FIG. 19 shows the compression additional information I (n) of the compressed audio stream, the encoded information frame index A of the compressed audio stream associated with the encoded information H, the frame index N of the decoded encoded frame,
- I (n) of the compressed audio stream the encoded information frame index A of the compressed audio stream associated with the encoded information H
- the frame index N of the decoded encoded frame This is a configuration example in the case of being configured with the packet index M of the AV multiplexed stream in which the encoded frame corresponding to the encoded information frame index A is multiplexed.
- the AV multiplexed stream control unit 1702 holds the resume additional information I (n) at the time when the reproduction interruption instruction is received among the resume additional information transmitted every frame, and when receiving the reproduction resumption instruction, Information is read from the resume additional information I (n), and AV multiplexing is performed so that both audio and video resume reproduction can be correctly performed from the packet index of the AV multiplexed stream stored as the audio resume position and the compressed video stream resume information.
- the encoded stream read position is determined, and the read AV multiplexed stream is input to the AV demultiplexing unit 1703 and input to the compressed audio stream decoding unit 1705 from the frame that matches the encoded information frame index A.
- the reproduced audio signals Y (2) to Y ( 5) can be output as a waveform having a correct frequency band expanded to the frequency band F1.
- FIG. 20 is a block diagram showing a configuration of an AV stream reproducing apparatus according to the tenth embodiment.
- reference numeral 2001 denotes an AV configured by multiplexing a compressed audio stream in which time-series digital audio signals are grouped in units of encoded frames and a compressed video stream in which time-series digital video signals are grouped in units of pictures.
- This is a recording medium that can store multiplexed streams.
- the interruption information storage memory 2002 is an interruption information storage memory that records a position to be resumed when a reproduction instruction is received next time when reproduction is interrupted as resume information.
- the interruption information storage memory 2002 is preferably composed of a non-volatile memory so that the information is not lost even if the power is cut off.
- the AV multiplexed stream is read from the recording medium 2001, and when the reproduction interruption instruction is received, the resume information including the AV multiplexed packet information, audio packet information, and video packet information at the time of interruption is stored in the interruption information storage memory 2002.
- the AV multiplexing stream control unit When receiving a reproduction restart instruction, the AV multiplexing stream control unit reads out resume information from the interruption information storage memory 2002 and determines an AV multiplexed stream read position from the recording medium 2001 and an output start position.
- AV demultiplexing unit 2004 is an AV demultiplexing unit that demultiplexes the AV multiplexed stream read by the AV multiplexed stream control unit 2003 into a compressed audio stream and a compressed video stream.
- a compressed video stream decoding unit that decodes the compressed video stream into a digital video signal and composes the compressed video stream resume information from the obtained decoding information and sends the compressed video stream resume information to the AV multiplexed stream control unit 2003.
- 2006 is a compressed stream decoding unit capable of decoding the compressed audio stream into a digital audio signal and transmitting the obtained decoding information to the AV multiplexed stream control unit 2003.
- Reference numeral 2007 denotes an AV synchronization unit that synchronizes temporally the decoding results output from the compressed video stream decoding unit 2005 and the compressed audio stream decoding unit 2006.
- 2009 is an audio output control unit that outputs audio while performing mute and fade control according to the decoding result of the compressed audio stream.
- FIG. 18 shows an AV multiplexed stream V input to the AV stream playback apparatus, a compressed video stream W and a compressed audio stream X separated from the AV multiplexed stream, and a compressed audio stream X decoded into a digital audio signal Y.
- the relationship with the encoding information H necessary for this is shown in time series.
- reference numeral 1801 denotes an AV multiplexed stream V packet.
- Reference numeral 1802 denotes a compressed video stream W obtained by being separated from the AV multiplexed stream V.
- Reference numeral 1803 denotes a compressed audio stream X obtained by being separated from the AV multiplexed stream V.
- Reference numeral 1804 denotes encoded information H used for each encoded frame.
- Reference numeral 1806 denotes a reproduced digital audio signal Y output from the compressed audio stream decoding unit 2006 for each encoded frame.
- the vertical axis 1806 indicates frequency, and the horizontal axis indicates time.
- the AV multiplexed stream control unit 2003 outputs the encoded data D of the frame number specified by the frame index N to the compressed audio stream decoding unit 2006. For example, when the frame index N specifies frame number 1, the AV multiplexed stream control unit 2003 outputs encoded data D (1) corresponding to the frame number 1 to the compressed audio stream decoding unit 2006.
- the compressed audio stream decoding unit 2006 extracts the encoded information H when decoding the compressed audio stream X.
- Resume additional information I (n) in which the encoded information H and the frame index N of the encoded frame are associated with each other is generated and sent to the AV multiplexed stream control unit 2003.
- FIG. 19 shows the compression additional information I (n) of the compressed audio stream, the encoded information frame index A of the compressed audio stream associated with the encoded information H, the frame index N of the decoded encoded frame,
- I (n) of the compressed audio stream the encoded information frame index A of the compressed audio stream associated with the encoded information H
- the frame index N of the decoded encoded frame This is a configuration example in the case of being configured with the packet index M of the AV multiplexed stream in which the encoded frame corresponding to the encoded information frame index A is multiplexed.
- the AV multiplexed stream control unit 2003 writes the resume additional information I (n) sent every frame in the interruption information storage memory 2002, and when receiving the reproduction interruption instruction, the frame of the encoded frame at the time when the interruption instruction is received. Write index N and compressed video stream resume information.
- the packet index M is set as the AV multiplexed stream read position for decoding the compressed audio stream
- the encoded information frame index A of the compressed audio stream is set as the compressed audio stream decoding start position
- the frame index N is set as the audio. Stored as the output start frame position.
- the information is read from the interruption information storage memory 2002, the resume information of the compressed video stream is compared with the resume information of the compressed audio stream, and the packet index M included in the resume information of the compressed audio stream is
- the AV multiplexed stream is read from the recording medium 2001 from the packet index M stored as the AV multiplexed stream read position for decoding the compressed audio stream, and is AV multiplexed.
- the compressed audio stream separated from the AV multiplexed stream by the AV demultiplexing unit 2004 is compressed from the frame that matches the encoded information frame index A.
- the AV demultiplexing unit 2004 can correctly resume the reproduction by adjusting the data input to the compressed audio decoding unit 2006 and the compressed video stream decoding unit 2005.
- FIG. 21 is a block diagram showing a configuration of an AV stream reproducing apparatus according to the eleventh embodiment.
- 20105 is a modification of the video output control unit 2008 in FIG. 20, in accordance with an instruction from the playback start position control unit 2104 to determine whether or not to output the playback digital video signal decoded by the compressed video stream decoding unit 2005 to the display device.
- This is a video output control unit that can be controlled.
- 2106 is a modification of the audio output control unit 2009 shown in FIG. 20, and controls whether or not to output the playback digital audio signal decoded by the compressed audio stream decoding unit 2006 as sound according to an instruction of the playback start position control unit 2104. This is an audio output control unit that can be used.
- the AV multiplexed stream control unit 2003 includes a stream read control unit 2101, a resume additional information write determination unit 2102, a resume information write unit 2103, and a playback start position control unit 2104.
- the stream read control unit 2101 reads the AV multiplexed stream from the recording medium 2001 and sends it to the AV demultiplexing unit 2004.
- the resume additional information write determination unit 2102 analyzes the resume additional information I (n) generated by the compressed audio stream decoding unit 2006, and only when the encoded information frame index A and the frame index N match, the interruption information storage memory 2002. To write to.
- the resume information writing unit 2103 writes the output of the resume additional information writing determination unit 2102 and the video resume information generated by the compressed video stream decoding unit 2005 in the interruption information storage memory 2002.
- the reproduction start position control unit 2104 reads the resume information from the interruption information storage memory 2002, instructs the stream read control unit 2101 to read from the frame indicated by the encoded information frame index A, and sends a frame to the audio output control unit 2106.
- the output start from the frame indicated by the index N is instructed.
- reference numeral 601 denotes the frame number of the encoded frame of the compressed audio stream X.
- Reference numeral 602 denotes a compressed audio stream X for each encoded frame.
- Reference numeral 603 denotes encoded information H used for each encoded frame of the compressed audio stream X.
- Reference numeral 604 denotes resume additional information I (n) generated by the compressed audio stream decoding unit 2006 for each encoded frame of the compressed audio stream X.
- Reference numeral 605 denotes the timing at which the resume additional information I (n) is permitted to be written by the resume additional information write determination unit 2102 and is written to the interruption information storage memory 2002 by the resume information writing unit 2103.
- Reference numeral 606 denotes a reproduced digital audio signal Y output from the compressed audio stream decoding unit 2006 for each encoded frame of the compressed audio stream X.
- the vertical axis of 606 indicates frequency, and the horizontal axis indicates time.
- the interrupt information storage memory 2002 decodes the frame in which the encoded information H is multiplexed. In this case, data is written only in the case where the bus is loaded on the interruption information storage memory 2002.
- FIG. 7 shows an example in which reproduction is resumed from encoded data D (3) in which encoded information H is not multiplexed.
- reference numeral 701 denotes the frame number of the encoded frame of the compressed audio stream X.
- Reference numeral 702 denotes a compressed audio stream X for each encoded frame.
- Reference numeral 703 denotes the timing at which the resume additional information I (n) is written in the interruption information storage memory 2002.
- Reference numeral 704 denotes a decoded signal Y passed from the compressed audio stream decoding unit 2006 to the audio output control unit 2106 for each encoded frame.
- Reference numeral 705 denotes a reproduction digital audio signal Z output from the audio output control unit 2106 to the outside.
- the vertical axes of 704 and 705 indicate frequency, and the horizontal axis indicates time.
- the encoded data D (1) of the frame index indicated by the resume additional information I (n) read from the interruption information storage memory 2002 is input to the compressed audio stream decoding unit 2006.
- the decoded signal of the encoded data D (1) is passed to the audio output control unit 2106.
- the reproduction start position control unit 2104 outputs the decoded signal D (3) as a reproduced audio signal to the audio output control unit 2106. By instructing to do so, a waveform having a correct frequency band extended from the correct restart position Z (3) to the frequency band F1 without outputting unnecessary decoded signals Y (1) and Y (2). Can be output.
- FIG. 22 is a block diagram showing a configuration of an AV stream reproducing apparatus according to the twelfth embodiment.
- reference numeral 2204 denotes a reproduction start position control unit that is provided in place of the reproduction start position control unit 2104 in FIG. 21 and can notify the compressed audio stream decoding unit 2006 of the reproduction start frame.
- the compressed audio stream decoding unit 2006 includes an encoded information analysis unit 2201, a frame skip circuit 2202, and a signal processing unit 2203.
- the encoded information analysis unit 2201 analyzes the compressed audio stream, extracts and stores encoded information in advance, and generates resume additional information I (n).
- the frame skip circuit 2202 determines whether the frame is an unnecessary frame based on the instruction from the reproduction start position control unit 2204 and the encoded information extracted by the encoded information analysis unit 2201. Control not to supply to
- the signal processing unit 2203 performs signal processing and decoding of the encoded data.
- FIG. 9 shows the operation when reproduction is resumed from the encoded data D (3) in time series.
- reference numeral 901 denotes the frame number of the encoded frame of the compressed audio stream X.
- Reference numeral 902 denotes a compressed audio stream X for each encoded frame that is input to the compressed audio stream decoding unit 2006 after resuming reproduction.
- Reference numeral 903 denotes resume additional information I (n) generated for each encoded frame by the encoded information analysis unit 2201.
- Reference numeral 904 denotes a reproduced digital audio signal Y decoded by the signal processing unit 2203 after the frame skip circuit 2202 determines whether it is an unnecessary frame.
- the vertical axis of 904 indicates frequency, and the horizontal axis indicates time.
- encoded data D (1) of the frame index indicated by the resume additional information I (n) is sequentially input to the compressed audio stream decoding unit 2006, but unnecessary frames are input by the frame skip circuit 2202. Are skipped to the signal processing unit 2203 from the encoded data D (3), which is a reproduction resume frame, so that the unnecessary frame D (1) and D (2) are decoded without being decoded.
- a waveform having a correct frequency band extended from Z (3) to the frequency band F1 can be output, and the processing load of signal processing can be reduced.
- FIG. 23 shows an example of an AV stream playback device in the thirteenth embodiment.
- reference numeral 2301 denotes a recording medium capable of recording AV multiplexed content. Although it is described as a medium that can be taken out from the device in the drawing, it may be realized by a flash memory or an optical disk that can be taken out from the device such as an SD card, or may be realized by an HDD built in the device.
- Reference numeral 2302 denotes an AV stream playback device, and the components inside the device are configured to include at least one of the AV stream playback devices described in the ninth to twelfth embodiments.
- Reference numeral 2303 denotes a speaker device that reproduces the audio signal output from the AV stream reproduction device 2302 as sound.
- Reference numeral 2304 denotes a display device that outputs the video signal output from the AV stream playback device 2302 as video.
- each component block of the audio playback device and AV stream playback device in the description of each embodiment described above can also be realized on a computer or a digital signal processor (DSP) by a software program.
- DSP digital signal processor
- the common band extension data is dispersed into a part of the encoded frames and encoded information is obtained.
- the encoding parameters used for decoding the core encoded data are distributed to some encoded frames. The same applies to the case where the encoded information is multiplexed.
- the encoded information is multiplexed.
- An audio playback device having a function of resuming playback from a point where playback is interrupted after being interrupted due to power interruption or the like, can be decoded even when decoding an encoded frame that is not performed,
- the present invention can be used for an audio playback apparatus having a function of performing special playback such as fast-forward playback for thinning out encoded frames.
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
オーディオ再生装置は、再生中断時のフレーム情報を保持する中断情報格納メモリ(202)と、記録メディア(201)から圧縮ストリームの読み出し位置を算出し読み出す圧縮ストリーム制御部(203)と、圧縮ストリームを復号化するとともに当該フレームの復号情報をレジューム付加情報として圧縮ストリーム制御部(203)に送る圧縮ストリーム復号部(204)と、復号結果の出力を行う出力制御部(205)とを備える。再生が一旦中断され再開される際に、レジューム付加情報と中断時のフレーム情報から圧縮ストリームの読み出し位置を算出し読み出すことで、時間的に再生されない区間や再生されない周波数帯域なく再生再開できる。
Description
本発明は、符号化情報が一部の符号化フレームに分散してかつ非同期に多重化される圧縮オーディオストリームに対して、電源断などで再生が中断された後に再生を再開するレジューム再生機能や早送り巻き戻しなどの特殊再生機能を持つオーディオ再生装置及び再生方法に関するものである。
従来のレジューム再生機能を持つオーディオ再生装置の構成および動作について図24,25を用いて説明する。
図24において、2401は時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームを格納できる記録メディアである。2402は再生中断時に次回再生指示を受けた際に再開すべき位置をレジューム情報として記録しておく中断情報格納メモリである。2403は記録メディア2401から圧縮オーディオストリームの読み出しを行い、再生中断指示を受けると中断時のフレーム情報を中断情報格納メモリ2402に格納し、再生再開指示を受けると中断情報格納メモリ2402からレジューム情報を読み出し記録メディア2401からの圧縮ストリーム読み出し位置の決定と出力開始位置の決定を行う圧縮ストリ-ム制御部である。2404は圧縮ストリーム制御部2403により読み出された圧縮オーディオストリームをディジタルオーディオ信号に復号するとともに得られた復号情報を圧縮ストリーム制御部2403に伝えることができる圧縮ストリーム復号部である。
従来のオーディオ再生装置のレジューム再生機能は、どのような位置で再生が中断されても、中断されたその位置から圧縮ストリームの再生を再開するか、中断された位置がファイル先頭付近の場合ファイル先頭から再開しファイル終端付近の場合次ファイルの先頭から再開するといった制御を行っている。
図25は、ファイル先頭付近や終端付近ではない符号化データD(n+3)で再生が中断され別の処理を実行した後に、符号化データD(n+3)から再開した場合の例である。
図25において、2501は圧縮オーディオストリームXの符号化フレーム毎のフレーム番号を示している。2502は、圧縮ストリーム復号部2404に入力される符号化フレーム毎の圧縮オーディオストリームXを示している。2503は、符号化フレーム毎に適用される符号化情報Hを示している。2504は、符号化フレーム毎に圧縮ストリーム復号部2404から出力される再生オーディオ信号Yの再生帯域幅を示す。2504の縦軸は周波数を、横軸は時間を各々示す。
圧縮オーディオストリームXを圧縮ストリーム復号部2404に入力すると、圧縮ストリーム復号部2404は、符号化データDと符号化情報Hを抽出し、符号化データD及び符号化情報Hから再生オーディオ信号Yを出力する。この場合、圧縮ストリーム復号部2404にフレーム番号n+3から投入されるので、フレーム番号n+3,n+4,n+5までの符号化データD(n+3)~D(n+5)を復号化するための符号化情報Hが圧縮ストリーム復号部2404に存在しないこととなる。したがって、フレーム番号n+3,n+4,n+5については、これらを復号化するための符号化情報Hが存在しないので、符号化データDを復号化して生成されたオーディオ信号Yの周波数帯域はF1まで拡張されず、周波数帯域幅はF0に留まってしまう。
なお、符号化情報が多重化されないフレーム番号n+7,n+8については、先行する符号化データD(n+6)に符号化情報H(n+6)が多重化されているために、コア符号化データから復号化したオーディオ信号Y(n+7),Y(n+8)の周波数帯域はF1まで拡張される。
このように非同期に多重化された符号化情報に基づいて復号化する圧縮ストリームの場合、符号化情報が多重化されたフレームから再開される保証がなく、符号化情報が多重化されていないフレームから再開された場合に、不再生区間が発生することによる違和感が生じる場合や、本来再生されるはずの周波数帯域の一部しか再生されないことによる音質劣化が生じる場合がある(例えば、特許文献1参照)。
特開2005-233980号公報(第9頁、第1図)
従来の構成では、符号化情報が一部の符号化フレームに分散して非同期に多重化される符号化オーディオ信号に復号化処理を施して再生オーディオ信号を復号化し出力する際に、電源断などにより再生が中断した後に再生再開する際に、符号化情報が多重化されない符号化フレームで、復号化処理を施すための符号化情報を抽出して適用することができない符号化フレームにおいては復号化処理の一部又は全ての処理が行えなくなり、再生オーディオ信号が出力されないか、もしくは再生オーディオ信号の品質が劣化する。
この課題を解決するために、本発明のオーディオ再生装置は、時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームに符号化フレームとは非同期に符号化情報を多重化して構成される圧縮オーディオストリームを再生可能なオーディオ再生装置において、再生が一旦中断され再開される際に、中断以前に記録された圧縮オーディオストリームに関する情報に基づいて、時間的に再生されない区間なく正しい周波数帯域まで拡張した波形で再生再開させることを特徴とする。
本発明のオーディオ再生装置は、圧縮オーディオストリームが記録された記録メディアと、再生中断以前の圧縮オーディオストリームのフレーム情報を保持するとともに、再生中断時に再開される場合に、復号したオーディオフレームが非同期に符号化情報が多重化されたものか判別するためのレジューム付加情報と前記オーディオフレーム情報とに基づいて、前記記録メディアから圧縮オーディオストリームの読み出し位置を算出する圧縮ストリーム制御手段と、前記圧縮ストリーム制御手段により読み出された圧縮オーディオストリームを復号化するとともに当該フレームの復号により得られる復号情報に基づいて前記レジューム付加情報を構成し前記圧縮ストリーム制御手段に送る圧縮ストリーム復号手段と、圧縮オーディオストリームの復号結果の出力可否を決定し出力を行う出力制御手段とを備えることを特徴とする。
本発明のオーディオ再生装置は、圧縮オーディオストリームが記録された記録メディアと、再生中断時の圧縮オーディオストリームのフレーム情報を保持するとともに前記記録メディアから圧縮オーディオストリームの読み出し位置を算出し読み出す圧縮ストリーム制御手段と、前記圧縮ストリーム制御手段により読み出された圧縮オーディオストリームを復号化するとともに当該フレームの復号により得られる復号情報のうち少なくとも非同期に符号化情報が多重化されたフレームを復号したかどうかを判別できる情報を含むようにして前記レジューム付加情報を構成し前記圧縮ストリーム制御手段に送る圧縮ストリーム復号手段と、圧縮オーディオストリームの復号結果の出力可否を決定し出力を行う出力制御手段と、圧縮オーディオストリームの再生中断時に再生再開に必要なレジューム情報を格納する中断情報格納メモリとを備え、再生が一旦中断され再開される際に前記圧縮ストリーム復号手段から送られたレジューム付加情報と中断時のフレーム情報から圧縮オーディオストリームの読み出し位置を算出し前記記録メディアから圧縮オーディオストリームを読み出すことで時間的に再生されない区間や再生されない周波数帯域なく再生再開できることを特徴とする。
前記圧縮ストリーム制御手段は、再生開始指示または再生再開指示を受けると前記記録メディアから圧縮オーディオストリームを読み出し、再生中断指示を受けると再生中のストリーム情報を前記中断情報格納メモリへ書き込む圧縮ストリーム読み出し制御手段と、前記中断情報格納メモリに中断情報が格納されていると前記記録メディアから圧縮オーディオストリームを読み出す位置を前記圧縮ストリーム読み出し制御手段に対し指示する再生開始位置制御手段と、前記圧縮ストリーム復号手段から前記中断情報格納メモリへ送られるレジューム付加情報に非同期に符号化情報が多重化されたフレームを復号したことが判別できる情報が含まれている場合に前記中断情報格納メモリに前記レジューム付加情報を随時書き込むレジューム付加情報書き込み判定手段とを有し、再生再開時にレジューム情報とレジューム付加情報から前記再生開始位置制御手段により読み出し位置の決定と前記出力制御手段による出力開始フレームの決定を行ってもよい。
前記圧縮ストリーム復号手段は、圧縮オーディオストリームの符号化フレームを解析し非同期に多重化された符号化情報を抽出するとともに抽出した符号化情報または前記符号化情報より得られる復号化補助情報と非同期に多重化された符号化情報を持つフレームのフレームインデックスのどちらか一方または両方と復号情報とを纏めてレジューム付加情報とし前記中断情報格納メモリに格納する符号化情報解析部と、復号化を行う信号処理部と、前記信号処理部へ入力する必要のないフレームを破棄するフレームスキップ回路とを有し、前記フレームスキップ回路は、前記中断情報格納メモリに格納されたレジューム情報とレジューム付加情報の前記非同期に多重化された符号化情報を持つフレームのフレームインデックスから信号処理部への入力を行うかどうかを判断し、レジューム情報のフレームインデックスを持つ符号化フレームが入力されるまでの不要な符号化フレームを前記信号処理部へ入力せずにスキップすることで正しい位置から再生再開するように構成してもよい。
AAC+SBRストリームの場合、レジューム付加情報は前記符号化情報解析部で抽出するAAC+SBRストリームのSBRヘッダに格納された情報と該ヘッダを持つフレームインデックスの両方または該ヘッダを持つフレームインデックスで構成してもよい。
MP3ストリームの場合、レジューム付加情報は前記符号化情報解析部で抽出するMP3ストリームの当該フレームを復号化するために必要となるメインデータの先頭を含む符号化フレームのフレームインデックスまたはメインデータの先頭が自フレーム内にある符号化フレームのフレームインデックスで構成してもよい。
上記課題を解決するために、本発明のオーディオ記録再生装置は、時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームに符号化フレームとは非同期に符号化情報を多重化して構成される圧縮オーディオストリームが記録再生可能なオーディオ記録再生装置において、圧縮オーディオストリームを記録する記録メディアと、符号化フレームとは非同期に符号化情報が多重化されたフレームのインデックスを保持する符号化情報インデックステーブルと、音声信号を圧縮ストリームに符号化するとともに当該圧縮ストリームに符号化情報を多重化する際に前記符号化情報インデックステーブルにフレーム位置情報を書き込む圧縮ストリーム符号手段と、再生位置と前記符号化情報インデックステーブルより圧縮オーディオストリーム投入位置を算出する圧縮ストリーム制御手段と、前記圧縮ストリーム制御手段から投入された圧縮オーディオストリームを復号する圧縮ストリーム復号手段と、復号結果の出力可否を判定する出力制御手段とを備え、再生時には前記圧縮ストリーム制御手段により投入された圧縮オーディオストリームを前記圧縮ストリーム復号手段で復号し再生開始位置より復号結果を出力するように前記出力制御手段で制御することで圧縮オーディオストリームの任意の位置からの再生においても時間的に再生できない区間や再生できない周波数帯域なく再生できることを特徴とする。
前記圧縮ストリーム復号手段は、圧縮オーディオストリームから非同期に多重化された符号化情報を検出しそのフレーム位置を前記符号化情報インデックステーブルに書き込む符号化情報検出部と、復号する圧縮オーディオストリームに関するインデックス情報が前記符号化情報インデックステーブルにすでに存在するかを判定するインデックステーブル判定部とを有し、前記インデックステーブル判定部により復号する圧縮オーディオストリームに関するインデックス情報が存在しないと判定された場合には、前記符号化情報検出部により前記符号化情報インデックステーブルにインデックス情報を追加することで、2回目以降の再生時に圧縮オーディオストリームの任意の位置からの再生において時間的に再生できない区間や再生できない周波数帯域なく再生できるように構成してもよい。
上記課題を解決するために、本発明のAVストリーム再生装置は、時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームに符号化フレームとは非同期に符号化情報を多重化して構成される圧縮オーディオストリームと、時系列のディジタル映像データをピクチャを単位として纏めた圧縮ビデオストリームとを多重化して構成されるAV多重化ストリームを再生可能なAVストリーム再生装置において、再生が一旦中断され再開される際に、中断以前に記録された圧縮オーディオストリームに関する情報に基づいて、少なくともオーディオ信号に関しては時間的に再生されない区間なく正しい周波数帯域まで拡張した波形で再生再開させることを特徴とする。
本発明のAVストリーム再生装置は、多重化ストリームが記録された記録メディアと、再生中断以前の圧縮オーディオストリームのフレーム情報を保持するとともに、再生中断時に再開される場合に、復号したオーディオフレームが非同期に符号化情報が多重化されたものか判別するためのレジューム付加情報と前記オーディオフレーム情報と圧縮ビデオストリームレジューム情報に基づいて、前記記録メディアからAV多重化ストリームの読み出し位置を算出するAV多重化ストリーム制御手段と、前記AV多重化ストリーム制御手段により読み出されたAV多重化ストリームから圧縮オーディオストリームと圧縮ビデオストリームとを分離するAV多重分離手段と、前記AV多重分離手段により分離された圧縮オーディオストリームを復号化するとともに当該フレームの復号により得られる復号情報から構成した前記レジューム付加情報と前記オーディオフレーム情報とを前記AV多重化ストリーム制御手段に送る圧縮オーディオストリーム復号手段と、前記AV多重分離手段により分離された圧縮ビデオストリームを復号化するとともに前記圧縮ビデオストリームレジューム情報を前記AV多重化ストリーム制御手段に送る圧縮ビデオストリーム復号手段と、圧縮オーディオストリームの復号結果の出力可否を決定し出力を行うオーディオ出力制御手段と、圧縮ビデオストリームの復号結果の出力可否を決定し出力を行うビデオ出力制御手段と、圧縮オーディオストリームの復号結果と圧縮ビデオストリーム復号結果の時間的な同期をとるAV同期手段とを備えることを特徴とする。
本発明のAVストリーム再生装置は、AV多重化ストリームが記録された記録メディアと、再生中断時のオーディオフレーム情報及びビデオフレーム情報のそれぞれを保持するとともに前記記録メディアからAV多重化ストリームの読み出し位置を算出し読み出すAV多重化ストリーム制御手段と、前記AV多重化ストリーム制御手段により読み出されたAV多重化ストリームを圧縮オーディオストリームと圧縮ビデオストリームに分離するAV多重分離手段と、前記AV多重分離手段により分離された圧縮オーディオストリームを復号化するとともに当該フレームの復号により得られる復号情報のうち少なくとも非同期に符号化情報が多重化されたフレーム復号をしたかどうかを判別できる情報を含むようにしてレジューム付加情報を構成し前記AV多重化ストリーム制御手段に送る圧縮オーディオストリーム復号手段と、前記AV多重分離手段により分離された圧縮ビデオストリームを復号するとともに圧縮ビデオストリームレジューム情報を前記AV多重化ストリーム制御手段に送る圧縮ビデオストリーム復号手段と、圧縮オーディオストリームの復号結果の出力可否を決定し出力を行うオーディオ出力制御手段と、圧縮ビデオストリームの復号結果の出力可否を決定し出力を行うビデオ出力制御手段と、圧縮オーディオストリームの復号結果と圧縮ビデオストリーム復号結果の同期をとるAV同期手段と、AV多重化ストリームの再生中断時に圧縮オーディオストリームの再生再開に必要な圧縮オーディオストリームレジューム情報と圧縮ビデオストリームの再生再開に必要な圧縮ビオストリームレジューム情報とを格納する中断情報格納メモリとを備え、再生が一旦中断され再開される際に、前記圧縮オーディオストリーム復号手段から送られたレジューム付加情報と中断時のフレーム情報から再生再開に必要となるオーディオフレームが含まれるAV多重化ストリームの位置を算出し、前記記録メディアからAV多重化ストリームを読み出すことで、少なくともオーディオストリームのレジューム再生に関しては時間的に再生されない区間や再生されない周波数帯域なく再生再開ができることを特徴とする。
前記AV多重化ストリーム制御手段は、再生開始指示または再生再開指示を受けると前記記録メディアからAV多重化ストリームを読み出し、再生中断指示を受けると再生中のストリーム情報を前記中断情報格納メモリへ書き込むAV多重化ストリーム読み出し制御手段と、前記中断情報格納メモリに中断情報が格納されていると前記記録メディアからAV多重化ストリームを読み出す位置を前記AV多重化ストリーム読み出し制御手段に対し指示する再生開始位置制御手段と、圧縮オーディオストリームのレジューム再生情報に関して前記圧縮オーディオストリーム復号手段から前記中断情報格納メモリへ送られるレジューム付加情報に非同期に符号化情報が多重化されたフレームを復号したことが判別できる情報が含まれている場合に前記中断情報格納メモリに前記レジューム付加情報を随時書き込むレジューム付加情報書き込み判定手段とを有し、少なくともオーディオのレジューム再生に関しては再生再開時に圧縮オーディオストリームレジューム情報と前記レジューム付加情報から前記再生開始位置制御手段により読み出し位置の決定と前記オーディオ出力制御手段による出力開始フレームの決定を行ってもよい。
前記圧縮オーディオストリーム復号手段は、符号化オーディオフレームを解析し非同期に多重化された符号化情報を抽出するとともに抽出した符号化情報または前記符号化情報より得られる復号化補助情報と非同期に多重化された符号化情報を持つフレームのフレームインデックスのどちらか一方または両方と復号情報とを纏めてレジューム付加情報とし前記中断情報格納メモリに格納する符号化情報解析部と、復号化を行う信号処理部と、前記信号処理部へ入力する必要のないフレームを破棄するフレームスキップ回路とを有し、前記フレームスキップ回路は、前記中断情報格納メモリに格納されたレジューム情報とレジューム付加情報の前記非同期に多重化された符号化情報を持つフレームのフレームインデックスから前記信号処理部への入力を行うかどうかを判断し、レジューム情報のフレームインデックスを持つ符号化フレームが入力されるまでの不要な符号化フレームを前記信号処理部へ入力せずにスキップすることで正しい位置から再生再開するように構成してもよい。
本発明によれば、時系列で連続する符号化フレームの途中の符号化フレームから復号化処理を行う場合や、早送り再生で符号化フレームを間引いて復号化処理を行う場合において、符号化情報が多重化されない符号化フレームから再生開始を指示された場合にも、非同期に多重化された符号化情報に基づいて復号化できるため、不再生区間が発生することによる違和感や符号化情報が多重化されたフレームが現れるまで再生されない周波数帯域が発生することによる音質の急激な変化を防ぐことが可能となる。また、中断情報をストリームのIDやユーザのIDと関連付けて記録することによって、複数ストリームや複数ユーザのレジューム再生や早送り再生でも不再生区間や再生されない周波数帯域が発生することなく再生することが可能となる。
101,201,1101,1601,1701,2001,2301…記録メディア
202,2002…中断情報格納メモリ
102,203,1104…圧縮ストリーム制御部
103,204,1105…圧縮ストリーム復号部
104,205,504,1106…出力制御部
501,2101…ストリーム読み出し制御部
502,2102…レジューム付加情報書き込み判定部
2103…レジューム情報書き込み部
503,2104,2204…再生開始位置制御部
801,2201…符号化情報解析部
802,2202…フレームスキップ回路
803,2203…信号処理部
1102…符号化情報インデックステーブル
1103…圧縮ストリーム符号部
1301…符号化情報検出部
1302…インデックステーブル判定部
1303…圧縮ストリーム復号部
1702,2003…AV多重化ストリーム制御部
1703,2004…AV多重分離部
1704,2005…圧縮ビデオストリーム復号部
1705,2006…圧縮オーディオストリーム復号部
1706,2007…AV同期部
1707,2008,2105…ビデオ出力制御部
1708,2009,2106…オーディオ出力制御部
202,2002…中断情報格納メモリ
102,203,1104…圧縮ストリーム制御部
103,204,1105…圧縮ストリーム復号部
104,205,504,1106…出力制御部
501,2101…ストリーム読み出し制御部
502,2102…レジューム付加情報書き込み判定部
2103…レジューム情報書き込み部
503,2104,2204…再生開始位置制御部
801,2201…符号化情報解析部
802,2202…フレームスキップ回路
803,2203…信号処理部
1102…符号化情報インデックステーブル
1103…圧縮ストリーム符号部
1301…符号化情報検出部
1302…インデックステーブル判定部
1303…圧縮ストリーム復号部
1702,2003…AV多重化ストリーム制御部
1703,2004…AV多重分離部
1704,2005…圧縮ビデオストリーム復号部
1705,2006…圧縮オーディオストリーム復号部
1706,2007…AV同期部
1707,2008,2105…ビデオ出力制御部
1708,2009,2106…オーディオ出力制御部
(第1の実施形態)
まず、本発明の第1の実施形態におけるオーディオ再生装置について図面を参照しながら説明する。
まず、本発明の第1の実施形態におけるオーディオ再生装置について図面を参照しながら説明する。
図1は第1の実施形態におけるオーディオ再生装置を示すブロック図である。図1において、101は時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームを格納できる記録メディアである。102は再生中断以前のフレーム情報を保持するとともに、再生中断時に再開される場合に、復号したフレームが非同期に多重化されたものか判別するためのレジューム付加情報と前記フレーム情報とに基づいて、記録メディア101から圧縮ストリームの読み出し位置を算出する圧縮ストリ-ム制御部である。103は圧縮ストリーム制御部102により読み出された圧縮オーディオストリームをディジタルオーディオ信号に復号するとともに得られた復号情報に基づいて前記レジューム付加情報を構成し圧縮ストリーム制御部102に送る圧縮ストリーム復号部である。104は復号結果に従ってミュートやフェード制御を行いながら出力をする出力制御部である。
本オーディオ再生装置の基本動作を図3,4を用いて説明する。
図3は、本オーディオ再生装置に入力する圧縮オーディオストリームXと、この圧縮オーディオストリームXをディジタルオーディオ信号Yに復号化するのに必要な符号化情報Hとの関係を時系列的に示したものである。図3において、301は圧縮オーディオストリームXの符号化フレームのフレーム番号を示している。302は符号化フレーム毎の圧縮オーディオストリームXを示している。303は符号化フレーム毎に利用される符号化情報Hを示している。304は符号化フレーム毎に圧縮ストリーム復号部103により生成されるレジューム付加情報I(n)[n=1,2,3,…]を示す。305は符号化フレーム毎に圧縮ストリーム復号部103から出力される再生ディジタルオーディオ信号Yを示す。305の縦軸は周波数を、横軸は時間を各々示す。
図3に示すように、圧縮オーディオストリームXは、符号化データD(m)[m=1,2,3,…]と,符号化情報H(n)[n=1,2,3,…]とを含んでいる。
圧縮ストリーム制御部102は、フレームインデックスNが指定するフレーム番号の符号化データDを圧縮ストリーム復号部103に出力する。例えば、フレームインデックスNがフレーム番号1を指定すると、圧縮ストリーム制御部102はフレーム番号1に対応する符号化データD(1)を圧縮ストリーム復号部103に出力する。
圧縮ストリーム復号部103は、圧縮オーディオストリームXを復号する際に符号化情報Hを抽出する。そして、符号化情報Hと符号化フレームのフレームインデックスNとを対応させたレジューム付加情報I(n)を生成し、圧縮ストリーム制御部102に送る。
図4は、レジューム付加情報I(n)を、符号化情報Hに対応付けられた符号化情報フレームインデックスAと復号化した符号化フレームのフレームインデックスNとで構成した場合の構成例である。圧縮ストリーム制御部102は、毎フレーム送られてくるレジューム付加情報のうち、再生中断指示を受け取った時点でのレジューム付加情報I(n)を保持し、再生再開指示を受けた際に、レジューム付加情報I(n)から情報を読み出し、圧縮ストリーム読み出し位置として記憶していた符号化情報フレームインデックスAと一致するフレームから圧縮ストリーム復号部103に投入する。これにより、符号化情報Hが多重化されていない符号化データD(m)[m=2,3,4,5]から再生が再開された場合にも再生オーディオ信号Y(2)~Y(5)を周波数帯域F1まで拡張した正しい周波数帯域を持つ波形で出力することができる。
(第2の実施形態)
図2は第2の実施形態におけるオーディオ再生装置の構成を示すブロック図である。図2において、201は時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームを格納できる記録メディアである。202は再生中断時に次回再生指示を受けた際に再開すべき位置をレジューム情報として記録しておく中断情報格納メモリである。中断情報格納メモリ202は電源断等が発生しても情報が消えないように不揮発性メモリで構成されることが望ましい。203は記録メディア201から圧縮オーディオストリームの読み出しを行い、再生中断指示を受けると中断時のフレーム情報を中断情報格納メモリ202に格納し、再生再開指示を受けると中断情報格納メモリ202からレジューム情報を読み出し記録メディア201からの圧縮ストリーム読み出し位置の決定と出力開始位置の決定を行う圧縮ストリ-ム制御部である。204は圧縮ストリーム制御部203により読み出された圧縮オーディオストリームをディジタルオーディオ信号に復号するとともに得られた復号情報を圧縮ストリーム制御部203に伝えることができる圧縮ストリーム復号部である。205は復号結果に従ってミュートやフェード制御を行いながら出力をする出力制御部である。
図2は第2の実施形態におけるオーディオ再生装置の構成を示すブロック図である。図2において、201は時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームを格納できる記録メディアである。202は再生中断時に次回再生指示を受けた際に再開すべき位置をレジューム情報として記録しておく中断情報格納メモリである。中断情報格納メモリ202は電源断等が発生しても情報が消えないように不揮発性メモリで構成されることが望ましい。203は記録メディア201から圧縮オーディオストリームの読み出しを行い、再生中断指示を受けると中断時のフレーム情報を中断情報格納メモリ202に格納し、再生再開指示を受けると中断情報格納メモリ202からレジューム情報を読み出し記録メディア201からの圧縮ストリーム読み出し位置の決定と出力開始位置の決定を行う圧縮ストリ-ム制御部である。204は圧縮ストリーム制御部203により読み出された圧縮オーディオストリームをディジタルオーディオ信号に復号するとともに得られた復号情報を圧縮ストリーム制御部203に伝えることができる圧縮ストリーム復号部である。205は復号結果に従ってミュートやフェード制御を行いながら出力をする出力制御部である。
本オーディオ再生装置の基本動作を図3,4を用いて説明する。
図3は、本オーディオ再生装置に入力する圧縮オーディオストリームXと、この圧縮オーディオストリームXをディジタルオーディオ信号Yに復号化するのに必要な符号化情報Hとの関係を時系列的に示したものである。図3において、301は圧縮オーディオストリームXの符号化フレームのフレーム番号を示している。302は符号化フレーム毎の圧縮オーディオストリームXを示している。303は符号化フレーム毎に利用される符号化情報Hを示している。304は符号化フレーム毎に圧縮ストリーム復号部204により生成されるレジューム付加情報I(n)[n=1,2,3・・・]を示す。305は符号化フレーム毎に圧縮ストリーム復号部204から出力される再生ディジタルオーディオ信号Yを示す。305の縦軸は周波数を、横軸は時間を各々示す。
図3に示すように、圧縮オーディオストリームXは、符号化データD(m)[m=1,2,3,…]と,符号化情報H(n)[n=1,2,3,…]とを含んでいる。
圧縮ストリーム制御部203は、フレームインデックスNが指定するフレーム番号の符号化データDを圧縮ストリーム復号部204に出力する。例えば、フレームインデックスNがフレーム番号1を指定すると、圧縮ストリーム制御部203はフレーム番号1に対応する符号化データD(1)を圧縮ストリーム復号部204に出力する。
圧縮ストリーム復号部204は、圧縮オーディオストリームXを復号する際に符号化情報Hを抽出する。そして、符号化情報Hと符号化フレームのフレームインデックスNとを対応させたレジューム付加情報I(n)を生成し、圧縮ストリーム制御部203に送る。
図4は、レジューム付加情報I(n)を、符号化情報Hに対応付けられた符号化情報フレームインデックスAと復号化した符号化フレームのフレームインデックスNとで構成した場合の構成例である。圧縮ストリーム制御部203は、毎フレーム送られてくるレジューム付加情報I(n)を中断情報格納メモリ202に書き込み、再生中断指示を受け取ると中断指示を受け取った時点での符号化フレームのフレームインデックスNを書き込む。中断情報格納メモリ202には、符号化情報フレームインデックスAを圧縮ストリーム読み出し位置とし、フレームインデックスNを出力開始フレーム位置として格納される。
そして、再生再開指示を受けた際に、中断情報格納メモリ202から情報を読み出し、圧縮ストリーム読み出し位置として記憶していた符号化情報フレームインデックスAと一致するフレームから圧縮ストリーム復号部204に投入する。これにより、符号化情報Hが多重化されていない符号化データD(m)[m=2,3,4,5]から再生が再開された場合にも再生オーディオ信号Y(2)~Y(5)を周波数帯域F1まで拡張した正しい周波数帯域を持つ波形で出力することができる。
(第3の実施形態)
図5は第3の実施形態におけるオーディオ再生装置の構成を示すブロック図である。
図5は第3の実施形態におけるオーディオ再生装置の構成を示すブロック図である。
504は図1の出力制御部205を変更したもので、圧縮ストリーム復号部204で復号化された再生ディジタルオーディオ信号を音として出力するかどうかを再生開始位置制御部503の指示に従い制御できるようにした出力制御部である。
圧縮ストリーム制御部203は、ストリーム読み出し制御部501と、レジューム付加情報書き込み判定部502と、再生開始位置制御部503を有している。ストリーム読み出し制御部501は、圧縮オーディオストリームを記録メディア201から読み出し圧縮ストリーム復号部204に送る。レジューム付加情報書き込み判定部502は、圧縮ストリーム復号部204により生成されたレジューム付加情報I(n)を解析し符号化情報フレームインデックスAとフレームインデックスNが一致した場合にのみ中断情報格納メモリ202に書き込む。再生開始位置制御部503は、中断情報格納メモリ202からレジューム情報を読み出し、ストリーム読み出し制御部501に対し符号化情報フレームインデックスAが示すフレームからの読み出しを指示するとともに出力制御部504に対しフレームインデックスNが示すフレームからの出力開始を指示する。
この実施の形態におけるオーディオ再生装置の動作を図6,7を用いて説明する。
図6において、601は圧縮オーディオストリームXの符号化フレームのフレーム番号を示している。602は符号化フレーム毎の圧縮オーディオストリームXを示している。603は符号化フレーム毎に利用される符号化情報Hを示している。604は符号化フレーム毎に圧縮ストリーム復号部204により生成されるレジューム付加情報I(n)を示す。605はレジューム付加情報書き込み判定部502によって中断情報格納メモリ202にレジューム付加情報I(n)が書き込まれるタイミングを示す。606は符号化フレーム毎に圧縮ストリーム復号部204から出力される再生ディジタルオーディオ信号Yを示す。606の縦軸は周波数を、横軸は時間を各々示す。
図6に示すように、圧縮ストリーム復号部204によりレジューム付加情報I(n)は毎フレーム生成されているが、中断情報格納メモリ202へは符号化情報Hが多重化されているフレームを復号した場合にのみ書き込まれるようになり、中断情報格納メモリ202へのバス負荷を低減できる。
図7は、符号化情報が多重化されていない符号化データD(3)から再生再開された場合の例である。図7において、701は圧縮オーディオストリームXの符号化フレームのフレーム番号を示している。702は符号化フレーム毎の圧縮オーディオストリームXを示している。703は中断情報格納メモリ202にレジューム付加情報I(n)が書き込まれるタイミングを示す。704は符号化フレーム毎に圧縮ストリーム復号部204から出力制御部504へ渡される復号信号Yを示す。705は出力制御部504から外部へ出力される再生ディジタルオーディオ信号Zを示す。704及び705の縦軸は周波数を、横軸は時間を各々示す。
図7に示すように、中断情報格納メモリ202から読み出したレジューム付加情報I(n)に示されるフレームインデックスの符号化データD(1)から圧縮ストリーム復号部204に投入されることになるため、符号化データD(1),D(2)の復号信号Y(1),Y(2)が出力制御部504に渡されているが、再生開始位置制御部503により出力制御部504に対しD(3)の復号信号Y(3)から再生オーディオ信号として出力するように指示することで、不要な復号信号Y(1),Y(2)を出力することなく、正しい再開位置であるZ(3)から再生オーディオ信号Zを、周波数帯域F1まで拡張した正しい周波数帯域を持つ波形で出力することができる。
(第4の実施形態)
図8は第4の実施形態におけるオーディオ再生装置の構成を示すブロック図である。図8において、804は、図5の再生開始位置制御部503に代えて設けられ、圧縮ストリーム復号部204に再生開始フレームを通知できるようにした再生開始位置制御部である。
図8は第4の実施形態におけるオーディオ再生装置の構成を示すブロック図である。図8において、804は、図5の再生開始位置制御部503に代えて設けられ、圧縮ストリーム復号部204に再生開始フレームを通知できるようにした再生開始位置制御部である。
圧縮ストリーム復号部204は、符号化情報解析部801と、フレームスキップ回路802と、信号処理部803とを有している。符号化情報解析部801は、圧縮オーディオストリームを解析し予め符号化情報を抽出し記憶するとともにレジューム付加情報I(n)を生成する。フレームスキップ回路802は、再生開始位置制御部804からの指示と符号化情報解析部801にて抽出した符号化情報により不要フレームかどうかを判断し不要な場合には符号化データを信号処理部803に供給しないように制御する。信号処理部803は符号化データを信号処理し復号化する。
この実施の形態におけるオーディオ再生装置の動作を図9を用いて説明する。
図9は、符号化データD(3)から再生再開された場合の動作を時系列に表したものである。図9において、901は圧縮オーディオストリームXの符号化フレームのフレーム番号を示している。902は再生再開後に圧縮ストリーム復号部204に投入される符号化フレーム毎の圧縮オーディオストリームXを示している。903は符号化フレーム毎に利用される符号化情報Hを示している。904は符号化情報解析部801によって符号化フレーム毎に生成されるレジューム付加情報I(n)を示す。905は信号処理部803に投入される符号化フレーム毎の圧縮オーディオストリームXを示している。906はフレームスキップ回路802によって不要フレームかどうかを判定された後に信号処理部803によって復号された再生ディジタルオーディオ信号Yを示す。906の縦軸は周波数を、横軸は時間を各々示す。
図9に示すように、圧縮ストリーム復号部204へはレジューム付加情報I(n)に示されるフレームインデックスの符号化データD(1)から順に投入されているが、符号化データD(1),D(2)はフレームスキップ回路802により不要フレームとしてスキップされ信号処理部803へは再生再開フレームである符号化データD(3)から投入することで、不要フレームD(1),D(2)の復号をすることなく、正しい再開位置であるZ(3)から再生オーディオ信号Yを、周波数帯域F1まで拡張した正しい周波数帯域を持つ波形で出力することができ、信号処理の処理負荷も低減できる。
(第5の実施形態)
図10は第5の実施形態におけるレジューム付加情報I(n)の構成例であり、入力される圧縮オーディオストリームがAAC+SBRの場合の例として、符号化情報フレームインデックスAと符号化情報Hの両方を用いてレジューム付加情報I(n)を構成した場合の図である。
図10は第5の実施形態におけるレジューム付加情報I(n)の構成例であり、入力される圧縮オーディオストリームがAAC+SBRの場合の例として、符号化情報フレームインデックスAと符号化情報Hの両方を用いてレジューム付加情報I(n)を構成した場合の図である。
図10において、レジューム付加情報I(n)は、SBRヘッダが含まれている符号化フレームのフレームインデックスを符号化情報フレームインデックスAとして用い、SBRヘッダを解析して得られる再生ディジタルオーディオ信号Yの周波数拡張に用いるパラメータ群で符号化情報Hを構成している。図10のように構成した場合、中断情報格納メモリ202から符号化情報Hを直接取り出して圧縮ストリーム復号部204で利用するようにし、圧縮ストリーム復号部204へのストリーム投入を中断フレームから再開するようにしてもよい。
本実施例ではAAC+SBRを例とし符号化情報フレームインデックスAと符号化情報Hの両方でレジューム付加情報I(n)を構成したが、メモリ削減のために符号化情報フレームインデックスAだけでレジューム付加情報I(n)を構成してもよい。また、MP3の場合も、同様に、符号化情報フレームインデックスAを、メインデータの先頭が自フレーム内にある符号化フレームのフレームインデックス,または,当該フレームのデコードに必要なメインデータの先頭を含む符号化フレームのフレームインデックスとしてレジューム付加情報I(n)を構成することで正しい位置からの再生再開ができる。
(第6の実施形態)
図11は第6の実施形態におけるオーディオ記録再生装置の構成を示すブロック図である。図11において、1101は時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームを格納できる記録メディアである。1102は符号化情報が多重化されているフレームのインデックスを保持する符号化情報インデックステーブルである。1103は入力された音声信号を圧縮ストリームに符号化する圧縮ストリーム符号部である。1104は記録メディア1101から圧縮オーディオストリームの読み出しを行い、再生再開指示を受けると記録メディア1101からの圧縮ストリーム読み出し位置の決定と出力開始位置の決定を行う圧縮ストリ-ム制御部である。1105は圧縮ストリーム制御部1104により読み出された圧縮オーディオストリームをディジタルオーディオ信号に復号するとともに得られた復号情報を圧縮ストリーム制御部1104に伝えることができる圧縮ストリーム復号部である。1106は圧縮ストリーム復号部1105で復号化された再生ディジタルオーディオ信号を音として出力するかどうかを再生開始位置信号Zの指示に従い制御する出力制御部である。
図11は第6の実施形態におけるオーディオ記録再生装置の構成を示すブロック図である。図11において、1101は時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームを格納できる記録メディアである。1102は符号化情報が多重化されているフレームのインデックスを保持する符号化情報インデックステーブルである。1103は入力された音声信号を圧縮ストリームに符号化する圧縮ストリーム符号部である。1104は記録メディア1101から圧縮オーディオストリームの読み出しを行い、再生再開指示を受けると記録メディア1101からの圧縮ストリーム読み出し位置の決定と出力開始位置の決定を行う圧縮ストリ-ム制御部である。1105は圧縮ストリーム制御部1104により読み出された圧縮オーディオストリームをディジタルオーディオ信号に復号するとともに得られた復号情報を圧縮ストリーム制御部1104に伝えることができる圧縮ストリーム復号部である。1106は圧縮ストリーム復号部1105で復号化された再生ディジタルオーディオ信号を音として出力するかどうかを再生開始位置信号Zの指示に従い制御する出力制御部である。
本オーディオ記録再生装置の基本動作を図12を用いて説明する。
図12は、本オーディオ記録再生装置で記録した圧縮オーディオストリームXを再生する場合の説明である。図12において、1201は圧縮オーディオストリームXの符号化フレームのフレーム番号を示している。1202は圧縮ストリーム符号部1103により符号化された圧縮ストリームXを示している。1203は圧縮ストリーム符号部1103で符号化情報Hを多重化したフレーム番号を示す。1204は再生時に圧縮ストリーム復号部1105に投入される圧縮ストリームのフレーム番号を示している。1205は符号化フレーム毎に圧縮ストリーム復号部1105から出力された後、出力制御部1106により出力される再生ディジタルオーディオ信号Yを示す。1205の縦軸は周波数を、横軸は時間を各々示す。
図12に示すように、圧縮オーディオストリームXは、符号化データD(m)[m=1,2,3,…]と,符号化情報H(n)[n=1,2,3,…]とを含んだものとなっている。
圧縮ストリーム記録時に、圧縮ストリーム符号部1103は、入力された音声信号Sを圧縮ストリームに符号化して記録メディア1101に格納するとともに、符号化情報Hを多重化したフレームインデックスを符号化情報インデックステーブル1102に記録する。
圧縮ストリーム再生時には、圧縮ストリーム制御部1104はフレームインデックス符号化情報インデックステーブル1102に記録されているフレームインデックスから再生開始位置Zの直前のフレームインデックスK(K=3)を取得し、フレームインデックスKの位置から圧縮ストリームXを圧縮ストリーム復号部1105へ投入する。圧縮ストリーム復号部1105は、圧縮ストリームXを復号し、復号した再生オーディオ信号Yと復号したフレームインデックスNを合わせて出力制御部1106に伝送する。出力制御部1106は再生オーディオ信号YのフレームインデックスNが再生再開位置Z(Z=5)と一致するかどうかの判定を行い、一致したフレーム以降の再生オーディオ信号Y(n)[n=5,6,7,…]を出力する。
自ら記録した圧縮オーディオを再生する場合に、符号化情報Hが多重化されていないフレームD(m)[m=2,4,5,7,8]から再生された場合でも再生オーディオ信号Y(2),Y(4),Y(7),Y(8)を周波数帯域F1まで拡張した正しい周波数帯域を持つ波形で出力することができる。
(第7の実施形態)
図13は第7の実施形態におけるオーディオ記録再生装置を示す図である。図13において、1301は圧縮ストリームから非同期に多重化された符号化情報を検出しそのフレーム位置を符号化情報インデックステーブル1102に書き込む符号化情報検出部である。1302は復号する圧縮ストリームに関するインデックス情報が符号化情報インデックステーブル1102にすでに存在するかを判定するインデックステーブル判定部である。1303は圧縮ストリームを復号する圧縮ストリーム復号部である。
図13は第7の実施形態におけるオーディオ記録再生装置を示す図である。図13において、1301は圧縮ストリームから非同期に多重化された符号化情報を検出しそのフレーム位置を符号化情報インデックステーブル1102に書き込む符号化情報検出部である。1302は復号する圧縮ストリームに関するインデックス情報が符号化情報インデックステーブル1102にすでに存在するかを判定するインデックステーブル判定部である。1303は圧縮ストリームを復号する圧縮ストリーム復号部である。
この実施の形態におけるオーディオ記録再生装置の動作を図14,図15を用いて説明する。
図14は圧縮オーディオX(n)[n=1,2,3]と、符号化情報インデックステーブル1102の内容の対応を示している。図14(a)は圧縮オーディオX(n)[n=1,2,3]を示している。図14(b)は圧縮ストリームX(3)を再生する前の符号化情報インデックステーブル1102の内容を示す。図14(c)は圧縮ストリームX(3)の再生後の符号化情報インデックステーブル1102の内容を示す。
図15は2回目以降の圧縮オーディオX(3)の再生を説明する図である。図15において、1501は圧縮オーディオX(3)を示す。1502は再生時に圧縮ストリーム復号部1105に投入される圧縮ストリームのフレーム番号を示している。1503は符号化フレーム毎に圧縮ストリーム復号部1303から出力された後、出力制御部1106により出力される再生ディジタルオーディオ信号Yを示す。1503の縦軸は周波数を、横軸は時間を各々示す。
圧縮ストリームX(3)の初回再生時に、圧縮ストリーム制御部1104は圧縮ストリーム復号部1303とインデックステーブル判定部1302と符号化情報検出部1301に圧縮ストリームX(3)を投入する。インデックステーブル判定部1302は投入された圧縮ストリームX(3)に対応するインデックステーブルが符号化情報インデックステーブル1102に存在するかどうかを判定し、判定結果を符号化情報検出部1301に与える。符号化情報検出部1301は圧縮ストリームX(3)に対応するインデックステーブルが存在しないと判定されたため圧縮ストリームX(3)から符号化情報の検出を行い、図14(c)に示すように、符号化情報の検出位置をもとにした圧縮ストリームX(3)に対応するインデックステーブルを符号化情報インデックステーブル1102に生成する。
2回目以降の圧縮ストリームX(3)の再生では、圧縮ストリーム制御部1104は符号化情報インデックステーブル1102に記録されている圧縮ストリームX(3)に対応するインデックステーブルから再生開始位置Z(Z=4)の直前のフレームインデックスK(K=3)を取得し、1502で示すように取得したフレームインデックスK(K=3)から圧縮ストリームXを圧縮ストリーム復号部1105へ投入する。圧縮ストリーム復号部1105は、圧縮ストリーム復号部1303により圧縮ストリームXを復号し、復号した再生オーディオ信号Yと復号したフレームインデックスNを合わせて出力制御部1106に伝送する。出力制御部1106は再生オーディオ信号YのフレームインデックスNが再生再開位置Z(Z=4)と一致するかどうかの判定を行い、1503で示すように一致したフレーム以降の再生オーディオ信号Y(n)[n=4,5,6,7,…]を出力する。
このように、本オーディオ記録再生装置以外で記録された圧縮ストリームを再生する場合に、初回再生時に符号化情報インデックステーブルを生成し、2回目以降の再生においては符号化情報Hが多重化されていないフレームからから再生された場合でも再生オーディオ信号を周波数帯域F1まで拡張した正しい周波数帯域を持つ波形で出力することができる。
(第8の実施形態)
図16は第8の実施形態におけるオーディオ再生機器の例である。図16において、1601は圧縮オーディオコンテンツを記録できる記録メディアである。図面では機器から取り出せるメディアとして記載しているが、SDカードのような機器から取り出し可能なフラッシュメモリや光ディスクで実現しても良いし、機器に内蔵されたHDD等で実現しても良い。1602は圧縮オーディオ再生機器であり、機器内部の構成要素は上記第1~7の実施形態に記載したオーディオ再生装置のうち少なくとも1つを含むように構成される。1603はヘッドフォンのようなスピーカー装置である。このようにオーディオ再生機器を構成することで、再生を一旦中断した後に再開させた場合にも、再生されない区間なく即座に正しい周波数帯域まで拡張された出力オーディオ信号を得ることができる。
図16は第8の実施形態におけるオーディオ再生機器の例である。図16において、1601は圧縮オーディオコンテンツを記録できる記録メディアである。図面では機器から取り出せるメディアとして記載しているが、SDカードのような機器から取り出し可能なフラッシュメモリや光ディスクで実現しても良いし、機器に内蔵されたHDD等で実現しても良い。1602は圧縮オーディオ再生機器であり、機器内部の構成要素は上記第1~7の実施形態に記載したオーディオ再生装置のうち少なくとも1つを含むように構成される。1603はヘッドフォンのようなスピーカー装置である。このようにオーディオ再生機器を構成することで、再生を一旦中断した後に再開させた場合にも、再生されない区間なく即座に正しい周波数帯域まで拡張された出力オーディオ信号を得ることができる。
(第9の実施形態)
図17は第9の実施形態におけるAVストリーム再生装置の構成を示すブロック図である。
図17は第9の実施形態におけるAVストリーム再生装置の構成を示すブロック図である。
図17において、1701は時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮オーディオストリームと時系列のディジタル映像信号をピクチャを単位として纏めた圧縮ビデオストリームとを多重化して構成されるAV多重化ストリームを格納できる記録メディアである。
1702は再生中断以前のAV多重化ストリーム読み出し位置とオーディオフレーム情報と圧縮ビデオストリームレジューム情報とを保持するとともに、再生中断後に再開される場合に、復号したオーディオフレームが非同期に情報が多重化されたものか判別するためのレジューム付加情報と前記オーディオフレーム情報と前記圧縮ビデオストリームレジューム情報とに基づいて、記録メディア1701からAV多重化ストリームの読み出し位置を算出するAV多重化ストリーム制御部である。
1703はAV多重化ストリーム制御部1702により読み出されたAV多重化ストリームから圧縮オーディオストリームと圧縮ビデオストリームとを分離するAV多重分離部である。
1704は圧縮ビデオストリームをディジタル映像信号に復号するとともに得られた復号情報から前記圧縮ビデオストリームレジューム情報を構成しAV多重化ストリーム制御部1702に送る圧縮ビデオストリーム復号部である。
1705は圧縮オーディオストリームをディジタルオーディオ信号に復号するとともに得られた復号情報に基づいて前記レジューム付加情報を構成しAV多重化ストリーム制御部1702に送る圧縮オーディオストリーム復号部である。
1706は圧縮ビデオストリーム復号部1704と圧縮オーディオストリーム復号部1705から出力されるそれぞれの復号結果の時間的な同期合わせを行うAV同期部である。
1707は圧縮ビデオストリームの復号結果に従って出力可否を決定し出力を行うビデオ出力制御部である。
1708は圧縮オーディオストリームの復号結果に従ってミュートやフェード制御を行いながらオーディオの出力をするオーディオ出力制御部である。
本AVストリーム再生装置の基本動作を図18,19を用いて説明する。
図18は、本AVストリーム再生装置に入力するAV多重化ストリームVと、AV多重化ストリームVから分離される圧縮ビデオストリームWと圧縮オーディオストリームXと、圧縮オーディオストリームXをディジタルオーディオ信号Yに復号化するのに必要な符号化情報Hとの関係を時系列的に示したものである。
図18において、1801はAV多重化ストリームVのパケットを示している。1802はAV多重化ストリームVから分離して得られる圧縮ビデオストリームWを示している。1803はAV多重化ストリームVから分離して得られる圧縮オーディオストリームXを示している。1804は符号化フレーム毎に利用される符号化情報Hを示している。1805は符号化フレーム毎に圧縮オーディオストリーム復号部1705により生成されるレジューム付加情報I(n)[n=1,2,3,…]を示す。1806は符号化フレーム毎に圧縮オーディオストリーム復号部1705から出力される再生ディジタルオーディオ信号Yを示す。1806の縦軸は周波数を、横軸は時間を各々示す。
図18に示すように、圧縮オーディオストリームXは、符号化データD(m)[m=1,2,3,…]と,符号化情報H(n)[n=1,2,3,…]とを含んだものとなっている。
AV多重化ストリーム制御部1702は、フレームインデックスNが指定するフレーム番号の符号化データDを含むAV多重化ストリームのパケットを記録メディア1701から読み出し、AV多重分離部1703により多重分離した圧縮オーディオストリームの該当符号化データを圧縮オーディオストリーム復号部1705に出力する。例えば、オーディオフレームインデックスNがフレーム番号1を指定すると、AV多重化ストリーム制御部1702はオーディオフレーム番号1が含まれるAV多重化パケットV(1)を読み出し、AV多重分離部1703で分離することで符号化データD(1)を圧縮オーディオストリーム復号部1705に出力する。
圧縮オーディオストリーム復号部1705は、圧縮オーディオストリームXを復号する際に符号化情報Hを抽出する。そして、符号化情報Hと符号化フレームのフレームインデックスNとを対応させたレジューム付加情報I(n)を生成し、AV多重化ストリーム制御部1702に送る。
図19は、圧縮オーディオストリームのレジューム付加情報I(n)を、符号化情報Hに対応付けられた圧縮オーディオストリームの符号化情報フレームインデックスAと、復号化した符号化フレームのフレームインデックスNと、符号化情報フレームインデックスAに対応する符号化フレームが多重化されていたAV多重化ストリームのパケットインデックスMと、で構成した場合の構成例である。AV多重化ストリーム制御部1702は、毎フレーム送られてくるレジューム付加情報のうち、再生中断指示を受け取った時点でのレジューム付加情報I(n)を保持し、再生再開指示を受けた際に、レジューム付加情報I(n)から情報を読み出し、オーディオのレジューム位置として記憶していたAV多重化ストリームのパケットインデックスと圧縮ビデオストリームレジューム情報からオーディオとビデオの両方のレジューム再生が正しく行えるようにAV多重化ストリーム読み出し位置を決定し、読み出したAV多重化ストリームをAV多重分離部1703に入力し符号化情報フレームインデックスAと一致するフレームから圧縮オーディオストリーム復号部1705に投入する。これにより、符号化情報Hが多重化されていない符号化データD(m)[m=2,3,4,5]から再生が再開された場合にも再生オーディオ信号Y(2)~Y(5)を周波数帯域F1まで拡張した正しい周波数帯域を持つ波形で出力することができる。
(第10の実施形態)
図20は第10の実施形態におけるAVストリーム再生装置の構成を示すブロック図である。
図20は第10の実施形態におけるAVストリーム再生装置の構成を示すブロック図である。
図20において、2001は時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮オーディオストリームと時系列のディジタル映像信号をピクチャを単位として纏めた圧縮ビデオストリームとを多重化して構成されるAV多重化ストリームを格納できる記録メディアである。
2002は再生中断時に次回再生指示を受けた際に再開すべき位置をレジューム情報として記録しておく中断情報格納メモリである。中断情報格納メモリ2002は電源断等が発生しても情報が消えないように不揮発性メモリで構成されることが望ましい。
2003は記録メディア2001からAV多重化ストリームの読み出しを行い、再生中断指示を受けると中断時のAV多重化パケット情報とオーディオパケット情報とビデオパケット情報を含むレジューム情報を中断情報格納メモリ2002に格納し、再生再開指示を受けると中断情報格納メモリ2002からレジューム情報を読み出し記録メディア2001からのAV多重化ストリーム読み出し位置の決定と出力開始位置の決定を行うAV多重化ストリ-ム制御部である。
2004はAV多重化ストリーム制御部2003により読み出されたAV多重化ストリームを圧縮オーディオストリームと圧縮ビデオストリームに多重分離するAV多重分離部である。
2005は圧縮ビデオストリームをディジタル映像信号に復号するとともに得られた復号情報から前記圧縮ビデオストリームレジューム情報を構成しAV多重化ストリーム制御部2003に送る圧縮ビデオストリーム復号部である。
2006は圧縮オーディオストリームをディジタルオーディオ信号に復号するとともに得られた復号情報をAV多重化ストリーム制御部2003に伝えることができる圧縮ストリーム復号部である。
2007は圧縮ビデオストリーム復号部2005と圧縮オーディオストリーム復号部2006から出力されるそれぞれの復号結果の時間的な同期合わせを行うAV同期部である。
2008圧縮ビデオストリームの復号結果に従って出力可否を決定し出力を行うビデオ出力制御部である。
2009は圧縮オーディオストリームの復号結果に従ってミュートやフェード制御を行いながらオーディオの出力をするオーディオ出力制御部である。
本AVストリーム再生装置の基本動作を図18,19を用いて説明する。
図18は、本AVストリーム再生装置に入力するAV多重化ストリームVと、AV多重化ストリームから分離される圧縮ビデオストリームWと圧縮オーディオストリームXと、圧縮オーディオストリームXをディジタルオーディオ信号Yに復号化するのに必要な符号化情報Hとの関係を時系列的に示したものである。
図18において、1801はAV多重化ストリームVのパケットを示している。1802はAV多重化ストリームVから分離して得られる圧縮ビデオストリームWを示している。1803はAV多重化ストリームVから分離して得られる圧縮オーディオストリームXを示している。1804は符号化フレーム毎に利用される符号化情報Hを示している。1805は符号化フレーム毎に圧縮オーディオストリーム復号部2006により生成されるレジューム付加情報I(n)[n=1,2,3,…]を示す。1806は符号化フレーム毎に圧縮オーディオストリーム復号部2006から出力される再生ディジタルオーディオ信号Yを示す。1806の縦軸は周波数を、横軸は時間を各々示す。
図18に示すように、圧縮オーディオストリームXは、符号化データD(m)[m=1,2,3,…]と,符号化情報H(n)[n=1,2,3,…]とを含んだものとなっている。
AV多重化ストリーム制御部2003は、フレームインデックスNが指定するフレーム番号の符号化データDを圧縮オーディオストリーム復号部2006に出力する。例えば、フレームインデックスNがフレーム番号1を指定すると、AV多重化ストリーム制御部2003はフレーム番号1に対応する符号化データD(1)を圧縮オーディオストリーム復号部2006に出力する。
圧縮オーディオストリーム復号部2006は、圧縮オーディオストリームXを復号する際に符号化情報Hを抽出する。そして、符号化情報Hと符号化フレームのフレームインデックスNとを対応させたレジューム付加情報I(n)を生成し、AV多重化ストリーム制御部2003に送る。
図19は、圧縮オーディオストリームのレジューム付加情報I(n)を、符号化情報Hに対応付けられた圧縮オーディオストリームの符号化情報フレームインデックスAと、復号化した符号化フレームのフレームインデックスNと、符号化情報フレームインデックスAに対応する符号化フレームが多重化されていたAV多重化ストリームのパケットインデックスMと、で構成した場合の構成例である。
AV多重化ストリーム制御部2003は、毎フレーム送られてくるレジューム付加情報I(n)を中断情報格納メモリ2002に書き込み、再生中断指示を受け取ると中断指示を受け取った時点での符号化フレームのフレームインデックスNと圧縮ビデオストリームレジューム情報を書き込む。中断情報格納メモリ2002には、パケットインデックスMを圧縮オーディオストリーム復号用のAV多重化ストリーム読み出し位置とし、圧縮オーディオストリームの符号化情報フレームインデックスAを圧縮オーディオストリーム復号開始位置とし、フレームインデックスNをオーディオ出力開始フレーム位置として格納される。
そして、再生再開指示を受けた際に、中断情報格納メモリ2002から情報を読み出し、圧縮ビデオストリームのレジューム情報と圧縮オーディオストリームのレジューム情報を比較し、圧縮オーディオストリームのレジューム情報が持つパケットインデックスMが圧縮ビデオストリームレジューム情報が示すパケットインデックスより過去の位置の場合、圧縮オーディオストリーム復号用のAV多重化ストリーム読み出し位置として記憶していたパケットインデックスMからAV多重化ストリームを記録メディア2001から読み出してAV多重分離部2004に投入し、AV多重分離部2004においてAV多重化ストリームから分離された圧縮オーディオストリームを符号化情報フレームインデックスAと一致するフレームから圧縮オーディオストリーム復号部2006に投入し、AV多重分離部2004においてAV多重化ストリームから分離された圧縮ビデオストリームを圧縮ビデオストリーム用レジューム情報が示すレジューム位置から圧縮ビデオストリーム復号部2005に投入する。これにより、圧縮オーディオストリームのレジューム位置として示されている符号化フレームが符号化情報Hが多重化されていない符号化データD(m)[m=2,3,4,5]であった場合にも再生オーディオ信号Y(2)~Y(5)を周波数帯域F1まで拡張した正しい周波数帯域を持つ波形で出力し、映像も正しい位置から出力を再開することができる。
同様に圧縮ビデオストリームのレジューム情報が示すパケットインデックスが圧縮オーディオストリームのレジューム情報が持つパケットインデックスMよりも過去の位置の場合も、記録メディア2001からの読み出しを圧縮ビデオストリームのレジューム位置から開始し、AV多重分離部2004で圧縮オーディオ復号部2006と圧縮ビデオストリーム復号部2005に投入するデータを調整することで正しく再生再開ができる。
(第11の実施形態)
図21は第11の実施形態におけるAVストリーム再生装置の構成を示すブロック図である。
図21は第11の実施形態におけるAVストリーム再生装置の構成を示すブロック図である。
2105は、図20のビデオ出力制御部2008を変更したもので、圧縮ビデオストリーム復号部2005で復号化された再生ディジタルビデオ信号を表示装置に出力するかどうかを再生開始位置制御部2104の指示に従い制御できるようにしたビデオ出力制御部である。2106は、図20のオーディオ出力制御部2009を変更したもので、圧縮オーディオストリーム復号部2006で復号化された再生ディジタルオーディオ信号を音として出力するかどうかを再生開始位置制御部2104の指示に従い制御できるようにしたオーディオ出力制御部である。
AV多重化ストリーム制御部2003は、ストリーム読み出し制御部2101と、レジューム付加情報書き込み判定部2102と、レジューム情報書き込み部2103と、再生開始位置制御部2104とを有している。
ストリーム読み出し制御部2101は、AV多重化ストリームを記録メディア2001から読み出しAV多重分離部2004に送る。
レジューム付加情報書き込み判定部2102は、圧縮オーディオストリーム復号部2006により生成されたレジューム付加情報I(n)を解析し符号化情報フレームインデックスAとフレームインデックスNが一致した場合にのみ中断情報格納メモリ2002に書き込むことを判断する。
レジューム情報書き込み部2103は、レジューム付加情報書き込み判定部2102の出力と圧縮ビデオストリーム復号部2005により生成されたビデオレジューム情報を中断情報格納メモリ2002に書き込む。
再生開始位置制御部2104は、中断情報格納メモリ2002からレジューム情報を読み出し、ストリーム読み出し制御部2101に対し符号化情報フレームインデックスAが示すフレームからの読み出しを指示するとともにオーディオ出力制御部2106に対しフレームインデックスNが示すフレームからの出力開始を指示する。
この実施の形態におけるAVストリーム再生装置のディジタルオーディオ信号の再生に関する動作は第3の実施形態で用いた図6,7と同様になる。
図6において、601は圧縮オーディオストリームXの符号化フレームのフレーム番号を示している。602は符号化フレーム毎の圧縮オーディオストリームXを示している。603は圧縮オーディオストリームXの符号化フレーム毎に利用される符号化情報Hを示している。604は圧縮オーディオストリームXの符号化フレーム毎に圧縮オーディオストリーム復号部2006により生成されるレジューム付加情報I(n)を示す。605はレジューム付加情報書き込み判定部2102によってレジューム付加情報I(n)の書き込みが許可されレジューム情報書き込み部2103によって中断情報格納メモリ2002に書き込まれるタイミングを示す。606は圧縮オーディオストリームXの符号化フレーム毎に圧縮オーディオストリーム復号部2006から出力される再生ディジタルオーディオ信号Yを示す。606の縦軸は周波数を、横軸は時間を各々示す。
図6に示すように、圧縮オーディオストリーム復号部2006によりレジューム付加情報I(n)は毎フレーム生成されているが、中断情報格納メモリ2002へは符号化情報Hが多重化されているフレームを復号した場合にのみ書き込まれるようになり、中断情報格納メモリ2002へのバス負荷を低減できる。
図7は、符号化情報Hが多重化されていない符号化データD(3)から再生再開された場合の例である。図7において、701は圧縮オーディオストリームXの符号化フレームのフレーム番号を示している。702は符号化フレーム毎の圧縮オーディオストリームXを示している。703は中断情報格納メモリ2002にレジューム付加情報I(n)が書き込まれるタイミングを示す。704は符号化フレーム毎に圧縮オーディオストリーム復号部2006からオーディオ出力制御部2106へ渡される復号信号Yを示す。705はオーディオ出力制御部2106から外部へ出力される再生ディジタルオーディオ信号Zを示す。704及び705の縦軸は周波数を、横軸は時間を各々示す。
図7に示すように、中断情報格納メモリ2002から読み出したレジューム付加情報I(n)に示されるフレームインデックスの符号化データD(1)から圧縮オーディオストリーム復号部2006に投入されることになるため、符号化データD(1)の復号信号がオーディオ出力制御部2106に渡されているが、再生開始位置制御部2104によりオーディオ出力制御部2106に対し復号信号D(3)から再生オーディオ信号として出力するように指示することで、不要な復号信号Y(1),Y(2)を出力することなく、正しい再開位置であるZ(3)から周波数帯域F1まで拡張した正しい周波数帯域を持つ波形で出力することができる。
(第12の実施形態)
図22は第12の実施形態におけるAVストリーム再生装置の構成を示すブロック図である。図22において、2204は、図21の再生開始位置制御部2104に代えて設けられ、圧縮オーディオストリーム復号部2006に再生開始フレームを通知できるようにした再生開始位置制御部である。
図22は第12の実施形態におけるAVストリーム再生装置の構成を示すブロック図である。図22において、2204は、図21の再生開始位置制御部2104に代えて設けられ、圧縮オーディオストリーム復号部2006に再生開始フレームを通知できるようにした再生開始位置制御部である。
圧縮オーディオストリーム復号部2006は、符号化情報解析部2201と、フレームスキップ回路2202と、信号処理部2203とを有している。符号化情報解析部2201は、圧縮オーディオストリームを解析し予め符号化情報を抽出し記憶するとともにレジューム付加情報I(n)を生成する。フレームスキップ回路2202は、再生開始位置制御部2204からの指示と符号化情報解析部2201にて抽出した符号化情報により不要フレームかどうかを判断し不要な場合には符号化データを信号処理部2203に供給しないように制御する。信号処理部2203は符号化データを信号処理し復号化する。
この実施の形態におけるAVストリーム再生装置のディジタルオーディオ信号の再生に関する動作は、第4の実施形態で用いた図9と同様となるため、図9を用いて動作を説明する。
図9は、符号化データD(3)から再生再開された場合の動作を時系列に表したものである。図9において、901は圧縮オーディオストリームXの符号化フレームのフレーム番号を示している。902は再生再開後圧縮オーディオストリーム復号部2006に投入される符号化フレーム毎の圧縮オーディオストリームXを示している。903は符号化情報解析部2201によって符号化フレーム毎に生成されるレジューム付加情報I(n)を示す。904はフレームスキップ回路2202によって不要フレームかどうかを判定された後に信号処理部2203によって復号された再生ディジタルオーディオ信号Yを示す。904の縦軸は周波数を、横軸は時間を各々示す。
図9に示すように、圧縮オーディオストリーム復号部2006へはレジューム付加情報I(n)に示されるフレームインデックスの符号化データD(1)から順に投入されているが、フレームスキップ回路2202により不要フレームとしてスキップされ信号処理部2203へは再生再開フレームである符号化データD(3)から投入することで、不要フレームD(1),D(2)の復号をすることなく、正しい再開位置であるZ(3)から周波数帯域F1まで拡張した正しい周波数帯域を持つ波形で出力することができ、信号処理の処理負荷も低減できる。
(第13の実施形態)
図23は第13の実施形態におけるAVストリーム再生機器の例である。図23において、2301はAV多重化コンテンツを記録できる記録メディアである。図面では機器から取り出せるメディアとして記載しているが、SDカードのような機器から取り出し可能なフラッシュメモリや光ディスクで実現しても良いし、機器に内蔵されたHDD等で実現しても良い。2302はAVストリーム再生機器であり、機器内部の構成要素は第9~12の実施形態に記載したAVストリーム再生装置のうちの少なくとも1つを含むように構成される。2303はAVストリーム再生機器2302から出力されたオーディオ信号を音として再生するスピーカー装置である。2304はAVストリーム再生機器2302から出力されたビデオ信号を映像として出力するディスプレイ装置である。このようにAVストリーム再生機器を構成することで、再生を一旦中断した後に再開させた場合にも、映像だけでなく音に関しても再生されない区間なく即座に正しい周波数帯域まで拡張された出力オーディオ信号を得ることができる。
図23は第13の実施形態におけるAVストリーム再生機器の例である。図23において、2301はAV多重化コンテンツを記録できる記録メディアである。図面では機器から取り出せるメディアとして記載しているが、SDカードのような機器から取り出し可能なフラッシュメモリや光ディスクで実現しても良いし、機器に内蔵されたHDD等で実現しても良い。2302はAVストリーム再生機器であり、機器内部の構成要素は第9~12の実施形態に記載したAVストリーム再生装置のうちの少なくとも1つを含むように構成される。2303はAVストリーム再生機器2302から出力されたオーディオ信号を音として再生するスピーカー装置である。2304はAVストリーム再生機器2302から出力されたビデオ信号を映像として出力するディスプレイ装置である。このようにAVストリーム再生機器を構成することで、再生を一旦中断した後に再開させた場合にも、映像だけでなく音に関しても再生されない区間なく即座に正しい周波数帯域まで拡張された出力オーディオ信号を得ることができる。
上記の各実施形態の説明におけるオーディオ再生装置およびAVストリーム再生装置の各構成ブロックの処理は、ソフトウェアプログラムによってコンピュータ又は、デジタルシグナルプロセッサ(DSP)上で実現することも可能である。
また、上記の説明では、圧縮オーディオストリームの例としてAAC+SBRの様な帯域拡張技術を用いて生成される符号化オーディオ信号のうち、共通帯域拡張データを一部の符号化フレームに分散し符号化情報としているが、MP3の様にコア符号化処理のみを利用して生成される符号化オーディオ信号のうち、コア符号化データを復号化するために用いる符号化パラメーターを一部の符号化フレームに分散して多重化する符号化情報として行う場合も同様に考えることができる。
本発明は、時系列で連続する符号化フレームの途中の符号化フレームから復号化処理を行う場合や、早送り再生で符号化フレームを間引いて復号化処理を行う場合において、符号化情報が多重化されない符号化フレームの復号化時にも、非同期に多重化された符号化情報に基づいて復号化でき、電源断などで再生が中断した後に中断した箇所から再生再開する機能を持つオーディオ再生装置や、符号化フレームを間引いて再生する早送り再生などの特殊再生をする機能を持つオーディオ再生装置に利用できる。
Claims (23)
- 時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームに符号化フレームとは非同期に符号化情報を多重化して構成される圧縮オーディオストリームを再生可能なオーディオ再生装置において、
再生が一旦中断され再開される際に、中断以前に記録された圧縮オーディオストリームに関する情報に基づいて、時間的に再生されない区間なく正しい周波数帯域まで拡張した波形で再生再開させる、
ことを特徴とするオーディオ再生装置。 - 請求項1において、
前記オーディオ再生装置は、
圧縮オーディオストリームが記録された記録メディアと、
再生中断以前の圧縮オーディオストリームのフレーム情報を保持するとともに、再生中断時に再開される場合に、復号したオーディオフレームが非同期に符号化情報が多重化されたものか判別するためのレジューム付加情報と前記オーディオフレーム情報とに基づいて、前記記録メディアから圧縮オーディオストリームの読み出し位置を算出する圧縮ストリーム制御手段と、
前記圧縮ストリーム制御手段により読み出された圧縮オーディオストリームを復号化するとともに当該フレームの復号により得られる復号情報に基づいて前記レジューム付加情報を構成し前記圧縮ストリーム制御手段に送る圧縮ストリーム復号手段と、
圧縮オーディオストリームの復号結果の出力可否を決定し出力を行う出力制御手段と、
を備える、
ことを特徴とするオーディオ再生装置。 - 請求項1において、
前記オーディオ再生装置は、
圧縮オーディオストリームが記録された記録メディアと、
再生中断時の圧縮オーディオストリームのフレーム情報を保持するとともに前記記録メディアから圧縮オーディオストリームの読み出し位置を算出し読み出す圧縮ストリーム制御手段と、
前記圧縮ストリーム制御手段により読み出された圧縮オーディオストリームを復号化するとともに当該フレームの復号により得られる復号情報のうち少なくとも非同期に符号化情報が多重化されたフレームを復号したかどうかを判別できる情報を含むようにして前記レジューム付加情報を構成し前記圧縮ストリーム制御手段に送る圧縮ストリーム復号手段と、
圧縮オーディオストリームの復号結果の出力可否を決定し出力を行う出力制御手段と、
圧縮オーディオストリームの再生中断時に再生再開に必要なレジューム情報を格納する中断情報格納メモリと、
を備え、
再生が一旦中断され再開される際に前記圧縮ストリーム復号手段から送られたレジューム付加情報と中断時のフレーム情報から圧縮オーディオストリームの読み出し位置を算出し前記記録メディアから圧縮オーディオストリームを読み出すことで時間的に再生されない区間や再生されない周波数帯域なく再生再開できる、
ことを特徴とするオーディオ再生装置。 - 請求項2または3において、
前記圧縮ストリーム制御手段は、
再生開始指示または再生再開指示を受けると前記記録メディアから圧縮オーディオストリームを読み出し、再生中断指示を受けると再生中のストリーム情報を前記中断情報格納メモリへ書き込む圧縮ストリーム読み出し制御手段と、
前記中断情報格納メモリに中断情報が格納されていると前記記録メディアから圧縮オーディオストリームを読み出す位置を前記圧縮ストリーム読み出し制御手段に対し指示する再生開始位置制御手段と、
前記圧縮ストリーム復号手段から前記中断情報格納メモリへ送られるレジューム付加情報に非同期に符号化情報が多重化されたフレームを復号したことが判別できる情報が含まれている場合に前記中断情報格納メモリに前記レジューム付加情報を随時書き込むレジューム付加情報書き込み判定手段と、
を有し、
再生再開時にレジューム情報とレジューム付加情報から前記再生開始位置制御手段により読み出し位置の決定と前記出力制御手段による出力開始フレームの決定を行う、
ことを特徴とするオーディオ再生装置。 - 請求項2または3において、
前記圧縮ストリーム復号手段は、
圧縮オーディオストリームの符号化フレームを解析し非同期に多重化された符号化情報を抽出するとともに抽出した符号化情報または前記符号化情報より得られる復号化補助情報と非同期に多重化された符号化情報を持つフレームのフレームインデックスのどちらか一方または両方と復号情報とを纏めてレジューム付加情報とし前記中断情報格納メモリに格納する符号化情報解析部と、
復号化を行う信号処理部と、
前記信号処理部へ入力する必要のないフレームを破棄するフレームスキップ回路と、
を有し、
前記フレームスキップ回路は、
前記中断情報格納メモリに格納されたレジューム情報とレジューム付加情報の前記非同期に多重化された符号化情報を持つフレームのフレームインデックスから信号処理部への入力を行うかどうかを判断し、レジューム情報のフレームインデックスを持つ符号化フレームが入力されるまでの不要な符号化フレームを前記信号処理部へ入力せずにスキップする、
ことを特徴とするオーディオ再生装置。 - 請求項5において、
前記符号化情報解析部で抽出するレジューム付加情報は、AAC+SBRストリームのSBRヘッダに格納された情報と該ヘッダを持つフレームインデックスの両方またはどちらか一方を含む、
ことを特徴するオーディオ再生装置。 - 請求項5において、
前記符号化情報解析部で抽出するレジューム付加情報は、MP3ストリームの当該フレームを復号化するために必要となるメインデータの先頭を含む符号化フレームのフレームインデックスまたはメインデータの先頭が自フレーム内にある符号化フレームのフレームインデックスを含む、
ことを特徴とするオーディオ再生装置。 - 時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームに符号化フレームとは非同期に符号化情報を多重化して構成される圧縮オーディオストリームが記録再生可能なオーディオ記録再生装置において、
圧縮オーディオストリームを記録する記録メディアと、
符号化フレームとは非同期に符号化情報が多重化されたフレームのインデックスを保持する符号化情報インデックステーブルと、
音声信号を圧縮ストリームに符号化するとともに当該圧縮ストリームに符号化情報を多重化する際に前記符号化情報インデックステーブルにフレーム位置情報を書き込む圧縮ストリーム符号手段と、
再生位置と前記符号化情報インデックステーブルより圧縮オーディオストリーム投入位置を算出する圧縮ストリーム制御手段と、
前記圧縮ストリーム制御手段から投入された圧縮オーディオストリームを復号する圧縮ストリーム復号手段と、
復号結果の出力可否を判定する出力制御手段と、
を備え、
再生時には前記圧縮ストリーム制御手段により投入された圧縮オーディオストリームを前記圧縮ストリーム復号手段で復号し再生開始位置より復号結果を出力するように前記出力制御手段で制御することで圧縮オーディオストリームの任意の位置からの再生においても時間的に再生できない区間や再生できない周波数帯域なく再生できる、
ことを特徴とするオーディオ記録再生装置。 - 請求項8において、
前記圧縮ストリーム復号手段は、
圧縮オーディオストリームから非同期に多重化された符号化情報を検出しそのフレーム位置を前記符号化情報インデックステーブルに書き込む符号化情報検出部と、
復号する圧縮オーディオストリームに関するインデックス情報が前記符号化情報インデックステーブルにすでに存在するかを判定するインデックステーブル判定部と、
を有し、
前記インデックステーブル判定部により復号する圧縮オーディオストリームに関するインデックス情報が存在しないと判定された場合には、前記符号化情報検出部により前記符号化情報インデックステーブルにインデックス情報を追加することで、2回目以降の再生時に圧縮オーディオストリームの任意の位置からの再生において時間的に再生できない区間や再生できない周波数帯域なく再生できる、
ことを特徴とするオーディオ記録再生装置。 - 請求項1~9のいずれか1つに記載の装置を搭載したオーディオ再生機器。
- 時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームに符号化フレームとは非同期に符号化情報を多重化して構成される圧縮オーディオストリームが再生可能なオーディオ再生方法において、
圧縮オーディオストリームを記録メディアに記録するステップと、
再生中断時の圧縮オーディオストリームのフレーム情報を保持するとともに前記記録メディアから圧縮オーディオストリームの読み出し位置を算出し読み出す圧縮ストリーム制御ステップと、
前記圧縮ストリーム制御ステップにより読み出された圧縮オーディオストリームを復号化するとともに当該フレームの復号により得られる復号情報のうち少なくとも非同期に符号化情報が多重化されたフレームを復号したかどうかを判別できる情報を含むようにしてレジューム付加情報を構成する圧縮ストリーム復号ステップと、
復号結果の出力可否を決定し出力を行う出力制御ステップと、
圧縮オーディオストリームの再生中断時に再生再開に必要なレジューム情報を中断情報格納メモリに格納するステップと、
を備え、
再生が一旦中断され再開される際に、前記圧縮ストリーム復号ステップにより得られたレジューム付加情報と中断時のフレーム情報から圧縮オーディオストリームの読み出し位置を算出し、前記記録メディアから圧縮オーディオストリームを読み出すことで、時間的に再生されない区間や再生されない周波数帯域なく再生再開できる、
ことを特徴とするオーディオ再生方法。 - 請求項11において、
前記圧縮ストリーム制御ステップは、
再生開始指示または再生再開指示を受けると前記記録メディアから圧縮オーディオストリームを読み出し、再生中断指示を受けると再生中のストリーム情報を前記中断情報格納メモリへ書き込む圧縮ストリーム読み出し制御ステップと、
前記中断情報格納メモリに中断情報が格納されていると前記圧縮ストリーム読み出し制御ステップにおいて前記記録メディアから圧縮オーディオストリームを読み出す位置を指示する再生開始位置制御ステップと、
前記中断情報格納メモリへ送られるレジューム付加情報に非同期に符号化情報が多重化されたフレームを復号したことが判別できる情報が含まれている場合に前記中断情報格納メモリに前記レジューム付加情報を随時書き込むレジューム付加情報書き込み判定ステップと、
を有し、
再生再開時にレジューム情報とレジューム付加情報から前記再生開始位置制御ステップにより読み出し位置の決定と前記出力制御ステップによる出力開始フレームの決定を行う、
ことを特徴とするオーディオ再生方法。 - 請求項11において、
前記圧縮ストリーム復号ステップは、
圧縮オーディオストリームの符号化フレームを解析し非同期に多重化された符号化情報を抽出するとともに抽出した符号化情報または前記符号化情報より得られる復号化補助情報と非同期に多重化された符号化情報を持つフレームのフレームインデックスのどちらか一方または両方と復号情報とを纏めてレジューム付加情報とし前記中断情報格納メモリに格納する符号化情報解析ステップと、
復号化を行う信号処理部へ入力する必要のないフレームを破棄するフレームスキップステップと、
を有し、
前記フレームスキップステップは、
前記中断情報格納メモリに格納されたレジューム情報とレジューム付加情報の前記非同期に多重化された符号化情報を持つフレームのフレームインデックスから前記信号処理部への入力を行うかどうかを判断し、レジューム情報のフレームインデックスを持つ符号化フレームが入力されるまでの不要な符号化フレームを前記信号処理部へ入力せずにスキップする、
ことを特徴とするオーディオ再生方法。 - 請求項13において、
前記符号化情報解析ステップで抽出するレジューム付加情報がAAC+SBRストリームのSBRヘッダに格納された情報と該ヘッダを持つフレームインデックスの両方または該ヘッダを持つフレームインデックスで構成される、
ことを特徴するオーディオ再生方法。 - 請求項13において、
前記符号化情報解析ステップで抽出するレジューム付加情報がMP3ストリームの当該フレームを復号化するために必要となるメインデータの先頭を含む符号化フレームのフレームインデックスまたはメインデータの先頭が自フレーム内にある符号化フレームのフレームインデックスで構成される、
ことを特徴とするオーディオ再生方法。 - 時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームに符号化フレームとは非同期に符号化情報を多重化して構成される圧縮オーディオストリームが記録再生可能なオーディオ記録再生方法において、
圧縮オーディオストリームを記録メディアに記録するステップと、
符号化フレームとは非同期に符号化情報が多重化されたフレームのインデックスを符号化情報インデックステーブルに保持するステップと、
音声信号を圧縮ストリームに符号化するとともに当該圧縮ストリームに符号化情報を多重化する際に前記符号化情報インデックステーブルにフレーム位置情報を書き込む圧縮ストリーム符号ステップと、
再生位置と前記符号化情報インデックステーブルより圧縮オーディオストリーム投入位置を算出する圧縮ストリーム制御ステップと、
前記圧縮ストリーム制御ステップにより投入された圧縮オーディオストリームを復号する圧縮ストリーム復号ステップと、
復号結果の出力可否を判定する出力制御ステップと、
を備え、
再生時には前記圧縮ストリーム制御ステップにより投入された圧縮オーディオストリームを前記圧縮ストリーム復号ステップで復号し再生開始位置より復号結果を出力するように前記出力制御ステップで制御することで圧縮オーディオストリームの任意の位置からの再生においても時間的に再生できない区間や再生できない周波数帯域なく再生できる、
ことを特徴とするオーディオ記録再生方法。 - 請求項16において、
前記圧縮ストリーム復号ステップは、
圧縮オーディオストリームから非同期に多重化された符号化情報を検出しそのフレーム位置を前記符号化情報インデックステーブルに書き込む符号化情報検出ステップと、
復号する圧縮オーディオストリームに関するインデックス情報が前記符号化情報インデックステーブルにすでに存在するかを判定するインデックステーブル判定ステップと、
を有し、
前記インデックステーブル判定ステップにより復号する圧縮オーディオストリームに関するインデックス情報が存在しないと判定された場合には、前記符号化情報検出ステップにより前記符号化情報インデックステーブルにインデックス情報を追加することで、2回目以降の再生時に圧縮オーディオストリームの任意の位置からの再生において時間的に再生できない区間や再生できない周波数帯域なく再生できる、
ことを特徴とするオーディオ記録再生方法。 - 時系列のディジタルオーディオ信号を符号化フレームを単位として纏めた圧縮ストリームに符号化フレームとは非同期に符号化情報を多重化して構成される圧縮オーディオストリームと、時系列のディジタル映像データをピクチャを単位として纏めた圧縮ビデオストリームとを多重化して構成されるAV多重化ストリームを再生可能なAVストリーム再生装置において、
再生が一旦中断され再開される際に、中断以前に記録された圧縮オーディオストリームに関する情報に基づいて、少なくともオーディオ信号に関しては時間的に再生されない区間なく正しい周波数帯域まで拡張した波形で再生再開させる、
ことを特徴とするAVストリーム再生装置。 - 請求項18において、
前記AVストリーム再生装置は、
多重化ストリームが記録された記録メディアと、
再生中断以前の圧縮オーディオストリームのフレーム情報を保持するとともに、再生中断時に再開される場合に、復号したオーディオフレームが非同期に符号化情報が多重化されたものか判別するためのレジューム付加情報と前記オーディオフレーム情報と圧縮ビデオストリームレジューム情報に基づいて、前記記録メディアからAV多重化ストリームの読み出し位置を算出するAV多重化ストリーム制御手段と、
前記AV多重化ストリーム制御手段により読み出されたAV多重化ストリームから圧縮オーディオストリームと圧縮ビデオストリームとを分離するAV多重分離手段と、
前記AV多重分離手段により分離された圧縮オーディオストリームを復号化するとともに当該フレームの復号により得られる復号情報から構成した前記レジューム付加情報と前記オーディオフレーム情報とを前記AV多重化ストリーム制御手段に送る圧縮オーディオストリーム復号手段と、
前記AV多重分離手段により分離された圧縮ビデオストリームを復号化するとともに前記圧縮ビデオストリームレジューム情報を前記AV多重化ストリーム制御手段に送る圧縮ビデオストリーム復号手段と、
圧縮オーディオストリームの復号結果の出力可否を決定し出力を行うオーディオ出力制御手段と、
圧縮ビデオストリームの復号結果の出力可否を決定し出力を行うビデオ出力制御手段と、
圧縮オーディオストリームの復号結果と圧縮ビデオストリーム復号結果の時間的な同期をとるAV同期手段と、
を備える、
ことを特徴とするAVストリーム再生装置。 - 請求項18において、
前記AVストリーム再生装置は、
AV多重化ストリームが記録された記録メディアと、
再生中断時のオーディオフレーム情報及びビデオフレーム情報のそれぞれを保持するとともに前記記録メディアからAV多重化ストリームの読み出し位置を算出し読み出すAV多重化ストリーム制御手段と、
前記AV多重化ストリーム制御手段により読み出されたAV多重化ストリームを圧縮オーディオストリームと圧縮ビデオストリームに分離するAV多重分離手段と、
前記AV多重分離手段により分離された圧縮オーディオストリームを復号化するとともに当該フレームの復号により得られる復号情報のうち少なくとも非同期に符号化情報が多重化されたフレーム復号をしたかどうかを判別できる情報を含むようにしてレジューム付加情報を構成し前記AV多重化ストリーム制御手段に送る圧縮オーディオストリーム復号手段と、
前記AV多重分離手段により分離された圧縮ビデオストリームを復号するとともに圧縮ビデオストリームレジューム情報を前記AV多重化ストリーム制御手段に送る圧縮ビデオストリーム復号手段と、
圧縮オーディオストリームの復号結果の出力可否を決定し出力を行うオーディオ出力制御手段と、
圧縮ビデオストリームの復号結果の出力可否を決定し出力を行うビデオ出力制御手段と、
圧縮オーディオストリームの復号結果と圧縮ビデオストリーム復号結果の同期をとるAV同期手段と、
AV多重化ストリームの再生中断時に圧縮オーディオストリームの再生再開に必要な圧縮オーディオストリームレジューム情報と圧縮ビデオストリームの再生再開に必要な圧縮ビオストリームレジューム情報とを格納する中断情報格納メモリと、
を備え、
再生が一旦中断され再開される際に、前記圧縮オーディオストリーム復号手段から送られたレジューム付加情報と中断時のフレーム情報から再生再開に必要となるオーディオフレームが含まれるAV多重化ストリームの位置を算出し、前記記録メディアからAV多重化ストリームを読み出すことで、少なくともオーディオストリームのレジューム再生に関しては時間的に再生されない区間や再生されない周波数帯域なく再生再開ができる、
ことを特徴とするAVストリーム再生装置。 - 請求項19または20において、
前記AV多重化ストリーム制御手段は、
再生開始指示または再生再開指示を受けると前記記録メディアからAV多重化ストリームを読み出し、再生中断指示を受けると再生中のストリーム情報を前記中断情報格納メモリへ書き込むAV多重化ストリーム読み出し制御手段と、
前記中断情報格納メモリに中断情報が格納されていると前記記録メディアからAV多重化ストリームを読み出す位置を前記AV多重化ストリーム読み出し制御手段に対し指示する再生開始位置制御手段と、
圧縮オーディオストリームのレジューム再生情報に関して前記圧縮オーディオストリーム復号手段から前記中断情報格納メモリへ送られるレジューム付加情報に非同期に符号化情報が多重化されたフレームを復号したことが判別できる情報が含まれている場合に前記中断情報格納メモリに前記レジューム付加情報を随時書き込むレジューム付加情報書き込み判定手段と、
を有し、
少なくともオーディオのレジューム再生に関しては再生再開時に圧縮オーディオストリームレジューム情報と前記レジューム付加情報から前記再生開始位置制御手段により読み出し位置の決定と前記オーディオ出力制御手段による出力開始フレームの決定を行う、
ことを特徴とするAVストリーム再生装置。 - 請求項19または20において、
前記圧縮オーディオストリーム復号手段は、
符号化オーディオフレームを解析し非同期に多重化された符号化情報を抽出するとともに抽出した符号化情報または前記符号化情報より得られる復号化補助情報と非同期に多重化された符号化情報を持つフレームのフレームインデックスのどちらか一方または両方と復号情報とを纏めてレジューム付加情報とし前記中断情報格納メモリに格納する符号化情報解析部と、
復号化を行う信号処理部と、
前記信号処理部へ入力する必要のないフレームを破棄するフレームスキップ回路と、
を有し、
前記フレームスキップ回路は、
前記中断情報格納メモリに格納されたレジューム情報とレジューム付加情報の前記非同期に多重化された符号化情報を持つフレームのフレームインデックスから前記信号処理部への入力を行うかどうかを判断し、レジューム情報のフレームインデックスを持つ符号化フレームが入力されるまでの不要な符号化フレームを前記信号処理部へ入力せずにスキップする、
ことを特徴とするAVストリーム再生装置。 - 請求項18~22のいずれか1つに記載の装置を搭載したAVコンテンツ再生機器。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP08871945A EP2244253A1 (en) | 2008-01-31 | 2008-12-09 | Audio resume reproduction device and audio resume reproduction method |
CN2008801257167A CN101925951A (zh) | 2008-01-31 | 2008-12-09 | 音频恢复再生装置及音频恢复再生方法 |
US12/847,701 US20110022400A1 (en) | 2008-01-31 | 2010-07-30 | Audio resume playback device and audio resume playback method |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008020378A JP2009180972A (ja) | 2008-01-31 | 2008-01-31 | オーディオレジューム再生装置及びオーディオレジューム再生方法 |
JP2008-020378 | 2008-01-31 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US12/847,701 Continuation US20110022400A1 (en) | 2008-01-31 | 2010-07-30 | Audio resume playback device and audio resume playback method |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2009095971A1 true WO2009095971A1 (ja) | 2009-08-06 |
Family
ID=40912342
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2008/003674 WO2009095971A1 (ja) | 2008-01-31 | 2008-12-09 | オーディオレジューム再生装置及びオーディオレジューム再生方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20110022400A1 (ja) |
EP (1) | EP2244253A1 (ja) |
JP (1) | JP2009180972A (ja) |
CN (1) | CN101925951A (ja) |
WO (1) | WO2009095971A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103918029B (zh) * | 2011-11-11 | 2016-01-20 | 杜比国际公司 | 使用过采样谱带复制的上采样 |
KR20170012675A (ko) * | 2015-07-22 | 2017-02-03 | 삼성전자주식회사 | 컴퓨팅 시스템 및 그것의 데이터 전송 방법 |
WO2018167650A1 (en) * | 2017-03-13 | 2018-09-20 | Sling Media Pvt. Ltd. | Improved recovery during video encoding |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10124099A (ja) * | 1996-10-15 | 1998-05-15 | Olympus Optical Co Ltd | 音声記録装置 |
WO2005043540A1 (ja) * | 2003-10-31 | 2005-05-12 | Matsushita Electric Industrial Co., Ltd. | 音響装置 |
JP2005233980A (ja) | 2000-04-20 | 2005-09-02 | Sanyo Electric Co Ltd | 音楽再生装置 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07264144A (ja) * | 1994-03-16 | 1995-10-13 | Toshiba Corp | 信号圧縮符号化装置および圧縮信号復号装置 |
JP3039624B2 (ja) * | 1996-12-02 | 2000-05-08 | 日本電気株式会社 | オーディオ・ビデオ同期再生装置 |
JP4035277B2 (ja) * | 2000-05-31 | 2008-01-16 | 富士通株式会社 | 映像・音声再生装置及び映像・音声再生方法 |
US6885987B2 (en) * | 2001-02-09 | 2005-04-26 | Fastmobile, Inc. | Method and apparatus for encoding and decoding pause information |
JP2003044098A (ja) * | 2001-07-26 | 2003-02-14 | Nec Corp | 音声帯域拡張装置及び音声帯域拡張方法 |
JP3888307B2 (ja) * | 2003-01-15 | 2007-02-28 | 船井電機株式会社 | 光ディスク再生装置 |
EP1604367A2 (en) * | 2003-02-21 | 2005-12-14 | Matsushita Electric Industrial Co., Ltd. | Reording medium, playback device, recording method, playback method, and computer program |
JP4339206B2 (ja) * | 2004-08-19 | 2009-10-07 | ソニー株式会社 | 再生装置、再生方法および再生プログラム、ならびに、記録媒体 |
JP4715535B2 (ja) * | 2005-05-23 | 2011-07-06 | ソニー株式会社 | コンテンツ表示再生システム、コンテンツ表示再生方法、コンテンツ表示再生プログラムを記録した記録媒体及び操作制御装置 |
KR100770908B1 (ko) * | 2006-02-09 | 2007-10-26 | 삼성전자주식회사 | 디지털 방송 스트림의 변속 재생 장치 및 방법 |
-
2008
- 2008-01-31 JP JP2008020378A patent/JP2009180972A/ja not_active Withdrawn
- 2008-12-09 CN CN2008801257167A patent/CN101925951A/zh active Pending
- 2008-12-09 WO PCT/JP2008/003674 patent/WO2009095971A1/ja active Application Filing
- 2008-12-09 EP EP08871945A patent/EP2244253A1/en not_active Withdrawn
-
2010
- 2010-07-30 US US12/847,701 patent/US20110022400A1/en not_active Abandoned
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10124099A (ja) * | 1996-10-15 | 1998-05-15 | Olympus Optical Co Ltd | 音声記録装置 |
JP2005233980A (ja) | 2000-04-20 | 2005-09-02 | Sanyo Electric Co Ltd | 音楽再生装置 |
WO2005043540A1 (ja) * | 2003-10-31 | 2005-05-12 | Matsushita Electric Industrial Co., Ltd. | 音響装置 |
Also Published As
Publication number | Publication date |
---|---|
CN101925951A (zh) | 2010-12-22 |
EP2244253A1 (en) | 2010-10-27 |
JP2009180972A (ja) | 2009-08-13 |
US20110022400A1 (en) | 2011-01-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2006137425A1 (ja) | オーディオ符号化装置、オーディオ復号化装置およびオーディオ符号化情報伝送装置 | |
WO2006115151A1 (ja) | 記録装置、再生装置、記録再生装置、記録プログラムとその記録媒体、再生プログラムとその記録媒体 | |
US7693398B2 (en) | Digital information reproducing apparatus and method | |
WO2009095971A1 (ja) | オーディオレジューム再生装置及びオーディオレジューム再生方法 | |
JP4552802B2 (ja) | 記録装置、記録方法、記録方法のプログラム及び記録方法のプログラムを記録した記録媒体 | |
US20080147218A1 (en) | Recording/reproduction apparatus | |
US20070003229A1 (en) | Content recording apparatus, content reproducing apparatus, and method for recording parameter information | |
US20150104158A1 (en) | Digital signal reproduction device | |
US20080267414A1 (en) | Voice outputting apparatus and voice outputting method | |
JP5767982B2 (ja) | ドライブレコーダ | |
JP4695006B2 (ja) | 復号処理装置 | |
JP2004280994A (ja) | データ作成方法及びデータ記録装置 | |
JP6089970B2 (ja) | 映像データ削減装置および再生装置 | |
JP4916988B2 (ja) | 映像音声再生装置、及び映像音声再生方法 | |
JP2006352587A (ja) | 情報処理装置 | |
JP2006157822A (ja) | 再生装置および再生方法 | |
JP4391450B2 (ja) | 再生装置、コンテンツ記録媒体、再生装置の制御方法、制御プログラムおよび記録媒体 | |
JP4665550B2 (ja) | 再生装置および再生方法 | |
JP2005348078A (ja) | 録画装置 | |
JP2009111608A (ja) | 再生装置および再生方法 | |
JPH08115567A (ja) | 画像送信装置 | |
JP2002209186A (ja) | Mpeg方式の映像・音声データ記録システム及びその編集システム | |
KR20020072108A (ko) | 디지털 엠펙 데이터를 저장 매체에 저장하고 재생하는시스템 및 그 방법 | |
JP2005244303A (ja) | データ遅延装置及び同期再生装置並びにデータ遅延方法 | |
JP2001197029A (ja) | オーディオチャネルid付加方法、これを用いたオーディオチャネル選択方法及びこれに適した光記録再生装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WWE | Wipo information: entry into national phase |
Ref document number: 200880125716.7 Country of ref document: CN |
|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 08871945 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
WWE | Wipo information: entry into national phase |
Ref document number: 2008871945 Country of ref document: EP |