WO2011013309A1 - 画像データ処理装置 - Google Patents

画像データ処理装置 Download PDF

Info

Publication number
WO2011013309A1
WO2011013309A1 PCT/JP2010/004553 JP2010004553W WO2011013309A1 WO 2011013309 A1 WO2011013309 A1 WO 2011013309A1 JP 2010004553 W JP2010004553 W JP 2010004553W WO 2011013309 A1 WO2011013309 A1 WO 2011013309A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
output
images
decoder unit
unit
Prior art date
Application number
PCT/JP2010/004553
Other languages
English (en)
French (fr)
Inventor
山中祐介
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Publication of WO2011013309A1 publication Critical patent/WO2011013309A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/782Television signal recording using magnetic recording on tape
    • H04N5/783Adaptations for reproducing at a rate different from the recording rate
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005Reproducing at a different information rate from the information rate of recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction

Definitions

  • the present invention relates to an image data processing apparatus that decodes and outputs data encoded by a moving picture compression technique of MPEG (Moving Picture Experts Group).
  • MPEG Moving Picture Experts Group
  • the MPEG video compression technology uses a compression technology called inter-frame prediction.
  • inter-frame prediction When decoding encoded data encoded by inter-frame prediction, not only encoded data of the frame but also past or future decoded data of the frame decoded in advance is necessary.
  • the encoded data can be decoded from an I picture (Intra Picture) that can be decoded only with the encoded data of the frame, the encoded data of the frame, and a past I picture or P picture that was previously decoded.
  • I picture Intra Picture
  • P picture Predictive Picture
  • B picture Bidirectionally Predictive Picture
  • B pictures are encoded by changing the order when they are encoded because they require future data at the time of decoding. Since the I picture and the P picture do not require future data, they are encoded without changing the order.
  • a method is generally used in which the display interval of images is shortened and the B picture is discarded and displayed or the B picture and P picture are discarded and displayed depending on the playback speed and processing performance.
  • the user's main scene searching method is a method of starting playback at an arbitrary operation timing of the user by visually observing a display image during high-speed playback.
  • the high-speed playback is stopped from the desired image due to the difference between the actual operation and the processing of the image data processing device, and the operation is performed early in anticipation of the excessive operation.
  • the high-speed playback tends to stop too early than the desired image.
  • a desired image may finally be reached by repeatedly stopping and restarting high-speed playback.
  • the decoded and displayed images are held during high-speed playback, and when the high-speed playback is stopped, the currently displayed image and the previous image are displayed as a list and displayed as a list.
  • a method for improving the convenience of scene search when stopping at an image that has gone too far from the image desired by the user by enabling playback from an image selected by the user for example, Patent Document 1). reference).
  • the scene search by high-speed playback supports the convenience improvement when the high-speed playback stop is slower than the image desired by the user. There was a problem that it was not possible to improve convenience.
  • the present invention displays a list of images that are being output when high-speed playback is stopped, images that were output before high-speed playback is stopped, and images that are scheduled to be output after the stop. It is an object of the present invention to provide an image data processing apparatus that improves the convenience of a user's scene search when the image is slower and faster than the desired image.
  • an image data processing apparatus is an image data processing apparatus that decodes and outputs data encoded by a moving image compression technique of the MPEG system, and performs high-speed playback after stopping high-speed playback. Images that are output at the time when the stop instruction is received, and a predetermined number of images received from the output image in the playback forward direction and playback reverse direction from the video decoder unit, and output as an image list
  • An image data processing apparatus including an output control unit.
  • the video output control unit performs normal playback and high speed starting from an image designated by the user from the image list.
  • An image data processing apparatus having a function of controlling the start of playback or frame advance.
  • the image data processing apparatus in contrast to the first aspect, when the video output control unit outputs an image list, the image data processing apparatus thins out a predetermined number of images.
  • An image data processing apparatus having a function of outputting as a list.
  • the image data processing device starts high-speed playback after decoding and holding a predetermined number of images to be output in high-speed playback in the first mode.
  • the image data processing apparatus includes a video decoder unit that transmits to an output control unit.
  • the image data processing apparatus of the present invention is an image data processing apparatus that decodes and outputs data encoded by a moving image compression technique of the MPEG system, and is capable of high speed reproduction.
  • a video decoder unit for high-speed playback of images to be output, and a predetermined number of playback forward directions and playback from the output image and output image when a high-speed playback stop instruction is received after high-speed playback stop A video output control unit that receives images in the reverse direction from the video decoder unit and outputs them as an image list; and an output unit that outputs information on the held image to the video output control unit when high-speed playback is stopped;
  • the decoder unit having sufficient decoding performance holds the decoded image during high-speed playback, so that the user can search for scenes when the high-speed playback stop is slower than the user-desired image and when it is early Improves.
  • the image data processing apparatus can improve the convenience of the user's scene search when the stop of high-speed playback is slower than the image desired by the user and when the stop is early.
  • FIG. 1 is a block diagram illustrating a configuration of an image data processing device 1 according to a first embodiment.
  • Flowchart of the video decoder unit 16 according to the first embodiment Flowchart of subtitle decoder unit 17 according to Embodiment 1
  • Flowchart of audio decoder unit 15 according to Embodiment 1 Flowchart of Video Output Control Unit 18 according to Embodiment 1
  • the figure for demonstrating the method of high-speed reproduction by Embodiment 1 The figure for demonstrating operation
  • FIG. 1 Flowchart of decoder section 160A according to the first modification of the first embodiment
  • FIG. (A), (b) is a figure (1) for demonstrating the list display of the video output control part 18A by the modification 2 of Embodiment 1.
  • FIG. (A), (b) is a figure (2) for demonstrating the list display of the video output control part 18A by the modification 2 of Embodiment 1.
  • FIG. 1 is a figure (1) for demonstrating the list display of the video output control part 18A by the modification 2 of Embodiment 1.
  • FIG. (A), (b) is a figure (2) for demonstrating the list display of the video output control part 18A by the modification 2 of Embodiment 1.
  • the image data processing apparatus 1 can decode and output data encoded by a moving image compression technique of the MPEG system, and can perform subtitle playback, fast-forward, fast-forward as well as normal AV playback.
  • This is an image data processing apparatus capable of high-speed playback such as reverse, frame advance, and the like.
  • the MPEG system covers all MPEG such as MPEG2, MPEG4-SP, MPEG4-AVC.
  • FIG. 1 is a block diagram of an image data processing apparatus 1 in the present embodiment.
  • An image data processing apparatus 1 shown in FIG. 1 includes a speaker 2, a display device 3, an input control unit 10 that controls input of data recorded on a recording medium such as a disk 4 and a memory card 5, a memory 11, and a CPU 12.
  • the data recorded on the disk 4 and the memory card 5 includes data encoded by the MPEG moving image compression technique that can be output by the image data processing apparatus 1, and also includes audio data and subtitle data. .
  • the input control unit 10 controls input of data recorded on the disk 4 or the memory card 5 under the control of the CPU 12.
  • the input control unit 10 outputs data input from the disk 4 or the memory card 5 to the memory 11.
  • the demultiplexer 14 separates the data output from the memory 11 into audio data, moving picture data encoded by the MPEG system (hereinafter referred to as MPEG moving picture data), and subtitle data under the control of the CPU 12. .
  • the demultiplexing unit 14 outputs the separated audio data to the audio decoder unit 15, outputs moving image data to the video decoder unit 16, and outputs subtitle data to the subtitle decoder unit 17.
  • the video decoder unit 16 includes a decoder unit 160 and an output unit 161.
  • the decoder unit 160 decodes and holds “predetermined number” of images constituting MPEG moving image data to be output in high-speed reproduction, and starts high-speed reproduction. Is output to the video output control unit 18, the “oldest image” is discarded from the held output images. When the high speed reproduction is stopped, the decoder unit 160 outputs information on the image held by the decoder unit 160 at that time from the output unit 161 to the video output control unit 18.
  • the number of sheets designated in advance may be a value inherently held in a setting storage unit included in the image data processing apparatus 1 or a value preset by the user via the user interface 13.
  • the user may designate in advance via the user interface 13 different values for the number of images in the reproduction forward direction and the number of images in the reverse reproduction direction.
  • the “oldest image” refers to the image in the head direction with the oldest time information in the case of fast forward, and the image in the end direction with the newest time information in the case of fast reverse.
  • the decoder unit 160 When the output target image is decoded, the decoder unit 160 outputs time information of the output target image from the output unit 161 to the audio decoder unit 15 and the caption decoder unit 17. When discarding the output image, the decoder unit 160 outputs time information of the discarded image from the output unit 161 to the audio decoder unit 15 and the caption decoder unit 17.
  • the decoder unit 160 determines the output target image from the reproduction speed, the display time per frame, the decoder performance, and the like.
  • the video output control unit 18 outputs an image that is output when a high-speed reproduction stop instruction is received after high-speed reproduction is stopped, and “pre-specified number” of reproduction forward and reverse reproduction images from the output image. Is output from the video decoder unit 16 to the display device 3 as an image list. At this time, the video output control unit 18 receives audio recognition data and subtitle data corresponding to images output to the image list from the audio decoder unit 15 and the subtitle decoder unit 17, respectively.
  • the playback direction of high-speed playback can be implemented in either fast-forward or fast-reverse direction.
  • the forward playback direction refers to the end direction of video data for fast forward, the head direction of video data for fast reverse, and the reverse direction of playback to the head direction of video data for fast forward, video for fast reverse. Indicates the end direction of image data.
  • the video output control unit 18 When the video output control unit 18 is displaying the image list on the display device 3 and is requested by the user to switch to the voice recognition data display via the user interface 13, the video output control unit 18 displays the image list and the sound corresponding to each image. Switch to composite display with recognition data.
  • the speech recognition data is character string information obtained by the speech recognition unit 150 of the audio decoder unit 15 decoding the speech data and performing speech recognition processing.
  • Image output and display refers to display on a display, projection using a projector, printing on a printer, transmission to an external device, storage in a recording medium, processing result to another processing device or other program, etc. This is a concept that includes the delivery of
  • the image output control unit 18 when the image output control unit 18 is displaying the image list on the display device 3 and the user requests switching of subtitle data display via the user interface 13, the image output control unit 18 corresponds the image list to each image. Switch to composite display with subtitle data. Further, when the video output control unit 18 is displaying the image list on the display device 3 and the user is requested to switch the time display via the user interface 13, the video output control unit 18 displays the image list with time information corresponding to each image. Switch to the composite display.
  • the video output control unit 18 starts normal reproduction, high-speed reproduction, or frame advance using an image designated by the user via the user interface 13 as a starting point.
  • the video output control unit 18 may include a display device 3 such as a display.
  • the video output control unit 18 can be realized by driver software of the display device 3 or driver software and an output device of the output device.
  • the audio decoder unit 15 includes a voice recognition unit 150, a decoder unit 151, and an output unit 152.
  • the voice recognition unit 150 receives the time information of the output target image from the decoder unit 160, the voice data is decoded for a time in a range specified in advance with reference to the time information, and the voice recognition unit 150 performs voice recognition processing on the decoded voice data. And creating and holding speech recognition data.
  • the voice recognition unit 150 receives the time information of the discarded image from the decoder unit 160, the voice recognition unit 150 discards the voice recognition data corresponding to the time information of the discarded image, and stops the high-speed playback. Information is output to the video output control unit 18 via the output unit 152.
  • the subtitle decoder unit 17 When receiving the time information of the output target image from the decoder unit 160, the subtitle decoder unit 17 holds the subtitle data for a predetermined time range based on the time information. When receiving the time information of the discarded image, the caption decoder unit 17 discards the caption data corresponding to the time information of the discarded image, and when the high-speed playback is stopped, the subtitle data is stored in the video output control unit. 18 to send.
  • the video output control unit 18, the video decoder unit 16, the audio decoder unit 15, and the caption decoder unit 17 can be usually realized by an MPU, a memory, or the like.
  • the processing procedure of the caption decoder unit 17 is usually realized by software, and the software is recorded on a recording medium such as a ROM. However, it may be realized by hardware (dedicated circuit).
  • FIG. 2 shows the operation of the video decoder unit 16
  • FIG. 3 shows the operation of the caption decoder unit 17
  • the flowchart shown in FIG. 4 shows the operation of the audio decoder unit 15
  • FIG. 9 shows the operation of the video output control unit 18.
  • Step S001 The decoder unit 160 determines whether or not there is a stop request during high-speed playback.
  • Step S002 When it is determined in step S001 that high-speed playback is to be continued, the decoder unit 160 searches for a frame header of moving image data and analyzes the frame header of the found moving image data.
  • Step S003 The decoder unit 160 determines whether or not the found image is an image to be output in high-speed playback from the analysis result in step S002.
  • Step S004 When it is determined in step S003 that the output is not an output target, the decoder unit 160 discards the data of the target image and returns to step S001.
  • Step S005 When the decoder unit 160 determines that the image is to be output in the determination in step S003, the decoder unit 160 performs decoding processing on the target image and accumulation of the decoded image.
  • Step S006 The decoder unit 160 outputs the time information obtained by the decoding in step S005 from the output unit 161 to the audio decoder unit 15 and the caption decoder unit 17.
  • Step S007 The decoder unit 160 determines the number of stored decoded images.
  • the determination condition is whether or not the number of sheets is equal to or greater than a predetermined number of reproduction forward direction sheets (hereinafter referred to as n) +1. If it is less than n + 1, the process returns to step S001, and if it is n + 1 or more, the process of step S008 is performed.
  • the decoder unit 160 outputs the oldest unoutput decoded image for a time corresponding to the reproduction speed, image time information, and the like.
  • the oldest decoded image is an image in the head direction with the oldest time information in the case of fast forward, and an image in the end direction in which the time information is newest in the case of fast reverse.
  • Step S009 The decoder unit 160 determines the number of decoded images that have been output, excluding the images that are being displayed on the display device 3.
  • the determination condition is whether or not the number of sheets is equal to or greater than a predetermined number of reproduction reverse direction sheets (hereinafter referred to as m) +1. If less than m + 1, the process returns to step S001, and if m + 1 or more, the process of step S010 is performed.
  • Step S010 The decoder unit 160 discards the oldest output decoded image.
  • Step S011 The decoder unit 160 outputs the time information of the decoded image discarded in step S010 from the output unit 161 to the audio decoder unit 15 and the caption decoder unit 17. The process returns to step S001.
  • Step S012 The decoder unit 160 performs processing when there is a request for stopping high-speed playback in step S001.
  • the decoder unit 160 outputs information on a maximum of n + m + 1 decoded images held by the video decoder unit 16 from the output unit 161 to the video output control unit 18.
  • Step S101 The subtitle decoder unit 17 determines whether or not there is a stop request during high-speed playback.
  • Step S102 When the subtitle decoder unit 17 determines in step S101 that high-speed playback is to be continued, the subtitle decoder unit 17 determines whether time information of the decoded image has been received from the video decoder unit 16. The subtitle decoder 17 performs the process of step S103 if the time information of the decoded image is received, and performs the process of step S104 if the time information of the decoded image is not received.
  • Step S103 The subtitle decoder unit 17 subtracts the time information of the decoded image from the time information of the received decoded image (hereinafter referred to as T) by subtracting a predetermined time (hereinafter referred to as T1) (T ⁇ T1 to T Search, decode, and store subtitle data in
  • Step S104 The subtitle decoder unit 17 determines whether the time information of the decoded image discarded from the video decoder unit 16 is received. If the subtitle decoder unit 17 has received the time information of the discarded decoded image, the subtitle decoder unit 17 returns to the process of step S105. If it has not received the time information of the discarded decoded image, the subtitle decoder unit 17 returns to step S101.
  • Step S105 The caption decoder unit 17 discards caption data corresponding to the time information of the received decoded image.
  • Step S106 The subtitle decoder unit 17 performs processing when there is a high-speed playback stop request in step S101. Information of the caption data held by the caption decoder unit 17 is output to the video output control unit 18.
  • the process is ended by powering off or interruption for aborting the process.
  • Step S201 The voice recognition unit 150 determines whether or not there is a stop request during high-speed playback.
  • Step S202 When the speech recognition unit 150 determines to continue high-speed playback in step S201, the speech recognition unit 150 determines whether time information of the decoded image is received from the video decoder unit 16. The voice recognition unit 150 performs the process of step S203 if the time information of the decoded image is received, and performs the process of step S205 if the time information of the decoded image is not received.
  • Step S203 The decoder unit 151 searches and decodes audio data in a range (T ⁇ T2 to T + T3) within a predetermined time (hereinafter referred to as T2 and T3) from time information of the received decoded image.
  • Step S204 The voice recognition unit 150 performs voice recognition processing on the audio data decoded in step S203, and accumulates the voice recognition data.
  • Step S205 The voice recognition unit 150 determines whether the time information of the decoded image discarded from the video decoder unit 16 is received. The speech recognition unit 150 returns to step S206 if the time information of the discarded decoded image has been received, and returns to step S201 if the time information of the decoded image that has been discarded by the speech recognition unit 150 has not been received.
  • Step S206 The voice recognition unit 150 discards the voice recognition data corresponding to the time information of the received decoded image.
  • Step S207 The voice recognition unit 150 performs processing when there is a high-speed playback stop request in step S201.
  • the voice recognition unit 150 outputs the information of the voice recognition data held by the audio decoder unit 15 to the video output control unit 18 via the output unit 152.
  • Step S301 The video output control unit 18 determines whether or not there is a stop request during high-speed playback.
  • Step S302 When the video output control unit 18 determines to continue high-speed playback in the determination in step S301, the video output control unit 18 determines whether a decoded image is received from the video decoder unit 16. The video output control unit 18 performs the process of step S303 if a decoded image is received. If the video output control unit 18 has not received the decoded image, the process returns to step S301.
  • Step S303 The video output control unit 18 updates the screen displayed in the image list of the display device 3 with the received decoded image. Then, the process returns to step S301.
  • Step S304 The video output control unit 18 performs processing when there is a high-speed playback stop request in step S301.
  • the video output control unit 18 waits to receive information on the voice recognition data, the decoded image, and the caption data from the audio decoder unit 15, the video decoder unit 16, and the caption decoder unit 17, respectively.
  • Step S305 The video output control unit 18 displays a list of decoded images on the output screen after completing the waiting for reception in step S304.
  • Step S306 The video output control unit 18 determines whether or not there is a subtitle display switching request.
  • Step S307 If the video output control unit 18 determines in step S306 that there is a subtitle display switching request, the video output control unit 18 combines the images displayed in the list and the subtitle data corresponding to the images if the composite display is ON. Then, the image is displayed on the display device 3, and only the image is displayed on the display device 3 if the composite display is OFF.
  • Step S308 The video output control unit 18 determines whether there is a request for switching the voice recognition data display.
  • Step S309 If the video output control unit 18 determines in step S308 that there is a request for switching the voice recognition data display, the video output control unit 18 sets each image being displayed in the list and the voice recognition data corresponding to the image with composite display ON. If there is, the image is combined and displayed on the display device 3, and if the combined display is OFF, only the image is displayed on the display device 3.
  • Step S310 The video output control unit 18 determines whether there is a request for switching the time information data display.
  • Step S311 When the video output control unit 18 determines in step S310 that there is a request for switching the time information data display, the video output control unit 18 displays each image in the image list displayed on the display device 3 and a time corresponding to each image. The information data is combined and displayed on the display device 3 if the combined display is ON, and only the image is displayed on the display device 3 if the combined display is OFF.
  • Step S312 The video output control unit 18 determines whether there is a request to start reproduction. If there is no request, the process returns to step S306.
  • Step S313 When the video output control unit 18 determines the start of normal playback in step S312, the video output control unit 18 starts normal playback from the selected image.
  • Step S314 When the video output control unit 18 determines the start of high-speed playback in step S312, the video output control unit 18 starts high-speed playback from the selected image.
  • the process is terminated by powering off or a process termination interrupt.
  • FIG. 6 is a diagram for explaining a specific operation of the image data processing apparatus 1 during high-speed playback.
  • the arrows in the figure indicate the playback direction.
  • the video decoder unit 16 in the case of high-speed playback in which only an I picture composed of I 1 to I 10 is output and fast-forwarding is performed (in the case of fast-forwarding I picture display), the video decoder unit 16 Then, only P 1 and P 2 are shown) and B picture (only B 1 to B 4 are shown in the figure) are discarded without decoding, and an I picture composed of I 1 to I 10 is decoded. Then, the video decoder unit 16 outputs “predesignated number” of images to the display device 3 for the output time corresponding to the designated speed. For example, if the I picture interval is 10 seconds and the I picture interval is 1 second, the output time is 100 ms.
  • FIG. 7 is a diagram for explaining the operation of the image data processing apparatus 1 from the start to the stop of high-speed playback.
  • the user can set the reproduction forward number n and the reproduction reverse number m via the user interface 13.
  • FIG. 7 it is assumed that the image data processing apparatus 1 processes 12 images (corresponding to I pictures I 1 to I 12 ) in the reproduction direction.
  • the vertical axis in FIG. 7 indicates time, and it is assumed that time advances in the direction of the arrow.
  • the video output control unit 18 accumulates five n + 1 decoded images. Immediately after high-speed reproduction, an image (corresponding to the I picture I 1) is output to the display device 3 from the video output control section 18, the video output control section 18, corresponding to the decoded image of the non-output (I picture I 2 ⁇ I 4 ) Is accumulated.
  • the video output control unit 18 displays on the display device 3 image farthest from (I-picture corresponds to I 1 ⁇ I 5), to remove the leading direction of the image (corresponding to the I picture I 1).
  • FIG. 8 is a diagram illustrating a display example of an image list.
  • an image (corresponding to I picture I 7 ) displayed on the display device 3 is displayed at the center of the display device 3. Then, an image in the head direction of the moving image is displayed toward the upper left of the display device 3, and an image in the end direction of the moving image is displayed toward the lower right.
  • time information for example, 0:12:20
  • caption data for example, ggg and ggg
  • voice recognition data is not displayed (voice recognition display OFF). The user selects an image via the user interface 13 and synthesizes and displays time information, caption data, and voice recognition data.
  • each data can be selected by pressing a button of each color, for example, if the remote control is compatible with terrestrial digital broadcasting. If it is software on a personal computer, it can be selected with a separately prepared check box or the like.
  • the image data processing device 1 by holding the image decoded in advance at the start of high-speed playback, the image output before stopping the high-speed playback and the image scheduled to be output after the stop are displayed. Can be displayed as a list. Thereby, the convenience of a user's scene search can be improved. Further, since the judgment material is increased by combining and displaying the voice recognition data, the caption data, and the time information, the convenience of scene search can be improved.
  • processing in the present embodiment may be realized by software. Then, this software may be distributed by software download or the like. Further, this software may be recorded on a recording medium such as a CD-ROM and distributed. This also applies to other embodiments in this specification.
  • Modification 1 In the image data processing apparatus 1A which is the first modification of the first embodiment, the decoder having sufficient decoding performance holds the decoded image during the high-speed reproduction, so that the image output before the high-speed reproduction is stopped A method for displaying a list of images to be output after the stop will be described.
  • the operation of the video decoder unit 16A composed of the decoder unit 160A and the output unit 161A is different from the operation of the video decoder unit 16 in the first embodiment. Since other configurations have the same functions as those of the first embodiment, the same reference numerals are added and detailed description thereof is omitted.
  • the video decoder unit 16A holds the output target image during high-speed playback, outputs the output target image in accordance with the output timing, and outputs the specified number of images when the output is held in advance.
  • an output unit that waits until a predetermined number of images are held and, if held, sends information about the held image to the video output control unit 18 161A and the output unit have a decoder unit 160A that operates asynchronously and decodes an output target image. It is preferable that the decoder unit 160A has a decoding performance sufficiently faster than the display time per sheet in high-speed playback.
  • the video decoder unit 16A can usually be realized by an MPU, a memory, or the like.
  • the processing procedure of the video decoder unit 16A is usually realized by software, and the software is recorded on a recording medium such as a ROM. However, it may be realized by hardware (dedicated circuit).
  • Steps S401 to S406 shown in FIG. 9 are operations of the decoder unit 160A in the video decoder unit 16A.
  • Step S401 The decoder unit 160A determines whether or not there is a stop request during high-speed playback.
  • Step S402 When it is determined in step S401 that high-speed playback is to be continued, the decoder unit 160A searches for a frame header of moving image data and analyzes the frame header of the found encoded image data.
  • Step S403 The decoder unit 160A determines from the analysis result in step S402 whether the found image is an image to be output in high-speed playback.
  • Step S404 When the decoder unit 160A determines in step S403 that it is not an output target, the decoder unit 160A discards the data of the target image and returns to step S401.
  • Step S405 When the decoder unit 160A determines that the image is to be output in the determination in step S403, the decoder unit 160A performs decoding processing on the target image and accumulation of the decoded image.
  • Step S406 The decoder unit 160A transmits the time information obtained by the decoding in step S405 to the audio decoder unit 15 and the caption decoder unit 17, and returns to step S401.
  • Steps S410 to S418 shown in FIG. 10 are operations of the output unit 161A in the video decoder unit 16.
  • Step S410 The output unit 161A determines whether or not there is a stop request when high-speed playback is in progress.
  • Step S411) The output unit 161A determines whether there is an image decoded by the decoder unit 160A when it is determined in step S410 that continuation of high-speed playback is to be performed. If there is no decoded image, the process returns to step S410.
  • Step S412 When the output unit 161A determines that there is a decoded image in the determination in step S411, the output unit 161A determines whether the decoded image has an output timing in high-speed playback. If it is not the output timing, the process returns to step S410.
  • Step S413 The output unit 161A outputs the decoded image for the output time calculated from the speed of the high-speed playback or the like if the output timing is determined in step S412.
  • Step S414 The output unit 161 ⁇ / b> A determines the number of decoded images that have been output, excluding being displayed.
  • the determination condition is whether or not the number of sheets is equal to or greater than a predetermined number of reproduction reverse direction sheets (hereinafter referred to as m) +1. If less than m + 1, the process returns to step S410, and if m + 1 or more, the process of step S415 is performed.
  • Step S415) The output unit 161A discards the oldest output decoded image.
  • Step S416 The output unit 161A transmits the time information of the decoded image discarded in step S415 to the audio decoder unit 15 and the caption decoder unit 17. The process returns to step S410.
  • Step S417) The output unit 161A performs processing when there is a request for stopping high-speed playback in step S410.
  • the number of decoded images that have not been output is determined. If the number is less than the number of reproduction forward direction sheets (hereinafter referred to as n), this step is repeated, and if it is n or more, the process of step S418 is performed.
  • Step S418) The output unit 161A transmits information on the held decoded image to the video output control unit 18.
  • the process is terminated by powering off or a process termination interrupt.
  • the user can set the reproduction forward direction number n and the reproduction reverse number m using the user interface 13.
  • the decoder unit 160A in the video decoder unit 16A performs I-picture search and decoding processing asynchronously with the output unit 161A in accordance with processing performance in the case of fast-forwarding that outputs only I pictures after the start of high-speed playback.
  • I picture search and decoding process is stopped, and when the decoding of the decoded image in the output unit 161A is detected, the process is resumed.
  • the output unit 161A in the video decoder unit 16A outputs any image decoded by the decoder unit 160 during high-speed playback. When five or more output images are accumulated, m + 1 is deleted from the image that is farthest from the displayed image. When high-speed playback is stopped, it waits until there are four or more decoded images n that have not yet been output. If there are four or more images, image information is transmitted to the video output control unit 18, and the received video output control unit 18 decodes List images.
  • a decoder having sufficient decoding performance holds a decoded image during high-speed playback, so that an image output before the high-speed playback stop and an image scheduled to be output after the stop are displayed. Can be displayed as a list.
  • the convenience of a user's scene search can be improved.
  • the composite display of voice recognition data, subtitle data, and time information increases the judgment material for scene search, so the convenience of scene search can be improved.
  • Modification 2 In the image data processing apparatus 1B which is the second modification of the first embodiment, when displaying a list of images output before the high-speed playback stop and images scheduled to be output after the stop, on the time axis of the moving image data, A method for displaying a wider range will be described.
  • the operations of the video output control unit 18A and the CPU 12A are different from the operations of the video output control unit 18 and the CPU 12 in the first embodiment. Since other configurations have the same functions as those of the first embodiment, the same reference numerals are added and detailed description thereof is omitted.
  • the video output control unit 18A after stopping high-speed playback, outputs an image output at the time when a high-speed playback stop instruction is received, and a predetermined number of playback forward and reverse playback images from the output image. Received from the decoder unit 16 and thins out a predetermined number of images and outputs them as an image list.
  • the user can use the user interface 13 to set the reproduction forward direction number n and the reproduction reverse direction number m, and the decoding image list display method.
  • the CPU 12A sets the number of stored decoded images for the video decoder unit 16 from the values of n and m and the thinning method. In the present embodiment, 10 images that have not been output in the forward playback direction and 10 images that have been output in the reverse playback direction are set.
  • the video decoder unit 16 transmits information of 21 images I 1 to I 21 including 10 + 10 + 1 including the decoded image being output to the video output control unit 18.
  • the video output control unit 18A moves the images I 1 to I 21 (see FIG. 11A) as received images away from the image being output on the time axis of the moving image data as shown in FIG. 11B.
  • the list is displayed by thinning out 0 sheets, 1 sheet, 2 sheets, and 3 sheets.
  • a wider range can be displayed on the time axis of the moving image data.
  • a list is displayed by thinning out images one by one from the images I 3 to I 19 as received images (see FIG. 12B), It is possible to display a list with a fixed number of images, such as thinning out every two images.
  • each functional block used in the description of each of the above embodiments is typically realized as an LSI which is an integrated circuit. These may be individually made into one chip, or may be made into one chip so as to include a part or all of them.
  • the name used here is LSI, but it may also be called IC, system LSI, super LSI, or ultra LSI depending on the degree of integration.
  • the method of circuit integration is not limited to LSI, and may be realized by a dedicated circuit or a general-purpose processor.
  • An FPGA Field Programmable Gate Array
  • a reconfigurable processor that can reconfigure the connection and setting of the circuit cells inside the LSI may be used.
  • the image data processing apparatus in high-speed reproduction of data encoded by the MPEG moving image compression technique, an image being output when high-speed reproduction is stopped, and before the high-speed reproduction is stopped.
  • the convenience of the user's scene search is improved when the stop of high-speed playback is slower than the image desired by the user and when it is earlier It is useful for reproducing moving pictures recorded on devices such as optical disks such as DVD and BD, storage devices such as HDD and SD, recorders and portable terminals, and the like.

Abstract

 高速再生の停止がユーザの所望する画像より遅い場合と、早い場合におけるユー ザの場面探索の利便性を向上させること。MPEG方式の動画像圧縮技術により符号化されたデータを復号して出力する画像データ処理装置であって、高速再生停止後、高速再生の停止指示を受けた時点で出力している画像と、予め指定された枚数の画像を前記出力画像から再生順方向と、再生逆方向の画像とをビデオデコーダ部から受信、画像一覧として出力する映像出力制御部を具備する画像データ処理装置により、高速再生の停止がユーザの所望する画像より遅い場合と、早い場合におけるユーザの場面探索の利便性が向上できる。

Description

画像データ処理装置
 本発明は、MPEG(Moving Picture Experts Group)の動画像圧縮技術により符号化されたデータを復号して出力する画像データ処理装置に関する。
 MPEG方式の動画像圧縮技術には、フレーム間予測と呼ばれる圧縮技術を用いる。フレーム間予測により符号化された符号化データの復号の際には、当該フレームの符号化データのみならず、予め復号化された当該フレームの過去または、未来の復号化データが必要である。
 符号化データには、当該フレームの符号化データのみで復号が可能なIピクチャ(Intra Picture)、当該フレームの符号化データと以前に復号化された過去のIピクチャまたはPピクチャから復号が可能なPピクチャ(Predictive Picutre)、当該フレームの符号化データと以前に復号化された過去および未来のIピクチャまたはPピクチャから復号が可能なBピクチャ(Bidirectionally Predictive Picture)の3種類がある。
 Bピクチャは、復号化の際、未来のデータを必要とするため符号化する場合には順を入れ替えて符号化する。IピクチャとPピクチャは未来のデータを必要としないため符号化する場合には順を入れ替えず符号化する。
 MPEG方式における高速再生では、画像の表示間隔を短くし、再生速度と処理性能によってはBピクチャを破棄して表示または、Bピクチャ及び、Pピクチャを破棄して表示する方法が一般的である。
 このような高速再生において、ユーザの主な場面探索方法は、高速再生中の表示画像を目視し、ユーザの任意の操作タイミングで再生を開始する方法である。しかし、所望の画像を発見してから操作した場合は、実際の操作と画像データ処理装置の処理の差分により、所望の画像から行き過ぎて高速再生を停止し、行き過ぎることを見越して早めに操作した場合は、所望の画像より高速再生の停止が早すぎる傾向にある。また、高速再生の停止と再開を繰り返すことでようやく所望の画像に到達することもある。
 従来の画像データ処理装置において、高速再生中に復号し、表示した画像を保持し、高速再生を停止したときに、保持していた表示中の画像とそれ以前の画像を一覧表示し、一覧表示した画像のうち、ユーザが選択した画像から再生できるようにすることで、ユーザが所望する画像から行き過ぎた画像で停止した場合における場面探索の利便性を向上させる方法がある(例えば、特許文献1参照)。
日本国特開2006-33841号公報(第1頁、第1図等)
 しかしながら、従来の画像データ処理装置においては、高速再生による場面探索で、ユーザの所望する画像より高速再生の停止が遅い場合の利便性向上に対応しているが、高速再生の停止が早い場合の利便性向上には対応できていない、という課題があった。
 本発明は、高速再生を停止したときに出力中の画像と、高速再生停止以前に出力した画像と、停止以降に出力する予定の画像を一覧として表示することで、高速再生の停止がユーザの所望する画像より遅い場合と、早い場合におけるユーザの場面探索の利便性が向上する画像データ処理装置を提供することを目的とする。
 本発明の第1の態様において、画像データ処理装置は、MPEG方式の動画像圧縮技術により符号化されたデータを復号して出力する画像データ処理装置であって、高速再生停止後、高速再生の停止指示を受けた時点で出力している画像と、予め指定された枚数の画像を前記出力画像から再生順方向と、再生逆方向の画像とをビデオデコーダ部から受信、画像一覧として出力する映像出力制御部を具備する画像データ処理装置である。
 かかる構成により、出力画像から予め指定された枚数の再生順方向および再生逆方向の画像を画像一覧として出力するので、高速再生の停止がユーザの所望する画像より遅い場合と、早い場合におけるユーザの場面探索の利便性が向上する。
 また、本発明の第2の態様において、画像データ処理装置は、第1の態様に対して、前記映像出力制御部は、前記画像一覧からユーザが指定した画像を開始点として、通常再生、高速再生または、コマ送りの開始を制御する機能を有する画像データ処理装置である。
 かかる構成により、画像一覧からユーザが指定した画像を開始点として、通常再生、高速再生または、コマ送りを開始するので、高速再生の停止がユーザの所望する画像より遅い場合と、早い場合におけるユーザの場面探索の利便性が向上する。
 また、本発明の第3の態様において、画像データ処理装置は、第1の態様に対して、前記映像出力制御部は、画像一覧を出力するとき、予め指定された枚数の画像を間引いて画像一覧として出力する機能を有する画像データ処理装置である。
 かかる構成により、予め指定された枚数の画像を間引いて画像一覧として出力するので、動画像データの時間軸上で探索対象の画像をより広い範囲を表示でき、高速再生の停止がユーザの所望する画像より遅い場合と、早い場合におけるユーザの場面探索の利便性が向上する。
 また、本発明の第4の態様において、画像データ処理装置は、第1の態様に対して、高速再生で出力対象となる画像を予め指定された枚数だけ復号、保持してから高速再生を開始し、予め指定された枚数だけ画像を出力したとき、保持している出力済みの画像の中で、最も古い画像を破棄し、高速再生を停止したとき、保持している画像の情報を前記映像出力制御部に送信するビデオデコーダ部を具備する画像データ処理装置である。
 かかる構成により、予め指定された枚数だけ画像を出力したとき、保持している出力済みの画像の中で、最も古い画像を破棄するので、高速再生の停止がユーザの所望する画像より遅い場合と、早い場合におけるユーザの場面探索の利便性が向上する。
 また、本発明の第5の態様において、本発明の画像データ処理装置は、MPEG方式の動画像圧縮技術により符号化されたデータを復号して出力する画像データ処理装置であって、高速再生で出力対象となる画像を高速再生するためのビデオデコーダ部と、高速再生停止後、高速再生の停止指示を受けた時点で出力している画像及び出力画像から、所定の枚数の再生順方向及び再生逆方向の画像を前記ビデオデコーダ部から受信し、画像一覧として出力する映像出力制御部と、高速再生を停止すると、保持している画像の情報を前記映像出力制御部に出力する出力部と、前記出力部とは非同期で動作し、出力対象画像を復号するデコーダ部と、を備え、前記ビデオデコーダ部は、高速再生中、出力対象画像を保持し、当該出力対象画像を出力タイミングにあわせて出力し、所定の枚数だけ出力すると、保持している出力済みの画像の中で最も古い画像を破棄する。
 かかる構成により、十分なデコード性能を持ったデコーダ部が高速再生中にデコード画像を保持することで、高速再生の停止がユーザの所望する画像より遅い場合と、早い場合におけるユーザの場面探索の利便性が向上する。
 本発明に係る画像データ処理装置によれば、高速再生の停止がユーザの所望する画像より遅い場合と、早い場合におけるユーザの場面探索の利便性が向上させることができる。
実施の形態1による画像データ処理装置1の構成を示すブロック図 実施の形態1によるビデオデコーダ部16のフローチャート 実施の形態1による字幕デコーダ部17のフローチャート 実施の形態1によるオーディオデコーダ部15のフローチャート 実施の形態1による映像出力制御部18のフローチャート 実施の形態1による高速再生の方法を説明するための図 高速再生開始から停止までの映像出力制御部18の動作を説明するための図 実施の形態1による映像出力制御部18の一覧表示を説明するための図 実施の形態1の変形例1によるデコーダ部160Aのフローチャート 実施の形態1の変形例1による出力部161Aのフローチャート (a)、(b)は、実施の形態1の変形例2による映像出力制御部18Aの一覧表示を説明するための図(1) (a)、(b)は、実施の形態1の変形例2による映像出力制御部18Aの一覧表示を説明するための図(2)
 以下、実施の形態について図面を参照して説明する。なお、実施の形態において同じ符号を付した構成要素は同様の動作を行うので、再度の説明を省略する場合がある。
(実施の形態1)
 本発明の実施の形態1において、高速再生開始時に予め復号した画像を保持することで、高速再生停止以前に出力した画像と、停止以降に出力する予定の画像を一覧として表示する方法について説明する。
 実施の形態1に係る画像データ処理装置1は、MPEG方式の動画像圧縮技術により符号化されたデータを復号して出力することができ、通常のAV再生だけでなく字幕再生や、早送り、早戻しといった高速再生、コマ送り等も可能である画像データ処理装置である。
 MPEG方式とは、MPEG2、MPEG4-SP、MPEG4-AVCなどMPEG全般が対象である。
 図1を参照して、実施の形態1における画像データ処理装置1の構成について説明する。図1は、本実施の形態における画像データ処理装置1のブロック図である。図1に示す画像データ処理装置1は、スピーカ2と、表示デバイス3と、ディスク4及びメモリカード5の記録媒体に記録されたデータの入力を制御する入力制御部10と、メモリ11と、CPU12と、ユーザインターフェース13と、多重分離部14と、オーディオデコーダ部15と、ビデオデコーダ部16と、字幕デコーダ部17と、映像出力制御部18とを備える。
 ディスク4及びメモリカード5に記録されたデータには、画像データ処理装置1で出力可能な、MPEG方式の動画像圧縮技術により符号化されたデータが含まれる他、音声データや字幕データも含まれる。
 入力制御部10は、CPU12の制御により、ディスク4やメモリカード5に記録されたデータの入力を制御する。入力制御部10は、ディスク4やメモリカード5から入力されたデータをメモリ11に出力する。
 多重分離部14は、CPU12の制御により、メモリ11から出力されたデータを、オーディオデータ、MPEG方式で符号化された動画像データ(以下、MPEG動画像データと称する)、及び字幕データに分離する。多重分離部14は、分離されたオーディオデータをオーディオデコーダ部15に出力し、動画像データをビデオデコーダ部16に出力し、字幕データを字幕デコーダ部17に出力する。
 ビデオデコーダ部16は、デコーダ部160と、出力部161とから構成される。デコーダ部160は、高速再生で出力対象となるMPEG動画像データを構成する画像を「予め指定された枚数」だけ復号、保持してから高速再生を開始し、「予め指定された枚数」だけ画像を映像出力制御部18へ出力したとき、保持している出力済みの画像の中で、「最も古い画像」を破棄する。デコーダ部160は、高速再生を停止したとき、その時点でデコーダ部160が保持している画像の情報を、出力部161から映像出力制御部18に出力する。
 ここで、「予め指定された枚数」とは、画像データ処理装置1が内部に持つ設定記憶部に固有で保持する値でも、ユーザがユーザインターフェース13を介して予め設定する値でも良い。また、再生順方向の枚数、再生逆方向の枚数、それぞれに対して別々の値を、ユーザがユーザインターフェース13を介して予め指定しても良い。
 ここで、「最も古い画像」とは、早送りの場合、時間情報が最も古い先頭方向の画像を指し、早戻しの場合、時間情報が最も新しい終端方向の画像を指す。
 デコーダ部160は、出力対象画像を復号したとき、出力対象画像の時間情報を、出力部161から、オーディオデコーダ部15と字幕デコーダ部17とに出力する。デコーダ部160は、出力済み画像を破棄したとき、破棄画像の時間情報を、出力部161から、オーディオデコーダ部15と字幕デコーダ部17とに出力する。
 デコーダ部160は、出力対象画像を、再生速度、1枚あたりの表示時間、デコーダ性能等から判定する。
 映像出力制御部18は、高速再生停止後、高速再生の停止指示を受けた時点で出力している画像と、出力画像から「予め指定された枚数」の再生順方向および再生逆方向の画像とを、ビデオデコーダ部16から受けて、表示デバイス3へ画像一覧として出力する。このとき、映像出力制御部18は、画像一覧に出力される画像に対応する音声認識データ及び字幕データを、それぞれオーディオデコーダ部15と字幕デコーダ部17とから受信する。
 高速再生の再生方向は、早送り、早戻しのどちらの方向でも実施可能である。再生順方向とは、早送りなら、動画像データの終端方向を、早戻しなら動画像データの先頭方向を指し、再生逆方向とは、早送りなら、動画像データの先頭方向を、早戻しなら動画像データの終端方向を指す。
 映像出力制御部18は、画像一覧を表示デバイス3に表示中、ユーザからユーザインターフェース13を介して、音声認識データ表示への切り替えを要求された場合、画像一覧を各画像と画像に対応した音声認識データとの合成表示に切り替える。
 ここで、音声認識データとは、オーディオデコーダ部15の音声認識部150が、音声データを復号し、音声認識処理して得られる文字列情報である。
 また、合成表示の実施方法は、画像と文字列が被る形で表示しても、画像と文字列の関連がわかる程度に被らない形で表示してもよい。画像の出力、表示とは、ディスプレイへの表示、プロジェクターを用いた投影、プリンタへの印字、外部の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラム等への処理結果の引渡し等を含む概念である。
 同様に、映像出力制御部18は、画像一覧を表示デバイス3に表示中、ユーザからユーザインターフェース13を介して、字幕データ表示の切り替えを要求された場合、画像一覧を各画像と画像に対応した字幕データとの合成表示に切り替える。さらに、映像出力制御部18は、画像一覧を表示デバイス3に表示中、ユーザからユーザインターフェース13を介して、時間表示の切り替えを要求されたとき、画像一覧を各画像と画像に対応した時間情報との合成表示に切り替える。
 また、映像出力制御部18は、ユーザがユーザインターフェース13を介して指定した画像を開始点として、通常再生、高速再生または、コマ送りを開始する。
 映像出力制御部18は、ディスプレイ等の表示デバイス3を含んでも良い。映像出力制御部18は、表示デバイス3のドライバーソフトまたは、出力デバイスのドライバーソフトと出力デバイス等で実現され得る。
 オーディオデコーダ部15は、音声認識部150と、デコーダ部151と、出力部152とから構成される。デコーダ部151がデコーダ部160から出力対象画像の時間情報を受信すると、時間情報を基準に予め指定された範囲の時間だけ音声データを復号し、音声認識部150が復号した音声データを音声認識処理し、音声認識データの作成と保持する。そして、音声認識部150は、デコーダ部160から破棄画像の時間情報を受信すると、破棄画像の時間情報に対応する音声認識データを破棄し、高速再生を停止すると、保持している音声認識データの情報を、出力部152を介して、映像出力制御部18に出力する。
 字幕デコーダ部17は、デコーダ部160から出力対象画像の時間情報を受信すると、時間情報を基準に、予め指定された範囲の時間だけ字幕データを保持する。そして、字幕デコーダ部17は、破棄画像の時間情報を受信すると、破棄画像の時間情報に対応した字幕データを破棄し、高速再生を停止すると、保持している字幕データの情報を映像出力制御部18に送信する。
 映像出力制御部18、ビデオデコーダ部16、オーディオデコーダ部15、及び字幕デコーダ部17は、通常、MPUやメモリ等から実現され得る。字幕デコーダ部17の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはROM等の記録媒体に記録されている。但し、ハードウェア(専用回路)で実現しても良い。
 次に、画像データ処理装置1の動作について図2~図5に示すフローチャートを用いて説明する。図2に示すフローチャートは、ビデオデコーダ部16の動作を示し、図3に示すフローチャートは、字幕デコーダ部17の動作を示し、図4に示すフローチャートは、オーディオデコーダ部15の動作を示し、図5に示すフローチャートは、映像出力制御部18の動作を示す。
 ここで、図2を参照して、ビデオデコーダ部16のデコーダ部160の動作を説明する。図2に示すフローチャートのステップは、ステップS001からS012で構成される。
(ステップS001)
 デコーダ部160は、高速再生中の場合、停止要求があるかどうかを判定する。
(ステップS002)
 デコーダ部160は、ステップS001の判定で高速再生の継続を判定したとき、動画像データのフレームヘッダを検索し、発見した動画像データのフレームヘッダの解析を行う。
(ステップS003)
 デコーダ部160は、ステップS002の解析結果から、発見した画像が高速再生で出力対象の画像であるかどうかを判定する。
(ステップS004)
 デコーダ部160は、ステップS003の判定で出力対象外と判定したとき、対象画像のデータを破棄して、ステップS001に戻る。
(ステップS005)
 デコーダ部160は、ステップS003の判定で出力対象と判定したとき、対象画像のデコード処理と、デコード画像の蓄積とを行う。
(ステップS006)
 デコーダ部160は、ステップS005のデコードで得られた時間情報を、出力部161からオーディオデコーダ部15、及び字幕デコーダ部17に出力する。
(ステップS007)
 デコーダ部160は、蓄積されたデコード画像の枚数を判定する。判定条件は、枚数が予め指定された再生順方向枚数(以降nとする)+1以上であるかどうかである。n+1未満ならステップS001に戻り、n+1以上ならステップS008の処理を行う。
(ステップS008)
 デコーダ部160は、最も古い未出力のデコード画像を、再生速度や画像の時間情報等の応じた時間だけ出力する。最も古いデコード画像とは、早送りの場合、時間情報が最も古い先頭方向の画像、早戻しの場合、時間情報が最も新しい終端方向の画像である。
(ステップS009)
 デコーダ部160は、表示デバイス3に表示中されている画像を除き、出力済みのデコード画像の枚数を判定する。判定条件は、枚数が予め指定された再生逆方向枚数(以降mとする)+1以上であるかどうかである。m+1未満ならステップS001に戻り、m+1以上ならステップS010の処理を行う。
(ステップS010)
 デコーダ部160は、最も古い出力済みのデコード画像を破棄する。
(ステップS011)
 デコーダ部160は、ステップS010で破棄したデコード画像の時間情報を、出力部161からオーディオデコーダ部15、字幕デコーダ部17に出力する。ステップS001に戻る。
(ステップS012)
 デコーダ部160は、ステップS001で高速再生の停止要求があった場合に処理する。デコーダ部160は、ビデオデコーダ部16が保持している最大n+m+1枚のデコード画像の情報を、出力部161から映像出力制御部18に出力する。
 なお、図2に示すフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。
 ここで、図3を参照して、字幕デコーダ部17の動作を説明する。図3に示すフローチャートのステップは、ステップS101からS106で構成される。
(ステップS101)
 字幕デコーダ部17は、高速再生中の場合、停止要求があるかどうかを判定する。
(ステップS102)
 字幕デコーダ部17は、ステップS101で高速再生の継続と判定すると、ビデオデコーダ部16からデコード画像の時間情報を受信しているかどうかを判定する。字幕デコーダ部17は、デコード画像の時間情報を受信していればステップS103の処理を、デコード画像の時間情報を受信していなければステップS104の処理を行う。
(ステップS103)
 字幕デコーダ部17は、デコード画像の時間情報を、受信したデコード画像の時間情報(以降Tとする)から予め指定された時間(以降T1とする)を引いた時間の範囲(T-T1からTまで)にある字幕データを検索、デコード、蓄積する。
(ステップS104)
 字幕デコーダ部17は、ビデオデコーダ部16から破棄したデコード画像の時間情報を受信しているかどうかを判定する。字幕デコーダ部17は、破棄したデコード画像の時間情報を受信していればステップS105の処理を、破棄したデコード画像の時間情報を受信していなければステップS101に戻る。
(ステップS105)
 字幕デコーダ部17は、受信したデコード画像の時間情報に対応した字幕データを破棄する。
(ステップS106)
 字幕デコーダ部17は、ステップS101で高速再生の停止要求があった場合に処理する。字幕デコーダ部17が保持している字幕データの情報を映像出力制御部18に出力する。
 なお、図3に示すフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。
 ここで、図4を参照して、オーディオデコーダ部15の動作を説明する。図4に示すフローチャートのステップは、ステップS201からS207で構成される。
(ステップS201)
 音声認識部150は、高速再生中の場合、停止要求があるかどうかを判定する。
(ステップS202)
 音声認識部150は、ステップS201で高速再生の継続を判定すると、音声認識部150は、ビデオデコーダ部16からデコード画像の時間情報を受信しているかどうかを判定する。音声認識部150は、デコード画像の時間情報を受信していればステップS203の処理を、デコード画像の時間情報を受信していなければステップS205の処理を行う。
(ステップS203)
 デコーダ部151は、受信したデコード画像の時間情報から予め指定された時間(以下T2、T3とする)の範囲(T-T2からT+T3まで)のオーディオデータを検索、デコードする。
(ステップS204)
 音声認識部150は、ステップS203でデコードしたオーディオデータの音声認識処理をし、音声認識データを蓄積する。
(ステップS205)
 音声認識部150は、ビデオデコーダ部16から破棄したデコード画像の時間情報を受信しているかどうかを判定する。音声認識部150は、破棄したデコード画像の時間情報を受信していればステップS206の処理を、音声認識部150が破棄したデコード画像の時間情報を受信していなければステップS201に戻る。
(ステップS206)
 音声認識部150は、受信したデコード画像の時間情報に対応した音声認識データを破棄する。
(ステップS207)
 音声認識部150は、ステップS201で高速再生の停止要求があった場合に処理する。音声認識部150は、オーディオデコーダ部15が保持している音声認識データの情報を、出力部152を介して、映像出力制御部18に出力する。
 なお、図4に示すフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。
 ここで、図5を参照して、映像出力制御部18の動作を説明する。図5に示すフローチャートのステップは、ステップS301からS314で構成される。
(ステップS301)
 映像出力制御部18は、高速再生中の場合、停止要求があるかどうかを判定する。
(ステップS302)
 映像出力制御部18は、ステップS301の判定で高速再生の継続を判定すると、映像出力制御部18は、ビデオデコーダ部16からデコード画像を受信しているかどうかを判定する。映像出力制御部18は、デコード画像を受信していればステップS303の処理を行う。映像出力制御部18がデコード画像を受信していなければステップS301に戻る。
(ステップS303)
 映像出力制御部18は、受信したデコード画像で、表示デバイス3の画像一覧に表示されている画面を更新する。そして、ステップS301に戻る。
(ステップS304)
 映像出力制御部18は、ステップS301で高速再生の停止要求があった場合に処理する。映像出力制御部18は、オーディオデコーダ部15、ビデオデコーダ部16、字幕デコーダ部17からそれぞれ音声認識データ、デコード画像、字幕データの情報を受信するのを待つ。
(ステップS305)
 映像出力制御部18は、ステップS304の受信待ち完了後、デコード画像の出力画面への一覧表示をする。
(ステップS306)
 映像出力制御部18は、字幕表示の切り替え要求があるかどうかを判定する。
(ステップS307)
 映像出力制御部18は、ステップS306で字幕表示の切り替え要求があると判定すると、映像出力制御部18は、一覧表示中の各画像と画像に対応した字幕データを、合成表示ONであれば合成して表示デバイス3に表示し、合成表示OFFであれば表示デバイス3に画像のみ表示するようにする。
(ステップS308)
 映像出力制御部18は、音声認識データ表示の切り替え要求があるかどうかを判定する。
(ステップS309)
 映像出力制御部18は、ステップS308で音声認識データ表示の切り替え要求があると判定すると、映像出力制御部18は、一覧表示中の各画像と画像に対応した音声認識データを、合成表示ONであれば合成して表示デバイス3に表示し、合成表示OFFであれば画像のみを表示デバイス3に表示する。
(ステップS310)
 映像出力制御部18は、時間情報データ表示の切り替え要求があるかどうかを判定する。
(ステップS311)
 映像出力制御部18は、ステップS310で時間情報データ表示の切り替え要求があると判定すると、映像出力制御部18は、表示デバイス3に表示されている画像一覧の各画像と各画像に対応した時間情報データとを、合成表示ONであれば合成して表示デバイス3に表示し、合成表示OFFであれば画像のみを表示デバイス3に表示する。
(ステップS312)
 映像出力制御部18は、再生開始の要求があるかどうかを判定する。要求がない場合、ステップS306に戻る。
(ステップS313)
 映像出力制御部18は、ステップS312で通常再生の開始を判定すると、映像出力制御部18は、選択されている画像から通常再生を開始する。
(ステップS314)
 映像出力制御部18は、ステップS312で高速再生の開始を判定すると、選択されている画像から高速再生を開始する。
 なお、図5に示すフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。
 以下、本実施の形態に係る画像データ処理装置1の具体的な動作について、図6~図8を用いて説明する。
 図6は、高速再生時の画像データ処理装置1の具体的な動作を説明するための図である。図中の矢印は再生方向を示す。図6に示すようにI~I10で構成されるIピクチャのみを出力して早送りを行う高速再生の場合(Iピクチャ表示の早送りの場合)、ビデオデコーダ部16は、Pピクチャ(図中では、P、Pのみ示す)、Bピクチャ(図中、B~Bのみ示す)のデコードをせず破棄、I~I10で構成されるIピクチャをデコードする。そして、ビデオデコーダ部16は、指定された速度に応じた出力時間だけ、「予め指定された枚数」の画像を表示デバイス3に出力する。例えば10倍速でIピクチャの間隔が1秒毎であれば出力時間は100msとなる。
 図7は、高速再生を開始してから停止するまでの画像データ処理装置1の動作を説明するための図である。ユーザは、ユーザインターフェース13を介して、再生順方向枚数nと再生逆方向枚数mを設定することができる。本例ではn=4、m=4と設定する。
 図7において、画像データ処理装置1は、再生方向に向けて12枚の画像(IピクチャーI~I12に対応)を処理するものとする。また、図7の縦軸は時間を示し、矢印の向きに時間が進んでいるものとする。
 図7に示すように、高速再生開始時、映像出力制御部18は、n+1の5枚のデコード済みの画像を蓄積する。高速再生直後、画像(IピクチャーIに対応)が映像出力制御部18から表示デバイス3に出力され、映像出力制御部18には、未出力のデコード画像(IピクチャーI~Iに対応)が蓄積される。
 高速再生中、映像出力制御部18に出力済みの画像(IピクチャーI~Iに対応)がm+1の5枚以上蓄積されると、映像出力制御部18は、表示デバイス3に表示中の画像(IピクチャーI~Iに対応)から一番遠い、先頭方向の画像(IピクチャーIに対応)を削除する。
 高速再生停止時、ビデオデコーダ部16が保持しているn+m+1の9枚の画像の情報を映像出力制御部18に出力し、画像情報を受信した映像出力制御部18は、デコード画像を画像一覧として表示デバイス3で表示する。
 ここで、図8を参照して、画像一覧としてデコード画像を表示デバイス3に表示する例を説明する。図8は、画像一覧の表示例を示す図である。
 高速再生停止時、表示デバイス3に表示されている画像(IピクチャーIに対応)が、表示デバイス3の中心に表示されている。そして、表示デバイス3の左上に向かって動画の先頭方向の画像を、右下に向かって動画の終端方向の画像を表示している。
 図8に示す表示例では、各画像の左上に時間情報(例えば、0:12:20)を合成表示し、各画像の下に字幕データ(例えば、ggg ggg)を合成表示している。ただし、音声認識データは表示していない(音声認識表示OFF)。ユーザは、ユーザインターフェース13を介して、画像を選択して、時間情報、字幕データ、音声認識データをそれぞれについて、合成表示する。
 各データの表示選択は、例えば、地上デジタル放送に対応したリモコンであれば、各色のボタンの押下で選択できる。パーソナルコンピュータ上のソフトであれば、別途用意されたチェックボックス等で選択できる。
 以上、本実施の形態に係る画像データ処理装置1によれば、高速再生開始時に予め復号した画像を保持することで、高速再生停止以前に出力した画像と、停止以降に出力する予定の画像を一覧として表示できる。これにより、ユーザの場面探索の利便性を向上することができる。また、音声認識データ、字幕データ、時間情報の合成表示により判断材料が増えるため、場面探索の利便性を向上することができる。
 さらに、本実施の形態における処理は、ソフトウェアで実現しても良い。そして、このソフトウェアをソフトウェアダウンロード等により配布しても良い。また、このソフトウェアをCD-ROMなどの記録媒体に記録して流布しても良い。なお、このことは、本明細書における他の実施の形態においても該当する。
(変形例1)
 ここで、実施の形態1の変形例1である画像データ処理装置1Aにおいて、十分なデコード性能を持ったデコーダが高速再生中にデコード画像を保持することで、高速再生停止以前に出力した画像と、停止以降に出力する予定の画像を一覧として表示する方法について説明する。
 変形例1では、デコーダ部160Aと出力部161Aとで構成されるビデオデコーダ部16Aの動作が、実施の形態1におけるビデオデコーダ部16の動作と異なる。それ以外の構成は、実施の形態1と同じ機能を有するため、同じ参照番号を付記し、その詳細な説明を省略する。
 変形例1では、ビデオデコーダ部16Aは、高速再生中、出力対象画像を保持し、出力対象画像を出力タイミングにあわせ出力し、予め指定された枚数だけ出力したとき、保持している出力済みの画像の中で最も古い画像を破棄し、高速再生を停止したとき、予め指定された枚数だけ保持するまで待ち、保持している場合、保持画像の情報を映像出力制御部18に送信する出力部161Aと、出力部とは非同期で動作し出力対象画像を復号するデコーダ部160Aを有する。デコーダ部160Aは、高速再生における1枚あたりの表示時間より十分に速いデコード性能を持っている方が好ましい。
 ビデオデコーダ部16Aは、通常、MPUやメモリ等から実現され得る。ビデオデコーダ部16Aの処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはROM等の記録媒体に記録されている。但し、ハードウェア(専用回路)で実現しても良い。
 次に、実施の形態1の変形例である画像データ処理装置1Aの動作について、図9、10のフローチャートを用いて説明する。図9に示すステップS401からS406はビデオデコーダ部16A内のデコーダ部160Aの動作である。
(ステップS401)
 デコーダ部160Aは、高速再生中の場合、停止要求があるかどうかを判定する。
(ステップS402)
 デコーダ部160Aは、ステップS401の判定で高速再生の継続を判定したとき、動画像データのフレームヘッダを検索し、発見した符号化されている画像データのフレームヘッダの解析を行う。
(ステップS403)
 デコーダ部160Aは、ステップS402の解析結果から、発見した画像が高速再生で出力対象の画像であるかどうかを判定する。
(ステップS404)
 デコーダ部160Aは、ステップS403の判定で出力対象外と判定したとき、対象画像のデータを破棄して、ステップS401に戻る。
(ステップS405)
 デコーダ部160Aは、ステップS403の判定で出力対象と判定したとき、対象画像のデコード処理と、デコード画像の蓄積を行う。
(ステップS406)
 デコーダ部160Aは、ステップS405のデコードで得られた時間情報を、オーディオデコーダ部15、字幕デコーダ部17に送信し、ステップS401に戻る。
 図10に示すステップS410からS418はビデオデコーダ部16内の出力部161Aの動作である。
(ステップS410)
 出力部161Aは、高速再生中の場合、停止要求があるかどうかを判定する。
(ステップS411)
 出力部161Aは、ステップS410の判定で高速再生の継続を判定したとき、デコーダ部160Aがデコードした画像があるかどうか判定する。デコード画像がなければ、ステップS410に戻る。
(ステップS412)
 出力部161Aは、ステップS411の判定でデコード画像があると判定したとき、デコード画像が高速再生での出力タイミングになっているかどうか判定する。出力タイミングでなければ、ステップS410に戻る。
(ステップS413)
 出力部161Aは、ステップS412の判定で出力タイミングになっていれば、高速再生の速度等から算出された出力時間だけデコード画像を出力する。
(ステップS414)
 出力部161Aは、表示中を除く、出力済みのデコード画像の枚数を判定する。判定条件は、枚数が予め指定された再生逆方向枚数(以降mとする)+1以上であるかどうかである。m+1未満ならステップS410に戻り、m+1以上ならステップS415の処理を行う。
(ステップS415)
 出力部161Aは、最も古い出力済みのデコード画像を破棄する。
(ステップS416)
 出力部161Aは、ステップS415で破棄したデコード画像の時間情報を、オーディオデコーダ部15、字幕デコーダ部17に送信する。ステップS410に戻る。
(ステップS417)
 出力部161Aは、ステップS410で高速再生の停止要求があった場合に処理する。出力していないデコード画像の枚数を判定し、枚数が予め指定された再生順方向枚数(以降nとする)未満なら、本ステップを繰り返し、n枚以上ならステップS418の処理を行う。
(ステップS418)
 出力部161Aは、保持しているデコード画像の情報を映像出力制御部18に送信する。
 なお、図9、10のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。
 以下、本実施の形態における画像データ処理装置1の具体的な動作について説明する。ユーザはユーザインターフェース13を利用して、再生順方向枚数nと再生逆方向枚数mを設定することができる。本例ではn=4、m=4と設定する。
 ビデオデコーダ部16A内のデコーダ部160Aは、高速再生開始後、Iピクチャのみを出力する早送りである場合、Iピクチャの検索とデコード処理を出力部161Aとは非同期で、処理性能に応じて行う。高速再生中、デコード画像がn+m+1の9枚の画像を蓄積したとき、Iピクチャの検索とデコード処理を停止し、出力部161Aのデコード画像の破棄を検出したとき、処理を再開する。
 ビデオデコーダ部16A内の出力部161Aは、高速再生中、デコーダ部160がデコードした画像があれば出力する。出力済みの画像がm+1の5枚以上蓄積されると表示中の画像から一番遠い、先頭方向の画像を削除する。高速再生を停止したとき、未出力のデコード画像nの4枚以上になるまで待ち、4枚以上になれば画像の情報を映像出力制御部18に送信し、受信した映像出力制御部18はデコード画像を一覧表示する。
 以上、本実施の形態によれば、十分なデコード性能を持ったデコーダが高速再生中にデコード画像を保持することで、高速再生停止以前に出力した画像と、停止以降に出力する予定の画像を一覧として表示できる。これにより、ユーザの場面探索の利便性を向上することができる。また、音声認識データ、字幕データ、時間情報の合成表示により、場面探索の際の判断材料を増えるため、場面探索の利便性を向上することができる。
(変形例2)
 実施の形態1の変形例2である画像データ処理装置1Bにおいて、高速再生停止以前に出力した画像と、停止以降に出力する予定の画像を一覧表示する際、動画像データの時間軸上で、より広い範囲を表示する方法について説明する。
 変形例2では、映像出力制御部18A及びCPU12Aの動作が、実施の形態1における映像出力制御部18及びCPU12の動作と異なる。それ以外の構成は、実施の形態1と同じ機能を有するため、同じ参照番号を付記し、その詳細な説明を省略する。
 映像出力制御部18Aは、高速再生停止後、高速再生の停止指示を受けた時点で出力している画像と、出力画像から予め指定された枚数の再生順方向および再生逆方向の画像とをビデオデコーダ部16から受信し、予め指定された枚数の画像を間引いて画像一覧として出力する。
 以下、変形例2における画像データ処理装置1Bの具体的な動作について、図11(a)、(b)を用いて説明する。ユーザはユーザインターフェース13を利用して、再生順方向枚数nと再生逆方向枚数mの設定及び、デコード画像の一覧表示方法を設定することができる。本例ではn=4、m=4と設定し、デコード画像の一覧表示方法を、高速再生停止時の出力画像から動画像データの時間軸が離れるに従って間引く枚数を0枚、1枚、2枚と増加させていくように設定する。
 CPU12Aは、n、mの値と間引き方法からビデオデコーダ部16に対して、デコード画像の蓄積枚数を設定する。本実施の形態では、再生順方向になる未出力の画像を10枚、再生逆方向になる出力済みの画像を10枚と設定する。
 ビデオデコーダ部16は、高速再生を停止したとき、出力中のデコード画像を含めた10+10+1の21枚の画像I~I21の情報を映像出力制御部18に送信する。映像出力制御部18Aは、受信画像としての画像I~I21(図11(a)参照)を、11(b)に示すように出力中の画像から動画像データの時間軸上で離れるに従って0枚、1枚、2枚、3枚と間引いて一覧表示する。
 以上、変形例2によれば、高速再生停止以前に出力した画像と、停止以降に出力する予定の画像を一覧表示する際、動画像データの時間軸上で、より広い範囲を表示できる。また、本実施の形態によれば、図12(a)に示すように、受信画像としての画像I~I19から1枚毎に間引いて一覧表示(図12(b)参照)したり、2枚毎に間引いて一覧表示するといったように、画像の枚数を一定枚数にして一覧表示することができる。
 また、上記各実施の形態の説明に用いた各機能ブロックは、典型的には集積回路であるLSIとして実現される。これらは個別に1チップ化されてもよいし、一部または全てを含むように1チップ化されてもよい。ここでは、LSIとしたが、集積度の違いにより、IC、システムLSI、スーパーLSI、ウルトラLSIと呼称されることもある。
 また、集積回路化の手法はLSIに限るものではなく、専用回路または汎用プロセッサで実現してもよい。LSI製造後に、プログラムすることが可能なFPGA(Field Programmable Gate Array)や、LSI内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサーを利用してもよい。
 さらには、半導体技術の進歩または派生する別技術によりLSIに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてありえる。
 本発明は、以上の実施の形態に限定されることなく、種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。
 本発明を詳細にまた特定の実施態様を参照して説明したが、本発明の精神と範囲を逸脱することなく様々な変更や修正を加えることができることは当業者にとって明らかである。
 本出願は、2009年7月29日出願の日本特許出願(特願2009-176709)、に基づくものであり、その内容はここに参照として取り込まれる。
 以上のように、本発明にかかる画像データ処理装置は、MPEG方式の動画像圧縮技術により符号化されたデータの高速再生において、高速再生を停止したときに出力中の画像と、高速再生停止以前に出力した画像と、停止以降に出力する予定の画像を一覧として表示することで、高速再生の停止がユーザの所望する画像より遅い場合と、早い場合にユーザの場面探索の利便性が向上するという効果を有し、DVDやBDなどの光ディスク、HDDやSDなどのストレージデバイス、レコーダや携帯端末などの機器に記録された動画の再生等として有用である。
1 画像データ処理装置
2 スピーカ
3 表示デバイス
4 ディスク
5 メモリカード
10 入力制御部
11 メモリ
12 CPU
13 ユーザインターフェース
14 多重分離部
15 オーディオデコーダ部
16 ビデオデコーダ部
17 字幕デコーダ部
18 映像出力制御部
150 音声認識部
151 デコーダ部
152 出力部
160 デコーダ部
161 出力部

Claims (5)

  1.  MPEG方式の動画像圧縮技術により符号化されたデータを復号して出力する画像データ処理装置であって、
     高速再生で出力対象となる画像を予め指定された枚数だけ復号、保持してから高速再生を開始するビデオデコーダ部と、
     高速再生停止後、高速再生の停止指示を受けた時点で出力している画像と、出力画像から予め指定された枚数の再生順方向および再生逆方向の画像とを前記ビデオデコーダ部から受信し、画像一覧として出力する映像出力制御部と、を具備する画像データ処理装置。
  2.  前記映像出力制御部は、前記画像一覧からユーザが指定した画像を開始点として、通常再生、高速再生または、コマ送りの開始を制御する機能を有する請求項1に記載の画像データ処理装置。
  3.  前記映像出力制御部は、画像一覧を出力するとき、予め指定された枚数の画像を間引いて画像一覧として出力する機能を有する請求項1に記載の画像データ処理装置。
  4.  前記ビデオデコーダ部は、予め指定された枚数だけ画像を出力したとき、保持している出力済みの画像の中で、最も古い画像を破棄し、高速再生を停止したとき、保持している画像の情報を前記映像出力制御部に送信する請求項1に記載の画像データ処理装置。
  5.  MPEG方式の動画像圧縮技術により符号化されたデータを復号して出力する画像データ処理装置であって、
     高速再生で出力対象となる画像を高速再生するためのビデオデコーダ部と、
     高速再生停止後、高速再生の停止指示を受けた時点で出力している画像及び出力画像から、所定の枚数の再生順方向及び再生逆方向の画像を前記ビデオデコーダ部から受信し、画像一覧として出力する映像出力制御部と、
     高速再生を停止すると、保持している画像の情報を前記映像出力制御部に出力する出力部と、
     前記出力部とは非同期で動作し、出力対象画像を復号するデコーダ部と、を備え、
     前記ビデオデコーダ部は、
     高速再生中、出力対象画像を保持し、当該出力対象画像を出力タイミングにあわせて出力し、所定の枚数だけ出力すると、保持している出力済みの画像の中で最も古い画像を破棄する画像データ処理装置。
PCT/JP2010/004553 2009-07-29 2010-07-13 画像データ処理装置 WO2011013309A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009176709A JP2011035447A (ja) 2009-07-29 2009-07-29 画像データ処理装置
JP2009-176709 2009-07-29

Publications (1)

Publication Number Publication Date
WO2011013309A1 true WO2011013309A1 (ja) 2011-02-03

Family

ID=43528983

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2010/004553 WO2011013309A1 (ja) 2009-07-29 2010-07-13 画像データ処理装置

Country Status (2)

Country Link
JP (1) JP2011035447A (ja)
WO (1) WO2011013309A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09107517A (ja) * 1995-10-11 1997-04-22 Hitachi Ltd 動画像の変化点検出制御方法とそれに基づく再生停止制御方法およびそれらを用いた動画像の編集システム
JP2002077820A (ja) * 2000-09-05 2002-03-15 Matsushita Electric Ind Co Ltd 蓄積再生装置およびデジタル放送送信装置
JP2007328878A (ja) * 2006-06-09 2007-12-20 Sony Corp 再生装置、再生方法、およびプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09107517A (ja) * 1995-10-11 1997-04-22 Hitachi Ltd 動画像の変化点検出制御方法とそれに基づく再生停止制御方法およびそれらを用いた動画像の編集システム
JP2002077820A (ja) * 2000-09-05 2002-03-15 Matsushita Electric Ind Co Ltd 蓄積再生装置およびデジタル放送送信装置
JP2007328878A (ja) * 2006-06-09 2007-12-20 Sony Corp 再生装置、再生方法、およびプログラム

Also Published As

Publication number Publication date
JP2011035447A (ja) 2011-02-17

Similar Documents

Publication Publication Date Title
US8189988B2 (en) Digital video recorder having hierarchical memories and method for implementing hierarchical memories
US8938150B2 (en) Recording apparatus
US8326117B2 (en) Data recording device, data recording method, data processing device, data processing method, program, program recording medium, data recording medium, and data structure
US20090169183A1 (en) Data recording device, data recording method, data processing device, data processing method, program, program recording medium, data recording medium, and data structure
JP2004072727A (ja) 画像処理方法、画像処理装置、画像記録再生装置、およびテレビジョン受像機
JPWO2009072276A1 (ja) 画像符号化装置、ビデオカメラ、集積回路及び画像符号化方法
US8189115B2 (en) Image device to reverse play with minimal time delay and a method thereof
KR20070093970A (ko) 데이터 처리 장치 및 데이터 처리 방법, 프로그램 및프로그램 기록 매체, 데이터 기록 매체와 데이터 구조
US20060177199A1 (en) Information recording medium, information reproducing apparatus, information recording method and reproducing method
EP1701545A1 (en) Image reproducing device, method, and program
US6999090B2 (en) Data processing apparatus, data processing method, information storing medium, and computer program
JP2006279262A (ja) 符号化映像変換装置、変換方法及びそのプログラム
WO2011013309A1 (ja) 画像データ処理装置
US6978082B1 (en) AV decoder control method and AV decoder control apparatus
JP4575417B2 (ja) 動画像再生装置
TWI459818B (zh) 視訊設備和用於逆向顯示視訊資料的方法
JP4560788B2 (ja) カメラ装置及び録画装置並びにプログラム
US7890977B2 (en) Signal processing apparatus and signal processing method for upconverting a plurality of stored content data
WO2009090865A1 (ja) 動画像データ復号再生装置及び動画像データ復号装置
JP2007502036A (ja) グラフィックデータを含む情報記録媒体、その処理装置及び処理方法
JP2008102974A (ja) 同期再生装置の同期再生方法及び同期再生装置システム
JP2008288925A (ja) 映像記録再生装置および映像記録再生方法
JP2006338722A (ja) ビデオ再生装置及びビデオ再生制御方法
JP2004153630A (ja) デジタル記録再生装置
JP2006041839A (ja) テレビ受信機

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10804062

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 10804062

Country of ref document: EP

Kind code of ref document: A1