WO2009136469A1 - 動画像の記録並びに再生を行う装置 - Google Patents

動画像の記録並びに再生を行う装置 Download PDF

Info

Publication number
WO2009136469A1
WO2009136469A1 PCT/JP2009/001755 JP2009001755W WO2009136469A1 WO 2009136469 A1 WO2009136469 A1 WO 2009136469A1 JP 2009001755 W JP2009001755 W JP 2009001755W WO 2009136469 A1 WO2009136469 A1 WO 2009136469A1
Authority
WO
WIPO (PCT)
Prior art keywords
moving image
encoded data
recording
processing unit
predetermined operation
Prior art date
Application number
PCT/JP2009/001755
Other languages
English (en)
French (fr)
Inventor
丹治佑介
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Priority to CN2009801131962A priority Critical patent/CN102007765A/zh
Publication of WO2009136469A1 publication Critical patent/WO2009136469A1/ja
Priority to US12/898,312 priority patent/US20110019024A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/114—Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/781—Television signal recording using magnetic recording on disks or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories

Definitions

  • the present invention relates to an apparatus for recording moving image data, an apparatus for reproducing, a recording method, a reproducing method, and a semiconductor integrated circuit suitable for the recording, and more particularly, a desired scene at the time of reproducing moving image data.
  • the present invention relates to a technique suitable for quick access.
  • a moving image recording apparatus described in Patent Document 1 includes a bit rate investigator that investigates the bit rate of moving image data, and a moving image when the bit rate of moving image data changes by a certain value or more. And a chapter setter for setting chapters in the data.
  • a chapter is set by pretending to be a scene that the user wants to see a position where the bit rate of moving image data changes by a certain value or more.
  • the chapter is set by assuming the position where the bit rate of the moving image data has changed by a certain value or more as the scene that the user wants to see, but the bit rate of the user-desired scene is not necessarily a certain value or more. It does not necessarily match the changing position. Therefore, there are cases where chapters are not set in user-desired scenes and chapters are set in unnecessary positions.
  • the configuration is suitable for a moving image recording apparatus having an image pickup device such as a digital video camera.
  • the present invention has been made in view of the above points, and is based on an operation of a user who is recording moving image data in a moving image recording apparatus having an image pickup device such as a video camera.
  • an object is to detect a scene that the user wants to see, set a chapter, and facilitate access to the scene that the user wants to see when reproducing recorded moving image data.
  • the moving image recording apparatus of the present invention provides: An imager that captures an image to obtain a digital video signal; and An image encoding processor for generating moving image encoded data by encoding the digital video signal in GOP units composed of a plurality of frames; A recorder for recording the moving image encoded data on a recording medium; A cue position generator; With The cue position generator includes: A first processing unit that detects a predetermined operation performed by the imaging device when the recording device records the moving image encoded data on the recording medium; A second processing unit that gives a GOP structure change instruction in the moving image encoded data to the image encoding processor based on detection of the predetermined operation by the first processing unit; Is provided.
  • an image pickup device that generates a digital video signal that is a source of moving image encoded data, in conjunction with the cueing position of the moving image encoded data.
  • the present invention pays attention to this, and when a predetermined operation is detected by the image pickup device when moving image encoded data using a digital video signal as a source is recorded on a recording medium, the detected data position at which the predetermined operation is performed. Change the GOP structure at (Cue position). If such data change is added to the moving image encoded data, it is possible to accurately and quickly detect the cue position in the moving image encoded data during reproduction or editing. Thereby, it is possible to specify the cue position in the moving image encoded data without direct user operation.
  • the second processing unit instructs the image encoding processor to change the GOP structure in the moving image encoded data from OpenGOP to ClosedGOP. There is a mode.
  • the imaging device can adjust the shooting angle of view
  • the first processing unit detects the shooting angle of view adjustment operation by the imaging device as the predetermined operation. There is a mode.
  • the second processing unit performs an instruction to restore the GOP structure to the image encoding processor after a predetermined time has elapsed since the GOP structure change instruction has been issued. There is a mode.
  • the coding efficiency can be increased by returning to the original GOP structure. For example, after changing the GOP structure for a certain period of time to ClosedGOP by a GOP structure change instruction, it returns to the original OpenGOP after a certain period of time.
  • the second processing unit is based on detection of the predetermined operation by the first processing unit. Further, the image encoding processor is instructed to generate a chapter display image. Or In addition, the recorder is instructed to divide the moving image encoded data, There is a mode.
  • the second processing unit based on the detection of the predetermined operation by the first processing unit, the second processing unit further instructs to add information related to the predetermined operation as additional information to the moving image encoded data.
  • the image encoding processor is used.
  • the present invention further comprises a sensor for detecting the tilt of the imager,
  • the first processing unit detects an inclination of the image pickup device as the predetermined operation based on a sensor output of the sensor. There is a mode.
  • the cueing position of the scene is determined based on the detection result of the predetermined operation. This can be done by changing the GOP structure. In this case, when the user later determines that a scene or the like obtained by photographing the ground is an unnecessary scene, the scene can be easily deleted during editing.
  • the present invention further includes a management information recording unit for recording management information for managing the encoded video data.
  • the cue position generator further includes a third processing unit, The third processing unit acquires the information indicating the data position of the moving image encoded data subjected to the GOP structure change by the second processing unit from the recorder, and then acquires the acquired information. Recording the management information in the management information recording unit, There is a mode.
  • the moving image reproducing apparatus of the present invention is A reader for reading out the additional information of the moving image encoded data from the recording medium; A regenerator that reads out and reproduces the moving image encoded data from the recording medium based on the additional information; With The regenerator determines whether or not information related to a predetermined operation performed at the time of capturing the moving image encoded data is recorded in the additional information read by the reader, and then the information is recorded. If it is determined that there is, the moving image encoded data can be reproduced from the data position specified as the position where the predetermined operation is performed in the information.
  • the encoded moving image data can be reproduced from the data position where the predetermined operation is performed.
  • the present invention further includes an editor capable of setting a data position where a change in image feature amount is a predetermined amount or more in the moving image encoded data as a cue position in the moving image encoded data. There is a mode.
  • the image feature amount is a parameterization of the size, position, relative arrangement, face contour, etc. of the parts constituting the face such as eyes, nose and mouth that can be extracted from the image.
  • a well-known face detection technique such as searching for a part having a characteristic shape of eyes, nose, mouth, or the like in the vicinity of the center of the screen in a moving image, and assuming that it is a face if the degree of similarity is high. It is possible to recognize that a person is a subject and set the scene as a cueing position.
  • the moving image recording method of the present invention includes: An imaging step of capturing an image with an imager to obtain a digital video signal; An image encoding step of generating moving image encoded data by encoding the digital video signal in GOP units composed of a plurality of frames in an image encoding processor; A recording step of recording the moving image encoded data on a recording medium by a recorder; Cue position generation step; Including The cue position generation step includes: A first processing step of detecting a predetermined operation performed by the imaging device when the moving image encoded data is recorded on a recording medium in the recording step; A second processing step of instructing the image encoding processor to change a GOP structure based on detection of the predetermined operation in the first processing step; including.
  • the moving image reproduction method of the present invention includes: A step of reading out the additional information from a recording medium on which moving image encoded data including the additional information is recorded; A reproduction step of reading and reproducing the moving image encoded data from the recording medium based on the additional information read in the reading step; Including In the reproduction step, it is determined whether or not information related to a predetermined operation to be performed at the time of capturing the moving image encoded data is recorded in the additional information read in the reading step, and then the information is recorded. If it is determined that the moving image encoded data is reproduced, the moving image encoded data can be reproduced from the data position specified as the position where the predetermined operation is performed in the information.
  • the semiconductor integrated circuit of the present invention is An image encoding processor that is connected to an external imager, encodes a digital video signal input from the imager in units of GOPs composed of a plurality of frames, and generates moving image encoded data;
  • a recorder connected to an external recording medium and recording the moving image encoded data on the recording medium;
  • a cue position generator includes: A first processing unit that detects a predetermined operation performed by the imaging device when the recording device records the moving image encoded data on the recording medium;
  • a second processing unit that gives a GOP structure change instruction in the moving image encoded data to the image encoding processor based on detection of the predetermined operation by the first processing unit; Is provided.
  • the present invention can be realized not only as an apparatus and a method, but also as a program for causing a computer to execute functions and method steps constituting the apparatus, or as a computer-readable CD-ROM in which the program is recorded. It can also be realized as a recording medium, or as information, data or a signal indicating the program. These programs, information, data, and signals may be distributed via a communication network such as the Internet.
  • the user when a recorded moving image data is reproduced in a moving image recording apparatus or a moving image reproducing apparatus having an image pickup device such as a digital video camera, the user can easily access a scene desired to be viewed. effective. Further, changing the GOP structure also has an effect of facilitating editing of the recorded moving image data.
  • FIG. 1 is a block diagram showing a configuration of a moving image recording apparatus according to Embodiment 1 of the present invention.
  • FIG. 2 is a flowchart showing the operation flow of the cue position generator in the first embodiment of the present invention.
  • FIG. 3A is a diagram illustrating a first configuration of the GOP.
  • FIG. 3B is a diagram illustrating a second configuration of the GOP.
  • FIG. 4 is a block diagram showing the configuration of the moving image recording / playback apparatus according to the second embodiment of the present invention.
  • FIG. 5 is a flowchart showing the operation flow of the cue position generator in the second embodiment of the present invention.
  • FIG. 6 is a flowchart showing the flow of operation of the regenerator in Embodiment 2 of the present invention.
  • FIG. 1 is a block diagram showing a configuration of a moving image recording apparatus according to Embodiment 1 of the present invention.
  • This moving image recording apparatus includes an imaging device 101, an image encoding processor 102, a recording device 103 that records data on a recording medium 104, a cue position generator 105, and a management information storage unit 106.
  • the image encoding processor 102, the recorder 103, and the cue position generator 105 can be configured by a semiconductor integrated circuit.
  • the imaging device 101 includes, for example, an imaging optical system including a zoom lens capable of zoom adjustment (view angle adjustment), and an imaging device (a photoelectric device such as a CCD or CMOS that converts optical information obtained by the imaging optical system into an electrical signal). And an image signal processor that converts an electrical signal output from the imaging device into a digital video signal and performs digital signal processing on the digital video signal.
  • an imaging optical system including a zoom lens capable of zoom adjustment (view angle adjustment), and an imaging device (a photoelectric device such as a CCD or CMOS that converts optical information obtained by the imaging optical system into an electrical signal).
  • an image signal processor that converts an electrical signal output from the imaging device into a digital video signal and performs digital signal processing on the digital video signal.
  • the image encoding processor 102 performs a compression encoding process on the digital video signal obtained by the image pickup device 101 by a predetermined method.
  • MPEG2-Video or MPEG4-AVC / H.264 hereinafter referred to as MPEG
  • MPEG MPEG4-AVC / H.264
  • coding is performed in units of GOP (Group Of Pictures) composed of a plurality of frames by inserting I pictures using intra-frame coding at a constant frame interval.
  • GOP includes OpenGOP that can predict between frames at the GOP boundary and ClosedGOP that prohibits interframe prediction at the GOP boundary. Since OpenGOP relies on a GOP including a reference frame, a reference GOP is required when performing random access in MPEG data. On the other hand, ClosedGOP is an independent GOP that does not depend on other GOPs, and is therefore effective during random access. Note that OpenGOP can be randomly accessed by setting the BrokenLink flag. However, since it is impossible to reproduce a frame that is forward-referenced, this leads to image quality degradation. In addition, in terms of coding efficiency, ClosedGOP has a feature that it is lower than OpenGOP because inter-frame prediction at GOP boundaries is prohibited. In the present embodiment, the GOP structure being imaged is set to ClosedGOP only at the start of imaging, and thereafter set to OpenGOP (however, when a predetermined operation is detected, ClosedGOP).
  • the recorder 103 writes the moving image encoded data obtained by the image encoding processor 102 into the recording medium 104 for each predetermined unit.
  • the recorder 103 stores management information for managing moving image encoded data in the management information recording unit 106 such as a memory, and then reads the management information from the management information recording unit 106 and records it together with the moving image encoded data. Write to the medium 104.
  • audio data is not described in the first embodiment, when audio data exists, the moving image encoded data and audio data are multiplexed by the recorder 103, and then the respective data are synchronized. A time stamp for illustration is given.
  • Examples of the recording medium 104 include an HDD, an SD card, and an optical disk (DVD, BD, etc.).
  • the cue position generator 105 includes a first processing unit 105a and a second processing unit 105b.
  • the first processing unit 105 a detects a predetermined operation of the image pickup device 101 when the recording device 103 records the moving image encoded data obtained by the image encoding processing device 102 on the recording medium 104.
  • the second processing unit 105b issues a GOP structure change instruction to the image encoding processor 102 based on detection of a predetermined operation of the first processing unit 105a.
  • the cue position generator 105 according to the first embodiment detects a zoom-in operation (view angle reduction adjustment) or a zoom-out operation (view angle enlargement adjustment) of the zoom lens of the image pickup device 101 as a predetermined operation during imaging.
  • the image encoding processor 102 is instructed to change the GOP structure from OpenGOP to ClosedGOP.
  • the zoom-in operation and the zoom-out operation can be detected by a signal based on a zoom operation from the image pickup device 101.
  • the predetermined operation of the image pickup device 101 detected by the first processing unit 105a is preferably a zoom-in operation or a zoom-out operation, which is an example of image enlargement (view angle reduction) or image reduction (view angle enlargement).
  • imaging operation of the imaging device 101 There are various imaging modes by the imaging operation of the imaging device 101. For example, telephoto imaging (imaging in a state where the angle of view is reduced), wide-angle imaging (imaging in a state where the angle of view is enlarged), imaging in a high luminance state, There are imaging in a low luminance state, imaging in a variable contrast state, and the like, and the predetermined operation of the imaging device 101 detected by the first processing unit 105a is not limited to the angle of view adjustment operation, but may detect other operations. Good.
  • the second processing unit 105b further determines whether or not a certain time has elapsed since the GOP structure change instruction was given to the image coding processor based on the detection of the first processing unit 105a. If it is determined that a certain time has elapsed, a GOP structure change instruction is issued so that the GOP structure is restored.
  • the second processing unit 105b may instruct the image coding processing unit 102 to generate a chapter display image based on the detection of the first processing unit 105a.
  • the moving image encoded data division instruction may be issued to the recorder 103 based on the detection of the first processing unit 105 a of the cue position generator 105, or the first of the cue position generator 105 may be performed.
  • the image encoding processor 102 may be instructed to add predetermined operation information of the image pickup device 101 as additional information to the moving image encoded data, or a combination thereof. Also good.
  • the management information recorded in the management information recording unit 106 is data recorded on the recording medium 104 together with the encoded image data by the recorder 103, and includes information such as a so-called time stamp of the encoded image data. .
  • the operation referred to here is an operation from the detection of the angle of view adjustment operation of the image pickup device 101 to the instruction to change the GOP structure to the image encoding processor 102.
  • a first position detection unit 105 detects a predetermined operation (viewing angle adjustment operation in the embodiment) of the image pickup device 101 when moving image encoded data is recorded on the recording medium 104 in the recording step. Processing steps; A second processing step for instructing the image encoding processor 102 to change the GOP structure based on the detection of the first processing step; Is included.
  • FIG. 2 is a flowchart showing an operation flow of the cue position generator 105 that executes the first and second processing steps.
  • the cue position generator 105 determines whether a zoom-in operation or a zoom-out operation (hereinafter referred to as a zoom operation) of the zoom lens of the image pickup device 101 has been executed (S101). If it is determined in S101 that the zoom operation is not executed (No), the cue position generator 105 does not instruct the image encoding processor 102 to change the GOP structure. If it is determined in S101 that the zoom operation is being executed (correct), the cue position generator 105 performs compression encoding processing on the digital video signal (obtained by the image pickup device 101) by the image encoding processor 102.
  • a zoom operation a zoom-out operation
  • the cue position generator 105 determines whether or not the zoom operation of the imager 101 has stopped (S103). If it is determined in S103 that the zoom operation has not been stopped (No), the cue position generator 105 determines again whether the zoom operation has stopped (S103), and thereafter, until the zoom operation is stopped, S103. Repeat the process.
  • the cue position generator 105 instructs the image encoding processor 102 to change the GOP structure from OpenGOP to ClosedGOP (S104). .
  • the image encoding processor 102 changes the GOP structure of the moving image encoded data from OpenGOP to ClosedGOP according to the request of the cue position generator 105.
  • the cue position generator 105 instructs the image encoding processor 102 to change the GOP structure from OpenGOP to ClosedGOP, and after a certain period of time, again issues a change instruction to return the GOP structure from ClosedGOP to OpenGOP. This is performed on the encoding processor 102.
  • the certain time is set to about 0.5 seconds.
  • the cue position generator 105 gives an instruction to change the GOP structure based on the detection of the zoom operation of the zoom lens in the image pickup device 101.
  • the GOP structure change instruction may be issued.
  • a digital video camera is equipped with an acceleration sensor 120 (shown in FIG. 1) that can detect the tilt of the camera in order to prevent the camera from being accidentally imaged while the camera is directed downward. There is.
  • the imaging operation is forcibly stopped.
  • the imaging operation stops even when the camera is intentionally directed downward. Therefore, when photographing vertically downward such as the ground, it is necessary to turn off the function of detecting the tilt of the camera.
  • the cue position generator 105 detects the tilt value detected by the acceleration sensor 120 instead of detecting the zoom operation of the zoom lens of the image pickup device 101. To do.
  • the cue position generator 105 changes the GOP structure based on the detected inclination value. For example, when the camera is directed vertically downward, the cue position generator 105 detects the orientation of the image pickup device 101 based on the sensor output of the acceleration sensor 120, and then sets the scene at that time as the cue position. Determine and change the GOP structure from OpenGOP to ClosedGOP.
  • the cue position generator 105 detects the orientation of the image pickup device 101 based on the sensor output of the acceleration sensor 120, and then the scene at that time. Is determined as the cue position, and the GOP structure is changed from OpenGOP to ClosedGOP.
  • the time information of the position changed to ClosedGOP based on the instruction of the cue position generator 105 may be recorded in the management information 106.
  • FIG. 3A and 3B are diagrams showing a GOP configuration.
  • FIG. 3A shows an OpenGOP structure that performs forward prediction across GOPs
  • FIG. 3B shows a ClosedGOP structure that does not use prediction across GOPs. Show.
  • I indicates an intra-frame encoded image (I-Picture)
  • P indicates a forward prediction encoded image (P-Picture)
  • B indicates a bidirectional prediction image (B-Picture)
  • an arrow in the figure indicates a code.
  • a reference image referred to by the converted image is shown.
  • the scene is detected after detecting the cue position of the scene based on the detection of the zoom operation such as the zoom-in operation or the zoom-out operation of the image pickup device 101 by the user.
  • the zoom operation such as the zoom-in operation or the zoom-out operation of the image pickup device 101 by the user.
  • FIG. 4 is a block diagram showing a moving image recording / reproducing apparatus according to Embodiment 2 of the present invention.
  • This moving image recording / reproducing apparatus is an apparatus in which a moving image recording device 110 and a moving image reproducing device 111 having the same configuration as in the first embodiment are integrated.
  • the moving image recorder 110 may be omitted and the moving image playback device may be configured.
  • the moving image recording / playback apparatus includes an imaging device 101, an image encoding processor 102, a recording device 103 for recording on a recording medium 104, a cue position generator 105, a management information recording unit 106, and the like.
  • the display device 107 and the regenerator 108 are provided.
  • at least the image encoding processor 102, the recorder 103, the cue position generator 105, and the regenerator 108 are configured by a semiconductor integrated circuit.
  • An editor 121 is provided.
  • the imaging device 101 includes, for example, an imaging optical system including a zoom lens for zoom adjustment, and an imaging device (including a photoelectric conversion element such as a CCD or CMOS that converts optical information obtained by the imaging optical system into an electrical signal). And an image signal processor that converts an electrical signal output from the imaging device into a digital video signal and performs digital signal processing on the digital video signal.
  • an imaging optical system including a zoom lens for zoom adjustment
  • an imaging device including a photoelectric conversion element such as a CCD or CMOS that converts optical information obtained by the imaging optical system into an electrical signal.
  • an image signal processor that converts an electrical signal output from the imaging device into a digital video signal and performs digital signal processing on the digital video signal.
  • the image encoding processor 102 performs a compression encoding process on the digital video signal obtained by the image pickup device 101 by a predetermined method.
  • a predetermined method For example, MPEG2-Video or MPEG can be used as the compression encoding method.
  • MPEG encoding is performed in GOP units.
  • the GOP structure during imaging is set to ClosedGOP only at the start of imaging, and thereafter is set to OpenGOP (however, when a predetermined operation is detected, ClosedGOP).
  • the recorder 103 writes the moving image encoded data obtained by the image encoding processor 102 into the recording medium 104 for each predetermined unit.
  • the recorder 103 holds management information having predetermined information for managing moving image encoded data in the management information recording unit 106 such as a memory, and then reads the management information from the management information recording unit 106 to move the moving image.
  • the data is written on the recording medium 104 together with the encoded data.
  • audio data is not described. However, when audio data is present, the moving image encoded data and audio data are multiplexed by the recorder 103, and the respective data are synchronized.
  • a time stamp is given for the purpose of illustration.
  • Examples of the recording medium 104 include an HDD, an SD card, and an optical disk (DVD, BD, etc.).
  • the cue position generator 105 includes a first processing unit 105a, a second processing unit 105b, and a third processing unit 105c.
  • the first processing unit 105 a detects a predetermined operation of the image pickup device 101 when the recording device 103 records the moving image encoded data obtained by the image encoding processing device 102 on the recording medium 104.
  • the second processing unit 105b issues a GOP structure change instruction to the image encoding processor 102 based on detection of a predetermined operation of the first processing unit 105a.
  • the cue position generator 105 detects a zoom-in operation or a zoom-out operation of the zoom lens of the image pickup device 101 as a predetermined operation during image pickup, and then converts the GOP structure from OpenGOP based on the detection result.
  • the image encoding processor 102 is instructed to change to ClosedGOP.
  • the third processing unit 105c controls the process of recording the time information of the cue position acquired from the recorder 103 in the management information 106 based on the processing result of the second processing unit 105b.
  • the second processing unit 105b based on the detection of the predetermined operation of the first processing unit 105a, adds an instruction to add the predetermined operation of the image pickup device 101 as additional information to the moving image encoded data.
  • the predetermined operation corresponds to a zoom operation in the image pickup device 101
  • the second processing unit 105b performs a zoom operation as user data in the user data area of the header of the moving image encoded data at the time of compression encoding.
  • the image encoding processor 102 is controlled so that information is added.
  • the management information is data recorded on the recording medium 104 together with the encoded image data by the recorder 103, and includes information such as a so-called time stamp of the encoded image data.
  • Examples of the display device 107 include a liquid crystal monitor.
  • the reproducing unit 108 reads and analyzes the additional information of the moving image encoded data from the recording medium 104, and then reads and reproduces the moving image encoded data based on the analysis result.
  • the regenerator 108 can reproduce from the position where the predetermined operation at the time of imaging was performed. As described above, the regenerator 108 functions as a reader and a regenerator.
  • the playback device 108 starts from the position (or the start position) at which the zoom operation is completed in the zoom operation information. It is possible to play.
  • the editor 121 can set a data position where a change in the image feature amount in the moving image encoded data is a predetermined amount or more as a cue position in the moving image encoded data.
  • the image feature amount is obtained by parameterizing the size, position, relative arrangement, face contour, and the like of parts constituting the face such as eyes, nose, and mouth that can be extracted from the image.
  • a well-known face detection technique such as searching for a part having a characteristic shape of eyes, nose, mouth, or the like in the vicinity of the center of the screen in a moving image, and assuming that it is a face if the degree of similarity is high. It is possible to recognize that a person is a subject and set the scene as a cueing position.
  • the operation here refers to detecting the zoom operation of the image pickup device 101, instructing the image encoding processor 102 to change the GOP structure, and further using the zoom operation information of the image pickup device 101 as user data in the header of the image encoded data. This is an operation until an instruction to add user data to the area is given.
  • FIG. 5 is a flowchart showing a flow of operations of the cue position generator 105.
  • the cue position generator 105 determines whether or not a zoom-in operation or a zoom-out operation (hereinafter referred to as a zoom operation) of the zoom lens of the image pickup device 101 has been executed (S201). If it is determined in S201 that the zoom operation has not been executed (No), the cue position generator 105 does not instruct the image encoding processor 102 to change the GOP structure. If it is determined in S201 that the zoom operation is being executed (correct), the cue position generator 105 performs compression encoding processing on the digital video signal (obtained by the image pickup device 101) by the image encoding processor 102.
  • a zoom operation a zoom-in operation or a zoom-out operation
  • the cue position generator 105 determines whether or not the zoom operation of the imager 101 has stopped (S203). If it is determined in S203 that the zoom operation is not stopped (No), the cue position generator 105 determines again whether the zoom operation is stopped (S203), and thereafter, until the zoom operation is stopped, S203. Repeat the process.
  • the cue position generator 105 instructs the image encoding processor 102 to change the GOP structure from OpenGOP to ClosedGOP (S204). . Further, the cue position generator 105 instructs the image encoding processor 102 to add to the moving image encoded data as additional information that the zoom operation of the image pickup device 101 has been executed (S205). The image encoding processor 102 changes the GOP structure from OpenGOP to ClosedGOP according to the request of the cue position generator 105, and further sets a zoom operation execution flag in the user data area of the header of the moving image encoded data.
  • the cue position generator 105 instructs the image encoding processor 102 to change the GOP structure from OpenGOP to ClosedGOP, and after a certain period of time, again issues a change instruction to return the GOP structure from ClosedGOP to OpenGOP. This is performed on the encoding processor 102.
  • the certain time is set to about 0.5 seconds.
  • the cue position generator 105 gives an instruction to change the structure of the GOP.
  • the GOP A structure change instruction may be issued.
  • FIG. 6 is a flowchart showing the operation flow of the regenerator 108.
  • the regenerator 108 first reads moving image encoded data from the recording medium 104 (S301). Next, the reproducer 108 analyzes the header (additional information) of the moving image encoded data read from the recording medium 104, and sets the zoom operation execution flag of the zoom lens at the time of imaging in the user data area provided in the header. It is determined whether it has been performed (S302). If it is determined in the process of S302 that the zoom operation execution flag is set in the user data area, the reproducer 108 can select a scene having the user data area as a cueing position (S303). An example of processing that enables selection as a cueing position is thumbnail display.
  • the moving image encoded data is generated with the scene having the user data area as a cueing position based on the instruction. It is output to the display device 107. If it is determined in S302 that the zoom operation execution flag is not set in the user data area, the regenerator 108 does not perform any particular processing.
  • the GOP structure of the scene is changed to ClosedGOP, and then the moving image Zoom operation information is added as additional information to the header of the encoded data. For this reason, it is possible to quickly move or cue to the scene by assuming the scene zoomed at the time of imaging during reproduction as the cue position. Furthermore, since the reference GOP is not necessary, it is possible to prevent unnecessary data transfer processing and image quality deterioration.
  • the present invention is not limited to this embodiment. Unless it deviates from the meaning of this invention, the form which carried out the various deformation
  • the present invention can be applied to a device that records and reproduces a moving image, in particular, an electronic device having an imaging function such as a digital video camera or a mobile phone.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

　撮像された動画像データを符号化し、動画像符号化データとして記録媒体に記録している時に、撮像器の所定動作を検知しその検知に基づいて頭出し位置の決定およびGOP構造の変更を行う。これにより、ユーザの直接操作なしに頭出し位置を指定できるだけでなく、頭出し位置のGOP構造を変更できるため、動画像データの編集時および再生時における画質劣化の防止や余分な転送処理の削減にも繋がる。

Description

動画像の記録並びに再生を行う装置
　本発明は、動画像データを記録する装置、再生する装置、および、記録する方法、再生する方法、並びに前記記録に好適な半導体集積回路に関し、更に詳しくは、動画像データの再生時に所望のシーンへ素早くアクセスするのに好適な技術に関する。
　従来、動画像データを再生する際において上記動画像データの特定位置への素早い移動または頭出しを可能とする動画像記録装置および動画像再生装置は様々なものが提案されている（例えば、特許文献１参照）。
　特許文献１記載の動画像記録装置（以下、単に従来例という）は、動画像データのビットレートを調査するビットレート調査器と、動画像データのビットレートが一定値以上変化した際に動画像データにチャプタを設定するチャプタ設定器とを備える。従来例では、動画像データのビットレートが一定値以上変化する位置をユーザが見たいシーンとして擬制してチャプタが設定される。
特開２００７－１５０５２８号公報
　しかしながら、従来例では、動画像データのビットレートが一定値以上変化した位置をユーザが見たいシーンとして擬制してチャプタを設定しているが、必ずしもユーザ所望のシーンが、ビットレートが一定値以上変化している位置に一致するとは限らない。そのため、ユーザ所望のシーンにチャプタが設定されず、不要な位置にチャプタが設定される場合がある。
　また、従来例では、ＴＶ番組を記録することを想定しているため、デジタルビデオカメラのように撮像器を有する動画像記録装置に適した構成とは言えない。
　本発明は、上述のような点に鑑みて為されたものであって、ビデオカメラ等の撮像器を有する動画像記録装置において、動画像データを記録している最中のユーザの動作に基づいて、ユーザが見たいシーンを検知してチャプタ設定し、記録した動画像データを再生する際にユーザが見たいシーンへのアクセスを容易することを目的とする。
　上記目的を達成するために、本発明の動画像記録装置は、
　画像を撮像してデジタル映像信号を得る撮像器と、
　前記デジタル映像信号を複数のフレームから構成されるGOP単位で符号化して動画像符号化データを生成する画像符号化処理器と、
　前記動画像符号化データを記録媒体に記録する記録器と、
　頭出し位置生成器と、
　を備え、
　前記頭出し位置生成器は、
　前記記録器が前記動画像符号化データを前記記録媒体に記録している時に、前記撮像器で実施される所定動作を検知する第１の処理部と、
　前記第１の処理部による前記所定動作の検知に基づいて、前記動画像符号化データにおけるGOP構造変更指示を前記画像符号化処理器に行う第２の処理部と、
　を備える。
　動画像符号化データのソースとなるデジタル映像信号を生成する撮像器で実施される所定動作には、動画像符号化データの頭出し位置に連動して発生するものが多数ある。本発明はこのことに着目し、デジタル映像信号をソースとする動画像符号化データを記録媒体に記録している時に、撮像器で所定動作を検出すると、検出した所定動作が実施されたデータ位置（頭出し位置）におけるGOP構造を変更する。このようなデータ変更を動画像符号化データに加えておくと、再生時や編集時において動画像符号化データにおける頭出し位置を正確かつ短時間に検知することが可能となる。これにより、ユーザの直接操作なしに動画像符号化データにおける頭出し位置を特定することができる。
　本発明には、
　前記第２の処理部は、前記動画像符号化データにおけるGOP構造を、OpenGOPからClosedGOPに変更する指示を前記画像符号化処理器に行う、
　という態様がある。
　そうすれば、動画像データの編集時および再生時に前方参照GOPを用意する必要がなくなり、画質劣化が防止されるうえに余分な転送処理が削減される。
　本発明には、
　前記撮像器は、撮影画角調整が可能であり、
　前記第１の処理部は、前記撮像器による前記撮影画角調整動作を前記所定動作として検知する、
　という態様がある。
　そうすれば、撮像器による前記撮影画角調整動作をユーザ所望のシーンと擬制して、頭出し位置の生成が可能となる。
　本発明には、前記第２の処理部は、前記GOP構造変更指示を行ってから一定時間経過後に、GOP構造を元に戻す指示を前記画像符号化処理器に行う、
　という態様がある。
　そうすれば、一定時間を経過した後は元のGOP構造に戻すことで、符号化効率を上げることができる。例えば、GOP構造変更指示により一定時間分のGOP構造をClosedGOPに変更したうえで、一定時間経過後は元のOpenGOPに戻す。
　本発明には、前記第２の処理部は、前記第１の処理部による前記所定動作の検知に基づいて、
・さらにチャプタ表示用画像の生成指示を前記画像符号化処理器に行う、
または、
・さらに前記動画像符号化データの分割指示を前記記録器に行う、
という態様がある。
　そうすれば、GOP構造変更指示位置（頭出し位置）にチャプタを生成することが可能となる。
　本発明には、前記第２の処理部は、前記第１の処理部による前記所定動作の検知に基づいて、さらに前記所定動作に関する情報を付加情報として前記動画像符号化データに付加する指示を前記画像符号化処理器に行う、という態様がある。
　そうすれば、動画像符号化データに付加情報として所定動作に関する情報を付加することが可能となる。
　本発明には、前記撮像器の傾きを検知するセンサをさらに備え、
　前記第１の処理部は、前記センサのセンサ出力に基づいて、前記撮像器の傾きを前記所定動作として検知する、
　という態様がある。
　そうすれば、デジタルビデオカメラ等の動画像記録装置において、撮像中にカメラを下に向け誤って地面を撮像した場合であっても、当該シーンの頭出し位置を所定動作の検知結果に基づいて判断してそのGOP構造を変更することでできる。そうすれば、ユーザが後に地面を撮影したシーン等を不要なシーンと判断した場合は、編集時に当該シーンを容易に削除することが可能となる。
　本発明には、前記動画像符号化データを管理するための管理情報が記録される管理情報記録部をさらに備え、
　前記頭出し位置生成器は第３の処理部をさらに備え、
　前記第３の処理部は、前記第２の処理部によってGOP構造変更が施される前記動画像符号化データのデータ位置を示す情報を、前記記録器から取得したうえで、取得した前記情報を前記管理情報として前記管理情報記録部に記録する、
　という態様がある。
　そうすれば、GOP構造変更が施された前記動画像符号化データのデータ位置を示す時間情報を管理情報記録部に記録して管理するので、頭出し位置にチャプタを生成しない場合であっても再生時において所望のシーンへの素早い移動または頭出しが可能となる。
　本発明の動画像再生装置は、
　記録媒体から動画像符号化データの付加情報を読み出す読み出し器と、
　前記付加情報に基づいて前記記録媒体から前記動画像符号化データを読み出して再生する再生器と、
　を備え、
　前記再生器は、前記読み出し器が読み出す前記付加情報に前記動画像符号化データの撮像時において実施される所定動作に関する情報が記録されているか否かを判断したうえで、前記情報が記録されていると判断すると、当該情報において前記所定動作が実行された位置として特定されているデータ位置から前記動画像符号化データを再生可能である。
　これにより、付加情報に動画像符号化データの撮像時において実施される所定動作に関する情報が記録されておれば、所定動作が実行されたデータ位置から動画像符号化データを再生することが可能となる。
　本発明には、前記動画像符号化データにおいて画像特徴量の変化が所定量以上あるデータ位置を、前記動画像符号化データにおける頭出し位置として設定可能な編集器をさらに備える、
　という態様がある。
　ここで、画像特徴量とは、画像から抽出可能な目、鼻、口等の顔を構成する部位の大きさ、位置、相対配置や、顔の輪郭等をパラメータ化したものである。これにより、例えば、動画像内の画面中央付近に対して、目、鼻、口等の形状に特徴のある部位を探し出し、類似度が高ければ顔とみなすといった公知の顔検出技術を用いることで、人物が被写体であると認識して、該シーンを頭出し位置として設定することが可能となる。
　また、本発明の動画像記録方法は、
　撮像器で画像を撮像してデジタル映像信号を得る撮像ステップと、
　画像符号化処理器で前記デジタル映像信号を複数のフレームから構成されるGOP単位で符号化して動画像符号化データを生成する画像符号化ステップと、
　記録器で前記動画像符号化データを記録媒体に記録する記録ステップと、
　頭出し位置生成ステップと、
　を含み、
　前記頭出し位置生成ステップは、
　前記記録ステップで前記動画像符号化データを記録媒体に記録している時に、前記撮像器で実施される所定動作を検知する第１の処理ステップと、
　前記第１の処理ステップによる前記所定動作の検知に基づいて前記画像符号化処理器にGOP構造変更指示を行う第２の処理ステップと、
　を含む。
　本発明の動画像再生方法は、
　付加情報を含む動画像符号化データが記録された記録媒体から前記付加情報を読み出す読み出しステップと、
　前記読み出しステップで読み出した前記付加情報に基づいて前記記録媒体から前記動画像符号化データを読み出して再生する再生ステップと、
　を含み、
　前記再生ステップでは、前記読み出しステップで読み出した前記付加情報に前記動画像符号化データの撮像時において実施される所定動作に関する情報が記録されているか否かを判断したうえで、前記情報が記録されていると判断すると、当該情報において前記所定動作が実行された位置として特定されているデータ位置から前記動画像符号化データを再生可能である。
　また、本発明の半導体集積回路は、
　外部の撮像器に接続されており、前記撮像器から入力されるデジタル映像信号を複数のフレームから構成されるGOP単位で符号化して動画像符号化データを生成する画像符号化処理器と、
　外部の記録媒体に接続されており、前記動画像符号化データを前記記録媒体に記録する記録器と、
　頭出し位置生成器と、
　を備え、
　前記頭出し位置生成器は、
　前記記録器が前記動画像符号化データを前記記録媒体に記録している時に、前記撮像器で実施される所定動作を検知する第１の処理部と、
　前記第１の処理部による前記所定動作の検知に基づいて、前記動画像符号化データにおけるGOP構造変更指示を前記画像符号化処理器に行う第２の処理部と、
　を備える。
　なお、本発明は、装置および方法として実現できるだけでなく、その装置を構成する機能や方法のステップをコンピュータに実行させるプログラムとして実現したり、そのプラグラムを記録したコンピュータ読み取り可能なＣＤ－ＲＯＭなどの記録媒体として実現したり、そのプログラムを示す情報、データまたは信号として実現したりすることもできる。そして、それらのプログラム、情報、データ及び信号はインターネット等の通信ネットワークを介して配信できるようにしてもよい。
　本発明によれば、デジタルビデオカメラのように撮像器を持つ動画像記録装置あるいは動画像再生装置において、記録した動画像データを再生する際に、ユーザが見たいシーンへのアクセスを容易にする効果がある。また、GOP構造を変更することにより、記録した動画像データの編集を容易にする効果もある。
図１は本発明の実施の形態１における動画像記録装置の構成を示すブロック図である。 図２は本発明の実施の形態１における頭出し位置生成器の動作の流れを示したフローチャート図である。 図３ＡはGOPの第１の構成を示す図である。 図３ＢはGOPの第２の構成を示す図である。 図４は本発明の実施の形態２における動画像記録再生装置の構成を示すブロック図である。 図５は本発明の実施の形態２における頭出し位置生成器の動作の流れを示したフローチャート図である。 図６は本発明の実施の形態２における再生器の動作の流れを示したフローチャート図である。
　（実施の形態１）
　以下、本発明の実施の形態１における動画像記録装置について説明する。図１は、本発明の実施の形態１における動画像記録装置の構成を示すブロック図である。この動画像記録装置は、撮像器１０１と、画像符号化処理器１０２と、記録媒体１０４にデータを記録する記録器１０３と、頭出し位置生成器１０５と、管理情報記憶部１０６とを備える。動画像記録装置は、少なくとも画像符号化処理器１０２、記録器１０３および頭出し位置生成器１０５が、半導体集積回路で構成可能である。
　撮像器１０１は、例えば、ズーム調整（画角調整）可能なズームレンズを備える撮像用光学系と、撮像デバイス（撮像用光学系により得られる光情報を電気信号に変換するＣＣＤ、ＣＭＯＳなどの光電変換素子を備える）と、撮像デバイスから出力される電気信号をデジタル映像信号に変換したうえでそのデジタル映像信号にデジタル信号処理を施す画像信号処理器とを備える。
　画像符号化処理器１０２は、撮像器１０１で得られるデジタル映像信号に所定の方式による圧縮符号化処理を施す。例えば、圧縮符号化方式として、MPEG2-VideoあるいはMPEG4-AVC/H.264（以下、MPEGと記す）などが挙げられる。MPEGでは、フレーム内符号化を用いたＩピクチャを一定フレーム間隔で挿入することによって複数のフレームから構成されるGOP（Group Of Pictures)という単位で符号化が行われる。
　GOPには、GOP境界でのフレーム間予測可能なOpenGOPと、GOP境界でのフレーム間予測を禁止したClosedGOPとがある。OpenGOPは参照フレームを含むGOPに依存しているため、MPEGデータにおけるランダムアクセスを行う際には、参照GOPが必要になる。一方ClosedGOPは、他のGOPに依存しない独立したGOPであるため、ランダムアクセス時に有効である。なお、OpenGOPは、BrokenLinkフラグを設定することでランダムアクセス可能となるが、前方参照しているフレームの再生が不可となるため、画質劣化に繋がる。また、符号化効率の点で、ClosedGOPは、GOP境界でのフレーム間予測を禁止していることからOpenGOPに比べて低下するという特徴がある。本実施の形態では、撮像中のGOP構造は、撮像開始時のみClosedGOPに設定したうえで、以降はOpenGOP（ただし、所定動作を検知した時はClosedGOP）に設定する。
　記録器１０３は、画像符号化処理器１０２にて得られた動画像符号化データを記録媒体１０４に所定の単位毎に書込み処理を行う。記録器１０３は、動画像符号化データを管理するための管理情報をメモリ等の管理情報記録部１０６に保持したうえで、管理情報記録部１０６から管理情報を読み出して動画像符号化データと共に記録媒体１０４に書込む。実施の形態１では、音声データについて述べていないが、音声データが存在する場合は、記録器１０３にて動画像符号化データと音声データとを多重化したうえで、夫々のデータに、同期を図るためのタイムスタンプが付与される。記録媒体１０４としては、ＨＤＤ、ＳＤカード、光ディスク（ＤＶＤ、ＢＤ等）等が挙げられる。
　頭出し位置生成器１０５は、第１の処理部１０５ａと第２の処理部１０５ｂとを有する。第１の処理部１０５ａは、画像符号化処理器１０２で得られる動画像符号化データを記録器１０３が記録媒体１０４に記録している時に撮像器１０１の所定動作を検知する。第２の処理部１０５ｂは、第１の処理部１０５ａの所定動作の検知に基づいて画像符号化処理器１０２にGOP構造変更指示を行う。実施の形態１の頭出し位置生成器１０５は、撮像中に撮像器１０１のズームレンズのズームイン動作（画角縮小調整）またはズームアウト動作（画角拡大調整）を所定動作として検知したうえで、その検知結果に基づいてGOP構造をOpenGOPからClosedGOPへ変更する指示を画像符号化処理器１０２に行う。ズームイン動作やズームアウト動作の検知は、撮像器１０１からのズーム操作に基づく信号により行うことができる。第１の処理部１０５ａが検知する撮像器１０１の所定動作は、好ましくは、画像拡大（画角縮小）や画像縮小（画角拡大）の例であるズームイン動作やズームアウト動作である。
　撮像器１０１の撮像操作による撮像態様は多様であり、例えば、望遠撮像（画角を縮小させた状態における撮像）、広角撮像（画角を拡大させた状態における撮像）、高輝度状態における撮像、低輝度状態における撮像、コントラスト可変状態における撮像等があり、第１の処理部１０５ａが検知する撮像器１０１の所定動作は、画角調整動作に限らず、他の動作を検知するようにしてもよい。
　実施の形態１では、第２の処理部１０５ｂは、さらに、第１の処理部１０５ａの検知に基づいて画像符号化処理器にGOP構造変更指示を行ってから一定時間経過したか否かを判断し、一定時間経過したと判断すると、GOP構造を元に戻すようGOP構造変更指示を行う。
　本発明の他の実施形態として、第２の処理部１０５ｂは、第１の処理部１０５ａの検知に基づいて画像符号化処理器１０２にチャプタ表示用画像の生成指示を行うようにしてもよく、あるいは、頭出し位置生成器１０５の第１の処理部１０５ａの検知に基づいて記録器１０３に動画像符号化データ分割指示を行うようにしてもよく、あるいは、頭出し位置生成器１０５の第１の処理部１０５ａの検知に基づいて画像符号化処理器１０２に撮像器１０１の所定動作情報を付加情報として動画像符号化データに付加する指示を行うようにしてもよく、それらを組み合わせて行ってもよい。
　管理情報記録部１０６に記録される管理情報は、記録器１０３により、画像符号化データとともに、記録媒体１０４に記録されるデータであって、画像符号化データのいわゆるタイムスタンプなどの情報が含まれる。
　次に、実施の形態１における頭出し位置生成器１０５の以下の動作について説明する。ここでいう動作とは、撮像器１０１の画角調整動作を検知して画像符号化処理器１０２にGOP構造の変更指示を行うまでの動作である。
　この動作において、動画像データを記録媒体に記録する動画像記録方法に含まれるステップとしては、
・撮像器１０１を用いて画像を撮像してデジタル映像信号を得る撮像ステップと、
・撮像ステップにより得られるデジタル映像信号を画像符号化処理器１０２にて符号化し動画像符号化データを生成する画像符号化ステップと、
・動画像符号化データを記録器１０３にて記録媒体１０４に記録する記録ステップと、
　が含まれる。
　さらに、
・頭出し位置生成器１０５により、記録ステップで動画像符号化データを記録媒体１０４に記録している時に、撮像器１０１の所定動作（実施の形態では画角調整動作）を検知する第１の処理ステップと、
・第１の処理ステップの検知に基づいて画像符号化処理器１０２にGOP構造変更指示を行う第２の処理ステップと、
　が含まれる。
　図２は第１、第２の処理ステップを実行する頭出し位置生成器１０５の動作の流れを示すフローチャートである。頭出し位置生成器１０５は、まず、撮像器１０１のズームレンズのズームイン動作またはズームアウト動作（以下、ズーム動作と記す）が実行されたかどうかを判断する（Ｓ１０１）。Ｓ１０１で、ズーム動作が実行されていない（否）と判断すると、頭出し位置生成器１０５は、画像符号化処理器１０２にGOP構造の変更指示を行わない。Ｓ１０１で、ズーム動作が実行されている（是）と判断すると、頭出し位置生成器１０５は、画像符号化処理器１０２がデジタル映像信号（撮像器１０１で取得する）に圧縮符号化処理を施している最中であるか否かを判断する（Ｓ１０２）。Ｓ１０２で、画像符号化処理器１０２は圧縮符号化処理中でない（否）と判断すると、頭出し位置生成器１０５は、画像符号化処理器１０２にGOP構造の変更指示を行わない。圧縮符号化処理中である（是）と判断すると、頭出し位置生成器１０５は、撮像器１０１のズーム動作が停止したか否かを判断する（Ｓ１０３）。 Ｓ１０３でズーム動作が停止していない（否）と判断すると、頭出し位置生成器１０５は、再びズーム動作が停止したか否かの判断（Ｓ１０３）を行い、以降、ズーム動作が停止するまでＳ１０３の処理を繰返す。
　Ｓ１０３の処理において撮像器１０１のズーム動作が停止していると判断する場合、頭出し位置生成器１０５は、画像符号化処理器１０２にGOP構造をOpenGOPからClosedGOPに変更する指示を行う（Ｓ１０４）。画像符号化処理器１０２は、頭出し位置生成器１０５の要求に従って、動画像符号化データのGOP構造をOpenGOPからClosedGOPに変更する。
　頭出し位置生成器１０５は、画像符号化処理器１０２にGOP構造をOpenGOPからClosedGOPに変更する指示を行ったのち、一定時間が経過すると、再度、GOP構造をClosedGOPからOpenGOPに戻す変更指示を画像符号化処理器１０２に行う。実施の形態１では、ClosedGOPを１つ挿入することを想定している。そのため、上記一定時間は、約０．５秒に設定される。
　なお、実施の形態１では、頭出し位置生成器１０５は、撮像器１０１におけるズームレンズのズーム動作を検知に基づいて、GOPの構造の変更指示を行っているが、他の動作の検知に基づいてGOP構造の変更指示を行ってもよい。例えば、デジタルビデオカメラには、撮像中にカメラを下に向け誤って地面を撮像するのを防止するために、カメラの傾きを検知できる加速度センサ１２０（図１に図示）が搭載されているものがある。このような構成のデジタルビデオカメラでは、加速度センサ１２０が検出する傾きが所定の値になると、撮像動作が強制的に停止される。しかしながら、これでは意図的にカメラを下に向けた場合であっても撮像動作が停止してしまう。そのため、地面等、垂直下方向を撮影する場合には、カメラの傾きを検知する機能をＯＦＦにする必要がある。
　このような構成を有するデジタルビデオカメラに本発明を実施する場合、頭出し位置生成器１０５は、撮像器１０１のズームレンズのズーム動作を検知する代わりに、加速度センサ１２０が検出する傾き値を検知する。そのうえで、頭出し位置生成器１０５は、検知した傾き値に基づいてGOP構造の変更を行う。例えば、カメラが垂直下方向に向けられた場合、頭出し位置生成器１０５は、加速度センサ１２０のセンサ出力に基づいて撮像器１０１の向きを検知したうえで、そのときのシーンを頭出し位置と判断し、GOP構造を、OpenGOPからClosedGOPに変更する。またカメラの向きが垂直下方向から水平方向に戻された場合でも、頭出し位置生成器１０５は、加速度センサ１２０のセンサ出力に基づいて撮像器１０１の向きを検知したうえで、そのときのシーンを頭出し位置と判断し、GOP構造を、OpenGOPからClosedGOPに変更する。
　以上のGOP構造変更処理を行うことにより、編集時においてユーザが各シーンの中で不要と判断したシーンを容易に削除することが可能となる。なお、頭出し位置生成器１０５の指示に基づいて、ClosedGOPに変更された位置の時間情報は、管理情報１０６に記録しておいてもよい。
　図３Ａ、図３Ｂは、GOPの構成を示す図であって、図３ＡはGOP間を跨ぐ前方予測がなされるOpenGOPの構造を、図３ＢはGOP間を跨ぐ予測を用いないClosedGOPの構造をそれぞれ示す。これらの図において、Ｉはフレーム内符号化画像（I-Picture）、Ｐは前方予測符号化画像（P-Picture）、Ｂは両方向予測画像（B-Picture）を示し、図中の矢印は符号化画像が参照している参照画像を示す。
　図３ＡのOpenGOPでは、例えばGOP１から再生を開始する場合、GOP１のI-Pictureに先立つB-PictureがGOP０を参照しているため、正しい復号化が困難となる。しかしながら、図３ＢのClosedGOPでは、例えばGOP１から再生を開始する場合、GOP１のI-Pictureに先立つB-PictureはGOP０を参照しないため、正しい復号化が可能となる。
　また、編集時において、図３ＡのOpenGOPでは、GOP１のI-Pictureに先立つB-PictureがGOP０を参照しているために、GOP０を削除すると復号化できなくなって画質が低下する。しかしながら、図３ＢのClosedGOPでは、GOP１のI-Pictureに先立つB-PictureはGOP０を参照していないためにGOP０を削除しても、画質の劣化を生じさせない。
　このことから明らかなように、シーンの頭出し検出に基づいて、GOP構造を、OpenGOPからClosedGOPに変更することで、頭出しが容易となるだけでなく、頭出し位置の前方のGOPを削除する等の編集も容易となる。
　このように実施の形態１によれば、ユーザが撮像器１０１のズームイン動作またはズームアウト動作といったズーム動作の実行等を検出することに基づいてシーンの頭出し位置を検出したうえで、検出したシーンの頭出し位置のGOP構造をClosedGOPに変更することで、再生時において該シーンへの素早い移動または頭出しが可能となるだけでなく、参照GOPが不要となるため、余分なデータ転送処理および画質劣化を防ぐことができる。
　（実施の形態２）
　次に、本発明の実施の形態２における動画像記録再生装置について、図面を参照して説明する。図４は、本発明の実施の形態２における動画像記録再生装置を示すブロック図である。この動画像記録再生装置は、実施の形態１と同様の構成の動画像記録器１１０と動画像再生器１１１とを一体化した装置である。なお、本発明の他の実施形態として、動画像記録器１１０を省略して、動画像再生装置を構成してもよい。
　本実施の形態の動画像記録再生装置は、撮像器１０１と、画像符号化処理器１０２と、記録媒体１０４に記録する記録器１０３と、頭出し位置生成器１０５と、管理情報記録部１０６と、表示装置１０７と、再生器１０８とを備える。これら構成要素の内、少なくとも画像符号化処理器１０２、記録器１０３、頭出し位置生成器１０５および再生器１０８は、半導体集積回路で構成される。なお、動画像再生器１１１に、動画像符号化データの所定の画像特徴量が一定量以上の変化があるか否かを検知したうえで、その検知結果に基づいて頭出し位置を設定可能な編集器１２１が設けられる。
　撮像器１０１は、例えば、ズーム調整用のズームレンズを備える撮像用光学系と、撮像デバイス（撮像用光学系により得られる光情報を電気信号に変換するＣＣＤ、ＣＭＯＳなどの光電変換素子を備える）と、撮像デバイスから出力される電気信号をデジタル映像信号に変換したうえでそのデジタル映像信号にデジタル信号処理を施す画像信号処理器とを備える。
　画像符号化処理器１０２は、撮像器１０１で得られるデジタル映像信号に所定の方式による圧縮符号化処理を施す。例えば、圧縮符号化方式として、MPEG2-VideoあるいはMPEGなどが挙げられる。MPEGでは、GOP単位で符号化が行われる。本実施の形態では、撮像中のGOP構造は、撮像開始時のみClosedGOPに設定されたうえで、以降はOpenGOP（ただし、所定動作を検知した時はClosedGOP）に設定される。
　記録器１０３は、画像符号化処理器１０２にて得られた動画像符号化データを記録媒体１０４に所定の単位毎に書込み処理を行う。記録器１０３は、動画像符号化データを管理するための所定の情報を有する管理情報をメモリ等の管理情報記録部１０６に保持したうえで、管理情報記録部１０６から管理情報を読み出して動画像符号化データと共に記録媒体１０４に書込む。実施の形態２では、音声データについて述べていないが、音声データが存在する場合は、記録器１０３にて動画像符号化データと音声データとを多重化したうえで、夫々のデータに、同期を図るためにタイムスタンプが付与される。記録媒体１０４としては、ＨＤＤ、ＳＤカード、光ディスク（ＤＶＤ、ＢＤ等）等が挙げられる。
　頭出し位置生成器１０５は、第１の処理部１０５ａと第２の処理部１０５ｂと第３の処理部１０５ｃとを有する。第１の処理部１０５ａは、画像符号化処理器１０２で得られる動画像符号化データを記録器１０３が記録媒体１０４に記録している時に撮像器１０１の所定動作を検知する。第２の処理部１０５ｂは、第１の処理部１０５ａの所定動作の検知に基づいて画像符号化処理器１０２にGOP構造変更指示を行う。実施の形態２の頭出し位置生成器１０５は、撮像中に撮像器１０１のズームレンズのズームイン動作またはズームアウト動作を所定動作として検知したしたうえで、その検知結果に基づいてGOP構造をOpenGOPからClosedGOPへ変更する指示を画像符号化処理器１０２に行う。第３の処理部１０５ｃは記録器１０３から取得する頭出し位置の時間情報を管理情報１０６に記録する処理の制御を、第２の処理部１０５ｂの処理結果に基づいて行う。
　さらに第２の処理部１０５ｂは、第１の処理部１０５ａの所定動作の検知に基づいて、撮像器１０１の所定動作を付加情報として動画像符号化データに付加する指示を画像符号化処理器１０２に行う。実施の形態２では上記所定動作は、撮像器１０１におけるズーム動作が該当し、第２の処理部１０５ｂは、圧縮符号化時において動画像符号化データのヘッダのユーザデータ領域にユーザデータとしてズーム動作情報が付加されるよう画像符号化処理器１０２を制御する。管理情報は、記録器１０３により、画像符号化データとともに記録媒体１０４に記録されるデータであって、画像符号化データのいわゆるタイムスタンプなどの情報が含まれる。表示装置１０７は、例えば、液晶モニタ等が挙げられる。再生器１０８は、記録媒体１０４から動画像符号化データの付加情報を読み出して解析したうえで、その解析結果に基づいて動画像符号化データを読み出して再生する。そのうえで、付加情報に撮像時の所定動作情報が記録されていることが確認されると、再生器１０８は、撮像時の所定動作が行われた位置から再生することが可能となる。このように、再生器１０８は、読み出し器と再生器として機能する。
　付加情報として撮像時の撮像器１０１のズーム動作情報が所定動作情報として記録媒体１０４に記録されている場合、再生器１０８はズーム動作情報においてズーム動作が終了した位置（もしくは開始された位置）から再生することが可能である。
　編集器１２１は、動画像符号化データにおいて画像特徴量の変化が所定量以上あるデータ位置を、動画像符号化データにおける頭出し位置として設定可能である。画像特徴量とは、画像から抽出可能な目、鼻、口等の顔を構成する部位の大きさ、位置、相対配置や、顔の輪郭等をパラメータ化したものである。これにより、例えば、動画像内の画面中央付近に対して、目、鼻、口等の形状に特徴のある部位を探し出し、類似度が高ければ顔とみなすといった公知の顔検出技術を用いることで、人物が被写体であると認識して、該シーンを頭出し位置として設定することが可能となる。
　次に、実施の形態２における頭出し位置生成器１０５の以下の動作について説明する。ここでいう動作とは、撮像器１０１のズーム動作を検知して画像符号化処理器１０２にGOP構造の変更指示を行い、さらに撮像器１０１のズーム動作情報を画像符号化データのヘッダのユーザデータ領域にユーザデータとして付加する指示を行うまでの動作である。
　図５は頭出し位置生成器１０５の動作の流れを示すフローチャートである。頭出し位置生成器１０５は、まず、撮像器１０１のズームレンズのズームイン動作またはズームアウト動作（以下、ズーム動作と記す）が実行されたかどうかを判断する（Ｓ２０１）。Ｓ２０１でズーム動作が実行されていない（否）と判断すると、頭出し位置生成器１０５は画像符号化処理器１０２にGOP構造変更指示を行わない。Ｓ２０１で、ズーム動作が実行されている（是）と判断すると、頭出し位置生成器１０５は、画像符号化処理器１０２がデジタル映像信号（撮像器１０１で取得する）に圧縮符号化処理を施している最中であるか否かを判断する（Ｓ２０２）。Ｓ２０２で画像符号化処理器１０２が圧縮符号化処理中でない（否）と判断すると、頭出し位置生成器１０５は、画像符号化処理器１０２にGOP構造変更指示を行わない。圧縮符号化処理中である（是）と判断すると、頭出し位置生成器１０５は、撮像器１０１のズーム動作が停止したか否か判断する（Ｓ２０３）。Ｓ２０３でズーム動作が停止していない（否）と判断すると、頭出し位置生成器１０５は、再びズーム動作が停止したか否かの判断（Ｓ２０３）を行い、以降、ズーム動作が停止するまでＳ２０３処理を繰返す。
　Ｓ２０３の処理において撮像器１０１のズーム動作が停止していると判断する場合、頭出し位置生成器１０５は、画像符号化処理器１０２にGOP構造をOpenGOPからClosedGOPに変更する指示を行う（Ｓ２０４）。さらに、頭出し位置生成器１０５は、画像符号化処理器１０２に撮像器１０１のズーム動作が実行されたことを付加情報として動画像符号化データに付加する指示を行う（Ｓ２０５）。画像符号化処理器１０２は、頭出し位置生成器１０５の要求に従って、GOP構造をOpenGOPからClosedGOPに変更し、さらに動画像符号化データのヘッダのユーザデータ領域にズーム動作実行フラグを設定する。
　頭出し位置生成器１０５は、画像符号化処理器１０２にGOP構造をOpenGOPからClosedGOPに変更する指示を行ったのち、一定時間が経過すると、再度、GOP構造をClosedGOPからOpenGOPに戻す変更指示を画像符号化処理器１０２に行う。実施の形態２では、ClosedGOPを１つ挿入することを想定している。そのため、上記一定時間は、約０．５秒に設定される。
　なお、実施の形態２では、頭出し位置生成器１０５は、GOPの構造の変更指示を行っているが、他の動作の検知（加速度センサ１２０による撮像器１２０の傾き検知等）に基づいてGOP構造の変更指示を行ってもよい。
　次に、本発明の実施の形態２における記録媒体１０４から画像符号化データを読み出し、画像符号化データを再生し、表示器１０７に出力するまでの再生器１０８の動作について図６を参照して説明する。図６は再生器１０８の動作の流れを示すフローチャートである。
　再生器１０８は、まず、記録媒体１０４から動画像符号化データを読み出す（Ｓ３０１）。次に、再生器１０８は、記録媒体１０４から読み出した動画像符号化データのヘッダ（付加情報）を解析し、ヘッダに設けられたユーザデータ領域に撮像時のズームレンズのズーム動作実行フラグが設定されているか否かを判断する（Ｓ３０２）。Ｓ３０２の処理においてユーザデータ領域にズーム動作実行フラグが設定されていると判断する場合、再生器１０８は、そのユーザデータ領域のあるシーンを頭出し位置として選択可能にする（Ｓ３０３）。頭出し位置として選択可能にする処理としては、例えば、サムネイル表示が挙げられる。頭出し位置として選択可能となった所望のシーンからユーザが動画像記録再生装置に再生指示を行うと、その指示に基づいてユーザデータ領域のあるシーンを頭出し位置にして動画像符号化データが表示装置１０７に出力される。Ｓ３０２においてユーザデータ領域にズーム動作実行フラグが設定されていないと判断する場合、再生器１０８では特に処理が行われない。
　以上説明したように、実施の形態２によれば、ユーザが撮像器１０１のズームイン動作またはズームアウト動作といったズーム動作を実行した際に、該シーンのGOP構造をClosedGOPに変更したうえで、動画像符号化データのヘッダに付加情報としてズーム動作情報が付与される。そのため、再生時において撮像時にズーム動作したシーンを頭出し位置と擬制して該シーンへの素早い移動または頭出しが可能となる。さらには、参照GOPが不要となるため、余分なデータ転送処理および画質劣化を防ぐことができる。
　以上、本発明の動画像記録装置および動画像記録再生装置について、実施の形態に基づいて説明したが、本発明は、この実施の形態に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、本発明の範囲内に含まれる。
　本発明は、動画像の記録や再生を行う機器、特にデジタルビデオカメラや携帯電話などの撮像機能を備える電子機器一般に適用可能である。
　１０１　撮像器
　１０２　画像符号化処理器
　１０３　記録器
　１０４　記録媒体
　１０５　頭出し位置生成器
　１０６　管理情報
　１０７　表示装置
　１０８　再生器

Claims (17)

  1. 　画像を撮像してデジタル映像信号を得る撮像器と、
    　前記デジタル映像信号を複数のフレームから構成されるGOP単位で符号化して動画像符号化データを生成する画像符号化処理器と、
    　前記動画像符号化データを記録媒体に記録する記録器と、
    　頭出し位置生成器と、
    　を備え、
    　前記頭出し位置生成器は、
    　前記記録器が前記動画像符号化データを前記記録媒体に記録している時に、前記撮像器で実施される所定動作を検知する第１の処理部と、
    　前記第１の処理部による前記所定動作の検知に基づいて、前記動画像符号化データにおけるGOP構造変更指示を前記画像符号化処理器に行う第２の処理部と、
    　を備える、
    　動画像記録装置。
  2. 　前記第２の処理部は、前記動画像符号化データにおけるGOP構造を、OpenGOPからClosedGOPに変更する指示を前記画像符号化処理器に行う、
    　請求項１の動画像記録装置。
  3. 　前記撮像器は、撮影画角調整が可能であり、
    　前記第１の処理部は、前記撮像器による前記撮影画角調整動作を前記所定動作として検知する、
    　請求項１の動画像記録装置。
  4. 　前記第２の処理部は、前記GOP構造変更指示を行ってから一定時間経過後に、GOP構造を元に戻す指示を前記画像符号化処理器に行う、
    　請求項１の動画像記録装置。
  5. 　前記第２の処理部は、前記第１の処理部による前記所定動作の検知に基づいて、さらにチャプタ表示用画像の生成指示を前記画像符号化処理器に行う、
    　請求項１の動画像記録装置。
  6. 　前記第２の処理部は、前記第１の処理部による前記所定動作の検知に基づいて、さらに前記動画像符号化データの分割指示を前記記録器に行う、
    　請求項１の動画像記録装置。
  7. 　前記第２の処理部は、前記第１の処理部による前記所定動作の検知に基づいて、さらに前記所定動作に関する情報を付加情報として前記動画像符号化データに付加する指示を前記画像符号化処理器に行う、
    　請求項１の動画像記録装置。
  8. 　前記撮像器の傾きを検知するセンサをさらに備え、
    　前記第１の処理部は、前記センサのセンサ出力に基づいて、前記撮像器の傾きを前記所定動作として検知する、
    　請求項１の動画像記録装置。
  9. 　前記動画像符号化データを管理するための管理情報が記録される管理情報記録部をさらに備え、
    　前記頭出し位置生成器は第３の処理部をさらに備え、
    　前記第３の処理部は、前記第２の処理部によってGOP構造変更が施される前記動画像符号化データのデータ位置を示す情報を、前記記録器から取得したうえで、取得した前記情報を前記管理情報として前記管理情報記録部に記録する、
    　請求項１の動画像記録装置。
  10. 　記録媒体から動画像符号化データの付加情報を読み出す読み出し器と、
    　前記付加情報に基づいて前記記録媒体から前記動画像符号化データを読み出して再生する再生器と、
    　を備え、
    　前記再生器は、前記読み出し器が読み出す前記付加情報に前記動画像符号化データの撮像時において実施される所定動作に関する情報が記録されているか否かを判断したうえで、前記情報が記録されていると判断すると、当該情報において前記所定動作が実行された位置として特定されているデータ位置から前記動画像符号化データを再生可能である、
    　動画像再生装置。
  11. 　前記所定動作は、前記動画像符号化データのソースとなるデジタル映像信号を撮像する撮像器の撮影画角調整動作である、
    　請求項１０の動画像再生装置。
  12. 　前記動画像符号化データにおいて画像特徴量の変化が所定量以上あるデータ位置を、前記動画像符号化データにおける頭出し位置として設定可能な編集器を、
    　さらに備える、
    　請求項１０の動画像再生装置。
  13. 　撮像器で画像を撮像してデジタル映像信号を得る撮像ステップと、
    　画像符号化処理器で前記デジタル映像信号を複数のフレームから構成されるGOP単位で符号化して動画像符号化データを生成する画像符号化ステップと、
    　記録器で前記動画像符号化データを記録媒体に記録する記録ステップと、
    　頭出し位置生成ステップと、
    　を含み、
    　前記頭出し位置生成ステップは、
    　前記記録ステップで前記動画像符号化データを記録媒体に記録している時に、前記撮像器で実施される所定動作を検知する第１の処理ステップと、
    　前記第１の処理ステップによる前記所定動作の検知に基づいて前記画像符号化処理器にGOP構造変更指示を行う第２の処理ステップと、
    　を含む、
    　動画像記録方法。
  14. 　前記撮像器は、撮影画角調整が可能であり、
    　前記第１の処理ステップでは、前記撮像器による前記撮影画角調整動作を前記所定動作として検知する、
    　請求項１３の動画像記録方法。
  15. 　付加情報を含む動画像符号化データが記録された記録媒体から前記付加情報を読み出す読み出しステップと、
    　前記読み出しステップで読み出した前記付加情報に基づいて前記記録媒体から前記動画像符号化データを読み出して再生する再生ステップと、
    　を含み、
    　前記再生ステップでは、前記読み出しステップで読み出した前記付加情報に前記動画像符号化データの撮像時において実施される所定動作に関する情報が記録されているか否かを判断したうえで、前記情報が記録されていると判断すると、当該情報において前記所定動作が実行された位置として特定されているデータ位置から前記動画像符号化データを再生可能である、
    　動画像再生方法。
  16. 　前記所定動作は、前記動画像符号化データのソースとなるデジタル映像信号を撮像する撮像器の撮影画角調整動作である、
    　請求項１５の動画像再生方法。
  17. 　外部の撮像器に接続されており、前記撮像器から入力されるデジタル映像信号を複数のフレームから構成されるGOP単位で符号化して動画像符号化データを生成する画像符号化処理器と、
    　外部の記録媒体に接続されており、前記動画像符号化データを前記記録媒体に記録する記録器と、
    　頭出し位置生成器と、
    　を備え、
    　前記頭出し位置生成器は、
    　前記記録器が前記動画像符号化データを前記記録媒体に記録している時に、前記撮像器で実施される所定動作を検知する第１の処理部と、
    　前記第１の処理部による前記所定動作の検知に基づいて、前記動画像符号化データにおけるGOP構造変更指示を前記画像符号化処理器に行う第２の処理部と、
    　を備える、
    　半導体集積回路。
PCT/JP2009/001755 2008-05-08 2009-04-16 動画像の記録並びに再生を行う装置 WO2009136469A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN2009801131962A CN102007765A (zh) 2008-05-08 2009-04-16 执行运动图像的记录以及播放的装置
US12/898,312 US20110019024A1 (en) 2008-05-08 2010-10-05 Apparatus for recording and reproducing video images

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008122054A JP2009272921A (ja) 2008-05-08 2008-05-08 動画像記録装置、動画像再生装置、動画像記録方法、動画像再生方法および半導体集積回路
JP2008-122054 2008-05-08

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US12/898,312 Continuation US20110019024A1 (en) 2008-05-08 2010-10-05 Apparatus for recording and reproducing video images

Publications (1)

Publication Number Publication Date
WO2009136469A1 true WO2009136469A1 (ja) 2009-11-12

Family

ID=41264526

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/001755 WO2009136469A1 (ja) 2008-05-08 2009-04-16 動画像の記録並びに再生を行う装置

Country Status (4)

Country Link
US (1) US20110019024A1 (ja)
JP (1) JP2009272921A (ja)
CN (1) CN102007765A (ja)
WO (1) WO2009136469A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011138574A (ja) * 2009-12-28 2011-07-14 Hitachi Consumer Electronics Co Ltd 情報記録再生装置
WO2013001138A1 (en) * 2011-06-30 2013-01-03 Nokia Corporation A method, apparatus and computer program products for detecting boundaries of video segments
JP2013219541A (ja) * 2012-04-09 2013-10-24 Seiko Epson Corp 撮影システムおよび撮影方法
WO2015088265A1 (en) * 2013-12-13 2015-06-18 Samsung Electronics Co., Ltd. Storage medium, reproducing apparatus and method for recording and playing image data
EP3767949A4 (en) * 2018-03-15 2021-01-20 Sony Corporation DEVICE AND METHOD FOR PROCESSING AN IMAGE

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1098713A (ja) * 1996-09-20 1998-04-14 Sony Corp 映像信号切換装置
JP2001094987A (ja) * 1999-09-22 2001-04-06 Matsushita Electric Ind Co Ltd 画像データ伝送方法
JP2006197560A (ja) * 2004-12-13 2006-07-27 Canon Inc 画像符号化装置、画像符号化方法、プログラム及び記憶媒体
JP2007251891A (ja) * 2006-03-20 2007-09-27 Matsushita Electric Ind Co Ltd コンテンツの撮影装置
JP2008084443A (ja) * 2006-09-27 2008-04-10 Toshiba Corp 番組構造化装置、番組構造化方法およびプログラム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2265089C (en) * 1998-03-10 2007-07-10 Sony Corporation Transcoding system using encoding history information
US7272295B1 (en) * 1999-11-10 2007-09-18 Thomson Licensing Commercial skip and chapter delineation feature on recordable media
JP3496604B2 (ja) * 1999-12-20 2004-02-16 日本電気株式会社 圧縮画像データ再生装置および圧縮画像データ再生方法
AU4265101A (en) * 2000-04-05 2001-10-15 Sony United Kingdom Limited Identifying, recording and reproducing information
JP4326753B2 (ja) * 2002-06-14 2009-09-09 株式会社リコー 映像情報インデキシング支援システム、プログラム及び記憶媒体
JP3764976B2 (ja) * 2003-10-10 2006-04-12 カシオ計算機株式会社 撮影機能付投射装置、及び投射画像撮影システム
JP2005318180A (ja) * 2004-04-28 2005-11-10 Funai Electric Co Ltd ハードディスクレコーダ、映像記録装置
MXPA06004544A (es) * 2004-04-28 2006-06-23 Matsushita Electric Ind Co Ltd Aparato de generacion de corriente, metodo de generacion de corriente, aparato de codificacion, metodo de codificacion, medio de grabacion y programa para los mismos.
JP4488989B2 (ja) * 2005-09-16 2010-06-23 株式会社東芝 デジタルビデオカメラ装置
JP4936504B2 (ja) * 2005-09-26 2012-05-23 キヤノン株式会社 クレードル装置と操作端末とのそのプログラム、及びカメラシステム
JP4779921B2 (ja) * 2006-10-05 2011-09-28 ソニー株式会社 データ処理装置及びデータ処理方法、並びにコンピュータ・プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1098713A (ja) * 1996-09-20 1998-04-14 Sony Corp 映像信号切換装置
JP2001094987A (ja) * 1999-09-22 2001-04-06 Matsushita Electric Ind Co Ltd 画像データ伝送方法
JP2006197560A (ja) * 2004-12-13 2006-07-27 Canon Inc 画像符号化装置、画像符号化方法、プログラム及び記憶媒体
JP2007251891A (ja) * 2006-03-20 2007-09-27 Matsushita Electric Ind Co Ltd コンテンツの撮影装置
JP2008084443A (ja) * 2006-09-27 2008-04-10 Toshiba Corp 番組構造化装置、番組構造化方法およびプログラム

Also Published As

Publication number Publication date
JP2009272921A (ja) 2009-11-19
CN102007765A (zh) 2011-04-06
US20110019024A1 (en) 2011-01-27

Similar Documents

Publication Publication Date Title
KR101015737B1 (ko) 기록 방법, 기록 장치, 기록 매체, 촬상 장치, 및 촬상 방법
KR20090012152A (ko) 기록 장치, 재생 장치, 기록 재생 장치, 촬상 장치, 기록방법 및 프로그램
JP2012151817A (ja) 再生装置および撮像装置
WO2009136469A1 (ja) 動画像の記録並びに再生を行う装置
JP2007266659A (ja) 撮像再生装置
JP5082973B2 (ja) 映像記録システム、及び撮像装置
US8538247B2 (en) Image processing apparatus and image processing method
JP5284074B2 (ja) 画像処理装置及び画像処理方法
US8379093B2 (en) Recording and reproduction apparatus and methods, and a recording medium storing a computer program for executing the methods
JP2007110223A (ja) 画像処理装置、撮像装置、および画像処理方法、並びにコンピュータ・プログラム
JP2009290318A (ja) 撮像装置およびズーム調整方法
KR20090038851A (ko) 데이터처리장치 및 데이터처리방법과 컴퓨터·프로그램
JP2008160564A (ja) カメラ装置およびカメラ装置におけるチャプタデータ生成方法
JP5228660B2 (ja) 撮像装置
US20070053015A1 (en) Still image printing method and apparatus corresponding to printing request timing
JP2004040518A (ja) 撮像記録装置と再生装置
JP4164696B2 (ja) 撮像装置および撮像方法
JP2006093985A (ja) 撮像装置
JP4293082B2 (ja) サーバ機能を備えた再生装置
JP2006148683A (ja) 画像音声記録再生装置
JP5683127B2 (ja) 記録装置
KR20080098735A (ko) 고속 영상 재생방법 및 이를 적용한 영상재생장치
JP2009130903A (ja) 画像記録装置、画像記録方法及びプログラム
JP2008219921A (ja) 記録装置、記録方法、撮像装置および撮像方法
JP2005012378A (ja) 画像記録装置及び画像記録方法

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200980113196.2

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09742594

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09742594

Country of ref document: EP

Kind code of ref document: A1