KR20050068688A - Method for recording video bitstream for a summary playback and recording medium storing a program to execute thereof - Google Patents

Method for recording video bitstream for a summary playback and recording medium storing a program to execute thereof Download PDF

Info

Publication number
KR20050068688A
KR20050068688A KR1020030100404A KR20030100404A KR20050068688A KR 20050068688 A KR20050068688 A KR 20050068688A KR 1020030100404 A KR1020030100404 A KR 1020030100404A KR 20030100404 A KR20030100404 A KR 20030100404A KR 20050068688 A KR20050068688 A KR 20050068688A
Authority
KR
South Korea
Prior art keywords
bitstream
scene boundary
scene
video bitstream
boundary information
Prior art date
Application number
KR1020030100404A
Other languages
Korean (ko)
Inventor
최병선
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020030100404A priority Critical patent/KR20050068688A/en
Publication of KR20050068688A publication Critical patent/KR20050068688A/en

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명은 입력 비트스트림으로부터 장면이 전환되는 장면 경계를 검출하고, 이를 비디오 비트스트림의 재생시 활용함으로써, 보다 효율적으로 장면을 요약 재생하기 위한 비디오 비트스트림 저장 및 재생 방법에 관한 것으로서, 본 발명에 따른 비디오 비트스트림의 요약 재생 방법에서는 입력된 비디오 비트스트림으로부터 장면 전환을 나타내는 장면 경계 정보를 검출하고, 검출된 장면 경계 정보에 기초하여, 비디오 비트스트림 중 일부만을 재생하도록 하여, 요약 재생이 보다 효율적으로 이루어지도록 한다.The present invention relates to a video bitstream storing and reproducing method for summarizing and reproducing a scene more efficiently by detecting a scene boundary to which a scene is switched from an input bitstream and using the same when playing the video bitstream. The summary playback method of the video bitstream according to the present invention detects scene boundary information indicating a scene change from the input video bitstream, and reproduces only a part of the video bitstream based on the detected scene boundary information, so that summary playback is more efficient. To be done.

Description

요약 재생을 위한 비디오 비트스트림의 기록 및 재생 방법과 이를 구현하기 위한 프로그램이 기록된 기록 매체{Method for recording video bitstream for a summary playback and recording medium storing a program to execute thereof} Method for recording video bitstream for a summary playback and recording medium storing a program to execute approximately}

본 발명은 요약 재생을 위한 비디오 비트스트림의 저장 및 재생 방법에 관한 것으로서, 보다 구체적으로는 입력 비트스트림으로부터 장면이 전환되는 장면 경계를 검출하고, 이를 비디오 비트스트림의 재생시 활용함으로써, 보다 효율적으로 장면을 요약 재생하기 위한 비디오 비트스트림 저장 및 재생 방법에 관한 것이다.The present invention relates to a method for storing and reproducing a video bitstream for summary reproduction. More particularly, the present invention relates to a method for more efficiently by detecting a scene boundary in which a scene is changed from an input bitstream and using the same when playing the video bitstream. A video bitstream storage and playback method for summarizing scenes.

PVR과 같은 디지털미디어 저장 재생 장치에서는 외부로부터 입력된 각종 영상물이 MPEG 등과 같은 표준 디지털미디어 형태로 HDD 등과 같은 저장매체에 저장되게 된다. 즉, 디지털 방송을 수신할 경우에는 수신된 디지털 미디어를 그대로 저장하거나, 또는 트랜스코딩한 후 저장한다. In a digital media storage and reproducing apparatus such as a PVR, various images input from the outside are stored in a storage medium such as an HDD in the form of standard digital media such as MPEG. That is, when receiving digital broadcasting, the received digital media is stored as it is, or after transcoding.

도 1은 일반적인 PVR과 같은 디지털미디어 저장/재생 장치에서의 동영상 저장 방식을 도시하는 블록도이다.1 is a block diagram illustrating a video storage method in a digital media storage / playback apparatus such as a general PVR.

도 1에 도시된 디지털미디어 저장/재생 장치는 튜너(110), NTSC/PAL 디코더(120), 채널 디코더(130), DTV 디코더(140), MPEG-2 인코더(150), 및 비트스트림 저장부(160)를 포함한다.The digital media storage / playback apparatus illustrated in FIG. 1 includes a tuner 110, an NTSC / PAL decoder 120, a channel decoder 130, a DTV decoder 140, an MPEG-2 encoder 150, and a bitstream storage unit. 160.

일반적으로 도 1과 같은 디지털미디어 저장/재생 장치에서의 동영상의 저장은 In general, the storage of a video in the digital media storage / playback device as shown in FIG.

i) 아날로그 방송 신호 또는 외부 아날로그 입력 신호를 인코딩하여 저장하거나,i) encode and store analog broadcast signals or external analog input signals, or

ii) 디지털 방송 신호를 비트스트림 레벨에서 직접 저장하거나, 또는ii) storing digital broadcast signals directly at the bitstream level, or

iii) 디지털 방송 신호를 트랜스코딩하여 재가공된 비트스트림을 저장함으로써 이루어진다.iii) by transcoding the digital broadcast signal and storing the reprocessed bitstream.

먼저, 첫 번째 방식, 즉 아날로그 방송 신호 또는 외부 아날로그 입력 신호를 인코딩하여 저장하는 방식에 따른 동영상 저장 과정을 살펴보면, 우선 안테나(도시되지 않음)로 수신한 방송 신호는 튜너(110)를 거쳐 NTSC/PAL 디코더(120)로 입력된다. NTSC/PAL 디코더(120)로 입력된 방송 신호는 디스플레이 장치에서 도시될 수 있도록 디코딩된 후, MPEG-2 인코더(150)로 입력되어, MPEG-2 포맷으로 인코딩된 후, 비트스트림 저장부(150)로 입력된다. 비트스트림의 일 예로는 하드디스크 드라이브(HDD) 등이 있다.First, referring to a video storing process according to the first method, that is, the method of encoding and storing an analog broadcast signal or an external analog input signal, first, a broadcast signal received by an antenna (not shown) is NTSC / It is input to the PAL decoder 120. The broadcast signal input to the NTSC / PAL decoder 120 is decoded so that it can be shown in a display device, and then is input to the MPEG-2 encoder 150, encoded in the MPEG-2 format, and then the bitstream storage unit 150. ) Is entered. An example of the bitstream is a hard disk drive (HDD).

한편, NTSC/PAL 디코더(120)로 입력된 외부 입력 신호도 또한 방송 신호와 마찬가지로 디스플레이 장치에서 디코딩될 수 있도록 디코딩된 후, MPEG-2 인코더(150)로 입력되어, MPEG-2 포맷으로 인코딩된 후, 비트스트림 저장부(150)로 입력된다.On the other hand, the external input signal input to the NTSC / PAL decoder 120 is also decoded to be decoded in the display device like the broadcast signal, and then input to the MPEG-2 encoder 150 is encoded in the MPEG-2 format After that, it is input to the bitstream storage unit 150.

두 번째 방식, 즉 디지털 방송 신호를 비트스트림 레벨에서 직접 저장하는 경우에는, 안테나(도시되지 않음)로 수신한 방송 신호는 튜너(110)를 거쳐 채널 디코더부(130) 및 DTV 디코더(140)에 입력되어 디스플레이 장치에서 재생될 수 있도록 디코딩된다. 이때, 채널 디코더부(130)에서 출력된 비디오 비트스트림은 DTV 디코더(140)로 입력됨과 동시에, 비트스트림 저장부(160)로 입력되어, 비트스트림 레벨에서 저장된다.In case of storing the digital broadcast signal directly at the bitstream level, the broadcast signal received by the antenna (not shown) is transmitted to the channel decoder 130 and the DTV decoder 140 via the tuner 110. The input is decoded so that it can be played back on the display device. In this case, the video bitstream output from the channel decoder 130 is input to the DTV decoder 140 and is also input to the bitstream storage 160 and stored at the bitstream level.

세 번째 방식, 즉 디지털 방송 신호를 트랜스코딩하여 재가공된 비트스트림을 저장하는 경우에는, 안테나(도시되지 않음)로 수신한 방송 신호는 튜너(110)를 거쳐 채널 디코더부(130) 및 DTV 디코더(140)에 입력되어 디스플레이 장치에서 재생될 수 있도록 디코딩된다. 이때, DTV 디코더(140)에서 출력된 방송 신호는 MPEG-2 인코더(150)로 입력되어, 트랜스코딩, 예를 들어 비트율 변환, 화변 크기 변환, 프레임율 변환 등이 수행된 후, 비트스트림 저장부(160)로 입력된다. In the third scheme, that is, when the digital broadcast signal is transcoded to store the reprocessed bitstream, the broadcast signal received by the antenna (not shown) is passed through the tuner 110 to the channel decoder 130 and the DTV decoder ( And decoded to be reproduced on the display device. In this case, the broadcast signal output from the DTV decoder 140 is input to the MPEG-2 encoder 150, and then the transcoding, for example, bit rate conversion, frame size conversion, frame rate conversion, etc., is performed. Inputted to 160.

도 2는 상기와 같은 방식으로 저장된 비트스트림을 재생하기 위한 재생 장치를 도시하는 도면이다. 즉, DTV 디코더(140)에 대응하는 DTV 디코더(240)로 하여금, 도 1의 비트스트림 저장부(160)에 대응하는 비트스트림 저장부(220)로부터 비디오 비트스트림을 입력 받아, 입력된 비디오 비트스트림을 재생한다.Fig. 2 is a diagram showing a reproduction apparatus for reproducing a bitstream stored in the above manner. That is, the DTV decoder 240 corresponding to the DTV decoder 140 receives the video bitstream from the bitstream storage unit 220 corresponding to the bitstream storage unit 160 of FIG. Play the stream.

이러한, 종래의 PVR 등과 같은 디지털미디어 저장/재생 장치 등에서는 전후방 배속 재생 등과 같은 기존의 VCR 및 DVD 플레이어에서 제공하는 일반적인 트릭 모드 재생 방법 만을 재공하고 있었다.Such a conventional digital media storage / playback device such as a PVR has provided only a general trick mode playback method provided by existing VCRs and DVD players such as forward and backward double speed playback.

본 발명이 이루고자하는 기술적 과제는 입력 비트스트림으로부터 장면이 전환되는 장면 경계를 검출하고, 이를 비디오 비트스트림의 재생시 활용함으로써, 보다 효율적으로 장면을 요약 재생하기 위한 비디오 비트스트림의 저장 및 재생 방법과 이를 수행하기 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체를 제공하는데 있다.SUMMARY OF THE INVENTION The present invention provides a method for storing and reproducing a video bitstream for more efficiently summarizing scenes by detecting a scene boundary to which a scene is switched from an input bitstream and using the same when playing the video bitstream. The present invention provides a computer-readable recording medium having recorded thereon a program for doing this.

상기의 과제를 이루기 위하여 본 발명에 따른 요약 재생을 위한 비디오 비트스트림의 저장 방법은 입력된 비디오 비트스트림으로부터 장면 경계를 검출하는 단계와; 상기 검출된 장면 경계의 위치를 나타내는 장면 경계 정보를 비트스트림에 삽입하는 단계와; 장면 경계 정보가 삽입된 비트스트림을 저장하는 단계를 포함한다.In order to achieve the above object, a method of storing a video bitstream for summary reproduction according to the present invention includes detecting a scene boundary from an input video bitstream; Inserting scene boundary information indicative of the position of the detected scene boundary into a bitstream; And storing the bitstream into which the scene boundary information is inserted.

또한, 상기 과제를 이루기 이한 본 발명에 따른 비디오 비트스트림의 요약 재생 방법은 입력된 비디오 비트스트림으로부터 장면이 전환됨을 나타내는 장면 경계 정보를 검출하는 단계와; 검출된 장면 경계 정보에 기초하여, 비디오 비트스트림 중 일부만을 재생하는 요약 재생을 수행하는 단계를 포함한다.In addition, a method of summarizing and reproducing a video bitstream in accordance with the present invention may include detecting scene boundary information indicating that a scene is switched from an input video bitstream; And based on the detected scene boundary information, performing summary playback of playing back only a portion of the video bitstream.

또한, 상기 과제는 요약 재생을 위한 입력된 비디오 비트스트림의 저장 방법은 입력된 비디오 비트스트림으로부터 장면 전환이 이루어지는 장면 경계를 검출하는 단계와; 검출된 장면 경계의 위치를 나타내는 장면 경계 정보를 비트스트림에 삽입하는 단계와; 장면 경계 정보가 삽입된 비트스트림을 저장하는 단계를 포함하는 요약 재생을 위한 비디오 비트스트림 저장 방법을 수행하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체에 의해서도 달성된다.In addition, the problem is a method of storing an input video bitstream for summary playback comprising the steps of: detecting a scene boundary from which the scene transition is made from the input video bitstream; Inserting scene boundary information indicative of the position of the detected scene boundary into the bitstream; A computer readable recording medium having recorded thereon a program for performing a video bitstream storage method for summary reproduction comprising the step of storing a bitstream into which scene boundary information is inserted is also achieved.

또한, 상기 과제는 입력된 비디오 비트스트림으로부터 장면이 전환됨을 나타내는 장면 경계 정보를 검출하는 단계와; 검출된 장면 경계 정보에 기초하여, 비디오 비트스트림 중 일부만을 재생하는 요약 재생을 수행하는 단계를 포함하는 비디오 비트 스트림의 요약 재생 방법을 수행하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체에 의해서도 달성된다.The task also includes detecting scene boundary information indicating that a scene is switched from an input video bitstream; Also achieved by a computer readable recording medium having recorded thereon a program for performing a method for summarizing a video bitstream, the method comprising performing a summary playback for playing back only a portion of the video bitstream based on the detected scene boundary information. do.

이하에서는, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명한다. Hereinafter, with reference to the accompanying drawings will be described in detail a preferred embodiment according to the present invention.

도 3은 본 발명에 따른 장면 요약 재생 방식을 지원하는 디지털미디어 저장/재생 장치를 도시하는 블록도이다. 도 3에 도시된 디지털미디어 저장/재생 장치는 튜너(310), NTSC/PAL 디코더(320), 채널 디코더(330), DTV 디코더(340), MPEG-2 인코더(350), 비트스트림 저장부(360), 및 장면 경계 검출부(370)를 포함한다. 본 실시예에서는 MPEG-2 규격에 따른 인코더를 사용하였지만, 선택적으로 비디오 시퀀스를 부호화 하기 위한 다른 인코더를 사용하는 것도 가능하다.3 is a block diagram illustrating a digital media storage / playback apparatus supporting a scene summary playback method according to the present invention. The digital media storage / playback apparatus shown in FIG. 3 includes a tuner 310, an NTSC / PAL decoder 320, a channel decoder 330, a DTV decoder 340, an MPEG-2 encoder 350, and a bitstream storage unit ( 360, and a scene boundary detector 370. Although the encoder according to the MPEG-2 standard is used in this embodiment, it is also possible to use another encoder for selectively encoding the video sequence.

본 발명에 따른 도 3에 도시된 디지털미디어 저장/재생 장치에서의 동영상의 저장은 Storage of the video in the digital media storage / playback device shown in Figure 3 according to the invention

i) 아날로그 방송 신호 또는 외부 아날로그 입력 신호를 인코딩하여 저장하거나,i) encode and store analog broadcast signals or external analog input signals, or

ii) 디지털 방송 신호를 비트스트림 레벨에서 직접 저장하거나, 또는ii) storing digital broadcast signals directly at the bitstream level, or

iii) 디지털 방송 신호를 트랜스코딩하여 재가공된 비트스트림을 저장함으로써 이루어진다.iii) by transcoding the digital broadcast signal and storing the reprocessed bitstream.

먼저, 첫 번째 방식, 즉 아날로그 방송 신호 또는 외부 아날로그 입력 신호를 인코딩하여 저장하는 방식에 따른 동영상 저장 과정을 살펴보면, 우선 안테나(도시되지 않음)로 수신한 방송 신호는 튜너(310)를 거쳐 NTSC/PAL 디코더(320)로 입력된다. NTSC/PAL 디코더(320)는 입력된 방송 신호는 디스플레이 장치에서 도시될 수 있는 비디오 시퀀스로 디코딩한 후, MPEG-2 인코더(350) 및 장면 경계 검출부(370)로 입력한다.First, referring to a video storing process according to the first method, that is, the method of encoding and storing an analog broadcast signal or an external analog input signal, first, a broadcast signal received through an antenna (not shown) is NTSC / It is input to the PAL decoder 320. The NTSC / PAL decoder 320 decodes the input broadcast signal into a video sequence that can be shown in the display device and then inputs it to the MPEG-2 encoder 350 and the scene boundary detector 370.

장면 경계 검출부(370)는 입력된 비디오 시퀀스의 장면 경계를 검출한 후, 새로운 장면이 시작되었다는 것을 나타내는 장면 경계 정보를 장면 경계 정보 삽입부(380)로 출력한다. 본 실시예에서는 멀티미디어 데이터의 효율적인 저장 및 검색을 위한 국제 표준인 MPEG 7에서 멀티미디어 데이터가 가지는 내용, 즉 색, 질감 모양, 물체의 움직임 등에서 특징을 추출하여 특징 벡터 형태로 표현한 MPEG 7에 따른 기술자(descriptor)를 사용하여 장면 경계를 검출한다. MPEG 7에서 사용되는 기술자에는 칼라 히스토그램(color histogram), 동일 질감(homogenous texture), 에지 히스토그램(edge histogram) 등이 있다. MPEG 7 표준은 오디오, 음성, 영상 비디오 등의 멀티미디어 데이터의 특징을 작은 데이터 양으로 효율적으로 표현하는 기술자와 이러한 기술자들의 조합으로 구성되는 기술자 구성안(descriptor scheme)으로 이루어진다.After detecting the scene boundary of the input video sequence, the scene boundary detecting unit 370 outputs scene boundary information indicating that a new scene has started to the scene boundary information inserting unit 380. In the present embodiment, the descriptor according to MPEG 7 which extracts a feature from the contents of the multimedia data, namely color, texture shape, object movement, etc., is expressed in the form of a feature vector in MPEG 7 which is an international standard for efficient storage and retrieval of multimedia data. Detect scene boundaries using descriptors). Descriptors used in MPEG 7 include color histograms, homogenous textures, edge histograms, and the like. The MPEG 7 standard consists of a descriptor that efficiently represents the characteristics of multimedia data such as audio, audio, video, etc. in a small amount of data, and a descriptor scheme composed of a combination of these descriptors.

본 실시예에서는 장면 경계 검출을 위해 입력된 비디오 시퀀스 중, 현재 프레임에 속하는 비디오 시퀀스로부터 MPEG 7 기술자를 추출하고, 이와 같은 방식으로 추출된 현재 프레임의 MPEG 7 기술자와 이전에 추출되어 저장되어 있던 이전 프레임의 MPEG 7 기술자 사이의 유사도를 측정하며, 측정된 유사도를 소정의 임계값과 비교함으로써 장면 경계 여부를 판정한다. 예를 들어, 측정된 유사도가 소정의 임계값보다 큰 경우에는 현재 프레임과 이전 프레임 사이가 장면 경계가 아닌 것으로 판정하고, 유사도가 소정의 임계값보다 작은 경우에는 현재 프레임과 이전 프레임 사이가 장면 경계인 것으로 판정한다.In the present embodiment, an MPEG 7 descriptor is extracted from a video sequence belonging to the current frame among video sequences input for scene boundary detection, and the MPEG 7 descriptor of the current frame extracted in this manner and the previously extracted and stored The similarity between the MPEG 7 descriptors of the frames is measured, and whether or not the scene boundary is determined by comparing the measured similarity with a predetermined threshold. For example, if the measured similarity is greater than the predetermined threshold, it is determined that the current frame and the previous frame are not the scene boundaries. If the similarity is less than the predetermined threshold, the scene boundary is the scene boundary. Determined to be.

한편, MPEG-2 인코더(350)는 입력된 비디오 시퀀스를 MPEG-2 포맷으로 인코딩한 후 제1 장면 경계 정보 삽입부(382)로 출력한다. Meanwhile, the MPEG-2 encoder 350 encodes the input video sequence into the MPEG-2 format and outputs the encoded video sequence to the first scene boundary information inserting unit 382.

제1 장면 경계 정보 삽입부(382)는 장면 경계 검출부(370)로부터 입력된 장면 경계 정보를 MPEG-2 인코더(350)로부터 출력된 MPEG-2 비트스트림에 삽입하고, 이를 비트스트림 저장부(360)으로 출력한다. The first scene boundary information inserting unit 382 inserts scene boundary information input from the scene boundary detecting unit 370 into an MPEG-2 bitstream output from the MPEG-2 encoder 350, and stores the bitstream storage unit 360. )

도 4는 본 발명의 일 실시예에 사용되는 MPEG-2 비디오 비트스트림의 계층 구조를 나타내는 도면이다. 본 실시예에서는 도 4에 도시된 바와 같이 MPEG-2 비트스트림의 신택스상에서 GOP 헤더 다음에 있는 사용자 데이터(user data) 영역에 장면 경계 정보를 삽입한다. 4 is a diagram illustrating a hierarchical structure of an MPEG-2 video bitstream used in an embodiment of the present invention. In this embodiment, as shown in Fig. 4, scene boundary information is inserted into a user data area after the GOP header on the syntax of the MPEG-2 bitstream.

도 5는 본 발명의 일 실시예에 따른 장면 경계 정보 삽입 방법을 나타내는 도면이다. 도 5에 도시된 바와 같이, 장면 경계가 검출된 GOP를 뒤따르는 GOP 헤더 다음의 사용자 영역의 8 비트를 사용하여, 장면 경계 정보로서 소정의 패턴을 갖는 데이터, 예를 들어 '11111111'를 삽입한다.5 is a diagram illustrating a method of inserting scene boundary information according to an embodiment of the present invention. As shown in Fig. 5, data having a predetermined pattern as scene boundary information, for example, '11111111' is inserted using 8 bits of the user area after the GOP header following the GOP in which the scene boundary is detected. .

비트스트림 저장부(360)는 장면 경계 정보가 삽입된 MPEG-2 비트스트림을 입력받아, 이를 저장한다.The bitstream storage unit 360 receives an MPEG-2 bitstream into which the scene boundary information is inserted and stores the received MPEG-2 bitstream.

두 번째 방식, 즉 디지털 방송 신호를 비트스트림 레벨에서 직접 저장하는 경우에는, 안테나(도시되지 않음)로 수신한 방송 신호는 튜너(310)를 거쳐 채널 디코더부(330) 및 DTV 디코더(340)에 입력되어 디스플레이 장치에서 재생될 수 있도록 디코딩된다. 채널 디코더(330)로부터 출력되는 MPEG-2 비디오 비트스트림은 제2 장면 경계 정보 삽입부(384)로 출력되고, DTV 디코더(340)로부터 출력되는 MPEG-2 비디오 시퀀스(sequence)는 장면 경계 검출부(370)로 출력된다.In the second method, that is, when the digital broadcast signal is directly stored at the bitstream level, the broadcast signal received by the antenna (not shown) is transmitted to the channel decoder 330 and the DTV decoder 340 via the tuner 310. The input is decoded so that it can be played back on the display device. The MPEG-2 video bitstream output from the channel decoder 330 is output to the second scene boundary information insertion unit 384, and the MPEG-2 video sequence output from the DTV decoder 340 is output to the scene boundary detection unit ( 370).

장면 경계 검출부(370)는 상기에서와 동일한 방식으로 장면 경계를 검출한 후, 새로운 장면이 시작되었다는 것을 나타내는 장면 경계 정보를 제2 장면경계 정보 삽입부(384)로 출력한다. After detecting the scene boundary in the same manner as above, the scene boundary detecting unit 370 outputs scene boundary information indicating that a new scene has started to the second scene boundary information inserting unit 384.

제2 장면경계정보 삽입부(382)는 장면 경계 검출부(370)로부터 입력된 장면 경계 정보를 채널 디코더(330)로부터 입력된 비트스트림에 삽입하고, 이를 비트스트림 저장부(360)로 출력한다. The second scene boundary information inserting unit 382 inserts scene boundary information input from the scene boundary detecting unit 370 into the bit stream input from the channel decoder 330 and outputs the scene boundary information to the bit stream storage unit 360.

비트스트림 저장부(360)는 장면 경계 정보가 삽입된 비트스트림을 입력받아, 이를 저장한다.The bitstream storage unit 360 receives the bitstream into which the scene boundary information is inserted and stores the bitstream.

세 번째 방식, 즉 디지털 방송 신호를 트랜스코딩하여 재가공된 비트스트림을 저장하는 경우에는, 안테나(도시되지 않음)로 수신한 방송 신호는 튜너(310)를 거쳐 채널 디코더부(330) 및 DTV 디코더(340)에 입력되어 디스플레이 장치에서 재생될 수 있도록 디코딩된다.  In the third method, that is, when the digital broadcast signal is transcoded to store the reprocessed bitstream, the broadcast signal received by the antenna (not shown) is passed through the channel decoder 330 and the DTV decoder (tuner 310). It is input to 340 and decoded so that it can be played on the display device.

DTV 디코더(340)로부터 출력된 MPEG-2 비디오 시퀀스는 장면 경계 검출부(370)로 출력된다. 장면 경계 검출부(370)는 상기에서와 동일한 방식으로 장면 경계를 검출한 후, 새로운 장면이 시작되었다는 것을 나타내는 장면 경계 정보를 제2 장면경계정보 삽입부(384)로 출력한다. The MPEG-2 video sequence output from the DTV decoder 340 is output to the scene boundary detector 370. After detecting the scene boundary in the same manner as described above, the scene boundary detecting unit 370 outputs scene boundary information indicating that a new scene has started to the second scene boundary information inserting unit 384.

이때, DTV 디코더(340)에서 출력된 비디오 시퀀스는 MPEG-2 인코더(350)로 입력되어, 트랜스코딩, 예를 들어 비트율 변환, 화변 크기 변환, 프레임율 변환 등이 수행된다.At this time, the video sequence output from the DTV decoder 340 is input to the MPEG-2 encoder 350, and transcoding, for example, bit rate conversion, frame size conversion, frame rate conversion, and the like is performed.

제1 장면경계정보 삽입부(382)는 장면 경계 검출부(370)로부터 입력된 장면 경계 정보를 MPEG 인코더(330)로부터 입력된 비트스트림에 삽입하고, 이를 비트스트림 저장부(360)으로 출력한다. The first scene boundary information inserter 382 inserts scene boundary information input from the scene boundary detector 370 into a bitstream input from the MPEG encoder 330 and outputs the scene boundary information to the bitstream storage 360.

비트스트림 저장부(360)는 장면 경계 정보가 삽입된 비트스트림을 입력받아, 이를 저장한다.The bitstream storage unit 360 receives the bitstream into which the scene boundary information is inserted and stores the bitstream.

또한, 선택적으로 상기 각 저장 방식에 있어서, 장면 경계 검출부는 DTV 디코더(340)에서 얻어진 부가 정보 및 MPEG-2 인코더(350)에서 얻어진 부가 정보를 이용하여 장면 경계를 검출한다. Also, optionally, in each of the above storage methods, the scene boundary detector detects the scene boundary using the additional information obtained by the DTV decoder 340 and the additional information obtained by the MPEG-2 encoder 350.

도 6은 본 발명에 따른 비트 스트림 재생 장치를 도시하는 블록도이다. 6 is a block diagram showing a bit stream reproduction apparatus according to the present invention.

도 6을 참조하면, 비트스트림 재생 장치는 비트스트림 저장부(620), 재생 모드 선택부(640), 비트스트림 요약(bitstream summary)부(660), 및 DTV 디코더(680)를 포함한다. 여기에서, 비트스트림 저장부(620) 및 DTV 디코더(680)는 도 3의 비트스트림 저장부(360) 및 DTV 디코더(340)에 각각 대응한다.Referring to FIG. 6, the bitstream reproduction apparatus includes a bitstream storage unit 620, a reproduction mode selection unit 640, a bitstream summary unit 660, and a DTV decoder 680. Here, the bitstream storage 620 and the DTV decoder 680 correspond to the bitstream storage 360 and the DTV decoder 340 of FIG. 3, respectively.

비트스트림 재생시, 재생 모드 선택부(640)는 입력된 사용자의 선택 모드에 따라 비트스트림 저장부(620)로부터 입력된 비디오 비트스트림을 DTV 디코더(680) 또는 비트스트림 요약부(660)로 출력한다.During bitstream playback, the playback mode selection unit 640 outputs the video bitstream input from the bitstream storage unit 620 to the DTV decoder 680 or the bitstream summary unit 660 according to the input mode of the user. do.

입력된 사용자의 선택 모드가 일반 재생 모드인 경우, 재생 모드 선택부(640)는 비디오 비트스트림을 DTV 디코더(680)로 출력하고, DTV 디코더(680)는 입력된 비디오 비트스트림을 재생한다.When the input user's selection mode is the normal reproduction mode, the reproduction mode selection unit 640 outputs the video bitstream to the DTV decoder 680, and the DTV decoder 680 reproduces the input video bitstream.

한편, 입력된 사용자의 선택 모드가 요약 재생 모드인 경우에는, 재생 모드 선택부(640)는 비디오 비트스트림을 비트스트림 요약부(660)로 출력한다.On the other hand, when the input selection mode of the user is the summary playback mode, the playback mode selection unit 640 outputs the video bitstream to the bitstream summary unit 660.

비트스트림 요약부(660)는 입력된 비트스트림에 삽입된 장면 경계 정보를 참조하여, 요약 재생을 위한 비트스트림을 생성하여, DTV 디코더(680)로 출력하고, DTV 디코더(680)는 입력된 요약 재생을 위한 비디오 비트스트림을 재생한다.The bitstream summary unit 660 generates a bitstream for reproducing the summary by referring to the scene boundary information inserted in the input bitstream, outputs the bitstream to the DTV decoder 680, and the DTV decoder 680 outputs the input summary. Play the video bitstream for playback.

이하에서는, 도 7을 참조하여, 비트스트림 요약부(660)의 동작을 상세히 설명한다. 본 실시예에서는 비트스트림 요약부(660)는 입력된 비트스트림의 GOP 다음의 8비트의 사용자 데이터를 검색하여, 새로운 장면이 시작된다는 장면 경계정보가 담겨진 경우, 예를 들어 검색된 데이터가 '11111111'인 경우에만 해당 GOP로부터 시작하여 도 7(a)(b)(c)에 도시된 각각의 요약 재생 모드에 따라 선택된 비트스트림만을 요약 재생을 위해 DTV 디코더(680)로 출력한다. 본 실시예에서는, 요약 재생 모드는 각각의 사용자에 의해 입력된 요약 재생 모드 정보에 의해 결정된다.Hereinafter, the operation of the bitstream summary unit 660 will be described in detail with reference to FIG. 7. In the present embodiment, the bitstream summary unit 660 searches for 8-bit user data following the GOP of the input bitstream and contains scene boundary information indicating that a new scene is started. For example, the retrieved data is '11111111'. Only, the selected bitstream is output to the DTV decoder 680 for summary playback starting from the corresponding GOP according to each summary playback mode shown in FIGS. 7A, 7B, and 7C. In this embodiment, the summary playback mode is determined by the summary playback mode information input by each user.

요약 재생 모드가 T 모드인 경우에는, 비트스트림 요약부(660)는 새로운 장면이 시작된 GOP로부터 소정의 시간 T 만큼의 픽쳐들만 DTV 디코더(680)로 출력한다. 한편, 비트스트림 요약부(660)는 요약 재생 모드가 PN 모드인 경우에는, 새로운 장면이 시작된 GOP로부터 소정의 개수의 픽쳐들만 DTV 디코더(680)로 출력한다. 한편, 비트스트림 요약부(660)는 요약 재생 모드가 GN 모드인 경우에는, 새로운 장면이 시작된 GOP로부터 소정의 GOP만 DTV 디코더(680)로 출력한다. When the summary reproduction mode is the T mode, the bitstream summary unit 660 outputs only the pictures for a predetermined time T to the DTV decoder 680 from the GOP in which the new scene starts. Meanwhile, when the summary reproduction mode is the PN mode, the bitstream summary unit 660 outputs only a predetermined number of pictures to the DTV decoder 680 from the GOP in which the new scene is started. On the other hand, when the summary playback mode is the GN mode, the bitstream summary unit 660 outputs only the predetermined GOP to the DTV decoder 680 from the GOP in which the new scene has started.

또한, 선택적으로, 각각의 요약 재생 모드시 고속 요약 재생을 위해 인트라(intra) 픽쳐만을 재생하는 것도 가능하다.It is also possible, optionally, to play back only intra pictures for fast summary playback in each summary playback mode.

이와 같이, 본 발명에 따른 요약 재생 방법을 사용함으로써, 영화와 같은 비디오 컨텐츠, 즉 여러 장면이 연속되는 구조로 된 경우, 각 장면은 비교적 오랜 시간 지속되는 특성이 있기 때문에, 이러한 영화의 특성상 장면 단위로 단 시간씩을 재생함으로써, 고배속 재생에 비해 전체적인 줄거리 파악을 빠른 시간내에 효과적으로 할 수 있으며, 연속된 많은 장면 중에 원하는 장면을 검색, 선택하여 시청하는 것도 보다 편리하게 된다는 효과가 있다.As described above, when using the summary playback method according to the present invention, when a video content such as a movie, that is, a structure having a plurality of scenes in a continuous structure, each scene has a characteristic of lasting for a relatively long time, and therefore, a unit of scene due to the characteristics of such a movie By reproducing a short time by a short time, it is possible to effectively grasp the overall plot in a short time compared to high-speed playback, and it is also more convenient to search for, select and watch a desired scene among a plurality of consecutive scenes.

본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.The invention can also be embodied as computer readable code on a computer readable recording medium. The computer-readable recording medium includes all kinds of recording devices in which data that can be read by a computer system is stored. Examples of computer-readable recording media include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage, and the like, and may also be implemented in the form of a carrier wave (for example, transmission over the Internet). Include. The computer readable recording medium can also be distributed over network coupled computer systems so that the computer readable code is stored and executed in a distributed fashion.

이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.So far I looked at the center of the preferred embodiment for the present invention. Those skilled in the art will appreciate that the present invention can be implemented in a modified form without departing from the essential features of the present invention. Therefore, the disclosed embodiments should be considered in descriptive sense only and not for purposes of limitation. The scope of the present invention is shown in the claims rather than the foregoing description, and all differences within the scope will be construed as being included in the present invention.

상술한 바와 같이 본 발명에 따른 요약 재생을 위한 비디오 비트스트림의 저장 및 재생 방법에 따르면, 입력 비트스트림으로부터 장면이 전환되는 장면 경계를 검출하고, 이를 비디오 비트스트림의 재생시 활용함으로써, 보다 효율적으로 장면을 요약 재생하는 것이 가능하다는 효과가 있다.As described above, according to the method of storing and reproducing a video bitstream for summary reproduction according to the present invention, by detecting a scene boundary to which a scene is switched from an input bitstream, and using the same when reproducing the video bitstream, The effect is that it is possible to summarize the scene.

도 1은 종래의 디지털 미디어 저장 방식을 설명하기 위한 블록도이다.1 is a block diagram illustrating a conventional digital media storage method.

도 2는 종래의 디지털 미디어 재생 방식을 설명하기 위한 블록도이다.2 is a block diagram illustrating a conventional digital media playback method.

도 3은 본 발명에 따른 요약 재생 방식을 지원하는 디지털미디어 저장 방식을 설명하기 위한 블록도이다.3 is a block diagram illustrating a digital media storage method supporting the summary playback method according to the present invention.

도 4는 본 발명이 적용되는 MPEG-2 비디오 비트스트림의 계층 구조를 도시하는 도면이다.4 is a diagram illustrating a hierarchical structure of an MPEG-2 video bitstream to which the present invention is applied.

도 5는 본 발명에 따른 장면 경계 정보 삽입 방식을 설명하기 위한 도면이다.5 is a view for explaining a scene boundary information insertion method according to the present invention.

도 6은 본 발명에 따른 요약 재생 방식을 지원하는 디지털미디어 재생 방식을 설명하기 위한 블록도이다.6 is a block diagram illustrating a digital media playback method supporting the summary playback method according to the present invention.

도 7(a)(b)(c)는 본 발명에 따른 장면 요약 재생 모드를 설명하기 위한 도면이다.7A, 7B, and 7C are diagrams for describing a scene summary playback mode according to the present invention.

Claims (11)

입력된 비디오 비트스트림의 저장 방법에 있어서,In the method for storing the input video bitstream, 상기 입력된 비디오 비트스트림으로부터 장면 전환이 이루어지는 장면 경계를 검출하는 단계와;Detecting a scene boundary at which a scene change is made from the input video bitstream; 상기 검출된 장면 경계의 위치를 나타내는 장면 경계 정보를 비트스트림에 삽입하는 단계와;Inserting scene boundary information indicative of the position of the detected scene boundary into a bitstream; 상기 장면 경계 정보가 삽입된 비트스트림을 저장하는 단계를 포함하는 것을 특징으로 하는 방법.And storing the bitstream into which the scene boundary information is inserted. 제1항에 있어서,The method of claim 1, 상기 장면 경계 검출은 MPEG-7 표준에 따른 기술자(descriptor)를 사용하여 이루어지는 것을 특징으로 하는 방법.The scene boundary detection is performed using a descriptor according to the MPEG-7 standard. 제1항에 있어서,The method of claim 1, 상기 비디오 비트스트림은 MPEG-2 규격에 따른 비디오 비트스트림이며, 상기 장면 경계 정보는 장면 경계 정보가 검출된 GOP를 뒤따르는 GOP의 GOP 헤더에 뒤따르는 사용자 데이터 필드에 삽입된 소정 패턴의 비트인 것을 특징으로 하는 방법.The video bitstream is a video bitstream according to the MPEG-2 standard, and the scene boundary information is a bit of a predetermined pattern inserted in a user data field following a GOP header of a GOP following a detected GOP. How to feature. 비디오 비트스트림의 요약 재생 방법에 있어서,In the summary playback method of a video bitstream, 입력된 비디오 비트스트림으로부터 장면이 전환됨을 나타내는 장면 경계 정보를 검출하는 단계와;Detecting scene boundary information indicating that a scene is switched from an input video bitstream; 상기 검출된 장면 경계 정보에 기초하여, 상기 비디오 비트스트림 중 일부만을 재생하는 요약 재생을 수행하는 단계를 포함하는 것을 특징으로 하는 방법.And based on the detected scene boundary information, performing summary playback of playing back only a portion of the video bitstream. 제4항에 있어서, The method of claim 4, wherein 상기 비디오 비트스트림은 MPEG-2 규격에 따른 비디오 비트스트림이며, 상기 장면 경계 정보는 GOP 헤더에 뒤따르는 사용자 데이터 필드에 삽입된 소정 패턴의 비트인 것을 특징으로 하는 방법.The video bitstream is a video bitstream according to the MPEG-2 standard, and wherein the scene boundary information is a bit of a predetermined pattern inserted into a user data field following a GOP header. 제5항에 있어서, The method of claim 5, 상기 검출된 장면 경계 정보에 기초하여, 상기 장면 경계 정보가 검출된 GOP로부터 소정의 시간 구간 내에 속하는 픽쳐들만을 재생하는 것을 특징으로 하는 방법.And based on the detected scene boundary information, play back only pictures belonging to a predetermined time interval from the detected GOP. 제5항에 있어서, The method of claim 5, 상기 검출된 장면 경계 정보에 기초하여, 상기 장면 경계 정보가 검출된 GOP로부터 소정의 수의 픽쳐들만을 재생하는 것을 특징으로 하는 방법.Based on the detected scene boundary information, reproducing only a predetermined number of pictures from the GOP from which the scene boundary information is detected. 제5항에 있어서, The method of claim 5, 상기 검출된 장면 경계 정보에 기초하여, 상기 장면 경계 정보가 검출된 GOP로부터 소정의 수의 GOP에 속하는 픽쳐들만을 재생하는 것을 특징으로 하는 방법.And based on the detected scene boundary information, only pictures belonging to a predetermined number of GOPs are reproduced from the detected GOP. 제6항 내지 제8항 중 어느 한 항에 있어서, 상기 픽쳐들 중 인트라 픽쳐만을 재생하는 것을 특징으로 하는 방법.The method of any one of claims 6 to 8, wherein only intra pictures of the pictures are reproduced. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 요약 재생을 위한 비디오 비트스트림 저장 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체.A computer-readable recording medium according to any one of claims 1 to 3, wherein a program is recorded for implementing a video bitstream storage method for the summary reproduction. 제4항 내지 제8항 중 어느 한 항에 있어서, 상기 요약 재생 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체.The computer-readable recording medium according to any one of claims 4 to 8, wherein a program for implementing the summary reproducing method is recorded.
KR1020030100404A 2003-12-30 2003-12-30 Method for recording video bitstream for a summary playback and recording medium storing a program to execute thereof KR20050068688A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020030100404A KR20050068688A (en) 2003-12-30 2003-12-30 Method for recording video bitstream for a summary playback and recording medium storing a program to execute thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020030100404A KR20050068688A (en) 2003-12-30 2003-12-30 Method for recording video bitstream for a summary playback and recording medium storing a program to execute thereof

Publications (1)

Publication Number Publication Date
KR20050068688A true KR20050068688A (en) 2005-07-05

Family

ID=37259225

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030100404A KR20050068688A (en) 2003-12-30 2003-12-30 Method for recording video bitstream for a summary playback and recording medium storing a program to execute thereof

Country Status (1)

Country Link
KR (1) KR20050068688A (en)

Similar Documents

Publication Publication Date Title
US7272183B2 (en) Image processing device, method and storage medium thereof
US8942539B2 (en) Method of setting a system time clock at the start of an MPEG sequence
CN100556110C (en) Use the fast forward trick mode and the reverse trick modes of message file
US8224150B2 (en) Method and apparatus for recording/reproduction
US8045843B2 (en) Method for recording a digital broadcast program and time-based playback of a recorded broadcast program and apparatus therefor
US20070154176A1 (en) Navigating recorded video using captioning, dialogue and sound effects
KR20010089770A (en) Significant scene detection and frame filtering for a visual indexing system using dynamic threshold
KR100846770B1 (en) Method for encoding a moving picture and apparatus therefor
JPH0923403A (en) Information recording device and information reproducing device
US6801294B2 (en) Recording and/or reproducing apparatus and method using key frame
US7801420B2 (en) Video image recording and reproducing apparatus and video image recording and reproducing method
US7305171B2 (en) Apparatus for recording and/or reproducing digital data, such as audio/video (A/V) data, and control method thereof
KR100939718B1 (en) PVR system and method for editing record program
JP4932493B2 (en) Data processing device
US6373905B1 (en) Decoding apparatus and decoding method
JP3253530B2 (en) Video recording device
JP4468497B2 (en) Method and apparatus for reproducing original data of digitally encoded video film
JP2002010254A (en) Feature point detection method and record reproduction device
JPH08223530A (en) Video recording/reproducing method and device therefor
JP4145103B2 (en) Movie data playback method and playback apparatus
KR100920697B1 (en) Apparatus and method for transition point detection, recording apparatus and record playback apparatus
KR101493091B1 (en) Method of playing video contents by using skip function and method of generating thumbnail image by using skip function
KR20050068688A (en) Method for recording video bitstream for a summary playback and recording medium storing a program to execute thereof
US20040151473A1 (en) Audio/video data recording/reproduction apparatus, system, and method, recording medium recorded by them, audio/video data reproduction apparatus, and data structure
KR20040102962A (en) Apparatus for generating highlight stream in PVR and method for the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application