KR100487330B1 - Apparatus for generating thumbnail image of digital video - Google Patents

Apparatus for generating thumbnail image of digital video Download PDF

Info

Publication number
KR100487330B1
KR100487330B1 KR10-2002-0063868A KR20020063868A KR100487330B1 KR 100487330 B1 KR100487330 B1 KR 100487330B1 KR 20020063868 A KR20020063868 A KR 20020063868A KR 100487330 B1 KR100487330 B1 KR 100487330B1
Authority
KR
South Korea
Prior art keywords
image
thumbnail
blank
value
pixel
Prior art date
Application number
KR10-2002-0063868A
Other languages
Korean (ko)
Other versions
KR20040035128A (en
Inventor
서종열
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR10-2002-0063868A priority Critical patent/KR100487330B1/en
Publication of KR20040035128A publication Critical patent/KR20040035128A/en
Application granted granted Critical
Publication of KR100487330B1 publication Critical patent/KR100487330B1/en

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/4147PVR [Personal Video Recorder]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 디지털 TV에 장착된 개인용 비디오 녹화기 또는 비디오 브라우저 등의 기능을 제공하는 기타 시스템 등에서 제공하는 부가 기능 중 썸네일(Thumbnail) 영상 생성 장치에 관한 것으로서, 특히 입력되는 일련의 MPEG 비디오 스트림의 I 픽처의 DC 값을 이용하여 썸네일 영상을 생성하며 이 과정에서 영상의 기울기 값을 이용한 방법으로 썸네일 영상의 복잡도를 분석하여 영상의 블랭크 여부를 판단한다. 이때 입력 영상이 블랭크로 결정될 경우 결정된 영상으로부터 썸네일 영상을 생성하지 않거나, 해당 썸네일 영상을 사용하지 않도록 제어함으로써, 사용자에게 블랭크가 아닌 내용적으로 의미 있는 썸네일 영상만을 제공할 수 있다.BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to a thumbnail image generating device among additional functions provided by a personal video recorder or a video browser installed in a digital TV, and more particularly, to an I picture of a series of input MPEG video streams. A thumbnail image is generated by using a DC value of. In this process, the complexity of the thumbnail image is analyzed by using a tilt value of the image to determine whether the image is blank. In this case, when the input image is determined to be blank, a thumbnail image is not generated from the determined image or the corresponding thumbnail image is controlled so that only a meaningfully meaningful image is provided to the user, not a blank.

Description

디지털 비디오의 썸네일 영상 생성 장치{Apparatus for generating thumbnail image of digital video}Apparatus for generating thumbnail image of digital video}

본 발명은 디지털 TV에 장착된 개인용 비디오 녹화기(Personal Video Recorder ; PVR), 또는 비디오 브라우저 등의 기능을 제공하는 기타 시스템 등에서 제공하는 부가 기능 중 썸네일(Thumbnail) 영상 생성 장치 및 방법에 관한 것으로서, 특히 썸네일 영상의 생성 과정에서 현재 입력되는 영상의 복잡도를 계산하여 사용자에게 내용적으로 의미가 있는 영상에 대해서만 자동적으로 썸네일 영상을 생성하는 장치에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a thumbnail image generating apparatus and method among additional functions provided by a personal video recorder (PVR) mounted on a digital TV, or other system that provides a function such as a video browser. The present invention relates to an apparatus for automatically generating a thumbnail image only for an image that is meaningful to a user by calculating a complexity of a currently input image in a process of generating a thumbnail image.

다양하고 방대한 디지털 멀티미디어 콘텐트를 접근할 수 있는 환경에서 사용자로 하여금 보다 빠르고 손쉽게 콘텐트에 접근할 수 있는 많은 방법이 연구되고 있다. 특히 비디오는 분량이 방대하기 때문에 수많은 비디오 데이터가 저장되어 있는 시스템의 경우 사용자가 원하는 데이터에 접근하기 위해서는 많은 시간을 할애해야 한다. 이 때문에 원하는 내용을 한정된 시간 내에 쉽고 빠르게 접근하거나 검색할 수 있는 환경을 제공하기 위한 연구가 활발히 진행되고 있다. In the environment where various and diverse digital multimedia contents can be accessed, many methods for allowing users to access contents more quickly and easily have been studied. In particular, since video is huge, a system with a lot of video data needs to spend a lot of time in order to access data desired by a user. For this reason, studies are being actively conducted to provide an environment in which desired contents can be easily and quickly accessed or searched within a limited time.

이에 대한 해결 방법으로서 비디오 데이터를 함축적으로 요약하는 수많은 방법이 연구되고 있다. 이 중 썸네일 영상은 비디오의 특정 프레임을 원래의 크기 보다 작게 표시한 것으로 동영상의 형태가 아닌 정지 영상의 형태를 가지며 한 장 또는 여러 장의 썸네일 영상을 이용하여 비디오에 대한 함축적인 정보를 사용자에게 제공할 수 있다. As a solution to this problem, numerous methods for implicitly summarizing video data have been studied. Among them, the thumbnail image displays a specific frame of the video smaller than the original size. The thumbnail image has a form of a still image, not a movie type, and provides one or more thumbnail images to the user. Can be.

이러한 썸네일 영상은 개인용 비디오 녹화기(personal video recorder : 이하 PVR이라 함)에서 녹화된 비디오의 내용을 몇 개의 작은 그림들로 요약하거나 비디오 인덱싱을 위한 키 프레임(key frame) 생성 또는 프로그램 가이드 등에서 프로그램에 대한 프리뷰(preview) 또는 내용 요약(content summary) 등을 목적으로 한 대표 영상의 생성 등 그 활용 분야가 다양하다. These thumbnail images summarize the contents of the recorded video in a personal video recorder (PVR) into several thumbnails, or create a key frame for video indexing or program guides. There are various fields of application such as generation of a representative image for the purpose of preview or content summary.

상기 썸네일 영상을 생성하는 종래의 방법은 MPEG으로 부호화된 비디오의 프레임을 복호화 한 다음 복원된 프레임을 직접 축소하는 방법과 I 픽처(picture)의 DC 값을 이용하는 방법으로 구분할 수 있다. 이때, 비디오의 프레임을 직접 축소하는 전자의 방법은 해당 프레임의 전체 화소를 복호화 해야 하는데, 이는 가변 복호화기(variable length decoder)를 필요로 하므로 하드웨어적인 부담이 있다. 아울러 I 픽처가 아닌 B 또는 P 픽처의 경우에는 이를 복호화 한 다음 다시 JPEG 등의 압축 방식을 사용하여 인트라-코드(intra-coded)된 정지 영상의 형태로 변환해야 한다. 한편, 비디오의 I 픽처의 DC를 이용하여 썸네일 영상을 만드는 후자의 방법은 이러한 가변 복호화기를 필요로 하지 않으므로 하드웨어적으로도 부담이 적으며 DC 값이 직접적으로 썸네일 영상의 화소값으로 사용된다. 따라서 이 방법은 복잡한 복호화 및 재 부호화 과정을 거치지 않고 간단한 방법으로 원 영상의 1/64 크기의 썸네일 영상을 생성하므로 구현의 용이성 및 효율성이라는 장점이 있다. The conventional method of generating the thumbnail image may be classified into a method of decoding a frame of video encoded by MPEG and then directly reducing a reconstructed frame and a method using a DC value of an I picture. In this case, the former method of directly reducing a frame of a video needs to decode all pixels of the frame, which requires a variable length decoder, which is a hardware burden. In addition, in the case of a B or P picture that is not an I picture, the B or P picture needs to be decoded and then converted into an intra-coded still picture using a compression method such as JPEG. On the other hand, the latter method of creating a thumbnail image using the DC of the I picture of the video does not require such a variable decoder, so it is less burdensome in hardware and the DC value is directly used as the pixel value of the thumbnail image. Therefore, this method generates the 1/64 size thumbnail image of the original image by a simple method without complicated decoding and re-encoding process, which has the advantage of ease of implementation and efficiency.

상기된 방법들을 통해 생성된 썸네일 영상은 사용자에게 원래 영상보다 작은 크기, 다시 말해 낮은 해상도의 대표 영상으로 비디오의 전체 내용을 함축적으로 표현하는 방법을 제공하므로 이 썸네일 영상의 근원이 되는 비디오 프레임은 잡음, 블랭크, 장면 전환에 의한 오버랩 등이 존재하지 않은 동시에, 사용자에게 해당 비디오 전체에 대한 정보 전달이 명확해야한다. 따라서, 썸네일 영상에 대해서는 급격한 줌과 같은 카메라 움직임 및 피사체의 움직임에 의한 번짐(blur) 등에 의해 발생한 불분명한 영상을 피해야 한다.The thumbnail image generated by the above methods provides the user with a method of implicitly representing the entire contents of the video as a representative image of a smaller size, that is, a lower resolution than the original image, so that the video frame that is the source of the thumbnail image is noisy. There should be no blanks, overlaps due to scene transitions, etc., and at the same time, the delivery of information about the entire video to the user should be clear. Therefore, for the thumbnail image, an unclear image generated by camera movement such as a sudden zoom and blur due to the movement of the subject should be avoided.

그런데, 종래의 썸네일 영상 생성 장치에서는 썸네일 영상으로 사용하기 부적합한 영상을 검출한 후 이를 필터링(filtering)하는 효과적인 방법을 제공하지 못했다. 즉, 종래의 썸네일 영상 생성 장치에서는 영상의 내용에 대한 분석없이 임의의 I 픽처에 대하여 썸네일을 생성하였다. 이 경우 하드웨어에 의하여 미리 설정된 또는 사용자가 입력하는 표본율에 의해 일정한 간격마다 발생하는 I 픽처에 대하여 썸네일 영상을 생성하는 방법을 사용한다. 그러나 실제 수신되는 디지털 비디오에서는 원 영상에 잡음이 발생하거나 장면 전환 또는 기타 특수 효과에 의하여 영상이 매우 어둡거나 실제 내용이 없는 단일 컬러로 이루어진 영상, 또는 과도한 줌 및 클로즈업(close-up) 등에 의하여 원 영상 자체가 의미가 없거나 영상이 담고 있는 정보량이 미약한 경우가 발생한다. 이러한 영상으로부터 생성된 썸네일 영상은 사용자가 그 내용을 식별하기가 매우 어려우며 결과적으로 비디오 전체에 대한 함축적인 정보를 제공하는데 문제가 발생한다. However, the conventional thumbnail image generating apparatus does not provide an effective method of detecting and filtering an image that is not suitable for use as a thumbnail image. That is, in the conventional thumbnail image generating apparatus, a thumbnail is generated for an arbitrary I picture without analyzing the content of the image. In this case, a method of generating a thumbnail image for an I picture generated at a predetermined interval by a hardware preset or user input sample rate is used. However, in the digital video that is actually received, the original image may be noisy, scenes or other special effects may cause the image to be very dark or have a single color without the actual content, or may be caused by excessive zooming or close-up. Sometimes the image itself is meaningless or the amount of information contained in the image is weak. Thumbnail images generated from such images are very difficult for a user to identify the contents, and as a result, a problem arises in providing implicit information about the entire video.

즉, 종래의 썸네일 영상 생성 방법에서는 자동적으로 썸네일 영상을 분석하여 썸네일의 유효성 여부를 판단하는 방법이 없으므로 무의미한 영상에 대하여 효과적으로 대처하지 못하며 이는 효과적으로 대표 영상을 추출하는데 많은 문제점을 갖는다.That is, in the conventional thumbnail image generation method, there is no method for automatically determining the validity of the thumbnail by analyzing the thumbnail image, so that it does not effectively cope with the meaningless image, which has many problems in effectively extracting the representative image.

본 발명은 상기와 같은 문제점을 해결하기 위한 것으로서, 본 발명의 목적은 썸네일 영상의 생성을 위해 입력되는 영상의 복잡도를 계산하여 복잡도가 낮은 영상에 대해서는 썸네일 영상으로 생성하지 않도록 함으로써, 사용자가 보다 의미있고 명확한 썸네일 영상만을 볼 수 있게 하는 디지털 비디오의 썸네일 영상 생성 장치를 제공함에 있다.The present invention is to solve the above problems, an object of the present invention is to calculate the complexity of the input image to generate a thumbnail image by not generating a thumbnail image for a low complexity image, the user means more An object of the present invention is to provide a thumbnail image generating device for digital video that allows only a clear thumbnail image to be viewed.

상기와 같은 목적을 달성하기 위한 본 발명에 따른 디지털 비디오의 썸네일 영상 생성 장치는, MPEG으로 부호화 된 비디오 스트림의 I 픽처에서 썸네일 영상을 생성하되 그 과정에서 복잡도가 낮거나, 텍스쳐(texture)가 거의 없는 배경으로만 이루어진 영상 또는 잘못된 조명 조건에 의하여 발생하는 단일 색상이 지배하는 영상 및 저 휘도 영상, 그리고 과도한 줌 또는 클로즈업으로 인하여 발생하는 무의미한 영상을 검출한 후 이러한 영상으로 생성된 썸네일 영상의 디스플레이 과정을 차단함으로써, 사용자에게 보다 의미 있고 명확한 썸네일 영상을 제공하는데 그 특징이 있다.An apparatus for generating a thumbnail image of a digital video according to the present invention for generating the above object generates a thumbnail image from an I picture of an MPEG encoded video stream, but has a low complexity or almost no texture in the process. Display process of thumbnail images generated by these images after detecting images with no background only or images with low luminance and single luminance dominated by poor lighting conditions, and meaningless images caused by excessive zoom or close-up By blocking the feature, it provides a more meaningful and clear thumbnail image to the user.

본 발명에서는 지나치게 어둡거나 단순한 컬러로 이루어진 영상 또는 블러(blur) 및 줌 등의 원인에 의해 복잡도가 낮아 사용자에게 전달할 수 있는 내용 또는 정보량이 매우 적어서 썸네일 영상을 생성하기에 적합하지 않은 영상을 블랭크(blank) 영상이라고 정의한다.In the present invention, an image that is too dark or simple colors, or because of the complexity and blur due to the cause of blur and zoom, the content or information that can be delivered to the user is very small, the image that is not suitable for generating a thumbnail image blank ( blank) Defined as an image.

상기 특징을 구체화한 본 발명에 따른 본 발명에 의한 썸네일 영상 생성 장치는 입력되는 비디오 스트림으로부터 I 픽처의 DC값만을 파싱한 후 상기 DC 값으로부터 생성된 썸네일 영상을 저장하는 메모리와, 상기 파싱된 DC 값에 의해 생성되는 DC 영상의 DC 값이 입력될 때마다 각 DC 화소에 대한 가로 및 세로 성분의 기울기를 구하고 두 기울기 값을 더하여 해당 DC 화소에 대한 기울기를 계산한 후 이전 DC 화소의 기울기에 누산하는 과정을 반복하여 현재 DC 영상의 전체 기울기 값을 구한 후 미리 설정한 임계값과 비교하여 상기 I 픽처가 블랭크 영상인지 여부를 판별하는 블랭크 영상 판단부와, 상기 블랭크 영상 판단부의 판단 결과에 따라 상기 메모리에 저장된 해당 썸네일 영상의 사용 여부를 제어하는 제어부를 포함하여 구성되는 것을 특징으로 한다.In accordance with an embodiment of the present invention, a thumbnail image generating apparatus according to the present invention may include a memory for parsing only a DC value of an I picture from an input video stream and storing a thumbnail image generated from the DC value, and the parsed DC. Whenever the DC value of the DC image generated by the value is input, the slope of the horizontal and vertical components for each DC pixel is obtained, the two slope values are added, the slope for the corresponding DC pixel is calculated, and the slope of the previous DC pixel is accumulated. A blank image determination unit for determining whether the I picture is a blank image by comparing a predetermined gradient value after obtaining a total gradient value of the current DC image by repeating the process, and according to a determination result of the blank image determination unit And a controller for controlling whether to use the corresponding thumbnail image stored in the memory.

상기 DC 영상의 전체 기울기는 해당 DC 영상의 각 DC 화소의 기울기의 전체 합을 상기 DC 영상의 크기로 나눈 평균값인 것을 특징으로 한다.The total slope of the DC image is an average value obtained by dividing the total sum of the slopes of each DC pixel of the DC image by the size of the DC image.

상기 블랭크 영상 판단부는 상기 DC 영상의 전체 기울기 값이 기 설정한 임계값보다 작으면 해당 I 픽처를 블랭크 영상으로 판별하는 것을 특징으로 한다.The blank image determining unit may determine the corresponding I picture as a blank image when the total tilt value of the DC image is smaller than a preset threshold.

상기 블랭크 영상 판단부에서 각 DC 화소에 대한 가로 및 세로 성분의 기울기는 가로 및 세로 방향으로 인접한 두 DC 화소의 각각의 변화량인 것을 특징으로 한다.The inclination of the horizontal and vertical components with respect to each DC pixel in the blank image determiner is a change amount of each of two adjacent DC pixels in the horizontal and vertical directions.

상기 블랭크 영상 판단부에서 각 DC 화소에 대한 가로 및 세로 성분의 기울기는 가로 및 세로 방향으로의 바로 이전의 DC 화소와의 차이의 절대값인 것을 특징으로 한다.The inclination of the horizontal and vertical components with respect to each DC pixel in the blank image determiner is an absolute value of a difference from the DC pixel immediately before in the horizontal and vertical directions.

상기 제어부는 입력된 I 픽처가 블랭크 영상으로 판단되면 상기 I 픽처로부터 생성된 썸네일 영상이 저장되는 있는 상기 메모리 내의 위치에 다음 I 픽처로부터 생성된 썸네일 영상이 오버라이트되도록 제어하는 것을 특징으로 한다.If it is determined that the input I picture is a blank image, the controller controls the thumbnail image generated from the next I picture to be overwritten to a position in the memory where the thumbnail image generated from the I picture is stored.

상기 제어부는 상기 메모리에 저장 가능한 썸네일 영상의 수만큼 블랭크 벡터를 구비한 후, 블랭크 여부에 상관없이 모든 썸네일 영상을 상기 메모리에 저장하면서 상기 블랭크 영상 판단부의 판단 결과에 따라 상기 블랭크 벡터에 해당 썸네일 영상의 블랭크 유무를 표시하는 것을 특징으로 한다.The control unit includes as many blank vectors as the number of thumbnail images that can be stored in the memory, and then stores all the thumbnail images in the memory regardless of whether they are blank or not, and according to the determination result of the blank image determining unit, corresponding thumbnail images to the blank vectors. It is characterized by displaying the presence or absence of the blank.

본 발명의 다른 목적, 특징 및 잇점들은 첨부한 도면을 참조한 실시예들의 상세한 설명을 통해 명백해질 것이다.Other objects, features and advantages of the present invention will become apparent from the following detailed description of embodiments taken in conjunction with the accompanying drawings.

이하, 첨부된 도면을 참조하여 본 발명의 실시예의 구성과 그 작용을 설명하며, 도면에 도시되고 또 이것에 의해서 설명되는 본 발명의 구성과 작용은 적어도 하나의 실시예로서 설명되는 것이며, 이것에 의해서 상기한 본 발명의 기술적 사상과 그 핵심 구성 및 작용이 제한되지는 않는다.Hereinafter, with reference to the accompanying drawings illustrating the configuration and operation of the embodiment of the present invention, the configuration and operation of the present invention shown in the drawings and described by it will be described as at least one embodiment, By the technical spirit of the present invention described above and its core configuration and operation is not limited.

본 발명은 썸네일 영상을 생성하고자 하는 I 픽처의 DC 값을 분석하여 해당되는 I 픽처가 블랭크 영상인지 여부를 판단하고, 블랭크 영상으로 판단된 I 픽처로부터 생성된 썸네일 영상은 이용하지 않도록 하는데 있다. 특히, 본 발명은 상기 I 픽처의 DC 값으로 생성되는 DC 영상 단위로 기울기를 구한 후 상기 기울기를 미리 설정한 임계값과 비교하여 블랭크 영상의 여부를 판단하는데 그 특징이 있다.The present invention analyzes the DC value of an I picture to generate a thumbnail image to determine whether the corresponding I picture is a blank image, and not to use a thumbnail image generated from the I picture determined as the blank image. In particular, the present invention is characterized in that it is determined whether a blank image is obtained by obtaining a slope by a DC image unit generated by the DC value of the I picture and comparing the slope with a preset threshold.

도 1은 본 발명에 의한 썸네일 영상 생성 장치의 전체적인 구성의 일 실시예를 나타낸 블록도로서, MPEG으로 부호화된 비디오 스트림 중 I 픽쳐의 DC 값만을 파싱(parsing)하는 DC 디코더(101), 상기 파싱된 DC값으로부터 현재 생성되는 썸네일 영상의 유효성 여부를 판단하는 블랭크 영상 판단부(102), 상기 파싱된 DC값을 썸네일 영상 생성을 위해 라인 또는 슬라이스 단위로 임시 저장하는 임시 버퍼(103), 및 상기 DC값을 임시 버퍼(103)에 저장시키고, 상기 임시 버퍼(103)에 저장된 DC값을 슬라이스 단위로 썸네일 메모리 인터페이스(105)를 통해 썸네일 전용 메모리로 전송하며, 또한 상기 블랭크 영상 판단부(102)의 판단 결과에 따라 상기 썸네일 전용 메모리에 저장된 썸네일 영상의 사용 여부를 제어하는 등의 시스템의 전체적인 흐름을 제어하는 버퍼 제어기(104)로 구성된다. 1 is a block diagram showing an embodiment of the overall configuration of a thumbnail image generating apparatus according to the present invention, a DC decoder 101 for parsing only the DC value of an I picture in an MPEG encoded video stream, the parsing A blank image determination unit 102 determining whether a thumbnail image currently generated from the DC value is valid, a temporary buffer 103 temporarily storing the parsed DC value in line or slice units for thumbnail image generation, and the The DC value is stored in the temporary buffer 103, the DC value stored in the temporary buffer 103 is transmitted to the thumbnail dedicated memory through the thumbnail memory interface 105 in units of slices, and the blank image determination unit 102 is also used. The buffer controller 104 controls the overall flow of the system, such as controlling the use of the thumbnail image stored in the thumbnail dedicated memory in accordance with the determination result of the It is sex.

즉, 상기 버퍼 제어기(104)는 썸네일 메모리 인터페이스(105)를 통해 버퍼(103)에 저장된 데이터를 썸네일 전용 메모리의 특정 위치에 저장될 수 있도록 한다. That is, the buffer controller 104 may store data stored in the buffer 103 through the thumbnail memory interface 105 at a specific location of the thumbnail dedicated memory.

상기 DC 디코더(101)는 일반적인 MPEG 비디오 디코더의 VLD에 비해 매우 간단한 구조로 I 픽쳐의 DC값과 영상 정보 파라미터(parameter)만을 파싱할 수 있는 구조를 갖는다. 본 발명에서는 썸네일 영상을 생성하는 것이 목적이므로, 상기 DC 디코더(101)는 P 픽쳐 및 B 픽쳐를 복호화 할 필요가 없으며, 기타 AC 값을 구하기 위해 필요한 가변 복호화 테이블 및 하드웨어 부분이 제거된 구조이다. The DC decoder 101 has a structure that can parse only the DC value and image information parameter of the I picture in a very simple structure compared to the VLD of a general MPEG video decoder. In the present invention, since a thumbnail image is generated, the DC decoder 101 does not need to decode the P picture and the B picture, and removes the variable decoding table and hardware parts necessary to obtain other AC values.

즉, 상기 DC 디코더(101)는 MPEG 비디오의 I 픽처 스트림 중에서 픽처 사이즈(picture size), 매크로 블록의 어드레스와 같은 영상의 정보 파라미터와 각 블록의 DC 값을 복호화하여 블랭크 영상 판단부(102)와 썸네일 임시 버퍼(103)로 전송한다. That is, the DC decoder 101 decodes an information parameter of an image such as a picture size and an address of a macro block among the I picture streams of MPEG video and a DC value of each block to decode the blank image determination unit 102. The thumbnail is sent to the temporary buffer 103.

이때, 상기 블랭크 영상 판단부(102)의 기능을 간단히 하기 위해서 영상의 휘도 성분에 대해서만 분석을 수행할 수도 있으며 이 경우에는 각 매크로 블록의 0번부터 3번 블록에 해당하는 DC값 즉, Y 성분의 DC값들만을 블랭크 영상 판단부(102)로 전송한다. In this case, in order to simplify the function of the blank image determining unit 102, the analysis may be performed only on the luminance component of the image. In this case, a DC value corresponding to blocks 0 to 3 of each macro block, that is, a Y component Only the DC values of the transmission are transmitted to the blank image determiner 102.

여기서, 각 DC값은 0에서부터 255의 값을 가지며 이는 1바이트의 데이터로 표현된다. 일반적으로 4:2:0의 포맷을 갖는 MPEG 비디오에서 DC값은 각 블록의 평균값을 의미하며 하나의 매크로블록 당 6개의 블록이 존재하므로 하나의 매크로 블록으로부터 6개의 DC값이 입력된다. 이 중 처음 4개(즉 각 매크로 블록의 0번부터 3번까지의 블록)의 DC값은 Y 성분의 DC값이며, 나머지 2개(즉 4번, 5번 블록)는 각각 Cb, Cr 성분의 DC값에 해당된다. Here, each DC value has a value from 0 to 255, which is represented by 1 byte of data. In general, in an MPEG video having a 4: 2: 0 format, a DC value means an average value of each block, and since there are six blocks per macroblock, six DC values are input from one macroblock. DC values of the first four (that is, blocks 0 to 3 of each macro block) are DC values of the Y component, and the remaining two (ie blocks 4 and 5) are the Cb and Cr components, respectively. It corresponds to DC value.

한편, 상기 임시 버퍼(103)로는 썸네일 영상의 구성에 필요한 모든 DC 값을 전송해야 한다. 즉, 썸네일 영상은 썸네일 전용 메모리에 완전한 형태로 저장되며, 상기 버퍼 제어기(104)의 제어에 의해 하나의 슬라이스에 해당하는 분량의 데이터를 임시 버퍼(103)에 저장하였다가 슬라이스가 종료되면 상기 임시 버퍼(103)의 데이터를 썸네일 전용 메모리로 전송한다. On the other hand, the temporary buffer 103 must transmit all DC values necessary for the configuration of the thumbnail image. That is, the thumbnail image is stored in a thumbnail-only memory in a complete form, and under the control of the buffer controller 104, the data corresponding to one slice is stored in the temporary buffer 103, and when the slice ends, the temporary image The data in the buffer 103 is transferred to the thumbnail dedicated memory.

여기서, 상기 슬라이스는 ATSC 규격상 매크로 블록의 하나의 가로 줄을 의미하는 것으로, 슬라이스를 기본 단위로 썸네일 영상을 생성하는 이유는 입력되는 MPEG 비디오 스트림의 특성상 슬라이스를 기준으로 버퍼(103)를 제어하는 것이 효율적이기 때문이다.Here, the slice refers to one horizontal line of the macro block according to the ATSC standard. The reason for generating the thumbnail image based on the slice is that the buffer 103 is controlled based on the slice based on the characteristics of the input MPEG video stream. Because it is efficient.

상기 버퍼 제어기(104)는 임시 버퍼(103)의 입출력을 제어하며, 상기 임시 버퍼(103)는 입출력의 효율성을 위해 더블 버퍼의 형태로 구현된다. 즉, 상기 버퍼 제어기(104)는 슬라이스가 종료하면 썸네일 전용 메모리 인터페이스(105)와 더불어 임시 버퍼(103)에 저장된 썸네일 데이터를 썸네일 전용 메모리로 전송하는데 필요한 과정을 수행한다. 상기 썸네일 전용 메모리 인터페이스(105)는 임시 버퍼(103)에 저장된 데이터를 직접 썸네일 전용 메모리에 라이트(write)하는 과정을 제어하며, 썸네일 전용 메모리의 억세스(access)를 위한 기타 모든 과정을 제어한다. The buffer controller 104 controls the input and output of the temporary buffer 103, the temporary buffer 103 is implemented in the form of a double buffer for the efficiency of the input and output. That is, when the slice ends, the buffer controller 104 performs a process necessary to transfer the thumbnail data stored in the temporary buffer 103 to the thumbnail dedicated memory together with the thumbnail dedicated memory interface 105. The thumbnail dedicated memory interface 105 controls a process of directly writing data stored in the temporary buffer 103 to a thumbnail dedicated memory, and controls all other processes for accessing the thumbnail dedicated memory.

도 1에 도시된 본 발명의 썸네일 영상 생성 장치는 확장성을 고려한 블록도로서, 썸네일 전용 메모리 인터페이스(105)는 썸네일 전용 메모리를 억세스하고자 하는 다른 외부 유닛(unit)과 연결하여 사용할 수 있다. 즉, 본 발명에 의한 썸네일 영상 생성 장치 이외에 썸네일 전용 메모리를 사용하고자 하는 블록을 썸네일 전용 메모리 인터페이스(105)에 연결하여 사용할 수 있다. 이러한 경우 썸네일 전용 메모리는 썸네일 데이터 이외에 다른 데이터의 입출력이 가능하도록 확장될 수 있다. The thumbnail image generating apparatus of the present invention shown in FIG. 1 is a block diagram in consideration of scalability, and the thumbnail dedicated memory interface 105 may be used in connection with another external unit to access the thumbnail dedicated memory. That is, in addition to the thumbnail image generating apparatus according to the present invention, a block for using a thumbnail dedicated memory may be connected to the thumbnail dedicated memory interface 105. In such a case, the thumbnail dedicated memory may be expanded to enable input and output of other data in addition to the thumbnail data.

상기 블랭크 영상 판단부(102)에서는 입력되는 DC 값을 이용하여 이후에 설명할 일련의 과정을 거쳐 현재 영상의 블랭크 여부를 판단한다. 앞서 설명한 바와 같이 블랭크 영상 판단부(102)에서 영상의 휘도(Y) 성분만을 이용하여 영상을 분석하고자 하는 경우 즉, 블랭크 여부를 판단하고자 하는 경우 영상의 휘도 성분에 해당되는 각 매크로 블록의 0번부터 3번 블록의 DC 값만을 사용한다. 또한, 기타 영상의 특정 성분 또는 여러 성분(chrominance 성분 포함)의 조합을 이용하여 블랭크 여부를 판단하고자 한다면 그에 해당하는 성분의 DC 값을 모두 사용하여 블랭크 판단 기능을 수행할 수 있다. The blank image determiner 102 determines whether the current image is blank by performing a series of processes to be described later using the input DC value. As described above, in the case where the blank image determining unit 102 intends to analyze an image using only the luminance (Y) component of the image, that is, to determine whether the blank is zero, the number 0 of each macro block corresponding to the luminance component of the image is determined. Uses only the DC value from block 3. In addition, if a blank is to be determined using a specific component or a combination of several components (including chrominance components) of the other image, the blank determination function may be performed using all DC values of the corresponding components.

도 2는 본 발명에 따른 블랭크 영상 판단부(102)의 동작 흐름도로서, 휘도 신호 성분만을 이용한 블랭크 영상 판단부의 실시예에 대하여 서술하며 다른 성분에 대해서도 이후 서술하는 방법과 유사하게 구현될 수 있다. FIG. 2 is a flowchart illustrating an operation of the blank image determiner 102 according to the present invention. The embodiment of the blank image determiner using only luminance signal components may be described, and other components may be similarly implemented.

본 발명에서는 영상의 복잡도를 근거로 영상의 블랭크 여부를 결정하며, 상기 영상의 복잡도는 인접한 두 DC 화소값의 미분값 또는 기울기(gradient)를 기준으로 계산한다. In the present invention, whether the image is blank is determined based on the complexity of the image, and the complexity of the image is calculated based on a derivative value or a gradient of two adjacent DC pixel values.

즉, 상기 블랭크 영상 판단부(102)에서는 DC 디코더(101)로부터 입력된 DC 값을 이용하여 각 DC 화소에 대하여 기울기(Gr_Pix)를 계산한다. 각 DC 화소의 기울기는 가로 및 세로 성분의 기울기의 크기를 합한 값으로 정의된다. That is, the blank image determiner 102 calculates the slope Gr_Pix for each DC pixel by using the DC value input from the DC decoder 101. The slope of each DC pixel is defined as the sum of the magnitudes of the slopes of the horizontal and vertical components.

이를 위해 먼저 가로 성분의 기울기를 나타내는 Gr_H와 세로 성분의 기울기를 나타내는 Gr_V를 계산한다. 상기 Gr_H와 Gr_V를 계산하는 방법은 하기의 수학식 1에 나타나 있으며 현재 입력된 DC 화소를 f(i,j)라고 하였을 때 이 DC 화소의 기울기를 나타내는 Gr_Pix는 Gr_H와 Gr_V의 합으로 계산된다. To do this, first calculate Gr_H representing the slope of the horizontal component and Gr_V representing the slope of the vertical component. The method of calculating Gr_H and Gr_V is shown in Equation 1 below. When the current input DC pixel is f (i, j), Gr_Pix indicating the slope of the DC pixel is calculated as the sum of Gr_H and Gr_V.

즉, 상기 수학식 1에서 f(i,j)는 입력된 DC 영상의 화소값(예를 들면, 각 Y 블록의 DC 값)을 의미하고, i와 j는 각각 세로 및 가로 좌표를 의미한다.That is, in Equation 1, f (i, j) denotes a pixel value (eg, DC value of each Y block) of the input DC image, and i and j denote vertical and horizontal coordinates, respectively.

그리고, 상기 수학식 1에서 각각의 화소값에 대한 가로 성분의 기울기 Gr_H와 세로 성분의 기울기 Gr_V는 여러 가지 다양한 방법으로 계산될 수 있다. 즉, 영상에서 각각의 DC 화소에 대하여 가로 및 세로 방향으로의 미분값 또는 화소값의 기울기를 표현하는 다른 값을 사용할 수 있다. 상기 기울기는 인접한 화소값의 변화량을 의미한다.In addition, in Equation 1, the slope Gr_H of the horizontal component and the slope Gr_V of the vertical component with respect to each pixel value may be calculated in various ways. That is, for each DC pixel in the image, another value representing the derivative value in the horizontal and vertical directions or the slope of the pixel value may be used. The inclination means a change amount of adjacent pixel values.

본 발명의 일 실시예에서는 상기 기울기 즉, 인접한 두 DC 화소값의 변화량을 간단하게 하기의 수학식 2와 같이 계산한다.In an embodiment of the present invention, the slope, that is, the amount of change of two adjacent DC pixel values is simply calculated as in Equation 2 below.

즉, 가로 및 세로 방향으로 바로 이전의 화소값과의 차이의 절대값을 사용한다. That is, the absolute value of the difference from the immediately preceding pixel value in the horizontal and vertical directions is used.

이와 같이 DC 값이 입력될 때마다 각각의 화소에 대하여 기울기 Gr_Pix를 계산한 후 DC 영상 단위로 이들 값을 모두 더하여 변수 Gr_Img_tmp라는 값으로 저장한다. 예를 들면, 해당 DC 영상에서 최초로 구한 화소의 기울기 값 Gr_Pix를 Gr_Img_tmp로 놓고, 이후 DC 값이 입력될 때마다 해당 DC 화소의 Gr_Pix를 구하여 상기 변수 Gr_Img_tmp에 누산시키면 된다. 따라서, Gr_Img_tmp에는 현재까지 입력된 DC 화소의 기울기의 합이 저장된다. 여기서, 하나의 DC 영상에 대한 Gr_Img_tmp가 구해지고, 블랭크 영상의 판단이 끝나면 상기 Gr_Img_tmp값은 다음 DC 영상을 위해 초기화된다.As described above, each time the DC value is input, the slope Gr_Pix is calculated for each pixel, and these values are added and stored in the variable Gr_Img_tmp in units of DC images. For example, the gradient value Gr_Pix of the first pixel obtained from the DC image may be set to Gr_Img_tmp, and then, whenever the DC value is input, Gr_Pix of the corresponding DC pixel may be obtained and accumulated in the variable Gr_Img_tmp. Therefore, the sum of the slopes of the DC pixels input so far is stored in Gr_Img_tmp. Here, Gr_Img_tmp for one DC image is obtained, and when the determination of the blank image is finished, the Gr_Img_tmp value is initialized for the next DC image.

즉, DC 영상의 (i,j)번째 위치의 DC 화소값 f(i,j)이 입력되면(단계 201), 상기 화소값 f(i,j)의 가로 성분의 기울기 GR_H와 세로 성분의 기울기 GR_V를 구한 후 두 값을 더하여 상기 화소값 f(i,j)의 기울기 Gr_Pix를 계산한다(단계 202). 그리고 나서, 상기 화소값 f(i,j)의 기울기 Gr_Pix를 변수 Gr_Img_tmp에 누산시킨다(단계 203).That is, when the DC pixel value f (i, j) at the (i, j) th position of the DC image is input (step 201), the slope GR_H of the horizontal component of the pixel value f (i, j) and the slope of the vertical component are input. After GR_V is calculated, the slope Gr_Pix of the pixel value f (i, j) is calculated by adding two values (step 202). Then, the slope Gr_Pix of the pixel value f (i, j) is accumulated in the variable Gr_Img_tmp (step 203).

이어, 입력되는 DC 영상의 라인 끝인지를 확인한다(단계 204). 만일 라인 끝이 아니면 해당 라인에서 다른 화소의 가로 성분의 기울기를 구하기 위해 가로 좌표 j값을 1 증가시킨 후 상기 단계 201로 되돌아가 상기된 과정들을 반복하고(단계 205), 라인 끝이면 상기 DC 영상의 끝인지를 확인한다(단계 206). 상기 단계 206에서 DC 영상의 끝이 아니면 다른 라인에서 다른 화소의 세로 성분의 기울기를 구하기 위해 j 값은 초기화시키고, 세로 좌표 i값은 1 증가시킨 후 상기 단계 201로 되돌아가 상기된 과정을 반복한다(단계 207).Then, it is checked whether the line is the end of the input DC image (step 204). If it is not at the end of the line, the horizontal coordinate j value is increased by 1 to obtain the slope of the horizontal component of another pixel in the line, and the process returns to step 201 and the above steps are repeated (step 205). Check if it is the end of step (206). In step 206, the j value is initialized to obtain the slope of the vertical component of another pixel on another line that is not the end of the DC image, and the vertical coordinate i value is increased by 1, and then the process returns to the step 201 and the above process is repeated. (Step 207).

상기 단계 206에서 DC 영상의 끝이라고 판별되면 즉, 현재 영상의 모든 DC 값이 입력되면 하기의 수학식 3과 같이 Gr_Img_tmp를 DC 영상의 크기로 나누어줌으로써 전체 DC 영상의 기울기의 평균값 Grad_Img를 계산할 수 있다(단계 208). If it is determined in step 206 that the end of the DC image, that is, if all DC values of the current image is input, the average value Grad_Img of the slope of the entire DC image can be calculated by dividing Gr_Img_tmp by the size of the DC image as shown in Equation 3 below. (Step 208).

상기 수학식 3에서 f(i,j)는 입력되는 DC 영상의 화소값을 의미하고, i와 j는 각각 세로 및 가로 좌표를 나타내며, h_size와 v_size는 DC 영상의 가로 및 세로의 크기를 의미한다. 또한, , 이다.In Equation 3, f (i, j) denotes a pixel value of an input DC image, i and j denote vertical and horizontal coordinates, respectively, and h_size and v_size denote horizontal and vertical sizes of the DC image. . Also, , to be.

이때, 각 DC 영상의 Grad_Img의 크기는 해당 영상의 전체 화소의 기울기의 평균값을 의미하며, 이는 해당 영상의 복잡도를 표현하는 값이 된다.At this time, the magnitude of Grad_Img of each DC image means an average value of the slopes of all pixels of the corresponding image, which is a value representing the complexity of the corresponding image.

상기 단계 208이 수행되고 나면, 전체 DC 영상의 기울기의 평균값 Grad_Img을 기 설정된 임계값 Grad_Thr과 비교하여 하기의 수학식 4의 조건을 만족하면 현재 영상을 블랭크 영상이라고 결정하며, 해당 영상으로부터 생성한 썸네일 영상은 사용하지 않는다(단계 209).After the step 208 is performed, the average value Grad_Img of the slope of the entire DC image is compared with the preset threshold Grad_Thr, and when the condition of Equation 4 is satisfied, the current image is determined to be a blank image, and a thumbnail generated from the corresponding image The image is not used (step 209).

Grad_Img < Grad_ThrGrad_Img <Grad_Thr

즉, 상기 블랭크 영상 판단부(102)는 영상 전체의 평균 기울기 값을 나타내는 Grad_Img이 미리 설정한 임계값인 Grad_Thr보다 작으면 해당되는 영상을 블랭크로 판별하고 블랭크 신호를 '1'로 하여 버퍼 제어부(104)로 출력한다(단계 210). 상기 버퍼 제어부(104)는 블랭크 신호가 '1'이면 이에 해당되는 썸네일 영상이 이용되지 않도록 제어한다(단계 211).That is, if the Grad_Img representing the average slope value of the entire image is smaller than Grad_Thr, which is a preset threshold, the blank image determiner 102 determines the corresponding image as a blank and sets the blank signal as '1'. 104) (step 210). If the blank signal is '1', the buffer controller 104 controls not to use a thumbnail image corresponding thereto (step 211).

본 발명의 일 실시예에서는 실제 MPEG 비디오 스트림에 대하여 실험을 수행한 결과를 근거로 상기 임계값 Grad_Thr를 5.0으로 설정하였으며, 이는 설계자에 의해 달라질 수 있으므로 상기된 실시예로 제시한 것에 제한되지 않을 것이다. In an embodiment of the present invention, the threshold value Grad_Thr is set to 5.0 based on the results of experiments on the actual MPEG video stream, which may be different by the designer, and thus will not be limited to the embodiment described above. .

한편, 상기 블랭크 영상 판단부(102)는 영상 전체의 평균 기울기 값을 나타내는 Grad_Img이 미리 설정한 임계값인 Grad_Thr보다 작지 않으면 해당되는 영상이 블랭크가 아니라고 판별하고 블랭크 신호를 '0'으로 하여 버퍼 제어부(104)로 출력한다(단계 212). 상기 버퍼 제어부(104)는 블랭크 신호가 '0'이면 이에 해당되는 썸네일 영상이 이용되도록 제어한다(단계 213).On the other hand, the blank image determining unit 102 determines that the corresponding image is not blank if Grad_Img, which represents the average slope value of the whole image, is not smaller than the preset threshold Grad_Thr, and sets the blank signal to '0' to control the buffer control unit. Output to 104 (step 212). If the blank signal is '0', the buffer controller 104 controls to use a thumbnail image corresponding thereto (step 213).

이때, 상기 블랭크 영상 판단부(102)에는 영상의 각 화소의 기울기를 계산하기 위한 임시 버퍼가 필요하다. 즉, 각 화소의 가로 및 세로 방향의 기울기의 계산을 위해서는 각각의 방향으로 발생하는 이전의 DC 값이 필요하므로 블랭크 영상 판단부(102)의 내부에서 사용하는 임시 버퍼의 크기는 (h_size+1) * 8 bit이다.In this case, the blank image determination unit 102 needs a temporary buffer for calculating the slope of each pixel of the image. That is, since the previous DC value generated in each direction is required for the calculation of the horizontal and vertical slope of each pixel, the size of the temporary buffer used in the blank image determining unit 102 is (h_size + 1). * 8 bit.

이와 같이 상기 블랭크 영상 판단부(102)에서는 I 픽처가 종료하면 상기 I 픽처의 DC값들이 입력되는 동안 계산된 복잡도 즉, 전체 영상의 평균 기울기 값을 근거로 하여 현재 영상(즉, 복잡도가 계산된 상기 I 픽처)의 블랭크 여부를 판단하고 그에 해당하는 신호 BLANK를 출력함으로써, 상기 블랭크로 판별된 I 픽처로부터 생성된 썸네일 영상의 이용을 제어한다.As described above, when the I picture ends, the blank image determiner 102 calculates the current image (ie, the complexity is calculated based on the complexity calculated during input of DC values of the I picture, that is, the average slope value of the entire picture). By determining whether the I picture is blank and outputting a corresponding signal BLANK, the use of the thumbnail image generated from the I picture determined as the blank is controlled.

즉, 상기된 과정을 거쳐 현재 영상이 블랭크로 결정되면 PVR 혹은 기타 썸네일 영상을 이용하는 시스템에서 소프트웨어 혹은 하드웨어적인 방법을 통해 블랭크로 판별된 영상으로부터 생성된 썸네일 영상이 디스플레이되지 않도록 해야 한다. 예를 들어, 현재 썸네일 영상이 블랭크인 경우, 썸네일 전용 메모리에서 현재 썸네일 영상이 이미 저장되어 있는 위치에 다음 썸네일 영상을 오버라이트(overwrite)하는 등의 방법을 사용할 수 있으며 또는, 블랭크 벡터 등을 이용하여 블랭크 값이 '0'인 썸네일 영상만 소프트웨어적으로 선별하여 썸네일 영상 디스플레이 혹은 기타 응용 분야에 사용할 수 있도록 할 수 있다.That is, if the current image is determined to be blank through the above-described process, the thumbnail image generated from the image determined as the blank should not be displayed through a software or hardware method in a system using a PVR or other thumbnail image. For example, when the current thumbnail image is blank, a method such as overwriting the next thumbnail image in a location where the current thumbnail image is already stored in the thumbnail dedicated memory may be used, or by using a blank vector or the like. Only thumbnail images with a blank value of '0' can be software-selected for use in thumbnail image display or other applications.

도 3은 본 발명에서 현재 영상이 블랭크 영상으로 판별되었을 경우에 썸네일 전용 메모리의 주소값을 이용한 썸네일 영상 제어 방법의 일 실시예를 나타낸 것으로서, 도 3a는 동작 흐름도이고, 도 3b는 상기 썸네일 전용 메모리의 맵 상태를 보이고 있다.3 is a view illustrating an embodiment of a method for controlling a thumbnail image using an address value of a thumbnail dedicated memory when the current image is determined to be a blank image, FIG. 3A is an operation flowchart, and FIG. 3B is a thumbnail dedicated memory. The map state is showing.

즉, 단계 301에서 BLANK 신호가 '1'인지를 판별하여 '1'이면 현재 영상을 블랭크 영상으로 결정하여 단계 302로 진행하고, '0'이면 블랭크 영상이 아니라고 결정하여 단계 303으로 진행한다.That is, in step 301, it is determined whether the BLANK signal is '1', and if it is '1', the current image is determined to be a blank image, and if it is '0', it is determined that it is not a blank image.

상기 단계 302,303에서 ThmAddrStart는 다음에 발생하는 썸네일 영상이 저장되는 썸네일 전용 메모리에서의 시작 번지를 의미한다. CurrThmStart는 썸네일 전용 메모리 내에서 현재 이미 저장되어 있는 썸네일 영상의 시작 번지를 나타낸다. ThmPictSize는 각각의 썸네일의 크기를 의미하는 것으로 썸네일 전용 메모리 내에서 각각의 썸네일 영상이 차지하는 공간의 크기를 나타낸다. 즉, 현재 영상이 최종적으로 블랭크로 결정될 경우, 이미 썸네일 전용 메모리에는 현재 영상에 대한 썸네일이 저장되어 있는 상태다. 그 이유는 슬라이스 단위로 썸네일을 저장하기 때문이다. 다시 말해 현재 영상의 마지막 슬라이스가 종료하기 전에는 그 영상의 블랭크 여부를 결정할 수 없으며 이미 그전의 슬라이스들에 해당되는 DC 값은 썸네일 전용 메모리에 저장되어 있기 때문이다. In step 302 and 303, ThmAddrStart means a start address in a thumbnail dedicated memory in which a thumbnail image to be generated next is stored. CurrThmStart represents the start address of the thumbnail image currently stored in the thumbnail dedicated memory. ThmPictSize refers to the size of each thumbnail and represents the size of the space occupied by each thumbnail image in the thumbnail dedicated memory. That is, when the current video is finally determined as a blank, the thumbnail for the current video is already stored in the thumbnail dedicated memory. This is because thumbnails are stored in slices. In other words, it is not possible to determine whether to blank the image until the last slice of the current image is finished, and the DC values corresponding to the slices of the previous image are already stored in the thumbnail dedicated memory.

따라서, 상기 단계 301에서 현재 영상이 블랭크로 결정되면, 단계 302는 다음 썸네일 영상을 현재의 썸네일 영상이 저장되어 있는 썸네일 전용 메모리 공간에 오버라이트함으로써, 블랭크로 판별된 영상으로부터 생성된 썸네일 영상이 이용되지 않게 한다(ThmAddrStart=CurrThmStart). 이 경우 블랭크가 아닌 썸네일 영상만을 썸네일 전용 메모리에 저장할 수 있으므로 메모리의 효율성을 높일 수 있다. 예를 들어, 2번째, 4번째 영상이 블랭크 영상으로 판단되었다고 가정하면, 원래 2번째 영상에 해당하는 썸네일 영상이 저장된 위치에 3번째 영상에 해당하는 썸네일 영상이 오버라이트되고, 원래 4번째 영상에 해당하는 썸네일 영상이 저장된 위치에 5번째 영상에 해당하는 썸네일 영상이 오버라이트된다. 결국, 도 3b와 같이 2번째, 4번째 영상에 대한 썸네일 영상이 썸네일 전용 메모리에서 삭제되는 것과 같은 효과를 얻는다.Therefore, when the current image is determined to be blank in step 301, step 302 overwrites the next thumbnail image to a thumbnail dedicated memory space in which the current thumbnail image is stored, thereby using the thumbnail image generated from the image determined as blank. (ThmAddrStart = CurrThmStart). In this case, only thumbnail images, not blanks, may be stored in the thumbnail dedicated memory, thereby increasing memory efficiency. For example, assuming that the second and fourth images are determined to be blank images, the thumbnail image corresponding to the third image is overwritten at the position where the thumbnail image corresponding to the second image is stored, and the original fourth image is overwritten. The thumbnail image corresponding to the fifth image is overwritten at the position where the corresponding thumbnail image is stored. As a result, as shown in FIG. 3B, the thumbnail images for the second and fourth images are deleted in the thumbnail dedicated memory.

그런데, 이러한 방법은 각 썸네일의 ID를 따로 저장할 수 있는 공간을 마련해야 한다. 즉, 현재 썸네일 전용 메모리에 어떤 썸네일이 저장되어 있는지를 나타내는 리스트를 별도로 마련해야 한다. 썸네일 ID란 생성된 썸네일이 원래 비디오에서 어느 영상으로부터 추출되었는가를 나타낸다.However, this method should provide a space for storing IDs of each thumbnail separately. That is, a list indicating which thumbnails are currently stored in the thumbnail dedicated memory must be separately prepared. The thumbnail ID indicates from which image in the original video the generated thumbnail is extracted.

그리고, 상기 단계 301에서 현재 영상이 블랭크 영상으로 판별되지 않으면 단계 303에서 다음 썸네일 영상이 저장되는 썸네일 전용 메모리에서의 시작 번지(ThmAddrStart)는 썸네일 전용 메모리 내에서 현재 이미 저장되어 있는 썸네일 영상의 시작 번지(CurrThmStart)에 각각의 썸네일 영상이 차지하는 공간의 크기(ThmPictSize)를 더한 값이 된다(ThmAddrStart=CurrThmStart+ThmPictSize).If the current image is not determined as the blank image in step 301, the start address (ThmAddrStart) in the thumbnail dedicated memory in which the next thumbnail image is stored in step 303 is the start address of the thumbnail image currently stored in the thumbnail dedicated memory. (CurrThmStart) is a value obtained by adding the size (ThmPictSize) of the space occupied by each thumbnail image (ThmAddrStart = CurrThmStart + ThmPictSize).

한편, 도 3과 같이 현재 썸네일 전용 메모리에 어떤 썸네일이 저장되어 있는지를 나타내는 리스트를 사용하지 않고 단순히 블랭크 벡터를 둘 경우, 썸네일 ID 관리가 편해질 수도 있다. On the other hand, as shown in FIG. 3, if a blank vector is simply placed without using a list indicating which thumbnails are stored in the current thumbnail dedicated memory, thumbnail ID management may be easy.

도 4는 본 발명에 의한 썸네일 영상 생성 장치에서의 블랭크 영상 발생시 블랭크 벡터를 사용한 제어 방법의 일 실시예를 나타낸 것으로서, 도 4a는 동작 흐름도이고, 도 4b는 이때의 썸네일 전용 메모리의 맵 상태와 블랭크 벡터를 이용하여 썸네일 전용 메모리에 저장된 각 썸네일 영상의 블랭크 여부를 나타내고 있다. 즉, 생성되는 썸네일 영상을 도 4b와 같이 모두 썸네일 전용 메모리에 저장하고 각각의 썸네일에 해당되는 블랭크 신호의 값을 블랭크 벡터에 같이 저장하는 방식이다. 만약 N개의 썸네일 영상을 썸네일 전용 메모리에 저장하는 경우, N비트 크기의 블랭크 벡터가 필요하다. 각 비트는 그 순서에 해당하는 썸네일 영상의 블랭크 여부를 의미한다. 예를 들어 블랭크 벡터의 n번째 비트가 '0'이고 m번째 비트가 '1'이라면 n번째 썸네일 영상은 사용 가능하며 m번째 썸네일 영상은 블랭크 영상이므로 사용하지 않는다. 4 is a view illustrating an embodiment of a control method using a blank vector when a blank image is generated in the thumbnail image generating apparatus according to the present invention, FIG. 4A is an operation flowchart, and FIG. 4B is a map state and a blank of a thumbnail dedicated memory at this time. A vector is used to indicate whether each thumbnail image stored in the thumbnail dedicated memory is blank. That is, as shown in FIG. 4B, all of the generated thumbnail images are stored in a thumbnail dedicated memory, and a value of a blank signal corresponding to each thumbnail is stored together in a blank vector. If the N thumbnail images are stored in the thumbnail dedicated memory, a blank vector of size N bits is required. Each bit indicates whether a thumbnail image corresponding to the sequence is blank. For example, if the n th bit of the blank vector is '0' and the m th bit is '1', the n th thumbnail image is available and the m th thumbnail image is not used because it is a blank image.

이러한 과정을 도 4a에 도시하였다. 도 4a에서는 실시예로 현재 영상이 블랭크로 판별되면 블랭크 벡터 값을 1로 설정하고, 블랭크가 아니라고 판별되면 상기 블랭크 벡터 값을 0으로 설정한다. This process is illustrated in Figure 4a. In FIG. 4A, the blank vector value is set to 1 when the current image is determined to be blank, and the blank vector value is set to 0 when it is determined that the image is not blank.

즉, 단계 401에서 i번째 블랭크 벡터가 1인지, 0인지를 판별하여 1이면 상기 i번째 블랭크 벡터에 대응하는 썸네일 영상은 화면 상에 디스플레이시키지 않는다(단계 402). 또한, 상기 단계 401에서 0으로 판별되면 상기 i번째 블랭크 벡터에 대응하는 썸네일 영상은 화면 상에 디스플레이시킨다(단계 403). 상기 단계 402 또는 403이 수행되고 나면 i 값을 1 증가시킨 후(단계 404), 상기 i 값이 N이 아니면(단계 405), 썸네일 전용 메모리의 끝이 아니므로 단계 401로 되돌아가 i+1번째 블크 벡터 값을 추출한다. 만일, 상기 단계 404로 판별되면 썸네일 전용 메모리의 끝이므로 처음으로 이동하거나 프로그램을 종료시킨다.That is, in step 401, it is determined whether the i-th blank vector is 1 or 0, and if it is 1, a thumbnail image corresponding to the i-th blank vector is not displayed on the screen (step 402). In addition, if it is determined as 0 in step 401, a thumbnail image corresponding to the i-th blank vector is displayed on the screen (step 403). After the step 402 or 403 is performed, the value of i is increased by one (step 404). If the value of i is not N (step 405), it is not the end of the thumbnail dedicated memory. Extract the black vector value. If it is determined in step 404, the end of the thumbnail dedicated memory is moved to the beginning or the program is terminated.

이와 같이 상기된 도 4의 방법을 이용할 경우, 썸네일 영상을 사용하고자 하는 시스템은 썸네일 전용 메모리에서 썸네일 영상을 읽을 때 블랭크 벡터를 참조하여 각 썸네일 영상의 사용 여부를 알 수 있다. 이 경우 미리 시스템에서 결정한 규칙에 의하여 일괄적으로 생성된 썸네일 영상이 각 영상의 블랭크 여부에 관계없이 모두 썸네일 전용 메모리에 저장되어 있으므로 별도의 썸네일 ID 관리가 필요 없는 장점이 있다.As described above, when using the method of FIG. 4, the system that wants to use the thumbnail image may know whether to use each thumbnail image by referring to the blank vector when reading the thumbnail image from the thumbnail dedicated memory. In this case, all thumbnail images generated according to a rule determined in advance by the system are stored in a thumbnail dedicated memory regardless of whether each image is blank, so that separate thumbnail ID management is not required.

따라서, 본 발명은 디지털 TV에 장착된 PVR 또는 비디오 저장 시스템, 비디오 라이브러리 및 브라우저 등에서 제공하는 비디오 콘텐트에 대한 내용 요약, 프로그램 가이드 및 비디오의 빠른 검색을 위한 대표 영상 생성 기능, 개인용 프로그램 가이드 및 비디오에 대한 함축적 정보 전달에 관련된 기타 응용 분야 등에 적용하면, 사용자에게 효과적이고 자동적인 썸네일 영상을 제공할 수 있게 된다.Accordingly, the present invention provides a summary of contents for a video content provided by a PVR or video storage system, a video library and a browser mounted on a digital TV, a program guide and a representative image generation function for quick searching of a video, a personal program guide, and a video. When applied to other application fields related to implicit information transmission for the user, it is possible to provide an effective and automatic thumbnail image to the user.

이상에서와 같이 본 발명에 따른 디지털 비디오의 썸네일 영상 생성 장치에 의하면, 입력되는 일련의 MPEG 비디오 스트림의 I 픽처의 DC 값을 이용하여 썸네일 영상을 생성하며 이 과정에서 영상의 기울기 값을 이용한 방법으로 썸네일 영상의 복잡도를 분석하여 영상의 블랭크 여부를 판단한다. 이때 입력 영상이 블랭크로 결정될 경우 결정된 영상으로부터 썸네일 영상을 생성하지 않거나, 해당 썸네일 영상을 사용하지 않도록 제어함으로써, 결과적으로 사용자에게 블랭크가 아닌 내용적으로 의미 있는 썸네일 영상만을 제공할 수 있게 된다.As described above, according to the apparatus for generating a thumbnail image of a digital video according to the present invention, a thumbnail image is generated by using a DC value of an I picture of a series of input MPEG video streams, and in this process, a tilt value of the image is used. The complexity of the thumbnail image is analyzed to determine whether the image is blank. In this case, when the input image is determined to be blank, a thumbnail image is not generated from the determined image or the thumbnail image is controlled so that only a meaningfully meaningful image, not a blank, is provided to the user.

특히, 본 발명은 실제 방송에서 수신되는 비디오 스트림에서 발생할 수 있는 과도한 줌 또는 클로즈업에 의한 무의미한 영상, 조명 조건 등에 기인한 저휘도 영상과 같이 복잡도가 매우 낮아 대표 영상으로서 내용 전달이 어려운 영상 등으로부터 생성된 썸네일 영상의 사용을 방지할 수 있는 효과가 있으며, 사용자로 하여금 보다 의미 있고 명확한 썸네일 영상을 자동적으로 획득할 수 있게 한다.In particular, the present invention is generated from an image that is difficult to deliver the content as a representative image, such as a low complexity image due to the meaningless image due to excessive zoom or close-up that may occur in the video stream received in the actual broadcast, low brightness image due to lighting conditions, etc. There is an effect that can prevent the use of the thumbnail image, which enables the user to automatically obtain a more meaningful and clear thumbnail image.

이상 설명한 내용을 통해 당업자라면 본 발명의 기술 사상을 이탈하지 아니하는 범위에서 다양한 변경 및 수정이 가능함을 알 수 있을 것이다.Those skilled in the art will appreciate that various changes and modifications can be made without departing from the spirit of the present invention.

따라서, 본 발명의 기술적 범위는 실시예에 기재된 내용으로 한정되는 것이 아니라 특허 청구의 범위에 의하여 정해져야 한다. Therefore, the technical scope of the present invention should not be limited to the contents described in the embodiments, but should be defined by the claims.

도 1은 본 발명에 의한 썸네일 영상 생성 장치의 일 실시예를 보인 구성 블록도1 is a block diagram showing an embodiment of a thumbnail image generating apparatus according to the present invention

도 2는 본 발명에 의한 썸네일 영상 생성 장치 중 블랭크 영상 판단부의 일 실시예를 보인 동작 흐름도2 is a flowchart illustrating an embodiment of a blank image determining unit of a thumbnail image generating apparatus according to the present invention;

도 3a는 본 발명에 의한 썸네일 영상 생성 장치에서의 블랭크 영상 발생시 썸네일 전용 메모리의 주소값을 이용한 썸네일 영상 제어 방법의 일 실시예를 나타낸 흐름도3A is a flowchart illustrating an embodiment of a method for controlling a thumbnail image using an address value of a thumbnail dedicated memory when a blank image is generated in the thumbnail image generating apparatus according to the present invention.

도 3b는 도 3a에서의 썸네일 전용 메모리의 맵 상태를 보인 도면 FIG. 3B is a diagram illustrating a map state of a thumbnail dedicated memory in FIG. 3A; FIG.

도 4a는 본 발명에 의한 썸네일 영상 생성 장치에서의 블랭크 영상 발생시 블랭크 벡터를 사용한 제어 방법의 일 실시예를 나타낸 흐름도4A is a flowchart illustrating an embodiment of a control method using a blank vector in generating a blank image in a thumbnail image generating apparatus according to the present invention;

도 4b는 도 4a에서의 썸네일 전용 메모리의 맵 상태 및 블랭크 벡터를 이용하여 썸네일 전용 메모리에 저장된 각 썸네일 영상의 블랭크 여부를 나타내는 일 실시예를 보인 도면FIG. 4B is a diagram illustrating an embodiment of whether each thumbnail image stored in the thumbnail dedicated memory is blank by using the map state and the blank vector of the thumbnail dedicated memory in FIG. 4A; FIG.

도면의 주요부분에 대한 부호의 설명Explanation of symbols for main parts of the drawings

101 : DC 디코더 102 : 블랭크 영상 판단부101: DC decoder 102: blank image determination unit

103 : 임시 버퍼 104 : 버퍼 제어기103: temporary buffer 104: buffer controller

105 : 썸네일 메모리 인터페이스105: thumbnail memory interface

Claims (9)

입력되는 비디오 스트림으로부터 I 픽처의 DC값만을 파싱한 후 상기 DC 값으로부터 썸네일 영상을 생성하는 디지털 비디오의 썸네일 영상 생성 장치에 있어서,A digital video thumbnail image generating device for parsing only a DC value of an I picture from an input video stream and generating a thumbnail image from the DC value, 상기 썸네일 영상을 저장하는 메모리;A memory for storing the thumbnail image; 상기 파싱된 DC 값에 의해 생성되는 DC 영상의 DC 값이 입력될 때마다 각 DC 화소에 대한 가로 및 세로 성분의 기울기를 구하고 두 기울기 값을 더하여 해당 DC 화소에 대한 기울기를 계산한 후 이전 DC 화소의 기울기에 누산하는 과정을 반복하여 현재 DC 영상의 전체 기울기 값을 구한 후 미리 설정한 임계값과 비교하여 상기 I 픽처가 블랭크 영상인지 여부를 판별하는 블랭크 영상 판단부; 그리고Whenever the DC value of the DC image generated by the parsed DC value is input, the slope of the horizontal and vertical components of each DC pixel is calculated, the slope of the corresponding DC pixel is calculated by adding the two slope values, and then the previous DC pixel. A blank image determining unit to determine whether the I picture is a blank image by repeating the process of accumulating the slopes of the current DC image to obtain a total slope value of the current DC image and comparing the threshold value with a preset threshold; And 상기 블랭크 영상 판단부에서 블랭크 영상으로 판별하면 상기 메모리에 저장된 해당 썸네일 영상이 이용되지 않도록 제어하는 제어부를 포함하여 구성되는 것을 특징으로 하는 디지털 비디오의 썸네일 영상 생성 장치.And a controller configured to control the thumbnail image stored in the memory not to be used when the blank image determination unit determines that the image is a blank image. 제 1 항에 있어서, 상기 DC 영상의 전체 기울기는The method of claim 1, wherein the overall slope of the DC image is 해당 DC 영상의 각 DC 화소의 기울기의 전체 합을 상기 DC 영상의 크기로 나눈 평균값인 것을 특징으로 하는 디지털 비디오의 썸네일 영상 생성 장치.And an average value obtained by dividing the total sum of the slopes of the respective DC pixels of the corresponding DC image by the size of the DC image. 제 1 항에 있어서, 상기 블랭크 영상 판단부는The method of claim 1, wherein the blank image determination unit 상기 DC 영상의 전체 기울기 값이 기 설정한 임계값보다 작으면 해당 I 픽처를 블랭크 영상으로 판별하는 것을 특징으로 하는 디지털 비디오의 썸네일 영상 생성 장치.And determining an I picture as a blank image when the total slope value of the DC image is smaller than a preset threshold value. 제 1 항에 있어서, 상기 블랭크 영상 판단부는The method of claim 1, wherein the blank image determination unit 상기 파싱된 Y 성분의 DC 값만을 이용하여 각 DC 화소의 가로 및 세로 방향의 기울기를 계산하는 것을 특징으로 하는 디지털 비디오의 썸네일 영상 생성 장치.And calculating the inclination of each DC pixel in the horizontal and vertical directions using only the DC value of the parsed Y component. 제 1 항에 있어서, 상기 블랭크 영상 판단부는The method of claim 1, wherein the blank image determination unit 상기 파싱된 Y 성분의 DC 값과 CbCr 성분의 DC 값의 조합을 이용하여 각 DC 화소의 가로 및 세로 방향의 기울기를 계산하는 것을 특징으로 하는 디지털 비디오의 썸네일 영상 생성 장치.And calculating the inclination in the horizontal and vertical directions of each DC pixel by using a combination of the parsed DC value of the Y component and the DC value of the CbCr component. 제 1 항에 있어서, The method of claim 1, 상기 블랭크 영상 판단부에서 각 DC 화소에 대한 가로 및 세로 성분의 기울기는 가로 및 세로 방향으로 인접한 두 DC 화소의 각각의 변화량인 것을 특징으로 하는 디지털 비디오의 썸네일 영상 생성 장치.The inclination of the horizontal and vertical components with respect to each DC pixel in the blank image determining unit is a change amount of each of the two adjacent DC pixels in the horizontal and vertical direction. 제 1 항에 있어서, The method of claim 1, 상기 블랭크 영상 판단부에서 각 DC 화소에 대한 가로 및 세로 성분의 기울기는 가로 및 세로 방향으로의 바로 이전의 DC 화소와의 차이의 절대값인 것을 특징으로 하는 디지털 비디오의 썸네일 영상 생성 장치.And wherein the inclination of the horizontal and vertical components with respect to each DC pixel in the blank image determining unit is an absolute value of a difference from the immediately preceding DC pixel in the horizontal and vertical directions. 제 1 항에 있어서, 상기 제어부는The method of claim 1, wherein the control unit 입력된 I 픽처가 블랭크 영상으로 판단되면 상기 I 픽처로부터 생성된 썸네일 영상이 저장되는 있는 상기 메모리 내의 위치에 다음 I 픽처로부터 생성된 썸네일 영상이 오버라이트되도록 제어하는 것을 특징으로 하는 디지털 비디오의 썸네일 영상 생성 장치.If the input I picture is determined to be a blank image, the thumbnail image of the digital video is controlled so that the thumbnail image generated from the next I picture is overwritten to a position in the memory where the thumbnail image generated from the I picture is stored. Generating device. 제 1 항에 있어서, 상기 제어부는The method of claim 1, wherein the control unit 상기 메모리에 저장 가능한 썸네일 영상의 수만큼 블랭크 벡터를 구비한 후, 블랭크 여부에 상관없이 모든 썸네일 영상을 상기 메모리에 저장하면서 상기 블랭크 영상 판단부의 판단 결과에 따라 상기 블랭크 벡터에 해당 썸네일 영상의 블랭크 유무를 표시하는 것을 특징으로 하는 디지털 비디오의 썸네일 영상 생성 장치.After having as many blank vectors as the number of thumbnail images that can be stored in the memory, whether or not blanks exist for the corresponding thumbnail images according to the blank image determination unit while all the thumbnail images are stored in the memory regardless of blanks Thumbnail image generating device for digital video, characterized in that for displaying.
KR10-2002-0063868A 2002-10-18 2002-10-18 Apparatus for generating thumbnail image of digital video KR100487330B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR10-2002-0063868A KR100487330B1 (en) 2002-10-18 2002-10-18 Apparatus for generating thumbnail image of digital video

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR10-2002-0063868A KR100487330B1 (en) 2002-10-18 2002-10-18 Apparatus for generating thumbnail image of digital video

Publications (2)

Publication Number Publication Date
KR20040035128A KR20040035128A (en) 2004-04-29
KR100487330B1 true KR100487330B1 (en) 2005-05-03

Family

ID=37334093

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2002-0063868A KR100487330B1 (en) 2002-10-18 2002-10-18 Apparatus for generating thumbnail image of digital video

Country Status (1)

Country Link
KR (1) KR100487330B1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080065044A (en) * 2007-01-08 2008-07-11 삼성전자주식회사 Apparatus and method for creation thumbnail view
CN104506968B (en) * 2014-12-31 2018-08-07 北京奇艺世纪科技有限公司 A kind of video frequency abstract figure determines method and device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0870430A (en) * 1994-08-29 1996-03-12 Sony Corp Reproducing device
JPH10243323A (en) * 1997-02-28 1998-09-11 Sanyo Electric Co Ltd Scene managing device, method therefor and recording medium
US5956026A (en) * 1997-12-19 1999-09-21 Sharp Laboratories Of America, Inc. Method for hierarchical summarization and browsing of digital video
US6154771A (en) * 1998-06-01 2000-11-28 Mediastra, Inc. Real-time receipt, decompression and play of compressed streaming video/hypervideo; with thumbnail display of past scenes and with replay, hyperlinking and/or recording permissively intiated retrospectively
KR20030056784A (en) * 2001-12-28 2003-07-04 엘지전자 주식회사 Thumbnail image generating system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0870430A (en) * 1994-08-29 1996-03-12 Sony Corp Reproducing device
JPH10243323A (en) * 1997-02-28 1998-09-11 Sanyo Electric Co Ltd Scene managing device, method therefor and recording medium
US5956026A (en) * 1997-12-19 1999-09-21 Sharp Laboratories Of America, Inc. Method for hierarchical summarization and browsing of digital video
US6154771A (en) * 1998-06-01 2000-11-28 Mediastra, Inc. Real-time receipt, decompression and play of compressed streaming video/hypervideo; with thumbnail display of past scenes and with replay, hyperlinking and/or recording permissively intiated retrospectively
KR20030056784A (en) * 2001-12-28 2003-07-04 엘지전자 주식회사 Thumbnail image generating system

Also Published As

Publication number Publication date
KR20040035128A (en) 2004-04-29

Similar Documents

Publication Publication Date Title
CN108810622B (en) Video frame extraction method and device, computer readable medium and electronic equipment
US10448031B2 (en) Method of generating media file and storage medium storing media file generation program
US9576202B1 (en) Systems and methods for identifying a scene-change/non-scene-change transition between frames
US7242850B2 (en) Frame-interpolated variable-rate motion imaging system
US6989868B2 (en) Method of converting format of encoded video data and apparatus therefor
US6192183B1 (en) Video editing scheme using icons directly obtained from coded video data
JP4666784B2 (en) Video sequence key frame extraction method and video sequence key frame extraction device
JP3719933B2 (en) Hierarchical digital video summary and browsing method and apparatus
US6546189B1 (en) Method and apparatus for editing compressed moving pictures and storage medium
US8036263B2 (en) Selecting key frames from video frames
US7899260B2 (en) Method and apparatus for generating thumbnail of digital image
EP2364023B1 (en) Partial decoding method of encoded images and image processing apparatus
US7751683B1 (en) Scene change marking for thumbnail extraction
JP2012110016A (en) Digital image processing method and image representation form
JP2006254366A (en) Image processing apparatus, camera system, video system, network data system, and image processing method
JP2016082546A (en) Image processing device and image processing method
JP4573957B2 (en) Image control apparatus, image control method, and television receiver
CN111510643B (en) System and method for splicing panoramic image and close-up image
CN104243886B (en) A kind of high speed image parsing and video generation method based on plug-in part technology
US20090244305A1 (en) Video Recording System and Imaging Apparatus
US20030202110A1 (en) Arrangement of images
KR100487330B1 (en) Apparatus for generating thumbnail image of digital video
US7437007B1 (en) Region-of-interest editing of a video stream in the compressed domain
KR100487374B1 (en) Apparatus for generating thumbnail image of digital video
JP2008166895A (en) Video display device, its control method, program and recording medium

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee