KR100438302B1 - Method and device for video skimming - Google Patents

Method and device for video skimming Download PDF

Info

Publication number
KR100438302B1
KR100438302B1 KR10-2002-0023672A KR20020023672A KR100438302B1 KR 100438302 B1 KR100438302 B1 KR 100438302B1 KR 20020023672 A KR20020023672 A KR 20020023672A KR 100438302 B1 KR100438302 B1 KR 100438302B1
Authority
KR
South Korea
Prior art keywords
shot
skimming
playback
video
played
Prior art date
Application number
KR10-2002-0023672A
Other languages
Korean (ko)
Other versions
KR20030085306A (en
Inventor
전성배
윤경로
유영달
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR10-2002-0023672A priority Critical patent/KR100438302B1/en
Publication of KR20030085306A publication Critical patent/KR20030085306A/en
Application granted granted Critical
Publication of KR100438302B1 publication Critical patent/KR100438302B1/en

Links

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005Reproducing at a different information rate from the information rate of recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/107Programmed access in sequence to addressed parts of tracks of operating record carriers of operating tapes
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/3081Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is a video-frame or a video-field (P.I.P)

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Television Signal Processing For Recording (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

본 발명에 따른 비디오 스키밍 방법은, 현재의 재생 위치와 샷 세그멘테이션 정보를 참조하여, 스키밍에서 재생될 길이로 설정된 단위 재생 세그먼트 길이 정보를 기반으로 첫번째 재생할 샷을 선정하는 단계; 재생할 샷으로 선정된 샷에 대하여 정해진 부분의 정해진 분량을 재생하는 단계; 재생된 부분의 마지막 위치를 기준으로 하여, 최소한 스키밍을 위하여 설정된 시간 오프셋과 샷 인덱스를 이용하여 다음 재생 샷을 선정하되, 그 다음 재생될 샷에 속하는 세그먼트는 최소한 스키밍을 위하여 설정된 시간 오프셋 이상으로 떨어져 있으며, 스키밍에 의하여 연속적으로 재생될 두 개의 세그먼트는 각기 다른 샷에 속하는 세그먼트가 되도록 선정하는 단계; 를 구비하여, 재생 단계 및 다음 재생 샷 선정 단계가 반복적으로 수행된다.In accordance with another aspect of the present invention, there is provided a video skimming method comprising: selecting a first shot to be played based on unit playback segment length information set to a length to be played in skimming with reference to a current playback position and shot segmentation information; Reproducing a predetermined amount of a predetermined portion with respect to the shot selected as the shot to be reproduced; Based on the last position of the played part, the next playback shot is selected using at least the time offset and shot index set for skimming, and the segment belonging to the next shot to be played is dropped at least above the time offset set for skimming. Selecting two segments to be continuously reproduced by skimming to be segments belonging to different shots; In this case, the reproducing step and the next reproducing shot selection step are repeatedly performed.

또한, 본 발명에 따른 비디오 스키밍 방법의 다른 예는, 현재 재생 위치 및 샷 세그멘테이션 정보를 참조하여, 모든 개별 샷에 대하여 일정 분량의 재생을 수행하는 저속 스키밍 방법과, 현재 재생 위치, 샷 세그멘테이션 정보, 재생될 단위 세그먼트 길이, 빠른 스키밍을 위하여 지정된 시간 오프셋을 기준으로 재생될 샷을 선정하고, 선정된 샷에 대해서만 일정 분량의 재생을 수행하는 고속 스키밍 방법을 모두 제공하고, 사용자의 스키밍 방법 전환 요청에 대응하여 저속 스키밍 혹은 고속 스키밍을 선택적으로 수행하는 비디오 스키밍 방법이 제공된다.In addition, another example of a video skimming method according to the present invention includes a low speed skimming method for performing a predetermined amount of playback on all individual shots with reference to the current playback position and shot segmentation information, the current playback position, shot segmentation information, Provides all the fast skimming methods to select the shot to be played based on the unit segment length to be played and the time offset specified for quick skimming, and to perform a certain amount of playback only for the selected shots. Correspondingly, a video skimming method for selectively performing low speed skimming or high speed skimming is provided.

Description

비디오 스키밍 방법 및 장치{Method and device for video skimming}Method and device for video skimming

본 발명은 멀티미디어 검색과 브라우징을 위한 시스템으로서, 특히 비디오 스트림에 대하여 사용자가 원하는 위치로 빠르게 이동할 수 있는 비디오 스키밍 방법 및 장치에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a system for multimedia search and browsing, and more particularly, to a video skimming method and apparatus capable of quickly moving to a desired position with respect to a video stream.

오늘날, 멀티미디어 콘텐트가 방대해 짐에 따라, 사용자가 원하는 데이터를 선별하여 주는 자동화 시스템에 대한 요구가 발생되고 있으며, 이를 해결하기 위한 방안들에 대한 연구가 활발히 진행되고 있다. 바쁜 현대 사회에서 사용자는 제한된 시간 내에 비디오 콘텐트의 전체 내용을 파악하고자 하는 요구가 있다. 이러한 요구를 수용한 하나의 예로 "하이라이트"가 있다.Today, as the multimedia content is enormous, there is a demand for an automated system that selects data desired by the user, and researches on ways to solve the problem are actively conducted. In a busy modern society, users have a desire to grasp the entire contents of video content within a limited time. One example of this need is "highlights."

일반적으로 "하이라이트"는 비디오 콘텐트에서 중요한 장면을 모아 새로 구성된 하나의 물리적/논리적 콘텐트로 이해될 수 있으며, 그 예로 "스포츠 하이라이트", "영화 예고편", "헤드라인 뉴스" 등이 있다. 그러나, 비디오 콘텐트에서 하이라이트를 추출하는 것은 현재의 기술로 자동화 되기 매우 어려운 영역이다. 따라서, 대부분 사람의 수동 작업에 의존하는 것이 보통이다. 앞서 언급된 바와 같이 미디어의 양이 폭발적으로 증가함에 따라 모든 비디오 콘텐트에 대하여 하이라이트를 수동으로 제공하는 것은 많은 인력이 필요하게 되므로 거의 불가능하다. 이에 따라, 사용자로 하여금 빠른 시간 내에 대강의 내용을 이해시킬 수 있는 자동화 시스템이 필요하게 된다.In general, "highlights" can be understood as a newly formed physical / logical content by gathering important scenes from video content, such as "sports highlights", "movie trailers" and "headline news". However, extracting highlights from video content is a very difficult area to automate with current technology. Therefore, it is common to rely on the manual work of most people. As mentioned above, it is almost impossible to manually provide highlights for all video content as the amount of media explodes, which requires a lot of manpower. Accordingly, there is a need for an automated system that enables the user to quickly understand the contents of the sketch.

이러한 여건을 감안하여 제안된 것으로서 비디오 스키밍(skimming) 시스템이 있다. 여기서, 비디오 스키밍이란 비디오 콘텐트의 일정 부분을 스키핑(skipping)하고 일정 부분을 재생하는 기능을 말하며, 빠른 시간 내에 사용자의 콘텐트 이해를 돕고, 탐색에 사용되기 위한 기능을 말한다.In view of these conditions, there is a video skimming system. Here, video skimming refers to a function of skipping a portion of video content and playing a portion of the video content, to help the user understand the content in a short time, and to be used for searching.

이와 같은 비디오 스키밍 시스템의 하나로서, 사용자에게 의미있는 스키밍 기능을 제공하기 위하여, 샷 세그멘테이션(shot segmentation) 정보를 이용한 비디오 스키밍 시스템이 있다. 이러한 샷 세그멘테이션 정보를 이용한 비디오 스키밍 시스템은, 콘텐트와, 콘텐트에 대한 샷 세그멘테이션 정보를 이용하여 각 샷의 일정 부분만을 재생하고 나머지 부분은 스키핑 함으로써, 전체 콘텐트의 내용을 정상 속도의 브라우징보다 빠른 시간 내에 이해시킬 수 있는 시스템이다.As one of such video skimming systems, there is a video skimming system using shot segmentation information in order to provide a meaningful skimming function to a user. The video skimming system using the shot segmentation information reproduces only a portion of each shot using the content and the shot segmentation information of the content, and skips the remaining portions, thereby allowing the contents of the entire content to be displayed within a faster time than the normal speed browsing. It is a system that can be understood.

도 1은 종래 샷 세그멘테이션 정보를 이용한 비디오 스키밍 방법의 개념을 설명하기 위한 도면이다. 이와 같은 샷 세그멘테이션 정보를 이용한 비디오 스키밍 방법은, 도 1에 나타낸 바와 같이, 매 샷의 일정 분량을 연속적으로 재생하고, 나머지 부분은 스키핑 함으로써 사용자로 하여금 보다 빠른 시간 내에 내용을 이해할 수 있도록 함을 특징으로 한다.FIG. 1 is a diagram illustrating a concept of a video skimming method using conventional shot segmentation information. As shown in FIG. 1, the video skimming method using the shot segmentation information reproduces a predetermined amount of each shot continuously and skips the remaining portions so that the user can understand the contents in a shorter time. It is done.

그러나, 샷 세그멘테이션 정보를 이용한 비디오 스키밍 시스템은 모든 샷을 재생할 샷으로 선정하기 때문에, 요약적 내용을 압축적으로 전달하는 헤드라인 뉴스 부분 등에서는 좋은 기능이 되지만, 영화나 드라마의 대화 장면 등에서는 비슷한 장면들이 반복적으로 재생됨으로써 콘텐트 압축 기능이 매우 저하되는 단점이 있다.However, the video skimming system using shot segmentation information selects all shots as shots to be played, which is a good function in the headline news part, which delivers summary information in a compact manner, but is similar in a dialogue scene of a movie or drama. As the scenes are repeatedly played, the content compression function is very degraded.

한편, 비디오 스키밍 시스템의 다른 예로서, 비디오 콘텐트의 구조적 정보를 이용한 스키밍 시스템이 있다. 이는 보다 압축된 형태의 스키밍 기능 구현을 위하여 제안된 것으로서 비디오 콘텐트의 구조적 정보를 기반으로 구현된다. 여기서,비디오 콘텐트에 대한 구조적 정보란, 비디오 콘텐트에서 샷(Shot) 뿐만 아니라 씬(Scene)에 관한 정보가 함께 기술되고, 샷/씬 간의 관계가 함께 기술된 인덱스 정보를 지칭한다.Meanwhile, another example of a video skimming system is a skimming system using structural information of video content. This is proposed to implement a more compact type of skimming function and is implemented based on structural information of video content. Here, the structural information about the video content refers to index information in which information about a scene as well as a shot in the video content is described together, and a relationship between shots / scenes is described together.

일반적으로, 비디오는 샷들의 시퀀스(sequence)로 정의되지만, 일정 부분의 샷들은 하나의 논리적인 이야기 단위를 구성하는 요소로서 사용된다. 이때, 비디오 콘텐트 내에서 편집단위가 아닌 논리적인 이야기 단위를 씬이라 하며, 씬 구조의 검출은 비디오 콘텐트의 내용 이해라는 관점에서 매우 중요한 기술이다. 도 2는 일반적인 비디오 콘텐트의 구조적 정보의 관계를 나타낸 것이다.In general, video is defined as a sequence of shots, but portions of shots are used as elements that constitute one logical story unit. In this case, the logical story unit, not the editing unit, in the video content is called a scene, and the detection of the scene structure is a very important technology from the viewpoint of understanding the content of the video content. 2 illustrates a relationship between structural information of general video content.

이러한 비디오 콘텐트에 대한 구조적 정보를 추출하는 방법은 장르에 따라 다른 알고리즘이 이용된다. 현재까지는 뉴스 콘텐트와 영화/드라마 콘텐트에 대한 구조적 정보 추출에 관한 연구들이 보고된 바 있다. 이와 같은 구조적 정보에 기반한 비디오 스키밍 방법은, 구조적 정보 및 샷 특성을 이용하여 하나의 씬 내에서 비슷한 샷들을 재생하지 않거나, 어떤 샷은 정상 속도로 재생하고 어떤 샷은 빠른 속도로 재생하는 등의 방법을 이용하여 보다 빠른 시간 내에 전체 콘텐트에 대한 이해를 할 수 있도록 하는 것을 목표로 한다.As a method of extracting structural information about such video content, different algorithms are used according to genres. Until now, researches on structural information extraction of news content and movie / drama content have been reported. This structured video skimming method uses structural information and shot characteristics to not play similar shots in a scene, to play some shots at normal speed, and to play some shots at high speed. It aims to make it possible to understand the entire content in a faster time.

한편, 도 3은 일반적인 대화 장면 씬의 샷 전개방식의 예를 나타낸 도면이다.3 is a diagram illustrating an example of a shot deployment method of a general conversation scene.

도 3은 비디오 세그먼트에서 하나의 씬 내에 유사 세그먼트가 반복되는 특성을 설명하기 위한 것이다. 시각적 특징소(Visual Feature) 관점에서 볼 때, 도 3에서 예시된 씬은 각기 특성이 다른 4종류 샷들의 시퀀스로 분석될 수 있다. 각각의그림은 샷을 대표하기 위한 키프레임(key frame)이며, 키프레임 아래의 영문 대문자는 시각적 특징소에 따른 샷 특성을 나타낸다.3 is a diagram for describing a property in which a similar segment is repeated in one scene in a video segment. From the visual feature point of view, the scene illustrated in FIG. 3 may be analyzed as a sequence of four kinds of shots having different characteristics. Each picture is a key frame to represent a shot, and the capital letters below the key frame represent shot characteristics according to visual features.

그리고, 영화/드라마 콘텐트에서는 위와 같은 유사 세그먼트의 반복이 빈번하게 나타나며, 이는 비디오 콘텐트의 구조적 정보 추출 과정에서 검출이 가능하다. 유사 세그먼트의 반복을 이용한 스키밍 방법은 이러한 샷의 특성을 이용하며, 도 4는 이러한 유사 세그먼트의 반복을 이용한 비디오 스키밍 방법을 설명하기 위한 도면이다.In the movie / drama content, the repetition of the similar segments frequently occurs, which can be detected in the process of extracting structural information of the video content. The skimming method using the repetition of the similar segments uses the characteristics of the shot, and FIG. 4 is a view for explaining the video skimming method using the repetition of the similar segments.

이러한 유사 세그먼트의 반복을 이용한 비디오 스키밍에서는, 도 4에 나타낸 바와 같이, 비디오 콘텐트에 대한 보다 높은 수준의 요약을 위하여, 재생 세그먼트를 선정함에 있어, 먼저 재생할 샷을 선정하는 단계와, 선정된 재생할 샷에서 재생할 세그먼트를 다시 선정하는 단계로 이루어진다.In the video skimming using the repetition of the similar segments, as shown in FIG. 4, in order to select a playback segment for a higher level summarization of video content, selecting a shot to be played first, and selecting the shot to be played. Reselecting the segment to be played in the.

재생할 샷을 선정하는 단계에서는 대개 하나의 씬 내에서 반복되는 유사 샷들중 하나의 샷만 재생할 샷으로 선정하는 방법을 이용한다. 도 4에서는 유사 샷들의 반복정보를 이용하여 씬1의 총 8 개의 샷중에서 3 개의 샷만 재생할 샷으로 선정된다. 그리고, 선정된 샷 또한 샷 모두를 재생하는 것이 아니라, 샷 세그멘테이션 정보를 이용한 스키밍 방법에서와 마찬가지로 샷의 일정 부분만을 재생한다.In the step of selecting a shot to be reproduced, a method of selecting only one shot among similar shots repeated in one scene is generally used as a shot to be played. In FIG. 4, only three shots are selected from among a total of eight shots of the scene 1 using repetition information of similar shots. Also, the selected shot does not reproduce all shots, but reproduces only a predetermined portion of the shot as in the skimming method using shot segmentation information.

한편, 도 5는 뉴스 비디오에 대한 스키밍 방법의 한 예를 나타낸 것이다.5 shows an example of a skimming method for news video.

뉴스 비디오의 인덱싱은 샷 세그멘테이션의 결과인 샷의 세그먼트 정보와, 샷의 오디오 비주얼 특징소를 이용하여 앵커샷을 검출하는 것을 목표로 한다. 앵커샷은 뉴스 비디오에서 앵커가 뉴스 기사에 대한 요약 정보를 제공하는 샷이며, 에피소드샷은 기자들이 취재해온 상세 뉴스 설명을 위한 샷을 의미한다. 앵커샷들이 검출되면 뉴스 비디오는 뉴스기사 단위로 분석된다. 뉴스 비디오 스키밍은 앵커샷과 에피소드샷에 대하여 각기 다른 재생 방법을 적용하거나, 각기 다른 재생 세그먼트 선정 방법을 이용하여 구현된다. 도 5에서는 앵커샷은 정상속도로 재생하고 에피소드샷은 빠른 속도로 재생하는 스키밍 방법을 예시한 것이다.Indexing news videos aims to detect anchor shots using segment information of shots that are the result of shot segmentation and audio visual features of the shots. The anchor shot is a shot in which the anchor provides a summary of the news article in the news video, and the episode shot is a shot for explaining the detailed news that reporters have reported. If anchor shots are detected, the news video is analyzed in news articles. News video skimming is implemented by using different playback methods for anchor shots and episode shots, or by using different playback segment selection methods. 5 illustrates an example of a skimming method in which anchor shots are played at a normal speed and episode shots are played at a high speed.

또한, 이와는 다른 방법으로서, 앵커샷은 꼭 재생할 샷으로 선정하며, 에피소드샷 중에서는 제한된 몇 개의 샷만을 재생할 샷으로 선정하고, 그 재생할 샷으로 선정된 샷의 일정 부분만을 연속적으로 재생하게 함으로써, 뉴스 비디오 스키밍 기능을 제공할 수도 있다.Also, as another method, anchor shots are selected as shots to be played, only a limited number of shots are selected as shots to be played, and only a portion of shots selected as the shots to be played are continuously played. It can also provide video skimming.

그런데, 상기에서 설명한 바와 같이, 구조적 정보를 이용하여 비디오 스키밍을 수행하기 위해서는, 먼저 비디오 콘텐트에 대한 구조적 정보가 추출되어야만 한다. 또한, 상기한 바와 같이, 구조적 정보의 추출은 몇몇 장르에서는 가능하지만, 다른 장르에서는 아직 기술적 진척이 미미한 상태이며, 씬 정보를 추출하는 것은 샷 세그멘테이션 정보만을 추출하는 시스템보다 높은 비용을 요구하게 되는 문제점이 있다.However, as described above, in order to perform video skimming using structural information, structural information about video content must be extracted first. In addition, as described above, the extraction of structural information is possible in some genres, but the technical progress is still insignificant in other genres, and extracting scene information requires a higher cost than a system for extracting only shot segmentation information. There is this.

그리고, 근래에는 사용자가 수신되는 동영상 스트림을 기록하고, 그 기록된 동영상 스트림을 재생시키는 동영상 스트림 기록/재생 장치 예컨대, PVR(Personal Video Recorder)에 대한 개발이 진행되고 있다. 또한, 이러한 동영상 스트림 기록/재생 장치에 비선형적 비디오 브라우징 방법을 제공하기 위한 연구들이 활발하게 진행되고 있다.Recently, development of a video stream recording / reproducing apparatus such as a personal video recorder (PVR) for recording a video stream received by a user and playing the recorded video stream has been developed. In addition, studies are being actively conducted to provide a nonlinear video browsing method for such a video stream recording / reproducing apparatus.

한편, 사용자는 이와 같은 동영상 스트림 기록/재생 장치를 이용하여, 모든 비디오 콘텐트의 장르에 관계없이, 비디오 스키밍이 구현될 수 있기를 요구하고 있는 상황이다.On the other hand, a user is demanding that video skimming can be implemented regardless of the genre of all video contents by using such a video stream recording / reproducing apparatus.

본 발명은, 비디오 장르에 관계없이 적용될 수 있는 샷 세그멘테이션 정보와 시간 오프셋 정보를 이용하여 짧은 시간 내에 전체 비디오의 내용을 이해하며, 모든 개별 샷을 재생할 샷으로 선정하지 않고, 또한 선정된 샷의 일부분을 재생함으로써, 사용자가 원하는 위치로 빠르게 이동할 수 있는 비디오 스키밍 방법 및 장치를 제공함에 그 목적이 있다.The present invention understands the contents of the entire video in a short time by using shot segmentation information and time offset information that can be applied regardless of the video genre, and does not select all the individual shots as a shot to be reproduced, and also selects a part of the selected shot. It is an object of the present invention to provide a video skimming method and apparatus that can quickly move to a desired position by playing the.

또한 본 발명은, 사용자의 선택에 따라 저속 스키밍과 고속 스키밍의 전환이 가능하도록 구현되며, 사용자의 요구에 따라 저속 스키밍과 고속 스키밍의 토글 전환 기능이 제공될 수 있는 비디오 스키밍 방법 및 장치를 제공함에 다른 목적이 있다.In addition, the present invention is implemented to enable the switching of the low speed skimming and high speed skimming according to the user's selection, and provides a video skimming method and apparatus that can be provided with a toggle switching function of the low speed skimming and high speed skimming according to the user's needs There is another purpose.

도 1은 종래 샷 세그멘테이션 정보를 이용한 비디오 스키밍 방법의 개념을 설명하기 위한 도면.1 is a diagram illustrating a concept of a video skimming method using conventional shot segmentation information.

도 2는 일반적인 비디오 콘텐트의 구조적 정보의 관계를 설명하기 위한 도면.2 is a diagram for explaining a relationship between structural information of general video content.

도 3은 일반적인 대화 장면 씬의 샷 전개방식 예를 나타낸 도면.3 is a diagram illustrating an example of a shot deployment method of a general conversation scene.

도 4는 종래의 유사 세그먼트 반복을 이용한 비디오 스키밍 방법을 설명하기 위한 도면.4 is a view for explaining a video skimming method using a conventional similar segment repetition.

도 5는 종래의 뉴스 비디오에 대한 스키밍 방법의 한 예를 설명하기 위한 도면.5 is a view for explaining an example of a skimming method for a conventional news video.

도 6은 본 발명에 따른 비디오 스키밍 방법에 의하여, 샷 세그멘테이션 정보 및 시간 오프셋을 이용한 스키밍 방법을 설명하기 위한 도면.6 is a diagram illustrating a skimming method using shot segmentation information and a time offset by a video skimming method according to the present invention.

도 7은 본 발명에 따른 비디오 스키밍 장치의 구성을 개략적으로 나타낸 블록도.7 is a block diagram schematically showing the configuration of a video skimming device according to the present invention.

상기의 목적을 달성하기 위하여 본 발명에 따른 비디오 스키밍 방법은, 현재의 재생 위치와 샷 세그멘테이션 정보를 참조하여, 스키밍에서 재생될 길이로 설정된 단위 재생 세그먼트 길이(LS) 정보를 기반으로 첫번째 재생할 샷을 선정하는 단계; 상기 재생할 샷으로 선정된 샷에 대하여 정해진 부분의 정해진 분량을 재생하는 단계; 상기 재생된 부분의 마지막 위치를 기준으로 하여, 최소한 스키밍을 위하여 설정된 시간 오프셋(OS)과 샷 인덱스를 이용하여 다음 재생 샷을 선정하되, 그 다음 재생될 샷에 속하는 세그먼트는 상기 최소한 스키밍을 위하여 설정된 시간 오프셋(OS) 이상으로 떨어져 있으며, 스키밍에 의하여 연속적으로 재생될 두 개의 세그먼트는 각기 다른 샷에 속하는 세그먼트가 되도록 선정하는 단계; 를 구비하여, 상기 재생 단계 및 다음 재생 샷 선정 단계가 반복적으로 수행되는 점에 그 특징이 있다.In order to achieve the above object, the video skimming method according to the present invention includes a first playback shot based on unit playback segment length L S set to a length to be played in skimming with reference to the current playback position and shot segmentation information. Selecting a step; Reproducing a predetermined amount of a predetermined portion with respect to the shot selected as the shot to be reproduced; On the basis of the last position of the reproduced portion, at least the next playback shot is selected using a time offset (O S ) and a shot index set for skimming, and the segment belonging to the next shot to be reproduced is configured for the at least skimming. the method comprising selecting and off more than a set time offset (O S), the two segments be continuously reproduced by skimming is so that segments belonging to different shot; It is characterized in that the playback step and the next playback shot selection step is performed repeatedly.

여기서, 상기 첫번째 재생할 샷을 선정하는 단계에 있어, 현재 재생 위치로부터 현재 재생 위치가 포함된 샷의 종료 위치까지의 길이가, 스키밍에서 재생될 길이로 설정된 단위 재생 세그먼트 길이(LS)보다 긴 경우에는, 현재 재생 위치가 속한 샷을 첫번째 재생할 샷으로 선정하는 점에 그 특징이 있다.In the step of selecting the first shot to be reproduced, when the length from the current playback position to the end position of the shot including the current playback position is longer than the unit playback segment length L S set as the length to be played in skimming. The feature is that the shot to which the current playback position belongs is selected as the first playback shot.

또한, 상기 첫번째 재생할 샷을 선정하는 단계에 있어, 현재 재생 위치가 포함된 샷의 다음 샷을 첫번째 재생할 샷으로 선정하는 점에 그 특징이 있다.In addition, in the step of selecting the first shot to be reproduced, the feature is that the next shot of the shot including the current playback position is selected as the first shot to be played.

또한, 상기 선정된 샷을 재생하는 단계에 있어, 재생할 샷으로 선정된 샷의 길이가 상기 단위 재생 세그먼트 길이(LS)보다 크면 해당 샷 전반부의 LS또는 후반부의 LS분량의 세그먼트를 재생하고, 해당 샷의 길이가 단위 재생 세그먼트 길이 (LS)보다 크지 않으면 해당 샷 전체를 재생하는 점에 그 특징이 있다.Further, in the step of reproducing the selected shot, the length of the shots selected for shot played and reproducing the unit reproduction segment length (L S) is greater than the shot L S or the second half segment of the L S amount of the first part When the shot length is not greater than the unit playback segment length L S , the shot is played back.

또한, 상기 다음 재생 샷을 선정하는 단계에 있어, 상기 재생 단계에서 재생된 부분의 마지막 위치를 기준으로 하여, 이전에 재생된 단위 재생 세그먼트의 마지막 위치에 시간 오프셋(OS)을 더한 위치를 구하고, 상기 구해진 해당 위치가 속한 샷 또는 그 다음 샷을 다음 재생 샷으로 선정하는 점에 그 특징이 있다.In the step of selecting the next playback shot, a position obtained by adding a time offset (O S ) to the last position of a previously played unit playback segment based on the last position of the portion played back in the playback step, It is characterized in that the shot to which the corresponding position obtained or the next shot is selected as the next playback shot.

또한, 상기 재생 단계에서 재생된 부분의 마지막 위치를 기준으로 하여, 이전에 재생된 단위 재생 세그먼트의 마지막 위치에 시간 오프셋(OS)을 더하여 구해진 위치가 이전에 재생된 세그먼트가 속한 샷과 동일한 샷인 경우에는, 상기 구해진 위치가 속한 해당 샷의 다음 샷을 다음 재생 샷으로 선정하는 점에 그 특징이 있다.Also, on the basis of the last position of the portion reproduced in the reproducing step, the position obtained by adding the time offset (O S ) to the last position of the previously reproduced unit reproduction segment is the same shot as the shot to which the previously reproduced segment belongs. In this case, it is characterized in that the next shot of the shot to which the obtained position belongs is selected as the next playback shot.

또한, 상기의 다른 목적을 달성하기 위하여 본 발명에 따른 비디오 스키밍 방법은, 현재 재생 위치 및 샷 세그멘테이션 정보를 참조하여, 모든 개별 샷에 대하여 일정 분량의 재생을 수행하는 저속 스키밍 방법과; 현재 재생 위치, 샷 세그멘테이션 정보, 재생될 단위 세그먼트 길이, 빠른 스키밍을 위하여 지정된 시간 오프셋을 기준으로 재생될 샷을 선정하고, 선정된 샷에 대해서만 일정 분량의 재생을 수행하는 고속 스키밍 방법을 모두 제공하고, 사용자의 스키밍 방법 전환 요청에 대응하여 상기 저속 스키밍 방법 혹은 상기 고속 스키밍 방법을 선택적으로 수행하는 점에 그 특징이 있다.In addition, the video skimming method according to the present invention in order to achieve the above another object, the low-speed skimming method for performing a certain amount of playback for all the individual shots, with reference to the current playback position and shot segmentation information; It provides a fast skimming method that selects shots to be played based on the current playback position, shot segmentation information, unit segment length to be played, and a specified time offset for fast skimming, and performs a certain amount of playback only on the selected shots. In addition, the low speed skimming method or the high speed skimming method is selectively performed in response to a user's request for switching the skimming method.

여기서, 상기 저속 스키밍 방법은, 샷 세그멘테이션 정보로부터 개별 샷의 구간을 인식하는 단계, 상기 인식된 개별 샷 구간 내에서 특정한 일부분을 해당 샷에 대한 내용을 반영하는 재생 영역으로 선정하는 단계, 각각의 개별 샷마다 선정된 재생 영역을 연속시켜 재생하는 단계를 포함하는 점에 그 특징이 있다.Here, the low-speed skimming method, the step of recognizing the section of the individual shot from the shot segmentation information, selecting a specific portion in the recognized individual shot section as the playback area reflecting the content of the shot, each individual It is characterized in that it comprises the step of continuously playing back the selected playback area for each shot.

또한, 상기 각각의 샷 구간 내에서 재생할 부분의 선정은 해당 샷의 전반부, 후반부, 중간부분, 전반부와 후반부를 동시에 사용하는 점에 그 특징이 있다.In addition, the selection of the portion to be reproduced in each shot section is characterized in that the first half, the second half, the middle, the first half and the second half of the shot are used simultaneously.

또한, 상기의 목적을 달성하기 위하여 본 발명에 따른 비디오 스키밍 장치는,In addition, the video skimming device according to the present invention in order to achieve the above object,

디지털 비디오 데이터의 검색과 브라우징을 수행하기 위하여, 비디오 스키밍을 위한 사용자 명령이 입력되는 사용자 인터페이스 수단과;User interface means for inputting user commands for video skimming to perform retrieval and browsing of digital video data;

상기 사용자 인터페이스 수단을 통하여 입력된 사용자 명령에 따라, 해당 비디오 스트림에 대한 샷 인덱스 정보와 시간 오프셋 정보를 이용하여 재생할 세그먼트를 선정하여 비디오 스키밍을 처리하는 제어수단과;Control means for processing video skimming by selecting a segment to be reproduced using shot index information and time offset information of a corresponding video stream according to a user command input through the user interface means;

상기 제어수단의 요청에 대하여, 해당 비디오 스트림의 저장 정보 및 샷 인덱스 정보를 제공하기 위한 인덱스 저장부와;An index storage for providing storage information and shot index information of a corresponding video stream in response to a request of the control means;

상기 제어수단의 요청에 대하여, 비디오 스트림을 제공하기 위한 미디어 저장부; 및A media storage for providing a video stream in response to a request of the control means; And

상기 제어수단에 의하여 스키밍 처리된 비디오 스트림이 재생되는 디스플레이 수단; 을 포함하는 점에 그 특징이 있다.Display means for reproducing the video stream skimmed by the control means; Its features are to include.

여기서, 상기 샷 인덱스 정보는 비디오 스트림에 대한 샷 세그멘테이션 정보를 포함하는 점에 그 특징이 있다.Here, the shot index information is characterized in that it includes shot segmentation information for the video stream.

또한 상기 제어수단은, 사용자로부터 입력되는 신호로부터 스키밍 요청 여부를 판단하는 주제어부와; 상기 주제어부로부터 스키밍 수행 명령을 전송받고, 선정된 재생 세그먼트 정보를 참조하여 비디오 스키밍을 수행하는 재생 제어부; 및 상기 재생 제어부로부터 재생할 세그먼트 정보 제공을 요청받고, 샷 인덱스 정보와, 상기 재생 제어부로부터 전달된 비디오 스트림의 현재 재생 위치 및 시간 오프셋 정보를 참조하여 재생할 세그먼트 정보를 획득하여 상기 재생 제어부에 제공하는 비선형 비디오 브라우징 제어부; 를 포함하는 점에 그 특징이 있다.The control unit may include a main control unit that determines whether a skimming request is made from a signal input from a user; A playback controller for receiving a skimming command from the main controller and performing video skimming with reference to the selected play segment information; And requesting to provide segment information to be played back from the playback controller, and obtaining segment information to be played back with reference to shot index information and current playback position and time offset information of the video stream transmitted from the playback controller to provide the playback information to the playback controller. A video browsing control unit; Its features are to include.

또한 상기 사용자 인터페이스 수단은, 비디오 스키밍의 정도로서, 현재 재생 위치 및 샷 인덱스 정보를 참조하여, 모든 개별 샷에 대하여 일정 분량의 재생을 수행하는 저속 스키밍과; 현재 재생 위치, 샷 인덱스 정보, 빠른 스키밍을 위하여 지정된 시간 오프셋을 기준으로 재생될 샷을 선정하고, 선정된 샷에 대해서만 일정 분량의 재생을 수행하는 고속 스키밍;을 선택할 수 있도록 토글 기능이 구비된 수단을 포함하는 점에 그 특징이 있다.The user interface means may also include: low speed skimming as a degree of video skimming, which performs a certain amount of playback for all individual shots with reference to the current playback position and shot index information; Means for selecting a shot to be played based on a current playback position, shot index information, and a specified time offset for fast skimming, and fast skimming for performing a predetermined amount of playback only on the selected shot; Its features are to include.

이와 같은 본 발명에 의하면, 짧은 시간 내에 비디오 스트림 전체의 내용을 파악할 수 있으며, 전체의 내용을 파악함에 있어서 중요한 부분을 놓치지 않고 지루한 부분을 간단히 지나갈 수 있으며, 모든 장르에 적용이 가능하다는 장점이 있다.According to the present invention, it is possible to grasp the contents of the entire video stream within a short time, to easily pass a boring part without missing an important part in grasping the entire contents, and to be applicable to all genres. .

또한, 이와 같은 본 발명에 의하면, 사용자는 자신이 빠른 스키밍 기능을 요구하는 콘텐트와 구간에 대해서는 고속 스키밍을 요구하고, 느린 스키밍을 요구하는 콘텐트와 구간에 대해서는 저속 스키밍을 요구함으로써, 사용자 선택의 폭이 넓어지게 되는 장점이 있다.In addition, according to the present invention, the user requires fast skimming for content and sections requiring fast skimming, and low speed skimming for content and sections requiring slow skimming, thereby providing a wide range of user selection. This has the advantage of being widened.

또한, 이와 같은 본 발명에 의하면, 사용자는 시간 오프셋과 단위 재생 길이를 지정함으로써, 빠른 스키밍의 배속을 자유롭게 결정할 수 있으며, 따라서 전체브라우징 시간을 사용자가 대략적으로 예측할 수 있는 장점이 있다.In addition, according to the present invention, by specifying the time offset and the unit playback length, the user can freely determine the speed of fast skimming, and thus there is an advantage that the user can roughly predict the total browsing time.

이하, 첨부된 도면을 참조하여 본 발명에 따른 실시 예를 상세히 설명한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 6은 본 발명에 따른 비디오 스키밍 방법에 의하여, 샷 세그멘테이션 정보 및 시간 오프셋을 이용한 스키밍 방법을 설명하기 위한 도면이다. 그러면, 도 6을 참조하여 본 발명에 따른 비디오 스키밍 방법에 대하여 설명해 보기로 한다.FIG. 6 is a diagram for describing a skimming method using shot segmentation information and a time offset by a video skimming method according to the present invention. Next, a video skimming method according to the present invention will be described with reference to FIG. 6.

본 발명에 따른 비디오 스키밍 방법은 비디오 콘텐트에 대한 샷 세그멘테이션 정보와 시간 오프셋(OS)을 이용함을 특징으로 한다. 기존의 샷 세그멘테이션 정보를 이용한 스키밍 방법과는 달리, 본 발명에 따른 비디오 스키밍 방법은 모든 샷을 재생할 샷으로 선정하지 않고, 시간 오프셋(OS)에 기반하여 재생할 샷을 선정한다. 또한, 본 발명에 따른 비디오 스키밍 방법에서는, 재생되는 단위 세그먼트의 길이(LS)를 설정하여 사용하며, 이는 하나의 샷에서 재생될 최대 세그먼트의 길이를 나타낸다.Video skimming process according to the invention is characterized by utilizing the shot segmentation information of the video content and the time offset (O S). Unlike the skimming method using the conventional shot segmentation information, the video skimming method according to the present invention selects the shot to be played based on the time offset (O S ) rather than selecting all shots as the shot to be played. In addition, in the video skimming method according to the present invention, the length L S of the unit segment to be played is set and used, which indicates the length of the maximum segment to be played in one shot.

먼저, 사용자로부터 비디오 스키밍이 요청되면, 현재의 재생 위치와 샷 인덱스 정보를 고려하여, 스키밍에서 재생될 단위 세그먼트의 길이(LS) 정보를 기반으로 하여 첫번째 재생할 샷을 선정한다.First, when video skimming is requested from the user, the first shot to be played is selected based on the length L S information of the unit segment to be played in skimming, in consideration of the current playback position and shot index information.

그리고, 첫번째 재생할 샷으로 선정된 샷의 정해진 부분(전반부 또는 후반부)의 정해진 분량(개별 샷에 대하여 최대 LS)을 재생한다. 이후, 상기 재생된 부분의 마지막 위치를 기준으로 하여, 다음 재생될 샷에 속하는 세그먼트는 최소한 스키밍을 위하여 설정된 시간 오프셋(OS) 이상으로 떨어져 있으며, 스키밍에 의하여 연속적으로 재생될 두 개의 세그먼트는 각기 다른 샷에 속하는 세그먼트가 되도록 다음 재생 샷을 선정한다.Then, a predetermined amount (maximum L S for individual shots) of a predetermined portion (first half or second half) of the shot selected as the first shot to be reproduced is reproduced. Subsequently, based on the last position of the reproduced portion, the segments belonging to the next shot to be reproduced are separated by at least a time offset (O S ) set for skimming, and the two segments to be continuously reproduced by skimming are respectively The next playback shot is selected to be a segment belonging to another shot.

여기서, 사용자의 정지나 다른 요구에 의해 동작을 정지하거나 재생이 종료된 경우를 제외하고는, 상기 선정된 샷에 대한 재생 단계 및 다음 재생 샷을 선정하는 단계는 반복적으로 수행된다. 이에 따라, 비디오 콘텐트를 정상 재생 방식에 의해 재생하지 않고, 일정 세그먼트들만을 재생함으로써 전체 비디오 콘텐트에 대한 요약을 제공할 수 있게 된다.Here, except for the case where the operation is stopped or the reproduction is terminated by the user's stop or other request, the reproduction step for the selected shot and the step of selecting the next reproduction shot are repeatedly performed. Accordingly, it is possible to provide a summary of the entire video content by playing back only certain segments without playing back the video content by the normal playback method.

본 발명에 따른 비디오 스키밍 방법에 있어서는, 연속적으로 재생될 세그먼트들은 각기 다른 샷에 존재하는 세그먼트가 되도록 한다. 이를 위한 조건으로는 다양한 방안이 제안될 수 있으며, 여기서는 몇 가지 기본적인 방안에 대하여 살펴보도록 한다. 또한, 여기서는 순방향 스키밍을 예로 설명하지만, 역방향 스키밍에 대해서도 유사하게 적용될 수 있음은 자명하다 할 것이다.In the video skimming method according to the present invention, the segments to be continuously played are made to be segments existing in different shots. As a condition for this, various methods can be proposed. Here, some basic methods will be described. In addition, although forward skimming is described here as an example, it will be obvious that the same applies to reverse skimming.

먼저, 첫번째 재생될 샷을 선정하는 과정에 대하여 살펴 보기로 한다. 여기서, 순방향 스키밍의 경우에는 현재 재생중인 샷 또는 다음 샷을 첫번째 재생할 샷으로 선정할 수 있다. 이는, 시스템의 구현 방식에 따라 적절하게 선택되어질 수 있는 것이며(즉 시스템에 따라, 무조건적으로 현재 재생중인 샷 또는 다음 샷이 선택되도록 설정될 수 있다), 또한 비교조건을 부가함으로써, 조건에 따라 현재 재생중인 샷 또는 다음 샷을 첫번째 재생할 샷으로 선정할 수도 있다.First, the process of selecting the first shot to be played will be described. Here, in the case of forward skimming, the current shot or the next shot may be selected as the first shot. This may be appropriately selected according to the implementation manner of the system (that is, depending on the system, it may be set so that the currently playing shot or the next shot is unconditionally selected), and also by adding a comparison condition, The shot being played or the next shot may be selected as the first shot to be played.

이러한 비교조건의 하나로서, 설정된 단위 재생 세그먼트의 길이(LS)를 이용하여 재생할 샷을 선정할 수도 있다. 예컨대, 현재 재생 위치로부터 현재 재생 위치가 포함된 샷의 종료 위치까지의 길이가, 스키밍에서 재생될 길이로 설정된 단위 재생 세그먼트 길이(LS)보다 긴 경우에는, 현재 재생 위치가 속한 샷을 첫번째 재생할 샷으로 선정하도록 할 수 있다. 그리고, 현재 재생 위치로부터 현재 재생 위치가 포함된 샷의 종료 위치까지의 길이가, 스키밍에서 재생될 길이로 설정된 단위 재생 세그먼트 길이(LS)보다 길지 않은 경우에는, 현재 재생 위치가 속한 샷의 다음 샷을 첫번째 재생할 샷으로 선정하도록 할 수도 있다.As one of such comparison conditions, the shot to be reproduced may be selected using the set length L S of the unit playback segment. For example, when the length from the current playback position to the end position of the shot including the current playback position is longer than the unit playback segment length L S set as the length to be played in skimming, the first shot to which the current playback position belongs is played back. You can choose to shot. If the length from the current playback position to the end position of the shot including the current playback position is not longer than the unit playback segment length L S set as the length to be played back in skimming, the next shot after the current playback position belongs. It is also possible to select a shot as the first shot to be played.

한편, 상기 재생할 샷으로 선정된 샷을 재생함에 있어서도, 재생할 샷의 길이가 상기 단위 재생 세그먼트 길이(LS)보다 크면 해당 샷 전반부의 LS또는 후반부의 LS분량의 세그먼트를 재생하고, 상기 선정된 샷의 길이가 단위 재생 세그먼트 길이(LS)보다 크지 않으면 해당 샷 전체를 재생하도록 시스템을 설계할 수도 있다.On the other hand, even in reproducing the shots selected for the play shots, play back, and the length of the shot reproduction to L S, or the second half segment of the L S amount of the unit playback segment length is greater the shot than (L S) the first part, the selection of If the length of the shot is not greater than the unit playback segment length L S , the system may be designed to play the entire shot.

그리고, 다음 재생 샷을 선정함에 있어서는, 상기 재생 단계에서 재생된 부분의 마지막 위치를 기준으로 하여, 이전에 재생된 단위 재생 세그먼트의 마지막 위치에 시간 오프셋(OS)을 더한 위치를 구하고, 상기 구해진 해당 위치가 속한 샷 또는 그 다음 샷을 다음 재생 샷으로 선정할 수 있다.In selecting the next playback shot, the position obtained by adding the time offset O S to the last position of the previously played unit playback segment is obtained based on the last position of the portion played back in the playback step. The shot to which the position belongs or the next shot may be selected as the next playback shot.

이때, 상기 재생 단계에서 재생된 부분의 마지막 위치를 기준으로 하여, 이전에 재생된 단위 재생 세그먼트의 마지막 위치에 시간 오프셋(OS)을 더하여 구해진위치가 이전에 재생된 세그먼트가 속한 샷과 동일한 샷인 경우에는, 상기 구해진 위치가 속한 해당 샷의 다음 샷을 다음 재생 샷으로 선정하도록 함으로써, 동일한 샷에서 두번이상 중복적으로 세그먼트를 재생하는 것을 방지할 수 있게 된다.At this time, the position obtained by adding the time offset (O S ) to the last position of the previously played unit playback segment on the basis of the last position of the portion played back in the playback step is the same shot as the shot to which the previously played segment belongs. In this case, by selecting the next shot of the shot to which the obtained position belongs as the next playback shot, it is possible to prevent the segment from being reproduced more than once in the same shot.

또한, 다음 재생 샷을 선정하는 단계에 있어서도, 비교조건을 부가함으로써, 상기 재생 단계에서 재생된 부분의 마지막 위치를 기준으로 하여, 이전에 재생된 단위 재생 세그먼트의 마지막 위치에 시간 오프셋(OS)을 더한 위치를 구하고, 조건에 따라 상기 구해진 해당 위치가 속한 샷 또는 그 다음 샷을 다음 재생 샷으로 선정할 수도 있다.Also in the step of selecting the next playback shot, by adding a comparison condition, the time offset O S at the last position of the previously played unit playback segment on the basis of the last position of the portion played back in the playback step. The position to which the position is added may be obtained, and a shot or a next shot to which the corresponding position is obtained may be selected as the next playback shot according to a condition.

이러한 비교조건의 하나로서, 설정된 단위 재생 세그먼트의 길이(LS)를 이용하여 재생할 샷을 선정할 수도 있다. 예컨대, 구해진 해당 위치로부터 해당 위치가 포함된 샷의 종료 위치까지의 길이가, 스키밍에서 재생될 길이로 설정된 단위 재생 세그먼트 길이(LS)보다 긴 경우에는, 구해진 해당 위치가 속한 샷을 다음 재생할 샷으로 선정하도록 할 수 있다. 그리고, 구해진 해당 위치로부터 해당 위치가 포함된 샷의 종료 위치까지의 길이가, 스키밍에서 재생될 길이로 설정된 단위 재생 세그먼트 길이(LS)보다 길지 않은 경우에는, 구해진 해당 위치가 속한 샷의 다음 샷을 다음 재생할 샷으로 선정하도록 할 수도 있다.As one of such comparison conditions, the shot to be reproduced may be selected using the set length L S of the unit playback segment. For example, when the length from the obtained position to the end position of the shot including the position is longer than the unit playback segment length L S set as the length to be played in skimming, the shot to which the obtained position belongs is played next. Can be selected. If the length from the obtained position to the end position of the shot including the position is not longer than the unit playback segment length L S set as the length to be played in the skimming, the next shot of the shot to which the corresponding position belongs is obtained. Can also be selected as the next shot to play.

이와 같은 비디오 스키밍 방식을 이용하면, 샷 세그먼트 정보만을 이용한 기존의 스키밍 방법과는 달리 매우 빠른 스키밍 기능을 제공할 수 있게 된다. 또한, 비디오 콘텐트의 구조적 정보를 추출하기 위한 비디오 클러스터링(clustering) 엔진을 요구하지 않게 됨으로써, 보다 저렴한 가격에 빠른 스키밍을 제공할 수 있는 장점이 있다.Using such a video skimming method, unlike a conventional skimming method using only shot segment information, a very fast skimming function can be provided. In addition, since it does not require a video clustering engine for extracting structural information of video content, there is an advantage that can provide fast skimming at a lower price.

또한, 이와 같은 방식의 빠른 스키밍에서는, 짧은 샷 세그먼트들은 대부분 스키핑되는 특성이 나타나게 되는데, 비디오의 장르 특성에 따라 다르긴 하지만, 내용을 전달하기 위한 대부분의 중요한 세그먼트들은 다른 세그먼트들에 비하여 긴 특성이 있으므로, 이런 중요 세그먼트들은 재생에 포함되므로 내용에 대한 이해는 충분하게 전달될 수 있다.In addition, in this type of fast skimming, short shot segments are mostly skipped, although most of the important segments for delivering content are longer than other segments. However, these important segments are included in the playback so that the understanding of the contents can be sufficiently delivered.

또한, 이와 같은 비디오 스키밍 방법에 의하면, 사용자가 대략적으로 재생 배속을 예측할 수 있게 된다. 예를 들어 시간 오프셋(OS)이 20초로 설정되어 있고, 단위 재생 세그먼트 길이(LS)가 2초로 설정되어 있는 경우에는, 사용자는 대략 10배속 이상으로 콘텐트를 요약해서 브라우징할 수 있게 되는 것이다. 이와 같이, 시간 오프셋(OS)과 단위 재생 세그먼트 길이(LS)를 사용자가 설정할 수 있도록 함으로써, 사용자가 비디오 스키밍의 브라우징 속도 및 요약 정도를 선택할 수 있도록 할 수 있다.In addition, according to the video skimming method, the user can approximately estimate the reproduction speed. For example, when the time offset (O S ) is set to 20 seconds and the unit playback segment length (L S ) is set to 2 seconds, the user can browse and summarize the content at approximately 10 times or more. . In this way, by allowing the user to set the time offset (O S) and a unit of playback segment length (L S), it is possible to allow the user to select the browse speed and summary level of the video skimming.

한편, 상기에서 설명된 본 발명에 의한 고속 비디오 스키밍 방법과, 샷 세그멘테이션 정보를 이용하여 모든 샷에 대한 재생을 수행하는 종래의 저속 비디오 스키밍 방법을 혼용함으로써, 사용자에게 또 다른 기능을 제공할 수 있게 된다.On the other hand, by using the high speed video skimming method according to the present invention described above and the conventional low speed video skimming method which performs playback for all shots using shot segmentation information, it is possible to provide another function to the user. do.

즉, 현재 재생 위치 및 샷 세그멘테이션 정보를 참조하여, 모든 개별 샷에 대하여 일정 분량의 재생을 수행하는 저속 스키밍 방법과; 현재 재생 위치, 샷 세그멘테이션 정보, 재생될 단위 세그먼트 길이, 빠른 스키밍을 위하여 지정된 시간 오프셋을 기준으로 재생될 샷을 선정하고, 선정된 샷에 대해서만 일정 분량의 재생을 수행하는 고속 스키밍 방법을 모두 제공하고, 사용자의 스키밍 방법 전환 요청에 따라서 상기 저속 스키밍 방법 혹은 상기 고속 스키밍 방법이 선택적으로 수행되도록 스키밍 시스템을 구현할 수도 있다.That is, a low speed skimming method for performing a predetermined amount of playback for all the individual shots with reference to the current playback position and shot segmentation information; It provides a fast skimming method that selects shots to be played based on the current playback position, shot segmentation information, unit segment length to be played, and a specified time offset for fast skimming, and performs a certain amount of playback only on the selected shots. In addition, the skimming system may be implemented such that the low speed skimming method or the high speed skimming method is selectively performed according to a skimming method switching request of the user.

여기서, 상기 저속 스키밍 방법이란, 샷 세그멘테이션 정보로부터 개별 샷의 구간을 인식하는 단계, 상기 인식된 개별 샷 구간 내에서 특정한 일부분을 해당 샷에 대한 내용을 반영하는 재생 영역으로 선정하는 단계, 각각의 개별 샷마다 선정된 재생 영역을 연속시켜 재생하는 단계를 포함하여 구현되는 것을 말한다.Here, the low-speed skimming method includes the steps of recognizing the section of the individual shot from the shot segmentation information, selecting a specific portion within the recognized individual shot section as the playback area reflecting the content of the shot, each individual It means to implement, including the step of continuously playing the selected playback area for each shot.

또한, 상기 각각의 샷 구간 내에서 재생할 부분의 선정은 해당 샷의 전반부, 후반부, 전반부와 후반부를 동시에 사용할 수도 있으며, 이는 시스템의 구현 방식에 따라 적절하게 선택되도록 할 수 있다.In addition, the selection of the portion to be reproduced in each shot section may use the first half, the second half, the first half, and the second half of the shot at the same time, which may be appropriately selected according to the implementation method of the system.

그리고, 이와 같이 사용자의 선택에 따라서 스키밍 속도를 조절할 수 있게 됨으로써, 사용자는 자신의 취향과 콘텐트 특성에 맞는 스키밍(저속 스키밍 또는 고속 스키밍)을 시스템에 요구할 수 있게 되므로, 전체 비용은 그대로 유지되면서 사용자 만족도를 향상시킬 수 있게 된다.In this way, the skimming speed can be adjusted according to the user's selection, so that the user can request the skimming (low speed skimming or high speed skimming) according to his or her taste and content characteristics. Satisfaction can be improved.

또한, 이와 같은 고속 스키밍과 저속 스키밍의 전환이 가능한 비디오 스키밍 방법은, 비디오 콘텐트의 샷 특성을 고려하여 자동으로 고속 스키밍과 저속 스키밍 간의 전환이 이루어지는 지능적인 스키밍 시스템을 구현하는데 활용될 수도 있을 것이다.In addition, the video skimming method capable of switching between high speed skimming and low speed skimming may be utilized to implement an intelligent skimming system that automatically switches between high speed skimming and low speed skimming in consideration of shot characteristics of video content.

한편, 도 7은 본 발명에 따른 고속 스키밍 기능을 제공하기 위한 녹화/인덱싱/시청/비선형적 브라우징이 가능한 비디오 스키밍 장치의 구성을 개략적으로 나타낸 블록도이다. 그러면, 이를 참조하여 본 발명에 따른 비디오 스키밍 장치의 동작에 대하여 간략하게 설명해 보기로 한다.Meanwhile, FIG. 7 is a block diagram schematically illustrating a configuration of a video skimming device capable of recording / indexing / viewing / nonlinear browsing to provide a high speed skimming function according to the present invention. Next, the operation of the video skimming device according to the present invention will be briefly described with reference to the figure.

먼저, 신호 입력부(701)는 디지털 오디오/비디오 신호가 입력되는 소스이며, 디스플레이부(702)는 디지털 오디오/비디오 신호를 출력하기 위한 모니터, 스피커 등의 출력 수단을 나타낸다. 그리고, 사용자 인터페이스부(711)는 사용자의 입력을 받아들이는 키보드, 마우스, 리모콘, 버튼 등의 입력 수단을 의미한다.First, the signal input unit 701 is a source to which the digital audio / video signal is input, and the display unit 702 represents an output means such as a monitor or a speaker for outputting the digital audio / video signal. In addition, the user interface unit 711 refers to input means such as a keyboard, a mouse, a remote controller, and a button for receiving a user input.

여기서, 미디어 저장부(708)는 상기 신호 입력부(701)를 통하여 입력된 오디오/비디오 스트림을 저장하기 위한 장치이며, 주제어부(710)는 재생제어/녹화제어/비선형적 브라우징 제어/인덱싱 제어 등에 관한 명령을 각각의 제어 모듈에 전달하기 위한 역할을 수행한다.Here, the media storage unit 708 is an apparatus for storing the audio / video stream input through the signal input unit 701, the main control unit 710 is a playback control / recording control / non-linear browsing control / indexing control, etc. It plays a role to deliver the related command to each control module.

또한, 인덱스 생성부(707)는 녹화 제어부(706)에 의해 상기 미디어 저장부 (708)에 저장되는 스트림의 정보를 인덱스 저장부(709)에 저장하며, 상기 신호 입력부(701)를 통하여 입력된 오디오/비디오 스트림으로부터 자동 비디오 인덱싱을 이용하여 인덱스 정보를 생성하고 이를 상기 인덱스 저장부(709)에 저장하는 역할도 담당한다. 따라서, 상기 인덱스 저장부(709)에는 스트림의 저장 정보와, 샷 인덱스 정보(샷 세그멘테이션 정보를 포함한다) 등이 저장된다.In addition, the index generator 707 stores the stream information stored in the media storage 708 by the recording controller 706 in the index storage 709, and is input through the signal input unit 701. It is also responsible for generating index information from the audio / video stream using automatic video indexing and storing it in the index storage unit 709. Accordingly, the index storage unit 709 stores stream storage information, shot index information (including shot segmentation information), and the like.

그리고, 인덱스 관리부(705)는 '빨리 보기', '빨리 되감기' 등의 변속 재생 기능인 트릭 플레이(trick play)를 제공하기 위해 스트림의 저장정보를 재생 제어부(703)에 전달하고, 상기 인덱스 저장부(709)에 저장된 샷 인덱스 정보를 비선형 비디오 브라우징(NLVB: Non Linear Video Browsing) 제어부(704)에 제공하는 역할을 담당한다.In addition, the index manager 705 transfers the stored information of the stream to the playback controller 703 to provide a trick play, which is a variable speed playback function such as 'fast view' and 'fast rewind', and the index storage unit It is responsible for providing shot index information stored in 709 to the Non Linear Video Browsing (NLVB) control unit 704.

상기 녹화 제어부(706)는 녹화되는 스트림의 정보를 상기 인덱스 생성부(707 )에 제공하고, 상기 신호 입력부(701)로부터 입력되는 오디오/비디오 스트림을 상기 미디어 저장부(708)에 저장하는 역할을 담당하며, 상기 재생 제어부(703)는 미디어 스트림을 상기 디스플레이부(702)로 보내고, 전체 미디어 재생의 제어를 담당하며, 경우에 따라서는 상기 비선형 비디오 브라우징 제어부(704) 또는 상기 인덱스 관리부(705)와의 통신을 이용하여 비선형적 비디오 브라우징 기능과, 트릭 플레이를 제공한다.The recording controller 706 provides information about the stream to be recorded to the index generator 707 and stores the audio / video stream input from the signal input unit 701 in the media storage unit 708. The playback control unit 703 sends a media stream to the display unit 702 and is responsible for controlling the entire media playback. In some cases, the non-linear video browsing control unit 704 or the index management unit 705 is provided. It uses non-linear video browsing and trick play.

또한, 상기 비선형 비디오 브라우징 제어부(704)는 상기 인덱스 관리부(705)를 통하여 인덱스 저장부(709)와 통신을 수행하고, 상기 재생 제어부(703)의 제어에 의하여 어떤 재생방법을 제공할 것인지, 어떤 세그먼트를 재생하고 어떤 세그먼트를 스키핑할 것인지에 관한 정보를 제공한다.In addition, the nonlinear video browsing control unit 704 communicates with the index storage unit 709 through the index management unit 705, and what reproduction method is provided under the control of the reproduction control unit 703. Play a segment and provide information about which segment to skip.

이러한 구성을 갖는 비디오 스키밍 장치에서, 본 발명에 따른 비디오 스키밍 동작을 설명하면 다음과 같다.In the video skimming device having such a configuration, the video skimming operation according to the present invention will be described.

먼저, 키보드, 마우스, 리모콘, 버튼 등의 입력 수단인 상기 사용자 인터페이스부(711)를 통하여 사용자로부터 스키밍 요구가 입력되면, 상기 주제어부(710)는 사용자로부터 요청된 스키밍 요구가 고속 스키밍인지, 또는 저속 스키밍인지의 여부를 판단하여 이 정보를 상기 재생 제어부(703)에 알린다.First, when a skimming request is input from the user through the user interface unit 711 which is an input means such as a keyboard, a mouse, a remote controller, a button, the main control unit 710 determines whether the skimming request requested from the user is high speed skimming, or It determines whether or not it is low speed skimming and informs the reproduction control section 703 of this information.

이에 따라, 상기 재생 제어부(703)는 사용자로부터 요청된 스키밍 요구에 따라 재생할 세그먼트 정보를 획득하기 위하여 상기 비선형 비디오 브라우징 제어부 (704)와 통신을 수행한다. 이에 따라, 상기 비선형 비디오 브라우징 제어부(704)는 상기 인덱스 관리부(705)를 통하여 입력된 샷 인덱스(샷 세그멘테이션) 정보와, 상기 재생 제어부(703)가 전달한 스트림의 현재 재생 위치와, 스키밍 방법에 관한 정보를 토대로 다음에 재생할 샷을 선정하고, 재생할 샷에서 재생할 세그먼트를 재 설정하여 이 결과를 상기 재생 제어부(703)에 전달한다.Accordingly, the playback control unit 703 communicates with the nonlinear video browsing control unit 704 to obtain segment information to be reproduced according to the skimming request requested by the user. Accordingly, the nonlinear video browsing control unit 704 relates to shot index (shot segmentation) information input through the index management unit 705, the current playback position of the stream transmitted by the reproduction control unit 703, and a skimming method. Based on the information, the next shot to be played back is selected, and the segment to be played back in the shot to be played is reset, and the result is transmitted to the playback control section 703.

그러면, 상기 재생 제어부(703)는 미디어 저장부(708)에서 해당 세그먼트를 로드하여 디스플레이부(702)로 해당 스트림을 출력한 후, 다시 상기 비선형 비디오 브라우징 제어부(704)와 통신을 수행하여 다음 세그먼트 정보를 얻고, 연속적으로 해당 세그먼트를 상기 디스플레이부(702)로 보내는 기능을 수행한다.Then, the playback control unit 703 loads the corresponding segment from the media storage unit 708, outputs the corresponding stream to the display unit 702, and then communicates with the nonlinear video browsing control unit 704 to perform the next segment. Obtains information and continuously sends the corresponding segment to the display unit 702.

이와 같은 과정을 통하여 사용자로부터 요청되는 비디오 스키밍을 제공할 수 있게 된다. 이때, 리모콘과 같은 상기 사용자 인터페이스부(711)는 조작 버튼의 수가 한정적일 수밖에 없다. 따라서, 상기 사용자 인터페이스부(711)에 하나의 스키밍 요청 버튼을 설정하고, 한번 누르면 샷 세그멘테이션 정보를 이용하여 모든 개별 샷에 대하여 일정 분량의 재생을 수행하는 저속 스키밍, 한번 더 누르면 샷 세그멘테이션 정보와 시간 오프셋 정보를 이용하여 재생될 샷을 선정하고 선정된 샷에 대해서만 일정 분량의 재생을 수행하는 고속 스키밍이 수행되도록 구현할 수 있으며, 이때 토글(toggle) 기능을 부여함으로써 사용자에게 편리함을 제공할 수 있게 된다.Through this process, the video skimming requested by the user can be provided. At this time, the user interface unit 711, such as a remote control is limited to the number of operation buttons. Accordingly, low-speed skimming sets a skimming request button in the user interface unit 711, and presses once to perform a predetermined amount of reproduction for all individual shots using shot segmentation information, and presses once more for shot segmentation information and time. It is possible to implement fast skimming that selects a shot to be played by using offset information and performs a certain amount of playback only on the selected shot. In this case, it is possible to provide a user with a toggle function. .

즉, 이와 같은 비디오 스키밍 장치에 있어서는, 사용자는 자신의 취향과 콘텐트 특성에 맞는 스키밍(저속 스키밍 또는 고속 스키밍)을 시스템에 요구할 수 있게 되므로, 샷 세그멘테이션 정보를 이용하여 저속 스키밍을 구현하는 시스템에 비하여 전체 비용은 그대로 유지되면서 사용자 만족도를 향상시킬 수 있게 된다.That is, in such a video skimming device, the user can request a skimming (low speed skimming or high speed skimming) that suits his or her taste and content characteristics, and thus, compared to a system that implements low speed skimming using shot segmentation information. The overall cost will remain the same while improving user satisfaction.

이상의 설명에서와 같이 본 발명에 따른 비디오 스키밍 방법 및 장치에 의하면, 짧은 시간 내에 비디오 스트림 전체의 내용을 파악할 수 있으며, 전체의 내용을 파악함에 있어서 중요한 부분을 놓치지 않고 지루한 부분을 간단히 지나갈 수 있으며, 모든 장르에 적용이 가능하다는 장점이 있다.As described above, according to the video skimming method and apparatus according to the present invention, it is possible to grasp the contents of the entire video stream in a short time, and to easily pass the boring parts without missing an important part in grasping the contents of the entire contents. It has the advantage of being applicable to all genres.

또한, 본 발명에 따른 비디오 스키밍 방법 및 장치에 의하면, 사용자는 자신이 빠른 스키밍 기능을 요구하는 콘텐트와 구간에 대해서는 빠른 스키밍을 요구하고, 느린 스키밍을 요구하는 콘텐트와 구간에 대해서는 느린 스키밍을 요구함으로써, 사용자 선택의 폭이 넓어지게 되는 장점이 있다.In addition, according to the video skimming method and apparatus according to the present invention, a user requests fast skimming for content and a section requiring fast skimming and slow skimming for content and a section requiring slow skimming. This has the advantage of widening user choice.

또한, 본 발명에 따른 비디오 스키밍 방법 및 장치에 의하면, 사용자는 시간 오프셋과 단위 재생 길이를 지정함으로써, 빠른 스키밍의 배속을 자유롭게 결정할 수 있으며, 따라서 전체 브라우징 시간을 사용자가 대략적으로 예측할 수 있는 장점이 있다.In addition, according to the video skimming method and apparatus according to the present invention, the user can freely determine the speed of the fast skimming by designating the time offset and the unit playback length, so that the user can roughly estimate the total browsing time. have.

또한, 본 발명에 따른 비디오 스키밍 방법 및 장치에 의하면, 비디오 콘텐트의 구조적 정보를 추출하기 위한 비디오 클러스터링 엔진을 요구하지 않게 됨으로써, 보다 저렴한 가격에 빠른 비디오 스키밍을 제공할 수 있는 장점이 있다.In addition, the video skimming method and apparatus according to the present invention does not require a video clustering engine for extracting structural information of video content, thereby providing a fast video skimming at a lower cost.

Claims (13)

현재의 재생 위치와 샷 세그멘테이션 정보를 참조하여, 스키밍에서 재생될 길이로 설정된 단위 재생 세그먼트 길이(LS) 정보를 기반으로 첫번째 재생할 샷을 선정하는 단계; 상기 재생할 샷으로 선정된 샷에 대하여 정해진 부분의 정해진 분량을 재생하는 단계; 상기 재생된 부분의 마지막 위치를 기준으로 하여, 최소한 스키밍을 위하여 설정된 시간 오프셋(OS)과 샷 인덱스를 이용하여 다음 재생 샷을 선정하되, 그 다음 재생될 샷에 속하는 세그먼트는 상기 최소한 스키밍을 위하여 설정된 시간 오프셋(OS) 이상으로 떨어져 있으며, 스키밍에 의하여 연속적으로 재생될 두 개의 세그먼트는 각기 다른 샷에 속하는 세그먼트가 되도록 선정하는 단계; 를 구비하여, 상기 재생 단계 및 다음 재생 샷 선정 단계가 반복적으로 수행되는 것을 특징으로 하는 비디오 스키밍 방법.Selecting the first shot to be played based on the unit playback segment length L S set as the length to be played in skimming with reference to the current playback position and shot segmentation information; Reproducing a predetermined amount of a predetermined portion with respect to the shot selected as the shot to be reproduced; On the basis of the last position of the reproduced portion, at least the next playback shot is selected using a time offset (O S ) and a shot index set for skimming, and the segment belonging to the next shot to be reproduced is configured for the at least skimming. the method comprising selecting and off more than a set time offset (O S), the two segments be continuously reproduced by skimming is so that segments belonging to different shot; And the reproducing step and the next reproducing shot selecting step are repeatedly performed. 제 1항에 있어서, 상기 첫번째 재생할 샷을 선정하는 단계에 있어,The method of claim 1, wherein the step of selecting the first shot to be reproduced, 현재 재생 위치로부터 현재 재생 위치가 포함된 샷의 종료 위치까지의 길이가, 스키밍에서 재생될 길이로 설정된 단위 재생 세그먼트 길이(LS)보다 긴 경우에는, 현재 재생 위치가 속한 샷을 첫번째 재생할 샷으로 선정하는 것을 특징으로 하는 비디오 스키밍 방법.If the length from the current playback position to the end position of the shot including the current playback position is longer than the unit playback segment length (L S ) set as the length to be played in skimming, the shot to which the current playback position belongs is the first shot to be played. Video skimming method, characterized in that the selection. 제 1항에 있어서, 상기 첫번째 재생할 샷을 선정하는 단계에 있어,The method of claim 1, wherein the step of selecting the first shot to be reproduced, 현재 재생 위치가 포함된 샷의 다음 샷을 첫번째 재생할 샷으로 선정하는 것을 특징으로 하는 비디오 스키밍 방법.And a next shot of the shot including the current playback position is selected as the first shot to be played. 제 1항에 있어서, 상기 선정된 샷을 재생하는 단계에 있어,The method of claim 1, wherein the playing of the selected shot comprises: 재생할 샷으로 선정된 샷의 길이가 상기 단위 재생 세그먼트 길이(LS)보다 크면 해당 샷 전반부의 LS또는 후반부의 LS분량의 세그먼트를 재생하고, 상기 선정된 샷의 길이가 단위 재생 세그먼트 길이(LS)보다 크지 않으면 해당 샷 전체를 재생하는 것을 특징으로 하는 비디오 스키밍 방법.The length of the shots selected for shot length of the unit playback segment play (L S) is greater than the shot reproduction to L S, or the second half segment of the L S amount of the first part, and plays the length of the selected shot unit segment length ( If not greater than L S ) video skimming method characterized in that to play the entire shot. 제 1항에 있어서, 상기 다음 재생 샷을 선정하는 단계에 있어,The method of claim 1, wherein in selecting the next playback shot, 상기 재생 단계에서 재생된 부분의 마지막 위치를 기준으로 하여, 이전에 재생된 단위 재생 세그먼트의 마지막 위치에 시간 오프셋(OS)을 더한 위치를 구하고, 상기 구해진 해당 위치가 속한 샷 또는 그 다음 샷을 다음 재생 샷으로 선정하는 것을 특징으로 하는 비디오 스키밍 방법.On the basis of the last position of the portion reproduced in the reproducing step, the position obtained by adding the time offset (O S ) to the last position of the previously reproduced unit reproduction segment is obtained, and the shot to which the corresponding position is obtained or the next shot is obtained. A video skimming method, characterized in that it is selected as the next playback shot. 제 5항에 있어서,The method of claim 5, 상기 재생 단계에서 재생된 부분의 마지막 위치를 기준으로 하여, 이전에 재생된 단위 재생 세그먼트의 마지막 위치에 시간 오프셋(OS)을 더하여 구해진 위치가 이전에 재생된 세그먼트가 속한 샷과 동일한 샷인 경우에는, 상기 구해진 위치가 속한 해당 샷의 다음 샷을 다음 재생 샷으로 선정하는 것을 특징으로 하는 비디오 스키밍 방법.If the position obtained by adding the time offset (O S ) to the last position of the previously played unit playback segment on the basis of the last position of the portion played back in the playback step is the same shot as the shot to which the previously played segment belongs; And selecting a next shot of the corresponding shot to which the obtained position belongs as a next playback shot. 현재 재생 위치 및 샷 세그멘테이션 정보를 참조하여, 모든 개별 샷에 대하여 일정 분량의 재생을 수행하는 저속 스키밍 방법과, 상기 제 1항 내지 제 6항 중의 어느 한 항의 비디오 스키밍 방법에 의하여 재생될 샷을 선정하고, 선정된 샷에 대해서만 일정 분량의 재생을 수행하는 고속 스키밍 방법을 모두 제공하고, 사용자의 스키밍 방법 전환 요청에 대응하여 상기 저속 스키밍 혹은 상기 고속 스키밍을 선택적으로 수행하는 것을 특징으로 하는 비디오 스키밍 방법.A slow skimming method for performing a certain amount of playback on all individual shots and a video skimming method of any one of claims 1 to 6 are selected with reference to the current playback position and shot segmentation information. And a high speed skimming method for performing a predetermined amount of reproduction only for a selected shot, and selectively performing the low speed skimming or the high speed skimming in response to a user's request for switching a skimming method. . 제 7항에 있어서, 상기 저속 스키밍 방법은,The method of claim 7, wherein the low speed skimming method, 샷 세그멘테이션 정보로부터 개별 샷의 구간을 인식하는 단계, 상기 인식된 개별 샷 구간 내에서 특정한 일부분을 해당 샷에 대한 내용을 반영하는 재생 영역으로 선정하는 단계, 각각의 개별 샷마다 선정된 재생 영역을 연속시켜 재생하는 단계를 포함하는 것을 특징으로 하는 비디오 스키밍 방법.Recognizing the section of the individual shots from the shot segmentation information, selecting a specific portion within the recognized individual shot section as the playback region reflecting the contents of the shot, and successively selecting the selected playback region for each individual shot The video skimming method comprising the step of playing. 제 8항에 있어서,The method of claim 8, 상기 각각의 샷 구간 내에서 재생할 부분의 선정은 해당 샷의 전반부, 후반부, 중간부분, 전반부와 후반부를 동시에 사용하는 것을 특징으로 하는 비디오 스키밍 방법.The selection of the portion to be played back in each shot section comprises using the first half, the second half, the middle half, the first half and the second half of the shot at the same time. 디지털 비디오 데이터의 검색과 브라우징을 수행하기 위하여, 비디오 스키밍을 위한 사용자 명령이 입력되는 사용자 인터페이스 수단과;User interface means for inputting user commands for video skimming to perform retrieval and browsing of digital video data; 상기 사용자 인터페이스 수단을 통하여 입력된 사용자 명령에 따라, 해당 비디오 스트림에 대한 샷 인덱스 정보와 시간 오프셋 정보를 이용하여 재생할 세그먼트를 선정하여 비디오 스키밍을 처리하는 제어수단과;Control means for processing video skimming by selecting a segment to be reproduced using shot index information and time offset information of a corresponding video stream according to a user command input through the user interface means; 상기 제어수단의 요청에 대하여, 해당 비디오 스트림의 저장 정보 및 샷 인덱스 정보를 제공하기 위한 인덱스 저장부와;An index storage for providing storage information and shot index information of a corresponding video stream in response to a request of the control means; 상기 제어수단의 요청에 대하여, 비디오 스트림을 제공하기 위한 미디어 저장부; 및A media storage for providing a video stream in response to a request of the control means; And 상기 제어수단에 의하여 스키밍 처리된 비디오 스트림이 재생되는 디스플레이 수단; 을 포함하는 것을 특징으로 하는 비디오 스키밍 장치.Display means for reproducing the video stream skimmed by the control means; Video skimming device comprising a. 제 10항에 있어서,The method of claim 10, 상기 샷 인덱스 정보는 비디오 스트림에 대한 샷 세그멘테이션 정보를 포함하는 것을 특징으로 하는 비디오 스키밍 장치.And the shot index information includes shot segmentation information for a video stream. 제 10항에 있어서, 상기 제어수단은,The method of claim 10, wherein the control means, 사용자로부터 입력되는 신호로부터 스키밍 요청 여부를 판단하는 주제어부와;A main control unit which determines whether a skimming request is made from a signal input from a user; 상기 주제어부로부터 스키밍 수행 명령을 전송받고, 선정된 재생 세그먼트 정보를 참조하여 비디오 스키밍을 수행하는 재생 제어부; 및A playback controller for receiving a skimming command from the main controller and performing video skimming with reference to the selected play segment information; And 상기 재생 제어부로부터 재생할 세그먼트 정보 제공을 요청받고, 샷 인덱스 정보와, 상기 재생 제어부로부터 전달된 비디오 스트림의 현재 재생 위치 및 시간 오프셋 정보를 참조하여 재생할 세그먼트 정보를 획득하여 상기 재생 제어부에 제공하는 비선형 비디오 브라우징 제어부; 를 포함하는 것을 특징으로 하는 비디오 스키밍 장치.A non-linear video which is requested to provide segment information to be played back from the playback control unit, obtains segment information to be played back with reference to shot index information and current playback position and time offset information of the video stream transmitted from the playback control unit A browsing control unit; Video skimming device comprising a. 제 10항에 있어서, 상기 사용자 인터페이스 수단은,The method of claim 10, wherein the user interface means, 비디오 스키밍의 정도로서, 현재 재생 위치 및 샷 인덱스 정보를 참조하여, 모든 개별 샷에 대하여 일정 분량의 재생을 수행하는 저속 스키밍과; 현재 재생 위치, 샷 인덱스 정보, 빠른 스키밍을 위하여 지정된 시간 오프셋을 기준으로 재생될 샷을 선정하고, 선정된 샷에 대해서만 일정 분량의 재생을 수행하는 고속 스키밍;을 선택할 수 있도록 토글 기능이 구비된 수단을 포함하는 것을 특징으로 하는 비디오 스키밍 장치.A degree of video skimming, comprising: slow skimming for performing a certain amount of playback for all individual shots with reference to the current playback position and shot index information; Means for selecting a shot to be played based on a current playback position, shot index information, and a specified time offset for fast skimming, and fast skimming for performing a predetermined amount of playback only on the selected shot; Video skimming device comprising a.
KR10-2002-0023672A 2002-04-30 2002-04-30 Method and device for video skimming KR100438302B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR10-2002-0023672A KR100438302B1 (en) 2002-04-30 2002-04-30 Method and device for video skimming

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR10-2002-0023672A KR100438302B1 (en) 2002-04-30 2002-04-30 Method and device for video skimming

Publications (2)

Publication Number Publication Date
KR20030085306A KR20030085306A (en) 2003-11-05
KR100438302B1 true KR100438302B1 (en) 2004-07-01

Family

ID=32380941

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2002-0023672A KR100438302B1 (en) 2002-04-30 2002-04-30 Method and device for video skimming

Country Status (1)

Country Link
KR (1) KR100438302B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014183559A (en) 2013-03-21 2014-09-29 Casio Comput Co Ltd Notification control device, notification control method and program

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5956026A (en) * 1997-12-19 1999-09-21 Sharp Laboratories Of America, Inc. Method for hierarchical summarization and browsing of digital video
JP2000285242A (en) * 1999-01-29 2000-10-13 Sony Corp Signal processing method and video sound processing device
KR20010091121A (en) * 2000-03-13 2001-10-23 구자홍 Method of multimedia stream non-linear play control And for non-linear play control browsing interface, system, and input interface
US6342904B1 (en) * 1998-12-17 2002-01-29 Newstakes, Inc. Creating a slide presentation from full motion video
KR20020023063A (en) * 2000-09-22 2002-03-28 구자홍 A method and apparatus for video skimming using structural information of video contents

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5956026A (en) * 1997-12-19 1999-09-21 Sharp Laboratories Of America, Inc. Method for hierarchical summarization and browsing of digital video
US6342904B1 (en) * 1998-12-17 2002-01-29 Newstakes, Inc. Creating a slide presentation from full motion video
JP2000285242A (en) * 1999-01-29 2000-10-13 Sony Corp Signal processing method and video sound processing device
KR20010091121A (en) * 2000-03-13 2001-10-23 구자홍 Method of multimedia stream non-linear play control And for non-linear play control browsing interface, system, and input interface
KR20020023063A (en) * 2000-09-22 2002-03-28 구자홍 A method and apparatus for video skimming using structural information of video contents

Also Published As

Publication number Publication date
KR20030085306A (en) 2003-11-05

Similar Documents

Publication Publication Date Title
JP3667262B2 (en) Video skimming method and apparatus
JP4364190B2 (en) Method and apparatus for nonlinear playback control of multimedia data stream
KR100997599B1 (en) Method for processing contents
KR100547317B1 (en) Simultaneous recording and playback apparatus with indexing/searching/browsing functionality
US8548295B2 (en) Method and system for replaying video images
US20030123850A1 (en) Intelligent news video browsing system and method thereof
JP3250467B2 (en) Video summarization method and video display method
US20020178453A1 (en) Method and apparatus for controlling reproduction of video contents
JPH0993588A (en) Moving image processing method
KR100555426B1 (en) Dynamic video searching system
KR100624848B1 (en) Automatic video content review system
KR20090089878A (en) Method for creating a new summary of an audiovisual document that already includes a summary and reports and a receiver that can implement said method
KR100555427B1 (en) Video playing device and smart skip method for thereof
US7962014B2 (en) Apparatus and method for reproducing video contents
England et al. I/browse: The bellcore video library toolkit
KR100438302B1 (en) Method and device for video skimming
KR100370249B1 (en) A system for video skimming using shot segmentation information
KR20020023063A (en) A method and apparatus for video skimming using structural information of video contents
KR100547335B1 (en) Video playing method and system, apparatus using the same
JPH1070703A (en) Recording device and reproducing device for image information management, and recording and reproducing device for image information management
JP2001298709A (en) Moving picture recording and reproducing device
JP2000511736A (en) Method and apparatus for displaying video based on keyframes using video cursor frames on a multi-keyframe screen

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20080319

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee