KR20080064364A - 장면 검색 방법 및 장치 - Google Patents

장면 검색 방법 및 장치 Download PDF

Info

Publication number
KR20080064364A
KR20080064364A KR1020070001175A KR20070001175A KR20080064364A KR 20080064364 A KR20080064364 A KR 20080064364A KR 1020070001175 A KR1020070001175 A KR 1020070001175A KR 20070001175 A KR20070001175 A KR 20070001175A KR 20080064364 A KR20080064364 A KR 20080064364A
Authority
KR
South Korea
Prior art keywords
scene
information
data
text
text subtitle
Prior art date
Application number
KR1020070001175A
Other languages
English (en)
Inventor
유성열
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070001175A priority Critical patent/KR20080064364A/ko
Publication of KR20080064364A publication Critical patent/KR20080064364A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H04N5/9305—Regeneration of the television signal or of selected parts thereof involving the mixing of the reproduced video signal with a non-recorded signal, e.g. a text signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

본 발명에 따라 텍스트 자막(Text Subtitle) 정보를 이용한 AV 데이터의 장면 검색 방법 및 장치가 개시된다.
본 발명에 따른 AV 데이터의 장면 검색 방법은, AV 데이터의 텍스트 자막 정보에 포함된 시간 정보를 참조하여, AV 데이터로부터 적어도 하나의 텍스트 자막에 대응하는 적어도 하나의 장면을 추출하는 단계와, 적어도 하나의 텍스트 자막과 추출된 적어도 하나의 장면 간의 대응 관계를 이용하여 입력된 명령을 수행하는 단계를 포함한다.

Description

장면 검색 방법 및 장치{Method and apparatus for scene search}
도 1은 본 발명의 일 실시예에 따른 장면 검색 장치의 구성도,
도 2는 본 발명의 일 실시예에 따른 장면 검색 방법의 흐름도,
도 3은 텍스트 자막 파일의 예,
도 4는 본 발명의 일 실시예에 따라 텍스트 자막 정보를 분석하여 장면을 선정하는 모습을 도시한 도면,
도 5는 본 발명의 일 실시예에 따른 사용자 인터페이스.
본 발명은 AV(Audio Visual)데이터의 검색에 대한 것으로, 더욱 상세하게는 텍스트 자막(Text Subtitle) 정보를 이용한 AV 데이터의 장면 검색 방법 및 장치에 관한 것이다.
텍스트 자막 파일은 비디오 신호에 부가하여 오디오를 보조하기 위한 수단으로 사용된다. AV 데이터의 텍스트 자막 파일에는 텍스트 자막이 디스플레이되기 시작해야 하는 시간 및 사라져야할 시간에 대한 정보와, 디스플레이할 자막에 대한 정보가 포함되어 있다. 그러나 사용자가 원하는 자막에 해당하는 장면을 검색하여 재생하는 등 텍스트 자막을 기준으로 한 장면별 검색 기능이 제공되지 않고 있는 실정이다.
본 발명은 상기와 같은 문제를 해결하여, 텍스트 자막을 기준으로 AV 데이터로부터 복수의 장면을 추출하고 사용자가 원하는 자막에 대응하는 장면을 검색할 수 있는 장면 검색 방법 및 장치를 제공하는 것을 목적으로 한다.
상기와 같은 과제를 해결하기 위한 본 발명의 하나의 특징은, AV 데이터의 장면 검색 방법에 있어서, 상기 AV 데이터의 텍스트 자막 정보에 포함된 시간 정보를 참조하여, 상기 AV 데이터로부터 적어도 하나의 텍스트 자막에 대응하는 적어도 하나의 장면을 추출하는 단계와, 상기 적어도 하나의 텍스트 자막과 상기 추출된 적어도 하나의 장면 간의 대응 관계를 이용하여 입력된 명령을 수행하는 단계를 포함하는 것이다.
상기 적어도 하나의 장면을 추출하는 단계는, 상기 AV 데이터 중에서, 상기 적어도 하나의 텍스트 자막의 시작 시간과 종료 시간 사이의 구간에 해당하는 부분을 대응 장면으로 결정하는 단계를 포함할 수 있다.
상기 장면 검색 방법은, 상기 각 텍스트 자막의 시작 시간에 인접한 영상 정보를 상기 AV 데이터로부터 추출하여 해당하는 장면의 대표 영상으로 선택하는 단계와, 상기 선택된 대표 영상을 포함하는 장면 정보를 화면에 출력하는 단계를 더 포함할 수 있다.
상기 입력된 명령을 수행하는 단계는, 키워드를 포함한 검색 명령 입력시, 상기 텍스트 자막 정보를 검색하여 상기 키워드에 매치되는 텍스트 자막을 발견하면 상기 발견된 텍스트 자막에 대응하는 장면을 검색 결과로 결정하는 단계를 포함할 수 있다.
본 발명의 다른 특징은, AV 데이터의 장면 검색 장치에 있어서, 상기 AV 데이터의 텍스트 자막 정보에 포함된 시간 정보를 참조하여, 상기 AV 데이터로부터 적어도 하나의 텍스트 자막에 대응하는 적어도 하나의 장면을 추출하는 장면 추출부와, 입력부를 통한 명령 입력시, 상기 적어도 하나의 텍스트 자막과 상기 추출된 적어도 하나의 장면 간의 대응 관계를 이용하여 입력된 명령을 수행하는 검색부를 포함하는 것이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 설명한다.
도 1은 본 발명의 일 실시예에 따른 장면 검색 장치의 구성도이다.
도 1을 참조하면, 본 발명에 따른 장면 검색 장치는 입력부(110), 디스플레이(130), 저장부(140) 및 제어부(120)를 구비한 컴퓨팅 시스템이다. 제어부(120)는 AV 데이터(141)의 텍스트 자막 정보(142)에 포함된 시간 정보를 참조하여 AV 데이터(141)로부터 적어도 하나의 텍스트 자막과 함께 재생될 적어도 하나의 장면을 추출하는 장면 추출부(121)와, 입력부(110)를 통한 명령 입력시, 상기 적어도 하나의 텍스트 자막과 그에 대응하여 추출된 적어도 하나의 장면 간의 대응 관계를 이용하여 검색 명령과 같은 사용자 명령을 수행하는 검색부(122)를 포함한다, 또한, 제어부(120)는 검색된 결과에 따른 장면(들)이나 사용자에 의해 요청된 장면들을 재생하기 위한 재생부(123)를 포함할 수 있다.
AV 데이터(141), 텍스트 자막 정보(142) 및 텍스트 자막 정보(142)에 따라 추출된 장면들에 대한 정보(143)는 저장부(140)에 저장되며, 텍스트 자막 정보(142)는 각 텍스트 자막의 시간 정보와 자막 정보를 포함하며, 장면 정보(143)는 대응하는 텍스트 자막에 대한 정보, 장면을 구성하는 AV 스트림의 위치에 대한 정보 및/또는 장면의 대표 영상에 대한 정보를 포함할 수 있다. 도 1을 참조하면, AV 데이터(141), 텍스트 자막 정보(142) 및 장면 정보(143)가 저장부(140)에 저장되는 것으로 도시되어 있으나, 이들 정보 중 일부 또는 전부가 디스크(도시되지 않음)에 기록되어 있고 픽업 장치(도시되지 않음)를 통해 독출되어 제어부에 의해 이용될 수 있음은 당업자에게 자명하다. 예를 들어, AV 데이터와 텍스트 자막 파일이 기록된 DVD(Digital Versatile Disc)로부터 데이터를 독출하고 텍스트 자막 파일을 참조하여 AV 데이터로부터 복수의 장면을 추출하고 그에 대한 장면 정보를 생성한 후 장면별 검색에 이용할 수 있다.
도 2는 본 발명의 일 실시예에 따른 장면 검색 방법의 흐름도이다.
도 2를 참조하면, 장면 추출부(121)는 먼저 AV 데이터의 텍스트 자막 정보에 포함된 시간 정보를 분석한다(201). 도 3은 텍스트 자막 정보가 기록된 파일의 예이다. 도 3을 참조하면, 텍스트 자막#1부터 텍스트 자막#4까지의 정보가 기록되어 있음을 알 수 있다. 각 텍스트 자막에 대한 정보는 자막 디스플레이를 시작할 시간(301) 및 종료할 시간(302)으로 구성된 시간 정보와, 화면에 디스플레이할 텍스트를 포함하는 자막 정보(303)로 구성된다.
장면 추출부(121)는 각 텍스트 자막의 시간 정보를 참조하여 각 텍스트 자막에 대응하는 장면을 추출한다(202). 이때, 장면 추출 전에 텍스트 자막들을 시간 정보에 따라 정렬하는 과정이 필요할 수도 있다. 본 발명에 따른 장면은 AV 데이터의 일부를 나타내며 각 장면의 길이 즉 재생 시간(Duration)은 서로 다를 수 있다. 장면 추출부(121)는 AV 데이터에서 각 텍스트 자막의 시작 시간과 종료 시간 사이의 구간에 해당하는 부분을 대응 장면으로 결정한다. 도 4는 본 발명의 일 실시예에 따라 텍스트 자막 정보를 분석하여 장면을 선정하는 모습을 도시한 도면이다. 도 4를 참조하면, 자막#1의 시작 시간인 00:10:00(401)에 장면#1이 시작되고, 자막#2의 시작 시간인 00:10:04(402)에 장면#2가 시작되고, 자막#3의 시작 시간인 00:10:14(403)에 장면#3이 시작되며, 자막#4의 시작 시간인 00:10:16(404)에 장면#4가 시작된다.
장면 추출부(121)는 선정 및 추출된 각 장면에 대한 대표 영상 등의 정보를 화면에 표시하여 사용자에게 제공할 수 있다(203). 장면 추출부(121)는 각 텍스트 자막의 시작 시간에 인접한 영상 정보를 상기 AV 데이터로부터 추출하여 해당하는 장면의 대표 영상으로 선택할 수 있다. 예를 들어 텍스트 자막의 시작 시간에 인접한 비디오 영상 화면 중 의미 있는 데이터를 해당 장면의 대표 영상으로 선택한다. 의미 있는 데이터는 단독으로 영상을 형성할 수 있는 데이터를 말한다. 예를 들면, MPEG(Moving Picture Expert Group) 데이터의 경우 의미 있는 데이터로 I 픽쳐(Picture)를 사용할 수 있다. 도 4는 장면#1 내지 장면#4에 대해 대표 영상들(511 내지 514)을 선정하는 예를 보여준다. 대응하는 텍스트 자막 정보와 대표 영상 등을 포함하는 장면 정보의 표시에 의해, 각 텍스트 자막 및 텍스트 자막과 함께 재생될 영상 정보를 조합한 자막 기반의 장면 검색 메뉴를 생성하는 것이 가능해진다.
사용자는 메뉴 화면에서 입력부(110)를 통해 키워드 검색 명령, 텍스트 자막 메들리(Medley) 명령, 장면 반복 재생 명령 또는 장면 네비게이션 명령을 입력할 수 있다(204). 입력된 명령의 수행을 위해, 검색부(122)는 텍스트 자막과 장면 간의 대응 관계를 이용하여 사용자가 원하는 장면(들)을 검색한다(205). 필요한 경우 재생부(123)는 검색부(122)에 의해 검색된 장면(들)을 재생한다. 검색부(122)와 재생부(123)에 의한 사용자 명령의 수행헤 대해서는 도 5를 참조하여 후술한다.
도 5는 본 발명의 일 실시예에 따른 사용자 인터페이스이다. 사용자는 도시된 바와 같은 네비게이션이 가능한 메뉴를 통해 원하는 장면을 자유로이 선택하여 재생할 수 있다.
도 5를 참조하면, 메뉴 화면에는 각 텍스트 자막에 대한 정보(521 내지 524)로 시작 시간과 자막 텍스트를 표시하고, 각 텍스트 자막에 대응하는 장면에 대한 영상 정보로 대표 영상(511 내지 514)을 표시하고 있다. 사용자는 각 장면의 대표 영상과 자막을 보면서 상하 방향키 등을 이용하여 장면 탐색을 할 수 있다. 현재 장면#2가 선택되어 있으며, 선택된 장면에 대한 재생 명령을 내리면, 재생 시간 00:10:04~00:10:10에 해당하는 AV 데이터가 재생되며, "Hi~"라는 자막이 함께 디스플레이된다.
좌측 하단의 타임 쉬프트 바(Time Shift Bar)(530)에는 각 장면들을 나타내 는 바가 표시된다. 도 5를 참조하면, 타임 쉬프트 바(530)에는 장면#1에 대한 마크(531), 장면 #2에 대한 마크(532), 장면#3에 대한 마크(533), 장면#4에 대한 마크(534) 등이 표시되어 있으며, 이들 마크는 길이가 서로 다른 장면들에 대응하여 서로 다른 길이를 가지고 있음을 알 수 있다. 결과적으로 사용자는 시간축에서 각 텍스트 자막이 차지하는 디스플레이 시작/종료 시간과 지속 시간을 보면서, 좌우 방향키 등을 이용하여 장면 간 네비게이션 명령을 입력할 수 있으며, 원하는 장면에 대응하는 마크를 선택하여 바로 재생시킬 수 있다.
하단의 입력란(540)은 검색 키워드를 입력하기 위한 것이다. 키워드 입력 후 검색 버튼(550)을 누르면, 검색부(122)는 키워드를 포함한 검색 명령을 수신하고, 텍스트 자막 정보를 검색하여 키워드에 매치되는 텍스트 자막을 찾고, 매치되는 텍스트 자막이 발견되면 발견된 텍스트 자막에 대응하는 장면(들)을 검색 결과로 결정하여 화면에 표시한다.
우측 하단의 재생 버튼(560)은 텍스트 자막 메들리 기능을 위한 것이다. 사용자가 재생 버튼을 누르면, 검색되어 화면에 표시된 장면들이 연이어 재생되거나, 대응하는 텍스트 자막을 가진 모든 장면들이 연이어 재생된다. 즉 이 기능을 사용하면 AV 데이터 중에서 자막이 있는 부분만을 연이어 재생할 수 있다.
우측 하단의 반복 버튼(570)은 선택된 장면(들)의 시작 시간부터 종료 시간까지 반복하여 재생된다. 이 기능은 특히 어학 학습을 위한 응용에 유용하다.
상술한 바와 같은 본 발명에 따른 방법은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
이상에서 설명한 바와 같은 본 발명의 구성에 의하면, 텍스트 자막의 시간 정보와 자막 정보, 자막과 함께 재생될 AV 데이터의 영상 정보를 조합하여 자막 기반의 장면 검색 메뉴를 생성할 수 있다. 또한, 텍스트 자막 정보를 참조하여 간편하게 AV 데이터를 장면 단위로 탐색할 수 있다. 또한, 텍스트 자막을 포함하는 장면만을 검색하여 재생하거나, 사용자가 원하는 텍스트 자막에 대응하는 장면만을 반복하여 재생하는 등의 응용 시스템도 쉽게 구현 가능하다.

Claims (5)

  1. AV 데이터의 장면 검색 방법에 있어서,
    상기 AV 데이터의 텍스트 자막 정보에 포함된 시간 정보를 참조하여, 상기 AV 데이터로부터 적어도 하나의 텍스트 자막에 대응하는 적어도 하나의 장면을 추출하는 단계와,
    상기 적어도 하나의 텍스트 자막과 상기 추출된 적어도 하나의 장면 간의 대응 관계를 이용하여 입력된 명령을 수행하는 단계를 포함하는 것을 특징으로 하는 장면 검색 방법.
  2. 제1항에 있어서,
    상기 적어도 하나의 장면을 추출하는 단계는,
    상기 AV 데이터 중에서, 상기 적어도 하나의 텍스트 자막의 시작 시간과 종료 시간 사이의 구간에 해당하는 부분을 대응 장면으로 결정하는 단계를 포함하는 것을 특징으로 하는 장면 검색 방법.
  3. 제1항에 있어서,
    상기 각 텍스트 자막의 시작 시간에 인접한 영상 정보를 상기 AV 데이터로부터 추출하여 해당하는 장면의 대표 영상으로 선택하는 단계와,
    상기 선택된 대표 영상을 포함하는 장면 정보를 화면에 출력하는 단계를 더 포함하는 것을 특징으로 하는 장면 검색 방법.
  4. 제1항에 있어서,
    상기 입력된 명령을 수행하는 단계는,
    키워드를 포함한 검색 명령 입력시, 상기 텍스트 자막 정보를 검색하여 상기 키워드에 매치되는 텍스트 자막을 발견하면 상기 발견된 텍스트 자막에 대응하는 장면을 검색 결과로 결정하는 단계를 포함하는 것을 특징으로 하는 장면 검색 방법.
  5. AV 데이터의 장면 검색 장치에 있어서,
    상기 AV 데이터의 텍스트 자막 정보에 포함된 시간 정보를 참조하여, 상기 AV 데이터로부터 적어도 하나의 텍스트 자막에 대응하는 적어도 하나의 장면을 추출하는 장면 추출부와,
    입력부를 통한 명령 입력시, 상기 적어도 하나의 텍스트 자막과 상기 추출된 적어도 하나의 장면 간의 대응 관계를 이용하여 입력된 명령을 수행하는 검색부를 포함하는 것을 특징으로 하는 장면 검색 장치.
KR1020070001175A 2007-01-04 2007-01-04 장면 검색 방법 및 장치 KR20080064364A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070001175A KR20080064364A (ko) 2007-01-04 2007-01-04 장면 검색 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070001175A KR20080064364A (ko) 2007-01-04 2007-01-04 장면 검색 방법 및 장치

Publications (1)

Publication Number Publication Date
KR20080064364A true KR20080064364A (ko) 2008-07-09

Family

ID=39815676

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070001175A KR20080064364A (ko) 2007-01-04 2007-01-04 장면 검색 방법 및 장치

Country Status (1)

Country Link
KR (1) KR20080064364A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101009973B1 (ko) * 2010-04-07 2011-01-21 김덕훈 미디어 컨텐츠 제공 방법, 그리고 그를 위한 장치
KR101049634B1 (ko) * 2009-06-24 2011-07-14 한국방송공사 멀티 포맷 콘텐츠를 재생하는 장치 및 방법
CN110309324A (zh) * 2018-03-09 2019-10-08 北京搜狗科技发展有限公司 一种搜索方法及相关装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101049634B1 (ko) * 2009-06-24 2011-07-14 한국방송공사 멀티 포맷 콘텐츠를 재생하는 장치 및 방법
KR101009973B1 (ko) * 2010-04-07 2011-01-21 김덕훈 미디어 컨텐츠 제공 방법, 그리고 그를 위한 장치
CN110309324A (zh) * 2018-03-09 2019-10-08 北京搜狗科技发展有限公司 一种搜索方法及相关装置
CN110309324B (zh) * 2018-03-09 2024-03-22 北京搜狗科技发展有限公司 一种搜索方法及相关装置

Similar Documents

Publication Publication Date Title
JP5142453B2 (ja) 再生装置
US20170140226A1 (en) Apparatus and method for identifying a still image contained in moving image contents
JP5135024B2 (ja) コンテンツのシーン出現を通知する装置、方法およびプログラム
KR101440168B1 (ko) 개요 및 리포트를 이미 포함하는 시청각 도큐먼트의 새로운 개요를 생성하기 위한 방법 및 상기 방법을 구현할 수 있는 수신기
RU2315370C2 (ru) Носитель данных, на котором записаны аудиовизуальные данные с информацией о событии, устройство воспроизведения и способ их воспроизведения
JP2007174255A (ja) 録画再生装置
JP2008276340A (ja) 検索装置
KR101155524B1 (ko) 텍스트 기반 자막 변경 방법 및 장치
KR20050041797A (ko) 확장 검색 기능을 제공하는 메타 정보 및 서브 타이틀정보가 기록된 저장 매체 및 그 재생 장치
KR20080064364A (ko) 장면 검색 방법 및 장치
KR20050012101A (ko) 시나리오를 기록한 정보저장매체, 기록장치 및 기록방법,그 정보저장매체의 재생장치 및 시나리오의 검색방법
JP2007208651A (ja) コンテンツ視聴装置
JP2008092403A (ja) 再生支援装置、再生装置、および、再生方法
JP2008294938A (ja) コンテンツ記録再生装置及びサムネイル作成方法
JP2006332765A (ja) コンテンツ検索・再生方法、コンテンツ検索・再生装置、並びにプログラムおよび記録媒体
JP4230402B2 (ja) サムネイル画像抽出方法、装置、プログラム
JP2014207619A (ja) 録画再生装置、及び録画再生装置の制御方法
KR20110132066A (ko) 영상표시기기의 영상 검색 장치 및 방법
KR100907216B1 (ko) 자막정보를 이용한 영상 제어 장치 및 방법
KR100752477B1 (ko) 자막 데이터를 이용한 어학 학습 장치 및 방법
JP4539884B2 (ja) 再生装置、プログラム及び電子画面を構築する方法
JP2007201815A (ja) 表示装置、再生装置、方法、及びプログラム
JP2008042455A (ja) 記録装置及び記録方法
KR100813957B1 (ko) 확장 검색 및 이벤트 발생 기능을 제공하기 위한 메타정보가 기록된 저장매체, 재생 장치 및 그 재생 방법
JP4379519B2 (ja) プログラム、記録媒体、再生装置及び再生方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application