KR20070032745A - 요약 생성 장치 및 방법 - Google Patents

요약 생성 장치 및 방법 Download PDF

Info

Publication number
KR20070032745A
KR20070032745A KR1020070012653A KR20070012653A KR20070032745A KR 20070032745 A KR20070032745 A KR 20070032745A KR 1020070012653 A KR1020070012653 A KR 1020070012653A KR 20070012653 A KR20070012653 A KR 20070012653A KR 20070032745 A KR20070032745 A KR 20070032745A
Authority
KR
South Korea
Prior art keywords
data
segment
selection
section
media content
Prior art date
Application number
KR1020070012653A
Other languages
English (en)
Other versions
KR100771056B1 (ko
Inventor
토시히코 무네츠구
미노루 에토
쇼이치 아라키
고이치 에무라
Original Assignee
마쯔시다덴기산교 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마쯔시다덴기산교 가부시키가이샤 filed Critical 마쯔시다덴기산교 가부시키가이샤
Publication of KR20070032745A publication Critical patent/KR20070032745A/ko
Application granted granted Critical
Publication of KR100771056B1 publication Critical patent/KR100771056B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/71—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/21—Disc-shaped record carriers characterised in that the disc is of read-only, rewritable, or recordable type
    • G11B2220/215—Recordable discs
    • G11B2220/216—Rewritable discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537—Optical discs
    • G11B2220/2562—DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537—Optical discs
    • G11B2220/2562—DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
    • G11B2220/2575—DVD-RAMs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Television Signal Processing For Recording (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

미디어 콘텐츠의 콘텍스트가 계층 스트라텀을 갖는 문맥 내용 기술 데이터에 의해 표시된다. 문맥 내용 기술 데이터는 최고 계층, 최저 계층, 및 나머지 계층을 갖는다. 최고 계층은 콘텐츠를 나타내는 단일 요소에 의해 형성된다. 최저 계층은 비디오 데이터의 장면들간의 변화 또는 음성의 변화에 대응하는 미디어 콘텐츠의 세그먼트를 나타내는 요소로부터 형성된다. 나머지 계층은 화면 또는 장면들의 집합을 나타내는 요소로부터 형성된다. 관심있는 장면의 콘텍스트에 대응하는 스코어가 각 나머지 계층의 요소에 속성으로서 첨가된다. 대응하는 미디어 세그먼트 및 콘텍스트에 대한 시간 정보에 관한 스코어는 최저 계층에서 개별적인 요소에 속성으로서 첨가된다. 데이터 처리 방법의 선택 단계에서, 미디어 콘텐츠의 콘텍스트가 표현되고, 하나 또는 복수의 미디어 콘텐츠의 화면들이 문맥 내용 기술 데이터를 토대로 하여 선택된다. 또한, 데이터 처리방법의 추출 단계에서는 선택 단계에서 선택된 화면들에 관한 데이터만이 추출된다.
미디어 콘텐츠 데이터 처리, 문맥 내용 기술 데이터

Description

요약 생성 장치 및 방법{SUMMARIZATION GENERATING APPARATUS AND SUMMARIZATION GENERATING METHOD}
도 1은 본 발명의 제 1실시예에 따른 데이터 처리방법을 나타내는 블록 다이어그램.
도 2는 제 1실시예에 따른 문맥 내용 기술 데이터의 구조를 나타내는 다이어그램.
도 3은 XML을 사용하여 제 1실시예에 따라 컴퓨터에서 문맥 내용 기술 데이터를 설명하는 데 사용된 문서 형태 정의(DTD)의 한 예의 일부 및 제 1실시예에 따라 DTD를 사용하여 설명된 문맥 내용 기술 데이터의 한 예의 일부를 나타내는 도면.
도 4-9는 도 3에 나타낸 예의 문맥 내용 기술 데이터의 연속된 부분을 나타낸 도면.
도 10은 도 3 내지 9에 나타낸 문맥 내용 기술 데이터에 대표 데이터를 부가함으로써 형성된 XML 문서의 한 예의 일부 및 문맥 내용 기술 데이터를 컴퓨터에서 설명하기 위해 XML로 쓰여진 DTD의 한 예의 일부를 나타내는 도면.
도 11-21은 도 10에 나타낸 문맥 내용 기술 데이터의 연속된 부분의 도면.
도 22는 제 1실시예에 따라 중요도를 할당하는 방법을 설명하는 설명도.
도 23은 제 1실시예에 따른 선택 단계에 관한 처리를 도시하는 흐름도.
도 24는 제 1실시예에 따른 추출 단계의 구성을 나타내는 블록 다이어그램.
도 25는 제 1실시예에 따른 추출 단계에서 디멀티플렉스 수단에 의해 수행되는 처리를 나타내는 흐름도.
도 26는 제 1실시예에 따른 추출 단계에서 비디오 스키밍(skimming) 수단에 의해 수행되는 처리를 나타내는 흐름도.
도 27은 MPEG-1 비디오 스트림의 구성을 나타내는 개략도.
도 28은 제 1실시예에 따른 추출 단계에서 오디오 스키밍 수단에 의해 수행되는 처리를 나타내는 흐름도.
도 29는 MPEG-1 오디오 스트림의 AAU의 구성을 나타내는 개략도.
도 30은 제 1실시예에 따른 미디어 처리방법의 애플리케이션을 나타내는 블록 다이어그램.
도 31은 본 발명의 제 2실시예에 따른 중요도의 처리를 나타내는 설명도.
도 32는 제 2실시예에 따른 선택 단계에 관한 처리를 나타내는 흐름도.
도 33은 본 발명의 제 3실시예에 따른 선택 단계에 관한 처리를 나타내는 흐름도.
도 34는 본 발명의 제 4실시예에 따른 중요도를 할당하는 방법을 나타내는 설명도.
도 35는 제 4실시예에 따른 선택 단계에 관한 처리를 나타내는 흐름도.
도 36은 제 5실시예에 따른 미디어 처리 방법을 나타내는 블록도.
도 37은 제 5실시예에 따른 구조 기술 데이터의 구조를 나타내는 다이어그램.
도 38은 제 5실시예에 따른 문맥 내용 기술 데이터의 구조를 설명하는 다이어그램.
도 39는 XML을 사용하여 제 5실시예에 따라 컴퓨터에서 구조 기술 데이터를 설명하는 데 사용된 문서 형태 정의(DTD)의 한 예 및 제 5실시예에 따른 XML 문서의 한 예를 나타낸 도면.
도 40은 XML을 사용하여 제 5실시예에 따라 컴퓨터에서 문맥 내용 기술 데이터를 설명하는 데 사용된 문서 형태 정의(DTD)의 한 예의 전반부 및 제 5실시예에 따른 XML 문서의 한 예의 전반부를 나타낸 도면.
도 41-45는 도 40에 나타낸 문맥 내용 기술 데이터의 연속부분을 나타낸 도면.
도 46은 제 5실시예에 따른 선택 단계에서 출력의 한 예를 나타낸 도면.
도 47은 제 5실시예에 따른 추출 단계를 나타내는 블록 다이어그램.
도 48은 제 5실시예에 따른 추출 단계에서 인터페이스 수단에 의해 수행되는 처리를 나타내는 흐름도.
도 49는 추출 단계에서 제공된 인터페이스 수단이 제 5실시예에 따른 선택 단계에서의 출력을 변환할 때 발생된 결과의 한 예의 도시도.
도 50은 제 5실시예에 따른 추출 단계에서 디멀티플렉스 수단에 의해 수행되는 처리를 나타내는 흐름도.
도 51은 제 5실시예에 따른 추출 단계에서 비디오 스키밍 수단에 의해 수행되는 처리를 나타내는 흐름도.
도 52는 제 5실시예에 따른 추출 단계에서 오디오 스키밍 수단에 의해 수행되는 처리를 나타내는 흐름도.
도 53은 제 5실시예에 따른 추출 단계에서 비디오 스키밍 수단에 의해 수행되는 처리를 나타내는 다른 흐름도.
도 54는 본 발명의 제 6실시예에 따른 데이터 처리 방법을 나타내는 블록도.
도 55는 제 6실시예에 따른 구성 단계 및 배달 단계를 나타내는 블록도.
도 56은 본 발명의 제 7실시예에 따른 미디어 처리 방법을 나타내는 블록도.
도 57은 제 5실시예에 따른 문맥 내용 기술 데이터의 구조를 나타내는 다이어그램.
도 58은 XML을 사용하여 제 7실시예에 따라 컴퓨터에서 문맥 내용 기술 데이터를 설명하는 데 사용된 문서 형태 정의(DTD)의 한 예의 일부 및 제 7실시예에 따라 XML을 사용하여 설명된 문맥 내용 기술 데이터의 한 예의 일부를 나타낸 도면.
도 59-66은 도 58에 나타낸 문맥 내용 기술 데이터의 연속 부분을 나타낸 도면.
도 67은 도 58 내지 66에 도시된 문맥 내용 기술 데이터에 대표 데이터를 부가하여 형성된 XML 문서의 한 예의 일부 및 컴퓨터에서 문맥 내용 기술 데이터를 설명하기 위해 XML로 나타낸 DTD의 한 예의 일부를 나타낸 도면.
도 68-80은 도 67에 도시된 문맥 내용 기술 데이터의 연속부분을 나타낸 도 면.
도 81은 제 7실시예에 따른 선택 단계의 처리 과정을 나타내는 흐름도.
도 82은 제 7실시예에 따른 미디어 처리 방법의 애플리케이션을 나타내는 블록 다이어그램.
도 83은 본 발명의 제 8실시예에 따른 선택 단계의 처리를 나타내는 흐름도.
도 84는 본 발명의 제 9실시예에 따른 선택 단계의 처리를 나타내는 흐름도.
도 85는 본 발명의 제 10실시예에 따른 선택 단계의 처리를 나타내는 흐름도.
도 86은 본 발명의 제 12실시예에 따른 데이터 처리 방법을 나타내는 블록 다이어그램.
도 87은 제 12실시예에 따른 문맥 내용 기술 데이터의 구조를 나타내는 다이어그램.
도 88은 XML을 사용하여 제 5실시예에 따라 컴퓨터에서 문맥 내용 기술 데이터를 설명하기 위해 사용된 문서 형태 정의(DTD)의 한 예의 일부분 및 제 5실시예에 따른 XML 문서의 한 예의 일부를 나타낸 도면.
도 89-96은 도 88에 나타낸 문맥 내용 기술 데이터의 연속 부분을 나타낸 도면.
도 97은 본 발명의 제 13실시예에 따른 데이터 처리 방법을 나타내는 블록 다이어그램.
도 98은 본 발명의 제 14실시예에 따른 데이터 처리 방법을 나타내는 블록 다이어그램.
도 99는 본 발명의 제 15실시예에 따른 데이터 처리 방법을 나타내는 블록 다이어그램.
도 100은 본 발명의 제 16실시에에 따른 데이터 처리방법을 나타내는 블록 다이어그램.
도 101은 본 발명의 제 17실시예에 따른 데이터 처리방법을 나타내는 블록 다이어그램.
도 102는 채널 및 층을 나타내는 설명도.
도 103은 XML을 사용하여 구조 기술 데이터를 설명하기 위해 사용된 문서 형태 정의(DTD)의 한 예의 일부 및 DTD로 설명된 구조 기술 데이터의 한 예의 일부를 나타낸 도면.
도 104는 도 103에 나타낸 구조 기술 데이터의 연속 부분의 도면.
도 105는 본 발명의 제 17실시예에 따른 예 1에서 판정 단계에 관한 처리를 나타내는 흐름도.
도 106은 제 17실시예에 따른 예 1의 판정 단계에서 사용자 요구에 응답하여 수행되는 판정 처리를 나타내는 흐름도.
도 107은 제 17실시예에 따른 예 1의 판정 단계에서 비디오 데이터에 관한 판정 처리를 나타내는 흐름도.
도 108는 제 17실시예에 따른 예 1의 판정 단계에서 음성 데이터에 관한 판정 처리를 나타내는 흐름도.
도 109는 본 발명의 제 17실시예에 따른 예 2에서 판정 단계에 관한 전반부의 처리를 나타내는 흐름도.
도 110은 본 발명의 제 17실시예에 따른 예 2에서 판정 단계에 관한 처리의 후반부를 나타내는 흐름도.
도 111은 본 발명의 제 17실시예에 따른 예 3에서 판정 단계에 관한 처리를 나타내는 흐름도.
도 112는 제 17실시예에 따른 예 3의 판정 단계에서 비디오 데이터에 관한 판정처리를 나타내는 흐름도.
도 113은 제 17실시예에 따른 예 3의 판정 단계에서 음성 데이터에 관한 판정처리를 나타내는 흐름도.
도 114는 본 발명의 제 17실시예에 따른 예 4에서 판정 단계에 관한 처리의 전반부를 나타내는 흐름도.
도 115는 본 발명의 제 17실시예에 따른 예 4에서 판정 단계에 관한 처리의 후반부를 나타내는 흐름도.
도 116은 제 17실시예에 따른 예 4의 판정 단계에서 사용자 요구에 응답하여 수행되는 판정 처리를 나타내는 흐름도.
도 117는 제 17실시예에 따른 예 4의 판정 단계에서 비디오 데이터에 관한 판정처리를 나타내는 흐름도.
도 118은 제 17실시예에 따른 예 4의 판정 단계에서 음성 데이터에 관한 판정처리를 나타내는 흐름도.
도 119는 본 발명의 제 17실시예에 따른 예 5의 판정 단계에 관련한 처리의 전반부를 나타내는 흐름도.
도 120은 본 발명의 제 17실시예에 따른 예 5에서 판정 단계에 관한 처리의 후반부를 나타내는 흐름도.
도 121는 제 17실시예에 따른 예 5의 판정 단계에서 사용자 요구에 응답하여 수행되는 판정처리를 나타내는 흐름도.
도 122는 본 발명의 제 18실시예에 따른 데이터 처리방법을 나타내는 블록 다이어그램.
도 123은 본 발명의 제 19실시예에 따른 데이터 처리방법을 나타내는 블록 다이어그램.
도 124는 본 발명의 제 20실시예에 따른 데이터 처리방법을 나타내는 블록 다이어그램.
도 125는 본 발명의 제 21실시예에 따른 데이터 처리방법을 나타내는 블록 다이어그램.
도 126은 본 발명의 제 22실시예에 따른 데이터 처리방법을 나타내는 블록 다이어그램.
도 127은 문맥 내용 기술 데이터 및 구조 기술 데이터가 병합된 DTD의 한 예 및 XML 문서의 한 예를 나타내는 도면.
도 128-132는 도 127에 도시된 XML 문서의 연속 부분을 나타낸 도면.
도 133은 본 발명의 제 11실시예에 따른 문맥 내용 기술 데이터의 구조를 나 타내는 예시도.
도 134는 제 11실시예에서 사용된 관점을 나타내는 예시도.
도 135는 제 11실시예에 따른 중요도를 나타내는 예시도.
도 136은 컴퓨터에서 문맥 내용 기술 데이터를 표현하는 데 사용되는 XML을 사용하여 본 발명의 제 11실시예의 문맥 내용 기술 데이터를 설명하기 위해 사용된 DTD의 일 예 및 XML로 기술된 문맥 내용 기술 데이터의 일부 예시도.
도 137 내지 163은 도 136에 나타낸 문맥 내용 기술 데이터의 연속 부분의 도면.
도 164은 컴퓨터에서 문맥 내용 기술 데이터를 표현하는 데 사용되는 XML을 사용하여 제 11실시예의 문맥 내용 기술 데이터를 설명하기 위해 사용된 DTD의 다른 일 예 및 XML로 기술된 문맥 내용 기술 데이터의 일부 예시도.
도 165 내지 196은 도 164에 나타낸 문맥 내용 기술 데이터의 연속 부분의 도면.
도 197은 본 발명의 제 11실시예에 따른 문맥 내용 기술 데이터의 다른 구조를 나타내는 도면.
도 198은 컴퓨터에서 문맥 내용 기술 데이터를 표현하는 데 사용되는 XML을 사용하여 제 11실시예의 문맥 내용 기술 데이터(도 197에 대응)를 설명하기 위해 사용된 DTD의 일 예 및 XML로 기술된 문맥 내용 기술 데이터의 일부 예시도.
도 199 내지 222은 도 164에 나타낸 문맥 내용 기술 데이터의 연속 부분의 도면.
도 223은 컴퓨터에서 문맥 내용 기술 데이터를 표시할 때 사용되는 XML을 사용하여 제 11실시예의 문맥 내용 기술 데이터(도 197에 대응)를 설명하기 위해 사용된 DTD의 다른 일 예 및 XML로 기술된 문맥 내용 기술 데이터의 일부 예시도.
도 224 내지 252은 도 164에 도시된 문맥 내용 기술 데이터의 연속 부분을 나타낸 도면.
도 253은 문맥 내용 기술 데이터의 프로그램 표시에서 관점에 대한 링크를 나타내는 다이어그램.
도 254-256은 문맥 내용 기술 데이터의 프로그램 표시에서 관점 테이블 및 관점의 링크를 나타내는 다이어그램.
도 257-260은 데이터 구조 부분과 속성 부분으로 구성되는 문맥 내용 기술 데이터의 데이터 구조를 나타내는 다이어그램.
도 261-263은 문맥 내용 기술 데이터 변환 방법의 제 1실시예에 의해 구성된 제 2의 문맥 내용 기술 데이터의 데이터 구조를 나타내는 다이어그램.
도 264는 원래 문맥 내용 기술 데이터에 대한 <세그먼트> 및 <키 워드, 우선순위>의 일 예를 나타내는 다이어그램.
도 265는 문맥 내용 기술 데이터 변환 방법의 제 1실시예에 의해 도 264에 보인 원래 문맥 내용 기술 데이터를 변환함으로써 형성된 제 2의 문맥 내용 기술 데이터에 대한 데이터 구조를 나타내는 다이어그램.
도 266은 문맥 내용 기술 데이터 변환 방법의 제 2실시예에 의해 구성된 제 2의 문맥 내용 기술 데이터의 데이터 구조를 나타내는 다이어그램.
도 267은 문맥 내용 기술 데이터 변환 방법의 제 2실시예에 의해 도 264에 보인 원래 문맥 내용 기술 데이터를 변환함으로써 형성된 제 2의 문맥 내용 기술 데이터에 대한 데이터 구조를 나타내는 다이어그램.
도 268은 문맥 내용 기술 데이터 변환 방법의 제 3실시예에 의해 구성된 제 2의 문맥 내용 기술 데이터의 데이터 구조를 나타내는 다이어그램.
도 269는 문맥 내용 기술 데이터 변환 방법의 제 3실시예에 의해 구성된 제 2의 문맥 내용 기술 데이터의 다른 데이터 구조를 나타내는 다이어그램.
도 270은 문맥 내용 기술 데이터 변환 방법의 제 3실시예에 의해 도 264에 보인 원래 문맥 내용 기술 데이터를 변환함으로써 형성된 제 2의 문맥 내용 기술 데이터에 대한 데이터 구조를 나타내는 다이어그램.
본 발명은 미디어 콘텐츠 데이터 처리방법, 저장 매체 및 프로그램에 관한 것이며, 그 모두는 동화상, 비디오 프로그램 또는 오디오 프로그램 등의 연속적인 오디오-비디오 데이터(미디어 콘텐츠)의 시청, 재생, 전달에 관련되고, 미디어 콘텐츠의 개요 또는 하이라이트된 화면 또는 시청자가 원하는 미디어 콘텐츠의 화면이 재생 및 전달되게 하는 테이터 처리 방법에 관한 것이다.
종래의 미디어 콘텐츠는 미디어 콘텐츠를 저장하는 개별 파일을 기초로 하여재생, 전달 또는 저장되었다.
동화상의 특정 장면을 검색하는 방법에 관한 일본국 특허 공개공보 평10-11182호에 설명되어 있는 바와 같이, 동화상의 화면들간의 변화(이하 "화면 컷"이라 칭함)가 검출되고, 이 화면 컷에 시작 프레임의 시간 코드, 종료 프레임의 시간 코드, 및 화면의 키워드 등의 부가 정보가 부가된다.
대안적인 방법으로서, 카네기 멜론 대학(CMU)에서 동화상의 화면 컷을 검출하고, 사람의 얼굴 또는 캡션을 검출함으로써, 또 음성인식으로 키 구문을 검출함으로써 동화상을 요약하려는 시도가 이루어졌다 [마이클 에이. 스미쓰 및 타케오 가네데(Michael A. Smith and Takeo KANADE)에 의한 1997년 2월 3일자 논문 "영상 및 언어 이해 기술의 결합을 통한 비디오 스키밍 및 특성화 기법(Video Skimming and Characterization through Combination of Image and Language Comprehension Techniques)" CMU-CS-97-111 참조].
동화상이 매 파일을 기초로 재생될 때, 동화상의 개요를 리뷰(review)하는 것이 불가능하다. 또한, 하이라이트된 화면 또는 사용자가 원하는 화면들이 검색될 때에도, 화면 또는 화면들은 미디어 콘텐츠의 선두부터 탐색되어야만 한다. 또한, 동화상을 전달할 경우에, 파일의 모든 데이터 집합이 전달되어 매우 긴 전달시간이 요구된다.
일본국 특허 공개 공보 평10-111872호에 설명된 방법에 따르면, 화면들은 키워드를 사용하여 검색될 수 있으며, 이에 의해 사용자는 원하는 화면들의 검색을 용이하게 할 수 있다. 부가 데이터는 화면들의 상관 관계 또는 연결을 포함하지 않는다. 이러한 이유로 인해, 상기 방법은 예를 들어 스토리중 하나의 서브플 롯(subplot)을 검색할 때 곤란성에 직면한다. 또한, 키워드만을 기초로 하여 화면들을 검색할 때, 사용자는 어떤 화면이 문맥적으로 중요한지를 인식하는 데 있어 곤란성에 직면한다. 그러므로, 개요 화면 또는 하이라이트된 화면을 준비하는 것이 곤란해진다.
상기한 CMU에서 개발된 방법은 동화상의 요약을 가능하게한다. 그러나, 요약은 단일의 고정된 패턴의 요약으로 귀결된다. 그 이유로 인해, 다른 재생 시간을 요구하는 요약으로의 동화상의 요약은 예를 들어 재생시간이 3분 또는 5분 길이라고 가정할 때 어렵게 된다. 또한, 특정 캐릭터를 포함하는 화면의 선택과 같은 사용자가 원하는 동화상의 요약도 어렵게 된다.
본 발명의 목적은 미디어 콘텐츠의 재생시 개요, 하이라이트된 화면, 또는 시청자가 원하는 화면만을 선택, 재생 및 전달하기 위한 수단을 제공하는 데 있다.
본 발명의 다른 목적은 개요, 하이라이트된 화면, 또는 원하는 화면의 선택시 사용자가 원하는 시간 간격 내에서 개요, 하이라이트 화면, 또는 시청자가 원하는 화면을 재생하는 수단을 제공하는 것이다.
*본 발명의 또 다른 목적은 미디어 콘텐츠를 전달하는 동안 사용자의 요구에 따라 사용자가 원하는 시간 간격 내에서 개요, 하이라이트 화면의 수집, 또는 사용자가 원하는 화면만을 전달하는 수단을 제공하는 것이다.
본 발명의 또 다른 목적은 사용자가 서버와의 통신을 설정하는 회선의 혼잡 도에 따라 전달되는 데이터량을 제어하는 수단을 제공하는 것이다.
종래 기술의 문제를 해결하기위해, 본 발명의 한가지 양상에 따르면, 계층 구조로 기술된 문맥 내용 기술 데이터를 입력하는 단계를 포함하고, 그 계층 구조는 시변 미디어 콘텐츠 및 그 미디어 콘텐츠의 콘텍스트가 미디어 콘텐츠를 나타내는 단일 요소로 형성되는 최고 계층과; 하나의 요소가 미디어 콘텐츠를 분할함에 의해 형성된 미디어 세그먼트를 나타내고, 대응하는 미디어 세그먼트 및 스코어에 관한 시간 정보인 속성으로서 할당되는 최저 계층과; 미디어 세그먼트들중 적어도 하나와 직간접으로 연관되고 화면들 또는 화면 집합을 나타내는 요소를 포함하는 나머지 계층을 포함하고, 상기 문맥 내용 기술 데이터에 할당된 스코어를 기초로 하여 적어도 하나의 세그먼트를 미디어 콘텐츠로부터 선택하는 단계를 포함하는 데이터 처리 방법이 제공된다.
양호하게, 상기 데이터 처리 방법은 선택 단계에 의해 선택된 세그먼트에 대응하는 데이터만을 미디어 콘텐츠로부터 추출하는 추출 단계를 더 포함한다.
양호하게, 상기 데이터 처리방법은 선택 단계에 의해 선택된 세그먼트에 대응하는 데이터만을 미디어 콘텐츠로부터 재생하는 재생 단계를 더 포함한다.
양호하게, 상기 스코어는 미디어 콘텐츠의 문맥상의 중요성을 나타낸다.
양호하게, 스코어는 관심있는 화면의 문맥상의 중요도를 키워드의 관점에서 나타내고, 선택 단계에서 스코어가 적어도 하나의 관점에서 사용되어지는 화면을 선택한다.
양호하게, 미디어 콘텐츠는 비디오 데이터 또는 오디오 데이터에 해당한다.
양호하게, 미디어 콘텐츠는 상호 동기되는 비디오 데이터 및 오디오 데이터를 포함하는 데이터에 대응한다.
양호하게, 문맥 내용 기술 데이터는 비디오 데이터 또는 오디오 데이터의 구성을 설명한다.
양호하게, 문맥 내용 기술 데이터는 비디오 데이터 집합 또는 오디오 데이터 집합 개개의 구성을 설명한다.
양호하게, 선택 단계에서, 화면은 비디오 데이터 또는 오디오 데이터에 관한 문맥 내용 기술 데이터를 참고로 선택된다.
양호하게, 상기 선택 단계는 오디오 데이터의 문맥 내용 기술 데이터를 참고로 오디오 데이터의 화면을 선택하는 오디오 선택 단계 또는 비디오 데이터의 문맥 내용 기술 데이터를 참고로 비디오 데이터의 화면을 선택하는 비디오 선택 단계를 포함한다.
양호하게, 선택 단계는 오디오 데이터의 문맥 내용 기술 데이터를 참고로 오디오 데이터의 화면을 선택하는 오디오 선택 단계와, 그리고 비디오 데이터의 문맥 내용 기술 데이터를 참고로 비디오 데이터의 화면을 선택하는 비디오 선택 단계를 포함한다.
양호하게, 추출 단계에서 추출되는 데이터는 비디오 데이터 또는 오디오 데이터에 해당한다.
양호하게, 추출 단계에서 추출되는 데이터는 상호 동기되는 비디오 데이터 및 오디오 데이터를 포함하는 데이터에 대응한다.
양호하게, 미디어 콘텐츠는 단일 시간 주기내에서 복수의 다른 미디어 데이터 집합을 포함한다. 또한, 상기 데이터 처리 방법은 미디어 콘텐츠의 데이터 구성을 갖는 구조 기술 데이터를 수신하고, 선택 대상으로서 데이터를 판정하기 위해 사용되는 판정 조건을 토대로 미디어 데이터 집합중 어느 하나를 선택 대상으로 취할 것인지를 판정하는 판정 단계를 포함한다. 또한, 선택 단계에서, 데이터는 구조 기술 데이터를 참고로 판정 수단에 의해 선택 대상으로 판정되었던 데이터 집합만으로부터 선택된다.
양호하게, 데이터 처리 방법은, 미디어 콘텐츠의 데이터 구성을 갖는 구조 기술 데이터를 수신하고, 선택 대상으로서 데이터를 판정하기위해 사용되는 판정 조건을 토대로 비디오 데이터 또는 오디오 데이터만, 또는 비디오 데이터 및 오디오 데이터 모두를 선택 대상으로 취할 것인지를 판정하는 판정 단계를 더 포함한다. 또한, 선택 단계에서, 데이터는 구조 기술 데이터를 참고로 상기 판정 단계에 의해 선택 대상으로 판정된 데이터 집합만으로부터 선택된다.
양호하게, 미디어 콘텐츠는 단일 시간 주기내에서 복수의 다른 미디어 데이터 집합을 포함한다. 양호하게, 판정 단계에서, 미디어 콘텐츠의 데이터 구성을 갖는 구조 기술 데이터가 수신되고, 비디오 데이터 집합 및/또는 오디오 데이터 집합중 어느 하나가 선택 대상으로 취해질 것인지에 대한 판정이 수행된다. 또한, 선택 단계에서, 데이터는 구조 기술 데이터를 참고로 판정 단계에 의해 선택 대상으로서 판정된 데이터 집합만으로부터 선택된다.
양호하게, 대응하는 미디어 세그먼트에 관한 대표 데이터는 최저 계층에서 문맥 내용 기술 데이터의 개별적인 요소에 속성으로서 부가되고; 선택 단계에서, 대응하는 미디어 세그먼트에 관한 미디어 세그먼트 및/또는 대표 데이터에 관한 전체 데이터가 선택된다.
양호하게, 미디어 세그먼트에 관한 전체 데이터는 미디어 데이터에 해당하고, 미디어 콘텐츠는 단일 시간 주기내에서 복수의 다른 미디어 데이터 집합을 포함한다. 양호하게, 데이터 처리 방법은, 미디어 콘텐츠의 데이터 구성을 갖는 구조 기술 데이터를 수신하고 미디어 데이터 집합 및/또는 대표 데이터 집합중 어느 하나를 선택 대상으로 취할 것인지를 판정하는 판정 단계를 더 포함한다. 또한, 선택 단계에서, 데이터는 구조 기술 데이터를 참고로 판정 단계에 의해 선택 대상으로서 판정된 데이터 집합만으로부터 선택된다.
양호하게, 데이터 처리 방법은 미디어 콘텐츠의 데이터 구성을 갖는 구조 기술 데이터를 수신하고, 선택 대상으로서 데이터를 판정하기위해 사용되는 판정 조건을 토대로 단지 미디어 세그먼트에 관한 전체 데이터 또는 미디어 세그먼트에 관한 대표 데이터 또는 해당 미디어 세그먼트에 관한 전체 데이터 및 대표 데이터 모두를 선택 대상으로서 취할 것인지를 판정하는 판정 단계를 더 포함한다. 또한, 선택 단계에서, 데이터는 구조 기술 데이터를 참고로 판정 수단에 의해 선택 대상으로 판정된 데이터 집합만으로부터 선택된다.
양호하게, 판정 조건은 수신 단말기의 능력, 전달 회선의 혼잡도, 사용자의 요구 및 사용자의 기호 중 적어도 하나 또는 그 조합을 포함한다.
양호하게, 데이터 처리 방법은 추출 단계에서 추출된 데이터로부터 미디어 콘텐츠의 스트림을 형성하는 구성 단계를 더 포함한다.
양호하게, 데이터 처리 방법은 구성 단계에 의해 형성된 스트림을 라인을 통해 전달하는 전달 단계를 더 포함한다.
양호하게, 데이터 처리 방법은 구성 단계에 의해 형성된 스트림을 데이터 기록 매체상에 기록하는 기록 단계를 더 포함한다.
양호하게, 데이터 처리 방법은 데이터 기록 매체의 사용가능한 디스크 공간에 따라 이미 저장되었던 미디어 콘텐츠 및/또는 새롭게 저장되는 미디어 콘텐츠를 재구성하는 데이터 기록 매체 관리단계를 더 포함한다.
양호하게, 데이터 처리 방법은 미디어 콘텐츠의 저장 주기에 따라 데이터 기록 매체에 저장된 미디어 콘텐츠를 재구성하는 저장된 콘텐츠 관리단계를 더 포함한다.
본 발명의 다른 양상에 따르면, 전술한 데이터 처리 방법을 컴퓨터에 의해 수행되는 프로그램 형태로 기록하는 컴퓨터로 판독가능한 기록 매체가 제공된다.
본 발명의 또 다른 양상에 따르면, 전술한 데이터 처리 방법을 컴퓨터로 하여금 수행하게 만드는 프로그램이 제공된다.
본 발명의 데이터 처리방법, 기록 매체 및 프로그램에서, 선택 수단(선택 단계에 대응)은 입력 수단(입력 단계에 대응)에 의해 얻어진 최고 계층, 최저 계층, 및 나머지 계층을 포함하는 계층 스트라텀의 문맥 내용 기술 데이터를 사용하여 문맥 내용 기술 데이터의 최저 계층 또는 나머지 계층에 속성으로서 첨부된 스코어를 토대로 하여 미디어 콘텐츠로부터 적어도 하나의 세그먼트를 선택한다.
특히, 추출 수단(추출 단계에 대응)은 선택 수단(선택 단계에 대응)에 의해 선택된 세그먼트에 관한 데이터만을 추출한다.
특히, 재생 수단(재생 단계에 대응)은 선택 수단(선택 단계에 대응)에 의해 선택된 세그먼트에 관한 데이터만을 재생한다.
따라서, 중요한 장면을 미디어 콘텐츠로부터 자유롭게 선택할 수 있게 되고, 그와 같이 선택된 중요한 세그먼트가 추출 또는 재생될 수 있다. 또한, 문맥 내용 기술 데이터는 최고 계층, 최저 계층, 및 나머지 계층을 포함하는 계층 스트라텀이라고 가정한다. 화면들은 매 챕터 마다 또는 매 섹션 마다 임의의 단위로 선택될 수 있다. 소정 챕터의 선택 및 챕터로부터 불필요한 패러그래프의 삭제 등과 같은 각종의 선택 포맷이 사용될 수 있다.
본 발명의 데이터 처리방법, 기록 매체, 및 프로그램에서, 스코어는 미디어 콘텐츠의 문맥상의 중요도를 나타낸다. 스코어가 중요한 화면을 선택하도록 설정되면, 예를 들어 방송 프로그램의 중요한 화면의 수집은 쉽게 준비될 수 있다.
또한, 스코어가 키워드의 관점에서 관심있는 화면의 중요도를 나타내도록 설정된 경우, 키워드의 판정에 의해 세그먼트는 높은 자유도를 가지고 선택될 수 있다. 예를 들어, 키워드가 캐릭터 또는 이벤트 등과 같은 특정 관점으로부터 판정되는 경우, 사용자가 원하는 장면만이 선택될 수 있다.
본 발명의 데이터 처리방법, 기록 매체, 및 프로그램에서, 미디어 콘텐츠는 비디오 데이터 및/또는 오디오 데이터에 해당하고, 문맥 내용 기술 데이터는 각 비디오 데이터 집합 및/또는 오디오 데이터 집합의 구성을 기술한다. 비디오 선택 수 단(비디오 선택 수단에 대응)은 비디오 데이터에 관한 문맥 내용 기술 데이터를 참고로 화면을 선택한다. 오디오 선택 수단(오디오 선택 단계에 대응)은 오디오 데이터에 관한 문맥 내용 기술 데이터를 참고로 화면을 선택한다.
또한, 추출 수단(추출 단계에 대응)은 비디오 데이터 및/또는 오디오 데이터를 추출한다.
중요한 세그먼트는 비디오 데이터 및/또는 오디오 데이터로부터 선택될 수 있고, 그와 같이 선택된 세그먼트에 관한 비디오 데이터 및/또는 오디오 데이터가 추출될 수 있다.
본 발명의 데이터 처리방법, 기록 매체, 및 프로그램에서, 미디어 콘텐츠가 단일 시간 주기내에서 복수의 다른 미디어 데이터 집합을 포함하는 경우에, 판정 수단(판정 단계에 대응)은 선택 대상으로서 데이터를 판정하기위해 사용되는 판정 조건을 토대로 하여 미디어 데이터 집합중 어느 것을 선택 대상으로 취할것인지를 판정한다. 선택 수단(선택 단계에 대응)은 판정 수단(판정 단계에 대응)에 의해 판정된 데이터만으로부터 데이터 집합을 선택한다.
판정 조건은 수신 단말기의 능력, 전달 라인의 트래픽량, 사용자의 요구 및 사용자의 기호중 적어도 하나 또는 그 조합을 포함한다. 예를 들어, 수신 단말기의 능력은 비디오 표시 능력, 오디오 재생 능력, 또는 압축된 데이터를 해제하는 속도에 대응한다. 전달 라인의 트래픽량은 통신회선의 혼잡도에 대응한다.
미디어 콘텐츠가 예를 들어 채널 및 층으로 분할되고 상이한 미디어 데이터 집합이 채널 및 층에 할당되는 경우에, 판정 수단(판정 단계에 대응)은 판정 조건 에 따라 최적의 세그먼트에 관한 미디어 데이터를 판정할 수 있다. 따라서, 선택 수단(선택 단계에 대응)은 미디어 데이터의 적절한 양을 선택할 수 있다. 채널 및 층이 최적의 세그먼트로서 사용되는 경우에, 표준 해상도를 갖는 비디오 데이터는 동화상을 이송하는 채널 1/층 1에 할당될 수 있고, 고해상도를 갖는 비디오 데이터는 채널 1/층 2에 할당된다. 또한, 스테레오 오디오 데이터는 음성 데이터를 이송하는 채널 1에 할당되고, 모노럴 오디오 데이터는 채널 2에 할당될 수 있다.
본 발명의 데이터 처리방법, 기록 매체, 및 프로그램에서, 판정 수단(판정 단계에 대응)은 판정 조건을 기초하여 단지 비디오 데이터 또는 오디오 데이터만, 또는 비디오 및 오디오 데이터 모두를 선택 대상으로서 취할 것인지를 판정한다.
선택 수단(선택 단계에 대응)이 세그먼트를 선택하기전에, 판정 수단(판정 단계에 대응)은 미디어 데이터 집합중 어느 하나를 선택 대상으로 취할 것인지, 또는 단지 비디오 데이터, 오디오 데이터, 또는 비디오 및 오디오 데이터 모두를 선택 대상으로 취할 것인지를 판정한다. 결과로서, 세그먼트를 선택하기 위해 선택 수단(선택 단계에 대응)에 의해 요구된 시간이 단축될 수 있다.
본 발명의 데이터 처리방법, 기록 매체, 및 프로그램에서, 대표 데이터는 최저 계층에서 문맥 내용 기술 데이터의 개별적인 요소에 속성으로서 첨부되고, 선택 수단은 미디어 세그먼트에 관한 전체 데이터 및/또는 대응하는 미디어 세그먼트에 관한 대표 데이터를 선택한다.
본 발명의 데이터 처리방법, 기록 매체, 및 프로그램에서, 미디어 세그먼트에 관한 전체 데이터는 미디어 데이터에 해당하고, 미디어 콘텐츠는 단일의 시간 주기내에서 복수의 다른 미디어 데이터 집합을 포함한다. 판정 수단(판정 단계에 대응)은 구조 기술 데이터 및 판정 조건을 토대로 하여 미디어 데이터 집합 및/또는 대표 데이터중 어느 것을 선택 대상으로 취할 것인지를 판정한다.
미디어 콘텐츠는 예를 들어 채널 및 층으로 분할되고, 다른 미디어 데이터 집합은 채널 및 층에 할당된다. 판정 수단은 상기 판정 조건에 따라 최적의 세그먼트(채널 또는 층)에 관한 미디어 데이터를 판정할 수 있다.
본 발명의 데이터 처리방법, 기록 매체 및 프로그램에서, 판정 수단(판정 단계에 대응)은 판정 조건을 토대로 하여 단지 대응하는 미디어 세그먼트에 관한 전체 데이터 또는 대응하는 미디어 세그먼트에 관한 대표 데이터를 취할 것인지, 또는 대응하는 미디어 세그먼트에 관한 전체 데이터 및 대표 데이터 모두를 선택 대상으로 취할 것인지를 판정한다.
선택 수단(선택 단계에 대응)이 세그먼트를 선택하기전에, 판정 수단(판정 단계에 대응)은 미디어 데이터 집합중 어느 것을 선택 대상으로 취할 것인지 또는 전체 데이터만 또는 대표 데이터만 또는 전체 데이터 및 대표 데이터 모두를 선택 대상으로 취할 것인지를 판정한다. 결과로서, 세그먼트를 선택하기 위해 선택 수단(선택 단계에 대응)에 의해 요구된 시간이 단축될 수 있다.
본 발명의 데이터 처리방법, 기록 매체, 및 프로그램에서, 구성 수단(구성 단계에 대응)은 추출 수단(추출 단계에 대응)에 의해 추출된 데이터로부터 미디어 콘텐츠의 스트림을 형성한다. 따라서, 선택된 세그먼트에 대응하는 콘텐츠 부분을 설명하는 스트림 또는 파일이 마련될 수 있다.
본 발명의 데이터 처리방법, 기록 매체, 및 프로그램에서, 전달 수단(전달 단계에 대응)은 구성 수단(구성 단계에 대응)에 의해 형성된 스트림을 회선라인을 통해 전달한다. 그러므로, 단지 중요한 세그먼트에 관한 데이터만이 사용자에게 전달될 수 있다.
본 발명의 데이터 처리 방법, 기록 매체, 및 프로그램에서, 데이터 기록 매체 관리 수단(데이터 기록 매체 관리 단계에 대응)은 데이터 기록 매체의 사용가능한 디스크 공간에 따라 이제까지 저장되었던 미디어 콘텐츠 및/또는 새롭게 저장되는 미디어 콘텐츠를 재구성한다. 특히, 본 발명의 데이터 처리 방법, 기록 매체, 및 프로그램에서, 저장된 콘텐츠 관리 수단(저장된 콘텐츠 저장 단계에 대응)은 콘텐츠의 저장주기에 따라 데이터 기록 매체에 저장된 미디어 콘텐츠를 재구성한다. 따라서, 보다 큰 양의 미디어 콘텐츠가 데이터 기록 매체에 저장될 수 있다.
본 발명의 실시예를 첨부도면을 참고하여 이하 설명한다.
[제 1실시예]
본 발명의 제 1실시예를 설명한다. 본 실시예에서, MPEG-1 스트림의 동화상이 미디어 콘텐츠로서 취해진다. 이 경우에, 미디어 세그먼트는 단일 화면 컷에 대응하고, 스코어는 관심있는 장면의 전후관계의 중요성에 대한 객관적인 정도를 표시한다.
도 1은 본 발명의 제 1실시예에 따른 데이터 처리 방법을 도시하는 블록 다이어그램이다. 도 1에서, 도면번호 101은 선택 단계를 나타내고; 102는 추출 단계 를 나타낸다. 선택단계(101)에서, 미디어 콘텐츠의 화면은 문맥 내용 기술 데이터로부터 선택되고, 화면의 시작시간 및 종료시간이 출력된다. 추출단계(102)에서, 선택단계(101)에서 출력된 시작시간 및 종료시간에 의해 형성된 미디어 콘텐츠의 세그먼트에 관한 데이터가 추출된다.
도 2는 제 1실시예에 따른 문맥 내용 기술 데이터의 구성을 도시한다. 본 실시예에서, 문맥 내용(콘텍스트: context)은 트리 구조에 따라 기술된다. 트리 구조내의 요소(element)는 좌에서 우로 날짜순으로 배열된다. 도 2에서, <콘텐츠>로 표시된 트리의 루트는 콘텐츠의 단일 부분을 나타내고, 콘텐츠의 타이틀(title)은 속성으로서 루트에 할당된다.
프로그램의 자(children) 요소가 <섹션>으로 표시된다. 관심있는 화면의 문맥상의 중요도를 나타내는 우선순위는 속성으로서 <섹션>요소에 첨부된다. 중요도는 1 내지 5 범위의 정수값이라 가정하고, 여기서 1은 최소의 중요도를 나타내고 5는 최대 중요도를 나타낸다.
<섹션>의 자 요소는 <섹션> 또는 <세그먼트>로 표시된다. 여기서, <섹션>요소 그 자체는 다른 자<섹션>의 자 요소로서 취해질 수 있다. 그러나, 단일 <섹션>요소는 자<섹션> 및 자<세그먼트>의 혼합을 가질 수 없다.
<세그먼트>요소는 단일 화면 컷을 나타내고 그 부모(parent)<섹션>에 할당된 것과 동일한 우선순위로 할당된다. <세그먼트>에 첨부된 속성는 시작 시간을 나타내는 "시작" 및 종료 시간을 나타내는 "종료"이다. 화면은 상업적으로 이용할 수 있는 소프트웨어 또는 네트워크를 통해 이용할 수 있는 소프트웨어를 사용하여 컷(cut)될 수 있다. 대안적으로, 화면은 수동으로 컷될 수 있다. 본 실시예에서 시간 정보가 화면 컷의 시작 시간 및 종료 시간으로 표시되지만, 시간 정보가 관심있는 화면의 시작 시간 및 관심있는 화면의 지속시간에 의해 표시될 때 비슷한 결과가 이루어진다. 이 경우에, 관심있는 화면의 종료 시간이 시작 시간에 대한 지속기간의 부가에 의해 얻어진다.
영화와 같은 스토리의 경우에, 그 스토리의 챕터, 섹션, 및 패라그래프는 다수 계층 스트라텀(stratum)내의 <섹션>요소를 사용하여 문맥 내용 기술 데이터를 기초로 하여 설명될 수 있다. 다른 예에서, 야구 게임이 설명될 때, 최고 계층 레벨에서 <섹션>요소는 이닝을 설명하기위해 사용될 수 있고 그 자<섹션>은 하프 이닝을 설명하기 위해 사용될 수 있다. 또한, <섹션>요소중 제 2 발생 자<섹션>은 각 타자의 타수를 설명하는데 사용되고, <섹션>요소중 제 3의 자<섹션>은 각 피치, 피치간의 시간 간격, 및 타격 결과를 설명하기 위해 사용된다.
그러한 구성을 갖는 문맥 내용 기술 데이터는 예를 들어 익스텐서블 마크업 랭귀지(Extensible Markup Language: XML)를 사용하여 컴퓨터에서 나타낼 수 있다. XML은 잘 알려진 바와 같이 데이터 설명 언어이며 그 언어의 표준화는 월드 와이드 웹 콘소시엄(WWW consortium)에 의해 추구된다. 권고안 버젼 1.0은 1998년 2월 10일 제출되었다. XML 버젼 1.0의 사양서는 http://www.w3.org/TR/1998/REC-xml-19980210로부터 얻을 수 있다.
도 3 내지 9는 XML을 사용하여 본 실시예에 따른 문맥 내용 기술 데이터를 설명하기위해 사용된 문서 형태 정의(DTD)의 한 예 및 DTD를 사용하여 설명된 문맥 내용 기술 데이터의 한 예를 도시한다. 도 10 내지 19는 도 3 내지 9에 도시된 문맥 내용 기술 데이터에 대한 대표 이미지 (즉, 비디오 데이터) 및 키워드 (오디오 데이터)와 같은 미디어 세그먼트의 대표 데이터[우위(dominant) 데이터]의 부가에 의해 마련된 문맥 내용 기술 데이터의 한 예와, XML를 사용하여 문맥 내용 기술 데이터를 설명하기 위해 사용된 DTD의 한 예를 도시한다.
선택 단계(101)에 관련한 처리 방법이 설명된다. 선택 단계(101)에 관한 처리는 문맥 내용 기술 데이터의 포맷 및 각 화면의 콘텍스트의 콘텐츠에 스코어를 할당하는 방법에 밀접하게 관련된다.
본 실시예에서, 선택 단계(101)에 관한 처리는 도 22에 나타낸 것과 같이 자<세그먼트>를 갖는 <섹션>요소 만을 포커스함으로써 이루어진다(도 23의 단계 S1, S4, 및 S5). 소정의 임계값을 초과하는 우선순위를 갖는 <섹션>요소가 선택되고(도 23의 단계S2), 그와 같이 선택된 <섹션>요소의 시작 시간 및 중료 시간이 출력된다(도 23의 단계 S3). 자<세그먼트>를 갖는 <섹션>요소에 할당된 우선순위는 모든 <섹션>요소간에 공유된 중요도에 대응하고, 그것의 각각은 콘텐츠내에서 자<세그먼트>를 갖는다. 더 자세하게, 도 22에 도시된 점선에 의해 포위된 <섹션>요소간에 공유된 중요도는 우선순위로서 설정된다. 앞선 <섹션>요소을 제외한 <섹션>요소 및 <세그먼트>에 할당된 우선순위는 임의로 설정된다. 중요도는 특정값으로 되기위해 반드시 설정될 필요는 없고, 같은 중요도는 다른 요소에 할당될 수 있다. 도 23은 제 1실시예에 따른 선택 단계(101)에 관한 처리를 도시하는 흐름도이다. 그와 같이 선택된 <섹션>요소에 대해, <섹션>요소에 의해 표시된 화면의 시작 시간 및 종료 시간은 그와 같이 선택된 <섹션>요소의 자 <세그먼트>요소로부터 판정된다. 그와 같이 판정된 시작 시간 및 종료 시간이 출력된다.
본 발명에서 선택이 <섹션>요소에 포커스함으로써 이루어지지만, 그것의 각각은 자<세그먼트>를 갖고, 선택은 <세그먼트>요소에 포커스함으로써 이루어질 수 있다. 이 경우에, 우선순위는 콘텐츠내의 모든 <세그먼트>요소간에 공유된 중요도에 대응한다. 대안적으로, 선택은 자<세그먼트>를 갖지 않는 고계층 레벨의 <섹션>요소간으로부터 같은 계층 레벨의 <섹션>요소에 포커스함으로써 이루어질 수 있다. 더 자세하게, 선택은 설정된 부모<콘텐츠> 또는 설정된 자<세그먼트>로부터 카운트되는 같은 경로 번호에서 <섹션>요소에 포커스함으로써 이루어질 수 있다.
추출 단계(102)에 관한 처리를 도 24를 참고로 설명한다. 도 24는 제 1실시예에 따른 추출 단계(102)를 도시하는 블록도이다. 도 24에 나타낸 것과 같이, 제 1실시예에 따른 추출 단계(102)는 디멀티프렉스 수단(601), 비디오 스키밍 수단(602), 및 오디오 스키밍 수단(603)에 의해 실현된다. 본 실시예에서, MPEG-1 시스템 스트림은 미디어 콘텐츠로서 취해진다. MPEG-1 시스템 스트림은 비디오 스트림 및 오디오 스트림을 단일 스트림으로 멀티플렉싱함으로써 형성된다. 디멀티플렉싱 수단(601)은 그 멀티플렉스된 시스템 스트림으로부터 비디오 스트림 및 오디오 스트림을 분리한다. 비디오 스키밍 수단(602)은 그와 같이 분리된 비디오 스트림 및 선택 단계(101)에서 선택된 세그먼트를 수신하고, 그 수신된 비디오 스트림으로부터 그와 같이 선택된 세그먼트만을 출력한다. 오디오 스키밍 수단(603)은 그 분리된 오디오 스트림 및 선택 단계(101)에서 선택된 세그먼트를 수신하고, 그 수신 된 오디오 스트림으로부터 그 선택된 세그먼트에 관한 데이터만을 출력한다.
디멀티플렉스 수단(601)에 의해 수행되는 처리가 첨부도면을 참고로 설명된다. 도 25는 디멀티플렉스 수단(610)에 의해 이루어진 처리에 관한 흐름도이다. MPEG-1 시스템 스트림을 멀티플렉스하는 방법은 국제 표준 ISO/IEC IS 11172-1하에서 표준화된다. 비디오 스트림 및 오디오 스트림은 비디오 스트림 및 오디오 스트림을 패킷이라 칭하는 적당한 길이의 스트림으로 분할함으로써 및 헤더와 같은 부가 정보를 각 패킷에 첨부함으로써 패킷으로 멀티플렉스된다. 복수의 비디오 스트림 및 복수의 오디오 스트림은 같은 방법으로 단일 신호로 또한 멀티플렉스된다. 각 패킷의 헤더에서, 패킷을 비디오 스트림 또는 오디오 스트림으로서 식별하는 스트림 ID 및 비디오 데이터를 오디오 데이터와 동기시키는 시간 스탬프가 기술된다. 스트림 ID는 패킷을 비디오 스트림 또는 오디오 스트림으로서 식별하는 사용되는 것으로 제한되지 않는다. 복수의 비디오 스트림이 멀티플렉스될 때, 스트림 ID는 관심있는 패킷이 관한 비디오 스트림을 복수의 비디오 스트림으로부터 식별하는 데 사용될 수 있다. 비슷하게, 복수의 오디오 스트림이 멀티플렉스될 때, 스트림 ID는 관심있는 패킷이 관한 오디오 스트림을 복수의 오디오 스트림으로부터 식별하는 데 사용될 수 있다. MPEG-1 시스템에서, 복수의 패킷은 단일 팩으로 번들되고, 동기 재생을 이루는 데 사용된 기준 시간으로서 사용하는 멀티플렉스 속도 및 부가 정보가 헤더로서 팩에 첨부된다. 또한, 멀티플렉스된 비디오 및 오디오 스트림수에 관한 부가정보는 시스템 헤더로서 헤드 팩에 첨부된다. 디멀티플렉스 수단(601)은 멀티플렉스된 비디오 및 오디오 스트림수를 헤드 팩의 시스템 헤더로부터 판독하 고(S1 및 S2) 각 스트림의 데이터 집합을 저장하는 데이터 위치를 확정한다(S3 및 S4). 결과적으로, 디멀티플렉스 수단(601)은 각 패킷들의 스트림 ID를 검사하고 패킷에 포함된 데이터를 스트림 ID에 의해 특정화된 스트림이 저장되는 데이터 위치로 기록한다(S5 및 S6). 모든 패킷들은 전술한 방식으로 처리된다(S8, S9, 및 S10). 모든 패킷들이 처리된 후, 비디오 스트림은 매 스트림마다 비디오 스키밍 수단(602)에 출력되고, 오디오 스트림은 오디오 스키밍 수단(603)에 같은 방법으로 출력된다(S11).
비디오 스키밍 수단(602)의 동작이 하기에서 설명된다. 도 26은 비디오 스키밍(skimming) 수단(602)에 의해 이루어진 처리에 관한 흐름도이다. MPEG-1 시스템 스트림은 국제 표준 ISO/IEC IS 11172-2하에서 표준화된다. 도 27에 나타낸 것과 같이, 비디오 스트림은 시퀀스 층과, GOP(group-of-picture)층과, 화상층과, 슬라이스층과, 매크로 블록층과, 블록층을 포함한다. 랜덤 액세스는 최소 유닛인 GOP층을 토대로 이루어지고, 화상층에 포함된 각 층이 단일 프레임에 대응한다. 비디오 스키밍 수단(602)은 GOP 마다 데이터를 처리한다. 출력 프레임수를 카운트하는 카운터(C)는 0으로 초기화된다(S3). 첫째로, 비디오 스키밍 수단(602)은 비디오 스트림의 헤더가 시퀀스층의 헤더에 대응하는 것을 인식하고(S2 및 S4) 및 포함된 데이터를 헤더에 저장한다(S5). 결과적으로, 비디오 스키밍 수단은 데이터를 출력한다. 시퀀스층의 헤더는 연속 처리동안 나타낼수 있다. 헤더값은 그 값이 양자화 매트릭스에 관련되지 않으면 변화되지 않게된다. 그러므로, 시퀀스 헤더가 입력될 때마다, 입력 헤더값이 그 저장된 헤더값과 비교된다(S8 및 S14). 입력 헤더가 양자화 매트릭스에 관련된 값을 제외한 값에 의해 그 저장된 헤더와 다르다면, 입력 헤더는 에러를 고려된다(S15). 결과적으로, 비디오 스키밍 수단(602)은 입력 데이터의 GOP층의 헤더를 검출한다(S9). 시간 코드에 관한 데이터는 GOP층의 헤더에서 설명되고 (S10), 시간 코드는 시퀀스의 선두로부터 경과한 시간 주기를 설명한다. 비디오 스키밍 수단(602)은 시간 코드를 선택 단계(101)에 출력된 세그먼트와 비교한다(S1 및 S11). 시간 코드가 세그먼트에 포함하지 않은 것으로 판정되지 않으면, 비디오 스키밍 수단(602)는 시퀀스층의 다음 GOP층 전에 나타나는 데이터 집합 모두를 버린다. 대조적으로, 시간 코드가 그 선택된 세그먼트에 포함되면, 비디오 스키밍 수단(602)은 시퀀스층의 다음 GOP층 전에 나타나는 데이터 집합 모두를 출력한다(S13). 연속성을 확실히 하기위해, 데이터 집합은 이미 출력되고, 데이터 집합은 현재 출력되고, GOP층의 시간 코드는 변화되야 한다(S12). GOP층의 시간 코드를 변화시키는 값은 카운터(C)의 값을 사용하여 계산된다. 카운터(C)는 이미 출력된 프레임수를 보유한다. 식 1에 따라, 현재 출력되는 GOP층의 헤더 프레임을 표시하는 시간(Tv)은 C로부터 뿐만 아니라 시퀀스 헤더에서 설명되는 화상 속도 "pr"로부터 계산되고 초마다 표시되는 프레임수를 나타낸다.
Figure 112007011437209-PAT00001
"Tv"는 1/pr 초 단위의 값을 나타내고, 따라서 Tv의 값은 MPEG-1의 시간 코드의 포맷에 따라 변환된다. 그와 같이 변환된 값은 그 때 출력되는 GOP층의 시간 코드에서 설정된다. GOP층에 관한 데이터가 출력될 때, 출력 화상층수는 카운터(C)의 값에 부가된다. 전술한 처리는 비디오 스트림의 종료까지 반복해서 수행된다(S7 및 S16). 디멀티플렉스 수단(601)이 복수의 비디오 스트림을 출력하는 경우에, 처리는 비디오 스트림 각각에 대해 수행된다.
오디오 스키밍 수단(603)의 처리가 설명된다. 도 28은 오디오 스키밍 수단(603)에 의해 이루어진 처리에 관한 흐름도이다. MPEG-1 오디오 스트림은 국제 표준 ISO/IEC IS 11172-3하에서 표준화된다. 오디오 스트림은 오디오 액세스 유닛(AAU)으로 불리우는 일련의 프레임으로부터 형성된다. 도 29는 AAU의 구조를 도시한다. AAU는 오디오 데이터가 독립적으로 디코드될 수 있는 최소 유닛이고 설정되어 샘플된 데이터 집합(Sn)를 포함한다. 단일 AAU의 재생시간은 전달 속도를 나타내는 비트율 "br"; 샘플링 주파수(Fs); 및 AAU의 비트수(L)로부터 계산될 수 있다. 첫째로, 오디오 스트림에 포함된 AAU의 헤더는 검출됨으로써(S2 및 S5), 단일 AAU의 비트수(L)를 얻는다. 또한, 비트율 "br" 및 샘플링 주파수(Fs)는 AAU의 헤더에서 설명된다. 단일 AAU의 샘플수(Sn)는 식 2에 따라 계산된다.
Figure 112007011437209-PAT00002
단일 AUU의 재생시간(Tu)은 식 3에 따라 계산된다.
Figure 112007011437209-PAT00003
Tu의 값이 계산되는 동안, 스트림의 선두로부터 경과했던 시간은 AAU의 수를 카운트함으로써 얻어질 수 있다. 오디오 스키밍 수단(603)은 이미 나타났던 AAU의 수를 카운트하고 스트림의 선두로부터 경과되었던 시간을 계산한다(S7). 그와 같이 계산된 시간은 선택 단계(101)에서 출력된 세그먼트와 비교된다(S8). AAU를 나타내는 시간이 그 선택된 세그먼트에 포함되면, 오디오 스키밍 수단(603)은 그 AAU에 관한 데이터 집합 모두를 출력한다(S9). 대조적으로, AAU를 나타내는 시간이 그 선택된 세그먼트에 포함되지 않으면, 오디오 스키밍 수단(603)은 AAU에 관한 데이터 집합을 버린다. 전술한 처리가 오디오 스트림의 종료까지 반복해서 수행된다(S6 및 S11). 디멀티플렉스 수단(601)이 복수의 오디오 스트림을 출력할 때, 각 오디오 스트림은 그와 같이 설명된 처리를 받게 된다.
도 30에 나타낸 것과 같이, 추출 단계(102)로부터 출력된 비디오 스트림은 비디오 재생 수단에 입력되고, 추출 단계(102)로부터 출력된 오디오 스트림은 오디오 재생 수단에 입력된다. 비디오 스트림 및 오디오 스트림은 동기 재생되어, 미디어 콘텐츠의 개요 또는 하이라이트 화면의 재생을 가능하게한다. 또한, 그와 같이 발생된 비디오 및 오디오 스트림은 멀티플렉스되어, 미디어 콘텐츠의 개요 또는 하이라이트 화면의 수집에 관한 MPEG-1 시스템 스트림의 준비를 가능하게 한다.
[제 2실시예]
본 발명의 제 2실시예가 설명된다. 제 2실시예는 선택 단계에 관한 처리에 대해서만 제 1실시예와 다르다.
*제 2실시예에 따른 선택 단계(101)에 관한 처리가 도면을 참고로 설명된다. 제 2실시예에 따른 선택 단계(101)에서, 최고 계층 레벨로부터 말단 <세그먼트>까지의 모든 요소에 할당된 우선순위값이 사용된다. <섹션>요소 및 <세그먼트> 각각에 할당된 우선순위는 콘텍스트적 중요성의 객관적인 정도를 나타낸다. 선택 단계(101)에 관한 처리가 도 31를 참고로 설명된다. 도 31에서, 도면번호(1301)는 문맥 내용 기술 데이터에 포함된 최고 계층 레벨의 <섹션>요소중 하나를 나타내고, 1302는 <섹션>요소(1301)의 자 <섹션>요소을 나타내고, 1303은 <섹션>요소(1302)의 자 <섹션>요소을 나타내고, 1304는 <섹션>요소(1303)의 자 <세그먼트>요소를 표시한다. 제 2실시예에 따른 선택 단계(101)에서, 말단<세그먼트>로부터 최고 계층 레벨의 조상<섹션>까지의 경로에 할당된 우선순위값 모두의 산술 수단은 계산된다. 경로의 산술 수단은 임계값을 초과할 때, <세그먼트>요소가 선택된다. 도 28에 도시된 예에서, 요소인 <세그먼트>(1304), <섹션>(1303), <섹션>(1302), 및 <섹션>(1301)의 속성의 산술 수단 "pa", 다시 말하면, 그 속성 우선순위값 (p4,p3,p2, 및 p1)의 산술 수단이 계산된다. 산술 수단 "pa"는 식 4에 따라 계산된다.
Figure 112007011437209-PAT00004
위와 같이 계산된 "pa"가 임계값과 비교된다(S1 및 S2). "pa"가 임계값을 초과할 때, <세그먼트>(1304)는 선택되고(S3), <세그먼트>(1304)의 "시작" 및 "종료"에 관한 속성값은 선택된 화면의 시작 시간 및 종료 시간으로서 출력된다. 모든 <세그먼트>요소는 전술한 처리를 받게 된다(S1 및 S6). 도 32는 제 2실시예에 따른 선택 단계(101)에 관한 처리를 도시하는 흐름도이다.
제 2실시예에서, 최고 계층 레벨의 조상<섹션>에 할당된 우선순위값에 달하는 최저 계층 레벨의 <세그먼트>에 할당된 우선순위값의 산술 수단은 계산되고, 말단 <세그먼트>는 그와 같이 계산된 산술 수단을 기초로 하여 선택된다. 대안적으로, 거기에서 최고 계층 레벨의 그 조상<섹션>에 할당된 우선순위값에 도달하는 자 <세그먼트>를 갖는 <섹션>요소에 할당된 우선순위값의 산술 수단이 계산될 수 있고, 자 <세그먼트>를 갖는 <섹션>요소는 그와 같이 계산된 산술 수단을 임계값과 비교함으로써 선택될 수 있다. 비슷하게, 다른 계층 스트라텀에서, 최고 계층 레벨의 그 조상<섹션>에 할당된 우선순위값에 달하는 <섹션>요소에 할당된 우선순위값의 산술 수단은 계산되고, 그와 같이 계산된 산술 수단은 임계값과 비교되어, 계층 스트라텀에서 <섹션>요소가 선택될 수 있다.
[제 3실시예]
본 발명의 제 3실시예가 설명된다. 제 3실시예는 선택 단계에 관한 처리에 대해서만 제 1실시예와 다르다.
제 3실시예에 따른 선택 단계(101)에 관한 처리를 도면을 참고로 설명한다. 제 1실시예와 연관해서 설명된 처리의 경우처럼, 제 3실시예에 따른 선택 단계(101)에서, 선택은 <섹션>요소에만 포커스함으로써 이루어지고, 그 각각은 자<세그먼트>를 갖는다. 제 3실시예에서, 선택되는 화면 모두의 지속기간 주기의 합에 대한 임계값이 설정된다. 더 자세하게, 이제까지 선택되었던 <섹션>요소의 지속기 간 주기의 합이 최대로 되나 임계값보다 적게 될때까지, <섹션>요소는 우선순위값의 감소하는 순서로 선택된다. 도 33은 제 3실시예에 따른 선택 단계(101)에 관한 처리의 흐름도이다. 각기 자<세그먼트>를 <섹션>요소의 수집은 집합 Ω으로서 얻어진다(S1). 집합Ω의 <섹션>요소는 속성 우선순위가 감소하는 순서로 분류된다(S2). 최고 우선순위값을 갖는 <섹션>요소는 집합 Ω으로부터 선택되고(S4 및 S5), 그와 같이 선택된 요소<선택>은 집합 Ω으로부터 제거된다. 그와 같이 선택된 <섹션>요소의 시작 시간 및 종료 시간은 <섹션>요소의 자<세그먼트> 모두의 검사에 의해 얻어지고, <섹션>요소의 지속기간이 계산된다(S6). 이제까지 선택되었던 <섹션>요소의 지속기간 주기의 합이 계산된다(S7). 합이 임계값을 초과하면, 처리는 완료된다(S7). 합이 임계값보다 낮으면, 선택된 <섹션>요소의 시작 시간 및 종료 시간이 출력된다(S9). 처리는 최고 우선순위값을 갖는 <섹션>요소이 집합 Ω으로부터 선택된다. 선택된 <섹션>요소의 지속기간 주기의 합이 임계값을 초과하거나 집합 Ω이 빌때까지 상기 설명된 처리가 반복된다(S4 및 S8).
제 3실시예에서, 선택은 자<세그먼트>를 갖는 <섹션>요소에 포커스함으로써 이루어진다. 그러나, 선택은 <섹션>요소을 대신해서 <세그먼트>요소에 포커스함으로써 이루어질 수 있다. 그 경우에, 우선순위값은 미디어 콘텐츠내의 <세그먼트>요소간에 공유된 중요도에 대응한다. 또한, 선택은 같은 계층 레벨내에서 자<세그먼트>를 갖지 않는 <섹션>요소에 포커스함으로써 이루어질 수 있다. 더 자세하게, 선택은 조상<콘텐츠> 또는 말단<세그먼트>로부터 카운트되는 같은 경로에 위치된 <섹션>요소상에 포커스함으로써 이루어질 수 있다.
제 2실시예의 경우에서처럼, 각 <섹션>요소 및 <세그먼트>에 할당된 우선순위값은 콘텍스트적인 중요성의 객관적인 정도로서 얻어지고, 최고 계층 레벨의 그 조상<섹션>에 달하는 <세그먼트>요소에 할당된 모든 우선순위값의 산술 수단 "pa"가 계산된다. 지속기간 주기의 합이 최대이나 임계값보다 적을 때까지 자<세그먼트> 또는 <세그먼트>요소를 각기 갖는 <섹션>요소는 "pa"의 감소하는 순서로 선택된다. 이경우에서처럼, 제 2실시예에서 발생된 것과 같은 장점의 결과가 이루어진다.
[제 4실시예]
본 발명의 제 4실시예가 설명된다. 제 4실시예는 선택 단계에 관한 처리에 대해서만 제 1실시예와 다르다.
제 4실시예에 따른 선택 단계(101)에 관한 처리를 도면을 참고로 설명한다. 제 1실시예의 선택 단계(101)에서 수행된 선택의 경우에서처럼, 제 4실시예의 선택 단계(101)에 관한 선택은 <세그먼트>요소, 및 자<세그먼트>를 갖는 <섹션>요소를 포커스함으로써 이루어진다. 제 3실시예의 경우처럼, 임계값은 본 실시예에서 선택되는 모든 화면의 지속기간 주기의 합에 관해서 설정된다. 제 1실시예의 경우처럼, 자<세그먼트>를 갖는 <섹션>요소에 할당된 우선순위값은 모든 <섹션>요소간에 공유된 중요도에 대응하고, 그 각각은 미디어 콘텐츠내에서 자<세그먼트>를 갖는다. 더욱 특히, 우선순위값은 도 34에 도시된 점선에 의해 포위된 <섹션>요소간에 공유된 중요도로서 얻어진다. 또한, <세그먼트>요소에 할당된 우선순위값은 같은 부모 <섹션>요소을 공유하는 <세그먼트>요소간에 공유된 중요도, 즉 도 34에서 도시된 점선 중 하나에 의해 포위된 <세그먼트>요소간에 공유된 중요도에 대응한다.
*도 35는 제 4실시예에 따른 선택 단계(101)에 관한 처리를 도시하는 흐름도이다. 자<세그먼트>를 각기 갖는 <섹션>요소의 수집은 집합 Ω로서 얻어진다(S1). 집합 Ω내의 <섹션>요소는 우선순위의 감소 순서로 분류된다(S2). 결과적으로, 최고 우선순위값을 갖는 <섹션>요소는 집합 Ω로부터 선택된다(S3, S4, 및 S5). 복수의 <섹션>요소가 최고 우선순위값을 가지면, 모든 요소가 선택된다. 그와 같이 선택된 <섹션>요소는 다른 집합 Ω'의 요소로서 얻어지고 집합 Ω로부터 제거된다. 그와 같이 선택된 <섹션>요소에 의해 표시된 화면의 시작 시간 및 종료 시간, 및 지속 기간은 <섹션>요소의 자<세그먼트>의 검사에 의해 앞서서 얻어지고 저장된다(S6). 복수의 <섹션>요소이 선택되면, 각 요소에 의해 표시된 화면 각각의 시작 시간, 종료 시간, 및 지속기간은 앞서서 얻어지고 저장된다. 집합 Ω'의 <섹션>요소의 지속기간 주기의 합은 얻어진다(S7 및 S8). 그 합은 임계값과 비교된다(S9). 지속기간 주기의 합은 임계값과 같고, 시작 시간 및 종료 시간에 속하고 이제까지 저장되었던 데이터 집합은 출력되고, 처리는 종료된다(S10). 대조적으로, 지속기간 주기의 합이 임계값보다 낮으면, 처리는 집합 Ω로부터 <섹션>요소의 선택으로 다시 복귀한다(S4 및 S5). 집합 Ω가 비게되면, 저장되는 시작 시간 및 종료 시간에 관한 모든 데이터 집합은 출력되고, 처리는 종료된다(S4). 지속기간 주기의 합이 임계값을 초과하면, 다음의 처리는 수행된다. 특히, 최소 우선순위를 갖는 <섹션>요소는 집합 Ω'로부터 선택된다(S11). 그 시간에, 복수의 <섹션>요소이 최소 우선 순위를 가자면, 모든 요소는 선택된다. 그와 같이 선택된 <섹션>요소의 자<세그먼트>중에서, 최소 우선순위를 갖는 자<세그먼트>는 삭제된다(S12). 그와 같이 제거된 자<세그먼트>에 대응하는 <섹션>요소의 시작 시간, 종료 시간 및 지속기간은 변화된다(S13). <세그먼트>요소의 삭제의 결과로서, 화면은 인터럽트될 수 있다. 그 경우에, 인터럽트되었던 화면 각각에 대해, 시작 시간, 종료 시간 및 지속기간은 저장된다. 또한, 자<세그먼트>의 삭제의 결과로서, <섹션>요소의 모든 자이 삭제되면, <섹션>요소는 집합 Ω'로부터 삭제된다. 복수의 <섹션>요소이 선택되면, 모든 요소는 그와 같이 설명된 처리를 받게된다. 자<세그먼트>의 삭제의 결과로서, 자<세그먼트>가 삭제되었던 <섹션>요소의 지속기간은 더 짧아지고, 지속기간 주기의 합을 감소시킨다. 집합 Ω'의 요소의 지속기간 주기의 합이 임계값보다 낮게 될때까지 그 삭제 처리는 반복해서 수행된다. 집합 Ω'의 요소의 지속기간 주기의 합이 임계값보다 낮게 될때(S14), 시작 시간 및 종료 시간에 속하고 저장되었던 모든 데이터 집합은 출력되고, 처리는 종료된다(S15).
제 4실시예에서 선택이 자<세그먼트> 또는 <세그먼트>요소를 각기 갖는 <섹션>요소에 포커스함으로써 이루어지지만, 선택은 <섹션>요소 및 그 자<섹션> 또는 <섹션>요소 및 그 자<세그먼트>에 포커스함으로써 또한 이루어진다. 그러한 경우에도, 제 4실시예에 의해 발생된 것과 같은 유리한 결과가 이루어진다.
지속기간 주기의 합이 임계값을 초과할 때 이루어진 <세그먼트>요소의 삭제에 대해서, 본 실시예에서 <섹션>요소는 최저 우선순위로부터 우선순위를 감소하는 시퀀스로 삭제된다. 그러나, 임계값은 <섹션>요소의 우선순위에 대해 설정되고, 최 소 우선순위를 갖는 자<세그먼트>는 임계값보다 낮은 모든 <섹션>요소 모두로부터 삭제될수 있다. 대안적으로, 다른 임계값은 <세그먼트>요소의 우선순위에 대해 설정될 수 있고, 우선순위를 임계값보다 낮게되는 <세그먼트>요소가 삭제될 수 있다.
[제 5실시예]
본 발명의 제 5실시예를 첨부도면을 참고로 설명한다. 본 실시예에서, MPEG-1 포맷의 동화상이 미디어 콘텐츠로서 취해진다. 이 경우에, 미디어 세그먼트는 단일 화면 컷에 대응하고, 스코어는 관심있는 화면의 콘텍스트적인 중요성의 객관적인 정도에 대응한다.
도 36은 본 발명의 제 5실시예에 따른 미디어 처리 방법을 도시하는 블록도이다.
도 36에서, 도면번호 1801는 선택 단계를 나타내고; 1802는 추출 단계를 나타내고; 1803은 구성 단계를 나타내고; 1804는 전달 단계를 나타내고; 1805는 데이터 베이스를 표시한다. 선택 단계(1801)에서, 미디어 콘텐츠의 화면은 문맥 내용 기술 데이터로부터 선택되고, 데이터를 저장하는 파일을 표시하는 데이터뿐만 아니라 그와 같이 선택된 화면의 시작 시간 및 종료 시간에 관한 데이터가 출력된다. 추출 단계(1802)에서, 화면의 시작 시간 및 종료 시간을 표시하는 데이터 집합 및 선택 단계(1801)에서 출력된 파일을 표시하는 데이터 집합이 수신된다. 또한, 추출 단계(1802)에서, 구조 기술 데이터를 참고로, 선택 단계(1801)에서 출력된 시작 시간 및 종료 시간에 의해 형성된 세그먼트에 관한 데이터가 미디어 콘텐츠의 파일로부터 추출된다. 구성 단계(1803)에서, 추출 단계(1802)에서 출력된 데이터는 멀티 플렉스되고, 그러므로 MPEG-1 포맷의 시스템 스트림을 구성한다. 전달 단계(1804)에서, 구성 단계(1803)에서 준비된 MPEG-1 포맷의 시스템 스트림은 라인을 통해 전달된다. 도면번호 1805는 미디어 콘텐츠, 그 구조 기술 데이터 및 문맥 내용 기술 데이터가 저장되는 데이터 베이스를 표시한다.
도 37은 제 5실시예에 따른 구조 기술 데이터의 구성을 도시한다. 본 실시예에서, 데이터의 물리적인 콘텐츠는 트리 구조로 설명된다. 데이터 베이스(1805)에서 미디어 콘텐츠의 저장 특성에 대해, 미디어 콘텐츠의 단일부분은 단일 파일의 형태로 반드시 저장될 필요가 없다. 어떤 경우에, 미디어 콘텐츠의 단일부분은 복수의 분리된 파일로 저장될 수 있다. 구조 기술 데이터의 트리 구조의 루트는 <콘텐츠>로서 기술되고 콘텐츠의 단일부분을 표시한다. 콘텐츠의 대응 부분의 타이틀은 속성으로서 루트<콘텐츠>에 첨가된다. <콘텐츠>의 자식은 미디어 콘텐츠를 저장하는 파일을 표시하는 <미디어오브젝트(mediaobject)>에 대응한다. 자<미디어오브젝트>는 미디어 콘텐츠를 저장하는 파일에 링크를 표시하는 링크 "로케이터" 및 문맥 내용 기술 데이터에 링크를 표시하는 식별자 ID에 속성으로서 첨가된다. 미디어 콘텐츠가 복수의 파일로 구성되는 경우에, "seq"는 미디어 콘텐츠내에서 관심있는 파일의 시퀀스를 나타내는 속성으로서 <미디어오브젝트>요소에 첨가된다.
도 38은 제 5실시예에 따른 문맥 내용 기술 데이터의 구성을 도시한다. 본 발명의 문맥 내용 기술 데이터는 구조 기술 데이터의 <미디어오브젝트>요소에 링크됨으로써 첨가된 제 1실시예의 문맥 내용 기술 데이터에 대응한다. 더 자세하게, 문맥 내용 기술 데이터의 루트<콘텐츠>는 자<세그먼트>를 갖고, <미디어오브젝트> 요소는 자<섹션>을 갖는다. <섹션>요소 및 <세그먼트>는 제 1실시예에서 사용된 것과 동일하다. 구조 기술 데이터의 <미디어오브젝트>요소는 문맥 내용 기술 데이터의 <미디어오브젝트>요소와 연관된다. 문맥 내용 기술 데이터의 <미디어오브젝트>요소의 자에 의해 설명된 미디어 콘텐츠의 화면들은 같은 값의 속성 ID를 갖는 구조 기술 데이터의 <미디어오브젝트>요소에 의해 표시된 파일에 저장된다. 또한, 요소 "세그먼트"에 할당된 시간 정보 "시작" 및 "종료"는 각 파일의 선두로부터 경과된 시간을 설정한다. 특히, 미디어 콘텐츠의 단일 부분이 복수의 파일을 포함하는 경우에, 각 파일의 선두에서 시간은 0에 대응하고 각 화면의 시작 시간은 파일의 선두로부터 관심있는 화면에 경과하는 시간에 의해 표시된다.
구조 기술 데이터 및 문맥 내용 기술 데이터는 예를 들어 익스텐서블 마크업 랭귀지(XML)를 사용하여 컴퓨터에서 표시될 수 있다. 도 39는 XML을 사용하여 도 37에 도시된 문서 형태 정의(DTD)의 한 예뿐만 아니라 DTD를 사용하여 설명된 구조 기술 데이터의 한 예를 도시한다. 도 40 내지 45는 XML을 사용하여 도 38에서 도시된 문맥 내용 기술 데이터를 설명하는 데 사용된 DTD뿐만 아니라 DTD에 의해 설명된 문맥 내용 기술 데이터의 한 예를 도시한다.
선택 단계(1801)에 관한 처리가 설명된다. 선택 단계(1801)에서, 제 1내지 4실시예와 연관해서 설명된 방법들중 어느 하나가 화면을 선택하는 방법으로 채용된다. 구조 기술 데이터의 <오브젝트>에 대한 링크는 선택된 화면의 시작 시간 밑 종료 시간의 출력과 결국 동시에 출력된다. 도 46은 구조 기술 데이터가 도 39에서 도시된 DTD를 사용하여 XML 문서의 형태로 설명되는 경우에 및 문맥 내용 기술 데 이터가 도 40 및 45에 도시된 DTD를 사용하여 XML 문서의 형태로 설명되는 경우에 선택 단계(1801)로부터 출력된 데이터의 한 예를 도시한다. 도 46에서, "id"뒤에는 구조 기술 데이터의 <미디어오브젝트>요소의 ID가 추종되고; "시작"뒤에는 시작 시간이 추종되고; "종료"뒤에는 종료 시간이 추종된다.
추출 단계(1802)에 관한 처리가 설명된다. 도 47은 제 5실시예에 따른 추출 단계(1802)를 도시하는 블록 다이어그램이다. 도 47에서, 제 5실시예에 따른 추출 단계(1802)는 인터페이스 수단(2401), 디멀티플렉스 수단(2402), 비디오 스키밍 수단(2403), 및 오디오 스키밍 수단(2404)에 의해 구체화된다. 인터페이스 수단(2401)은 구조 기술 데이터, 및 선택 단계(1801)에서 출력된 세그먼트를 수신하고, 데이터 베이스(1805)로부터 미디어 콘텐츠의 파일을 추출하고, 그와 같이 추출된 파일을 디멀티플렉스 수단(2402)에 출력하고, 선택 단계(1801)에서 출력된 세그먼트의 시작 시간 및 종료 시간을 비디오 스키밍 수단(2403) 및 오디오 스키밍 수단(2404)에 출력한다. 본 실시예의 미디어 콘텐츠는 비디오 스트림 및 오디오 스트림이 멀티플렉스되는 MPEG-1포맷의 시스템 스트림에 대응한다. 따라서, 디멀티플렉스 수단(2402)은 MPEG-1포맷의 시스템 스트림을 비디오 스트림 및 오디오 스트림으로 분리한다. 그와 같이 분리된 비디오 스트림 및 인터페이스 수단(2401)로부터 출력된 세그먼트는 비디오 스키밍 수단(2403)에 입력된다. 입력 비디오 스트림으로부터, 비디오 스키밍 수단(2403)은 그 선택된 세그먼트에 관한 데이터만을 출력한다. 비슷하게, 오디오 스트림, 및 선택 단계(2402)에서 출력된 세그먼트는 오디오 스키밍 수단(2404)에 입력된다. 입력 오디오 스트림중에서, 오디오 스키밍 수단(2402) 은 선택된 세그먼트에 관한 데이터만을 출력한다.
인터페이스 수단(2401)에 관한 처리가 설명된다. 도 48은 인터페이스 수단(2401)에 의해 이루어진 처리를 도시하는 흐름도이다. 대응하는 콘텐츠에 관한 구조 기술 데이터, 및 선택 단계(1801)에서 출력된 세그먼트는 도 46에 나타낸 것과 같이 인터페이스 수단(2401)에 입력된다. 파일의 연대순은 구조 기술 데이터의 <미디어오브젝트>요소에 할당된 속성 "id"로부터 얻어지고, 그후 선택 단계(1801)에서 출력된 세그먼트는 연대순 시퀀스로 및 "id"의 순서로 분류된다(S1). 또한, 세그먼트는 도 49에 도시된 것과 같은 데이터로 변환된다. 같은 파일은 시작 시간의 시퀀스에서 수집 및 배열된다. 결과적으로, 인터페이스 수단(2401)은 도 49에 도시된 데이터 집합을 상부로부터 하부까지의 시퀀스에서 다음 처리로 되게 한다. 첫째로, 인터페이스 수단(2401)은 "id"를 사용하여 구조 기술 데이터의 <미디어오브젝트>요소로 불리우고 <미디어오브젝트>요소의 속성 "로케이터" 를 기초로 하여 파일 명칭을 판독한다. 파일 명칭에 대응하는 파일에 관한 데이터는 데이터베이스로부터 판독되고, 그와 같이 판독된 데이터는 디멀티플렉싱 수단(2402)에 출력된다(S2 및 S3). "id"를 추종하기위해 설명되는 파일의 선택된 세그먼트의 시작 시간 및 종료 시간은 비디오 스키밍 수단(2403) 및 오디오 스키밍 수단(2404)에 출력된다(S4). 모든 데이터 집합이 전술한 처리를 받게된후, 처리는 종료된다(S5). 데이터 집합중 일부가 처리되지 않는 다면, 그와 같이 설명된 처리는 디멀티플렉스 수단(2402)에 의해 이루어진 처리, 비디오 스키밍 수단(2403)에 의해 이루어진 처리, 및 오디오 스키밍 수단(2404)에 의해 이루어진 처리의 완료후 반복된다(S6 및 S7).
디멀티플렉스 수단(2402)에 관한 처리가 설명된다. 도 50은 디멀티플렉스 수단(2402)에 의해 이루어진 처리를 도시하는 흐름도이다. 디멀티플렉스 수단(2402)은 미디어 콘텐츠에 대응하는 MPEG-1 포맷의 시스템 스트림을 인터페이스 수단(2401)으로부터 수신하고 MPEG-1 포맷의 그와 같이 수신된 시스템 스트림을 비디오 스트림 및 오디오 스트림으로 분리된다. 비디오 스트림은 비디오 스키밍 수단(2403)에 출력되고, 오디오 스트림은 오디오 스키밍 수단(2404)에 출력된다(S1 내지 S10). 비디오 및 오디오 스트림의 출력완료후(S9 및 S11), 디멀티플렉스 수단(2402)에 의해 수행된 처리 종료는 인터페이스 수단(2401)에 보고된다(S12). 도 50에 도시된 흐름도에 의해 표시했듯이, 처리 종료 인식의 전달을 제외하고는, 디멀티플렉스 수단(2402)에 의해 수행된 처리는 제 1실시예에 따른 디멀티플렉스 수단에 의해 수행된 것과 동일하다.
비디오 스키밍 수단(2403)에 의해 이루어진 처리가 설명된다. 도 53은 비디오 스키밍 수단(2403)에 의해 이루어진 처리를 도시하는 흐름도이다. 도 53에 도시된 흐름도에 의해 표시했듯이, 처리 종료 인식의 전달을 제외하고는, 디멀티플렉스 수단(2402)에 의해 수행된 처리는 제 1실시예에 따른 디멀티플렉스 수단에 의해 수행된 것과 동일하다. 처리 종료에서 수행된 인터페이스 수단(2401)에 대한 종료 인식을 처리하는 송신(S15 및 S17)을 제외하고는, 비디오 스키밍 수단(2403)에 의해 수행된 처리가 제 1실시예에 따른 비디오 스키밍 수단에 이루어진 것과 동일하다.
오디오 스키밍 수단(2404)에 의해 수행된 처리가 설명된다. 도 52는 오디오 스키밍 수단(2402)에 의해 이루어진 처리를 도시하는 흐름도이다. 도 52에 도시된 흐름도에 의해 표시했듯이, 처리 종료에서 인터페이스 수단(2401)에 대한 처리 종료 인식의 송신(S11 및 S12)을 제외하고는, 오디오 스키밍 수단에 의해 수행된 처리는 제 1실시예에 연결되어 설명된 오디오 스키밍 수단에 의해 수행된 것과 동일하다.
구성 단계(1803)에서, 추출 단계(1802)에서 출력된 비디오 및 오디오 스트림은 국제 표준 ISO/IEC IS 11172-1하에서 표준화된 MPEG-1용 멀티플렉스 방법에 의해 시분할 멀티플렉싱된다. 미디어 콘텐츠가 복수의 분리된 파일로 저장되는 경우에, 각 파일은 비디오 스트림 및 오디오 스트림을 출력하도록 추출 단계(1802)에서 멀티플렉스된다.
전달 단계(1804)에서, 구성 단계(1803)에서 멀티플렉스된 MPEG-1 포맷의 시스템 스트림은 라인을 통해 전달된다. MPEG-1 포맷의 복수의 시스템 스트림이 구성 단계(1803)에서 출력될 때, 모든 시스템 스트림은 그들이 출력되는 시퀀스에서 전달된다.
본 실시예에서, 미디어 콘텐츠가 복수의 분리된 파일로 저장되는 경우에, 각 파일들은 추출 단계(1802)에서 처리된다. 구성 단계(1803)에서, 미디어 콘텐츠의 파일들의 모든 관련되 비디오 및 오디오 스트림은 함께 연결되고 그와 같이 연결된 스트림은 출력되고, 구성 단계(1803)에서 발생된 것과 같은 유리한 결과는 비디오 및 오디오 스트림이 MPEG-1 포맷의 단일 시스템 스트림으로 멀티플렉스될 때에도 이루어진다. 그 경우에, 시간 코드가 비디오 스키밍 수단(2403)에 의해 변화되어 출력 프레임수를 카운트하는 카운터(C)가 비디오 스트림수에 대응하는 양만큼 증가된다. 카운터(C)는 파일의 초기만에서 초기화된다(도 51에 도시된 S3 및 S18). 그 시간에 비디오 스키밍 수단(2403)에 의해 이루어진 처리가 도 53에 도시된 흐름도에서 제공된다. 제 5실시예에서 문맥 내용 기술 데이터 및 물리적인 콘텍스트 데이터가 서로 분리해서 설명되지만, 상기 데이터 집합은 문맥 내용 기술 데이터의 <미디어오브젝트>요소의 속성에 구조 기술 데이터의 속성 "seq" 및 "로케이터"를 첨가하는 것에 의해 단일 데이터로 합쳐질 수 있다.
[제 6실시예]
본 발명의 제 6실시예를 첨부도면을 참고로 설명한다. 본 실시예에서, MPEG-1 포맷의 동화상이 미디어 콘텐츠로서 취해진다. 그 경우에, 미디어 세그먼트는 단일 화면 컷에 대응한다. 또한, 스코어는 관심있는 화면의 콘텍스트적인 중요성의 개관적인 정도에 대응한다.
도 54는 본 발명의 제 6실시예에 따른 미디어 처리 방법을 도시하는 블록 다이어그램이다. 도 54에서, 도면번호 3101는 선택 단계를 나타내고; 3102는 추출 단계를 나타내고; 3103은 구성 단계를 나타내고; 3104는 전달 단계를 나타내고; 3105는 데이터 베이스를 표시한다. 선택 단계(3101)에서, 미디어 콘텐츠의 화면은 문맥 내용 기술 데이터로부터 선택되고, 데이터를 저장하는 파일을 표시하는 데이터뿐만 아니라 그와 같이 선택된 화면의 시작 시간 및 종료 시간에 관한 데이터가 출력된다. 그러므로, 선택 단계(3101)에 관한 처리가 제 5실시예의 선택 단계에서 이루어진 것과 동일하다. 추출 단계(3102)에서, 화면의 시작 시간 및 종료 시간을 표시하 는 데이터 집합 및 선택 단계(3101)에서 출력된 파일을 표시하는 데이터 집합이 수신된다. 또한, 선택 단계(3101)에서 출력된 시작 시간 및 종료 시간에 의해 형성된 세그먼트에 관한 데이터가 구조 기술 데이터를 참고로 미디어 콘텐츠의 파일로부터 추출된다. 추출 단계(3102)에 관한 처리는 제 5실시예의 추출 단계에서 이루어진 것과 동일하다. 구성 단계(3103)에서, 추출 단계(3102)에서 출력된 스트림의 일부 또는 전부가 전달 단계(3104)에서 판정된 트래픽량에 따라 멀티플렉스되어, MPEG-1 포맷의 시스템 스트림을 구성한다. 전달 단계(3104)에서, MPEG-1 포맷의 시스템 스트림을 전달하는 라인의 트래픽량이 판정되고, 판정 결과는 구성 단계(3103)에서 사용하기위해 전달된다. 또한, 전달 단계(3104)에서, 구성 단계(3103)에서 준비된 MPEG-1 포맷의 시스템 스트림은 라인을 통해 전달된다. 도면번호(3105)는 미디어 콘텐츠, 그 구조 기술 데이터, 및 문맥 내용 기술 데이터가 저장되는 데이터베이스를 표시한다.
도 55는 제 6실시예에 따른 구성 단계(3103) 및 전달 단계(3104)동안 수행된 처리를 도시하는 블록 다이어그램이다. 도 55에서, 구성 단계(3103)는 스트림 선택 수단(3201) 및 멀티플렉스 수단(3202)에 의해 구체화된다. 스트림 선택 수단(3201)은 추출 단계(3102)에서 출력된 비디오 및 오디오 스트림과, 트래픽량 판정수단(3203)으로부터 출력된 트래픽량을 수신한다. 라인의 트래픽량이 모든 데이터 집합의 전달을 허락하기에 충분히 낮으면, 모든 시스템 스트림은 멀티플렉스 수단(3202)에 출력된다. 긴 시간으로 통화중인 라인 또는 높은 혼잡도로 인해 모든 데이터 집합을 전달하도록 요구된다면, 복수의 오디오 및 비디오 스트림의 일부만 이 선택되고 멀티플렉스 수단(3202)에 츨력된다. 그 경우에, 선택은 몇개의 방법으로 실행될 수 있고; 즉, 비디오 스트림의 기본층만의 선택, 오디오 스트림의 단음만의 선택, 및 같은 것의 좌측 스테레오 신호만의 선택, 같은 것의 우측 스테레오 신호만의 선택, 또는 그 결합의 비슷한 선택. 여기서, 단일 비디오 스트림 및 단일 오디오 스트림만이 존재한다면, 스트림은 트래픽량에 무관하게 출력된다. 멀티플렉스 수단(3202)은 국제 표준 ISO/IEC IS 11172-1하에서 표준화된 MPEG-1 포맷용 멀티플렉스 방법에 의해 스트림 선택 수단(3201)로부터 출력된 비디오 및 오디오 스트림을 시분할 멀티플렉싱되게한다. 트래픽량 판정수단(3203)은 스트림을 전달하는 라인의 현 상태 및 트래픽량을 검사하고 검사 결과를 스트림 선택 수단(3201)에 출력한다. 전달 수단(3204)은 멀티플렉스 수단(3202)에 의해 멀티플렉스된 MPEG-1 포맷의 시스템 스트림을 라인을 통해 전달한다.
본 실시예에서, 단일 비디오 스트림이 존재하는 경우에, 스트림 선택 수단(3201)은 트래픽량에 관계없이 비디오 스트림을 출력한다. 그러나, 비디오 스트림에 관한 모든 데이터 집합을 라인을 통해 전달하는 것이 많은 시간을 요구한다면, 비디오 스트림의 대표 영상이 선택 및 전달된다. 대표 영상의 선택 시간에, 대표 영상의 시간 코드가 문맥 내용 기술 데이터에서 설명된다. 대안적으로, I화상으로 불리우고 독립적으로 디코드될 수 있는 단일 프레임만이 복수의 프레임간에 선택될 수 있다.
[제 7실시예]
본 발명의 제 7실시예가 첨부도면을 참고로 설명된다. 본 실시예에서, MPEG- 1 포맷의 시스템 스트림의 동화상이 미디어 콘텐츠로서 취해진다. 이 경우에, 미디어 세그먼트는 단일 화면 컷에 대응한다. 또한, 본 실시예에서, 스코어는 캐릭터에 관련된 키워드 또는 사용자에 의해 선택된 이벤트의 관점으로부터 관심있는 화면의 콘텍스트적인 중요성의 객관적인 정도에 대응한다.
도 56은 본 발명의 제 7실시예에 따른 처리 방법을 도시하는 블록 다이어그램이다. 도 56에서, 도면번호 3301은 선택단계를 나타내고; 3302는 추출 단계를 표시한다. 선택 단계(3301)에서, 미디어 콘텐츠의 화면은 키워드에 의해 문맥 내용 기술 데이터로부터 선택되고 그 스코어는 문맥 내용 기술 데이터에 첨가된다. 그와 같이 선택된 화면의 시작 시간 및 종료 시간에 관한 데이터는 출력된다. 추출 단계(3302)에서, 선택 단계(3301)에서 출력된 시작 시간 및 종료 시간에 의해 형성된 세그먼트에 관한 데이터는 추출된다.
도 57은 제 7실시예에 따른 문맥 내용 기술 데이터의 구조를 설명한다. 본 실시예에서, 콘텍스트는 트리 구조에 따라 설명된다. 트리 구조내의 요소는 좌에서 우로 연대순 시퀀스로 배열된다. 도 57에서, 트리에서 지정된 <콘텐츠>의 루트는 내용의 단일 부분를 나타내고, 콘텐츠의 타이틀은 속성으로서 루트에 할당된다.
<콘텐츠>의 자 요소들이 <섹션>으로 표시된다. 화면의 콘텐츠 또는 캐릭터를 나타내는 키워드 및 키워드의 중요도를 나타내는 우선순위는 키워드 및 우선순위쌍의 형태로 속성으로서 <섹션>요소에 첨가된다. 우선순위가 1내지 5의 정수값이라 가정하면, 1은 최저 중요도를 나타내고 5는 최대 중요도를 나타낸다. 키워드 및 우선순위 쌍은 집합되어 사용자가 원하는 바에 의해 특정 화면 또는 캐릭터를 검색하 는 키로서 사용될 수 있다. 상기 이유로 인해, 복수의 쌍(각 쌍은 키워드 및 우선순위를 포함)은 단일 <섹션>요소에 할당될 수 있다. 예를 들어, 캐릭터를 설명하는 경우에, 쌍은 관심있는 화면에서 나타나는 캐릭터수와 같은 수로 단일 <섹션>요소에 첨가된다. 대다수의 캐릭터가 관심있는 화면에 나타날 때 화면에 첨가된 우선순위값은 더 커지도록 집합된다.
<섹션>의 자 요소는 <섹션> 또는 <세그먼트>에 의해 표시된다. 여기서, <섹션>요소는 다른 자<섹션>의 자식으로서 원래 얻어진다. 그러나, 단일 <섹션>요소는 자<섹션> 및 자<세그먼트>의 혼합을 가질 수 없다.
<세그먼트>요소는 단일 화면 컷을 표시한다. <섹션>요소에 첨가된 것과 같은 쌍(키워드 및 우선순위) 및 관심있는 화면에 대한 시간 정보; 즉, 시작 시간을 나타내는 "시작" 및 종료 시간을 나타내는 "종료"는 속성으로서 <세그먼트>에 첨가된다. 화면은 상업적으로 이용가능한 소프트웨어 또는 망을 통해 이용가능한 소프트웨어를 사용하여 컷될 수 있다. 대안적으로, 화면은 수동으로 컷될 수 있다. 화면의 시작 시간을 나타내는 속성 "프럼(from)"은 관심있는 화면의 시작 프레임을 특정화할 수 있다. 본 실시예에서 시간 정보가 화면 컷의 시작 시간 및 종료 시간으로 표시되지만, 시간 정보가 관심있는 화면의 지속기간 및 관심있는 화면의 시작 시간으로 표시될 때 비슷한 결과가 이루어진다. 이 경우에, 관심있는 화면의 종료 시간이 시작 시간에 지속기간을 더해서 얻어진다.
영화와 같은 스토리의 경우에, 챕터, 섹션, 및 파라그패프는 <섹션>요소을 사용하여 문맥 내용 기술 데이터를 토대로 설명될 수 있다. 다른 예에서, 야구 게 임이 설명될 때, 최고 계층 레벨의 <섹션>요소는 이닝을 기술하는 데 사용될 수 있고, 그 자<섹션>은 하프 이닝을 설명하는 데 사용될 수 있다. 또한, <섹션>요소의 제 2 발생 자<섹션>은 각 타자의 타수를 설명하는 데 사용된다. <섹션>요소의 제 3 발생 자<섹션>은 각 피치, 그 피치들간의 시간 주기, 및 배팅 결과를 설명하는 데 또한 사용된다.
구성을 갖는 문맥 내용 기술 데이터는 예를 들어 익스텐서블 마크업 랭귀지(XML)를 사용하여 컴퓨터에서 표현될 수 있다. XML은 월드 와이드 웹 콘소시엄에 의해 추구된다. 권고안 Ver. 1.0은 1998년 2월 10일에 제출되었다. XML Ver. 1.0의 사양서는 http://www.w3.org/TR/1998/REC-xml-19980210으로부터 구할 수 있다. 도 58 내지 66은 XML을 사용하여 본 실시예의 문맥 내용 기술 데이터를 설명하는 데 사용된 문서 형태 정의(DTD)의 한 예와, DTD를 사용하여 설명된 문맥 내용 기술 데이터의 한 예를 도시한다. 도 67 내지 80은 대표 영상(즉, 비디오 데이터) 및 키워드(오디오 데이터) 등의 미디어 세그먼트의 대표 데이터[지배(dominant)데이터]를 도 58 내지 66에 도시된 문맥 내용 기술 데이터에 부가함으로써 준비된 문맥 내용 기술 데이터, 및 XML을 사용하여 문맥 내용 기술 데이터를 설명하는 데 사용된 DTD의 한 예를 도시한다.
선택 단계(S3301)에 관한 처리가 설명된다. 본 실시예에서, 선택 단계(S3301)에 관한 처리가 <세그먼트>요소, 및 자<세그먼트>를 갖는 <섹션>요소에 포커스함으로써 이루어진다. 도 81은 제 7실시예에 따른 선택 단계(3301)에 관한 처리를 도시하는 흐름도이다. 선택 단계(3301)에서, 화면을 선택하는 키로서 작용 하는 키워드 및 그 우선순위의 임계값은 입력되어, 그 입력된 키와 동일한 키워드를 갖는 <섹션>요소을 선택하고 그 우선순위는 문맥 내용 기술 데이터의 <세그먼트>요소를 자으로서 갖는 <섹션>요소간에서 임계값을 초과한다(S2 및 S3). 계속해서, 키와 동일한 키워드를 갖고 그 우선순위를 임계값 이상으로 되게하는 자<세그먼트>만이 그와 같이 선택된 <섹션>요소의 자<세그먼트>간에서 선택된다(S5 및 S6). 그 선택된 화면의 시작 시간 및 종료 시간은 전술한 처리를 통해 선택된 자<세그먼트>의 속성 "시작" 및 "종료"로부터 판정되고, 시작 시간 및 종료 시간이 출력된다 (S7,S8,S9,S10,S11,S1, 및 S4).
본 실시예에서 선택이 <세그먼트>요소, 및 자<세그먼트>를 갖는 <섹션>요소를 포커스함으로써 이루어지지만, 선택은 다른 부모-및-자 관계; 예를 들어, 소정의 계층 스트라텀내의 <섹션>요소 및 그 자<섹션>에 포커스함으로써 이루어질 수 있다. 또한, 부모-및-자 관계는 2층 계층 스트라텀에 단지 제한되지 않는다. 계층 스트라텀의 계층 레벨수는 2이상으로 증가될 수 있고, 트리 구조; 즉, 자손<세그먼트>로 되고, 같게 처리된다. 또한, 검색 키는 복수의 키워드를 포함하는 쌍 및 키워드들간의 관계를 형성하는 조건으로서 설정될 수 있다. 키워드들간의 관계를 형성하는 조건은 "둘중 하나", "둘다" 또는 "둘중 하나 또는 둘다"의 결합을 포함한다. 선택용 임계값은 특정화될 수 있고, 복수의 키워드 처리의 경우에 각 키워드에 대해 수행될 수 있다. 검색키로서 작용하는 키워드는 사용자에 의해 입력될 수 있거나 사용자 프로파일을 기초로 하여 시스템에 의해 자동 설정될 수 있다. 추출 단계(3302)에 관한 처리는 제 1실시예와 연관해서 설명된 추출 단계에서 이루어진 것 과 동일하다.
도 82에 나타낸 것과 같이, 본 발명은 추출 단계(3302)로부터 출력된 비디오 스트림을 비디오 재생 수단으로 입력하고, 상호 동기되는 오디오 및 비디오 스트림을 재생함으로써 시청자의 소망대로 관심있는 미디어 콘텐츠의 화면만을 재생할 능력의 장점을 갖는다. 또한, 비디오 스트림 및 오디오 스트림을 멀티플렉싱함으로써 시청자의 소망대로 관심있는 미디어 콘텐츠의 화면 수집에 관한 MPEG-1 포맷의 시스템 스트림이 준비될 수 있다.
[제 8실시예]
본 발명의 제 8실시예가 설명된다. 제 8실시예는 선택 단계에 관한 처리만 제 7실시예와 다르다.
선택 단계(S3301)에 관한 처리가 설명된다. 본 실시예에서, 선택 단계(S3301)에 관한 처리는 <세그먼트>요소만을 포커스함으로써 이루어진다. 도 83은 제 7실시예에 따른 선택 단계(3301)에 관한 처리를 도시하는 흐름도이다.
도 83에 나타낸 것과 같이, 선택 단계(3301)에서, 화면을 선택하는 키로서 작용하는 키워드 및 그 우선순위의 임계값이 입력된다. 키와 동일한 키워드를 갖고 그 우선순위를 임계값이상으로 되게하는 자<세그먼트>는 문맥 내용 기술 데이터의 <세그먼트>요소간에서 선택된다(S1 내지 S6).
제 8실시예에서 선택이 <세그먼트>요소에만 포커스함으로써 이루어지지만, 선택은 소정의 계층 레벨의 <섹션>요소에만 포커스함으로써 또한 이루어질 수 있다. 또한, 검색키는 복수의 키워드를 포함하는 쌍 및 키워드들간의 관계를 형성하 는 조건으로서 설정될 수 있다. 키워드들간의 관계를 형성하는 조건은 "둘중 하나", "둘다" 또는 "둘중 하나 또는 둘다"의 결합을 포함한다. 선택용 임계값은 특정화될 수 있고, 복수의 키워드의 경우에 처리는 각 키워드에 대해 수행될 수 있다.
[제 9실시예]
본 발명의 제 9실시예가 설명된다. 제 9실시예는 선택 단계에 관한 처리만 제 7실시예와 다르다.
선택 단계(S3301)에 관한 처리가 첨부도면을 참고로 설명된다. 제 7실시예와 연결해서 설명된 처리의 경우처럼, 제 9실시예에 따른 선택 단계(3301)에서, 선택은 <세그먼트>요소, 및 자<세그먼트>를 갖는 <섹션>요소만을 포커스함으로써 이루어진다. 본 실시예에서, 임계값은 선택되는 화면모두의 지속기간 주기의 합에 대해 설정되고; 더 자세하게, 선택은 이루어져서 이제까지 선택되었던 화면들의 지속기간 주기의 합이 최대이나 임계값보다 적어진다. 도 84는 제 9실시에에 따른 선택 단계에 관한 처리를 도시하는 흐름도이다. 선택 단계(3301)에서, 검색키로서 작용하는 단일 키워드가 수신된다. 계속해서, 자<세그먼트>를 갖는 <섹션>요소중에서, 검색키와 동일한 키워드를 갖는 모든 <섹션>요소가 추출된다. 그와 같이 선택된 <섹션>요소의 수집은 집합 Ω로서 얻어진다(S1 및 S2). 집합 Ω의 <섹션>요소는 우선순위의 감소순서로 분류된다(S3). 계속해서, 키워드 또는 검색키가 최고 우선순위값을 갖는 <섹션>요소는 집합 Ω의 그 분류된 요소로부터 선택된다(S5). 그 선택된 <섹션>요소는 집합 Ω로부터 삭제된다(S6). 그 경우에, 복수의 <섹션>요소이 최 고 우선순위를 가지면, 모든 <섹션>요소는 추출된다. 그 선택된 <섹션>요소의 자<세그먼트>중에서, 검색키를 갖는 자<세그먼트>만이 선택되고, 그 선택된 자<세그먼트>는 다른 집합 Ω에 가산된다(S7). 집합 Ω'의 초기값은 비어있다(S2). 집합 Ω'에 관한 화면들의 지속기간 주기의 합은 얻어지고(S8), 그 합은 임계값과 비교된다(S9). 지속기간 주기의 합이 임계값과 같다면, 집합 Ω'에 포함된 <세그먼트>요소의 모든 세그먼트에 관한 테이터가 출력되고, 처리는 종료된다(S14). 대조적으로, 지속기간 주기의 합이 임계값보다 낮으면, 처리는 <섹션>요소의 집합 Ω로부터의 선택으로 복귀하고(S5) 그 <섹션>요소의 검색키 또는 키워드는 최고 우선순위를 갖는다. 그와 같이 설명된 선택 처리는 반복된다. 집합 Ω가 비어있다면, 집합 Ω'의 <세그먼트>요소의 모든 세그먼트에 관한 데이터가 출력되고, 처리는 종료된다(S4). 집합 Ω'에 관한 화면들의 지속기간 주기의 합이 임계값을 초과하면, 다음 처리는 수행된다. 검색키 또는 키워드가 최소 우선순위를 갖는 <세그먼트>요소는 집합 Ω'로부터 삭제된다(S11). 그 시간에, 복수의 <세그먼트>요소는 최소 우선순위를 가지면, 모든 <세그먼트>요소는 삭제된다. 집합 Ω'의 <세그먼트>요소의 지속기간 주기의 합은 얻어지고(S12), 그 합은 임계값과 비교된다(S13). 지속기간 주기의 합이 임계값을 초과하면, 처리는 집합 Ω'로부터 <세그먼트>요소의 삭제로 다시 복귀한다(S11). 그 삭제 처리는 반복해서 수행된다. 여기서, 집합 Ω'가 비어있다면, 처리는 종료된다(S10). 대조적으로, 지속기간 주기의 합이 임계값보다 낮다면, 집합 Ω'의 <세그먼트>요소의 모든 세그먼트에 관한 데이터는 출력되고, 처리는 종료된다(S14).
본 실시예에서 선택이 <세그먼트>요소, 및 자<세그먼트>를 갖는 <섹션>요소를 포커스함으로써 이루어지고, 선택은 다른 부모-및-자 관계; 예를 들어 다른 계층 레벨내의 <섹션>요소 및 그 자<세그먼트>에 포커스함으로써 이루어질 수 있다. 또한, 부모-및-자 관계는 2층 계층 스트라텀에 단지 제한되지 않으며; 계층 스트라텀의 계층 레벨수는 증가될 수 있다. 예를 들어, 최고 계층 레벨의 <섹션>요소으로부터 그 자<세그먼트>까지의 계층에서 요소가 처리되는 경우에, 최고 계층 레벨의 <섹션>요소는 선택된다. 또한, 그 선택된 <섹션>요소의 자<섹션>은 선택되고, 그 선택된 <섹션>요소의 제 2 발생 자 요소가 더 선택된다. 선택 동작의 그 라운드는 자<세그먼트>를 선택할 때까지 반복된다. 그 선택된 <세그먼트>요소는 집합 Ω'로 수집된다.
본 실시예에서, 요소는 검색키 또는 키워드의 우선순위의 감소순서로 분류된다. 임계값은 우선순위값에 대해 설정될 수 있고, 요소는 우선순위의 감소순서로 선택된다. 임계값은 <섹션>요소뿐만 아니라 <세그먼트>요소에 대해 분리해서 설정될 수 있다.
본 실시예에서, 검색키는 단일 키워드로서 특정화될 수 있다. 그러나, 검색키는 복수의 키워드를 포함하는 쌍 및 키워드들간의 관계를 형성하는 조건으로서 설정될 수 있다. 키워드들간의 관계를 형성하는 조건은 "둘중 하나", "둘다" 또는 "둘중 하나 또는 둘다"의 결합을 포함한다. 그 경우에, <섹션>요소 및 <세그먼트>요소의 선택 또는 삭제에서 사용된 키워드의 우선순위를 판정하는 법칙이 요구된다. 그 법칙의 한 예는 다음과 같다, 즉, 조건이 "둘중 하나"이면, 대응하는 키워 드의 우선순위값의 최고 우선순위값은 "우선순위"로서 설정된다. 또한, 조건이 "둘다"이면, 대응하는 키워드의 우선순위값의 최소 우선순위값은 "우선순위"로서 설정된다. 조건이 "둘중 하나 또는 둘다"인 경우에도, 우선순위값은 상기 법칙에 따라 판정될 수 있다. 또한, 복수의 검색키 또는 키워드가 존재하는 경우에, 임계값은 검색키로서 키워드의 우선순위에 대해 설정될 수 있고, 그 우선순위값이 임계값을 초과하는 요소는 처리될 수 있다.
[제 10실시예]
본 발명의 제 10실시예가 설명된다. 제 10실시예는 선택 단계에 관한 처리만 제 7실시예와 다르다.
선택 단계(S3301)에 관한 처리가 첨부도면을 참고로 설명된다. 제 8실시예와 연결해서 설명된 처리의 경우처럼, 제 10실시예에 따른 선택 단계(3301)에서, 선택은 <세그먼트>요소만을 포커스함으로써 이루어진다. 또한, 제 9실시예의 경우처럼, 본 실시예에서 임계값은 선택되는 화면 모두의 지속기간 주기의 합에 대해 설정된다. 자세하게, 선택은 이루어져서 이제까지 선택되었던 화면들의 지속기간 주기의 합이 최대이나 임계값보다 적어진다. 도 85는 제 10실시예에 따른 선택 단계에 관한 처리를 도시하는 흐름도이다.
선택 단계(3301)에서, 검색키로서 사용되는 단일 키워드가 수신된다. 집합 Ω'는 초기화되어 비어있다(S2). 계속하여, <세그먼트>요소중에서, 검색키와 동일한 키워드를 갖는 모든 <세그먼트>요소는 추출된다(S1). 그 선택된 <세그먼트>요소의 수집은 집합 Ω으로서 얻어진다. 계속해서, 검색키로서 키워드가 최고 우선순위 값을 갖는 <세그먼트>요소는 우선순위의 감소순서로 분류된다(S3). 집합 Ω의 분류된 요소로부터, 검색키로서 키워드가 최고 우선순위값을 갖는 <세그먼트>요소는 추출되고(S5), 그 추출된 <세그먼트>요소는 집합 Ω으로부터 삭제된다. 이 경우에, 복수의 <세그먼트>요소가 최고 우선순위값을 가지면, 모든 <세그먼트>요소가 선택된다. 집합Ω가 비어있다면, 집합 Ω'의 <세그먼트>요소의 모든 세그먼트에 관한 데이터는 출력되고, 처리는 종료된다(S4). 그 추출된 <세그먼트>요소의 지속기간 주기의 합(T1)은 계산되고(S6), 집합 Ω'의 화면의 지속기간 주기의 합(T2)은 계산된다(S7). T1 및 T2의 합이 임계값을 초과하면, 집합 Ω'에 포함된 <세그먼트>요소의 모든 세그먼트에 관한 데이터가 출력되고, 처리는 종료된다(S11). T1 및 T2의 합이 임계값과 같다면, 그 추출된 <세그먼트>요소 모두가 집합 Ω'의 요소에 가산되고(S9 및 S10), 집합 Ω'에 포함된 <세그먼트>요소의 모든 세그먼트에 관한 데이터가 출력되고, 처리는 종료된다(S11). 대조적으로, T1 및 T2의 합이 임계값이하라면, 그 추출된 <세그먼트>요소 모두가 집합 Ω'의 요소에 가산되고, 처리는 집합 Ω로부터 <세그먼트>요소의 선택으로 복귀한다(S10).
본 실시예에서 선택이 다른 계층 레벨에서 <섹션>요소에 포커스함으로써 이루질 수 있다. 본 실시예에서, 요소는 검색키 또는 키워드의 우선순위의 감소순서로 분류된다. 임계값은 우선순위값에 대해 설정될 수 있고, 요소는 요소의 우선순위값이 임계값보다 크게 설정한 하고서 우선순위의 감소순서로 선택된다.
또한, 본 실시예에서, 검색키는 단일 키워드로서 특정화될 수 있다. 그러나, 검색키는 복수의 키워드를 포함하는 쌍 및 키워드들간의 관계를 형성하는 조건으로 서 설정될 수 있다. 키워드들간의 관계를 형성하는 조건은 "둘중 하나", "둘다" 또는 "둘중 하나 또는 둘다"의 결합을 포함한다. 그 경우에, <섹션>요소 및 <세그먼트>의 선택 또는 삭제에서 사용된 키워드의 우선순위를 판정하는 법칙이 요구된다. 그 법칙의 한 예는 다음과 같다, 즉, 조건이 "둘중 하나"이면, 대응하는 키워드의 우선순위값의 최고 우선순위값은 "우선순위"로서 설정된다. 또한, 조건이 "둘다"이면, 대응하는 키워드의 우선순위값의 최소 우선순위값은 "우선순위"로서 설정된다. 조건이 "둘중 하나 또는 둘다" 일때에도, 우선순위값은 상기 법칙에 따라 판정될 수 있다. 또한, 복수의 검색키 또는 키워드가 존재하는 경우에, 임계값은 검색키 또는 키워드의 우선순위에 대해 설정될 수 있고, 그 우선순위값이 임계값을 초과하는 요소가 처리될 수 있다.
[제 11실시예]
이하, 본 발명의 제 11실시예가 설명된다. 본 실시예의 문맥 내용 기술 데이터는 장면을 선택하는 데 사용될 키워드로서 역할을 하는 관점 및 이 관점의 중요도가 기술된다는 면에서 제 7 내지 10실시예의 것과 다르다. 도 57에 나타낸 바와 같이, 제 7 내지 10실시예에서, 관점와 그에 기초한 중요도가 키워드와 중요도의 조합, 즉 (키워드, 우선순위)를 <섹션>요소 또는 <세그먼트>에 할당함으로써 기술된다. 대조적으로, 제 11실시예에 따라, 도 133에 나타낸 바와 같이, 관점와 그의 중요도은 속성 "povlist"를 루트〈콘텐츠〉에 할당하고 속성 "povvalue"를 <섹션>또는 <세그먼트>에 할당함으로써 기술된다.
도 134에 나타낸 바와 같이, 속성 "povlist"는 벡터 형태로 표현된 관점에 해당한다. 도 135에 나타낸 바와 같이, 속성 "povvalue"은 벡터 형태로 표현된 중요도에 해당한다. 각 집합이 일-대-일 관계의 관점와 그의 중요도를 포함하는 조합 집합들은 주어진 시퀀스로 배열되어, 속성들 "povlist"와 "povvalue"를 형성한다. 예를 들어, 도 134와 도 135에 나타낸 예시도에서, 관점 1에 해당하는 중요도는 5의 값을 취하고, 관점 2에 해당하는 중요도는 0의 값을 취하며; 관점 3에 해당하는 중요도는 2의 값을 취하며; 관점 "n"(여기서 "n"은 양의 정수를 나타낸다)에 해당하는 중요도는 0의 값을 취한다. 실시예 7의 경우에, 관점 2에 해당하는 중요도가 0의 값을 취한다는 것은 관점 2에 키워드, 즉 조합(키워드, 우선순위)이 할당되지 않는다는 것을 의미한다.
도 136 내지 163도 및 도 164 내지 도196은, 컴퓨터에서 문맥 기술 데이터를 표현하기는 데 사용될 인스텐서블 마크업 랭귀지(XML)를 사용하여 본 실시예의 문맥 기술 데이터를 기술하기 위하여 사용된 문서 형태 정의(DTD)의 예와 DTD로 기술된 문맥 기술 데이터의 예를 보여준다. 본 실시예에서도, 제 7 내지 10실시예와 관련하여 기술된 것과 동일한 처리 동작이 문맥 기술 데이터의 사용을 통하여 수행된다.
본 실시예에서, 속성 "povlist"이 루트〈콘텐츠〉에 할당되고, 속성 "povvalue"은 〈섹션〉요소 또는 <세그먼트>에 첨가된다. 도 197에 나타낸 바와 같이, 속성 "povlist"는 또한 〈섹션〉요소 또는 <세그먼트>에 첨가될 수 있다. 속성 "povlist"가 할당되어진 〈섹션〉요소 또는 <세그먼트>의 경우에, 속성 "povvalue"는 〈섹션〉요소 또는 <세그먼트>에 할당된 속성 "povlist"에 해당한다. 속성 "povlist"가 할당되지 않은 〈섹션〉요소 또는 <세그먼트>의 경우에, 속성 "povvalue"은 루트〈콘텐츠〉에 할당된 속성 "povlist"에 해당되거나, 또는 속성 "povvalue"가 할당되지 않은 〈섹션〉요소 또는 <세그먼트>의 조상들로부터 속성 "povlist"가 할당된 최근접 〈섹션〉요소의 속성 "povlist"에 해당된다.
도 198 내지 252는 도 197에 나타낸 DTD에 해당하고, 컴퓨터에서 문맥 기술 데이터를 표현하는 데 사용될 XML을 통하여 본 발명의 문맥 기술 데이터를 기술하는 데 사용되는 DTD의 예를 보여주며, 또한 DTD로 기술된 문맥 기술 데이터의 예를 보여준다. 이 예시에서, 〈섹션〉요소 또는 <세그먼트>에 할당된 속성 "povvalue"는 루트〈콘텐츠〉에 할당된 속성 "povlist"에 해당한다.
[제 12실시예]
이제 본 발명의 제 12실시예가 첨부도면을 참고하여 설명될 것이다. 본 실시예에서, MPEG-1 포맷의 시스템 스트림의 동화상이 미디어 콘텐츠로서 취해진다. 이 경우, 미디어 세그먼트는 단일 화면 커트에 해당한다.
도 86은 본 발명의 제 12실시예에 따른 미디어 처리 방법을 보여주는 블록 다이어그램이다. 도 86에서, 도면번호 4101은 선택 단계를 나타낸다; 도면번호 4102는 추출단계를 나타내며; 도면번호 4103는 구성 단계를 나타내고; 도면번호 4104는 전달단계를 나타내며; 도면번호 4105는 데이터베이스를 나타낸다. 선택 단계 4101에서, 미디어 콘텐츠의 화면은 문맥 기술 데이터로부터 선택되고, 그와 같이 선택된 화면의 시작시간과 종료시간에 관한 데이터와, 데이터가 저장되는 파일을 나타내는 데이터가 출력된다. 추출단계 4102에서, 화면의 시작시간과 종료시간 을 나타내는 데이터 집합들과 선택 단계 4101에서 파일출력을 나타내는 데이터 집합들이 수신된다. 구조 기술 데이터에 근거하여, 선택 단계 4101에서 수신된 시작시간과 종료시간에 의해 정해진 세그먼트에 관한 데이터가 미디어 콘텐츠의 파일로부터 추출된다. 구성 단계에서, 추출단계 4102에서의 데이터 출력이 멀티플렉스되어 MPEG-1 포맷의 시스템 스트림을 구성한다. 전달단계 4104에서, 구성 단계 4103에서 만들어진 MPEG-1 포맷의 시스템 스트림이 라인회선을 통해 전달된다. 도면번호 4105는 미디어 콘텐츠, 구조 기술 데이터, 및 문맥 기술 데이터가 저장되는 데이터 베이스를 나타낸다.
제 12실시예에서 채택된 구조 기술 데이터의 구성은 제 5실시예와 관련하여 기술된 것과 동일하다. 보다 상세하게는, 도 37에 나타낸 구성을 갖는 구조 기술 데이터가 사용된다.
도 87은 제 12실시예에 따른 문맥 기술 데이터의 구성을 보여준다. 본 실시예의 문맥 기술 데이터는 구조 기술 데이터의 〈미디어오브젝트〉요소에 링크를 부가시킨 제 7실시예의 문맥 기술 데이터에 해당한다. 보다 상세하게, 문맥 기술 데이터의 루트〈콘텐츠〉는 자〈미디어오브젝트〉을 가지며, 〈미디어오브젝트〉요소는 자〈섹션〉을 가진다.〈섹션〉요소들 및 <세그먼트>는 실시예 7에서 사용된 것들과 동일하다. 문맥 기술 데이터의 〈미디어오브젝트〉요소에는 속성 "id"이 첨가된다. 구조 기술 데이터의 〈미디어오브젝트〉요소는 속성 "id"를 통하여 문맥 기술 데이터의 〈미디어오브젝트〉요소과 관련이 있다. 문맥 기술 데이터의 〈미디어오브젝트〉요소의 자식에 의해 기술된 미디어 콘텐츠의 화면들이 동일한 값의 속성 id를 갖는 구조 기술 데이터의 〈미디어오브젝트〉요소에 의해 표시된 파일에 저장된다. 또한, "세그먼트" 요소에 할당된 시간정보 "시작"과 "종료"는 각 파일의 선두로부터의 경과된 시간을 설정한다. 특별히, 미디어 콘텐츠의 단일 부분은 다수의 파일들로 이루어지며, 각 파일의 선두에서의 비디오는 0 에 해당하고, 각 화면의 시작 시간은 파일의 선두로부터 관심이 있는 화면까지 경과된 시간에 의해 나타내어진다.
구조 기술 데이터와 문맥 기술 데이터는 예를 들면, 익스텐서블 마크업 랭귀지(XML)의 사용을 통하여 컴퓨터로 표현될 수 있다. 실시예 5와 관련하여 사용된 도39는 구조 기술 데이터의 한 예를 보여준다. 또한, 도 88 내지 96은 XML의 사용을 통하여 도 87에 나타낸 문맥 기술 데이터를 기술하기 위하여 사용된 문서 타이프 정의(DTD)의 예를 보여주며, 또한 DTD의 사용을 통하여 기술된 문맥 기술 데이터의 한 예를 보여준다.
이제 선택 단계 4101과 관련한 처리가 기술될 것이다. 선택 단계 4101에서, 제 7 내지 10실시예와 관련하여 기술된 방법들중 어느 하나는 화면을 선택하는 방법으로서 채택된다. 해당 구조 기술 데이터의 〈미디어오브젝트〉요소의 "id"는 선택된 화면의 시작 시간과 종료 시간의 출력과 동시에 궁극적으로 출력된다. 구조 기술 데이터가 도 39에 나타낸 DTD의 사용을 통하여 XML 문서의 형태로 기술되고, 문맥 기술 데이터는 도 88 및 96에 나타낸 DTD의 사용을 통하여 XML 문서의 형태로 기술되는 경우에, 선택 단계 4101로부터의 데이터 출력의 한 예는 제 5실시예와 관련하여 도 46에 나타낸 것과 동일하다.
추출단계 4102와 관련한 처리는 제 5실시예와 관련하여 기술된 추출단계와 동일하다. 또한, 구성 단계 4103과 관련한 처리는 제 5실시예와 관련하여 기술된 구성 단계와 동일하다. 게다가, 전달단계 4104에 관한 처리는 실시예 5와 관련하여 기술된 전달단계와 또한 동일하다.
[제 13실시예]
이제, 본 발명의 제 13실시예가 첨부도면들과 관련하여 기술될 것이다. 본 실시예에서, MPEG-1 포맷의 시스템 스트림의 동화상은 미디어 콘텐츠로서 취해진다. 이 경우에, 미디어 세그먼트는 단일 화면 커트에 해당한다.
도97은 본 발명의 제 13실시예에 따른 미디어 처리 방법을 보여주는 블록다이어그램이다. 도97에서, 도면번호 4401은 선택 단계를 나타내며; 4402는 추출단계를 나타내고; 4403은 구성 단계를 나타내며; 4404는 전달단계를 나타내고; 4405는 데이터베이스를 나타낸다. 선택 단계 4401에서, 미디어 콘탠트의 화면은 문맥 기술 데이터로부터 선택되며, 이렇게 선택된 화면의 시작 시간과 종료 시간에 관한 데이터와, 데이터가 저장되는 파일을 나타내는 데이터가 출력된다. 선택 단계 4401에 관련한 처리는 제 12실시예와 관련하여 기술된 선택 단계와 관련한 것과 동일하다. 추출단계 4402에서, 화면의 시작 시간과 종료 시간을 나타내는 데이터 집합들과 선택 단계 4401에서 출력된 파일을 나타내는 데이터 집합들이 수신된다. 구조 기술 데이터와 관련하여, 선택 단계에서 수신된 시작 시간과 종료 시간에 의해 정해진 세그먼트에 관한 데이터는 미디어 콘텐츠의 파일로부터 추출된다. 추출단계 4402에 관한 처리는 제 12실시예와 관련하여 기술된 추출단계에 관련한 것과 동일하다. 구 성 단계 4403에서, 추출단계 4402에서 추출된 시스템 스트림의 전체중의 일부는 전달단계 4404에서 판정된 라인의 트래픽량에 따라 멀티플렉싱된다. 구성 4403에 관한 처리는 실시예 6와 관련하여 기술된 추출단계에 관한 것과 동일하다. 전달단계 4404에서, 라인의 트래픽량이 판정되며, 판정결과는 구성 단계 4403으로 전달된다. 또한, 구성 단계 4403에서 만들어진 MPEG-1의 시스템 스트림은 라인을 통하여 전달된다. 구성 4404에 관한 처리는 실시예 6과 관련하여 기술된 구성 단계와 관련한 것과 동일하다. 도면번호 4405는 미디어 콘텐츠, 그의 구조 기술 데이터, 및 문맥 기술 데이터가 저장되는 데이터 베이스를 나타낸다.
제 13실시예에서 MPEG-1의 시스템 스트림이 미디어 콘텐츠로서 취해지지만, MPEG-1 시스템에 의해 산출된 것과 동일한 바람직한 결과는, 포맷이 각 화면에 대한 시간 코드의 획득을 허용하는 다른 포맷의 사용에 의해서도 얻어낼 수 있다.
이하 설명될 실시예들은 첨부된 청구범위에 청구된 발명들에 해당하는 모드들의 요약을 기술한다. 용어 "사운드 데이터"는 음성, 침묵, 연설, 음악, 고요함, 외부 소음등을 포함하는 음성에 관한 데이터로서 사용될 것이다. 용어 "비디오 데이터"는 동화상, 정지화상, 또는 텔롭(telops)과 같은 캐릭터 등의 가청 및 비디오 데이터로서 사용될 것이다. 용어 "스코어"는 가청 톤, 침묵, 연설, 음악, 고요함, 또는 외부 소음과 같은, 음성 데이터의 콘텐츠로부터 계산될 스코어; 비디오 데이터에서 텔롭의 존재 또는 부존재에 따라 할당될 스코어; 및 그들의 조합으로서 이하에 사용될 것이다. 또한, 위에서 언급된 것들이외의 스코어가 또한 사용될 것이다.
[제 14실시예]
본 발명의 제 14실시예를 청구항 2에 기술된 발명에 관해 설명한다. 도 98은 본 실시예의 데이터 처리 방법에 관한 처리를 보여주는 블록 다이어그램이다. 도면에서, 도면번호 501은 선택 단계를 나타내며; 503은 추출단계를 나타낸다. 선택 단계 501에서, 미디어 콘텐츠의 적어도 하나의 세그먼트 또는 화면은 문맥 기술 데이터의 스코어에 기초하여 선택되며, 그와 같이 선택된 세그먼트 또는 화면이 출력된다. 선택된 세그먼트는 예를 들면, 선택된 세그먼트의 시작 시간과 종료 시간에 해당된다. 추출 단계 503에서, 선택 단계 S501에서 선택된 세그먼트에 의해 분할된 미디어 콘텐츠의 세그먼트(이하, "미디어 세그먼트"라 한다)의 데이터만, 즉, 선택된 세그먼트에 관한 데이터가 추출된다.
특히, 청구항 30에서 기술된 발명에서, 스코어는 사용자에 의해 선택된 캐릭터 또는 이벤트에 관련된 키워드의 관점로부터 관심이 있는 화면의 문맥 중요도의 객관적 정도에 해당된다.
[제 15실시예]
이하, 본 발명의 제 15실시예가 청구항 3에 기술된 발명에 관해 기술될 것이다. 도 99는 본 실시예의 데이터 처리 방법에 관한 처리를 보여주는 블록 다이어그램이다. 도면에서, 도면번호 501은 선택 단계를 나타내며; 505는 재생 단계를 나타낸다. 재생 단계 505에서, 선택 단계 501에서 출력된 선택된 세그먼트에 의해 분할된 세그먼트에 관한 데이터만이 재생된다. 선택 단계 501에 관한 처리는 제 1 내지 13실시예와 관련되어 기술된 것과 동일하며, 그래서 이들 설명의 반복은 간결을 위 하여 생략된다.
[제 16 실시예]
본 발명의 제 16실시예는 청구항 12에 기술된 발명에 관해 이하에 기술될 것이다. 도 100은 제 16실시예의 데이터 처리 방법에 관한 처리를 보여주는 블록다이어그램이다. 도면에서, 도면번호 507는 비디어 선택 단계를 나타내며; 및 509는 오디오 선택 단계를 나타낸다. 비디오 선택 단계 507와 오디오 선택 단계 509는 실시예 14 및 15와 연관된 기술된 선택 단계 501에 포함된다.
비디오 선택 단계 507에서, 비디오 데이터의 세그먼트 또는 화면은 비디오 데이터에 관한 문맥 기술 데이터를 참고함으로써 선택되고, 그와 같이 선택된 세그먼트가 출력된다. 오디오 선택 단계 509에서, 음성의 세그먼트는 음성 데이터에 관한 문맥 기술 데이터를 참고하여 선택되고, 그와 같이 선택된 세그먼트가 출력된다. 여기서, 선택된 세그먼트는 예를 들면, 선택된 세그먼트의 시작 시간과 종료 시간에 해당된다. 제 14실시예와 관련하여 기술된 추출단계 503에서, 비디오 선택 단계에서 선택된 비디오 데이터의 세그먼트로부터의 데이터만이 재생된다. 재생 단계 505에서, 오디오 선택 단계에서 선택된 음성 데이터의 세그먼트로부터의 데이터만이 재생된다.
[제 17실시예]
본 발명의 제 17실시예가 청구항 15, 16, 17, 18, 19, 및 20에 기재된 발명에 관해 설명될 것이다. 도 101은 본 발명의 데이터 처리 방법에 관한 처리를 보여주는 블록 다이어그램이다. 도면에서, 도면번호 511는 판정 단계를 나타내며; 513 은 선택 단계를 나타내고; 503은 추출단계를 나타내며; 505는 재생 단계를 나타낸다.
(예 1)
청구항 15에 기재된 발명에서, 미디어 콘텐츠는 단일 시간 주기내에서 다수의 다른 미디어 데이터 집합들로 이루어진다. 판정 단계 511에서, 미디어 콘텐츠의 데이터의 구성을 기술하는 구조 기술 데이터가 수신된다. 이 단계에서, 선택 대상 데이터는 판정 조건들, 즉 수신 단말기, 전달라인의 트래픽량, 및 사용자의 요구에 근거하여 결정된다. 선택 단계 513에서, 판정 단계 511에서 선택의 대상으로 결정된 데이터, 구조 기술 데이터, 및 문맥 기술 데이터가 수신된다. 또한, 미디어 데이터 집합은 판정 단계 511에서 선택의 대상으로 결정된 데이터만으로부터 선택된다. 추출단계 503는 제 14실시예와 관련하여 기술된 추출단계와 동일하고 재생 505는 제 14실시예와 관련하여 기술된 재생 단계와 동일하기 때문에, 이것들의 기술의 반복은 여기서 생략된다. 미디어 데이터는 비디오 데이터, 음성 데이터, 및 텍스트 데이터와 같은 여러개의 데이터 집합들로 이루어진다. 실시예들의 하기 기술에서, 미디어 데이터는 특히 비디오 데이터와 음성 데이터중 적어도 하나로 이루어진다.
본 실시예에서, 도 102에 나타낸 바와 같이, 미디어 콘텐츠의 시간의 단일 피리어드내에, 다른 비디오 데이터 또는 음성 데이터 데이터가 채널들에 할당되며, 비디오 데이터 또는 음성 데이터는 또한 층들의 계층 집합에 할당된다. 예를 들면, 채널 1/층 2는 높은 해상도를 갖는 비디오 데이터에 할당된다. 음성 데이터를 전달하기 위한 채널 1은 스테레오 음성 데이터에 할당되고, 채널 2는 모노포닉 음성 테 이터에 할당된다. 도 103 및 104는 XML의 사용을 통한 구조 기술 데이터를 기술하기 위하여 사용된 문서 형태 정의(DTD)의 한 예와, DTD의 사용을 통해 기술된 문맥 기술 데이터의 한 예이다.
미디어 콘텐츠가 이러한 채널들과 층들로 형성되는 경우에, 본 실시예의 판정 단계 511에 관한 처리는 도 105 내지 108를 참고하여 설명될 것이다. 도 105에 나타낸 바와 같이, 단계 101에서 사용자 요구가 존재하는 지의 여부에 대하여 결정이 이루어진다. 단계 101에서 사용자 요구가 존재한다고 판정되면, 사용자 요구는 도 106에 나타낸 판정 처리를 수행하게 된다.
단계 101에서, 어떠한 사용자 요구가 존재하지 않은 것으로 판정된다면, 처리가 단계 S103로 진행하며, 여기서 수신 데이터가 비디오 데이터만인지, 음성데이터만인지, 또는 비디오와 음성 데이터인지에 대한 또 하나의 판정이 이루어진다. 단계 S103에서 수신 데이터가 전적으로 비디오 데이터라고 판정된다면, 도 107에 나타낸 비디오 데이터에 관한 판정 처리 SR-C이 실행된다. 수신 데이터가 전적으로 음성데이터라고 판정된다면, 도 108에 나타낸 음성데이터에 관한 판정 처리 SR-C이 수행된다. 비디오 및 오디오 데이터가 수신가능하다면, 처리는 단계 S015로 진행한다. 단계 S105에서, 비디오 및 오디오 데이터를 수신하기 위한 수신 단말기의 능력; 예를 들면, 비디오 디스플레이 능력, 재생 능력, 및 압축 데이터가 압축해제되는 속도에 대하여 판정이 이루어진다. 수신 단말기의 능력이 높은 것으로 판정된다면, 처리는 단계 S107로 진행한다. 대조적으로, 수신 단말기의 능력이 낮은 것으로 판정된다면, 처리는 단계 S109로 진행한다. 단계 S107에서, 비디오 데이터와 음성 데이터가 전달되는 라인의 트래픽량이 판정된다. 라인의 트래픽량이 낮은 것으로 판정된다면, 처리는 단계 S111로 진행한다.
단계 S109에 관한 처리는 수신 터미날이 낮은 능력 또는 라인의 트래픽량이 높을 때 실행된다. 처리동안에, 수신 터미날은 채널 1/층 1을 통하여 표준 해상도를 가지는 비디오 데이터와 채널 2을 통하여 음성 데이터를 수신한다. 단계 S111에 관한 처리는 수신 단말기가 높은 능력을 가지거나 또는 트래픽량이 낮을 때 실행된다. 처리 동안에, 수신 단말기는 채널 1/층 2를 통하여 높은 해상도를 가지는 비디오 데이터 및 채널 1을 통하여 스테레오 음성을 수신한다.
이하, 도 106에 나타낸 사용자 요구에 관한 판정 처리 SR-A이 기술될 것이다. 본 실시예에서, 사용자 요구가 비디오 층과 음성 채널을 선택하도록 취해진다. 단계 S151에서, 사용자가 비디오 데이터를 요구하였는 지의 여부에 대한 판정이 이루어진다. 단계 S151에서, 사용자는 비디오 데이터를 요구하기로 판정된다면, 처리는 단계 S153으로 진행한다. 비디오 데이터에 대한 사용자 요구가 층2의 선택에 해당하는 지에 대한 판정이 이루어진다. YES가 단계 S153에서 선택된다면, 처리는 단계 S155로 진행하고, 여기서 층2는 비디오 데이터로서 선택된다. NO가 단계 S153에서 선택된다면, 처리가 단계 S157로 진행하고, 층1이 비디오 데이터로서 선택된다. 단계 S159에서, 사용자가 오디오 데이터를 요구하는 지에 대한 판정이 이루어진다. 단계 S159에서 사용자가 오디오 데이터를 요구하기로 판정된다면, 처리는 단계 S161로 진행한다. 사용자가 오디오 데이터를 요구하지 않기로 판정된다면, 처리는 종료한다. 단계 S161에서, 오디오 데이터에 대한 사용자 요구가 채널 11의 선택에 해당하는 지의 여부에 대한 판정이 이루어진다. YES가 단계 S161에서 선택된다면, 처리는 단계 S 162로 진행하며, 여기서 채널 1은 오디오 데이터로서 선택된다. NO 가 단계 S161에서 선택된다면, 처리는 단계 S165로 진행하며, 여기서 채널 2는 오디오 데이터로서 선택된다.
이하, 도 107에 나타낸 비디오 데이터에 관한 판정 처리 SR-B이 설명될 것이다. 단계 S171에서, 비디오 데이터를 수신하기 위한 수신 단말기의 능력에 대한 판정이 이루어진다. 수신 단말기가 하이능력을 갖는 것으로 판정된다면, 처리는 단계 S173으로 진행한다. 수신 단말기가 낮은 능력을 갖는 것으로 판정된다면, 처리는 단계 S175로 진행한다. 단계 S173에서, 라인의 트래픽량이 판정된다. 라인의 트래픽량이 높은 것으로 판정된다면, 처리는 단계 S175로 진행한다. 대조적으로, 라인의 트래픽량이 낮은 것으로 판정된다면, 처리는 단계 S177로 진행한다.
단계 S175에 관한 처리는 수신 단말기가 낮은 능력을 가지거나 또는 라인의 트래픽량이 하이일 때, 실행된다. 처리동안에, 수신단말기는 채널 1/층 1을 통해 표준 해상도를 갖는 비디오 데이터만을 수신한다. 단계 S177에 관한 처리는 수신 단말기가 낮은 능력을 가지거나 또는 라인의 트래픽량이 낮을 때 실행된다. 처리동안에, 수신 단말기는 채널 1/층 2를 통해 높은 해상도를 가지는 비디오 데이터만을 수신한다.
이하, 도 108에 나타낸 음성 데이터에 관한 판정 처리 SR-C이 설명될 것이다. 단계 S181에서, 오디오 데이터를 수신하기 위한 수신 단말기의 능력에 대한 판정이 이루어진다. 수신 단말기가 높은 능력을 갖는 것으로 판정된다면, 처리는 단 계 S183으로 진행한다. 수신 단말기가 낮은 능력을 갖는 것으로 판정된다면, 단계 S183에서, 라인의 트래픽량이 판정된다. 라인의 트래픽량이 높은 것으로 판정된다면, 처리가 단계 S185로 진행한다. 대조적으로, 라인의 트래픽량이 낮은 것으로 판정된다면, 처리가 단계 S187로 진행한다.
처리는 수신 단말기가 낮은 능력을 가지거나 또는 라인의 트래픽량이 하이일 때 실행된다. 처리동안에, 수신 단말기는 채널 2을 통하여 모노포닉 오디오 데이터만을 수신한다. 단계 S187에 관한 처리는 수신 단말기가 낮은 능력을 가지거나 또는 라인의 트래픽량이 낮을 때 실행된다. 처리동안에, 수신 단말기는 채널 1을 통하여 스테레오 음성 데이터만을 수신한다.
(예 2)
청구항 16에 기재된 발명은 예 1에 기재된 발명(청구항 15)에 대해 판정 단계 S511에 관한 처리에서만 다르다. 판정 단계 S511에서, 미디어 콘텐츠의 데이터의 구성을 기술하는 구조 기술 데이터가 수신된다. 이 단계에서, 수신단말기의 능력, 전달라인의 트래픽량, 및 사용자 요구와 같은 판정 조건들에 기초하여, 비디오 데이터만이 선택될 것인지, 음성 데이터만이 선택될 것인지, 또는 비디오와 음성 테이터가 선택될 것인 지에 대한 판정이 이루어진다. 선택 단계 513, 추출 단계 503, 및 재생 단계 505는 앞서 기술된 것과 동일하기 때문에, 그것들의 설명은 여기서는 생략한다.
이하, 본 실시예의 판정 단계 511에 관한 처리가 도 109 와 110을 참고하여 설명될 것이다. 도 109에 나타낸 바와 같이, 단계 S201에서, 사용자의 요구가 존재 하는 지에 대한 판정이 이루어진다. 단계 S201에서, 사용자의 요구가 존재하는 것으로 판정되면, 처리는 단계 S203으로 진행한다. 사용자의 요구가 존재하지 않는 것으로 판정되면, 처리는 단계 S205로 진행한다. 단계 S203에서, 사용자의 요구가 전적으로 비디오 데이터를 요구하는 지에 대한 판정이 이루어진다. YES가 단계 S203에서 선택되면, 처리는 단계 S253으로 진행하며, 여기서, 비디오 데이터만이 선택의 대상이 되도록 판정된다. 단계 S207에서, 사용자가 음성 데이터만을 요구하는 지의 여부에 대한 판정이 이루어진다. YES가 단계 S207에서 선택되면, 처리는 단계 S255로 진행하며, 여기서 음성 데이터만이 선택의 대상이 되도록 판정된다. NO가 단계 S207에서 선택되면, 처리는 단계 S251로 진행하며, 여기서 비디오와 오디오 데이터가 선택의 대상이 되도록 판정된다.
어떠한 사용자의 요구도 존재하지 않을 때, 처리가 진행되어가는 단계 S205에서, 비디오 데이터만이 수신가능한지, 음성 데이터만이 수신가능한지 또는 비디오와 음성 데이터가 수신가능한지에 대한 판정이 이루어진다. 단계 S205에서 비디오 데이터만이 수신가능한 것으로 판정된다면, 처리가 단계 S253으로 진행하고, 여기서 비디오 데이터만이 선택의 대상으로 판정된다. 단계 S205에서 음성 데이터만이 수신가능하다고 판정된다면, 처리는 단계 S255로 진행하며, 여기서 음성 데이터만이 선택의 대상으로 판정된다. 단계 S205에서 비디오와 음성 데이터가 수신가능한 것으로 판정된다면, 처리가 단계 S209로 진행한다.
단계 S209에서, 라인의 트래픽량이 판정된다. 라인의 트래픽량이 로우이라면, 처리는 단계 S251로 진행하며, 여기서 비디오와 음성 데이터가 선택의 대상으 로 판정된다. 라인의 트래픽량이 하이이라면, 처리가 단계 S211로 진행한다. 단계 S211에서, 라인을 통해 전달될 데이터가 음성 데이터를 포함하는 지의 여부에 대한 판정이 이루어진다. YES가 단계 S211에서 선택된다면, 처리는 단계 S255로 진행하며, 여기서, 음성 데이터가 선택의 대상으로서 판정된다. NO가 단계 S211에서 선택되면, 처리는 단계 S253로 진행하며, 비디오 데이터는 선택의 대상으로 판정된다.
(예 3)
청구항 17에 따른 발명에서, 미디어 콘텐츠는 단일 시간 간격에서 다수의 다른 비디오 및/또는 음성 데이터 집합들로 이루어진다. (청구항 15에서 정의되는 발명에 따른) 예 2의 판정 단계 511에서 이루어지는, 비디오 데이터만이 선택될 것이지, 음성 데이터만이 선택될 것인지, 또는 비디오와 음성 데이터가 선택될 것인지의 여부에 대한 판정 외에, 실시예 3의 판정 단계 S511에서, 수신 단말기의 능력, 전달라인의 트래픽량, 및 사용자의 요구와 같은, 판정 조건들에 기초한 데이터 집합들이 선택의 대상으로서 선택될 것이다. 선택 단계 S513, 추출 단계 503, 및 재생 단계 505가 앞에서 기술된 것과 동일하기 때문에, 이것들의 설명의 반복은 여기서는 생략될 것이다.
예 1의 경우에서와 같이, 미디어 콘텐츠의 단일 시간 주기내에서, 다른 비디오 데이터 또는 음성 데이터가 채널들 또는 층들에 할당될 것이다. 예를 들면, 동화상을 전달하기 위한 채널 1/층 1이 표준 해상도를 갖는 비디오 데이터에 할당되며, 채널 1/층 2는 높은 해상도를 갖는 비디오 데이터에 할당된다. 음성 데이터를 전달하기 위한 채널 1은 스테레오 오디오 데이터에 할당되며, 채널 2는 모노포닉 오디오 데이터에 할당된다. 도 103 및 104는 XML을 사용하여 구조 기술 데이터를 기술하기 위하여 사용된 문서 형태 정의(DTD)의 한 예 및 DTD를 사용하여 설명된 문맥 기술 데이터의 한 예를 보여준다.
이하, 예 3의 판정 단계 511에 관한 처리가 도 111 내지 113를 참고하여 기술될 것이다. 도 111에 나타낸 바와 같이, 본 실시예에서, 선택의 대상인 데이터가 판정된다. 단계 S301에서, 선택 대상 판정 처리 SR-D을 통하여 선택 대상 데이터가 판정된다. 단계 S301에서, 비디오 데이터만이 선택의 대상으로 판정되었을 때, 도 112에 나타낸 비디오 데이터에 관련한 판정 처리 SR-E에 관한 처리가 실행된다. 단계 S301에서, 오디오 데이터만이 선택의 대상으로 판정되었을 때, 도 113에 나타낸 오디오 데이터에 관련한 판정 처리 SR-F 에 관한 처리가 실행된다. 단계 S301에서, 비디오와 오디오 데이터가 선택의 대상으로 판정되었을 때, 처리가 단계 S303으로 진행하며, 여기서 비디오와 오디오 데이터를 수신하기 위한 수신 단말기의 능력이 판정된다. 수신 단말기가 높은 능력을 갖는 것으로 판정되었을 때, 처리는 단계 S305로 진행한다. 수신 단말기가 낮은 능력을 갖는 것으로 판정되었을 때, 처리는 단계 S307로 진행하며, 전달율과 같은, 라인의 능력이 판정된다. 라인이 높은 능력을 갖는 것으로 판정된다면, 처리가 단계 S309로 진행한다. 대조적으로, 라인이 낮은 능력을 갖는 것으로 판정된다면, 처리는 단계 S307로 진행한다. 라인이 낮은 트래픽량을 갖는 것으로 판정된다면, 처리는 단계 S307로 진행한다. 라인이 낮은 트래픽량을 갖는 것으로 판정된다면, 처리는 단계 S311로 진행한다.
수신 단말기가 낮은 능력을 가지거나, 라인이 낮은 능력을 가지거나 또는 라 인이 낮은 트래픽량을 가질 때, 단계 S307에 관련한 처리가 실행된다. 처리동안에, 채널 1/층 1을 통하여 표준 해상도를 갖는 비디오 데이터와 채널 2을 통하여 모노포닉 음성 데이터를 수신한다. 대조적으로, 수신 단말기가 높은 능력을 가지거나, 라인이 높은 능력을 가지거나, 또는 라인이 낮은 트래픽량을 가질 때, 단계 S311에 관련한 처리가 실행된다. 처리동안에, 수신 단말기는 채널 1/층 2을 통하여 높은 해상도를 갖는 비디오 데이터와 채널 1을 통하여 스테레오음성 데이터를 수신한다.
이하, 도112에 나타낸 비디오 데이터에 관한 판정 처리 SR-E가 기술될 것이다. 단계 S351에서, 비디오 데이터를 수신하기 위한 수신 단말기의 능력에 대한 판정이 이루어진다. 수신 단말기가 높은 능력을 갖는 것으로 판정된다면, 처리는 단계 S353으로 진행한다. 수신 단말기가 낮은 능력을 갖는 것으로 판정된다면, 처리는 단계 S355로 진행한다. 단계 S353에서, 라인의 능력이 판정된다. 라인의 능력이 높은 것으로 판정된다면, 처리는 단계 S357로 진행한다. 대조적으로, 라인의 능력이 낮은 것으로 판정된다면, 처리는 단계 S355로 진행한다. 단계 S357에서, 라인의 트래픽량이 판정된다. 라인의 트래픽량이 높은 것으로 판정된다면, 처리는 단계 S355로 진행한다. 대조적으로, 라인의 트래픽량이 낮은 것으로 판정된다면, 처리는 단계 S359로 진행한다.
수신 단말기가 낮은 능력을 가지거나, 라인이 낮은 능력을 가지거나, 또는 라인이 낮은 트래픽량을 가질 때 단계 S355에 관련한 처리가 실행된다. 처리동안에, 수신 단말기가 채널 1/층 1을 통하여 표준 해상도를 갖는 비디오 데이터만을 수신한다. 대조적으로, 수신 단말기가 높은 능력을 가지거나, 라인이 높은 능력을 가지거나, 또는 라인이 낮은 트래픽량을 가질 때 단계 S359에 관련한 처리가 실행된다. 처리동안에, 수신 단말기는 채널 1/층 2을 통하여 높은 해상도를 갖는 비디오 데이터만을 수신한다.
이하, 도113에 나타낸 오디오 데이터에 관한 판정 처리 SR-F가 기술될 것이다. 단계 S371에서, 오디오 데이터를 수신하기 위한 수신 단말기의 능력에 대한 판정이 이루어진다. 수신 단말기가 높은 능력을 갖는 것으로 판정된다면, 처리가 단계 S373로 진행한다. 수신 단말기가 낮은 능력을 갖는 것으로 판정된다면, 처리는 단계 S375로 진행한다. 단계 S373에서, 라인의 능력이 판정된다. 라인의 능력이 높은 것으로 판정된다면, 처리가 단계 S377로 진행한다. 대조적으로, 라인의 능력이 낮은 것으로 판정된다면, 처리가 단계 S375로 진행한다. 단계 S377에서, 라인의 트래픽량이 판정된다. 라인의 트래픽량이 높은 것으로 판정된다면, 처리는 단계 S379로 진행한다.
수신 단말기가 낮은 능력을 가지거나, 라인이 낮은 능력을 가지거나, 또는 라인이 낮은 트래픽량을 가질 때 단계 S375에 관련한 처리가 실행된다. 처리동안에, 수신 단말기가 채널 2을 통하여 모노포닉 음성 데이터만을 수신한다. 대조적으로, 수신 단말기가 높은 능력을 가지거나, 라인이 높은 능력을 가지거나, 또는 라인이 낮은 트래픽량을 가질 때 단계 S379에 관련한 처리가 실행된다. 처리 동안에, 수신 단말기가 채널 1을 통하여 스테레오 음성 데이터를 수신한다.
(예 4)
청구항 제 18항 및 제 19항에 기재된 발명에 있어서, 대응하는 미디어 세그 먼트에 관한 대표 데이터는 가장 낮은 계층에 있는 문맥 기술 데이터의 개개의 요소들에 속성으로서 첨가된다. 미디어 콘텐츠은 단일 주기의 시간에서 다수의 상이한 미디어 데이터를 포함한다. 판정 단계(S511)에서, 미디어 콘텐츠의 데이터의 구성을 기술하는 구조 기술 데이터가 수신된다. 이 단계에서, 미디어 데이터 집합 및/또는 대표 데이터 집합들 중 하나가 선택의 대상로서 취해진 것에 대한 설명은 수용하는 단말기의 능력, 전달라인의 트래픽량, 라인의 능력, 및 사용자의 요구과 같은 판정 조건들에 기초하여 수행된다.
선택 단계(513), 추출 단계(503), 및 재생 단계(505)들이 그와 같이 기술된 것들과 동일하기 때문에, 그 설명은 여기에서 생략된다. 미디어 데이터는 비디오 데이터, 사운드 데이터, 또는 문자 데이터를 포함한다. 본 예에서, 미디어 데이터는 적어도 하나의 비디오 데이터 및 사운드 데이터를 포함한다. 대표 데이터가 비디오 데이터에 대응하는 경우에, 대표 데이터는 예를 들어 각 미디어 세그먼트를 위한 대표 이미지 데이터 또는 낮은 해상도의 비디오 데이터를 포함한다. 대표 데이터가 오디오 데이터에 대응하는 경우에, 대표 데이터는 예를 들어 각 미디어 세그먼트를 위한 키-문구 데이터를 포함한다.
예 3의 경우에서와 같이, 미디어 콘텐츠의 단일 주기의 시간 내에, 상이한 비디오 데이터 또는 사운드 데이터들은 채널들 또는 층들에 할당된다. 예를 들어, 동화상을 전달하기 위한 채널 1/층 1은 표준 해상도를 가지는 비디오 데이터에 할당되고, 채널 1/층 2는 고해상도를 가지는 비디오 데이터에 할당된다. 사운드 데이터를 전달하기 위한 채널 1은 스테레오 사운드 데이터에 할당되고, 채널 2는 모노 포닉 사운드 데이터에 할당된다.
본 예의 판정 단계(S511)에 관한 처리는 도 114 내지 도 118을 참조하여 기술된다. 도 114에 도시된 바와 같이, 단계(S401)에서, 판정은 사용자의 요구가 있는지 없는지에 대해 수행된다. 단계(S401)에서, 사용자 요구가 존재하도록 판정되면, 도 116에 도시된 사용자 요구에 관계하는 판정 처리(SR-G)가 실행된다.
단계(S401)에서 사용자 요구가 존재하도록 판정되지 않았다면, 처리는 단계(S403)로 속행하고, 여기에서 단지 비디오 데이터, 단지 사운드 데이터, 또는 비디오 및 사운드 데이터들이 수신가능한지에 대한 판정이 수행된다. 단계(S403)에서, 단지 비디오 데이터만이 수신 가능한 것으로 판정되면, 도 117에 도시된 비디오 데이터에 관계하는 판정 처리(SR-H)가 실행된다. 대조적으로, 단지 사운드 데이터만이 수신 가능한 것으로 판정되면, 도 118에 도시된 오디오 데이터에 관한 판정 처리(SR-I)가 실행된다. 비디오 및 사운드 데이터가 수신 가능한 것으로 판정되면, 처리는 도 115에 도시된 단계(S405)로 진행한다.
단계(S405)에서, 수신 단말기의 능력이 판정된다. 단계(S405)에 관한 처리의 실행후에, 라인의 능력을 판정하는 단계(S407)에 관한 처리 및 라인의 트래픽량을 판정하는 단계(S409)에 관한 처리가 주어진 순서로 수행된다. 본 예의 판정 단계(S511)에서, 단계(S405, S407 및 S409)에서 수행된 처리 작업의 결과에 근거하여, 비디오 데이터들의 채널 또는 층들에 대해, 수신될 오디오 데이터에 대해 또는 수신될 대표 데이터에 대한 판정이 수행된다.
수신 단말기의 능력 라인의 능력 라인의 혼잡도가 높은가 ? 수신된 데이터
높음 높음 아니오 비디오 데이터 : 채널 1 층 2 오디오 데이터 : 채널 1 (S411)
높음 높음 예 비디오 데이터 : 채널 1 층 1 오디오 데이터 : 채널 1 (S413)
높음 낮음 아니오 비디오 데이터 : 채널 1 층 1 오디오 데이터 : 채널 2 (S413)
높음 낮음 예 비디오 데이터 : 채널 1 층 1 오디오 데이터 : 채널 2 (S415)
낮음 높음 아니오 비디오 데이터 : 채널 1 층 1 오디오 데이터 : 채널 2 (S415)
낮음 높음 예 비디오 데이터 : 대표 데이터 오디오 데이터 : 채널 2 (S417)
낮음 낮음 아니오 비디오 데이터 : 대표 데이터 오디오 데이터 : 채널 2 (S417)
낮음 낮음 예 비디오 데이터 : 대표 데이터 오디오 데이터 : 대표 데이터 (S411)
도 116에 도시된 사용자 요구에 관한 판정 처리(SR-G)를 설명한다. 단계(S451)에서, 사용자가 단지 비디오 데이터만을 요구하는지에 대한 판정이 이루어진다. 단계(S451)에서 예가 선택되면, 비디오 데이터에 관한 처리 판정(SR-H)이 실행된다. 단계(S451)에서 아니오가 선택되면, 처리는 단계(S453)로 진행한다. 단계(S453)에서, 사용자가 단지 오디오 데이터만을 요구하였는지에 대한 판정이 수행된다. 단계(S453)에서 예가 선택되면, 오디오 데이터에 관한 판정 처리(SR-I)가 실행된다. 단계(S453)에서 아니오가 선택되면, 처리는 단계(S405)로 진행한다.
도 117에 도시된 비디오 데이터에 관한 판정 처리(SR-H)를 설명한다. 단계(S641)에서, 수신단말기의 능력에 대한 판정이 수행된다. 단계(S641)에 관한 처리의 실행 후에, 라인의 능력을 판정하기 위한 단계(S643)에 관한 처리 및 라인의 트래픽량을 판정하는 단계(S645)에 관한 처리가 주어진 순서로 수행된다. 단계(S641, S643 및 S645)들에 관한 처리 작업들이 종료된 후에, 수신 단말기가 높은 능력을 가지고 라인이 높은 능력을 가지고 라인의 트래픽량이 낮으면(단계 S647), 본 예의 비디오 데이터에 관한 판정 처리(SR-H)동안, 단지 비디오 데이터만이 채널 1/층 2를 통해 수신된다. 대조적으로, 수신 단말기가 저능력을 가지고 라인이 낮은 능력을 가지고 라인의 트래픽량이 높으면, 단지 대표 비디오 데이터가 수신된다(단계 S473). 이전의 조건들이 만족된 것이 없으면, 단지 비디오 데이터만이 채널 1/층 2를 통해 수신된다(단계 S475).
도 118에 도시된 오디오 데이터에 관한 판정 처리(SR-I)가 설명된다. 단계(S471)에서, 수신 단말기의 능력에 대한 판정이 수행된다. 단계(S471)에 관한 처리의 실행후에, 라인의 능력을 판정하는 단계(S473)에 관한 처리 및 라인의 트래픽량을 판정하는 단계(S475)에 관한 처리가 주어진 순서로 수행된다. 단계(S471, S473 및 S475)들에 관한 처리 작업들이 종료된 후에, 수신 단말기가 높은 능력을 가지고 라인이 높은 능력을 가지고 라인의 트래픽량이 낮으면(단계 S491), 본 예의 오디오 데이터에 관한 판정 처리(SR-I) 동안, 단지 오디오 데이터만이 채널 1로 수신된다. 대조적으로, 수신 단말기가 저능력을 가지고 라인이 낮은 능력을 가지고 라인의 트래픽량이 높으면, 단지 대표 오디오 데이터가 수신된다(단계 S493). 이전의 조건들이 만족된 것이 없으면, 단지 비디오 데이터만이 채널 2로 수신된다(단계 S495).
(예 5)
청구항 제 20항에 기재된 발명에서, 수신 단말기의 능력, 전달 라인의 능력, 라인의 트래픽량 및 사용자 요구과 같은 판정 조건들에 근거하여, 미디어 세그먼트에 관한 전체 데이터, 단지 대응하는 미디어 세그먼트에 관한 대표 데이터, 또는 대응하는 미디어 세그먼트에 관한 전체 데이터나 대표 데이터중 하나가 선택의 대상로서 취해지는 것에 대한 판정이 수행된다.
예 4의 경우에서와 같이, 대응하는 미디어 세그먼트에 관한 대표 데이터는 속성으로서 가장 낮은 계층에 있는 문맥 기술 데이터의 개개의 요소들에 첨가된다. 대표 데이터가 비디오 데이터에 대응하는 경우에, 대표 데이터는 예를 들어 각 미디어 세그먼트 또는 저해상도의 비디오 데이터를 위한 대표 데이터를 포함한다. 대표 데이터가 오디오 데이터에 대응하는 경우에, 대표 데이터는 예를 들어 각 미디어 세그먼트를 위한 키-문구 데이터를 포함한다.
본 예의 판정 단계(S511)에 관한 처리는 도 119 내지 도 121을 참조하여 설명된다. 도 119에 도시된 바와 같이, 단계(S501)에서, 사용자 요구가 존재하는지에 대한 판정이 수행된다. 단계(S501)에서, 사용자 요구가 존재하는 것으로 판정되면, 도 121에 도시된 사용자 요구에 관한 판정 처리(SR-J)가 실행된다.
단계(S501)에서, 사용자 요구가 존재하지 않는 것으로 판정되면, 처리는 단계(S503)으로 진행하고, 여기에서 단지 미디어 세그먼트에 관한 대표 데이터, 단지 미디어 세그먼트에 관한 전체 데이터, 또는 미디어 세그먼트에 관한 대표 데어터와 전체 데이터가 수신 가능한지에 대한 판정이 수행된다. 단계(S503)에서, 단지 대표 데이터만이 수신 가능한 것으로 판정되면, 처리는 도 120에 도시된 단계(S553)으로 진행하고, 여기에서 단지 대표 데이터만이 선택의 대상로서 취해지도록 판정된다. 단지 전체 데이터만이 수신 가능한 것으로 판정되면, 처리는 단지 전체 데이터만이 선택의 대상로서 취해지도록 판정되는 단계(S555)로 진행한다. 대표 데이터와 전체 데이터 모두가 수신 가능한 것으로 판정되면, 처리는 단계(S505)로 진행한다.
단계(S505)에서, 라인의 능력이 판정된다. 라인이 높은 능력을 가지는 것으로 판정되면, 처리는 단계(S507)로 진행한다. 대조적으로, 라인이 낮은 능력을 가지는 것으로 판정되면, 처리는 단계(S509)로 진행한다. 각각의 단계(S507 및 S509)에서, 라인의 트래픽량이 판정된다. 단계(S507)에서, 라인이 낮은 트래픽량을 가지는 것으로 판정되면, 처리는 전체 데이터와 대표 데이터 모두가 선택의 대상들로서 취해지도록 판정되는 단계(S551)로 진행한다. 단계(S509)에서, 라인은 높은 트래픽량을 가지는 것으로 판정되고, 처리는 대표 데이터가 선택의 대상로서 취해지는 단계(S553)로 진행한다. 단계(S507)에서 라인이 높은 트래픽량을 가지는 것으로 판정되고 단계(S509)에서 라인이 높은 트래픽량을 가지는 것으로 판정되면, 처리는 전체 데이터가 선택의 대상로서 취해지는 단계(S555)로 진행한다.
사용자 요구에 관한 판정 처리(SR-J) 동안, 단계(S601)에서, 사용자 요구가 단지 대표 데이터에 대응하는 지에 대한 판정이 수행된다. 단계(S601)에서 예가 선택되면, 단지 대표 데이터만이 선택의 대상로서 취해지는 단계(S553)로 진행한다. 단계(S601)에서 아니오가 선택되면, 처리는 사용자 요구가 단지 전체 데이터에만 대응하는지에 대한 판정이 수행된다. 단계(S603)에서 예가 선택되면, 처리는 단지 전체 데이터만이 선택의 대상로서 취해지는 단계(S555)로 진행한다. 단계(S603)에서 아니오가 선택되면, 처리는 미디어 세그먼트에 관한 전체 데이터와 대표 데이터가 선택의 대상들로서 취해지는 단계(S551)로 진행한다.
[제 18 실시예]
본 발명의 제 18 실시예가 설명된다. 본 실시예는 청구항 22항에 기재된 발명에 관한 것이다. 도 122는 본 실시예의 데이터 처리 방법에 관한 처리 순서를 나타낸 블록도이다. 특히, 처리는 청구항 제 2항에 기술된 발명에 관한 것이다. 도면에서, 도면 부호 501은 선택 단계를 나타내고; 503은 추출 단계를 나타내며; 515는 구성 단계를 나타낸다. 선택 단계(501) 및 추출 단계(503)들은 제 14 실시예와 관련하여 기술된 것과 동일하기 때문에, 이것들의 설명은 여기서 생략한다.
구성 단계(515)에서, 추출 단계(503)에서 추출된 선택 세그먼트에 관한 데이터로부터 미디어 콘텐츠의 스트림이 형성된다. 특히, 구성 단계(515)에서, 하나의 스트림이 추출 단계(503)에서의 데이터 출력을 멀티플렉싱하는 것에 의하여 형성된다.
[제 19 실시예]
본 발명의 제 19 실시예가 설명된다. 본 실시예는 청구항 제 23항에 기재된 발명에 관한 것이다. 도 123은 본 실시예의 데이터 처리 방법에 관한 처리를 도시한 블록도이다. 도면에서, 도면 부호 501은 선택 단계를 지시하고; 503은 추출 단계를 지시하고; 515는 구성 단계를 지시하며; 517은 전달 단계를 지시한다. 선택 단계(501)와 추출 단계(503)들은 제 14 실시예와 관련하여 기술된 것들과 동일하기 때문에, 그 반복 설명은 여기에서 생략된다. 아울러, 구성 단계(515)는 제 18 실시예와 관련하여 기술된 구성 단계와 동일하므로, 그 반복 설명은 생략된다.
전달 단계(517)에서, 구성 단계(515)에서 형성된 스트림은 라인을 통하여 전달된다. 전달 단계(517)는 라인의 트래픽량을 판정하는 단계를 포함할 수도 있으며, 구성 단계(515)는 전달 단계(517)에서 판정된 라인의 트래픽량에 근거하여 파일을 구성하는 데이터의 양을 조정하는 단계를 포함할 수도 있다.
[제 20 실시예]
본 발명의 제 20 실시예가 설명된다. 본 실시에는 청구항 제 24항에 기재된 발명에 관한 것이다. 도 124는 본 실시예의 데이터 처리 방법에 관한 처리를 도시한 블록도이다. 도면에서, 도면 부호 501은 선택 단계를 지시하고; 503은 추출 단계를 지시하며; 515는 구성 단계를 지시하며; 519는 기록 단계를 지시하고; 521은 데이터 기록 매체를 지시한다. 기록 단계(519)에서, 구성 단계(515)에서 형성된 흐름은 데이터 기록 매체(5212)에 기록된다. 데이터 기록 매체(521)는 매체 내용, 매체 내용에 관한 문맥 기술 데이터, 매체 내용에 관한 구조 기술 데이터를 기록하기 위하여 사용된다. 데이터 기록 매체(521)는 하드디스크, 메모리, 또는 DVD-RAM 등이다. 선택 단계(501) 및 추출 단계(503)들은 제 14 실시예와 관련하여 기술된 것들과 동일하기 때문에, 그 반복 설명은 여기에서 생략된다. 아울러, 구성 단계(515)는 제 18 실시예와 관련하여 기술된 구성 단계와 동일하므로, 그 반복 설명은 생략된다.
[제 21 실시예]
본 발명의 제 21 실시예가 설명된다. 본 실시예는 청구항 제 25항에 기재된 발명에 관한 것이다. 도 125는 본 실시예의 데이터 처리 방법에 관한 처리를 도시한 블록도이다. 도면에서, 도면 부호 501은 선택 단계를 지시하며; 503은 추출 단계를 지시하며; 515는 구성 단계를 지시하며; 519는 기록 단계를 지시하고; 521은 데이터 기록 매체를 지시하며; 523은 데이터 기록 매체 관리 단계를 지시한다. 데이터 기록 매체 관리 단계(523)에서, 이미 저장된 매체 내용 및/또는 새롭게 저장될 매체 내용들은 데이터 기록 매체(521)의 이용 가능한 디스크 공간에 따라서 재구성된다. 보다 상세하게, 데이터 기록 매체 관리 단계(523)에서, 다음의 처리 작업들 중 적어도 하나가 수행된다. 데이터 기록 매체(521)의 이용 가능한 디스크 공간이 작을 때, 새롭게 저장될 매체 내용은 편집된 후에 저장된다. 모두 이미 저장된 매체 내용에 관한 문맥 기술 데이터 및 구조 기술 데이터들은 선택 단계(501)로 보내진다. 매체 내용 및 구조 기술 데이터는 추출 단계(503)로 보내진다. 매체 내용은 재구성되고, 그러므로 재구성된 내용은 데이터 기록 매체(521)에 기록된다. 아울러, 재구성되지 않은 매체 내용은 삭제된다.
선택 단계(501) 및 추출 단계(503)들은 제 14 실시예와 관련하기 기술된 것들과 동일하기 때문에, 그 반복 설명은 여기에서 생략된다. 아울러, 구성 단계(515)는 제 18 실시예와 관련하여 기술된 구성 단계와 동일하므로, 그 반복 설명은 생략된다. 더욱이, 기록 단계(519) 및 기록 매체(521)들은 제 19 실시예와 관련하여 기술된 것들과 동일하기 때문에, 그 반복 설명은 여기에서 생략된다.
[제 22 실시예]
본 발명의 제 22 실시예가 설명된다. 본 실시예는 청구항 제 26항에 기술된 발명에 관한 것이다. 도 126은 본 실시예의 데이터 처리 방법에 관한 처리를 도시한 블록도이다. 도면에서, 도면 부호 501은 선택 단계를 지시하며; 503은 추출 단계를 지시하며; 515는 구성 단계를 지시하며; 519는 기록 단계를 지시하고; 521은 데이터 기록 매체를 지시하며; 525는 저장된 내용 관리 단계를 지시한다. 저장된 내용 관리 단계(525)에서, 데이터 기록 매체(521)에 이미 저장된 매체 내용은 매체 내용의 저장 기간에 따라서 재구성된다. 보다 상세하게, 저장된 내용 관리 단계는 데이터 기록 매체(521)에 저장된 매체 내용을 관리하는 단계와; 소정의 시간 주기에 걸쳐 저장된 매체 내용에 관한 문맥 기술 데이터와 물리적 내용 데이터를 선택 단계(501)로 보내는 단계와; 매체 내용 및 구조 기술 데이터를 추출 단계(503)로 보내는 단계와; 재구성된 매체 내용을 데이터 기록 매체(521)이 기록하는 단계와; 아직 재구성되지 않은 매체 내용을 삭제하는 단계를 포함한다.
선택 단계(501)와 추출 단계(503)는 제 14 실시예와 관련하여 기술된 것들과 동일하기 때문에, 그 반복 설명은 여기에서 생략된다. 아울러, 구성 단계(515)는 제 18 실시예와 관련하여 기술된 구성 단계와 동일하므로, 그 반복 설명은 생략된다. 더욱이, 기록 단계(519)와 데이터 기록 매체(521)들은 제 19 실시예와 관련하여 기술된 것들과 동일하기 때문에, 그 반복 설명은 여기에서 생략된다.
전술한 제 14 내지 제 22 실시예에서, 선택 단계(501 및 512)들은 선택 수단으로서 구현될 수 있으며; 비디오 선택 단계(507)는 비디오 선택 수단으로서 구현될 수 있으며; 오디오 선택 단계(509)는 오디오 선택 수단으로서 구현될 수 있으며; 판정 단계(511)는 판정 수단으로서 구현될 수 있으며; 구성 단계(515)는 구성 수단으로서 구현될 수 있으며; 전달 단계(517)는 전달 수단으로서 구현될 수 있으며; 기록 단계(519)는 기록 수단으로서 구현될 수 있으며; 데이터 기록 매체 관리 단계(523)는 데이터 기록 매체 관리 수단으로서 구현될 수 있으며; 저장된 내용 관리 단계(525)는 저장된 내용 관리 수단으로서 구현될 수 있다. 이러한 수단의 일부 또는 모든 수단을 포함하는 데이터 처리 장치가 구현될 수 있다.
전술한 실시예에서, 미디어 콘텐츠는 비디오 및 오디오 데이터가 아닌 문자 데이터와 같은 데이터 스트림을 포함할 수도 있다. 아울러, 이전 실시예의 컴퓨터가 소프트웨어의 형태로 처리 단계들의 전부 또는 일부에 관한 처리를 행하게 하는 프로그램의 개개의 단계들은 처리 단계들의 특징으로 발휘하도록 특별히 설계된 하드웨어 회로를 사용하여 프로그램 저장 매체에 저장하는 것에 의하여 구현될 수도 있다.
컴퓨터를 사용하여 소프트웨어 처리를 쉽게 할 수 있는 문맥 내용 기술 데이터의 프로그램 표현에서, 도 253에서 나타낸 바와 같이, <섹션> 또는 <세그먼트>에 첨가된 관점이 다른 <섹션> 또는 <세그먼트>의 관점과 중첩될 때, 관점은 <섹션> 또는 <세그먼트> 중 하나에 더해질 수 있고 다른 <섹션> 또는 <세그먼트>는 그와 같이 첨가된 관점에 링크된 것으로서 표현될 수 있다.
*더욱이, 도 254에 나타낸 바와 같이, 문맥 내용 기술 데이터에서 표현된 모든 관점들을 수집하여 형성된 관점 데이블은 문맥 내용 기술 데이터의 데이터 구조에서 루트인 <콘텐츠>의 자 요소로서 구성될 수 있고, <섹션> 또는 <세그먼트> 각각에 관점 테이블 내의 해당 관점 및 연결되는 관점에 대한 스코어에 관련한 일단의 링크가 첨가되게 하는 식으로 구성될 수 있다.
그러한 구성에 있어서, 사전에 사용자에게 등록되었던 관점의 리스트(이하 관점 리스트라 칭함)를 나타내기가 쉬워졌기 때문에, 사용자가 선호하는 관점을 요구하기 전에 사전에 등록된 관점을 알 수 있다. 그러므로, 관점 리스트에 존재하는 사용자가 관점을 요구할 때, 사용자가 관점 리스트에서 선택 과정을 통해 관점을 요구할 수 있다. 여기서, 관점 테이블은 <콘텐츠>의 자 요소 뿐만이 아니라 <선택> 또는 <세그먼트>의 자 요소로서 구성될 수 있거나, 별개로 기술된 사항으로 구성될 수 있다.
또한, 도 255에 나타낸 바와 같이, 관점 테이블은 모든 관점들이 관점 테이블에 링크되기 위해 표현된 것이 아니라 관점의 일부만이 관점 테이블에 링크되는 혼합형 관점 테이블로서 배열될 수 있다. 이 경우에, 문맥 내용 기술 데이터에서 표현된 모든 관점들은 관점 테이블에서 반드시 기술되는 것은 아니고 링크에서 참조된 관점들만 관점 테이블에 등록된다.
더욱이, 문맥 내용 기술 테이터에 존재하는 관점의 리스트를 나타내는 관점 테이블이 도 256에 나타낸 것과 같이 개별적으로 기술되도록 구성될 때, 관점 테이블을 기초로 한 관점 리스트는 사용자가 선호하는 관점을 요구하기 전에 사용자에게 보여질 수 있다. 이 경우에, 사용자는 선호하는 관점을 요구하기 전에 문맥 내용 기술 데이터에 존재하는 관점을 알 수 있고, 관점 리스트에서 선택 과정을 통해 관점을 요구할 수도 있다.
또한, 도 257에 나타낸 바와 같이, 문맥 내용 기술 데이터는 데이터 구조를 기술하는 데이터 구조 부분과 속성으로 관점을 기술하는 속성부분, 데이터 구조 부분에 대한 링크 및 스코어로 나누어진 구성으로 표현될 수 있다. 도 257에서, 상부 부분은 데이터 구조 부분을 나타내고 하부 부분은 속성 부분을 나타낸다. 이 도면에서, 비록 데이터 구조 부분이 가장 단순한 구성으로 기술되었지만, 데이터 구조 부분은 전술한 실시예와 같은 구성으로 배열될 수 있다. 더욱이, 속성 부분은 모든 관점에서 대상<섹션> 또는 <세그먼트>에 대한 링크와 관점의 링크에 관련된 스코어가 집합으로서 통합되는 방법으로 배열된다.
데이터 구조 부분과 속성 부분은 동일한 파일로 기술되는 것이 아니라 개별 파일로 기술될 수 있다. 더욱이, 데이터 구조 부분과 속성 부분으로 나누어져 배열된 문맥 내용 기술 데이터에서, 선택 단계(선택 수단)는 속성 부분의 모든 주제 관점에서의 스코어에 기초한 <세그먼트> 또는 <섹션>을 선택한다. 더욱이, 도 258에 나타낸 바와 같이, 속성 부분의 각각의 관점과 데이터 구조 부분의 <섹션> 또는 <세그먼트>는 쌍방향 링크에 의해 결합될 수 있다. 이 경우에, 선택 단계(선택 수단)에 의해 관점을 지정하는 선택 과정도 전술한 실시예에 기술된 방법으로 수행될 수 있다.
더욱이, 도 259에 나타낸 바와 같이, 문맥 내용 기술 데이터는 데이터 구조를 기술하는 데이터 구조 부분과, 각 관점에서 데이터 구조 부분에 대한 링크가 보다 높은 스코어의 순서로 기술되는 속성 부분으로 나누어지는 것과 같은 구성으로 표현될 수 있다. 그러나, 그러한 표현에 있어서, 세밀한 비교가 다수의 관점에서 스코어를 비교하는 경우에 불가능 할 수도 있기 때문에, "high", "middle" 및 "low"의 대략적인 순서가 사용된다.
더욱이, 도 260에 나타낸 바와 같이, 문맥 내용 기술 데이터는 데이터 구조를 기술하는 데이터 구조 부분과 각 관점에서 데이터 구조 부분에 대한 링크가 보다 높은 스코어의 순서로 기술되었고 동일한 스코어의 링크는 2열로 배열되도록 기술된 속성부분으로 나누어지는 구성으로 표현될 수 있다. 이 경우에, 선택 단계(선택 수단)에 의해 관점을 지정하는 선택과정 역시 도 258에 나타낸 문맥 내용 기술 데이터로서 수행되는 처리와 같은 방법으로 수행될 수 있다.
이하 트리 구조의 문맥 내용 기술 데이터를 트리 구조의 문맥 내용 기술 데이터에서 데이터 구조가 다른 문맥 내용 기술 데이터(이하 제 2의 문맥 내용 기술 데이터라 칭함)로 변환하는 문맥 내용 기술 데이터 변환 방법에 대해 설명한다. 여기서, 트리 구조의 문맥 내용 기술 데이터는 도 57에 나타낸 바와 같이 루트로서 <콘텐츠>, 노드로서 <섹션> 및 잎사귀로서 <세그먼트>, <섹션>과 <세그먼트> 각각은 "키워드"의 적어도 하나의 집합(키워드,우선순위)을 가지는 속성이 첨가되는 방식으로 배열된다. 여기서 키워드는 장면의 콘텐츠 또는 사람 등을 나타내고, "우선순위"는 중요도를 나타낸다. <세그먼트> 각각은 시작 시간을 나타내는 "시작"과 종료 시간을 나타내는 "종료" 또는 지속 시간을 나타내는 "지속"과 같은 장면의 시간 정보가 더 첨가된다.
본 명세서에서, 3가지의 문맥 내용 기술 데이터 변환 방법이 설명될 것이다. 이하의 설명은 각각의 문맥 내용 기술 데이터 변환 방법에 의해 작성된 제 2의 문맥 내용 기술 데이터의 데이터 구조에 대해 설명하고, 각각의 문맥 내용 기술 데이터 변환 방법들의 예가 설명될 것이다.
(문맥 내용 기술 데이터 변환 방법의 제 1 실시예)
우선, 문맥 내용 기술 데이터 변환 방법의 제 1의 실시예에 의해 작성된 제 2의 문맥 내용 기술 데이터는 도 261과 도 262에 나타낸 바와 같이 트리 구조로 구성되며, 루트로서 <콘텐츠>, <콘텐츠>의 자 요소로서 <키워드>, 각<키워드>의 자 요소로서 <레벨> 및 <레벨>의 자 요소로서 <세그먼트>를 가진다. 여기서, 도 57에 나타낸 바와 같이 원래의 문맥 내용 기술 데이터에 존재하는 <섹션>의 요소(노드)는 제 2의 문맥 내용 기술 데이터에서 기술되지 않았다. 제 2의 문맥 내용 기술 데이터에서, 트리 구조의 형제 관계가 좌측편으로부터 시간 순서로 배열된다. 더욱이, <세그먼트> 각각에는 원래 첨가되는 시간 정보(시작, 종료)가 첨가된다.
제 2의 문맥 내용 기술 데이터의 <레벨>은 도 57에 나타낸 문맥 내용 기술 데이터에서 사용된 "우선순위"를 기초로 하여 결정되고 중요도를 나타낸다. "우선순위"가 정수로 표현될 때, "우선순위"에 할당된 정수는 <레벨>로서 사용된다. 반대로, "우선순위"가 소수점으로 표현될 때, <레벨>은 중요도를 쉽게 비교하기 위해 "우선순위"에 할당된 값의 레벨에 따라 새롭게 설정된다. 예를 들면, 0.2, 0.5 및 1.0의 3개의 "우선순위"가 원래의 문맥 내용 기술 데이터에 존재할때, 가장 낮은 중요도를 가진 <레벨 1>은 0.2의 "우선순위"에 할당되고, 중간의 중요도를 갖는 <레벨 2>는 0.5의 "우선순위"에 할당되고, 가장 높은 중요도를 갖는 <레벨 3>는 1.0의 "우선순위"에 할당된다.
이러한 방법에서, 중요도의 레벨이 설정되면, 제 2의 문맥 내용 기술 데이터의 데이터 구조는 <레벨>의 높고 낮은 관계는 도 261에 나타낸 바와 같이 트리 구조의 설정 관계로서 나타내는 둥지 형태로 배열되거나, <레벨>의 높고 낮은 관계는 도 262에 나타낸 바와 같이 같은 층으로서 나타내는 평행 형태로 배열될 수 있다. 더욱이, 제 2의 문맥 내용 기술 데이터의 데이터 구조는 <레벨> 정보를 제외한 <키워드>의 자 요소는 <세그먼트>로 설정되고 중요도는 <키워드>의 결합 순서에 따라 결정될 수 있는 방식으로 배열된다. 여기서, 세밀한 비교는 다수의 키워드간에 비교시 수행될 수 없는 가능성이 있기 때문에, 비교 결과는 예를 들면 "하이","미들" 및 "로우"로 개략적으로 표현될 수 있다.
다수의 <세그먼트>가 동일한 <키워드>와 <레벨>에 관한 <세그먼트>사이에 존재하게 연속적으로 연결될 때, 이러한 다수의 <세그먼트>는 하나의 집합으로 모여질 수 있다. 예를 들면, 연속적으로 연결된 <세그먼트 1>과 <세그먼트 2>가 있을 때, 이들 <세그먼트>는 <세그먼트A>로서 집합될 수 있다. 이 경우에, <세그먼트 A>에 첨가되는 시간 정보를 준비하고 각각의 <세그먼트>에 첨가된 시간 정보(시작,종료)에 기초하여 수집될 필요가 있다.
이하, 문맥 내용 기술 데이터 변환 방법의 제 1의 실시예를 원래의 문맥 내용 기술 데이터의 예를 사용하여 설명한다. 도 264에 나타낸 바와 같이, 설명에 사용된 예로서 원래의 문맥 내용 기술 데이터는 속성으로서 (키워드 a, 우선순위 2)와 (키워드 b, 우선순위 1)이 첨가된 <세그먼트 1>, (키워드 a, 우선순위 2)와 (키워드 c,우선순위 2)이 첨가된 <세그먼트 2>, (키워드 b, 우선순위 4)와 (키워드 d, 우선순위 3)이 첨가된 <세그먼트 3> 이 트리의 잎사귀로서 포함된다.
먼저, 원래의 문맥 내용 기술 데이터의 <세그먼트>에 첨가된 일단의 "키워드"가 얻어진다. {키워드 a, 키워드 b, 키워드 c, 키워드 d}는 원래의 문맥 내용 기술 데이터(이하 단지 예로 부름)의 예에서 얻어진다. 그 다음, 동일한 키워드가 첨가된 <세그먼트> 집합이 매 키워드에서 얻어진다. 예에서, <세그먼트 1>(우선순위 2)와 <세그먼트 2>(우선순위 2)에 의해 형성된 집합은 키워드 a로서 얻어지고, <세그먼트1>(우선순위 1)과 <세그먼트 3>(우선순위 4)에 의해 형성된 집합은 키워드 b로서 얻어지고, <세그먼트 2>(우선순위 2)에 의해 형성된 집합은 키워드 c로서 획득되고, <세그먼트 3>(우선순위 3)에 의해 형성된 집합은 키워드 d로서 얻어진다.
그 후, 세그먼트 집합은 각 우선순위에 따라 그룹으로 분할된다. 예를 들면, 키워드 a의 세그먼트 집합에서, 세그먼트 각각은 우선순위 2에 더해지므로, 이들 2 개 세그먼트는 우선순위 2의 그룹으로 집합된다. 키워드 b의 세그먼트 집합에서도, <세그먼트 1>은 우선순위 1에 더해지고 <세그먼트 3>는 우선순위 4에 더해지므로, 이들 세그먼트는 우선순위 1의 그룹(<세그먼트 1>만)과 우선순위 4의 그룹(<세그먼트 3>만)으로 분할된다.
그 다음, 각각의 우선순위들은 중요도를 나타내는 "레벨"로 변환 된다. 상기한 바와 같이, "우선순위"가 정수로 표현될 때, "우선순위"가 할당 된 정수는 <레벨>로서 사용된다. 따라서, 전술한 예에서, 우선순위 N (N=1, 2, 3, 4, 5)가 첨가된 <세그먼트>는 레벨 N의 세그먼트이다.
더욱이, 둥지 형태가 제 2의 문맥 내용 기술 데이터로 사용될 때, 그룹으로 된 각각의 세그먼트는 각각의 세그먼트의 레벨에 따른 집합 관계로서 설정된다. 유사하게, 평행 형태가 사용될 때, 그룹으로 된 각각의 세그먼트는 형제 관계로서 설정되고 보다 높은 레벨 또는 보다 낮은 레벨의 순서로 배열된다.
이와 같이 작성된 제 2 문맥 내용 기술 데이터의 데이터 구조가 도 265에 나타나 있다. 이 도면에서, <키워드 a>와 <레벨 2>의 세그먼트로서 <세그먼트 1>과 <세그먼트 2>가 있기 때문에, 이들 세그먼트는 예를 들면 이들 세그먼트가 시간의 간격없이 연속적으로 연결될 때 <세그먼트 A>로서 수집될 수 있다.
(문맥 내용 기술 데이터 변환 방법의 제 2의 실시예)
문맥 내용 기술 데이터 변환 방법의 제 2의 실시예에 의해 작성된 제 2의 문맥 내용 기술 데이터는 도 266에 나타낸 바와 같이 루트로서 <콘텐츠>, <콘텐츠>의 자 요소로서 <키워드>와 각 <키워드>의 자 요소로서 <세그먼트>에 의한 트리 구조로 구성된다. 이러한 양상에서, <세그먼트> 각각은 속성으로서 "우선순위"에 첨가된다.
이 제 2의 문맥 내용 기술 데이터에서, 문맥 내용 기술 데이터 변환 방법의 제 1의 실시예에 의해 작성된 제 2의 문맥 내용 기술 데이터와 같이, <섹션>은 기술되지 않고 <세그먼트> 각각은 "우선순위"에 첨가된 우선순위 시간 정보(시작, 종료)에 첨가된다. 문맥 내용 기술 데이터 변환 방법의 제 2의 실시예에서 우선순위가 변하지 않기 때문에, 이 실시예의 문맥 내용 데이트 변환 방법은 문맥 내용 기술 데이터 변환 방법의 제 1의 실시예에 의해 작성된 제 2의 문맥 내용 기술 데이터에 기술된 <레벨>을 기술하지 않는다.
하기에, 문맥 내용 기술 데이터 변환 방법의 제 2의 실시예를 상기에 사용된 원래의 문맥 내용 기술 데이터의 예를 사용하여 설명한다. 먼저, 문맥 내용 기술 데이터 변환 방법의 제 1 실시예와 유사하게, 원래 문맥 내용 기술 데이터의 <세그먼트>에 첨가된 "키 워드"의 집합이 얻어진다. 그 다음, 동일한 키워드가 첨가된 <세그먼트> 집합이 매 키워드에서 얻어진다. 그리고 <세그먼트> 각각이 원래 첨가된 우선순위로 첨가된다.
위와 같이 작성된 제 2의 문맥 내용 기술 데이터의 데이터 구조를 도 267에 나타내었다. 이 도면에서, <키워드 a>의 세그먼트로서 <세그먼트1>과 <세그먼트2>가 존재하기 때문에, 이들 세그먼트는 예를 들어 세그먼트들이 연속적으로 시간 간격 없이 연결되고 세그먼트들에 첨가된 우선순위가 동일하면 <세그먼트A>로서 수집될 수 있다.
(문맥 내용 기술 데이터 변환 방법의 제 3의 실시예)
문맥 내용 기술 데이터 변환 방법의 제 3의 실시예에 의해 작성된 제 2의 문맥 내용 기술 데이터는 도 258 및 269에 도시된 바와 같이 <콘텐츠>가 루트로 되고, <콘텐츠>의 자 요소가 <레벨>로 되며, 각 레벨의 자 요소가 <세그먼트>로 되는 트리 구조로 구성된다. 여기서, <세그먼트> 각각에는 "키워드"가 속성으로서 첨가된다.
이 제 2의 문맥 내용 기술 데이터에서, 문맥 내용 기술 데이터 변환 방법의 제 1 실시예에 의해 작성된 제 2의 문맥 내용 기술 데이터와 유사하게, <섹션>은 기술되지 않으며 각각의 <세그먼트>에 "우선순위"에 부가하여 시간 정보(시작, 종료)가 첨가된다.
이하에 문맥 내용 기술 데이터 변환 방법의 제 3 실시예가 상기에 이용된 원래 문맥 내용 기술 데이터의 예를 사용하여 설명된다. 먼저, 동일한 우선권이 첨가된 일단의 <세그먼트>가 원래 문맥 내용 기술 데이터의 <세그먼트>에 첨가된 "우선순위"에 기초한 모든 우선순위마다 얻어진다. 도 264에 나타낸 원래 문맥 내용 기술 데이터의 예에서, <세그먼트1>로 구성된 집합에서 우선순위 1에 대하여 키워드 b 가 얻어지고, <세그먼트1>로 구성된 집합에서 우선순위 2에 대하여 키워드 a, <세그먼트2>로 구성된 집합에서 우선순위 2에 대하여 키워드 a, c 가 얻어진다. 또 <세그먼트3>으로 구성된 집합에서 우선순위 3에 대하여 키워드 d가 얻어지고, <세그먼트3>으로 구성된 집합에서 우선순위 4에 대하여 키워드 b가 얻어진다.
그 때에, 각각의 우선순위는 중요도를 나타내는 "레벨"로 변환된다. 상술한 바와 같이, "우선순위"가 정수로 표시될 때 그 "우선순위"에 할당된 정수가 <레벨>로서 사용된다. 따라서, 이 예에서, 우선순위 N (N=1,2,3,4,5)가 첨가된 <세그먼트>는 레벨 N의 세그먼트이다.
그 다음, 각 세그먼트에는 해당 우선순위에 원래 첨가되어 있는 "키워드"가 첨가된다. 예를 들어, 레벨 1의 세그먼트 집합은 <세그먼트1>을 가지며, 이 <세그먼트1>은 키워드 b가 원래 첨가되어 있으므로 이 세그먼트에는 키워드 b가 첨가된다. 레벨 2의 세그먼트 집합은 <세그먼트1>과 <세그먼트2>를 갖는다. 특히, 레벨 2가 첨가된 <세그먼트2>가 키워드 a가 원래 첨가된 <세그먼트2> 및 키워드 c가 원래 첨가된 <세그먼트2>를 포함하기 때문에, 또하나의 <세그먼트2>가 새롭게 만들어지고, 2개의 <세그먼트2>중 어느 하나에 키워드 a가 첨가되고 나머지 하나의 <세그먼트2>에 키워드 c가 첨가된다. 유사한 처리가 레벨 2를 갖는 <세그먼트1>, 레벨 3을 갖는 <세그먼트3>, 레벨 4의 <세그먼트4> 각각에 대해 수행된다.
위와 같이 만들어진 제 2의 문맥 내용 기술 데이터에 대한 데이터 구조가 도 270에 도시되었다. 다수의 상이한 키워드가 첨가된 <세그먼트>의 경우, 데이터 구조는 도 269에 보인 것과 같이 다수의 상이한 키워드가 <세그먼트>에 첨가되는 식으로 배열될 수 있다. 따라서, 도 270에 보인 제 2의 문맥 내용 기술 데이터에서, 레벨 2의 <세그먼트2>에는 우선순위 a 및 우선순위 c가 첨가될 수 있다. 더우기, 이 도면에서, 레벨 2를 갖는 세그먼트가 우선순위 a가 첨가된 <세그먼트1> 및 우선순위 a가 첨가된 <세그먼트2>를 포함하고 있을 지라도, 이들 세그먼트가 시간차 없이 연속적으로 연결되는 한 이들 세그먼트는 <세그먼트A>로서 집합될 수 있다.
상기 설명한 문맥 내용 기술 데이터 변환 방법의 제 1 내지 제 3 실시예에 의해 마련된 제 2의 문맥 내용 기술 데이터는 본 발명의 제 7 실시예에서 설명된 선택 단계에 관한 흐름도의 처리단계 S5 내지 S9에서 사용된다. 도 57에 나타낸 것과 같은 원래 문맥 내용 기술 데이터를 사용하는 선택단계가 어떠한 요구라도 받아들일 수 있는 융통성을 가지고 있다 하더라도, 제 2의 문맥 내용 기술 데이터를 사용하는 선택 단계는 사용자의 요구에 반응하여 해당 <세그먼트>를 신속하게 취할 수 있다는 장점을 가진다.
전술한 실시예에서, 중요도에 관한 임계치를 사용하여, 임계치와 같거나 큰 값을 갖는 <섹션> 또는 <세그먼트>가 선택되게 하였지만, 특정한 중요도에 관한 임계치를 갖는 <섹션> 또는 <세그먼트>가 선택되게 할 수도 있다.
비록 전술한 실시예에 있어서 문맥 내용 기술 데이터 및 구조 기술 데이터가 별개로 설명되었으나, 이들은 도 127 내지 도 132에 도시된 바와 같이 하나의 데이터 집합으로 조합될 수도 있다.
앞서 기술한 바와 같이, 본 발명의 데이터 처리 방법, 기록 매체 및 프로그램에 따르면, 적어도 하나의 세그먼트가 계층 스트라텀의 문맥 내용 기술 데이터의 사용을 통하여 선택 수단(선택 단계에 대응)을 통하여 문맥 내용 기술 데이터에 첨가된 스코어에 근거하여 미디어 콘텐츠로부터 선택된다. 특히, 선택 수단(선택 단계에 대응)에 의하여 선택된 세그먼트에 관한 데이터만이 추출 수단(추출 단계에 대응)을 통하여 추출된다. 대안적으로, 선택 수단(선택 단계에 대응)에 의하여 선택된 세그먼트에 관한 데이터만이 재생 수단(재생 단계에 대응)을 통해 재생된다.
전술한 구성에 의하면, 보다 중요한 장면이 미디어 콘텐츠로부터 자유롭게 선택될 수 있으며, 그와 같이 선택된 중요한 세그먼트가 추출되거나 재생될 수 있 다. 또한, 문맥 내용 기술 데이터는 가장 높은 계층, 가장 낮은 계층, 및 나머지 계층들을 포함하는 계층 스트라텀으로 구성된다. 장면들은 매 챕터 또는 매 섹션 같은 임의 단위로 선택될 수 있다. 특정 챕터의 선택 및 그 챕터로부터 불필요한 구문의 삭제와 같은 다양한 선택 포맷이 채택될 수도 있다.
본 발명의 데이터 처리 방법, 기록 매체 및 프로그램에서, 스코어는 매체 내용의 문맥상의 중요도의 정도를 나타낸다. 스코어가 중요한 장면들을 선택하도록 설정되는 한, 프로그램의 중요한 장면들의 집합이 쉽게 준비될 수 있다. 더욱이, 스코어가 키워드의 관점으로부터 중요한 장면의 중요도를 나타내도록 설정되는 한, 세그먼트들은 키워드의 판정에 의하여 높은 정도의 자유도로 선택될 수 있다. 예를 들어, 키워드가 캐릭터 또는 이벤트와 같은 특정 관점으로부터 판정된다면, 단지 사용자가 원하는 장면만을 선택할 수 있다.
본 발명의 데이터 처리 방법, 기록 매체, 및 프로그램에서, 미디어 콘텐츠가 단일 시간 주기 내에 다수의 상이한 매체 데이터 집합들을 포함하는 경우에, 판정 수단(판정 단계에 대응)은 판정 조건들에 근거하여 미디어 데이터 집합들 중 어느 것이 선택의 대상로서 취해질 것인가를 판정한다. 선택 수단(선택 단계에 대응)은 판정 수단(판정 단계에 대응)에 의하여 판정된 데이터 만으로부터 미디어 데이터 집합을 선택한다. 판정 수단(판정 단계에 대응)은 판정 조건들에 따라서 최적의 세그먼트에 관한 미디어 데이터를 판정할 수 있기 때문에, 선택 수단(선택 단계에 대응)은 적절한 양의 미디어 데이터를 선택할 수 있다.
본 발명의 데이터 처리 방법, 기록 매체 및 프로그램에서, 판정 수단(판정 단계에 대응하는)은 단지 비디오 데이터, 단지 오디오 데이터, 또는 비디오 및 오디오 데이터들을 판정 조건들에 기초하여 선택 대상로서 취할 것인를 판정한다. 그 결과, 세그먼트를 선택하기 위하여 선택 수단(선택 단계에 대응하는)에 의해 요구되는 시간이 단축될 수 있다.
본 발명의 데이터 처리 방법, 기록 매체 및 프로그램에서, 대표 데이터는 속성으로서 문맥 기술 데이터에 첨가되고, 판정 수단은 판정 조건들에 따라서 최적의 세그먼트 또는 대표 데이터의 미디어 데이터를 판정할 수 있다.
본 발명의 데이터 처리 방법, 기록 매체 및 프로그램에서, 판정 수단(판정 단계에 대응)은 단지 대응하는 미디어 세그먼트에 관한 전체 데이터, 단지 대표 데이터, 또는 전체 데이터 및 대표 데이터 모두를 판정 조건에 기초하여 선택 대상으로 취할 것인지를 판정한다. 그 결과, 판정 수단은 세그먼트를 선택하기 위하여 선택 수단(선택 단계에 대응)에 의해 요구되는 시간을 단축할 수 있다.

Claims (12)

  1. 다수의 장면으로 구성되는 미디어 콘텐츠의 각 장면을 나타내는 다수의 세그먼트가 기술되어 있는 데이터 구조부와, 상기 미디어 콘텐츠의 속성정보인, 상기 장면의 간격을 나타내는 시간정보, 장면의 내용을 나타내는 적어도 1개의 키워드로 나타내는 관점, 관점에 기초한 각 세그먼트의 중요도를 나타내는 스코어, 해당하는 적어도 1개의 세그먼트로의 링크를 나타내는 링크 정보가 기술되어 있는 속성부를 가지는 문맥 내용 기술 데이터를 입력하는 입력수단;
    상기 속성부에 기술되어 있는 상기 스코어와 상기 시간정보에 기초하여 상기 데이터 구조부에서 세그먼트를 선택하는 선택수단;
    대응하는 미디어 콘텐츠를 입력하는 콘텐츠 입력수단; 및
    상기 선택된 세그먼트의 시간정보에서 상기 미디어 콘텐츠의 구간을 추출하는 추출수단을 구비한 요약 생성 장치.
  2. 제1항에 있어서, 상기 시간정보는 각 장면의 시작 시간과 종료 시간인 것을 특징으로 하는 요약 생성 장치.
  3. 제1항에 있어서, 상기 시간정보는 각 장면의 시작 시간과 지속 시간인 것을 특징으로 하는 요약 생성 장치.
  4. 제2항 또는 제3항에 있어서, 상기 선택수단은 상기 속성부에 기술되어 있는 상기 스코어와 상기 시간정보에 기초하여 선택할 때 그 선택된 세그먼트의 지속 시간의 합이 설정시간 또는 설정시간 보다 짧아지도록 선택하는 것을 특징으로 하는 요약 생성 장치.
  5. 제2항 또는 제3항에 있어서, 상기 선택수단은 상기 속성부에 기술되어 있는 상기 관점 및 상기 스코어 중 적어도 하나와 그 시간정보에 기초하여 선택할 때 그 선택된 세그먼트의 지속 시간의 합이 설정시간 또는 설정시간 보다 짧아지도록 선택하는 것을 특징으로 하는 요약 생성 장치.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서, 상기 추출된 미디어 콘텐츠를 재생하는 재생부를 더 구비한 것을 특징으로 하는 요약 생성 장치.
  7. 제2항 또는 제3항에 있어서, 상기 추출된 미디어 콘텐츠에서 스트림을 구성하는 구성부를 더 구비한 것을 특징으로 하는 요약 생성 장치.
  8. 제1항 내지 제7항 중 어느 한 항에 있어서, 상기 데이터 구조부에는 상기 다수의 세그먼트가 계층적으로 기술되어 있는 것을 특징으로 하는 요약 생성 장치.
  9. 제1항 내지 제7항 중 어느 한 항에 있어서, 상기 세그먼트에 문맥내용에 관 한 보조정보를 기술하는 것을 특징으로 하는 요약 생성 장치.
  10. 제1항 내지 제7항 중 어느 한 항에 있어서, 상기 관점과 상기 스코어의 복수조가 1개의 세그먼트에 링크 정보에 의해 관련지어 있는 것을 특징으로 하는 요약 생성 장치.
  11. 제1항 내지 제7항 중 어느 한 항에 있어서, 상기 링크 정보와 상기 스코어의 조가 각 관점마다 집합되어 있는 것을 특징으로 하는 요약 생성 장치.
  12. 다수의 장면으로 구성되는 미디어 콘텐츠의 각 장면을 나타내는 다수의 세그먼트가 기술되어 있는 데이터 구조부와, 상기 미디어 콘텐츠의 속성정보인, 상기 장면의 간격을 나타내는 시간정보, 장면을 나타내는 적어도 1개의 키워드로 나타내는 관점, 관점에 기초한 각 세그먼트의 중요도를 나타내는 스코어, 해당하는 적어도 1개의 세그먼트로의 링크를 나타내는 링크 정보가 기술되어 있는 속성부를 가지는 문맥 내용 기술 데이터를 입력하는 입력단계;
    상기 속성부에 기술되어 있는 상기 스코어와 상기 시간정보에 기초하여 상기 데이터 구조부에서 세그먼트를 선택하는 선택단계;
    대응하는 미디어 콘텐츠를 입력하는 콘텐츠 입력단계; 및
    상기 선택된 세그먼트의 시간정보에서 상기 미디어 콘텐츠의 구간을 추출하는 추출단계를 포함하는 요약 생성 방법.
KR1020070012653A 2000-03-16 2007-02-07 요약 생성 장치 및 방법 KR100771056B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2000074875 2000-03-16
JPJP-P-2000-00074875 2000-03-16
JPJP-P-2000-00190008 2000-06-23
JP2000190008A JP2001333353A (ja) 2000-03-16 2000-06-23 データ処理方法および記録媒体、並びに該データ処理方法をコンピュータに実行させるためのプログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020010013546A Division KR100732486B1 (ko) 2000-03-16 2001-03-16 데이터 처리 방법 및 저장 매체, 그리고 컴퓨터가 그데이터 처리방법을 실행하게 하는 프로그램

Publications (2)

Publication Number Publication Date
KR20070032745A true KR20070032745A (ko) 2007-03-22
KR100771056B1 KR100771056B1 (ko) 2007-10-29

Family

ID=26587726

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020010013546A KR100732486B1 (ko) 2000-03-16 2001-03-16 데이터 처리 방법 및 저장 매체, 그리고 컴퓨터가 그데이터 처리방법을 실행하게 하는 프로그램
KR1020070012652A KR100771055B1 (ko) 2000-03-16 2007-02-07 데이터 처리 장치 및 방법
KR1020070012653A KR100771056B1 (ko) 2000-03-16 2007-02-07 요약 생성 장치 및 방법

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020010013546A KR100732486B1 (ko) 2000-03-16 2001-03-16 데이터 처리 방법 및 저장 매체, 그리고 컴퓨터가 그데이터 처리방법을 실행하게 하는 프로그램
KR1020070012652A KR100771055B1 (ko) 2000-03-16 2007-02-07 데이터 처리 장치 및 방법

Country Status (4)

Country Link
EP (4) EP1801806A3 (ko)
JP (1) JP2001333353A (ko)
KR (3) KR100732486B1 (ko)
CN (1) CN1287317C (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100441704B1 (ko) * 1999-12-03 2004-07-27 마츠시타 덴끼 산교 가부시키가이샤 데이터 적합화 장치, 데이터 적합화 방법, 기억 매체 및프로그램
KR100657267B1 (ko) * 2003-10-30 2006-12-14 삼성전자주식회사 검색을 위한 메타 정보가 포함된 저장 매체, 재생 장치 및그 재생 방법
US20040243817A1 (en) * 2001-10-16 2004-12-02 Hiroshi Hasegawa File creation apparatus and data output apparatus
KR100472525B1 (ko) * 2002-05-27 2005-03-08 모바일 보이스 주식회사 의미적 연결구조를 이용한 통합 콘텐츠 데이터의 저장 및재생방법
US7356537B2 (en) * 2002-06-06 2008-04-08 Microsoft Corporation Providing contextually sensitive tools and help content in computer-generated documents
CN100429641C (zh) * 2003-08-20 2008-10-29 英业达股份有限公司 交互式视讯生成系统及其方法
FR2889016A1 (fr) 2005-07-25 2007-01-26 Thomson Licensing Sas Procede de creation d'un resume d'un document en fonction de criteres introduits par l'utilisateur, et dispositif audiovisuel associe au procede
CN102855307B (zh) * 2012-08-22 2016-06-15 深圳市华尊科技股份有限公司 保留时序性的数据重组方法及视频结构化系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100215586B1 (ko) * 1992-11-09 1999-08-16 모리시타 요이찌 다이제스트 화상 자동생성 장치 및 다이제스트 화상 자동생성 방법
JPH07168855A (ja) * 1993-09-21 1995-07-04 Toshiba Corp 情報記録再生装置
JP3579111B2 (ja) * 1995-03-16 2004-10-20 株式会社東芝 情報処理装置
EP0864131A2 (en) * 1996-09-30 1998-09-16 Koninklijke Philips Electronics N.V. A method for organizing and presenting the structure of a multimedia system and for presenting this structure to a person involved, in particular a user person or an author person, and a software package having such organization and presentation facility
JPH10111872A (ja) 1996-10-08 1998-04-28 Nippon Telegr & Teleph Corp <Ntt> 動画配信装置及び方法
JPH11126205A (ja) * 1997-10-22 1999-05-11 Fujitsu Ltd マルチメディアデータ・プレゼンテーションシステムおよびそれを実現するプログラムを記憶する記憶媒体
JP3208116B2 (ja) * 1998-02-03 2001-09-10 株式会社次世代情報放送システム研究所 映像インデックス情報を記録した記録媒体、映像インデックス情報を用いた映像情報管理方法、音声インデックス情報を記録した記録媒体および音声インデックス情報を用いた音声情報管理方法
JP2001160066A (ja) * 1998-12-25 2001-06-12 Matsushita Electric Ind Co Ltd データ処理装置、データ処理方法および記録媒体、並びに該データ処理方法をコンピュータに実行させるためのプログラム
KR100371813B1 (ko) * 1999-10-11 2003-02-11 한국전자통신연구원 효율적인 비디오 개관 및 브라우징을 위한 요약 비디오 기술구조 및 이의 기록매체, 이를 이용한 요약 비디오 기술 데이터 생성 방법 및 생성시스템, 요약 비디오 기술 데이터의 브라우징 장치 및 브라우징 방법.
KR100441704B1 (ko) * 1999-12-03 2004-07-27 마츠시타 덴끼 산교 가부시키가이샤 데이터 적합화 장치, 데이터 적합화 방법, 기억 매체 및프로그램
JP2005222363A (ja) 2004-02-06 2005-08-18 Nippon Telegr & Teleph Corp <Ntt> 利用権流通システム、携帯装置、サービス実行装置、利用権移動装置、利用権複製装置、および譲渡制御装置

Also Published As

Publication number Publication date
EP1801807A2 (en) 2007-06-27
KR100771055B1 (ko) 2007-10-29
KR100771056B1 (ko) 2007-10-29
CN1321944A (zh) 2001-11-14
EP1801806A2 (en) 2007-06-27
KR20010090447A (ko) 2001-10-18
JP2001333353A (ja) 2001-11-30
EP1134740A3 (en) 2004-04-21
EP1134740A2 (en) 2001-09-19
KR20070036752A (ko) 2007-04-03
EP1801806A3 (en) 2007-08-22
CN1287317C (zh) 2006-11-29
EP1686588A2 (en) 2006-08-02
EP1686588A3 (en) 2006-08-09
EP1801807A3 (en) 2007-08-22
KR100732486B1 (ko) 2007-06-27

Similar Documents

Publication Publication Date Title
KR100681300B1 (ko) 데이터 처리장치, 데이터 처리방법 및 저장 미디엄, 및컴퓨터로 하여금 그 데이터 처리방법을 실행하는 프로그램
US7877676B2 (en) Data processing device and method for selecting media segments on the basis of a score
KR100771056B1 (ko) 요약 생성 장치 및 방법
US7181757B1 (en) Video summary description scheme and method and system of video summary description data generation for efficient overview and browsing
US20050031296A1 (en) Method and apparatus for reviewing video
JP2001028722A (ja) 動画像管理装置及び動画像管理システム
JP2003511801A (ja) 効率的な概観及びブラウジングのためのビデオ要約記述構造と、ビデオ要約記述データ生成の方法及びシステム
Deardorff et al. Video scene decomposition with the motion picture parser
KR100319160B1 (ko) 사건구간을기반으로하는동영상검색방법과검색데이타구성방법
JP3824318B2 (ja) データ処理装置、データ処理方法および記録媒体
JP4598134B2 (ja) データ処理装置及びデータ処理方法
CN100474308C (zh) 数据处理方法和存储媒体及使计算机执行该方法的程序
JP2007074749A (ja) データ処理装置、データ処理方法、およびデータ処理方法をコンピュータに実行させるためのプログラム
CN100433015C (zh) 数据处理装置和方法
JP2004127324A (ja) データ処理装置、データ処理方法および記録媒体、並びに該データ処理方法をコンピュータに実行させるためのプログラム
JP2004140875A (ja) データ処理装置、データ処理方法および記録媒体、並びに該データ処理方法をコンピュータに実行させるためのプログラム
JP2005166063A (ja) データ処理装置、データ処理方法および記録媒体、並びに該データ処理方法をコンピュータに実行させるためのプログラム
JP2007080290A (ja) 要約作成装置、データ処理方法およびデータ処理方法をコンピュータに実行させるためのプログラム

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120928

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20131001

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20141002

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20150917

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20160922

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20170920

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20180920

Year of fee payment: 12