KR100601383B1 - 디지털 티비 방송의 시청자 맞춤형 비디오 요약 제공시스템 - Google Patents

디지털 티비 방송의 시청자 맞춤형 비디오 요약 제공시스템 Download PDF

Info

Publication number
KR100601383B1
KR100601383B1 KR1020040028308A KR20040028308A KR100601383B1 KR 100601383 B1 KR100601383 B1 KR 100601383B1 KR 1020040028308 A KR1020040028308 A KR 1020040028308A KR 20040028308 A KR20040028308 A KR 20040028308A KR 100601383 B1 KR100601383 B1 KR 100601383B1
Authority
KR
South Korea
Prior art keywords
viewer
unit
video summary
preference
video
Prior art date
Application number
KR1020040028308A
Other languages
English (en)
Other versions
KR20040041127A (ko
Inventor
용 만 노
성 호 진
태 면 배
경옥 강
진웅 김
승준 양
Original Assignee
학교법인 한국정보통신학원
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 학교법인 한국정보통신학원, 한국전자통신연구원 filed Critical 학교법인 한국정보통신학원
Priority to KR1020040028308A priority Critical patent/KR100601383B1/ko
Publication of KR20040041127A publication Critical patent/KR20040041127A/ko
Application granted granted Critical
Publication of KR100601383B1 publication Critical patent/KR100601383B1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00—Training appliances or apparatus for special sports
    • A63B69/36—Training appliances or apparatus for special sports for golf
    • A63B69/3667—Golf stance aids, e.g. means for positioning a golfer's feet
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/08—Body-protectors for players or sportsmen, i.e. body-protecting accessories affording protection of body parts against blows or collisions
    • A63B71/12—Body-protectors for players or sportsmen, i.e. body-protecting accessories affording protection of body parts against blows or collisions for the body or the legs, e.g. for the shoulders

Landscapes

  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 디지털 TV 방송 환경에서 시청자 개개인의 구미에 맞는 비디오 요약을 자율적으로 생성 및 저장하고 추천하는, 시청자 기반의 비디오 요약 제공 시스템에 관한 것으로, 시청자 단말과 방송 서비스 제공자에 위치하는 지능형 에이전트들의 자율적인 상호 작용에 의해, 시청자의 지시 없이 과거의 시청자의 행동을 통계적으로 분석한 시청자 선호도를 기반으로 시청자가 보고 싶어 할만 한 방송 컨텐츠의 요약을 시청자 단말에 제공한다.

Description

디지털 티비 방송의 시청자 맞춤형 비디오 요약 제공 시스템 {An intelligent agent system for providing viewer-customized video skims in digital TV broadcasting}
도 1은 본 발명에 따른 디지털 방송 환경 하에서 시청자 맞춤형 비디오 요약을 제공하기 위한 시스템의 구성도,
도 2는 본 발명에 따른 비디오 요약의 생성 및 추천 과정의 흐름도, 그리고
도 3은 본 발명에 의한 서비스 제공자에서 방송 컨텐츠를 의미를 가지는 이벤트나 특정 장면에 대한 비디오 클립들(이하, 의미 특징이라 함)로 세그먼트하는 과정의 흐름도이다.
- 도면의 주요부분에 대한 부호의 설명 -
10 : 시청자 인터페이스부 20 : 시청자 선호도 업데이트부
30 : 시청자 선호도 DB부 40 : 비디오 요약 DB부
50 : 시청자 단말 에이전트부 60 : 서비스 제공자 에이전트부
70 : 비디오 요약 생성부 80 : 의미 특징 DB부
90 : 의미 특징 추출부 100: 컨텐츠 DB부
본 발명은 디지털 TV 방송 시스템에 관한 것으로, 상세하게는 시청자 개개인의 선호도를 기초로 하는 비디오 요약을 자율적으로 생성, 저장, 추천하는 시청자 기반의 비디오 요약 제공 시스템에 관한 것이다.
현재 진행되고 있는 TV 환경의 디지털화는 기존의 방송 환경에서 단 방향적으로 제공되던 방송 서비스를 양방향 방송 서비스와 좀 더 향상된 부가 정보 서비스를 제공하는 것을 추구하고 있다. 하지만, 지금까지 진행된 디지털 TV 환경에서 제공되는 방송 서비스들은 EPG (Electric Program Guide)를 기반으로 하는 일방적인 부가 정보 서비스와 PVR (Personal Video Recorder)를 기반으로 한 방송 컨텐츠 예약 저장 서비스로 제한되어 있다. 이는 양방향성을 추구하는 디지털 TV 방송 환경에 한계를 보여 주고 있다. 또한, 이러한 서비스들로 인하여 시청자에게 요구되는 시청자 지시가 점차 증가 되고 있어 시청자에게 불편함을 초래하고 있다. 특히, 다 채널을 가지는 디지털 방송 환경에서는 시청자가 컨텐츠를 선택하기 위해서 미리 방송 컨텐츠들에 대한 요약의 필요성이 증가되고 있다. 그러나, 시청자가 수 많은 채널의 방송 컨텐츠들의 요약들을 모두 시청하고 자기가 원하는 방송 컨텐츠를 선택하는 것은 사용자에게 시간의 낭비를 초래할 뿐만 아니라 서비스 제공자들의 기준에 의해서 일률적으로 만들어진 방송 컨텐츠들의 요약들은 시청자의 방송 컨텐츠에 대한 관심 사항이나 기호에 관계없이 제공되는 단방향적인 방송 서비스로서 시청자가 시청하길 원하지 않는 장면들이 삽입되거나 원하는 장면들이 삽입되지 않을 수 있다.
따라서, 좀 더 시청자 개개인을 중심으로 방송 컨텐츠 요약을 제공하기 위해서는 시청자의 개개인의 취향이나 선호도 정보가 생성되고 이 정보에 따라 생성된 컨텐츠 요약 정보들이 제공될 필요성이 있다. 또한, 시청자 중심의 비디오 요약 방송 서비스를 위하여 시청자의 지시나 행위를 최소화 할 수 있고 시청자의 취향을 추론할 수 있는 비디오 요약 시스템이 필요하고, 이를 위해서 시청자를 대신하여 시청자에 관한 선호도 추론을 기반으로 비디오를 요약하는 지능형 에이전트가 방송 시스템에 요구된다.
본 발명은 이러한 문제를 해결하기 위한 것으로, 디지털 방송 환경에서 시청자의 지시나 행위 없이 시청자에게 맞추어진 방송 컨텐츠의 비디오 요약을 서비스 제공자가 생성한 후 시청자 단말을 통하여 시청자에게 제공 및 추천할 수 있는 디지털 TV 방송 시스템을 제공하는 것을 목적으로 한다.
이러한 목적을 달성하기 위하여 본 발명은 시청자의 시청 행동 패턴을 획득하여 시청자 선호도를 생성하는 시청자 선호도 생성부와 시청자 선호도 생성부에서 생성된 시청자 선호도를 전송하는 시청자 단말 에이전트부를 갖는 시청자 단말부, 그리고 컨텐츠의 비디오 특징들을 추출하여 컨텐츠를 의미 특징으로 세그먼트하는 의미 특징 추출부, 의미 특징 추출부에서 추출된 의미 특징을 저장하는 의미 특징 저장부, 의미 특징 저장부를 검색하여 시청자 단말 에이전트부로부터 전송된 시청자의 선호도에 가장 부합하는 의미 특징들을 포함하는 비디오 요약을 생성하는 비디오 요약 생성부, 및 비디오 요약 생성부에서 생성된 비디오 요약을 시청자 단말 에이전트부로 전송하는 서비스 제공자 에이전트부를 갖는 방송 서비스 제공부를 포함하여 구성되는 시청자 맞춤형 비디오 요약 제공 시스템을 제공한다.
본 발명의 비디오 요약 제공 시스템에 사용되는 용어를 설명하면 다음과 같다.
'서비스 제공자'는 시청자에게 방송 컨텐츠나 부가 정보를 제공하는 시스템을 의미한다. '시청자 단말'은 시청자가 방송중인 컨텐츠를 시청할 수 있고 원하는 방송 컨텐츠 및 부가 정보를 저장할 수 있는 저장 공간을 가진 디지털 TV 수신 환경을 의미한다. '에이전트'는 지식 기반 추론을 기반으로 하여, 시청자 대신에 행동하는 소프트웨어 컴포넌트로써, 인공지능분야에서 사용하는 지능형 에이전트를 의미한다. '시청자 선호도'는 시청자가 시청자 단말에서 행하는 행동 패턴과 행동 패턴에 따라 예측되는 시청자의 방송 컨텐츠에 대한 시청자의 성향을 의미하고, 그리고 '의미 특징'은 방송 컨텐츠의 상위 레벨 의미들, 즉 사람의 인식에 의해 구분지어지는 방송 컨텐츠가 지니고 있는 특정 이벤트 및 장면 비디오 클립을 의미한다.
이하, 첨부도면을 참조하여 본 발명의 비디오 요약 제공 시스템을 상세히 설명한다.
도 1은 본 발명에 따른 디지털 방송 환경 하에서 시청자 맞춤형 비디오 요약을 제공하기 위한 시스템의 구성도이다.
도1에 도시된 바와같이, 시청자 단말은 인터페이스부(10), 시청자 선호도 업데이트부(20), 시청자 선호도 DB부(30), 비디오 요약 DB부(40), 그리고 시청자 단말 에이전트부(50)를 포함한다. 한편, 서비스 제공자는 서비스 제공자 에이전트부(60), 비디오 요약 생성부(70), 의미 특징 DB부(80), 의미 특징 추출부(90), 그리고 방송 컨텐츠 DB부(100)를 포함한다.
인터페이스부(10)는 시청자가 방송 컨텐츠를 시청하거나 시청자 의도를 입력할 수 있는 블록으로서 TV 시청 화면을 포함한다. 또한, 시청자의 입력이나 시청자가 시청자 단말에서 행한 행동 패턴을 시청자 단말 에이전트부(50)에 제공한다. 여기서, 행동 패턴은 시청자에 의해 선택된 채널, 컨텐츠 타이틀, 시청 시간, 반복 시청하는 주요 장면, 주인공 등을 의미한다. 또한, 시청자 단말에 대한 시청자 인증 입력도 담당한다.
시청자 선호도 업데이트부(20)는 시청자 단말 에이전트부(50)로부터 획득된 시청자 행동 패턴을 통계적인 수단을 이용하여 컨텐츠에 대한 시청자 기호를 예측 판단하여 시청자 선호도를 생성하고 업데이트하는 블록이다.
시청자 선호도 DB부(30)은 시청자 단말에 등록된 시청자에 대한 시청자 선호도를 저장하는 블록이다. 시청자 선호도 업데이트부(20)에 의해서 생성되고 갱신 된다.
비디오 요약 DB부(40)은 시청자 단말 에이전트부(50)와 서비스 제공자 에이전트부(60)사이의 협상을 통해 획득된 비디오 요약들을 저장하는 블록이다.
시청자 단말 에이전트부(50)는 시청자 단말의 지능형 에이전트들이 존재하는 핵심 컴포넌트로써, 인터페이스부(10)로부터 획득되는 시청자 행동 패턴을 시청자 선호도 업데이트부(20)에 전달하거나, 시청자 맞춤형 비디오 요약의 획득을 위해 서비스 제공자 에이전트부(60)와 협상을 담당한다. 또한, 서비스 제공자들로부터 전달되는 비디오 요약을 비디오 요약 DB부(40)에 저장한다. 시청자 단말 에이전트부(50)과 서비스 제공자 에이전트부(60)사이의 통신은 에이전트 통신 메시지를 사용하며, 연결된 통신 채널은 디지털 TV 환경에서 리턴 채널의 역할을 담당한다.
서비스 제공자 에이전트부(60)는 서비스 제공자의 지능형 에이전트들이 존재하는 블록으로써, 입력된 시청자 선호도를 분석하고, 선호도에 맞는 방송 컨텐츠가 존재하는 지를 검색한다. 대응되는 방송 컨텐츠에 대한 비디오 요약을 생성하기 위해서 비디오 요약 생성부를 제어하는 역할을 담당한다. 또한, 시청자 단말 에이전트부(50)와 비디오 요약의 전달을 협상한다.
비디오 요약 생성부(70)는 의미 특징 DB(80)에서 시청자 단말 에이전트부(50)로부터 전달된 시청자 선호도와 일치되는 의미 특징들을 추출하고 조합하여 시청자 선호도에 대응되는 새로운 비디오 요약을 생성한다.
의미 특징 DB부(80)는 의미 특징 추출부(90)에 의해 미리 세그먼트된 컨텐츠들의 의미 특징들을 저장한다.
의미 특징 추출부(90)는 오디오 및 비주얼 하위 레벨의 특징값들을 이용하여 방송 컨텐츠의 의미 특징, 즉 이벤트나 장면을 세그먼테이션(segmentation)하고 추출한다. 또한, 추출된 이벤트나 장면에 대한 서술 내용 및 키워드 정보를 포함한다. 예를 들면, 스포츠 장르의 컨텐츠의 경우, 축구 경기의 슛 장면, 골인 장면, 패널티 킥 장면 등에 대해서 세그먼테이션하고 각 장면의 타이틀, 참여되는 선수 이름 등의 서술을 포함 할 수 있다.
방송 컨텐츠 DB부(100)는 서비스 제공자에 의해서 제공되는 방송 컨텐츠들을 저장한다.
도 2는 본 발명에 따른 비디오 요약의 생성 및 추천 과정의 흐름도이다. 도2에 도시된 바와같이, 시청자 단말 에이전트부(50)가 시청자의 부재 혹은 시스템 로그 아웃을 확인(단계 200)하면, 시청자 단말 에이전트부(50)는 시청자 선호도 DB(30)으로부터 시청자 단말에 등록된 시청자의 선호도들을 획득하게 된다(단계 201). 에이전트는 에이전트 통신 메시지를 통해 비디오 요약의 생성 및 전송을 위한 질의와 응답을 교환한다.
시청자 A 에 대한 시청자 선호도 PA 는 시청 횟수가 높은 비율의 방송 컨텐츠의 목록의 순서이며, 다음의 [식 1]과 같은 수식으로 표현된다.
[식 1]
PA = Sort{Ri}
Ri =W1 *Nw +W2 *Nm
If Ri >= Rth : Sort될 목록에 포함
Ri ＜ Rth : 기준값이하로 시청자 선호도로 Sort될 목록에서 제외됨
여기서, Ri : 방송 컨텐츠 Ci 에 대한 시청 비율
Sort{X} : X 의 크기에 따른 내림차순의 정렬 방법
W1 와 W2 는 W1 > W2 조건을 만족하는 가중치값들
Nw : 일주일내에 방송 컨텐츠를 시청한 횟수
Nm : 한달내에 방송 컨텐츠를 시청한 횟수
Rth : 시청자 선호도 목록에 포함될 수 있는 컨텐츠의 최소의 시청 비율에 대한 경계값
위의 [식 1]은 최근 일주일 동안 시청자의 시청 비율을 한달 동안의 시청 비율에 비해 높게 설정하여 최근에 시청자의 방송 컨텐츠 시청 성향을 분석하는 시청자 선호도를 나타낸다.
시청자가 방송 컨텐츠 Ci 를 시청하면서 시청자 선호도에 저장되는 컨텐츠 정보 Mi 는 다음의 [식 2]에 포함된 방송 컨텐츠에 관련된 정보들로 구성되어 있으며, 이 정보들은 서비스 제공자들에 의해 제공되는 방송 컨텐츠의 메타데이터들로부터 파싱되어 저장되는 정보이다. 에이전트는 Mi 에서부터 시청자가 좋아하는 장면들을 추론하게 된다.
[식 2]
Mi =[{T,C,t,A(+),S(+)}(+)]
T : 타이틀, C : 채널, t : 방영 시간, A : 주인공, S : 주요 장면, (+) 는 하나 이상의 값을 가질 수 있는 것을 의미한다.
시청자 단말 에이전트부(50)는 시청자 선호도들에 일치하는 방송 컨텐츠를 찾기 위해서, 가입되어 있는 서비스 제공자들의 에이전트부(60)들로 선호도를 전송한다. 전송되는 채널은 에이전트 통신 채널을 이용하고, 시청자 정보 보호를 위해서 시청자에 의해 가입되어 있는 서비스 제공자들의 에이전트부(60)들로 통신 범위가 제한된다(단계 202). 가입되어 있는 서비스 제공자들에게는 시청자의 허락, 시청자의 연령, 성별 등과 같은 기본적인 프로파일을 제공할 수 있다. 또한, 시청자 단말 에이전트부(50)가 등록된 시청자 선호도를 전송해도 된다는 시청자들의 허락이 있어야 한다. 여기서, 시청자 단말에 등록되어 있지 않은 서비스 제공자들의 에이전트부가 시청자 선호도를 요청할 때에는 시청자의 프로파일 및 세부 선호도를 제외함으로써, 시청자 정보의 획득을 제한할 수 있다.
시청자 선호도를 획득한 서비스 제공자 에이전트부(60)는 선호도 정보와 일치하는 컨텐츠가 컨텐츠 DB부(100)에 존재하는 지를 판단을 한다(단계 203). 선호도 정보를 통해서 판단하는 항목들은 컨텐츠 장르, 타이틀, 채널, 시간, 주인공, 주요 장면이다.
컨텐츠 DB부(100)에 선호도 정보와 일치하는 방송 컨텐츠가 없을 경우 에이전트부들간의 통신 연결을 종료한다(단계 204). 컨텐츠 DB부(100)에 선호도 정보와 일치하는 방송 컨텐츠가 존재하는 경우, 서비스 제공자 에이전트부(60)는 그 컨텐츠에 대한 시청자 선호도를 자세히 분석하게 된다(단계 205). 분석되는 선호도 정보는 선택된 컨텐츠에 대해 시청자가 원하는 이벤트 또는 장면들이다.
서비스 제공자 에이전트부(60)는 의미 특징 DB부(80)에 분석된 선호도 정보에 의해서 요구되는 방송 컨텐츠에 대한 이벤트나 장면들이 존재하는 경우 대응되는 이벤트나 장면들을 기반으로 비디오 요약 생성부(70)를 통해 비디오 요약을 생성한다 (단계 207). 의미 특징 DB부(80)에 분석된 선호도 정보에 의해서 요구되는 방송 컨텐츠에 대한 이벤트나 장면들이 없는 경우, 서비스 제공자들에 의해 제공되는 일반적인 이벤트나 장면들을 선택하고, 비디오 요약 생성부(70)를 통해 비디오 요약을 생성한다 (단계 208). 서비스 제공자의 의미 특징 DB부(80)에 저장되는 의미 특징 추출 방법은 도3에서 상세히 설명한다.
생성된 비디오 요약은 에이전트 통신을 통해서 시청자 단말로 전달되고(단계 209) 시청자 단말 에이전트부(50)은 비디오 요약 DB부(40)에 저장하게 된다(단계 210).
시청자의 시스템 로그인시 해당되는 시청자에 따라 저장된 비디오 요약을 추천하게 된다 (단계 211).
도3은 서비스 제공자에서 의미 특징을 추출하는 과정을 도시하고 있다. 도3에 도시된 바와같이, 서비스 제공자들은 방송 컨텐츠에 대해서 시청자들의 요구에 맞는 비디오 요약을 생성하기 위하여 각각의 컨텐츠들에 대한 의미 특징들을 추출해 DB에 저장한다. 먼저, 방송 컨텐츠가 입력되면 전체 컨텐츠에 대해서 샷을 검출한다(단계 301). 샷의 검출은 다음의 [식 3]으로 표현된다.
[식 3]
ST = True if FDi ＞ Thframe and ｜FDi - FDi-1 ｜ ＞ Th diff , False Otherwise
FDi = colorDiffi + edgeDiffi + textureDiffi
colorDiffi = (colorFramei-10 - colorFramei )2 / colorDiffMAX
edgeDiffi = (edgeFramei-10 - edgeFramei )2 / edgeDiffMAX
textureDiffi = (textureFramei-10 - textureFramei )2 / textureDiffMAX
ST : 샷 변이
Thframe : 프레임 차이값에 대한 임계치
Thdiff : 인접 프레임간의 프레임 차이값을 비교했을 때 임계치
FDi : i 번째 프레임에서 조합한 특징값
colorDiffi : i 번째 프레임에서 HSV의 칼라 시스템의 특징값
edgeDiffi : i 번째 프레임에서 에지 성분의 특징값
textureDiffi : i 번째 프레임에서 균질성분의 특징값
colorDiffMAX : 컨텐츠에서 가장 큰 colorDiffi 값
edgeDiffMAX : 컨텐츠에서 가장 큰 edgeDiffi 값
textureDiffMAX : 컨텐츠에서 가장 큰 textureDiffi 값
[식 3]에서 설명하고 있듯이 현재 프레임에서 조합한 특징값(FDi)이 일정 수준 이상이고, 인접한 두 개의 프레임간의 특징값들의 차이가 일정 수준 이상이면 샷 변이가 일어난 것으로 판단한다. 이때, 과도한 검출을 방지하기 위해서 10 프 레임 전의 프레임과 현재 프레임간의 특징값들의 차이를 이용한다. ST가 True을 가지게 되면 샷이 검출된 것을 알 수 있다.
검출된 샷 단위로 장면이나 이벤트를 분류하기 위해서 갹 샷들의 하위레벨의 오디오 및 비주얼 특징을 추출한다(단계302). 추출하는 오디오 특징은 기본 주파수(fundamental frequency), 오디오 파워 (audio power), 오디오 스펙트럼 편차(audio spectrum deviation), 하모닉 스펙트럼 중심값 (harmonic spectrum centroid), 하모닉 스펙트럼 편차값 (harmonic spectrum deviation)이다. 추출하는 비주얼 특징은 모션 강도 (motion activity), HSV 칼라 정보 (HSV color), 균질 (homogeneous texture), 그리고 카메라 모션 (camera motion)값이 된다.
오디오 특징값을 기반으로 연속되는 샷들 중 유사한 오디오 특징값들을 갖는 샷들을 하나의 샷으로 통합한다(단계303). 다음 [식 4]는 인접한 샷들을 하나의 샷으로 통합하는 것을 표현한다.
[식 4]
If|AFi -AFi-1 | ＜ AFth , Merge{Si-1 ,Si}
AFi =(W1 * FFi + W2 * APi + W3 * AS i )/3
Merge{A,B} : 연속된 두 샷 A, B 를 B로 병합
AFi : i 번째 샷의 오디오 특징값
FFi : i 번째 샷 구간에서 정규화된 기본 주파수값
APi : i 번째 샷 구간에서 정규화된 오디오 파워값
ASi : i 번째 샷 구간에서 정규화된 오디오 스펙트럼 편차값
W1 , W2 , W3 : 가중값
[식 4]는 인접 샷들 간에 오디오 특징값의 차이가 일정값 이하인 경우 하나의 샷으로 보고 병합하는 과정을 표현한다. [식 3]을 통해 추출된 샷에서 정규화된 오디오 특징값들, 즉 정규화된 기본 주파수값, 정규화된 오디오 파워값, 정규화된 오디오 스펙트럼 편차값을 계산하여 샷의 오디오 특징값으로 정의한다. 인접한 두 샷간에 오디오 특징값의 차이가 일정값 이하이면 두 샷간의 유사한 오디오 정보를 가지고 있다고 판단하고 두 샷을 하나의 이벤트나 장면으로 규정하여 하나의 샷으로 병합한다.
방송 컨텐츠의 장르 종류와 추출된 샷의 길이 정보와 하위레벨의 오디오 및 비주얼 특징을 입력으로 하여 컨텐츠 기반의 분류기(classifier)를 통해 각 샷들이 해당되는 이벤트나 장면들을 검출하게 된다(단계 304). 컨텐츠 기반의 분류기는 각 장르마다 다른 이벤트나 장면을 검출한다. 각 분류기는 미리 설정된 이벤트나 장면들에 대해서 특징값을 지니고 있어, 입력된 특징 값들과 유클리안 거리 측정을 통해서 가장 가까운 이벤트나 장면으로 검출된다.
획득된 이벤트나 장면들은 제작자에 의해 검증을 받는다(단계 306).
이상의 과정을 통해서 한 방송 컨텐츠에 대한 의미 특징들을 출력하여, 의미 특징 DB부(80)에 저장한다.
이상에서 설명한 바와 같이, 본 발명에 따른 비디오 요약 제공 시스템에 의하면, 디지털 TV 방송 환경에서 시청자들의 선호도를 반영하는 비디오 요약을 각 시청자에게 제공할 수 있어서, 디지털 TV 방송 환경을 시청자 중심으로 전개시킬 수 있다.

Claims (4)

  1. 디지털 방송 환경에서 시청자 맞춤형 비디오 요약을 자동으로 제공하는 시스템에 있어서,
    시청자가 행하는 채널 선택, 선택된 컨텐츠의 타이틀, 시청 시간, 반복 시청 장면 및 주인공의 시청과 관련된 행동 패턴을 획득하여 출력하는 인터페이스부와, 상기 인터페이스부로부터 출력되는 행동 패턴의 변화에 따라 시청자의 선호도를 생성 및 갱신하는 시청자 선호도 업데이트부와, 시청자의 선호도를 저장하는 시청자 선호도 DB부와, 상기 시청자 선호도 DB부에 저장된 시청자의 선호도를 전송하는 시청자 단말 에이전트부를 갖는 시청자 단말부; 및
    오디오 및 비주얼 하위 레벨의 특징값들을 이용하여 방송 컨텐츠의 비디오 특징들을 추출하여 컨텐츠를 의미 특징으로 세그먼트하는 의미 특징 추출부와, 상기 의미 특징 추출부에서 추출된 의미 특징을 저장하는 의미 특징 저장부와, 상기 의미 특징 저장부를 검색하여 상기 시청자 단말 에이전트부로부터 전송된 시청자의 선호도에 부합하는 의미 특징들을 포함하는 비디오 요약을 생성하는 비디오 요약 생성부와, 상기 비디오 요약 생성부에서 생성된 비디오 요약을 상기 시청자 단말 에이전트부로 전송하는 서비스 제공자 에이전트부를 갖는 방송 서비스 제공부를 포함하되,
    시청자의 시스템 로그 아웃 시 상기 시청자 단말 에이전트부는 자동으로 상기 시청자 선호도 DB에 저장된 시청자의 선호도를 획득하여 미리 가입된 서비스 제공자 에이전트부로 전송되도록 제어하고, 상기 서비스 제공자 에이전트부는 상기 시청자 단말 에이전트부로부터 전송된 시청자의 선호도를 제공받아 상기 비디오 요약 생성부를 통해 생성된 비디오 요약을 상기 시청자 단말 에이전트부로 자동 전송되도록 제어하며, 상기 시청자 단말 에이전트부는 상기 서비스 제공자 에이전트부로부터 전송된 비디오 요약을 미리 마련된 비디오 요약 DB부에 저장하여 시청자의 로그인 시 상기 저장된 비디오 요약을 자동으로 추천하는 것을 특징으로 하는 시청자 맞춤형 비디오 요약 제공 시스템.
  2. 삭제
  3. 삭제
  4. 제 1 항에 있어서, 상기 의미 특징 추출부는,
    컨텐츠에서 모션 강도, HSV 칼라 정보, 균질 질감, 카메라 모션 등의 비디오 특징을 추출하고, 상기 비디오 특징을 이용하여 컨텐츠를 이벤트나 장면으로 세그먼트하는 것을 특징으로 하는 시청자 맞춤형 비디오 요약 제공 시스템.
KR1020040028308A 2004-04-23 2004-04-23 디지털 티비 방송의 시청자 맞춤형 비디오 요약 제공시스템 KR100601383B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040028308A KR100601383B1 (ko) 2004-04-23 2004-04-23 디지털 티비 방송의 시청자 맞춤형 비디오 요약 제공시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040028308A KR100601383B1 (ko) 2004-04-23 2004-04-23 디지털 티비 방송의 시청자 맞춤형 비디오 요약 제공시스템

Publications (2)

Publication Number Publication Date
KR20040041127A KR20040041127A (ko) 2004-05-14
KR100601383B1 true KR100601383B1 (ko) 2006-07-13

Family

ID=37338272

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040028308A KR100601383B1 (ko) 2004-04-23 2004-04-23 디지털 티비 방송의 시청자 맞춤형 비디오 요약 제공시스템

Country Status (1)

Country Link
KR (1) KR100601383B1 (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100681017B1 (ko) * 2005-02-15 2007-02-09 엘지전자 주식회사 동영상의 요약 제공이 가능한 이동통신 단말기 및 이를 이용한 요약 제공 방법
KR100785963B1 (ko) * 2005-06-30 2007-12-14 주식회사 대우일렉트로닉스 디지털 방송 수신기에서 사용자 시청 패턴에 따른오디오/비디오 처리장치 및 방법
KR100956953B1 (ko) * 2007-11-12 2010-05-12 한국전자통신연구원 단방향 방송망에서 콘텐츠 정보 및 콘텐츠 다운로드 방법
KR101271237B1 (ko) * 2011-07-12 2013-06-07 부산대학교 산학협력단 시청자 맞춤형 커스텀뷰를 제공하기 위한 온라인 방송 시스템 및 방법
TWI497959B (zh) * 2012-10-17 2015-08-21 Inst Information Industry Scene extraction and playback system, method and its recording media
KR20180037826A (ko) 2016-10-05 2018-04-13 삼성전자주식회사 디스플레이 장치, 이의 제어 방법 및 정보 제공 시스템
KR102184692B1 (ko) * 2017-03-10 2020-11-30 한국전자통신연구원 지능형 방송 서비스를 제공하는 방법 및 그 장치
CN108307229B (zh) * 2018-02-02 2023-12-22 新华智云科技有限公司 一种影音数据的处理方法及设备
CN110868630A (zh) * 2018-08-27 2020-03-06 北京优酷科技有限公司 预告片的生成方法及装置

Also Published As

Publication number Publication date
KR20040041127A (ko) 2004-05-14

Similar Documents

Publication Publication Date Title
KR100870833B1 (ko) 복합 이용자 프로파일 생성 시스템과 방법 및 컴퓨터 판독 가능한 기록 매체
US20040073919A1 (en) Commercial recommender
US7337462B2 (en) System and method for providing timing data for programming events
US7360160B2 (en) System and method for providing substitute content in place of blocked content
KR100858639B1 (ko) 유사성 메트릭에 기초한 텔레비전 프로그램 추천들을 생성하는 방법 및 장치
US7818764B2 (en) System and method for monitoring blocked content
US8595769B2 (en) System and method for providing a personalized channel
US20050033849A1 (en) Content blocking
US11089072B2 (en) Real time optimized content delivery framework
KR100681017B1 (ko) 동영상의 요약 제공이 가능한 이동통신 단말기 및 이를 이용한 요약 제공 방법
KR100601383B1 (ko) 디지털 티비 방송의 시청자 맞춤형 비디오 요약 제공시스템
KR102198365B1 (ko) 다중 채널 프리뷰 기반의 사용자 맞춤형 미디어 콘텐츠 프로그램 추천 시스템 및 방법
US20070022440A1 (en) Program recommendation via dynamic category creation
KR100421766B1 (ko) 전자 프로그램 안내(ｅｐｇ/이피지) 애플리케이션에서러프 퍼지 ｍｌｐ를 이용한 프로그램 추천 장치 및 방법
JP4698545B2 (ja) 情報処理装置及び方法及びプログラム並びに記憶媒体
KR101102351B1 (ko) 맞춤형 방송 프로그램을 제공하기 위한 방법 및 시스템
WO2003044624A2 (en) Systems and methods relating to determining the desirability of and recording programming events
US20020188946A1 (en) Method and system for interactive programming guide background selection
Wittig Program Descriptors and User Profiles

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130624

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20140630

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20150629

Year of fee payment: 10

LAPS Lapse due to unpaid annual fee