KR100479653B1 - 파노라마형 비디오 디스플레이 방법 - Google Patents

파노라마형 비디오 디스플레이 방법 Download PDF

Info

Publication number
KR100479653B1
KR100479653B1 KR10-2000-0037513A KR20000037513A KR100479653B1 KR 100479653 B1 KR100479653 B1 KR 100479653B1 KR 20000037513 A KR20000037513 A KR 20000037513A KR 100479653 B1 KR100479653 B1 KR 100479653B1
Authority
KR
South Korea
Prior art keywords
video
frame
value
panoramic
shot
Prior art date
Application number
KR10-2000-0037513A
Other languages
English (en)
Other versions
KR20020003054A (ko
Inventor
권오진
Original Assignee
주식회사 디지트리얼테크놀로지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 디지트리얼테크놀로지 filed Critical 주식회사 디지트리얼테크놀로지
Priority to KR10-2000-0037513A priority Critical patent/KR100479653B1/ko
Publication of KR20020003054A publication Critical patent/KR20020003054A/ko
Application granted granted Critical
Publication of KR100479653B1 publication Critical patent/KR100479653B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/036—Insert-editing

Abstract

본 발명은 파노라마형 비디오 디스플레이 방법에 관한 것으로서, 더욱 상세하게는 디지틀 형태의 비디오를 서비스 또는 디스플레이시 기존의 아날로그 비디오 디스플레이 방식에서 사용되고 있는 재생(play), 멈춤(stop), 미리보기(preview), 이전보기(review), 고속재생(fast-forward), 고속이전보기(fast-backward), 되감기(rewind), 일시멈춤(pause), 저속재생(slow-motion)의 9개 모드 이외에 이에 더하여 디지틀 비디오의 특성을 이용하여 보다 효율적이고 새로운 방식의 파노라마형 재생 모드와, 파노라마형 슬라이드 모드와, 파노라마형 요약재생 모드와, 파노라마형 흐름도 모드와, 파노라마형 비디오 책(video book) 모드와, 데이터 삽입 모드의 6개 모드를 추가로 제공하는 디스플레이 방식을 제공하며 이들을 소프트웨어적 또는 하드웨어적으로 구현할 때 필요한 핵심 알고리즘을 제공한다.

Description

파노라마형 비디오 디스플레이 방법{A method of panoramic video displaying}
본 발명은 파노라마형 비디오 디스플레이 방법에 관한 것으로서, 특히 디지틀 형태의 비디오를 서비스 또는 디스플레이시 기존의 아날로그 비디오 디스플레이 방식에서 사용되고 있는 재생(play), 멈춤(stop), 미리보기(preview), 이전보기(review), 고속재생(fast-forward), 고속이전보기(fast-backward), 되감기(rewind), 일시멈춤(pause), 저속재생(slow-motion)의 9개 모드 이외에 디지틀 비디오의 특성을 이용하여 보다 효율적이고 새로운 방식의 파노라마형 재생 모드와, 파노라마형 슬라이드 모드와, 파노라마형 요약재생 모드와, 파노라마형 흐름도 모드와, 파노라마형 비디오 책(video book) 모드, 데이터 삽입 모드의 6개 모드를 추가로 제공하는 디스플레이 방법에 관한 것이다.
최근 인터넷(또는 네트웍)과 디지틀 TV 방송을 통한 디지틀 비디오 서비스는 그 응용분야가 급속도로 확대되고 있다. 실시간 인터넷 방송 및 디지틀 TV 방송을 위시하여, 주문형 비디오 서비스(VOD: Video On Demand), 원격 감시, 원격 의료(Tele-medicine), 화상 회의(Tele-conference), 화상 전화(Video phone), 인터넷 영화관, 인터넷 광고 등 비디오 응용 서비스 분야는 매우 다양해지고 있다.
그간 인터넷과 디지틀 TV 방송을 통한 디지틀 비디오 서비스에 필요한 요소 기술 중, 비디오의 압축, 처리, 분류, 저장, 검색 기법에 관한 기술은 국내외적으로 그 연구가 활발히 진행되어 왔고 가시적 성과가 이루어졌으나 비디오의 효율적 인 디스플레이를 위한 연구는 미흡하여 기존 아날로그 비디오 디스플레이 방식에서 사용되고 있는 9개의 디스플레이 방식을 탈피하지 못하고 있었다.
디지틀 비디오는 아날로그 방식에 비해 화면과 화면간, 화면 내 화소간의 데이터 조작이 용이하여 수신자 측에서 보다 다양한 방식의 디스플레이가 가능하다.그러므로 이의 효율적 실현은 사용자에게 직접적인 사용 편이성을 제공하게 됨으로써 전체 비디오 제공 서비스 및 방송 서비스 또는 비디오 수신기의 질적 향상을 도모할 수 있어 그 경제적 가치가 매우 클것으로 예상된다.
이와 같은 디지틀 데이터의 특성을 이용한 효율적인 디스플레이 기술에 관한 분야의 연구실적은 선진국에서도 아직 그 보편적 효율성이 입증된 완성된 기술이 발표되거나 특허 출원된 기술이 미미한 실정이다.
그간 국내에서는 MPEG 비디오 국제 표준화 관련 기술을 중심으로 학계, 기업, 정부출원 연구소 등 산학연 공히 디지틀 비디오의 압축, 처리, 분류, 저장 및 검색 분야에 대한 활발한 연구가 진행되어 왔다. 그러나, 아날로그 비디오에서 사용되어 온 디스플레이 방식을 개선하여 디지틀 비디오의 특성을 이용한 새로운 방식의 디스플레이 방식에 관한 연구는 관심을 끌지 못해 온 것으로 파악된다. 본 발명과 관련하여 국내의 1급 학회지에 발표된 국내 연구진에 의한 괄목할만한 연구 개발 결과 논문이 현재까지 발견되지 않고 있고, 특허 출원된 기술 또한 발견되지 않은 것으로 조사되고 있다.
미국의 경우에는 프린스턴 대학의 Liu 교수와 Wolf 교수에 의해 인터넷용 디지틀 비디오 도서관 구축 연구 과제가 미 국방성의 연구지원으로 수행 중에 있으며, 구축중인 디지틀 비디오 도서관의 서비스 개선 차원에서 효율적인 디스플레이 기법에 관한 연구가 수행 중에 있는 것으로 보고되어 있다. 그간 2-3편의 논문이 1급 국제학술지에 게재되었고 학술발표회를 통하여 기본이 되는 기술에 대한 탐색 차원의 실험 결과가 보고되었다. 1994년부터 1998년까지 미국 NSF/ARPA/NASA가 공동 지원하고 Microsoft, Intel, Bell Atlantic 등 미국의 다수 대기업이 참여하여 국가 전략과제인 디지틀 비디오 도서관 구축 1차 프로젝트가 CMU(Carnegie Mellon Univ.)의 주관하에 수행되었으며 현재 2차 프로젝트의 제안 심사가 진행 중에 있다. 그 외 IBM 의 인터넷 디지틀 도서관 구축 계획, Kansas 대학의 VISION(Video Indexing Searching Over Networks) 프로젝트 등 4-5개의 연구 프로젝트가 미국에서 진행중에 있으며 본 연구에서 제안하는 디스플레이 방식의 개선에 관한 연구가 세부 연구 항목으로 책정되어 수행중인 것으로 파악되고 있다. 현재까지는 실용가치가 있는 기술 개발에 성공하여 특허 출원된 예는 없는 것으로 조사되었으며 프린스턴 대학과 IBM에서 일부 기술이 특허 출원 중인것으로 파악되고 있다.
비디오 및 오디오 국제 표준 규약인 MPEG 표준 기술을 그간 성공적인 MPEG-1, 2의 제정과 함께 추후에도 디지틀 TV방송과 인터넷용 오디오/비디오 압축 및 표현의 국제표준방식으로 유력시되고 있다. 1998년 10월 MPEG-4 버젼-1이 확정되었고 1999년 12월 MPEG-4 버젼-2가 확정되었다. MPEG-4에서는 기존 MPEG-1, 2에서 사용되어온 오디오와 비디오의 압축 및 표현 방식외에 객체(Object)별 압축 및 표현 방식을 새로이 도입하여 채택하는 것으로 확정되었으며 이로 인하여 기존 MPEG-1, 2로 저장되어 있는 컨텐트의 버젼-업 컨버팅 수요가 많이 발생할 것으로 예상되고 있다. 현재 MPEG-4 차기 표준으로 2001년 7월을 목표로 제정도 동시에 진행되고 있으며 MPEG-7의 경우에는 멀티미디어 정보의 검색, 가공, 관리 및 처리를 위한 Content Representation 즉, Feature Descriptor의 표준 제정을 목표로 하고 있다. MPEG-7의 표준이 확정되면 인터넷 오디오 및 비디오의 Content/Feature 별 검색이 가능하게 될 것으로 보인다.
전반적으로 기존의 본 발명이 속하는 국내외 종래 기술은 인터넷 및 디지틀 TV방송에 적합한 비디오 압축, 처리, 분류, 저장, 검색 등 비디오물의 생성 및 보관에 관한 기술연구가 주류를 이루고 있으며 MPEG-7에서 지향하는 content-based video description 연구에 치중하고 있어 상대적으로 이미 생성되어 있는 비디오물의 효율적인 디스플레이 기술에 관한 개발은 미흡한 것으로 판단된다.
본 발명의 목적은 디지틀 형태의 비디오를 서비스 또는 디스플레이시 기존의 아날로그 비디오 디스플레이 방식에서 사용되고 있는 재생, 멈춤, 미리보기, 이전보기, 고속재생, 고속이전보기, 되감기, 일시멈춤, 저속재생의 9개 모드 이외에 디지틀 비디오의 특성을 이용하여 보다 효율적이고 새로운 방식의 파노라마형 재생 모드와, 파노라마형 슬라이드 모드와, 파노라마형 요약재생 모드와, 파노라마형 흐름도 모드와, 파노라마형 비디오 책(video book) 모드와, 데이터 삽입 모드의 6개 모드를 추가로 제공하는 디스플레이 방식을 제안하며 이들을 소프트웨어적 또는 하드 웨어적으로 구현할 때, 필요한 핵심 알고리즘을 제공하는 데 있다.
본 발명의 한 양태에 있어서, 비디오를 디스플레이할 때 비디오의 프레임별 디스플레이 속도를 디스플레이하는 동안에 수시로 또한 자동으로 조절하게 함으로써 미리보기, 이전보기, 고속재생, 고속이전보기, 저속재생 등에 소요되는 시간을 절약할 수 있고 사용자가 전체 비디오에서 원하는 프레임을 쉽고 더 빠르게 찾을 수 있도록 비디오 프레임의 칼라 성분별 히스토그램을 구하여 자동으로 프레임별 디스플레이 속도를 구하여 디스플레이하는 파노라마형 재생 모드를 구현한다.
본 발명의 다른 양태에 있어서, 비디오를 디스플레이할 때 비디오의 내용을 자동으로 분석하여 비디오의 내용을 순차적으로 이어져 있는 카메라 셔트(shot)들로 재구성하고, 셔트별 대표 화면을 정지 영상 형태로 추출하고 이들을 한 화면으로 애니메이션 형태로 일정시간 간격별로 디스플레이하거나 한 화면에 추출된 대표화면을 나열하거나, 일렬로 나열된 화면들을 마치 영화필름이 일렬로 나열되어 흘러가는 형태로 디스플레이하는 파노라마형 슬라이드 모드가 구현된다.
본 발명의 또 다른 양태에 있어서, 비디오를 디스플레이할 때, 셔트를 구성하고 대표 화면을 찾아 낸 후 대표화면들을 2차원 평면에 나열하고 각 대표화면으로 대표되는 셔트들 간의 흐름도를 디스플레이함으로써 전체 비디오의 흐름을 손쉽게 파악하도록 하여 주는 파노라마형 흐름도 모드가 구현된다.
본 발명의 또 다른 양태에 있어서, 비디오를 디스플레이할 때, 셔트를 구성하고 대표 화면을 찾아 낸 후 대표화면들을 마치 책을 보는 것과 같은 방식으로 디스플레이하는 파노라마형 책 모드가 구현된다.
본 발명의 또 다른 양태에 있어서, 비디오 내용을 대표 화면 셔트별로 애니메이션 형태로 일정 시간 간격별로 디스플레이할 때, 그 대표 화면 셔트의 중간에 특정 이미지나 정보 등의 데이터를 삽입하여 인터넷 광고 등에 이용할 수 있도록 하는 데이터 삽입 모드가 구현된다.
본 발명에서 제시하는 파노라마형 디지틀 비디오 디스플레이 방식은 총 6 개 모드로 동작 가능하며 각 모드의 상세한 설명과 구현 알고리즘은 다음과 같다.
1. 파노라마형 재생 모드
파노라마형 재생 모드는 비디오의 내용에 따라 자동으로 재생 속도를 조절하여 디스플레이하는 모드이다. 기존 아날로그 방식의 디스플레이 방식에서는 재생, 미리보기, 이전보기, 고속재생, 고속이전보기, 저속재생 등의 모드에서 한번 디스플레이 속도가 정해지면 그 속도가 비디오의 내용에 관계없이 일정 속도로 유지된다. 디스플레이 속도를 변경하고자 할 때에는 "조그"와 같이 속도 변경에 해당하는 버튼을 수동으로 조작하여야 한다.
본 발명에서 제시하는 파노라마형 재생모드는 수동 조작없이 비디오의 프레임별 디스플레이 속도를 수시로 또한 자동으로 조절하게 함으로서 미리보기, 이전보기, 고속재생, 고속이전보기, 저속재생 등에 소요되는 시간을 절약할 수 있고 사용자가 전체 비디오에서 원하는 프레임을 쉽고 더 빠르게 찾을 수 있는 효과가 있도록 하여 준다. 자동으로 프레임별 디스플레이 속도를 조절하는 알고리즘은 다음과 같다.
1) 디스플레이할 디지틀 비디오를 특정 칼라 포맷으로 표현한다.(본 발명에서는 YUV 포맷을 대표 포맷으로 사용한다. 만약 디지틀 비디오 포맷이 RGB,HSI 등과 같이 YUV 포맷과 다른 포맷으로 표현된 경우, 각각의 칼라 성분별로 YUV 포맷에서 사용하는 칼라 성분별 계산식을 동일하게 적용한다. 흑백 영상의 경우에는 YUV 포맷에서 사용하는 칼라 성분별 계산식에서 Y 성분의 계산식만 적용한다.)
2)디스플레이할 비디오의 i-번째 프레임의 칼라 성분별 히스토그램을 구하고 다음과 같이 표시한다.
YUV 포맷의 경우:
: i-번째 프레임의 화소 중에서 Y 성분이 k인 화소점의 수
: i-번째 프레임의 화소 중에서 U 성분이 k인 화소점의 수
: i-번째 프레임의 화소 중에서 V 성분이 k인 화소점의 수
여기에서
i=1, 2, 3,...,M-1; M은 디스플레이할 비디오의 전체 프레임 수이고,
k=0, 1, 2,...,N-1; N은 비디오 포맷에서 Y, U, V 각 성분이 취할 수 있는 값의 총 개수이다.
3) 파노라마형 재생 모드에서 i-번째 프레임의 디스플레이 속도의 척도 Si 를 다음 수학식으로 구하여 이 Si 값을 i-번째 프레임의 디스플레이 속도로 결정한다.
여기에서 Wj는 프레임별로 설정되는 Y, U, V 성분별 가중치 상수이고, Cl은 i-번째 프레임과 (i+1)-번째 프레임의 히스토그램에서 각 레벨별 차이를 구할때 i-번째 프레임의 레벨과 (i+1)-번째 프레임의 레벨간의 거리에 대한 가중치 상수로서 ｜ㅣ｜값에 따라 다른 값을 갖는다. Di는 i-번째 프레임과 (i+l)-번째 프레임의 차이(Distortion)에 대한 척도이며 이 차이가 클수록 두 프레임간의 변화가 심하고 적을 수록 두 프레임은 변화가 적은 프레임으로 판별된다. Gi(ㆍ)는 Di에 대한 분포도에서 국부적 최고점(peak)과 최저점(valley)에서의 급격한 속도의 변화를 완만한 형태로 변환시키는 ∪ 또는 ∩자형 완충용함수로서 Di가 클수록 작은 값을 보이며(저속으로 재생되며) Di가 작을 수록 큰 값을 보이는(고속으로 재생되는) Di에 ∪ 또는 ∩자형으로 반비레하는 스무딩(Smoothing) 함수이다. 연속적인 함수(Continous Function)로 구현 할 수도 있고 몇 개의 단계를 두어 불연속적인 함수(Discrete Function)로도 구현이 가능하며 스무딩 정도는 재생시에 인간이 느끼는 가장 편안한 속도에 대한 실험을 실시하여 결정하게 된다. α는 파노라마형 재생 모드시에 전체 비디오의 총 디스플레이 속도를 제어하는 상수이다.
파노라마형 재생 모드 시에는 정상적인 디스플레이와는 매 프레임별로 속도가 다르므로 기본적으로 사운드는 재생하지 않는다. 그러나 일시적으로 파노라마형 재생 모드시의 디스플레이 속도와 정상적인 디스플레이 속도가 같은 경우에는 사운드도 재생 가능하다.
2. 파노라마형 슬라이드 모드
파노라마형 슬라이드 모드는 비디오의 내용을 자동으로 분석하여 비디오의 내용을 순차적으로 이어져 있는 카메라 셔트들로 재구성한다. 셔트별 대표화면(Key Frame)을 정지 영상 형태로 추출하고 이들을, 1) 한 화면으로 애니메이션 형태(예를 들면, 인터넷에서 통용되는 animated GIF 파일 형태)로 일정 시간 간격별로 디스플레이하거나(도 1 참조), 2) 한 화면에 추출된 대표 화면을 나열하거나( 도 1 참조), 3) 일렬로 나열된 대표 화면들을 마치 영화 필름이 일렬로 나열되어 흘러가는 형태로 디스플레이 하므로써 전체 비디오의 내용을 요약하여 볼 수 있고, 또한 각 대표 화면간의 비디오 재생이 가능하도록 하므로써 사용자가 비디오의 특정 부분을 쉽게 찾고 그 부분만을 선택적으로 시청 가능하도록 하여주는 모드이다. 추출하는 셔트의 수를 조절할 수 있으며 한 화면으로 애니메이션 형태로 디스플레이할 때의 셔트 별 대표 화면이 디스플레이되는 시간을 조절할 수 있다.
셔트를 구성하고, 셔트의 수를 조절하며, 셔트별 대표 화면을 찾으며, 한 화면으로 애니메이션 형태로 디스플레이할 때 각 대표 화면의 디스플레이 시간을 조절하는 알고리즘은 다음과 같다.
1) 디스플레이할 때 전체 비디오에서 수학식 1의 Di를 계산한다.
2) D i 값이 국부적 최대값을 보이는 프레임을 선택하고 이 최대값이 일정 값 T1( T1 값으로는 임의로 정한 고정값을 사용할 수도 있고 D i 의 평균값의 일정 배율값을 사용할 수도 있다.) 보다 큰 프레임들을 선택한다. (도2 참조)
3) 선택된 프레임들 중에서 이웃하는 프레임간의 프레임 간격(또는 시간 간격)이 T2( T2 값으로는 임의로 정한 고정값을 사용할 수도 있고, 선택된 프레임들 간의 평균 프레임 간격에 비례하는 값으로 설정할 수도 있고, 영화, 뉴스, 시트콤, 스포츠 등으로 구분되는 장르별로 고정값을 사용할 수도 있다.)보다 적은 영역에 여러 개의 국부적 최대값 프레임이 선택된 경우에는 D i 값이 최대인 프레임을 제외한 모든 프레임을 삭제한다. (도2 참조)
4) 지금까지 선택된 프레임들 중에서 이웃하는 2개의 프레임 사이를 1개의 셔트로 선택한다. 그러므로 각 셔트의 시작 프레임과 마지막 프레임은 전체 비디오에서 D i 값이 국부적 최대값을 가지며 셔트내에서는 다른 프레임의 D i 값보다 상대적으로 큰 값을 갖는다. (도2 참조)
5) 셔트의 수를 조절하는 방법은 1)-4)의 과정을 통하여 선택된 셔트들을 D i 값이 큰 값의 순으로 우선 순위를 정하고 사용자에 의하여 구성할 셔트 수가 입력되면 그 만큼의 셔트를 선택함으로써 가능하다. 자동으로 선택할 셔트의 수를 결정할 경우에는 T1 값을 조절함으로써 가능하다.
6) 셔트별 대표 화면을 찾는 방법은 셔트의 첫 번째 프레임을 선택하는 방법, 셔트의 마지막 프레임을 선택하는 방법, 셔트를 구성하는 모든 프레임 중에서 가장 가운데 위치하는 프레임을 선택하는 방법, 첫 프레임 이후 첫 번째 D i 국부 최저값(valley)을 보이는 프레임을 선택하는 방법 중에서 한가지 방법을 사용한다.
7) 파노라마형 슬라이드 모드에서 셔트 별 대표 화면을 애니메이션 형태로 디스플레이할 때, 대표 화면 별 디스플레이 시간은 임의 고정값을 사용하는 방법과 셔트의 총 프레임 간격에 비례하는 값의 시간으로 설정하는 방법, 셔트의 시작 프레임에 해당하는 D i 값에 비례하는 값의 시간으로 설정하는 방법을 사용한다.
3. 파노라마형 요약재생 모드
파노라마형 요약재생 모드는 마치 자동으로 영화의 예고편을 제작하여 디스플레이하는 것과 같이 비디오의 내용을 셔트 별로 한 장면씩 모아서 디스플레이하는 모드이다. 파노라마형 슬라이드 모드에서 사용된 방법과 같은 방법으로 비디오의 셔트를 구성하고 셔트 별로 시작 프레임부터 일정 시간 분을 연속하여 디스플레이한다. 셔트 별 디스플레이 시간은, 1) 임의 고정값을 사용하는 방법과, 2) 비디오의 흐름에 있어 사운드가 잠시 멈추는 시간까지 디스플레이하는 방법, 3) 1) 과 2)를 혼합하여 사용하는 방법을 사용한다.
4. 파노라마형 흐름도 모드
파노라마형 흐름도 모드는 파노라마형 슬라이드 모드에서와 같은 방법으로 셔트를 구성하고 대표 화면을 찾아 낸 후 대표 화면들을 2차원 평면에 나열하고(도1 참조) 각 대표 화면으로 대표되는 셔트들 간의 흐름도를 디스플레이함으로써 전체 비디오의 흐름을 손쉽게 파악하도록 하여주는 모드이다. 파노라마형 슬라이드 모드에서 순차적으로 나열된 셔트들 중에서 다음의 요건을 모두 만족시키는 경우 귀환하는 셔트로 결정함으로써 흐름도를 완성한다.
1) 귀환되는 셔트와 귀환할 셔트 사이에는 반드시 T3 개 이하의 셔트가 사이에 존재한다.
2) 귀환되는 셔트와 귀환할 셔트의 대표 화면 간의 프레임의 차이에 대한 척도 D i 는 반드시 T4 이하이다.
T3 와 T4 는 여러 종류의 비디오에 대하여 장르별로 실험적으로 결정하며 흐름도 상에 존재하는 대표 화면들의 수가 이들에 의하여 조절된다.
5. 파노라마형 비디오 책 (Video Book) 모드
파노라마형 비디오 책 모드는 파노라마형 슬라이드 모드에서와 같은 방법으로 셔트를 구성하고 대표 화면을 찾아 낸 후 대표 화면들을 마치 책을 보는 것과 같은 방식으로 디스플레이하는 모드이다. 순차적인 대표 화면들이 파노라마형 비디오 책 모드에서는 각 페이지에 해당한다. 각 페이지(대표 화면)를 수동으로 또는 설정된 속도로 자동으로 넘길 수 있으며, 페이지와 페이지 사이의 비디오 프레임들을 볼 수 있고, 각 페이지 별로 메모가 가능하며, 각 페이지 별로 책갈피를 설정할 수 있도록 동작한다. 각 페이지 번호는 대표 화면의 순서에 해당하도록 설정되며 마치 사진집을 보는 것과 같이 동작한다.
6. 데이터 삽입 모드
상기 모드는 예를 들면, 22세의 대학생, 미혼 여성이 한 사이트에 접속한다. 물론 그 학생의 나이나 성별, 선호도는 그 사이트 가입시 제공받았던 정보로 알게 된다. 그 미혼 여성은 '파노라마형 모드'로 편집된 셔트들을 보게 되면 중간 중간에 그 여성의 라이프 스타일에 맞는 광고를 보게 할 수 있다. 만일 인증을 받지 않고 접속하는 사이트의 경우에는 임의의 광고가 삽입되게 할 수 있다.
데이터 삽입 모드는 3항의 파노라마형 요약 재생 모드에서 비디오의 내용 별로 한 장면씩 모아서 디스플레이할 때, 그 셔트 중간에 사용자의 선택에 따라 기존의 디스플레이되는 셔트 이외에 광고 화면 등의 임의의 셔트를 삽입하여 디스플레이하는 모드이다.(도 3 참조)
본 발명에서 제시된 6개의 파노라마형 비디오 디스플레이 방식을 사용하면 재생, 미리보기, 이전보기, 고속재생, 고속이전보기, 저속재생 등의 비디오 시청 효율이 증대되고 셔트의 검색 시간을 절약할 수 있다. 인터넷과 같이 전송 속도가 오래 걸리는 네트웍을 통한 비디오 서비스 시에는 전체 비디오를 전송받기 전에 요약된 내용을 미리 보고 전송받기의 여부를 결정할 수 있어 사용자에게 편리성을 제공한다. 또한 광고와 같은 데이터를 셔트 들의 디스플레이 중간에 삽입할 수 있어 편리하고 효과적인 인터넷 광고를 할 수 있는 장점이 있다.
도 1은 본 발명에 따른 파노라마형 슬라이드 모드와 흐름도 모드의 모형도.
도 2는 본 발명에 따른 파노라마형 슬라이드 모드에서 셔트의 구성 방법과 대표화면을 찾는 방법을 도시한 도면.
도 3은 본 발명에 따른 데이터 삽입 모드를 도시한 도면.

Claims (13)

  1. 삭제
  2. 비디오를 디스플레이할 때 비디오의 프레임별 디스플레이 속도를 디스플레이하는 동안에 수시로 또한 자동으로 조절하게 함으로써 미리보기, 이전보기, 고속재생, 고속이전보기, 고속재생, 고속이전보기, 저속재생 등에 소요되는 시간을 절약하고 사용자가 전체 비디오에서 원하는 프레임을 쉽고 더 빠르게 찾을 수 있도록 비디오 프레임의 칼라 성분별 히스토그램을 구하여 자동으로 프레임별 디스플레이 속도를 구하여 파노라마형 재생 모드를 구현하는 파노라마형 비디오 디스플레이 방법에 있어서,
    디스플레이할 비디오의 i-번째 프레임의 칼라 히스토그램은,
    식과,식에 의해 구한 값에 의해 자동으로 프레임별 디스플레이 속도를 조절하는 파노라마형 재생 모드를 구현하는 것을 특징으로 하는 파노라마형 비디오 디스플레이 방법.
  3. 삭제
  4. 비디오를 디스플레이할 때 비디오의 내용을 자동으로 분석하여 비디오의 내용을 순차적으로 이어져 있는 카메라 셔트들로 재구성하고, 셔트별 대표 화면을 정지 영상 형태로 추출하고 이들을 한 화면으로 애니메이션 형태로 일정시간 간격별로 디스플레이하거나 한 화면에 추출된 대표화면을 나열하거나, 일렬로 나열된 화면들을 마치 영화필름이 일렬로 나열되어 흘러가는 형태로 디스플레이하는 파노라마형 슬라이드 모드를 구현하는 파노라마형 비디오 디스플레이 방법에 있어서,
    디스플레이할 때 전체 비디오에서 수학식에서 Di를 계산하고; D i 값이 국부적 최대값을 보이는 프레임을 선택하고 이 최대값이 일정 값 T1(T1 값으로는 임의로 정한 고정값을 사용할 수도 있고 D i 의 평균값의 일정 배율값을 사용할 수도 있음)보다 큰 프레임들을 선택하고; 선택된 프레임들 중에서 이웃하는 프레임과의 프레임 간격(또는 시간 간격)이 T2(T2 값으로는 임의로 정한 고정값을 사용할 수도 있고, 선택된 프레임들 간의 평균 프레임 간격에 비례하는 값으로 설정할 수도 있고, 영화, 뉴스, 시트콤, 스포츠 등으로 구분되는 장르별로 고정값을 사용할 수도 있다)보다 적은 영역에 여러 개의 국부적 최대값 프레임이 선택된 경우에는 D i 값이 최대인 프레임을 제외한 모든 프레임을 삭제하고; 지금까지 선택된 프레임들 중에서 이웃하는 2개의 프레임 사이를 1개의 셔트로 선택하며 각 셔트의 시작 프레임과 마지막 프레임은 전체 비디오에서 D i 값이 국부적 최대값을 가지며 셔트내에서는 다른 프레임의 D i 값보다 상대적으로 큰 값을 갖도록 셔트를 구성하는 것을 특징으로 하는 파노라마형 비디오 디스플레이 방법.
  5. 제 4 항에 있어서,
    선택된 셔트들을 D i 값이 큰 값의 순으로 우선 순위를 정하고 사용자에 의하여 구성할 셔트 수가 입력되면 그 만큼의 셔트를 선택함으로써 가능하고, 자동으로 선택할 셔트의 수를 결정할 경우에는 T1 값을 조절함으로써 비디오 셔트 수를 조절하는 것을 특징으로 하는 파노라마형 비디오 디스플레이 방법.
  6. 제 4 항에 있어서,
    셔트의 첫 번째 프레임을 선택하는 방법, 셔트의 마지막 프레임을 선택하는 방법, 셔트를 구성하는 모든 프레임 중에서 가장 가운데 위치하는 프레임을 선택하는 방법, 첫 프레임 이후 첫 번째 D i 국부 최저값(valley)을 보이는 프레임을 선택하는 방법 중에서 한가지 방법을 사용하여 비디오 셔트별 대표 화면을 찾는 것을 특징으로 하는 파노라마형 비디오 디스플레이 방법.
  7. 제 4 항에 있어서,
    셔트 별 대표 화면을 애니메이션 형태로 디스플레이할 때, 대표 화면 별 디스플레이 시간은 임의 고정값을 사용하는 방법과, 셔트의 총 프레임 간격에 비례하는 값의 시간으로 설정하는 방법, 셔트의 시작 프레임에 해당하는 D i 값에 비례하는 값의 시간으로 설정하는 방법중 한가지를 사용하여 각 대표 화면의 디스플레이 시간을 조절하는 것을 특징으로 하는 파노라마형 비디오 디스플레이 방법.
  8. 제 4항의 방법과 같은 방법으로 비디오의 셔트를 구성하고 셔트 별로 시작 프레임으로부터 일정 시간 분을 연속하여 디스플레이하는 것으로서, 셔트 별 디스플레이 시간은, 임의의 고정값을 사용하는 방법과, 비디오의 흐름에 있어 사운드가 잠시 멈추는 시간까지 디스플레이하는 방법, 이들을 혼합하여 사용하는 방법을 사용하여 마치 자동으로 영화의 예고편을 제작하여 디스플레이하는 것과 같이 비디오의 내용을 셔트 별로 한 장면씩 모아서 요약 재생 모드로 디스플레이하는 것을 특징으로 하는 파노라마형 비디오 디스플레이 방법.
  9. 제 4 항에서와 같은 방법으로 셔트를 구성하고 대표 화면을 찾아 낸 후 대표 화면들을 2차원 평면에 나열하고 각 대표 화면으로 대표되는 셔트들 간의 흐름도를 디스플레이함으로써 전체 비디오의 흐름을 손쉽게 파악하도록 하여주는 파노라마형 흐름도 모드로 디스플레이하는 것을 특징으로 하는 파노라마형 비디오 디스플레이 방법.
  10. 제 9 항에 있어서,
    귀환되는 셔트와 귀환할 셔트 사이에는 반드시 T3 개 이하의 셔트가 사이에 존재하도록 하고, 귀환되는 셔트와 귀환할 셔트의 대표 화면 간의 프레임의 차이에 대한 척도 D i 는 반드시 T4 이하이며, T3 와 T 4 는 여러 종류의 비디오에 대하여 장르별로 실험적으로 결정하며 흐름도 상에 존재하는 대표 화면들의 수가 이들에 의하여 조절되는 것을 특징으로 하는 파노라마형 비디오 디스플레이 방법.
  11. 제 4 항에서와 같은 방법으로 셔트를 구성하고 대표 화면을 찾아 낸 후 대표 화면들을 마치 책을 보는 것과 같은 방식으로 디스플레이 하는 파노라마형 비디오 책 모드를 구현하는 것을 특징으로 하는 파노라마형 비디오 디스플레이 방법.
  12. 제 11 항에 있어서,
    각 페이지(대표 화면)를 수동으로 또는 설정된 속도로 자동으로 넘길 수 있으며, 페이지와 페이지 사이의 비디오 프레임들을 볼 수 있고, 각 페이지 별로 메모가 가능하며, 각 페이지 별로 책갈피를 설정할 수 있도록 동작하며, 각 페이지 번호는 대표 화면의 순서에 해당하도록 설정되며 마치 사진집을 보는 것과 같이 동작하는 것을 특징으로 하는 파노라마형 비디오 디스플레이 방법.
  13. 제 4항과 같은 방법으로 비디오의 셔트를 구성하고 셔트별로 시작 프레임으로부터 일정시간 분을 연속으로 디스플레이할 때, 기존의 디스플레이되는 셔트 이외에 임의의 지정된 광고와 같은 데이터를 셔트 중간에 삽입하는 것을 특징으로 하는 파노라마형 비디오 디스플레이 방법.
KR10-2000-0037513A 2000-07-01 2000-07-01 파노라마형 비디오 디스플레이 방법 KR100479653B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR10-2000-0037513A KR100479653B1 (ko) 2000-07-01 2000-07-01 파노라마형 비디오 디스플레이 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR10-2000-0037513A KR100479653B1 (ko) 2000-07-01 2000-07-01 파노라마형 비디오 디스플레이 방법

Publications (2)

Publication Number Publication Date
KR20020003054A KR20020003054A (ko) 2002-01-10
KR100479653B1 true KR100479653B1 (ko) 2005-03-30

Family

ID=19675731

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2000-0037513A KR100479653B1 (ko) 2000-07-01 2000-07-01 파노라마형 비디오 디스플레이 방법

Country Status (1)

Country Link
KR (1) KR100479653B1 (ko)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1998034182A2 (en) * 1997-02-03 1998-08-06 Koninklijke Philips Electronics N.V. A method and device for navigating through video matter by means of displaying a plurality of key-frames in parallel
KR19990005766A (ko) * 1997-06-30 1999-01-25 배순훈 Dvcr의 파노라마식 고속 재생 방법
KR19990060354A (ko) * 1997-12-31 1999-07-26 윤종용 디지털 비디오 카세트 레코더의 서치모드 동작 수행 방법
KR19990081317A (ko) * 1998-04-28 1999-11-15 구자홍 동영상의 적응적 디스플레이 속도 자동조절 장치와 방법
JP2000083212A (ja) * 1998-09-04 2000-03-21 Victor Co Of Japan Ltd ディジタル信号記録再生装置
KR20000040087A (ko) * 1998-12-17 2000-07-05 구자홍 장면 변화분포를 이용한 비디오 재생 속도제어 방법
KR20010018885A (ko) * 1999-08-23 2001-03-15 구자홍 방송영상 인덱스 방법 및 티브이의 방송 프로그램 송수신장치
KR20010028735A (ko) * 1999-09-22 2001-04-06 구자홍 멀티미디어 스트림의 세그먼트간 요약/상세설명 관계 정보 구성 방법과 세그먼트간 요약/상세설명 관계 정보를 이용한 비디오 브라우징 방법
KR20010087683A (ko) * 2000-03-08 2001-09-21 구자홍 합성 키프레임을 이용한 비디오 브라우징 시스템

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1998034182A2 (en) * 1997-02-03 1998-08-06 Koninklijke Philips Electronics N.V. A method and device for navigating through video matter by means of displaying a plurality of key-frames in parallel
KR19990005766A (ko) * 1997-06-30 1999-01-25 배순훈 Dvcr의 파노라마식 고속 재생 방법
KR19990060354A (ko) * 1997-12-31 1999-07-26 윤종용 디지털 비디오 카세트 레코더의 서치모드 동작 수행 방법
KR19990081317A (ko) * 1998-04-28 1999-11-15 구자홍 동영상의 적응적 디스플레이 속도 자동조절 장치와 방법
JP2000083212A (ja) * 1998-09-04 2000-03-21 Victor Co Of Japan Ltd ディジタル信号記録再生装置
KR20000040087A (ko) * 1998-12-17 2000-07-05 구자홍 장면 변화분포를 이용한 비디오 재생 속도제어 방법
KR20010018885A (ko) * 1999-08-23 2001-03-15 구자홍 방송영상 인덱스 방법 및 티브이의 방송 프로그램 송수신장치
KR20010028735A (ko) * 1999-09-22 2001-04-06 구자홍 멀티미디어 스트림의 세그먼트간 요약/상세설명 관계 정보 구성 방법과 세그먼트간 요약/상세설명 관계 정보를 이용한 비디오 브라우징 방법
KR20010087683A (ko) * 2000-03-08 2001-09-21 구자홍 합성 키프레임을 이용한 비디오 브라우징 시스템

Also Published As

Publication number Publication date
KR20020003054A (ko) 2002-01-10

Similar Documents

Publication Publication Date Title
US10796722B2 (en) Method, system and computer program product for distributed video editing
US8307273B2 (en) Methods and apparatus for interactive network sharing of digital video content
US8645832B2 (en) Methods and apparatus for interactive map-based analysis of digital video content
US7823058B2 (en) Methods and apparatus for interactive point-of-view authoring of digital video content
Fan et al. Looking into video frames on small displays
JP2001142906A (ja) マルチメディアユーザプロファイル情報構造と、これを利用したマルチメディアを検索及びブラウジングする方法
KR100479653B1 (ko) 파노라마형 비디오 디스플레이 방법
KR20080080198A (ko) 화상재생시스템, 화상재생방법 및 화상재생프로그램
JP2000287165A (ja) 画像情報記述方法、映像検索方法、映像再生方法、映像検索装置、及び映像再生装置
KR100557858B1 (ko) 엠펙 동영상에서의 주요 정지 영상 추출 장치 및 방법
US20090328102A1 (en) Representative Scene Images

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20080919

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee