KR100540172B1 - 객체기반 다시점 비디오 서비스 시스템 및 그 방법 - Google Patents

객체기반 다시점 비디오 서비스 시스템 및 그 방법 Download PDF

Info

Publication number
KR100540172B1
KR100540172B1 KR1020030061915A KR20030061915A KR100540172B1 KR 100540172 B1 KR100540172 B1 KR 100540172B1 KR 1020030061915 A KR1020030061915 A KR 1020030061915A KR 20030061915 A KR20030061915 A KR 20030061915A KR 100540172 B1 KR100540172 B1 KR 100540172B1
Authority
KR
South Korea
Prior art keywords
image
view video
video service
panoramic image
service
Prior art date
Application number
KR1020030061915A
Other languages
English (en)
Other versions
KR20050024104A (ko
Inventor
김욱중
기명석
김규헌
김진웅
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020030061915A priority Critical patent/KR100540172B1/ko
Publication of KR20050024104A publication Critical patent/KR20050024104A/ko
Application granted granted Critical
Publication of KR100540172B1 publication Critical patent/KR100540172B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 객체기반 다시점 비디오 서비스 시스템 및 그 방법에 관한 것으로, 다시점 비디오 서비스 중 파노라믹 영상 생성을 통한 자유 시점 서비스에 있어서, 파노라믹 영상을 분할한 후 객체화하고 압축 부호화함으로써 사용자에게 시점별 해상도 차별화 서비스 및 시점별 화질 차별화 서비스를 제공하기 위한 객체기반 다시점 비디오 서비스 시스템 및 그 방법을 제공하는데 그 목적이 있다.
본 발명은 객체기반 다시점 비디오 서비스 시스템에 있어서, 다수의 부분 영상으로부터 파노라믹 영상을 생성하기 위한 영상 생성 수단; 및 상기 영상 생성 수단에서 생성된 파노라믹 영상을 객체화하여 객체 영상별로 압축 부호화하기 위한 영상 객체화 수단을 포함하여 이루어진 것을 특징으로 한다.
본 발명은, 다시점 비디오 서비스 중 파노라믹 영상 생성을 통한 자유 시점 서비스에 있어서, 파노라믹 영상을 분할한 후 객체화하고 압축 부호화함으로써, 사용자에게 시점별 해상도 차별화 서비스 및 시점별 화질 차별화 서비스를 제공할 수 있고, 상기와 같이 압축 부호화된 파노라믹 영상을 저장 및 전송하게 되면 자유 시점 서비스에서의 필요 계산량 및 전송량을 감소시킬 수 있기 때문에 단말기 가격의 하락을 유도할 수 있으며, 사용자에게 시점별 해상도 및 화질 차별화 서비스를 제공할 수 있기 때문에 사용자의 멀티미디어 이용 기회를 증대시킬 수 있다.
객체기반, 다시점 비디오 서비스, 파노라믹 영상, 분할, 객체화, 압축 부호화, 시점별 해상도 차별화 서비스, 시점별 화질 차별화 서비스

Description

객체기반 다시점 비디오 서비스 시스템 및 그 방법{System And Method For Serving Multi-visual Point Video Based On The Object}
도 1은 일반적인 다시점 비디오 서비스 시스템의 일실시예 구성도,
도 2는 본 발명에 따른 객체기반 다시점 비디오 서비스 시스템의 일실시예 구성도,
도 3은 도 2의 영상 생성 모듈에 대한 상세 설명도,
도 4는 도 2의 영상 객체화 모듈에 대한 일실시예 상세 구성도,
도 5는 본 발명에 따른 객체기반 다시점 비디오 서비스 방법에 대한 일실시예 전체 흐름도,
도 6은 도 5의 영상 생성 과정에 대한 일실시예 상세 흐름도,
도 7은 도 5의 영상 객체화 과정에 대한 일실시예 상세 흐름도,
도 8은 도 2의 영상 객체화 모듈에서의 시점별 해상도 차별화 서비스의 개념을 설명하는 설명도,
도 9는 도 2의 영상 객체화 모듈에서의 시점별 화질 차별화 서비스의 개념을 설명하는 설명도이다.
* 도면의 주요 부분에 대한 부호의 설명 *
100 : 영상 생성 모듈 110 : 영상 획득부
120 : 모자이크 처리부 200 : 영상 객체화 모듈
210 : 객체 생성부 220 : 객체기반 부호화부
221 : 객체 부호화기 222 : 다중화기
본 발명은 객체기반 다시점 비디오 서비스 시스템 및 그 방법에 관한 것으로, 더욱 상세하게는 다시점 비디오 서비스(Multi-visual Point Video Service) 중 파노라믹 영상(Panoramic Image) 생성을 통한 자유 시점 서비스에 있어서, 파노라믹 영상을 분할한 후 객체화하고 압축 부호화함으로써, 사용자에게 시점별 해상도 차별화 서비스 및 시점별 화질 차별화 서비스를 제공하기 위한, 객체기반 다시점 비디오 서비스 시스템 및 그 방법에 관한 것이다.
최근의 멀티미디어 이용 환경은 기존의 단순 소비형에서 사용자 참여형, 그리고 대화형의 형태로 발전되어 가고 있다. 이러한 추세에 따라 각자의 사용자가 원하는 바에 따라 차별화된 멀티미디어 컨텐츠를 제공하고, 또한 주어진 컨텐츠가 사용자의 의도에 따라 조작될 수 있도록 하는 서비스들이 제공 및 개발되어지고 있다.
상기 대화형 서비스의 일예로 다시점 비디오 서비스가 있는데, 이는 2개 이상의 카메라를 이용하여 영상을 획득하고, 이를 통하여 사용자에게 스테레오 영상을 통한 입체감 서비스 또는 파노라믹 영상 생성을 통한 자유 시점 서비스 등을 제공하는 것을 의미한다.
이하, 도 1을 참조하여 일반적인 다시점 비디오 서비스 시스템을 설명하면 다음과 같다.
도 1은 일반적인 다시점 비디오 서비스 시스템의 일실시예 구성도이다.
도 1에 도시된 바와 같이, 일반적인 다시점 비디오 서비스 시스템은 다수의 카메라(11), 전처리기(12), 압축 부호화기(13), 비트스트림 생성기(14)를 포함하여 이루어진다. 상기 복수개의 카메라(11)는 다수의 영상을 획득하여 전처리기(12)로 전달한다. 그러면, 상기 전처리기(12)는 상기 각 카메라(11)에서 획득된 다수의 영상을 이용하여 입체감 서비스를 위해 스테레오 영상을 생성하는 등의 전처리를 수행하거나 자유 시점 서비스를 위해 파노라믹 영상을 생성하기 위한 모자이킹 처리 등의 전처리를 수행한다. 상기 압축 부호화기(13)는 상기 전처리기(12)에서 전처리된 영상 정보에 대해 해당 영상 내에 존재하는 공간영역 및 시간영역 중복 정보를 제거하여 압축 부호화를 수행한다. 상기 비트스트림 생성기(14)는 상기 압축 부호화기(13)에서 압축 부호화된 영상에 대하여 저장장치(15)로의 저장을 위해 저장 비트스트림을 생성하여 해당 저장장치(15)로 출력하거나 상기 압축 부호화기(13)에서 압축 부호화된 영상에 대하여 사용자단말(16)로의 전송을 위해 전송 비트스트림을 생성하여 인터넷(16)을 포함하는 네트워크를 통해 해당 사용자단말(16)로 전송함으 로써 사용자에게 파노라믹 영상 등을 제공한다.
그런데, 상술한 종래의 다시점 비디오 서비스 시스템는 파노라믹 영상을 사용자에게 제공할 때, 모자이크 처리 과정을 통하여 생성된 파노라믹 영상 전체에 대해 압축 부호화를 수행하여 사용자에게 제공하기 때문에 다양한 추가적인 파노라믹 영상 서비스에 적절히 대응하지 못함으로써 다음과 같은 문제점을 가진다.
첫째로, 시점별 해상도 차이를 지니도록 하는 다시점 비디오 서비스에 부합하지 못한다. 즉, 사용자의 요구에 따라 전체 파노라믹 영상에서 일부 시점의 영상에 대해서는 높은 해상도로 저장 및 전송하고, 나머지 시점의 영상에 대해서는 낮은 해상도로 저장 및 전송해야 하는 경우가 존재한다. 그러나, 이러한 경우에도 종래의 방식은 전체 파노라믹 영상을 하나의 영상으로 압축 부호화하기 때문에 모든 시점의 영상이 동일한 해상도를 갖게 되어, 사용자의 요구에 효과적으로 부합하지 못하게 된다.
둘째로, 시점별 화질 차이를 지니도록 하는 다시점 비디오 서비스에 부합하지 못한다. 즉, 특별한 응용 분야에 있어서, 전체 파노라믹 영상에서 사용자가 관심을 지니는 중요 시점의 영상에 대해서는 높은 화질로 저장 및 전송하고, 나머지 시점의 영상에 대해서는 낮은 화질로 저장 및 전송해야 하는 경우가 존재한다. 그러나, 이러한 경우에도 종래의 방식은 전체 파노라믹 영상을 하나의 영상으로 압축 부호화하기 때문에 모든 시점의 영상이 동일한 화질을 갖게 되어, 사용자의 요구에 효과적으로 부합하지 못하게 된다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 제안된 것으로, 다시점 비디오 서비스 중 파노라믹 영상 생성을 통한 자유 시점 서비스에 있어서, 파노라믹 영상을 분할한 후 객체화하고 압축 부호화함으로써, 사용자에게 시점별 해상도 차별화 서비스 및 시점별 화질 차별화 서비스를 제공하기 위한, 객체기반 다시점 비디오 서비스 시스템 및 그 방법을 제공하는데 그 목적이 있다.
본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
상기와 같은 목적을 달성하기 위한 본 발명은, 객체기반 다시점 비디오 서비스 시스템에 있어서, 다수의 부분 영상으로부터 파노라믹 영상을 생성하기 위한 영상 생성 수단; 및 상기 영상 생성 수단에서 생성된 파노라믹 영상을 객체화하여 객체 영상별로 압축 부호화하기 위한 영상 객체화 수단을 포함하는 것을 특징으로 한다.
한편, 본 발명의 방법은, 객체기반 다시점 비디오 서비스 시스템에 적용되는 객체기반 다시점 비디오 서비스 방법에 있어서, 다수의 부분 영상으로부터 파노라믹 영상을 생성하는 제 1 단계; 및 상기 생성된 파노라믹 영상을 객체화하여 객체 영상별로 압축 부호화하는 제 2 단계를 포함하는 것을 특징으로 한다.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명하기로 한다.
먼저, 본 발명에 적용되는 객체기반 부호화에 대하여 설명하면 다음과 같다.
본 발명에서 객체기반 부호화란 전체 영상을 구성하는 부분 영역들을 객체로 정의하고, 그 객체들에 대하여 개별적인 압축 부호화를 수행하여 최종 비트스트림을 만들고, 사용자는 각 객체들을 복호화한 후, 해당 객체들을 결합함으로써 최종 복원 결과 영상을 만들 수 있도록 부호화하는 것을 의미한다. 하나의 입력된 영상에 대한 압축 부호화에 있어서, 전체 영상을 제이펙(JPEG), 엠펙(MPEG) 등의 압축 부호화 방식을 적용시키는 것이 최적의 압축 효율을 얻는데 효과적이다. 그러나, 만일 최종적으로 구성하고자 하는 영상이 몇 개의 영상들의 인위적인 구성을 통하여 얻어지는 경우라던가, 사용자의 선호도에 따라 특정 영역을 인위적으로 변경 가능하도록 하는 기능을 부여하고자 하는 경우에 있어서는 영상을 부분 영역별로 부호화하는 객체기반 부호화가 필요하다.
즉, 객체기반 부호화에서는 객체별로 독립적인 부호화가 이루어지기 때문에, 임의의 객체가 다른 객체에 비해 높은 화질을 지니도록 한다던가, 다른 객체에 비해 높은 해상도로 복원될 수 있도록 한다던가 하는 기능을 부여하기에 적합하다. 본 발명에서는 상술한 장점을 지니는 객체기반 부호화를 파노라믹 영상에 적용한다.
도 2는 본 발명에 따른 객체기반 다시점 비디오 서비스 시스템의 일실시예 구성도이다.
도 2에 도시된 바와 같이, 본 발명에 따른 객체기반 다시점 비디오 서비스 시스템은 영상 생성 모듈(100)과 영상 객체화 모듈(200)을 포함하여 이루어지는데, 상기 영상 생성 모듈(100)은 다수의 부분 영상으로부터 파노라믹 영상을 생성하고, 상기 영상 객체화 모듈(200)은 상기 영상 생성 모듈(100)에서 생성된 파노라믹 영상을 객체화하여 객체 영상별로 압축 부호화한다.
도 3은 도 2의 영상 생성 모듈(100)에 대한 상세 설명도이다.
도 3에 도시된 바와 같이, 상기 영상 생성 모듈(100)은 영상 획득부(110)와 모자이크 처리부(120)를 포함하여 이루어지는데, 상기 영상 획득부(110)는 다수의 카메라 등으로 이루어져 피사체(111) 일부에 대응하는 다수의 부분 영상(112a, 112b, 112c)을 획득하고, 상기 모자이크 처리부(120)는 상기 영상 획득부(110)에서 획득된 다수의 부분 영상(112a, 112b, 112c)을 입력받아 결합시켜 파노라믹 영상(113)을 생성한다.
도 4는 도 2의 영상 객체화 모듈(200)에 대한 일실시예 상세 구성도이다.
도 4에 도시된 바와 같이, 상기 영상 객체화 모듈(200)은 객체 생성부(210)와 객체기반 부호화부(220)를 포함하여 이루어지는데, 상기 객체 생성부(210)는 상기 영상 생성 모듈(100)에서 생성된 파노라믹 영상(113)을 입력받아 중복되지 않은 영상들로 분리하여 각각을 객체 영상(114a, 114b, 114c, 114d, 114e)으로 정의하고 해당 다수의 객체 영상(114a, 114b, 114c, 114d, 114e)이 상기 전체 파노라믹 영상(113)에서 차지하는 위치 정보를 갖는 화면 구성 정보를 생성시킨다.
상기 객체기반 부호화부(220)는 상기 객체 생성부(210)에서 생성된 다수의 객체 영상(114a, 114b, 114c, 114d, 114e)에 대해 객체기반 부호화 방식으로 압축 부호화하여 다중화하는 부분으로, 다수의 객체 부호화기(221)과 다중화기(222)를 포함하여 이루어진다. 상기 다수의 객체 부호화기(221)는 상기 다수의 객체 영상(114a, 114b, 114c, 114d, 114e)들을 일대일로 상응하여 압축 부호화하여 다수의 비트스트림을 생성하고, 상기 다중화기(222)는 상기 다수의 객체 부호화기(221)에서 각각 생성된 다수의 비트스트림과 상기 화면 구성 정보를 다중화하여 최종 비트스트림을 생성한 후에 사용자의 저장장치(310) 또는 사용자단말(320)로 전송한다.
도 5는 본 발명에 따른 객체기반 다시점 비디오 서비스 방법에 대한 일실시예 전체 흐름도이다.
먼저, 영상 생성 모듈(100)은 다수의 부분 영상(112)으로부터 파노라믹 영상(113)을 생성한다(510)
그리고, 상기 영상 객체화 모듈(200)은 상기 생성된 파노라믹 영상(113)을 객체화하여 객체 영상(114)별로 압축 부호화한다(520).
도 6은 도 5의 영상 생성 과정(510)에 대한 일실시예 상세 흐름도이다.
먼저, 상기 영상 생성 모듈(100)의 영상 획득부(110)가 다수의 카메라 등으로 피사체(111) 일부에 대응하는 다수의 부분 영상(112a, 112b, 112c)을 획득하여(511), 상기 모자이크 처리부(120)로 전송한다(512).
이에 따라, 상기 모자이크 처리부(120)가 상기 영상 획득부(110)로부터 상기 획득된 다수의 부분 영상(112a, 112b, 112c)을 입력받아(513), 다수의 부분 영상들을 결합시켜 파노라믹 영상(113)을 생성하여(514), 상기 영상 객체화 모듈(200)의 객체 생성부(210)로 전송한다(515).
도 7은 도 5의 영상 객체화 과정(520)에 대한 일실시예 상세 흐름도이다.
먼저, 상기 영상 객체화 모듈(200)의 객체 생성부(210)가 상기 모자이크 처리부(120)로부터 상기 생성된 파노라믹 영상(113)을 입력받아(521), 중복되지 않은 영상들로 분리하여 각각을 객체 영상(114a, 114b, 114c, 114d, 114e)으로 정의하고 해당 다수의 객체 영상(114a, 114b, 114c, 114d, 114e)이 상기 전체 파노라믹 영상(113)에서 차지하는 위치 정보를 갖는 화면 구성 정보를 생성한다(522).
그런 후, 상기 객체 생성부(210)가 상기 다수의 객체 영상(114a, 114b, 114c, 114d, 114e)을 상기 객체기반 부호화부(220)에 있는 다수의 객체 부호화기(221)로 각각 전송하고 상기 화면 구성 정보를 상기 객체기반 부호화부(220)의 다중화기(222)로 전송한다(523).
이에 따라, 상기 다수의 객체 부호화기(221)가 상기 다수의 객체 영상(114a, 114b, 114c, 114d, 114e)을 각각 입력받아(524), 해당 객체 영상(114a, 114b, 114c, 114d, 114e)별로 압축 부호화하여 다수의 비트스트림을 생성한 후(525), 상기 다중화기(222)로 전송한다(526).
이에 따라, 상기 다중화기(222)가 상기 다수의 비트스트림을 상기 다수의 객체 부호화기(221)로부터 입력받고 상기 화면 구성 정보를 상기 객체 생성부(210)로부터 입력받아(527), 해당 다수의 비트스트림과 화면 구성 정보를 다중화하여 최종 비트스트림을 생성하여 저장장치(310) 또는 사용자단말(320)로 전송한다(528). 따라서, 상기 최종 비트스트림은 저장장치(310)에 저장되거나 인터넷을 포함한 네트워크를 통해 사용자단말(320)로 전송된다. 그리고, 상기 저장장치(310)와 사용자단 말(320)에서는 상기 최종 비트스트림에 포함된 상기 화면 구성 정보에 따라 다수의 비트스트림을 복호화하여 각각의 객체 영상(114a, 114b, 114c, 114d, 114e)을 복원함으로써 전체 파노라믹 영상(113)을 획득한다.
이하, 본 발명의 실시예에 따른 시점별 해상도 차별화 서비스와 시점별 화질 차별화 서비스를 살펴보면 다음과 같다.
도 8은 도 2의 영상 객체화 모듈(200)에서의 시점별 해상도 차별화 서비스의 개념을 설명하는 설명도이다.
도 8에 도시된 바와 같이, 시점별 해상도 차별화 서비스를 사용자에게 제공하기 위해, 상기 영상 객체화 모듈(200)의 객체 생성부(210)는 상기 모자이크 처리부(120)로부터 입력받은 상기 파노라믹 영상(113)을 분리하여 객체 영상(114f, 114g)별로 해상도를 차별화해 객체화하고 화면 구성 정보를 생성하여 상기 객체기반 부호화부(220)로 전송한다.
이에 따라, 상기 객체기반 부호화부(220)의 객체 부호화기(221)는 상기 해상도가 차별화된 객체 영상(114f, 114g)별로 압축 부호화하여 다수의 비트스트림을 생성한다.
그리고, 상기 객체기반 부호화부(220)의 다중화기(222)는 상기 다수의 비트스트림과 화면 구성 정보를 다중화하여 최종 비트스트림을 생성한 후 사용자의 저장장치(310) 또는 사용자단말(320)로 전송한다.
구체적으로 도 8에서, 상기 객체 생성부(210)는 상기 모자이크 처리부(120)로부터 입력받은 상기 파노라믹 영상(113)을 분리해 고해상도 객체 영상(114f)과 저해상도 객체 영상(114g)으로 각각 객체화하여 상기 객체 부호화기(221)로 전송하고 화면 구성 정보를 생성하여 상기 다중화기(222)로 전송한다.
이에 따라, 상기 객체 부호화기(221)는 상기 고해상도 객체 영상(114f)을 압축 부호화하여 고해상도 비트스트림을 생성하고 상기 저해상도 객체 영상(114g)을 압축 부호화하여 저해상도 비트스트림을 생성한다.
그리고, 상기 다중화기(222)는 상기 고해상도 비트스트림, 저해상도 비트스트림 및 화면 구성 정보를 다중화하여 최종 비트스트림을 생성한 후 사용자의 저장장치(310) 또는 사용자단말(320)로 전송한다.
도 9는 도 2의 영상 객체화 모듈(200)에서의 시점별 화질 차별화 서비스의 개념을 설명하는 설명도이다.
도 9에 도시된 바와 같이, 시점별 화질 차별화 서비스를 사용자에게 제공하기 위해, 상기 영상 객체화 모듈(200)의 객체 생성부(210)는 상기 모자이크 처리부(120)로부터 입력받은 상기 파노라믹 영상(113)을 분리하여 객체 영상(114h, 114i)으로 각각 객체화하고 화면 구성 정보를 생성하여 상기 객체기반 부호화부(220)로 전송한다.
이에 따라, 상기 객체기반 부호화부(220)의 객체 부호화기(221)는 상기 객체 영상(114h, 114i)별로 화질을 차별화해 압축 부호화하여 다수의 비트스트림을 생성한다.
그리고, 상기 객체 부호화부(220)의 다중화기(222)는 상기 다수의 비트스트림과 화면 구성 정보를 다중화하여 최종 비트스트림을 생성한 후 사용자의 저장장 치(310) 또는 사용자단말(320)로 전송한다.
구체적으로 도 9에서, 상기 객체 생성부(210)는 상기 모자이크 처리부(120)로부터 입력받은 상기 파노라믹 영상(113)을 분리해 객체 영상(114h, 114i)으로 각각 객체화하여 상기 한 객체 영상(114h)을 상기 한 객체 부호화기(221a)로 전송하고 상기 다른 객체 영상(114i)을 상기 다른 객체 부호화기(221b)로 전송하며, 화면 구성 정보를 생성하여 상기 다중화기(222)로 전송한다
이에 따라, 상기 한 객체 부호화기(221a)는 상기 한 객체 영상(114h)에 대해 고화질 압축 부호화하여 고화질 비트스트림을 생성하고 상기 다른 객체 부호화기(221b)는 상기 다른 객체 영상(114i)에 대해 저화질 압축 부호화하여 저화질 비트스트림을 생성한다.
그리고, 상기 다중화기(222)는 상기 고화질 비트스트림과, 저화질 비트스트림 및 화면 구성 정보를 다중화하여 최종 비트스트림을 생성한 후 사용자의 저장장치(310) 또는 사용자단말(320)로 전송한다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
상기와 같이 본 발명은, 다시점 비디오 서비스 중 파노라믹 영상 생성을 통 한 자유 시점 서비스에 있어서, 파노라믹 영상을 분할한 후 객체화하고 압축 부호화함으로써, 사용자에게 시점별 해상도 차별화 서비스 및 시점별 화질 차별화 서비스를 제공할 수 있고, 상기와 같이 압축 부호화된 파노라믹 영상을 저장 및 전송하게 되면 자유 시점 서비스에서의 필요 계산량 및 전송량을 감소시킬 수 있기 때문에 단말기 가격의 하락을 유도할 수 있으며, 사용자에게 시점별 해상도 및 화질 차별화 서비스를 제공할 수 있기 때문에 사용자의 멀티미디어 이용 기회를 증대시킬 수 있다.

Claims (11)

  1. 객체기반 다시점 비디오 서비스 시스템에 있어서,
    다수의 부분 영상으로부터 파노라믹 영상을 생성하기 위한 영상 생성 수단; 및
    상기 영상 생성 수단에서 생성된 파노라믹 영상을 객체화하여 객체 영상별로 압축 부호화하기 위한 영상 객체화 수단
    을 포함하는 객체기반 다시점 비디오 서비스 시스템.
  2. 제 1 항에 있어서,
    상기 영상 생성 수단은,
    피사체 일부에 각각 대응하는 다수의 부분 영상을 획득하기 위한 영상 획득부; 및
    상기 영상 획득부에서 획득된 다수의 부분 영상을 결합시켜 파노라믹 영상을 생성하기 위한 모자이크 처리부
    를 포함하는 객체기반 다시점 비디오 서비스 시스템.
  3. 제 1 항 또는 제 2 항에 있어서,
    상기 영상 객체화 수단은,
    상기 영상 생성 수단에서 생성된 파노라믹 영상을 중복되지 않은 영상들로 분리하여 각각을 객체 영상으로 정의하고 해당 다수의 객체 영상이 상기 전체 파노라믹 영상에서 차지하는 위치 정보를 갖는 화면 구성 정보를 생성하기 위한 객체 생성부; 및
    상기 객체 생성부에서 생성된 다수의 객체 영상에 대해 객체기반 부호화 방식으로 압축 부호화하여 다중화하기 위한 객체기반 부호화부
    를 포함하는 객체기반 다시점 비디오 서비스 시스템.
  4. 제 3 항에 있어서,
    상기 객체기반 부호화부는,
    상기 객체 생성부에서 생성된 다수의 객체 영상별로 압축 부호화하여 다수의 비트스트림을 생성하기 위한 다수의 객체기반 부화화기; 및
    상기 다수의 객체기반 부화화기에서 생성된 다수의 비트스트림과 상기 객체 생성부에서 생성된 화면 구성 정보를 다중화하여 최종 비트스트림을 생성하여 전송하기 위한 다중화기
    를 포함하는 객체기반 다시점 비디오 서비스 시스템.
  5. 제 3 항에 있어서,
    상기 객체 생성부는,
    상기 영상 생성 수단에서 생성된 파노라믹 영상을 분리하여 각 객체 영상별로 해상도를 차별화하여 객체화하는 것을 특징으로 하는 객체기반 다시점 비디오 서비스 시스템.
  6. 제 4 항에 있어서,
    상기 다수의 객체 부호화기는,
    상기 객체 생성부에서 생성된 다수의 객체 영상에 대해 각 객체 영상별로 화질을 차별화하여 압축 부호화하는 것을 특징으로 하는 객체기반 다시점 비디오 서비스 시스템.
  7. 객체기반 다시점 비디오 서비스 시스템에 적용되는 객체기반 다시점 비디오 서비스 방법에 있어서,
    다수의 부분 영상으로부터 파노라믹 영상을 생성하는 제 1 단계; 및
    상기 생성된 파노라믹 영상을 객체화하여 객체 영상별로 압축 부호화하는 제 2 단계
    를 포함하는 객체기반 다시점 비디오 서비스 방법.
  8. 제 7 항에 있어서,
    상기 제 1 단계는,
    피사체 일부에 각각 대응하는 다수의 부분 영상을 획득하는 제 3 단계; 및
    상기 획득된 다수의 부분 영상을 결합시켜 파노라믹 영상을 생성하는 제 4 단계
    를 포함하는 객체기반 다시점 비디오 서비스 방법.
  9. 제 7 항 또는 제 8 항에 있어서,
    상기 제 2 단계는,
    상기 생성된 파노라믹 영상을 중복되지 않은 영상들로 분리하여 각각을 객체 영상으로 정의하고 해당 다수의 객체 영상이 상기 전체 파노라믹 영상에서 차지하는 위치 정보를 포함하는 화면 구성 정보를 생성하는 제 5 단계;
    상기 다수의 객체 영상별로 압축 부호화하여 다수의 비트스트림을 생성하는 제 6 단계; 및
    상기 다수의 비트 스트림과 화면 구성 정보를 다중화하여 최종 비트스트림을 생성하여 전송하는 제 7 단계
    를 포함하는 객체기반 다시점 비디오 서비스 방법.
  10. 제 9 항에 있어서,
    상기 제 5 단계의 객체 영상 정의 과정은,
    상기 파노라믹 영상을 분리하여 각 객체 영상별로 해상도를 차별화해 객체화하는 것을 특징으로 하는 객체기반 다시점 비디오 서비스 방법.
  11. 제 9 항에 있어서,
    상기 제 6 단계의 압축 부호화 과정은,
    상기 각 객체 영상별로 화질을 차별화해 압축 부호화하는 것을 특징으로 하는 객체기반 다시점 비디오 서비스 방법.
KR1020030061915A 2003-09-04 2003-09-04 객체기반 다시점 비디오 서비스 시스템 및 그 방법 KR100540172B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020030061915A KR100540172B1 (ko) 2003-09-04 2003-09-04 객체기반 다시점 비디오 서비스 시스템 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020030061915A KR100540172B1 (ko) 2003-09-04 2003-09-04 객체기반 다시점 비디오 서비스 시스템 및 그 방법

Publications (2)

Publication Number Publication Date
KR20050024104A KR20050024104A (ko) 2005-03-10
KR100540172B1 true KR100540172B1 (ko) 2006-01-10

Family

ID=37231531

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030061915A KR100540172B1 (ko) 2003-09-04 2003-09-04 객체기반 다시점 비디오 서비스 시스템 및 그 방법

Country Status (1)

Country Link
KR (1) KR100540172B1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100732958B1 (ko) * 2004-08-13 2007-06-27 경희대학교 산학협력단 20면체 파노라마 영상의 부호화 및 복호화를 위한 방법 및장치
KR100728240B1 (ko) * 2005-11-11 2007-06-13 한국전자통신연구원 복수 개의 다시점 영상을 단일의 대영상으로 변환하는 장치및 그 방법
KR100789905B1 (ko) * 2005-12-08 2008-01-02 한국전자통신연구원 다시점 파노라믹 영상 재생 장치 및 그 방법
KR100758304B1 (ko) * 2005-12-08 2007-09-12 한국전자통신연구원 다시점 파노라믹 비디오 콘텐츠의 제작방법 및 이에 따른콘텐츠의 재생방법
WO2009051457A2 (en) * 2007-10-19 2009-04-23 Samsung Electronics Co., Ltd. Method of recording three-dimensional image data

Also Published As

Publication number Publication date
KR20050024104A (ko) 2005-03-10

Similar Documents

Publication Publication Date Title
KR100556826B1 (ko) Ｍｐｅｇ-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법
US6195116B1 (en) Multi-point video conferencing system and method for implementing the same
JP4389883B2 (ja) 符号化装置、符号化方法、符号化方法のプログラム、符号化方法のプログラムを記録した記録媒体
US6055274A (en) Method and apparatus for compressing multi-view video
JP4930810B2 (ja) 画像処理装置、画像処理方法、および記録媒体
CA2588639C (en) Scalable multi-view image encoding and decoding apparatuses and methods
KR100523052B1 (ko) 다중 디스플레이 방식을 지원하는 다시점 동영상의 객체 기반 부호화 장치 및 그 방법과 그를 이용한 객체 기반 송수신 시스템 및 그 방법
CN1204757C (zh) 一种立体视频流编码/解码器及其立体视频编解码系统
US8665968B2 (en) Method and system for 3D video coding using SVC spatial scalability
CN109391825A (zh) 一种视频转码方法及其装置、服务器、可读存储介质
KR100703715B1 (ko) 다시점 3차원 동영상 송수신 시스템
US20090190662A1 (en) Method and apparatus for encoding and decoding multiview video
JP2010220221A (ja) 三次元ビデオ符号化に関するシステム及び方法
Lim et al. A multiview sequence CODEC with view scalability
TW201031216A (en) Method and system for multiple resolution video delivery
CN107113447A (zh) 高帧速率‑低帧速率传输技术
JP2011061852A (ja) 画像復号化装置および画像復号化方法
US20090201992A1 (en) Method and apparatus for encoding and decoding hopping default view for multiple cameras system
KR100874226B1 (ko) 다시점 화상 및 3차원 오디오 송수신 장치 및 이를 이용한송수신 방법
US9686567B2 (en) Method and apparatus for integrated encoding/decoding of different multilayer video codec
KR100540172B1 (ko) 객체기반 다시점 비디오 서비스 시스템 및 그 방법
JP4104895B2 (ja) 立体画像符号化装置および立体画像復号装置
US20200267199A1 (en) Method and system for transmitting video
KR20080081407A (ko) 하이브리드 다시점 및 계층화 비디오 코딩 방법과 장치
KR100566100B1 (ko) 3차원 다시점 멀티미디어 처리용 적응형 다중화/역다중화장치 및 그 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20081202

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee