KR20100016803A - 내용 적응적 해상도 비디오 압축을 위한 영상 분석 장치 및방법 - Google Patents

내용 적응적 해상도 비디오 압축을 위한 영상 분석 장치 및방법 Download PDF

Info

Publication number
KR20100016803A
KR20100016803A KR1020080076429A KR20080076429A KR20100016803A KR 20100016803 A KR20100016803 A KR 20100016803A KR 1020080076429 A KR1020080076429 A KR 1020080076429A KR 20080076429 A KR20080076429 A KR 20080076429A KR 20100016803 A KR20100016803 A KR 20100016803A
Authority
KR
South Korea
Prior art keywords
image
resolution
distance
mapping table
camera
Prior art date
Application number
KR1020080076429A
Other languages
English (en)
Inventor
정철
Original Assignee
주식회사 몬도시스템즈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 몬도시스템즈 filed Critical 주식회사 몬도시스템즈
Priority to KR1020080076429A priority Critical patent/KR20100016803A/ko
Priority to US12/536,039 priority patent/US20100034520A1/en
Publication of KR20100016803A publication Critical patent/KR20100016803A/ko
Priority to US15/825,825 priority patent/US20180091808A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 본 발명은 영상 처리 시스템에서 영상을 압축하는 장치 및 방법에 관한 것으로, 특히 영상 처리 시스템에서 프레임 또는 프레임 그룹 별로 해상도를 결정하여 압축하는 적응적 영상 분석 장치 및 방법에 관한 것으로, 본 발명의 적응적 영상 분석 장치는 상술한 바를 해결하기 위한 본 발명의 영상 분석 장치는 입력된 영상에 대해 프레임별 또는 장면별로 영상을 분석하여 미리 결정된 기준에 따라 해상도를 결정하는 분석부와, 상기 결정된 해상도를 근거로 상기 검출된 영상을 압축하는 압축부를 포함함을 특징으로 한다. 본 발명의 적응적 영상 분석 방법은 입력된 영상에 대해 프레임별 또는 장면별로 영상을 분석하여 미리 결정된 기준에 따라 해상도를 결정하는 제 1과정과, 상기 결정된 해상도를 근거로 상기 검출된 영상을 압축하는 제 2과정을 포함함을 특징으로 한다.
MPEG, 비트 레이트, 영상 분석

Description

내용 적응적 해상도 비디오 압축을 위한 영상 분석 장치 및 방법{APPARATUS AND METHOD FOR ANALYZING PICTURES FOR VIDEO COMPRESSION WITH CONTENT-ADAPTIVE RESOLUTION}
본 발명은 영상 처리 시스템에서 영상을 압축하는 장치 및 방법에 관한 것으로, 특히 영상 처리 시스템에서 프레임 또는 프레임 그룹 별로 해상도를 결정하여 압축하는 적응적 영상 분석 장치 및 방법에 관한 것이다.
동영상의 인코딩을 위해 필요한 비트 레이트는 다양한 변수에 의해 영향을 받지만, 기본적으로 동영상의 해상도에 가장 크게 영향을 받게 된다. 하나의 동영상 내에서 해상도를 바꾸어 전송하는 기술은 MPEG2 시스템 내에서 SD와 HD의 클립 (짧은 동영상)을 섞어서 방송하는 방식과, H.264에서 시퀀스(Sequence)별로 해상도의 변경이 가능하도록 되어 있는 등의 방식이 있다. 그러나, 이러한 종래 기술들은 기본적으로 이미 여러 해상도로 되어 있는 비디오(video) 클립을 섞어 인코딩/디코딩한 후, 전송하는 방법에 초점이 맞추어져 있을 뿐이다. 즉 종래에는 비트 레이트를 효율적으로 줄이는 데 목적이 있는 것이 아니라 전송 방법에 대해 제안하고 있어 이를 이용하여 비트 레이트를 줄이는 방법은 공지된 것이 없다.
따라서 본 발명의 목적은 영상 처리 시스템에서 효율적으로 비트 레이트를 줄일 수 있는 적응적 영상 분석 장치 및 방법을 제공함에 있다.
본 발명의 다른 목적은 영상 처리 시스템에서 동영상의 프레임 또는 장면별로 적절한 해상도를 결정하는 적응적 영상 분석 장치 및 방법을 제공함에 있다.
본 발명의 또 다른 목적은 영상 처리 시스템에서 동영상의 프레임 또는 장면별로 적응적으로 영상의 해상도를 결정하는 저장 기록 매체를 제공함에 있다.
상술한 바를 해결하기 위한 본 발명의 영상 분석 장치는 입력된 영상에 대해 프레임별 또는 장면별로 영상을 분석하여 미리 결정된 기준에 따라 해상도를 결정하는 분석부와, 상기 결정된 해상도를 근거로 상기 검출된 영상을 압축하는 압축부를 포함함을 특징으로 한다.
상기 분석부는 상기 입력된 영상에 대해 카메라와 피사체의 거리를 추정하는 영상 분석부와, 미리 결정된 매핑 테이블에 따라 상기 추정된 거리에 따른 해상도를 결정하는 해상도 결정부를 포함함을 특징으로 한다.
상기 매핑 테이블은 상기 카메라와 피사체간의 거리가 근접할수록 저해상도로, 상기 카메라와 피사체간의 거리가 근접할수록 고해상도로 매핑됨을 특징으로 한다.
상기 분석부의 다른 일례는 입력된 영상에 대해 프레임별 또는 장면별로 영 상을 분석하여 각 영상에 대해 에지(edge)의 두께를 검출하는 영상 분석부와, 미리 결정된 매핑 테이블에 따라 상기 검출된 에지의 두께에 따른 해상도를 결정하는 해상도 결정부를 포함함을 특징으로 한다.
상기 매핑 테이블은 상기 검출된 에지의 두께가 두꺼울수록 저해상도로, 상기 검출된 에지의 두께가 얇을수록 고해상도로 매핑됨을 특징으로 한다.
본 발명의 영상 분석 방법은 입력된 영상에 대해 프레임별 또는 장면별로 영상을 분석하여 미리 결정된 기준에 따라 해상도를 결정하는 제 1과정과, 상기 결정된 해상도를 근거로 상기 검출된 영상을 압축하는 제 2과정을 포함함을 특징으로
상기 제 1과정은 상기 입력된 영상에 대해 카메라와 피사체의 거리를 추정하는 과정과, 미리 결정된 매핑 테이블에 따라 상기 추정된 거리에 따른 해상도를 결정하는 과정을 포함함을 특징으로 한다.
상기 매핑 테이블은 상기 카메라와 피사체간의 거리가 근접할수록 저해상도로, 상기 카메라와 피사체간의 거리가 멀어질수록 고해상도로 매핑됨을 특징으로 한다.
상기 제 1과정의 다른 일례는 입력된 영상에 대해 프레임 또는 장면별로 영상을 분석하여 각 영상에 대해 에지(edge)의 두께를 검출하는 과정과, 미리 결정된 매핑 테이블에 따라 상기 검출된 에지의 두께에 따른 해상도를 결정하는 과정을 포함함을 특징으로 한다.
상기 매핑 테이블은 상기 검출된 에지의 두께가 두꺼울수록 저해상도로, 상기 검출된 에지의 두께가 얇을수록 고해상도로 매핑됨을 특징으로 한다.
본 발명의 적응적 영상 분석 방법을 기록하는 매체는 입력된 영상에 대해 프레임별 또는 장면별로 영상을 분석하여 미리 결정된 기준에 따라 해상도를 결정하는 제 1과정과, 상기 결정된 해상도를 근거로 상기 검출된 영상을 압축하는 제 2과정을 포함함을 특징으로 한다.
상기 제 1과정은 상기 입력된 영상에 대해 카메라와 피사체의 거리를 추정하는 과정과, 미리 결정된 매핑 테이블에 따라 상기 추정된 거리에 따른 해상도를 결정하는 과정을 포함함을 특징으로 한다.
상기 매핑 테이블은 상기 카메라와 피사체간의 거리가 근접할수록 저해상도로, 상기 카메라와 피사체간의 거리가 멀어질수록 고해상도로 매핑됨을 특징으로 한다.
상기 제 1과정의 다른 일례는 입력된 영상에 대해 프레임 또는 장면별로 영상을 분석하여 각 영상에 대해 에지(edge)의 두께를 검출하는 과정과, 미리 결정된 매핑 테이블에 따라 상기 검출된 에지의 두께에 따른 해상도를 결정하는 과정을 포함함을 특징으로 한다.
상기 매핑 테이블은 상기 검출된 에지의 두께가 두꺼울수록 저해상도로, 상기 검출된 에지의 두께가 얇을수록 고해상도로 매핑됨을 특징으로 한다.
본 발명은 동영상 자체에 내재되어 있는 필요 해상도에 따라 자유자재로 해상도를 변화시키면서 동영상을 압축함으로써, 동영상 압축에 필요한 비트 레이트를 획기적으로 줄일 수 있을 뿐 만 아니라, 동일 비트 레이트인 경우, 상대적으로 더 좋은 화질을 얻을 수 있다.
이하 본 발명의 바람직한 실시 예들의 상세한 설명이 첨부된 도면들을 참조하여 설명될 것이다. 도면들 중 동일한 구성들은 가능한 한 어느 곳에서든지 동일한 부호들을 나타내고 있음을 유의하여야 한다. 하기 설명에서 구체적인 특정사항들이 나타나고 있는데, 이는 본 발명의 보다 전반적인 이해를 돕기 위해 제공된 것이다. 그리고 본 발명을 설명함에 있어, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
본 발명은 영상 처리 시스템에서 인코딩된 영상의 분석을 통해 적절한 해상도를 영상의 각 부분에 대한 해상도를 달리하여 영상을 압축하는 방안을 제안한다. 이에 우선 본 발명의 영상 분석 장치를 설명한 후, 본 발명에 따른 영상 분석 방법을 실시 예별로 설명하기로 한다.
도 1은 본 발명의 영상 분석 장치(100)를 나타낸 블록도이다.
도 1를 참조하면, 본 발명의 영상 분석 장치(100)는 입력된 영상을 분석하여 해상도를 결정하는 분석부(110)와 상기 결정된 해상도를 근거로 해당 영상을 압축하는 압축부(120)를 포함한다.
상기 분석부(110)는 입력된 영상에 대한 프레임(frame)별로 영상을 검출하여 미리 주어진 기준에 따른 해상도를 결정할 수 있으며, 또한 프레임의 그룹인 장면별로도 해상도를 결정할 수 있다. 장면별로 해상도를 결정하는 것이 가능한 이유는 연속되는 동일한 장면에 속한 프레임들의 해상도는 유사할 것이기 때문이다. 이 경우, 먼저 MAD등의 방법으로 장면을 분석하고, 장면별로 해상도를 결정하여, 장면내의 모든 프레임에 동일한 해상도를 할당하게 된다. 본 발명의 영상 압축 방법에서는 프레임별, 또는 장면별로 해상도를 결정할 수 있다. 즉 영상 압축 기술에 따라 다양하게 적용될 수 있게 된다. 그러나 MPEG이나 H.264등에서는 프레임 구조상 프레임별보다는 장면별로 해상도를 결정하는 것이 효율적일 수 있다.
본 발명의 상기 분석부(110)는 영상 처리 시스템에 따라 프레임 또는 장면별로 두가지 방안에 모두 적용될 수 있다. 이하 설명에서는 상기 두 가지 방안에 방법에 대한 설명은 유사하므로 같이 서술하도록 하겠다.
상기 압축부(120)는 프레임별 또는 장면별로 주어진 해상도에 따라 영상 압축을 수행한다. 여기서, 상기 압축부(120)는 프레임별 또는 프레임의 그룹별로 해상도의 변화를 허용하는 압축방법은 어떤 것이든 사용할 수 있다. 예를 들어 H.264에서는 시퀀스(Sequence)별로 해상도의 변경이 가능하며, 동영상 내에서 임의의 프레임들을 그룹핑(grouping)한 것을 시퀀스(Sequence)로 정할 수 있다.
도 2는 본 발명 영상 분석 장치(100)에서의 분석부(110)의 구조를 나타낸 블록도이다. 도 2를 참조하면, 상기 분석부(110)는 영상 분석부(211)과, 해상도 결정부(213)를 포함한다.
본 발명의 상기 분석부(110)는 상술한 바와 같이 프레임 또는 장면 별로 해 상도를 결정하게 된다. 상기 해상도를 결정하는 방안은 여러 가지가 가능하며, 본 발명에서는 다음의 두 가지 방안을 이용하여 설명한다.
첫 번째 방안은 카메라와 피사체의 거리에 따라 해상도를 결정하는 방법이다. 즉 카메라와 피사체의 거리가 가까운 경우, 저해상도에 가깝게 결정하며, 카메라와 피사체의 거리가 먼 경우, 고해상도에 가깝게 해상도를 결정하게 된다. 일례로, 여기서 상기 저해상도는 대략 720x480화소의 SD급 해상도를 의미할 수 있이며, 상기 고해상도는 1920 x 1080 화소 또는 1280 x 720 화소의 HD급을 의미할 수 있다.
본 방안에 경우 상기 영상 분석부(211)는 입력된 영상에 대해 카메라와 피사체의 거리를 영상분석을 통해 추정한다. 이후 상기 해상도 결정부(213)는 상기 거리와 소정 기준에 따른 매핑 테이블에 따라 해상도를 결정하게 된다.
상기 카메라와 피사체의 거리에 따른 매핑 테이블의 일례는 다음의 도 6과 도 7에 의해 나타내었다. 도 6에서와 거리와 화소를 비례적으로 매핑하는 것도 가능하며, 도 7에서와 같이 일정 범위내의 거리에 대해 일정 화소에 대응되도록 매핑하는 것도 가능하다. 이외에도 매핑 방법에 있어서, 가까운 거리에는 SD급을 먼 거리에서는 HD급에 가깝게 해상도를 결정하도록 매핑하게 되면 어떠한 방법도 사용이 가능하다.
상기 카메라와 피사체의 거리는 화면 내 물체들의 추정 평균 거리를 나타내는데, 이는 다음의 문헌들에 개시된 방법을 이용할 수 있다. 그러나 본 발명에서 추정하는 거리는 상기 문헌들에 국한되지는 않으며, 거리 추정에 관한 모든 방법이 사용이 가능하다.
문헌1 ("Depth estimation from image structure", Torralba, A.; Oliva, A.; Pattern Analysis and Machine Intelligence, IEEE Transactions on, Volume 24, Issue 9, Sept. 2002 Page(s):1226-1238), 문헌 2("A generalized depth estimation algorithm with a single image", Shang-Hong Lai; Chang-Wu Fu; Shyang Chang; Pattern Analysis and Machine Intelligence, IEEE Transction, Volume 14, Issue 4, April 1992 Page(s):405-411), 문헌 3("Depth estimation based on thick oriented edges in images", Simon, C.; Bicking, F.; Simon, T.; Industrial Electronics, 2004 IEEE International Symposium on, Volume 1, Issue , 4-7 May 2004 Page(s): 135-140 vol. 1)
두 번째 방안은 장면 내에서 가장 두껍고 강한 에지(edge)의 두께를 고려하는 방안이다. 인간의 시각은 가장 두껍고 강한 에지에 민감하게 반응하므로, 두껍고 강한 에지의 두께에 따라 해상도를 결정하게 된다.
상기 영상 분석부(211)는 입력된 영상에 대해 프레임 또는 장면별로 영상을 검출하여, 각 영상에 대해 에지의 두께를 결정한다. 상기 화면의 에지의 두께를 결정하는 일례는 다음과 같다. 소벨 오퍼레이터(Sobel operator) 또는 캐니 오퍼레이터(Canny operator) 등의 임의의 에지 오퍼레이터로 픽셀(pixel)별 에지 강도를 구한 후 이것을 임계값 처리(thresholding)하여 에지 마스크(edge mask)를 구한다. 상기 구해진 에지 마스크의 거리 변환(distance transform)을 통한 세션화(thinning)에 의해 에지의 중심선과, 각 중심의 에지 경계로부터의 거리를 구할 수 있다. 상기 거리가 해당 에지 중심 화소가 속한 에지의 두께가 된다. 여기서 에지 두께 값의 히스토그램에서 최빈값을 구하면, 그것을 해당 영상의 가장 주요한 에지 두께로 결정할 수 있다.
해당 영상의 가장 주요한 에지의 두께가 결정되면, 상기 해상도 결정부(213)는 상기 검출된 에지에 따른 해상도를 결정하게 된다. 일반적으로 거리가 가까울수록 영상에 두꺼운 에지가 많으므로, 에지가 강하고 두꺼울수록 저화질의 해상도를 결정하도록 제어하며, 이에 따라 상기 해상도 결정부(213)는 에지의 두께에 따른 매핑 테이블을 구비하고 있어야 한다.
도 3은 본 발명의 영상 분석 방법을 개략적으로 나타낸 순서도로서, 영상 분석 장치(100)에서의 동작을 나타내었다.
도 3을 참조하면, 본 발명의 영상 분석 장치(100)는 301 단계에서 인코딩할 영상을 수신한다. 그런 후, 303 단계에서 상기 수신 영상에 대한 속성을 프레임 또는 장면 별로 분석한다. 여기서, 상기 영상 분석 장치(100)가 영상을 분석하는 방안은 상기 설명하였듯이 해상도를 결정하는 방안에 따라 다르게 동작하며, 이하 도면에서 상세히 설명한다.
이후 상기 영상 분석 장치(100)는 305단계에서 상기 영상 분석의 결과를 근거로 수신 영상에 대한 해상도를 결정하고, 307 단계에서 상기 결정된 해상도로 상기 수신 영상을 압축하게 된다.
그러면, 상기 영상 분석에 따른 실시 예별로 설명하겠다.
도 4는 본 발명의 바람직한 제1 실시 예에 따른 영상 분석 방법을 나타낸 순 서도로서, 카메라와 피사체의 거리에 따라 해상도를 결정하는 방안을 나타내었다.
도 4를 참조하면, 상기 영상 분석부(211)는 401단계에서 입력된 영상에 대해 프레임 또는 장면 별로 영상을 분석한다. 그리고 상기 영상 분석부(211)는 403단계에서 상기 분석된 영상에서 카메라와 피사체의 거리를 검출하게 된다. 여기서 상기 카메라와 피사체의 거리를 검출하는 방법은 상기 언급한 문헌들의 방법을 사용할 수 있으며, 또한 이외에도 화면내에서 거리 검출에 관한 어떠한 방법을 이용하는 것도 무방하다.
이후 상기 해상도 결정부(213)는 405단계에서 미리 결정된 매핑 테이블을 이용하여 상기 검출된 거리에 따른 해상도를 결정하게 된다. 상기 매핑 테이블은 미리 설정되어 있는 것으로, 도 6 또는 도 7에 나타낸 바와 같이 설정할 수 있다. 상술한 바와 같이 본 발명에서는 거리가 가까울수록 저해상도로 결정하면, 거리가 멀어질수록 고해상도로 결정하게 된다. 예를 들어, 50cm 거리는 얼굴 샷 정도에 해당한다고 하면 SD 급의 해상도를, 3m 이상의 거리가 전신샷에 해당한다면 HD급의 해상도를 지정하는 것이 적절하다.
도 5는 본 발명의 바람직한 제2 실시 예에 따른 영상 분석 방법을 나타낸 순서도서, 영상의 에지를 이용하여 해상도를 결정하는 방안을 나타내었다.
도 5를 참조하면, 상기 영상 분석부(211)는 501단계에서 입력된 영상에 대해 프레임 또는 장면 별로 영상을 검출한다. 그리고 상기 영상 분석부(211)는 503단계에서 상기 검출된 영상에서 에지의 두께를 검출하게 된다. 상기 에지의 두께를 검출하는 과정은 상술하였으므로 별도의 설명은 생략하기로 한다.
이후 상기 해상도 결정부(213)는 505단계에서 미리 결정된 매핑 테이블을 이용하여 상기 검출된 에지의 두께에 따른 해상도를 결정하게 된다. 본 실시예에서도 상기 매핑 테이블은 미리 설정되어 있어야 한다. 상기 매핑 태이블은 상기 언급한 바와 같이 에지가 강하고 두꺼울수록 저화질의 해상도로, 에지가 얇을수록 고해상도로 매핑되도록 구현하면 된다.
상술한 바와 같이 본 발명의 영상 분석 방법은 하나의 동영상 내에서도 매 프레임별로 또는 프레임의 그룹(장면) 별로 해상도를 다르게 함으로써 효율적으로 동영상을 압축할 수 있게 된다. 또한 본 발명의 제1 및 제2 실시예에서는 영상 분석에서 영상의 거리나 두께만을 언급하였지만 영상의 분석에서 자막이나, 제목등의 문자가 있는 부분을 검출하여 문자가 있는 프레임은 고해상도로 결정하는 등의 추가 처리가 가능하다.
한편 본 발명의 상세한 설명에서는 하나의 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 안되며 후술하는 특허청구의 범위뿐 아니라 이 특허청구의 범위와 균등한 것들에 의해서 정해져야 한다.
도 1은 본 발명에 따른 영상 분석 장치를 나타낸 블록도
도 2는 본 발명의 영상 분석 장치에서의 분석부를 상세히 나타낸 블록도
도 3은 본 발명의 영상 분석 방법을 개략적으로 나타낸 순서도
도 4는 본 발명의 바람직한 제1 실시 예에 따른 영상 분석 방법을 나타낸 순서도
도 5는 본 발명의 바람직한 제2 실시 예에 따른 영상 분석 방법을 나타낸 순서도
도 6 및 도 7은 본 발명에서 카메라와 피사체의 거리에 따른 매핑 테이블의 일례를 나타낸 도면

Claims (15)

  1. 영상 처리 시스템에서,
    입력된 영상에 대해 프레임별 또는 장면별로 영상을 분석하여 미리 결정된 기준에 따라 해상도를 결정하는 분석부와,
    상기 결정된 해상도를 근거로 상기 검출된 영상을 압축하는 압축부를 포함함을 특징으로 하는 영상 분석 장치.
  2. 제 1항에 있어서, 상기 분석부는,
    상기 입력된 영상에 대해 카메라와 피사체의 거리를 추정하는 영상 분석부와,
    미리 결정된 매핑 테이블에 따라 상기 추정된 거리에 따른 해상도를 결정하는 해상도 결정부를 포함함을 특징으로 하는 영상 분석 장치.
  3. 제 2항에 있어서, 상기 매핑 테이블은,
    상기 카메라와 피사체간의 거리가 근접할수록 저해상도로,
    상기 카메라와 피사체간의 거리가 근접할수록 고해상도로 매핑됨을 특징으로 하는 영상 분석 장치.
  4. 제 1항에 있어서, 상기 분석부는,
    입력된 영상에 대해 프레임별 또는 장면별로 영상을 분석하여 각 영상에 대해 에지(edge)의 두께를 검출하는 영상 분석부와,
    미리 결정된 매핑 테이블에 따라 상기 검출된 에지의 두께에 따른 해상도를 결정하는 해상도 결정부를 포함함을 특징으로 하는 영상 분석 장치.
  5. 제 4항에 있어서, 상기 매핑 테이블은,
    상기 검출된 에지의 두께가 두꺼울수록 저해상도로,
    상기 검출된 에지의 두께가 얇을수록 고해상도로 매핑됨을 특징으로 하는 영상 분석 장치.
  6. 영상 처리 시스템에서,
    입력된 영상에 대해 프레임별 또는 장면별로 영상을 분석하여 미리 결정된 기준에 따라 해상도를 결정하는 제 1과정과,
    상기 결정된 해상도를 근거로 상기 검출된 영상을 압축하는 제 2과정을 포함함을 특징으로 하는 영상 분석 방법.
  7. 제 6항에 있어서, 상기 제 1과정은,
    상기 입력된 영상에 대해 카메라와 피사체의 거리를 추정하는 과정과,
    미리 결정된 매핑 테이블에 따라 상기 추정된 거리에 따른 해상도를 결정하는 과정을 포함함을 특징으로 하는 영상 분석 방법.
  8. 제 7항에 있어서, 상기 매핑 테이블은,
    상기 카메라와 피사체간의 거리가 근접할수록 저해상도로,
    상기 카메라와 피사체간의 거리가 멀어질수록 고해상도로 매핑됨을 특징으로 하는 영상 분석 방법.
  9. 제 6항에 있어서, 상기 제 1과정은,
    입력된 영상에 대해 프레임 또는 장면별로 영상을 분석하여 각 영상에 대해 에지(edge)의 두께를 검출하는 과정과,
    미리 결정된 매핑 테이블에 따라 상기 검출된 에지의 두께에 따른 해상도를 결정하는 과정을 포함함을 특징으로 하는 영상 분석 방법.
  10. 제 9항에 있어서, 상기 매핑 테이블은,
    상기 검출된 에지의 두께가 두꺼울수록 저해상도로,
    상기 검출된 에지의 두께가 얇을수록 고해상도로 매핑됨을 특징으로 하는 영상 분석 방법.
  11. 영상 처리 시스템에서 있어서,
    입력된 영상에 대해 프레임별 또는 장면별로 영상을 분석하여 미리 결정된 기준에 따라 해상도를 결정하는 제 1과정과,
    상기 결정된 해상도를 근거로 상기 검출된 영상을 압축하는 제 2과정을 포함함을 특징으로 하는 저장 기록 매체.
  12. 제11항에 있어서, 상기 제 1과정은,
    상기 입력된 영상에 대해 카메라와 피사체의 거리를 추정하는 과정과,
    미리 결정된 매핑 테이블에 따라 상기 추정된 거리에 따른 해상도를 결정하는 과정을 포함함을 특징으로 하는 저장 기록 매체.
  13. 제 12항에 있어서, 상기 매핑 테이블은,
    상기 카메라와 피사체간의 거리가 근접할수록 저해상도로,
    상기 카메라와 피사체간의 거리가 멀어질수록 고해상도로 매핑됨을 특징으로 하는 저장 기록 매체.
  14. 제 11항에 있어서, 상기 제 1과정은,
    입력된 영상에 대해 프레임 또는 장면별로 영상을 분석하여 각 영상에 대해 에지(edge)의 두께를 검출하는 과정과,
    미리 결정된 매핑 테이블에 따라 상기 검출된 에지의 두께에 따른 해상도를 결정하는 과정을 포함함을 특징으로 하는 저장 기록 매체.
  15. 제 14항에 있어서, 상기 매핑 테이블은,
    상기 검출된 에지의 두께가 두꺼울수록 저해상도로,
    상기 검출된 에지의 두께가 얇을수록 고해상도로 매핑됨을 특징으로 하는 저장 기록 매체.
KR1020080076429A 2008-08-05 2008-08-05 내용 적응적 해상도 비디오 압축을 위한 영상 분석 장치 및방법 KR20100016803A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020080076429A KR20100016803A (ko) 2008-08-05 2008-08-05 내용 적응적 해상도 비디오 압축을 위한 영상 분석 장치 및방법
US12/536,039 US20100034520A1 (en) 2008-08-05 2009-08-05 Apparatus and method for analyzing pictures for video compression with content-adaptive resolution
US15/825,825 US20180091808A1 (en) 2008-08-05 2017-11-29 Apparatus and method for analyzing pictures for video compression with content-adaptive resolution

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080076429A KR20100016803A (ko) 2008-08-05 2008-08-05 내용 적응적 해상도 비디오 압축을 위한 영상 분석 장치 및방법

Publications (1)

Publication Number Publication Date
KR20100016803A true KR20100016803A (ko) 2010-02-16

Family

ID=41653052

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080076429A KR20100016803A (ko) 2008-08-05 2008-08-05 내용 적응적 해상도 비디오 압축을 위한 영상 분석 장치 및방법

Country Status (2)

Country Link
US (2) US20100034520A1 (ko)
KR (1) KR20100016803A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017123071A1 (en) * 2016-01-14 2017-07-20 Samsung Electronics Co., Ltd. A mobile device and a method for texture memory optimization thereof

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102008001076A1 (de) * 2008-04-09 2009-10-15 Robert Bosch Gmbh Verfahren, Vorrichtung sowie Computerprogramm zur Auflösungsreduktion eines Eingangsbilds

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5193124A (en) * 1989-06-29 1993-03-09 The Research Foundation Of State University Of New York Computational methods and electronic camera apparatus for determining distance of objects, rapid autofocusing, and obtaining improved focus images
JPH04370705A (ja) * 1991-06-19 1992-12-24 Meidensha Corp 画像処理における解像度補正装置
JP4320572B2 (ja) * 2003-07-11 2009-08-26 ソニー株式会社 信号処理装置および方法、記録媒体、並びにプログラム
JP2005309559A (ja) * 2004-04-19 2005-11-04 Fuji Photo Film Co Ltd 画像処理方法および装置並びにプログラム
US8243820B2 (en) * 2004-10-06 2012-08-14 Microsoft Corporation Decoding variable coded resolution video with native range/resolution post-processing operation
JP4182990B2 (ja) * 2006-06-02 2008-11-19 セイコーエプソン株式会社 印刷装置、画像がぼやけているか否かを決定する方法、およびコンピュータプログラム
JP4310330B2 (ja) * 2006-09-26 2009-08-05 キヤノン株式会社 表示制御装置及び表示制御方法
US20080137982A1 (en) * 2006-12-06 2008-06-12 Ayahiro Nakajima Blurring determination device, blurring determination method and printing apparatus
JP2009027223A (ja) * 2007-07-17 2009-02-05 Seiko Epson Corp 画像表示装置、画像表示方法、およびプログラム
KR101367282B1 (ko) * 2007-12-21 2014-03-12 삼성전자주식회사 깊이 정보에 대한 적응적 정보 표현 방법 및 그 장치
WO2010061352A2 (en) * 2008-11-26 2010-06-03 Hiok Nam Tay Auto-focus image system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017123071A1 (en) * 2016-01-14 2017-07-20 Samsung Electronics Co., Ltd. A mobile device and a method for texture memory optimization thereof
US10719959B2 (en) 2016-01-14 2020-07-21 Samsung Electronics Co., Ltd. Mobile device and a method for texture memory optimization thereof

Also Published As

Publication number Publication date
US20100034520A1 (en) 2010-02-11
US20180091808A1 (en) 2018-03-29

Similar Documents

Publication Publication Date Title
US8139883B2 (en) System and method for image and video encoding artifacts reduction and quality improvement
US9905031B2 (en) Method and related apparatus for capturing and processing image data
KR100721543B1 (ko) 통계적 정보를 이용하여 노이즈를 제거하는 영상 처리 방법및 시스템
KR101369524B1 (ko) 디지털 비디오 콘텐츠에서 밴딩 아티팩트 검출
US6061400A (en) Methods and apparatus for detecting scene conditions likely to cause prediction errors in reduced resolution video decoders and for using the detected information
US9197904B2 (en) Networked image/video processing system for enhancing photos and videos
US8948253B2 (en) Networked image/video processing system
US6148033A (en) Methods and apparatus for improving picture quality in reduced resolution video decoders
US8582915B2 (en) Image enhancement for challenging lighting conditions
US20020110197A1 (en) Methods and apparatus for representing different portions of an image at different resolutions
US9137548B2 (en) Networked image/video processing system and network site therefor
US20200304797A1 (en) Cluster refinement for texture synthesis in video coding
KR20040006065A (ko) 장면전환검출장치 및 그 방법
US8873869B2 (en) Image processing apparatus and control method for the same
Lin et al. PEA265: Perceptual assessment of video compression artifacts
CN107886518B (zh) 图片检测方法、装置、电子设备及可读取存储介质
US20180091808A1 (en) Apparatus and method for analyzing pictures for video compression with content-adaptive resolution
Nur Yilmaz A no reference depth perception assessment metric for 3D video
KR100816013B1 (ko) 압축영상의 장면전환 검출장치 및 방법
KR20070026638A (ko) 블럭 기반 이미지 처리를 위한 방법 및 전자 디바이스
Kirenko Reduction of coding artifacts using chrominance and luminance spatial analysis
CN113810692A (zh) 对变化和移动进行分帧的方法、图像处理装置及程序产品
JP2001346208A (ja) 画像信号復号化装置および方法
KR100487374B1 (ko) 디지털 비디오의 썸네일 영상 생성 장치
Dong et al. An efficient and integrated algorithm for video enhancement in challenging lighting conditions

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application