KR101874084B1 - 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체 - Google Patents

영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체 Download PDF

Info

Publication number
KR101874084B1
KR101874084B1 KR1020140009810A KR20140009810A KR101874084B1 KR 101874084 B1 KR101874084 B1 KR 101874084B1 KR 1020140009810 A KR1020140009810 A KR 1020140009810A KR 20140009810 A KR20140009810 A KR 20140009810A KR 101874084 B1 KR101874084 B1 KR 101874084B1
Authority
KR
South Korea
Prior art keywords
frame
area
frames
reproduction
moving picture
Prior art date
Application number
KR1020140009810A
Other languages
English (en)
Other versions
KR20150089325A (ko
Inventor
최찬규
이창화
김한샘
김근호
Original Assignee
에스케이테크엑스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이테크엑스 주식회사 filed Critical 에스케이테크엑스 주식회사
Priority to KR1020140009810A priority Critical patent/KR101874084B1/ko
Publication of KR20150089325A publication Critical patent/KR20150089325A/ko
Application granted granted Critical
Publication of KR101874084B1 publication Critical patent/KR101874084B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region

Abstract

본 발명은 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체를 개시한다. 즉, 본 발명은 동영상의 주요 관심 영역에 대한 정보를 획득하고, 사용자가 동영상의 주요 관심 영역을 용이하게 선택할 수 있도록 하여 사용자 편의성을 향상시킬 수 있으며, 화질의 저하 없이 동영상의 특정 부분에 대해서만 재생되는 부분 재생 동영상 데이터를 획득하여 부분 재생 동영상의 화질 요구에 대한 수요자 요구를 만족시킬 수 있다.

Description

영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체{image processing apparatus, control method thereof and computer readable medium having computer program recorded thereof}
본 발명은 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체에 관한 것으로, 특히 동영상의 화질을 개선하고, 특정 영역에 대한 부분 재생 동영상 데이터를 획득하기 위한 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체에 관한 것이다.
현재 다양한 멀티미디어 장치들이 하나의 장치로 융합되고 있으며, 이를 통해 사용자는 복수의 멀티미디어 장치에서 지원하는 기능이 통합된 사용자 장치를 이용하여 용이하게 이미지 또는 동영상을 촬영할 수 있다.
이와 같은 사용자 장치를 이용하여 사용자는 편리하게 다수의 이미지 또는 동영상을 촬영하고, 이동통신을 지원하는 사용자 장치의 통신기능을 이용하여 통신망을 통해 다수의 사용자와 이미지 또는 동영상을 편리하게 공유할 수 있다.
이렇듯, 이미지 또는 동영상 생성의 편이성이 급격히 개선되면서 개인별 이미지 및 동영상의 생산량이 크게 증대되고 있으며, 이에 따라 사용자 편이에 따라 다양하게 동영상을 처리하는 방법에 대한 요구가 증가되고 있다.
특히 동영상의 특정 부분에 대해서만 재생이 되는 부분 에니메이션 기술에 대한 사용자의 요구가 있으나, 종래 기술에서는 동영상의 특정 부분에 대한 재생시 동영상의 화질이 저하된다는 문제가 있다.
한국등록특허 제10-0467610호 [명칭: 디지털 화질 개선 방법 및 장치]
본 발명은 동영상의 특정 부분에 대해서만 재생되는 개선된 화질의 부분 재생 동영상 데이터를 획득할 수 있는 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체를 제공하는 것을 목적으로 한다.
또, 본 발명은 동영상의 주요 관심 영역에 대한 정보를 획득할 수 있는 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체를 제공하는 것을 목적으로 한다.
또, 본 발명은 사용자가 동영상의 주요 관심 영역을 용이하게 선택할 수 있도록 하여 사용자 편의성을 향상시킬 수 있는 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체를 제공하는 것을 목적으로 한다.
본 발명의 실시예에 따른 영상 처리 장치는 복수의 프레임을 구비한 동영상 데이터를 획득하는 동영상 데이터 획득부; 복수의 프레임 중 어느 하나를 배경 프레임으로 설정하는 배경 프레임 관리부; 복수의 프레임 간의 천이 정보에 기초하여 동영상 데이터의 재생 영역을 획득하는 재생 영역 관리부; 및 배경 프레임 및 재생 영역에 기초하여 부분 재생 동영상 데이터를 획득하는 제어부를 포함할 수 있다.
본 발명과 관련된 일 예로서 배경 프레임 관리부는 프레임의 선명도 정보에 기초하여 복수의 프레임 중 어느 하나를 배경 프레임으로 설정할 수 있다.
본 발명과 관련된 일 예로서 재생 영역 관리부는 프레임 내 각 영역의 천이 시간 중 가장 긴 천이 시간을 갖는 영역을 재생 영역으로 설정할 수 있다.
본 발명과 관련된 일 예로서 재생 영역 관리부는 복수의 프레임 간의 얼라이먼트를 조정할 수 있다.
본 발명과 관련된 일 예로서 재생 영역 관리부는 손떨림 보정 제어 방법에 의하여 복수의 프레임 간의 얼라이먼트를 조정할 수 있다.
본 발명과 관련된 일 예로서 제어부는 재생 영역에 대응되는 영역을 투과시키는 투과 프레임을 획득할 수 있다.
본 발명의 실시예에 따른 영상 처리 장치의 제어 방법은 복수의 프레임을 구비한 동영상 데이터를 획득하는 단계; 복수의 프레임 중 어느 하나를 배경 프레임으로 설정하는 단계; 복수의 프레임 간의 천이 정보에 기초하여 동영상 데이터의 재생 영역을 획득하는 단계; 및 배경 프레임 및 재생 영역에 기초하여 부분 재생 동영상 데이터를 획득하는 단계를 포함할 수 있다.
본 발명과 관련된 일 예로서 재생 영역 획득 단계는 추천 영역을 표시하는 단계; 및 추천 영역에 대한 사용자 입력을 획득하는 단계를 포함할 수 있다.
본 발명의 실시예에 따른 컴퓨터 프로그램이 기록된 기록 매체에는 상술한 실시예에 따른 영상 처리 장치의 제어 방법을 수행하는 컴퓨터 프로그램이 저장될 수 있다.
본 발명은 동영상의 특정 부분에 대해서만 재생되는 개선된 화질의 부분 재생 동영상 데이터를 획득하여 부분 재생 동영상의 화질 요구에 대한 수요자 요구를 만족시킬 수 있다.
또, 본 발명은 동영상의 주요 관심 영역에 대한 정보를 획득하고, 사용자가 동영상의 주요 관심 영역을 용이하게 선택할 수 있도록 하여 사용자 편의성을 향상시킬 수 있다.
도 1은 본 발명의 실시예에 의한 영상 처리 장치의 블록도이다.
도 2는 복수의 프레임을 구비한 동영상 데이터의 일 예를 나타낸 도면이다.
도 3은 제 1 프레임과 제 2 프레임의 좌표 내 배치 상태를 나타낸 도면이다.
도 4는 제 1 프레임과 제 2 프레임 간의 얼라이먼트가 조정된 후의 제 1 프레임과 제 2 프레임의 좌표 내 배치 상태를 나타낸 도면이다.
도 5는 동영상 데이터의 재생 영역을 획득하기 위한 방법의 일 예를 설명하기 위한 도면이다.
도 6은 동영상 데이터의 재생 영역을 획득하기 위한 방법의 다른 예를 설명하기 위한 도면이다.
도 7은 부분 재생 동영상 데이터 획득 방법의 일 예를 나타낸 도면이다.
도 8은 본 발명의 실시예에 의한 영상 처리 장치의 제어 방법을 나타낸 도면이다.
도 9는 본 발명의 실시예에 따른 영상 처리 장치의 상세 구성 환경도이다.
본 발명에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 발명에서 사용되는 기술적 용어는 본 발명에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 발명에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.
또한, 본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함한다. 본 발명에서, "구성된다" 또는 "포함한다" 등의 용어는 발명에 기재된 여러 구성 요소들, 또는 여러 단계를 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.
또한, 본 발명에서 사용되는 제 1, 제 2 등과 같이 서수를 포함하는 용어는 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성 요소는 제 2 구성 요소로 명명될 수 있고, 유사하게 제 2 구성 요소도 제 1 구성 요소로 명명될 수 있다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.
도 1은 본 발명의 실시예에 의한 영상 처리 장치의 블록도이다.
도 1에 도시된 바와 같이, 영상 처리 장치(100)는 동영상 데이터 획득부(110), 배경 프레임 관리부(120), 재생 영역 관리부(130), 제어부(140), 표시부(150), 사용자 입력부(160)를 포함할 수 있다. 도 1에 도시된 구성 요소보다 많은 구성 요소에 의해 영상 처리 장치(100)가 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 영상 처리 장치(100)가 구현될 수도 있다.
동영상 데이터 획득부(110)는 동영상 데이터를 획득할 수 있다. 예컨대, 동영상 데이터 획득부(110)는 영상 촬상 모듈을 구비하고 동영상 데이터를 획득할 수 있다. 또는 동영상 데이터 획득부(110)는 다른 장치로부터 동영상 데이터를 수신받을 수도 있다. 또는 동영상 데이터 획득부(110)는 방송 수신 모듈을 구비하고 방송 영상을 수신받을 수도 있다. 이와 같이 동영상 데이터 획득부(110)는 다양한 방법에 의하여 동영상 데이터를 획득할 수 있다. 일반적으로, 동영상 데이터는 복수의 프레임으로 구성되어 있다. 한편, 동영상 데이터 획득부(110)는 획득된 동영상 데이터를 저장할 수 있다.
도 2는 복수의 프레임을 구비한 동영상 데이터의 일 예를 나타낸 도면이다.
설명의 편의를 위하여, 4개의 프레임에 의하여 동영상 데이터가 구성된 것으로 가정한다.
도 2(a)는 제 1 프레임을 나타내고, 도 2(b)는 제 2 프레임을 나타내고, 도 2(c)는 제 3 프레임을 나타내고, 도 2(d)는 제 4 프레임을 나타내고 있다. 이때, 동영상은 제 1 프레임, 제 2 프레임, 제 3 프레임, 제 4 프레임 순으로 재생된다.
배경 프레임 관리부(120)는 복수의 프레임 중 어느 하나를 배경 프레임으로 설정할 수 있다. 여기서, 배경 프레임은 부분 재생 동영상 데이터에서 배경이 되는 프레임을 의미한다.
부분 재생 동영상 데이터는 배경 프레임과 재생 영역을 구비한다. 즉, 배경 프레임은 동영상의 전체 화면 중 재생 영역을 제외한 부분을 의미하며, 정지 영상을 제공하는 부분을 의미한다. 또, 재생 영역은 동영상 내에서 사용자의 주요 관심 영역에 해당하며 동영상 내에서 물체의 주요한 움직임이 감지되는 영역이다.
이와 같이, 부분 재생 동영상 데이터는 재생 영역에 의하여 사용자의 주요 관심 영역을 재생하고, 배경 프레임에 의하여 주요 관심 영역 이외의 정지 영상을 제공한다.
본 발명의 실시예에 의하면, 배경 프레임 관리부(120)는 프레임의 선명도 정보에 기초하여 복수의 프레임 중 어느 하나를 배경 프레임으로 설정할 수 있다. 여기서, 선명도 정보는 각 프레임에 포함된 객체의 선명함의 정도를 나타낸다. 예를 들어, 영상의 초점이 흐려지거나 영상에 흐림 효과 등이 적용된 경우, 프레임의 선명도는 낮아진다.
구체적으로, 배경 프레임 관리부(120)는 동영상 데이터를 구성하는 각 프레임의 선명도 정보를 획득하고, 그 중 선명도가 가장 높은 프레임을 배경 프레임으로 설정할 수 있다.
배경 프레임은 부분 재생 동영상 데이터에서 배경이 되는 프레임이기 때문에, 복수의 프레임 중 선명도가 가장 높은 프레임이 배경 프레임으로 선택되는 것에 의하여 부분 재생 동영상의 화질이 크게 개선될 수 있다.
선명도를 수치적으로 나타냈을 때 그 값이 클수록 선명도가 높은 것으로 가정하고, 제 1 프레임의 선명도는 -3이고, 제 2 프레임의 선명도는 -2이고, 제 3 프레임의 선명도는 -1이고, 제 4 프레임의 선명도가 -2인 것으로 가정한다.
이 경우, 배경 프레임 관리부(120)는 선명도가 가장 높은 제 3 프레임을 배경 프레임으로 설정할 수 있다.
도 3은 배경 프레임 관리부(120)가 프레임의 선명도 정보를 획득하는 방법의 일 예를 나타낸 도면이다.
도 3(a)는 선명한 이미지를 나타낸 것이며, 도 3(b)는 흐릿한 이미지를 나타낸 것이다.
도 3에 도시된 바와 같이, 선명한 이미지와 흐릿한 이미지는 영상의 에지 굵기에 의하여 판별될 수 있다. 즉, 선명한 이미지일수록 에지가 뚜렷하여 에지의 굵기가 가늘게 표시될 수 있는 반면에, 흐릿한 이미지일수록 에지가 모호하여 에지의 굵기가 두껍게 표시될 수 있다.
따라서, 배경 프레임 관리부(120)는 프레임에 표시된 객체의 에지 굵기 정보에 기초하여 프레임의 선명도 정보를 획득할 수 있다. 예컨대, 배경 프레임 관리부(120)는 프레임에 표시된 객체의 평균 굵기에 기초하여 프레임의 선명도 정보를 획득할 수 있다.
재생 영역 관리부(130)는 복수의 프레임 간의 천이 정보에 기초하여 동영상 데이터의 재생 영역을 획득할 수 있다. 여기서, 천이 정보는 동영상 데이터 내 각 객체의 움직임이 지속되는 기간인 각 객체에 대한 천이 시간을 포함한다.
재생 영역 관리부(130)는 복수의 프레임 간의 얼라이먼트를 조정할 수 있다.
도 2를 참조하면, 동영상 데이터를 이루는 각 프레임의 중심이 어긋나있는 것을 확인할 수 있다.
예컨대, 도 2에 도시된 각 프레임을 가로축과 세로축에 의한 좌표 내에 위치시켰을 때, 제 1 프레임의 좌측 하단 꼭지점은 좌표축 (1,1)에 위치하고, 제 2 프레임의 좌측 하단 꼭지점은 좌표축 (0,0)에 위치하고, 제 3 프레임의 좌측 하단 꼭지점은 좌표축 (1,2)에 위치하고, 제 4 프레임의 좌측 하단 꼭지점은 좌표축 (2,1)에 위치하는 것을 확인할 수 있다.
도 3은 제 1 프레임과 제 2 프레임의 좌표 내 배치 상태의 일 예를 나타낸 도면이다.
도 3을 참조하면, 제 1 프레임과 제 2 프레임의 중심이 어긋나있는 것을 확인할 수 있다.
동영상 데이터를 이루는 각 프레임의 중심이 어긋나있는 경우, 동영상 데이터 내 객체들의 움직임을 정확히 획득하는데 어려움이 있다.
따라서 재생 영역 관리부(130)는 각 프레임들의 좌측 하단 꼭지점이 좌표축 (0,0)에 배치되도록 각 프레임의 배치 위치를 조절할 수 있다.
도 4는 제 1 프레임과 제 2 프레임 간의 얼라이먼트가 조정된 후의 제 1 프레임과 제 2 프레임의 좌표 내 배치 상태를 나타낸 도면이다.
도 4에 도시된 바와 같이, 제 1 프레임과 제 2 프레임 간의 얼라이먼트가 조정된 후, 제 1 프레임과 제 2 프레임의 중심이 일치할 수 있다.
프레임 간의 얼라이먼트 조정에 의하여, 동영상 데이터 내 객체들의 움직임이 정확히 획득될 수 있다.
도 4는 제 1 프레임과 제 2 프레임의 좌표 내 배치 상태의 다른 예를 나타낸 도면이다.
도 4를 참조하면, 제 1 프레임(도 6(a))이 제 2 프레임(도 6(b))에 비하여 회전 이동되어 있는 것을 확인할 수 있다.
따라서 재생 영역 관리부(130)는 제 1 프레임 또는 제 2 프레임을 회전 시켜 제 1 프레임과 제 2 프레임의 중심이 일치하도록 얼라이먼트 조정할 수 있다.
한편, 재생 영역 관리부(130)는, 제 1 프레임과 제 2 프레임의 크기가 일치하지 않는 경우, 제 1 프레임 및 제 2 프레임 중 어느 하나를 확대 또는 축소시켜 얼라이먼트 조정이 가능하다.
한편, 재생 영역 관리부(130)는 일반적인 손떨림 보정 제어 방법에 의하여 복수의 프레임 간의 얼라이먼트를 조정할 수 있다. 손떨림 보정 제어 방법은 당업자가 용이하게 실시 가능한 기술로, 여기서는 구체적인 설명을 생략하기로 한다.
도 5는 동영상 데이터의 재생 영역을 획득하기 위한 방법의 일 예를 설명하기 위한 도면이다.
도 5를 참조하면, 동영상 데이터 내에 제 1 객체(A), 제 2 객체(B), 제 3 객체(C)가 존재한다.
이때, 각 객체에 대한 천이 시간을 살펴보면, 제 1 객체(A)는 4개의 프레임(제 1 프레임 내지 제 4 프레임)에 걸쳐 움직임이 검출된다. 또, 제 2 객체(B)는 2개의 프레임(제 1 프레임 내지 제 2 프레임)에 걸쳐 움직임이 검출된다. 또, 제 3 객체는 2개의 프레임(제 3 프레임 내지 제 4 프레임)에 걸쳐 움직임이 검출된다.
본 발명의 실시예에 의하면, 재생 영역 관리부(130)는 프레임 내 각 객체(영역)의 천이 시간 중 가장 긴 천이 시간을 갖는 영역(객체)를 재생 영역으로 설정할 수 있다. 도 5를 참조하면, 제 1 객체(A)의 천이 시간은 4프레임이고, 제 2 객체(B)의 천이 시간은 2프레임이고, 제 3 객체(C)이 천이 시간은 2프레임이므로, 재생 영역 관리부(130)는 제 1 객체(A)를 재생 영역으로 설정할 수 있다.
사용자는 일반적으로 주요 관심 영역을 기준으로 동영상을 촬영하기 때문에, 주요 관심 영역에 해당하는 영역이 가장 긴 천이 시간을 갖는 경우가 대다수이다. 따라서 상기와 같은 방법에 의하여 사용자의 주요 관심 영역이 정확하게 검출될 수 있다.
도 6은 동영상 데이터의 재생 영역을 획득하기 위한 방법의 다른 예를 설명하기 위한 도면이다.
도 6을 참조하면, 영상 처리 장치의 표시부(150)는 추천 영역(510, 520, 530)을 표시할 수 있다.
앞에서 설명한 방식에 의하여, 재생 영역 관리부(130)는 프레임 내 각 객체에 대한 움직임을 검출할 수 있다. 이때, 표시부(150)는 재생 영역 관리부(130)에 의하여 움직임이 검출된 객체를 표시할 수 있다. 추천 영역은 움직임이 검출된 객체에 대한 안내 메시지를 의미할 수 있다.
사용자 입력부(160)는 표시부(150)에 표시된 복수의 추천 영역(510, 520, 530) 중 적어도 하나에 대한 사용자 입력을 획득할 수 있다.
재생 영역 관리부(130)는 사용자 입력에 의하여 선택된 추천 영역을 재생 영역으로 결정할 수 있다.
본 실시예에 의하면, 사용자는 영상 처리 장치(100)가 제공하는 추천 영역을 확인하고, 동영상 데이터 내의 재생 영역을 정확하게 결정할 수 있다. 즉, 사용자는 이와 같은 방식에 의하여 동영상의 주요 관심 영역을 용이하게 선택할 수 있다.
제어부(140)는 동영상 데이터 획득부(110), 배경 프레임 관리부(120), 재생 영역 관리부(130), 표시부(150) 및 사용자 입력부(160)와 기능적으로 결합되어 영상 처리 장치의 전반적인 동작을 제어할 수 있다.
또, 제어부(140)는 배경 프레임 관리부(120)에서 설정된 배경 프레임 및 재생 영역 관리부(130)에서 획득된 재생 영역에 기초하여 부분 재생 동영상 데이터를 획득할 수 있다.
도 7은 부분 재생 동영상 데이터 획득 방법의 일 예를 나타낸 도면이다.
도 7을 참조하면, 제어부(140)는 재생 영역 관리부(130)에서 획득된 재생 영역에 대응되는 영역(622)을 투과시키는 투과 프레임(620)을 획득할 수 있다.
획득된 투과 프레임(620)은 투과 영역(622)을 구비할 수 있다. 투과 영역(622)은 동영상 데이터(610)의 각 프레임의 대응되는 영역을 투과시킬 수 있다. 또, 투과 프레임(620)의 차단 영역(624)은 동영상 데이터(610)의 각 프레임의 대응되는 영역의 투과를 차단시킬 수 있다.
한편, 투과 영역(622)의 투과도(알파값)은 사용자의 필요에 따라 적절하게 조절될 수 있다. 예컨대, 투과 영역(622)의 중심으로 갈수록 투과도(알파값)가 높아질 수 있다. 또는, 투과 영역(622)의 투과도(알파값)는 전 영역에 걸쳐서 동일할 수 있다.
이와 같이 투과 영역(622)의 투과도를 적절하게 조절함에 따라 사용자는 의도하는 부분 재생 동영상 데이터를 획득할 수 있다. 즉, 재생 영역에 대응되는 객체(510)의 움직임만이 표현되는 부분 재생 동영상 데이터가 획득될 수 있다.
도 7에 도시된 바와 같이, 투과 프레임(620)과 동영상 데이터(610)를 레이어 배치시키고, 동영상 데이터(610)를 재생시키는 경우, 제어부(140)는 재생 영역(510)에 대한 동영상 데이터를 획득할 수 있다.
이때, 제어부(140)는 투과 프레임(620)의 차단 영역에 해당하는 영역에 배경 프레임을 위치시켜 부분 재생 동영상 데이터를 획득할 수 있다.
본 실시예에 의하면, 영상 처리 장치(100)는 화질의 저하 없이 동영상의 특정 부분에 대해서만 재생되는 부분 재생 동영상 데이터를 획득할 수 있다.
한편, 영상 처리 장치(100)는 부분 재생 동영상 데이터를 별도로 저장할 필요가 없다. 왜냐하면, 투과 프레임(620)은 동영상 데이터(610)와는 독립적으로 동작 가능한 것으로, 투과 프레임(620) 및 동영상 데이터(610)에 의하여 부분 재생 동영상 데이터의 재생이 가능하기 때문이다.
이와 같은 방법에 의하여, 본 발명의 실시예에 의한 영상 처리 장치(100)는 동영상 데이터 획득부(110)의 데이터 저장 공간을 효율적으로 사용할 수 있다.
또, 본 발명의 실시예에 의한 배경 프레임 획득부(110)는 다수의 프레임을 이용하여 고화질의 배경 프레임을 획득할 수 있다. 예컨대, 배경 프레임 획득부(110)는 각 프레임의 각 필셀에 대한 최빈값에 기초하여 노이즈를 제거하고 고화질의 배경 프레임을 획득할 수 있다. 예컨대, 배경 프레임 획득부(110)는 복수 영상 기반 초해상도(super resolution) 영상 생성 알고리즘을 이용할 수 있다.
이와 같은 방법에 의하여 부분 재생 동영상의 화질이 개선될 수 있다.
도 8은 본 발명의 실시예에 의한 영상 처리 장치의 제어 방법을 나타낸 도면이다.
도 8을 참조하면, 영상 처리 장치(100)의 동영상 데이터 획득부(110)는 복수의 프레임을 구비한 동영상 데이터를 획득할 수 있다(S710).
영상 처리 장치(100)의 배경 프레임 관리부(120)는 획득된 동영상 데이터의 프레임 중 어느 하나를 배경 프레임으로 설정할 수 있다(S720). 예컨대, 배경 프레임 관리부(120)는 프레임의 선명도 정보에 기초하여 복수의 프레임 중 어느 하나를 배경 프레임으로 설정할 수 있다.
또, 영상 처리 장치(100)의 재생 영역 관리부(130)는 동영상 데이터의 재생 영역을 획득할 수 있다(S730).
이때, 재생 영역 관리부(130)는 동영상 데이터의 복수의 프레임 간의 얼라이먼트를 조정할 수 있다. 이에 의하여 재생 영역 결정에 대한 정확도가 높아질 수 있다.
이후, 재생 영역 관리부(130)는 동영상 데이터의 복수의 프레임 간의 천이 정보에 기초하여 동영상 데이터의 재생 영역을 획득할 수 있다. 일 예로, 재생 영역 관리부(130)는 프레임 내 각 영역의 천이 시간 중 가장 긴 천이 시간을 갖는 영역을 재생 영역으로 설정할 수 있다. 이에 의하여 사용자의 주요 관심 영역이 재생 영역 관리부(130)에 의하여 정확하게 검출될 수 있다.
또, 영상 처리 장치(100)의 제어부(140)는 획득된 재생 영역 및 배경 프레임에 기초하여 부분 재생 동영상 데이터를 획득할 수 있다(S740).
본 발명의 실시예에 의하면, 화질의 저하 없이 동영상의 특정 부분에 대해서만 재생되는 부분 재생 동영상 데이터가 획득될 수 있으며, 부분 재생 동영상의 화질 요구에 대한 수요자 요구를 만족시킬 수 있다.
도 9는 본 발명의 실시예에 따른 영상 처리 장치의 상세 구성 환경도이다.
본 발명의 실시예에 따른 영상 처리 장치(100)는 사용자 장치(200)와 통신하는 서비스 제공 장치(300) 및 사용자 장치(200) 중 적어도 하나에 구성될 수 있으며, 사용자 장치(200)의 메모리부 또는 서비스 제공 장치(300)의 DB에 저장된 동영상 데이터에 기초하여 부분 재생 동영상 데이터를 획득할 수 있다.
본 발명의 실시예에 따른 영상 처리 장치의 제어 방법은 컴퓨터 프로그램으로 작성 가능하며, 컴퓨터 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 해당 컴퓨터 프로그램은 컴퓨터가 읽을 수 있는 정보저장매체(computer readable media)에 저장되고, 컴퓨터나 본 발명의 실시예에 따른 영상 처리 장치 등에 의하여 읽혀지고 실행됨으로써 영상 처리 장치의 제어 방법을 구현할 수 있다.
정보저장매체는 자기 기록매체 및 광 기록매체를 포함한다. 본 발명의 실시예에 따른 영상 처리 장치의 제어 방법을 구현하는 컴퓨터 프로그램은 영상 처리 장치의 내장 메모리에 저장 및 설치될 수 있다. 또는, 본 발명의 실시예에 따른 영상 처리 장치의 제어 방법을 구현하는 컴퓨터 프로그램을 저장 및 설치한 스마트 카드 등의 외장 메모리가 인터페이스를 통해 영상 처리 장치에 장착될 수도 있다.
전술한 내용은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
본 발명은 동영상의 주요 관심 영역에 대한 정보를 획득하고, 사용자가 동영상의 주요 관심 영역을 용이하게 선택할 수 있도록 하여 사용자 편의성을 향상시킬 수 있으며, 화질의 저하 없이 동영상의 특정 부분에 대해서만 재생되는 부분 재생 동영상 데이터를 획득하여 부분 재생 동영상의 화질 요구에 대한 수요자 요구를 만족시킬 수 있는 것으로, 이미지 처리 시스템, 어플리케이션 제공 서비스 시스템, 클라우드 서비스 시스템 등에 광범위하게 적용될 수 있다.
100: 영상 처리 장치 110: 동영상 데이터 획득부
120: 배경 프레임 관리부 130: 재생 영역 관리부
140: 제어부 150: 표시부
160: 사용자 입력부

Claims (9)

  1. 복수의 프레임을 구비한 동영상 데이터를 획득하는 동영상 데이터 획득부;
    프레임의 선명도 정보에 기초하여 상기 복수의 프레임 중 어느 하나를 배경 프레임으로 설정하는 배경 프레임 관리부;
    상기 복수의 프레임 간의 천이 정보에 기초하여 상기 동영상 데이터의 재생 영역을 획득하는 재생 영역 관리부; 및
    상기 배경 프레임 및 상기 재생 영역에 기초하여 부분 재생 동영상 데이터를 획득하는 제어부를 포함하는 영상 처리 장치.
  2. 삭제
  3. [청구항 3은(는) 설정등록료 납부시 포기되었습니다.]
    제 1항에 있어서,
    상기 재생 영역 관리부는 프레임 내 각 영역의 천이 시간 중 가장 긴 천이 시간을 갖는 영역을 재생 영역으로 설정하는 것을 특징으로 하는 영상 처리 장치.
  4. 제 1항에 있어서,
    상기 재생 영역 관리부는 복수의 프레임 간의 얼라이먼트를 조정하는 것을 특징으로 하는 영상 처리 장치.
  5. [청구항 5은(는) 설정등록료 납부시 포기되었습니다.]
    제 1항에 있어서,
    상기 재생 영역 관리부는 손떨림 보정 제어 방법에 의하여 복수의 프레임 간의 얼라이먼트를 조정하는 것을 특징으로 하는 영상 처리 장치.
  6. [청구항 6은(는) 설정등록료 납부시 포기되었습니다.]
    제 1항에 있어서,
    상기 제어부는 상기 재생 영역에 대응되는 영역을 투과시키는 투과 프레임을 획득하는 것을 특징으로 하는 영상 처리 장치.
  7. 복수의 프레임을 구비한 동영상 데이터를 획득하는 단계;
    프레임의 선명도 정보에 기초하여 상기 복수의 프레임 중 어느 하나를 배경 프레임으로 설정하는 단계;
    상기 복수의 프레임 간의 천이 정보에 기초하여 상기 동영상 데이터의 재생 영역을 획득하는 단계; 및
    상기 배경 프레임 및 상기 재생 영역에 기초하여 부분 재생 동영상 데이터를 획득하는 단계를 포함하는 영상 처리 장치의 제어 방법.
  8. 제 7항에 있어서,
    상기 재생 영역 획득 단계는 추천 영역을 표시하는 단계; 및
    상기 추천 영역에 대한 사용자 입력을 획득하는 단계를 포함하는 것을 특징으로 하는 영상 처리 장치의 제어 방법.
  9. 제 7항 내지 제 8항 중 어느 한 항의 영상 처리 장치의 제어 방법을 수행하는 컴퓨터 프로그램이 기록된 기록 매체.
KR1020140009810A 2014-01-27 2014-01-27 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체 KR101874084B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140009810A KR101874084B1 (ko) 2014-01-27 2014-01-27 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140009810A KR101874084B1 (ko) 2014-01-27 2014-01-27 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체

Publications (2)

Publication Number Publication Date
KR20150089325A KR20150089325A (ko) 2015-08-05
KR101874084B1 true KR101874084B1 (ko) 2018-08-02

Family

ID=53885793

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140009810A KR101874084B1 (ko) 2014-01-27 2014-01-27 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체

Country Status (1)

Country Link
KR (1) KR101874084B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102336448B1 (ko) * 2015-06-10 2021-12-07 삼성전자주식회사 사진 추출 전자 장치 및 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005167822A (ja) * 2003-12-04 2005-06-23 Canon Inc 情報再生装置及び情報再生方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100467610B1 (ko) 2002-09-06 2005-01-24 삼성전자주식회사 디지털 화질 개선 방법 및 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005167822A (ja) * 2003-12-04 2005-06-23 Canon Inc 情報再生装置及び情報再生方法

Also Published As

Publication number Publication date
KR20150089325A (ko) 2015-08-05

Similar Documents

Publication Publication Date Title
US11671712B2 (en) Apparatus and methods for image encoding using spatially weighted encoding quality parameters
US10762653B2 (en) Generation apparatus of virtual viewpoint image, generation method, and storage medium
TWI619088B (zh) 圖像資料處理系統和相關方法以及相關圖像融合方法
CN107690649B (zh) 数字拍摄装置及其操作方法
CN108141539B (zh) 数字拍摄装置及其操作方法
US7916177B2 (en) Image-capturing apparatus, image-capturing method and program for detecting and correcting image blur
US9462218B2 (en) Video display device and method of displaying video
US9742995B2 (en) Receiver-controlled panoramic view video share
US9961297B2 (en) Method and system of rotation of video frames for displaying a video
JP5391224B2 (ja) 映像付加情報表示制御装置およびその動作方法
EP3545686B1 (en) Methods and apparatus for generating video content
US9743015B2 (en) Image capturing apparatus and method of controlling the same
US9535250B2 (en) Head mounted display device and method for controlling the same
EP3316568B1 (en) Digital photographing device and operation method therefor
CN106470313B (zh) 影像产生系统及影像产生方法
US20190266802A1 (en) Display of Visual Data with a Virtual Reality Headset
JP7405131B2 (ja) 画像処理装置、画像処理方法、プログラム
WO2016061012A1 (en) Video stabilization
CN110166700A (zh) 创建选择性虚拟长曝光图像
KR101874084B1 (ko) 영상 처리 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체
WO2011146436A2 (en) Method and apparatus for auto-convergence based on auto focus point for stereoscopic frame
WO2018196530A1 (zh) 一种视频信息处理方法及终端、计算机存储介质
JP4461834B2 (ja) 映像表示方法、映像表示方法のプログラム、映像表示方法のプログラムを記録した記録媒体及び映像表示装置
CN104185005A (zh) 图像处理装置和图像处理方法
US20170069063A1 (en) Image processing apparatus and method, and decoding apparatus

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant