KR20150031662A - 동영상 장치 및 그것의 동영상 생성 및 재생 방법 - Google Patents

동영상 장치 및 그것의 동영상 생성 및 재생 방법 Download PDF

Info

Publication number
KR20150031662A
KR20150031662A KR20130111131A KR20130111131A KR20150031662A KR 20150031662 A KR20150031662 A KR 20150031662A KR 20130111131 A KR20130111131 A KR 20130111131A KR 20130111131 A KR20130111131 A KR 20130111131A KR 20150031662 A KR20150031662 A KR 20150031662A
Authority
KR
South Korea
Prior art keywords
angle value
image
frame
factor
moving picture
Prior art date
Application number
KR20130111131A
Other languages
English (en)
Inventor
정성욱
Original Assignee
주식회사 팬택
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 팬택 filed Critical 주식회사 팬택
Priority to KR20130111131A priority Critical patent/KR20150031662A/ko
Publication of KR20150031662A publication Critical patent/KR20150031662A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 명세서는 미리 결정된 인자에 따라 표시 화면이 자동으로 패닝되는 동영상 장치 및 그것의 동영상 생성 및 재생 방법에 관한 것이다. 본 명세서의 동영상 장치는 동영상의 일부 영역을 표시하는 표시부 및 미리 결정된 인자에 따라, 동영상의 복수의 프레임들에 대해 표시부에 의해 표시되는 표시 영역이 인자에 대응되는 대상을 향해 패닝되도록 하는 제어부를 포함한다.

Description

동영상 장치 및 그것의 동영상 생성 및 재생 방법{VIDEO DEVICE AND METHOD FOR GENERATING AND PLAYING VIDEO THEREOF}
본 명세서는 동영상 장치 및 그것의 동영상 생성 및 재생 방법에 관한 것으로서, 더욱 상세하게는 동영상 내의 특정 대상의 위치를 추적하여 재생 화면을 패닝시키기 위한 동영상 장치 및 그것의 동영상 생성 및 재생 방법에 관한 것이다.
최근 출시되는 모바일 단말기에는 늘어나는 사용자의 요구를 충족시키기 위해 다양한 기능을 갖는 하드웨어들이 장착되고 있으며, 이러한 하드웨어를 활용한 어플리케이션들도 활발히 개발되고 있다. 특히, 동영상 촬영 기술에 있어서, 360도 촬영이 가능한 카메라를 이용하여 360도 파노라마 동영상을 제작하는 기술이 관심을 모으고 있다. 이러한 360도 촬영된 동영상은 일반적인 동영상에 비해 측면 및 후면의 영상 정보를 더 포함하므로, 다양한 응용 분야에 적용될 수 있는 여지가 크다.
그런데, 사람의 시야는 기본적으로 한 방향에 집중하도록 되어 있고, 사람의 시각 정보를 인식할 수 있는 범위인 시야각은 대략 160도 정도로 제한적이다. 또한, 동영상을 재생하는 디스플레이의 측면에서도, 360도의 파노라마 동영상을 한 화면에 다 보여주기 위해서는 원통형으로 구성되어 360도 파노라마 영상을 한번에 표시할 수 있는 디스플레이 장치를 구비하거나, 360도 파노라마 영상을 넓게 펼쳐 하나의 평면 영상에 표시할 수 있을 정도로 크기가 매우 큰 디스플레이 장치를 구비하거나, 동영상의 크기를 작게 축소하여 보여주어야 하는 제한이 있다.
따라서, 제한된 크기의 화면을 통해 360도 촬영된 동영상의 일부 영역만을 표시하고, 사용자의 조작에 따라 표시되는 영역을 조정하는 기술이 제시되었다. 그러나, 이와 같은 방법은 화면의 표시를 기본적으로 사용자의 조작에 의존한다는 점에서, 몇 가지 문제점을 안고 있었다.
본 명세서는 360도 회전 영상 또는 파노라마 영상을 볼 때, 미리 결정된 인자에 따라 표시 화면이 자동으로 패닝되는 동영상 장치를 제공하기 위한 것이다.
또한, 본 명세서는 360도 회전 영상 또는 파노라마 영상을 볼 때, 사용자의 조작을 최소화하여 사용자의 편의성을 향상시킨 동영상 장치를 제공하기 위한 것이다.
본 발명에 따른 동영상 장치는 동영상의 일부 영역을 표시하는 표시부; 및 미리 결정된 인자에 따라, 상기 동영상의 복수의 프레임들에 대해 상기 표시부에 의해 표시되는 표시 영역이 상기 인자에 대응되는 대상을 향해 패닝되도록 하는 제어부를 포함한다.
실시 예로서, 상기 제어부는 상기 복수의 프레임 상에서의 상기 대상의 위치를 나타내는 각도 값을 참조하여, 상기 표시 영역이 상기 복수의 프레임 상에서의 상기 대상의 위치를 향해 패닝되도록 한다.
실시 예로서, 상기 각도 값은 상기 복수의 프레임 상에서의 상기 대상의 수평 위치 또는 수직 위치를 나타내는 값이다.
실시 예로서, 상기 각도 값은 상기 복수의 프레임들에 대해 선형적으로 변하는 값이다.
실시 예로서, 상기 제어부는 상기 표시 영역이 상기 복수의 프레임들의 재생 순서에 따라 상기 복수의 프레임들에 대해 순차적으로 패닝되도록 한다.
실시 예로서, 상기 동영상이 저장된 동영상 파일은 상기 각도 값의 기준 좌표를 포함하는 각도 값 데이터를 포함한다.
실시 예로서, 상기 동영상 파일은 상기 각도 값을 더 포함한다.
실시 예로서, 상기 각도 값은 상기 동영상 파일과 구분되는 데이터베이스에 저장되며, 상기 제어부는 상기 각도 값을 참조할 때, 상기 데이터베이스로부터 상기 각도 값을 읽어낸다.
실시 예로서, 상기 미리 결정된 인자는 소리 크기, 소리의 주파수, 소리의 빈도, 냄새의 강도, 냄새의 종류, 색상의 종류, 색상의 농도, 색상의 출현 빈도, 색상의 분포도 또는 미리 결정된 객체이다.
실시 예로서, 상기 미리 결정된 인자는 복수의 인자 중에서 사용자에 의해 선택된 인자이다.
실시 예로서, 상기 동영상의 촬영 중에 상기 미리 결정된 인자에 따라 상기 각도 값을 생성하고, 상기 생성된 각도 값을 상기 동영상이 저장되는 동영상 파일에 삽입하거나 상기 동영상 파일과 구분되는 데이터베이스에 저장하는 각도 값 생성부를 더 포함한다.
실시 예로서, 상기 동영상이 저장된 동영상 파일을 참조하여, 상기 미리 결정된 인자에 따른 상기 각도 값을 생성하고, 상기 생성된 각도 값을 상기 동영상 파일에 삽입하거나 상기 동영상 파일과 구분되는 데이터베이스에 저장하는 각도 값 생성부를 더 포함한다.
실시 예로서, 상기 동영상은 하나의 프레임 안에 360도의 회전 영상을 포함하는 동영상이고, 상기 표시부는 상기 하나의 프레임에 대해 상기 360도 회전 영상의 일부만을 표시하는 디스플레이 장치이다.
실시 예로서, 상기 동영상은 하나의 프레임 안에 포함된 영상이 세로 길이보다 가로 길이가 1.5배 이상 긴 광폭 영상 또는 파노라마 영상인 동영상이고, 상기 표시부는 상기 하나의 프레임에 대해 상기 광폭 영상 또는 상기 파노라마 영상의 일부만을 표시하는 디스플레이 장치이다.
실시 예로서, 상기 동영상은 하나의 프레임 안에 포함된 영상이 세로 길이보다 가로 길이가 좁은 협폭 영상인 동영상이고, 상기 표시부는 상기 하나의 프레임에 대해 상기 협폭 영상의 일부만을 표시하는 디스플레이 장치이다.
본 발명에 따른 동영상 장치는 복수의 동영상 프레임을 갖는 동영상을 촬영하는 촬영부; 미리 결정된 인자에 따라, 상기 인자에 대응되는 대상의 상기 복수의 동영상 프레임 상에서의 위치를 나타내는 각도 값 정보를 산출하는 각도 값 생성부; 및 상기 산출된 각도 값 정보를 저장하는 저장부를 포함한다.
실시 예로서, 상기 각도 값 정보는 상기 복수의 동영상 프레임들에 대해 각각 산출되어 상기 저장부에 저장된다.
실시 예로서, 상기 저장부에 저장되는 상기 각도 값 정보는 상기 동영상을 포함하는 동영상 파일에 삽입되어 저장되거나, 상기 동영상 파일과 구분되는 데이터베이스의 일부로서 저장된다.
실시 예로서, 상기 각도 값 생성부는 상기 각도 값의 기준 좌표를 포함하는 각도 값 데이터를 생성하여 상기 동영상에 삽입한다.
실시 예로서, 상기 동영상은 하나의 프레임 안에 360도의 회전 영상을 포함하는 동영상 또는, 하나의 프레임 안에 포함된 영상이 세로 길이보다 가로 길이가 1.5배 이상 긴 파노라마 영상이다.
본 발명에 따른 컴퓨터 판독 가능한 저장 매체는 복수의 동영상 프레임들을 포함하고, 상기 복수의 동영상 프레임들 상의 위치를 나타내기 위한 기준 좌표를 제공하는 각도 값 데이터를 포함하고, 동영상 장치에 의해 재생 가능한 파일 포맷으로 형성되는, 동영상 파일을 포함한다.
본 명세서의 실시 예들에 따르면, 360도 회전 영상 또는 파노라마 영상을 볼 때, 미리 결정된 인자에 따라 표시 화면이 자동으로 패닝된다. 따라서, 동영상을 시청하는 사용자의 조작을 최소화하여 사용자의 편의성을 향상시킬 수 있다.
도 1은 일반적인 동영상 장치를 설명하는 도면이다.
도 2는 본 명세서의 실시 예에 따른, 동영상 장치 및 동영상 파일 포맷을 설명하는 도면이다.
도 3은 본 명세서의 실시 예에 따른, 동영상 장치의 촬영 중 각도 값 생성부를 나타내는 블록도이다.
도 4는 본 명세서의 실시 예에 따른, 동영상 장치의 촬영 후 각도 값 생성부를 나타내는 블록도이다.
도 5는 본 명세서의 실시 예에 따른, 동영상 프레임의 각도 값을 설정하는 방법을 설명하기 위한 도면이다.
도 6은 본 명세서의 실시 예에 따른, 측정된 음원의 위치를 동영상 프레임의 각도 값 데이터와 매칭시키는 방법을 설명하기 위한 도면이다.
도 7은 본 명세서의 실시 예에 따른, 동영상 장치의 각도 값 생성 방법을 설명하는 순서도이다.
도 8은 본 명세서의 실시 예에 따른, 동영상 장치의 동영상 재생 방법을 설명하는 순서도이다.
도 9는 본 명세서의 실시 예에 따른, 동영상 장치의 동영상 재생 방법을 예시적으로 설명하는 개념도이다.
도 10은 본 명세서의 다른 실시 예에 따른, 동영상 장치의 동영상 재생 방법을 예시적으로 설명하는 개념도이다.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 나타낸다.
도 1은 일반적인 동영상 장치를 설명하는 도면이다. 도 1을 참조하면, 디스플레이의 화면에서 재생되는 영상보다 크기가 큰 영상을 포함하고 있는 영상 프레임(또는, 영상 화면, 10)이 제시된다. 도 1에서 디스플레이에 의해 표시되는 화면(이하, 표시 화면, 11)은 영상 프레임보다 크기가 작으므로, 영상 프레임의 일부분만을 표시할 수 있다.
표시 화면(11)에 영상 프레임의 다른 영역을 표시하도록 하고 싶을 때, 일반적인 동영상 장치는 사용자의 조작을 요구한다. 예를 들어, 표시 화면(11)내의 대상물이 상하 또는 좌우로 이동할 때, 이동하는 대상물을 계속적으로 표시화면(11)에 표시하기 위해서는 사용자가 표시 화면(11)을 상하로 드래그하거나(11a, 11b) 좌우로 드래그하여(11c, 11d), 표시 화면(11)에 표시되는 영역을 상하 또는 좌우로 이동시켜야 한다. 그러나 이 같은 수동 조작 방법은 표시 화면을 이동시킬 때마다 사용자의 조작을 요구하므로, 사용자의 불편을 초래한다. 또한, 동영상의 주된 대상이 바뀌는 경우(예를 들어, 이전 부분에서는 화자가 정면의 A 사람이었으나 다음 부분에서는 화자가 후면의 B 사람으로 바뀐 경우), 화면에 표시되는 부분을 사용자가 조작하지 않는 한 화면에는 계속하여 정면의 사람만을 표시하는 문제가 발생할 것이며, 만약 사용자가 직접 화면에 대한 전환을 조작하더라도 대상의 전환 속도를 사용자의 조작이 미처 따라가지 못해 동영상의 시청 포인트를 놓치게 되는 문제점이 있다.
도 2는 본 명세서의 실시 예에 따른, 동영상 장치 및 동영상 파일 포맷을 설명하는 도면이다. 도 2를 참조하면, 동영상 장치에 의해 재생되는 동영상 파일은 하나의 프레임에 대해 영상 데이터 및 각도 값 데이터를 포함한다. 영상 데이터는 표시되는 영상 프레임(100)을 나타내는 데이터이다. 각도 값 데이터는 영상 데이터가 표시되는 영상 프레임을 수평 및 수직 방향에 대하여 임의의 크기로 나누고, 나누어진 각 위치에 대응되는 각도 값들을 좌표로서 포함하는 데이터이다.
실시 예로서, 각도 값 데이터는 영상 프레임(100) 내 특정 지점의 수평 위치를 나타내는 수평 각도 값(110) 또는 특정 지점의 수직 위치를 나타내는 수직 각도 값(120)을 포함할 수 있다.
예를 들어, 동영상 프레임 내에서의 위치를 추적하기 위해 대응되는 각도 값이 설정(또는, 저장)되는 인자(이하, 대상 인자)로서 영상 프레임(100)의 우측에 위치한 개가 지정된다고 가정한다. 이때, 우측에 위치한 개의 위치를 인식하여, 개의 위치를 나타내는 대표값으로서 개의 얼굴의 중앙점(예를 들어, 개의 얼굴 윤곽으로 구분되는 영역의 수평 및 수직 중앙점)의 수평 각도 값 및 수직 각도 값이 이 영상 프레임(100)에 대한 대상 인자(여기서는, 개)의 각도 값으로서 저장될 수 있다.
예를 들어, 영상 프레임(100)상에서 대상 인자(여기서는, 개)의 수평 위치에 대응되는 수평 각도 값 268°가 대상 인자에 대한 영상 프레임(100)의 수평 각도 값으로서 저장부에 저장될 수 있다. 마찬가지로, 영상 프레임(!00)상에서 대사 인자의 수직 위치에 대응되는 수직 각도 값95°가 대상 인자에 대한 영상 프레임(100)의 수직 각도 값으로서 저장부에 저장될 수 있다.
또한, 동영상 파일이 재생될 경우, 디스플레이되는 영상 프레임은 계속 변하게 되는데, 동영상 재생 중 대상 인자가 이동할 경우, 각 영상 프레임마다 대상 인자에 대한 수평 각도 값 및 수직 각도 값은 변경될 것이다.
따라서, 각 영상 프레임에 대한 프레임 정보와 각 영상 프레임 내의 대상 인자에 대한 각도 값 정보는 함께 저장되고, 서로 매칭되어야 한다(예를 들어, 30번 프레임을 디스플레이 할 때에는, 대상 인자의 저장된 각도 값들 중 30번 프레임에 대응되는 각도 값이 참조되도록 매칭된다).
이처럼, 본 명세서의 실시 예에 따른, 동영상 장치의 동영상 파일은 표시되는 동영상 화면을 나타내기 위한 영상 데이터 외에 대상 인자의 화면(또는, 동영상 프레임) 내 위치를 나타내기 위한 각도 값 데이터들을 더 포함한다. 후술하겠지만, 동영상 장치는 위와 같은 구성을 통해, 선택 또는 결정된 대상 인자에 따라, 표시 화면이 대상 인자의 움직임을 추적하여 자동으로 패닝되도록 제어한다. 여기서, 패닝의 의미는 영상 프레임들 내에서 표시 화면을 이동시키는 것을 의미한다. 따라서, 사용자에 의해 대상 인자가 선택 또는 결정되면, 대상 인자의 위치(또는, 움직임)에 따라 자동으로 화면이 회전 또는 전환되므로, 사용자의 편의성이 증대되고 대상 인자의 위치가 급격하고 빠르게 전환되는 경우에도 동영상의 포커스를 적절히 추적할 수 있다.
도 3은 본 명세서의 실시 예에 따른, 동영상 장치의 촬영 중 각도 값을 생성하는 각도 값 생성부를 나타내는 블록도이다. 도 3을 참조하면, 각도 값 생성부(230)는 촬영부(210)로부터 촬영된 동영상에 각도 값을 삽입하거나 별도의 데이터베이스에 저장하여 저장부(240)에 제공한다.여기서, 각도 값 생성부(230)는 본 명세서의 동영상 장치(200)에 포함되는 모듈이다. 반면에, 촬영부(210), 인자 관리부(220) 또는 저장부(240)는 동영상 장치(200)에 포함되는 모듈일 수 있으나, 그에 한정되지 않으며, 동영상 장치(200)와는 구분되는 별개의 장치일 수 있다.
각도 값 생성부(230)는 촬영부(210)로부터 동영상을 수신한다. 그리고, 수신된 동영상에 각도 값 데이터를 삽입한다. 이때, 각도 값 데이터는 수신된 동영상의 영상 프레임을 수평 및 수직 방향에 대하여 임의의 크기로 나누고, 나누어진 각 위치에 대응되는 각도 값들을 좌표로서 포함하는 데이터이다. 각도 값 데이터는 수평 위치를 나타내는 수평 각도 값(110, 도 2 참조) 및 수직 위치를 나타내는 수직 각도 값(120, 도 2 참조)을 포함할 수 있다. 각도 값 데이터는 동영상 프레임(또는, 프레임 정보)에 삽입되어 저장된다.
그리고, 각도 값 생성부(230)는 위치 추적을 위한 각도 값을 설정할 대상 인자에 대한 정보(Pa, 이하 인자 정보)를 수신한다. 인자 정보(Pa)는 인자 관리부(220)로부터 제공될 수 있다. 그리고, 대상 인자에 따라, 대상 인자의 동영상 프레임 내 위치를 나타내는 각도 값을 산출한다. 산출된 대상 인자의 각도 값은 동영상에 삽입되어 저장될 수도 있고, 동영상과 구분되는 별도의 데이터베이스 형태로 저장될 수도 있다. 별도의 데이터베이스 형태로 저장되는 경우, 동영상 장치(200)는 동영상을 재생할 때, 저장된 데이터베이스를 참조하여 대상 인자의 동영상 프레임 내 위치를 추적할 수 있다.
여기서, 대상 인자는 소리의 음원(즉, 소리의 발생 위치 또는 소리를 발생하는 객체), 특정 색상(즉, 특정 색상이 위치한 지점 또는 특정 색상을 띈 객체) 또는 지정된 객체일 수 있다. 더욱 상세하게는, 대상 인자는 소리 크기, 소리의 주파수, 소리의 빈도, 색상의 종류, 색상의 농도, 색상의 출현 빈도, 색상의 분포도 또는 미리 지정된(또는, 결정된) 객체일 수 있다.
예를 들어, 대상 인자가 소리의 크기인 경우, 각도 값 생성부(230)는 소리를 가장 크게 발생시키는 음원의 위치를 추적한다. 이때, 음원의 위치를 추적하는 방법은 복수의 사운드 센서를 이용하여 음원의 3차원 위치를 추적하는 방법이 사용될 수 있다. 음원의 3차원 위치를 추적하는 구체적인 방법은 당해 기술 분야에 널리 알려져 있으므로 그에 대한 설명은 생략된다.
이어서, 각도 값 생성부(230)는 추적된 음원의 위치에 대응하는 각도 값을 산출한다. 여기서 각도 값은 동영상의 프레임 상에서의 추적된 음원의 수평 위치 또는 수직 위치를 나타내는 각도 값이다. 각도 값 생성부(230)이 추적된 음원의 위치에 대응하는 각도 값을 산출하는 구체적인 방법은 도 6에서 후술될 것이다. 그리고, 각도 값 생성부(230)는 산출된 각도 값을 대상 인자에 대해 저장한다. 앞서 설명한 바와 같이 대상 인자의 각도 값은 각도 값 데이터와 함께 동영상에 삽입되어 저장될 수 있다. 또는, 대상 인자의 각도 값은 각도 값 데이터와 달리 동영상과 구분되는 별도의 데이터베이스에 저장될 수도 있다. 각도 값 생성부(230)는 각도 값 데이터 및 대상 인자의 각도 값 저장이 완료된 동영상을 출력한다. 출력된 동영상은 저장부(240)에 저장될 수 있다.
실시 예로서, 하나의 동영상에 대해 대상 인자는 복수 개일 수 있다. 예를 들어, 각도 값을 삽입할 인자가 소리 인자(예를 들어, 소리 크기) 및 색상 인자(예를 들어, 색상의 종류)인 경우, 각도 값 생성부는 소리를 가장 크게 발생시키는 음원의 위치를 추적하여 소리 크기에 대한 각도 값을 산출하는 것과는 별개로, 색상 인자에 대한 각도 값을 더 산출한다. 예를 들어, 색상 인자가 파란색인 경우, 색상을 판별하는 센서를 이용하여 파란색 색상이 가장 많이 분포된 또는 가장 밀집된 배경 또는 대상물을 추적하고, 추적된 배경 또는 대상물의 동영상 프레임 내 위치에 대응하는 각도 값을 산출한다. 그리고, 소리 인자에 대한 각도 값 및 색상 인자 각각에 대한 각도 값을 각각 동영상 내에 삽입하거나 별도의 데이터베이스에 저장한다.
상기와 같은 구성에 따르면, 동영상의 촬영 중에 대상 인자들의 동영상 프레임 내 위치를 나타내는 각도 값이 산출된다. 뒤에서 더욱 상세히 설명하겠지만, 산출된 대상 인자들의 각도 값들은 동영상의 재생 시에 참조되어, 동영상 장치(200) 표시 화면을 패닝하는 데 이용된다.
도 4는 본 명세서의 실시 예에 따른, 동영상 장치의 촬영 후 각도 값을 생성하는 각도 값 생성부를 나타내는 블록도이다. 도 4를 참조하면, 각도 값 생성부(330)는 동영상 저장부(310)로부터 저장된 동영상을 읽어내고, 읽어낸 동영상으로부터 대상 인자에 대응되는 각도 값을 산출한 후, 산출된 각도 값을 동영상에 삽입하거나 별도의 데이터베이스에 저장하여 저장부(340) 또는 재생부(350)에 제공한다.
여기서, 각도 값 생성부(330)는 본 명세서의 동영상 장치(300)에 포함되는 모듈이다. 반면에, 동영상 저장부(310), 인자 관리부(320), 저장부(340) 또는 재생부(350)는 동영상 장치(300)에 포함되는 모듈일 수 있으나 그에 한정되지 않으며, 동영상 장치(300)와는 구분되는 별개의 장치일 수 있다.
각도 값 생성부(330)는 동영상 저장부(310)에 저장된 동영상을 읽어낸다. 이때, 동영상 저장부(310)에 저장된 동영상은 이미 촬영이 완료된 동영상으로서, 다양한 동영상 파일 포맷 중 어느 하나의 파일 포맷을 가질 수 있다. 그리고, 각도 값 생성부(300)는 읽어낸 동영상이 각도 값 데이터가 삽입된 동영상인지 판단한다. 읽어낸 동영상이 각도 값 데이터가 삽입된 동영상이라면, 각도 값 생성부(300)는 각도 값 데이터를 새롭게 삽입하지 않고 곧바로 대상 인자의 각도 값을 산출하기 위해 이후의 프로세스를 진행한다. 반면, 읽어낸 동영상이 각도 값 데이터가 삽입되지 않은 동영상이라면, 각도 값 생성부(300)는 대상 인자의 각도 값을 산출하기에 앞서, 동영상에 각도 값 데이터를 삽입한다. 이때, 동영상에 삽입되는 각도 값 데이터 및 각도 값 데이터를 동영상에 삽입하는 방법에 대한 구체적인 내용은 도 3에서 설명한 바와 동일한 바, 여기서는 그에 대한 설명을 생략한다.
그리고, 각도 값 생성부(330)는 위치 추적을 위한 각도 값을 설정할 대상 인자에 대한 정보(Pa)를 수신한다. 인자 정보(Pa)는 인자 관리부(320)로부터 제공될 수 있다. 그리고, 대상 인자에 따라, 각도 값 생성부(330)는 읽어낸 동영상의 동영상 프레임 내에서 대상 인자의 위치를 추적한다. 그리고, 각도 값 데이터를 참조하여, 추적된 위치에 대응되는 각도 값을 대상 인자의 각도 값으로서 산출한다. 산출된 대상 인자의 각도 값은 읽어낸 동영상에 삽입되어 저장될 수도 있고, 읽어낸 동영상과 구분되는 별도의 데이터베이스 형태로 저장될 수도 있다. 위에서와 마찬가지로, 별도의 데이터베이스 형태로 저장되는 경우, 동영상 장치(300)는 동영상을 재생할 때, 저장된 데이터베이스를 참조하여 대상 인자의 동영상 프레임 내 위치를 추적할 수 있다. 여기서, 대상 인자는 특정 색상 또는 지정된 객체일 수 있다. 더욱 상세하게는, 대상 인자는 색상의 종류, 색상의 농도, 색상의 출현 빈도, 색상의 분포도 또는 미리 지정된(또는, 결정된) 객체일 수 있다.
예를 들어, 대상 인자가 특정 색상(예를 들어, 파란색)인 경우, 각도 값 생성부(330)는 동영상의 프레임 내에서 파란색 색상이 가장 많이 분포된 또는 가장 밀집된 배경 또는 대상물의 위치를 추적한다. 그리고, 추적된 배경 또는 대상물의 동영상 프레임 내 위치에 대응하는 각도 값을 산출한다. 그리고, 각도 값 생성부(330)는 산출된 각도 값을 대상 인자(여기서는, 파란색)에 대해 저장하고, 각도 값 저장이 완료된 동영상(가공된 동영상)을 출력한다. 출력된 동영상은 저장부(340)에 저장되거나 재생부(350)에 제공되어 재생될 수 있다.
실시 예로서, 하나의 동영상에 대해 대상 인자는 복수 개일 수 있다. 예를 들어, 대상 인자가 특정 색상(예를 들어, 파란색) 및 지정된 객체(예를 들어, 개)인 경우, 파란색에 대응하는 대상 및 개에 대응하는 객체의 위치를 추적한다. 그리고 추적된 위치에 대한 각도 값들을 특정 색생 및 지정된 객체에 대해 각각 저장하고, 각도 값 저장이 완료된 동영상을 출력한다. 앞서 설명한 바와 같이, 이때에도 대상 인자의 각도 값은 동영상 내에 삽입되거나 동영상과는 구분되는 별도의 데이터베이스에 저장될 수 있다.
도 5는 본 명세서의 실시 예에 따른, 동영상 프레임의 각도 값 데이터를 설정하는 방법을 설명하기 위한 도면이다. 도 5를 참조하면, 각도 값 데이터의 설정은 동영상 장치의 위치를 중심으로 설정될 수 있다. 예를 들어, 동영상 장치가 바라보는 정면을 기준점 0도로서 설정하면 시계 방향으로 순차적으로 동영상 장치의 오른쪽, 후면, 왼쪽 지점이 각 각각 90도, 180도, 270도의 각도 값을 갖도록 각도 값 데이터의 좌표가 설정된다. 그리고, 이렇게 설정된 각도 값 데이터에 따라 촬영된 동영상 프레임 내의 각 지점들의 위치가 표시된다. 예를 들어, 동영상 장치의 오른쪽 지점에 위치한 객체가 촬영되면, 그 객체는 각도 값 데이터에 따라 동영상 프레임 상에서 수평 각도 값 90도로서 표시된다.
다만, 이는 예시적인 것으로서, 기준점 0도는 동영상 장치의 정면이 아닐 수도 있다. 기준점 0도는 동영상 장치의 오른쪽, 후면, 왼쪽 또는 임의의 방향일 수 있다. 그 경우, 결정된 기준점 0도를 중심으로 시계 방향으로 각각 90도, 180도, 270도 등의 각도 값을 갖도록 각도 값 데이터가 설정될 것이다.
또한, 여기서는 각 지점들의 수평 위치에 대해서만 각도 값 데이터가 설명되었지만, 동일한 방법으로 수직 위치에 대해서도 각도 값 데이터가 설정될 수 있다. 예를 들어, 동영상 장치의 정면을 기준점 0도로 정하는 경우, 시계 방향으로 동영상 장치의 아래, 후면, 위쪽이 각각 90도, 180도 270도의 수직 각도 값을 갖도록 각도 값 데이터의 좌표들이 설정될 수 있다.
도 6은 본 명세서의 실시 예에 따른, 측정된 음원의 위치를 동영상 프레임의 각도 값 데이터와 매칭시키는 방법을 설명하기 위한 도면이다. 도 6을 참조하면, 각도 값 데이터의 설정방법과 유사하게, 음원의 위치가 결정된다. 예를 들어, 동영상 장치가 바라보는 정면을 기준점 0도로서 설정하면, 시계 방향으로 순차적으로 동영상 장치의 오른쪽, 후면, 왼쪽 지점이 각 각각 90도, 180도, 270도의 각도 값을 갖도록 좌표가 설정되고, 음원의 위치에 해당되는 좌표 값이 음원의 위치가 된다. 가령, 도 6에서 음원은 90도 위치에 있으므로, 음원의 위치는 90도가 된다.
그리고, 측정된 음원의 위치를 결정하는 데 사용된 기준점과 각도 값 데이터의 기준점을 비교하여, 음원의 위치를 동영상 프레임 내 각도 값으로 매칭한다. 예를 들어, 도 6과 같이, 음원의 위치를 결정하는 데 사용된 기준점과 각도 값 데이터의 기준점이 동일한 경우, 음원의 위치는 그대로 동영상 프레임 내 각도 값이 된다.
다만, 이는 예시적인 것으로서, 측정된 음원의 위치를 결정하는 데 사용된 기준점과 각도 값 데이터의 기준점은 서로 다를 수 있다. 이 경우, 음원의 위치를 프레임 내 각도 값으로 매칭할 때, 기준점들 사이의 각도 차이만큼의 오차가 보상되어야 한다. 예를 들어, 측정된 음원의 위치를 결정하는데 사용된 기준점이 동영상 장치의 오른쪽(즉, 각도 값 데이터의 90도 지점)인 경우, 측정된 음원의 위치와 동영상 프레임 내 위치 사이에는 기준점들 사이의 각도 차(즉, 90도)만큼의 오차가 발생한다. 따라서, 측정된 음원의 위치를 동영상 프레임 내 각도 값으로 매칭할 때, 측정된 음원의 위치에서 90도를 감산하는 방법을 통해 이 오차를 보상하여야 한다.
한편, 각도 값 데이터와 마찬가지로, 음원의 위치를 결정할 때에도 음원의 수직 위치가 고려될 수 있다. 예를 들어, 동영상 장치의 정면을 기준점 0도로 정하는 경우, 시계 방향으로 동영상 장치의 아래, 후면, 위쪽에 위치한 음원이 각각 90도, 180도 270도의 수직 위치 값을 갖도록 설정될 수 있다.
한편, 단말기(여기서는, 동영상 장치)의 어느 방향에서 소리가 나는지(즉, 음원의 위치가 어디인지)를 판단하는 방법은 당해 기술 분야에 널리 알려진 것으로서, 예를 들면, TDoA 기반의 알고리즘 기술 등을 통해 용이하게 구현할 수 있다. 그러므로, 여기서는 그에 대한 보다 구체적인 설명은 생략한다.
도 7은 본 명세서의 실시 예에 따른, 동영상 장치의 각도 값 생성 방법을 설명하는 순서도이다. 도 7을 참조하면, 촬영 중 각도 값 생성 방법은 S110 단계 내지 S170 단계를 포함한다.
S110 단계에서, 동영상 장치는 각도 값을 설정할 인자(이하, 대상 인자)가 소리인지 판단한다. 대상 인자가 소리이면, 각도 값 생성 방법은 S120 단계로 진행한다. 그렇지 않으면, 각도 값 생성 방법은 S150 단계로 진행한다.
S120a 단계에서, 동영상 장치는 복수의 마이크를 이용하여 소리를 측정한다. 이때, 복수의 마이크를 이용하는 이유는 음원의 3차원 위치를 판단하기 위해서이며, 음원의 3차원 위치를 판단하는 구체적인 방법은 당해 기술 분야에 널리 알려져 있으므로 그에 대한 설명은 생략한다.
S120b 단계에서, 동영상 장치는 측정된 음원에 포함된 소리들 중 가장 큰 소리를 판별한다. 그리고 가장 큰 소리의 음역 대역을 추출한다.
S120c 단계에서, 동영상 장치는 측정된 음역 대역에 따라 음원의 위치를 측정하고, 측정된 음원의 위치를 각도 값 데이터와 매칭시켜, 음원의 동영상 프레임 내에서의 각도 값을 산출한다. 음원의 위치를 각도 값 데이터와 매칭시키는 구체적인 방법은 도 6에서 상세히 설명된 바, 여기서는 그에 대한 설명을 생략한다. 각도 값이 산출되면 각도 값 생성 방법은 S150 단계로 진행한다.
다시 S110 단계로 돌아가서, 대상 인자가 소리가 아니면, 각도 값 생성 방법은 S130 단계로 진행한다. S130 단계 내지 S130c 단계는 대상 인자가 색상인 경우 각도 값을 생성하는 방법에 대한 단계들이다.
S130 단계에서, 동영상 장치는 대상 인자가 색상인지 판단한다. 대상 인자가 색상이면 각도 값 생성 방법은 S130a 단계로 진행한다. 그렇지 않으면, 각도 값 생성 단계는 대상 인자가 객체인지를 판단하기 위해, S140 단계로 진행한다.
S130a 단계에서, 동영상 장치는 대상 인자로 결정된 색상이 가장 많이 분포된 또는 가장 밀집된 영역을 판단하기 위해, 촬영된 프레임의 픽셀 영역마다 인자로 결정된 색상이 차지하는 비율을 산출한다.
S130b 단계에서, 동영상 장치는 산출된 비율이 가장 높은 픽셀 구간을 선택한다.
S130c 단계에서, 동영상 장치는 선택된 픽셀 구간의 위치를 측정하고, 측정된 위치를 각도 값 데이터와 매칭시켜, 대상 인자로 결정된 색상의 동영상 프레임 내에서의 각도 값을 산출한다. 색상의 위치를 각도 값 데이터와 매칭시키는 구체적인 방법은, 앞서 음원의 위치를 각도 값 데이터와 매칭시켰는 방법과 실질적으로 동일하므로, 여기서는 그에 대한 설명을 생략한다. 각도 값이 산출되면 각도 값 생성 방법은 S150 단계로 진행한다.
다시 S130 단계로 돌아가서, 대상 인자가 색상이 아니면, 각도 값 생성 방법은 S140 단계로 진행한다. S140 단계 내지 S140c 단계는 대상 인자가 객체인 경우 각도 값을 생성하는 방법에 대한 단계들이다.
S140 단계에서, 동영상 장치는 대상 인자가 객체인지 판단한다. 대상 인자가 객체이면, 각도 값 생성 방법은 S140a 단계로 진행한다. 그렇지 않으면, 각도 값 생성 방법은 곧바로 동영상을 저장하기 위해 S170 단계로 진행한다.
S140a 단계에서, 동영상 장치는 읽어낸 동영상의 프레임으로부터 객체를 검색한다. 이때, 객체는 특정 인물의 얼굴이나 신체 전체, 또는 특정 동물이나 사물이 될 수 있다.
S140b 단계에서, 동영상 장치는 프레임 내에서 객체가 위치한 지점의 각도 값을 산출한다. 이때, 산출된 각도 값은 수평 각도, 수직 각도 또는 수평 및 수직 각도 값일 수 있다.
한편, 객체가 면적(또는, 부피)을 갖는 물체일 경우, 객체가 위치한 지점은 2차원 면(또는, 3차원 용적)일 것이다. 이때, 객체의 위치를 하나의 값으로 특정하기 위해, 객체의 위치를 나타내는 대표값을 객체의 위치로서 결정할 수 있다. 예를 들어, 객체가 특정 사람의 얼굴일 경우, 얼굴 부분의 외곽선 인식을 통해 얼굴의 범위를 판단하고, 이를 기초로 얼굴 범위의 중심점(가령, 얼굴 윤곽의 수직 중심선과 수평 중심선의 교차점)을 얼굴의 대표값으로서 산출하고, 산출된 값을 객체의 위치로서 결정할 수 있다.
그리고, 결정된 객체의 위치를 각도 값 데이터와 매칭시켜, 객체의 동영상 프레임 내에서의 각도 값을 산출한다. 객체의 위치를 각도 값 데이터와 매칭시키는 구체적인 방법은, 앞서 음원의 위치를 각도 값 데이터와 매칭시켰는 방법과 실질적으로 동일하므로, 여기서는 그에 대한 설명을 생략한다. 각도 값이 산출되면 각도 값 생성 방법은 S150 단계로 진행한다.
S150 단계에서, 동영상 장치는 대상 인자에 대해 산출된 각도 값을 동영상 프레임에 삽입한다. 다만 이는 예시적인 것으로서, 산출된 각도 값은 동영상 프레임에 삽입되는 대신, 별도의 데이터베이스에 저장될 수 있다.
S160 단계에서, 동영상 장치는 삽입 또는 저장된 각도 값들을 양자화한다. 여기서 양자화는 각도 값의 급격한 변화가 있는 경우, 각도 값의 변동 폭을 감소시켜 이후 재생되는 화면의 패닝을 보다 부드럽게 하기 위한 과정이다.
예를 들어, 대상 인자의 각도 값이 제 1 프레임에서 100이고, 제 2 프레임에서 110이고, 제 3 프레임에서 270인 경우, 프레임간 각도 값의 급격한 변화를 막기 위해 프레임들의 각도 값 변화를 선형화하는(linearize) 양자화를 수행하여, 제 1 프레임, 제 2 프레임 및 제 3 프레임의 각도 값을 각각 100, 185, 270로 보정할 수 있다.
또한, 이러한 양자화는 프레임 그룹 단위로 수행될 수 있다. 예를 들어, 30프레임이 하나의 프레임 그룹이라고 가정한다. 이때, 제 29 프레임의 각도 값이 90이고, 제 59프레임의 각도 값이 270인 경우, 각도 값의 급격한 변화를 막기 위해 양자화를 수행하여, 제 29 프레임 부터 제 59 프레임의 각도 값이 90부터 270까지 선형적으로 변하도록, 제 30 프레임 부터 제 58 프레임의 각도 값을 보정할 수 있다.
S190 단계에서, 동영상 장치는 대상 인자의 양자화된 각도 값을 저장한다. 이때, 양자화된 각도 값은 앞에서 설명한 바와 마찬가지로, 동영상에 삽입되는 방식으로 저장될 수도 있고, 동영상과 별개인 다른 데이터베이스에 저장되는 방식으로 저장될 수도 있다. 그리고, 각도 값이 삽입된 동영상 또는 각도 값을 포함하는 데이터베이스는 휘발성 또는 불휘발성 저장 매체를 포함하는 저장부에 저장될 수 있다.
상기와 같은 구성에 따르면, 동영상 촬영 중에 대상 인자들(예를 들어, 소리 또는 색상)에 대한 각도 값 생성 및 삽입이 가능하다.
한편, 여기서는 대상 인자가 소리. 색상 또는 객체인 경우에 대해서만 설명했으나, 본 명세서의 범위가 이에 한정되는 것은 아니며, 각도 값을 삽입하는 인자는 냄새를 비롯한 다른 어떤 종류의 것도 될 수 있다.
또한, 여기서는 소리 인자, 색상 인자 및 객체 인자가 택일적인 것처럼 설명되었으나, 본 명세서의 범위가 이에 한정되는 것은 아니며, 각도 값을 삽입하는 인자로서 소리 인자, 색상 인자 및 객체 인자가 동시에 선택될 수 있다.
도 8은 본 명세서의 실시 예에 따른, 동영상 장치의 동영상 재생 방법을 설명하는 순서도이다. 도 8을 참조하면 동영상 재생 방법은 S310 단계 내지 S350 단계를 포함한다.
S310 단계에서, 동영상 장치는 동영상 내의 인자들의 목록을 표시한다. 이때, 표시되는 목록의 인자들은 앞에서, 대응하는 대상에 대해 각도 값이 산출되어 삽입된 인자들을 의미한다. 실시 예로서, 표시되는 목록의 인자들은 소리 크기, 소리의 주파수, 소리의 빈도, 냄새의 강도, 냄새의 종류, 색상의 종류, 색상의 농도, 색상의 출현 빈도, 색상의 분포도 또는 미리 결정된 객체일 수 있다.
S320 단계에서, 사용자가 목록중의 인자를 선택했는지 판단한다. 사용자가 인자를 선택했으면, 동영상 재생 방법은 S330 단계로 진행한다. 그렇지 않으면, S340 단계로 진행한다.
S330 단계에서, 사용자가 인자를 선택하였으므로, 동영상 장치는 사용자에 의해 선택된 인자를 로딩한다.
다시 S320 단계로 돌아가서, 사용자가 인자를 선택하지 않았으면 동영상 재생 방법은 S340 단계로 진행하고, S340 단계에서, 동영상 장치는 기본값으로서 설정된 인자에 따라 표시화면을 자동으로 패닝하기 위해 디폴트 인자를 로딩한다.
S350 단계에서, 동영상 장치는 로딩된 인자에 따라 재생화면을 조정하여 동영상을 재생한다. 구체적으로, 동영상 장치는 로딩된 인자에 대응되는 대상에 대한 각도 값을 참조하여, 화면에 표시될 프레임 내의 영역을 자동으로 패닝시키며 동영상을 재생한다.
상기와 같은 구성에 따르면, 동영상 재생시 선택된 인자에 따라 표시 화면을 자동으로 조정 및 패닝하여 사용자에게 표시할 수 있다.
도 9는 본 명세서의 실시 예에 따른, 동영상 장치의 동영상 재생 방법을 예시적으로 설명하는 개념도이다. 도 8을 참조하면, 동영상의 제 1 프레임(410) 및 제 30 프레임(420)이 도시된다.
도 9에서 선택된 인자는 객체를 나타내는 인자로서 제 1 프레임(410)의 우측에 위치한 개라고 가정한다. 그리고, 제 1 프레임(410)에서 표시 화면(411)은 영상 프레임의 우측에 위치한다. 동영상의 재생시, 동영상 장치는 선택된 인자에 대응되는 대상(여기서는 우측의 개)에 대한 각도 값을 읽어낸다. 앞서 설명한 것처럼, 개에 대한 각도 값은 개의 위치를 나타내는 하나의 대표값(예를 들어, 개를 나타내는 윤곽의 수평 중앙값)으로 표현될 수 있다. 이때의 읽어낸 개의 수평 각도 값은 310도이다. 이때, 표시 화면(411)의 위치는 개를 중심으로 조정되어, 표시 화면(411)에 개가 디스플레이 되도록 한다. 한편, 표시 화면(411)도 면적를 갖는 2차원 면이므로, 표시 화면의 위치를 간단한 값으로 표현하기 위해, 표시 화면(411)의 위치를 나타내는 하나의 대표값(예를 들어, 표시 화면의 수평 중앙값)을 설정할 수 있다. 그리고, 표시 화면(411)의 대표값이 개의 위치를 나타내는 대표값을 따라가도록(또는, 추적하도록) 표시 화면의 위치를 조정함으로써, 표시 화면(411)에 개가 디스플레이될 수 있다.
동영상이 재생되는 동안에도, 동일한 방법으로 표시 화면(411)은 개의 위치를 따라가며 개를 디스플레이한다.
제 30 프레임(420)에서, 개의 위치는 수평 각도 값 180도로 이동한다. 이때, 표시 화면(421)은 중앙에 위치한 개에게 포커싱되도록, 이동한 개의 각도 값(여기서는, 180도)을 읽어내고, 읽어낸 각도 값을 향해 표시 화면의 동영상 프레임 내 위치(또는, 위치를 나타내는 대표값)가 이동하도록 왼쪽으로 패닝된다(재생화면 조정).
실시 예로서, 표시 화면의 급격한 전환을 방지하기 위해, 제 2 프레임 내지 제 29 프레임은 310도에서 180도까지 선형적으로 감소하는 각도 값을 갖도록 양자화될 수 있다.
상기와 같은 구성에 따르면, 사용자의 조작이 없이도, 표시 화면이 선택된 인자에 대응하는 대상으로 포커싱되어 재생된다. 따라서, 동영상 시청에 있어서, 사용자의 편의성이 증대될 수 있다.
도 9는 본 명세서의 다른 실시 예에 따른, 동영상 장치의 동영상 재생 방법을 예시적으로 설명하는 개념도이다. 도 9를 참조하면, 동영상의 제 1 프레임(510) 및 제 30 프레임(520)이 도시된다. 도 9에서, 동영상 장치는 선택된 인자의 수평 각도 값 및 수직 각도 값을 모두 참조하여, 재생 화면을 패닝한다.
도 9에서 선택된 인자는 영상 프레임의 중앙에 위치한 개라고 가정한다. 그리고, 제 1 프레임(510)에서 표시 화면(511)은 선택된 인자인 개를 디스플레이하기 위해 개의 영상 프레임 내 위치에 따라, 개의 각도 값을 추적하여 영상 프레임의 중앙에 위치된다. 개의 위치 및 표시 화면(511)의 위치를 각도 값(또는, 대표값)으로 표시하는 방법, 표시 화면(511)이 개의 각도 값을 추적하여 영상 프레임의 중앙에 위치되는 방법에 대한 구체적인 내용은, 도 8에서 설명된 것과 실질적으로 동일하다. 다만, 도 8에서 개나 표시 화면의 영상 프레임 내 위치가 수평 각도 값으로써 표시된 것에 반해, 도 9에서는 개 및 표시 화면(511)의 영상 프레임 내 위치가 수평 및 수직 각도 값으로써 표시된다.
예를 들어, 도 9에서 제 1 프레임(510) 내 개의 각도 값은 수평 각도 값 180도 및 수직 각도 값 120도이다. 동영상 장치는 제 1 프레임(510) 내 개의 각도 값을 읽어내고, 표시 화면(511)에 개가 디스플레이 되도록 표시 화면(511)의 위치를 읽어낸 개의 각도 값에 따라 이동시킨다(가령, 표시 화면(511)의 위치를 나타내는 대표값이 개의 각도 값과 일치하도록 표시 화면(511)을 이동시킨다).
그리고, 제 30 프레임(520)에서, 개의 위치는 우측으로(수평 각도 값 310도 및 수직 각도 값 90도) 이동한다. 이때, 표시 화면(521)은 우측으로 이동한 개에게 포커싱되도록, 이동한 개의 각도 값(여기서는, 수평 각도 값 310도 및 수직 각도 값 90도)을 읽어내고, 읽어낸 각도 값을 향해 표시 화면(521)이 이동하도록 왼쪽으로 패닝된다(재생화면 조정).
실시 예로서, 표시 화면의 급격한 전환을 방지하기 위해, 제 2 프레임 내지 제 29 프레임은 수평적으로 180도에서 310도까지, 그리고 수직적으로 120도에서 90도까지 선형적으로 증가 또는 감소하는 각도 값을 갖도록 양자화될 수 있다.
상기와 같은 구성에 따르면, 수직 및 수평 각도 값을 참조하여, 표시 화면이 보다 다양한 방향으로 자동 패닝될 수 있다.
본 발명의 상세한 설명에서는 구체적인 실시 예를 들어 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한 각 실시 예는 여러 가지 형태로 변형될 수 있다.
또한, 여기서 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미 한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 발명의 범위는 상술한 실시 예에 국한되어 정해져서는 안되며 후술하는 특허 청구범위뿐만 아니라 이 발명의 특허 청구범위와 균등한 것들에 의해 정해져야 한다.
10, 100, 410, 420, 510, 520: 영상 프레임
11, 411, 511, 521: 표시 화면
110: 수평 각도 값 120: 수직 각도 값
210: 촬영부 310: 동영상 저장부
200, 300: 각도 값 생성부
220, 320: 저장부 330: 재생부

Claims (21)

  1. 영상 프레임의 일부 영역을 표시하는 영상 재생 장치에 있어서,
    상기 영상 프레임의 일부 영역을 표시하는 표시부; 및
    미리 결정된 인자에 따라, 상기 표시부에 의해 표시되는 표시 영역이 상기 인자에 대응되는 대상을 향해 이동되도록 하는 제어부를 포함하는 영상 재생 장치.
  2. 제 1 항에 있어서,
    상기 영상 재생 장치는 복수의 영상 프레임을 연속하여 재생하는 영상 재생 장치.
  3. 제 2 항에 있어서,
    상기 제어부는 상기 영상 프레임 상에서의 상기 대상의 위치를 나타내는 각도 값을 참조하여, 상기 표시 영역이 상기 대상의 위치를 향해 이동되도록 하는 영상 재생 장치.
  4. 제 3 항에 있어서,
    상기 각도 값은 상기 영상 프레임 상에서의 상기 대상의 수평 위치 또는 수직 위치를 나타내는 값인 영상 재생 장치.
  5. 제 4 항에 있어서,
    상기 대상의 위치를 나타내는 상기 각도 값은 연속되는 상기 복수의 영상 프레임들에 대해 선형적으로 변하는 값인 영상 재생 장치.
  6. 제 2 항에 있어서,
    상기 제어부는 상기 표시 영역이 상기 복수의 영상 프레임들의 재생 순서에 따라 상기 대상의 위치를 향해 대해 순차적으로 이동되도록 하는 영상 재생 장치.
  7. 제 3 항에 있어서,
    상기 영상 프레임은 상기 각도 값의 기준 좌표를 포함하는 각도 값 데이터를 포함하는 영상 재생 장치.
  8. 제 7 항에 있어서,
    상기 영상 프레임은 상기 대상의 위치를 나타내는 상기 각도 값을 더 포함하는 영상 재생 장치.
  9. 제 7 항에 있어서,
    상기 각도 값은 상기 영상 프레임과 구분되는 데이터베이스에 저장되며,
    상기 제어부는 상기 각도 값을 참조할 때, 상기 데이터베이스로부터 상기 각도 값을 읽어내는 영상 재생 장치.
  10. 제 1 항에 있어서,
    상기 미리 결정된 인자는 소리 크기, 소리의 주파수, 소리의 빈도, 냄새의 강도, 냄새의 종류, 색상의 종류, 색상의 농도, 색상의 출현 빈도, 색상의 분포도 또는 미리 결정된 객체인 영상 재생 장치.
  11. 제 1 항에 있어서,
    상기 미리 결정된 인자는 복수의 인자 중에서 사용자에 의해 선택된 인자인 영상 재생 장치.
  12. 제 3 항에 있어서,
    상기 영상 프레임의 촬영 중에 상기 미리 결정된 인자에 따라 상기 각도 값을 생성하고, 상기 생성된 각도 값을 상기 영상 프레임이 저장되는 동영상 파일에 삽입하거나 상기 동영상 파일과 구분되는 데이터베이스에 저장하는 각도 값 생성부를 더 포함하는 영상 재생 장치.
  13. 제 3 항에 있어서,
    상기 영상 프레임이 저장된 동영상 파일을 참조하여, 상기 미리 결정된 인자에 따른 상기 각도 값을 생성하고, 상기 생성된 각도 값을 상기 동영상 파일에 삽입하거나 상기 동영상 파일과 구분되는 데이터베이스에 저장하는 각도 값 생성부를 더 포함하는 영상 재생 장치.
  14. 제 1 항에 있어서,
    상기 영상 프레임은 360도의 회전 영상을 포함하고,
    상기 표시부는 상기 영상 프레임에 대해 상기 360도 회전 영상의 일부만을 표시하는 디스플레이 장치인 영상 재생 장치.
  15. 제 1 항에 있어서,
    상기 영상 프레임은 세로 길이보다 가로 길이가 1.5배 이상 긴 광폭 영상 또는 파노라마 영상이고,
    상기 표시부는 상기 영상 프레임에 대해 상기 광폭 영상 또는 상기 파노라마 영상의 일부만을 표시하는 디스플레이 장치인 영상 재생 장치.
  16. 제 1 항에 있어서,
    상기 영상 프레임은 세로 길이보다 가로 길이가 좁은 협폭 영상이고,
    상기 표시부는 상기 하나의 프레임에 대해 상기 협폭 영상의 일부만을 표시하는 디스플레이 장치인 영상 재생 장치.
  17. 복수의 영상 프레임을 갖는 동영상을 촬영하는 촬영부;
    미리 결정된 인자에 따라, 상기 인자에 대응되는 대상의 상기 복수의 동영상 프레임 상에서의 위치를 나타내는 각도 값 정보를 산출하는 각도 값 생성부; 및
    상기 산출된 각도 값 정보를 저장하는 저장부를 포함하는 영상 재생 장치.
  18. 제 17 항에 있어서,
    상기 각도 값 정보는 상기 복수의 영상 프레임들에 대해 각각 산출되어 상기 저장부에 저장되는 영상 재생 장치.
  19. 제 17 항에 있어서,
    상기 저장부에 저장되는 상기 각도 값 정보는 상기 동영상을 포함하는 동영상 파일에 삽입되어 저장되거나, 상기 동영상 파일과 구분되는 데이터베이스의 일부로서 저장되는 영상 재생 장치.
  20. 제 17 항에 있어서,
    상기 각도 값 생성부는 상기 각도 값의 기준 좌표를 포함하는 각도 값 데이터를 생성하여 상기 동영상에 삽입하는 영상 재생 장치.
  21. 제 17 항에 있어서,
    상기 동영상은 하나의 영상 프레임 안에 360도의 회전 영상을 포함하는 동영상 또는, 하나의 영상 프레임 안에 포함된 영상이 세로 길이보다 가로 길이가 1.5배 이상 긴 파노라마 영상인 영상 재생 장치.
KR20130111131A 2013-09-16 2013-09-16 동영상 장치 및 그것의 동영상 생성 및 재생 방법 KR20150031662A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20130111131A KR20150031662A (ko) 2013-09-16 2013-09-16 동영상 장치 및 그것의 동영상 생성 및 재생 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20130111131A KR20150031662A (ko) 2013-09-16 2013-09-16 동영상 장치 및 그것의 동영상 생성 및 재생 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020200152838A Division KR20200133691A (ko) 2020-11-16 2020-11-16 동영상 장치 및 그것의 동영상 생성 및 재생 방법

Publications (1)

Publication Number Publication Date
KR20150031662A true KR20150031662A (ko) 2015-03-25

Family

ID=53025126

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20130111131A KR20150031662A (ko) 2013-09-16 2013-09-16 동영상 장치 및 그것의 동영상 생성 및 재생 방법

Country Status (1)

Country Link
KR (1) KR20150031662A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017200153A1 (ko) * 2016-05-16 2017-11-23 한국과학기술원 360도 영상 재생 시 사용자 단말 기울기 정보를 이용하여 재생 영역을 보정하는 방법 및 시스템
KR20200101583A (ko) * 2019-02-20 2020-08-28 ㈜브이리얼 Vr 영상 컨텐츠 제작 방법, 장치 및 프로그램
US11067902B2 (en) * 2017-08-07 2021-07-20 Asml Netherlands B.V. Computational metrology

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017200153A1 (ko) * 2016-05-16 2017-11-23 한국과학기술원 360도 영상 재생 시 사용자 단말 기울기 정보를 이용하여 재생 영역을 보정하는 방법 및 시스템
US10600188B2 (en) 2016-05-16 2020-03-24 Korea Advanced Institute Of Science And Technology Method and system for correcting field of view using user terminal information upon playback of 360-degree image
US11067902B2 (en) * 2017-08-07 2021-07-20 Asml Netherlands B.V. Computational metrology
KR20200101583A (ko) * 2019-02-20 2020-08-28 ㈜브이리얼 Vr 영상 컨텐츠 제작 방법, 장치 및 프로그램

Similar Documents

Publication Publication Date Title
US8515205B2 (en) Processing of images to represent a transition in viewpoint
US10277890B2 (en) System and method for capturing and viewing panoramic images having motion parallax depth perception without image stitching
US20100013738A1 (en) Image capture and display configuration
TWI547901B (zh) 模擬立體圖像顯示方法及顯示設備
US11232626B2 (en) System, method and apparatus for media pre-visualization
US20190045125A1 (en) Virtual reality video processing
JP3857988B2 (ja) 立体画像処理方法および装置
TW201501510A (zh) 多視角影像之顯示系統、方法及其非揮發性電腦可讀取紀錄媒體
US20230154106A1 (en) Information processing apparatus, information processing method, and display apparatus
JP2003284093A (ja) 立体画像処理方法および装置
JPH08115439A (ja) 画像データ処理装置及び画像再生装置
WO2020166376A1 (ja) 画像処理装置、画像処理方法、及び、プログラム
KR20180013391A (ko) 스크립트 생성 장치, 동영상 재생 장치 및 360도 동영상에 대한 화면 제어 방법
JP2010258768A (ja) 画像表示装置及びその制御方法、並びにプログラム及び記憶媒体
JP2006310936A (ja) 任意視点映像生成システム
JP5818322B2 (ja) 映像生成装置、映像生成方法及びコンピュータプログラム
KR20150031662A (ko) 동영상 장치 및 그것의 동영상 생성 및 재생 방법
JP2004221699A (ja) 立体画像処理方法および装置
JP2018033107A (ja) 動画の配信装置及び配信方法
GB2470754A (en) Generating and displaying images dependent on detected viewpoint
US20230353717A1 (en) Image processing system, image processing method, and storage medium
JP2003284095A (ja) 立体画像処理方法および装置
JP2004220127A (ja) 立体画像処理方法および装置
US20230033201A1 (en) Image processing apparatus, image processing method, and storage medium
WO2002087218A2 (en) Navigable camera array and viewer therefore

Legal Events

Date Code Title Description
N231 Notification of change of applicant
E902 Notification of reason for refusal
E601 Decision to refuse application