KR20110112534A - System and method for controlling panorama screen using viewer location information - Google Patents

System and method for controlling panorama screen using viewer location information Download PDF

Info

Publication number
KR20110112534A
KR20110112534A KR1020100031683A KR20100031683A KR20110112534A KR 20110112534 A KR20110112534 A KR 20110112534A KR 1020100031683 A KR1020100031683 A KR 1020100031683A KR 20100031683 A KR20100031683 A KR 20100031683A KR 20110112534 A KR20110112534 A KR 20110112534A
Authority
KR
South Korea
Prior art keywords
panorama
viewer
position information
screen
contents
Prior art date
Application number
KR1020100031683A
Other languages
Korean (ko)
Other versions
KR101640948B1 (en
Inventor
임성용
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020100031683A priority Critical patent/KR101640948B1/en
Publication of KR20110112534A publication Critical patent/KR20110112534A/en
Application granted granted Critical
Publication of KR101640948B1 publication Critical patent/KR101640948B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2622Signal amplitude transition in the zone between image portions, e.g. soft edges
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2625Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2625Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
    • H04N5/2627Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect for providing spin image effect, 3D stop motion effect or temporal freeze effect

Abstract

시청자의 위치정보에 따라, 재생하려는 파노라마 콘텐츠의 위치 및 방향을 제어할 수 있는 시청자 위치 정보를 이용한 파노라마 화면 제어 시스템 및 방법을 개시한다.
일 실시예로서, 시청자 위치 정보를 이용한 파노라마 화면 제어 시스템은, 시청자의 위치 정보를 획득하고, 상기 획득한 시청자의 위치 정보에 기초하여, 파노라마 콘텐츠에 대한 재생중심지점 및 재생방향을 결정하는 컨트롤부, 및 상기 결정된 재생중심지점 및 재생방향에 따라, 상기 파노라마 콘텐츠를 처리하여 화면 재생기를 통해 재생하는 프로세싱부를 포함하여 구성할 수 있다.
A panorama screen control system and method using viewer position information capable of controlling the position and direction of panorama contents to be reproduced according to viewer's position information.
In one embodiment, a panorama screen control system using viewer position information includes a control unit for acquiring position information of a viewer, and determining a playback center point and a playback direction for the panorama content based on the acquired position information of the viewer And a processing unit for processing the panorama contents according to the determined reproduction center point and the reproduction direction and reproducing the panorama contents through the screen reproducer.

Description

시청자 위치 정보를 이용한 파노라마 화면 제어 시스템 및 방법{SYSTEM AND METHOD FOR CONTROLLING PANORAMA SCREEN USING VIEWER LOCATION INFORMATION}TECHNICAL FIELD [0001] The present invention relates to a system and method for controlling a panorama screen using viewer position information,

본 발명의 실시예들은 파노라마 미디어 제어에 관한 것으로, 시청자의 위치정보에 따라, 재생하려는 파노라마 콘텐츠의 위치 및 방향을 제어할 수 있는 시청자 위치 정보를 이용한 파노라마 화면 제어 시스템 및 방법에 관한 것이다.Embodiments of the present invention relate to panorama media control, and more particularly, to a panorama screen control system and method using viewer position information capable of controlling the position and direction of panorama contents to be reproduced according to viewer position information.

본 발명은 지식경제부 및 정보통신연구진흥원의 IT성장동력기술개발의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2009-S-019-01, 과제명: IPTV용 UHD/3D 실감영상 및 Interactive 시점제어 기술 개발].The present invention was derived from research conducted as part of the IT growth engine technology development by the Ministry of Knowledge Economy and the Korea IT Industry Promotion Agency. [Assignment Number: 2009-S-019-01, Title: UHD / Development of Interactive Time Control Technology].

일반적으로, 파노라마 콘텐츠는 16:9 또는 4:3과 같은 비율을 가진 콘텐츠들의 접합을 통해 생성되는 새로운 크기의 콘텐츠를 의미하며, 시청자는 기존의 일반 화면 재생기 또는 별도의 파노라마 재생기를 통해 파노라마 콘텐츠를 소비할 수 있다.In general, the panorama content refers to a new size of content generated through the joining of contents having a ratio such as 16: 9 or 4: 3, and the viewer can view the panorama content through the conventional general screen player or a separate panorama player Can be consumed.

도 1은 일반적인 파노라마 시청 환경을 도시한 도면이다.1 is a view showing a general panorama viewing environment.

도 1을 참조하면, 일반적으로 파노라마 콘텐츠(110)는 TV와 같은 기존의 일반 화면 재생기(120) 보다 크기가 크기 때문에, 화면 재생기(120)에서는 파노라마 콘텐츠(110) 내 일부 영역이 재생될 수 있다. 따라서, 시청자(130)는 리모콘과 같은 별도의 제어기를 조작하여, 파노라마 콘텐츠(110)에서의 재생위치를 상/하/좌/우로 이동하거나, 파노라마 콘텐츠(110)의 재생크기를 확대/축소해야 하는 번거로움이 있다. 한편, 별도의 파노라마 재생기를 사용하는 경우에는 공간적, 경제적 문제가 발생될 수 있다.Referring to FIG. 1, generally, since the panorama contents 110 are larger than the conventional general screen reproducer 120 such as a TV, a part of the panorama contents 110 can be reproduced in the screen reproducer 120 . Accordingly, the viewer 130 operates a separate controller such as a remote controller to move the playback position in the panorama content 110 up / down / left / right or enlarge / reduce the playback size of the panorama content 110 There is a hassle. On the other hand, when a separate panorama player is used, spatial and economic problems may occur.

이에 따라, 별도의 제어기에 대한 조작 없이, 재생하려는 파노라마 콘텐츠의 위치 및 방향을 제어하여 시청자에게 편리하고 실감나는 파노라마 콘텐츠를 제공할 수 있는 기술이 요구되고 있다.Accordingly, there is a need for a technique capable of providing convenient and realistic panoramic contents to viewers by controlling the position and direction of the panoramic contents to be reproduced without any operation on a separate controller.

본 발명의 일실시예는 시청자의 위치정보에 따라, 재생하려는 파노라마 콘텐츠의 위치, 크기 또는 방향을 제어할 수 있는 시청자 위치 정보를 이용한 파노라마 화면 제어 시스템 및 방법을 제공한다.An embodiment of the present invention provides a panorama screen control system and method using viewer position information capable of controlling the position, size or direction of panorama contents to be reproduced according to viewer position information.

상기의 목적을 이루기 위한, 시청자 위치 정보를 이용한 파노라마 화면 제어 시스템은, 시청자의 위치 정보를 획득하고, 상기 획득한 시청자의 위치 정보에 기초하여, 파노라마 콘텐츠에 대한 재생중심지점 및 재생방향을 결정하는 컨트롤부, 및 상기 결정된 재생중심지점 및 재생방향에 따라, 상기 파노라마 콘텐츠를 처리하여 화면 재생기를 통해 재생하는 프로세싱부를 포함한다.In order to achieve the above object, a panorama screen control system using viewer position information acquires position information of a viewer and determines a reproduction center point and a reproduction direction of the panorama contents based on the acquired position information of the viewer And a processing unit for processing the panorama contents according to the determined reproduction center point and the reproduction direction and reproducing the panorama contents through the screen reproducer.

본 발명의 일실시예에 따르면, 시청자의 위치정보에 따라, 재생하려는 파노라마 콘텐츠의 재생위치를 결정해 줌으로써, 시청자는 리모콘과 같은 별도의 제어기를 사용하지 않고도 편리하게 파노라마 콘텐츠를 소비할 수 있게 된다.According to an embodiment of the present invention, the reproduction position of the panorama content to be reproduced is determined according to the position information of the viewer, so that the viewer can conveniently consume the panorama content without using a separate controller such as a remote controller .

또한, 본 발명의 일실시예에 따르면, 시청자의 위치정보에 따라, 파노라마 콘텐츠의 재생크기 또는 재생방향을 제어 함으로써, 시청자에게 실감나는 파노라마 콘텐츠를 제공할 수 있게 된다.In addition, according to the embodiment of the present invention, it is possible to provide panoramic contents realizing to viewers by controlling the reproduction size or the reproduction direction of the panorama contents according to the position information of the viewer.

도 1은 일반적인 파노라마 시청 환경을 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 시청자 위치 정보를 이용한 파노라마 화면 제어 시스템의 내부구성을 도시한 도면이다.
도 3은 본 발명의 일측에 있어서, 시청자의 위치 정보를 획득하는 과정을 설명하기 위한 도면이다.
도 4는 본 발명의 일실시예에 따른 시청자 위치 정보를 이용한 파노라마 화면 제어 방법의 순서를 도시한 흐름도이다.
1 is a view showing a general panorama viewing environment.
2 is a diagram illustrating an internal configuration of a panorama screen control system using viewer position information according to an embodiment of the present invention.
FIG. 3 is a diagram for explaining a process of acquiring location information of a viewer, according to an embodiment of the present invention.
4 is a flowchart illustrating a procedure of a panorama screen control method using viewer position information according to an embodiment of the present invention.

이하에서, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.Hereinafter, embodiments according to the present invention will be described in detail with reference to the accompanying drawings. However, the present invention is not limited to or limited by the embodiments. Like reference symbols in the drawings denote like elements.

도 2는 본 발명의 일실시예에 따른 시청자 위치 정보를 이용한 파노라마 화면 제어 시스템의 내부구성을 도시한 도면이다.2 is a diagram illustrating an internal configuration of a panorama screen control system using viewer position information according to an embodiment of the present invention.

도 2를 참조하면, 본 발명의 일실시예에 따른 시청자 위치 정보를 이용한 파노라마 화면 제어 시스템(200)은 컨트롤부(210) 및 프로세싱부(220)를 포함하여 구성될 수 있다.Referring to FIG. 2, a panorama screen control system 200 using viewer position information according to an exemplary embodiment of the present invention may include a control unit 210 and a processing unit 220.

컨트롤부(210)는 시청자의 위치 정보를 획득하고, 획득한 시청자의 위치 정보에 기초하여, 파노라마 콘텐츠에 대한 재생중심지점 및 재생방향을 결정하는 역할을 한다.The control unit 210 acquires the position information of the viewer and determines the reproduction center point and the reproduction direction of the panoramic contents based on the acquired position information of the viewer.

여기서, 컨트롤부(210)는 파노라마 콘텐츠를 재생하기 위해 별도로 구비된 화면 재생기를 기준으로, 시청자의 위치 정보를 획득할 수 있다. 이하, 도 3을 참조하여 시청자의 위치 정보를 획득하는 과정을 상세히 설명한다.Here, the control unit 210 can acquire the position information of the viewer based on the screen reproducer separately provided for reproducing the panorama contents. Hereinafter, a process of acquiring location information of a viewer will be described in detail with reference to FIG.

도 3은 본 발명의 일측에 있어서, 시청자의 위치 정보를 획득하는 과정을 설명하기 위한 도면이다.FIG. 3 is a diagram for explaining a process of acquiring location information of a viewer, according to an embodiment of the present invention.

도 3을 참조하면, 본 발명의 일실시예에 따른 파노라마 화면 제어 시스템은 화면 재생기(310)를 기준으로, 직교좌표 형태의 가상의 x축, y축, 및 z축을 설정하고, 각 축에서 시청자(320)의 위치에 관한 x축 좌표, y축 좌표, z축 좌표를 식별할 수 있다.3, the panoramic screen control system according to an embodiment of the present invention sets virtual x-axis, y-axis, and z-axis in the form of rectangular coordinates on the basis of the screen reproducer 310, Axis coordinate, and z-axis coordinate with respect to the position of the x-axis coordinate system 320.

이어서, 파노라마 화면 제어 시스템은 x축 좌표, y축 좌표, z축 좌표를 이용하여, 화면 재생기(310)와 시청자(320) 간의 거리(r)를 획득할 수 있다.Then, the panorama screen control system can obtain the distance r between the screen reproducer 310 and the viewer 320 using the x-axis coordinate, the y-axis coordinate, and the z-axis coordinate.

또한, 파노라마 화면 제어 시스템은 x축 좌표, y축 좌표, z축 좌표를 이용하여, x축과 시청자(320)가 이루는 각도(

Figure pat00001
), 또는 y축과 시청자(320)가 이루는 각도(
Figure pat00002
)를 획득할 수 있다.In addition, the panorama screen control system may use an x-axis coordinate, a y-axis coordinate, and a z-axis coordinate to calculate an angle (x,
Figure pat00001
), Or the angle between the y-axis and the viewer 320
Figure pat00002
Can be obtained.

즉, 파노라마 화면 제어 시스템은 3차원 위치 벡터, [x좌표, y좌표, z좌표]를 이용하여, 화면 재생기(310)와 시청자(320) 간의 거리(r), 및 시청자와 가상의 축이 이루는 각도(

Figure pat00003
,
Figure pat00004
)를 포함하는 위치 정보를 획득할 수 있다.That is, the panorama screen control system uses the three-dimensional position vector, [x coordinate, y coordinate, z coordinate] to calculate the distance r between the screen reproducer 310 and the viewer 320, Angle(
Figure pat00003
,
Figure pat00004
The position information may be acquired.

다시 도 2로 돌아가면, 컨트롤부(210)는 획득한 시청자의 위치 정보에 기초하여, 파노라마 콘텐츠에 대한 재생중심지점 및 재생방향을 결정할 수 있다. 예컨대, 컨트롤부(210)는 상기 시청자의 위치 정보 내, 시청자와 가상의 축이 이루는 각도(

Figure pat00005
,
Figure pat00006
)를 활용하여, 파노라마 콘텐츠 내에서 재생할 중심 지점과 방향을 결정할 수 있다.2, the control unit 210 can determine the reproduction center point and the reproduction direction for the panoramic contents, based on the obtained viewer position information. For example, in the position information of the viewer, the control unit 210 determines the angle of the virtual axis
Figure pat00005
,
Figure pat00006
) Can be used to determine the center point and direction to be played within the panoramic content.

또한, 컨트롤부(210)는 상기 획득한 시청자의 위치 정보에 기초하여, 파노라마 콘텐츠에 대한 재생크기를 결정할 수 있다. 즉, 컨트롤부(210)는 상기 결정된 재생중심지점을 기준으로, 시청자의 위치 정보 내, 화면 재생기와 시청자 간의 거리(r)를 활용하여, 파노라마 콘텐츠의 재생크기를 결정할 수 있다.In addition, the control unit 210 can determine the playback size of the panorama content based on the obtained position information of the viewer. That is, the control unit 210 can determine the reproduction size of the panoramic contents by using the distance r between the screen reproducer and the viewer in the position information of the viewer based on the determined reproduction center point.

예컨대, 컨트롤부(210)는 화면 재생기와 시청자 간의 거리(r)이 1m일 때 파노라마 콘텐츠 전체의 10분의 1을 재생크기로 결정한다고 가정하면, 화면 재생기와 시청자 간의 거리(r)이 2m로 두 배 멀어질 경우, 재생크기는 거리(r) 제곱에 반비례하므로, 상기 10분의 1의 4분의 1, 즉 파노라마 콘텐츠 전체의 2.5%가 될 수 있다.For example, assuming that the control unit 210 determines the reproduction size to be one tenth of the entire panorama content when the distance r between the screen reproducer and the viewer is 1 m, if the distance r between the screen reproducer and the viewer is 2 m If it is twice as large, the reproduction size is inversely proportional to the square of the distance r, so it can be one-tenth of the tenth, or 2.5% of the total panorama content.

프로세싱부(220)는 상기 결정된 재생중심지점 및 재생방향에 따라, 상기 파노라마 콘텐츠를 처리하여 화면 재생기를 통해 재생하는 역할을 한다.The processing unit 220 processes the panorama contents according to the determined reproduction center point and the reproduction direction and reproduces the processed panorama contents through the screen reproducer.

즉, 프로세싱부(220)는 상기 결정된 재생중심지점에 따라, 파노라마 콘텐츠에서 재생할 위치를 전환 처리하여 재생할 수 있다. 따라서, 시청자는 리모콘과 같은 별도의 제어기를 사용하지 않고도 편리하게 파노라마 콘텐츠를 소비할 수 있게 된다.In other words, the processing unit 220 can reproduce and reproduce the position to be reproduced in the panorama content according to the determined reproduction center point. Therefore, the viewer can conveniently consume the panoramic contents without using a separate controller such as a remote controller.

또한, 프로세싱부(220)는 상기 결정된 재생방향에 따라, 파노라마 콘텐츠에서 재생할 위치를 회전 처리하여 재생할 수 있다. 즉, 프로세싱부(220)는 파노라마 콘텐츠를 시청자 측으로 회전시켜 재생 함으로써, 2차원의 화면 재생기에 의한 왜곡을 최소화하여 실감나는 파노라마 콘텐츠를 제공할 수 있게 된다.In addition, the processing unit 220 can rotate and reproduce the position to be reproduced in the panoramic contents according to the determined reproduction direction. In other words, the processing unit 220 rotates and reproduces the panorama contents to the viewers side, thereby minimizing the distortion caused by the two-dimensional screen reproducers, thereby providing realistic panorama contents.

또한, 프로세싱부(220)는 상기 결정된 재생크기에 따라, 파노라마 콘텐츠를 확대 또는 축소 처리하여 재생 함으로써, 시청자에게 실감나는 파노라마 콘텐츠를 제공할 수 있게 된다.In addition, the processing unit 220 can enlarge or reduce the panorama contents according to the determined reproduction size, and reproduce the panorama contents, thereby providing the viewer with realistic panorama contents.

도 4는 본 발명의 일실시예에 따른 시청자 위치 정보를 이용한 파노라마 화면 제어 방법의 순서를 도시한 흐름도이다.4 is a flowchart illustrating a procedure of a panorama screen control method using viewer position information according to an embodiment of the present invention.

본 발명의 일실시예에 따른 시청자 위치 정보를 이용한 파노라마 화면 제어 방법은 도 2에 도시된 파노라마 화면 제어 시스템(200)에 의해 구현될 수 있다. 이하, 도 4의 설명에서는 상술한 도 2를 함께 참조하여 도 4를 설명하여 발명의 이해를 도모한다.A panorama screen control method using viewer position information according to an embodiment of the present invention can be implemented by the panorama screen control system 200 shown in FIG. Hereinafter, FIG. 4 will be described with reference to FIG. 2 together with the description of FIG. 4 to understand the invention.

단계 410에서 파노라마 화면 제어 시스템(200)은 시청자의 위치 정보를 획득한다.In step 410, the panorama screen control system 200 obtains the position information of the viewer.

본 단계에서 컨트롤부(210)는 파노라마 콘텐츠를 재생하기 위해 별도로 구비된 화면 재생기를 기준으로, 시청자의 위치 정보를 획득할 수 있다.In this step, the control unit 210 can acquire the position information of the viewer based on the screen reproducer separately provided for reproducing the panorama contents.

예를 들어, 컨트롤부(210)는 화면 재생기를 기준으로, 직교좌표 형태의 가상의 x축, y축, 및 z축을 설정하고, 각 축에서 시청자의 위치에 관한 x축 좌표, y축 좌표, z축 좌표를 식별할 수 있다. 이어서, 파노라마 화면 제어 시스템은 x축 좌표, y축 좌표, z축 좌표를 이용하여, 화면 재생기와 시청자 간의 거리(r)를 획득할 수 있다. 또한, 파노라마 화면 제어 시스템은 x축 좌표, y축 좌표, z축 좌표를 이용하여, x축과 시청자가 이루는 각도(

Figure pat00007
), 또는 y축과 시청자가 이루는 각도(
Figure pat00008
)를 획득할 수 있다.For example, the control unit 210 sets virtual x-axis, y-axis, and z-axis in the form of rectangular coordinates on the basis of the screen reproducer, and sets the x-, y- the z-axis coordinate can be identified. Then, the panorama screen control system can obtain the distance (r) between the screen reproducer and the viewer by using the x-axis coordinate, the y-axis coordinate, and the z-axis coordinate. In addition, the panorama screen control system uses the x-axis coordinate, the y-axis coordinate, and the z-axis coordinate to calculate the angle
Figure pat00007
), Or the angle between the y-axis and the viewer
Figure pat00008
Can be obtained.

즉, 컨트롤부(210)는 3차원 위치 벡터, [x좌표, y좌표, z좌표]를 이용하여, 화면 재생기와 시청자 간의 거리(r), 및 시청자와 가상의 축이 이루는 각도(

Figure pat00009
,
Figure pat00010
)를 포함하는 위치 정보를 획득할 수 있다.That is, the control unit 210 calculates the distance (r) between the screen reproducer and the viewer and the angle (r) between the viewer and the virtual axis using the three-dimensional position vector, [x coordinate, y coordinate, z coordinate]
Figure pat00009
,
Figure pat00010
The position information may be acquired.

단계 420에서 파노라마 화면 제어 시스템(200)은 시청자의 x축과의 각도(

Figure pat00011
), 및 y축과의 각도(
Figure pat00012
)에 따라, 파노라마 콘텐츠의 재생중심지점 및 재생방향을 결정한다.In step 420, the panoramic screen control system 200 determines the angle of the viewer with respect to the x-axis
Figure pat00011
), And the angle with the y-axis (
Figure pat00012
), The reproduction center point and the reproduction direction of the panoramic contents are determined.

즉, 컨트롤부(210)는 시청자의 위치 정보 내, 시청자와 가상의 축이 이루는 각도(

Figure pat00013
,
Figure pat00014
)를 활용하여, 파노라마 콘텐츠 내에서 재생할 중심 지점과 방향을 결정할 수 있다.That is, the control unit 210 determines the angle of the viewers with respect to the virtual axis
Figure pat00013
,
Figure pat00014
) Can be used to determine the center point and direction to be played within the panoramic content.

이에 따라, 프로세싱부(220)는 상기 결정된 재생중심지점에 따라, 파노라마 콘텐츠에서 재생할 위치를 전환 처리하여 재생할 수 있으며, 시청자는 리모콘과 같은 별도의 제어기를 사용하지 않고도 편리하게 파노라마 콘텐츠를 소비할 수 있게 된다.Accordingly, the processing unit 220 can switch and reproduce the position to be reproduced in the panorama content according to the determined reproduction center point, and the viewer can easily consume the panorama content without using a separate controller such as a remote controller .

단계 430에서 파노라마 화면 제어 시스템(200)은 화면 재생기와 시청자 간의 거리(r)에 따라, 파노라마 콘텐츠의 재생크기를 결정한다.In step 430, the panorama screen control system 200 determines the reproduction size of the panorama content according to the distance r between the screen reproducer and the viewer.

즉, 컨트롤부(210)는 상기 결정된 재생중심지점을 기준으로, 시청자의 위치 정보 내, 화면 재생기와 시청자 간의 거리(r)를 활용하여, 파노라마 콘텐츠의 재생크기를 결정할 수 있다.That is, the control unit 210 can determine the reproduction size of the panoramic contents by using the distance r between the screen reproducer and the viewer in the position information of the viewer based on the determined reproduction center point.

예컨대, 컨트롤부(210)는 화면 재생기와 시청자 간의 거리(r)이 1m일 때 파노라마 콘텐츠 전체의 10분의 1을 재생크기로 결정한다고 가정하면, 화면 재생기와 시청자 간의 거리(r)이 2m로 두 배 멀어질 경우, 재생크기는 거리(r) 제곱에 반비례하므로, 상기 10분의 1의 4분의 1, 즉 파노라마 콘텐츠 전체의 2.5%가 될 수 있다.For example, assuming that the control unit 210 determines the reproduction size to be one tenth of the entire panorama content when the distance r between the screen reproducer and the viewer is 1 m, if the distance r between the screen reproducer and the viewer is 2 m If it is twice as large, the reproduction size is inversely proportional to the square of the distance r, so it can be one-tenth of the tenth, or 2.5% of the total panorama content.

이에 따라, 프로세싱부(220)는 상기 결정된 재생크기에 따라, 파노라마 콘텐츠를 확대 또는 축소 처리하여 재생할 수 있으며, 시청자에게 실감나는 파노라마 콘텐츠를 제공할 수 있게 된다.Accordingly, the processing unit 220 can enlarge or reduce the panorama contents according to the determined reproduction size, and reproduce the panorama contents, thereby providing the viewer with realistic panorama contents.

단계 440에서 파노라마 화면 제어 시스템(200)은 결정된 파노라마 콘텐츠를 재생방향에 따라 회전 처리하고, 단계 450에서 파노라마 화면 제어 시스템(200)은 회전된 파노라마 콘텐츠를 화면 재생기를 통해 재생한다.In step 440, the panorama screen control system 200 rotates the determined panorama content according to the playback direction, and in step 450, the panorama screen control system 200 reproduces the rotated panorama content through the screen player.

즉, 프로세싱부(220)는 상기 재생방향에 따라 파노라마 콘텐츠를 시청자 측으로 회전시켜 재생 함으로써, 2차원의 화면 재생기에 의한 왜곡을 최소화하여 실감나는 파노라마 콘텐츠를 제공할 수 있게 된다.That is, the processing unit 220 rotates and reproduces the panorama contents to the viewer side according to the reproduction direction, thereby minimizing the distortion caused by the two-dimensional screen reproducer, thereby providing realistic panorama contents.

또한, 본 발명의 실시예들은 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터 판독 가능 매체를 포함한다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.Further, embodiments of the present invention include a computer readable medium having program instructions for performing various computer implemented operations. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions recorded on the medium may be those specially designed and constructed for the present invention or may be available to those skilled in the art of computer software. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like.

이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.As described above, the present invention has been described with reference to particular embodiments, such as specific elements, and specific embodiments and drawings. However, it should be understood that the present invention is not limited to the above- And various modifications and changes may be made thereto by those skilled in the art to which the present invention pertains. Therefore, the spirit of the present invention should not be construed as being limited to the described embodiments, and all of the equivalents or equivalents of the claims, as well as the following claims, are included in the scope of the present invention.

200: 파노라마 화면 제어 시스템
210: 컨트롤부
220: 프로세싱부
310: 화면 재생기
320: 시청자
200: Panorama screen control system
210:
220: Processing unit
310: Screen player
320: viewers

Claims (1)

시청자의 위치 정보를 획득하고, 상기 획득한 시청자의 위치 정보에 기초하여, 파노라마 콘텐츠에 대한 재생중심지점 및 재생방향을 결정하는 컨트롤부; 및
상기 결정된 재생중심지점 및 재생방향에 따라, 상기 파노라마 콘텐츠를 처리하여 화면 재생기를 통해 재생하는 프로세싱부
를 포함하는 시청자 위치 정보를 이용한 파노라마 화면 제어 시스템.
A control unit for acquiring positional information of a viewer and determining a reproduction center point and a reproduction direction for the panoramic contents based on the acquired positional information of the viewer; And
A processing unit for processing the panorama contents according to the determined reproduction center point and the reproduction direction,
The panorama screen control system using the viewer position information.
KR1020100031683A 2010-04-07 2010-04-07 System and method for controlling panorama screen using viewer location information KR101640948B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100031683A KR101640948B1 (en) 2010-04-07 2010-04-07 System and method for controlling panorama screen using viewer location information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100031683A KR101640948B1 (en) 2010-04-07 2010-04-07 System and method for controlling panorama screen using viewer location information

Publications (2)

Publication Number Publication Date
KR20110112534A true KR20110112534A (en) 2011-10-13
KR101640948B1 KR101640948B1 (en) 2016-07-19

Family

ID=45028169

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100031683A KR101640948B1 (en) 2010-04-07 2010-04-07 System and method for controlling panorama screen using viewer location information

Country Status (1)

Country Link
KR (1) KR101640948B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106534827A (en) * 2016-12-19 2017-03-22 暴风集团股份有限公司 Method and system for playing panoramic video based on user perspective

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19980023727A (en) * 1996-09-30 1998-07-06 배순훈 Virtual Reality System for Displaying Panoramic Images
KR20010104256A (en) * 2000-05-11 2001-11-24 니시무로 타이죠 Object region informa tion description method and object region information generating device
KR20050010197A (en) * 2003-07-18 2005-01-27 김탁건 Adjusting apparatus and control method for two dimensions of television video therefore viewing interval
KR100763398B1 (en) * 2006-04-06 2007-10-05 엘지전자 주식회사 Method for displaying 3d image using mobile image display device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19980023727A (en) * 1996-09-30 1998-07-06 배순훈 Virtual Reality System for Displaying Panoramic Images
KR20010104256A (en) * 2000-05-11 2001-11-24 니시무로 타이죠 Object region informa tion description method and object region information generating device
KR20050010197A (en) * 2003-07-18 2005-01-27 김탁건 Adjusting apparatus and control method for two dimensions of television video therefore viewing interval
KR100763398B1 (en) * 2006-04-06 2007-10-05 엘지전자 주식회사 Method for displaying 3d image using mobile image display device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106534827A (en) * 2016-12-19 2017-03-22 暴风集团股份有限公司 Method and system for playing panoramic video based on user perspective

Also Published As

Publication number Publication date
KR101640948B1 (en) 2016-07-19

Similar Documents

Publication Publication Date Title
KR102469263B1 (en) Spherical video editing
US9007524B2 (en) Techniques and apparatus for audio isolation in video processing
GB2553892B (en) 2D video with option for projected viewing in modeled 3D space
US10902676B2 (en) System and method of controlling a virtual camera
US9197979B2 (en) Object-based audio system using vector base amplitude panning
US20100156893A1 (en) Information visualization device and information visualization method
US20170245089A1 (en) Method, computer readable storage medium, and apparatus for determining a target sound scene at a target position from two or more source sound scenes
US10278001B2 (en) Multiple listener cloud render with enhanced instant replay
CN109561240B (en) System and method for generating media assets
US20190253828A1 (en) Audio processing apparatus and method and program
US10721578B2 (en) Spatial audio warp compensator
US8522201B2 (en) Methods and apparatus for sub-asset modification
KR20140078171A (en) A method for play a contents of augmented reality and a system for excuting the method
US20110200303A1 (en) Method of Video Playback
KR20180122451A (en) Interactive audio metadata handling
KR101640948B1 (en) System and method for controlling panorama screen using viewer location information
EP2691956A2 (en) Scene graph for defining a stereoscopic graphical object
JP2012146305A (en) Device and method for providing window-like augmented reality
US11516615B2 (en) Audio processing
KR101977108B1 (en) Hmd device for displaying vr-based presentation video and operating method thereof
KR20200007732A (en) Method and apparatus for providing additional information for processing media in a remote or cloud environment
EP3506054A1 (en) Enabling rendering, for consumption by a user, of mediated reality content
KR20190030565A (en) Electronic device and operating method for the same
JP6738022B2 (en) Information processing apparatus, information processing method, and information processing program
WO2023285732A1 (en) A method and apparatus for ar rendering adaptation

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant