KR20160077767A - System and Mehtod Displaying Super Multi-View Image - Google Patents
System and Mehtod Displaying Super Multi-View Image Download PDFInfo
- Publication number
- KR20160077767A KR20160077767A KR1020140188083A KR20140188083A KR20160077767A KR 20160077767 A KR20160077767 A KR 20160077767A KR 1020140188083 A KR1020140188083 A KR 1020140188083A KR 20140188083 A KR20140188083 A KR 20140188083A KR 20160077767 A KR20160077767 A KR 20160077767A
- Authority
- KR
- South Korea
- Prior art keywords
- image content
- image
- output time
- time
- control terminal
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/167—Synchronising or controlling image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/398—Synchronisation thereof; Control thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
본 발명은 초다시점 영상 표시 시스템 및 그 방법에 관한 것으로서, 보다 구체적으로는 표출 단말 간의 영상 재생 타이밍을 동기화하는 시스템 및 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a system and method for super-multi-view image display, and more particularly, to a system and method for synchronizing image reproduction timings between display terminals.
특수 안경 착용의 불편함을 해결한 방식으로 무안경식 3D 디스플레이가 있으며, 무안경식 3D 디스플레이는 크게 현재 상용화가 다수 시도되고 있는 다시점 3D 디스플레이, 다시점 3D 디스플레이의 문제점을 개선한 집적 영상 기술, 그리고 초다시점 3D 디스플레이 등이 있다. 더 나아가 궁극적 3D 디스플레이라 할 수 있는 홀로그래피 방식의 3D 디스플레이가 있다.There is a 3D display with no glasses in a way that solves the inconvenience of wearing special glasses. The 3D display without glasses is largely divided into a multi-point 3D display, which is currently being tried for commercialization, an integrated imaging technology, And a multi-point 3D display. Furthermore, there is a holographic 3D display which can be called the ultimate 3D display.
다시점 3D 디스플레이 중 상용화에 가장 많이 사용된 방식은 시차 장벽 방식과 렌티큐라 방식이 있다.Among the 3D point-of-view 3D displays, the most commonly used methods are the parallax barrier method and the lenticular method.
이러한 다시점 3D 디스플레이는 시점 수에 따른 해상도 저하, 시점 간 크로스토크 발생으로 인한 3D 화질 저하, 해상도 문제에 따른 시점 수 제한 등 여러 문제 등이 있으나, 최근 들어 눈의 피로현상 문제를 제외한 다른 문제들은 관찰자 추적 방식을 적용함으로써, 1인용에 한하여 근본적 문제들이 해결되었다.These multi-view 3D displays have various problems such as resolution degradation according to the number of viewpoints, 3D image quality degradation caused by cross-talk between the viewpoints, and limitation of the number of viewpoints due to resolution problems. However, recently, By applying the observer tracking method, fundamental problems were solved only for one person.
그러나, 다시점 3D 디스플레이는 다수가 사용하는 환경에서 발생하는 문제 및 눈의 피로현상과 같은 문제가 여전히 해결하기 어려운 문제로 남아 있다.However, the multi-view 3D display remains a problem that many problems arise in the environment of use and eye fatigue.
한편 시점 수를 증가시킨 초다시점 디스플레이는 하나의 피사체를 다수의 위치(즉, 시점)에서 이미지 혹은 영상을 획득하고, 이를 중간 시점 영상과 합성하는 방식이다. 이렇게 생성된 중간 시점 영상이 표출 장치를 통해 합성됨으로써, 초다시점 영상이 재생될 수 있다. 100인치 이상의 대형 초다시점은 다수의 프로젝터 배열로 중간시점 영상을 디스플레이함으로써 생성될 수 있다. 전술된 바는 중간 시점 영상이 각 표출 단말들에 의해 정해진 정확한 타이밍에서 표출될 수 있어야만 가능하다. 공내에 다수의 시차 영상을 제공하는 방법으로 이러한 문제점들을 해결할 수 있는 가능성을 제시하였으며, 이 방식은 초다안(超多眼) 또는 초다시점(SMV; Super Multi-View)으로 명명되었다.On the other hand, the super-multi-view display in which the number of viewpoints is increased is a method of acquiring an image or an image at a plurality of positions (i.e., viewpoints) of a single subject and composing it with an intermediate viewpoint image. The intermediate view image generated in this way is synthesized through the display device, so that the super high view image can be reproduced. Large oversized points of 100 inches or more can be created by displaying an intermediate view image with a plurality of projector arrays. The foregoing description is only possible if the interim view image can be displayed at the correct timing determined by the respective expressing terminals. This method is called Super Multi-View (SMV) or Super Multi-View (SMV) method.
초다시점 시스템은 하나의 피사체를 다수의 위치(즉, 시점)에서 획득한 이미지 혹은 영상을 획득하고 이를 중간 시점 영상과 합성한다. 이렇게 생성된 중간 시점 영상을 표출 장치를 통해 합성함으로써 초다시점 영상을 재생할 수 있다. 100인치 이상의 대형 초다시점은 다수의 프로젝터 배열로 중간시점 영상을 디스플레이 함으로써 생성될 수 있다. 이를 위해서는 중간 시점 영상을 표출하는 각 표출 단말들이 정해진 정확한 타이밍에 표출할 수 있어야 한다.The second multi-viewpoint system acquires an image or an image acquired from a plurality of positions (i.e., a viewpoint) of a single subject and combines it with an intermediate view image. The intermediate view image generated in this manner can be synthesized through the display device to reproduce the super high view image. Large oversized points of 100 inches or more can be created by displaying an intermediate view image with a plurality of projector arrays. In order to do this, each of the display terminals expressing the mid-view image must be able to display at the correct timing.
종래의 초다시점 시스템은 정지 이미지 표출시 재생 타이밍에 대한 문제점이 크게 부각되지 않으나, 연속된 이미지를 재생할 경우 각 단말들이 표출하는 시간에 오차가 발생하거나 표출하기 시작하는 시점이 다르면 합성된 초다시점 영상에 왜곡이 발생하는 등의 문제점이 있다.In the conventional super multi-point system, there is not a great problem about the reproduction timing when the still image is displayed. However, when the continuous images are reproduced, when the error occurs in the display time of each terminal or when the start point of presentation is different, There is a problem that distortions occur in point images.
본 발명은 상기와 같은 문제점을 해결하기 위한 것으로서, 각 표출 단말의 영상 표출 시점을 제어 단말이 제공해줌으로써 각 표출 단말 간의 표출시간 오차를 줄이고, 초다시점 영상을 지정된 시점에 정확히 표출하거나 정지할 수 있도록 하는 초다시점 영상 표시 시스템 및 그 방법을 제공하는 데 목적이 있다.SUMMARY OF THE INVENTION The present invention has been made to solve the above problems, and it is an object of the present invention to provide a control terminal capable of reducing the display time error between each of the display terminals and accurately displaying or stopping the multi- The present invention also provides a system and method for displaying a multi-viewpoint image.
전술한 목적을 달성하기 위하여, 본 발명의 일면에 따른 초다시점 영상 표시 시스템은 복수의 처리 단말로부터 출력된 영상 콘텐츠를 표시하는 표시 장치; 상기 영상 콘텐츠의 출력 시간을 지정하는 제어 단말; 및 상기 제어 단말에 의해 지정된 출력 시간 및 상기 표시 장치를 통한 상기 영상 콘텐츠의 현재 출력 시간 간의 오차를 산출하고, 산출된 오차를 이용하여 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 복수의 처리 단말을 포함하는 것을 특징으로 한다.According to an aspect of the present invention, there is provided a super multi-viewpoint image display system including: a display device for displaying image contents output from a plurality of processing terminals; A control terminal for specifying an output time of the image content; And a plurality of processing terminals for calculating an error between an output time designated by the control terminal and a current output time of the image content through the display device and adjusting a current output time of the image content using the calculated error .
각 처리 단말은, 상기 제어 단말로부터 스티리밍방식으로 전송된 상기 영상 콘텐츠를 FIFO(First In First Out) 방식으로 저장하는 저장부; 상기 제어 단말에 의해 지정된 출력 시간 및 상기 표시 장치를 통한 상기 영상 콘텐츠의 현재 출력 시간 간의 오차를 산출하고, 산출된 오차를 이용하여 오차 보정 값을 산출하는 산출부; 및 상기 산출부에 의해 산출된 오차 보정 값에 따라 상기 FIFO 방식으로 저장된 상기 영상 콘텐츠의 저장 위치를 이동시켜 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 제어부를 포함하는 것을 특징으로 한다.Each processing terminal comprises: a storage unit for storing the image contents transmitted in a streaming manner from the control terminal in a FIFO (First In First Out) manner; A calculation unit that calculates an error between an output time designated by the control terminal and a current output time of the image content through the display device and calculates an error correction value using the calculated error; And a controller for adjusting a current output time of the image content by moving a storage position of the image content stored in the FIFO format according to the error correction value calculated by the calculation unit.
상기 제어부는, 상기 산출부에 의해 산출된 오차 보정 값이 양의 정수 N이면, 상기 FIFO 방식으로 저장된 상기 영상 콘텐츠의 저장 위치를 N만큼 선 출력 위치로 이동시키고, 상기 산출부에 의해 산출된 오차 보정 값이 음의 정수 N이면, 상기 FIFO 방식으로 저장된 상기 영상 콘텐츠의 저장 위치를 N만큼 후 출력 위치로 이동시켜 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 것을 특징으로 한다.Wherein the control unit moves the storage position of the image content stored in the FIFO system to a line output position by N if the error correction value calculated by the calculation unit is a positive integer N, When the correction value is a negative integer N, the storage location of the image content stored in the FIFO manner is shifted to the next output position by N to adjust the current output time of the image content.
본 발명의 다른 면에 따른 초다시점 영상 표시 방법은지정된 영상 콘텐츠의 출력 시간 및 표시 장치를 통한 상기 영상 콘텐츠의 현재 출력 시간 간의 오차를 산출하는 단계; 및 산출된 오차를 이용하여 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 단계를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a super multi-viewpoint image display method, comprising: calculating an error between an output time of a designated image content and a current output time of the image content through a display device; And adjusting a current output time of the image content using the calculated error.
상기 오차를 산출하는 단계는, 지정된 상기 영상 콘텐츠의 출력 시간 및 상기 표시 장치를 통한 상기 영상 콘텐츠의 현재 출력 시간 간의 오차를 산출하는 단계; 및 산출된 오차를 이용하여 오차 보정 값을 산출하는 단계를 포함하는 것을 특징으로 한다.The calculating the error may include calculating an error between an output time of the designated image content and a current output time of the image content through the display device; And calculating an error correction value using the calculated error.
상기 현재 출력 시간을 조정하는 단계는, 산출된 상기 오차 보정 값이 양의 정수 N이면, FIFO 방식으로 저장된 상기 영상 콘텐츠의 저장 위치를 N만큼 선 출력 위치로 이동시켜 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 단계; 및 산출된 상기 오차 보정 값이 음의 정수 N이면, 상기 FIFO 방식으로 저장된 상기 영상 콘텐츠의 저장 위치를 N만큼 후 출력 위치로 이동시켜 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 단계를 포함하는 것을 특징으로 한다.Wherein if the calculated error correction value is a positive integer N, the step of adjusting the current output time shifts the storage position of the image content stored in the FIFO manner to a line output position by N to output the current output time of the image content Adjusting; And adjusting the current output time of the image content by moving the storage position of the image content stored in the FIFO scheme to the next output position by N if the calculated error correction value is a negative integer N .
본 발명에 따르면, 각 표출 단말을 동일한 시간에 정확히 제어할 수 있어서, 각 표출 단말 간의 표출 시간 차로 인해 시각적 왜곡 현상을 줄일 수 있다.According to the present invention, each of the display terminals can be accurately controlled at the same time, and the visual distortion phenomenon can be reduced due to the difference in display time between the display terminals.
특히 각 표출 단말에 저장된 콘텐츠뿐만 아니라 네트워크를 통해 스트리밍된 콘텐츠(실시간 재생이 필요한 콘텐츠)도 각 표출 단말을 통해 동기화된 시간에 맞춰 재생할 수 있는(표출 시각이 낮은 오차를 지니도록 제어할 수 있는) 이점이 있다.In particular, not only the content stored in each of the display terminals but also the content streamed through the network (content requiring real-time reproduction) can be reproduced at the synchronized time (the display time can be controlled to have a low error) There is an advantage.
도 1은 본 발명의 일 실시예에 따른 초다시점 영상 표시 시스템을 나타낸 도면.
도 2는 도 1의 제어 단말이 전송하는 명령 패킷의 구조를 나타낸 도면.
도 3은 도 1의 처리 단말 100a의 구조를 나타낸 도면.
도 4는 복수의 처리 단말이 제어 단말로부터 전송된 패킷에 대한 저장방식을 나타낸 도면.
도 5는 본 발명의 일 실시예에 따른 초다시점 영상 표시 방법을 나타낸 흐름도.BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1 is a diagram illustrating a system for displaying multi-viewpoint images according to an exemplary embodiment of the present invention. FIG.
2 is a diagram showing a structure of an instruction packet transmitted by the control terminal of FIG.
3 is a diagram showing the structure of the
4 is a diagram showing a storage method for a packet transmitted from a control terminal by a plurality of processing terminals;
FIG. 5 is a flowchart illustrating a method for displaying a super multi-viewpoint image according to an exemplary embodiment of the present invention.
본 발명의 전술한 목적 및 그 이외의 목적과 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. BRIEF DESCRIPTION OF THE DRAWINGS The above and other objects, advantages and features of the present invention and methods of achieving them will be apparent from the following detailed description of embodiments thereof taken in conjunction with the accompanying drawings.
그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 이하의 실시예들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 목적, 구성 및 효과를 용이하게 알려주기 위해 제공되는 것일 뿐으로서, 본 발명의 권리범위는 청구항의 기재에 의해 정의된다. The present invention may, however, be embodied in many different forms and should not be construed as being limited to the exemplary embodiments set forth herein. Rather, these embodiments are provided so that this disclosure will be thorough and complete, And advantages of the present invention are defined by the description of the claims.
한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성소자, 단계, 동작 및/또는 소자가 하나 이상의 다른 구성소자, 단계, 동작 및/또는 소자의 존재 또는 추가됨을 배제하지 않는다.It is to be understood that the terminology used herein is for the purpose of describing particular embodiments only and is not intended to be limiting of the invention. In the present specification, the singular form includes plural forms unless otherwise specified in the specification. &Quot; comprises "and / or" comprising ", as used herein, unless the recited component, step, operation, and / Or added.
이하, 도 1을 참조하여 본 발명의 일 실시예에 따른 초다시점 영상 표시 시스템을 설명한다. 도 1은 본 발명의 일 실시예에 따른 초다시점 영상 표시 시스템을 나타낸 도면이다.Hereinafter, a multi-viewpoint image display system according to an embodiment of the present invention will be described with reference to FIG. 1 is a block diagram illustrating a multi-viewpoint image display system according to an exemplary embodiment of the present invention.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 초다시점 영상 표시 시스템은 복수의 처리 단말(100a,100b,...,100n), 스위치(200), 그랜드 마스터(300), 제어 단말(400), 콘텐츠 서버(500) 및 디스플레이 장치(600)를 포함한다.1, a super multi-viewpoint image display system according to an embodiment of the present invention includes a plurality of
복수의 처리 단말(100a,100b,...,100n)은 IEEE 1588 PTP(Precision Time Ptrotocol, 정밀 시각 프로토콜)나 IEEE 802.1AS 규격을 준수하고, 제어 단말(400)의 제어에 따라 영상 콘텐츠를 디스플레이 장치(600)를 통해 출력한다.The plurality of
스위치(200)는 정밀 시간 프로토콜을 지원하고, 복수의 처리 단말(100a,100b,...,100n)을 통신망(700)에 연결한다.The
여기서 통신망(700)은 유선 통신망으로서, 이더넷 등 근거리 유선 통신을 지원한다.Here, the
그랜드 마스터(300)는 통신망(700)에 연결된 복수의 처리 단말(100a,100b,...,100n)에 동일한 시간을 제공한다.The
즉, 복수의 처리 단말(100a,100b,...,100n)은 그랜드 마스터(300)와의 동기화를 위해 정밀 시간 프로토콜에 따라 정밀 시간 프로토콜을 지원하는 스위치(200)를 이용하여 통신망(700)에 연결한다.In order to synchronize with the
이렇게 함으로써, 복수의 처리 단말(100a,100b,...,100n)은 그랜드 마스터(300)에 나노초 또는 나노초 이하까지 정교하게 동기화할 수 있고, 복수의 처리 단말(100a,100b,...,100n)에 포함된 시계는 시간이 서로 정확하게 일치될 수 있다.In this way, the plurality of
복수의 처리 단말(100a,100b,...,100n)은 그랜드 마스터(300)와의 동기화를 기본 전제로 동작하므로, 제어 단말(400)의 제어에 따라 영상 콘텐츠를 출력하기 전 그랜드 마스터(300)와의 동기화 여부를 먼저 확인한다. 복수의 처리 단말(100a,100b,...,100n)은 그랜드 마스터(300)와 동기화되어 있지 않은 경우 동기화부터 수행한 후 제어 단말(400)의 제어에 따라 동작한다.Since the plurality of
제어 단말(400)은 통신망(700)을 통해 레이어-2 또는 TCP/UDP에 따른 패킷을 전송하여 복수의 처리 단말(100a,100b,...,100n)이 표시 장치(600)를 통해 영상 콘텐츠를 표시하도록 제어한다.The
복수의 처리 단말(100a,100b,...,100n)은 자체적으로 복수의 영상 콘텐츠를 저장하고 있는 경우, 제어 단말(400)의 제어에 따라 저장된 복수의 영상 콘텐츠를 표시 장치(600)를 통해 표시함으로써 사용자에게 초다시점 영상을 제공할 수 있다.When a plurality of
또한, 복수의 처리 단말(100a,100b,...,100n)은 자체적으로 복수의 영상 콘텐츠를 저장하고 있지 않은 경우, 제어 단말(400) 또는 콘텐츠 서버(500)로부터 영상 콘텐츠를 스트리밍방식으로 제공받아 표시 장치(600)를 통해 표시함으로써 사용자에게 초다시점 영상을 제공할 수 있다.When the plurality of
제어 단말(400) 및 콘텐츠 서버(500) 또한 정밀 시간 프로토콜에 따라 그랜드 마스터(300)와의 동기화를 완료한 후 스트리밍방식으로 영상 콘텐츠를 복수의 처리 단말(100a,100b,...,100n)에 전송할 수 있다.After the
이하, 도 2를 참조하여 제어 단말(400)이 명령 패킷을 전송하여 복수의 처리 단말(100a,100b,...,100n)을 제어하는 방법을 구체적으로 설명한다. 도 2는 도 1의 제어 단말이 전송하는 명령 패킷의 구조를 나타낸 도면이다.Hereinafter, a method of controlling the plurality of
도 2에 도시된 바와 같이, 제어 단말(400)이 복수의 처리 단말(100a,100b,...,100n)을 제어하기 위해 전송하는 패킷은 패킷 헤더 필드(8비트), 타임 스탬프 필드(64비트) 및 페이로드(명령어/영상 콘텐츠) 필드(가변길이)로 구성된다.2, a packet transmitted by the
패킷 헤더 필드는 패킷 타입 정보로서, 명령어 타입 및 영상 콘텐츠 타입 중 어느 하나의 타입 정보로 설정된다.The packet header field is packet type information, and is set as type information of either a command type or an image content type.
타임스탬프 필드는 프리젠테이션 시간 정보로서, 명령어 실행 시간 및 영상 콘텐츠 출력 시간 중 어느 하나의 시간 정보로 설정된다.The time stamp field is presentation time information, and is set as one of time information of command execution time and video content output time.
페이로드 필드는 복수의 처리 단말(100a,100b,...,100n)의 동작을 제어하기 위한 명령어 정보로 설정되거나 표시 장치(600)를 통해 표시될 영상 콘텐츠 정보로 설정된다.The payload field is set to the instruction information for controlling the operation of the plurality of
여기서는 패킷의 구조가 패킷 헤더 필드, 타임스탬프 필드 및 페이로드 필드로 구성된 것으로 설명하였으나 이에 국한되지 않고, 이외에 필요하다고 판단되는 필드를 얼마든지 더 추가시켜 구성할 수 있음은 물론이다.Although the packet structure is described as being composed of a packet header field, a time stamp field, and a payload field, the present invention is not limited to this.
제어 단말(400)은 복수의 처리 단말(100a,100b,...,100n)에 복수의 영상 콘텐츠가 저장되어 있는 경우, 패킷 헤더 필드에 명령어 타입 정보를 설정하고, 타임스탬프 필드에 명령어 실행 시간 정보를 설정하며, 페이로드 필드에 복수의 처리 단말(100a,100b,...,100n)의 동작을 제어하기 위한 명령어 정보를 설정한다. 제어 단말(400)은 설정된 패킷을 복수의 처리 단말(100a,100b,...,100n)에 전송한다.The
예컨대, 제어 단말(400)은 페이로드 필드에 스타트 명령어를 설정하여 복수의 처리 단말(100a,100b,...,100n)이 저장된 영상 콘텐츠를 표시 장치(600)를 통해 출력하도록 제어할 수 있다. 제어 단말(400)은 페이로드 필드에 스타트 명령어와 더불어 몇 번째 이미지부터 출력을 시작할 것인지에 대한 부가 정보도 설정할 수 있다.For example, the
제어 단말(400)은 페이로드 필드에 넥스트 명령어를 설정하여 복수의 처리 단말(100a,100b,...,100n)이 저장된 영상 콘텐츠 중 다음 영상 콘텐츠를 출력하도록 제어할 수 있다.The
또한, 제어 단말(400)은 페이로드 필드에 슬라이드 쇼 명령어를 설정하여 복수의 처리 단말(100a,100b,...,100n)이 현재 이미지 인덱스부터 설정된 간격에 따라 출력하도록 제어할 수 있다.Also, the
제어 단말(400)은 페이로드 필드에 스탑 명령어를 설정하여 복수의 처리 단말(100a,100b,...,100n)이 영상 콘텐츠 출력을 중단하도록 제어할 수 있다.The
제어 단말(400)은 페이로드 필드에 파워다운 명령어를 설정하여 복수의 처리 단말(100a,100b,...,100n)의 동작을 종료하도록 제어할 수 있다.The
또한, 제어 단말(400)은 복수의 처리 단말(100a,100b,...,100n)에 복수의 영상 콘텐츠가 저장되어 있지 않은 경우, 패킷 헤더 필드에 콘텐츠 타입 정보를 설정하고, 타임스탬프 필드에 영상 콘텐츠 출력 시간 정보를 설정하며, 페이로드 필드에 표시 장치(600)를 통해 표시될 영상 콘텐츠 정보를 설정한다. 제어 단말(400)은 설정된 패킷을 복수의 처리 단말(100a,100b,...,100n)에 전송한다.The
예컨대, 제어 단말(400)은 페이로드 필드에 복수의 콘텐츠 영상을 설정하여 복수의 처리 단말(100a,100b,...,100n)에 전송할 수 있다. 제어 단말(400)은 복수의 콘텐츠 영상을 하나의 페이로드 필드에 설정할 경우, 타임 스탬프 필드에 첫 번째 콘텐츠 영상이 표출될 영상 콘텐츠 출력 시간 정보를 설정한다.For example, the
이하, 도 3 및 도 4를 참조하여 복수의 처리 단말(100a,100b,...,100n)이 제어 단말(400)로부터 전송된 패킷을 처리하는 과정을 구체적으로 설명한다. 도 3은 도 1의 처리 단말 100a의 구조를 나타낸 도면이고, 도 4는 복수의 처리 단말이 제어 단말로부터 전송된 패킷에 대한 저장방식을 나타낸 도면이다.Hereinafter, a process of processing packets transmitted from the
복수의 처리 단말(100a,100b,...,100n)은 구성이 모두 동일하므로, 이하에서는 처리 단말(100a)을 예로 들어 설명한다.Since the plurality of
도 3에 도시된 바와 같이, 처리 단말(100a)은 통신부(110a), 제어부(120a), 130a), 시계(140a) 및 산출부(150a)를 포함한다.3, the
이하, 복수의 영상 콘텐츠가 저장부(120a)에 저장된 경우, 처리 단말(100a)의 동작을 설명한다.Hereinafter, the operation of the
통신부(110a)는 제어 단말(400)에 의해 전송된 패킷 헤더 필드에 명령어 타입 정보가 설정되고, 타임스탬프 필드에 명령어 실행 시간 정보가 설정되며, 페이로드 필드에 처리 단말(100a)의 동작을 제어하기 위한 명령어 정보가 설정된 패킷을 수신한다. 통신부(110a)는 제어 단말(400)로부터 수신된 패킷을 제어부(120a)에 전달한다.The
제어부(120a)는 통신부(110a)로부터 전달된 패킷을 파싱하여 제어 단말(400)의 명령어 정보 및 명령어 실행 시간 정보를 획득한다. 제어부(120a)는 획득된 명령어 정보 및 명령어 실행 시간 정보를 이벤트 큐(131a)에 저장한다.The
예컨대, 제어부(120a)는 도 4에 도시된 바와 같이, 획득된 명령어 정보를 이벤트 항목에 저장하고, 명령어 실행시간 정보를 실행시각[초] 항목에 저장한다.For example, as shown in Fig. 4, the
즉, 제어부(120a)는 이벤트 큐(131a)의 이벤트 필드에 첫 번째 명령어로 "스타트", "넥스트", "프리브", "슬라이드 쇼", "스탑", 마지막 번째 명령어로 "파워다운"을 저장한다. 제어부(120a)는 이벤트 큐(131a)의 실행시각[초] 필드에 첫 번째로 스타트에 대응되는 실행시간 "5000.00000", 넥스트에 대응되는 실행시간 "5010.00000", 프리브에 대응되는 실행시간 "5020.00000", 슬라이드 쇼에 대응되는 실행시간 "5030.00000/10.000(간격)", 스탑에 대응되는 실행시간 "1005000.000328", 마지막 번째로 파워다운에 대응되는 실행시간 "1030000.5"를 저장한다.That is, the
제어부(120a)는 주기적으로 이벤트 큐(131a)의 실행시각 필드에 첫 번째로 저장된 명령어 실행 시간을 확인한다. 확인결과, 시계(140a)의 현재시간이 이벤트 큐(131a)의 실행시각 필드에 첫 번째로 저장된 명령어 실행 시간과 일치하면, 제어부(120a)는 이벤트 큐(131a)의 이벤트 필드에 첫 번째로 저장된 명령어를 실행한다.The
예컨대, 제어부(120a)는 이벤트 큐(131a)의 실행시각 필드에 첫 번째로 저장된 명령어 "스타트"에 대응되는 실행시간 "5000.00000"이 시계(140a)의 현재시간과 일치하면, 이벤트 큐(131a)의 이벤트 필드에 첫 번째로 저장된 명령어 "스타트"에 따라 저장부(130)에 저장된 영상 콘텐츠를 표시 장치(600)를 통해 출력한다.For example, when the execution time "5000.00000" corresponding to the instruction "START " stored first in the execution time field of the
전술한 바와 같이, 이벤트 큐(131a)에 저장된 명령어들을 각 명령어에 대응되는 명령어 실행 시간에 따라 수행하여 저장부(130)에 저장된 복수의 영상 콘텐츠를 표시 장치(600)를 통해 출력함으로써, 사용자에게 초다시점 영상 콘텐츠를 제공할 수 있다.As described above, by executing the instructions stored in the
이하, 복수의 영상 콘텐츠가 저장부(120a)에 저장되지 않은 경우, 처리 단말(100a)의 동작을 설명한다.Hereinafter, the operation of the
통신부(110a)는 제어 단말(400)로부터 전송된 패킷 헤더 필드에 콘텐츠 타입 정보가 설정되고, 타임스탬프 필드에 영상 콘텐츠 출력 시간 정보가 설정되며, 페이로드 필드에 표시 장치(600)를 통해 표시될 영상 콘텐츠 정보가 설정된 패킷을 수신한다. 통신부(110a)는 제어 단말(400)로부터 수신된 패킷을 제어부(120a)에 전달한다.The
제어부(120a)는 통신부(110a)로부터 전달된 패킷을 파싱하여 영상 콘텐츠 출력 시간 정보 및 영상 콘텐츠 정보를 획득한다. 제어부(120a)는 획득된 영상 콘텐츠 출력 시간 및 영상 콘텐츠를 FIFO(First In First Out) 버퍼(132a)에 저장한다.The
제어부(120a)는 FIFO 버퍼(132a)에 첫 번째로 저장된 영상 콘텐츠 출력 시간을 확인한다. 확인결과, FIFO 버퍼(132a)에 첫 번째로 저장된 영상 콘텐츠 출력 시간이 시계(140a)의 현재시간과 일치할 경우, 제어부(120a)는 FIFO 버퍼(132a)에 첫 번째로 저장된 영상 콘텐츠 출력 시간에 대응되는 FIFO 버퍼(132a)에 첫 번째로 저장된 영상 콘텐츠를 표시 장치(600)를 통해 출력한다.The
전술한 바와 같이, FIFO 버퍼(132a)에 저장된 영상 콘텐츠를 각 영상 콘텐츠에 대응되는 영상 콘텐츠 출력 시간에 따라 표시 장치(600)를 통해 출력함으로써 사용자에게 다시점 영상 콘텐츠를 제공할 수 있다.As described above, the image content stored in the
한편, 제어부(120a)는 FIFO 버퍼(132a)에 저장된 영상 콘텐츠를 표시 장치(600)를 통해 출력한 시간을 현재 로컬 타임(Tlocal)으로 저장부(130a)에 저장한다.Meanwhile, the
제어부(120a)는 저장된 현재 로컬 타임(Tlocal)과 FIFO 버퍼(132a)에 저장된 영상 콘텐츠에 대응되는 영상 콘텐츠 출력 시간(Tpresent)을 산출부(150a)에 전달한다.The
산출부(150a)는 제어부(120a)로부터 전달된 현재 로컬 타임(Tlocal) 및 영상 콘텐츠 출력 시간(Tpresent)간의 오차(dT)를 수학식 1과 같이 산출한다.The calculating
예컨대, 현재 로컬 타임(Tlocal)은 처리 단말(100a)이 자신의 정밀 시간 프로토콜에 따른 시간을 기준으로 영상 콘텐츠를 표시 장치(600)를 통해 출력한 순간을 기록한 시간이다.For example, the current local time (T local ) is a time at which the
FIFO 버퍼에 저장된 영상 콘텐츠에 대응되는 영상 콘텐츠 출력 시간(Tpresent)은 영상 콘텐츠를 제공한 제어 단말(400) 또는 콘텐츠 서버(500)가 자신의 정밀 시간 프로토콜에 따른 시간을 기준으로 영상 콘텐츠가 언제 표출될지를 지정한 시간이다.The video content output time (T present ) corresponding to the video content stored in the FIFO buffer can be set at a time when the control terminal (400) or the content server (500) This is the time that you specified whether to display.
따라서, 처리 단말(100a), 제어 단말(400) 및 콘텐츠 서버(500)가 정밀 시간 프로토콜에 따라 그랜드 마스터(300)에 동기화된 경우, 산출부(150a)는 제어부(120a)로부터 전달된 현재 로컬 타임(Tlocal) 및 영상 콘텐츠 출력 시간(Tpresent)간의 오차(dT)를 0으로 산출한다.Accordingly, when the
이하, 처리 단말(100a)이 산출된 오차(dT)를 보정하는 방법에 대해 구체적으로 설명한다.Hereinafter, a method for correcting the calculated error dT by the
산출부(150a)는 산출된 오차(dT)를 이용하여 수학식 2와 같이 오차 보정 값(N)을 산출할 수 있다.The calculating
floor(x)는 x보다 작거나 같은 가장 큰 정수, Ts는 하나의 콘텐츠 프레임에 대한 주기.floor (x) is the largest integer less than or equal to x, and T s is the period for one content frame.
예컨대, FPS(Frame Per Second)가 30인 비디오 콘텐츠의 경우 한 프레임 주기는 1/30초이다.For example, in the case of a video content having an FPS (Frame Per Second) of 30, one frame period is 1/30 second.
제어부(120a)는 산출부(150a)에 의해 산출된 오차 보정 값(N)에 따라 제어 단말(400)에 의해 지정된 영상 콘텐츠 표출 시간과 제어 단말(400)로부터 전송된 영상 콘텐츠를 실제 표시 장치(600)를 통해 표출하는 시간 간의 프레임(영상 콘텐츠) 오차 발생 여부를 판단할 수 있다. 제어부(120a)는 판단 결과에 따라 FIFO 버퍼(132a)에 제어 단말(400)로부터 전송된 영상 콘텐츠 저장시 저장 위치를 조정하여 영상 콘텐츠에 발생한 오차를 보상할 수 있다.The
예컨대, 제어부(120a)는 산출부(150a)에 의해 산출된 오차 보정 값(N)이 0인 경우, 현재 표시 장치(600)를 통해 출력된 영상 콘텐츠의 출력 시간과 제어 단말(400)에 의해 지정된 출력 시간이 동기화된 것으로 판단한다.For example, when the error correction value N calculated by the
그러나, 제어부(120a)는 산출부(150a)에 의해 산출된 오차 보정 값(N)이 양의 정수인 경우, 현재 표시 장치(600)를 통해 출력된 영상 콘텐츠의 출력 시간이 제어 단말(400)에 의해 지정된 출력 시간 보다 느린 것으로 판단한다. 제어부(120a)는 현재 표시 장치(600)를 통해 출력된 영상 콘텐츠의 출력 시간이 제어 단말(400)에 의해 지정된 출력 시간 보다 느린 것으로 판단되면, FIFO 버퍼(132a)에 현재 남아있는 영상 콘텐츠(데이터)의 저장 위치를 현재보다 빠르게 출력할 수 있는 저장 위치로 이동시킨다. 즉, 제어부(120a)는 FIFO 버퍼(132a)에 현재 남아있는 영상 콘텐츠(데이터)의 저장 위치를 산출부(150a)에 의해 산출된 오차 보정 값(N)만큼 선 출력 위치로 쉬프트 한다.However, when the error correction value N calculated by the
이렇게 함으로써, 현재 FIFO 버퍼(132a)에 남아 있는 데이터의 양을 줄이고, 새로운 패킷으로 제어 단말(400)로부터 전송된 영상 콘텐츠부터 제어 단말(400)에 의해 지정된 시간에 정확히 맞춰(동기화되어) 영상 콘텐츠를 표시 장치(600)를 통해 출력할 수 있다. 따라서, 사용자에게 초다시점 영상 콘텐츠를 제공할 수 있다.By doing so, the amount of data remaining in the
반면, 제어부(120a)는 산출부(150a)에 의해 산출된 오차 보정 값(N)이 음의 정수인 경우, 현재 표시 장치(600)를 통해 출력된 영상 콘텐츠의 출력 시간이 제어 단말(400)에 의해 지정된 시간 보다 빠른 것으로 판단한다. 제어부(120a)는 현재 표시 장치(600)를 통해 출력된 영상 콘텐츠의 출력 시간이 제어 단말(400)에 의해 지정된 시간 보다 빠른 것으로 판단되면, FIFO 버퍼(132a)에 현재 남아있는 영상 콘텐츠(데이터)의 저장 위치를 현재보다 느리게 출력할 수 있는 저장 위치로 이동시킨다. 즉 제어부(120a)는 FIFO 버퍼(132a)에 현재 남아있는 영상 콘텐츠(데이터)의 저장 위치를 산출부(150a)에 의해 산출된 오차 보정 값(N)만큼 후 출력 위치로 쉬프트 한다.On the other hand, when the error correction value N calculated by the
이렇게 함으로써, 새로운 패킷으로 제어 단말(400)로부터 전송된 영상 콘텐츠부터 제어 단말(400)에 의해 지정된 시간에 정확히 맞춰(동기화되어) 영상 콘텐츠를 표시 장치(600)를 통해 출력할 수 있다. 따라서, 사용자에게 초다시점 영상 콘텐츠를 제공할 수 있다.By doing so, the video content transmitted from the
전술한 바와 같이, 제어 단말(400)에 의해 지정된 시간과 처리 단말(100a)이 실제 영상 콘텐츠를 표시 장치(600)를 통해 출력하는 시간 간의 오차를 산출하고, 산출된 오차를 이용하여 오차 보정 값을 산출한다. 산출된 오차 보정 값에 따라 FIFO 버퍼(132a)에 남아 있는 데이터의 위치를 현재 저장 위치를 기준으로 앞 또는 뒤로 이동시킴으로써, 발생한 오차를 보정할 수 있다.As described above, the error between the time designated by the
이하, 도 5를 참조하여 본 발명의 일 실시예에 따른 초다시점 영상 표시 방법을 설명한다. 도 5는 본 발명의 일 실시예에 따른 초다시점 영상 표시 방법을 나타낸 흐름도이다.Hereinafter, a method for displaying a super multi-viewpoint image according to an embodiment of the present invention will be described with reference to FIG. 5 is a flowchart illustrating a super multi-viewpoint image display method according to an embodiment of the present invention.
도 5에 도시된 바와 같이, 본 발명의 일 실시예에 따른 초다시점 영상 표시 방법은 영상 콘텐츠가 저장부에 저장되어 있는지 여부를 판단한다(S500).As shown in FIG. 5, the super-multi-view image display method according to an exemplary embodiment of the present invention determines whether image contents are stored in the storage unit (S500).
판단결과, 영상 콘텐츠가 저장부에 저장되어 있는 경우, 패킷 헤더 필드에 명령어 타입 정보가 설정되고, 타임스탬프 필드에 명령어 실행 시간 정보가 설정되며, 페이로드 필드에 동작을 제어하기 위한 명령어 정보가 설정된 패킷을 제어 단말로부터 수신한다(S501).As a result of the determination, if the image content is stored in the storage unit, the command type information is set in the packet header field, the command execution time information is set in the time stamp field, and the command information for controlling the operation is set in the payload field The packet is received from the control terminal (S501).
제어 단말로부터 수신된 패킷을 파싱하여 명령어 정보 및 명령어 실행 시간 정보를 획득한다. 획득된 명령어 정보 및 명령어 실행 시간 정보를 이벤트 큐에 저장한다(S502).And parses the packet received from the control terminal to obtain instruction information and instruction execution time information. The acquired command information and command execution time information are stored in the event queue (S502).
예컨대, 획득된 명령어 정보를 이벤트 항목에 저장하고, 명령어 실행시간 정보를 실행시각[초] 항목에 저장한다.For example, the acquired instruction information is stored in the event item, and the instruction execution time information is stored in the execution time [sec] item.
즉, 이벤트 큐의 이벤트 필드에 첫 번째 명령어로 "스타트", "넥스트", "프리브", "슬라이드 쇼", "스탑", 마지막 번째 명령어로 "파워다운"을 저장한다. 이벤트 큐의 실행시각[초] 필드에 첫 번째로 스타트에 대응되는 실행시간 "5000.00000", 넥스트에 대응되는 실행시간 "5010.00000", 프리브에 대응되는 실행시간 "5020.00000", 슬라이드 쇼에 대응되는 실행시간 "5030.00000/10.000(간격)", 스탑에 대응되는 실행시간 "1005000.000328", 마지막 번째로 파워다운에 대응되는 실행시간 "1030000.5"를 저장한다.In other words, "Start", "Next", "Prev", "Slideshow", "Stop" and "Power Down" are saved as the first command in the event field of the event queue. Execution time "5000.00000" corresponding to the first start, "5010.00000" corresponding to the next, execution time "5020.00000" corresponding to the prev, execution corresponding to the slide show in the execution time [second] field of the event queue The execution time corresponding to the stop is " 1005000.000328 ", and the execution time corresponding to the power-down last is "1030000.5 ".
주기적으로 이벤트 큐의 실행시각 필드에 첫 번째로 저장된 명령어 실행 시간을 확인한다(S503).The first instruction execution time stored in the execution time field of the event queue is periodically checked (S503).
확인결과, 현재시간이 이벤트 큐의 실행시각 필드에 첫 번째로 저장된 명령어 실행 시간과 일치하면, 이벤트 큐의 이벤트 필드에 첫 번째로 저장된 명령어를 실행한다(S504).If it is determined that the current time coincides with the first instruction execution time stored in the execution time field of the event queue, the first instruction stored in the event field of the event queue is executed (S504).
예컨대, 이벤트 큐의 실행시각 필드에 첫 번째로 저장된 명령어 "스타트"에 대응되는 실행시간 "5000.00000"이 현재시간과 일치하면, 이벤트 큐(131a)의 이벤트 필드에 첫 번째로 저장된 명령어 "스타트"에 따라 저장부에 저장된 영상 콘텐츠를 표시 장치를 통해 출력한다.For example, if the execution time "5000.00000" corresponding to the first instruction "START " stored in the execution time field of the event queue coincides with the current time, the first instruction stored in the event field of the
전술한 바와 같이, 이벤트 큐에 저장된 명령어들을 각 명령어에 대응되는 명령어 실행 시간에 따라 수행하여 저장부에 저장된 복수의 영상 콘텐츠를 표시 장치를 통해 출력함으로써, 사용자에게 초다시점 영상 콘텐츠를 제공할 수 있다.As described above, by executing the instructions stored in the event queue according to the instruction execution time corresponding to each instruction and outputting the plurality of image contents stored in the storage unit through the display device, it is possible to provide the user with the multi- have.
그러나, 단계(S500) 판단결과, 영상 콘텐츠가 저장부에 저장되어 있지 않은 경우, 패킷 헤더 필드에 콘텐츠 타입 정보가 설정되고, 타임스탬프 필드에 영상 콘텐츠 출력 시간 정보가 설정되며, 페이로드 필드에 표시 장치(600)를 통해 표시될 영상 콘텐츠 정보가 설정된 패킷을 제어 단말로부터 수신한다(S505).However, if it is determined in step S500 that the video content is not stored in the storage unit, the content type information is set in the packet header field, the video content output time information is set in the time stamp field, A packet having image content information to be displayed through the
제어 단말로부터 수신된 패킷을 파싱하여 영상 콘텐츠 출력 시간 정보 및 영상 콘텐츠 정보를 획득한다. 획득된 영상 콘텐츠 출력 시간 및 영상 콘텐츠를 FIFO(First In First Out) 버퍼에 저장한다(S506).And obtains image content output time information and image content information by parsing the packet received from the control terminal. The acquired image content output time and image content are stored in a FIFO (First In First Out) buffer (S506).
FIFO 버퍼에 첫 번째로 저장된 영상 콘텐츠 출력 시간을 확인한다(S507). 확인결과, FIFO 버퍼에 첫 번째로 저장된 영상 콘텐츠 출력 시간이 시계의 현재시간과 일치할 경우, FIFO 버퍼에 첫 번째로 저장된 영상 콘텐츠 출력 시간에 대응되는 FIFO 버퍼에 첫 번째로 저장된 영상 콘텐츠를 표시 장치를 통해 출력한다.The output time of the first video content stored in the FIFO buffer is checked (S507). If it is determined that the first video content output time in the FIFO buffer matches the current time of the clock, the first video content stored in the FIFO buffer corresponding to the first video content output time in the FIFO buffer is displayed on the display device Lt; / RTI >
FIFO 버퍼에 저장된 영상 콘텐츠를 표시 장치를 통해 출력한 시간을 현재 로컬 타임(Tlocal)으로 저장부에 저장한다.The time of outputting the image contents stored in the FIFO buffer through the display device is stored in the storage unit at the current local time (T local ).
저장된 현재 로컬 타임(Tlocal)과 FIFO 버퍼(132a)에 저장된 영상 콘텐츠에 대응되는 영상 콘텐츠 출력 시간(Tpresent) 간의 오차(dT)를 산출한다(S508).An error dT between the stored current local time T local and the image content output time T present corresponding to the image content stored in the
예컨대, 현재 로컬 타임(Tlocal)은 처리 단말(100a)이 자신의 정밀 시간 프로토콜에 따른 시간을 기준으로 영상 콘텐츠를 표시 장치를 통해 출력한 순간을 기록한 시간이다.For example, the current local time (T local ) is a time when the
FIFO 버퍼에 저장된 영상 콘텐츠에 대응되는 영상 콘텐츠 출력 시간(Tpresent)은 영상 콘텐츠를 제공한 제어 단말 또는 콘텐츠 서버가 자신의 정밀 시간 프로토콜에 따른 시간을 기준으로 영상 콘텐츠가 언제 표출될지를 지정한 시간이다.The image content output time (T present ) corresponding to the image content stored in the FIFO buffer is a time when the control terminal providing the image content or the content server specifies when the image content is to be displayed based on the time according to its precision time protocol .
따라서, 처리 단말, 제어 단말 및 콘텐츠 서버가 정밀 시간 프로토콜에 따라 그랜드 마스터에 동기화된 경우, 현재 로컬 타임(Tlocal) 및 영상 콘텐츠 출력 시간(Tpresent)간의 오차(dT)를 0으로 산출한다.Accordingly, when the processing terminal, the control terminal, and the content server are synchronized to the grand master according to the precision time protocol, the error dT between the current local time T local and the image content output time T present is calculated as zero.
산출된 오차(dT)를 이용하여 오차 보정 값(N)을 산출한다(S509).The error correction value N is calculated using the calculated error dT (S509).
산출된 오차 보정 값(N)에 따라 제어 단말에 의해 지정된 영상 콘텐츠 표출 시간과 제어 단말로부터 전송된 영상 콘텐츠를 실제 표시 장치를 통해 표출하는 시간 간의 프레임(영상 콘텐츠) 오차 발생 여부를 판단한다. 판단 결과에 따라 FIFO 버퍼에 제어 단말로부터 전송된 영상 콘텐츠 저장시 저장 위치를 조정하여 영상 콘텐츠에 발생한 오차를 보상한다(S510).(Video content) error between the video content presentation time designated by the control terminal and the time when the video content transmitted from the control terminal is displayed on the actual display device according to the calculated error correction value N is determined. According to the determination result, the storage position of the image content transmitted from the control terminal is adjusted in the FIFO buffer to compensate the error generated in the image content (S510).
출된 오차 보정 값(N)이 0인 경우, 현재 표시 장치(600)를 통해 출력된 영상 콘텐츠의 출력 시간과 제어 단말에 의해 지정된 출력 시간이 동기화된 것으로 판단한다.It is determined that the output time of the image content output through the
그러나, 산출된 오차 보정 값(N)이 양의 정수인 경우, 현재 표시 장치를 통해 출력된 영상 콘텐츠의 출력 시간이 제어 단말에 의해 지정된 출력 시간 보다 느린 것으로 판단한다.However, when the calculated error correction value N is a positive integer, it is determined that the output time of the image content output through the current display device is slower than the output time designated by the control terminal.
현재 표시 장치를 통해 출력된 영상 콘텐츠의 출력 시간이 제어 단말에 의해 지정된 출력 시간 보다 느린 것으로 판단되면, FIFO 버퍼에 현재 남아있는 영상 콘텐츠(데이터)의 저장 위치를 현재보다 빠르게 출력할 수 있는 저장 위치로 이동시킨다. 즉, FIFO 버퍼에 현재 남아있는 영상 콘텐츠(데이터)의 저장 위치를 산출된 오차 보정 값(N)만큼 선 출력 위치로 쉬프트 한다.If it is determined that the output time of the video content output through the display device is slower than the output time designated by the control terminal, the storage location of the video content (data) . That is, the storage position of the image content (data) that remains in the FIFO buffer is shifted to the line output position by the calculated error correction value (N).
이렇게 함으로써, 현재 FIFO 버퍼에 남아 있는 데이터의 양을 줄이고, 새로운 패킷으로 제어 단말로부터 전송된 영상 콘텐츠부터 제어 단말에 의해 지정된 시간에 정확히 맞춰(동기화되어) 영상 콘텐츠를 표시 장치를 통해 출력할 수 있다. 따라서, 사용자에게 초다시점 영상 콘텐츠를 제공할 수 있다.By doing so, it is possible to reduce the amount of data remaining in the current FIFO buffer and to output the image content from the video contents transmitted from the control terminal in a new packet exactly in synchronization with the time designated by the control terminal through the display device . Thus, it is possible to provide the user with the super multi-view video content.
반면, 산출된 오차 보정 값(N)이 음의 정수인 경우, 현재 표시 장치를 통해 출력된 영상 콘텐츠의 출력 시간이 제어 단말에 의해 지정된 시간 보다 빠른 것으로 판단한다. 현재 표시 장치를 통해 출력된 영상 콘텐츠의 출력 시간이 제어 단말에 의해 지정된 시간 보다 빠른 것으로 판단되면, FIFO 버퍼에 현재 남아있는 영상 콘텐츠(데이터)의 저장 위치를 현재보다 느리게 출력할 수 있는 저장 위치로 이동시킨다. 즉, FIFO 버퍼에 현재 남아있는 영상 콘텐츠(데이터)의 저장 위치를 산출된 오차 보정 값(N)만큼 후 출력 위치로 쉬프트 한다.On the other hand, when the calculated error correction value N is a negative integer, it is determined that the output time of the video content output through the current display device is faster than the time designated by the control terminal. If it is determined that the output time of the video content output through the display device is earlier than the time designated by the control terminal, the storage location of the video content (data) remaining in the FIFO buffer may be output to a storage location . That is, the storage position of the image content (data) that remains in the FIFO buffer is shifted to the post-output position by the calculated error correction value (N).
이렇게 함으로써, 새로운 패킷으로 제어 단말로부터 전송된 영상 콘텐츠부터 제어 단말에 의해 지정된 시간에 정확히 맞춰(동기화되어) 영상 콘텐츠를 표시 장치를 통해 출력할 수 있다. 따라서, 사용자에게 초다시점 영상 콘텐츠를 제공할 수 있다.By doing so, it is possible to output the image contents from the image contents transmitted from the control terminal in a new packet exactly (in synchronization) at the time designated by the control terminal through the display device. Thus, it is possible to provide the user with the super multi-view video content.
이상 바람직한 실시예와 첨부도면을 참조하여 본 발명의 구성에 관해 구체적으로 설명하였으나, 이는 예시에 불과한 것으로 본 발명의 기술적 사상을 벗어나지 않는 범주내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, is intended to cover various modifications and equivalent arrangements included within the spirit and scope of the appended claims. Therefore, the scope of the present invention should not be limited by the illustrated embodiments, but should be determined by the scope of the appended claims and equivalents thereof.
100a,100b,...,100n : 제1 처리 단말,제2 처리 단말,...,제n 처리 단말
200 : 스위치 300 : 그랜드 마스터
400 : 제어 단말 500 : 콘텐츠 서버
600 : 표시 장치 700 : 통신망100a, 100b, ..., 100n: a first processing terminal, a second processing terminal, ..., an nth processing terminal
200: Switch 300: Grand Master
400: Control terminal 500: Content server
600: display device 700: communication network
Claims (6)
상기 영상 콘텐츠의 출력 시간을 지정하는 제어 단말; 및
상기 제어 단말에 의해 지정된 출력 시간 및 상기 표시 장치를 통한 상기 영상 콘텐츠의 현재 출력 시간 간의 오차를 산출하고, 산출된 오차를 이용하여 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 복수의 처리 단말
을 포함하는 초다시점 영상 표시 시스템.A display device for displaying image contents output from a plurality of processing terminals;
A control terminal for specifying an output time of the image content; And
An error between the output time designated by the control terminal and the current output time of the image content through the display device and adjusting the current output time of the image content using the calculated error,
A second multi-view image display system comprising:
상기 제어 단말로부터 스티리밍방식으로 전송된 상기 영상 콘텐츠를 FIFO(First In First Out) 방식으로 저장하는 저장부;
상기 제어 단말에 의해 지정된 출력 시간 및 상기 표시 장치를 통한 상기 영상 콘텐츠의 현재 출력 시간 간의 오차를 산출하고, 산출된 오차를 이용하여 오차 보정 값을 산출하는 산출부; 및
상기 산출부에 의해 산출된 오차 보정 값에 따라 상기 FIFO 방식으로 저장된 상기 영상 콘텐츠의 저장 위치를 이동시켜 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 제어부를 포함하는 것
인 초다시점 영상 표시 시스템.The terminal according to claim 1,
A storage unit for storing the image contents transmitted by the streaming method from the control terminal in a FIFO (First In First Out) manner;
A calculation unit that calculates an error between an output time designated by the control terminal and a current output time of the image content through the display device and calculates an error correction value using the calculated error; And
And a control unit for adjusting a current output time of the image content by moving a storage position of the image content stored in the FIFO scheme according to the error correction value calculated by the calculation unit
In - line multi - view video display system.
상기 산출부에 의해 산출된 오차 보정 값이 양의 정수 N이면, 상기 FIFO 방식으로 저장된 상기 영상 콘텐츠의 저장 위치를 N만큼 선 출력 위치로 이동시키고, 상기 산출부에 의해 산출된 오차 보정 값이 음의 정수 N이면, 상기 FIFO 방식으로 저장된 상기 영상 콘텐츠의 저장 위치를 N만큼 후 출력 위치로 이동시켜 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 것
인 초다시점 영상 표시 시스템.3. The apparatus of claim 2,
If the error correction value calculated by the calculation unit is a positive integer N, moves the storage position of the image content stored in the FIFO scheme to the line output position by N, and if the error correction value calculated by the calculation unit is negative If the N is an integer N, moving the storage position of the image content stored in the FIFO manner to the next output position by N to adjust the current output time of the image content
In - line multi - view video display system.
산출된 오차를 이용하여 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 단계
를 포함하는 초다시점 영상 표시 방법.Calculating an error between an output time of the designated image content and a current output time of the image content through the display device; And
Adjusting the current output time of the image content using the calculated error
/ RTI > image display method.
지정된 상기 영상 콘텐츠의 출력 시간 및 상기 표시 장치를 통한 상기 영상 콘텐츠의 현재 출력 시간 간의 오차를 산출하는 단계; 및
산출된 오차를 이용하여 오차 보정 값을 산출하는 단계를 포함하는 것
인 초다시점 영상 표시 방법.5. The method of claim 4, wherein the calculating the error comprises:
Calculating an error between an output time of the designated image content and a current output time of the image content through the display device; And
And calculating an error correction value using the calculated error
A method for displaying a multi-viewpoint image.
산출된 상기 오차 보정 값이 양의 정수 N이면, FIFO 방식으로 저장된 상기 영상 콘텐츠의 저장 위치를 N만큼 선 출력 위치로 이동시켜 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 단계; 및
산출된 상기 오차 보정 값이 음의 정수 N이면, 상기 FIFO 방식으로 저장된 상기 영상 콘텐츠의 저장 위치를 N만큼 후 출력 위치로 이동시켜 상기 영상 콘텐츠의 현재 출력 시간을 조정하는 단계를 포함하는 것
인 초다시점 영상 표시 방법.6. The method of claim 5, wherein adjusting the current output time comprises:
Adjusting the current output time of the image content by moving the storage location of the image content stored in the FIFO format to a line output position by N if the calculated error correction value is a positive integer N; And
And adjusting the current output time of the image content by moving the storage location of the image content stored in the FIFO scheme to the next output position by N if the calculated error correction value is a negative integer N
A method for displaying a multi-viewpoint image.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140188083A KR101948309B1 (en) | 2014-12-24 | 2014-12-24 | System and Mehtod Displaying Super Multi-View Image |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140188083A KR101948309B1 (en) | 2014-12-24 | 2014-12-24 | System and Mehtod Displaying Super Multi-View Image |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20160077767A true KR20160077767A (en) | 2016-07-04 |
KR101948309B1 KR101948309B1 (en) | 2019-02-14 |
Family
ID=56501167
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020140188083A KR101948309B1 (en) | 2014-12-24 | 2014-12-24 | System and Mehtod Displaying Super Multi-View Image |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101948309B1 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20200116051A (en) | 2019-03-30 | 2020-10-08 | 전춘구 | Double blind curtain with tape-belt divided into two |
KR20200116004A (en) | 2019-03-30 | 2020-10-08 | 전춘구 | Double blind curtain with tape-belt divided into two |
KR20200116000A (en) | 2019-03-30 | 2020-10-08 | 전춘구 | Double blind curtain with tape-belt divided into two |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4364619B2 (en) * | 2003-12-03 | 2009-11-18 | 日本電信電話株式会社 | Multiple video time synchronous display terminal, multiple video time synchronous display method, program, and recording medium |
-
2014
- 2014-12-24 KR KR1020140188083A patent/KR101948309B1/en active IP Right Grant
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20200116051A (en) | 2019-03-30 | 2020-10-08 | 전춘구 | Double blind curtain with tape-belt divided into two |
KR20200116004A (en) | 2019-03-30 | 2020-10-08 | 전춘구 | Double blind curtain with tape-belt divided into two |
KR20200116000A (en) | 2019-03-30 | 2020-10-08 | 전춘구 | Double blind curtain with tape-belt divided into two |
Also Published As
Publication number | Publication date |
---|---|
KR101948309B1 (en) | 2019-02-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220174209A1 (en) | System and method providing object-oriented zoom in multimedia messaging | |
CN100527784C (en) | System and method for playing synchronously dynamic image | |
US20160357493A1 (en) | Synchronization of videos in a display wall | |
US11290698B2 (en) | Image processing apparatus and image processing method | |
US20180316902A1 (en) | Image processing apparatus and image processing method | |
US8279344B2 (en) | Synchronization of video presentation by video cadence modification | |
EP2866451A1 (en) | Method and apparatus for IP video signal synchronization | |
KR101948309B1 (en) | System and Mehtod Displaying Super Multi-View Image | |
JP2013026787A (en) | Transmitting device, receiving system, communication system, transmission method, reception method, and program | |
KR20220053542A (en) | Method of display playback synchronization of digital contents in multiple connected devices and apparatus using the same | |
JP2022517587A (en) | Audio stream and video stream synchronization switching method and equipment | |
WO2022225750A1 (en) | Augmented reality video stream synchronization | |
US8937973B2 (en) | Transmitting device, receiving device, communication system, transmission method, reception method, and program | |
JP2017050609A (en) | Video processing system, video processing apparatus, video processing program, and video processing method | |
JP6565382B2 (en) | Information processing method and moving image data transmission system | |
EP2871848A1 (en) | Providing correction information for media synchronization | |
US9471093B2 (en) | Controlling data amounts distributed to terminal devices | |
JP6506493B2 (en) | Virtual reality viewing system, reproduction synchronization method and virtual reality viewing program | |
CN112272306B (en) | Multi-channel real-time interactive video fusion transmission method | |
CN112272305B (en) | Multi-channel real-time interactive video cache storage method | |
JP5863356B2 (en) | Stereo moving image imaging apparatus, imaging method, stereo moving image display apparatus, display method, and program | |
KR20180108967A (en) | Multi-vision screen image rendering system, device and method | |
CN115174978B (en) | Sound and picture synchronization method for 3D digital person and electronic equipment | |
JP2015046708A (en) | Communication system, communication method, transmission-side synchronous signal distribution device, transmission-side synchronous control device, reception-side synchronous signal distribution device, reception-side synchronous control device and program | |
JP2011176523A (en) | Stereo video signal control method, control device, and control program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right |