KR20100110658A - Multiviewer system showing videos on 3d virtual monitors in a 3d virtual graphic video wall realizing virtual video wall supporting unlimited number inputs of either analog or digital, ip videos - Google Patents
Multiviewer system showing videos on 3d virtual monitors in a 3d virtual graphic video wall realizing virtual video wall supporting unlimited number inputs of either analog or digital, ip videos Download PDFInfo
- Publication number
- KR20100110658A KR20100110658A KR1020090029100A KR20090029100A KR20100110658A KR 20100110658 A KR20100110658 A KR 20100110658A KR 1020090029100 A KR1020090029100 A KR 1020090029100A KR 20090029100 A KR20090029100 A KR 20090029100A KR 20100110658 A KR20100110658 A KR 20100110658A
- Authority
- KR
- South Korea
- Prior art keywords
- view
- graphic
- multiview
- image
- input
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
- H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
여럿의 비디오를 각각의 모니터에 표시하는 경우, 모니터의 수가 많이 필요하게 된다. 이에 따라, 각 모니터에 복수의 입력 비디오를 스위처를 통해 보여 주는 기존의 방송실 및 보안 모니터링 실들이, 최근 멀티뷰 장치를 통해 대형 프로젝터 혹은 LCD/플라즈마 모니터들의 고해상, 대형 스크린에 다수의 비디오를 한번에 보여주는 방식이 많이 사용되어, 사용자는 모니터링실의 모니터수를 대폭 줄이고 원하는 크기들의 비디오 화면을 재구성해 볼 수 있게 되었다. Displaying multiple videos on each monitor requires a large number of monitors. As a result, existing broadcast and security monitoring rooms that display multiple input videos on each monitor via a switcher, display multiple videos on a high resolution, large screen of large projectors or LCD / plasma monitors at the same time through multi-view devices. The approach has been widely used, allowing the user to drastically reduce the number of monitors in the monitoring room and reconstruct the video screen in the desired size.
이와 같이, 하나의 모니터상에 다수의 비디오들을 크고 작은 화면으로 구성 하여 보여 주는 장치를 멀티뷰라고 한다. 즉, 멀티뷰 장치는 다수의 비디오들을 아날로그 혹은 디지털로 입력받아, 이를 재구성하여 하나의 비디오 혹은 VGA/DVI, HDMI등을 통해 출력함으로써, 하나의 모니터에 다수의 비디오를 보여 주는 장치이다.As such, a device that displays a plurality of videos on a single monitor in large and small screens is called a multiview. That is, the multi-view device is a device that displays a plurality of videos on one monitor by receiving a plurality of videos in analog or digital, reconstructed and output them through a single video or VGA / DVI, HDMI.
아날로그, 디지털 비디오/오디오, 압축된 비디오 스트림 입력들의 비디오가 3차원 공간속에 실시간 렌더링 기술을 이용하여 가상 비디오 월에 표시되고, 이를 다양한 가상 카메라들을 통해 관측자가 원하는 비디오들을 가상 매트릭스 기능을 이용하여 선택하여 가상모니터들에 나타나고 이 가상 비디오월의 모니터들을 관측자가 보고 싶은 위치에 있는 가상 카메라를 통해 보이는 화면을 출력시켜 실시간으로 가상 카메라의 출력을 한개 혹은 복수개의 실제 모니터에 나타나게 하는 장치이다. 이러한 멀티뷰 장치는 주로 HD 급 모니터의 해상도가 높아지면서 다수의 SD급 비디오를 한 화면에 보여 줄수 있게 되면서 고화질의 비디오를 한화면에 다수로 보여주게 되면서 보안 및 방송 시장에 많이 사용이 되어 지고 있다. Video from analog, digital video / audio and compressed video stream inputs is displayed in a virtual video wall using real-time rendering technology in three-dimensional space, and the video is selected by the viewer using the virtual matrix function through various virtual cameras. It is a device that appears on the virtual monitors and displays the monitors of the virtual video wall through the virtual camera at the position where the viewer wants to see, so that the output of the virtual camera is displayed on one or more real monitors in real time. These multi-view devices are mainly used in the security and broadcasting market as the resolution of the HD monitor is increased to display a plurality of SD videos on one screen, and the high quality video is displayed on a single screen. .
그동안의 일반적인 멀티뷰의 방식인 다수의 비디오 화면을 보여 주는데 있어 2차원 분할 화면에 각 비디오를 스케일하여 재배치하여 보여주는 방식과 달리, 입력되는 비디오 화면을 실시간 3D 그래픽 렌더링 기술을 이용하여 3D 그래픽 공간상에 배치한 가상 모니터들에 비디오 택스쳐링 시키고, 이를 가상카메라를 통해 촬영되어지는 화면을 실시간 렌더링을 통해 출력 화면으로 생성하게 하여, 출력된 화면을 실제 모니터 화면에 보여 주게 하는 3D 렌더링 기술을 이용한 멀티뷰 화면 재현 기술에 관한 것이다. In contrast to the method of displaying multiple video screens, which are common multi-view methods in the past, by scaling and rearranging each video on a two-dimensional split screen, the input video screen is displayed in 3D graphic space using real-
즉, 본 발명은 다양한 형태의 다수의 디지털 혹은 아날로그 입력 비디오/오디오들을 하나의 모니터에 여러 크기의 화면으로 보여주는 방법에 관한 것으로, 가상의 3D 그래픽 공간속에 다수의 가상의 3D 그래픽 비디오 모니터를 배치한 비디오 월을(Video Wall) 과 같은 공간속에 배치한 다수의 가상 카메라들, 이들 가상 카메라의 카메라 트랙( 가상공간속에 가상카메라가 움직이는 XYZ, Rotation등) 에 따른 혹은 외부 입력에 따라 움직이게 하는 가상 카메라의 가상공간속의 움직임에 따라 보여지는 가상 비디오월의 가상 비디오 화면들을 실시간 렌더링기법을 통해 출력시켜 하나의 모니터에 3차원 그래픽 렌더링 출력 화면을 보여 주는 멀티뷰 장치, 3차원 멀티뷰 제공방법 및 기록매체에 관한 것이다. That is, the present invention relates to a method of displaying a plurality of digital or analog input video / audios of various forms on a single monitor in various sizes, and having a plurality of virtual 3D graphic video monitors arranged in a virtual 3D graphic space. A number of virtual cameras arranged in a space such as a video wall, a virtual camera that moves according to the camera tracks of these virtual cameras (XYZ, Rotation, etc., which moves the virtual camera in the virtual space) or according to an external input. Multi-view device, 3-D multi-view providing method and recording medium that outputs virtual video screens of virtual video walls displayed by movement in virtual space through real-time rendering technique and shows 3D graphic rendering output screen on one monitor. It is about.
일반적으로 디스플레이 장치의 크기는 한정되어 있으므로, 한정된 크기의 디스플레이 장치를 이용하여 다양한 화면을 구현하는 기술이 발달되어 왔다. 대표적인 기술로 멀티비전(multivision)과 멀티뷰(multiview)를 들 수 있다. In general, since the size of the display device is limited, techniques for implementing various screens using a limited size display device have been developed. Representative technologies include multivision and multiview.
도 14는 여러대의 TV에 하나의 비디오 화면을 보여 주는 멀티 비전의 예를 보여 주고 있다. 멀티 비전은 여러 개의 디스플레이를 이용하여 하나의 영상을 만들어 내거나 각기 다른 영상을 표시하는 장치를 의미한다. 멀티비전은 대형 디스플레이 장치를 작은 모니터들을 다수로 조합하여 대형화면을 구현하기 위해 개발된 기술이다. 즉 4대 혹은 16대의 TV모니터들을 이용하여 대형 모니터가 되어 보이도록 하나의 비디오 입력을 4대 혹은 16대의 화면에 크게 보여 주는 기술이다.Fig. 14 shows an example of multi vision showing one video screen on several TVs. Multi vision refers to a device that generates a single image or displays different images using multiple displays. Multivision is a technology developed to realize a large screen by combining a large display device with a plurality of small monitors. In other words, it uses 4 or 16 TV monitors to show one video input on 4 or 16 screens in a large monitor.
반면, 멀티뷰는 하나의 디스플레이를 이용하여 여러 비디오 입력 영상을 하 나의 화면에 나누어 표시하도록 하는 기술을 의미한다. 멀티뷰 장치는 다수의 비디오 입력들을 받아들여 이를 하나의 대형 디스플레이 장치에 개발된 현재 하나의 디스플레이 장치를 이용하여 복수개의 입력된 영상을 표시하기 위해 개발된 기술이다. Multi-view, on the other hand, refers to a technology that displays multiple video input images on one screen by using one display. The multi-view device is a technology developed to receive a plurality of video inputs and display a plurality of input images using a current display device developed in one large display device.
즉 멀티뷰는 하나의 대형 디스플레이 장치의 화면을 여러 개로 분할하여, 분할된 각각의 화면 영역에 복수개의 입력된 영상을 표시하는 형태로 구현된다. 그동안의 멀티뷰는 2차원적으로 화면을 분할하여 표시를 하도록 만들어져 있다. 종래의 멀티뷰에 대한 화면의 예는 도 15에서 확인할 수 있다. In other words, the multi-view is implemented by dividing the screen of one large display device into several, and displaying a plurality of input images in each divided screen area. In the past, the multi-view is made to divide and display the screen in two dimensions. An example of a screen for a conventional multi-view can be seen in FIG. 15.
이러한 비디오 월은 방송국 모니터링 월이나 CCTV 보안 모니터 월을 위해 사용이 되어지고 있으며 더 적은 공간에 더 많은 비디오 화면을 또는 더욱 효율적으로 전시를 시키기 멀티뷰들이 사용되어 지고 있다.These video walls are used for station monitoring walls or CCTV security monitor walls, and multiviews are being used to display more video screens or display more efficiently in less space.
도 16은 입력되는 복수의 비디오들이 멀티뷰에 표시되는 과정을 간략하게 도시한 도면이다. 그리고, 도 17은 방송국과 CCTV 환경의 비디오월에 멀티뷰를 통해 여러 비디오를 보여 주는 비디오 월을 보여 주고 있다. 즉, 도 18, 19은 전형적인 보안 관제 모니터링을 위해 원격 카메라들을 모니터링 룸을 통해 보여 주는 솔루션의 예를 보여 주고 있다. 원격지의 카메라들이 Fiber Optic등의 케이블로 모니터링 룸으로 들어 오고 이렇게 보여진 비디오들을 매트릭스 스위처를 통해 정해진 모니터들이 장착된 비디오 월에 보여 지게 된다. FIG. 16 is a diagram schematically illustrating a process of displaying a plurality of input videos in a multi-view. In addition, FIG. 17 shows a video wall showing various videos through a multiview on a video wall of a broadcasting station and a CCTV environment. 18 and 19 show examples of solutions showing remote cameras through a monitoring room for typical security control monitoring. Remote cameras enter the monitoring room with a cable such as Fiber Optic, and the videos shown are shown on a video wall equipped with a set of monitors via a matrix switcher.
하지만, 멀티뷰가 2차원적으로 화면을 분할하여 표시하는 경우, 표시할 수 있는 화면의 개수가 한정적이며, 사용자의 화면 조작이 제한적이게 된다. 멀티뷰는 주로 좁은 공간에 많은 모니터를 표시하기 위해 사용된다. 따라서, 좁은 공간에 더욱 많은 수의 화면을 표시할 수 있고 사용자의 조작이 편리한 멀티뷰 장치를 제공하기 위한 방안의 모색이 요청된다. However, when the multi-view divides and displays the screen in two dimensions, the number of screens that can be displayed is limited, and the screen manipulation of the user is limited. Multiview is mainly used to display many monitors in a small space. Therefore, there is a demand for a method for providing a multi-view device that can display a larger number of screens in a narrow space and is convenient for a user's operation.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, 좁은 공간에 더욱 많은 수의 화면을 표시할 수 있고 사용자의 조작이 편리한 멀티뷰 장치를 제공하기 위한 방안으로써, 복수개의 입력영상들을 3차원 멀티뷰 그래픽 내의 지정된 위치에 각각 맵핑하여 랜더링하는 3차원 멀티뷰 장치, 3차원 멀티뷰 제공방법 및 기록매체를 제공함에 있다.The present invention has been made to solve the above problems, and an object of the present invention is to provide a multi-view device that can display a greater number of screens in a narrow space and the user's operation is convenient, a plurality of The present invention provides a three-dimensional multi-view device, a three-dimensional multi-view providing method, and a recording medium for mapping and inputting two input images to a designated position in a three-dimensional multi-view graphic.
구체적으로, 본 발명의 목적은, 좁은 공간에 더욱 많은 수의 화면을 표시할 수 있고 사용자의 조작이 편리한 멀티뷰 장치를 제공하기 위한 방안으로써, 복수개의 입력영상들을 가상의 3D 그래픽 화면들에 배치하고 이들 가상 모니터들을 같은 가상 공간속에 배치한 다수의 가상 모니터를 통해 보여 지는 모습을 실시간 렌더링 기술을 이용하여 출력시켜주는 방식의 3차원 렌더링 기술을 이용한 멀티뷰 화면을 제공하는 것에 있다. Specifically, an object of the present invention is to provide a multi-view device that can display a larger number of screens in a narrow space and is convenient for the user's operation, and arranges a plurality of input images on virtual 3D graphics screens. In addition, the present invention provides a multi-view screen using a three-dimensional rendering technology in which the virtual monitors displayed in the same virtual space are displayed using a real-time rendering technology.
이 때, 3D 가상 비디오 모니터가 다수 장착된 비디오 월 ( 예를 들어 그래픽으로 만들어 진 3D 공간속의 벽에 다수의 가상 그래픽 모니터가 배치되게 한 ) 의 각각의 가상 모니터들에 다양한 형태의 비디오들을 ( SD, HD, ASI, MPEG등) 들을 실시간으로 3D 공간속에 맵핑시키고 이러한 가상모니터에 실시간으로 매핑되는 비 디오 화면들을 가상 3D 그래픽 내의 지정된 다수의 고정된 혹은 트랙을 따라 움직이게 하는 ( 이동과 회전을 하는 ) 가상 카메라를 통해 보여지는 가상의 화면을 실시간으로 렌더링하고 이들의 가상 카메라를 스위칭하거나 외부 조이스틱 등으로 조정하여 가상 비디오 월 혹은 가상모니터에 접근시키면 그 화면이 커지게 보이게 하고 회전시키면 다른 가상 모니터에 실시간 맵핑되는 입력 비디오 화면들을 스크롤링 하듯 보여 조을 하게 하는 3차원 멀티뷰 장치, 3차원 멀티뷰 제공방법 및 기록매체를 제공함에 있다.At this time, various types of videos (SD) can be added to each virtual monitor of a video wall equipped with a plurality of 3D virtual video monitors (for example, a plurality of virtual graphic monitors are arranged on a wall in a graphic 3D space). , HD, ASI, MPEG, etc.) in real time to 3D space and to move video scenes that are mapped to these virtual monitors in real time along a number of fixed or tracks within a virtual 3D graphic (moving and rotating). Renders the virtual screen shown through the virtual camera in real time and switches the virtual camera or adjusts it with an external joystick to access the virtual video wall or virtual monitor so that the screen becomes larger and rotates to display it on another virtual monitor. Scroll through the input video screens as they are mapped It is a three-dimensional multi-view device, the three-dimensional multi-view service method and a recording medium to provide.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 아날로그 비디오, 디지털 비디오, 및 네트웍 압축 비디오 스트림 중 적어도 하나의 형태로 복수개의 영상들을 입력받는 복수개의 영상 입력부; 멀티뷰 객체가 포함된 3차원 멀티뷰 그래픽 데이터가 저장된 저장부; 상기 복수개의 입력 영상들을 상기 3차원 멀티뷰 그래픽 내의 지정된 위치에 각각 맵핑(mapping)하고, 상기 복수개의 입력 영상들이 맵핑된 3차원 멀티뷰 그래픽을 랜더링하는 3차원 그래픽 처리부; 및 상기 랜더링된 영상을 출력하는 영상 출력부;를 포함한다. According to an embodiment of the present invention for achieving the above object, a plurality of image input unit for receiving a plurality of images in the form of at least one of analog video, digital video, and network compressed video stream; A storage unit storing 3D multiview graphic data including a multiview object; A three-dimensional graphics processor which maps the plurality of input images to a designated position in the three-dimensional multi-view graphic, and renders the three-dimensional multi-view graphic to which the plurality of input images are mapped; And an image output unit configured to output the rendered image.
그리고, 상기 멀티뷰 객체는 복수개의 모니터 형상을 포함하고, 상기 3차원 그래픽 처리부는, 상기 복수개의 입력 영상들이 상기 3차원 멀티뷰 그래픽 내의 상기 멀티뷰 객체에 각각 표시되도록, 상기 복수개의 입력 영상들을 상기 멀티뷰 객체의 복수개의 모니터 형상의 화면 영역에 각각 택스쳐 맵핑(texture mapping)할 수도 있다. The multi-view object may include a plurality of monitor shapes, and the three-dimensional graphic processing unit may generate the plurality of input images such that the plurality of input images are displayed on the multi-view object in the three-dimensional multi-view graphic, respectively. Texture mapping may be performed on screen regions of a plurality of monitor shapes of the multi-view object, respectively.
또한, 상기 3차원 그래픽 처리부는, 상기 3차원 멀티뷰 그래픽의 공간 내의 소정 위치에 배치되어 상기 3차원 멀티뷰 그래픽을 가상 촬영하는 복수개의 가상 카메라를 설정하고, 상기 복수개의 가상 카메라 중 하나의 가상 카메라에 의해 촬영될 영상이 출력되도록 랜더링 조건을 설정하여 상기 3차원 멀티뷰 그래픽을 랜더링할 수도 있다. The three-dimensional graphics processor may be configured to set a plurality of virtual cameras arranged at predetermined positions in the space of the three-dimensional multi-view graphics to virtually photograph the three-dimensional multi-view graphics. The 3D multi-view graphic may be rendered by setting rendering conditions such that an image to be photographed by the camera is output.
그리고, 사용자의 조작을 입력받는 조작부;를 더 포함하고, 상기 3차원 그래픽 처리부는, 상기 조작부를 통해 입력된 조작정보에 따라, 상기 복수개의 가상 카메라 중 어느 하나를 선택하고, 상기 선택된 가상 카메라의 위치를 변경하여 상기 3차원 멀티뷰 그래픽을 랜더링할 수도 있다. And a manipulation unit configured to receive a user's manipulation, wherein the 3D graphic processing unit selects one of the plurality of virtual cameras according to the manipulation information input through the manipulation unit, and selects one of the selected virtual cameras. The location may be changed to render the 3D multiview graphic.
또한, 사용자의 움직임을 검출하는 센서부;를 더 포함하고, 상기 3차원 그래픽 처리부는, 상기 센서부를 통해 입력된 움직임 정보에 따라, 상기 가상 카메라의 위치를 변경하여 상기 3차원 멀티뷰 그래픽을 랜더링할 수도 있다. The apparatus may further include a sensor unit configured to detect a movement of the user, wherein the 3D graphic processing unit changes the position of the virtual camera according to the motion information input through the sensor unit to render the 3D multi-view graphic. You may.
그리고, 상기 저장부는, 복수개의 3차원 멀티뷰 그래픽 데이터를 저장하고 있고, 상기 3차원 그래픽 처리부는, 상기 복수개의 3차원 멀티뷰 그래픽 중 사용자에 의해 선택된 3차원 멀티뷰 그래픽을 독출하고, 상기 독출된 3차원 멀티뷰 그래픽 내에 상기 복수개의 입력 영상들을 각각 맵핑하며, 상기 복수개의 입력영상들이 맵핑되는 위치는, 사용자에 의해 설정될 수도 있다. The storage unit stores a plurality of three-dimensional multi-view graphic data, and the three-dimensional graphic processing unit reads the three-dimensional multi-view graphic selected by a user among the plurality of three-dimensional multi-view graphics, and reads the read-out. Each of the plurality of input images may be mapped in the 3D multi-view graphic, and a position where the plurality of input images are mapped may be set by a user.
또한, 상기 3차원 그래픽 처리부는, 상기 복수개의 입력 영상들 중 어느 하나의 입력 영상을 선택하거나, 상기 복수개의 입력 영상들 중 적어도 2개의 입력 영상을 믹싱하고, 상기 영상 출력부는, 상기 랜더링된 영상을 출력하는 제1 출력단 자; 및 상기 선택된 입력 영상 또는 믹싱된 영상을 출력하는 제2 출력단자;를 포함할 수도 있다. The 3D graphic processor may select one input image from among the plurality of input images, or mix at least two input images among the plurality of input images, and the image output unit may include the rendered image. A first output terminal for outputting the; And a second output terminal configured to output the selected input image or the mixed image.
그리고, 상기 3차원 멀티뷰 장치는, 사용자가 3차원 그래픽를 생성하기 위해, 3D 비디오 월, 3D 비디오 효과, 및 입력 비디오들을 선택하기 위한 가상 카메라 스위치 버튼을 설계하기 위한 3D 그래픽 제작툴을 제공하는 사용자 프로그래머블 스위처/믹서의 기능을 포함할 수도 있다. The 3D multi-view device is user programmable to provide a 3D graphics production tool for designing a virtual camera switch button for selecting 3D video walls, 3D video effects, and input videos to create 3D graphics. It may also include the functionality of a switcher / mixer.
한편, 본 발명의 일 실시예에 따른, 멀티뷰 제공방법은, 복수개의 영상들을 입력받는 단계; 멀티뷰 객체가 포함된 3차원 멀티뷰 그래픽 데이터를 독출하는 단계; 상기 복수개의 입력 영상들을 상기 3차원 멀티뷰 그래픽 내의 지정된 위치에 각각 맵핑(mapping)하는 단계; 상기 복수개의 입력 영상들이 맵핑된 3차원 멀티뷰 그래픽을 랜더링하는 단계; 및 상기 랜더링된 영상을 출력하는 단계;를 포함한다. On the other hand, multi-view providing method according to an embodiment of the present invention, the step of receiving a plurality of images; Reading 3D multiview graphic data including a multiview object; Mapping the plurality of input images to designated positions in the 3D multi-view graphic, respectively; Rendering a 3D multi-view graphic to which the plurality of input images are mapped; And outputting the rendered image.
그리고, 상기 멀티뷰 객체는 복수개의 모니터 형상을 포함하고, 상기 맵핑 단계는, 상기 복수개의 입력 영상들이 상기 3차원 멀티뷰 그래픽 내의 상기 멀티뷰 객체에 각각 표시되도록, 상기 복수개의 입력 영상들을 상기 멀티뷰 객체의 복수개의 모니터 형상의 화면 영역에 각각 택스쳐 맵핑(texture mapping)하는 것이 바람직하다. The multiview object may include a plurality of monitor shapes, and the mapping may include displaying the plurality of input images such that the plurality of input images are respectively displayed on the multiview object in the 3D multiview graphic. It is preferable to texture map each of the plurality of monitor-shaped screen regions of the view object.
한편, 본 발명의 일 실시예에 따른, 기록매체는, 상기 3차원 멀티뷰 제공방법을 수행하게 하는 컴퓨터 프로그램을 수록하고 있다. On the other hand, the recording medium according to an embodiment of the present invention, a computer program for performing the three-dimensional multi-view providing method.
한편, 본 발명의 일 실시예에 따른, 3차원 멀티뷰 장치는, 복수개의 영상들을 아날로그( HD, SD, VGA 등등..) , 디지털( SDI, MPEG등 ) 혹은 IP 통신으로 입 력받는 복수개의 비디오/오디오 입력부; 가상 공간 속에 다양하게 필요한 배치를 하게한 가상 모니터들과 보여줄 장면을 볼 수 있는 위치에 배치 시킨 가상 카메라들과 각 카메라의 움직임 즉 트랙을 정의하는 3D 멀티뷰 데이터를 포함된 3차원 멀티뷰 3D 그래픽 데이터가 저장된 저장부; 상기 복수개의 입력 영상들을 상기 3차원 멀티뷰 그래픽 내의 지정된 영상 위치에 각각 실시간 비디오 맵핑(mapping)하고, 상기 복수개의 입력 영상들이 맵핑된 3차원 멀티뷰 그래픽을 가상 카메라들의 위치에서 실시간 랜더링하는 3차원 그래픽 처리부; 및 상기 랜더링된 영상을 출력하는 영상 출력부;를 포함한다. On the other hand, the three-dimensional multi-view device according to an embodiment of the present invention, a plurality of images are inputted by analog (HD, SD, VGA, etc.), digital (SDI, MPEG, etc.) or IP communication Video / audio inputs; Three-dimensional multi-view 3D graphics, including virtual monitors that make various necessary arrangements in the virtual space, virtual cameras placed in a position where the scene to be viewed, and 3D multi-view data defining movements or tracks of each camera A storage unit in which data is stored; 3D real-time video mapping of the plurality of input images to a designated image position in the 3D multi-view graphic, and 3D multi-view rendering of the 3D multi-view graphic to which the plurality of input images are mapped at a position of virtual cameras. A graphics processor; And an image output unit configured to output the rendered image.
그리고, 상기 멀티뷰 3d 그래픽 객체는 복수개의 모니터를 다양한 형태로 (3D 화면으로 꼭 실제 형상이 아니어도 되는) 만들어 다양한 조합으로 배치하는 형상을 포함하고 보여줄 장면의 위치와 FOV ( Field of View)를 같고 움직이는 트랙 정보를 갖는 가상 카메라들의 정보를 포함하는 데이터 베이스를 갖게 되며, 상기 3차원 그래픽 처리부는, 상기 복수개의 입력 영상들이 상기 3차원 멀티뷰 그래픽 내의 상기 멀티뷰 객체에 각각 실시간 표시되도록, 상기 복수개의 입력 영상들을 상기 멀티뷰 객체의 복수개의 모니터 형상의 화면 영역에 각각 실시간 비디오 택스쳐 맵핑(texture mapping)하는 것이 바람직하다. In addition, the multi-view 3d graphic object includes a shape in which a plurality of monitors are formed in various forms (not necessarily actual shapes in a 3D screen) and arranged in various combinations, and the position of the scene to be displayed and the field of view (FOV) are shown. And a database including information of virtual cameras having the same and moving track information, wherein the 3D graphics processor is configured to display the plurality of input images in real time on the multiview object in the 3D multiview graphic, respectively. It is preferable to map the plurality of input images to the plurality of monitor-shaped screen regions of the multi-view object in real time video texture mapping.
또한, 상기 3차원 그래픽 처리부는, 상기 3차원 멀티뷰 그래픽의 공간 내의 소정 위치에 배치된 상기 3차원 멀티뷰 그래픽을 가상 촬영하는 가상 카메라의 애니메이션( 좌우 상하, 전후로 움직이거나 3방향으로 회전하거나, FOV를 변화하는 )에 따라 실시간으로 상기 가상 카메라에 의해 촬영될 가상 공간의 가상 비디오 월 의 영상이 실시간으로 매핑된 입력 비디오들과 함께 렌더링 되어 출력되도록 랜더링 조건을 설정하여 상기 3차원 멀티뷰 그래픽을 랜더링하는 것이 바람직하다. The three-dimensional graphics processing unit may include animation of a virtual camera for virtually photographing the three-dimensional multi-view graphic disposed at a predetermined position in the space of the three-dimensional multi-view graphic. Rendering conditions are set such that the image of the virtual video wall of the virtual space to be captured by the virtual camera in real time is rendered and output along with the input video mapped in real time according to the FOV). It is desirable to render.
그리고, 실제 사용자가 가상 카메라들을 선택하거나 스위칭하는 외부에서 터치버튼 혹은 조이스틱 으로 움직이는 조작, 혹은 다른 가상의 3D 비디오 월을 선택하거나 입력받는 조작부를 더 포함하고, 상기 3차원 그래픽 처리부는, 상기 조작부를 통해 입력된 조작정보에 따라, 상기 가상 카메라의 위치를 변경하여 상기 3차원 멀티뷰 그래픽을 랜더링하는 것이 바람직하다. 이러한 사용자의 조작을 입력받는 조작부;를 더 포함하고, 상기 3차원 그래픽 처리부는, 상기 조작부를 통해 입력된 조작정보에 따라, 상기 가상 카메라의 위치를 변경하여 상기 3차원 멀티뷰 그래픽을 랜더링하는 것이 바람직하다. The apparatus may further include an operation unit for moving a touch button or a joystick, or selecting or inputting another virtual 3D video wall, from which an actual user selects or switches virtual cameras. According to the operation information input through the, it is preferable to change the position of the virtual camera to render the three-dimensional multi-view graphics. And a manipulation unit configured to receive the manipulation of the user, wherein the three-dimensional graphics processing unit changes the position of the virtual camera according to the manipulation information input through the manipulation unit to render the three-dimensional multi-view graphic. desirable.
또한, 상기 저장부는, 사용자가 필요한 모습의 가상 비디오 월을 다양한 복수개의 3차원 멀티뷰 3D 그래픽 데이터들을 저장하고 있고, 상기 3차원 그래픽 처리부는, 상기 복수개의 3차원 멀티뷰 그래픽 중 사용자에 의해 선택된 3차원 멀티뷰 그래픽을 독출하고, 상기 독출된 3차원 멀티뷰 그래픽 내에 상기 복수개의 입력 영상들을 각각 맵핑하며, 상기 복수개의 입력영상들이 맵핑되는 위치는, 사용자에 의해 설정될 수 있는 것이 바람직하다. The storage unit may store a plurality of
상기 3차원 그래픽 처리부는, 실시간으로 조작부로 부터 설정된 가상 카메라의 움직임( 애니메이션)에 따라 상기 복수개의 실시간 입력 영상들이 실시간 매핑이 된 가상 비디오월을 촬영하여 보여 주는 실시간 렌더링을 통해 가상카메라에 보여지는 복수의 가상 모티터들과 이 모니터에 비디오 택스튜어링 되는 입렵 비디오 들을 함께 렌더링하여 보여 주게 된다. 상기 영상 출력부는, 상기 랜더링된 영상을 출력하는 복수개의 출력 화면이 가능하며 최소 한개 이상의 모니터를 포함한다. 일반 적으로 본 장비는 2개의 출력 화면을 갖고 모니터를 연결하여 사용하게 되며 입력이 많은 비디오 모니터링 환경에서는 제1 출력단자와 제2 출력단자;를 포함하는 것이 바람직하다. The 3D graphic processor is displayed on the virtual camera through real-time rendering that shows the virtual video wall is a real-time mapping of the plurality of real-time input images according to the movement (animation) of the virtual camera set from the control unit in real time Multiple virtual monitors and incoming videos that are video-tagged on this monitor are rendered together. The image output unit may include a plurality of output screens for outputting the rendered image and include at least one monitor. In general, this equipment has two output screens and is used by connecting a monitor. In a video monitoring environment with many inputs, the first output terminal and the second output terminal are preferably included.
상기 3차원 멀티뷰 장치는, 실제 비디오들을 선택하고 스위칭하듯 가상 카메라들을 실시간으로 스위처/믹서의 기능을 포함하는 것이 바람직하다. 이 때 일반 스위처와 믹서에서 하는 단순한 스위칭 믹싱 기능보다 더욱 다양한 프로그램에 따라 다양한 3D 효과를 만들어 주며 3D 화면으로 다양한입력 비디오들을 보여 주는 3D 가상 카메라 스위칭 기능을 갖게 된다. The three-dimensional multi-view device preferably includes the function of a switcher / mixer in real time as virtual cameras are selected and switched. At this time, it has a 3D virtual camera switching function that creates various 3D effects according to various programs and shows various input videos on a 3D screen than the simple switching mixing function of general switchers and mixers.
한편, 본 발명의 일 실시예에 따른, 멀티뷰 제공방법은, 복수개의 영상들을 입력받는 단계; 멀티뷰 객체가 포함된 3차원 멀티뷰 그래픽 데이터를 독출하여 자신이 원하는 방식의 가상 비디오월을 선택 단계; 상기 복수개의 입력 영상들을 상기 3차원 멀티뷰 그래픽 내의 지정된 위치에 각각 맵핑(mapping)하는 단계; 상기 복수개의 입력 영상들이 맵핑된 3차원 멀티뷰 그래픽을 랜더링하는 단계; 및 상기 랜더링된 영상을 출력하는 단계;를 포함한다. On the other hand, multi-view providing method according to an embodiment of the present invention, the step of receiving a plurality of images; Reading virtual 3D multi-view graphic data including a multi-view object and selecting a virtual video wall of a desired manner; Mapping the plurality of input images to designated positions in the 3D multi-view graphic, respectively; Rendering a 3D multi-view graphic to which the plurality of input images are mapped; And outputting the rendered image.
그리고, 상기 멀티뷰 객체는 복수개의 모니터 형상을 포함하고, 상기 맵핑 단계는, 상기 복수개의 입력 영상들이 상기 3차원 멀티뷰 그래픽 내의 상기 멀티뷰 객체에 각각 하나씩 혹은 멀티 가상 모니터에 비디오 화면이 표시되도록, 상기 복수개의 입력 영상들을 상기 멀티뷰 객체의 복수개의 모니터 형상의 화면 영역에 다 양하게 택스쳐 맵핑(texture mapping)하는 것이 바람직하다. 이때 상기 그래픽내의 모니터는 실제 모니터의 형태와 같은 형상을 갖을 필요가 없으며 마음대로 3D 공간속에 자유로운 3D 모양을 갖을 수 있고 이 3D 표면에 실시간 비디오를 텍스쳐링하여 보여 주게 된다. The multi-view object may include a plurality of monitor shapes, and the mapping may include displaying one or more video images on the multi-view monitor, one for each of the multi-view objects in the 3D multi-view graphic. In some embodiments, the plurality of input images may be texture mapped to a plurality of monitor-shaped screen regions of the multi-view object. In this case, the monitor in the graphic does not have to have the same shape as the actual monitor, and can freely have a free 3D shape in 3D space, and the real-time video is displayed on the 3D surface.
한편, 본 발명의 일 실시예에 따른, 기록매체는, 상기 3차원 멀티뷰 제공방법을 수행하게 하는 컴퓨터 프로그램을 수록하고 있다. On the other hand, the recording medium according to an embodiment of the present invention, a computer program for performing the three-dimensional multi-view providing method.
본 발명의 다양한 실시예에 따르면, 복수개의 입력영상들을 3차원 멀티뷰 그래픽 내의 지정된 위치에 각각 맵핑하여 랜더링하는 3차원 멀티뷰 장치, 3차원 멀티뷰 제공방법 및 기록매체를 제공할 수 있게 되어, 사용자는 좁은 공간에 더욱 많은 수의 화면을 표시할 수 있고 조작이 편리한 멀티뷰 장치를 사용할 수 있게 된다. According to various embodiments of the present disclosure, it is possible to provide a three-dimensional multi-view device, a three-dimensional multi-view providing method, and a recording medium for mapping and rendering a plurality of input images to a designated position in a three-dimensional multi-view graphic, respectively. The user can display a larger number of screens in a narrow space and use a multi-view device that is easy to operate.
특히, 가상 모니터들을 수량의 제한 없이 가상 공간속의 비디오 월에 배치 시켜 줄 수 있고 이들을 필요한 가상 카메라를 통해 보여 지도록 하거나 스크롤을 하면서 순차적으로 비디오 월의 비디오 모니터들을 다양한 크기로 애니메이션을 통해 혹은 외부 조이스틱을 통해 조정할 수 있게 된다. 즉, 한 개의 출력 모니터로 과거 16개 이내에 비디오들을 보여 주는 반면, 본원에 따르면 멀티 화면을 스크롤을 할 수 있게 된다. In particular, virtual monitors can be placed in video walls in virtual spaces in any number and can be displayed or scrolled through the required virtual cameras in order to animate the video monitors of the video wall in various sizes or external joysticks. Can be adjusted. That is, one output monitor shows videos within the past 16, while according to the present application it is possible to scroll through multiple screens.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다. Hereinafter, with reference to the drawings will be described the present invention in more detail.
도 1은 본 발명의 일 실시예에 따른, 3차원 멀티뷰 장치의 구성을 도시한 블럭도이다. 도 1에 도시된 바와 같이, 3차원 멀티뷰 장치는 영상 입력부(110), 3차원 그래픽 처리부(200), 저장부(120), 조작부(130), 및 영상 출력부(140)를 포함한다. 1 is a block diagram showing the configuration of a three-dimensional multi-view device according to an embodiment of the present invention. As shown in FIG. 1, the 3D multi-view device includes an
영상 입력부(110)는 제1 영상 입력단자(112), 제2 영상 입력단자(114), 제3 영상 입력단자(116), 제4 영상 입력단자(118)를 포함한다. 본 실시예에서, 영상 입력부(110)는 총 4개의 영상 입력단자를 포함하는 것으로 기재되어 있으나, 영상 입력단자의 개수는 한정되지 않는다. 따라서, 영상 입력부(110)는 복수개의 영상 입력 단자를 포함할 수 있다. 여기에서, 영상 입력부(110)의 입력은 SD, HD, HDMI, VGA, 압축 비디오의 네트웍을 통한 입력, 혹은 디지털 방송의 ASI등 다양한 비디오들의 실시간 입력이 될 수 있게 된다.The
제1 영상 입력단자(112) 내지 제4 영상 입력단자(118)는 각각 독립된 SD, HD, HDMI, VGA 방식의 영상 및 비디오와 네트웍을 통한 압축 영상 및 비디오가 입력된다. 그리고, 입력 영상은 3차원 그래픽 처리부(200)로 인가된다. Each of the first
제1 영상 입력단자(112) 내지 제4 영상 입력단자(118)는 다양한 규격의 영상 입력단자가 될 수 있으며, 예를 들어, 컴포넌트, 컴포지트, S-Video, D-SUB, DVI, HDMI, 네트웍 비디오 스트림 등의 영상 입력단자가 될 수 있다. 또한, 영상 입력부(110)는 디지털 압축 비디오 스트림을 인터넷 등을 통해 수신하는 네트워크 단자, 또는 디지털 방송 등의 방송신호를 수신하는 튜너를 포함할 수도 있다. 이외에도, 영상 입력부(110)는 영상이 입력되는 장치는 어떤 것이라도 포함될 수 있으며, 채널의 수에도 제한이 없음은 물론이다. The first
본 예제의 4개의 입력 즉 제1 영상 입력단자(112) 내지 제4 영상 입력단자(118)를 통해 입력되는 영상은 다양한 종류의 2차원 동영상 또는 정지영상이 될 수 있다. 예를 들어, 복수 개의 카메라 혹은 CCTV 카메라 에서 촬영되는 영상들이 제1 영상 입력단자(112) 내지 제4 영상 입력단자(118)를 통해 입력될 수도 있다.Four inputs of the present example, that is, the image input through the first
또한 본 실시예에서는, 영상 입력부(110)의 영상 입력단자가 4개인 것으로 설명하였으나, 영상 입력단자의 개수에는 제한이 없으며, 영상 입력부(110)는 복수개의 영상입력단자를 포함할 수도 있음은 물론이다. 이렇게 입력된 비디오들은 선택된 3D 비디오 월 데이터의 가상 모니터에 실시간 비디오 텍스쳐링에 사용되게 된다.In addition, in the present exemplary embodiment, the
저장부(120)는 멀티뷰에서 사용할 3D 그래픽의 데이터 베이스를 갖는 비디오월 (Video Wall) 객체가 포함된 3차원 멀티뷰 그래픽 데이터가 저장되어 있다. 여기에서 멀티뷰 객체(즉, 비디오 월 객체)는 복수개의 모니터 형상을 포함하고 있다. 즉, 멀티뷰 객체는 3차원 그래픽 공간 상에 구현된 멀티뷰 장치 형상의 객체가 된다. The
여기에서, 3차원 멀티뷰 그래픽 데이터는 3차원 공간에 복수개의 멀티뷰 장치들이 배치되어 있는 멀티뷰에 대한 3차원 배경 그래픽을 의미한다. 3차원 멀티뷰 그래픽 데이터는 복수개의 멀티뷰 객체가 포함되어 있으며, 각 멀티뷰 객체는 복수개의 모니터 형상들이 포함되어 있다. 즉, 3차원 멀티뷰 그래픽 데이터는 3차원 공간에 복수개의 멀티뷰 장치가 배치되어 있는 가상 공간의 형태를 이룬다. Here, the 3D multiview graphic data refers to a 3D background graphic for a multiview in which a plurality of multiview devices are arranged in a 3D space. The 3D multiview graphic data includes a plurality of multiview objects, and each multiview object includes a plurality of monitor shapes. That is, the 3D multiview graphic data forms a virtual space in which a plurality of multiview devices are arranged in a 3D space.
3차원 멀티뷰 그래픽 데이터는 3차원 그래픽을 설계하는 3D 프로그램인 3D Studio Max나 MAYA 등과 같은 편집 프로그램으로 생성된다. 3D multiview graphic data is generated by editing programs such as 3D Studio Max or MAYA, which are 3D programs for designing 3D graphics.
또한, 저장부(120)는 복수개의 3차원 멀티뷰 그래픽 데이터를 저장할 수도 있다. 따라서, 사용자는 복수개의 3차원 멀티뷰 그래픽 데이터 중에서 원하는 디자인의 3차원 멀티뷰 그래픽 데이터를 선택할 수 있게 된다. In addition, the
그리고, 저장부(120)는 3차원 그래픽 처리부(200)에 3차원 멀티뷰 그래픽 데이터를 제공하게 된다. The
조작부(130)는 사용자의 조작을 입력받는다. 구체적으로, 조작부(130)는 가상 카메라의 위치를 조절하기 위한 사용자의 조작을 입력받는다. 이와 같이 입력된 가상 카메라의 위치의 조작정보는 가상카메라의 트랙정보로 변형되어 가상카메라의 이동에 이용된다. The
조작부(130)는 복수개의 가상카메라 중 원하는 가상카메라를 선택하기 위한 조작을 입력받을 수 있다. 그리고, 조작부(130)는 복수개의 3차원 멀티뷰 그래픽 데이터 중 어느 하나를 선택하기 위한 조작을 입력받을 수도 있다. 그리고, 조작부(130)는 입력된 조작정보를 3차원 그래픽 처리부(200)에 제공한다. 상술한 바와 같이 조작부(130)를 통해 선택된 3차원 멀티뷰 그래픽 데이터는 후술할 제1 출력단자(143)를 통해 출력된다. The
또한, 조작부(130)는 제1 영상 입력단자(112) 내지 제4 영상 입력단자(118)에서 입력되는 영상 중 어느 하나를 선택하기 위한 조작을 입력받을 수 있다. 그리고, 조작부(130)는 제1 영상 입력단자(112) 내지 제4 영상 입력단자(118)에서 입력 되는 영상 중 적어도 2개의 영상을 믹싱한 영상을 선택하기 위한 조작을 입력받을 수도 있다. 상술한 바와 같이 조작부(130)를 통해 선택된 하나의 입력영상 또는 믹싱한 영상은 후술할 제2 출력단자(146)를 통해 출력된다. In addition, the
조작부(130)는 다양한 형태의 조작장치에 의해 구현될 수 있으며, 예를 들어, 마우스, 키보드, 방향키, 조이스틱 등으로 구현될 수 있다. The
3차원 그래픽 처리부(200)는 복수개의 입력 영상들을 3차원 멀티뷰 그래픽 내의 지정된 위치에 각각 맵핑(mapping)하고, 복수개의 입력 영상들이 맵핑된 3차원 멀티뷰 그래픽을 랜더링하여 출력한다. 3차원 그래픽 처리부(200)에 대해서는 도 2를 참고하여 추후 상세히 설명한다. The 3D
또한, 3차원 그래픽 처리부(200)는 복수개의 입력 영상들 중 어느 하나의 입력 영상을 제2 출력단자(146)로 출력하거나, 복수개의 입력 영상들 중 적어도 2개의 영상을 믹싱한 영상을 제2 출력단자(146)로 출력한다. In addition, the 3D
영상 출력부(140)는 3차원 그래픽 처리부(200)에서 랜더링된 최종 영상을 외부 디스플레이 장치 또는 내부 디스플레이 장치에 출력한다. 영상 출력부(140)는 다양한 규격의 영상 출력단자가 사용될 수 있으며, 예를 들어, 컴포넌트, 컴포지트, S-Video, D-SUB, DVI, HDMI 등의 출력단자가 사용될 수 있다. 또한, 영상 출력부(140)는 하나의 출력단자를 포함할 수도 있고, 복수개의 출력단자를 포함할 수도 있음은 물론이다. The
예를 들어, 영상 출력부(140)는 제1 출력단자(143) 및 제2 출력단자(146)를 포함한다. 제1 출력단자(143)는 3차원 멀티뷰 공간이 랜더링된 최종 영상을 출력한 다. 그리고, 제2 출력단자(146)는 제1 영상 입력단자(112) 내지 제4 영상 입력단자(118)에서 입력되는 영상 중 어느 하나를 출력한다. 또한, 제2 출력단자(146)는 제1 영상 입력단자(112) 내지 제4 영상 입력단자(118)에서 입력되는 영상 중 적어도 2개의 영상을 믹싱한 영상이 출력될 수도 있다. For example, the
즉, 제1 출력단자(143)는 3차원 멀티뷰 영상을 출력하고, 제2 출력단자(146)는 스위처/믹서(switcher/mixer) 영상을 출력하게 된다. 여기에서, 스위처/믹서는 복수개의 입력 영상들 중에서 어느 하나의 입력영상을 선택하여 출력하거나, 또는 복수개의 입력영상들 중에서 적어도 2개의 입력영상을 믹싱하여 출력하는 장치를 의미한다. 본 실시예의 3차원 멀티뷰 장치는 스위처/믹서의 기능을 포함할 수도 있다. That is, the
이와 같이, 영상 출력부(140)는 제1 출력단자(143) 및 제2 출력단자(146)를 포함함으로써, 3차원 멀티뷰 기능과 스위처/믹서의 기능을 함께 제공할 수 있게 된다. As such, the
센서부(150)는 사용자의 움직임을 검출하고, 검출된 움직임 정보를 3차원 그래픽 처리부(200)로 전송한다. 그리고, 3차원 그래픽 처리부(200)는 센서부(150)에서 전송된 움직임 정보를 이용하여 가상카메라를 이동시킨다. The sensor unit 150 detects a user's movement and transmits the detected movement information to the 3D
예를 들어, 사용자가 머리에 센서부(150)를 장착한 경우를 고려해 볼 수 있다. 사용자가 왼쪽으로 고개를 돌리면, 센서부(150)는 왼쪽으로 움직였음을 나타내는 움직임 정보를 3차원 그래픽 처리부(200)로 전송한다. 그리고, 3차원 그래픽 처리부(200)는 가상 멀티뷰 공간에서 가상 카메라를 왼쪽으로 돌렸을 경우의 화면을 랜더링하여 출력하게 된다. 또한, 센서부(150)는 사용자의 머리 이외에도 손 등의 사용자의 신체부위에 장착될 수 있음은 물론이다. For example, consider a case in which the user mounts the sensor unit 150 to the head. When the user turns his head to the left side, the sensor unit 150 transmits motion information indicating that the user moved to the left side to the 3D
센서부(150)는 움직임을 검출하는 자이로 센서, 지자계 센서 등의 모션 센서가 사용될 수 있다. The sensor unit 150 may use a motion sensor such as a gyro sensor or a geomagnetic sensor that detects movement.
이와 같이, 센서부(150)를 이용하여 가상카메라를 조작할 경우, 사용자는 보다 쉽고 직관적으로 가상카메라를 제어할 수 있게 된다. As such, when the virtual camera is operated using the sensor unit 150, the user may control the virtual camera more easily and intuitively.
이하에서는, 3차원 그래픽 처리부(200)의 기능에 대해 도 2를 참고하여 더욱 상세히 설명한다. 도 2는 본 발명의 일 실시예에 따른, 3차원 멀티뷰 장치의 3차원 그래픽 처리부의 기능을 설명하기 위한 기능 블럭도이다. Hereinafter, the function of the 3D
도 2에 도시된 바와 같이, 3차원 그래픽 처리부(200)는 텍스쳐 맵핑부(210), 가상 카메라 구현부(220) 및 랜더링부(230)를 포함한다. As shown in FIG. 2, the 3D
일단, 텍스쳐 맵핑부(210)는 영상 입력부(110)에서 복수개의 영상을 입력받고, 저장부(120)에서 3차원 멀티뷰 그래픽 데이터를 독출한다. 여기에서, 저장부(120)에 저장된 3차원 멀티뷰 그래픽 데이터가 복수개 있는 경우, 사용자에 의해 선택된 3차원 멀티뷰 그래픽 데이터를 독출하게 된다. First, the
그리고, 텍스쳐 맵핑부(210)는 복수개의 입력 영상들이 3차원 멀티뷰 그래픽 내의 멀티뷰 객체에 각각 표시되도록, 복수개의 입력 영상들을 멀티뷰 객체의 복수개의 모니터 형상의 화면 영역에 각각 텍스쳐 맵핑한다. The
텍스처 맵핑(texture mapping)은 컴퓨터 그래픽스 분야에서 가상의 삼차원 물체의 표면에 세부적인 질감의 묘사를 하거나 색을 칠하는 기법이다. 일반적으로 는 2차원의 그림을 삼차원 물체의 표면에 여러 가지 방법을 통하여 맵핑하여, 3차원 컴퓨터 그래픽 화면을 생성할 때 마치 실제의 물체처럼 느껴지게 끔 그 세부 묘사를 하는데 사용된다. Texture mapping is a technique in the field of computer graphics that draws or paints detailed textures on the surfaces of virtual three-dimensional objects. Generally, two-dimensional pictures are mapped onto the surface of three-dimensional objects through various methods, and they are used to describe the details to make them feel like real objects when creating three-dimensional computer graphics.
텍스쳐 맵핑부(210)는 텍스쳐 맵핑 기술을 이용하여 3차원 멀티뷰 그래픽 내에 존재하는 멀티뷰 객체에 입력된 2차원 영상을 텍스쳐 맵핑함으로써, 마치 3차원 공간 내에 배치된 멀티뷰 장치의 화면에 복수개의 입력된 영상이 디스플레이되고 있는 것과 같은 가상의 3차원 멀티뷰 공간을 완성하게 된다. The
가상 카메라 구현부(220)는 3차원 멀티뷰 그래픽 공간 내의 소정 위치에 배치되어 3차원 멀티뷰 그래픽을 가상 촬영하는 가상 카메라를 구현한다. 즉, 가상 카메라 구현부(220)에 의해 구현된 가상 카메라는 가상의 3차원 멀티뷰 공간 내의 특정 위치에서 3차원 멀티뷰 공간을 촬영하고, 촬영된 영상이 출력되게 한다. The
구체적으로, 가상 카메라 구현부(220)는 가상 카메라에 의해 촬영될 영상이 출력되도록 하기 위해, 랜더링부(230)가 3차원 멀티뷰 그래픽을 랜더링 하기 위한 랜더링 조건을 설정한다. 여기에서, 랜더링 조건은 랜더링 위치, 랜더링 각도, 랜더링 대상 객체 등을 포함한다. In detail, the virtual
이와 같이, 가상 카메라 구현부(220)는 3차원 멀티뷰 그래픽이 가상 카메라의 위치에 대응되는 랜더링 조건으로 랜더링되도록하여, 가상 카메라를 구현할 수 있게 된다. As such, the
또한, 가상 카메라 구현부(220)는 조작부(130)로부터 사용자의 조작정보를 입력받는다. 그리고, 가상 카메라 구현부(220)는 입력된 조작정보에 따라 가상 카 메라의 트랙정보를 생성하여, 가상 카메라의 위치를 변경한다. 예를 들어, 사용자는 조작부(130)(예를 들어, 마우스, 키보드, 조이스틱 등)를 조작하여, 3차원 멀티뷰 공간 내에서 가상 카메라의 위치를 상,하,앞,뒤,좌,우의 6개 방향으로 이동시킬 수 있으며, 가상 카메라를 상,하,좌,우 방향으로 회전시킬 수도 있다. In addition, the virtual
이와 같이, 조작부(130)에 의해 가상 카메라의 위치가 변경되면, 가상 카메라 구현부(220)는 변경된 가상 카메라의 위치에 대응되는 랜더링 조건으로 3차원 멀티뷰 그래픽을 랜더링하도록 랜더링부(230)를 제어한다. As such, when the position of the virtual camera is changed by the
랜더링부(230)는 가상 카메라 구현부(220)에서 제공된 랜더링 조건에 따라 랜더링을 수행한다. 여기에서, 랜더링(Rendering)은 3차원 그래픽 데이터로부터 2차원 영상을 만들어내는 과정을 말한다. 즉, 랜더링은 3차원 영상을 특정 시점에서 2차원으로 사영시킴으로써, 최종적으로 화면에 출력될 영상을 생성하는 과정을 의미한다. The
그리고, 랜더링부(230)는 3차원 멀티뷰 그래픽을 특정 조건에서 랜더링하여 최종적인 출력 영상을 영상 출력부(140)로 출력한다. 랜더링부(230)는 소프트웨어로 구현될 수도 있으나, 실시간 랜더링을 위해 하드웨어 랜더링 장치로 구현될 수도 있다. The
이와 같이, 3차원 그래픽 처리부(200)는 복수개의 입력 영상이 텍스쳐 맵핑된 3차원 멀티뷰 그래픽 데이터를 랜더링하여 출력하게 된다. As such, the 3D
상술한 내용과 같이, 3차원 멀티뷰 장치는 가상의 3차원 멀티뷰 공간상에 멀티뷰 장치를 구현할 수 있게 되어, 사용자는 보다 쉽게 멀티뷰 장치를 이용하고 조 작할 수 있게 된다. 또한, 3차원 공간상에 복수개의 멀티뷰 객체를 포함시킬 수 있기 때문에, 3차원 멀티뷰 장치는 좁은 공간에 더욱 많은 멀티뷰 화면을 표시할 수 있게 된다. As described above, the three-dimensional multi-view device can implement a multi-view device in a virtual three-dimensional multi-view space, a user can more easily use and operate the multi-view device. In addition, since a plurality of multi-view objects may be included in the three-dimensional space, the three-dimensional multi-view device may display more multi-view screens in a narrow space.
또한, 3차원 멀티뷰 장치는 하나의 장치로 많은 멀티뷰 화면을 제공할 수 있게 되므로, 사용자는 1개의 장치를 이용하여 멀티뷰 화면을 조작할 수 있게 된다. 그리고, 가상 카메라를 이용하여 멀티뷰 화면을 조작할 수 있으므로, 사용자는 한 위치에서 자리를 이동하지 않고도 멀티뷰 화면들 중 특정 화면을 선택하거나 확대, 축소를 할 수 있게 되어, 멀티뷰의 많은 화면 중에 원하는 화면을 더욱 쉽게 선택할 수 있게 된다. In addition, since the 3D multi-view device can provide many multi-view screens with one device, the user can operate the multi-view screen using one device. In addition, since the multi-view screen can be manipulated using a virtual camera, the user can select, enlarge or reduce a specific screen among the multi-view screens without moving the seat from one position, and thus, many screens of the multi-view screen. It will be easier to select the screen you want.
이하에서는, 도 3을 참고하여 3차원 멀티뷰 제공방법에 대해 설명한다. 도 3은 본 발명의 일 실시예에 따른, 3차원 멀티뷰 제공장치에 관하여 설명하기 위해 제공되는 흐름도이다. Hereinafter, a 3D multi view providing method will be described with reference to FIG. 3. 3 is a flowchart provided to explain an apparatus for providing a 3D multiview according to an embodiment of the present invention.
일단, 3차원 멀티뷰 장치는 영상 입력부(110)를 통해 복수개의 영상들을 입력받는다(S310).First, the 3D multi-view device receives a plurality of images through the image input unit 110 (S310).
그리고, 3차원 멀티뷰 장치는 저장부(120)에 저장된 복수개의 3차원 멀티뷰 그래픽 데이터 중 어느 하나를 선택하고(S320), 선택된 3차원 멀티뷰 그래픽 데이터를 저장부(120)로부터 독출한다(S330). 여기에서, 복수개의 3차원 멀티뷰 그래픽 데이터 중 어느 하나를 선택하는 단계(S320)는 사용자가 조작부(130)(예를 들어, 마우스, 키보드, 방향키, 조이스틱 등)를 조작함으로써 구현된다. The 3D multiview apparatus selects one of a plurality of 3D multiview graphic data stored in the storage 120 (S320), and reads the selected 3D multiview graphic data from the storage 120 ( S330). Here, the step (S320) of selecting any one of the plurality of 3D multi-view graphic data is implemented by the user operating the manipulation unit 130 (for example, a mouse, a keyboard, a direction key, a joystick, etc.).
그 후에, 3차원 멀티뷰 장치는 복수개의 입력 영상들을 3차원 멀티뷰 그래픽 내의 모니터 형상의 화면 영역에 각각 텍스쳐 맵핑한다(S340). Thereafter, the 3D multi-view device texture-maps the plurality of input images to the monitor-shaped screen area in the 3D multi-view graphic (S340).
이와 같은 과정을 통해, 복수개의 입력 영상이 표시되는 3차원 멀티뷰 그래픽 데이터가 완성된다. Through this process, 3D multi-view graphic data displaying a plurality of input images is completed.
그 다음으로, 3차원 멀티뷰 장치는 3차원 멀티뷰 그래픽의 공간 내의 소정 위치에 배치되어 3차원 멀티뷰 그래픽을 가상 촬영하는 가상 카메라를 설정한다(S350). Next, the 3D multi-view device is set at a predetermined position in the space of the 3D multi-view graphics to set a virtual camera for virtually photographing the 3D multi-view graphics (S350).
그리고, 3차원 멀티뷰 장치는 조작부(130)가 조작되었는지 여부를 확인한다(S360). 만약, 조작부(130)가 조작되면(S360-Y), 3차원 멀티뷰 장치는 조작부를 통해 입력된 조작정보에 따라 가상 카메라의 위치를 변경한다(S370). In operation S360, the 3D multi-view apparatus checks whether the
그리고, 3차원 멀티뷰 장치는 3차원 멀티뷰 그래픽 공간 내의 설정된 위치에서 가상 카메라에 의해 촬영될 영상이 출력되도록 랜더링 조건을 설정한다(S380). 그리고, 3차원 멀티뷰 장치는 설정된 랜더링 조건하에 3차원 멀티뷰 그래픽을 랜더링한다(S390). 그 후에, 3차원 멀티뷰 장치는 외부 디스플레이 장치나 내부 디스플레이 장치에 랜더링된 영상을 출력하게 된다(S395).In operation S380, the 3D multiview apparatus sets rendering conditions such that an image to be photographed by the virtual camera is output at a set position in the 3D multiview graphic space. In operation S390, the 3D multiview apparatus renders the 3D multiview graphic under the set rendering condition. Thereafter, the 3D multi-view device outputs the rendered image to the external display device or the internal display device (S395).
이와 같은 과정을 통해, 3차원 멀티뷰 장치는 3차원 멀티뷰 서비스를 제공할 수 있게 된다. Through this process, the 3D multi-view device can provide a 3D multi-view service.
이하에서는 도 4를 참고하여 3차원 멀티뷰 그래픽 공간의 구성에 대해 상세히 설명한다. 도 4는 본 발명의 일 실시예에 따른, 3차원 멀티뷰 그래픽에 입력영상들을 텍스쳐 맵핑하는 과정을 도시한 도면이다. Hereinafter, the configuration of the 3D multi-view graphic space will be described in detail with reference to FIG. 4. 4 is a diagram illustrating a process of texture mapping input images to a 3D multi-view graphic according to an embodiment of the present invention.
도 4에 도시된 바와 같이, 3차원 멀티뷰 그래픽(420)에 의해 구현되는 가상 의 3차원 멀티뷰 공간은 제1 멀티뷰 객체(430)와 제2 멀티뷰 객체(440)를 포함한다. 각 멀티뷰 객체는 하나의 멀티뷰 장치 형상으로 형성된 것을 확인할 수 있다. As shown in FIG. 4, the virtual three-dimensional multiview space implemented by the three-dimensional multiview graphic 420 includes a first
제1 멀티뷰 객체(430)는 제1 모니터 영역(432), 제2 모니터 영역(434), 제3 모니터 영역(436) 및 제4 모니터 영역(438)의 총 4개의 모니터 영역를 포함하고 있다. 또한, 도 4에 도시된 바와 같이, 3차원 멀티뷰 장치는 제1 입력영상(412), 제2 입력영상(414), 제3 입력영상(416) 및 제4 입력영상(418)이 입력되는 것을 확인할 수 있다. The first
그리고, 제1 입력영상(412)은 제1 멀티뷰 객체(420)의 제1 모니터 영역(432)에 텍스쳐 맵핑되고, 제2 입력영상(414)은 제1 멀티뷰 객체(420)의 제2 모니터 영역(434)에 텍스쳐 맵핑되며, 제3 입력영상(416)은 제1 멀티뷰 객체(420)의 제3 모니터 영역(436)에 텍스쳐 맵핑되고, 제4 입력영상(418)은 제1 멀티뷰 객체(420)의 제4 모니터 영역(436)에 텍스쳐 맵핑된다. The
이와 같은 과정을 통해, 외부에서 입력되는 복수의 영상이 멀티뷰 객체에 표시된 가상의 멀티뷰 공간인, 3차원 멀티뷰 그래픽(또는, 3차원 멀티뷰 그래픽 모델)이 완성된다. Through this process, a three-dimensional multiview graphic (or a three-dimensional multiview graphic model), which is a virtual multiview space in which a plurality of images input from the outside is displayed on the multiview object, is completed.
이와 같이, 완성된 3차원 멀티뷰 그래픽은 가상 카메라에 의해 촬영되는 영상이 출력되도록 랜더링된다. 이 과정에 대해, 이하에서 도 5 및 도 6을 참고하여 설명한다. In this way, the completed three-dimensional multi-view graphics are rendered so that the image taken by the virtual camera is output. This process will be described below with reference to FIGS. 5 and 6.
도 5는 본 발명의 일 실시예에 따른, 3차원 멀티뷰 그래픽을 가상 카메라가 촬영하여 출력하는 동작을 도시한 도면이다. 5 is a diagram illustrating an operation of photographing and outputting a 3D multi-view graphic by a virtual camera according to an exemplary embodiment of the present invention.
도 5에 도시된 바와 같이, 3차원 멀티뷰 장치는 3차원 멀티뷰 그래픽(420) 공간에 가상 카메라(500)를 배치한다. 그리고, 3차원 멀티뷰 장치는 가상 카메라에 의해 촬영되는 영상이 출력되도록 랜더링 조건을 설정하게 된다. 즉, 3차원 멀치뷰 장치는 가상 카메라의 시점에서 3차원 멀티뷰 그래픽(420)을 랜더링하게 된다. As shown in FIG. 5, the 3D multiview device arranges a
그리고, 가상 카메라의 시점에서 랜더링을 한 결과로 최종 출력영상(510)이 출력된다. 도 5에서는 3차원 멀티뷰 그래픽(420)의 공간 전체를 카메라가 촬영하도록 설정되어 있으므로, 출력 영상(510)은 3차원 멀티뷰 그래픽(420) 전체가 포함된 것을 확인할 수 있다. The
한편, 가상카메라(500)의 위치는 조작부(130)(예를 들어, 마우스, 키보드, 방향키, 조이스틱 등)를 이용하여 변경할 수 있다. 이하에서, 도 6을 참고하여, 가상 카메라(500)의 위치를 변경시킨 후에 출력되는 영상의 변화를 설명한다. Meanwhile, the position of the
도 6은 본 발명의 일 실시예에 따른, 가상 카메라(500)의 위치가 제1 멀티뷰 객체(430)만을 촬영하도록 이동된 상태를 도시한 도면이다. 6 is a diagram illustrating a state in which the position of the
도 6에 도시된 바와 같이, 가상카메라(500)는 도 5의 위치에서 앞으로 이동된 후에 반시계 방향으로 회전된 것을 확인할 수 있다. 이와 같이, 가상카메라(500)가 이동됨으로써, 가상 카메라(500)에 의해 촬영되는 영상은 제1 멀티뷰 객체(430)만이 포함되는 것을 확인할 수 있다. 따라서, 출력영상(610)은 제1 멀티뷰 객체(430)만이 표시되어 있다. As shown in FIG. 6, the
가상 카메라(500)가 도 5의 위치에서 도 6의 위치로 이동되는 과정에서도, 실시간으로 가상 카메라(500)의 위치변화에 따라 출력영상은 계속 변화된다. 따라 서, 사용자는 가상 카메라(500)를 이동시켜 원하는 3차원 멀티뷰 그래픽 공간에서 원하는 부분만을 화면을 통해 확인할 수 있게 된다. Even when the
본 실시예에서는, 가상 카메라(500)의 위치를 이동시키는 것만으로 설명하였으나, 가상 카메라(500)는 위치 이동, 줌-인, 줌-아웃 등 실제 카메라가 가지는 모든 기능을 동일하게 가질 수 있음은 물론이다. In the present exemplary embodiment, only the position of the
이와 같이, 3차원 멀티뷰 장치는 가상의 3차원 공간에 복수개의 멀티뷰 장치를 배치시킨 가상의 3차원 멀티뷰 그래픽을 구현하고, 가상카메라를 이용하여 원하는 부분을 촬영하여 화면에 표시할 수 있게 됨으로써, 사용자는 보다 편리하게 멀티뷰 서비스를 이용할 수 있게 된다. As such, the 3D multiview device implements a virtual 3D multiview graphic in which a plurality of multiview devices are arranged in a virtual 3D space, and captures a desired portion using a virtual camera to display on a screen. As a result, the user can use the multi-view service more conveniently.
도 7은 본 발명의 일 실시예에 따른, 제2 출력단자가 복수의 입력영상 중 어느 하나를 출력하는 경우에, 제1 출력단자(143) 및 제2 출력단자(146)에서 출력되는 영상을 도시한 도면이다. 7 illustrates an image output from the
도 7에 도시된 바와 같이, 제1 출력단자(143)는 3차원 멀티뷰 그래픽에 대한 제1 출력영상(510)을 출력한다. 그리고, 제2 출력단자(146)는 복수의 입력 영상들 중 어느 하나의 선택된 입력 영상을 제2 출력영상(700)으로 출력하게 된다. 도 7의 경우, 사용자가 제4 입력영상(418)을 선택한 경우에 해당되므로, 제2 출력단자(146)의 제2 출력영상(700)은 제4 입력영상(418)인 것을 알 수 있다. As shown in FIG. 7, the
이와 같이, 사용자는 복수의 입력 영상 중 어느 하나의 영상을 선택하여 제2 출력단자(146)로 출력할 수 있게 된다. As such, the user may select one of the plurality of input images and output the image to the
또한, 사용자는 제2 출력단자(146)로 출력되는 영상을 조작부(130)를 조작하 여 다른 입력영상으로 전환할 수도 있다. 예를 들어, 사용자는 조작부(130)의 전환버튼(미도시)를 조작하여, 제2 출력단자(146)로 출력되는 영상을 제4 입력영상(418)에서 제2 입력영상(414)로 전환할 수도 있다. In addition, the user may convert the image output to the
그리고, 3차원 그래픽 처리부(200)는 제2 출력단자(146)의 출력 영상을 전환하는 경우, 3차원 화면 전환 효과를 부여할 수 있다. 예를 들어, 제2 출력단자(146)의 출력영상을 제4 입력영상(418)에서 제2 입력영상(414)으로 전환하는 경우, 제4 입력영상(418)이 좌측 방향으로 축소되면서 사라지고, 제2 입력영상(414)이 우측 방향에서 확대되면서 나타나도록 3차원 전환 효과를 부여할 수도 있다. 이와 같은 3차원 전환 효과는 3차원 이펙터(3D effector)를 사용하여 구현할 수 있다. When the output image of the
이와 같이, 제2 출력단자(146)는 복수의 입력 영상들 중 어느 하나를 선택하여 출력하는 스위처 기능의 영상을 출력할 수 있게 된다. As such, the
도 8은 본 발명의 일 실시예에 따른, 제2 출력단자가 복수의 입력영상 중 어느 2개의 영상이 믹싱된 영상을 출력하는 경우에, 제1 출력단자(143) 및 제2 출력단자(146)에서 출력되는 영상을 도시한 도면이다. FIG. 8 illustrates a
도 8에 도시된 바와 같이, 제1 출력단자(143)는 3차원 멀티뷰 그래픽에 대한 제1 출력영상(510)을 출력한다. 그리고, 제2 출력단자(146)는 복수의 입력 영상들 중 2개의 입력 영상이 믹싱된 제3 출력영상(800)을 출력하게 된다. 도 8의 경우, 사용자가 제4 입력영상(418)과 제2 입력영상(414)이 믹싱된 영상을 선택한 경우에 해당되므로, 제2 출력단자(146)의 제3 출력영상(800)은 제4 입력영상(418)이 크게 표시되고 제2 입력영상(414)이 작게 믹싱된 영상인 것을 확인할 수 있다. As shown in FIG. 8, the
이와 같이, 제2 출력단자(146)는 복수의 입력 영상들 중 적어도 2개의 입력영상을 믹싱하여 출력하는 믹서의 기능을 할 수 있게 된다. As such, the
도 8의 경우도 믹싱된 2개의 입력영상 중 어느 하나를 다른 입력영상으로 전환할 때, 3차원 전환 효과를 부여할 수도 있다. In the case of FIG. 8, when one of the two mixed input images is converted into another input image, a three-dimensional conversion effect may be provided.
도 8에서는 2개의 입력영상이 믹싱된 것으로 설명하였으나, 3차원 그래픽 처리부(200)는 3개 이상의 입력영상을 믹싱할 수도 있음은 물론이다.In FIG. 8, two input images are mixed, but the 3D
상술한 바와 같이, 3차원 멀티뷰 장치는 3차원 멀티뷰 기능 뿐만 아니라 스위처/믹서의 기능을 할 수도 있다. As described above, the 3D multiview device may function as a switcher / mixer as well as a 3D multiview function.
또한, 3차원 멀티뷰 장치는 사용자가 3차원 그래픽을 생성하기 위해, 3D 비디오 월, 3D 비디오 효과, 및 입력 비디오들을 선택하기 위한 가상 카메라 스위치 버튼을 설계하기 위한 3D 그래픽 제작툴을 제공하는 사용자 프로그래머블 스위처/믹서의 기능을 할 수도 있음은 물론이다. In addition, the 3D multi-view device provides a user programmable switcher that provides 3D graphics production tools for the user to design 3D video walls, 3D video effects, and virtual camera switch buttons for selecting input videos to create 3D graphics. Of course, it can also function as a mixer.
3차원 멀티뷰 장치의 3차원 그래픽 처리부(200)는 3차원 그래픽 전용 하드웨어만으로 구성될 수도 있고, 하드웨어와 소프트웨어의 조합으로 구성될 수도 있다. 본 발명이 하드웨어와 소프트웨어의 조합으로 구현되는 경우, 본 발명의 일 실시예는 상술한 3차원 멀티뷰 장치의 기능을 수행하게 하거나 3차원 멀티뷰 제공방법을 수행하게 하는 컴퓨터 프로그램을 수록한 컴퓨터로 읽을 수 있는 기록매체로 구현될 수도 있다. The 3D
본 발명의 다양한 실시예에 따른 기술적 사상은 컴퓨터로 읽을 수 있는 기록 매체에 기록된 컴퓨터로 읽을 수 있는 코드 형태로 구현될 수도 있다. 컴퓨터로 읽을 수 있는 기록매체는 컴퓨터에 의해 읽을 수 있고 데이터를 저장할 수 있는 어떤 데이터 저장 장치이더라도 가능하다. 예를 들어, 컴퓨터로 읽을 수 있는 기록매체는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광디스크, 하드 디스크 드라이브, 등이 될 수 있음은 물론이다. 또한, 컴퓨터로 읽을 수 있는 기록매체에 저장된 컴퓨터로 읽을 수 있는 코드는 컴퓨터간에 연결된 네트워크를 통해 전송될 수도 있다. The technical idea according to various embodiments of the present disclosure may be implemented in the form of computer readable codes recorded on a computer readable recording medium. The computer-readable recording medium can be any data storage device that can be read by a computer and can store data. For example, the computer-readable recording medium may be a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical disk, a hard disk drive, or the like. In addition, the computer-readable code stored in the computer-readable recording medium may be transmitted through a network connected between the computers.
또한, 본 실시예에 따른 3차원 멀티뷰 장치는 독립된 장치로 구현될 수도 있으며, 컴퓨터에 의해 구현될 수도 있음은 물론이다. In addition, the 3D multi-view device according to the present embodiment may be implemented as an independent device or may be implemented by a computer.
상술한 바와 같이, 본 발명의 실시예에서는 종래의 2차원 화면에 다수의 비디오 화면을 분활해 보여 주는 멀티뷰 개념과 달리, 3차원 가상의 그래픽 공간속에 다수의 비디오 모니터를 그래픽으로 만들고 이 모니터에 장치에입력되는 실제 비디오들을 실시간 택스튜어로 나타내도록 원하는 3D 비디오 월을 그래픽으로 만들어 3D 공간속에 배치된 복수의 가상 카메라중 하나 혹은 복수로 보여지는 가상 비디오 월의 부분을 실시간 3D 렌더링 기술을 이용하여 출력하고 이 선택된 가상카메라를 관측자의 조정버튼 혹은 입력 장치(조이스틱 같은)을 통해 가상 비디오월의 원하는 곳을 보여 지게 되는 방식을 사용하게 된다.As described above, in the exemplary embodiment of the present invention, unlike the multi-view concept of dividing a plurality of video screens onto a conventional two-dimensional screen, a plurality of video monitors are graphically created in a three-dimensional virtual graphic space, Real-
이 방식은 가상 카메라를 사용하여 실시간 렌더링 기법을 씀으로서 여러대의 2D 멀티뷰를 쓰지않고 한대의 발명된 멀티뷰 화면에 다른 비디오들이 보여 지는 가상 비디오월을 보여주도록 가상카메라를 움직여 보여 주거나 필요한 부분을 주는 가상카메라를 선택해 보여 주게 하는 비디오들의 조합을 쉽게 구릅핑하여 이들을 보여 주는 스위칭을 쉽게 할수 있게 된다. 또한 가상 공간속에 비디오들의 배치는 마음대로 무한으로 할수 있어 필요한 비디오들만으로 만든 비디오 월들을 보여주는 가상카메라를 정의하여 스위칭하므로서 비싼 아날로그 멀티플렉서 없이 손쉽게 다양한 장면을 스위칭하면서 프로그램제어 혹은 외부 버튼등의 조작으로 선택할수 있게 된다. This method uses a real-time rendering technique using a virtual camera, moving the virtual camera to show a virtual video wall where different videos are shown on one invented multi-view screen without using multiple 2D multi-views, or to show the necessary parts. The master makes it easy to switch between the combinations of videos that let you select a virtual camera to show them. In addition, the arrangement of videos in the virtual space can be made infinitely, and by defining and switching a virtual camera showing video walls made of only necessary videos, it is possible to easily switch various scenes without expensive analog multiplexer and select them by program control or external button operation. do.
도 9는 본 발명의 일 실시예에 따른, 3차원 멀티뷰 그래픽 공간 내의 3차원 비디오 월과 가상 카메라를 도시한 도면이다. 도 9에 도시된 바와 같이, 3차원 멀티뷰 그래픽 공간 내에는 비디오 월(900)(즉, 멀티뷰 객체), 제1 가상 카메라(910), 제2 가상 카메라(920) 및 제3 가상 카메라(930)를 포함한다. 9 is a diagram illustrating a three-dimensional video wall and a virtual camera in a three-dimensional multi-view graphic space according to an embodiment of the present invention. As shown in FIG. 9, a video wall 900 (ie, a multiview object), a first
제1 가상 카메라(910)는 비디오 월(900)의 전체를 촬영한다. 따라서, 제1 가상 카메라(910)를 선택했을 때, 랜더링 되는 영상은 제1 출력영상(915)과 같이 비디오 월 전체가 표시되는 영상이다. The first
제2 가상 카메라(920)는 비디오 월(900) 내의 A,B,C,D 화면만 촬영한다. 따라서, 제2 가상 카메라(920)를 선택했을 때, 랜더링 되는 영상은 제2 출력영상(925)과 같이, 4개의 화면만 표시된다. The second
제3 가상 카메라(930)는 비디오 월(900) 내의 6개의 화면을 촬영한다. 따라서, 제3 가상 카메라(930)를 선택했을 때, 랜더링 되는 영상은 제3 출력영상(935)과 같이 6개의 화면만 표시된다. The third
이와 같이, 가상카메라를 선택함에 따라 어떤 화면이 표시되는지를 도 10a 내지 도 10c를 참고하여 설명한다. 도 10a 내지 도 10c는 본 발명의 일 실시예에 따른, 가상 카메라를 선택하였을 때 각각 디스플레이되는 화면을 도시한 도면이다. As described above, what screen is displayed as the virtual camera is selected will be described with reference to FIGS. 10A to 10C. 10A to 10C illustrate screens displayed when a virtual camera is selected according to an embodiment of the present invention.
도 10a에 의하면, 터치 스크린(1000)에는 가상 카메라 1 아이콘(1010), 가상 카메라 2 아이콘(1020) 및 가상 카메라 3 아이콘(1030)이 표시되어 있는 것을 알 수 있다. 도 10a와 같이, 사용자가 가상 카메라 1 아이콘(1010)을 선택하면, 3차원 멀티뷰 장치에 의해 출력된 영상은 제1 출력영상(915)가 되는 것을 확인할 수 있다. Referring to FIG. 10A, it can be seen that the
도 10b와 같이, 사용자가 가상 카메라 2 아이콘(1020)을 선택하면, 3차원 멀티뷰 장치에 의해 출력된 영상은 제2 출력영상(915)가 되는 것을 확인할 수 있다. 마찬가지로, 도 10c와 같이, 사용자가 가상 카메라 3 아이콘(1030)을 선택하면, 3차원 멀티뷰 장치에 의해 출력된 영상은 제3 출력영상(935)가 되는 것을 확인할 수 있다. As shown in FIG. 10B, when the user selects the
이와 같이, 사용자는 터치 스크린을 이용하여 가상 카메라를 선택할 수 있다, 그리고, 3차원 멀티뷰 장치는 선택된 가상 카메라에 따라 서로 다른 영상을 출력하게 되어, 스위처의 기능을 수행할 수 있게 된다. As such, the user may select a virtual camera by using a touch screen, and the 3D multi-view device outputs different images according to the selected virtual camera, thereby performing the function of the switcher.
도 11은 본 발명의 일 실시예에 따른, 가상카메라의 위치 변화에 따라 디스플레이되는 화면이 달라지는 것을 도시한 도면이다. 도 11에 도시된 바와 같이, 비디오 월(1100)은 30개의 입력된 화면을 디스플레이하고, 제1 가상카메라(1110)는 좌우로 회전하는 트랙킹을 하고, 제2 가상카메라(1120)는 앞뒤로 움직이는 것을 확인할 수 있다. 가상 카메라는 조작부(130)의 조이스틱 등을 조작하여 이동시킬 수 있다. FIG. 11 is a diagram illustrating that a displayed screen is changed according to a change in position of a virtual camera according to one embodiment of the present invention. As shown in FIG. 11, the
도 11에 도시된 바와 같이, 제1 가상 카메라(1110)의 위치가 ⓐ, ⓑ, ⓒ, ⓓ인지 여부에 따라, 랜더링되어 출력되는 영상이 ⓐ, ⓑ, ⓒ, ⓓ로 각각 달라지는 것을 확인할 수 있다. 또한, 제2 가상 카메라(1120)의 위치가 ①, ②, ③인지 여부에 따라, 출력되는 영상이 ①, ②, ③으로 달라지는 것을 확인할 수 있다. As shown in FIG. 11, depending on whether the positions of the first
도 12는 본 발명의 일 실시예에 따른, 3차원 멀티뷰 장치의 입력 환경을 개략적으로 도시한 도면이다. 도 12에 도시된 바와 같이, 3차원 멀티뷰 장치(1200)는 터치스크린(1210), 제1 모니터(1220), 제2 모니터(1230), 오디오-비디오 인코더(1240), 조이스틱(1250), 키보드(1260), 마우스(1270)를 포함한다. 12 is a diagram schematically illustrating an input environment of a 3D multi-view device according to an embodiment of the present invention. As shown in FIG. 12, the
터치스크린(1210)은 복수개의 비디오 입력 중 원하는 비디오 입력을 선택하거나, 가상 카메라를 선택하는데 사용된다. The
그리고, 3차원 멀티뷰 장치(1200)에는 아날로그 비디오 입력, SDI 비디오 입력, ASI 디지털 비디오 입력, MEPG 네트워크 비디오 입력 및 오디오-비디오 인코더(1240) 입력이 입력되는 것을 확인할 수 있다. In addition, it may be confirmed that the
이와 같이, 3차원 멀티뷰 장치(1200)는 복수개의 비디오를 입력받아 제1 모니터(1220) 및 제2 모니터(1230)에 3차원 멀티뷰 형상으로 디스플레이 하게 된다. As described above, the
이하에서는, 도 13을 참고하여, 3차원 멀티뷰 장치의 내부 구성의 예들을 설명한다. 도 13은 본 발명의 일 실시예에 따른, 3차원 멀티뷰 장치의 내부 구성의 일 예를 도시한 도면이다. Hereinafter, an example of an internal configuration of the 3D multi-view device will be described with reference to FIG. 13. FIG. 13 is a diagram illustrating an example of an internal configuration of a 3D multi-view device according to an embodiment of the present invention.
도 13에 도시된 바와 같이, 사용자는 터치스크린을 이용하여 복수의 가상카 메라(예를 들어, 도 13에서는 가상카메라 1, 가상카메라 2, 및 가상카메라 3) 중 어느 하나를 선택할 수 있다. 그리고, 도 13은 사용자에 의해 선택된 가상 카메라의 출력이 DVI 혹은 스트리밍을 통해 출력되는 과정의 기능선도를 보여 주고 있다As illustrated in FIG. 13, a user may select one of a plurality of virtual cameras (for example,
그리고, 영상 입력부(110)에는 다양한 형태의 영상신호(예를 들어, 도 13에서는 SDI, 아날로그 영상, ASI, 압축 비디오 스트림)가 입력된다. 또한, 3차원 그래픽 처리부(200)는 랜더부, 디코딩부, 비디오 텍스쳐링부, 및 3D VIDEO Wall 데이터가 저장된 저장부를 포함한다. The
도 13에 도시된 바와 같이, 영상 입력부(110)에 다양한 형태의 디지털 영상, 아날로그 영상 또는 압축 비디오 스트림들이 입력되어 디코딩(decoding)된다. 그리고, 디코딩된 비디오가 3차원 가상 멀티뷰 공간 내의 가상 모니터에 비디오 택스쳐링이 된다. 그리고, 3차원 멀티뷰 장치는 선택된 가상 카메라의 위치에서 촬영되는 화면을 실시간 렌더링하여 DVI 1, DVI 2 또는 스트리밍으로 출력하게 된다. 도 13은 이와 같은 과정을 나타내는 기능도를 도시하고 있다.As shown in FIG. 13, various types of digital image, analog image, or compressed video streams are input to the
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.In addition, although the preferred embodiment of the present invention has been shown and described above, the present invention is not limited to the specific embodiments described above, but the technical field to which the invention belongs without departing from the spirit of the invention claimed in the claims. Of course, various modifications can be made by those skilled in the art, and these modifications should not be individually understood from the technical spirit or the prospect of the present invention.
도 1은 본 발명의 일 실시예에 따른, 3차원 멀티뷰 장치의 구성을 도시한 블럭도, 1 is a block diagram showing the configuration of a three-dimensional multi-view device according to an embodiment of the present invention;
도 2는 본 발명의 일 실시예에 따른, 3차원 멀티뷰 장치의 3차원 그래픽 처리부의 기능을 설명하기 위한 기능 블럭도,2 is a functional block diagram for explaining a function of a three-dimensional graphics processing unit of a three-dimensional multi-view device according to an embodiment of the present invention;
도 3은 본 발명의 일 실시예에 따른, 3차원 멀티뷰 제공장치에 관하여 설명하기 위해 제공되는 흐름도,3 is a flowchart provided to explain an apparatus for providing a 3D multiview according to an embodiment of the present invention;
도 4는 본 발명의 일 실시예에 따른, 3차원 멀티뷰 그래픽에 입력영상들을 텍스쳐 맵핑하는 과정을 도시한 도면,4 is a diagram illustrating a process of texture mapping input images to a 3D multi-view graphic according to an embodiment of the present invention;
도 5는 본 발명의 일 실시예에 따른, 3차원 멀티뷰 그래픽을 가상 카메라가 촬영하여 출력하는 동작을 도시한 도면,5 is a diagram illustrating an operation of photographing and outputting a 3D multi-view graphic by a virtual camera according to an embodiment of the present invention;
도 6은 본 발명의 일 실시예에 따른, 가상 카메라의 위치가 제1 멀티뷰 객체만을 촬영하도록 이동된 상태를 도시한 도면,6 is a diagram illustrating a state in which a position of a virtual camera is moved to photograph only the first multi-view object according to an embodiment of the present invention;
도 7은 본 발명의 일 실시예에 따른, 제2 출력단자가 복수의 입력영상 중 어느 하나를 출력하는 경우에, 제1 출력단자 및 제2 출력단자에서 출력되는 영상을 도시한 도면, 7 is a diagram illustrating an image output from a first output terminal and a second output terminal when the second output terminal outputs any one of a plurality of input images according to an embodiment of the present invention;
도 8은 본 발명의 일 실시예에 따른, 제2 출력단자가 복수의 입력영상 중 어느 2개의 영상이 믹싱된 영상을 출력하는 경우에, 제1 출력단자 및 제2 출력단자에서 출력되는 영상을 도시한 도면,FIG. 8 illustrates an image output from a first output terminal and a second output terminal when the second output terminal outputs a mixed image of any two images among a plurality of input images according to an embodiment of the present invention. One drawing,
도 9는 본 발명의 일 실시예에 따른, 3차원 멀티뷰 그래픽 공간 내의 3차원 비디오 월과 가상 카메라를 도시한 도면, 9 illustrates a three-dimensional video wall and a virtual camera in a three-dimensional multiview graphic space according to an embodiment of the present invention;
도 10a 내지 도 10c는 본 발명의 일 실시예에 따른, 가상 카메라를 선택하였을 때 각각 디스플레이되는 화면을 도시한 도면, 10A to 10C illustrate screens displayed when a virtual camera is selected according to an embodiment of the present invention.
도 11은 본 발명의 일 실시예에 따른, 가상카메라의 위치 변화에 따라 디스플레이되는 화면이 달라지는 것을 도시한 도면, 11 is a view showing that the displayed screen is changed according to the position change of the virtual camera, according to an embodiment of the present invention;
도 12는 본 발명의 일 실시예에 따른, 3차원 멀티뷰 장치의 입력 환경을 개략적으로 도시한 도면,12 is a diagram schematically illustrating an input environment of a 3D multi-view device according to an embodiment of the present invention;
도 13은 본 발명의 일 실시예에 따른, 3차원 멀티뷰 장치의 내부 구성의 일 예를 도시한 도면, 13 is a diagram illustrating an example of an internal configuration of a 3D multi-view device according to an embodiment of the present invention;
도 14는 여러대의 TV에 하나의 비디오 화면을 보여 주는 멀티 비전의 예를 도시한 도면, 14 is a diagram showing an example of multi vision showing one video screen on several TVs;
도 15는 종래의 멀티뷰에 대한 화면의 예를 도시한 도면, 15 is a view showing an example of a screen for a conventional multi-view,
도 16은 입력되는 복수의 비디오들이 멀티뷰에 표시되는 과정을 간략하게 도시한 도면,16 is a diagram briefly illustrating a process of displaying a plurality of input videos in a multi-view;
도 17은 방송국과 CCTV 환경의 비디오월에 멀티뷰를 통해 여러 비디오를 보여 주는 비디오 월을 도시한 도면이다. FIG. 17 is a view illustrating a video wall showing various videos through a multiview on a video wall of a broadcasting station and a CCTV environment.
* 도면의 주요 부분에 대한 부호의 설명 *Explanation of symbols on the main parts of the drawings
110 : 영상 입력부 112 : 제1 영상 입력단자110: image input unit 112: first image input terminal
114 : 제2 영상 입력단자 116 : 제3 영상 입력단자114: second video input terminal 116: third video input terminal
118 : 제4 영상 입력단자 120 : 저장부118: fourth image input terminal 120: storage unit
130 : 센서부 140 : 영상 출력부130: sensor unit 140: image output unit
143 : 제1 출력단자 146 : 제2 출력단자143: first output terminal 146: second output terminal
150 : 센서부 200 : 3차원 그래픽 처리부150: sensor unit 200: 3D graphics processing unit
210 : 텍스쳐 맵핑부 220 : 가상 카메라 구현부210: texture mapping unit 220: virtual camera implementation
230 : 랜더링부230: rendering unit
Claims (12)
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090029100A KR101037797B1 (en) | 2009-04-03 | 2009-04-03 | Multiviewer system Showing Videos on 3D Virtual Monitors in a 3D Virtual Graphic video wall realizing Virtual Video Wall supporting unlimited number inputs of either Analog or Digital, IP videos |
PCT/KR2010/002047 WO2010114337A2 (en) | 2009-04-03 | 2010-04-02 | 3d multiview apparatus, method for manufacturing same and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090029100A KR101037797B1 (en) | 2009-04-03 | 2009-04-03 | Multiviewer system Showing Videos on 3D Virtual Monitors in a 3D Virtual Graphic video wall realizing Virtual Video Wall supporting unlimited number inputs of either Analog or Digital, IP videos |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20100110658A true KR20100110658A (en) | 2010-10-13 |
KR101037797B1 KR101037797B1 (en) | 2011-05-27 |
Family
ID=42828881
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020090029100A KR101037797B1 (en) | 2009-04-03 | 2009-04-03 | Multiviewer system Showing Videos on 3D Virtual Monitors in a 3D Virtual Graphic video wall realizing Virtual Video Wall supporting unlimited number inputs of either Analog or Digital, IP videos |
Country Status (2)
Country | Link |
---|---|
KR (1) | KR101037797B1 (en) |
WO (1) | WO2010114337A2 (en) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101302803B1 (en) * | 2011-05-26 | 2013-09-02 | 주식회사 엘지씨엔에스 | Intelligent image surveillance system using network camera and method therefor |
KR101304052B1 (en) * | 2011-07-19 | 2013-09-04 | 김영대 | A video wall system using network synchronized rendering to display multiple sources |
WO2014062001A1 (en) * | 2012-10-16 | 2014-04-24 | Jeon Jae Woong | Method and system for controlling virtual camera in virtual 3d space and computer-readable recording medium |
KR20150077057A (en) | 2013-12-27 | 2015-07-07 | 삼성테크윈 주식회사 | Video Wall system |
KR20150124409A (en) * | 2014-04-28 | 2015-11-05 | 주식회사 이타기술 | Method for transmitting multi-channel video stream, and surveillance system using the same method |
KR20190083422A (en) * | 2018-01-04 | 2019-07-12 | 주식회사 팬스컴스 | Method for mapping plural displays in a virtual space |
KR102056858B1 (en) * | 2019-10-30 | 2020-01-22 | (주)하이퍼월 | Internet protocol video wall system and method of driving the same |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9118888B1 (en) * | 2014-03-14 | 2015-08-25 | Tribune Broadcasting Company, Llc | News production system with integrated display |
KR102474745B1 (en) * | 2016-06-02 | 2022-12-05 | 한화테크윈 주식회사 | The Apparatus And The System For Monitoring |
KR20200024441A (en) | 2018-08-28 | 2020-03-09 | 김영대 | Smart Realtime Lecture, Lecture Capture and Tele-Presentation-Webinar, VR Class room, VR Conference method using Virtual/Augmented Reality Class Room and Artificial Intelligent Virtual Camera Switching technologies |
CN114928718A (en) * | 2022-04-29 | 2022-08-19 | 厦门图扑软件科技有限公司 | Video monitoring method and device, electronic equipment and storage medium |
CN117032618B (en) * | 2023-10-07 | 2024-02-02 | 启迪数字科技(深圳)有限公司 | Animation rotation method, equipment and medium based on multiple screens |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0916807A (en) * | 1995-07-03 | 1997-01-17 | Tsuneo Ikedo | Multiscreen display circuit |
KR20050113488A (en) * | 2004-05-29 | 2005-12-02 | 주식회사 다림비젼 | Disital video recorder monitoring system and monitoring method |
KR100956455B1 (en) * | 2007-09-15 | 2010-05-06 | 김영대 | 3D Virtual Studio Teaching and Conference Apparatus |
-
2009
- 2009-04-03 KR KR1020090029100A patent/KR101037797B1/en not_active IP Right Cessation
-
2010
- 2010-04-02 WO PCT/KR2010/002047 patent/WO2010114337A2/en active Application Filing
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101302803B1 (en) * | 2011-05-26 | 2013-09-02 | 주식회사 엘지씨엔에스 | Intelligent image surveillance system using network camera and method therefor |
US9143759B2 (en) | 2011-05-26 | 2015-09-22 | Lg Cns Co., Ltd. | Intelligent image surveillance system using network camera and method therefor |
KR101304052B1 (en) * | 2011-07-19 | 2013-09-04 | 김영대 | A video wall system using network synchronized rendering to display multiple sources |
WO2014062001A1 (en) * | 2012-10-16 | 2014-04-24 | Jeon Jae Woong | Method and system for controlling virtual camera in virtual 3d space and computer-readable recording medium |
US10007348B2 (en) | 2012-10-16 | 2018-06-26 | Jae Woong Jeon | Method and system for controlling virtual camera in virtual 3D space and computer-readable recording medium |
KR20150077057A (en) | 2013-12-27 | 2015-07-07 | 삼성테크윈 주식회사 | Video Wall system |
KR20150124409A (en) * | 2014-04-28 | 2015-11-05 | 주식회사 이타기술 | Method for transmitting multi-channel video stream, and surveillance system using the same method |
KR20190083422A (en) * | 2018-01-04 | 2019-07-12 | 주식회사 팬스컴스 | Method for mapping plural displays in a virtual space |
KR102056858B1 (en) * | 2019-10-30 | 2020-01-22 | (주)하이퍼월 | Internet protocol video wall system and method of driving the same |
Also Published As
Publication number | Publication date |
---|---|
WO2010114337A2 (en) | 2010-10-07 |
WO2010114337A3 (en) | 2011-01-06 |
KR101037797B1 (en) | 2011-05-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101037797B1 (en) | Multiviewer system Showing Videos on 3D Virtual Monitors in a 3D Virtual Graphic video wall realizing Virtual Video Wall supporting unlimited number inputs of either Analog or Digital, IP videos | |
Uyttendaele et al. | Image-based interactive exploration of real-world environments | |
US11102520B2 (en) | Image display method and image display apparatus | |
TWI687087B (en) | Method and apparatus for presenting vr media beyond omnidirectional media | |
KR101304052B1 (en) | A video wall system using network synchronized rendering to display multiple sources | |
US20200128178A1 (en) | A real-time generation method for 360-degree vr panoramic graphic image and video | |
US11941748B2 (en) | Lightweight view dependent rendering system for mobile devices | |
JP6309749B2 (en) | Image data reproducing apparatus and image data generating apparatus | |
US11153625B2 (en) | Image display method, image distribution method, image display apparatus, and image distribution apparatus | |
JP6173442B2 (en) | Method and apparatus for mixing a first video signal and a second video signal | |
US20030095131A1 (en) | Method and apparatus for processing photographic images | |
US20090160933A1 (en) | Video perspective navigation system and method | |
CA3043247A1 (en) | Methods, devices and stream to provide indication of mapping of omnidirectional images | |
KR101340598B1 (en) | Method for generating a movie-based, multi-viewpoint virtual reality and panoramic viewer using 3d surface tile array texture mapping | |
KR102059732B1 (en) | Digital video rendering | |
US10732706B2 (en) | Provision of virtual reality content | |
CN110730340B (en) | Virtual audience display method, system and storage medium based on lens transformation | |
US20090153550A1 (en) | Virtual object rendering system and method | |
US20210160561A1 (en) | Image arrangement determination apparatus, display controlling apparatus, image arrangement determination method, display controlling method, and program | |
KR20210064654A (en) | System for playing three dimension image of 360 degrees | |
CN115665461B (en) | Video recording method and virtual reality device | |
TWI802204B (en) | Methods and systems for derived immersive tracks | |
Kriz et al. | Proposed Methods for Real-Time Visualization of Panoramic Stadium Tribune Images in High Resolution | |
KR20050113488A (en) | Disital video recorder monitoring system and monitoring method | |
Sarmiento et al. | Panoramic immersive videos-3d production and visualization framework |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
LAPS | Lapse due to unpaid annual fee |