KR20120118622A - Metheod and apparatus for digital hologram contents service - Google Patents

Metheod and apparatus for digital hologram contents service Download PDF

Info

Publication number
KR20120118622A
KR20120118622A KR1020110036102A KR20110036102A KR20120118622A KR 20120118622 A KR20120118622 A KR 20120118622A KR 1020110036102 A KR1020110036102 A KR 1020110036102A KR 20110036102 A KR20110036102 A KR 20110036102A KR 20120118622 A KR20120118622 A KR 20120118622A
Authority
KR
South Korea
Prior art keywords
image
information
contents
unit
display unit
Prior art date
Application number
KR1020110036102A
Other languages
Korean (ko)
Inventor
강훈종
정광모
서경학
박병하
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Priority to KR1020110036102A priority Critical patent/KR20120118622A/en
Publication of KR20120118622A publication Critical patent/KR20120118622A/en

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04—Processes or apparatus for producing holograms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/005—General purpose rendering architectures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume

Abstract

PURPOSE: A digital hologram contents service method and a device thereof are provided to use unitized contents, thereby performing a contents display. CONSTITUTION: A 2D contents obtaining unit(100) obtains a 2D image about a specific object. A 2D contents encoding unit(110) encodes the 2D image according to a fixed encoding method. A contents transmitting unit(120) transmits the encoded 2D image to a playing device. A 2D contents decoding unit(130) decodes by using the same method with the fixed encoding method of the 2D contents encoding unit. A 2D contents displaying unit(140) displays decoded 2D contents. [Reference numerals] (100) 2D contents obtaining unit; (110,130) 2D contents decoding unit; (120) Contents transmitting unit; (140) 2D contents displaying unit

Description

디지털 홀로그램 콘텐츠 서비스 방법 및 장치{Metheod and apparatus for digital hologram contents service}Method and apparatus for digital hologram content service {Metheod and apparatus for digital hologram contents service}

본 발명은 홀로그램 또는 3차원 입체 영상 서비스 방법에 관한 것으로, 더욱 상세하게는 실사 또는 객체에 대한 3차원 정보를 가지고 있는 객체형상정보를 전송하여 다양한 디스플레이에서 홀로그램 또는 3차원 입체 영상을 표시할 수 있는 방법 및 장치에 관한 것이다.The present invention relates to a hologram or a three-dimensional stereoscopic image service method, and more particularly, to transmit holographic or three-dimensional stereoscopic images on various displays by transmitting object shape information having three-dimensional information about an object or an object. A method and apparatus are disclosed.

평면영상으로부터 3차원의 깊이감과 입체감을 느낄 수 있도록 하는 3차원 영상 구현기술은 디스플레이 등의 직접적인 관련분야를 비롯해서 가전이나 통신 산업은 물론 우주항공, 예술 산업, 자동차 산업 분야 등에 광범위하게 영상을 미치고 있으며, 그 기술적 파급효과는 현재 각광받고 있는 HDTV 이상이 될 것으로 기대되고 있다.Three-dimensional image realization technology that allows you to feel three-dimensional depth and three-dimensional feeling from a planar image is widely applied to the aerospace, arts, and automotive industries, as well as the home appliance and telecommunications industry, as well as the direct related fields such as displays. The technical ripple effect is expected to be more than the current HDTV.

즉, 디지털 산업 및 영상산업이 발달함에 따라 인간의 시각효과를 만족시키기 위해 고해상도 HDTV가 개발되었으며, 3차원 입체 영상을 디스플레이 하기 위한 입체 표시 장치들이 다양한 방법으로 개발되고 있다.That is, with the development of the digital industry and the image industry, high resolution HDTVs have been developed to satisfy human visual effects, and stereoscopic display devices for displaying 3D stereoscopic images have been developed in various ways.

인간이 깊이감과 입체감을 느끼는 요인으로 가장 중요하게는 두 눈 사이 간격에 의한 양안시차를 들 수 있지만, 이외에도 심리적, 기억적 요인에도 깊은 관계가 있고, 이에 따라 3차원 영상 구현기술 역시 관찰자에게 어느 정도의 3차원 영상정보를 제공할 수 있는지를 기준으로 통상 부피표현방식(volumetric type), 3차원표현방식(holographic type), 입체감표현방식(stereoscopic type)으로 구분된다.The most important factor for the human sense of depth and three-dimensionality is binocular disparity due to the gap between the two eyes, but there is also a strong relationship between psychological and memory factors. Based on whether the 3D image information can be provided, it is generally classified into a volumetric (volumetric type), a three-dimensional representation (holographic type), a stereoscopic representation (stereoscopic type).

부피표현방식은 심리적인 요인과 흡입효과에 의해 깊이방향에 대한 원근감이 느껴지도록 하는 방법으로서, 투시도법, 중첩, 음영과 명암, 움직임 등을 계산에 의해 표시하는 3차원 컴퓨터그래픽 또는 관찰자에게 시야각이 넓은 대화면을 제공하여 그 공간 내로 빨려 들어가는 것 같은 착시현상을 불러일으키는 이른바 아이맥스 영화 등에 응용되고 있다.The volume expression method is a way to feel the perspective of the depth direction due to psychological factors and inhalation effects. The viewing angle is calculated by a 3D computer graphic or an observer who displays perspective, superposition, shadow, contrast, and movement by calculation. It is applied to so-called IMAX movies, which provide a large large screen and cause optical illusions to be sucked into the space.

가장 완전한 입체영상 구현기술이라 알려져 있는 3차원표현방식은 레이저광 재생 홀로그래피 내지 백색광 재생 홀로그래피로 대표될 수 있다.The three-dimensional representation method known as the most complete stereoscopic image implementation technology can be represented by laser light reproduction holography to white light reproduction holography.

그리고 입체감표현방식은 양안의 생리적 요인을 이용하는 입체감을 느끼는 방식으로, 구체적으로 약 65㎜ 정도 떨어져 존재하는 인간의 좌우안에 시차정보가 포함된 평면의 연관영상이 보일 경우에 뇌가 이들을 융합하는 과정에서 표시면 전후의 공간정보를 생성해 입체감을 느끼는 능력, 즉 스테레오그라피(stereography)를 이용한 것이다. 이러한 입체감표현방식은 다안상 표시방식이라 불리며, 실질적인 입체감 생성 위치에 따라 관찰자 측의 특수 안경을 이용하는 안경방식 또는 표시면 측의 패럴랙스 베리어(parallax barrier)나 렌티큘러(lenticular) 또는 인테그럴(integral) 등의 렌즈어레이(lens array)를 이용하는 무안경 방식으로 구분될 수 있다.In addition, the stereoscopic expression method is to sense a three-dimensional feeling using physiological factors of both eyes. Specifically, when a plane-related image of parallax information is seen in the left and right of human beings that are about 65 mm apart, the brain merges them. The ability to generate spatial information before and after the display surface and to sense a three-dimensional effect, that is, using stereography. This stereoscopic expression method is called a multi-eye display method, and the spectacle method using special glasses on the observer's side or the parallax barrier, lenticular or integral on the display surface side depending on the actual stereoscopic generating position. It can be divided into a glasses-free method using a lens array of the back.

부피표현방식 중 하나인 집적영상방식은, 실제 3차원 대상물에서 나오는 광의 분포 및 휘도와 동일한 광특성을 재현함으로써 실제 3차원 대상물이 없더라도 가상의 3차원 입체 영상을 인식하도록 한다.The integrated image method, which is one of the volume expression methods, recognizes a virtual three-dimensional stereoscopic image even without an actual three-dimensional object by reproducing an optical characteristic identical to the distribution and luminance of light emitted from the actual three-dimensional object.

이러한 방법들은 3차원 입체영상을 관찰할 때 특수 안경의 착용 유무로 크게 나눌 수 있으며, 입체 영상을 관찰할 때, 특수한 안경 등을 착용하지 않고, 자연스런 입체상을 보고, 장시간 관찰하더라도 피로를 느끼지 않는 3차원 입체영상 표시방식을 개발하는 것을 주요 목표로 하고 있다. These methods can be divided into the presence or absence of wearing special glasses when observing three-dimensional stereoscopic image, and when viewing the three-dimensional image, without wearing special glasses, seeing the natural three-dimensional image, do not feel fatigue even if observed for a long time The main goal is to develop a 3D stereoscopic image display method.

상술한 바와 같이 홀로그래픽 디스플레이는 이상적인 입체 영상 표시 방법의 하나로 알려져 있다. As described above, the holographic display is known as one of the ideal stereoscopic image display methods.

홀로그램(HOLOGRAM)이란 그리스어의 전부(Whole)의 뜻을 가지는 HOLOS와 전달(Message)을 의미하는 GRAM을 결합시킨 말로써, 눈에 보이는 상(입체성)의 정보를 평면화시켜 얻는 것이다. 즉, 3차원의 정보를 2차원화하고, 다시 2차원 정보로부터 3차원의 영상으로 재현하는 것이다. 홀로그램은 물체에서 반사된 빛의 간섭성을 이용하며, 위상과 진폭이 포함된 빛의 반사 파면이 입체성으로 나타나는데, 이것을 2차원 광굴절 매질에 기록한 것을 말하며, 홀로그래피는 이 입체성을 3차원으로 그대로 나타내는 것을 말한다. 홀로그래피는 3차원 객체로부터 반사된 물체빔과 참조빔의 간섭에 의해 만들어진 간섭파를 기록하는 사진술로써 홀로그램을 생성하기 위해 고입자의 홀로그램 필름을 사용해야 하며 단색광을 이용하여 간섭패턴을 기록한다. Hologram (HOLOGRAM) is a combination of HOLOS, which means Greek, and GRAM, which means message, and is obtained by flattening information of visible image (stereosity). In other words, two-dimensional information is two-dimensionalized and reproduced again from the two-dimensional information into a three-dimensional image. Holograms use the coherence of light reflected from an object, and the reflected wavefront of light, including phase and amplitude, appears in three dimensions, which is recorded in a two-dimensional optical refraction medium. Say it as it is. Holography is a photography that records the interference wave generated by the interference of the object beam and the reference beam reflected from the three-dimensional object. A hologram film using a high particle is used to generate the hologram, and the interference pattern is recorded using monochromatic light.

근래에 컴퓨터 그래픽 모델 또는 실물로부터 획득된 다수의 2차원 영상 또는 3차원 정보를 이용하여 디지털 홀로그램을 생성 한 후 이를 광 절 매질에 기록함으로써, 실제로 존재하지 않는 가상의 물체에 대해서도 기존의 아날로그 방식의 홀로그램과 유사하게 디스플레이가 가능해졌다. 이와 같이 생성된 디지털 홀로그램을 광 절 매질에 기록하는 기기를 홀로그래픽 프린터라고 한다. 일반적으로, 서로 다른 위치에서 획득된 다수의 2차원 영상을 이용하여 디지털 홀로그램을 생성 한 뒤, 이를 광 절 매질에 기록하는 홀로그래픽 스테레오그램 방식이 사용되고 있다.Recently, a digital hologram is generated by using a plurality of two-dimensional images or three-dimensional information obtained from a computer graphic model or a real object, and then recorded on the optical media. Similar to holograms, displays are now possible. A device for recording the digital hologram thus generated on the optical media is called a holographic printer. In general, a holographic stereogram method is used in which a digital hologram is generated using a plurality of two-dimensional images obtained at different positions, and then recorded on the optical media.

일반적으로 3차원 입체 영상 디스플레이 기기는 2안식 렌티귤러, 2안식 패럴랙스 베리어, 다시점 렌티귤러, 다시점 패럴랙스 베리어, 인터그랄 포토그래피, 홀로그래피 등 다양한 방법들이 있으며, 요구되는 디스플레이 콘텐츠는 서로 상이하다. 따라서 3차원 입체 영상 획득 장치는 3차원 입체 영상 디스플레이의 종류를 인지하지 못한 경우 모든 3차원 입체 영상 디스플레이에서 재생 가능한 모든 형태의 디스플레이 컨텐츠를 전송해야 한다는 문제점이 있다.
In general, three-dimensional stereoscopic image display device has a variety of methods such as binocular lenticular, binocular parallax barrier, multi-view lenticular, multi-view parallax barrier, interactive photography, holography, etc., the required display content is different Do. Therefore, when the 3D stereoscopic image acquisition apparatus does not recognize the type of the 3D stereoscopic image display, there is a problem in that all types of display contents that can be reproduced in all 3D stereoscopic image displays must be transmitted.

본 발명이 해결하려는 과제는 다양한 종류의 3차원 입체 영상 디스플레이에서 재생 가능한 디지털 컨텐츠를 제공하는 방안을 제안함에 있다.An object of the present invention is to propose a method for providing digital content that can be reproduced in various types of 3D stereoscopic image displays.

본 발명이 해결하려는 다른 과제는 다양한 종류의 3차원 입체 영상 디스플레이의 특성에 맞는 디지털 컨텐츠를 획득하는 방안을 제안함에 있다.Another object of the present invention is to propose a method for acquiring digital content suitable for the characteristics of various types of 3D stereoscopic image displays.

본 발명이 해결하려는 또 다른 과제는 획득한 3차원 디지털 컨텐츠를 3차원 입체 영상 디스플레이에서 재생하는 방안을 제안함에 있다.Another object of the present invention is to propose a method of reproducing acquired 3D digital content on a 3D stereoscopic image display.

이를 위해 본 발명의 3차원 영상 획득 방법은 3차원 영상 장치로부터 획득한 영상으로부터 3차원 정보를 추출하는 단계, 추출된 상기 3차원 정보를 단일의 객체 형상 정보로 변환하는 단계, 변환한 상기 객체 형상 정보를 부호화하여 전송하는 단계를 포함한다.To this end, the three-dimensional image acquisition method of the present invention comprises the steps of extracting the three-dimensional information from the image obtained from the three-dimensional imaging device, converting the extracted three-dimensional information into a single object shape information, the converted object shape Encoding and transmitting the information.

이를 위해 본 발명의 3차원 영상 재생 방법은 수신한 객체 형상 정보를 복호화하는 단계, 복호화한 상기 객체 형상 정보를 표시 장치에 대응되는 렌더링 방식으로 렌더링하여 3차원 영상을 생성하는 단계, 생성한 3차원 영상을 디스플레이부에 디스플레이하는 단계를 포함한다.To this end, the 3D image reproducing method of the present invention includes decoding the received object shape information, generating the 3D image by rendering the decoded object shape information in a rendering method corresponding to the display device, and generating the 3D image. And displaying the image on the display unit.

본 발명에 따른 디지털 컨텐츠 획득 및 재생 방법에 의해 3차원 콘텐츠를 획득 할 수 있으며, 획득된 3차원 콘텐츠로부터 생성된 객체형상정보를 이용하여 어떠한 임의의 형태를 갖는 콘텐츠 디스플레이 장치라도 전용 콘텐츠 렌더러에 의해 디스플레이가 가능하도록 영상화가 가능하다. 렌더러에 의해 생성된 콘텐츠는 해당 디스플레이 장치에 의해 디스플레이 될 수 있다. 이와 같은 방법에 의해 콘텐츠 단일화가 가능하며, 단일화된 콘테츠를 이용함으로써 임의의 3차원 입체 디스플레이 장치는 콘텐츠 디스플레이 가능하다.The 3D content can be obtained by the digital content acquisition and reproduction method according to the present invention, and any content display device having any shape using the object shape information generated from the acquired 3D content can be obtained by the dedicated content renderer. Imaging is possible to enable display. Content generated by the renderer may be displayed by the corresponding display device. The content can be unified by such a method, and by using the unified content, any 3D stereoscopic display device can display the content.

도 1은 2차원 영상 콘텐츠 서비스 개념도를 도시하고 있으며,
도 2는 3차원 영상 콘텐츠 서비스 개념도를 도시하고 있으며,
도 3은 본 발명의 일실시 예에 따른 도 2의 구성을 상세하게 도시한 도면이다.1 is a conceptual diagram of a 2D video content service.
2 is a conceptual diagram of a 3D video content service.
3 is a view showing in detail the configuration of Figure 2 according to an embodiment of the present invention.

전술한, 그리고 추가적인 본 발명의 양상들은 첨부된 도면을 참조하여 설명되는 바람직한 실시 예들을 통하여 더욱 명백해질 것이다. 이하에서는 본 발명의 이러한 실시 예를 통해 당업자가 용이하게 이해하고 재현할 수 있도록 상세히 설명하기로 한다.The foregoing and further aspects of the present invention will become more apparent through the preferred embodiments described with reference to the accompanying drawings. Hereinafter will be described in detail to enable those skilled in the art to easily understand and reproduce through this embodiment of the present invention.

도 1은 2차원 영상 콘텐츠 서비스 개념도를 도시하고 있다. 이하 도 1을 이용하여 2차원 영상 콘텐츠 서비스 개념도에 대해 알아보기로 한다.1 is a conceptual diagram of a 2D video content service. Hereinafter, a conceptual diagram of a 2D image content service will be described with reference to FIG. 1.

도 1에 의하면 2차원 영상 콘텐츠 서비스 개념도는 2차원 콘텐츠 획득부(100), 2차원 콘텐츠 부호화부(110), 콘텐츠 전송부(120), 2차원 콘텐츠 복호화부(130), 2차원 콘텐츠 디스플레이부(140)를 포함한다. Referring to FIG. 1, a conceptual diagram of a 2D image content service includes a 2D content obtaining unit 100, a 2D content encoding unit 110, a content transmitting unit 120, a 2D content decoding unit 130, and a 2D content display unit. 140.

2차원 콘텐츠 획득부(100)는 특정 사물에 대한 2차원 영상을 획득한다. 2차원 콘텐츠 부호화부(110)는 2차원 콘텐츠 획득부(100)에 의해 획득된 2차원 영상을 설정된 부호화 방식에 따라 부호화한다. 콘텐츠 전송부(120)는 부호화된 2차원 영상을 재생장치로 전송한다. 2차원 콘텐츠 복호화부(130)는 2차원 콘텐츠 부호화부의 부호화 방식과 동일한 방식으로 복호화를 수행한다. 2차원 콘텐츠 디스플레이부(140)는 복호화된 2차원 콘텐츠를 디스플레이한다.The 2D content obtaining unit 100 obtains a 2D image of a specific object. The 2D content encoder 110 encodes the 2D image obtained by the 2D content acquirer 100 according to a set encoding method. The content transmitter 120 transmits the encoded 2D image to the playback apparatus. The 2D content decoder 130 performs decoding in the same manner as the encoding method of the 2D content encoder. The 2D content display unit 140 displays the decoded 2D content.

도 2는 3차원 영상 콘텐츠 서비스 개념도를 도시하고 있다. 이하 도 2를 이용하여 3차원 영상 콘텐츠 서비스 개념도에 대해 알아보기로 한다.2 is a conceptual diagram of a 3D video content service. Hereinafter, a conceptual diagram of a 3D image content service will be described with reference to FIG. 2.

도 2에 의하면 3차원 영상 콘텐츠 서비스 개념도는 영상 콘텐츠 획득부(200), 3차원 정보 추출부(210), 객체형상 정보 생성부(220), 부호화부(230), 전송부(240), 복호화부(250), 콘텐츠 렌더링부(260), 콘텐츠 디스플레이부(270)를 포함한다. According to FIG. 2, a conceptual diagram of a 3D image content service includes a video content acquirer 200, a 3D information extractor 210, an object shape information generator 220, an encoder 230, a transmitter 240, and a decoding. The unit 250 includes a content rendering unit 260 and a content display unit 270.

콘텐츠 획득부(200)는 특정 사물에 대한 3차원 영상을 획득한다. 3차원 정보 추출부(210)는 콘텐츠 획득부(200)에 의해 획득된 3차원 영상으로부터 3차원 정보를 추출한다. 객체형상 정보 생성부(220)는 추출한 3차원 정보를 이용하여 객체 형상 정보를 생성한다. 부호화부(230)는 생성된 객체 형상 정보를 설정된 부호화 방식에 따라 부호화한다. 전송부(240)는 부호화된 객체 형상 정보를 재생 장치로 전송한다. 복호화부(250)는 부호화부(230)의 부호화 방식과 동일한 방식으로 복호화를 수행한다. 콘텐츠 렌더링부(260)는 복호화부에 의해 복호화된 객체 형상 정보를 렌더링한다. 렌더링에 대해서는 후술하기로 한다. 콘텐츠 디스플레이부(270)는 렌더링된 객체 형상 정보를 디스플레이한다.The content acquirer 200 acquires a 3D image of a specific object. The three-dimensional information extraction unit 210 extracts three-dimensional information from the three-dimensional image acquired by the content acquisition unit 200. The object shape information generator 220 generates object shape information using the extracted 3D information. The encoder 230 encodes the generated object shape information according to a set encoding method. The transmitter 240 transmits the encoded object shape information to the reproduction device. The decoder 250 decodes the same method as the encoding method of the encoder 230. The content rendering unit 260 renders the object shape information decoded by the decoding unit. The rendering will be described later. The content display unit 270 displays rendered object shape information.

렌더링(rendering)은 물체의 모양을 그 형이나 위치, 광원 등의 외부 정보를 고려하면서 실감나는 화상을 표현하는 컴퓨터 도형 기법을 의미한다. 즉, 2D나 3D에서 컴퓨터 그래픽(CG) 영상 작성시 최종 단계로 영상을 생성하는 것을 말한다. 2D CG에서 렌더링은 동화상에 대한 화상 처리 공정의 최종 단계로 처리 완료된 화상을 생성하는 공정을 말한다. 또한, 3D CG의 경우에는 컴퓨터 내부에 기록되어 있는 모델 데이터를 디스플레이 장치에 묘화될 수 있도록 영상화하는 것을 말한다. Rendering refers to a computer graphics technique that represents a realistic image while considering the shape of an object in consideration of external information such as its shape, position, and light source. In other words, the final step in creating a computer graphics (CG) image in 2D or 3D. Rendering in a 2D CG refers to a process of generating a processed image as a final step of an image processing process for a moving image. In addition, in the case of 3D CG, it means to image the model data recorded inside the computer so that it can be drawn on the display device.

이와 같이 렌더링에 의한 최종 결과물은 2차원 영상 디스플레이 장치에 디스플레이를 하기 위한 2차원 영상이다. 3차원 입체 디스플레이 기기의 다양성이 확대되고, 디스플레이 방법이 다양해짐에 따라 요구되는 콘텐츠 또한 다양해진다. 예로써, Lenticular, Integral photographic display, 그리고 홀로그래픽 디스플레이는 서로 상이한 디스플레이 콘텐츠를 요구한다. 본 발명에서 렌더링은 기존의 렌더링 개념을 확대 시킨 것으로써, 해당 디스플레이 기기에 의해 묘화될 수 있도록 영상화하는 것을 그 개념으로 한다.As a result, the final result of the rendering is a two-dimensional image for display on the two-dimensional image display apparatus. As the variety of 3D stereoscopic display devices expands, and as the display methods vary, the required contents also vary. For example, Lenticular, Integral photographic display, and holographic display require different display contents. In the present invention, rendering is an enlargement of the existing rendering concept, and the concept is to image to be drawn by the display device.

도 3은 본 발명의 일실시 예에 따른 도 2의 구성을 상세하게 도시한 도면이다. 이하 도 3을 이용하여 본 발명의 일실시 예에 따른 도 2의 구성에 대해 상세하게 알아보기로 한다.3 is a view showing in detail the configuration of Figure 2 according to an embodiment of the present invention. Hereinafter, the configuration of FIG. 2 according to an embodiment of the present invention will be described in detail with reference to FIG. 3.

도 3에 의하면, 영상 콘텐츠 획득부(200)는 2개의 카메라로 구성된 양안식 카메라(200-1), 적어도 3개의 카메라로 구성된 다시점 카메라(200-2), 깊이 영상 및 2차원 영상을 획득할 수 있는 깊이 카메라(200-3), 디지털 홀로그램을 획득할 수 있는 홀로그래픽 카메라(200-4), 집적영상을 획득할 수 있는 집적 영상 카메라(200-5) 중 어느 하나를 포함한다. 물론 상술한 구성 이외에 다른 카메라가 영상 콘텐츠 획득부(200)에 포함될 수 있다.Referring to FIG. 3, the image content acquisition unit 200 acquires a binocular camera 200-1 consisting of two cameras, a multiview camera 200-2 consisting of at least three cameras, a depth image, and a two-dimensional image. And a depth camera 200-3 capable of acquiring a digital hologram, an holographic camera 200-4 capable of acquiring a digital hologram, and an integrated image camera 200-5 capable of acquiring an integrated image. Of course, in addition to the above-described configuration, another camera may be included in the image content acquisition unit 200.

영상 콘텐츠 획득부(200)에 의해 획득된 영상은 3차원 정보 추출부(210)로 전달된다. 3차원 정보 추출부(210)는 획득된 영상으로부터 3차원 정보를 추출한다. 3차원 정보 추출부(210)는 양안식 카메라(200-1)가 영상 콘텐츠 획득부(200)를 구성하는 경우에는 양안식 카메라(200-1)로부터 촬영된 좌우 영상간의 시차정보를 이용하여 깊이 정보를 추출한다. 3차원 정보 추출부(210)는 다시점 카메라(200-2)가 영상 콘텐츠 획득부(200)를 구성하는 경우에는 양안식 카메라(200-1)에서 사용된 깊이 정보 추출 방법을 사용하지만, 좀 더 넓은 범위에 카메라가 위치하고 있으므로, 가려짐 현상(occlusion)을 최소화 할 수 있다. The image acquired by the image content acquisition unit 200 is transferred to the 3D information extraction unit 210. The 3D information extractor 210 extracts 3D information from the obtained image. When the binocular camera 200-1 configures the image content acquisition unit 200, the 3D information extractor 210 uses depth information between the left and right images photographed by the binocular camera 200-1. Extract the information. The three-dimensional information extractor 210 uses the depth information extraction method used in the binocular camera 200-1 when the multiview camera 200-2 configures the image content acquisition unit 200, Since the camera is located in a wider range, occlusion can be minimized.

3차원 정보 추출부(210)는 깊이 카메라(200-3)가 영상 콘텐츠 획득부(200)를 구성하는 경우에는 깊이 영상 및 해당 텍스쳐 정보가 있는 영상을 획득할 수 있으며, 획득된 정보로부터 객체에 대한 point cloud를 만들 수 있다. 3차원 정보 추출부(210)는 집적 영상 카메라(200-4) 또는 디지털 홀로그래픽 카메라(200-5)에 의해 획득된 영상 콘텐츠로부터 집적 영상 및 디지털 홀로그램에 적합한 복원 영상을 추출하여 객체에 대한 point cloud 또는 이와 유사한 3차원 정보를 얻을 수 있다. When the depth camera 200-3 configures the image content acquisition unit 200, the 3D information extractor 210 may acquire an image having a depth image and corresponding texture information. You can create a point cloud for The 3D information extracting unit 210 extracts a reconstructed image suitable for the integrated image and the digital hologram from the image content acquired by the integrated image camera 200-4 or the digital holographic camera 200-5, and then points the object. cloud or similar three-dimensional information can be obtained.

상술한 바에 의해 생성된 3차원 정보는 각 카메라 시스템 및 3차원 정보 추출 방법에 따라 다양한 형태를 가질 수 있다. The three-dimensional information generated as described above may have various forms according to each camera system and three-dimensional information extraction method.

객체 형상 정보 생성부(220)는 추출된 3차원 정보를 기반으로 단일화된 객체 형상 정보를 생성한다. 객체 형상 정보는 컴퓨터 그래픽 모델과 같이 폴리곤과 메쉬, 좌표 및 진폭만을 갖는 point cloud 또는 좌표 및 복소진폭을 갖는 point cloud로 표현될 수 있다.The object shape information generator 220 generates unified object shape information based on the extracted 3D information. The object shape information may be expressed as a point cloud having only polygons and meshes, coordinates and amplitudes, or a point cloud having coordinates and complex amplitudes, as in a computer graphic model.

객체 형상 정보 생성부(220)에서 생성된 객체 형상 정보는 해당 데이터 특성에 최적화된 부호화 알고리즘, 전송 방법에 의해 재생 장치로 전달된다. 재생 장치의 복호화부(250)는 복호화 알고리즘에 의해 객체 형상 정보를 복호화한다.The object shape information generated by the object shape information generator 220 is transmitted to the playback apparatus by an encoding algorithm and a transmission method optimized for the data characteristic. The decoding unit 250 of the reproduction device decodes the object shape information by a decoding algorithm.

본 발명과 관련하여 재생 장치는 랜더러와 디스플레이를 포함한다. 일예로 재생장치가 2차원 디스플레이부(270-1)를 포함하면 해당 재생 장치는 2차원 영상 렌더러(260-1)를 포함하며, 재생장치가 양안식 입체 디스플레이부(270-2)를 포함하면 해당 재생 장치는 양안식 입체 렌더러(260-2)를 포함한다. In the context of the present invention, the playback device comprises a renderer and a display. For example, if the playback apparatus includes the 2D display unit 270-1, the playback apparatus includes the 2D image renderer 260-1, and if the playback apparatus includes the binocular stereoscopic display unit 270-2. The reproduction apparatus includes a binocular stereoscopic renderer 260-2.

또한, 재생장치가 홀로그래픽 디스플레이부(270-6)를 포함하면, 해당 재생장치는 홀로그래픽 렌더러(260-6)를 포함하고 있다. 홀로그래픽 렌더러(260-6)는 수신된 객체형상정보를 이용하여 디지털 홀로그램 생성한다. 생성된 디지털 홀로그램은 홀로그래픽 디스플레이부(270-6)에 의해 디스플레이 된다.In addition, if the playback apparatus includes the holographic display 270-6, the playback apparatus includes the holographic renderer 260-6. The holographic renderer 260-6 generates a digital hologram using the received object shape information. The generated digital hologram is displayed by the holographic display unit 270-6.

본 발명은 도면에 도시된 일실시 예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it will be understood by those of ordinary skill in the art that various changes in form and details may be made therein without departing from the scope of the present invention .

200: 영상 컨텐츠 획득부 210: 3차원 정보 추출부
220: 객체 형상 정보 생성부 230: 부호화부
240: 전송부 250: 복호화부
260: 콘텐츠 렌더링부 270: 콘텐츠 디스플레이부 200: image content acquisition unit 210: 3D information extraction unit
220: object shape information generator 230: encoder
240: transmitting unit 250: decoding unit
260: content rendering unit 270: content display unit

Claims (8)

3차원 영상 장치로부터 획득한 영상으로부터 3차원 정보를 추출하는 단계;
추출된 상기 3차원 정보를 단일의 객체 형상 정보로 변환하는 단계;
변환한 상기 객체 형상 정보를 부호화하여 전송하는 단계를 포함함을 특징으로 하는 3차원 영상 획득 방법.
Extracting 3D information from an image obtained from the 3D imaging apparatus;
Converting the extracted three-dimensional information into single object shape information;
And encoding and transmitting the converted object shape information.
제 1항에 있어서, 상기 객체 형상 정보는,
폴리곤과 매쉬, 좌표 및 진폭을 갖는 포인트 클라우드, 좌표 및 복소진폭을 갖는 포인트 클라우드 중 적어도 하나임을 특징으로 하는 3차원 영상 획득 방법.
The method of claim 1, wherein the object shape information,
And at least one of a polygon, a mesh, a point cloud having a coordinate and an amplitude, and a point cloud having a coordinate and a complex amplitude.
제 2항에 있어서, 상기 3차원 영상 획득 장치는,
양안식 카메라, 다시점 카메라, 깊이 카메라, 홀로그래픽 카메라, 집적 영상 카메라 중 적어도 하나임을 특징으로 하는 3차원 영상 획득 방법.
The apparatus of claim 2, wherein the 3D image acquisition device comprises:
3D image acquisition method characterized in that at least one of a binocular camera, a multi-view camera, a depth camera, a holographic camera, an integrated video camera.
제 3항에 있어서, 상기 3차원 영상 장치로부터 획득한 영상으로부터 추출되는 3차원 정보는 상기 3차원 영상 장치에 따라 달라짐을 특징으로 하는 3차원 영상 획득 방법.
The method of claim 3, wherein the 3D information extracted from the image acquired from the 3D imaging apparatus varies according to the 3D imaging apparatus.
제 4항에 있어서, 추출되는 상기 3차원 정보는,
깊이 정보, 집적 영상 정보, 디지털 홀로그램 정보 중 하나임을 특징으로 하는 3차원 영상 획득 방법.
The method of claim 4, wherein the three-dimensional information to be extracted,
3D image acquisition method characterized in that one of depth information, integrated image information, digital hologram information.
수신한 객체 형상 정보를 복호화하는 단계;
복호화한 상기 객체 형상 정보를 표시 장치에 대응되는 렌더링 방식으로 렌더링하여 3차원 영상을 생성하는 단계;
생성한 3차원 영상을 디스플레이부에 디스플레이하는 단계를 포함함을 특징으로 하는 3차원 영상 재생 방법.
Decoding the received object shape information;
Generating the 3D image by rendering the decoded object shape information by a rendering method corresponding to the display device;
And displaying the generated 3D image on a display unit.
제 6항에 있어서, 상기 객체 형상 정보는,
폴리곤과 매쉬, 좌표 및 진폭을 갖는 포인트 클라우드, 좌표 및 복소진폭을 갖는 포인트 클라우드 중 적어도 하나임을 특징으로 하는 3차원 영상 재생 방법.
The method of claim 6, wherein the object shape information,
And at least one of a polygon, a mesh, a point cloud having a coordinate and an amplitude, and a point cloud having a coordinate and a complex amplitude.
제 7항에 있어서, 상기 디스플레이부는,
양안식 입체 디스플레이부, 다시점 입체 디스플레이부, 체적 영상 디스플레이부, 집적 영상 디스플레이부, 홀로그램 디스플레이부 중 적어도 하나임을 특징으로 하는 3차원 영상 재생 방법.The method of claim 7, wherein the display unit,
And a binocular stereoscopic display unit, a multiview stereoscopic display unit, a volume image display unit, an integrated image display unit, and a hologram display unit.
KR1020110036102A 2011-04-19 2011-04-19 Metheod and apparatus for digital hologram contents service KR20120118622A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110036102A KR20120118622A (en) 2011-04-19 2011-04-19 Metheod and apparatus for digital hologram contents service

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110036102A KR20120118622A (en) 2011-04-19 2011-04-19 Metheod and apparatus for digital hologram contents service

Publications (1)

Publication Number Publication Date
KR20120118622A true KR20120118622A (en) 2012-10-29

Family

ID=47286005

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110036102A KR20120118622A (en) 2011-04-19 2011-04-19 Metheod and apparatus for digital hologram contents service

Country Status (1)

Country Link
KR (1) KR20120118622A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017048357A1 (en) * 2015-09-18 2017-03-23 Intel Corporation Facilitating quantization and compression of three-dimensional graphics data using screen space metrics at computing devices
KR101983909B1 (en) * 2017-11-30 2019-05-29 전자부품연구원 Digital Hologram Application System and Method
KR20190123087A (en) 2018-04-23 2019-10-31 박지선 System for generating fringe pattern
WO2020076058A1 (en) * 2018-10-08 2020-04-16 삼성전자 주식회사 Method and apparatus for generating media file comprising 3-dimensional video content, and method and apparatus for replaying 3-dimensional video content
GB2582251A (en) * 2019-01-31 2020-09-23 Wacey Adam Volumetric communication system

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017048357A1 (en) * 2015-09-18 2017-03-23 Intel Corporation Facilitating quantization and compression of three-dimensional graphics data using screen space metrics at computing devices
US9716875B2 (en) 2015-09-18 2017-07-25 Intel Corporation Facilitating quantization and compression of three-dimensional graphics data using screen space metrics at computing devices
US10397542B2 (en) 2015-09-18 2019-08-27 Intel Corporation Facilitating quantization and compression of three-dimensional graphics data using screen space metrics at computing devices
KR101983909B1 (en) * 2017-11-30 2019-05-29 전자부품연구원 Digital Hologram Application System and Method
WO2019107637A1 (en) * 2017-11-30 2019-06-06 전자부품연구원 System and method for applying digital hologram
KR20190123087A (en) 2018-04-23 2019-10-31 박지선 System for generating fringe pattern
WO2020076058A1 (en) * 2018-10-08 2020-04-16 삼성전자 주식회사 Method and apparatus for generating media file comprising 3-dimensional video content, and method and apparatus for replaying 3-dimensional video content
US11606576B2 (en) 2018-10-08 2023-03-14 Samsung Electronics Co., Ltd. Method and apparatus for generating media file comprising 3-dimensional video content, and method and apparatus for replaying 3-dimensional video content
GB2582251A (en) * 2019-01-31 2020-09-23 Wacey Adam Volumetric communication system
GB2582251B (en) * 2019-01-31 2023-04-19 Wacey Adam Volumetric communication system

Similar Documents

Publication Publication Date Title
KR101697184B1 (en) Apparatus and Method for generating mesh, and apparatus and method for processing image
US11010958B2 (en) Method and system for generating an image of a subject in a scene
JP5654138B2 (en) Hybrid reality for 3D human machine interface
TWI599861B (en) Method and device for encoding three-dimensional scenes which include transparent objects in a holographic system
JP4489610B2 (en) Stereoscopic display device and method
CN108141578B (en) Presentation camera
Kim et al. 3D display technology
Agus et al. GPU accelerated direct volume rendering on an interactive light field display
Pereira et al. Plenoptic imaging: Representation and processing
Tanimoto FTV (free-viewpoint TV)
KR20120118622A (en) Metheod and apparatus for digital hologram contents service
KR20220011180A (en) Method, apparatus and computer program for volumetric video encoding and decoding
CN104104938B (en) Signaling warp maps using a high efficiency video coding (HEVC) extension for 3d video coding
JP2015534745A (en) Stereo image generation, transmission, and reception method and related apparatus
EP3729805A1 (en) Method for encoding and decoding volumetric video data
Ribeiro et al. Quality of experience in a stereoscopic multiview environment
KR20110060180A (en) Method and apparatus for producing 3d models by interactively selecting interested objects
Tanimoto et al. Global view and depth (GVD) format for FTV/3DTV
Makanjuola et al. 3D-holoscopic imaging: a new dimension to enhance imaging in minimally invasive therapy in urologic oncology
Tan et al. A system for capturing, rendering and multiplexing images on multi-view autostereoscopic display
Milnthorpe et al. Computer generated content for 3D TV displays
Rocha et al. An overview of three-dimensional videos: 3D content creation, 3D representation and visualization
Schild et al. Integrating stereoscopic video in 3D games
Megyesi et al. 3D video visualization on the holovizio system
Zhang et al. Efficient variational light field view synthesis for making stereoscopic 3D images

Legal Events

Date Code Title Description
A201 Request for examination
E601 Decision to refuse application