KR20150086815A - 사용자 인터랙션 기반의 디지털 홀로그래픽 콘텐츠 제공방법, 제작방법 및 그 장치 - Google Patents
사용자 인터랙션 기반의 디지털 홀로그래픽 콘텐츠 제공방법, 제작방법 및 그 장치 Download PDFInfo
- Publication number
- KR20150086815A KR20150086815A KR1020140006897A KR20140006897A KR20150086815A KR 20150086815 A KR20150086815 A KR 20150086815A KR 1020140006897 A KR1020140006897 A KR 1020140006897A KR 20140006897 A KR20140006897 A KR 20140006897A KR 20150086815 A KR20150086815 A KR 20150086815A
- Authority
- KR
- South Korea
- Prior art keywords
- digital holographic
- user
- holographic content
- interaction
- contents
- Prior art date
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 62
- 238000000034 method Methods 0.000 title claims abstract description 36
- 238000004519 manufacturing process Methods 0.000 claims description 35
- 230000000977 initiatory effect Effects 0.000 abstract 1
- 238000001093 holography Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000004888 barrier function Effects 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000015541 sensory perception of touch Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/04—Processes or apparatus for producing holograms
- G03H1/08—Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/22—Processes or apparatus for obtaining an optical image from holograms
- G03H1/2294—Addressing the hologram to an active spatial light modulator
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/0005—Adaptation of holography to specific applications
- G03H2001/0088—Adaptation of holography to specific applications for video-holography, i.e. integrating hologram acquisition, transmission and display
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/04—Processes or apparatus for producing holograms
- G03H1/08—Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
- G03H1/0866—Digital holographic imaging, i.e. synthesizing holobjects from holograms
- G03H2001/0883—Reconstruction aspect, e.g. numerical focusing
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H2225/00—Active addressable light modulator
- G03H2225/10—Shape or geometry
- G03H2225/13—3D SLM
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Processing Or Creating Images (AREA)
Abstract
사용자 인터랙션 기반의 디지털 홀로그래픽 콘텐츠 제공방법, 제작방법 및 그 장치가 개시된다. 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작방법은, 사용자와 디스플레이 공간 간에 인터랙션하는 단계와, 디지털 홀로그래픽 콘텐츠를 복원하여 이를 디스플레이 공간에 재생하면서, 사용자와 디스플레이 공간 간의 인터랙션에 의해 디지털 홀로그래픽 콘텐츠를 실시간으로 제작하고 제작된 디지털 홀로그래픽 콘텐츠를 디지털 홀로그래픽 콘텐츠의 복원 및 재생에 반영하는 단계를 포함한다.
Description
본 발명은 디지털 콘텐츠 기술에 관한 것으로, 보다 상세하게는 디지털 콘텐츠 제작 및 편집기술에 관한 것이다.
홀로그래피(holography)란 실제 사물을 볼 때 사람의 눈에 들어오는 것과 동일한 빛의 분포를 재생하여 완벽한 3차원 영상을 구현하기 위한 기술을 지칭한다. 기록 매질에 빛의 간섭 현상을 이용하여 제작하는 아날로그 홀로그래피(analog holography) 기술은 매질 고유의 특성에 따라 고품질의 홀로그램 영상을 구현할 수 있다. 그러나, 실물 객체에 대해서만 홀로그램 생성이 가능하고, 자유로운 편집이 불가능하다는 점 등의 제약이 따른다.
아날로그 홀로그래피 기술과는 대조적으로 디지털 홀로그래피(digital holography) 기술은 전하결합소자(charge coupled device: CCD), 컴퓨터 계산장치 및 공간 광 변조기(spatial light modulator: SLM) 등의 전자 장비를 활용한다. 디지털 홀로그램은 실물 객체뿐만 아니라 가상의 3차원 객체에 대해서도 생성될 수 있으며, 신호처리 기술을 적용하여 홀로그램 영상 편집 등의 다양한 기법을 적용할 수 있다.
일반적으로 컴퓨터 언어(C/C++, MATLAB 등)의 코드 상에 빛의 회절 현상을 수학적으로 모델링하여 계산할 수 있는 수식을 통해, 콘텐츠 소스로부터 디지털 홀로그램 데이터를 생성한다. 생성된 디지털 홀로그램은 홀로그램 영상을 광학적으로 복원 및 재생하는 장치에 입력되거나, 컴퓨터 시뮬레이션을 통한 수치적 복원을 통해서 검증될 수 있다. 이러한 방식의 디지털 홀로그램 생성은 콘텐츠 제작자 또는 편집자에게 회절광학(diffractive optics) 및 홀로그래피에 대한 지식을 요구한다. 따라서, 콘텐츠 제작에 높은 진입장벽으로 작용하게 된다.
일 실시 예에 따라, 사용자가 인터랙션에 기반하여 실시간으로 디지털 홀로그램 재생 영상을 확인하면서 디지털 홀로그래픽 콘텐츠를 편집할 수 있는, 사용자 인터랙션 기반의 디지털 홀로그래픽 콘텐츠 제공방법, 제작방법 및 그 장치를 제안한다.
일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작방법은, 사용자와 디스플레이 공간 간에 인터랙션하는 단계와, 디지털 홀로그래픽 콘텐츠를 복원하여 이를 디스플레이 공간에 재생하면서, 사용자와 디스플레이 공간 간의 인터랙션에 의해 디지털 홀로그래픽 콘텐츠를 실시간으로 제작하고 제작된 디지털 홀로그래픽 콘텐츠를 디지털 홀로그래픽 콘텐츠의 복원 및 재생에 반영하는 단계를 포함한다.
다른 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제공방법은, 디스플레이 공간에 디지털 홀로그래픽 콘텐츠를 표시하는 단계와, 사용자와의 인터랙션에 의한 디지털 홀로그래픽 콘텐츠 생성 및 편집을 위해 제공되는 사용자 인터페이스를 디스플레이 공간에 표시하는 단계를 포함한다.
또 다른 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작장치는, 사용자와 디스플레이 공간 간에 인터랙션하는 인터랙션부와, 디지털 홀로그래픽 콘텐츠를 복원하여 이를 디스플레이 공간에 재생하는 디스플레이와, 인터랙션부의 인터랙션에 의해 디지털 홀로그래픽 콘텐츠를 실시간으로 제작하고 제작된 디지털 홀로그래픽 콘텐츠를 디스플레이에 제공하는 제작부를 포함한다.
일 실시 예에 따르면, 사용자 인터랙션 기반의 디지털 홀로그래픽 콘텐츠 제작을 통해 실시간으로 사용자가 광학적으로 복원되는 디지털 홀로그램 영상을 확인하면서 사용자 인터랙션을 통해 직관적으로 디지털 홀로그래픽 콘텐츠를 생성 및 편집할 수 있다.
다른 실시 예에 따르면, 광학적으로 복원 및 재생되어 사용자에게 시각적으로 제시되는 디지털 홀로그램 영상과 함께 디지털 홀로그래픽 콘텐츠 생성 및 편집을 용이하게 해주는 사용자 인터페이스를 함께 제공함에 따라, 사용자가 쉽고 편하게 디지털 홀로그래픽 콘텐츠를 생성 및 편집할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작장치와 사용자 간의 인터랙션 예를 보여주는 참조도,
도 2는 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작장치의 구성도,
도 3은 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작을 위해 사용되는 사용자 인터페이스를 도시한 참조도,
도 4는 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작방법을 도시한 흐름도,
도 5는 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 소스 데이터 접근 여부에 따른 디지털 홀로그래픽 콘텐츠 제작방법을 도시한 흐름도이다.
도 2는 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작장치의 구성도,
도 3은 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작을 위해 사용되는 사용자 인터페이스를 도시한 참조도,
도 4는 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작방법을 도시한 흐름도,
도 5는 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 소스 데이터 접근 여부에 따른 디지털 홀로그래픽 콘텐츠 제작방법을 도시한 흐름도이다.
이하에서는 첨부한 도면을 참조하여 본 발명의 실시 예들을 상세히 설명한다. 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 또한, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
우선 다음과 같이 용어를 정의한다.
1. 디지털 홀로그래피(digital holography): 디지털 기술을 활용하여 홀로그램을 생성하고 광학적으로 복원하는 기술을 통칭한다. 디지털 홀로그램의 생성은 실사 물체에 레이저 광을 비추고 회절된 빛(diffracted light)을 CCD(charge-coupled device)에 기준파(reference wave)와 간섭시켜서 기록하거나, 가상의 입체 모델 정보로부터 빛의 회절 시뮬레이션을 통해 이루어진다. 디지털 홀로그램의 복원에는 컴퓨터 계산에 의한 수치적 복원(numerical reconstruction) 또는 공간 광 변조기(spatial light modulator)와 같은 소자를 이용한 광학적 복원(optical reconstruction)이 있다.
2. 디지털 홀로그램(digital hologram): 디지털 홀로그래피 기술을 활용하여 생성된 홀로그램 데이터 정보를 지칭하며, 주로 2차원 배열 형태의 데이터로 저장 및 관리된다.
3. 디지털 홀로그래픽 콘텐츠(digital holographic contents): 디지털 홀로그램을 이용하여 제작된 콘텐츠를 지칭한다.
4. 사용자 인터랙션(user interaction): 사용자의 위치 및 동작정보를 인식하고 이를 사용자에게 제공하는 콘텐츠에 반영하여 사용자-콘텐츠 인터랙션을 가능케 하는 기술을 지칭한다.
5. 인터랙티브 홀로그래픽 콘텐츠(interactive holographic contents): 사용자 인터랙션 기술을 디지털 홀로그래픽 디스플레이에 적용하여, 사용자가 인터랙션할 수 있도록 제공되는 3차원 홀로그램 및 이를 활용한 홀로그래픽 콘텐츠를 지칭한다.
도 1은 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작장치(1)(이하 '제작장치'라 칭함)와 사용자(100) 간의 인터랙션 예를 보여주는 참조도이다.
도 1을 참조하면, 제작장치(1)는 디지털 홀로그래픽 콘텐츠를 복원 및 재생한다. 이때, 제작장치(1)는 디스플레이 공간에 디지털 홀로그래픽 콘텐츠를 3차원 영상 형태로 부양(floating)시킨다. 사용자(100)는 제작장치(1)로부터 적당한 거리만큼 이격되어 위치하며, 디스플레이 공간에 부양되는 디지털 홀로그래픽 콘텐츠를 시청하게 된다. 디지털 홀로그래픽 콘텐츠는 디지털 홀로그램 영상을 콘텐츠 형태로 제작한 것인데, 예를 들어 디지털 홀로그램 영상에 청각, 촉각 등의 보조효과들이 더해진 형태이다. 그러나, 본 발명에서는 디지털 홀로그래픽 콘텐츠는 디지털 홀로그램 영상을 포함하여 지칭함을 명시한다.
사용자(100)는 디지털 홀로그래픽 콘텐츠 영상을 보면서 사용자 인터랙션(user interaction)을 통해 실시간으로 디지털 홀로그래픽 콘텐츠 영상을 제작할 수 있다. 이 경우, 사용자(100)는 실시간으로 디지털 홀로그래픽 콘텐츠 제작이 가능하며, 사용자 조작이 반영된 디지털 홀로그래픽 콘텐츠를 확인하면서 동시에 디지털 홀로그래픽 콘텐츠를 제작할 수 있다.
이때, 디지털 홀로그래픽 콘텐츠 제작은 디지털 홀로그래픽 콘텐츠 생성 및 편집을 포함한다. 편집의 예로는 콘텐츠 객체의 이동, 회전, 확대·축소와 같은 변형 등의 조작을 포함한다. 또한, 콘텐츠 객체의 병합, 합성, 분리 등의 다른 객체 간에의 조작도 가능하다. 사용자 인터랙션을 통해 제작되는 디지털 홀로그래픽 콘텐츠 영상은 실시간으로 제작장치(1)의 디스플레이 공간에 표시된다. 한편, 제작장치(1)는 도 1에 도시된 바와 같이 사각형 형태일 수 있으나, 제작장치(1)의 형태는 고정된 것이 아니며 다양한 형태로 변형될 수 있다.
제작장치(1)와 사용자(100) 간의 인터랙션을 통해 제작장치(1)는 사용자(100)의 위치좌표와 동작을 인식한다. 이때, 사용자 공간의 위치좌표와 제작장치(1)의 디스플레이 공간의 위치좌표를 매칭시킨다. 사용자(100)의 위치좌표와 동작을 인식하기 위해서 다양한 센서를 사용할 수 있다. 예를 들어, 동작 감지센서, 이미지 센서, 터치 센서 등을 이용할 수 있다. 사용자(100)와의 인터랙션 예를 들면, 도 1에 도시된 바와 같이 사용자(100)가 손(102)을 이용하여 제작장치(1)의 디스플레이 공간에 부양된 디지털 홀로그래픽 콘텐츠를 직접 만지면서 이동, 회전, 변형 등의 조작이 가능하다. 그러나, 이는 객체와 사용자 간 인터랙션의 일 실시 예를 설명한 것으로, 인터랙션 방법은 이에 한정되지 않고 다양하게 확장하여 적용할 수 있다.
또 다른 예로, 제작장치(1)와 사용자(100) 간의 인터랙션은 사용자(100)의 음성인식을 포함한다. 이 경우, 제작장치(1)는 사용자(100)의 음성을 입력받고, 음성을 분석하여 사용자 명령을 인식하며, 인식된 사용자 명령에 따른 편집 동작, 예를 들어 디지털 홀로그램 영상의 이동, 회전, 변형 등을 수행하게 된다. 가령, 사용자(100)가 '회전'이라는 음성명령을 내리게 되면, 디지털 홀로그램이 회전되어 화면에 표시된다.
도 2는 본 발명의 일 실시 예에 따른 제작장치(1)의 구성도이다.
도 2를 참조하면, 일 실시 예에 따른 제작장치(1)는 디스플레이(10), 인터랙션부(12) 및 제작부(14)를 포함한다.
디스플레이(10)는 디지털 홀로그래픽 콘텐츠를 복원하여 이를 재생한다. 이때, 디스플레이(10)는 디지털 홀로그래픽 콘텐츠를 3차원 디스플레이 공간에 부양한다. 디지털 홀로그램의 복원의 예로는 공간 광 변조기(spatial light modulator)와 같은 소자를 이용한 광학적 복원(optical reconstruction) 등이 있으나 이에 한정되지는 않는다.
사용자(100)는 제작장치(1)의 디스플레이(10)를 통해 부양되는 디지털 홀로그래픽 콘텐츠 영상 객체를 시각적으로 인지한 상태에서, 손으로 객체를 건드리는 행위 등의 인터랙션을 시도한다. 사용자 인터랙션을 위해, 일 실시 예에 따른 인터랙션부(12)는 사용자 공간에 위치하는 사용자(100)의 위치 좌표를 인식하고, 인식된 사용자의 위치 좌표와 디스플레이 공간의 위치 좌표를 정합한다. 그리고, 위치 좌표가 정합된 3차원 공간 내에서 사용자(100)와 디지털 홀로그래픽 콘텐츠 간의 인터랙션 여부를 판단하여 인터랙션에 따른 사용자 명령을 인식한다. 또한, 인터랙션부(12)는 사용자 공간에 위치하는 사용자의 동작을 인식하고 인식된 사용자 동작에 따른 사용자 명령을 인식할 수 있다. 또는 인터랙션부(12)는 사용자의 음성을 통해 사용자 명령을 인식할 수도 있다.
인터랙션부(12)는 사용자와의 인터랙션을 통해 인식된 사용자 명령을 제작부(14)에 전송한다. 제작부(14)는 인터랙션부(12)로부터 수신한 사용자 명령에 따라 디지털 홀로그래픽 콘텐츠를 생성 및 편집한다. 제작부(14)는 제작장치(1)의 내부 프로세서로서, 사용자 명령에 따라 디지털 홀로그래픽 콘텐츠를 편집하기 위한 디지털 홀로그램 데이터 편집 및 디지털 홀로그램 생성용 3D 객체 데이터 편집 등과 같은 계산 기능을 수행한다.
디스플레이(10)는 제작부(14)에서 생성 및 편집된 디지털 홀로그래픽 콘텐츠를 광학적으로 복원하여 사용자가 시각적으로 인지할 수 있도록 3차원 디스플레이 공간에 재생한다.
일 실시 예에 따른 제작장치(1)의 디스플레이(10)는 디스플레이 공간에 디지털 홀로그래픽 콘텐츠 제작을 위한 사용자 인터페이스를 제공한다. 이때, 제작부(14)는 인터랙션부(12)를 통한 사용자 인터페이스와 사용자 간의 인터랙션에 의해 사용자로부터 사용자 명령을 입력받는다. 그리고, 사용자 명령에 따라 디지털 홀로그래픽 콘텐츠를 생성 및 편집한다. 사용자 인터페이스를 이용한 디지털 홀로그래픽 콘텐츠 제작에 대한 실시 예는 도 3에서 후술한다.
도 3은 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠(300) 제작을 위해 사용되는 사용자 인터페이스(310)를 도시한 참조도이다.
도 2 및 3을 참조하면, 제작장치(1)는 디스플레이 공간(30)에 디지털 홀로그래픽 콘텐츠(300)를 표시한다. 그리고, 동시에 사용자와의 인터랙션에 의한 디지털 홀로그래픽 콘텐츠(300)의 생성 및 편집을 위해, 디스플레이 공간(30)에 사용자 인터페이스(310)를 표시한다. 이때, 사용자 인터페이스(310)는 디지털 홀로그래픽 콘텐츠(300)와는 별도로 분리된 디지털 홀로그래픽 콘텐츠 형태일 수 있다. 사용자 인터페이스(310)는 도 3에 도시된 바와 같이 메뉴(menu) 및 상태 바(status bar)일 수 있다.
도 3에 도시된 바와 같이, 디스플레이 공간(30)은 사각 형태의 2차원 평면일 수 있으나, 디지털 홀로그래픽 콘텐츠 영상의 특성상, 디스플레이 공간(30)은 3차원 공간으로 규정된다. 이때, 디스플레이 공간(30)은 광학 복원 방식이나 제작장치(1)의 특성에 따라 다양하게 변화될 수 있다. 디스플레이 공간(30)이 3차원 공간인 경우, 디지털 홀로그래픽 콘텐츠 영상 객체는 3차원 공간에 부양된다.
사용자는 디스플레이 공간(30)에 형성된 사용자 인터페이스(310)와의 인터랙션을 통해 디지털 홀로그래픽 콘텐츠(300)를 생성 및 편집할 수 있다. 편집의 예로는 콘텐츠 객체의 이동, 회전, 확대·축소와 같은 변형 등의 조작을 포함한다. 또한, 콘텐츠 객체의 병합, 합성, 분리 등의 다른 객체 간에의 조작도 가능하다. 사용자 인터페이스(310)를 이용한 디지털 홀로그래픽 콘텐츠(300) 편집 프로세스에 따라, 사용자는 디지털 홀로그래픽 콘텐츠(300)와의 직접적인 인터랙션 뿐만 아니라, 디지털 홀로그래픽 콘텐츠(300) 제작에 필요한 추가 기능들을 사용자 인터페이스(310)를 통해 이용할 수 있게 된다.
도 4는 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 제작방법을 도시한 흐름도이다.
도 2 및 4를 참조하면, 제작장치(1)는 사용자 공간에 위치하는 사용자와 디스플레이 공간 간에 인터랙션(400)을 통해 사용자 명령을 입력받는다. 디스플레이 공간에는 디지털 홀로그래픽 콘텐츠가 재생된다. 나아가, 디스플레이 공간에는 디지털 홀로그래픽 콘텐츠 편집을 위한 사용자 인터페이스가 별도로 표시될 수 있으며, 사용자 인터페이스는 디지털 홀로그래픽 콘텐츠 형태일 수 있다.
일 실시 예에 따른 인터랙션 단계(400)에서, 제작장치(1)는 사용자 공간에 위치하는 사용자의 위치 좌표를 인식한다. 그리고, 인식된 사용자의 위치 좌표와 디스플레이 공간의 위치 좌표를 정합한다. 이어서, 위치 좌표가 정합된 3차원 공간 내에서 사용자와 디지털 홀로그래픽 콘텐츠 간의 인터랙션 여부를 판단하고 인터랙션에 따른 사용자 명령을 인식한다. 다른 실시 예에 따른 인터랙션 단계(400)에서, 제작장치(1)는 사용자 공간에 위치하는 사용자의 동작을 인식하고, 인식된 사용자 동작에 따른 사용자 명령을 인식한다. 또 다른 예에 따른 인터랙션 단계(400)에서, 제작장치(1)는 사용자의 음성으로부터 사용자 명령을 인식한다.
이어서, 제작장치(1)는 디지털 홀로그래픽 콘텐츠를 복원하여 이를 디스플레이 공간에 재생하면서, 동시에 사용자와 디스플레이 공간 간의 인터랙션에 의해 디지털 홀로그래픽 콘텐츠를 실시간으로 제작한다. 그리고, 제작된 디지털 홀로그래픽 콘텐츠를 실시간으로 디지털 홀로그래픽 콘텐츠의 복원 및 재생에 반영한다(410).
일 실시 예에 따른 복원 및 재생에 반영하는 단계(410)에서, 제작장치(1)는 디지털 홀로그래픽 콘텐츠를 디스플레이 공간에 재생하고, 디스플레이 공간에 재생되는 디지털 홀로그래픽 콘텐츠와 사용자 공간에 위치하는 사용자 간의 인터랙션을 통해 디지털 홀로그래픽 콘텐츠를 생성 및 편집한다. 그리고, 생성 및 편집된 디지털 홀로그래픽 콘텐츠를 복원하여 디스플레이 공간에 재생한다.
디지털 홀로그래픽 콘텐츠를 생성 및 편집할 때, 제작장치(1)는 디지털 홀로그래픽 콘텐츠와 사용자 간의 인터랙션에 의해 사용자로부터 입력받은 사용자 명령에 따라 디지털 홀로그래픽 콘텐츠를 생성 및 편집할 수 있다. 또는, 디스플레이 공간에 디지털 홀로그래픽 콘텐츠 제작을 위한 사용자 인터페이스와 사용자 간의 인터랙션에 의해 사용자로부터 입력받은 사용자 명령에 따라 디지털 홀로그래픽 콘텐츠를 생성 및 편집할 수 있다. 사용자 인터페이스는 디지털 홀로그래픽 콘텐츠 형태일 수 있다.
도 5는 본 발명의 일 실시 예에 따른 디지털 홀로그래픽 콘텐츠 소스 데이터 접근 여부에 따른 디지털 홀로그래픽 콘텐츠 제작방법을 도시한 흐름도이다.
도 2 및 5를 참조하면, 제작장치(1)는 사용자 인터랙션(500)에 의해 입력받은 사용자 명령의 종류에 따라 디지털 홀로그래픽 콘텐츠 소스 데이터에 접근할 수 있는지 여부를 판단(510)하여, 판단 결과에 따라 어떠한 방식의 디지털 홀로그래픽 콘텐츠를 생성할지를 결정한다. 디지털 홀로그래픽 콘텐츠 소스 데이터는 3차원 객체 모델 데이터나 다시점 영상 등일 수 있다.
사용자 인터랙션(500)을 통해, 사용자 명령이 디지털 홀로그래픽 콘텐츠 소스 데이터의 생성 및 편집(520)이 필요하다면, 제작장치(1)는 디지털 홀로그래픽 콘텐츠 소스 데이터에 접근하여 디지털 홀로그래픽 콘텐츠 소스 데이터를 편집(520)한 이후 빛의 회절 시뮬레이션 계산 등을 통해 업데이트된 디지털 홀로그래픽 콘텐츠를 생성(530)하고, 생성된 디지털 홀로그래픽 콘텐츠를 디스플레이 공간에 재생한다(540). 이에 비해, 디지털 홀로그래픽 콘텐츠 소스 데이터에 대한 편집이 불필요하면, 디지털 홀로그래픽 콘텐츠를 편집(550)하고, 편집된 디지털 홀로그래픽 콘텐츠를 재생한다(540). 소스 데이터에 대한 편집이 필요하지 않는다면, 편집 없이 디지털 홀로그래픽 콘텐츠를 편집하는 것이 계산 효율성에서 유리하다.
이제까지 본 발명에 대하여 그 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
1: 디지털 홀로그래픽 콘텐츠 제작장치 10: 디스플레이
12: 인터랙션부 14: 제작부
12: 인터랙션부 14: 제작부
Claims (19)
- 사용자와 디스플레이 공간 간에 인터랙션하는 단계; 및
디지털 홀로그래픽 콘텐츠를 복원하여 이를 디스플레이 공간에 재생하면서, 상기 사용자와 디스플레이 공간 간의 인터랙션에 의해 디지털 홀로그래픽 콘텐츠를 실시간으로 제작하고 제작된 디지털 홀로그래픽 콘텐츠를 상기 디지털 홀로그래픽 콘텐츠의 복원 및 재생에 반영하는 단계;
를 포함하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작방법. - 제 1 항에 있어서, 상기 복원 및 재생에 반영하는 단계는,
디지털 홀로그래픽 콘텐츠를 디스플레이 공간에 재생하는 단계;
디스플레이 공간에 재생되는 디지털 홀로그래픽 콘텐츠와 사용자 공간에 위치하는 사용자 간의 인터랙션을 통해 디지털 홀로그래픽 콘텐츠를 생성 및 편집하는 단계; 및
상기 생성 및 편집된 디지털 홀로그래픽 콘텐츠를 복원하여 디스플레이 공간에 재생하는 단계;
를 포함하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작방법. - 제 2 항에 있어서, 상기 디지털 홀로그래픽 콘텐츠를 생성 및 편집하는 단계는,
디지털 홀로그래픽 콘텐츠와 사용자 간의 인터랙션에 의해 사용자로부터 입력받은 사용자 명령에 따라 디지털 홀로그래픽 콘텐츠를 생성 및 편집하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작방법. - 제 2 항에 있어서, 상기 디지털 홀로그래픽 콘텐츠를 생성 및 편집하는 단계는,
디스플레이 공간에 디지털 홀로그래픽 콘텐츠 제작을 위한 사용자 인터페이스를 제공하는 단계; 및
상기 사용자 인터페이스와 사용자 간의 인터랙션에 의해 사용자로부터 입력받은 사용자 명령에 따라 디지털 홀로그래픽 콘텐츠를 생성 및 편집하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작방법. - 제 4 항에 있어서, 상기 사용자 인터페이스를 제공하는 단계는,
사용자 인터페이스를 디지털 홀로그래픽 콘텐츠 형태로 제공하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작방법. - 제 2 항에 있어서, 상기 디지털 홀로그래픽 콘텐츠를 생성 및 편집하는 단계는,
디지털 홀로그래픽 콘텐츠 소스 데이터에 접근하여 디지털 홀로그래픽 콘텐츠 소스 데이터를 편집한 이후 이를 이용하여 디지털 홀로그래픽 콘텐츠를 생성하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작방법. - 제 2 항에 있어서, 상기 디지털 홀로그래픽 콘텐츠를 생성 및 편집하는 단계는,
디지털 홀로그래픽 콘텐츠 소스 데이터에 대한 편집이 불필요하면, 소스 데이터 편집 없이 디지털 홀로그래픽 콘텐츠를 편집하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작방법. - 제 1 항에 있어서, 상기 인터랙션하는 단계는,
사용자 공간에 위치하는 사용자의 위치 좌표를 인식하는 단계;
인식된 사용자의 위치 좌표와 디스플레이 공간의 위치 좌표를 정합하는 단계; 및
상기 위치 좌표가 정합된 3차원 공간 내에서 사용자와 디지털 홀로그래픽 콘텐츠 간의 인터랙션 여부를 판단하고 인터랙션에 따른 사용자 명령을 인식하는 단계;
를 포함하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작방법. - 제 1 항에 있어서, 상기 인터랙션하는 단계는,
사용자 공간에 위치하는 사용자의 동작을 인식하는 단계; 및
상기 인식된 사용자 동작에 따른 사용자 명령을 인식하는 단계;
를 포함하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작방법. - 제 1 항에 있어서, 상기 인터랙션하는 단계는,
사용자의 음성에 의한 명령을 인식하고,
상기 복원 및 재생에 반영하는 단계는,
상기 인식된 사용자의 음성 명령에 따라 디지털 홀로그래픽 콘텐츠를 편집하고 편집된 디지털 홀로그래픽 콘텐츠를 디지털 홀로그래픽 콘텐츠의 복원 및 재생에 반영하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작방법. - 디스플레이 공간에 디지털 홀로그래픽 콘텐츠를 표시하는 단계; 및
사용자와의 인터랙션에 의한 디지털 홀로그래픽 콘텐츠 생성 및 편집을 위해 제공되는 사용자 인터페이스를 디스플레이 공간에 표시하는 단계;
를 포함하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제공방법. - 제 11 항에 있어서, 상기 사용자 인터페이스를 디스플레이 공간에 표시하는 단계는,
디지털 홀로그래픽 콘텐츠를 생성 및 편집하기 위한 사용자 인터페이스를, 별도의 디지털 홀로그래픽 콘텐츠 형태로 디스플레이 공간에 표시하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제공방법. - 제 11 항에 있어서,
상기 사용자 인터페이스는 디지털 홀로그래픽 콘텐츠 생성 및 편집을 위한 메뉴 및 상태 바(bar)인 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제공방법. - 제 11 항에 있어서, 상기 디지털 홀로그래픽 콘텐츠 제공방법은,
상기 사용자 인터페이스를 이용하여 사용자와 디스플레이 공간 간의 인터랙션에 의해 디지털 홀로그래픽 콘텐츠를 생성 및 편집하는 단계; 및
상기 생성 및 편집된 디지털 홀로그래픽 콘텐츠를 복원하여 디스플레이 공간에 표시하는 단계;
를 더 포함하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제공방법. - 사용자와 디스플레이 공간 간에 인터랙션하는 인터랙션부;
디지털 홀로그래픽 콘텐츠를 복원하여 이를 디스플레이 공간에 재생하는 디스플레이; 및
상기 인터랙션부의 인터랙션에 의해 디지털 홀로그래픽 콘텐츠를 실시간으로 제작하고 제작된 디지털 홀로그래픽 콘텐츠를 상기 디스플레이에 제공하는 제작부;
를 포함하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작장치. - 제 15 항에 있어서, 인터랙션부는,
사용자 공간에 위치하는 사용자의 위치 좌표를 인식하고, 인식된 사용자의 위치 좌표와 디스플레이 공간의 위치 좌표를 정합하며, 위치 좌표가 정합된 3차원 공간 내에서 사용자와 디지털 홀로그래픽 콘텐츠 간의 인터랙션 여부를 판단하여 인터랙션에 따른 사용자 명령을 인식하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작장치. - 제 15 항에 있어서, 인터랙션부는,
사용자 공간에 위치하는 사용자의 동작을 인식하고 상기 인식된 사용자 동작에 따른 사용자 명령을 인식하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작장치. - 제 15 항에 있어서, 제작부는,
디지털 홀로그래픽 콘텐츠와 사용자 간의 인터랙션에 의해 사용자로부터 입력받은 사용자 명령에 따라 디지털 홀로그래픽 콘텐츠를 생성 및 편집하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작장치. - 제 15 항에 있어서, 제작부는,
사용자 인터페이스와 사용자 간의 인터랙션에 의해 사용자로부터 입력받은 사용자 명령에 따라 디지털 홀로그래픽 콘텐츠를 생성 및 편집하는 것을 특징으로 하는 디지털 홀로그래픽 콘텐츠 제작장치.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020140006897A KR20150086815A (ko) | 2014-01-20 | 2014-01-20 | 사용자 인터랙션 기반의 디지털 홀로그래픽 콘텐츠 제공방법, 제작방법 및 그 장치 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020140006897A KR20150086815A (ko) | 2014-01-20 | 2014-01-20 | 사용자 인터랙션 기반의 디지털 홀로그래픽 콘텐츠 제공방법, 제작방법 및 그 장치 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20150086815A true KR20150086815A (ko) | 2015-07-29 |
Family
ID=53876276
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020140006897A KR20150086815A (ko) | 2014-01-20 | 2014-01-20 | 사용자 인터랙션 기반의 디지털 홀로그래픽 콘텐츠 제공방법, 제작방법 및 그 장치 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20150086815A (ko) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102371330B1 (ko) * | 2020-11-26 | 2022-03-08 | 주식회사 빔인터랙티브 | 스마트 미니 인터액티브 극장. |
| KR20230099586A (ko) | 2021-12-27 | 2023-07-04 | 광운대학교 산학협력단 | 홀로그래픽 스테레오그램 사진 인쇄를 위한 웹 서버 기반 동영상 콘텐츠 제작 시스템 및 방법 |
-
2014
- 2014-01-20 KR KR1020140006897A patent/KR20150086815A/ko not_active Application Discontinuation
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102371330B1 (ko) * | 2020-11-26 | 2022-03-08 | 주식회사 빔인터랙티브 | 스마트 미니 인터액티브 극장. |
| KR20230099586A (ko) | 2021-12-27 | 2023-07-04 | 광운대학교 산학협력단 | 홀로그래픽 스테레오그램 사진 인쇄를 위한 웹 서버 기반 동영상 콘텐츠 제작 시스템 및 방법 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Shi et al. | Towards real-time photorealistic 3D holography with deep neural networks | |
| US10664218B2 (en) | Holographic augmented authoring | |
| KR101859774B1 (ko) | 디지털 홀로그래픽 콘텐츠 제작 시스템 | |
| US20170200312A1 (en) | Updating mixed reality thumbnails | |
| US20170329503A1 (en) | Editing animations using a virtual reality controller | |
| CN110673716B (zh) | 智能终端与用户交互的方法、装置、设备及存储介质 | |
| CN106502377A (zh) | 移动终端及其控制方法 | |
| CN107850867A (zh) | 动态全息聚焦深度打印装置 | |
| JP7422876B2 (ja) | 拡張現実に基づいた表示方法及び装置、並びに記憶媒体 | |
| US20150146269A1 (en) | Holographic content providing method, and holographic content providing apparatus and display apparatus using the method | |
| KR100973031B1 (ko) | 룩업 테이블과 영상의 시간적 중복성을 이용한 3차원 동영상 컴퓨터 형성 홀로그램 생성 방법 및 그 장치 | |
| KR20200104068A (ko) | 딥러닝 기반 디지털 홀로그램을 생성하는 방법 및 장치 | |
| KR101021127B1 (ko) | 룩업 테이블과 영상의 공간적 중복성을 이용한 컴퓨터 형성 홀로그램 산출 방법 및 그 장치 | |
| CN102591123A (zh) | 一种实时三维显示装置及显示方法 | |
| KR20150086815A (ko) | 사용자 인터랙션 기반의 디지털 홀로그래픽 콘텐츠 제공방법, 제작방법 및 그 장치 | |
| KR100910642B1 (ko) | 홀로그래피 기법에 의해 획득된 영상의 3차원 집적 영상복원 방법 및 장치 | |
| Trolinger | The language of holography | |
| KR20150061550A (ko) | 홀로그래픽 콘텐츠 제공 방법 및 상기 방법을 이용하는 홀로그래픽 콘텐츠 제공 장치, 디스플레이 장치 | |
| KR20130085553A (ko) | 프로젝션 기반의 디지털 홀로그램 디스플레이 시스템 및 그 방법 | |
| Puget et al. | Rapid prototyping of immersive video for popularization of historical knowledge | |
| KR20230096591A (ko) | 조종 가능한 실감 영상 콘텐츠의 생성 방법 및 이의 모션 시뮬레이션 시스템 | |
| Edwards | Holograms on the horizon? | |
| Thies | Face2Face: Real-time facial reenactment | |
| Leandro Parreira Duarte et al. | Coarticulation and speech synchronization in MPEG-4 based facial animation | |
| JP2002354598A (ja) | 音声空間情報付加装置および方法、記録媒体、並びにプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| WITN | Withdrawal due to no request for examination |