KR200448452Y1 - Hologram presentation apparatus using gesture - Google Patents

Hologram presentation apparatus using gesture Download PDF

Info

Publication number
KR200448452Y1
KR200448452Y1 KR2020090010738U KR20090010738U KR200448452Y1 KR 200448452 Y1 KR200448452 Y1 KR 200448452Y1 KR 2020090010738 U KR2020090010738 U KR 2020090010738U KR 20090010738 U KR20090010738 U KR 20090010738U KR 200448452 Y1 KR200448452 Y1 KR 200448452Y1
Authority
KR
South Korea
Prior art keywords
content
presentation
gesture
presenter
hologram
Prior art date
Application number
KR2020090010738U
Other languages
Korean (ko)
Inventor
김준희
구자민
Original Assignee
(주)디스트릭트홀딩스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)디스트릭트홀딩스 filed Critical (주)디스트릭트홀딩스
Priority to KR2020090010738U priority Critical patent/KR200448452Y1/en
Application granted granted Critical
Publication of KR200448452Y1 publication Critical patent/KR200448452Y1/en

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • G06F3/0423Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen using sweeping light beams, e.g. using rotating or vibrating mirror

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 고안은 프레젠테이션 장치에 관한 것으로, 발표자의 제스쳐를 인식하는 제스쳐 인식부; 상기 발표자와 관객석 사이에 설치되는 포일; 상기 포일에 홀로그램을 출사하여 홀로그램을 형성하는 홀로그램 출력장치; 메인 콘텐츠와 서브 콘텐츠로 구성되는 프레젠테이션 콘텐츠 정보를 저장하는 저장매체; 상기 발표자의 프레젠테이션 개시를 요청하는 제스쳐에 따라 상기 프레젠테이션 콘텐츠 정보를 상기 저장매체에서 독출하여 상기 홀로그램 출력장치를 통해 출력함과 아울러, 미리 정해둔 패턴들에 대응되는 발표자의 콘텐츠 제어용 제스쳐들을 인식하고, 상기 콘텐츠 제어용 제스쳐들 중 어느 하나가 인식될 때마다 상기 출력중인 프레젠테이션 콘텐츠 정보가 메인 콘텐츠인지 서브 콘텐츠인지를 체크하고, 상기 출력중인 프레젠테이션 콘텐츠 정보가 메인 콘텐츠이면 상기 제스쳐에 대응되게 미리 정해둔 메인 콘텐츠 제어명령을 검출하고, 상기 메인 콘텐츠 제어명령에 따른 동작을 이행하고, 상기 출력중인 프레젠테이션 콘텐츠 정보가 서브 콘텐츠이면 상기 제스쳐에 대응되게 미리 정해둔 서브 콘텐츠 제어명령을 검출하고, 상기 서브 콘텐츠 제어명령에 따른 동작을 이행하는 제어장치;로 구성된다.

Figure R2020090010738

프레젠테이션, 제스쳐, 입체영상

The present invention relates to a presentation device, the gesture recognition unit for recognizing the gesture of the presenter; A foil installed between the presenter and the audience seat; A hologram output device that forms a hologram by emitting a hologram on the foil; A storage medium storing presentation content information including main content and sub content; Read out the presentation content information from the storage medium according to a gesture for requesting the presentation of the presenter and output it through the hologram output device, and recognize the presenter's content control gestures corresponding to predetermined patterns; Whenever one of the content control gestures is recognized, it is checked whether the output presentation content information is main content or sub content, and if the output presentation content information is main content, the predetermined main content corresponding to the gesture is preset. Detects a control command, performs an operation according to the main content control command; if the output presentation content information is sub content, detects a predetermined sub content control command corresponding to the gesture; It consists of; control device for implementing the operation according to the command.

Figure R2020090010738

Presentation, Gestures, Stereoscopic Image

Description

제스쳐를 이용한 홀로그램 프레젠테이션 장치{Hologram presentation apparatus using gesture}Hologram presentation apparatus using gestures

본 고안은 프레젠테이션 기술에 관한 것으로, 더욱 상세하게는 메인 콘텐츠와 그에 속하는 하나 이상의 서브 콘텐츠로 구성되는 프레젠테이션 콘텐츠를 이용하여 프레젠테이션을 이행하며, 프레젠테이션의 이행 중 발표자의 제스쳐가 인식되면 구동되는 콘텐츠가 메인 콘텐츠 또는 서브 콘텐츠인지 여부에 따라 상이한 명령으로 처리하여, 소수의 제스쳐로 다양한 명령을 구사할 수 있는 제스쳐를 이용한 홀로그램 프레젠테이션 장치에 관한 것이다. The present invention relates to a presentation technology, and more particularly, a presentation is performed using a presentation content consisting of a main content and one or more sub-contents belonging to the presentation content, and the content driven when the gesture of the presenter is recognized during the presentation is performed. The present invention relates to a hologram presentation apparatus using a gesture capable of processing various commands with a few gestures according to whether the content or sub-content is different.

통상적인 프레젠테이션에서는 발표자가 프레젠테이션 자료를 컴퓨터 모니터 상에 표시하거나 프로젝터(projector) 등을 통해 대형 스크린에 투사시켜서 청중들에게 보여주고, 표시되는 프레젠테이션 자료 영상 부근에서 지시봉이나 레이저 포인터(laser pointer) 등을 사용하여, 프레젠테이션 자료 영상 중 특정 부분을 가리키면서 설명한다. 또한, 발표자는 프레젠테이션 자료의 페이지를 넘기거나 프레젠테이션 자료에 포함된 비디오 또는 파일 등과 같은 대상체(object)를 실행시키기 위해 컴퓨터를 직접 조작함으로써 컴퓨터와 인터액션 한다. 최근에는, 무선 마우스 나 리모컨(remote controller)으로 컴퓨터와 어느 정도 이격되어 인터액션을 수행하기도 한다. In a typical presentation, the presenter displays the presentation material on a computer monitor or projects it on a large screen through a projector, etc., to the audience, and displays a pointer rod or laser pointer near the displayed presentation material image. Use it to point out specific parts of the presentation. In addition, the presenter interacts with the computer by directly manipulating the computer to turn pages of the presentation material or to execute an object such as a video or a file included in the presentation material. Recently, a wireless mouse or a remote controller is used to remotely interact with the computer to some extent.

그러나 이러한 종래기술에 따른 프레젠테이션 방식은 발표자가 수행할 수 있는 인터액션이 제한적이고 컴퓨터를 사용하지 않고 하는 프리젠테이션보다 그 진행이나 인터액션이 자연스럽지 않다는 문제점이 있었다. However, there is a problem in that the presentation method according to the related art has a limited interaction that the presenter can perform and the progress or interaction is not natural than the presentation that does not use a computer.

이에 종래에는 발표자가 실시간으로 프레젠테이션 자료 영상과 직접 제스쳐 또는/및 음성을 통해 다양한 인터액션을 하면서 발표자가 프레젠테이션을 수행할 수 있는 인터액티브 프레젠테이션 시스템을 제안하기에 이르렀으며, 이는 능동 적외선 카메라와; 상기 능동 적외선 카메라와 연결된 명령 인식 시스템과; 그리고 능동 적외선 카메라 및 명령 인식 시스템과 연결된 영상 합성 시스템을 포함하여 구성되며, 발표자를 3차원 영상에 적절히 합성하기 위한 스테레오 카메라 셋트와 3차원 움직임 시스템을 구비하기도 하였다. Accordingly, in the related art, the presenter has proposed an interactive presentation system in which the presenter can perform a presentation while performing various interactions through direct gesture and / or voice with the presentation material image in real time, including an active infrared camera; A command recognition system connected to the active infrared camera; In addition, it consists of an active infrared camera and an image synthesizing system connected to a command recognition system, and has a stereo camera set and a three-dimensional motion system for properly synthesizing the presenter with three-dimensional images.

그러나 상기한 능동 적외선 카메라를 이용한 방법은 다수의 명령을 구사하기 위해서는 그에 대응되는 제스쳐를 구비하여야 하므로, 많은 수의 제스쳐를 인식하고 처리하기 위한 프로세스가 복잡한 문제가 있었다.However, since the method using the active infrared camera has to have a corresponding gesture in order to use a plurality of commands, the process for recognizing and processing a large number of gestures has a complicated problem.

본 고안은 메인 콘텐츠와 그에 속하는 하나 이상의 서브 콘텐츠로 구성되는 프레젠테이션 콘텐츠를 이용하여 프레젠테이션을 이행하며, 프레젠테이션의 이행 중 발표자의 제스쳐가 인식되면 구동되는 콘텐츠가 메인 콘텐츠 또는 서브 콘텐츠인지 여부에 따라 상이한 명령으로 처리하여, 소수의 제스쳐로 다양한 명령을 구사할 수 있는 제스쳐를 이용한 홀로그램 프레젠테이션 장치를 제공하는 것을 그 목적으로 한다. The present invention implements a presentation using a presentation content consisting of the main content and one or more sub-contents belonging to the present content. If the presenter's gesture is recognized during the execution of the presentation, the command is different depending on whether the driven content is the main content or the sub content. It is an object of the present invention to provide a hologram presentation apparatus using a gesture capable of using various gestures with a few gestures.

상기한 목적을 달성하기 위한 본 고안에 따르는 제스쳐를 이용한 홀로그램 프레젠테이션 장치는, 발표자의 제스쳐를 인식하는 제스쳐 인식부; 상기 발표자와 관객석 사이에 설치되는 포일; 상기 포일에 홀로그램을 출사하여 홀로그램을 형성하는 홀로그램 출력장치; 메인 콘텐츠와 서브 콘텐츠로 구성되는 프레젠테이션 콘텐츠 정보를 저장하는 저장매체; 상기 발표자의 프레젠테이션 개시를 요청하는 제스쳐에 따라 상기 프레젠테이션 콘텐츠 정보를 상기 저장매체에서 독출하여 상기 홀로그램 출력장치를 통해 출력함과 아울러, 미리 정해둔 패턴들에 대응되는 발표자의 콘텐츠 제어용 제스쳐들을 인식하고, 상기 콘텐츠 제어용 제스쳐들 중 어느 하나가 인식될 때마다 상기 출력중인 프레젠테이션 콘텐츠 정보가 메인 콘텐츠인지 서브 콘텐츠인지를 체크하고, 상기 출력중인 프레젠테이션 콘텐츠 정보가 메인 콘텐츠이면 상기 제스쳐에 대응되게 미리 정해둔 메인 콘텐츠 제어명령을 검출하고, 상기 메인 콘텐츠 제어명령에 따른 동작을 이행하고, 상기 출력중인 프레젠테이션 콘텐츠 정보가 서브 콘텐츠이면 상기 제스쳐에 대응되게 미리 정해둔 서브 콘텐츠 제어명령을 검출하고, 상기 서브 콘텐츠 제어명령에 따른 동작을 이행하는 제어장치;로 구성된다. Hologram presentation device using a gesture according to the present invention for achieving the above object, the gesture recognition unit for recognizing the gesture of the presenter; A foil installed between the presenter and the audience seat; A hologram output device that forms a hologram by emitting a hologram on the foil; A storage medium storing presentation content information including main content and sub content; Read out the presentation content information from the storage medium according to a gesture for requesting the presentation of the presenter and output it through the hologram output device, and recognize the presenter's content control gestures corresponding to predetermined patterns; Whenever one of the content control gestures is recognized, it is checked whether the output presentation content information is main content or sub content, and if the output presentation content information is main content, the predetermined main content corresponding to the gesture is preset. Detects a control command, performs an operation according to the main content control command; if the output presentation content information is sub content, detects a predetermined sub content control command corresponding to the gesture; Control device for performing the operation according to the command.

상기한 본 고안은 메인 콘텐츠와 그에 속하는 하나 이상의 서브 콘텐츠로 구성되는 프레젠테이션 콘텐츠를 이용하여 프레젠테이션을 이행하며, 프레젠테이션의 이행 중 발표자의 제스쳐가 인식되면 구동되는 콘텐츠가 메인 콘텐츠 또는 서브 콘텐츠인지 여부에 따라 상이한 명령어로 처리함으로써, 소수의 제스쳐로 다양한 명령을 구사할 수 있다. 이에 제스쳐 인식을 위한 처리 프로세스를 간소화할 수 있음은 물론이며 발표자도 손쉽게 제스쳐를 숙지할 수 있는 효과가 있다. The present invention implements a presentation using a presentation content consisting of the main content and one or more sub-contents belonging to the main content, and if the presenter's gesture is recognized during the execution of the presentation, the content to be driven is the main content or the sub-content. By processing with different instructions, you can speak various instructions with a few gestures. This not only simplifies the processing process for gesture recognition, but also makes it easy for presenters to learn gestures.

<제1실시예>First Embodiment

도 1은 본 고안의 바람직한 제1실시예에 따른 프레젠테이션 장치의 설치예를 도시한 것이고, 도 2는 본 고안의 바람직한 제1실시예에 따른 프레젠테이션 장치의 블럭구성도를 도시한 것이고, 도 3은 IR LED 바 장치(114), IR 촬상장치(116)의 동작을 개략적으로 도시한 것이다. Figure 1 shows an installation example of a presentation device according to a first embodiment of the present invention, Figure 2 shows a block diagram of a presentation device according to a first embodiment of the present invention, Figure 3 The operation of the IR LED bar device 114 and the IR imaging device 116 is schematically illustrated.

상기한 도 1 내지 도 3을 참조하여 본 고안의 바람직한 제1실시예에 따른 프레젠테이션 장치의 구성을 상세히 설명한다. 1 to 3 will be described in detail the configuration of the presentation device according to a first embodiment of the present invention.

상기 프레젠테이션 장치는 제어장치(200), IR LED 바 장치(114), IR 촬상장 치(116), 제1디스플레이 장치(106), 제2디스플레이 장치(108), 제1촬상장치(206), 제2촬상장치(208), 홀로그램 출력장치(202), 포일(104), 저장매체(204), 제1프롬프터(110), 제2프롬프터(112)로 구성된다. The presentation device includes a control device 200, an IR LED bar device 114, an IR imaging device 116, a first display device 106, a second display device 108, a first imaging device 206, The second imaging device 208, the hologram output device 202, the foil 104, the storage medium 204, the first prompter 110, and the second prompter 112.

상기 포일(104)은 Musion Systems Ltd. 사의 포일로서, 관객석(102)과 발표자 사이에 설치되어, 홀로그램 출력장치(202)로부터 출사되는 홀로그램을 위한 광의 상을 맺혀 입체영상이 표시되게 한다. The foil 104 is made by Musion Systems Ltd. As a foil of a yarn, it is provided between the audience seat 102 and the presenter, and forms a three-dimensional image by forming an image of light for the hologram emitted from the hologram output device 202.

상기 홀로그램 출력장치(202)는 상기 제어장치(200)의 제어에 따른 홀로그램을 형성하기 위한 광을 상기 포일(104)로 조사한다. The hologram output device 202 irradiates the foil 104 with light for forming a hologram under the control of the control device 200.

상기 제1 및 제2촬상장치(206,208)는 상기 포일(104)을 사이에 두고 상기 관객석(102) 측에 설치되어 상기 발표자에 대향되게 촬상을 이행하며, 상기 포일(104)에 출사되는 홀로그램 및 발표자를 촬상하고, 그 촬상영상을 상기 제어장치(200)를 통해 상기 제1 및 제2디스플레이 장치(106,108)를 통해 출력하여, 상기 발표자가 프레젠테이션을 이행하는 동안에 관객이 보게 되는 프레젠테이션 상태 및 자신의 모습을 인지할 수 있게 한다. The first and second imaging apparatuses 206 and 208 are installed on the audience seat 102 side with the foil 104 interposed therebetween, and perform holographic imaging opposite to the presenter, and the holograms emitted from the foil 104; The presenter photographs the presenter, and outputs the captured image through the control device 200 through the first and second display devices 106 and 108 so that the presenter can see the presenter while the presenter performs the presentation and his / her own presentation. Make it visible.

상기 제1 및 제2디스플레이 장치(106,108)는 발표자의 전면에 설치되어 제어장치(200)의 제어에 따라 상기 제1 및 제2촬상장치(206,208)가 촬상한 촬상정보를 출력한다. The first and second display devices 106 and 108 are installed in front of the presenter and output imaging information captured by the first and second imaging devices 206 and 208 under the control of the control device 200.

상기 IR LED 바 장치(114)는 발표자의 전방 하면에 일렬로 배열된 IR LED 들로 구성되며, 상기 제어장치(200)의 제어에 따라 도 3에 도시한 바와 같이 발표자의 전방에 대해 하측에서 상측으로의 수직방향으로 IR 광을 조사하여, 상기 발표자 가 내민 손에 의해 IR 광이 반사될 수 있게 설치된다. The IR LED bar device 114 is composed of IR LEDs arranged in a line on the front lower surface of the presenter, and as shown in FIG. 3 under the control of the controller 200, from the lower side to the upper side of the presenter. By irradiating the IR light in the vertical direction to the direction, the presenter is installed so that the IR light can be reflected by the intrusive hand.

상기 IR 촬상장치(116)는 상기 발표자에 대향되게 설치되어 촬상을 이행하여, 도 3에 도시한 바와 같이 상기 IR LED 바 장치(114)가 조사한 IR 광이 발표자가 내민 손에 의해 반사되는 것을 촬상하고, 그 촬상정보를 상기 제어장치(200)에 제공한다. The IR imaging device 116 is installed to face the presenter to perform imaging, and as shown in FIG. 3, the IR light irradiated by the IR LED bar device 114 is reflected by the presenter's hand. Then, the captured image information is provided to the control device 200.

상기 저장매체(204)는 상기 제어장치(200)의 제어 프로그램을 포함하는 다양한 정보를 저장하며, 본 고안에 따라 메인 콘텐츠와 그에 속하는 하나 이상의 서브 콘텐츠로 구성되는 프레젠테이션 콘텐츠 정보를 저장하고, IR 촬상장치(116)가 제공하는 촬상정보로부터 본 고안에 따른 프레젠테이션 콘텐츠 개시를 위한 제스쳐 및 콘텐츠 제어를 위한 제1 내지 제7제스쳐를 인식하기 위한 제스쳐 정보를 저장하고, 상기 제1 내지 제7제스쳐 중 메인 콘텐츠와 서브 콘텐츠에서 사용되는 제스쳐들에 대해서는 제스쳐별로 메인 콘텐츠 제어명령과 서브 콘텐츠 제어명령을 맵핑한 테이블을 구비한다. 이 테이블은 현재 구동중인 콘텐츠가 메인 콘텐츠인지 서브 콘텐츠인지 여부에 따라 각기 다른 콘텐츠 제어명령을 검출하기 위한 것이다.The storage medium 204 stores various information including the control program of the control device 200, and stores the presentation content information consisting of the main content and one or more sub-contents belonging thereto according to the present invention, IR imaging Storing the gesture information for starting the presentation content and the first to seventh gestures for content control from the image information provided by the device 116, and the main one of the first to seventh gestures. For the gestures used in the content and the sub content, a table in which the main content control command and the sub content control command are mapped for each gesture is provided. This table is for detecting different content control commands depending on whether the currently running content is main content or sub content.

상기 제1 및 제2프롬프터(110,112)는 관객석(102)의 양측면 또는 천장에 설치되며, 상기 제어장치(200)의 제어에 따라 발표자에게 발표내용을 출력하여 안내한다. The first and second prompters 110 and 112 are installed at both sides or the ceiling of the audience seat 102, and guide and output the presentation contents to the presenter according to the control of the control device 200.

상기한 본 고안의 바람직한 제1실시예에 따른 프레젠테이션 장치의 동작을 도 4a 및 도 4b를 참조하여 상세히 설명한다. The operation of the presentation device according to the first embodiment of the present invention described above will be described in detail with reference to FIGS. 4A and 4B.

상기 제어장치(200)는 발표자가 IR LED 바 장치(114)에 한 손을 내밀어 원 포인트를 생성하거나 두 손을 내밀어 투 포인트를 생성하면, 프레젠테이션을 시작한다(300,302단계). 상기 프레젠테이션의 시작시에는 프레젠테이션 콘텐츠를 재생함과 아울러 제1 및 제2프롬프터(110,112)를 통해 발표자의 대사를 표시하며, 제1 및 제2촬상장치(206,208)를 통해 관객석(102) 측에서 발표자 및 프레젠테이션 콘텐츠를 촬상한 정보를 획득하여 제1 및 제2디스플레이 장치(106,108)를 통해 출력하여 발표자가 자신의 프레젠테이션 모습을 확인할 수 있게 한다. 그리고 도 5는 원 포인트 및 투 포인트에 따라 메인 콘텐츠를 개시함과 아울러 빛을 출력하면서 프레젠테이션의 개시를 관객에게 안내하는 예를 도시한 것이다. The control device 200 starts the presentation when the presenter reaches out to the IR LED bar device 114 to generate one point or two hands to generate two points (step 300, 302). At the beginning of the presentation, the presentation content is played and the presenter's lines are displayed through the first and second prompters 110 and 112, and the presenter is present at the audience seat 102 through the first and second imaging devices 206 and 208. And acquiring photographed information of the presentation content and outputting the information through the first and second display devices 106 and 108 so that the presenter can check his or her presentation. 5 shows an example of guiding the start of a presentation to the audience while outputting light while starting main content according to one point and two points.

이후 상기 제어장치(200)는 발표자가 IR LED 바 장치(114)에 한 손을 내밀어 원 포인트를 생성한 상태에서 수평이동을 하는 제1제스쳐가 인식되는지를 체크한다(304단계). 상기 제1제스쳐가 인식되면, 상기 제어장치(200)는 프레젠테이션 콘텐츠 중 메인 콘텐츠가 구동중인지 서브 콘텐츠가 구동중인지를 체크한다(306단계). 상기 메인 콘텐츠가 구동중이면 상기 제어장치(200)는 메인 콘텐츠를 제1제스쳐에 대응되는 제어명령에 따라 제어한다(308단계). 상기 제1제스쳐에 대응되는 메인 콘텐츠 제어명령은, 예를들어 도 6과 도 7에 도시한 바와 같이 메인 콘텐츠에 따라 화면에 표시된 구성요소들을 수평 이동하는 것 등이 될 수 있다. 상기한 바와 다르게 상기 제어장치(200)는 프레젠테이션 콘텐츠 중 서브 콘텐츠가 구동중인 상태에서 상기 제1제스쳐가 인식되면, 상기 제어장치(200)는 서브 콘텐츠를 제1제스쳐에 대응되는 제어명령에 따라 제어한다(310단계). 상기 제1제스쳐에 대응되는 서브 콘텐츠 제어명령은, 예를들어 도 8에 도시한 바와 같이 핸드폰 내의 창을 수평이동하 는 것 등이 될 수 있다. Thereafter, the control device 200 checks whether the presenter makes a horizontal gesture while the presenter reaches out to the IR LED bar device 114 by generating one point and recognizes the first gesture for moving horizontally (step 304). When the first gesture is recognized, the control device 200 checks whether the main content or the sub content of the presentation content is being driven (step 306). If the main content is running, the control device 200 controls the main content according to a control command corresponding to the first gesture (step 308). The main content control command corresponding to the first gesture may be, for example, horizontally moving the components displayed on the screen according to the main content as illustrated in FIGS. 6 and 7. Unlike the above description, when the first gesture is recognized while the sub content of the presentation content is being driven, the control device 200 controls the sub content according to a control command corresponding to the first gesture. (Step 310). The sub content control command corresponding to the first gesture may be, for example, horizontally moving a window in the mobile phone as illustrated in FIG. 8.

또한 상기 제어장치(200)는 발표자가 메인 콘텐츠의 구동 중에 IR LED 바 장치(114)에 두 손을 내밀어 투 포인트를 생성한 상태에서 투 포인트를 이격시키거나 접근시키는 제2제스쳐가 인식되는지를 체크한다(312단계). 상기 제2제스쳐가 인식되면, 상기 제어장치(200)는 메인 콘텐츠를 제2제스쳐에 대응되는 제어명령에 따라 제어한다(314단계). 상기 제2제스쳐에 대응되는 메인 콘텐츠 제어명령은, 예를들어 도 9에 도시한 바와 같이 메인 콘텐츠에 포함된 서브 콘텐츠내의 영상을 인출 또는 인입하는 것 등이 될 수 있다. In addition, the controller 200 checks whether the presenter recognizes a second gesture that spaces or approaches the two points while the presenter reaches out to the IR LED bar device 114 while generating two points while driving the main content. (Step 312). When the second gesture is recognized, the control device 200 controls the main content according to a control command corresponding to the second gesture (step 314). The main content control command corresponding to the second gesture may be, for example, drawing or fetching an image in the sub content included in the main content as illustrated in FIG. 9.

또한 상기 제어장치(200)는 발표자가 서브 콘텐츠의 구동중에 IR LED 바 장치(114)에 한 손을 내밀어 원 포인트를 생성하는 제3제스쳐가 인식되는지를 체크한다(316단계). 상기 제3제스쳐가 인식되면, 상기 제어장치(200)는 서브 콘텐츠를 제3제스쳐에 따른 제어명령에 따라 제어한다(318단계). 상기 제3제스쳐에 따른 제어명령은 도 10에 도시한 바와 같이 핸드폰의 동작상태를 나타내는 서브 콘텐츠의 빠른 이동을 일시정지시키는 것 등이 될 수 있다. In addition, the controller 200 checks whether the presenter's third gesture for generating the one point is reached by reaching out to the IR LED bar device 114 while the sub content is being driven (step 316). When the third gesture is recognized, the control device 200 controls the sub content according to a control command according to the third gesture (step 318). As shown in FIG. 10, the control command according to the third gesture may be to pause a rapid movement of the sub content indicating the operation state of the cellular phone.

또한 상기 제어장치(200)는 발표자가 서브 콘텐츠의 구동 중에 IR LED 바 장치(114)에 한 손을 내밀었다가 뺐다가를 반복하여 원 포인트를 점멸시키는 제4제스쳐가 인식되는지를 체크한다(320단계). 상기 제4제스쳐가 인식되면, 상기 제어장치(200)는 서브 콘텐츠를 제4제스쳐에 따른 제어명령에 따라 제어한다(322단계). 상기 제4제스쳐에 따른 제어명령은 도 11에 도시한 바와 같이 핸드폰에 구비되는 큐브형 UI를 제어하는 것 등이 될 수 있다.In addition, the controller 200 checks whether the presenter makes a fourth gesture of blinking the one point by repeatedly reaching and releasing one hand to the IR LED bar device 114 while driving the sub content (320). step). When the fourth gesture is recognized, the control device 200 controls the sub content according to the control command according to the fourth gesture (step 322). As illustrated in FIG. 11, the control command according to the fourth gesture may be controlling a cube UI provided in the mobile phone.

또한 상기 제어장치(200)는 발표자가 서브 콘텐츠의 구동 중에 IR LED 바 장치(114)에 한 손을 내민 후에 빠르게 오른쪽 또는 왼쪽으로 이동함에 따라 원 포인트의 빠른 이동 즉 스냅동작에 대응되는 제5제스쳐가 인식되는지를 체크한다(324단계). 상기 제5제스쳐가 인식되면, 상기 제어장치(200)는 서브 콘텐츠를 제5제스쳐에 따른 제어명령에 따라 제어한다(326단계). 상기 제5제스쳐에 따른 제어명령은 도 12에 도시한 바와 같이 핸드폰에 구비되는 UI를 제어하여 뮤직 플레이를 하는 것 등이 될 수 있다. In addition, the control device 200 is a fifth gesture corresponding to a quick movement of one point, that is, a snap action as the presenter quickly moves to the right or left after reaching one hand to the IR LED bar device 114 while driving the sub content. It is checked whether is recognized (step 324). When the fifth gesture is recognized, the control device 200 controls the sub content according to a control command according to the fifth gesture (step 326). As shown in FIG. 12, the control command according to the fifth gesture may be to play a music play by controlling a UI provided in the mobile phone.

또한 상기 제어장치(200)는 발표자가 서브 콘텐츠의 구동 중에 IR LED 바 장치(114)에 한 손을 내민 후에 글자를 쓰는 레터링을 이행함과 따라 원 포인트의 레터링에 대응되는 제6제스쳐가 인식되는지를 체크한다(328단계). 상기 제6제스쳐가 인식되면, 상기 제어장치(200)는 서브 콘텐츠를 제6제스쳐에 따른 제어명령에 따라 제어한다(330단계). 상기 제6제스쳐에 따른 제어명령은 도 13에 도시한 바와 같이 레터링된 문자에 대응되게 설정된 수신측으로 전화를 거는 것 등이 될 수 있다. In addition, the controller 200 determines whether the sixth gesture corresponding to the one-point lettering is recognized as the presenter implements the lettering after reaching out to the IR LED bar device 114 while driving the sub content. Check (step 328). When the sixth gesture is recognized, the control device 200 controls the sub content according to a control command according to the sixth gesture (step 330). As shown in FIG. 13, the control command according to the sixth gesture may be a call to a reception side set to correspond to a letter that is lettered.

또한 상기 제어장치(200)는 발표자가 서브 콘텐츠의 구동 중에 IR LED 바 장치(114)에 한 손을 내민 후에 인/아웃을 이행함에 따라 원 포인트의 인/아웃에 대응되는 제7제스쳐가 인식되는지를 체크한다(332단계). 상기 제7제스쳐가 인식되면, 상기 제어장치(200)는 서브 콘텐츠를 제7제스쳐에 따른 제어명령에 따라 제어한다(334단계). 상기 제7제스쳐에 따른 제어명령은 도 14에 도시한 바와 같이 핸드폰내의 영상을 줌인/줌아웃하는 것 등이 될 수 있다. In addition, the controller 200 determines whether a seventh gesture corresponding to one point in / out is recognized as the presenter performs in / out after reaching one hand to the IR LED bar device 114 while driving the sub content. Check (step 332). When the seventh gesture is recognized, the control device 200 controls the sub content according to the control command according to the seventh gesture (step 334). The control command according to the seventh gesture may be, for example, zooming in and out of an image in the mobile phone as shown in FIG. 14.

<제2실시예>Second Embodiment

도 15는 본 고안의 바람직한 제2실시예에 따른 프레젠테이션 장치의 블럭구성도를 도시한 것이다. 15 is a block diagram of a presentation device according to a second embodiment of the present invention.

상기 본 고안의 바람직한 제2실시예에 따른 프레젠테이션 장치는 발표자의 제스쳐를 인식하기 위해 IR LED 바 장치(114), IR 촬상장치(116) 대신 3D 카메라(400)를 채용하였다. 상기 3D 카메라(400)는 상기 발표자의 전면에 대향되게 설치되어 상기 발표자의 신체를 촬상함과 아울러 상기 발표자의 신체의 3차원 위치정보를 생성하며, 제어장치(200)는 상기 발표자의 신체의 3차원 위치정보를 토대로 상기 발표자의 제스쳐를 인식한다. 이와 같이 3D 카메라(400)를 이용하여 제스쳐를 인식하는 경우에는 제스쳐의 정확한 감지를 이행할 수 있음은 물론이고, 좀더 자연스러운 제스쳐를 이용할 수 있게 한다. The presentation device according to the second preferred embodiment of the present invention employs a 3D camera 400 instead of an IR LED bar device 114 and an IR imaging device 116 to recognize the presenter's gesture. The 3D camera 400 is installed to face the front face of the presenter to capture the presenter's body and to generate three-dimensional position information of the presenter's body, and the control device 200 generates three-dimensional information of the presenter's body. The presenter's gesture is recognized based on the dimensional location information. As described above, when the gesture is recognized using the 3D camera 400, accurate detection of the gesture may be performed, and a more natural gesture may be used.

도 1은 본 고안의 바람직한 제1실시예에 따른 프레젠테이션 장치의 설치예를 도시한 도면.1 is a view showing an installation example of a presentation device according to a first embodiment of the present invention.

도 2는 본 고안의 바람직한 제1실시예에 따른 프레젠테이션 장치의 블럭구성도.Figure 2 is a block diagram of a presentation device according to a first embodiment of the present invention.

도 3은 도 1의 IR LED 바 장치와 IR 촬상장치의 동작을 개략적으로 도시한 도면. 3 is a view schematically showing the operation of the IR LED bar device and the IR imaging device of FIG.

도 4a 및 도 4b는 본 고안의 바람직한 제1실시예에 따른 제어장치의 처리과정을 도시한 도면.4a and 4b are views showing the processing of the control device according to the first embodiment of the present invention.

도 5 내지 도 14는 본 고안의 바람직한 제1실시예에 따른 홀로그램 출력상태 및 제스쳐를 예시한 도면.5 to 14 illustrate a hologram output state and a gesture according to a first preferred embodiment of the present invention.

도 15는 본 고안의 바람직한 제2실시예에 따른 프레젠테이션 장치의 블럭구성도. 15 is a block diagram of a presentation device according to a second preferred embodiment of the present invention;

Claims (5)

제스쳐를 이용한 홀로그램 프레젠테이션 장치에 있어서, In the hologram presentation device using the gesture, 발표자의 제스쳐를 인식하는 제스쳐 인식부;A gesture recognition unit recognizing a gesture of the presenter; 상기 발표자와 관객석 사이에 설치되는 포일;A foil installed between the presenter and the audience seat; 상기 포일에 홀로그램을 출사하여 홀로그램을 형성하는 홀로그램 출력장치;A hologram output device that forms a hologram by emitting a hologram on the foil; 메인 콘텐츠와 서브 콘텐츠로 구성되는 프레젠테이션 콘텐츠 정보를 저장하는 저장매체;A storage medium storing presentation content information including main content and sub content; 상기 발표자의 프레젠테이션 개시를 요청하는 제스쳐에 따라 상기 프레젠테이션 콘텐츠 정보를 상기 저장매체에서 독출하여 상기 홀로그램 출력장치를 통해 출력함과 아울러, The presentation content information is read from the storage medium and output through the hologram output device according to a gesture requesting the presentation of the presenter to start presentation. 미리 정해둔 패턴들에 대응되는 발표자의 콘텐츠 제어용 제스쳐들을 인식하고,Recognize the presenter's content control gestures corresponding to predetermined patterns, 상기 콘텐츠 제어용 제스쳐들 중 어느 하나가 인식될 때마다 상기 출력중인 프레젠테이션 콘텐츠 정보가 메인 콘텐츠인지 서브 콘텐츠인지를 체크하고, Whenever one of the content control gestures is recognized, it is checked whether the output presentation content information is main content or sub content, 상기 출력중인 프레젠테이션 콘텐츠 정보가 메인 콘텐츠이면 상기 제스쳐에 대응되게 미리 정해둔 메인 콘텐츠 제어명령을 검출하고, 상기 메인 콘텐츠 제어명령에 따른 동작을 이행하고, If the presentation content information being output is main content, a main content control command determined in advance corresponding to the gesture is detected, and an operation according to the main content control command is performed. 상기 출력중인 프레젠테이션 콘텐츠 정보가 서브 콘텐츠이면 상기 제스쳐에 대응되게 미리 정해둔 서브 콘텐츠 제어명령을 검출하고, 상기 서브 콘텐츠 제어명령에 따른 동작을 이행하는 제어장치;를 포함하며, And a control device that detects a predetermined sub content control command corresponding to the gesture and performs an operation according to the sub content control command when the presentation content information being output is sub content. 상기 제스쳐 인식부가, The gesture recognition unit, 발표자의 전면 하단에 위치하며, 일렬로 배열된 다수의 IR LED로 구성되며, 상기 다수의 IR LED가 수직방향으로 IR 광을 조사하는 IR LED 바 장치와,An IR LED bar device positioned at the front bottom of the presenter and composed of a plurality of IR LEDs arranged in a line, wherein the plurality of IR LEDs irradiate IR light in a vertical direction; 상기 발표자의 전면에 대향되게 설치되어 상기 IR LED 바 장치가 출사하는 IR이 발표자가 내민 손에 의해 반사되는 것을 촬상하는 IR 촬상장치;로 구성되며, An IR imaging device installed opposite to the front face of the presenter and imaging the IR emitted from the IR LED bar device to be reflected by the presenter's hand; 상기 제어장치가, The controller, 상기 IR 촬상장치에 의해 촬상된 정보로부터 IR 존재유무, 점멸, IR이 하나 또는 둘인지 여부, IR의 움직임을 토대로 제스쳐를 인식함을 특징으로 하는 제스쳐를 이용한 홀로그램 프레젠테이션 장치. And a gesture based on the presence or absence of an IR, flickering, one or two IRs, and IR movement from the information captured by the IR imager. 삭제delete 삭제delete 제1항에 있어서, The method of claim 1, 상기 발표자의 전면에 대향되게 설치되어, 상기 홀로그램 출력상태와 상기 발표자를 촬상하는 하나 이상의 촬상장치;At least one imaging device installed opposite to the front face of the presenter to capture the hologram output state and the presenter; 상기 하나 이상의 촬상장치가 촬상한 촬상정보를 디스플레이하는 하나 이상의 디스플레이 장치;At least one display device configured to display sensing information captured by the at least one imaging device; 를 더 구비함을 특징으로 하는 제스쳐를 이용한 홀로그램 프레젠테이션 장치. Hologram presentation device using a gesture characterized in that it further comprises. 제1항에 있어서, The method of claim 1, 상기 발표자의 전면에 대향되게 설치되어, 상기 발표자의 발표문구를 출력하는 하나 이상의 프롬프터;At least one prompter installed to face the front face of the presenter and outputting a presentation sentence of the presenter; 를 더 구비함을 특징으로 하는 제스쳐를 이용한 홀로그램 프레젠테이션 장치. Hologram presentation device using a gesture characterized in that it further comprises.
KR2020090010738U 2009-08-18 2009-08-18 Hologram presentation apparatus using gesture KR200448452Y1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR2020090010738U KR200448452Y1 (en) 2009-08-18 2009-08-18 Hologram presentation apparatus using gesture

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR2020090010738U KR200448452Y1 (en) 2009-08-18 2009-08-18 Hologram presentation apparatus using gesture

Publications (1)

Publication Number Publication Date
KR200448452Y1 true KR200448452Y1 (en) 2010-04-13

Family

ID=44225937

Family Applications (1)

Application Number Title Priority Date Filing Date
KR2020090010738U KR200448452Y1 (en) 2009-08-18 2009-08-18 Hologram presentation apparatus using gesture

Country Status (1)

Country Link
KR (1) KR200448452Y1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101288590B1 (en) 2013-02-15 2013-07-22 (주) 엔텍코아 Apparatus and method for motion control using infrared radiation camera
KR101440691B1 (en) 2012-12-11 2014-09-16 (주)디스트릭트홀딩스 Smart digital signage of providing display according to gesture or motion of user
US8952990B2 (en) 2012-02-15 2015-02-10 Electronics And Telecommunications Research Institute Method for processing interaction between user and hologram using volumetric data type object wave field

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100588042B1 (en) 2004-01-14 2006-06-09 한국과학기술연구원 Interactive presentation system
US7084874B2 (en) 2000-12-26 2006-08-01 Kurzweil Ainetworks, Inc. Virtual reality presentation
KR20090093220A (en) * 2008-02-29 2009-09-02 채수현 Used the infrared ray camera the space projection presentation system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7084874B2 (en) 2000-12-26 2006-08-01 Kurzweil Ainetworks, Inc. Virtual reality presentation
KR100588042B1 (en) 2004-01-14 2006-06-09 한국과학기술연구원 Interactive presentation system
KR20090093220A (en) * 2008-02-29 2009-09-02 채수현 Used the infrared ray camera the space projection presentation system

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
카탈로그(2009.6)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8952990B2 (en) 2012-02-15 2015-02-10 Electronics And Telecommunications Research Institute Method for processing interaction between user and hologram using volumetric data type object wave field
KR101440691B1 (en) 2012-12-11 2014-09-16 (주)디스트릭트홀딩스 Smart digital signage of providing display according to gesture or motion of user
KR101288590B1 (en) 2013-02-15 2013-07-22 (주) 엔텍코아 Apparatus and method for motion control using infrared radiation camera

Similar Documents

Publication Publication Date Title
US11347317B2 (en) Customized gesture interpretation
JP5903936B2 (en) Method, storage medium and apparatus for information selection and switching
KR101563312B1 (en) System for gaze-based providing education content
CN108038726B (en) Article display method and device
US20110107216A1 (en) Gesture-based user interface
WO2015000286A1 (en) Three-dimensional interactive learning system and method based on augmented reality
WO2012124730A1 (en) Detection device, input device, projector, and electronic apparatus
CN105765964A (en) Shift camera focus based on speaker position
JP2015114818A (en) Information processing device, information processing method, and program
CN106464773B (en) Augmented reality device and method
US9804667B2 (en) Electronic apparatus
CN107291221B (en) Across screen self-adaption accuracy method of adjustment and device based on natural gesture
KR101794233B1 (en) Realistic game content providing system using motion recognition and special effect control technique
KR20130020337A (en) Method and apparatus for user interraction
JP2011193240A (en) Information processing apparatus, information processing method, and program
CN113545030B (en) Method, user equipment and system for automatically generating full-focus image through mobile camera
EP2529813A3 (en) Image processing apparatus and image processing method for displaying video image capable of achieving improved operability and realism, and program for controlling image processing apparatus
KR200448452Y1 (en) Hologram presentation apparatus using gesture
JP6866467B2 (en) Gesture recognition device, gesture recognition method, projector with gesture recognition device and video signal supply device
US20120201417A1 (en) Apparatus and method for processing sensory effect of image data
CN109323159A (en) Illuminating bracket formula multimedia equipment
KR100845274B1 (en) Apparatus and method for generating user-interface based on face recognition in a exhibition system
US20220244788A1 (en) Head-mounted display
JP2009212582A (en) Feedback system for virtual studio
CN111050067A (en) Prompting method and device in information acquisition process

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
REGI Registration of establishment
FPAY Annual fee payment

Payment date: 20130405

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140403

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160405

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20170405

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20180405

Year of fee payment: 9

EXPY Expiration of term