KR101192314B1 - System for Realistic 3D Game - Google Patents

System for Realistic 3D Game Download PDF

Info

Publication number
KR101192314B1
KR101192314B1 KR1020100109692A KR20100109692A KR101192314B1 KR 101192314 B1 KR101192314 B1 KR 101192314B1 KR 1020100109692 A KR1020100109692 A KR 1020100109692A KR 20100109692 A KR20100109692 A KR 20100109692A KR 101192314 B1 KR101192314 B1 KR 101192314B1
Authority
KR
South Korea
Prior art keywords
module
image
game
display module
dimensional
Prior art date
Application number
KR1020100109692A
Other languages
Korean (ko)
Other versions
KR20120069008A (en
Inventor
정광모
박영충
최광순
안양근
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Priority to KR1020100109692A priority Critical patent/KR101192314B1/en
Publication of KR20120069008A publication Critical patent/KR20120069008A/en
Application granted granted Critical
Publication of KR101192314B1 publication Critical patent/KR101192314B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25Output arrangements for video game devices
    • A63F13/28Output arrangements for video game devices responding to control signals received from the game device for affecting ambient conditions, e.g. for vibrating players' seats, activating scent dispensers or affecting temperature or light
    • A63F13/285Generating tactile feedback signals via the game input device, e.g. force feedback
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2250/00Miscellaneous game characteristics
    • A63F2250/30Miscellaneous game characteristics with a three-dimensional image
    • A63F2250/302Miscellaneous game characteristics with a three-dimensional image holographic
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082Virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 실감형 게임 시스템에 관한 것으로, 더욱 상세하게는 3차원 입체 영상 디스플레이 및 인터렉티브 사용자 인터페이스를 이용한 실감형 게임 시스템에 관한 것이다.
이를 위해 본 발명의 실감형 3차원 게임 시스템은 테이블 타입의 수평형 3차원 영상과 수직형 영상을 디스플레이하는 3차원 디스플레이 모듈과 디스플레이된 상기 3차원 영상으로 진입하는 사용자의 손의 위치를 감시하는 공간 터치 인식 모듈과 상기 3차원 디스플레이 모듈과 상기 공간 터치 인식 모듈을 제어하는 인터렉션 컴퓨팅 모듈 및 상기 3차원 디스플레이 모듈에 의해 디스플레이된 입체 영상 정보와 상기 공간 터치 인식 모듈로부터 제공받은 공간 센싱 정보를 이용하여 게임 규정을 확인하는 게임 서버를 포함한다.
The present invention relates to a realistic game system, and more particularly, to a realistic game system using a three-dimensional stereoscopic image display and an interactive user interface.
To this end, the sensory three-dimensional game system of the present invention has a three-dimensional display module for displaying a table-type horizontal three-dimensional image and a vertical image, and a space for monitoring the position of a user's hand entering the displayed three-dimensional image. Game using the touch recognition module, the interaction computing module controlling the 3D display module and the spatial touch recognition module, the stereoscopic image information displayed by the 3D display module, and the spatial sensing information provided from the spatial touch recognition module. It includes a game server that checks the regulations.

Description

실감형 3차원 게임 시스템{System for Realistic 3D Game} Realistic 3D Game System {System for Realistic 3D Game}

본 발명은 실감형 게임 시스템에 관한 것으로, 더욱 상세하게는 3차원 입체 영상 디스플레이 및 인터렉티브 사용자 인터페이스를 이용한 실감형 게임 시스템에 관한 것이다.
The present invention relates to a realistic game system, and more particularly, to a realistic game system using a three-dimensional stereoscopic image display and an interactive user interface.

3D 입체 영상은 인간이 두 눈으로 봄으로써 입체를 지각한다는 사실에 기초를 두고 있다. 3D 입체 영상은 2대의 카메라 또는 쌍둥이 렌즈가 부착된 카메라로 촬영하는데, 하나는 왼쪽 눈을, 다른 하나는 오른쪽 눈을 나타낸다. 이 두 렌즈는 사람의 두 눈의 간격만큼인 약 6.3㎝가 떨어져 있다. 여기서 얻어지는 영상은 2대의 동시 투사기에 의해 스크린에 투사된다. 사용자는 반드시 다른 색조를 띠었거나 편광된 안경을 끼어야만 왼쪽 눈과 오른쪽 눈의 영상들을 그 영상들이 나타내는 대로 볼 수 있다. 사용자는 영상들을 현실적으로는 따로따로 보지만 실제로는 이 2개의 약간 다른 영상들이 관객의 정신에 의해 융합되기 때문에 입체 형태로 지각하게 된다.3D stereoscopic imaging is based on the fact that humans perceive stereoscopic vision with their two eyes. 3D stereoscopic images are taken with two cameras or a camera with twin lenses, one representing the left eye and the other the right eye. The two lenses are about 6.3 cm apart from each other's eyes. The image obtained here is projected onto the screen by two simultaneous projectors. The user must wear glasses with different shades or polarization to see the images of the left and right eyes as they appear. The user sees the images separately in reality, but in reality the two slightly different images are perceived in three-dimensional form because they are fused by the mind of the audience.

이와 같이 3D 영상은 복수 개의 카메라와 편광 안경을 이용하여 생성하거나, 편광 안경을 이용하지 않고 생성할 수 있다.As such, the 3D image may be generated using a plurality of cameras and polarized glasses, or may be generated without using polarized glasses.

기존의 온라인 체스, 장기, 바둑 게임들은 온라인으로 멀리 떨어진 다른 사람들과 함께 플레이할 수 있다. 모니터 화면으로 게임판을 보며, 마우스나 키보드 같은 별도의 입력장치를 조작하여 게임을 플레이하였다. 하지만, 상대방의 아바타나 사진을 볼 수 있을 뿐 실시간 모습을 볼 수 없어 누군가와 함께 플레이하고 있다는 느낌이 크지 않았다.Traditional online chess, chess, and go games can be played online with others away. Looking at the game board on the monitor screen, I played a game by operating a separate input device such as a mouse or keyboard. However, I didn't feel that I was playing with someone because I could only see the avatar or picture of the other party and not see the real-time figure.

도 1은 종래 온라인 체스 게임의 화면을 도시하고 있다. 도 1에 도시되어 있는 바와 같이 종래 온라인 게임은 단조로운 플레이 화면을 제공한다.1 shows a screen of a conventional online chess game. As shown in FIG. 1, a conventional online game provides a monotonous play screen.

체스, 장기, 바둑 등과 같은 게임은 고도의 심리전 또한 게임의 중요한 요소로 작용하기 때문에, 상대방을 보고, 눈치를 살피는 등 서로 교감하며 게임을 할 때 진짜 게임의 묘미를 느낄 수 있으나 기존의 게임 시스템상에서는 이러한 점이 부족하였다.
Since games such as chess, chess, and go play high-level psychological warfare, they are also important elements of the game, so you can feel the real game when you interact with each other. This was lacking.

본 발명이 해결하려는 과제는 3차원 영상 시스템과 사용자 간의 교감이 이루어질 수 있는 인터렉티브 3차원 영상 시스템을 제안함에 있다.The problem to be solved by the present invention is to propose an interactive three-dimensional image system that can communicate with the three-dimensional image system and the user.

본 발명이 해결하려는 다른 과제는 심리적 요소를 반영하여 게임의 재미를 극대화하는 인터렉티브 3차원 영상 시스템을 제안함에 있다.Another object of the present invention is to propose an interactive three-dimensional imaging system that maximizes the fun of the game by reflecting psychological factors.

본 발명이 해결하려는 또 다른 과제는 실시간으로 상대방의 모습을 보면서 손으로 게임 돌을 움직이는 듯한 느낌을 받는 실감형 3D 입체 게임 시스템을 제안함에 있다.
Another problem to be solved by the present invention is to propose a realistic 3D stereoscopic game system that receives the feeling of moving the game stone by hand while watching the opponent's appearance in real time.

이를 위해 본 발명의 실감형 3차원 게임 시스템은 테이블 타입의 수평형 3차원 영상과 수직형 영상을 디스플레이하는 3차원 디스플레이 모듈과 디스플레이된 상기 3차원 영상으로 진입하는 사용자의 손의 위치를 감시하는 공간 터치 인식 모듈과 상기 3차원 디스플레이 모듈과 상기 공간 터치 인식 모듈을 제어하는 인터렉션 컴퓨팅 모듈 및 상기 3차원 디스플레이 모듈에 의해 디스플레이된 입체 영상 정보와 상기 공간 터치 인식 모듈로부터 제공받은 공간 센싱 정보를 이용하여 게임 규정을 확인하는 게임 서버를 포함한다.To this end, the sensory three-dimensional game system of the present invention has a three-dimensional display module for displaying a table-type horizontal three-dimensional image and a vertical image, and a space for monitoring the position of a user's hand entering the displayed three-dimensional image. Game using the touch recognition module, the interaction computing module controlling the 3D display module and the spatial touch recognition module, the stereoscopic image information displayed by the 3D display module, and the spatial sensing information provided from the spatial touch recognition module. It includes a game server that checks the regulations.

이를 위해 본 발명의 실감형 3차원 게임 시스템은 테이블 타입의 수평형 3차원 영상과 수직형 영상을 디스플레이하는 3차원 디스플레이 모듈과 디스플레이된 상기 3차원 영상으로 진입하는 사용자의 손의 위치를 다수의 3차원 카메라를 이용하여 감시하는 공간 터치 인식 모듈과 상대방에게 제공할 영상을 획득하기 위해 상기 3차원 카메라를 이용하여 촬영한 영상을 상기 3차원 디스플레이 모듈에 의해 디스플레이되는 영상과 합성하는 입체 영상 구성 모듈과 디스플레이된 상기 3차원 영상으로 진입한 사용자의 손이 게임판의 게임 말이 위치하고 있는 지점으로 이동하면, 상기 손으로 촉감 정보를 제공하는 공간 촉감 자극 모듈과 상기 공간 터치 인식 모듈로부터 제공받은 터치 정보와 상기 입체 영상 구성 모듈로부터 제공받은 영상을 게임 서버로 제공하며, 상기 3차원 디스플레이 모듈로 3차원 영상과 상기 공간 촉감 자극 모듈로 촉감 정보를 제공하는 인터렉션 컴퓨팅 모듈 및 상기 인터렉션 컴퓨팅 모듈로부터 제공받은 상기 터치 정보와 3차원 영상 정보를 이용하여 게임 규정을 확인하는 게임 서버를 포함한다.
To this end, the realistic three-dimensional game system of the present invention includes a three-dimensional display module for displaying a table-type horizontal three-dimensional image and a vertical image, and a plurality of three positions of a user's hand entering the displayed three-dimensional image. A spatial touch recognition module for monitoring by using a 3D camera and a 3D image composition module for synthesizing an image photographed using the 3D camera with an image displayed by the 3D display module to obtain an image to be provided to the counterpart; When the user's hand entering the displayed 3D image moves to the point where the game end of the game board is located, the touch information received from the spatial tactile stimulation module and the spatial touch recognition module and the touch information provided by the hand The image provided from the 3D image composition module is transferred to the game server. And an interaction computing module for providing tactile information to the spatial tactile stimulation module using the three dimensional display module and the touch definition and the three dimensional image information provided from the interaction computing module. Contains a game server.

본 발명에 따른 인터렉티브 3D 시스템을 이용하여 3D e-shopping, 3D Education, 3D Entertainment, 3D Game 등 다양한 가정형 3D 분야에 활용할 수 있다. By using the interactive 3D system according to the present invention, it can be utilized in various home 3D fields such as 3D e-shopping, 3D Education, 3D Entertainment, and 3D Game.

특히 본 발명에 따른 실감형 게임 시스템은 상대방의 모습을 게임을 진행함으로써 피상적인 인간관계를 탈피할 수 있으며, 물리적 환경에서 게임을 진행하는 것 같은 느낌을 통해 디지털 환경에서 아날로그적 감성과 재미를 느낄 수 있다는 장점이 있다.
In particular, the realistic game system according to the present invention can escape the superficial human relationship by playing the game of the opponent, and feel analog emotion and fun in the digital environment through the feeling of playing the game in the physical environment. There is an advantage that it can.

도 1은 종래 온라인 체스 게임의 화면을 도시하고 있으며,
도 2는 본 발명의 일실시 예에 따른 실감형 3D 입체 게임 시스템의 구성을 도시하고 있으며,
도 3은 본 발명의 일실시 예에 따른 수직형 디스플레이 모듈에 의해 디스플레이되는 수평형 이미지와 수직형 디스플레이 모듈에 의해 디스플레이되는 수직형 이미지를 나타내고 있다.
1 shows a screen of a conventional online chess game,
2 is a block diagram of a realistic 3D stereoscopic game system according to an embodiment of the present invention.
3 illustrates a horizontal image displayed by a vertical display module and a vertical image displayed by a vertical display module according to an embodiment of the present invention.

전술한, 그리고 추가적인 본 발명의 양상들은 첨부된 도면을 참조하여 설명되는 바람직한 실시 예들을 통하여 더욱 명백해질 것이다. 이하에서는 본 발명의 이러한 실시 예를 통해 당업자가 용이하게 이해하고 재현할 수 있도록 상세히 설명하기로 한다.The foregoing and further aspects of the present invention will become more apparent through the preferred embodiments described with reference to the accompanying drawings. Hereinafter will be described in detail to enable those skilled in the art to easily understand and reproduce through this embodiment of the present invention.

최근 각국에서 동작인식 기능을 이용한 기술을 개발하고 있으나, 인터렉티브(Interactive) 3D 관련 핵심원천기술은 아직 개발 초기 단계이다. 인터렉티브 3D 관련 핵심원천기술은 자유시각 3D, TOF(Time of Flight) 3D 센서기술, 비접촉식 공간촉감기술, 상황적(Contextual) 3D 오브젝트 프로세싱 기술 등이 포함된다.Recently, each country is developing technology using motion recognition function, but the core source technology related to Interactive 3D is still in the early stage of development. Core technologies related to interactive 3D include free vision 3D, time of flight (TOF) 3D sensor technology, contactless space tactile technology, and contextual 3D object processing technology.

즉, IT 기술의 발달과 더불어 대중의 3D 기술에 대한 관심과 시장성이 갈수록 증가하는 추세이며, 새로운 신산업으로 3D 융합산업이 떠오르고 있다. 또한, 3D 관련 시장이 전시관이나 체험관 또는 영화관 등에서 대중을 상대로 하는 특수 분야의 시장에서 제한적으로 적용되어 왔으나, 3D 인터랙션 기능이 융합되면서 일반 개인이 사용할 수 있는 정보가전기기 시장으로 기능이 확대되어 대형 산업을 일으킬 것이다.In other words, with the development of IT technology, public interest in 3D technology and marketability are increasing gradually, and 3D convergence industry is emerging as a new new industry. In addition, although the 3D-related market has been applied in a limited range of markets for the public, such as exhibition halls, experi- ence halls, or movie theaters, as the 3D interaction function converges, the information market that can be used by the general public expands to the electronics market. Will cause.

인터렉티브 3D 기술은 홈 네트워크 정보가전 산업의 새로운 비즈모델을 창출하는 역할을 할 것으로 기대된다. 또한, 3D 영상에 인터렉티브 UI 기술을 접목할 경우 직관적이고 조작이 쉬워 조작 자체에서 현실감과 흥미를 느끼고, 이로 인해 디지털 기기에서 아날로그 감성을 느낄 수 있게 된다.Interactive 3D technology is expected to create a new business model for the home network information and electronics industry. In addition, incorporating interactive UI technology into 3D video makes it intuitive and easy to operate, so that the user can feel realism and interest in the operation itself.

이에 본 발명은 실감형 3D 입체 게임 시스템을 제안한다. 실감형 3D 입체 게임 시스템은 체스, 바둑, 장기 등의 게임을 실제로 다른 사람과 마주보고 플레이하고 있는 것 같은 느낌을 가질 수 있다. 게임판이 테이블형 3D 디스플레이를 통해 입체적으로 보인다. 사용자는 실제 물체를 만지듯이 게임 말을 만지는 느낌을 받으며, 물리적으로 게임 말을 옮기고 있는 듯한 영상과 느낌을 받을 수 있다. 즉, 본 발명의 실감형 3D 입체 게임 시스템은 상대방의 모습과 게임 말을 옮기는 모습을 입체 영상으로 표현하여 실제 상대가 바로 앞에 있는 것 같은 느낌을 가질 수 있다.Accordingly, the present invention proposes a realistic 3D stereoscopic game system. An immersive 3D stereoscopic game system can make you feel as if you are actually playing a game like chess, go, or chess. The game board looks three-dimensional with a table-shaped 3D display. The user can feel the touch of a game horse as if touching a real object, and can feel the image and the feeling of physically moving the word of the game. That is, the realistic 3D stereoscopic game system of the present invention expresses the appearance of the opponent and the end of the game in a stereoscopic image, so that the actual opponent may feel as if they are directly in front.

도 2는 본 발명의 일실시 예에 따른 실감형 3D 입체 게임 시스템의 구성을 도시하고 있다. 이하 도 2를 이용하여 본 발명의 일실시 예에 따른 실감형 3D 입체 게임 시스템의 구성에 대해 상세하게 알아보기로 한다.2 is a block diagram of a realistic 3D stereoscopic game system according to an embodiment of the present invention. Hereinafter, the configuration of the realistic 3D stereoscopic game system according to an embodiment of the present invention will be described in detail with reference to FIG. 2.

도 2에 의하면 실감형 게임 시스템은 3D 디스플레이 모듈(210), 입체 영상 구성 모듈(220), 공간 터치 인식 모듈(230), 공간 촉감 자극 모듈(240), 인터렉션 컴퓨팅 모듈(250), 게임 서버(260)를 포함한다. 물론 상술한 구성 이외에 다른 구성이 실감형 게임 시스템에 포함될 수 있음은 자명하다.Referring to FIG. 2, the immersive game system includes a 3D display module 210, a stereoscopic image composition module 220, a spatial touch recognition module 230, a spatial tactile stimulation module 240, an interaction computing module 250, and a game server ( 260). Obviously, other configurations may be included in the realistic game system in addition to the above-described configuration.

사용자는 3D 디스플레이 모듈(210)에 의해 디스플레이된 3D 영상을 인지한다. 3D 디스플레이 모듈(210)은 상대방의 모습을 입체감 있게 표현하는 수직형 3D 디스플레이 모듈과 게임판과 게임판을 조작하는 모습을 표현하는 수평형 3D 디스플레이 모듈을 포함한다.The user recognizes the 3D image displayed by the 3D display module 210. The 3D display module 210 includes a vertical 3D display module that expresses the appearance of the opponent in a three-dimensional sense and a horizontal 3D display module that expresses the operation of the game board and the game board.

수평형 3D 디스플레이는 벽에 걸려있는 일반적인 디스플레이가 아니라 테이블 형태의 자유 시각 3D 디스플레이다. 즉, 테이블에 수평으로 존재하는 가상의 3D 오브젝트를 테이블 위에 실제로 존재하는 것처럼 디스플레이함으로써 사용자들에게 게임판과 게임판을 조작하는 느낌을 전달할 수 있다.The horizontal 3D display is not a typical display hanging on the wall, but a free visual 3D display in the form of a table. That is, by displaying a virtual 3D object horizontally present on the table as if it is actually present on the table, it is possible to convey the game board and the feeling of manipulating the game board to the users.

본 발명은 3D 디스플레이 모듈(210)에 부가하여 플래쉬 홀로그램(Flash Hologram) 디스플레이 기능을 구현하는 플래쉬 홀로그램 디스플레이 모듈을 포함할 수 있다. 플래쉬 홀로그램 디스플레이 모듈은 테이블 타입 인터렉티브 3D 시스템에서 메인이 되는 3D 디스플레이 모듈(210)과 동시에 사용될 수 있으며, 부분적으로 완벽한 다시점 3D 오브젝트를 표현하는 기능을 수행한다.The present invention may include a flash hologram display module that implements a flash hologram display function in addition to the 3D display module 210. The flash hologram display module may be used simultaneously with the main 3D display module 210 in the table type interactive 3D system, and partially expresses a perfect multiview 3D object.

일반적으로 홀로그램은 홀로그래피에 의해 생성된 3차원 사진을 의미하며, 필름이나 감광 건판 등 기록 매체에 레이저 광 등 빛의 간섭 패턴을 기록한 것이다. 홀로그래피 방식은 피사체로부터의 빛과 간섭성이 있는 참조광을 겹쳐서 얻어지는 간섭신호를 기록하고 이를 재생하는 원리를 이용하는 것으로, 입체감 있는 영상을 구현하는 이상적인 디스플레이 방식이다. 홀로그램은 어떤 대상 물체의 3차원 입체상을 재생한다.In general, a hologram means a three-dimensional photograph generated by holography, and records an interference pattern of light such as laser light on a recording medium such as a film or a photosensitive dry plate. The holography method uses the principle of recording and reproducing an interference signal obtained by superposing coherent reference light with light from a subject, and is an ideal display method for implementing a three-dimensional image. The hologram reproduces the three-dimensional image of an object.

본 발명과 관련하여 플래쉬 홀로그램 디스플레이 모듈은 평면 위에 게임판이 실재하는 것처럼 보이게 하고, 3D 디스플레이 모듈(210)을 통해 상대방의 상반신 화면이 떠 있는 것처럼 보이게 한다. 또한, 3D 디스플레이 모듈(210)은 상대방이 게임판을 조작할 때의 손동작 및 조작중인 게임 말도 함께 입체 영상으로 표현하여 상대방이 실제 눈앞에 있는 것 같은 가상의 현실감을 받을 수 있도록 한다.In the context of the present invention, the flash hologram display module makes the game board appear to exist on a plane, and makes the upper body screen of the other party appear to float through the 3D display module 210. In addition, the 3D display module 210 also expresses a hand gesture and a game word being operated when the opponent manipulates the game board in a stereoscopic image so that the opponent can receive a virtual reality as if they are actually in front of the eyes.

도 3은 본 발명의 일실시 예에 따른 수직형 디스플레이 모듈에 의해 디스플레이되는 수평형 이미지와 수직형 디스플레이 모듈에 의해 디스플레이되는 수직형 이미지를 나타내고 있다.3 illustrates a horizontal image displayed by a vertical display module and a vertical image displayed by a vertical display module according to an embodiment of the present invention.

수직형 디스플레이 모듈은 게임 상대방의 모습을 디스플레이하며, 수평형 디스플레이 모듈은 게임판과 게임판을 조작하는 모습을 디스플레이한다. 도 3(a)에 의하면, 사용자는 깊이 카메라를 이용하여 입체 영상으로 보이는 게임판의 말을 실제 손으로 집어서 옮기는 것처럼 게임을 즐길 수 있다. 도 3(b)에 의하면, 게임 상대방은 사용자가 게임판의 말을 들어서 옮기는 것 같은 영상을 홀로그램으로 확인할 수 있다.The vertical display module displays the appearance of the game opponent, and the horizontal display module displays the game board and the operation of the game board. According to FIG. 3 (a), the user can enjoy the game as if the horse of the game board, which is displayed as a three-dimensional image, is actually picked up and moved by using a depth camera. According to FIG. 3 (b), the game counterpart may check a hologram of an image in which a user lifts and moves a word of a game board.

이와 같은 본 발명은 실시간으로 상대방의 모습을 보면서 손으로 게임 말을 움직이는 영상을 제공함으로써 게임의 재미를 높일 수 있게 된다.The present invention as described above can increase the fun of the game by providing a moving image of the game by hand while watching the appearance of the opponent in real time.

입체 영상 구성 모듈(220)은 상대방에게 보여줄 사용자의 모습을 구성하기 위한 모듈이다. 다수의 깊이 카메라를 이용하여 사용자의 정면 반신 및 게임판을 조작하는 팔을 다각도에서 촬영하여 실시간 3D 입체 이미지를 구성한다.The stereoscopic image composition module 220 is a module for configuring the appearance of a user to be shown to the other party. By using a plurality of depth cameras to shoot the user's front half and the arm to operate the game board from multiple angles to construct a real-time 3D stereoscopic image.

공간 터치 인식 모듈(230)은 사용자가 3D 디스플레이에 의해 디스플레이된 영상의 터치 여부를 인식한다. 즉, 공간 터치 인식 모듈(230)은 사용자의 행동이나 손동작을 인식하여 3D 오브젝트와 연동하기 위한 고정밀 3D 공간 감지 기능을 구현한다. 공간 터치 인식 모듈(230)의 일예로 고해상도의 TOF 방식의 3D 깊이(Depth) 센서 모듈이 포함된다. 3D 깊이 센서 모듈은 조명에 의한 간섭이 강하며, 실시간으로 공간을 해석하여 인터렉션할 수 있다는 장점이 있다. The spatial touch recognition module 230 recognizes whether the user touches the image displayed by the 3D display. That is, the space touch recognition module 230 implements a high precision 3D space sensing function for interworking with a 3D object by recognizing a user's action or hand gesture. An example of the spatial touch recognition module 230 includes a 3D depth sensor module of a high resolution TOF method. The 3D depth sensor module has strong interference by lighting and has the advantage of being able to analyze and interact with space in real time.

부가하여 설명하면, 3D 깊이 센서 모듈은 전면부를 구성하고 적외선 펄스 출력부와 적외선 펄스 수신부를 포함한다. 적외선 펄스 출력부는 3D 깊이 센서 모듈의 전면부로부터 적외선 펄스를 출력하며, 적외선 펄스 입력부는 적외선 펄스 출력부에서 출력된 적외선 펄스 중 사물에 반사되어 되돌아오는 적외선 펄스를 수신한다. 3D 깊이 센서 모듈은 적외선 펄스 출력된 적외선 펄스가 사물에 의해 반사되어 되돌아오는 시간을 측정한다. 측정된 시간을 이용하여 3D 깊이 센서 모듈은 사물까지의 거리를 산출한다.In addition, the 3D depth sensor module constitutes a front portion and includes an infrared pulse output unit and an infrared pulse receiver unit. The infrared pulse output unit outputs an infrared pulse from the front of the 3D depth sensor module, and the infrared pulse input unit receives an infrared pulse reflected from the infrared pulse output from the infrared pulse output unit and reflected back to the object. The 3D depth sensor module measures the time when the infrared pulse output infrared pulse is reflected by the object and returned. Using the measured time, the 3D depth sensor module calculates the distance to the object.

이를 통해 사용자가 현재 어떤 게임을 조작하는지 감지하고, 사용자의 동작에 따라 게임 말이 실제 물리적으로 움직이는 것처럼 보이기 위한 정보를 얻어낼 수 있다.Through this, it is possible to detect which game the user is currently operating, and obtain information to make the word of the game appear to be physically moving according to the user's motion.

공간 촉감 자극 모듈(240)은 인터렉티브 3D 시스템에서 사용자가 3D 디스플레이 모듈(210)에 의해 디스플레이된 영상을 터치한 경우, 터치 여부를 사용자에게 제공한다. 공간 촉감 자극 모듈(240)은 인터렉티브 3D 미들웨어에서 처리된 3D 디스플레이 출력 정보와 더불어 가상의 3D 오브젝트 컨텍스트에 설정된 촉감을 사용자에게 피드백하여 자극한다. 사용자는 시각적인 3D 자극 외에 촉각적인 자극을 인지함으로써 실감나는 영상을 제공받을 수 있게 된다. 촉각적인 자극은 초음파 자극 또는 제트공기 자극을 이용할 수 있다. 즉, 초음파를 집중시켜 압력을 제공하는 초음파 자극이나 일반적인 제트 압축 공기로 압력을 제공하는 제트 공기 자극으로 사용자에게 촉각적인 자극을 제공할 수 있다.The spatial tactile stimulation module 240 provides the user with a touch when the user touches the image displayed by the 3D display module 210 in the interactive 3D system. The spatial tactile stimulation module 240 feeds back the tactile sense set in the context of the virtual 3D object along with the 3D display output information processed by the interactive 3D middleware to the user. The user can be provided with a realistic image by recognizing the tactile stimulus in addition to the visual 3D stimulus. The tactile stimulus may use ultrasonic stimulation or jet air stimulation. That is, the tactile stimulus may be provided to the user by the ultrasonic stimulus for concentrating the ultrasonic waves and the jet air stimulus for providing pressure with general jet compressed air.

인터렉션 컴퓨팅 모듈(250)은 공간 터치 인식 모듈(230)에서 전달된 3D 공간의 센싱 정보를 입력받고, 3D 공간의 가상 오브젝트 위치 및 컨텍스트(context) 정보를 처리하여 사용자에게 3D 디스플레이 및 촉감자극 인터페이스로 피드백시켜 주는 미들웨어 역할을 수행한다. 인터렉션 컴퓨팅 모듈(250)은 시스템에 연결된 고성능 스토리지에 저장된 3D 미디어 데이터 및 게임 서버 데이터베이스의 인터렉션 데이터를 엑세스하여 처리할 수 있다.The interaction computing module 250 receives the sensing information of the 3D space transmitted from the spatial touch recognition module 230, processes the virtual object position and the context information of the 3D space, and provides the user with a 3D display and tactile stimulation interface. It acts as a middleware for feedback. The interaction computing module 250 may access and process the 3D media data stored in the high performance storage connected to the system and the interaction data of the game server database.

게임 서버(260)는 사용자측에서 구성한 입체영상 정보와 공간 센싱 정보를 이용하여, 게임 말을 게임 규정에 어긋나지 않게 움직였는지 확인하고, 승패를 결정한다. 입체영상 데이터 및 공간 센싱 정보는 상대방에게 전송한다.The game server 260 determines whether or not the end of the game is inconsistent with the game rules by using the stereoscopic image information and the spatial sensing information configured on the user side, and determines the win or loss. Stereoscopic image data and spatial sensing information is transmitted to the other party.

본 발명은 도면에 도시된 일실시 예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it will be understood by those of ordinary skill in the art that various changes in form and details may be made therein without departing from the scope of the present invention .

210: 3D 디스플레이 모듈 220: 입체 영상 구성 모듈
230: 공간 터치 인식 모듈 240: 공간 촉감 자극 모듈
250: 인터렉션 컴퓨팅 모듈 260: 게임 서버
210: 3D display module 220: stereoscopic image composition module
230: space touch recognition module 240: space tactile stimulation module
250: interaction computing module 260: game server

Claims (7)

테이블 타입의 수평형 3차원 영상과 수직형 3차원 영상을 디스플레이하는 3차원 디스플레이 모듈;
플래쉬 홀로그램 디스플레이 기능을 구현하는 플래쉬 홀로그램 디스플레이 모듈;
상기 3차원 디스플레이 모듈과 플래쉬 홀로그램 디스플레이 모듈에 의해 디스플레이된 상기 3차원 영상으로 진입하는 사용자의 손의 위치를 감시하는 공간 터치 인식 모듈;
상기 3차원 디스플레이 모듈과 상기 공간 터치 인식 모듈을 제어하는 인터렉션 컴퓨팅 모듈;
상기 3차원 디스플레이 모듈에 의해 디스플레이된 입체 영상 정보와 상기 공간 터치 인식 모듈로부터 제공받은 공간 센싱 정보를 이용하여 게임 규정에 따라 게임을 수행하는지 확인하는 게임 서버를 포함하며,
상기 공간 터치 인식 모듈은 출력한 적외선 펄스가 사물에 의해 반사되어 돌아오는 시간을 이용하여 사용자의 손가락 위치를 촬영하는 3차원 카메라를 포함하는 3차원 게임 시스템.
A three-dimensional display module configured to display a table-type horizontal three-dimensional image and a vertical three-dimensional image;
A flash hologram display module implementing a flash hologram display function;
A spatial touch recognition module configured to monitor a position of a user's hand entering the 3D image displayed by the 3D display module and the flash hologram display module;
An interaction computing module for controlling the 3D display module and the spatial touch recognition module;
And a game server for checking whether a game is performed according to a game rule by using stereoscopic image information displayed by the 3D display module and spatial sensing information provided from the spatial touch recognition module.
The spatial touch recognition module includes a three-dimensional camera for capturing the position of the user's finger by using the time when the output infrared pulse is reflected back by the object.
삭제delete 제 1항에 있어서, 디스플레이된 상기 3차원 영상으로 진입한 사용자의 손이 게임판의 게임 말이 위치하고 있는 지점으로 이동하면, 상기 손으로 촉감 정보를 제공하는 공간 촉감 자극 모듈을 포함함을 특징으로 하는 실감형 3차원 게임 시스템.
The apparatus of claim 1, further comprising: a spatial tactile stimulation module for providing tactile information to the hand when the user's hand entering the displayed 3D image moves to a point where the game horse of the game board is located. Realistic 3D game system.
제 3항에 있어서, 상기 공간 촉감 자극 모듈은,
초음파를 집중시켜 압력을 제공하는 초음파 자극 모듈, 제트 압축 공기로 압력을 제공하는 제트공기 자극 모듈 중 적어도 하나를 포함함을 특징으로 하는 실감형 3차원 게임 시스템.
The method of claim 3, wherein the space tactile stimulation module,
And an ultrasonic stimulation module for concentrating ultrasound to provide pressure and a jet air stimulation module for providing pressure to jet compressed air.
제 4항에 있어서, 상대방에게 제공할 영상을 획득하기 위해 다수의 3차원 카메라를 이용하여 촬영한 영상을 상기 3차원 디스플레이 모듈에 의해 디스플레이되는 영상과 합성하는 입체 영상 구성 모듈을 포함함을 특징으로 하는 실감형 3차원 게임 시스템.
The method of claim 4, further comprising a stereoscopic image composition module for synthesizing the images taken by using a plurality of three-dimensional camera with the image displayed by the three-dimensional display module to obtain an image to be provided to the other party. Realistic 3D game system.
제 1항에 있어서, 상기 3차원 디스플레이 모듈은,
상대방의 영상을 제공하는 수직형 디스플레이 모듈;
게임판과 상기 게임판을 조작하는 영상을 제공하는 수평형 디스플레이 모듈을 포함함을 특징으로 하는 실감형 3차원 게임 시스템.
The method of claim 1, wherein the three-dimensional display module,
A vertical display module providing an image of the counterpart;
3D game system, characterized in that it comprises a game board and a horizontal display module for providing an image for operating the game board.
테이블 타입의 수평형 3차원 영상과 수직형 영상을 디스플레이하는 3차원 디스플레이 모듈;
디스플레이된 상기 3차원 영상으로 진입하는 사용자의 손의 위치를 다수의 3차원 카메라를 이용하여 감시하는 공간 터치 인식 모듈;
상대방에게 제공할 영상을 획득하기 위해 상기 3차원 카메라를 이용하여 촬영한 영상을 상기 3차원 디스플레이 모듈에 의해 디스플레이되는 영상과 합성하는 입체 영상 구성 모듈;
디스플레이된 상기 3차원 영상으로 진입한 사용자의 손이 게임판의 게임 말이 위치하고 있는 지점으로 이동하면, 상기 손으로 촉감 정보를 제공하는 공간 촉감 자극 모듈;
상기 공간 터치 인식 모듈로부터 제공받은 터치 정보와 상기 입체 영상 구성 모듈로부터 제공받은 영상을 게임 서버로 제공하며, 상기 3차원 디스플레이 모듈로 3차원 영상과 상기 공간 촉감 자극 모듈로 촉감 정보를 제공하는 인터렉션 컴퓨팅 모듈;
상기 인터렉션 컴퓨팅 모듈로부터 제공받은 상기 터치 정보와 3차원 영상 정보를 이용하여 게임 규정을 확인하는 게임 서버를 포함함을 특징으로 하는 실감형 3차원 게임 시스템.
A three-dimensional display module for displaying a table-type horizontal three-dimensional image and a vertical image;
A spatial touch recognition module configured to monitor a position of a user's hand entering the displayed 3D image using a plurality of 3D cameras;
A stereoscopic image composition module for synthesizing an image photographed using the 3D camera with an image displayed by the 3D display module to obtain an image to be provided to a counterpart;
A spatial tactile stimulation module for providing tactile information to the hand when a user's hand entering the displayed 3D image moves to a point where a game horse of a game board is located;
Interactive computing that provides touch information provided from the spatial touch recognition module and an image provided from the stereoscopic image composition module to a game server, and provides a 3D image to the 3D display module and tactile information to the spatial tactile stimulation module. module;
And a game server for checking a game rule by using the touch information and 3D image information provided from the interaction computing module.
KR1020100109692A 2010-11-05 2010-11-05 System for Realistic 3D Game KR101192314B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100109692A KR101192314B1 (en) 2010-11-05 2010-11-05 System for Realistic 3D Game

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100109692A KR101192314B1 (en) 2010-11-05 2010-11-05 System for Realistic 3D Game

Publications (2)

Publication Number Publication Date
KR20120069008A KR20120069008A (en) 2012-06-28
KR101192314B1 true KR101192314B1 (en) 2012-10-17

Family

ID=46687344

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100109692A KR101192314B1 (en) 2010-11-05 2010-11-05 System for Realistic 3D Game

Country Status (1)

Country Link
KR (1) KR101192314B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014168340A1 (en) * 2013-04-12 2014-10-16 (주)이엠아이지 Method for generating flash-based stereoscopic image

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013058608A2 (en) * 2011-10-20 2013-04-25 아주대학교산학협력단 Treemap visualization system and method
KR101970211B1 (en) * 2017-09-25 2019-08-13 (주)더나기술 Game apparatus using hologram box for interaction and the method thereof
CN111722769B (en) * 2020-07-16 2024-03-05 腾讯科技(深圳)有限公司 Interaction method, interaction device, display equipment and storage medium

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080030460A1 (en) 2000-07-24 2008-02-07 Gesturetek, Inc. Video-based image control system
US7348963B2 (en) 2002-05-28 2008-03-25 Reactrix Systems, Inc. Interactive video display system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080030460A1 (en) 2000-07-24 2008-02-07 Gesturetek, Inc. Video-based image control system
US7348963B2 (en) 2002-05-28 2008-03-25 Reactrix Systems, Inc. Interactive video display system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014168340A1 (en) * 2013-04-12 2014-10-16 (주)이엠아이지 Method for generating flash-based stereoscopic image

Also Published As

Publication number Publication date
KR20120069008A (en) 2012-06-28

Similar Documents

Publication Publication Date Title
US11599188B2 (en) System and method for generating a virtual reality scene based on individual asynchronous motion capture recordings
Bolter et al. Reality media: Augmented and virtual reality
KR101156734B1 (en) Interactive 3d system of table type
US12020391B2 (en) Spatial instructions and guides in mixed reality
US9244533B2 (en) Camera navigation for presentations
US11900912B2 (en) Surface appropriate collisions
WO2019123729A1 (en) Image processing device, image processing method, and program
US11738270B2 (en) Simulation system, processing method, and information storage medium
US11938398B2 (en) Light field display system for video games and electronic sports
JP6039594B2 (en) Information processing apparatus and information processing method
Schmidt et al. Floor-projected guidance cues for collaborative exploration of spatial augmented reality setups
KR101192314B1 (en) System for Realistic 3D Game
KR101177058B1 (en) System for 3D based marker
Tang et al. Emerging human-toy interaction techniques with augmented and mixed reality
CN110415354A (en) Three-dimensional immersive experience system and method based on spatial position
小川航平 et al. A Study on Embodied Expressions in Remote Teleconference
Rubidge Virtually Sensuous (Geographies): Towards a Strategy for Archiving Multi-user Experiential and Participatory Installations
YAN Tangible user interfaces for augmented reality
Sodhi Ubiquitous interactive displays: Magical experiences beyond the screen
ALEXIS et al. Direct interaction with holographic light field displays enabled by 3D touch and gesture detection

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150626

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20161011

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee