KR20230101651A - System for providing information of spectator in augmented reality or virtual reality performances - Google Patents

System for providing information of spectator in augmented reality or virtual reality performances Download PDF

Info

Publication number
KR20230101651A
KR20230101651A KR1020220051012A KR20220051012A KR20230101651A KR 20230101651 A KR20230101651 A KR 20230101651A KR 1020220051012 A KR1020220051012 A KR 1020220051012A KR 20220051012 A KR20220051012 A KR 20220051012A KR 20230101651 A KR20230101651 A KR 20230101651A
Authority
KR
South Korea
Prior art keywords
information
augmented reality
virtual reality
spectator
server
Prior art date
Application number
KR1020220051012A
Other languages
Korean (ko)
Inventor
조병옥
이근주
Original Assignee
주식회사 메타모스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 메타모스 filed Critical 주식회사 메타모스
Publication of KR20230101651A publication Critical patent/KR20230101651A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/067Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components
    • G06K19/07Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components with integrated circuit chips
    • G06K19/0723Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components with integrated circuit chips the record carrier comprising an arrangement for non-contact communication, e.g. wireless communication circuits on transponder cards, non-contact smart cards or RFIDs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10009Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves
    • G06K7/10297Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves arrangements for handling protocols designed for non-contact record carriers such as RFIDs NFCs, e.g. ISO/IEC 14443 and 18092
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/11Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
    • H04B10/114Indoor or close-range type systems
    • H04B10/116Visible light communication
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/155Coordinated control of two or more light sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Computer Hardware Design (AREA)
  • Toxicology (AREA)
  • Electromagnetism (AREA)
  • General Health & Medical Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • Optics & Photonics (AREA)
  • General Business, Economics & Management (AREA)
  • Signal Processing (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템에 관한 것으로서, 특히 증강현실 기기 또는 가상현실 기기를 착용하고 관람석에 착석하면 해당 기기에 포함된 RFID(Radio Frequency Identification) 태크의 정보가 관람석의 RFID 리더기에 의해 판독되어 증강현실 기기 또는 가상현실 기기의 번호가 파악되고, RFID 리더기로부터 관람석의 좌석 번호 정보와 증강현실 기기 또는 가상현실 기기의 번호정보가 서버에 전달됨과 아울러, 증강현실 기기 또는 가상현실 기기의 관성센서에서 감지된 관람객의 움직임 정보가 서버에 전달되어 서버로부터 관람석의 위치에 적합한 3차원 가상 공연 영상을 전달받을 수 있게 하는, 증강현실 또는 가상현실 공연에서의 관람객의 정보 제공 시스템에 관한 것이다.The present invention relates to a system for providing spectator information in an augmented reality or virtual reality performance, and in particular, when an augmented reality or virtual reality device is worn and seated in a spectator seat, information of an RFID (Radio Frequency Identification) tag included in the device is transmitted to the spectator seat. It is read by the RFID reader and the number of the augmented reality device or virtual reality device is grasped, and the seat number information of the auditorium and the number information of the augmented reality device or virtual reality device are transmitted to the server from the RFID reader, and the augmented reality device or A spectator information providing system in an augmented reality or virtual reality performance that allows the viewer's movement information detected by the inertial sensor of the virtual reality device to be transmitted to the server to receive a 3D virtual performance image suitable for the position of the audience seat from the server. It is about.

Description

증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템{SYSTEM FOR PROVIDING INFORMATION OF SPECTATOR IN AUGMENTED REALITY OR VIRTUAL REALITY PERFORMANCES} Spectator information provision system in augmented reality or virtual reality performance {SYSTEM FOR PROVIDING INFORMATION OF SPECTATOR IN AUGMENTED REALITY OR VIRTUAL REALITY PERFORMANCES}

본 발명은 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템에 관한 것으로서, 특히 증강현실 기기 또는 가상현실 기기를 착용하고 관람석에 착석하면 해당 기기에 포함된 RFID(Radio Frequency Identification) 태크의 정보가 관람석의 RFID 리더기에 의해 판독되어 증강현실 기기 또는 가상현실 기기의 번호가 파악되고, RFID 리더기로부터 관람석의 좌석 번호 정보와 증강현실 기기 또는 가상현실 기기의 번호정보가 서버에 전달됨과 아울러, 증강현실 기기 또는 가상현실 기기의 관성센서에서 감지된 관람객의 움직임 정보가 서버에 전달되어 서버로부터 관람석의 위치에 적합한 3차원 가상 공연 영상을 전달받을 수 있게 하는, 증강현실 또는 가상현실 공연에서의 관람객의 정보 제공 시스템에 관한 것이다.The present invention relates to a system for providing spectator information in an augmented reality or virtual reality performance, and in particular, when an augmented reality or virtual reality device is worn and seated in a spectator seat, information of an RFID (Radio Frequency Identification) tag included in the device is transmitted to the spectator seat. It is read by the RFID reader and the number of the augmented reality device or virtual reality device is grasped, and the seat number information of the auditorium and the number information of the augmented reality device or virtual reality device are transmitted to the server from the RFID reader, and the augmented reality device or A spectator information providing system in an augmented reality or virtual reality performance that allows the viewer's movement information detected by the inertial sensor of the virtual reality device to be transmitted to the server to receive a 3D virtual performance image suitable for the position of the audience seat from the server. It is about.

통상, 증강현실(AR) 또는 가상현실(VR) 기기를 착용하고 관람석에 앉아 무대 공간에 가상 이미지로 보여지는 3차원 가상 공연의 영상을 관람할 때, 관람객의 좌석 위치에 따라 서로 다른 영상을 증강현실 또는 가상현실 기기에 출력해야 한다.Usually, when sitting in the audience wearing an augmented reality (AR) or virtual reality (VR) device and watching a video of a 3D virtual performance shown as a virtual image in the stage space, different images are displayed according to the seating position of the audience. Or output to a virtual reality device.

종래 기술의 경우 NFC 또는 비콘을 사용하고 있으나, NFC의 경우에는 수 cm 이내의 매우 가까운 거리에 태그와 수신기를 위치시켜야 하므로 사용상 불편한 점이 있으며, 비콘의 경우 블루투스 RF 기술을 사용하는 것으로 실질적으로는 사람이나 장애물의 영향으로 1m 이상의 오차가 발생할 수 있다는 문제점이 있었다.In the case of the prior art, NFC or beacon is used, but in the case of NFC, there is a inconvenience in use because the tag and the receiver must be placed at a very close distance within several cm. However, there was a problem that an error of more than 1m could occur due to the influence of obstacles.

한국공개특허 제10-2019-0098472호(발명의 명칭: 비콘 신호를 이용한 다중 가상현실 모션 시뮬레이션 구현 시스템 및 방법)Korean Patent Publication No. 10-2019-0098472 (Title of Invention: Multi-virtual reality motion simulation implementation system and method using beacon signals)

따라서 본 발명은 상기와 같은 문제점을 해결하기 위해 이루어진 것으로서, 본 발명의 목적은 3차원 가상 공연의 영상 관람 시 좌석 정보를 포함한 증강현실 기기 또는 가상현실 기기의 정보를 편리하고 큰 오차 발생 없이 서버에 제공하여 서버로부터 관람석의 위치에 적합한 3차원 가상 공연 영상을 전달받을 수 있는, 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템을 제공하는 데에 있다.Therefore, the present invention has been made to solve the above problems, and an object of the present invention is to provide information of augmented reality devices or virtual reality devices, including seat information, to a server conveniently and without large errors when viewing a video of a 3D virtual performance. An object of the present invention is to provide a system for providing spectator information in an augmented reality or virtual reality performance that can receive a three-dimensional virtual performance image suitable for a location of a spectator seat from a server.

상기 목적을 달성하기 위해, 본 발명의 실시형태에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템은 관람객의 머리에 착용되어 증강현실 또는 가상현실 환경을 제공하고, 기기의 정보를 저장하고 있는 RFID 태그와 관람자의 움직임을 감지하는 관성센서가 장착되어 있으며, 서버에 상기 관람객의 움직임 정보를 제공하는 AR(Augmented Reality) 또는 VR(Virtual Reality) 기기; 및 관람석에 장착되고, 상기 AR 또는 VR 기기와 원격으로 통신하여 RFID 태그에 저장된 정보를 수신하고 디코딩하여서 기기의 정보를 인식하고 인식된 기기의 정보 및 관람석 좌석 정보를 상기 서버에 제공하는 RFID 리더기;를 포함하는 것을 특징으로 한다.In order to achieve the above object, the system for providing audience information in an augmented reality or virtual reality performance according to an embodiment of the present invention is worn on the head of a spectator to provide an augmented reality or virtual reality environment, and stores information of the device an AR (Augmented Reality) or VR (Virtual Reality) device equipped with an RFID tag and an inertial sensor for detecting a viewer's movement and providing the viewer's movement information to a server; and an RFID reader mounted on a grandstand, remotely communicating with the AR or VR device to receive and decode information stored in an RFID tag, recognizing device information, and providing the recognized device information and grandstand seat information to the server; It is characterized in that it includes.

상기 실시형태에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템에 있어서, 상기 RFID 태그는 수동형 태그일 수 있다.In the system for providing information on visitors in an augmented reality or virtual reality performance according to the above embodiment, the RFID tag may be a passive tag.

상기 목적을 달성하기 위해, 본 발명의 다른 실시형태에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템은 조명 광에 디지털 정보를 실어 관람석별로 송신하도록 구성된 복수 개의 가시광 통신 조명기; 및 관람객의 머리에 착용되어 증강현실 또는 가상현실 환경을 제공하고, 관람객의 움직임을 감지하는 관성센서가 장착되어 있으며, 상기 가시광 통신 조명기에서 조명 광을 수신하고 디지털 정보로 변환하여 분석하여서 관람석 좌석 정보를 인식하고 인식된 관람석 좌석 정보와 감지된 관람객의 움직임 정보를 서버에 제공하는 AR(Augmented Reality) 또는 VR(Virtual Reality) 기기;를 포함하는 것을 특징으로 한다.In order to achieve the above object, a system for providing audience information in an augmented reality or virtual reality performance according to another embodiment of the present invention includes a plurality of visible light communication illuminators configured to transmit digital information to illumination light for each seat; and an inertial sensor that is worn on the head of a spectator to provide an augmented reality or virtual reality environment and detects the movement of the spectator. It is characterized in that it includes; AR (Augmented Reality) or VR (Virtual Reality) device for recognizing and providing the recognized spectator seat information and the sensed movement information of the spectator to the server.

상기 실시형태에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템에 있어서, 상기 가시광 통신 조명기는 광원으로서 LED 또는 레이저 장치를 사용할 수 있다.In the system for providing information to visitors in an augmented reality or virtual reality performance according to the embodiment, the visible light communication illuminator may use an LED or laser device as a light source.

상기 실시형태에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템에 있어서, AR 또는 VR 기기는 상기 가시광 통신 조명기로부터 조명 광을 통해 제공된 디지털 정보에 포함된 구동 제어 신호에 따라 온(On), 오프(Off) 동작될 수 있다.In the visitor information providing system in an augmented reality or virtual reality performance according to the embodiment, the AR or VR device is turned on according to a drive control signal included in digital information provided through illumination light from the visible light communication illuminator, Off (Off) can be operated.

본 발명의 실시형태에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템에 의하면, 관람객의 머리에 착용되어 증강현실 또는 가상현실 환경을 제공하고, 기기의 정보를 저장하고 있는 RFID 태그와 관람자의 움직임을 감지하는 관성센서가 장착되어 있으며, 서버에 상기 관람객의 움직임 정보를 제공하는 AR 또는 VR 기기; 및 관람석에 장착되고, 상기 AR 또는 VR 기기와 원격으로 통신하여 RFID 태그에 저장된 정보를 수신하고 디코딩하여서 기기의 정보를 인식하고 인식된 기기의 정보 및 관람석 좌석 정보를 상기 서버에 제공하는 RFID 리더기;를 포함하여 구성됨으로써, 3차원 가상 공연의 영상 관람 시 좌석 정보를 포함한 증강현실 기기 또는 가상현실 기기의 정보를 편리하고 큰 오차 발생 없이 서버에 제공하여 서버로부터 관람석의 위치에 적합한 3차원 가상 공연 영상을 전달받을 수 있다는 뛰어난 효과가 있다.According to the spectator information providing system in an augmented reality or virtual reality performance according to an embodiment of the present invention, it is worn on the head of the spectator to provide an augmented reality or virtual reality environment, and the RFID tag storing device information and the spectator's An AR or VR device equipped with an inertial sensor for detecting motion and providing motion information of the spectator to a server; and an RFID reader mounted on a grandstand, remotely communicating with the AR or VR device to receive and decode information stored in an RFID tag, recognizing device information, and providing the recognized device information and grandstand seat information to the server; By being configured to include, when viewing a video of a 3D virtual performance, the information of the augmented reality device or virtual reality device, including seat information, is provided to the server conveniently and without a large error, 3D virtual performance image suitable for the location of the audience seat There is an excellent effect that can be delivered.

본 발명의 다른 실시형태에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템에 의하면, 조명 광에 디지털 정보를 실어 관람석별로 송신하도록 구성된 복수 개의 가시광 통신 조명기; 및 관람객의 머리에 착용되어 증강현실 또는 가상현실 환경을 제공하고, 관람객의 움직임을 감지하는 관성센서가 장착되어 있으며, 상기 가시광 통신 조명기에서 조명 광을 수신하고 디지털 정보로 변환하여 분석하여서 관람석 좌석 정보를 인식하고 인식된 관람석 좌석 정보와 감지된 관람객의 움직임 정보를 서버에 제공하는 AR 또는 VR 기기;를 포함하여 구성됨으로써, 3차원 가상 공연의 영상 관람 시 좌석 정보와 관람객의 움직임 정보를 편리하고 큰 오차 발생 없이 서버에 제공하여 서버로부터 관람석의 위치에 적합한 3차원 가상 공연 영상을 전달받을 수 있다는 뛰어난 효과가 있다.According to a visitor information providing system in an augmented reality or virtual reality performance according to another embodiment of the present invention, a plurality of visible light communication illuminators configured to transmit digital information to illumination light for each seat; and an inertial sensor that is worn on the head of a spectator to provide an augmented reality or virtual reality environment and detects the movement of the spectator. AR or VR device that recognizes and provides the recognized spectator seat information and the detected movement information of the spectators to the server; by being configured to include a convenient and large There is an excellent effect of being able to receive a 3D virtual performance image suitable for the position of the audience seat from the server by providing it to the server without occurrence of error.

도 1은 본 발명의 제1 실시예에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템의 블록구성도이다.
도 2는 도 1의 AR/VR 기기 및 RFID 리더기의 구성을 나타낸 도면이다.
도 3은 본 발명의 제2 실시예에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템의 블록구성도이다.
도 4는 도 3의 AR/VR 기기 및 가시광 통신 조명기의 구성을 나타낸 도면이다.
1 is a block diagram of a system for providing spectator information in an augmented reality or virtual reality performance according to a first embodiment of the present invention.
FIG. 2 is a diagram showing the configuration of the AR/VR device and RFID reader of FIG. 1;
3 is a block diagram of a system for providing spectator information in an augmented reality or virtual reality performance according to a second embodiment of the present invention.
FIG. 4 is a diagram showing configurations of the AR/VR device and the visible light communication illuminator of FIG. 3 .

본 발명의 실시예를 설명함에 있어서, 본 발명과 관련된 공지기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 상세한 설명에서 사용되는 용어는 단지 본 발명의 실시예를 기술하기 위한 것이며, 결코 제한적으로 해석되어서는 안 된다. 명확하게 달리 사용되지 않는 한, 단수 형태의 표현은 복수 형태의 의미를 포함한다. 본 설명에서, "포함" 또는 "구비"와 같은 표현은 어떤 특성들, 숫자들, 단계들, 동작들, 요소들, 이들의 일부 또는 조합을 가리키기 위한 것이며, 기술된 것 이외에 하나 또는 그 이상의 다른 특성, 숫자, 단계, 동작, 요소, 이들의 일부 또는 조합의 존재 또는 가능성을 배제하는 것으로 해석되어서는 안 된다.In describing the embodiments of the present invention, if it is determined that the detailed description of the known technology related to the present invention may unnecessarily obscure the subject matter of the present invention, the detailed description will be omitted. In addition, terms to be described later are terms defined in consideration of functions in the present invention, which may vary according to the intention or custom of a user or operator. Therefore, the definition should be made based on the contents throughout this specification. Terms used in the detailed description are only for describing the embodiments of the present invention, and should not be construed as limiting in any way. Unless expressly used otherwise, singular forms of expression include plural forms. In this description, expressions such as “comprising” or “comprising of” are intended to indicate certain characteristics, numbers, steps, operations, elements, some or combinations thereof, and one or more other than those described. It should not be construed to exclude the existence or possibility of any other feature, number, step, operation, element, part or combination thereof.

도면에서 도시된 각 시스템에서, 몇몇 경우에서의 요소는 각각 동일한 참조 번호 또는 상이한 참조 번호를 가져서 표현된 요소가 상이하거나 유사할 수가 있음을 시사할 수 있다. 그러나 요소는 상이한 구현을 가지고 본 명세서에서 보여지거나 기술된 시스템 중 몇몇 또는 전부와 작동할 수 있다. 도면에서 도시된 다양한 요소는 동일하거나 상이할 수 있다. 어느 것이 제1 요소로 지칭되는지 및 어느 것이 제2 요소로 불리는지는 임의적이다.In each system shown in the figures, elements in some cases may each have the same or different reference numbers to indicate that the elements represented may be different or similar. However, elements may have different implementations and work with some or all of the systems shown or described herein. Various elements shown in the drawings may be the same or different. Which one is called the first element and which one is called the second element is arbitrary.

본 명세서에서 어느 하나의 구성요소가 다른 구성요소로 자료 또는 신호를 '전송', '전달' 또는 '제공'한다 함은 어느 한 구성요소가 다른 구성요소로 직접 자료 또는 신호를 전송하는 것은 물론, 적어도 하나의 또 다른 구성요소를 통하여 자료 또는 신호를 다른 구성요소로 전송하는 것을 포함한다.In this specification, when one component 'transmits', 'transmits', or 'provides' data or signals to another component, it means that one component directly transmits data or signals to another component, It involves transmitting data or signals to another component through at least one other component.

이하, 본 발명의 실시예를 도면을 참조하여 상세히 설명하기로 한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

[제1 실시예][First Embodiment]

도 1은 본 발명의 제1 실시예에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템의 블록구성도이고, 도 2는 도 1의 AR/VR 기기 및 RFID 리더기의 구성을 나타낸 도면이다.1 is a block diagram of a system for providing information to visitors in an augmented reality or virtual reality performance according to a first embodiment of the present invention, and FIG. 2 is a diagram showing the configuration of an AR/VR device and an RFID reader of FIG. 1 .

본 발명의 제1 실시예에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템은, 도 1 및 도 2에 도시된 바와 같이, AR(Augmented Reality) 또는 VR(Virtual Reality) 기기(10) 및 RFID 리더기(20)를 포함한다. AR 또는 VR 기기(10)와 RFID 리더기(20)는 고주파 대역(약 13.56㎒)의 주파수를 사용하여 약 60㎝의 거리에서 서로 무선통신 가능하다. AR 또는 VR 기기(10) 및 RFID 리더기(20)는 서버(30)와 무선 통신 가능하며 통신 방식은 특별히 제한되지 않는다.A system for providing visitor information in an augmented reality or virtual reality performance according to a first embodiment of the present invention, as shown in FIGS. 1 and 2, includes an AR (Augmented Reality) or VR (Virtual Reality) device 10 and It includes an RFID reader 20. The AR or VR device 10 and the RFID reader 20 can wirelessly communicate with each other at a distance of about 60 cm using a frequency of a high frequency band (about 13.56 MHz). The AR or VR device 10 and the RFID reader 20 can communicate wirelessly with the server 30, and the communication method is not particularly limited.

AR 또는 VR 기기(10)는 관람객이 머리에 착용한 후 관람석에 착석하면 서버(30)로부터 관람객의 좌석 위치에 따른 영상을 입력받아 증강현실 환경 또는 가상현실 환경을 제공하는 역할을 한다. AR 또는 VR 기기(10)는 자체 기기의 정보를 저장하고 있는 RFID 태그(T)와 관람자의 움직임을 감지하는 관성센서(미 도시됨)가 장착되어 있으며 서버(30)에 관람객의 움직임 정보를 제공하는 역할을 한다. RFID 태그(T)는 수동형 태크이기 때문에 AR 또는 VR 기기(10)에 부착되어 사용될 경우, 별도의 전력이나 실행 앱 설치가 불필요하다는 장점이 있다. The AR or VR device 10 serves to provide an augmented reality environment or a virtual reality environment by receiving an image according to the seat position of the viewer from the server 30 when the viewer wears it on the head and then sits in the seat. The AR or VR device 10 is equipped with an RFID tag (T) that stores its own device information and an inertial sensor (not shown) that detects the viewer's movement, and provides the viewer's movement information to the server 30. play a role Since the RFID tag (T) is a passive tag, when it is attached to and used in the AR or VR device 10, it has the advantage of not requiring separate power or installation of an running app.

RFID 리더기(20)는 관람석에 장착되고, AR 또는 VR 기기(10)가 일정 거리만큼 접근하면 AR 또는 VR 기기(10)와 통신하여 RFID 태그(T)에 저장된 정보를 수신하고 디코딩하여서 기기의 정보를 인식하고, 인식된 기기의 정보 및 관람석 좌석 정보[RFID 리더기(20) 별로 미리 부여되어 있음]를 서버(30)에 제공하는 역할을 한다.The RFID reader 20 is mounted on a spectator seat, and when the AR or VR device 10 approaches a certain distance, it communicates with the AR or VR device 10 to receive and decode the information stored in the RFID tag T, thereby decoding the information of the device. and plays a role of providing the server 30 with the information of the recognized device and the spectator seat information (provided in advance for each RFID reader 20).

위와 같이 구성된 본 발명의 제1 실시예에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템에 의하면, 관람객의 머리에 착용되어 증강현실 또는 가상현실 환경을 제공하고, 기기의 정보를 저장하고 있는 RFID 태그와 관람자의 움직임을 감지하는 관성센서가 장착되어 있으며, 서버에 상기 관람객의 움직임 정보를 제공하는 AR 또는 VR 기기; 및 관람석에 장착되고, 상기 AR 또는 VR 기기와 원격으로 통신하여 RFID 태그에 저장된 정보를 수신하고 디코딩하여서 기기의 정보를 인식하고 인식된 기기의 정보 및 관람석 좌석 정보를 상기 서버에 제공하는 RFID 리더기;를 포함하여 구성됨으로써, 3차원 가상 공연의 영상 관람 시 좌석 정보를 포함한 증강현실 기기 또는 가상현실 기기의 정보를 편리하고 큰 오차 발생 없이 서버에 제공하여 서버로부터 관람석의 위치에 적합한 3차원 가상 공연 영상을 전달받을 수 있다.According to the visitor information providing system in the augmented reality or virtual reality performance according to the first embodiment of the present invention configured as above, it is worn on the head of the spectator to provide an augmented reality or virtual reality environment, and stores information of the device an AR or VR device equipped with an RFID tag and an inertial sensor for detecting a viewer's movement and providing the viewer's movement information to a server; and an RFID reader mounted on a grandstand, remotely communicating with the AR or VR device to receive and decode information stored in an RFID tag, recognizing device information, and providing the recognized device information and grandstand seat information to the server; By being configured to include, when viewing a video of a 3D virtual performance, the information of the augmented reality device or virtual reality device, including seat information, is provided to the server conveniently and without a large error, 3D virtual performance image suitable for the location of the audience seat can be delivered.

[제2 실시예][Second Embodiment]

도 3은 본 발명의 제2 실시예에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템의 블록구성도이고, 도 4는 도 3의 AR/VR 기기 및 가시광 통신 조명기의 구성을 나타낸 도면이다.3 is a block diagram of a system for providing information on visitors in an augmented reality or virtual reality performance according to a second embodiment of the present invention, and FIG. 4 is a diagram showing the configuration of an AR/VR device and a visible light communication illuminator of FIG. 3 .

본 발명의 제2 실시예에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템은, 도 3 및 도 4에 도시된 바와 같이, 복수 개의 가시광 통신 조명기(5) 및 AR 또는 VR 기기(10)를 포함한다. 가시광 통신 조명기(5)와 AR 또는 VR 기기(10)는 서로 가시광통신 가능하다. AR 또는 VR 기기(10)는 서버(30)와 무선 통신 가능하며 통신 방식은 특별히 제한되지 않는다.As shown in FIGS. 3 and 4, a system for providing information on visitors in an augmented reality or virtual reality performance according to a second embodiment of the present invention includes a plurality of visible light communication illuminators 5 and an AR or VR device 10 includes The visible light communication illuminator 5 and the AR or VR device 10 are capable of visible light communication with each other. The AR or VR device 10 can communicate wirelessly with the server 30, and the communication method is not particularly limited.

복수 개의 가시광 통신 조명기(5)는 조명 광에 디지털 정보를 실어 관람석별로 송신하는 역할을 한다. 즉, 가시광 통신 조명기(5)는 조명 광의 켜짐과 꺼짐을 반복하여 디지털 정보를 관람석별로 전달한다. 광원으로서는 주로 점멸 속도가 빠른 LED를 사용하며, 레이저 장치를 사용할 수 있다. LED에서 발생되는 가시광은 380~780nm 파장을 가지며, 빛이 초당 200번 이상의 점멸을 반복하면 사람의 눈은 계속 켜져 있는 빛으로 인식하므로, 사람은 일반 조명과 동일한 환경으로 생각하지만 LED의 광은 빠르게 켜짐과 꺼짐을 반복하며 디지털 정보를 전송할 수 있다. 예컨대, 공연장의 천정 조명을 가시광 통신이 가능한 LED 스포트라이트로 구성하고, 관람석마다 서로 겹치지 않게 가시광 통신 조명이 향하도록 설치할 수 있다.The plurality of visible light communication illuminators 5 load digital information on illumination light and transmit it to each audience seat. That is, the visible light communication illuminator 5 transmits digital information to each audience seat by repeatedly turning the illumination light on and off. As a light source, an LED having a fast flashing speed is mainly used, and a laser device may be used. The visible light generated from the LED has a wavelength of 380 to 780 nm, and when the light flashes more than 200 times per second, the human eye recognizes it as continuously on. It can transmit digital information by repeatedly turning on and off. For example, the ceiling lighting of a concert hall can be configured with LED spotlights capable of visible light communication, and the visible light communication lighting can be installed so as not to overlap each other in each auditorium.

AR 또는 VR 기기(10)는 관람객이 머리에 착용한 후 관람석에 착석하면 서버(30)로부터 관람객의 좌석 위치에 따른 영상을 입력받아 증강현실 환경 또는 가상현실 환경을 제공하는 역할을 한다. AR 또는 VR 기기(10)의 상부에는 가시광 수신기(R)가 장착된다. 가시광 수신기(R)는 가시광 통신 조명기(5)에서 조명 광을 수신하여 디지털 정보(관람석 좌석 정보 및 구동 제어 신호 정보가 포함되어 있음)로 변환하는 포토다이오드, 및 이 디지털 정보에 포함된 구동 제어 신호에 따라 온(On), 오프(Off) 동작되는 구동 회로를 포함할 수 있다. AR 또는 VR 기기(10)는 관람자의 움직임을 감지하는 관성센서(미 도시됨)가 장착되어 있다. AR 또는 VR 기기(10)는 특히 가시광 통신 조명기(5)에서 제공되는 디지털 정보에 포함된 관람석 좌석 정보와 감지된 관람자의 움직임 정보를 서버(30)에 제공하는 역할을 한다.The AR or VR device 10 serves to provide an augmented reality environment or a virtual reality environment by receiving an image according to the seat position of the viewer from the server 30 when the viewer wears it on the head and then sits in the seat. Above the AR or VR device 10, a visible light receiver R is mounted. The visible light receiver R receives illumination light from the visible light communication illuminator 5 and converts it into digital information (including grandstand seat information and drive control signal information), and a drive control signal included in the digital information. It may include a driving circuit that is turned on and off according to. The AR or VR device 10 is equipped with an inertial sensor (not shown) that detects a viewer's movement. The AR or VR device 10 plays a role of providing the server 30 with spectator seat information included in the digital information provided from the visible light communication illuminator 5 and motion information of the detected spectator.

AR 또는 VR 기기(10)가 가시광 통신 조명기(5)에서 수신하는 디지털 정보에는 시작과 끝을 알려주는 비트들이 포함된다. 시작과 끝을 알려주는 비트들 사이에는 데이터 비트들이 포함된다. 데이터 비트들에는 관람석 좌석 정보(예컨대, 좌석 번호), 및 AR 또는 VR 기기(10)의 구동 제어 신호 정보가 포함될 수 있다. 데이터의 끝을 알려주는 비트들에는 오류 검출 기능이 포함된다. 사용자의 움직임이나, 움직이는 물체에 의해 가려지거나 반사된 빛 등으로 인해 데이터 수신에 오류가 발생할 수 있으며, 이러한 오류 발생을 줄이기 위해 2회 이상 동일한 데이터를 수신하였을 경우 실행하도록 하거나, 오류 발생을 판단하고 수정할 수 있는 코드가 포함될 수 있다.The digital information that the AR or VR device 10 receives from the visible light communication illuminator 5 includes bits indicating start and end. Data bits are included between the bits indicating the start and end. The data bits may include spectator seat information (eg, seat number) and drive control signal information of the AR or VR device 10 . The bits indicating the end of data include an error detection function. Errors in data reception may occur due to the user's motion or light blocked or reflected by a moving object. May contain modifiable code.

위와 같이 구성된 본 발명의 제2 실시예에 의한 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템에 의하면, 조명 광에 디지털 정보를 실어 관람석별로 송신하도록 구성된 복수 개의 가시광 통신 조명기; 및 관람객의 머리에 착용되어 증강현실 또는 가상현실 환경을 제공하고, 관람객의 움직임을 감지하는 관성센서가 장착되어 있으며, 상기 가시광 통신 조명기에서 조명 광을 수신하고 디지털 정보로 변환하여 분석하여서 관람석 좌석 정보를 인식하고 인식된 관람석 좌석 정보와 감지된 관람객의 움직임 정보를 서버에 제공하는 AR 또는 VR 기기;를 포함하여 구성됨으로써, 3차원 가상 공연의 영상 관람 시 좌석 정보와 관람객의 움직임 정보를 편리하고 큰 오차 발생 없이 서버에 제공하여 서버로부터 관람석의 위치에 적합한 3차원 가상 공연 영상을 전달받을 수 있다. According to the visitor information providing system in the augmented reality or virtual reality performance according to the second embodiment of the present invention configured as above, a plurality of visible light communication illuminators configured to transmit digital information to each audience seat by loading illumination light; and an inertial sensor that is worn on the head of a spectator to provide an augmented reality or virtual reality environment and detects the movement of the spectator. AR or VR device that recognizes and provides the recognized spectator seat information and the detected movement information of the spectators to the server; by being configured to include a convenient and large It is possible to receive a 3D virtual performance image suitable for the position of the audience seat from the server by providing it to the server without occurrence of an error.

도면과 명세서에는 최적의 실시예가 개시되었으며, 특정한 용어들이 사용되었으나 이는 단지 본 발명의 실시형태를 설명하기 위한 목적으로 사용된 것이지 의미를 한정하거나 특허 청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 수 있을 것이다. 따라서 본 발명의 진정한 기술적 보호범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.Optimal embodiments have been disclosed in the drawings and specifications, and specific terms have been used, but they are only used for the purpose of describing the embodiments of the present invention, and are used to limit the meaning or scope of the present invention described in the claims. it didn't happen Therefore, those skilled in the art will understand that various modifications and equivalent other embodiments are possible therefrom. Therefore, the true technical scope of protection of the present invention should be determined by the technical spirit of the appended claims.

5: 가시광 통신 조명기
10: AR/VR 기기
T: RFID 태그
R: 가시광 수신기
20: RFID 리더기
30: 서버
5: visible light communication illuminator
10: AR/VR device
T: RFID tag
R: visible light receiver
20: RFID reader
30: server

Claims (5)

관람객의 머리에 착용되어 증강현실 또는 가상현실 환경을 제공하고, 기기의 정보를 저장하고 있는 RFID 태그와 관람자의 움직임을 감지하는 관성센서가 장착되어 있으며, 서버에 상기 관람객의 움직임 정보를 제공하는 AR(Augmented Reality) 또는 VR(Virtual Reality) 기기; 및
관람석에 장착되고, 상기 AR 또는 VR 기기와 원격으로 통신하여 RFID 태그에 저장된 정보를 수신하고 디코딩하여서 기기의 정보를 인식하고 인식된 기기의 정보 및 관람석 좌석 정보를 상기 서버에 제공하는 RFID 리더기;를 포함하는, 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템.
It is worn on the viewer's head to provide an augmented reality or virtual reality environment, and is equipped with an RFID tag that stores device information and an inertial sensor that detects the viewer's movement, and AR that provides the viewer's movement information to the server. (Augmented Reality) or Virtual Reality (VR) devices; and
An RFID reader mounted on a grandstand, remotely communicating with the AR or VR device to receive and decode information stored in an RFID tag, recognizing device information, and providing the recognized device information and spectator seat information to the server; Including, augmented reality or virtual reality spectator information provision system in the performance.
제1 항에 있어서,
상기 RFID 태그는 수동형 태그인, 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템.
According to claim 1,
The RFID tag is a passive tag, a system for providing spectator information in augmented reality or virtual reality performances.
조명 광에 디지털 정보를 실어 관람석별로 송신하도록 구성된 복수 개의 가시광 통신 조명기; 및
관람객의 머리에 착용되어 증강현실 또는 가상현실 환경을 제공하고, 관람객의 움직임을 감지하는 관성센서가 장착되어 있으며, 상기 가시광 통신 조명기에서 조명 광을 수신하고 디지털 정보로 변환하여 분석하여서 관람석 좌석 정보를 인식하고 인식된 관람석 좌석 정보와 감지된 관람객의 움직임 정보를 서버에 제공하는 AR(Augmented Reality) 또는 VR(Virtual Reality) 기기;를 포함하는, 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템.
a plurality of visible light communication illuminators configured to load illumination light with digital information and transmit the illumination light for each seat; and
It is worn on the viewer's head to provide an augmented reality or virtual reality environment, and is equipped with an inertial sensor that detects the viewer's movement. A system for providing spectator information in an augmented reality or virtual reality performance, including an AR (Augmented Reality) or VR (Virtual Reality) device that recognizes and provides the recognized spectator seat information and detected spectator movement information to a server.
제3 항에 있어서,
상기 가시광 통신 조명기는
광원으로서 LED 또는 레이저 장치를 사용하는, 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템.
According to claim 3,
The visible light communication illuminator
A system for providing spectator information in an augmented reality or virtual reality performance using an LED or laser device as a light source.
제3 항에 있어서,
AR 또는 VR 기기는
상기 가시광 통신 조명기로부터 조명 광을 통해 제공된 디지털 정보에 포함된 구동 제어 신호에 따라 온(On), 오프(Off) 동작되는, 증강현실 또는 가상현실 공연에서의 관람객 정보 제공 시스템.
According to claim 3,
AR or VR devices
A system for providing spectator information in an augmented reality or virtual reality performance, which is operated on or off according to a driving control signal included in digital information provided through illumination light from the visible light communication illuminator.
KR1020220051012A 2021-12-29 2022-04-25 System for providing information of spectator in augmented reality or virtual reality performances KR20230101651A (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210191486 2021-12-29
KR20210191486 2021-12-29

Publications (1)

Publication Number Publication Date
KR20230101651A true KR20230101651A (en) 2023-07-06

Family

ID=87185652

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220051012A KR20230101651A (en) 2021-12-29 2022-04-25 System for providing information of spectator in augmented reality or virtual reality performances

Country Status (1)

Country Link
KR (1) KR20230101651A (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190098472A (en) 2018-02-14 2019-08-22 김현일 System and method of virtual reality multi motion simulation using beacon signal

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190098472A (en) 2018-02-14 2019-08-22 김현일 System and method of virtual reality multi motion simulation using beacon signal

Similar Documents

Publication Publication Date Title
JP6157011B2 (en) Encoded photodetector
US20170160626A1 (en) Projector device
EP1870802A1 (en) Method and device for making user equipment part of a display device
US20160343163A1 (en) Augmented reality device, system, and method for safety
CN106415301A (en) Real-time location system in wireless sensor network
JP2008292397A (en) Positional information providing system using visible light communication
US10694328B2 (en) Method of locating a mobile device in a group of mobile devices
WO2011053442A1 (en) System and method for operating an rfid system with head tracking
JP7305830B2 (en) Vehicle dispatch
US20170094248A1 (en) Range imaging
US8921752B2 (en) Information acquisition device, information acquisition method, recording medium, and information acquisition system
JPWO2007013260A1 (en) Work system and work instruction method in work system
CN110325896A (en) The portable device and its method of virtual objects for rendering
EP3329616B1 (en) Light emitting device for generating light with embedded information
US20190280770A1 (en) Method and apparatus for free-space optical transmission
US20120293639A1 (en) System and method for controlling the display of a stereoscopic video stream
KR20230101651A (en) System for providing information of spectator in augmented reality or virtual reality performances
JP2010217093A (en) Positioning system
EP3413281A1 (en) Lifi enabled guard security system
JP2007115412A (en) Presentation method, presentation system, and portable light emitting device
US20140132963A1 (en) Optical personal Locating device
JP2023500635A (en) Head-mounted device for displaying projected images
CN109479359B (en) System and method for providing device access to sensor data
JP2023549356A (en) System and method for interactive drone experience
GB2380883A (en) Location and identification of participants in a sporting event by means of optically readable tags

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application