KR102492751B1 - System for providing real-time untact service using remote control robot - Google Patents

System for providing real-time untact service using remote control robot Download PDF

Info

Publication number
KR102492751B1
KR102492751B1 KR1020210152021A KR20210152021A KR102492751B1 KR 102492751 B1 KR102492751 B1 KR 102492751B1 KR 1020210152021 A KR1020210152021 A KR 1020210152021A KR 20210152021 A KR20210152021 A KR 20210152021A KR 102492751 B1 KR102492751 B1 KR 102492751B1
Authority
KR
South Korea
Prior art keywords
remote
face
remote control
user terminal
robot
Prior art date
Application number
KR1020210152021A
Other languages
Korean (ko)
Inventor
신성권
Original Assignee
나라라 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 나라라 주식회사 filed Critical 나라라 주식회사
Priority to KR1020210152021A priority Critical patent/KR102492751B1/en
Application granted granted Critical
Publication of KR102492751B1 publication Critical patent/KR102492751B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • B25J13/006Controls for manipulators by means of a wireless system for controlling one or several manipulators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/067Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components
    • G06K19/07Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components with integrated circuit chips
    • G06K19/0723Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components with integrated circuit chips the record carrier comprising an arrangement for non-contact communication, e.g. wireless communication circuits on transponder cards, non-contact smart cards or RFIDs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0631Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06311Scheduling, planning or task assignment for a person or group
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Tourism & Hospitality (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Development Economics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Educational Administration (AREA)
  • Game Theory and Decision Science (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Manipulator (AREA)

Abstract

Disclosed is a real-time non-face-to-face service providing system using a remote control robot. To this end, the real-time non-face-to-face service providing system using a remote control robot comprises: at least one remote control robot capturing and transmitting videos and recognizing tags installed at a visited place to transmit tag information while moving forward, backward, left, and right according to user commands; at least one remote center terminal receiving and analyzing the tag information transmitted from the at least one remote control robot and generating and transmitting explanatory information corresponding to the tag information; at least one user terminal generating a control signal to control the at least one remote control robot, receiving and outputting a streaming video captured from the at least one remote control robot in real time, and outputting the explanatory information along with the streaming video when the explanatory information is transmitted from the at least one remote center terminal; and a non-face-to-face service providing server assigning an identification code to the at least one remote center terminal and the at least one remote control robot to link the at least one user terminal with at least one unoccupied remote control robot among the remote control robots mapped to the remote center terminal selected in the user terminal. Accordingly, a video of a visited place can be checked remotely in real time.

Description

원격 조종로봇을 이용한 실시간 비대면 서비스 제공 시스템{SYSTEM FOR PROVIDING REAL-TIME UNTACT SERVICE USING REMOTE CONTROL ROBOT}Real-time non-face-to-face service provision system using remote control robot {SYSTEM FOR PROVIDING REAL-TIME UNTACT SERVICE USING REMOTE CONTROL ROBOT}

본 발명은 원격 조종로봇을 이용한 실시간 비대면 서비스 제공 시스템에 관한 것으로, 원격 조종로봇을 이용하여 실시간으로 국내 및 해외 박물관 등 관광지나 물품을 구매하기 위한 쇼핑몰에 직접 가지 않아도 원격으로 현장의 로봇을 제어하여 실시간 관광이나 쇼핑을 할 수 있는 플랫폼을 제공한다.The present invention relates to a system for providing real-time non-face-to-face service using a remote-controlled robot, and uses a remote-controlled robot to remotely control an on-site robot in real time without having to go directly to a shopping mall for purchasing goods or tourist attractions such as domestic and overseas museums. It provides a platform for real-time tourism or shopping.

코로나 팬데믹에 의한 사회적 거리두기 등으로 인해 외부 활동에 제약이 따르면서 대면 서비스 산업이 크게 위협받고 있다. 특히, 관광산업의 경우 전세계적으로 여행금지, 영업중지, 자가격리 등으로 인해 항공을 비롯한 교통과 관광인프라 등 관광산업 전반에 걸쳐 위태로운 결과를 초래하고 있다.The face-to-face service industry is greatly threatened as external activities are restricted due to social distancing caused by the corona pandemic. In particular, in the case of the tourism industry, travel bans, business suspensions, and self-isolation worldwide are causing precarious results throughout the tourism industry, including aviation, transportation, and tourism infrastructure.

관광산업은 여행사나 호텔 등 주요 관광기반산업만이 아니라 음식점, 기념품 가게, 교통, 재래시장 등 다양한 사업이 유기적으로 연결되어 형성되어 있는데, 개별단위의 사업체는 위기 후에 새로운 사업체로 대체될 수 있지만, 전체적인 산업생태계가 무너지면 복원하는 데는 상당히 오랜 시일이 걸린다. 세계관광기구(UNWTO)의 발표에 따르면 코로나 확산을 막기 위한 조치들로 인해 2020년 상반기를 기준으로 국제 관광객이 65% 감소하였으며 2019년 수준으로 회복되는데 2~4년 정도 소요될 것으로 예상하고 있다.The tourism industry is formed by organically connecting various businesses, such as restaurants, souvenir shops, transportation, and traditional markets, as well as major tourism-based industries such as travel agencies and hotels. If the entire industrial ecosystem collapses, it will take a very long time to restore it. According to the announcement of the World Tourism Organization (UNWTO), due to measures to prevent the spread of Corona, international tourists decreased by 65% in the first half of 2020, and it is expected that it will take 2 to 4 years to recover to the level of 2019.

또한, 사람들이 많이 모이는 대형마트나 쇼핑몰의 이용자도 크게 감소하였으며 대형마트나 쇼핑몰에 방문할 때마다 방문 인증을 해야하고 손소독 등 개인 위생에 신경을 써야하는 상황이다.In addition, the number of users of large marts or shopping malls where many people gather has greatly decreased, and it is a situation that requires visit authentication every time you visit a large mart or shopping mall and pay attention to personal hygiene such as hand disinfection.

코로나19뿐만이 아니라 2003년 사스, 2009년 신종플루, 2015년 메르스 등 세계적인 감염병이 5~6년 주기로 발생하면서 감염병 확산에 따른 위기 상황이 반복적인 패턴을 나타내고 있다. 이는 관광산업에 심각한 위기 요인으로 작용하고 있으며, 대형마트나 쇼핑몰 등을 이용하는 사람들 수도 축소 및 회복을 반복하고 있는 상황이다.Not only Corona 19, but also global infectious diseases such as SARS in 2003, H1N1 in 2009, and MERS in 2015 occur every 5 to 6 years, showing a repetitive pattern of crises due to the spread of infectious diseases. This is acting as a serious risk factor for the tourism industry, and the number of people using hypermarkets and shopping malls is also repeating reduction and recovery.

한편에서는 오프라인보다는 온라인을 선호하는 언택트(Untact) 소비를 선호하는 추세가 증가하고 있고, 관광산업의 경우 실제로 여행을 떠나지 않더라도 여행 기분을 느낄 수 있는 가상 여행 등 대체 상품이 기획되고 있다. 하지만 기존의 가상 여행의 경우 대부분 저장된 영상이나 가상 콘텐츠를 사용자 선택에 따라 영상 및 음향으로 출력하는 것으로 실제 관광지의 상황을 실시간으로 관광하는 것은 아니다. 이는 쇼핑에서도 마찬가지로 기 저장된 상품을 사용자 선택에 따라 보여주는 것으로 실제 대형마트나 쇼핑몰에 진열된 제품들을 실시간으로 쇼핑하는 것은 아니다.On the one hand, there is an increasing trend of preferring untact consumption online rather than offline, and in the case of the tourism industry, alternative products such as virtual tours that can feel the feeling of travel without actually going on a trip are being planned. However, in the case of existing virtual tours, most of the stored images or virtual contents are output as images and sounds according to the user's selection, and it is not a real-time tour of the actual tourist destination. Similarly, in shopping, pre-stored products are displayed according to the user's selection, and products displayed in large marts or shopping malls are not actually shopped in real time.

대한민국 등록특허 제10-1850028호(2018.04.12.)Republic of Korea Patent No. 10-1850028 (2018.04.12.)

따라서, 본 발명의 목적은 관광하고자 하는 장소에 비치된 원격 조종로봇을 통해 실시간으로 현장의 경치나 유물 등을 관람할 수 있고 이에 대한 설명까지 제공받으며, 쇼핑하고자 하는 장소에 비치된 원격 조종로봇을 통해 실제로 매장에 진열된 상품들을 실시간으로 확인하여 구매할 수 있는 원격 조종로봇을 이용한 실시간 비대면 서비스 제공 시스템을 제공하는데 있다. 다만, 본 발명이 목적은 상기된 바와 같은 기술적 과제로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.Therefore, an object of the present invention is to be able to view the scenery or relics of the site in real time through a remote-controlled robot installed at a place to be visited and to be provided with an explanation thereof, and to be provided with a remote-controlled robot installed at a place to shop. In fact, it is to provide a real-time non-face-to-face service providing system using a remote control robot that can check and purchase products displayed in a store in real time. However, the object of the present invention is not limited to the technical problems described above, and other technical problems may exist.

상술한 본 발명의 목적을 달성하기 위하여, 본 발명의 원격 조종로봇을 이용한 실시간 비대면 서비스 제공 시스템은 사용자 명령에 따라 앞뒤좌우로 이동하면서 영상을 촬영하여 전송하고, 방문 장소에 설치된 태그를 인식하여 태그 정보를 전송하는 적어도 하나의 원격 조종로봇, 상기 적어도 하나의 원격 조종로봇으로부터 전송되는 상기 태그 정보를 수신하여 분석한 후, 상기 태그 정보에 대응되는 설명 정보를 생성하여 전송하는 적어도 하나의 원격센터 단말, 상기 적어도 하나의 원격 조종로봇을 제어하기 위한 제어신호를 생성하고, 상기 적어도 하나의 원격 조종로봇에서 촬영된 영상을 실시간으로 스트리밍 받아서 출력하고, 상기 적어도 하나의 원격센터 단말로부터 상기 설명 정보가 전송되면 영상과 함께 출력하는 적어도 하나의 사용자 단말, 및 상기 적어도 하나의 원격센터 단말과 상기 적어도 하나의 원격 조종로봇에 식별코드를 부여하여 관리하는 관리부, 상기 적어도 하나의 사용자 단말에서 선택된 원격센터 단말에 매핑된 원격 조종로봇들 중 점유되지 않은 적어도 하나의 원격 조종로봇을 상기 적어도 하나의 사용자 단말과 연동시키는 연동부, 상기 적어도 하나의 사용자 단말에 입력된 제어신호를 연동된 상기 적어도 하나의 원격 조종로봇으로 전송하고, 상기 적어도 하나의 원격 조종로봇에서 촬영된 영상 및 상기 적어도 하나의 원격센터에서 생성된 설명 정보를 상기 사용자 단말로 전송하는 전송부를 포함하는 비대면 서비스 제공 서버를 포함하는 것을 특징으로 한다.In order to achieve the object of the present invention described above, the real-time non-face-to-face service providing system using the remote control robot of the present invention shoots and transmits images while moving back and forth and left and right according to a user command, and recognizes a tag installed at a visiting place At least one remote control robot that transmits tag information, and at least one remote center that generates and transmits explanatory information corresponding to the tag information after receiving and analyzing the tag information transmitted from the at least one remote control robot. generating a control signal for controlling a terminal and the at least one remote-controlled robot, receiving and outputting an image captured by the at least one remote-controlled robot in real time, and receiving and outputting an image taken from the at least one remote-controlled robot, and receiving the description information from the at least one remote center terminal When transmitted, at least one user terminal that outputs along with an image, a management unit that assigns and manages an identification code to the at least one remote center terminal and the at least one remote-controlled robot, and a remote center terminal selected from the at least one user terminal. an interlocking unit that interlocks at least one unoccupied remotely controlled robot among the remotely controlled robots mapped to the at least one user terminal, and transmits a control signal input to the at least one user terminal to the interlocked at least one remotely controlled robot A non-face-to-face service providing server including a transmission unit for transmitting to a robot and transmitting the image taken by the at least one remotely operated robot and the explanatory information generated at the at least one remote center to the user terminal. do.

본 발명의 원격 조종로봇을 이용한 실시간 비대면 서비스 제공 시스템에 의하면, 사용자는 방문하고자 하는 장소에 배치된 원격 조종로봇을 통해 현장을 촬영한 실시간 영상을 볼 수 있으므로 직접 방문 장소에 가는 것과 비교하여 시간이나 비용을 절약할 수 있으며, 팬데믹 상황과 같이 전염병으로 인해 방문이 불가능한 장소도 실시간으로 확인할 수 있다.According to the real-time non-face-to-face service providing system using a remote-controlled robot of the present invention, a user can view a real-time video of a scene through a remote-controlled robot placed in a place to visit, compared to going to the place to visit directly. You can save money or money, and you can check places that are impossible to visit due to epidemics, such as during a pandemic, in real time.

또한, 원격 조종로봇을 통해 관광지에 설치된 NFC 태그 정보를 인식하여 해당 유적이나 유물에 대한 설명 정보를 획득할 수 있고, 쇼핑몰에 설치된 NFC 태그 정보를 인식하여 상품에 대한 설명 정보를 획득하여 방문 현장에 진열된 상품을 직접 구매할 수도 있다.In addition, it is possible to obtain explanatory information on the relevant ruins or relics by recognizing NFC tag information installed in tourist destinations through a remote control robot, and to acquire explanatory information on products by recognizing NFC tag information installed in shopping malls to visit the site. You can also directly purchase the products on display.

도 1은 본 발명의 일 실시예에 따른 실시간 비대면 서비스 제공 시스템의 구성을 개략적으로 나타낸 도면,
도 2는 도 1의 시스템에 포함된 원격 조종로봇의 기능을 설명하기 위한 도면,
도 3은 도 1의 시스템에 포함된 비대면 서비스 제공 서버의 구성을 설명하기 위한 블록 구성도,
도 4는 본 발명의 일 실시예에 따른 실시간 비대면 서비스 제공 시스템의 동작을 설명하기 위한 도면, 그리고
도 5는 본 발명의 일 실시예에 따른 실시간 비대면 서비스 제공 시스템의 동작을 설명하기 위한 흐름도이다.
1 is a diagram schematically showing the configuration of a real-time non-face-to-face service providing system according to an embodiment of the present invention;
Figure 2 is a view for explaining the function of the remote control robot included in the system of Figure 1;
3 is a block diagram for explaining the configuration of a non-face-to-face service providing server included in the system of FIG. 1;
4 is a diagram for explaining the operation of a real-time non-face-to-face service providing system according to an embodiment of the present invention, and
5 is a flowchart for explaining the operation of a real-time non-face-to-face service providing system according to an embodiment of the present invention.

상술한 본 발명의 특징 및 효과는 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 본 발명은 다양한 변경을 가할 수 있고 여러 가지 형태를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 본문에 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.The features and effects of the present invention described above will become more apparent through the following detailed description in conjunction with the accompanying drawings, and accordingly, those skilled in the art to which the present invention belongs can easily practice the technical idea of the present invention. You will be able to. Since the present invention may have various changes and various forms, specific embodiments are illustrated in the drawings and described in detail in the text. However, this is not intended to limit the present invention to a specific form disclosed, and should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention.

명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Throughout the specification, when a part is said to be "connected" to another part, this includes not only the case where it is "directly connected" but also the case where it is "electrically connected" with another element interposed therebetween. . In addition, when a part "includes" a certain component, this means that it may further include other components, not excluding other components, unless otherwise stated, and one or more other characteristics. However, it should be understood that it does not preclude the possibility of existence or addition of numbers, steps, operations, components, parts, or combinations thereof.

본 명세서에 있어서 '부(部)'란, 하드웨어에 의해 실현되는 유닛(unit), 소프트웨어에 의해 실현되는 유닛, 양방을 이용하여 실현되는 유닛을 포함한다. 또한, 1 개의 유닛이 2 개 이상의 하드웨어를 이용하여 실현되어도 되고, 2 개 이상의 유닛이 1 개의 하드웨어에 의해 실현되어도 된다.In this specification, a "unit" includes a unit realized by hardware, a unit realized by software, and a unit realized using both. Further, one unit may be realized using two or more hardware, and two or more units may be realized by one hardware.

한편, '~부'는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니며, '~부'는 어드레싱 할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 '~부'는 소프트웨어 구성요소들, 객체 지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 '~부'들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 '~부'들로 결합되거나 추가적인 구성요소들과 '~부'들로 더 분리될 수 있다. 뿐만 아니라, 구성요소들 및 '~부'들은 디바이스 또는 보안 멀티미디어카드 내의 하나 또는 그 이상의 CPU들을 재생시키도록 구현될 수도 있다.On the other hand, '~ unit' is not limited to software or hardware, and '~ unit' may be configured to be in an addressable storage medium or configured to reproduce one or more processors. Thus, as an example, '~unit' refers to components such as software components, object-oriented software components, class components, and task components, processes, functions, properties, and procedures. , subroutines, segments of program code, drivers, firmware, microcode, circuitry, data, databases, data structures, tables, arrays and variables. Functions provided within components and '~units' may be combined into smaller numbers of components and '~units' or further separated into additional components and '~units'. In addition, components and '~units' may be implemented to play one or more CPUs in a device or a secure multimedia card.

본 명세서에 있어서 단말, 장치 또는 디바이스가 수행하는 것으로 기술된 동작이나 기능 중 일부는 해당 단말, 장치 또는 디바이스와 연결된 서버에서 대신 수행될 수도 있다. 이와 마찬가지로, 서버가 수행하는 것으로 기술된 동작이나 기능 중 일부도 해당 서버와 연결된 단말, 장치 또는 디바이스에서 수행될 수도 있다. 단말과 매핑(Mapping) 또는 매칭(Matching)으로 기술된 동작이나 기능 중 일부는, 단말의 식별 정보(Identifying Data)인 단말기의 고유번호나 개인의 식별정보를 매핑 또는 매칭한다는 의미로 해석될 수 있다.In this specification, some of the operations or functions described as being performed by a terminal, device, or device may be performed instead by a server connected to the terminal, device, or device. Likewise, some of the operations or functions described as being performed by the server may also be performed by a terminal, apparatus, or device connected to the server. Some of the operations or functions described as mapping or matching with the terminal may be interpreted as mapping or matching the terminal's unique number or personal identification information, which is the terminal's identifying data. .

제1, 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성 요소는 제2 구성 요소로 명명될 수 있고, 유사하게 제2 구성 요소도 제1 구성 요소로 명명될 수 있다.Terms such as first and second may be used to describe various components, but the components should not be limited by the terms. These terms are only used for the purpose of distinguishing one component from another. For example, a first element may be termed a second element, and similarly, a second element may be termed a first element, without departing from the scope of the present invention.

적어도 하나의 라는 용어는 단수 및 복수를 포함하는 용어로 정의되고, 적어도 하나의 라는 용어가 존재하지 않더라도 각 구성요소가 단수 또는 복수로 존재할 수 있고, 단수 또는 복수를 의미할 수 있음은 자명하다 할 것이다. 또한, 각 구성요소가 단수 또는 복수로 구비되는 것은, 실시예에 따라 변경가능하다 할 것이다.It is obvious that the term at least one is defined as a term including singular and plural, and even if at least one term does not exist, each component may exist in singular or plural, and may mean singular or plural. will be. In addition, the singular or plural number of each component may be changed according to embodiments.

이하, 첨부도면을 참조하여 본 발명의 바람직한 실시 예에 의한 원격 조종로봇을 이용한 실시간 비대면 서비스 제공 시스템(이하, ‘실시간 비대면 서비스 제공 시스템’)을 상세하게 설명한다.Hereinafter, with reference to the accompanying drawings, a real-time non-face-to-face service providing system using a remotely controlled robot according to a preferred embodiment of the present invention (hereinafter referred to as 'real-time non-face-to-face service providing system') will be described in detail.

도 1은 본 발명의 일 실시예에 따른 실시간 비대면 서비스 제공 시스템의 구성을 개략적으로 나타낸 도면이다.1 is a diagram schematically showing the configuration of a real-time non-face-to-face service providing system according to an embodiment of the present invention.

도 1을 참조하면, 실시간 비대면 서비스 제공 시스템(1)은, 사용자 단말(100), 비대면 서비스 제공 서버(300), 원격센터 단말(400), 및 원격 조종로봇(500)을 포함한다. 다만, 이러한 도 1의 실시간 비대면 서비스 제공 시스템(1)은, 본 발명의 일 실시예에 불과하므로, 도 1을 통하여 본 발명이 한정 해석되는 것은 아니다.Referring to FIG. 1 , a real-time non-face-to-face service providing system 1 includes a user terminal 100, a non-face-to-face service providing server 300, a remote center terminal 400, and a remotely operated robot 500. However, since the real-time non-face-to-face service providing system 1 of FIG. 1 is only one embodiment of the present invention, the present invention is not limitedly interpreted through FIG. 1 .

사용자 단말(100)은 사용자가 관광지나 쇼핑몰에 배치된 원격 조종로봇(500)을 컨트롤하기 위한 장치이다. 즉, 사용자는 사용자 단말(100)을 통해 방문을 원하는 장소를 선택하고, 기 설정된 단위요금을 결제한 후 선택된 장소에 배치된 원격 조종로봇(500)을 컨트롤하여 관광이나 쇼핑을 할 수 있다. 사용자 단말(100)은 하나의 원격 조종로봇(500)에 연동되며, 연동된 원격 조종로봇(500)을 컨트롤하기 위한 제어신호를 생성한다.The user terminal 100 is a device for a user to control the remotely operated robot 500 disposed in a tourist attraction or shopping mall. That is, the user can tour or shop by selecting a place he wants to visit through the user terminal 100, paying a preset unit fee, and then controlling the remotely operated robot 500 disposed at the selected place. The user terminal 100 is interlocked with one remote control robot 500 and generates a control signal for controlling the interlocked remote control robot 500 .

또한, 사용자 단말(100)은 원격 조종로봇(500)에서 촬영된 영상을 실시간으로 스트리밍 받아서 출력하고, 원격센터 단말(400)에서 전송되는 설명 정보를 원격 조종로봇(500)에서 촬영된 영상과 함께 영상 및 음향으로 출력한다. 그리고 상품을 구매하는 경우, 사용자 단말(100)을 통해 결제정보 및 배송정보를 입력하면 해당 정보가 원격센터 단말(400)로 전송된다.In addition, the user terminal 100 streams and outputs the video taken by the remote control robot 500 in real time, and transmits explanatory information transmitted from the remote center terminal 400 together with the video taken by the remote control robot 500. Output with video and sound. When purchasing a product, when payment information and delivery information are entered through the user terminal 100 , the corresponding information is transmitted to the remote center terminal 400 .

여기서, 사용자 단말(100)은 네트워크(200)를 통하여 원격지의 서버나 단말에 접속할 수 있는 컴퓨터로 구현될 수 있다. 여기서, 컴퓨터는 예를 들어, 네비게이션, 웹 브라우저(WEB Browser)가 탑재된 노트북, 데스크톱(Desktop), 랩톱(Laptop) 등을 포함할 수 있다. 또한, 사용자 단말(100)는, 네트워크(200)를 통해 원격지의 서버나 단말에 접속할 수 있는 단말로 구현될 수도 있다. 즉, 사용자 단말(100)는 휴대성과 이동성이 보장되는 무선 통신 장치로서, 네비게이션, PCS(Personal Communication System), GSM(Global System for Mobile communications), PDC(Personal Digital Cellular), PHS(Personal Handyphone System), PDA(Personal Digital Assistant), IMT(International Mobile Telecommunication)-2000, CDMA(Code Division Multiple Access)-2000, W-CDMA(W-Code Division Multiple Access), Wibro(Wireless Broadband Internet) 단말, 스마트폰(Smartphone), 스마트 패드(Smartpad), 타블렛 PC(Tablet PC) 등과 같은 모든 종류의 핸드헬드(Handheld) 기반의 무선 통신 장치를 포함할 수 있다.Here, the user terminal 100 may be implemented as a computer capable of accessing a remote server or terminal through the network 200 . Here, the computer may include, for example, a laptop, a desktop, a laptop, and the like equipped with a navigation system and a web browser. In addition, the user terminal 100 may be implemented as a terminal capable of accessing a remote server or terminal through the network 200 . That is, the user terminal 100 is a wireless communication device that ensures portability and mobility, and includes navigation, PCS (Personal Communication System), GSM (Global System for Mobile communications), PDC (Personal Digital Cellular), PHS (Personal Handyphone System) , PDA (Personal Digital Assistant), IMT (International Mobile Telecommunication)-2000, CDMA (Code Division Multiple Access)-2000, W-CDMA (W-Code Division Multiple Access), Wibro (Wireless Broadband Internet) terminal, smartphone ( It may include all kinds of handheld-based wireless communication devices such as Smartphone, Smartpad, and Tablet PC.

또한, 사용자 단말(100)은 적어도 하나의 종류의 평판형 디스플레이 또는 적어도 하나의 HMD(Head Mounted Display)와 연동되어 조종로봇(500)에서 촬영된 영상을 출력하도록 연결할 수 있다.In addition, the user terminal 100 may be connected to output an image captured by the pilot robot 500 in association with at least one type of flat panel display or at least one head mounted display (HMD).

네트워크(200)는 복수의 단말 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조를 의미하는 것으로, 도 1의 각 구성요소들(100,300,400,500)을 연결한다. 이러한 네트워크(200)의 일 예에는 근거리 통신망(LAN: Local Area Network), 광역 통신망(WAN: Wide Area Network), 인터넷(WWW: World Wide Web), 유무선 데이터 통신망, 전화망, 유무선 텔레비전 통신망 등을 포함한다. 무선 데이터 통신망의 일례에는 3G, 4G, 5G, 3GPP(3rd Generation Partnership Project), 5GPP(5th Generation Partnership Project), LTE(Long Term Evolution), WIMAX(World Interoperability for Microwave Access), 와이파이(Wi-Fi), 인터넷(Internet), LAN(Local Area Network), Wireless LAN(Wireless Local Area Network), WAN(Wide Area Network), PAN(Personal Area Network), RF(Radio Frequency), 블루투스(Bluetooth) 네트워크, NFC(Near-Field Communication) 네트워크, 위성 방송 네트워크, 아날로그 방송 네트워크, DMB(Digital Multimedia Broadcasting) 네트워크 등이 포함되나 이에 한정되지는 않는다.The network 200 refers to a connection structure capable of exchanging information between nodes such as a plurality of terminals and servers, and connects each of the components 100, 300, 400, and 500 in FIG. Examples of such a network 200 include a Local Area Network (LAN), a Wide Area Network (WAN), a World Wide Web (WWW), a wired and wireless data communication network, a telephone network, a wired and wireless television communication network, and the like. do. Examples of wireless data communication networks include 3G, 4G, 5G, 3rd Generation Partnership Project (3GPP), 5th Generation Partnership Project (5GPP), Long Term Evolution (LTE), World Interoperability for Microwave Access (WIMAX), Wi-Fi , Internet (Internet), LAN (Local Area Network), Wireless LAN (Wireless Local Area Network), WAN (Wide Area Network), PAN (Personal Area Network), RF (Radio Frequency), Bluetooth (Bluetooth) network, NFC ( A Near-Field Communication (Near-Field Communication) network, a satellite broadcasting network, an analog broadcasting network, a Digital Multimedia Broadcasting (DMB) network, etc. are included, but not limited thereto.

비대면 서비스 제공 서버(300)는, 비대면 서비스 웹 페이지, 앱 페이지, 프로그램 또는 애플리케이션을 제공하는 서버일 수 있다. 그리고, 비대면 서비스 제공 서버(300)는, 원격센터 단말(400)과 원격 조종로봇(500)을 등록하여 관리하는 서버일 수 있다. 또한, 비대면 서비스 제공 서버(300)는 사용자 단말(100)에서 방문을 원하는 장소를 선택한 후 원격 조종로봇(500)과의 연동을 요청하며 결제를 한 경우, 단위 시간동안 원격 조종로봇(500)과 연동되도록 하는 서버일 수 있다.The non-face-to-face service providing server 300 may be a server that provides a non-face-to-face service web page, app page, program, or application. Also, the non-face-to-face service providing server 300 may be a server that registers and manages the remote center terminal 400 and the remotely controlled robot 500 . In addition, when the non-face-to-face service providing server 300 selects a place to visit from the user terminal 100 and requests linkage with the remotely operated robot 500 and makes a payment, the remotely operated robot 500 for a unit time. It may be a server that makes it work with.

여기서, 비대면 서비스 제공 서버(300)는, 네트워크(200)를 통하여 원격지의 서버나 단말에 접속할 수 있는 컴퓨터로 구현될 수 있다. 여기서, 컴퓨터는 예를 들어, 네비게이션, 웹 브라우저(WEB Browser)가 탑재된 노트북, 데스크톱(Desktop), 랩톱(Laptop) 등을 포함할 수 있다. 웹 브라우저는 웹(WWW: World Wide Web) 서비스를 이용할 수 있게 하는 프로그램으로 HTML(Hyper Text Mark-up Language)로 서술된 하이퍼 텍스트를 받아서 보여주는 프로그램을 의미하며, 예를 들어 넷스케이프(Netscape), 익스플로러(Explorer), 크롬(Chrome) 등을 포함한다. 또한, 애플리케이션은 단말 상의 응용 프로그램(Application)을 의미하며, 예를 들어, 모바일 단말(스마트폰)에서 실행되는 앱(App)을 포함한다.Here, the non-face-to-face service providing server 300 may be implemented as a computer capable of accessing a remote server or terminal through the network 200 . Here, the computer may include, for example, a laptop, a desktop, a laptop, and the like equipped with a navigation system and a web browser. A web browser is a program that enables users to use web (WWW: World Wide Web) services and refers to a program that receives and displays hypertext described in HTML (Hyper Text Mark-up Language). For example, Netscape, Internet Explorer (Explorer), Chrome (Chrome), and the like. In addition, an application means an application on a terminal, and includes, for example, an app running on a mobile terminal (smart phone).

원격센터 단말(400)는 실시간 비대면 서비스 관련 웹 페이지, 앱 페이지, 프로그램 또는 애플리케이션을 이용하는 원격센터의 단말일 수 있다. 또한, 원격센터 단말(400)은 관광지나 쇼핑몰마다 구비되며 오프라인 및 온라인으로 원격 조종로봇(500)을 대여해주는 단말일 수 있다.The remote center terminal 400 may be a terminal of a remote center using a real-time non-face-to-face service related web page, app page, program or application. In addition, the remote center terminal 400 may be a terminal provided at each tourist destination or shopping mall and renting the remote control robot 500 offline or online.

이러한 원격센터 단말(400)은 원격 조종로봇(500)으로부터 전송되는 태그 정보를 수신하여 분석한 후, 태그 정보에 대응되는 설명 정보를 생성하여 사용자 단말(100)로 전송한다. 그리고 사용자 단말(100)로부터 전송되는 결제정보 및 배송정보를 수신하여 상품 구매에 대한 결제를 자동으로 진행하고 배송지에 구매한 상품을 배송할 수 있도록 상품 포장을 담당할 직원을 배정한다.After receiving and analyzing the tag information transmitted from the remote control robot 500, the remote center terminal 400 generates explanatory information corresponding to the tag information and transmits it to the user terminal 100. In addition, payment information and shipping information transmitted from the user terminal 100 are received, and an employee in charge of packing the product is assigned to automatically proceed with payment for product purchase and deliver the purchased product to the destination.

원격 조종로봇(500)은 실시간 비대면 서비스 관련 웹 페이지, 앱 페이지, 프로그램 또는 애플리케이션을 이용하여 촬영한 영상을 원격센터 단말(400), 비대면 서비스 제공 서버(300)를 경유하여 사용자 단말(100)로 전송하고, 사용자 단말(100)의 제어신호를 수신하여 컨트롤되는 장치일 수 있다.The remote control robot 500 transfers images captured using a real-time non-face-to-face service related web page, app page, program or application to the user terminal 100 via the remote center terminal 400 and the non-face-to-face service providing server 300. ), and may be a device controlled by receiving a control signal from the user terminal 100.

또한, 원격 조종로봇(500)은 사용자 명령에 따라 앞뒤좌우로 이동하면서 영상을 촬영하여 전송한다. 즉, 원격 조종로봇(500)과 연동된 사용자 단말(100)에서 생성된 제어신호에 따라 선택된 장소에서 이동하면서 영상을 촬영하여 실시간 스트리밍으로 전송한다. 또한, 사용자가 사용자 단말(100)을 통해 특정 목표물을 선택하는 경우, 선택한 목표물에 부착된 태크를 인식하여 태그 정보를 적어도 하나의 원격센터 단말(400)로 전송한다.In addition, the remote control robot 500 moves forward and backward and left and right according to a user command, and transmits an image taken. That is, according to the control signal generated by the user terminal 100 interlocked with the remote control robot 500, an image is captured while moving at a selected place and transmitted as real-time streaming. Also, when the user selects a specific target through the user terminal 100, a tag attached to the selected target is recognized and tag information is transmitted to at least one remote center terminal 400.

도 2는 도 1의 시스템에 포함된 원격 조종로봇의 기능을 설명하기 위한 도면이다.FIG. 2 is a diagram for explaining the functions of the remote control robot included in the system of FIG. 1 .

도 2를 참조하면, 원격 조종로봇(500)은 헤드부(510), 몸통부(530), 및 이동부(550)를 포함한다.Referring to FIG. 2 , the remote control robot 500 includes a head part 510, a body part 530, and a moving part 550.

헤드부(510)에는 8K 초고화질 카메라(515)가 2대 설치되며, 카메라(515)에서 촬영된 영상을 이용하여 3D영상을 구현하거나, 2개의 영상을 합성하여 높은 해상도의 이미지를 생성하거나 밝은 이미지를 생성할 수도 있다. 또한, 2대의 카메라(515)의 화각을 다르게 하여 영상을 다양한 심도로 촬영하는 것도 가능하다. 헤드부(510)는 사용자 조작에 따라 상하로 높낮이가 조절되고 좌우로 360도 회전이 가능하므로 필요에 따라 촬영 높이 및 각도를 조정할 수 있다.Two 8K ultra-high-definition cameras 515 are installed in the head unit 510, and a 3D image is implemented using images captured by the cameras 515, or a high-resolution image is generated by synthesizing two images, or a bright You can also create images. In addition, it is also possible to capture images at various depths by making the angles of view of the two cameras 515 different. The height of the head unit 510 is adjusted up and down according to the user's manipulation and can be rotated 360 degrees left and right, so that the height and angle of the shooting can be adjusted as needed.

몸통부(530)는 인터페이스부(531), 터치스크린부(535), 및 스피커(537)를 포함하며, 몸통부(530)도 상하로 높낮이가 조절되고 좌우로 360도 회전이 가능하다.The body portion 530 includes an interface portion 531, a touch screen portion 535, and a speaker 537, and the height of the body portion 530 is also adjustable up and down and can be rotated 360 degrees left and right.

인터페이스부(531)에는 현장에서 발생하는 소리를 녹음할 수 있는 마이크, 조종로봇(500)의 전원을 ON/OFF할 수 있는 스위치, 및 NFC(Near Field Communication) 태그를 인식할 수 있는 태그 인식부 등이 포함된다.The interface unit 531 includes a microphone capable of recording sounds generated in the field, a switch capable of turning on/off the power of the pilot robot 500, and a tag recognition unit capable of recognizing a Near Field Communication (NFC) tag. etc. are included.

NFC 태그에는 관광지나 박물관의 경우 유물이나 유적에 대한 설명 정보와 매칭되는 태그 정보가 저장되며, 쇼핑몰의 경우 나열된 제품에 관한 설명 정보와 매칭되는 태그 정보가 저장된다. 태그 인식부에서 인식된 태그 정보는 원격센터 단말(400)로 전송되어 분석되고, 원격센터 단말(400)에서는 태그 정보에 대응되는 설명 정보를 생성하여 사용자 단말(100)로 전송한다.The NFC tag stores tag information that matches descriptive information on relics or relics in the case of tourist attractions or museums, and stores tag information that matches descriptive information about listed products in the case of shopping malls. The tag information recognized by the tag recognition unit is transmitted to the remote center terminal 400 and analyzed, and the remote center terminal 400 generates explanatory information corresponding to the tag information and transmits it to the user terminal 100 .

터치스크린부(535)는 원격 조종로봇(500)의 현재 상태를 표시하고 직원이 조종로봇(500)을 조작할 수 있는 버튼 등이 표시된다. 예를 들면, 원격지의 사용자가 현재 원격 조종로봇(500)을 컨트롤 중인 경우 "사용중"이라는 메시지가 화면에 표시되고, 원격 조종로봇(500)의 밧데리의 충전이 필요한 경우 "충전 필요"라는 메시지가 화면에 표시될 수도 있다.The touch screen unit 535 displays the current state of the remote control robot 500 and displays buttons for the staff to operate the control robot 500. For example, when a remote user is currently controlling the remotely controlled robot 500, a message “in use” is displayed on the screen, and when the battery of the remotely controlled robot 500 needs to be charged, a message “requiring charging” is displayed. It may also be displayed on the screen.

스피커(537)는 사용자 단말(100)를 통해 입력되는 사용자 음성을 출력할 수 있으며, 사용자는 스피커(537)와 마이크를 통해 방문장소에 있는 사람과 대화를 할 수 있게 된다.The speaker 537 can output a user's voice input through the user terminal 100, and the user can have a conversation with a person in the visiting place through the speaker 537 and the microphone.

이동부(550)에는 원격 조종로봇(500)이 앞뒤좌우로 자유롭게 이동할 수 있는 바퀴가 장착되며, 이동 중 전방에 사람이나 물건과 충돌하지 않도록 주변을 감지하는 초음파 센서(551)가 설치된다.Wheels are mounted on the moving unit 550 so that the remote control robot 500 can freely move back and forth, left and right, and an ultrasonic sensor 551 for detecting the surroundings is installed in front so as not to collide with people or objects during movement.

도 3은 도 1의 시스템에 포함된 비대면 서비스 제공 서버의 구성을 설명하기 위한 블록 구성도이다.3 is a block diagram for explaining the configuration of a non-face-to-face service providing server included in the system of FIG. 1 .

도 3을 참조하면, 비대면 서비스 제공 서버(300)는 관리부(310), 연동부(320), 전송부(330), 연결부(340), 및 구조부(350)를 포함한다.Referring to FIG. 3 , the non-face-to-face service providing server 300 includes a management unit 310, a linking unit 320, a transmission unit 330, a connection unit 340, and a structure unit 350.

관리부(310)는 원격센터 단말(400)과 원격 조종로봇(500)을 장소와 매핑하여 저장하고 식별코드를 부여하여 관리할 수 있다. 즉, 관광지 및 쇼핑몰에 각각 하나의 원격센터 단말(400)이 매핑되어 설치되며, 원격 조종로봇(500)은 해당 장소에 적어도 하나 이상 배치되어 각각의 조종로봇(500)은 식별코드를 부여받는다. 사용자가 방문을 원하는 장소를 선택하여 사용자 단말(100)을 통해 단위요금을 결제하면, 관리부(310)는 선택된 장소에 배치된 원격 조종로봇들 중 대기상태의 원격 조종로봇(500)과의 엑세스를 허용하여, 사용자 단말(100)과 원격 조종로봇(500)이 연동되도록 한다.The management unit 310 may manage the remote center terminal 400 and the remote control robot 500 by mapping them to locations, storing them, and assigning identification codes thereto. That is, one remote center terminal 400 is mapped and installed in a tourist destination and a shopping mall, and at least one remote control robot 500 is disposed at the corresponding place, and each control robot 500 is given an identification code. When a user selects a place he wants to visit and pays a unit fee through the user terminal 100, the management unit 310 grants access to the remotely controlled robot 500 in a standby state among the remotely controlled robots disposed at the selected place. By allowing, the user terminal 100 and the remote control robot 500 are interlocked.

연동부(320)는 사용자 단말(100)에서 방문 장소를 선택 및 결제하는 경우, 선택된 방문 장소에 기 매핑되어 저장된 원격 조종로봇들(500) 중 점유되지 않은 원격 조종로봇(500)을 할당하여 사용자 단말(100)과 연동시킬 수 있다.When the user terminal 100 selects and pays for a place to visit, the interlocking unit 320 allocates a remotely controlled robot 500 that is not occupied among the remotely controlled robots 500 previously mapped and stored to the selected place to visit, so that the user It can work with the terminal 100.

전송부(330)는 사용자 단말(100)에서 입력된 제어신호를 할당된 원격 조종로봇(500)으로 전송하고, 원격 조종로봇(500)에서 촬영된 영상 및 원격센터 단말(400)에서 생성된 설명 정보를 사용자 단말(100)로 전송한다. 또한, 사용자 단말(100)에 입력된 결제정보 및 배송정보를 원격센터 단말(400)로 전송한다.The transmission unit 330 transmits the control signal input from the user terminal 100 to the assigned remote control robot 500, and the video captured by the remote control robot 500 and the description generated by the remote center terminal 400. Information is transmitted to the user terminal 100 . In addition, payment information and delivery information input to the user terminal 100 are transmitted to the remote center terminal 400 .

연결부(340)는 사용자 단말(100)과 원격 조종로봇(500) 간 실시간 스트리밍을 UDP(User Datagram Protocol) 방식을 이용하여 연결할 수 있다. 연결부(340)는 실시간 스트리밍 중 패킷 손실을 막기 위하여 원격 조종로봇(500)에서 전송하는 패킷을 기 설정된 퍼센트만큼 초과전송하도록 설정할 수 있다. 이때, 초과율은 예를 들어 30%일 수 있으나 이에 한정되는 것은 아니다.The connection unit 340 may connect real-time streaming between the user terminal 100 and the remote control robot 500 using a User Datagram Protocol (UDP) method. In order to prevent packet loss during real-time streaming, the connection unit 340 may be configured to overtransmit packets transmitted from the remote control robot 500 by a preset percentage. At this time, the excess rate may be, for example, 30%, but is not limited thereto.

구조부(350)는 사용자 단말(100)에서 구조요청 이벤트가 발생된 경우, 적어도 하나의 관리자 단말 중 어느 하나의 관리자 단말(미도시)을 연결하여 사용자 단말(100)과 연동된 원격 조종로봇(500)을 점검하도록 할 수 있다. 또는, 원격 조종로봇(500)에 이상이 발생하여 사용자가 컨트롤을 제대로 할 수 없을 때, 구조요청 이벤트가 발생되어 원격 조종로봇(500)에 전송되면 터치스크린부(535)에 "점검필요"라는 메시지가 표시되어 현장에 있는 직원이 상태를 직접 점검하도록 할 수도 있다.When a rescue request event occurs in the user terminal 100, the rescue unit 350 connects one manager terminal (not shown) among at least one manager terminal to the remote control robot 500 interlocked with the user terminal 100. ) can be checked. Alternatively, when an abnormality occurs in the remotely controlled robot 500 and the user cannot control it properly, a rescue request event is generated and transmitted to the remotely controlled robot 500, and the touch screen unit 535 displays “inspection required”. A message can also be displayed, allowing on-site personnel to manually check the status.

도 4는 본 발명의 일 실시예에 따른 실시간 비대면 서비스 제공 시스템의 동작을 설명하기 위한 도면이고, 도 5는 본 발명의 일 실시예에 따른 실시간 비대면 서비스 제공 시스템의 동작을 설명하기 위한 흐름도이다. 도 4 및 도 5에 나타낸 실시예는 본 발명의 다양한 실시예 중 어느 하나일 뿐, 이에 한정되지 않음은 자명하다 할 것이다.4 is a diagram for explaining the operation of a real-time non-face-to-face service providing system according to an embodiment of the present invention, and FIG. 5 is a flowchart for explaining the operation of a real-time non-face-to-face service providing system according to an embodiment of the present invention. am. The embodiment shown in FIGS. 4 and 5 is only one of various embodiments of the present invention, and it will be apparent that it is not limited thereto.

도 4의 (a)를 참조하면, 비대면 서비스 제공 서버(300)는 광광지나 쇼핑몰 등의 방문장소와 원격센터 단말(400) 및 원격 조종로봇(500)을 매핑하여 저장하고, 각 원격센터 단말(400)과 원격 조종로봇(500)을 관리하기 위하여 ID와 같은 식별코드를 부여하여 관리할 수 있다.Referring to (a) of FIG. 4, the non-face-to-face service providing server 300 maps and stores visiting places, such as a tourist attraction or shopping mall, and a remote center terminal 400 and a remote control robot 500, and stores each remote center terminal. In order to manage the 400 and the remote control robot 500, an identification code such as an ID may be assigned and managed.

도 4의 (b)를 참조하면, 비대면 서비스 제공 서버(300)는 시스템을 직렬로 연결되도록 관리하며, 사용자 단말(100)에서 원하는 방문 장소를 선택하여 비용을 결제하는 경우, 해당 장소에 배치된 원격 조종로봇들(500) 중 비점유되어 있는 원격 조종로봇(500)을 할당한 후 제어권을 사용자 단말(100)로 부여하고 UDP로 영상 실시간 스트리밍을 수행하게 된다. 그리고, 결제 비용에 해당하는 시간을 초과하는 경우 추가요금을 부가하도록 한다.Referring to (b) of FIG. 4, the non-face-to-face service providing server 300 manages the system to be connected in series, and when the user terminal 100 selects and pays for a desired place to visit, it is placed at that place. After allocating an unoccupied remote control robot 500 among the remote control robots 500, the control right is given to the user terminal 100, and real-time video streaming is performed using UDP. And, if the time corresponding to the payment cost is exceeded, an additional charge is added.

정리하면, 본 발명의 일 실시예에 따른 플랫폼은, 사용자-서버-원격센터-조종로봇의 직렬식 구조로, 사용자가 사용자 단말(100)을 사용하여 회원가입을 통하여 서비스 플랫폼에 접속하면, 각 관광지나 쇼핑몰 등의 오프라인 장소에 설치된 원격센터 단말(400)로 연결될 수 있다. 각 원격센터에서는 수 십 내지 수 백기의 원격 조종로봇(500)을 관리, 수리, 보관, 대여 등을 할 수 있으며, 원격 조종로봇(500)은 원격 콘트롤러를 포함하여 콘트롤러는 서버-조종로봇 간 연동을 중계할 수 있다.In summary, the platform according to an embodiment of the present invention has a serial structure of user-server-remote center-manipulator robot, and when a user accesses the service platform through membership registration using the user terminal 100, each It can be connected to the remote center terminal 400 installed in an offline place such as a tourist attraction or a shopping mall. Each remote center can manage, repair, store, rent, etc. dozens or hundreds of remote-controlled robots 500, and the remote-controlled robot 500 includes a remote controller, and the controller is linked between the server and the robot-controlled robot. can be relayed.

다중접속 방식으로 다수의 접속자가 참여 시, 가용한 원격 조종로봇(500)을 효율적으로 이용할 수 있게 하기 위한 B2C 시스템을 기반으로, 원격센터로 운영되는 한정된 장소 내에서, 다수의 원격 조종로봇(500)이 안정적으로 운용될 수 있도록, 원격 조종로봇(500) 간 충돌방지, 자동 귀환 및 충전, GPS 기반 일정 범위 내 비행 등의 기술이 적용될 수 있고, 안정적인 실시간 미디어 스트리밍을 위하여 UDP 기술을 적용한다. 스트리밍이 지속될수록 딜레이가 발생하는 TCP 방식이 아닌 UDP 방식을 이용하되, UDP방식의 단점인 패킷 손실을 최소화 할 수 있도록, 약 30%의 패킷을 초과 전송하여, 손실된 패킷이 발생하더라도 초과 전송된 패킷을 활용하여 안정적으로 실시간 스트리밍을 될 수 있도록 한다.Multiple remotely controlled robots (500 ) can be stably operated, technologies such as collision avoidance between remotely controlled robots 500, automatic return and charging, GPS-based flight within a certain range can be applied, and UDP technology is applied for stable real-time media streaming. Use the UDP method, not the TCP method, which causes delay as the streaming continues. It utilizes packets to enable stable real-time streaming.

도 5는 본 발명의 일 실시예에 따른 실시간 비대면 서비스 제공 시스템의 동작을 설명하기 위한 흐름도이다. 이하, 도 5를 통해 각 구성들 상호간에 데이터가 송수신되는 과정의 일 예를 설명할 것이나, 이와 같은 실시예로 본원이 한정 해석되는 것은 아니며, 앞서 설명한 다양한 실시예들에 따라 도 5에 도시된 데이터가 송수신되는 과정이 변경될 수 있음은 기술분야에 속하는 당업자에게 자명하다.5 is a flowchart for explaining the operation of a real-time non-face-to-face service providing system according to an embodiment of the present invention. Hereinafter, an example of a process of transmitting and receiving data between each component will be described through FIG. 5, but the present application is not limited to such an embodiment, and according to various embodiments described above, It is obvious to those skilled in the art that a process of transmitting and receiving data may be changed.

도 5를 참조하면, 비대면 서비스 제공 서버(300)는, 원격센터 단말(400)과 원격 조종로봇(500)을 관광지나 쇼핑몰 등의 방문 장소에 매핑하여 저장하고 식별코드를 부여하여 관리한다(S100).Referring to FIG. 5, the non-face-to-face service providing server 300 maps and stores the remote center terminal 400 and the remote control robot 500 to visit places such as tourist attractions or shopping malls, and assigns and manages identification codes ( S100).

사용자 단말(100)을 통해 방문장소를 선택하고 비용 결제가 되면(S110-Y), 선택된 방문장소에 매핑된 조종로봇들 중 점유되지 않은 원격 조종로봇(500)을 할당하여 사용자 단말(100)과 연동한다(S130).When a visit place is selected through the user terminal 100 and payment is made (S110-Y), a remote control robot 500 that is not occupied among control robots mapped to the selected visit place is assigned to the user terminal 100 and It interlocks (S130).

또한, 사용자 단말(100)에서 입력된 제어신호를 할당된 원격 조종로봇(500)으로 전송하고, 원격 조종로봇(500)에서 촬영된 영상을 사용자 단말(100)로 전송한다(S150).In addition, the control signal input from the user terminal 100 is transmitted to the assigned remote control robot 500, and the image captured by the remote control robot 500 is transmitted to the user terminal 100 (S150).

이때, 원격 조종로봇(500)을 통해 NFC 태그가 인식되는 경우(S170-Y), 인식된 태그 정보에 대응되는 설명 정보를 사용자 단말(100)로 전송한다. 좀 더 상세히 설명하면, 원격 조종로봇(500)을 통해 인식된 태그 정보는 원격센터 단말(400)로 전송되어 분석되고, 원격센터 단말(400)에서는 태그 정보에 대응되는 설명 정보를 생성하여 사용자 단말(100)로 전송한다.At this time, when the NFC tag is recognized through the remote control robot 500 (S170-Y), explanatory information corresponding to the recognized tag information is transmitted to the user terminal 100. More specifically, the tag information recognized through the remote control robot 500 is transmitted to and analyzed by the remote center terminal 400, and the remote center terminal 400 generates explanatory information corresponding to the tag information to the user terminal. Send to (100).

이상과 같은 과정에 의해 사용자는 관광지의 유물이나 유적에 대한 설명을 영상과 함께 제공받을 수 있고, 쇼핑몰에서 쇼핑하는 경우 진열된 물품들에 대한 정보를 제공받을 수도 있다.Through the process described above, the user may be provided with an explanation of relics or remains of a tourist destination along with an image, and may be provided with information on displayed items when shopping in a shopping mall.

이와 같은 도 5의 원격 조종로봇을 이용한 실시간 비대면 서비스 제공 방법에 대해서 설명되지 아니한 사항은 앞서 도 1 내지 도 4를 통해 원격 조종로봇을 이용한 실시간 비대면 서비스 제공 방법에 대하여 설명된 내용과 동일하거나 설명된 내용으로부터 용이하게 유추 가능하므로 이하 설명을 생략하도록 한다.Matters not described for the real-time non-face-to-face service providing method using the remote-controlled robot of FIG. 5 are the same as those described for the real-time non-face-to-face service providing method using the remote-controlled robot through FIGS. 1 to 4, or Since it can be easily inferred from the description, the following description will be omitted.

도 5를 통해 설명된 일 실시예에 따른 원격 조종로봇을 이용한 실시간 비대면 서비스 제공 방법은, 컴퓨터에 의해 실행되는 애플리케이션이나 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다.The real-time non-face-to-face service providing method using a remotely controlled robot according to an embodiment described with reference to FIG. 5 is also in the form of a recording medium containing instructions executable by a computer, such as an application or program module executed by a computer. can be implemented Computer readable media can be any available media that can be accessed by a computer and includes both volatile and nonvolatile media, removable and non-removable media. Also, computer readable media may include all computer storage media. Computer storage media includes both volatile and nonvolatile, removable and non-removable media implemented in any method or technology for storage of information such as computer readable instructions, data structures, program modules or other data.

전술한 본 발명의 일 실시예에 따른 원격 조종로봇을 이용한 실시간 비대면 서비스 제공 방법은, 단말기에 기본적으로 설치된 애플리케이션(이는 단말기에 기본적으로 탑재된 플랫폼이나 운영체제 등에 포함된 프로그램을 포함할 수 있음)에 의해 실행될 수 있고, 사용자가 애플리케이션 스토어 서버, 애플리케이션 또는 해당 서비스와 관련된 웹 서버 등의 애플리케이션 제공 서버를 통해 마스터 단말기에 직접 설치한 애플리케이션(즉, 프로그램)에 의해 실행될 수도 있다.In the real-time non-face-to-face service providing method using a remotely controlled robot according to an embodiment of the present invention described above, an application basically installed in a terminal (this may include a program included in a platform or operating system basically installed in the terminal) It may be executed by, or may be executed by an application (ie, a program) directly installed in the master terminal by a user through an application providing server such as an application store server, an application or a web server related to the corresponding service.

이러한 의미에서, 전술한 본 발명의 일 실시예에 따른 원격 조종로봇을 이용한 실시간 비대면 서비스 제공 방법은 단말기에 기본적으로 설치되거나 사용자에 의해 직접 설치된 애플리케이션(즉, 프로그램)으로 구현되고 단말기에 등의 컴퓨터로 읽을 수 있는 기록매체에 기록될 수 있다.In this sense, the method for providing real-time non-face-to-face service using a remotely controlled robot according to an embodiment of the present invention described above is implemented as an application (ie, a program) that is basically installed in a terminal or directly installed by a user, and It can be recorded on a computer-readable recording medium.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다. The above description of the present invention is for illustrative purposes, and those skilled in the art can understand that it can be easily modified into other specific forms without changing the technical spirit or essential features of the present invention. will be. Therefore, the embodiments described above should be understood as illustrative in all respects and not limiting. For example, each component described as a single type may be implemented in a distributed manner, and similarly, components described as distributed may be implemented in a combined form.

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The scope of the present invention is indicated by the following claims rather than the detailed description above, and all changes or modifications derived from the meaning and scope of the claims and equivalent concepts should be construed as being included in the scope of the present invention. do.

100 : 사용자 단말 200 : 네트워크
300 : 비대면 서비스 제공 서버 310 : 관리부
320 : 연동부 330 : 전송부
340 : 연결부 350 : 구조부
400 : 원격센터 단말 500 : 원격 조종로봇
510 : 헤드부 515 : 카메라
530 : 몸통부 531 : 인터페이스부
535 : 터치스크린부 537 : 스피커
550 : 이동부 551 : 센서
100: user terminal 200: network
300: non-face-to-face service providing server 310: management unit
320: interlocking unit 330: transmission unit
340: connection part 350: structural part
400: remote center terminal 500: remote control robot
510: Head 515: Camera
530: body part 531: interface part
535: touch screen unit 537: speaker
550: moving unit 551: sensor

Claims (5)

사용자 명령에 따라 앞뒤좌우로 이동하면서 영상을 촬영하여 전송하고, 방문 장소에 설치된 태그를 인식하여 태그 정보를 전송하되, 8K 초고화질 카메라 2대가 설치되며, 상하이동 및 360도 좌우회전이 가능한 헤드부; 현장에서 발생하는 소리를 녹음할 수 있는 마이크 및 사용자 단말을 통해 입력되는 사용자 음성을 출력할 수 있는 스피커가 설치되며, 상하이동 및 360도 좌우회전이 가능하고, NFC(Near Field Communication) 태그를 인식할 수 있는 태그 인식부가 설치되는 몸통부; 및 앞뒤좌우로 자유롭게 이동할 수 있는 바퀴가 장착된 이동부;를 포함하는 적어도 하나의 원격 조종로봇;
상기 적어도 하나의 원격 조종로봇으로부터 전송되는 상기 태그 정보를 수신하여 분석한 후, 상기 태그 정보에 대응되는 설명 정보를 생성하여 전송하고, 상기 적어도 하나의 사용자 단말을 통해 상품 구매에 대한 결제정보 및 배송정보가 전송되면, 결제를 자동으로 진행하고 상품 포장을 담당할 직원을 배정하는 적어도 하나의 원격센터 단말;
상기 적어도 하나의 원격 조종로봇을 제어하기 위한 제어신호를 생성하고, 상기 적어도 하나의 원격 조종로봇에서 촬영된 영상을 실시간으로 스트리밍 받아서 출력하고, 상기 적어도 하나의 원격센터 단말로부터 상기 설명 정보가 전송되면 영상과 함께 출력하는 적어도 하나의 사용자 단말; 및
상기 적어도 하나의 원격센터 단말과 상기 적어도 하나의 원격 조종로봇에 식별코드를 부여하여 관리하는 관리부, 상기 적어도 하나의 사용자 단말에서 선택된 원격센터 단말에 매핑된 원격 조종로봇들 중 점유되지 않은 적어도 하나의 원격 조종로봇을 상기 적어도 하나의 사용자 단말과 연동시키는 연동부, 상기 적어도 하나의 사용자 단말에 입력된 제어신호를 연동된 상기 적어도 하나의 원격 조종로봇으로 전송하고, 상기 적어도 하나의 원격 조종로봇에서 촬영된 영상 및 상기 적어도 하나의 원격센터에서 생성된 설명 정보를 상기 사용자 단말로 전송하는 전송부, 상기 적어도 하나의 사용자 단말과 상기 적어도 하나의 원격 조종로봇 간의 실시간 스트리밍을 UDP(User Datagram Protocol) 방식을 이용하여 연결하는 연결부를 포함하는 비대면 서비스 제공 서버;를 포함하는 것을 특징으로 하는 원격 조종로봇을 이용한 실시간 비대면 서비스 제공 시스템.
It shoots and transmits images while moving forward, backward, left and right according to the user's command, recognizes the tag installed at the place of visit and transmits tag information. Two 8K ultra-high-definition cameras are installed, and the head unit can move up and down and rotate 360 degrees left and right. ; A microphone capable of recording sound occurring in the field and a speaker capable of outputting user voice input through a user terminal are installed, and it is possible to move up and down and rotate 360 degrees left and right, and recognize NFC (Near Field Communication) tags. A body portion in which a tag recognition unit capable of doing so is installed; and at least one remote control robot including; a moving unit equipped with wheels capable of freely moving back and forth;
After receiving and analyzing the tag information transmitted from the at least one remotely controlled robot, explanatory information corresponding to the tag information is generated and transmitted, and payment information and delivery for product purchase are provided through the at least one user terminal. When information is transmitted, at least one remote center terminal that automatically proceeds with payment and assigns an employee in charge of packing the product;
When a control signal for controlling the at least one remote-controlled robot is generated, an image captured by the at least one remote-controlled robot is streamed and outputted in real time, and the description information is transmitted from the at least one remote center terminal. At least one user terminal that outputs with an image; and
A management unit for assigning and managing an identification code to the at least one remote center terminal and the at least one remote-controlled robot, and at least one unoccupied remote-controlled robot among the remote-controlled robots mapped to the remote center terminal selected from the at least one user terminal. An interlocking unit that interlocks the remote-controlled robot with the at least one user terminal, transmits a control signal input to the at least one user terminal to the interlocked at least one remote-controlled robot, and takes pictures from the at least one remote-controlled robot. A transmission unit that transmits the generated image and description information generated at the at least one remote center to the user terminal, real-time streaming between the at least one user terminal and the at least one remotely controlled robot using the UDP (User Datagram Protocol) method. Real-time non-face-to-face service providing system using a remotely operated robot, characterized in that it comprises a; non-face-to-face service providing server including a connection unit connected using.
삭제delete 삭제delete 삭제delete 삭제delete
KR1020210152021A 2021-11-08 2021-11-08 System for providing real-time untact service using remote control robot KR102492751B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210152021A KR102492751B1 (en) 2021-11-08 2021-11-08 System for providing real-time untact service using remote control robot

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210152021A KR102492751B1 (en) 2021-11-08 2021-11-08 System for providing real-time untact service using remote control robot

Publications (1)

Publication Number Publication Date
KR102492751B1 true KR102492751B1 (en) 2023-02-01

Family

ID=85213140

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210152021A KR102492751B1 (en) 2021-11-08 2021-11-08 System for providing real-time untact service using remote control robot

Country Status (1)

Country Link
KR (1) KR102492751B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080064102A (en) * 2008-06-13 2008-07-08 주식회사 로보메이션 Real-time contents development framework for a network-based robot system
KR20120098261A (en) * 2011-02-28 2012-09-05 노틸러스효성 주식회사 A remote shopping assistant robot
KR101850028B1 (en) 2015-03-06 2018-05-30 한국전자통신연구원 Device for virtual tour experience and method thereof
KR20200139534A (en) * 2019-06-04 2020-12-14 최중인 An autonomous convenience store system and a method for operating the same
KR102248080B1 (en) * 2019-12-27 2021-05-04 농업회사법인 한국도시농업 주식회사 Remote access Merged Reality platform providing system using real-time video

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080064102A (en) * 2008-06-13 2008-07-08 주식회사 로보메이션 Real-time contents development framework for a network-based robot system
KR20120098261A (en) * 2011-02-28 2012-09-05 노틸러스효성 주식회사 A remote shopping assistant robot
KR101850028B1 (en) 2015-03-06 2018-05-30 한국전자통신연구원 Device for virtual tour experience and method thereof
KR20200139534A (en) * 2019-06-04 2020-12-14 최중인 An autonomous convenience store system and a method for operating the same
KR102248080B1 (en) * 2019-12-27 2021-05-04 농업회사법인 한국도시농업 주식회사 Remote access Merged Reality platform providing system using real-time video

Similar Documents

Publication Publication Date Title
US11704707B2 (en) Identity authentication and verification
US9961507B1 (en) Beacon deployment enabling location based services (LBS) in an urban or city environment
US10511731B1 (en) Smart glasses and virtual objects in augmented reality and images
US7949616B2 (en) Telepresence by human-assisted remote controlled devices and robots
US9602193B1 (en) Transportation support network utilized fixed and/or dynamically deployed wireless transceivers
US20020006787A1 (en) Pocket concierge and multimedia, wireless call center system and method
Damala et al. Merging augmented reality based features in mobile multimedia museum guides
US20160021154A1 (en) System And Method For Displaying Information
US20080098068A1 (en) Space-time communication system
US20130080256A1 (en) Telepresence system for providing information to a user through an agent based on the location of the agent
US20140100895A1 (en) Hotel booking management system
WO2015005948A1 (en) Identity authentication and verification
KR20200067537A (en) System and method for providing a virtual environmental conference room
KR102492751B1 (en) System for providing real-time untact service using remote control robot
KR102229691B1 (en) Location based service based public participation type social media service connected to local store contents
US20230236018A1 (en) Exit Routes
KR20070045716A (en) System for making a call of condolence remotely using internet
EP4377835A2 (en) Systems and methods for voice referencing scannable codes, activators, and location identifiers
CN117010965A (en) Interaction method, device, equipment and medium based on information stream advertisement
KR20120075624A (en) Terminal system, shopping system and method for shopping using the same
KR101638548B1 (en) Wifi platform and service offer system using it
WO2012121626A1 (en) Interactive trade fair attendance system
KR20200081026A (en) Server, device and method for providing augmented reality service
WO2021106269A1 (en) Procedure sharing system and procedure sharing method
US20230214097A1 (en) System and method utilizing multiple virtual presence devices

Legal Events

Date Code Title Description
GRNT Written decision to grant