KR102017953B1 - Cleaning method using augmented reality and System thereof - Google Patents

Cleaning method using augmented reality and System thereof Download PDF

Info

Publication number
KR102017953B1
KR102017953B1 KR1020170156952A KR20170156952A KR102017953B1 KR 102017953 B1 KR102017953 B1 KR 102017953B1 KR 1020170156952 A KR1020170156952 A KR 1020170156952A KR 20170156952 A KR20170156952 A KR 20170156952A KR 102017953 B1 KR102017953 B1 KR 102017953B1
Authority
KR
South Korea
Prior art keywords
dust
monster
recognized
suction
information
Prior art date
Application number
KR1020170156952A
Other languages
Korean (ko)
Other versions
KR20190059390A (en
Inventor
고창윤
성수민
이영종
Original Assignee
고창윤
성수민
이영종
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 고창윤, 성수민, 이영종 filed Critical 고창윤
Priority to KR1020170156952A priority Critical patent/KR102017953B1/en
Publication of KR20190059390A publication Critical patent/KR20190059390A/en
Application granted granted Critical
Publication of KR102017953B1 publication Critical patent/KR102017953B1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L9/00—Details or accessories of suction cleaners, e.g. mechanical means for controlling the suction or for effecting pulsating action; Storing devices specially adapted to suction cleaners or parts thereof; Carrying-vehicles specially adapted for suction cleaners
    • A47L9/28—Installation of the electric equipment, e.g. adaptation or attachment to the suction cleaner; Controlling suction cleaners by electric means
    • A47L9/2857—User input or output elements for control, e.g. buttons, switches or displays
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L9/00—Details or accessories of suction cleaners, e.g. mechanical means for controlling the suction or for effecting pulsating action; Storing devices specially adapted to suction cleaners or parts thereof; Carrying-vehicles specially adapted for suction cleaners
    • A47L9/28—Installation of the electric equipment, e.g. adaptation or attachment to the suction cleaner; Controlling suction cleaners by electric means
    • A47L9/2805—Parameters or conditions being sensed
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L9/00—Details or accessories of suction cleaners, e.g. mechanical means for controlling the suction or for effecting pulsating action; Storing devices specially adapted to suction cleaners or parts thereof; Carrying-vehicles specially adapted for suction cleaners
    • A47L9/28—Installation of the electric equipment, e.g. adaptation or attachment to the suction cleaner; Controlling suction cleaners by electric means
    • A47L9/2836—Installation of the electric equipment, e.g. adaptation or attachment to the suction cleaner; Controlling suction cleaners by electric means characterised by the parts which are controlled
    • A47L9/2852—Elements for displacement of the vacuum cleaner or the accessories therefor, e.g. wheels, casters or nozzles
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/69—Involving elements of the real world in the game world, e.g. measurement in live races, real video

Abstract

본 발명의 일 실시예에 따른 증강현실을 이용한 청소 방법은 먼지 센서를 포함하는 AR 안경과 통신하는 증강현실을 이용한 청소 장치가, 상기 먼지 센서에 의해 인식된 먼지 정보를 통해 센싱 위치에 따른 먼지량을 산출하는 단계; 산출한 먼지량에 따라 게임상에 출현한 적어도 하나의 몬스터의 크기를 매칭 및 설정하는 단계; 및 상기 몬스터를 상기 AR 안경이 인식하는 증강 좌표 상에 맵핑하여 게임 화면을 제공하는 단계;를 포함할 수 있다.Cleaning method using augmented reality according to an embodiment of the present invention is a cleaning device using augmented reality in communication with AR glasses including a dust sensor, the amount of dust according to the sensing position through the dust information recognized by the dust sensor Calculating; Matching and setting sizes of at least one monster appearing in the game according to the calculated amount of dust; And providing a game screen by mapping the monster onto augmented coordinates recognized by the AR glasses.

Description

증강현실을 이용한 청소 방법 및 그 장치{Cleaning method using augmented reality and System thereof}Cleaning method using augmented reality and its device {Cleaning method using augmented reality and System approximately}

본 발명은 증강현실을 이용한 청소 장치에 관한 것으로, 더 구체적으로는 사용자에게 청소에 대한 흥미를 주면서 효율적 청소를 가능하게 하는 증강현실을 이용한 청소 장치에 관한 것이다.The present invention relates to a cleaning apparatus using augmented reality, and more particularly, to a cleaning apparatus using augmented reality to enable efficient cleaning while giving the user an interest in cleaning.

현실에서는 청소기로 청소를 하는 경우, 먼지의 위치를 정확히 알 수 없고, 또한 청소하는 재미도 없어 사용자는 청소를 꼼꼼하게 하지 않는 경향이 있다.In reality, when cleaning with a vacuum cleaner, the location of the dust is not exactly known, and there is no fun to clean, and the user tends not to clean the cleaning.

한국공개특허공보 제10-2016-0022856호 (2016.03.02.)Korean Patent Publication No. 10-2016-0022856 (2016.03.02.)

본 발명이 해결하고자 하는 과제는 사용자에게 청소에 대한 흥미를 주면서 효율적 청소를 가능하게 하는 증강현실을 이용한 청소 장치를 제공하려는 것이다.The problem to be solved by the present invention is to provide a cleaning device using augmented reality to enable efficient cleaning while giving the user an interest in cleaning.

본 발명의 일 실시예에 따른 증강현실을 이용한 청소 방법은 먼지 센서를 포함하는 AR 안경과 통신하는 증강현실을 이용한 청소 장치가, 상기 먼지 센서에 의해 인식된 먼지 정보를 통해 센싱 위치에 따른 먼지량을 산출하는 단계; 산출한 먼지량에 따라 게임상에 출현한 적어도 하나의 몬스터의 크기를 매칭 및 설정하는 단계; 및 상기 몬스터를 상기 AR 안경이 인식하는 증강 좌표 상에 맵핑하여 게임 화면을 제공하는 단계;를 포함할 수 있다.Cleaning method using augmented reality according to an embodiment of the present invention is a cleaning device using augmented reality in communication with AR glasses including a dust sensor, the amount of dust according to the sensing position through the dust information recognized by the dust sensor Calculating; Matching and setting sizes of at least one monster appearing in the game according to the calculated amount of dust; And providing a game screen by mapping the monster onto augmented coordinates recognized by the AR glasses.

또한 상기 적어도 하나의 몬스터의 크기를 매칭 및 설정하는 단계는: 산출한 먼지량의 수치 결과를, 일정 범위에 따라 제1 구간 내지 제n 구간으로 구분된 구간 중 어느 하나에 설정하고, 상기 제1 구간 내지 제n 구간으로 구분된 구획에 포함되는 먼지량에 대하여, 미리 설정된 제1 크기에 상응하는 몬스터 내지 미리 설정된 제n 크기에 상응하는 몬스터를 매칭 및 설정하는 단계;를 포함할 수 있다.The matching and setting of the size of the at least one monster may include: setting the numerical result of the calculated amount of dust in any one of the sections divided into the first section to the nth section according to a predetermined range, and the first section. And matching and setting the monsters corresponding to the dust size included in the partitions divided into the n-th section, the monsters corresponding to the preset first size to the monsters corresponding to the preset n-th size.

또한 상기 게임 화면을 제공하는 단계 이후에, 상기 적어도 하나의 몬스터에 상기 청소 장치에 의한 흡입이 이루어지고 있다는 흡입 정보를 인식하면, 상기 흡입 정보를 인식한 시점으로부터 경과하는 시간에 따라 상기 적어도 하나의 몬스터의 크기를 줄여 상기 게임 화면에 출력하는 단계;를 포함할 수 있다.In addition, after the providing of the game screen, when the suction information is recognized that the suction is performed by the cleaning device to the at least one monster, the at least one according to the time elapsed from the time when the suction information is recognized Reducing the size of the monster and outputting it to the game screen.

본 발명에 따른 증강현실을 이용한 청소 장치에 의하면, 사용자에게 청소에 대한 흥미를 주면서 효율적 청소를 가능케 하는 효과를 가진다.According to the cleaning apparatus using the augmented reality according to the present invention, it has the effect of enabling efficient cleaning while giving the user an interest in cleaning.

도 1은 본 발명의 일 실시예에 따른 증강현실을 이용한 청소 장치를 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른 증강현실을 이용한 청소 방법을 나타내는 도면이다.
도 3은 본 발명의 일 실시예에 따른 증강현실을 이용한 청소 방법을 나타내는 게임 화면이다.1 is a view showing a cleaning device using augmented reality according to an embodiment of the present invention.
2 is a view showing a cleaning method using augmented reality according to an embodiment of the present invention.
3 is a game screen showing a cleaning method using augmented reality according to an embodiment of the present invention.

본 명세서 또는 출원에 개시되어 있는 본 발명의 실시 예들에 대해서 특정한 구조적 내지 기능적 설명들은 단지 본 발명에 따른 실시 예를 설명하기 위한 목적으로 예시된 것으로, 본 발명에 따른 실시 예들은 다양한 형태로 실시될 수 있으며 본 명세서 또는 출원에 설명된 실시예들에 한정되는 것으로 해석되어서는 아니 된다.Specific structural to functional descriptions of the embodiments of the present invention disclosed in the specification or the application are only illustrated for the purpose of describing the embodiments according to the present invention, and the embodiments according to the present invention may be embodied in various forms. It should not be construed as limited to the embodiments set forth herein or in the application.

본 발명에 따른 실시예는 다양한 변경을 가할 수 있고 여러가지 형태를 가질 수 있으므로 특정실시 예들을 도면에 예시하고 본 명세서 또는 출원에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시 예를 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.Since the embodiments according to the present invention can be variously modified and have various forms, specific embodiments will be illustrated in the drawings and described in detail in the present specification or application. However, this is not intended to limit the embodiments in accordance with the concept of the present invention to a particular disclosed form, it should be understood to include all changes, equivalents, and substitutes included in the spirit and scope of the present invention.

제1 및/또는 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기구성 요소들은 상기용어들에 의해 한정되어서는 안된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만, 예컨대 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.Terms such as first and / or second may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another, for example, without departing from the scope of rights in accordance with the inventive concept, and the first component may be called a second component and similarly The second component may also be referred to as the first component.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.When a component is referred to as being "connected" or "connected" to another component, it may be directly connected to or connected to that other component, but it may be understood that other components may be present in between. Should be. On the other hand, when a component is said to be "directly connected" or "directly connected" to another component, it should be understood that there is no other component in between. Other expressions describing the relationship between components, such as "between" and "immediately between," or "neighboring to," and "directly neighboring to" should be interpreted as well.

본 명세서에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used herein is for the purpose of describing particular embodiments only and is not intended to be limiting of the invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. As used herein, the terms "comprise" or "having" are intended to indicate that there is a feature, number, step, action, component, part, or combination thereof that is described, and that one or more other features or numbers are present. It is to be understood that the present invention does not exclude, in advance, the possibility of addition, presence of steps, actions, components, parts, or combinations thereof.

다르게 정의되지 않는한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않F설명함으로써, 본 발명을 상세히 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art. Terms such as those defined in the commonly used dictionaries should be construed as having meanings consistent with the meanings in the context of the related art, and the present invention will be described in detail by not being explicitly defined herein. Like reference numerals in the drawings denote like elements.

도 1은 본 발명의 일 실시예에 따른 증강현실을 이용한 청소 장치를 나타내는 도면이다. 상기 증강현실을 이용한 청소 장치는 먼지 센서(110)를 포함하는 AR 안경(100)과 상기 AR 안경(100)과 통신하여 증강현실을 이용한 게임을 제공하는 시스템(200)을 포함한다.1 is a view showing a cleaning device using augmented reality according to an embodiment of the present invention. The cleaning apparatus using the augmented reality includes an AR glasses 100 including a dust sensor 110 and a system 200 in communication with the AR glasses 100 to provide a game using augmented reality.

상기 AR 안경(100)은 전방의 사물을 인식할 수 있는 센서(예컨대, 카메라 등)를 포함할 수 있다.The AR glasses 100 may include a sensor (eg, a camera, etc.) capable of recognizing a front object.

상기 시스템(200)은 통신 모듈(210), 게임 모듈(220) 및 저장 모듈(230)을 포함하며, 상기 게임 모듈(220)은 먼지량 처리 모듈(221), 좌표 설정 모듈(223), 몬스터 발생 모듈(225) 및 게임 처리 모듈(227)을 포함한다.The system 200 includes a communication module 210, a game module 220, and a storage module 230. The game module 220 includes a dust amount processing module 221, a coordinate setting module 223, and a monster generation. Module 225 and game processing module 227.

상기 통신 모듈(210)은 상기 AR 안경(100)과 각종 데이터를 송수신하는 기능을 수행하며, 나아가 외부와 통신을 통해 각종 데이터를 송수신하는 기능을 수행한다.The communication module 210 performs a function of transmitting and receiving various data with the AR glasses 100, and further performs a function of transmitting and receiving various data through communication with the outside.

상기 게임 모듈(220)은 상기 AR 안경(100)에 게임 환경을 제공하는 역할을 한다. 더 구체적으로, 상기 AR 안경(100)에 먼지량 정보에 상응하는 몬스터를 출현하도록 제어한다.The game module 220 serves to provide a game environment to the AR glasses 100. More specifically, the control corresponding to the appearance of the monster corresponding to the dust amount information in the AR glasses 100.

더 구체적으로 상기 먼지량 처리 모듈(221)은 상기 먼지 센서(110)에 의해 인식된 먼지 정보를 통해 센싱 위치에 따른 먼지량을 산출한다. More specifically, the dust amount processing module 221 calculates the amount of dust according to the sensing position based on the dust information recognized by the dust sensor 110.

상기 좌표 설정 모듈(223)은 AR 안경(100)의 화면을 좌표화하여 인식된 먼지가 좌표상 어느 위치에 존재하는 지를 검출하고, 먼지량에 따른 몬스터가 화면에 출력될 때 놓일 위치를 제어하는 기능을 수행한다.The coordinate setting module 223 coordinates a screen of the AR glasses 100 to detect where the recognized dust exists in coordinates, and controls a position to be placed when a monster according to the amount of dust is output on the screen. Do this.

상기 몬스터 발생 모듈(225)은 상기 먼지량 처리 모듈(2210)에 의해 산출된 먼지량에 따라 게임상에 출현한 적어도 하나의 몬스터의 크기를 매칭 및 설정한다.The monster generation module 225 matches and sets the size of at least one monster that appears in the game according to the amount of dust calculated by the amount of dust processing module 2210.

구체적으로, 상기 몬스터 발생 모듈(225)은 산출한 먼지량의 수치 결과를, 일정 범위에 따라 제1 구간 내지 제n 구간으로 구분된 구간 중 어느 하나에 설정한다. 예컨대, 먼지량이 0~1 사이인 경우 제1 구간, 먼지량이 1~2 사이인 경우 제2 구간, .... 먼지량이 n-1~n-2 사이인 경우 제n 구간에 상응할 수 있다. 즉, 먼지량이 1.24라면, 이는 제2 구간임을 의미한다.Specifically, the monster generation module 225 sets the numerical result of the calculated amount of dust in any one of the sections divided into the first section to the nth section according to a predetermined range. For example, when the amount of dust is between 0 and 1, it may correspond to the first section, and when the amount of dust is between 1 and 2, the second section and .... when the amount of dust is between n-1 to n-2. . That is, if the amount of dust is 1.24, this means that it is the second section.

또한, 상기 몬스터 발생 모듈(225)은 앞서 산출된 구간에 상응하는 몬스터의 크기를 매칭하는데, 더 구체적으로는 상기 제1 구간 내지 제n 구간으로 구분된 구획에 포함되는 먼지량에 대하여, 미리 설정된 제1 크기에 상응하는 몬스터 내지 미리 설정된 제n 크기에 상응하는 몬스터를 매칭 및 설정한다.In addition, the monster generation module 225 matches the size of the monster corresponding to the previously calculated section, more specifically, the preset amount of dust included in the partition divided into the first section to the n-th section, A monster corresponding to one size to a monster corresponding to a preset n-th size are matched and set.

예컨대, 제1 구간의 경우 제1 크기의 몬스터, 제2 구간의 경우 제2 크기의 몬스터 ...., 제n 구간의 경우 제n 크기의 몬스터를 매칭 및 설정한다.For example, in the first section, the monster of the first size, in the second section, the monster of the second size.

상기 게임 처리 모듈(227)은 상기 몬스터 발생 모듈(225)이 몬스터를 생성하면, 상기 몬스터를 상기 AR 안경이 인식하는 증강 좌표 상에 맵핑하여 게임 화면을 제공할 수 있게 한다.When the monster generation module 225 generates a monster, the game processing module 227 may provide a game screen by mapping the monster onto augmented coordinates recognized by the AR glasses.

또한 상기 게임 처리 모듈(227)은 게임 중에 상기 스터에 상기 청소 장치에 의한 흡입이 이루어지고 있다는 흡입 정보를 인식하면, 상기 흡입 정보를 인식한 시점으로부터 경과하는 시간에 따라 상기 몬스터의 크기를 줄여 상기 게임 화면에 출력할 수 있다.In addition, when the game processing module 227 recognizes suction information indicating that suction by the cleaning device is being performed on the stuffer during a game, the game processing module 227 reduces the size of the monster according to a time elapsed from the time when the suction information is recognized. You can output it to the game screen.

상기 게임 처리 모듈(227)이 상기 몬스터에 상기 청소 장치에 의한 흡입이 이루어지고 있다는 흡입 정보를 인식하고 있는 구체적인 예로, 상기 게임 처리 모듈(227)은 상기 몬스터가 위치하는 화면 좌표와 미리 설정된 거리 이내에 상기 청소 장치의 일부가 검출되고, 상기 정소 장치의 흡입 실시 조작이 이루어진 경우에 흡입 정보가 있다고 판단한다. 즉, 게임 화면상의 몬스터와 특정 거리 이내에 청소 장치의 일부가 인식되고, 사용자에 의한 흡입 실시 조작 버튼이 눌러져 해당 정보가 수신된 경우 흡입 정보가 있다고 판단하는 것이다. 흡입 실시 조작 버튼의 경우 강, 약 버튼의 설정 정보가 반영될 수 있으며, 이러한 부분은 몬스터의 크기를 얼만큼 줄일 것인지에 반영될 수 있다.As a specific example in which the game processing module 227 recognizes suction information that the monster is being sucked by the cleaning device, the game processing module 227 may be within a predetermined distance from a screen coordinate where the monster is located. When a part of the said cleaning apparatus is detected and the suction operation of the test device is performed, it is determined that there is suction information. That is, when a part of the cleaning device is recognized within a certain distance from the monster on the game screen and the suction operation operation button is pressed by the user and the corresponding information is received, it is determined that there is suction information. In the case of the suction operation operation button, the setting information of the strong and the weak button may be reflected, and this part may be reflected in how much the size of the monster is reduced.

상기 저장 모듈(230)은 상기 통신 모듈(210)을 통해 수신된 각종 데이터 및 상기 게임 모듈(220)에 의해 처리된 데이터를 저장하는 기능을 수행한다.The storage module 230 stores various data received through the communication module 210 and data processed by the game module 220.

도 2는 본 발명의 일 실시예에 따른 증강현실을 이용한 청소 방법을 나타내는 도면이다. 상기 청소 방법은 먼지 센서를 포함하는 AR 안경과 통신하는 증강현실을 이용한 청소 장치에 의해 수행될 수 있다.2 is a view showing a cleaning method using augmented reality according to an embodiment of the present invention. The cleaning method may be performed by a cleaning device using augmented reality in communication with the AR glasses including a dust sensor.

상기 먼지 센서에 의해 인식된 먼지 정보를 통해 센싱 위치에 따른 먼지량을 산출하고, 산출한 먼지량에 따라 게임상에 출현한 적어도 하나의 몬스터의 크기를 매칭 및 설정하며, 상기 몬스터를 상기 AR 안경이 인식하는 증강 좌표 상에 맵핑하여 게임 화면을 제공하는 순차적 과정(S10~S30)으로 본 발명이 이루어질 수 있다.The amount of dust according to the sensing position is calculated based on the dust information recognized by the dust sensor, and the size of at least one monster appearing in the game is matched and set according to the calculated amount of dust, and the AR glasses recognize the monster. The present invention can be made in a sequential process (S10 ~ S30) to provide a game screen by mapping on augmented coordinates.

본 발명의 이러한 과정 상의 구체적인 내용은 앞서 설명한 바 있으므로 생략하기로 한다.Details of this process of the present invention have been described above and will be omitted.

도 3은 본 발명의 일 실시예에 따른 증강현실을 이용한 청소 방법을 나타내는 게임 화면으로, 화면상에 먼지량에 상응하는 몬스터들이 도시되어 있음을 알 수 있고, 몬스터의 에너지바가 출력되어 있음을 알 수 있다.3 is a game screen showing a cleaning method using augmented reality according to an embodiment of the present invention, it can be seen that the monsters corresponding to the amount of dust is shown on the screen, it can be seen that the energy bar of the monster is output have.

본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다.The invention can also be embodied as computer readable code on a computer readable recording medium. The computer-readable recording medium includes all kinds of recording devices in which data that can be read by a computer system is stored.

본 발명은 도면에 도시된 일 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다.Although the present invention has been described with reference to one embodiment shown in the drawings, this is merely exemplary, and those skilled in the art will understand that various modifications and equivalent other embodiments are possible therefrom. Therefore, the true technical protection scope of the present invention will be defined by the technical spirit of the appended claims.

Claims (4)

먼지 센서를 포함하는 AR 안경과 통신하는 증강현실을 이용한 청소 장치가,
상기 먼지 센서에 의해 인식된 먼지 정보를 통해 센싱 위치에 따른 먼지량을 산출하는 단계;
산출한 먼지량에 따라 게임상에 출현한 적어도 하나의 몬스터의 크기를 매칭 및 설정하는 단계; 및
상기 몬스터를 상기 AR 안경이 인식하는 증강 좌표 상에 맵핑하여 게임 화면을 제공하는 단계;를 포함하고,
상기 적어도 하나의 몬스터의 크기를 매칭 및 설정하는 단계는,
산출한 먼지량의 수치 결과를, 일정 범위에 따라 제1 구간 내지 제n 구간으로 구분된 구간 중 어느 하나에 설정하고, 상기 제1 구간 내지 제n 구간으로 구분된 구획에 포함되는 먼지량에 대하여, 미리 설정된 제1 크기에 상응하는 몬스터 내지 미리 설정된 제n 크기에 상응하는 몬스터를 매칭 및 설정하는 단계;를 포함하고,
상기 게임 화면을 제공하는 단계는,
화면을 좌표화하여 인식된 먼지가 좌표상 어느 위치에 존재하는 지를 검출하고, 먼지량에 따라 매칭된 몬스터가 화면에 출력될 때 놓일 위치를 제어하는 단계;를 포함하고,
상기 게임 화면을 제공하는 단계 이후에,
상기 적어도 하나의 몬스터에 상기 청소 장치에 의한 흡입이 이루어지고 있다는 흡입 정보를 인식하면, 상기 흡입 정보를 인식한 시점으로부터 경과하는 시간에 따라 상기 적어도 하나의 몬스터의 크기를 줄여 상기 게임 화면에 출력하는 단계를 포함하되,
상기 청소 장치에 의한 흡입이 이루어지고 있다는 흡입 정보를 인식하는 것은,
상기 게임 화면상의 몬스터와 특정 거리 이내에 청소 장치의 일부가 인식되고, 사용자에 의한 흡입 실시 조작 버튼이 눌러져 해당 정보가 수신된 경우 상기 흡입 정보가 있다고 판단하는 것이며,
상기 흡입 실시 조작 버튼은,
강, 약 버튼의 설정 정보가 반영되는 증강현실을 이용한 청소 방법.
Cleaning device using augmented reality in communication with AR glasses including a dust sensor,
Calculating an amount of dust according to a sensing position based on dust information recognized by the dust sensor;
Matching and setting sizes of at least one monster appearing in the game according to the calculated amount of dust; And
And providing a game screen by mapping the monster onto augmented coordinates recognized by the AR glasses.
Matching and setting the size of the at least one monster,
The numerical result of the calculated amount of dust is set in any one of the division | divided into 1st section from n-th section according to a predetermined range, and advances about the amount of dust contained in the division | divided into said 1st-nth section in advance, And matching and setting a monster corresponding to the set first size to a monster corresponding to the preset n-th size.
Providing the game screen,
And detecting a location of the recognized dust by coordinates the screen, and controlling a position to be placed when a matched monster is output on the screen according to the amount of dust.
After providing the game screen,
When the suction information is recognized that the at least one monster is being sucked by the cleaning device, the size of the at least one monster is reduced and output to the game screen according to a time elapsed from when the suction information is recognized. Including steps,
Recognizing suction information that suction by the cleaning device is performed,
If a part of the cleaning device is recognized within a certain distance from the monster on the game screen, the suction operation operation button by the user is pressed and the corresponding information is received, it is determined that there is the suction information,
The suction conduct operation button,
Cleaning method using augmented reality that reflects the setting information of the strong, weak button.
삭제delete 삭제delete 제1항의 증강현실을 이용한 청소 방법을 수행하는 프로그램을 탑재한 청소 장치.Cleaning device equipped with a program for performing a cleaning method using the augmented reality of claim 1.
KR1020170156952A 2017-11-23 2017-11-23 Cleaning method using augmented reality and System thereof KR102017953B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170156952A KR102017953B1 (en) 2017-11-23 2017-11-23 Cleaning method using augmented reality and System thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170156952A KR102017953B1 (en) 2017-11-23 2017-11-23 Cleaning method using augmented reality and System thereof

Publications (2)

Publication Number Publication Date
KR20190059390A KR20190059390A (en) 2019-05-31
KR102017953B1 true KR102017953B1 (en) 2019-09-03

Family

ID=66657230

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170156952A KR102017953B1 (en) 2017-11-23 2017-11-23 Cleaning method using augmented reality and System thereof

Country Status (1)

Country Link
KR (1) KR102017953B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240001343A (en) 2022-06-24 2024-01-03 엘지전자 주식회사 A system and method for providing a game for cleaning and a storage medium therefor

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230237712A1 (en) * 2022-01-25 2023-07-27 The Procter & Gamble Company Environmental imaging and graphical mapping systems and methods for tracking cleaning activity in a physical environment

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5127780B2 (en) * 2009-06-16 2013-01-23 株式会社ソニー・コンピュータエンタテインメント GAME CONTROL PROGRAM, GAME DEVICE, AND GAME CONTROL METHOD

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014217843A1 (en) * 2014-09-05 2016-03-10 Martin Cudzilo Apparatus for facilitating the cleaning of surfaces and methods for detecting cleaning work done
KR102118054B1 (en) 2016-02-17 2020-06-02 엘지전자 주식회사 remote controller for a robot cleaner and a control method of the same

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5127780B2 (en) * 2009-06-16 2013-01-23 株式会社ソニー・コンピュータエンタテインメント GAME CONTROL PROGRAM, GAME DEVICE, AND GAME CONTROL METHOD

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240001343A (en) 2022-06-24 2024-01-03 엘지전자 주식회사 A system and method for providing a game for cleaning and a storage medium therefor

Also Published As

Publication number Publication date
KR20190059390A (en) 2019-05-31

Similar Documents

Publication Publication Date Title
CN109361985B (en) TWS earphone wearing detection method and system, electronic device and storage medium
CN110716648B (en) Gesture control method and device
KR102017953B1 (en) Cleaning method using augmented reality and System thereof
CN105229582A (en) Based on the gestures detection of Proximity Sensor and imageing sensor
JP2008100073A5 (en)
WO2009063765A1 (en) Work information processing apparatus, program, and work information processing method
CN103970260A (en) Non-contact gesture control method and electronic terminal equipment
KR101631011B1 (en) Gesture recognition apparatus and control method of gesture recognition apparatus
US11493997B2 (en) Program, recognition apparatus, and recognition method
KR20120068253A (en) Method and apparatus for providing response of user interface
JP2020067999A (en) Method of virtual user interface interaction based on gesture recognition and related device
CN108355347B (en) Interaction control method and device, electronic equipment and storage medium
KR102434410B1 (en) Electronic Device and Operating Method Thereof
CN105446487A (en) E-book page turning control method and apparatus
CN106681636A (en) Method and device capable of preventing wrong touch, and mobile terminal
US20160313799A1 (en) Method and apparatus for identifying operation event
KR101548872B1 (en) Fingers recognition method and system using image processing
KR101365083B1 (en) Interface device using motion recognition and control method thereof
CN108446063A (en) Processing method, device, storage medium and the electronic device of object
CN111354029A (en) Gesture depth determination method, device, equipment and storage medium
CN109101173B (en) Screen layout control method, device, equipment and computer readable storage medium
US20120201417A1 (en) Apparatus and method for processing sensory effect of image data
CN113641278A (en) Control method, control device, electronic equipment and storage medium
CN110765926A (en) Drawing book identification method and device, electronic equipment and storage medium
KR20210084444A (en) Gesture recognition method and apparatus, electronic device and recording medium

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant