KR102485874B1 - AR Vision Service System to Prevent Failure Cost - Google Patents

AR Vision Service System to Prevent Failure Cost Download PDF

Info

Publication number
KR102485874B1
KR102485874B1 KR1020200067715A KR20200067715A KR102485874B1 KR 102485874 B1 KR102485874 B1 KR 102485874B1 KR 1020200067715 A KR1020200067715 A KR 1020200067715A KR 20200067715 A KR20200067715 A KR 20200067715A KR 102485874 B1 KR102485874 B1 KR 102485874B1
Authority
KR
South Korea
Prior art keywords
expert
server
module
information
content data
Prior art date
Application number
KR1020200067715A
Other languages
Korean (ko)
Other versions
KR20210150828A (en
Inventor
황은기
Original Assignee
황은기
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 황은기 filed Critical 황은기
Priority to KR1020200067715A priority Critical patent/KR102485874B1/en
Publication of KR20210150828A publication Critical patent/KR20210150828A/en
Application granted granted Critical
Publication of KR102485874B1 publication Critical patent/KR102485874B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • G06N20/10Machine learning using kernel methods, e.g. support vector machines [SVM]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Graphics (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Human Resources & Organizations (AREA)
  • Remote Sensing (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computational Linguistics (AREA)
  • Human Computer Interaction (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Economics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Medical Informatics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은 전문가 시스템을 이용한 AR 서비스 시스템 및 이를 이용한 서비스 방법에 관한 것으로서, 보다 상세하게는 실제 제품(예 : 가구 등)의 크기 및 형태와 동일한 제품 또는 건축물 등을 AR 모델링(modeling)을 통한 AR 영상으로 디스플레이하여 확인할 수 있도록 하여 전문가 시스템을 이용한 AR 서비스 시스템 및 이를 이용한 서비스 방법에 관한 것이다.The present invention relates to an AR service system using an expert system and a service method using the same, and more particularly, to AR through AR modeling of a product or building having the same size and shape as an actual product (eg, furniture, etc.) It relates to an AR service system using an expert system and a service method using the same by displaying it as an image so that it can be confirmed.

Description

전문가 시스템을 이용한 AR 서비스 시스템 및 이를 이용한 서비스 방법{AR Vision Service System to Prevent Failure Cost}AR service system using expert system and service method using the same {AR Vision Service System to Prevent Failure Cost}

본 발명은 전문가 시스템을 이용한 AR 서비스 시스템 및 이를 이용한 서비스 방법에 관한 것으로서, 보다 상세하게는 실제 제품의 크기 및 형태와 동일한 제품 또는 건축물 등을 스마트 폰 등으로 디스플레이하여 편리하게 확인할 수 있도록 하여 전문가 시스템을 이용한 AR 서비스 시스템 및 이를 이용한 서비스 방법에 관한 것이다.The present invention relates to an AR service system using an expert system and a service method using the same. It relates to an AR service system using and a service method using the same.

증강현실(Augmented Reality, AR)은 현실의 이미지나 배경에 3차원 가상 이미지를 겹쳐서 하나의 영상으로 보여 주는 기술로써 사용자가 스마트폰 등의 내장 카메라(캠)로 특정 사물을 비추면 정보가 단말기에 임시 기록된다.Augmented Reality (AR) is a technology that superimposes a three-dimensional virtual image on a real image or background and displays it as a single image. recorded temporarily.

그런 다음 인터넷을 통해 특정 정보 시스템에 전송하고 사용자로부터 사물의 상세 정보를 데이터베이스에서 검색한 후 그 결과를 다시 단말기로 전송한다. 이 데이터를 수신한 단말기는 증강현실 애플리케이션을 통해 현 정보와 매칭 시킨 후 실시간 화면으로 보여주는 것이다.Then, it is transmitted to a specific information system through the Internet, and after searching the database for detailed information of the object from the user, the result is transmitted to the terminal again. The terminal receiving this data matches the current information through an augmented reality application and displays it on a real-time screen.

그러나 AR 기술이나 가상의 물체 이미지가 실제 환경과 상호 작용하며 일해야 하는 숙련된 근로자가 복잡한 작업을 수행하는 데 도움이 되기는 하지만 고정밀 수작업에는 적합하지 않은 문제가 있었다.However, while AR technology or virtual object images can help skilled workers who have to work interacting with real environments to perform complex tasks, they are not suitable for high-precision manual work.

왜냐하면 사람에게는 눈이 2개 있고, 두 눈이 각기 분리된 물체에 동시에 초점을 맞춘다. 그래서 높은 강도로 집중해야 하는 고정밀 작업에는 아마추어의 AR 기술이 오히려 방해가 될 수 있기 때문이다.Because humans have two eyes, and both eyes focus on separate objects simultaneously. So, for high-precision work that requires high intensity concentration, amateur AR technology can be a hindrance.

따라서 이를 해결할 수 있는 전문적인 서비스의 제공이 필요하게 되었다.Therefore, it is necessary to provide a professional service that can solve this problem.

한국등록특허 제1036228호Korean Registered Patent No. 1036228 한국공개특허 제2006-0086668호Korean Patent Publication No. 2006-0086668 한국등록특허 제0837040호Korean Registered Patent No. 0837040 한국공개특허 제2018-0113728호Korean Patent Publication No. 2018-0113728 한국등록특허 제1588025호Korea Patent No. 1588025

본 발명은 상기와 같은 문제점을 해결하기 위해 이루어진 것으로서, 전본 발명은 AR 뷰어 서버에 실제 제품의 크기 및 형태와 동일한 제품 컨텐츠를 디스플레이하고, 이벤트 발생에 따라 전문가 시스템을 이용한 전문가들이 제작한 AR 컨텐츠를 동작시킴으로써, AR 컨텐츠 데이터에 실제와 같은 가상의 다양한 느낌 및 시각적 효과를 주면서 수정도 가능한 전문가 시스템을 이용한 AR 서비스 시스템을 제공하는 데 목적이 있다.The present invention has been made to solve the above problems, and the present invention displays product contents identical to the size and shape of an actual product on an AR viewer server, and AR contents produced by experts using an expert system according to an event occurrence. By operating, the purpose is to provide an AR service system using an expert system that can be modified while giving a variety of realistic virtual feelings and visual effects to AR content data.

상기 과제를 해결하기 위하여 본 발명은 실패 비용 방지를 위한 AR 컨텐츠 데이터를 저장하고, 상기 AR 컨텐츠 데이터에 관련된 모션 정보 또는 상기 모션 정보에 따른 이벤트 신호 또는 상기 이벤트 신호에 따른 기능을 저장하는 실패 비용 방지 컨텐츠 데이터 모듈; 사용자의 모션에 따라 상기 모션 정보를 검색하고, 상기 모션 정보에 따른 이벤트 신호를 생성하는 AR 입력 모듈; 상기 AR 입력 모듈을 통해 입력된 상기 이벤트 신호에 따른 기능을 실행시키거나 수정 정보에 따른 기능을 실행시키는 AR 기능 모듈; 상기 AR 입력 모듈을 통해 수정 요청 정보를 생성하는 AR 수정 요청 모듈; 상기 AR 수정 요청 모듈을 통해 전송된 수정 요청 정보에 따른 수정 정보를 생성하여 상기 AR 기능 모듈에 전달하는 AR 수정 기능 모듈; 상기 AR 입력 모듈의 이벤트 신호에 대응하는 상기 모션 정보를 생성하여 대응되는 AR 컨텐츠 데이터 또는 수정 정보에 따른 기능을 시간 순서대로 표시하는 AR 뷰어 모듈; 상기 모듈들을 제어하는 AR 서버;를 포함한다.In order to solve the above problems, the present invention stores AR content data for preventing failure cost, and prevents failure cost by storing motion information related to the AR content data, an event signal according to the motion information, or a function according to the event signal. content data module; an AR input module for searching the motion information according to the user's motion and generating an event signal according to the motion information; an AR function module that executes a function according to the event signal input through the AR input module or a function according to correction information; an AR modification request module generating modification request information through the AR input module; an AR modification function module generating modification information according to the modification request information transmitted through the AR modification request module and transmitting the modified information to the AR function module; an AR viewer module generating the motion information corresponding to the event signal of the AR input module and displaying functions according to corresponding AR content data or correction information in chronological order; It includes; AR server that controls the modules.

상기 AR 입력 모듈에 연결되어 입력 정보를 생성하는 디스플레이 장치는 3D 움직임 센서, 가속도계, 경사계, 또는 레이저 거리 측정기 중 하나를 포함한다.A display device connected to the AR input module to generate input information includes one of a 3D motion sensor, an accelerometer, an inclinometer, and a laser distance meter.

상기 실패 비용 방지 컨텐츠 데이터 중 인테리어 객체는 도어, 스위치, 벽지, 바닥재, 가구, 및 욕실 중 적어도 하나에 대한 이미지이다.Among the failure cost prevention content data, the interior object is an image of at least one of a door, a switch, a wallpaper, a flooring material, furniture, and a bathroom.

상기 AR 서버는 인공신경망, 서포트 백터머신, 자기회귀누적이동평균법 중 어느 하나의 머신러닝 모델을 이용하여, 이벤트 신호에 대응되는 AR 컨텐츠 데이터를 시계열적으로 배열한다.The AR server arranges the AR content data corresponding to the event signal in time series by using any one machine learning model among an artificial neural network, a support vector machine, and an autoregressive cumulative moving average method.

본 발명은 사용자의 모션을 위한 시나리오와 상기 시나리오에 따라 시간의 흐름별로 나뉜 AR 컨텐츠 데이터를 설계하고 저장하는 단계; 컨텐츠 모듈과 AR 뷰어 서버를 통해 전문가 시스템을 이용한 AR 컨텐츠 데이터를 로드하여 모션을 준비하는 단계; AR 입력 모듈을 통해 사용자가 전문가 시스템을 이용한 AR 컨텐츠에 반응하는 이벤트 신호를 생성하는 단계; AR 뷰어 서버를 통해 상기 이벤트 신호에 대응되는 AR 컨텐츠 데이터를 생성하는 단계; 상기 AR 컨텐츠 데이터를 시간 순서대로 표시하는 단계; AR 뷰어 서버를 통해 상기 AR 컨텐츠 데이터를 분석하는 단계;로 이루어진 다.The present invention includes the steps of designing and storing scenarios for user's motion and AR content data divided according to the lapse of time according to the scenarios; preparing a motion by loading AR content data using an expert system through a content module and an AR viewer server; Generating an event signal that responds to AR content using an expert system by a user through an AR input module; generating AR content data corresponding to the event signal through an AR viewer server; displaying the AR content data in chronological order; Analyzing the AR content data through an AR viewer server;

상기 AR 입력 모듈의 이벤트 신호에 대응하는 상기 모션 정보를 생성하여 대응되는 AR 컨텐츠 데이터 또는 수정 정보에 따른 기능을 시간 순서대로 표시하는 단계;로 이루어진다.Generating the motion information corresponding to the event signal of the AR input module and displaying the function according to the corresponding AR content data or correction information in chronological order.

상기 AR 입력 모듈을 통해 3D 움직임 센서, 가속도계, 경사계, 또는 레이저 거리 측정기 중 하나의 센서값을 생성하는 단계;를 더 포함한다.The method further includes generating a sensor value of one of a 3D motion sensor, an accelerometer, an inclinometer, and a laser distance measurer through the AR input module.

상기 AR 컨텐츠 데이터를 시간 순서대로 표시하는 단계는, AR 기능 모듈을 통해 상기 AR 입력 모듈을 통해 입력된 상기 이벤트 신호에 따른 기능을 실행시키거나 수정 정보에 따른 기능을 실행시키는 단계; AR 수정 요청 모듈을 통해 상기 AR 입력 모듈을 통해 수정 요청 정보를 생성하는 단계; AR 수정 기능 모듈이 상기 AR 수정 요청 모듈을 통해 전송된 수정 요청 정보에 따른 수정 정보를 생성하여 상기 AR 기능 모듈에 전달하는 단계;를 더 포함한다.The displaying of the AR content data in chronological order may include: executing a function according to the event signal input through the AR input module through an AR function module or a function according to correction information; generating modification request information through the AR input module through an AR modification request module; The AR modification function module generates modification information according to the modification request information transmitted through the AR modification request module and transmits the modification information to the AR function module.

상기와 같이 이루어지는 본 발명은 빠르게 시제품을 제작해주고 고객과 빠르게 소통을 해서 수정기간을 줄일 수 있다.The present invention made as described above can quickly produce prototypes and quickly communicate with customers to reduce the revision period.

또한 본 발명은 시제품을 만드는 데 들어가는 시간과 돈과 기회비용(실패비용)을 줄일 수 있다.In addition, the present invention can reduce the time, money, and opportunity cost (cost of failure) required to make a prototype.

또한 본 발명은 실제 시제품을 만드는데 실패하게 됨으로써, 의뢰자의 시간과 돈과 기회비용에 사회적 비용(세금으로 이뤄진 정부자금)이 증가하는 것을 방지할 수 있다.In addition, the present invention can prevent an increase in social costs (government funds consisting of taxes) to the client's time, money, and opportunity costs by failing to make an actual prototype.

본 발명은 AR 컨텐츠 데이터에 실제와 같은 가상의 다양한 느낌 및 시각적 효과를 주기 위한 것으로, 상대적으로 적은 비용으로 많은 체험 환경을 구축할 수 있으며 콘텐츠는 한 번 만들면 무한정 사용할 수 있으므로 실제와 동일하게 구현하면서 기존에 많은 부분을 차지하던 재료비가 필요없어 실패 비용이 따로 추가되지 않는다.The present invention is intended to give AR content data a variety of realistic virtual feelings and visual effects, and many experiential environments can be built at a relatively low cost, and since content can be used indefinitely once created, There is no need for material costs, which previously accounted for a large part, so there is no additional cost for failure.

도 1 a, b, c는 종래 발명에 따른 AR 체험 시스템을 보여주는 도면이다.
도 2는 본 발명의 일실시예에 따른 전문가 시스템을 이용한 AR 서비스 시스템의 세부적인 구성을 보여주는 도면이다.
도 3은 본 발명의 일실시예에 따른 전문가 시스템을 이용한 AR 서비스 시스템을 이용한 기능 실행 단계를 보여주는 도면이다.
1a, b, c are diagrams showing an AR experience system according to the prior art.
2 is a diagram showing a detailed configuration of an AR service system using an expert system according to an embodiment of the present invention.
3 is a diagram showing function execution steps using an AR service system using an expert system according to an embodiment of the present invention.

본 발명을 충분히 이해하기 위해서 본 발명의 바람직한 실시예를 첨부 도면을 참조하여 설명한다. 본 발명의 실시예는 여러 가지 형태로 변형될 수 있으며, 본 발명의 범위가 아래에서 상세히 설명하는 실시예로 한정되는 것으로 해석되어서는 안 된다. 본 실시예는 당업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위하여 제공되는 것이다. 따라서 도면에서의 요소의 형상 등은 보다 명확한 설명을 강조하기 위해서 과장되어 표현될 수 있다. 각 도면에서 동일한 부재는 동일한 참조부호로 도시한 경우가 있음을 유의하여야 한다. 또한, 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 공지 기능 및 구성에 대한 상세한 기술은 생략된다.In order to fully understand the present invention, preferred embodiments of the present invention will be described with reference to the accompanying drawings. Embodiments of the present invention may be modified in various forms, and the scope of the present invention should not be construed as being limited to the examples described in detail below. This embodiment is provided to more completely explain the present invention to those skilled in the art. Therefore, the shapes of elements in the drawings may be exaggerated to emphasize a clearer description. It should be noted that in each drawing, the same members are sometimes indicated by the same reference numerals. In addition, detailed descriptions of well-known functions and configurations that may unnecessarily obscure the subject matter of the present invention are omitted.

도 2에 도시된 바와 같이 본 발명은 AR 모듈(20), AR 서버(30) 등을 포함한다.As shown in FIG. 2, the present invention includes an AR module 20, an AR server 30, and the like.

본 발명은 종래의 디스플레이 장치(예 : 스마트폰 ; 10), AR 모듈(20), AR 서버(30) 등을 사용할 수 있지만, 전문가 등이 미리 제작한 AR 어플리케이션 알고리즘 등을 추가로 포함시켜 실제 제품의 크기 및 형태와 동일한 제품 또는 건축물 등을 AR 모델링(modeling)을 통한 영상으로 디스플레이하여 확인할 수 있도록 해 실패 비용 최소화할 수 있는 특징이 있다.The present invention can use a conventional display device (eg, smartphone; 10), AR module 20, AR server 30, etc., but additionally includes an AR application algorithm prepared in advance by experts, etc. It has the feature of minimizing the cost of failure by allowing the same size and shape of the product or building to be displayed as an image through AR modeling.

상기 AR 영상으로 이루어진 가상 환경에서 객체들의 동작을 제어하는 기법들은 사용자의 의해 보유된 디스플레이 장치(10)의 움직임에 기초하여 생성된 스케일링 팩터(scale factor)에 따라 가상 환경에서 객체의 움직임(방향, 회전 각도 등)을 정의할 수도 있다.Techniques for controlling the operation of objects in the virtual environment composed of the AR images are based on the movement (direction, direction, rotation angle, etc.) can also be defined.

예를 들어 작은 움직임으로 무게가 무거운 가구 등을 손쉽게 움직이거나, 회전시킬 수 있는 구성을 갖는다.For example, it has a configuration that can easily move or rotate heavy furniture with a small movement.

본 발명의 일 실시예에 따라 디스플레이 장치(10), AR 모듈(20), AR 서버(30), AR 전문가 단말기, 의뢰인 단말기 등이 네트워크로 연결되어 있다.According to an embodiment of the present invention, the display device 10, the AR module 20, the AR server 30, the AR expert terminal, and the client terminal are connected through a network.

본 발명은 AR 뷰어 모듈(26)을 통해 전후좌우 AR 영상을 투영하여 디스플레이함으로써 사용자에게 리얼리티 가상 현실을 제공하기 위한 장치이다.The present invention is an apparatus for providing reality virtual reality to a user by projecting and displaying AR images on the front, rear, left, and right sides through an AR viewer module 26 .

예를 들어 모델하우스공간 내에 배치된 객체의 속성을 AR 뷰어 모듈(26)이 계산하여 AR 영상으로 디스플레이하고, 사용자는 디스플레이 장치(10)을 통해 모델하우스공간 내의 내부 객체를 보는 리얼리티 가상 현실을 체험할 수 있다.For example, the AR viewer module 26 calculates the properties of objects placed in the model house space and displays them as AR images, and the user experiences the reality virtual reality of viewing the objects inside the model house space through the display device 10 can do.

디스플레이 장치(10)는 사용자 행동에 따른 수신할 수 있는 적어도 하나의 행동키(key; 고정 행동에 따라 미리 형성된 카테고리 구분 기호)를 포함할 수 있으며, 이 외에 디스플레이 장치(10) 외관에 연결된 추가 터치패드(touchpad) 등을 더 구비할 수도 있다.The display device 10 may include at least one action key (key; a category separator pre-formed according to a fixed action) that can be received according to a user action, and in addition, an additional touch connected to the exterior of the display device 10. A touchpad or the like may be further provided.

또한, 실시예에 따라 모션 컨트롤러(20)는 사용자의 손의 움직임을 감지할 수 있는 적어도 하나의 센서를 더 구비할 수 있다.Also, according to embodiments, the motion controller 20 may further include at least one sensor capable of detecting a motion of a user's hand.

디스플레이 장치(10)를 통해 입력된 사용자 입력 및/또는 손가락 등의 움직임에 대한 정보를 제공받아, 이에 대응하는 동작(예 : 두손가락을 이용한 확대 동작 등)을 수행할 수 있다.A user input input through the display device 10 and/or information about motion of a finger may be provided, and a corresponding operation (eg, a magnification operation using two fingers) may be performed.

추가적으로 본 발명은 디스플레이 장치(10) 없이도 디지털 사이니지를 통해 메뉴 정보를 디스플레이하고 리얼리티 가상 현실을 애니메이션화하여 표시할 수도 있다.Additionally, according to the present invention, menu information may be displayed through digital signage without the display device 10 and reality virtual reality may be animated and displayed.

예를 들어 사용자가 샤워실에서 샤워기의 동작 버튼을 누르고 샤워하는 장면을 3자 입장에서 본 애니메이션으로 AR 뷰어 모듈(26)을 통해 저장하여 나중에 확인할 수도 있다.For example, a scene in which a user presses an operation button of a shower head in a shower room and takes a shower can be saved as an animation viewed from a third person's point of view through the AR viewer module 26 and checked later.

또한 사용자가 화장실로 향하는 모션 정보에 따른 변기에 접근할 수 있는 이벤트 신호를 발생시키고 상기 이벤트 신호에 따른 변기 뚜껑을 열 수 있는 기능이 실행된다.In addition, an event signal through which the user can approach the toilet according to motion information directed to the toilet is generated, and a function of opening the toilet lid according to the event signal is executed.

그리고 이러한 기능을 실행한 사용자는 AR 입력 모듈을 통해 AR 수정 요청 모듈에 수정 요청 정보를 전달하여 AR 기능 모듈이 일반 변기에 체중을 측정하는 기능을 추가할 수 있도록 한다.In addition, the user who executed these functions transmits the modification request information to the AR modification request module through the AR input module so that the AR function module can add a function of measuring weight to the regular toilet bowl.

상기 AR 입력 모듈은 추가되는 AR 커뮤니케이션 프로세서에 의해 제어될 수 있다.The AR input module may be controlled by an additional AR communication processor.

구체적으로 AR 모델링(modeling)을 통해 생성된 적어도 하나의 건축물 내외부에 대한 AR 영상을 제공하고, 상기 AR 영상 내에서 손가락 등이 움직임에 응답하여, 상기 AR 서버(30)의 AR 컨텐츠 데이터를 결합 또는 이동시켜 상기 AR 모듈(20)을 통해 AR 영상으로 디스플레이한다.Specifically, an AR image of the interior and exterior of at least one building generated through AR modeling is provided, and in response to a finger movement in the AR image, AR content data of the AR server 30 is combined or It is moved and displayed as an AR image through the AR module 20.

또한 상기 AR 영상 내의 인테리어 객체에 손가락 등의 움직임에 의해 이벤트를 발생함에 따라, 상기 AR 컨텐츠 데이터(예 : 인테리어 객체)가 이동 또는 결합된 상태의 AR 영상을 제공하는 경우, 현재 출력 중인 AR 영상이 건축물의 외부에 대응하는 경우 단지 정보에 대한 지도 GUI를 제공하고, 현재 출력 중인 AR 영상이 건축물의 내부에 대응하는 경우, 건축물의 구조 정보에 대한 지도 GUI를 제공할 수 있다.In addition, when an event is generated by a movement of a finger or the like on an interior object in the AR image, when an AR image in a state where the AR content data (eg, interior object) is moved or combined is provided, the currently outputting AR image When corresponding to the exterior of a building, a map GUI for only information may be provided, and when an AR image currently being output corresponds to the inside of a building, a map GUI for structural information of a building may be provided.

이 때 AR 입력 모듈을 이용한 수정 요청 정보를 전달 방법으로 AR 뷰어 모듈(26)이 AR 커뮤니케이션 프로세서를 통해 선택형 이미지 또는 텍스트를 표시할 수도 있다. 이를 통해 특정 기능을 삭제할 수도 있다. 또는 AR 영상의 속성에 해당하는 위치(position), 회전(rotation), 비율조정(scale), 재질(material)을 수정할 수도 있다.At this time, as a method of transmitting the correction request information using the AR input module, the AR viewer module 26 may display a selectable image or text through the AR communication processor. You can also delete certain features through this. Alternatively, the position, rotation, scale, and material corresponding to the properties of the AR video may be modified.

한편 AR 서버(30)은 상기 의뢰인 단말(10)을 통해 의뢰 정보를 전달받아 AR 전문가를 선정하고 상기 AR 전문가 단말(30)에 등급별 대금 결제가 진행되도록 서비스를 제공하는 서버이다.Meanwhile, the AR server 30 is a server that receives request information through the client terminal 10, selects an AR expert, and provides a service to the AR expert terminal 30 to proceed with payment for each grade.

상기 AR 서버(30)는 디스플레이 장치(10)를 소지한 사용자가 AR 영상을 확인하고 의뢰 정보에 최적으로 제작할 수 있는 AR 영상 제작 AR 전문가를 선정하도록 하여 저장한다.The AR server 30 allows the user possessing the display device 10 to check the AR image and selects and stores an AR expert capable of producing the AR image optimally according to the request information.

상기 AR 서버(30)는 빅데이터를 기반한 머신러닝을 이용하여 상기 의뢰 정보에 대응하는 AR 전문가를 선정하기 위해 자체적인 선정 기준을 입력받을 수 있거나 상기 사용자의 선택에 의해 AR 전문가를 선정할 수 있다.The AR server 30 may receive its own selection criteria to select an AR expert corresponding to the request information using big data-based machine learning, or may select an AR expert according to the user's selection. .

상기 AR 서버(30)는 상기 선정된 AR 전문가의 거래 금액에 따라 등급을 나누어 대금 결제를 차등화시킬 수도 있다.The AR server 30 may differentiate payment by dividing grades according to the transaction amount of the selected AR expert.

즉 상기 AR 서버(30)는 인공신경망(Neural Networks), 서포트 백터머신(Support Vector Machine, SVM), 자기회귀누적이동평균법(autoregressive integrated moving average, ARIMA) 중 어느 하나의 머신러닝 모델을 이용한 시계열적 빅데이터 분석 방법을 이용하여 자체적인 선정 기준을 마련하거나 거래 금액 또는 등급에 따라 AR 전문가를 구분하고 의뢰할 수 있다.That is, the AR server 30 uses a machine learning model of any one of Neural Networks, Support Vector Machine (SVM), and autoregressive integrated moving average (ARIMA). By using big data analysis method, you can prepare your own selection criteria, or you can classify and commission AR experts according to transaction amount or grade.

예를 들어 상기 AR 서버(30)는 서포트 백터머신을 이용하여, 이벤트 신호에 대응되는 AR 컨텐츠 데이터의 애니메이션 이미지를 분류하는 작업에 있어 패턴 인식, 자료 분석을 통한 시계열적인 배열이 가능하다.For example, the AR server 30 uses a support vector machine to classify animation images of AR content data corresponding to event signals, and can perform time-sequential arrangement through pattern recognition and data analysis.

따라서 상기 AR 서버(30)를 통해 최적화된 AR 전문가를 추천받아 생성된 AR 영상 공간 내에 배치된 객체를 사용해보는 리얼리티 가상 현실을 체험할 수 있다.Therefore, it is possible to experience reality virtual reality by using an object arranged in an AR video space created by receiving an AR expert recommended through the AR server 30 .

이 때 도 4에 도시된 바와 같이 사용자는 디스플레이 장치(10)를 통해 객체의 속성에 해당하는 위치(position), 회전(rotation), 비율조정(scale), 재질(material)을 실시간으로 수정하여 AR 전문가에 수정 의뢰할 수도 있다.At this time, as shown in FIG. 4 , the user modifies the position, rotation, scale, and material corresponding to the properties of the object through the display device 10 in real time to create AR. You can also ask an expert to fix it.

이하 본 발명의 일실시예로서 실제 AR 모델링 작업에 적용한 적용예를 자세히 설명한다.Hereinafter, as an embodiment of the present invention, an application example applied to an actual AR modeling work will be described in detail.

본 발명의 일실시예에 따른 AR 모델링 실패 비용을 감소시키기 위해 시제품 제조 전에 AR 전문가에 의해 제작된 AR 영상을 관찰하여 수정하는 방법이 사용된다.In order to reduce the AR modeling failure cost according to an embodiment of the present invention, a method of observing and correcting an AR image produced by an AR expert prior to manufacturing a prototype is used.

먼저 의뢰인 단말기를 통해 AR 서버(30)에 접속하여 금형, 사출, 및 PCB 작업 또는 건물 인테리어 또는 가구 배치에 따른 AR AR 이미지 확인이 가능한 작업물을 제작하는 AR 전문가 선정에 대한 의뢰 정보를 등록 저장하여 서비스를 시작한다.First, by accessing the AR server 30 through the client terminal, registration and storage of request information for selecting an AR expert to produce a work that can be confirmed by AR images according to mold, injection, and PCB work or building interior or furniture arrangement start the service

AR 서버(30)를 통해 상기 의뢰 정보에 대응하는 금형, 사출, 및 PCB 작업과 3D 모델링 작업에 따른 각각의 AR 전문가를 선정한다.Through the AR server 30, each AR expert is selected according to mold, injection, and PCB work and 3D modeling work corresponding to the request information.

이 때 시제품 제작용 모델을 선택하는 경우, 상기 의뢰인의 참고로 제출한 3D모델링 스케치 도면(또는 미완성 도면)이 웹페이지를 통해 AR 전문가에게 전송될 수 있다.At this time, when a model for manufacturing a prototype is selected, the 3D modeling sketch drawing (or incomplete drawing) submitted for reference by the client may be transmitted to the AR expert through a web page.

AR 서버(30)를 통해 상기 AR 전문가에게 의뢰 내용을 통지하고 AR 전문가인 경우 견적 내용을 통해 해당 AR 전문가를 선정하여 상기 AR 서버(30)에 전달하고 저장한다.The content of the request is notified to the AR expert through the AR server 30, and in the case of an AR expert, the corresponding AR expert is selected through the quotation, transmitted to the AR server 30, and stored.

또한 같은 작업 건수라 하더라도 작업이 매우 고난이도 AR 모델링인 경우, 담당한 AR 전문가에 대한 확정 작업 건 당 일정량의 가중치를 부가할 수 있다.In addition, even if the number of tasks is the same, if the task is AR modeling with a very high level of difficulty, a certain amount of weight can be added to each confirmed task for the AR expert in charge.

상기 AR 서버(30)는 선정된 AR 전문가 단말(30)에 작업 개시를 통지하고 상기 AR 전문가 단말기로부터 AR 작업의 완료됨을 확인받는다.The AR server 30 notifies the selected AR expert terminal 30 of job start and receives confirmation of completion of the AR job from the AR expert terminal.

상기 AR 서버(30)는 상기 완료된 작업 내용을 의뢰인 단말기에 전달하고, 상기 AR 전문가의 등급을 산정하고, 상기 등급의 산정은 거래건 또는 거래 금액에 따라 이루어지며, 상기 AR 서버(30)는 상기 AR 전문가 단말(30)에 상기 AR 전문가 등급별(AR 서비스 등급별) 대금 결제를 진행하여 서비스를 완료한다.The AR server 30 delivers the completed work to the client terminal, calculates the AR expert's grade, and the grade is calculated according to the transaction or transaction amount, and the AR server 30 calculates the grade of the AR expert. The service is completed by paying the AR expert level (by AR service level) to the AR expert terminal 30 .

예를 들어 상기 AR 입력 모듈(22)을 통해 제1 AR 컨텐츠 데이터와 제2 AR 컨텐츠 데이터의 결합 이벤트를 발생시키면, AR 뷰어 모듈(26)에 디스플레이된 AR 컨텐츠 데이터 중 가구와 건물이 서로 결합되어 사용자가 가구를 바라보는 각도를 변경하는 입력 이벤트를 발생시키면 AR 컨텐츠 데이터의 각도가 변경되어 새로운 변경 화면을 사용자 또는 상기 선정된 AR 전문가에 보여 줘서 이에 대한 평가와 수정 사항을 상기 AR 뷰어 모듈(26)로 피드백하여 사용자의 실패 비용 최소화할 수 있다.For example, when a combination event of the first AR content data and the second AR content data is generated through the AR input module 22, furniture and buildings among the AR content data displayed on the AR viewer module 26 are combined with each other, When the user generates an input event that changes the angle of looking at the furniture, the angle of the AR content data is changed, and a new changed screen is shown to the user or the selected AR expert to evaluate and modify the AR viewer module (26 ) to minimize the failure cost of the user.

이하 도 3 등을 참고하여 본 발명의 실시를 위한 전문가 시스템을 이용한 AR 서비스 시스템을 이용한 방법에 대해 자세히 설명한다.Hereinafter, a method of using an AR service system using an expert system for implementation of the present invention will be described in detail with reference to FIG. 3 and the like.

먼저 모션을 위한 시나리오와 시간의 흐름별 모션 컨텐츠를 설계한다.First, design scenarios for motion and motion contents for each flow of time.

그리고 상기 컨텐츠 모듈과 AR 뷰어 서버를 통해 전문가 시스템을 이용한 AR 컨텐츠를 로드하여 모션을 준비한다.In addition, AR contents using an expert system are loaded through the contents module and the AR viewer server to prepare motion.

상기 AR 입력 모듈을 통해 사용자가 전문가 시스템을 이용한 AR 컨텐츠에 반응하는 이벤트 신호를 생성한다.Through the AR input module, a user generates an event signal that responds to AR content using an expert system.

계속하여 상기 AR 뷰어 서버를 통해 상기 이벤트 신호에 대응되는 AR 컨텐츠 데이터를 생성한다.Subsequently, AR content data corresponding to the event signal is generated through the AR viewer server.

상기 AR 컨텐츠 데이터를 시간 순서대로 표시하고, 상기 AR 뷰어 서버를 통해 상기 AR 컨텐츠 데이터를 분석한다.The AR content data is displayed in chronological order, and the AR content data is analyzed through the AR viewer server.

추가적으로 시간 순서대로 표시하는 방법 전에는 상기 실패 비용 방지 컨텐츠 데이터 모듈을 통해 AR 컨텐츠 데이터를 저장하고, 상기 AR 컨텐츠 데이터에 관련된 모션 정보 또는 상기 모션 정보에 따른 이벤트 신호 또는 상기 이벤트 신호에 따른 기능을 저장하고, AR 입력 모듈을 통해 사용자의 모션에 따라 상기 모션 정보를 검색하고, 상기 모션 정보에 따른 이벤트 신호를 생성하며, AR 기능 모듈을 통해 상기 AR 입력 모듈을 통해 입력된 상기 이벤트 신호에 따른 기능을 실행시키거나 수정 정보에 따른 기능을 실행시키며, AR 수정 요청 모듈을 통해 상기 AR 입력 모듈을 통해 수정 요청 정보를 생성하며, AR 수정 기능 모듈이 상기 AR 수정 요청 모듈을 통해 전송된 수정 요청 정보에 따른 수정 정보를 생성하여 상기 AR 기능 모듈에 전달하고, AR 뷰어 모듈이 상기 AR 입력 모듈의 이벤트 신호에 대응하는 상기 모션 정보를 생성하여 대응되는 AR 컨텐츠 데이터 또는 수정 정보에 따른 기능을 시간 순서대로 표시하는 방법이 포함된다.In addition, before the method of displaying in chronological order, AR content data is stored through the failure cost prevention content data module, and motion information related to the AR content data or an event signal according to the motion information or a function according to the event signal is stored, , Retrieves the motion information according to the user's motion through the AR input module, generates an event signal according to the motion information, and executes a function according to the event signal input through the AR input module through the AR function module. or execute a function according to the modification information, generate modification request information through the AR input module through the AR modification request module, and modify the AR modification function module according to the modification request information transmitted through the AR modification request module A method in which information is generated and transmitted to the AR function module, and the AR viewer module generates the motion information corresponding to the event signal of the AR input module to display functions according to corresponding AR content data or correction information in chronological order. This is included.

본 발명의 다양한 실시예들에 따른 AR 서버(30)에 연결되는 단말기는 예를 들면, 스마트폰이 장착된 AR 헤드셋, AR 헤드셋, 애니메이션 재생이 가능한 스마트폰, 영상 신호 및 이동 단말기에서 감지된 이벤트의 발생을 알리기 위한 알림 정보를 표시하는 디스플레이부와 착용 상태를 감지하는 감지부를 포함하는 HMD(Head Mounted Display), 태블릿 PC, 이동 전화기, 영상 전화기, 전자책 리더기, 데스크탑 PC, 랩탑 PC, 넷북 컴퓨터, 워크스테이션, 서버, PDA, PMP(portable multimedia player), 또는 웨어러블 장치 중 적어도 하나를 포함할 수 있다. A terminal connected to the AR server 30 according to various embodiments of the present invention includes, for example, an AR headset equipped with a smartphone, an AR headset, a smartphone capable of playing animations, video signals, and events detected by the mobile terminal. HMD (Head Mounted Display) including a display unit displaying notification information to inform occurrence of a wear condition and a sensor unit detecting a wearing state, tablet PC, mobile phone, video phone, e-book reader, desktop PC, laptop PC, netbook computer , a workstation, a server, a PDA, a portable multimedia player (PMP), or a wearable device.

예를 들어 상술한 디스플레이 장치(10) 없이도 사이니지, 또는 태블릿 PC의 이미지 프로세싱 기술을 이용하여 가상 현실(예 : 애니메이션)을 체험할 수 있게 한다.For example, it is possible to experience virtual reality (eg, animation) using signage or image processing technology of a tablet PC without the aforementioned display device 10 .

또한 상기 HMD는 아이트래킹(Eye tracking, 안구 추적) 기술로 AR 헤드셋 착용자가 현재 보고 있는 부분을 감지해 해당하는 곳만 그래픽을 높이고 나머지는 품질을 낮춰서 시스템 부하를 낮추는 기능을 갖는 것을 특징으로 한다.In addition, the HMD features an eye tracking (eye tracking) technology that detects the part that the wearer of the AR headset is currently looking at and has a function to increase graphics only in the relevant part and lower the quality of the rest to lower the system load.

상기 아이트래킹 기술은 사용자의 응시 방향(gaze direction)을 결정하는 단계, 움직임 검출 시스템을 통해, 상기 웨어러블 디바이스의 상기 사용자의 머리 방향을 결정하는 단계 등으로 이루어진다.The eye tracking technique includes determining a gaze direction of the user, determining a direction of the user's head of the wearable device through a motion detection system, and the like.

이 때 AR 서버(30)은 AR 영상 프로세서로서 중앙처리장치(central processing unit), AR 어플리케이션 프로세서(application processor), 또는 AR 커뮤니케이션 프로세서(communication processor) 중 하나 또는 그 이상을 포함할 수 있다.In this case, the AR server 30 may include one or more of a central processing unit, an AR application processor, and an AR communication processor as an AR image processor.

상기 AR 서버(30)은 예를 들면, 상술한 단말들(10, 30)의 적어도 하나의 다른 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리(예 : AR 전문가 매칭 등)를 실행할 수 있다.The AR server 30 may execute calculations or data processing (eg, AR expert matching, etc.) related to control and/or communication of at least one other component of the terminals 10 and 30 described above. there is.

상기 AR 서버(30)에 포함되는 메모리 또는 데이터베이스는, 휘발성 및/또는 비휘발성 메모리를 포함할 수 있다. 예를 들면, 적어도 하나의 다른 구성요소에 관계된 명령 또는 데이터를 저장할 수 있다.The memory or database included in the AR server 30 may include volatile and/or non-volatile memory. For example, it may store instructions or data related to at least one other component.

본 발명에서 사용되는 네트워크 망은 특정 통신 프로토콜로서, 예를 들면, 5G, 4G, LTE(long-term evolution), LTE-A(LTE Advance), CDMA(code division multiple access), WCDMA(wideband CDMA), UMTS(universal mobile telecommunications system), WiBro(Wireless Broadband), 또는 GSM(Global System for Mobile Communications) 등 중 적어도 하나의 무선 통신을 사용할 수 있다. The network network used in the present invention is a specific communication protocol, for example, 5G, 4G, LTE (long-term evolution), LTE-A (LTE Advance), CDMA (code division multiple access), WCDMA (wideband CDMA) , universal mobile telecommunications system (UMTS), wireless broadband (WiBro), or global system for mobile communications (GSM).

또한, 무선 통신은 예를 들면, 근거리 통신을 포함할 수 있다. 근거리 통신은, 예를 들면, WiFi(wireless fidelity), 블루투스(Bluetooth), NFC(near field communication), MST(magnetic stripe transmission), 또는 GNSS(global navigation satellite system) 등 중 적어도 하나를 포함할 수 있다.Also, wireless communication may include short-range communication, for example. The short-range communication may include, for example, at least one of wireless fidelity (WiFi), Bluetooth (Bluetooth), near field communication (NFC), magnetic stripe transmission (MST), or global navigation satellite system (GNSS). .

한편 전문가 매칭 제안 폼을 통해 의뢰 정보를 작성하여 전문가 의뢰 중개 AR 서버(200)에 전송하는 의뢰인 단말(100); 상기 의뢰인 단말(100)을 통해 의뢰 정보를 전달받아 전문가를 선정하고 상기 전문가 단말(400)에 등급별 대금 결제가 진행되도록 제어하는 전문가 의뢰 중개 AR 서버(200); 상기 전문가 의뢰 중개 AR 서버(200)로부터 전문가 선정 내용을 전달 받거나 상기 등급별 대금 결제 정보를 전달받는 전문가 단말(400);로 구성된다.On the other hand, the client terminal 100 for creating the request information through the expert matching proposal form and transmitting it to the expert request mediation AR server 200; an expert request mediation AR server 200 that receives request information through the client terminal 100, selects an expert, and controls the expert terminal 400 to proceed with payment for each grade; It consists of an expert terminal 400 that receives expert selection information from the expert request mediation AR server 200 or payment information for each level.

상기 전문가 의뢰 중개 AR 서버(200)는, 상기 의뢰 정보에 대응하는 전문가를 선정하여 상기 의뢰인 단말(100)에 다시 통지하는 전문가 매칭 수단(220); 상기 선정된 전문가의 거래건에 따라 등급을 나누어 대금 결제를 차등화시키는 등급별 대금 결제 모듈(240);을 포함한다.The expert request mediation AR server 200 includes an expert matching means 220 for selecting an expert corresponding to the request information and notifying the client terminal 100 again; and a payment module for each grade (240) that differentiates payment by dividing grades according to the transaction of the selected expert.

상기 전문가 의뢰 중개 AR 서버(200)는 상기 완료된 작업 내용을 의뢰인 단말(100)에 전달하고, 상기 등급별 대금 결제 모듈(240)을 통해 상기 선정된 전문가의 거래건 또는 거래 금액에 따라 전문가의 등급을 나누어 대금 결제와 수수료를 차등화시키고, 상기 전문가의 등급의 산정에 따라 상기 전문가 단말(400)에 수수료를 제한 대금 결제를 진행하여 서비스를 완료한다.The expert request mediation AR server 200 delivers the completed work contents to the client terminal 100, and determines the expert's grade according to the transaction or transaction amount of the selected expert through the payment module 240 for each level. The service is completed by dividing and differentiating the payment and fee, and proceeding to pay the fee minus the fee to the expert terminal 400 according to the calculation of the expert's grade.

그리고 상기 작업을 완료하여 확정된 경우, 확정된 작업을 담당한 전문가에 대한 확정 작업 건 당 양(+)의 가중치를 부가하고, 작업의 완료 후에 클레임을 일정치 이상 받은 전문가에 대해서는 클레임 횟수 당 음(-)의 가중치를 부가한다.In addition, when the work is completed and confirmed, a positive (+) weight is added per case of confirmed work for the expert in charge of the confirmed work, and a negative weight is applied to the number of claims for the expert who received a certain amount or more of claims after the work is completed. Add a weight of (-).

구체적으로 살펴보면, 또 다른 실시예에 따른 본 발명은 의뢰인 단말(100), 전문가 의뢰 중개 AR 서버(200; 또는 플랫폼), 전문가 단말(400) 등이 네트워크로 연결되어 있다.Specifically, in the present invention according to another embodiment, the client terminal 100, the expert request mediation AR server 200 (or platform), and the expert terminal 400 are connected through a network.

의뢰인 단말(100)은 전문가 매칭 제안 폼을 통해 의뢰 정보를 작성하여 전문가 의뢰 중개 AR 서버(200)에 전송하는 단말기이다.The client terminal 100 is a terminal that creates request information through an expert matching proposal form and transmits it to the expert request mediation AR server 200 .

전문가 의뢰 중개 AR 서버(200)는 상기 의뢰인 단말(100)을 통해 의뢰 정보를 전달받아 전문가를 선정하고 상기 전문가 단말(400)에 등급별 대금 결제가 진행되도록 서비스를 제공하는 서버이다.The expert request mediation AR server 200 is a server that receives request information through the client terminal 100, selects an expert, and provides a service to the expert terminal 400 to proceed with payment for each grade.

또한 상기 전문가 의뢰 중개 AR 서버(200)는 상술한 AR 모듈(20)과 AR 서버(30)의 구성을 모두 포함한다.In addition, the expert request mediation AR server 200 includes all of the above-described configurations of the AR module 20 and the AR server 30.

전문가 단말(400)은 상기 전문가 의뢰 중개 AR 서버(200)로부터 전문가 선정 내용을 전달 받거나 상기 등급별 대금 결제 정보를 전달받는 단말기이다.The expert terminal 400 is a terminal that receives expert selection details or payment information for each grade from the expert request mediation AR server 200 .

상기 전문가 의뢰 중개 AR 서버(200)는 상기 의뢰 정보에 대응하는 전문가를 선정하여 상기 의뢰인 단말(100)에 다시 통지하는 전문가 매칭 수단(220), 상기 선정된 전문가의 거래 건에 따라 등급을 나누어 대금 결제를 차등화시키는 등급별 대금 결제 모듈(240)을 포함한다.The expert request mediation AR server 200 selects an expert corresponding to the request information and notifies the client terminal 100 of the expert matching means 220, and divides the price according to the transaction case of the selected expert. It includes a payment module 240 for differentiating payments.

상기 전문가 매칭 수단(220)은 빅데이터를 기반한 머신러닝을 이용하여 상기 의뢰 정보에 대응하는 전문가를 선정하는 수단이다.The expert matching means 220 is a means for selecting an expert corresponding to the request information using machine learning based on big data.

상기 등급별 대금 결제 모듈(240)은 상기 선정된 전문가의 거래 금액에 따라 등급을 나누어 대금 결제를 차등화시킨다.The payment by grade module 240 differentiates payment by classifying according to the transaction amount of the selected expert.

상기 등급별 대금 결제 모듈(240)은 예측 등급와 실제 등급 결과에 차이가 발생한 경우, 어느 부분에서 차이가 발생했는지를 확인할 수도 있다.When a difference occurs between the predicted grade and the actual grade result, the payment module for each grade 240 may check where the difference occurs.

즉 인공신경망, 서포트 백터머신, 자기회귀누적이동평균법 중 어느 하나의 머신러닝 모델을 이용한 시계열적 빅데이터 분석 방법이 사용될 수 있다.That is, a time-series big data analysis method using any one machine learning model among artificial neural networks, support vector machines, and autoregressive cumulative moving averages can be used.

상기 서포트 백터머신 알고리즘은 두 카테고리 중 어느 하나에 속한 데이터의 집합이 주어졌을 때, 주어진 데이터 집합을 바탕으로 하여 새로운 데이터가 어느 카테고리에 속할지 판단하는 기계 학습 방법으로서 일정 분야(예 : 3D 모델링 전문가 카테고리)의 특정 전문가에 대한 거래 금액에 따른 등급 부여 데이터를 바탕으로 다른 전문가에 대한 거래 금액에 따른 등급 부여 기준을 마련할 수 있다.The support vector machine algorithm is a machine learning method that determines which category new data belongs to based on a given data set when a set of data belonging to either of two categories is given, and can be used in a certain field (eg, 3D modeling expert Based on the rating data according to the transaction amount for a specific expert in the category), a rating standard according to the transaction amount for other experts can be prepared.

또한 전문가 개인 정보 및 예를 들어 법률 전문가인 경우 사건 수임 수량 또는 승패에 대응되는 점수를 환산하고, 법률 전문가의 랭킹을 연산 등의 실시간 정보를 변수로 반영하는 다변량 시계열 분석을 수행함으로써 예측률을 더욱 높일 수 있다.In addition, by performing multivariate time series analysis that converts expert personal information and, for example, scores corresponding to the number of cases accepted or wins and losses in the case of legal experts, and reflects real-time information such as calculation of the ranking of legal experts as variables, the prediction rate is further increased. can

상기 자기회귀누적이동평균법은 비정상적 시계열 자료(시간의 흐름에 따라 관찰된 전문가 등급 데이터)이기 때문에 분석하기 쉬운 정상적 시계열 자료로 변환하여, 특정 전문가에 대한 거래 금액에 따른 등급 부여 기준이 시간의 흐름에 따라 왜곡되거나 비상식적이 되는 것을 방지한다.Since the autoregressive cumulative moving average method is abnormal time series data (expert grade data observed over time), it is converted into normal time series data that is easy to analyze, so that the rating criteria based on the transaction amount for a specific expert changes over time. to prevent it from being distorted or unreasonable.

본 발명은 의뢰인 단말(100), 전문가 의뢰 중개 AR 서버(200), 전문가 단말(400)이 네트워크로 연결되고, 의뢰인이 의뢰인 단말(100)을 통해 특정 웹사이트에 접속한다.In the present invention, the client terminal 100, the expert request mediation AR server 200, and the expert terminal 400 are connected through a network, and the client accesses a specific website through the client terminal 100.

이 때 의뢰인은 의뢰인 단말(100)을 통해 특정 웹사이트에 표시된 제안 폼(form)의 각 메뉴를 선택하거나 특정 내용을 입력하여 전문가 의뢰를 등록한다.At this time, the client selects each menu of a proposal form displayed on a specific website through the client terminal 100 or inputs specific contents to register the expert request.

전문가 의뢰 중개 AR 서버(200)가 상기 의뢰 내용을 저장하고, 빅데이터 기반의 머신 러닝을 활용한 전문가 매칭을 시작한다.The expert request mediation AR server 200 stores the contents of the request and starts expert matching using big data-based machine learning.

이 때 이러한 빅데이터 기반의 머신 러닝 기법은 아래에서 서술하는 전문가에 대한 거래 금액에 따른 등급 부여 기준을 산정할 때도 사용될 수 있다.At this time, this big data-based machine learning technique can also be used to calculate the rating criteria according to the transaction amount for experts described below.

계속하여 전문가 의뢰 중개 AR 서버(200)에 의해 선정된 전문가에게 의뢰 내용을 통지하기 위해 전문가 단말(400)과 네트워크로 연결시켜 의뢰 내용을 통지한다.Subsequently, in order to notify the expert selected by the expert request mediation AR server 200 of the request details, the expert terminal 400 is connected to the network and notified of the request contents.

그리고 전문가는 자신이 선정된 의뢰 내용을 확인하고 견적서를 작성하여 전문가 의뢰 중개 AR 서버(200)에 견적 내용을 등록한다.Then, the expert confirms the contents of the request selected by him/herself, prepares an estimate, and registers the contents of the estimate in the expert request mediation AR server 200 .

전문가 의뢰 중개 AR 서버(200)는 상기 견적 내용을 전달받아 저장하고 상기 의뢰인 단말(100)에 견적 내용을 통지한다.The expert request mediation AR server 200 receives and stores the contents of the estimate, and notifies the client terminal 100 of the contents of the estimate.

바로 견적 내용을 확인한 의뢰인은 의뢰인 단말(100)을 통해 전문가 선정을 확정하고 이를 전문가 의뢰 중개 AR 서버(200)에 전송하면, 전문가 의뢰 중개 AR 서버(200)는 전문가 선정 내용을 저장한다.When the client who immediately confirms the quotation details confirms the expert selection through the client terminal 100 and transmits it to the expert request mediation AR server 200, the expert request mediation AR server 200 stores the expert selection content.

그리고 상기 전문가 의뢰 중개 AR 서버(200)는 전문가 단말(400)에 선정 내용을 통지한다.Further, the expert request mediation AR server 200 notifies the expert terminal 400 of selection details.

의뢰인 단말(100), 전문가 의뢰 중개 AR 서버(200), 전문가 단말(400)이 네트워크로 연결되고, 전문가 의뢰 중개 AR 서버(200)가 고객이 선택한 전문가 선정 내용을 저장한다(S24).The client terminal 100, the expert request mediation AR server 200, and the expert terminal 400 are connected through a network, and the expert request mediation AR server 200 stores the expert selection contents selected by the customer (S24).

상기 전문가 의뢰 중개 AR 서버(200)가 전문가 단말(400)로 상기 전문가 선정 내용을 통지한다.The expert request mediation AR server 200 notifies the expert terminal 400 of the expert selection.

상기 전문가 의뢰 중개 AR 서버(200)가 의뢰인 단말(100)에 거래 금액을 요청하고, 거래 금액을 데이터베이스에 저장한다.The expert request mediation AR server 200 requests a transaction amount from the client terminal 100 and stores the transaction amount in a database.

상기 의뢰인 단말(100)로부터 거래 금액의 입금을 확인하면, 상기 전문가 의뢰 중개 AR 서버(200)는 전문가 단말(400)에 전문가 작업 개시를 통지한다.Upon confirmation of the deposit of the transaction amount from the client terminal 100, the expert request mediation AR server 200 notifies the expert terminal 400 of the start of expert work.

추후 작업이 완료된 후 상기 전문가 단말(400)에 전문가 작업 완료를 입력하면, 상기 전문가 의뢰 중개 AR 서버(200)에 작업 완료가 통지된다.When the expert task completion is input to the expert terminal 400 after the subsequent task is completed, the task completion is notified to the expert request mediation AR server 200 .

상기 전문가 의뢰 중개 AR 서버(200)는 의뢰인 단말(100)에 작업 내용을 전달하고, 이전 거래 금액에 따른 등급 부여 데이터를 바탕으로 전문가에 대한 거래 금액에 따른 등급 부여 기준을 산정한다.The expert request mediation AR server 200 transmits the work contents to the client terminal 100 and calculates a rating criterion according to the transaction amount for the expert based on the rating data according to the previous transaction amount.

그리고 상기 전문가 의뢰 중개 AR 서버(200)가 상기 등급에 따라 대금 결제를 하고 전문가 단말(400)에 통지하게 된다.In addition, the expert request mediation AR server 200 makes payment according to the level and notifies the expert terminal 400 .

이 때 상기 전문가 의뢰 중개 AR 서버(200)가 등급 부여 기준을 산정하는 과정에서 문제가 발생할 수 있는 데 이에 대한 자세한 사항은 아래에서 설명한다.In this case, a problem may occur in the process of calculating the rating criteria by the expert-requested mediation AR server 200, which will be described in detail below.

마지막으로 상술한 전문가 의뢰 중개 AR 서버(200)에서 등급 산정이 되고, 전문가 단말(400)로 상기 등급을 통보한다.Finally, the level is calculated in the AR server 200 for mediating expert request as described above, and the level is notified to the expert terminal 400.

상기 의뢰인 단말(100), 전문가 의뢰 중개 AR 서버(200), 전문가 단말(400)이 네트워크로 연결되고, 전문가 의뢰 중개 AR 서버(200)에서 등급 산정이 되고, 전문가 단말(400)로 등급 통보를 한다.The client terminal 100, the expert request mediation AR server 200, and the expert terminal 400 are connected through a network, the expert request mediation AR server 200 calculates the grade, and the expert device 400 receives a grade notification. do.

이 때 상기 등급 통보는 미리 선정된 전문가의 거래 건에 따라 등급을 나누어 대금 결제를 차등화시키는 등급별 대금 결제 모듈(240)을 통해 작성된 등급을 통보하는 것이다.At this time, the grade notification is to notify the grade created through the grade-specific payment module 240 that differentiates payment by dividing grades according to transaction cases of preselected experts.

상기 전문가 단말(400)을 통해 이의 신청을 작성하여 상기 전문가 의뢰 중개 AR 서버(200)에 전송한다.An objection is created through the expert terminal 400 and transmitted to the expert request mediation AR server 200 .

상기 전문가 의뢰 중개 AR 서버(200)는 이의 신청을 접수하고, 일정 기준에 의해 정확하게 등급을 산정했는지를 파악하고 이상 없음을 다시 관리자가 입력하여 상기 의뢰인 단말(100)에 전달한다.The expert request mediation AR server 200 receives the objection, determines whether the rating has been accurately calculated according to a certain standard, and then the manager inputs that there is no abnormality again and delivers it to the client terminal 100.

만일 이상이 있을 경우 상기 관리자는 이상이 있음을 상기 전문가 의뢰 중개 AR 서버(200)에 입력하고 다시 산정한 등급표를 업로드할 수 있다.If there is an abnormality, the manager may input the abnormality to the expert request mediation AR server 200 and upload the recalculated grade table.

따라서 상기 등급별 대금 결제 모듈(240)은 미리 예측 등급(예 : 전문가의 작년 실적에 의한 예측 등급)과 실제 등급 결과(예 : 전문가의 올해 실적에 의한 예측 등급)에 차이가 발생한 경우 이를 해당 전문가에게 자동으로 통지하는 것이 이의 신청을 줄일 수 있는 방법이다.Therefore, the payment module 240 for each level informs the corresponding expert if there is a difference between the predicted grade (eg, the predicted grade based on the expert's performance last year) and the actual grade result (eg, the predicted grade based on the expert's performance this year) in advance. Automatic notification is a way to reduce appeals.

상술한 이의 신청이 해결되면, 등급별 대금 결제가 이루어져 전문가 단말(400)에 결제 내용이 통보된다.When the above objection is resolved, payment for each grade is made and the details of the payment are notified to the expert terminal 400 .

본 발명은 레벨 1에서 레벨 6으로 나누고, 레벨 1에서 레벨 6으로 갈수록 구매 금액 한도가 높아지고 수수료율은 낮아진다.The present invention divides from level 1 to level 6, and from level 1 to level 6, the purchase amount limit increases and the commission rate decreases.

예를 들어, 레벨 1의 경우 구매 수량 3건, 구매 금액 백만원, 수수료율 20%, 레벨 2의 경우 구매 수량(건) 10건, 구매 금액 오백만 원, 수수료율 15%, 레벨 3의 경우 구매 수량 50건, 구매 금액 삼천만 원, 수수료율 12%, 레벨 4의 경우 구매 수량 100건, 구매 금액 일억 원, 수수료율 10%, 레벨 5의 경우 구매 수량 500건, 구매 금액 십억 원, 수수료율 8%, 레벨 6의 경우 구매 수량 1,000건, 구매 금액 백억 원, 수수료율 5% 등이다.For example, for level 1, purchase amount is 3, purchase amount is 1 million won, commission rate is 20%, for level 2, purchase amount (items) is 10, purchase amount is 5 million won, commission rate is 15%, and for level 3, purchase amount is 50 purchase amount 30 million won, commission rate 12%, purchase amount 100 cases in case of level 4, purchase amount 100 million won, commission rate 10%, purchase amount 500 cases in case of level 5, purchase amount one billion won, commission rate 8%, level 6 In this case, the number of purchases is 1,000, the purchase amount is 10 billion won, and the commission rate is 5%.

또한 본 발명의 다른 실시예를 보면 전문 기술을 가진 판매자 1의 경우 거래 수량이 51건이고 거래 금액이 2억 원이면 상기 예시에 비추어 봐서 LV. 4단계로서, 수수료 10%로 확정된다.In addition, in another embodiment of the present invention, in the case of seller 1 with expertise, if the transaction quantity is 51 and the transaction amount is 200 million won, LV. As the fourth step, the fee is fixed at 10%.

전문 기술을 가진 판매자 2의 경우 거래 수량이 10건이고, 거래 금액이 10억 원이어서 LV. 5단계로서, 수수료 8%로 확정된다.In the case of seller 2 with expertise, the number of transactions is 10 and the transaction amount is 1 billion won, so the LV. As the 5th step, the fee is fixed at 8%.

또한 본 발명의 일실시예로서, 작업을 완료하여 확정된 경우, 확정된 작업을 담당한 전문가에 대한 확정 작업 건 당 양(+)의 가중치를 부가하고, 작업의 완료 후에 클레임을 일정치 이상 받은 전문가에 대해서는 클레임 횟수 당 음(-)의 가중치를 부가할 수도 있다.In addition, as an embodiment of the present invention, when the work is completed and confirmed, a positive (+) weight is added per confirmed work for the expert in charge of the confirmed work, and after the work is completed, a claim received at least a certain amount For experts, a negative (-) weight may be added per number of claims.

이하 본 발명의 일실시예로서 금형, 사출, 및 PCB 작업과 3D 모델링 작업에 적용한 적용예를 자세히 설명한다.Hereinafter, as an embodiment of the present invention, application examples applied to mold, injection, and PCB work and 3D modeling work will be described in detail.

이 외에도 금형 제조비용을 감소시키기 위해 온라인을 이용한 시제품 제조방법에도 이용될 수 있으며 자세한 설명은 생략한다.In addition to this, it can also be used for an online prototype manufacturing method to reduce mold manufacturing costs, and detailed descriptions will be omitted.

먼저 의뢰인 단말(100)을 통해 전문가 의뢰 중개 AR 서버(200)에 접속하여 금형, 사출, 및 PCB 작업을 포함하는 3D 모델링 작업에 따른 전문가 선정에 대한 의뢰 정보를 등록 저장하여 서비스를 시작한다.First, the client terminal 100 accesses the expert request mediation AR server 200, registers and stores request information for expert selection according to 3D modeling work including mold, injection, and PCB work to start the service.

전문가 의뢰 중개 AR 서버(200)를 통해 상기 의뢰 정보에 대응하는 금형, 사출, 및 PCB 작업과 3D 모델링 작업에 따른 각각의 전문가를 선정한다.Through the expert request mediation AR server 200, each expert is selected according to mold, injection, and PCB work and 3D modeling work corresponding to the request information.

이 때 시제품 제작용 금형모델을 선택하는 경우, 상기 의뢰인의 3D모델링 스케치 도면이 웹페이지를 통해 전문가에게 전송될 수 있다.In this case, when a mold model for producing a prototype is selected, the client's 3D modeling sketch drawing may be transmitted to the expert through a web page.

전문가 의뢰 중개 AR 서버(200)를 통해 상기 전문가에게 의뢰 내용을 통지하고 상기 금형, 사출, 및 PCB 작업과 3D 모델링 작업에 따른 각각의 견적 내용을 전달받아 저장한다.Through the expert request mediation AR server 200, the expert is notified of the request, and each estimate according to the mold, injection, PCB work, and 3D modeling work is received and stored.

예를 들어 금형, 사출, 및 PCB 작업과 3D 모델링 등의 전 작업에 대한 견적 내용을 포함할 수 있으나 금형, 사출, 및 PCB 작업과 3D 모델링의 각 작업에 대한 견적을 포함할 수도 있다.For example, the quotation for all operations, such as mold, injection, and PCB work and 3D modeling, may be included, but quotations for each operation of mold, injection, and PCB work, and 3D modeling may also be included.

전문가 의뢰 중개 AR 서버(200)가 의뢰인 단말(100)에 상기 견적 내용을 통지하고, 복수의 전문가인 경우 견적 내용을 통해 해당 전문가를 선정하여 상기 전문가 의뢰 중개 AR 서버(200)에 전달하고 저장한다.The expert request mediation AR server 200 notifies the client terminal 100 of the quotation, and in the case of a plurality of experts, selects a corresponding expert through the quotation, delivers it to the expert request mediation AR server 200, and stores the information. .

상기 선정된 전문가 단말(400)에게 해당 전문가를 포함한 선정 내용을 통지하고, 상기 전문가 의뢰 중개 AR 서버(200)는 의뢰인 단말(100)에 거래 금액을 요청하고 저장한다.The selected expert terminal 400 is notified of selection details including the corresponding expert, and the expert request mediation AR server 200 requests and stores a transaction amount from the client terminal 100 .

이 때 3D 프린터 등의 성능이나 표현 한계를 적절히 감안하여 거래 금액을 산정하여 정할 수 있다.At this time, the transaction amount may be calculated and determined by appropriately considering the performance or expression limit of the 3D printer or the like.

또한 같은 작업 건수라 하더라도 작업이 매우 고 난이도 3D 모델링인 경우, 담당한 전문가에 대한 확정 작업 건 당 일정량의 가중치를 부가할 수 있다.In addition, even if the number of tasks is the same, if the task is 3D modeling with a very high level of difficulty, a certain amount of weight may be added to each confirmed task for the expert in charge.

예를 들어 이러한 고 난이도 3D 모델링은 거래 금액으로 추정할 수도 있지만, 종래 거래되었던 작업들을 인공신경망 머신러닝 모델을 이용한 시계열적 빅데이터 분석 방법으로 분석하여 추정할 수도 있다.For example, such high-difficulty 3D modeling can be estimated by the transaction amount, but it can also be estimated by analyzing conventionally traded tasks with a time-series big data analysis method using an artificial neural network machine learning model.

상기 전문가 의뢰 중개 AR 서버(200)는 선정된 전문가 단말(400)에 작업 개시를 통지하고 상기 전문가 단말(400)로 부터 전문가 작업의 완료됨을 확인받는다.The expert request mediation AR server 200 notifies the selected expert terminal 400 of the start of the job and receives confirmation from the expert terminal 400 that the expert job is completed.

상기 전문가 의뢰 중개 AR 서버(200)는 상기 완료된 작업 내용을 의뢰인 단말(100)에 전달하고, 상기 전문가의 등급을 산정하고, 상기 등급의 산정은 거래건 또는 거래 금액에 따라 이루어지며, 상기 전문가 의뢰 중개 AR 서버(200)는 상기 전문가 단말(400)에 상기 전문가 등급 별 대금 결제를 진행하여 서비스 완료한다.The expert request mediation AR server 200 transmits the completed work to the client terminal 100, calculates the expert's grade, and calculates the grade according to the transaction or transaction amount, and the expert's request The mediation AR server 200 proceeds with payment for each expert level to the expert terminal 400 to complete the service.

따라서 종래에는 여러 장소 또는 지역에 각기 분산 배치된 소속 3D 프린터 정보를 등록 관리 운영하고, 사용자 단말기로부터 설계 도면을 입력받아 요청한 배송 위치와 가장 가까운 소속 3D 프린터가 있는 장소를 검출하여 상기 검출된 장소에 위치한 소속 3D 프린터로 상기 사용자 단말기로부터 입력받은 설계 도면의 3D 출력물이 출력되도록 하였으나 본 발명은 상술한 전문가들을 장소에 상관없이 직접 선정하여 작업의 퀄리티를 높일 수 있고 서비스 진행도 원활하게 할 수 있다.Therefore, in the prior art, information on affiliated 3D printers distributed in various locations or regions is registered, managed, and a design drawing is input from a user terminal, and a location with an affiliated 3D printer closest to the requested delivery location is detected, and the location is located at the detected location. Although the 3D output of the design drawing input from the user terminal is output to the affiliated 3D printer, the present invention can directly select the above-mentioned experts regardless of location to improve the quality of work and smooth service progress.

본 발명의 일실시예로서 상기 전문가 의뢰 중개 AR 서버(200)는 3D 프린터로 모델링할 가상 3D 모델 생성에 대한 진행 상황을 웹페이지 등에 실시간으로 표시할 수 있다. 상기 가상 3D 데이터는 가상 3D 모델에 대해 수행되는 시뮬레이션 절차 설명을 포함하는 데이터이다.As an embodiment of the present invention, the expert request mediation AR server 200 may display the progress of creating a virtual 3D model to be modeled with a 3D printer in real time on a web page or the like. The virtual 3D data is data including a description of a simulation procedure performed on a virtual 3D model.

상기 전문가 의뢰 중개 AR 서버(200)가 상기 가상 3D 데이터를 분할기준을 바탕으로 하나 이상의 세부 동작으로 분할하되, 상기 세부 동작은 3D 모델 동작의 최소단위이고, 상기 분할기준은 금형, 사출, 및 PCB 작업 등을 포함하는 세부 동작에 대한 표준화 코드를 순서대로 나열한 데이터를 기반으로 한 것이다.The expert-requested mediation AR server 200 divides the virtual 3D data into one or more detailed motions based on a split criterion, wherein the detailed motion is the minimum unit of 3D model motion, and the split criterion is mold, injection, and PCB. It is based on data in which standardized codes for detailed operations including tasks are listed in order.

또한 본 발명의 일실시예로서 상기 전문가 의뢰 중개 AR 서버(200)는 강화학습을 수행할 수 있다. 강화학습은 기계학습의 한 영역으로, 어떤 환경 안에서 정의된 전문가가 현재의 상태를 인식하여, 선택 가능한 작업들 중 등급 보상을 최대화하는 작업 혹은 작업 순서(프로세스)를 선택하는 방법이다.In addition, as an embodiment of the present invention, the expert-requested mediation AR server 200 may perform reinforcement learning. Reinforcement learning is an area of machine learning, in which an expert defined in an environment recognizes the current state and selects a task or task sequence (process) that maximizes grade rewards among selectable tasks.

예를 들어 강화학습은 전문가의 작업 프로세스의 상태전이와, 상태전이에 따른 등급 보상에 기초하여 등급 보상을 최대화하는 방법을 학습하는 것으로 요약될 수 있다. 즉 고 난이도 3D 모델링의 경우 등급 보상을 최대화하기 위해 빠른 시간 내에 작업을 완료할 수 있는 작업 순서를 나열할 수 있다.For example, reinforcement learning can be summarized as learning how to maximize grade rewards based on state transitions of an expert's work process and grade rewards according to state transitions. That is, in the case of high-difficulty 3D modeling, the order of work that can be completed in a short time can be listed in order to maximize grade compensation.

그 후, 상기 전문가 의뢰 중개 AR 서버(200)는 강화학습 결과를 이용하여 최적화 작업 프로세스 데이터를 산출한다. 상기 최적화 전문가 작업 프로세스 데이터는 강화학습 결과를 기반으로 작업 시간을 줄일 수 있는 최단 작업 시간, 최소 재료량, 또는 필수수행순서 등을 조건으로 산출되어 전문가들에게 등급을 용이하게 올릴 수 있도록 보조할 수 있다.After that, the expert commissioned mediation AR server 200 calculates optimization work process data using the reinforcement learning result. The optimization expert work process data is calculated based on the results of reinforcement learning under conditions such as the shortest work time, minimum amount of material, or essential execution sequence that can reduce work time, and can assist experts in easily raising the grade. .

본 발명의 다양한 실시예들에 따른 단말(100, 400)은, 예를 들면, 스마트폰, 태블릿 PC, 이동 전화기, 영상 전화기, 전자책 리더기, 데스크탑 PC, 랩탑 PC, 넷북 컴퓨터, 워크스테이션, 서버, PDA, PMP(portable multimedia player), 또는 웨어러블 장치 중 적어도 하나를 포함할 수 있다. 웨어러블 장치는 액세서리형, 직물 또는 의류 일체형, 신체 부착형, 또는 생체 이식형 회로 중 적어도 하나를 포함할 수 있다.The terminals 100 and 400 according to various embodiments of the present invention are, for example, smart phones, tablet PCs, mobile phones, video phones, e-book readers, desktop PCs, laptop PCs, netbook computers, workstations, and servers. , a PDA, a portable multimedia player (PMP), or a wearable device. The wearable device may include at least one of an accessory type, a fabric or clothing integrated type, a body attaching type, or a living body implanted circuit.

상기 전문가 의뢰 중개 AR 서버(200)는 프로세서로서 중앙처리장치(central processing unit), 어플리케이션 프로세서(application processor), 또는 커뮤니케이션 프로세서(communication processor) 중 하나 또는 그 이상을 포함할 수 있다. The expert commissioned mediation AR server 200 may include one or more of a central processing unit, an application processor, or a communication processor as a processor.

상기 전문가 의뢰 중개 AR 서버(200)는 예를 들면, 상술한 단말들(100, 400)의 적어도 하나의 다른 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리(예 : 전문가 매칭 등)를 실행할 수 있다.The expert request mediation AR server 200, for example, performs calculations or data processing (eg, expert matching, etc.) related to control and/or communication of at least one other component of the terminals 100 and 400 described above. can run

상기 전문가 의뢰 중개 AR 서버(200)에 포함되는 메모리 또는 데이터베이스는, 휘발성 및/또는 비휘발성 메모리를 포함할 수 있다. 예를 들면, 적어도 하나의 다른 구성요소에 관계된 명령 또는 데이터를 저장할 수 있다.The memory or database included in the expert referral mediation AR server 200 may include volatile and/or non-volatile memory. For example, it may store instructions or data related to at least one other component.

10 : 디스플레이 장치
20 : AR 모듈
30 : AR 서버
100 : 의뢰인 단말
200 : 전문가 의뢰 중개 AR 서버
220 : 전문가 매칭 수단
240 : 등급별 대금 결제 모듈
400 : 전문가 단말
10: display device
20: AR module
30 : AR Server
100: client terminal
200: AR server commissioned by experts
220: expert matching means
240: payment module by grade
400: expert terminal

Claims (8)

실패 비용 방지를 위한 AR 컨텐츠 데이터를 저장하고, 상기 AR 컨텐츠 데이터에 관련된 모션 정보 또는 상기 모션 정보에 따른 이벤트 신호 또는 상기 이벤트 신호에 따른 기능을 저장하는 실패 비용 방지 컨텐츠 데이터 모듈(21);
사용자의 모션에 따라 상기 모션 정보를 검색하고, 상기 모션 정보에 따른 이벤트 신호를 생성하는 AR 입력 모듈(22);
상기 AR 입력 모듈을 통해 입력된 상기 이벤트 신호에 따른 기능을 실행시키거나 수정 정보에 따른 기능을 실행시키는 AR 기능 모듈(23);
상기 AR 입력 모듈을 통해 수정 요청 정보를 생성하는 AR 수정 요청 모듈(24);
상기 AR 수정 요청 모듈을 통해 전송된 수정 요청 정보에 따른 수정 정보를 생성하여 상기 AR 기능 모듈에 전달하는 AR 수정 기능 모듈(25);
상기 AR 입력 모듈의 이벤트 신호에 대응하는 상기 모션 정보를 생성하여 대응되는 AR 컨텐츠 데이터 또는 수정 정보에 따른 기능을 시간 순서대로 표시하는 AR 뷰어 모듈(26);
상기 모듈들을 제어하는 AR 서버(30);
상기 AR 입력 모듈(22)에 연결되어 입력 정보를 생성하는 디스플레이 장치(10);를 포함하며,
상기 AR 서버(30)는 서포트 백터머신을 이용하여, 이벤트 신호에 대응되는 AR 컨텐츠 데이터의 애니메이션 이미지를 분류하는 작업에 있어 패턴 인식, 자료 분석을 통한 시계열적인 배열이 가능하고, 상기 AR 서버(30)를 통해 최적화된 AR 전문가를 추천받아 생성된 AR 영상 공간 내에 배치된 객체를 사용해보는 리얼리티 가상 현실을 체험할 수 있게 하며, 사용자는 디스플레이 장치(10)를 통해 객체의 속성에 해당하는 위치(position), 회전(rotation), 비율조정(scale), 재질(material)을 실시간으로 수정하여 AR 전문가에 수정 의뢰하며,
상기 AR 서버(30)는 인공신경망, 서포트 백터머신, 자기회귀누적이동평균법 중 어느 하나의 머신러닝 모델을 이용하여, 이벤트 신호에 대응되는 AR 컨텐츠 데이터를 시계열적으로 배열하는 데,
상기 자기회귀누적이동평균법은 시간의 흐름에 따라 관찰된 전문가 등급 데이터인 비정상적 시계열 자료를 분석하기 쉬운 정상적 시계열 자료로 변환하여, 특정 전문가에 대한 거래 금액에 따른 등급 부여 기준이 시간의 흐름에 따라 왜곡되거나 비상식적이 되는 것을 방지하는 것을 특징으로 하는 전문가 시스템을 이용한 AR 서비스 시스템.
A failure cost prevention content data module 21 for storing AR content data for preventing failure cost and storing motion information related to the AR content data, an event signal according to the motion information, or a function according to the event signal;
an AR input module 22 for searching the motion information according to the user's motion and generating an event signal according to the motion information;
an AR function module 23 that executes a function according to the event signal input through the AR input module or a function according to correction information;
an AR modification request module 24 generating modification request information through the AR input module;
an AR modification function module 25 generating modification information according to the modification request information transmitted through the AR modification request module and transmitting the modified information to the AR function module;
an AR viewer module 26 that generates the motion information corresponding to the event signal of the AR input module and displays functions according to corresponding AR content data or correction information in chronological order;
AR server 30 controlling the modules;
A display device 10 connected to the AR input module 22 to generate input information; includes,
The AR server 30 uses a support vector machine to classify animation images of AR content data corresponding to event signals, enabling time-series arrangement through pattern recognition and data analysis, and the AR server 30 ), it is possible to experience a reality virtual reality in which an object placed in the created AR image space is recommended by an optimized AR expert, and the user can experience a position corresponding to the property of the object through the display device 10 ), rotation, scale, and material are modified in real time and requested to an AR expert.
The AR server 30 uses any one machine learning model of an artificial neural network, a support vector machine, or an autoregressive cumulative moving average method to time-series the AR content data corresponding to the event signal,
The autoregressive cumulative moving average method converts abnormal time series data, which is expert grade data observed over time, into normal time series data that is easy to analyze, so that the rating criteria based on the transaction amount for a specific expert is distorted over time. An AR service system using an expert system, characterized in that it prevents becoming unreasonable or unreasonable.
제1항에 있어서,
상기 AR 입력 모듈(22)에 연결되어 입력 정보를 생성하는 디스플레이 장치(10)는 3D 움직임 센서, 가속도계, 경사계, 또는 레이저 거리 측정기 중 하나를 포함하는 것을 특징으로 하는 전문가 시스템을 이용한 AR 서비스 시스템.
According to claim 1,
The display device 10 connected to the AR input module 22 and generating input information includes one of a 3D motion sensor, an accelerometer, an inclinometer, or a laser distance meter. AR service system using an expert system.
제1항에 있어서,
상기 실패 비용 방지를 위한 AR 컨텐츠 데이터 중 인테리어 객체는 도어(door), 스위치, 벽지, 바닥재, 가구, 및 욕실 중 적어도 하나에 대한 이미지인 것을 특징으로 하는 전문가 시스템을 이용한 AR 서비스 시스템.
According to claim 1,
AR service system using an expert system, characterized in that the interior object of the AR content data for preventing failure cost is an image of at least one of a door, a switch, a wallpaper, a flooring material, a furniture, and a bathroom.
삭제delete 사용자의 모션을 위한 시나리오와 상기 시나리오에 따라 시간의 흐름별로 나뉜 AR 컨텐츠 데이터를 설계하고 저장하는 단계;
컨텐츠 모듈과 AR 뷰어 서버를 통해 전문가 시스템을 이용한 AR 컨텐츠 데이터를 로드하여 모션을 준비하는 단계;
AR 입력 모듈을 통해 사용자가 전문가 시스템을 이용한 AR 컨텐츠에 반응하는 이벤트 신호를 생성하는 단계;
AR 뷰어 서버를 통해 상기 이벤트 신호에 대응되는 AR 컨텐츠 데이터를 생성하는 단계;
상기 AR 컨텐츠 데이터를 시간 순서대로 표시하는 단계;
AR 뷰어 서버를 통해 상기 AR 컨텐츠 데이터를 분석하는 단계;로 이루어지며,
상기 컨텐츠 모듈과 AR 입력 모듈들을 제어하는 AR 서버(30); 상기 AR 입력 모듈(22)에 연결되어 입력 정보를 생성하는 디스플레이 장치(10);를 포함하며,
상기 AR 서버(30)는 서포트 백터머신을 이용하여, 이벤트 신호에 대응되는 AR 컨텐츠 데이터의 애니메이션 이미지를 분류하는 작업에 있어 패턴 인식, 자료 분석을 통한 시계열적인 배열이 가능하고, 상기 AR 서버(30)를 통해 최적화된 AR 전문가를 추천받아 생성된 AR 영상 공간 내에 배치된 객체를 사용해보는 리얼리티 가상 현실을 체험할 수 있게 하며, 사용자는 디스플레이 장치(10)를 통해 객체의 속성에 해당하는 위치(position), 회전(rotation), 비율조정(scale), 재질(material)을 실시간으로 수정하여 AR 전문가에 수정 의뢰하며,
상기 AR 서버(30)는 인공신경망, 서포트 백터머신, 자기회귀누적이동평균법 중 어느 하나의 머신러닝 모델을 이용하여, 이벤트 신호에 대응되는 AR 컨텐츠 데이터를 시계열적으로 배열하는 데,
상기 자기회귀누적이동평균법은 시간의 흐름에 따라 관찰된 전문가 등급 데이터인 비정상적 시계열 자료를 분석하기 쉬운 정상적 시계열 자료로 변환하여, 특정 전문가에 대한 거래 금액에 따른 등급 부여 기준이 시간의 흐름에 따라 왜곡되거나 비상식적이 되는 것을 방지하는 것을 특징으로 하는 전문가 시스템을 이용한 AR 서비스 방법.
Designing and storing scenarios for user's motion and AR content data divided according to the lapse of time according to the scenarios;
preparing a motion by loading AR content data using an expert system through a content module and an AR viewer server;
Generating an event signal that responds to AR content using an expert system by a user through an AR input module;
generating AR content data corresponding to the event signal through an AR viewer server;
displaying the AR content data in chronological order;
Analyzing the AR content data through an AR viewer server;
an AR server 30 controlling the content module and the AR input modules; A display device 10 connected to the AR input module 22 to generate input information; includes,
The AR server 30 uses a support vector machine to classify animation images of AR content data corresponding to event signals, enabling time-series arrangement through pattern recognition and data analysis, and the AR server 30 ), it is possible to experience a reality virtual reality in which an object placed in the created AR image space is recommended by an optimized AR expert, and the user can experience a position corresponding to the property of the object through the display device 10 ), rotation, scale, and material are modified in real time and requested to an AR expert.
The AR server 30 uses any one machine learning model of an artificial neural network, a support vector machine, or an autoregressive cumulative moving average method to time-series the AR content data corresponding to the event signal,
The autoregressive cumulative moving average method converts abnormal time series data, which is expert grade data observed over time, into normal time series data that is easy to analyze, so that the rating criteria based on the transaction amount for a specific expert is distorted over time. AR service method using an expert system, characterized in that to prevent it from becoming unreasonable or unreasonable.
제5항에 있어서,
상기 AR 입력 모듈의 이벤트 신호에 대응하는 모션 정보를 생성하여 대응되는 AR 컨텐츠 데이터 또는 수정 정보에 따른 기능을 시간 순서대로 표시하는 단계;로 이루어진 전문가 시스템을 이용한 AR 서비스 방법.
According to claim 5,
generating motion information corresponding to the event signal of the AR input module and displaying functions according to the corresponding AR content data or correction information in chronological order; AR service method using an expert system.
제5항에 있어서,
상기 AR 입력 모듈을 통해 3D 움직임 센서, 가속도계, 경사계, 또는 레이저 거리 측정기 중 하나의 센서값을 생성하는 단계;를 더 포함하는 것을 특징으로 하는 전문가 시스템을 이용한 AR 서비스 방법.
According to claim 5,
Generating a sensor value of one of a 3D motion sensor, an accelerometer, an inclinometer, or a laser distance measurer through the AR input module; AR service method using an expert system, characterized in that it further comprises.
제5항에 있어서,
상기 AR 컨텐츠 데이터를 시간 순서대로 표시하는 단계는,
AR 기능 모듈을 통해 상기 AR 입력 모듈을 통해 입력된 상기 이벤트 신호에 따른 기능을 실행시키거나 수정 정보에 따른 기능을 실행시키는 단계;
AR 수정 요청 모듈을 통해 상기 AR 입력 모듈을 통해 수정 요청 정보를 생성하는 단계;
AR 수정 기능 모듈이 상기 AR 수정 요청 모듈을 통해 전송된 수정 요청 정보에 따른 수정 정보를 생성하여 상기 AR 기능 모듈에 전달하는 단계;를 더 포함하는 것을 특징으로 하는 전문가 시스템을 이용한 AR 서비스 방법.
According to claim 5,
The step of displaying the AR content data in chronological order,
Executing a function according to the event signal input through the AR input module through an AR function module or executing a function according to correction information;
generating modification request information through the AR input module through an AR modification request module;
The AR service method using an expert system further comprising: generating, by an AR modification function module, modification information according to the modification request information transmitted through the AR modification request module and transmitting the modified information to the AR function module.
KR1020200067715A 2020-06-04 2020-06-04 AR Vision Service System to Prevent Failure Cost KR102485874B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200067715A KR102485874B1 (en) 2020-06-04 2020-06-04 AR Vision Service System to Prevent Failure Cost

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200067715A KR102485874B1 (en) 2020-06-04 2020-06-04 AR Vision Service System to Prevent Failure Cost

Publications (2)

Publication Number Publication Date
KR20210150828A KR20210150828A (en) 2021-12-13
KR102485874B1 true KR102485874B1 (en) 2023-01-05

Family

ID=80254595

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200067715A KR102485874B1 (en) 2020-06-04 2020-06-04 AR Vision Service System to Prevent Failure Cost

Country Status (1)

Country Link
KR (1) KR102485874B1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102542307B1 (en) * 2022-10-24 2023-06-13 주식회사 위드라이크 Method, device and system for providing space styling expert and user matching platform service based on metaverse environment
KR20240059839A (en) 2022-10-28 2024-05-08 함동윤 Method and server for providing platform for trading at least one interior modeling file used in augmented reality

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004178222A (en) * 2002-11-26 2004-06-24 Matsushita Electric Works Ltd Method for evaluating assemblability and assemblability evaluation supporting device using the method

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060086668A (en) 2005-01-27 2006-08-01 삼성전자주식회사 System and method for executing product evaluation at virtual reality environment
KR100837040B1 (en) 2006-02-09 2008-06-11 주식회사 인터파크지마켓 System and method for protecting purchase procedure in electronic commercial trade
KR101001617B1 (en) * 2007-12-17 2010-12-17 한국전자통신연구원 Usability evaluation system of virtual mobile information appliance and its method
KR101036228B1 (en) 2010-04-19 2011-05-20 동부엔지니어링 주식회사 Vr evaluation system for scenic road
KR101588025B1 (en) 2014-10-31 2016-01-25 인하대학교 산학협력단 Online auction system for designation of agent
KR101722723B1 (en) * 2015-08-12 2017-04-18 주식회사 필굿하우징 System and method for providing interior service based virtual reality
KR20180113728A (en) 2017-04-07 2018-10-17 (주)우리에스앤씨 Matching between the client and the professional service method and system for matching
KR20190043698A (en) * 2017-10-19 2019-04-29 한국산업기술대학교산학협력단 Artificaial intelligence drone player implementation method in virtual reality drone racing game

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004178222A (en) * 2002-11-26 2004-06-24 Matsushita Electric Works Ltd Method for evaluating assemblability and assemblability evaluation supporting device using the method

Also Published As

Publication number Publication date
KR20210150828A (en) 2021-12-13

Similar Documents

Publication Publication Date Title
US10665022B2 (en) Augmented reality display system for overlaying apparel and fitness information
US20190251603A1 (en) Systems and methods for a machine learning based personalized virtual store within a video game using a game engine
US11908159B2 (en) Systems and methods for representing user interactions in multi-user augmented reality
KR102322953B1 (en) Method and system for dealing a virtual real estate and determining a value of the virtual real estate
US10242342B1 (en) Vehicle interface
JP2021192295A (en) Asset management/debt repayment simulation generation device, program and method
KR102485874B1 (en) AR Vision Service System to Prevent Failure Cost
CN113240778A (en) Virtual image generation method and device, electronic equipment and storage medium
US20220027115A1 (en) Systems and methods for modifying multi-user augmented reality
US11847716B2 (en) Systems and methods for generating multi-user augmented reality content
US11899833B2 (en) Systems and methods for interacting with augmented reality content using a dual-interface
CN112418903A (en) System and method for continuous quality-based telemetry and tracking in the digital reality domain
US20180124351A1 (en) Systems and methods for conserving computing resources during an online or virtual shopping session
EP4099276A1 (en) Systems and methods for supplementing digital media with three-dimensional (3d) models
JP6474519B1 (en) Information processing method, information processing apparatus, and information processing program
US20180121997A1 (en) Systems and methods for adjusting the display quality of an avatar during an online or virtual shopping session
KR102176108B1 (en) Differential fee payment system through professional experts
CN114549785A (en) Method and device for generating model substrate, electronic equipment and storage medium
KR102315514B1 (en) VR Vision Service System to Prevent Failure Cost
CA3152405A1 (en) Exchange platform activity prediction
US20140372231A1 (en) Online selling mechanism creation
US20130332320A1 (en) Virtual reality-based environments including user avatars
CN109784733A (en) User credit prediction technique, device, electronic equipment and storage medium
US11579691B2 (en) Mid-air volumetric visualization movement compensation
KR102512371B1 (en) System for Selling Clothing Online

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant