KR20090044702A - 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법 - Google Patents

증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법 Download PDF

Info

Publication number
KR20090044702A
KR20090044702A KR1020070110919A KR20070110919A KR20090044702A KR 20090044702 A KR20090044702 A KR 20090044702A KR 1020070110919 A KR1020070110919 A KR 1020070110919A KR 20070110919 A KR20070110919 A KR 20070110919A KR 20090044702 A KR20090044702 A KR 20090044702A
Authority
KR
South Korea
Prior art keywords
product
product information
information
portable terminal
context
Prior art date
Application number
KR1020070110919A
Other languages
English (en)
Other versions
KR100963236B1 (ko
Inventor
홍동표
우운택
Original Assignee
광주과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 광주과학기술원 filed Critical 광주과학기술원
Priority to KR1020070110919A priority Critical patent/KR100963236B1/ko
Publication of KR20090044702A publication Critical patent/KR20090044702A/ko
Application granted granted Critical
Publication of KR100963236B1 publication Critical patent/KR100963236B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/435—Filtering based on additional data, e.g. user or group profiles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Marketing (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Processing Or Creating Images (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법에 관한 것이다. 보다 상세하게는 무선통신이 가능하며 카메라가 구비된 휴대용 단말기와, 휴대용 단말기의 요청에 따라 데이터베이스로부터 제품의 외형 이미지와 가격, 성능을 포함한 제품정보를 추출하여 휴대용 단말기에 전송하는 제품정보 제공서버 및 제품의 외형 이미지와 가격, 성능을 포함한 제품정보를 획득하여 제품정보 제공서버로 전송하는 제품정보 획득부를 구비함으로써, 이동통신 단말기 등을 이용하여 제품 정보를 직접 볼 수 있는 오프라인의 장점과 언제 어디서나 인터넷으로 제품 정보를 볼 수 있는 온라인의 장점을 통합하여 발휘하며, 사용자의 요구에 따라 필요한 정보만을 여과하여 증강할 수 있는 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법에 관한 것이다.
증강현실, 제품정보 뷰어, 태그, 휴대용 단말기, 제품정보 제공서버, 정보 여과

Description

증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법{System and Method of augmented reality-based product viewer}
본 발명은 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법에 관한 것이다. 보다 상세하게는 무선통신이 가능하며 카메라가 구비된 휴대용 단말기와, 휴대용 단말기의 요청에 따라 데이터베이스로부터 제품의 외형 이미지와 가격, 성능을 포함한 제품정보를 추출하여 휴대용 단말기에 전송하는 제품정보 제공서버 및 제품의 외형 이미지와 가격, 성능을 포함한 제품정보를 획득하여 제품정보 제공서버로 전송하는 제품정보 획득부를 구비함으로써, 이동통신 단말기 등을 이용하여 제품 정보를 직접 볼 수 있는 오프라인의 장점과 언제 어디서나 인터넷으로 제품 정보를 볼 수 있는 온라인의 장점을 통합하여 발휘하며, 사용자의 요구에 따라 필요한 정보만을 여과하여 증강할 수 있는 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법에 관한 것이다.
증강현실(Augmented Reality)은 가상현실(Virtual Reality)의 한 분야로, 실제 환경에 가상 사물을 합성하여 원래의 환경에 존재하는 사물처럼 보이도록 하는 컴퓨터 그래픽 기법이다.
증강현실은 가상의 공간과 사물만을 대상으로 하는 기존의 가상현실과 달리, 현실세계의 기반위에 가상의 사물을 합성하여 현실세계 만으로는 얻기 어려운 부가적인 정보들을 보강해 제공할 수 있는 특징을 가지고 있다. 즉, 가상현실기술은 일반적으로 사용자로 하여금 가상의 환경에 몰입하게 하므로 사용자는 실제 환경을 볼 수 없는 반면, 증강현실기술에서는 사용자가 실제 환경을 볼 수 있으며, 실제 환경과 가상의 객체가 혼합된 형태를 띤다. 다시 말하면, 가상현실은 현실세계를 대체하여 사용자에게 보여주지만 증강현실은 현실세계에 가상의 물체를 중첩함으로서 현실세계를 보충하여 사용자에게 보여준다는 차별성을 가지며, 가상현실에 비해 사용자에게 보다 나은 현실감을 제공한다는 특징이 있다. 이러한 특징 때문에 단순히 게임과 같은 분야에만 한정된 적용이 가능한 기존 가상현실과 달리 다양한 현실환경에 응용이 가능하며 특히, 유비쿼터스 환경에 적합한 차세대 디스플레이 기술로 각광받고 있다.
한편, 구매자가 특정 제품을 구입하고자 하는 경우 직접 매장에 가서 점원의 설명을 들으면서 구입하는 방법, 인터넷 쇼핑몰을 통해 온라인 상으로 제품의 정보를 획득하고 전자결재 방식 등에 의해 구입하는 방법, TV 홈쇼핑 채널을 보면서 쇼핑 호스트의 설명을 듣고 전화주문하여 구입하는 방법 등이 있다.
매장에서 직접 제품을 구입하는 경우에는 제품의 실물을 직접 볼 수 있고 제품에 대한 궁금한 정보를 점원에게 물어볼 수 있는 장점이 있으나, 매장까지 가야 하는 불편함이 있고 그 제품에 대한 구입 여부가 결정되지 않은 상태에서 실물을 낱낱이 뜯어보기 곤란할 뿐만 아니라, 제품의 내부 구조 등은 볼 수 없다는 단점이 있다.
반면, 인터넷 쇼핑몰이나 TV 홈쇼핑을 통해 제품을 구입하는 경우 가정에서도 손쉽게 원하는 제품을 주문할 수 있는 장점이 있으나, 인터넷 쇼핑몰의 경우 인터넷이라는 제약환경이 존재하고 양자 공히 직접 제품의 실물을 볼 수 없으므로 구매자가 궁금해 하는 부분을 자세히 파악할 수 없으며, 구매자가 필요로 하는 정보를 선별하여 획득할 수 없는 단점이 있다.
본 발명은 상기와 같은 문제점을 해결하기 위해 안출된 것으로, 특히 이동통신 단말기 등을 이용하여 제품 정보를 직접 볼 수 있는 오프라인의 장점과 언제 어디서나 인터넷으로 제품 정보를 볼 수 있는 온라인의 장점을 통합하여 발휘하며, 사용자의 요구에 따라 필요한 정보만을 여과하여 증강할 수 있는 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법을 제공하는 데 그 목적이 있다.
상기 목적을 달성하기 위해 안출된 본 발명에 따른 증강현실을 이용한 제품정보 제공 시스템은 무선통신이 가능하며 카메라가 구비된 휴대용 단말기; 상기 휴대용 단말기의 요청에 따라 데이터베이스로부터 제품의 외형 이미지와 가격, 성능을 포함한 제품정보를 추출하여 상기 휴대용 단말기에 전송하는 제품정보 제공서버; 및 상기 제품의 외형 이미지와 가격, 성능을 포함한 제품정보를 획득하여 상기 제품정보 제공서버로 전송하는 제품정보 획득부를 포함하는 것을 특징으로 한다.
또한, 상기 휴대용 단말기는 카메라가 구비된 이동통신 단말기일 수 있다.
또한, 상기 데이터베이스는 상기 제품의 외형 이미지를 저장하는 외형정보 데이터베이스와, 상기 제품의 가격, 성능을 포함한 제품정보를 저장하는 제품정보 데이터베이스를 포함할 수 있다.
또한, 상기 제품정보 제공서버는 상기 휴대용 단말기를 통해 전송된 영상에 존재하는 제품의 기하학적 특성을 분석하는 영상분석부; 상기 영상분석부에 의해 분석된 제품의 기하학적 특성을 상기 외형정보 데이터베이스에 저장된 데이터와 비교하여 상기 제품의 종류를 확인하고, 상기 제품의 종류가 확인되면 상기 제품정보 데이터베이스에서 상기 제품의 종류와 관련된 제품정보를 추출하는 제품 확인부를 포함할 수 있다.
또한, 상기 휴대용 단말기는 나이, 성별, 직업을 포함한 사용자 정보를 수집하는 사용자 프로파일 수집부; 계절, 시간, 장소를 포함한 환경 정보를 수집하는 센서; 상기 사용자 프로파일 수집부 및 상기 센서를 통해 수집된 데이터를 분석하여 각 컨텍스트(context) 별로 분류하는 컨텍스트 분석부; 및 상기 컨텍스트 분석부를 통해서 분류된 데이터 중 사용자의 컨텍스트와 부합되는 정보만을 여과하는 컨텍스트 필터를 포함할 수 있다.
또한, 상기 휴대용 단말기는 상기 제품에 부착된 태그(tag)를 이용하여 상기 제품의 외형 이미지와 가격, 성능을 포함한 제품정보를 증강할 수 있다.
본 발명에 따른 증강현실을 이용한 제품정보 제공방법은 (a) 제품정보 획득부가 제품의 외형 이미지와 가격, 성능을 포함한 제품 정보를 획득하는 단계; (b) 상기 (a)단계를 통하여 획득된 제품 정보를 제품정보 제공서버로 전송하는 단계; (c) 휴대용 단말기의 카메라를 통하여 제품을 보는 단계; (d) 상기 (c)단계의 제품에 대한 정보를 상기 제품정보 제공서버에 요청하는 단계; 및 (e) 상기 (d)단계를 통하여 요청한 제품에 대한 정보를 상기 휴대용 단말기에 다운로드하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 (e)단계에서 사용자의 컨텍스트에 부합되는 정보만 다운로드되도 록 하기 위해 상기 (e)단계 이전에 사용자 컨텍스트 분석단계를 더 포함할 수 있다.
또한, 상기 사용자 컨텍스트 분석단계는 나이, 성별, 직업을 포함한 사용자 정보와, 계절, 시간, 장소를 포함한 환경 정보를 수집하는 사용자 정보 수집단계; 상기 사용자 정보 수집단계를 통해 수집된 정보를 컨텍스트별로 분류하는 컨텍스트 분석단계; 및 상기 컨텍스트 분석단계를 통해 분류된 정보 중 사용자의 컨텍스트와 부합되는 정보만을 여과하는 정보 여과단계를 포함할 수 있다.
본 발명에 의하면 구매자가 직접 매장에서 제품을 터치하지 않으면서 매장 점원의 설명을 듣지 않고도 이동통신 단말기 등을 이용하여 제품에 관련된 다양한 정보와 3차원 영상을 볼 수 있도록 함과 더불어, 인터넷 환경 또는 제품에 대한 전단지만 존재하더라도 제품 정보를 상세히 취득할 수 있어, 이동통신 단말기 등을 이용하여 제품 정보를 직접 볼 수 있는 오프라인의 장점과 언제 어디서나 인터넷으로 제품 정보를 볼 수 있는 온라인의 장점을 통합하여 발휘하는 효과가 있다.
또한, 본 발명에 의하면 제품의 태그를 이용하여 제품 정보를 이동통신 단말기 등에 증강하고, 사용자의 요구에 따라 필요한 정보만을 여과하여 증강할 수 있으며, 제품의 가격, 사양 등의 정보뿐만 아니라 실제 입체형상까지 제공할 수 있는 효과가 있다.
이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명 한다. 우선 각 도면의 구성 요소들에 참조 부호를 부가함에 있어서, 동일한 구성 요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다. 또한, 이하에서 본 발명의 바람직한 실시예를 설명할 것이나, 본 발명의 기술적 사상은 이에 한정하거나 제한되지 않고 당업자에 의해 변형되어 다양하게 실시될 수 있음은 물론이다.
먼저, 본 발명의 바람직한 실시예에 따른 증강현실을 이용한 제품정보 제공 시스템에 대해 설명한다.
도 1은 본 발명의 바람직한 실시예에 따른 증강현실을 이용한 제품정보 제공 시스템의 전체 구성도이다.
본 발명의 바람직한 실시예에 따른 증강현실을 이용한 제품정보 제공 시스템(이하, "제품정보 제공 시스템")은, 도 1을 참조하면, 제품부(100), 제품정보 획득부(200), 휴대용 단말기(300), 통신망(400), 제품정보 제공서버(500), 및 제품정보 데이터베이스(600)를 포함하여 이루어진다.
제품부(100)는 제품 정보를 알고자 하는 구매자에게는 구입하고자 하는 실제 제품에 해당하고, 제품에 대한 정보를 획득하여 제품정보 제공서버(500)에 저장하고자 하는 서비스업자에게는 제품 정보를 수집할 수 있는 소스(source) 역할을 수행한다. 제품부(100)는 제품(110, 130, 150)과 태그(120, 140, 160)로 이루어진다. 한편, 도시하지 않았으나 제품부(100)는 별도의 태그없이 제품 자체만으로 구성될 수도 있음은 물론이다. 제품부(100)의 상세한 구성은 이하 도 2를 참조하여 설명하기로 한다.
제품정보 획득부(200)는 제품부(100)의 외형 이미지와 가격, 성능, 취급방법, 주의사항 등을 포함한 제품정보를 획득하여 제품정보 제공서버(500)로 전송하는 역할을 수행한다. 이를 위해 제품정보 획득부(200)는 제품부(100)로부터 제품에 관한 정보를 학습하고 해당 정보를 저장한 후, 제품정보 제공서버(500)로 저장된 정보를 전송한다. 제품정보 획득부(200)는 제품부(100)의 외형 이미지를 포함한 영상정보를 획득하기 위한 카메라가 구비된 시스루(see-through) 형태의 HMD(Head Mounted Display) 또는 제품부(100)의 3차원 기하학적 구조, 길이, 모양, 색상 등을 획득하는 3차원 스캐너를 구비할 수 있다. 예컨대, 제품정보 획득부(200)는 제품을 판매하는 매장 관계자 또는 제품 정보를 획득하여 저장하고 이를 제품정보 제공서버에 전송하는 전문 서비스업체에 의해 운영될 수 있다.
휴대용 단말기(300)는 카메라를 구비하며, 제품부(100)의 태그(120, 140, 160)를 카메라를 통해 보게 되면 제품정보 제공서버(500)에 제품(110, 130, 150)에 관한 정보를 요청하는 역할을 수행한다. 더불어, 휴대용 단말기(300)는 화면을 구비하며, 제품정보 제공서버(500)가 제공하는 제품(110, 130, 150)에 관한 정보를 화면을 통해 구매자에게 디스플레이하는 역할을 수행한다. 휴대용 단말기(300)는 무선통신이 가능하며 카메라가 구비된 이동통신 단말기인 것이 바람직하나, 이에 한정되지 않고 PDA(Personal Digital Assistants) 등이 사용될 수도 있음은 물론이 다. 휴대용 단말기(300)의 상세한 구성은 이하 도 3을 참조하여 설명하기로 한다.
통신망(400)은 제품정보 획득부(200)가 획득한 제품정보를 제품정보 제공서버(500)로 전송하는 매체 역할을 수행한다. 또한, 통신망(400)은 휴대용 단말기(300)의 카메라로 입력된 제품(110, 130, 150)의 외형 이미지 또는 태그(120, 140, 160)를 제품정보 제공서버(500)로 전송하거나, 휴대용 단말기(300)가 요청한 제품정보를 제품정보 제공서버(500)로부터 다시 휴대용 단말기(300)로 전송할 경우의 전송 매체 역할을 한다. 통신망(400)으로는 이동통신망, 인터넷, 무선랜 등이 사용될 수 있다.
제품정보 제공서버(500)는 휴대용 단말기(300)의 요청에 따라 데이터베이스(600)로부터 제품의 외형 이미지와 가격, 성능을 포함한 제품정보를 추출하여 휴대용 단말기(300)에 전송하는 역할을 수행한다. 제품정보 제공서버(500)는 구매자가 휴대용 단말기(300)를 통해 제품부(100)를 보기 이전에 미리 제품정보 획득부(200)를 통해 수집한 제품관련 정보를 전송받아 데이터베이스(600)에 저장한다. 이를 위해 제품정보 제공서버(500)는 제품부(100)의 태그(120, 140, 160) 이미지와, 상기 태그(120, 140, 160)를 매개로 하여 이와 연동되는 해당 제품의 상세 정보를 데이터베이스(600)에 저장해 놓음으로써, 구매자가 휴대용 단말기(300)를 통해 제품(110, 130, 150)에 부착된 태그(120, 140, 160)를 보게 되면 해당 정보를 데이터베이스(600)로부터 추출하여 휴대용 단말기(300)로 전송하게 된다. 제품정보 제공서버(500)의 상세한 구성은 이하 도 4를 참조하여 설명하기로 한다.
데이터베이스(600)는 제품정보 제공서버(500)와 연동되어 제품정보 제공서 버(500)가 추출하려는 제품관련 정보를 저장하는 역할을 수행한다. 데이터베이스(600)는 제품의 2차원 이미지, 3차원 이미지, 규격, 색상, 질감 등에 관한 정보와, 제품의 사양, 성능, 취급방법, 가격, 주의사항 등에 관한 정보를 저장한다. 데이터베이스(600)의 상세한 구성은 이하 도 5를 참조하여 설명하기로 한다.
도 2는 도 1 중 제품부의 상세 구성도이다.
제품부(100)는, 도 2를 참조하면, 제품(110, 130, 150)과 태그(120, 140, 160)를 구비한다.
태그(120, 140, 160)는 각 해당 제품(110, 130, 150)에 부착되며, 다음과 같은 과정으로 제작될 수 있다. 태그로 사용할 이미지를 획득한 뒤, 획득한 이미지로부터 필요한 정보를 추출한다. 그리고, 제품으로부터 필요한 정보를 얻고 획득된 정보를 바탕으로 컨텍스트(context) 데이터 구조를 만든다. 이러한 컨텍스트를 해당 이미지와 함께 저장함으로써 태그를 통해 제품관련 정보를 요청할 수 있도록 한다.
한편, 이와 같이 각 제품에 해당 태그를 부착하지 않고 제품 자체의 외형 이미지만으로 제품관련 정보를 요청할 수도 있다. 구매자는 매장에 진열된 실제 제품을 휴대용 단말기에 부착된 카메라를 통해서 볼 수도 있으나, 직접 매장에 가지 않고 구매하고자 하는 제품의 외형 사진이 실린 전단지 또는 인터넷 쇼핑몰에 개재된 사진을 휴대용 단말기의 카메라를 통해서 봄으로써 구매 여부를 결정할 수도 있다. 이 경우에는 제품의 외형 사진을 통해서 휴대용 단말기의 카메라가 각 제품에 부착된 태그를 인식하지 못할 수 있다. 따라서, 태그를 매개로 하지 않고 제품의 외형 이미지 자체를 매개로 제품관련 정보를 증강할 수 있도록 할 필요가 있다. 이러한 경우에는 제품정보 획득부(200)가 제품의 외형 이미지를 획득하여 저장한 후 통신망(400)을 통해서 제품정보 제공서버(500)로 전송하고, 제품정보 제공서버(500)로 전송된 제품의 외형 이미지 데이터는 데이터베이스(600)에 저장된다. 따라서, 휴대용 단말기(300)의 카메라를 통해 전단지, 인터넷 쇼핑몰 등에 개재된 제품의 외형 이미지 사진을 보게 되면 통신망(400)을 통해 제품정보 제공서버(500)로 제품정보를 요청하고, 제품정보 제공서버(500)는 데이터베이스(600)로부터 제품의 외형 이미지 데이터를 추출하여 제품정보 제공서버(500)로 제공함으로써 휴대용 단말기(300)의 카메라를 통해 증강된 제품정보를 구매자가 볼 수 있도록 한다.
도 3은 도 1 중 휴대용 단말기의 상세 구성도이다.
휴대용 단말기(300)는, 도 3을 참조하면, 사용자 프로파일 수집부(310), 센서(320), 컨텍스트 분석부(330), 컨텍스트 필터(340), 및 제품 뷰어(350)를 포함한다. 휴대용 단말기(300)는 제품정보 제공서버(500)에 제품정보를 요청하고, 그에 따라 전송된 제품정보를 디스플레이한다. 더불어, 휴대용 단말기(300)는 제품정보 제공서버(500)로부터 전송된 다양한 제품정보 중에서 구매자와 구매자를 둘러싼 외부 환경의 컨텍스트(context)와 부합하는 정보만을 여과함으로써 구매자로 하여금 자신에게 필요한 정보만을 볼 수 있도록 한다.
사용자 프로파일 수집부(310)는 구매자의 나이, 성별, 생일, 결혼여부, 직업, 관심분야 등을 포함하는 사용자 프로파일을 수집하여 컨텍스트 분석부(330)로 전송한다. 이를 통해 사용자 프로파일 수집부(310)는 구매자의 컨텍스트에 따라 필 요한 정보만 휴대용 단말기(300)에 디스플레이될 수 있도록 한다.
센서(320)는 장소, 시간, 계절, 온도 등을 포함하는 외부 환경에 관한 정보를 수집하여 컨텍스트 분석부(330)로 전송한다. 이를 통해 센서(320)는 현재 구매자가 속해 있는 외부 환경에 적합한 정보만 휴대용 단말기(300)에 디스플레이될 수 있도록 한다. 즉, 센서(320)는 사용자 프로파일 수집부(310)와 더불어, 구매자의 성향 및 구매자의 선택에 중대한 영향을 미치는 외부 환경 요소를 참작하여 휴대용 단말기(300)가 구매자에게 꼭 필요로 하는 제품관련 정보들만을 걸러서 보여줄 수 있도록 하는 역할을 수행한다.
컨텍스트 분석부(330)는 사용자 프로파일 수집부(310) 및 센서(320)를 통해 수집된 데이터를 분석하여 각 컨텍스트 별로 분류한다. 이를 위해 컨텍스트 분석부(330)는 구매자의 개인정보와 구매자의 외부 환경에 관한 정보를 분석하여 컨텍스트 데이터 구조를 만든다. 일례로, 컨텍스트 데이터 구조는 하부 구조에서 상부 구조 순으로 구매자의 감성 표현(emotion), 콘텐츠의 렌더링 방법, 증강될 콘텐츠에 해당하는 리소스의 링크, 시간, 계절 등을 포함하는 시간 정보, 성별, 직업, 생일 등을 포함하는 사용자 정보로 이루어질 수 있다.
컨텍스트 필터(340)는 컨텍스트 분석부(330)를 통해서 분류된 데이터 중 사용자 컨텍스트 및 외부 환경 컨텍스트와 부합되는 정보만을 여과한다.
제품 뷰어(350)는 컨텍스트 필터(340)를 통해 여과된 정보만이 휴대용 단말기(300)의 화면에 디스플레이될 수 있도록 한다.
도 4는 도 1 중 제품정보 제공서버의 상세 구성도이다.
제품정보 제공서버(500)는, 도 4를 참조하면, 영상 분석부(510)와 제품 확인부(520)를 구비한다.
영상 분석부(510)는 휴대용 단말기(300)를 통해 전송된 영상에 존재하는 제품의 기하학적 특성을 분석한다. 영상 분석부(510)는 분석된 특성에 관한 정보를 제품 확인부(510)로 전송한다.
제품 확인부(510)는 영상 분석부(510)에 의해 분석된 제품의 기하학적 특성을 외형정보 데이터베이스(610)에 미리 저장되어 있는 데이터와 비교하여 제품의 종류를 확인한다. 제품의 정보가 확인되면 제품 확인부(510)는 제품정보 데이터베이스(620)에서 제품의 종류와 관련된 제품정보(3차원 이미지 정보, 색상, 크기, 가격, 성능, 취급방법 등)를 추출하여 휴대용 단말기(300)로 전송한다.
도 5는 도 1 중 데이터베이스의 상세 구성도이다.
데이터베이스(600)는, 도 5를 참조하면, 외형정보 데이터베이스(610)와 제품정보 데이터베이스(620)를 포함한다.
외형정보 데이터베이스(610)는 제품의 3차원 이미지, 색상, 크기 등을 포함하는 외형 이미지를 저장한다.
제품정보 데이터베이스(620)는 제품의 가격, 성능, 취급방법, 주의사항 등을 포함하는 제품정보를 저장한다.
다음으로, 본 발명의 바람직한 실시예에 따른 증강현실을 이용한 제품정보 제공방법에 대해 설명한다.
도 6은 본 발명의 바람직한 실시예에 따른 증강현실을 이용한 제품정보 제공방법의 흐름도이고, 도 7은 도 6 중 사용자 컨텍스트 분석단계의 상세 흐름도이다.
본 발명의 바람직한 실시예에 따른 증강현실을 이용한 제품정보 제공방법(이하, "제품정보 제공방법")은, 도 6을 참조하면, 제품정보 획득단계(S10), 제품정보 제공서버로 전송하는 단계(S20), 제품 보기 단계(S30), 제품정보 제공서버에 요청하는 단계(S40), 사용자 컨텍스트 분석단계(S50), 및 제품정보 다운로드 단계(S60)를 포함한다. 또한, 사용자 컨텍스트 분석단계(S50)는 사용자 정보 수집단계(S52), 컨텍스트 분석단계(S54), 정보여과 단계(S56)를 포함한다.
10단계는 제품정보 획득부(200)가 제품의 외형 이미지와 가격, 성능 등을 포함한 제품정보를 획득하는 단계이다. 매장 관계자 또는 증강현실을 제공하는 전문 서비스업체는 제품정보 획득부(200)를 통하여 미리 각 제품의 외형 이미지와 제품관련 정보를 획득하여 저장한다.
20단계는 10단계를 통하여 획득된 제품 정보를 제품정보 제공서버(500)로 전송하는 단계이다. 10단계를 통해 제품정보 획득부(200)가 획득한 제품정보는 통신망(400)을 통해 제품정보 제공서버(500)로 전송되고, 제품정보 제공서버(500)는 전송된 제품정보를 데이터베이스(600)의 외형정보 데이터베이스(610)와 제품정보 데이터베이스(620)에 저장한다.
30단계는 휴대용 단말기(300)의 카메라를 통하여 제품을 보는 단계이다.
40단계는 30단계의 제품에 대한 정보를 제품정보 제공서버(500)에 요청하는 단계이다. 30단계에서 휴대용 단말기(300)의 카메라를 통해 입력된 영상은 통신 망(400)을 통해 제품정보 제공서버(500)에 전송된다. 제품정보 제공서버(500)는 전송된 영상을 영상 분석부(510)를 통해 분석한 후, 외형정보 데이터베이스(610)에 저장된 데이터와 비교하여 제품의 종류를 확인하고, 제품정보 데이터베이스(620)에서 확인된 제품의 종류와 관련된 제품정보를 추출한다.
50단계는 40단계를 통해 요청된 제품정보 중 사용자의 컨텍스트에 부합하는 정보만 다운로드할 수 있도록 사용자 컨텍스트를 분석하는 단계이다. 이를 위해 사용자 정보 수집단계(S52), 컨텍스트 분석단계(S54), 정보 여과단계(S56)가 수행된다. 52단계에서는 나이, 성별, 직업을 포함한 사용자 정보와, 계절, 시간, 장소를 포함한 환경 정보를 수집한다. 54단계에서는 52단계를 통해 수집된 정보를 컨텍스트 별로 분류한다. 56단계에서는 54단계를 통해 분류된 정보 중에서 사용자의 컨텍스트와 부합하는 정보만을 여과한다. 이를 통해 구매자는 방대한 제품 정보들 중에서 자신이 원하는 정보만을 취사선택하여 볼 수 있다. 한편, 50단계와 같이 사용자의 컨텍스트에 부합되는 정보만 휴대용 단말기로 전송받는 대신, 제품정보 제공서버로부터 제품정보 전체를 휴대용 단말기로 전송받고 휴대용 단말기 내에서 컨텍스트 여과 작업을 진행할 수도 있음은 물론이다.
60단계는 40단계를 통해 요청한 제품에 대한 정보를 50단계를 통해 여과한 후 휴대용 단말기에 다운로드하는 단계이다.
이를 통해 실제 제품 또는 전단지, 인터넷 쇼핑몰 사진과 같은 현실에 제품정보라는 가상 현실이 증강된다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으 로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 수정, 변경 및 치환이 가능할 것이다. 따라서, 본 발명에 개시된 실시예 및 첨부된 도면들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예 및 첨부된 도면에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
본 발명은 제품의 태그를 이용하여 제품 관련 정보를 이동통신 단말기에 증강하되, 사용자의 컨텍스트에 따라 필요한 정보만을 여과하여 증강하며, 제품 정보뿐만 아니라 제품의 3차원 모델도 증강할 수 있으므로 매장 차원에서 제품 정보를 미리 서버에 저장하거나 증강현실을 제공하는 전문업체의 서비스업에 적용될 수 있다.
도 1은 본 발명의 바람직한 실시예에 따른 증강현실을 이용한 제품정보 제공 시스템의 전체 구성도,
도 2는 도 1 중 제품부의 상세 구성도,
도 3은 도 1 중 휴대용 단말기의 상세 구성도,
도 4는 도 1 중 제품정보 제공서버의 상세 구성도,
도 5는 도 1 중 데이터베이스의 상세 구성도,
도 6은 본 발명의 바람직한 실시예에 따른 증강현실을 이용한 제품정보 제공방법의 흐름도,
도 7은 도 6 중 사용자 컨텍스트 분석단계의 상세 흐름도이다.
<도면의 주요부분에 대한 부호의 설명>
100 - 제품부 200 - 제품정보 획득부
300 - 휴대용 단말기 400 - 통신망
500 - 제품정보 제공서버 600 - 데이터베이스

Claims (9)

  1. 제품정보 제공 시스템에 있어서,
    무선통신이 가능하며 카메라가 구비된 휴대용 단말기;
    상기 휴대용 단말기의 요청에 따라 데이터베이스로부터 제품의 외형 이미지와 가격, 성능을 포함한 제품정보를 추출하여 상기 휴대용 단말기에 전송하는 제품정보 제공서버; 및
    상기 제품의 외형 이미지와 가격, 성능을 포함한 제품정보를 획득하여 상기 제품정보 제공서버로 전송하는 제품정보 획득부
    를 포함하는 것을 특징으로 하는 증강현실을 이용한 제품정보 제공 시스템.
  2. 제1항에 있어서,
    상기 휴대용 단말기는 카메라가 구비된 이동통신 단말기인 것을 특징으로 하는 증강현실을 이용한 제품정보 제공 시스템.
  3. 제1항에 있어서,
    상기 데이터베이스는 상기 제품의 외형 이미지를 저장하는 외형정보 데이터베이스와, 상기 제품의 가격, 성능을 포함한 제품정보를 저장하는 제품정보 데이터베이스를 포함하는 것을 특징으로 하는 증강현실을 이용한 제품정보 제공 시스템.
  4. 제3항에 있어서, 상기 제품정보 제공서버는
    상기 휴대용 단말기를 통해 전송된 영상에 존재하는 제품의 기하학적 특성을 분석하는 영상분석부;
    상기 영상분석부에 의해 분석된 제품의 기하학적 특성을 상기 외형정보 데이터베이스에 저장된 데이터와 비교하여 상기 제품의 종류를 확인하고, 상기 제품의 종류가 확인되면 상기 제품정보 데이터베이스에서 상기 제품의 종류와 관련된 제품정보를 추출하는 제품 확인부
    를 포함하는 것을 특징으로 하는 증강현실을 이용한 제품정보 제공 시스템.
  5. 제1항에 있어서, 상기 휴대용 단말기는
    나이, 성별, 직업을 포함한 사용자 정보를 수집하는 사용자 프로파일 수집부;
    계절, 시간, 장소를 포함한 환경 정보를 수집하는 센서;
    상기 사용자 프로파일 수집부 및 상기 센서를 통해 수집된 데이터를 분석하여 각 컨텍스트(context) 별로 분류하는 컨텍스트 분석부; 및
    상기 컨텍스트 분석부를 통해서 분류된 데이터 중 사용자의 컨텍스트와 부합되는 정보만을 여과하는 컨텍스트 필터
    를 포함하는 것을 특징으로 하는 증강현실을 이용한 제품정보 제공 시스템.
  6. 제1항에 있어서,
    상기 휴대용 단말기는 상기 제품에 부착된 태그(tag)를 이용하여 상기 제품의 외형 이미지와 가격, 성능을 포함한 제품정보를 증강하는 것을 특징으로 하는 증강현실을 이용한 제품정보 제공 시스템.
  7. 제품정보 제공방법에 있어서,
    (a) 제품정보 획득부가 제품의 외형 이미지와 가격, 성능을 포함한 제품 정보를 획득하는 단계;
    (b) 상기 (a)단계를 통하여 획득된 제품 정보를 제품정보 제공서버로 전송하는 단계;
    (c) 휴대용 단말기의 카메라를 통하여 제품을 보는 단계;
    (d) 상기 (c)단계의 제품에 대한 정보를 상기 제품정보 제공서버에 요청하는 단계; 및
    (e) 상기 (d)단계를 통하여 요청한 제품에 대한 정보를 상기 휴대용 단말기에 다운로드하는 단계
    를 포함하는 것을 특징으로 하는 증강현실을 이용한 제품정보 제공방법.
  8. 제7항에 있어서,
    상기 (e)단계에서 사용자의 컨텍스트에 부합되는 정보만 다운로드되도록 하기 위해 상기 (e)단계 이전에 사용자 컨텍스트 분석단계를 더 포함하는 것을 특징으로 하는 증강현실을 이용한 제품정보 제공방법.
  9. 제8항에 있어서, 상기 사용자 컨텍스트 분석단계는
    나이, 성별, 직업을 포함한 사용자 정보와, 계절, 시간, 장소를 포함한 환경 정보를 수집하는 사용자 정보 수집단계;
    상기 사용자 정보 수집단계를 통해 수집된 정보를 컨텍스트별로 분류하는 컨텍스트 분석단계; 및
    상기 컨텍스트 분석단계를 통해 분류된 정보 중 사용자의 컨텍스트와 부합되는 정보만을 여과하는 정보 여과단계
    를 포함하는 것을 특징으로 하는 증강현실을 이용한 제품정보 제공방법.
KR1020070110919A 2007-11-01 2007-11-01 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법 KR100963236B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070110919A KR100963236B1 (ko) 2007-11-01 2007-11-01 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070110919A KR100963236B1 (ko) 2007-11-01 2007-11-01 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법

Publications (2)

Publication Number Publication Date
KR20090044702A true KR20090044702A (ko) 2009-05-07
KR100963236B1 KR100963236B1 (ko) 2010-06-10

Family

ID=40855231

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070110919A KR100963236B1 (ko) 2007-11-01 2007-11-01 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법

Country Status (1)

Country Link
KR (1) KR100963236B1 (ko)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101018781B1 (ko) * 2010-06-08 2011-03-03 주식회사 온미디어 증강 현실을 이용하여 부가 컨텐츠를 제공하는 방법 및 그 시스템
WO2011105671A1 (ko) * 2010-02-25 2011-09-01 연세대학교 산학협력단 증강 현실을 이용한 사용자 설명서 제공 시스템 및 방법
WO2011112471A3 (en) * 2010-03-10 2011-12-29 Microsoft Corporation Augmented reality via a secondary channel
US20120167135A1 (en) * 2010-12-23 2012-06-28 Electronics And Telecommunications Research Institute Broadcast augmented reality advertisement service system and method based on media id matching
WO2012093816A3 (ko) * 2011-01-04 2012-11-08 (주)올라웍스 생성된 이미지에 포함된 객체에 대한 콜렉션을 지원하기 위한 방법, 단말 장치 및 컴퓨터 판독 가능한 기록 매체
KR101274098B1 (ko) * 2012-11-01 2013-06-13 석인수 물리적 특징정보를 활용한 원본 인증 시스템 및 방법
KR101288067B1 (ko) * 2011-11-29 2013-07-30 주식회사 쓰리제이 매장용 제품 정보 제공 장치
KR101316789B1 (ko) * 2010-10-22 2013-10-10 에스케이플래닛 주식회사 증강 현실 컨텐츠 재생 시스템 및 방법
KR20140025787A (ko) * 2012-08-22 2014-03-05 한국전자통신연구원 증강 방송 서비스 제공 장치 및 방법
US8736636B2 (en) 2010-01-29 2014-05-27 Pantech Co., Ltd. Apparatus and method for providing augmented reality information
US8793770B2 (en) 2010-09-02 2014-07-29 Pantech Co., Ltd. Method for authorizing use of augmented reality (AR) information and apparatus
KR20140121764A (ko) * 2012-01-05 2014-10-16 비자 인터네셔널 서비스 어소시에이션 트랜잭션 영상 캡처 장치, 방법 및 시스템
KR101505090B1 (ko) * 2014-05-07 2015-03-25 (주)소프트기획 증강현실 및 사물인터넷에 기반을 둔 스마트 쇼핑 서비스 제공 시스템
KR101716617B1 (ko) * 2016-07-12 2017-03-14 케이티하이텔 주식회사 디지털tv에서 방송 중인 디지털데이터방송의 홈쇼핑 상품에 관한 증강현실 콘텐츠를 스마트단말에 구현하는 방법 및 시스템
US9659385B2 (en) 2010-07-23 2017-05-23 Samsung Electronics Co., Ltd. Method and apparatus for producing and reproducing augmented reality contents in mobile terminal
WO2020262725A1 (ko) * 2019-06-25 2020-12-30 티팟스튜디오 주식회사 딥 러닝을 이용한 3차원 물체 인식에 기초하여 증강 현실 정보를 제공하는 방법 및 이를 이용한 시스템
US11978110B2 (en) 2020-06-29 2024-05-07 Snap Inc. Generating augmented reality content based on user-selected product data

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012033238A1 (ko) * 2010-09-07 2012-03-15 엘지전자 주식회사 이동 단말기 및 그 제어방법
WO2021014410A1 (en) * 2019-07-23 2021-01-28 1904038 Alberta Ltd. O/A Smart Access Methods and systems for providing context based information
KR20230046380A (ko) 2021-09-29 2023-04-06 주식회사 파트너컴퍼니 증강현실을 이용한 마케팅서비스 제공방법

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8736636B2 (en) 2010-01-29 2014-05-27 Pantech Co., Ltd. Apparatus and method for providing augmented reality information
WO2011105671A1 (ko) * 2010-02-25 2011-09-01 연세대학교 산학협력단 증강 현실을 이용한 사용자 설명서 제공 시스템 및 방법
WO2011112471A3 (en) * 2010-03-10 2011-12-29 Microsoft Corporation Augmented reality via a secondary channel
KR101018781B1 (ko) * 2010-06-08 2011-03-03 주식회사 온미디어 증강 현실을 이용하여 부가 컨텐츠를 제공하는 방법 및 그 시스템
US10430976B2 (en) 2010-07-23 2019-10-01 Samsung Electronics Co., Ltd. Method and apparatus for producing and reproducing augmented reality contents in mobile terminal
US11004241B2 (en) 2010-07-23 2021-05-11 Samsung Electronics Co., Ltd. Method and apparatus for producing and reproducing augmented reality contents in mobile terminal
US9659385B2 (en) 2010-07-23 2017-05-23 Samsung Electronics Co., Ltd. Method and apparatus for producing and reproducing augmented reality contents in mobile terminal
US8793770B2 (en) 2010-09-02 2014-07-29 Pantech Co., Ltd. Method for authorizing use of augmented reality (AR) information and apparatus
KR101316789B1 (ko) * 2010-10-22 2013-10-10 에스케이플래닛 주식회사 증강 현실 컨텐츠 재생 시스템 및 방법
US8667528B2 (en) 2010-12-23 2014-03-04 Electronics And Telecommunications Research Institute Broadcast augmented reality advertisement service system and method based on media ID matching
US20120167135A1 (en) * 2010-12-23 2012-06-28 Electronics And Telecommunications Research Institute Broadcast augmented reality advertisement service system and method based on media id matching
WO2012093816A3 (ko) * 2011-01-04 2012-11-08 (주)올라웍스 생성된 이미지에 포함된 객체에 대한 콜렉션을 지원하기 위한 방법, 단말 장치 및 컴퓨터 판독 가능한 기록 매체
KR101288067B1 (ko) * 2011-11-29 2013-07-30 주식회사 쓰리제이 매장용 제품 정보 제공 장치
KR20140121764A (ko) * 2012-01-05 2014-10-16 비자 인터네셔널 서비스 어소시에이션 트랜잭션 영상 캡처 장치, 방법 및 시스템
KR20140025787A (ko) * 2012-08-22 2014-03-05 한국전자통신연구원 증강 방송 서비스 제공 장치 및 방법
US8797357B2 (en) * 2012-08-22 2014-08-05 Electronics And Telecommunications Research Institute Terminal, system and method for providing augmented broadcasting service using augmented scene description data
WO2014069793A1 (ko) * 2012-11-01 2014-05-08 Suk In Soo 물리적 특징정보를 활용한 원본 인증 시스템 및 방법
KR101274098B1 (ko) * 2012-11-01 2013-06-13 석인수 물리적 특징정보를 활용한 원본 인증 시스템 및 방법
KR101505090B1 (ko) * 2014-05-07 2015-03-25 (주)소프트기획 증강현실 및 사물인터넷에 기반을 둔 스마트 쇼핑 서비스 제공 시스템
KR101716617B1 (ko) * 2016-07-12 2017-03-14 케이티하이텔 주식회사 디지털tv에서 방송 중인 디지털데이터방송의 홈쇼핑 상품에 관한 증강현실 콘텐츠를 스마트단말에 구현하는 방법 및 시스템
WO2020262725A1 (ko) * 2019-06-25 2020-12-30 티팟스튜디오 주식회사 딥 러닝을 이용한 3차원 물체 인식에 기초하여 증강 현실 정보를 제공하는 방법 및 이를 이용한 시스템
US11978110B2 (en) 2020-06-29 2024-05-07 Snap Inc. Generating augmented reality content based on user-selected product data

Also Published As

Publication number Publication date
KR100963236B1 (ko) 2010-06-10

Similar Documents

Publication Publication Date Title
KR100963236B1 (ko) 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법
JP6523400B2 (ja) 図形コードを通じてネットワーク情報にアクセスする方法、クライアントデバイス、およびサーバ
US9460462B1 (en) Monetization using video-based simulation of cosmetic products
US20180336734A1 (en) Augmented Reality System, Method, and Apparatus for Displaying an Item Image in a Contextual Environment
CN103369049B (zh) 移动终端和服务器交互方法及其系统
CN105378782B (zh) 基于用户兴趣的产品信息推荐系统
CN105069644A (zh) 基于增强现实的购物客户端、服务器及系统
WO2016033495A2 (en) Methods and arrangements including data migration among computing platforms, e.g., through use of steganographic screen encoding
JP5395920B2 (ja) 検索装置、検索方法、検索プログラム、及びそのプログラムを記憶するコンピュータ読取可能な記録媒体
JP2012043447A (ja) 画像取込及び識別のためのシステム及び方法
WO2013112520A1 (en) System and method for accessing product information for an informed response
JP6120467B1 (ja) サーバ装置、端末装置、情報処理方法、およびプログラム
TWM467132U (zh) 手機圖像辨識行動商務系統
US20230215118A1 (en) Api to provide product cards generated by augmented reality content generators
US20230214913A1 (en) Product cards provided by augmented reality content generators
CN108038760B (zh) 一种基于ar技术的商品展示控制系统
JP6609434B2 (ja) 商品情報提供システム、商品情報提供方法及び管理サーバ
US20080071553A1 (en) Generation of Commercial Presentations
WO2023129996A1 (en) Dynamically presenting augmented reality content generators
KR20110125866A (ko) 증강현실을 통한 정보제공 방법 및 장치
US20210390306A1 (en) Ar system for enhanced book covers and related methods
JP2017228278A (ja) サーバ装置、端末装置、情報処理方法、およびプログラム
JP2008052656A (ja) 顧客情報収集システムおよび顧客情報収集方法
KR20110088643A (ko) 모바일 단말기를 통한 콘텐츠 이용자의 개인정보 수집 시스템 및 그 방법
KR100446247B1 (ko) 물리적으로 판독 가능하며 실물체에 인쇄된 식별 기호를참조하여 가상 물체를 생성하는 방법 및 시스템

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130313

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140519

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150527

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160512

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20170530

Year of fee payment: 8

LAPS Lapse due to unpaid annual fee