KR20190057516A - 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템 - Google Patents

증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템 Download PDF

Info

Publication number
KR20190057516A
KR20190057516A KR1020170154511A KR20170154511A KR20190057516A KR 20190057516 A KR20190057516 A KR 20190057516A KR 1020170154511 A KR1020170154511 A KR 1020170154511A KR 20170154511 A KR20170154511 A KR 20170154511A KR 20190057516 A KR20190057516 A KR 20190057516A
Authority
KR
South Korea
Prior art keywords
model
unit
size
augmented reality
information
Prior art date
Application number
KR1020170154511A
Other languages
English (en)
Inventor
배준
Original Assignee
배준
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 배준 filed Critical 배준
Priority to KR1020170154511A priority Critical patent/KR20190057516A/ko
Publication of KR20190057516A publication Critical patent/KR20190057516A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Strategic Management (AREA)
  • Primary Health Care (AREA)
  • Marketing (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • General Business, Economics & Management (AREA)
  • Evolutionary Computation (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Human Resources & Organizations (AREA)
  • Mathematical Physics (AREA)
  • Economics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 단말기가 접속하여 인증받기 위한 웹페이지를 제공하는 접속인증서버; 상기 접속인증서버에 접속된 단말기를 통해서, 사용자에 대한 다수의 신체 부위 치수를 등록하도록 하는 사이즈등록부; 상기 접속인증서버에 접속된 단말기를 통해서, 사용자를 나타내는 모델을 등록하도록 하는 모델등록부; 상기 모델등록부에 등록된 모델이 상기 단말기에 의해 선택 또는 제공된 패션 아이템을 착용한 상태로 상기 단말기로부터 제공되는 현실의 배경에 디스플레이되도록 처리하는 증강현실처리부; 상기 증강현실처리부에 의해 제공되는 모델이 상기 사이즈등록부에 의해 등록된 사용자의 신체 부위 치수에 상응하는 크기를 가지도록 하는 모델스케일부; 상기 증강현실처리부에 의해 제공되는 패션 아이템이 상기 모델의 크기를 기준으로 실제 치수를 반영하여 축소되도록 하는 아이템사이즈보상부; 및 상기 사용자의 신체 부위 치수, 인적 및 인증에 대한 정보, 상기 패션 아이템에 대한 정보, 그리고 상기 모델에 대한 정보를 저장하는 데이터베이스부;를 포함하도록 한 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템 및 방법에 관한 것이다. 본 발명에 따르면, 원하는 패션아이템의 선택이 용이하도록 할 수 있고, 정해진 큐알코드 등의 스캔 절차를 필요로 하지 않도록 함으로써, 이러한 절차의 수행에 따른 불편함을 해소할 수 있다.

Description

증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템 및 방법{Artificial intelligence total fashion styling system and method using augmented reality}
본 발명은 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템 및 방법에 관한 것으로서, 보다 상세하게는 원하는 패션 아이템의 선택이 용이하고, 정해진 큐알코드 등의 스캔 절차를 필요로 하지 않도록 함으로써, 이러한 절차의 수행에 따른 불편함을 해소하며, 패션 아이템의 사이즈에 대해서도 스타일링이 가능할 뿐만 아니라, 패션 아이템의 착용에 대한 3D 및 다양한 방향에서의 디스플레이를 제공하는 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템 및 방법에 관한 것이다.
최근에는 외모에 대한 관심이 증가하면서 자신의 표현을 위한 패션 아이템에 대한 구입에 있어서 많은 시간을 할애하게 되는데, 바쁜 생활 속에서 이러한 패션 아이템의 구입을 위해 일일이 매장을 방문함으로써 발생되는 불편을 해소함과 아울러, 이에 소요되는 시간을 줄일 필요가 있다.
이러한 필요성에 의해 개발된 종래 기술로서, 한국공개특허 제10-2016-0067373호의 "아바타를 이용한 신변제품 착용 스타일 정보 제공 시스템 및 그 운용방법"이 제시된 바 있는데, 이는 신변제품의 큐알코드를 스캔하고 3 차원 아바타에 의하여 선택된 3 차원 이미지 신변제품이 착용된 상태를 멀티미디어에 의한 증강현실 콘텐츠로 확인하는 스마트단말기; 상기 스마트단말기와 통신망을 경유하여 접속하며 상기 스마트단말기 터치표시부의 해상도가 포함된 규격, 상기 통신망을 경유하여 상기 스마트 단말기와 송수신되는 데이터 전송속도 정보를 수집 관리하며 상기 통신망이 데이터를 전달하는 스트리밍 다운로드 비트레이트를 결정하고 시스템 전체 운용을 제어와 관리하는 통합서비스 서버; 상기 통합서비스서버에 접속하며 상기 스마트단말기가 스캔한 큐알코드 정보를 입력하고 상기 큐알코드 정보에 대응하는 신변제품의 모델별 사이즈, 색상, 재질, 생산자, 공장위치, 제조일자가 포함된 의류상세정보를 검색 제공하며 선택된 신변제품의 3 차원이미지를 제공하는 신변제품 상세정보 서버; 및 상기 통합서비스서버에 접속하며 상기 스마트단말기로부터 입력된 신체 각 부위의 실제 사이즈 정보를 이용하여 실물 크기에 대응하는 3 차원 아바타를 생성하고 관리하는 3차원 아바타 서버;를 포함한다.
그러나, 이와 같은 종래 기술은 제품의 선택에 어려움이 따를 뿐만 아니라, 큐알코드의 스캔을 요구함으로써 그 사용에 제한이 따르는 문제점을 가지고 있었다. 또한 이러한 종래 기술은 제품의 사이즈에 대한 스타일링을 제공하지 못하는 문제점을 가지고 있었다. 따라서, 매장에서 같은 스타일링을 제공하는데 한계를 가지고 있었다.
상기한 바와 같은 종래 기술의 문제점을 해결하기 위하여, 본 발명은 원하는 패션 아이템의 선택이 용이하고, 정해진 큐알코드 등의 스캔 절차를 필요로 하지 않도록 함으로써, 이러한 절차의 수행에 따른 불편함을 해소하며, 패션 아이템의 사이즈에 대해서도 스타일링이 가능할 뿐만 아니라, 패션 아이템의 착용에 대한 3D 및 다양한 방향에서의 디스플레이를 제공하고, 나아가서 사용자의 신체 사이즈를 반영한 사용자 모델에 대한 패션 아이템의 사이즈 보상을 통해서 패션 아이템에 대한 스타일링에 대한 만족도를 높이도록 하며, 이로 인해 패션 아이템의 구매 판단에 대해 크게 도움을 주는데 목적이 있다.
본 발명의 다른 목적들은 이하의 실시례에 대한 설명을 통해 쉽게 이해될 수 있을 것이다.
상기한 바와 같은 목적을 달성하기 위해, 본 발명의 일측면에 따르면, 단말기가 접속하여 인증받기 위한 웹페이지를 제공하는 접속인증서버; 상기 접속인증서버에 접속된 단말기를 통해서, 사용자에 대한 다수의 신체 부위 치수를 등록하도록 하는 사이즈등록부; 상기 접속인증서버에 접속된 단말기를 통해서, 사용자를 나타내는 모델을 등록하도록 하는 모델등록부; 상기 모델등록부에 등록된 모델이 상기 단말기에 의해 선택 또는 제공된 패션 아이템을 착용한 상태로 상기 단말기로부터 제공되는 현실의 배경에 디스플레이되도록 처리하는 증강현실처리부; 상기 증강현실처리부에 의해 제공되는 모델이 상기 사이즈등록부에 의해 등록된 사용자의 신체 부위 치수에 상응하는 크기를 가지도록 하는 모델스케일부; 상기 증강현실처리부에 의해 제공되는 패션 아이템이 상기 모델의 크기를 기준으로 실제 치수를 반영하여 축소되도록 하는 아이템사이즈보상부; 및 상기 사용자의 신체 부위 치수, 인적 및 인증에 대한 정보, 상기 패션 아이템에 대한 정보, 그리고 상기 모델에 대한 정보를 저장하는 데이터베이스부;를 포함하는, 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템이 제공된다.
상기 아이템사이즈보상부는, 상기 패션 아이템에 대한 다수의 사이즈 각각에 대한 치수 정보와 상기 사용자의 신체 부위 치수 정보를 상기 데이터베이스부로부터 각각 획득하여, 상기 사용자가 착용 가능한 상기 패션 아이템에 대한 각각의 사이즈를 상기 단말기에 제시하고, 상기 패션 아이템이 상기 단말기를 통해서 선택한 사이즈의 실제 치수를 반영하여 상기 모델의 크기를 기준으로 축소되도록 할 수 있다.
상기 단말기에 의해 상기 모델등록부에 제공되는 사용자의 실제 얼굴에 대한 3D 정보를 추출하는 얼굴3D변환부; 및 상기 데이터베이스부로부터 상기 패션 아이템의 3D 정보를 제공받아, 상기 패션 아이템의 방향 및 형상을 변화시키는 아이템형상변화부;를 더 포함하고, 상기 증강현실처리부는, 상기 얼굴3D변환부로부터 상기 모델에 대해서 얼굴에 대한 3D 정보를 제공받음과 아울러 상기 데이터베이스부로부터 상기 모델에서 얼굴을 제외한 신체에 대한 3D 정보를 제공받고, 상기 단말기의 조작신호에 따라 상기 모델의 동작 및 방향을 변화시키도록 제어하며, 상기 모델의 동작에 따른 골격과 방향 변화에 상응하도록 상기 아이템형상변화부가 상기 패션 아이템의 형상 및 방향을 변화시키도록 제어할 수 있다.
상기 단말기의 조작에 의해 가장 빈도수가 높거나, 빈도수가 동일한 경우 많은 시간을 할애하는 상기 모델의 자세 정보를 상기 데이터베이스부에 저장되도록 하고, 상기 단말기를 통해 상기 모델에 대한 자세 추천을 요청시, 상기 증강현실처리부가 상기 데이터베이스부에 저장된 자세 정보에 상응하도록 상기 모델의 동작 및 방향을 제시하도록 하는 AI추천자세산출부를 더 포함할 수 있다.
본 발명의 다른 측면에 따르면, 단말기가 접속인증서버에 의해 제공되는 웹페이지에 접속하여 인증받도록 하고, 사이즈등록부에 의해 사용자에 대한 다수의 신체 부위 치수를 등록하도록 하며, 모델등록부에 의해 사용자를 나타내는 모델을 등록하도록 하는 등록단계; 증강현실처리부에 의해 제공되기 위한 모델이 상기 사이즈등록부에 의해 등록된 사용자의 신체 부위 치수에 상응하는 크기를 가지도록 모델스케일부에 의해 처리하고, 상기 증강현실처리부에 의해 상기 모델이 착용하기 위한 패션 아이템이 상기 모델의 크기를 기준으로 실제 치수를 반영하여 축소되도록 아이템사이즈보상부에 의해 처리하는 보상단계; 및 상기 모델등록부에 등록되어 상기 모델스케일부에 의해 크기가 조절된 모델이 상기 단말기에 의해 선택 또는 제공되어 상기 아이템사이즈보상부에 의해 축소된 패션 아이템을 착용한 상태로 상기 단말기로부터 제공되는 현실의 배경에 디스플레이되도록 상기 증강현실처리부에 의해 처리하는 증강현실 처리단계;를 포함하는, 증강현실을 이용한 인공지능형 토탈패션 스타일링 방법이 제공된다.
상기 보상단계는, 상기 아이템사이즈보상부에 의해, 상기 패션 아이템에 대한 다수의 사이즈 각각에 대한 치수 정보와 상기 사용자의 신체 부위 치수 정보를 상기 데이터베이스부로부터 각각 획득하여, 상기 사용자가 착용 가능한 상기 패션 아이템에 대한 각각의 사이즈를 상기 단말기에 제시하고, 상기 패션 아이템이 상기 단말기를 통해서 선택한 사이즈의 실제 치수를 반영하여 상기 모델의 크기를 기준으로 축소되도록 할 수 있다.
상기 증강현실 처리단계는, 상기 단말기에 의해 상기 모델등록부에 제공되는 사용자의 실제 얼굴에 대한 3D 정보를 얼굴3D변환부에 의해 추출하도록 하고, 아이템형상변환부가 데이터베이스부로부터 상기 패션 아이템의 3D 정보를 제공받아, 상기 패션 아이템의 방향 및 형상을 변화시키도록 하되, 상기 증강현실처리부에 의해서, 상기 얼굴3D변환부로부터 상기 모델에 대해서 얼굴에 대한 3D 정보를 제공받음과 아울러 상기 데이터베이스부로부터 상기 모델에서 얼굴을 제외한 신체에 대한 3D 정보를 제공받고, 상기 단말기의 조작신호에 따라 상기 모델의 동작 및 방향을 변화시키도록 제어하며, 상기 모델의 동작에 따른 골격과 방향 변화에 상응하도록 상기 아이템형상변화부가 상기 패션 아이템의 형상 및 방향을 변화시키도록 제어할 수 있다.
상기 증강현실 처리단계는, AI추천자세산출부에 의해서, 상기 단말기의 조작에 의해 가장 빈도수가 높거나, 빈도수가 동일한 경우 많은 시간을 할애하는 상기 모델의 자세 정보를 상기 데이터베이스부에 저장되도록 하고, 상기 단말기를 통해 상기 모델에 대한 자세 추천을 요청시, 상기 증강현실처리부가 상기 데이터베이스부에 저장된 자세 정보에 상응하도록 상기 모델의 동작 및 방향을 제시하도록 할 수 있다.
본 발명에 따른 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템 및 방법에 의하면, 원하는 패션 아이템의 선택이 용이하도록 할 수 있고, 정해진 큐알코드 등의 스캔 절차를 필요로 하지 않도록 함으로써, 이러한 절차의 수행에 따른 불편함을 해소할 수 있으며, 패션 아이템의 사이즈에 대해서도 스타일링이 가능할 뿐만 아니라, 패션 아이템의 착용에 대한 3D 및 다양한 방향에서의 디스플레이를 제공할 수 있고, 나아가서 사용자의 신체 사이즈를 반영한 사용자 모델에 대한 패션 아이템의 사이즈 보상을 통해서 패션 아이템에 대한 스타일링에 대한 만족도를 높이도록 할 수 있으며, 이로 인해 패션 아이템의 구매 판단에 대해 크게 도움을 줄 수 있다.
도 1은 본 발명의 일 실시례에 따른 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템을 도시한 구성도이다.
도 2는 본 발명의 일 실시례에 따른 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템에서 스케일링을 설명하기 위한 도면이다.
도 3은 본 발명의 다른 실시례에 따른 증강현실을 이용한 인공지능형 토탈패션 스타일링 방법을 설명하기 위한 흐름도이다.
본 발명은 다양한 변경을 가할 수 있고, 여러 가지 실시례를 가질 수 있는 바, 특정 실시례들을 도면에 예시하고, 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니고, 본 발명의 기술 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 식으로 이해되어야 하고, 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 하기 실시례에 한정되는 것은 아니다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 실시례를 상세히 설명하며, 도면 부호에 관계없이 동일하거나 대응하는 구성요소에 대해서는 동일한 참조 번호를 부여하고, 이에 대해 중복되는 설명을 생략하기로 한다.
도 1은 본 발명의 일 실시례에 따른 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템을 도시한 구성도이다.
도 1을 참조하면, 본 발명의 일 실시례에 따른 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템(100)은 접속인증서버(101), 사이즈등록부(102), 모델등록부(103), 증강현실처리부(104), 모델스케일부(105), 아이템사이즈보상부(106) 및 데이터베이스부(110)를 포함할 수 있다.
접속인증서버(101)는 단말기(200)가 접속하여 인증받기 위한 웹페이지를 제공하도록 하는데, 단말기(200)가 Wi-Fi, 3G, LTE 등의 무선 통신망을 통해서 접속하도록 하고, 아이디 및 패스워드의 입력이나, 문자, 메일, 인증서 또는 신용카드 등의 다양한 인증 방법을 통해서, 본인 인증 절차를 거쳐서 정해진 사용자만의 접속을 허용할 수 있고, 1회의 인증을 통해서 해당 단말기(200)에 대한 이후의 인증 절차를 생략할 수도 있다. 접속인증서버(101)는 단말기(200)가 접속시 정해진 정보의 입력이나 본인 사진 등의 업로드 등을 요구할 수도 있다. 여기서, 단말기(200)는 애플리케이션이나 프로그램의 실행에 의해 본 발명에서 요구되는 다양한 프로세스의 수행을 가능하도록 할 뿐만 아니라, 무선 통신 등의 수행을 가능하도록 하는 스마트폰, 태블릿PC, PC, 노트북 등과 같은 다양한 정보처리 및 통신 기기가 사용될 수 있다.
사이즈등록부(102)는 접속인증서버(101)에 접속된 단말기(200)의 입력부 입력를 통해서, 사용자에 대한 다수의 신체 부위 치수를 등록하도록 한다. 여기서, 신체 부위 치수는 키, 몸무게, 가슴둘레, 허리둘레, 엉덩이둘레, 인심길이, 발길이, 손목둘레, 손가락길이 또는 그 밖의 다양한 신체 부위에 대한 치수일 수 있으며, 이들 중에서 일부 또는 전부가 해당될 수 있다.
모델등록부(103)는 접속인증서버(101)에 접속된 단말기(200)를 통해서, 증강 현실에서 사용자를 나타내는 모델을 등록하도록 하는데, 여기서, 모델은 전체가 애니메이션 형태를 가지거나, 애니메이션 형태에서 얼굴만을 사용자가 단말기(200)를 통해 업로드한 실제 사진이 사용될 수 있으며, 이 밖에도 다양한 형식이 사용될 수 있다.
증강현실처리부(104)는 모델등록부(103)에 등록된 모델이 단말기(200)의 입력부나 카메라 등에 의해 선택 또는 제공된 패션 아이템을 착용한 상태로 단말기(200)의 카메라로부터 제공되는 현실의 배경에 단말기(200)의 디스플레이부를 통해서 디스플레이되도록 처리할 수 있다. 여기서, 증강 현실 처리된 화면은 직접 단말기(200)의 디스플레이부를 통해서 볼 수 있거나, 단말기(200)에 연결된 HMD(Head Mounted Display; 210)나 별도의 모니터 등을 통해 볼 수도 있다. 또한 패션 아이템은 예컨대, 상의, 하의를 비롯한 의류 뿐만 아니라, 모자, 양말, 장갑, 머플러 등의 다양한 의류 소품 뿐만 아니라, 운동화, 구두 등의 다양한 신발류가 해당될 수 있다. 이러한 패션 아이템은 단말기(200)에 의해 정보전달매체(10)를 통해서 선택되어질 수 있는데, 정보전달매체(10)로는 카다록(11)에 마련된 패션아이템정보(11a), 전단지(12)에 마련된 패션아이템정보(12a), 디스플레이장치의 홈페이지나 기타 화면(13)에 마련된 패션아이템정보(13a) 또는 단말기 화면(14)에 문자 메시지나 메일 등에 포함된 패션아이템정보(14a)로서, 이러한 패션아이템정보(11a,12a,13a,14a)를 단말기(200)의 카메라로 촬영하거나, 입력부에 의한 선택 신호의 입력으로 해당 패션 아이템을 선택할 수 있으며, 그 밖에도 다양한 방식에 의해 패션 아이템을 선택하도록 할 수 있다. 따라서, 이러한 패션 아이템의 선택에 의해 발생되는 정보를 증강현실처리부(104)나 후술하게 될 아이템사이즈보상부(106)가 수신받아 데이터베이스부(110)에 저장된 정보와 매칭하여 증강 현실 처리나 그 밖의 프로세스에 필요한 정보를 데이터베이스부(110)로부터 제공받을 수 있다.
모델스케일부(105)는 증강현실처리부(104)에 의해 제공되는 모델이 사이즈등록부(102)에 의해 등록된 사용자의 신체 부위 치수에 상응하는 크기를 가지도록 한다. 즉 증강현실처리부(104)에 의해 증강 현실에 나타나는 모델은 사이즈등록부(102)에 의해 등록된 사용자의 신체 부위 치수에 상응하여 대응되는 신체 부위가 비례적으로 나타내도록 함으로써, 사용자의 실체 신체에 동일 내지 유사한 신체 비율을 가지도록 할 수 있다.
아이템사이즈보상부(106)는 증강현실처리부(104)에 의해 제공되는 패션 아이템이 모델의 크기를 기준으로 실제 치수를 반영하여 축소되도록 한다. 즉, 증강현실처리부(104)에 의해 증강 현실에 나타내는 패션 아이템은 데이터베이스부(110)에 저장된 실제 치수를 가지고서 실제 사용자에 착용시 피팅감을 알 수 있도록 사용자가 모델로 축소될 비율로 축소되도록 하는데, 이를 위해 사용자가 디스플레이시 모델로 축소되는 비율로 패션 아이템 역시 동일 비율로 축소되도록 한다. 한편, 아이템사이즈보상부(106)는 도 2에서와 같이, 모델(1)의 키를 기준으로 패션 아이템(2)의 상하 높이를 실제 치수 비율로 축소할 수 있는데, 이에 한하지 않고, 모델(1)의 가슴둘레를 비롯하여 다양한 신체 부위를 기준으로 패션 아이템(2)의 실제 치수 비율의 축소를 가능하도록 할 수 있다.
아이템사이즈보상부(106)는 패션 아이템에 대한 다수의 사이즈 각각에 대한 치수 정보와 사용자의 신체 부위 치수 정보를 데이터베이스부(110)로부터 각각 획득하여, 사용자가 착용 가능한 패션 아이템에 대한 각각의 사이즈를 단말기(200)의 디스플레이부에 제시하고, 패션 아이템이 단말기(200)의 입력부를 통해서 선택한 사이즈의 실제 치수를 반영하여 모델의 크기를 기준으로 축소되도록 할 수 있다. 여기서, 착용 가능성을 가진 사이즈는 사용자의 신체 부위 치수를 기준으로 일정 비율의 치수 범위 내에 해당하는 패션 아이템의 사이즈를 의미할 수 있다. 패션 아이템에 대한 각각의 사이즈는 패션 아이템의 종류에 따라 상이하나, 예를 들면 패션 아이템이 의류인 경우, S사이즈, M사이즈, L사이즈, XL사이즈로 나타내거나, 90사이즈, 95사이즈, 100 사이즈, 105 사이즈 등으로 나타낼 수 있고, 신발인 경우, 240사이즈, 250사이즈, 260사이즈, 270사이즈, 280사이즈, 290사이즈 등으로 나타낼 수 있다.
데이터베이스부(110)는 사용자의 신체 부위 치수, 인적 및 인증에 대한 정보, 패션 아이템에 대한 정보, 그리고 모델에 대한 정보를 저장하고, 나아가서, 동작에 필요한 각종 데이터나 프로그램 등을 저장하도록 할 수 있다. 여기서 데이터베이스부(110)는 예컨대, 사용자의 신체 부위 치수, 사용자의 인적 사항, 사용자의 인증을 위한 정보를 비롯하여 사용자가 고객으로서 사용 내지 요구되는 각종 정보를 저장하는 고객정보데이터베이스부(111)와, 다양한 종류의 패션 아이템 각각에 대한 3D 형상 이미지, 실제 치수 등을 비롯한 각종 정보를 저장하는 아이템데이터베이스부(112)와, 다양한 종류의 모델 각각에 대한 3D 형상 이미지, 사용자가 지정한 모델의 얼굴 3D 이미지, 사용자의 신체에 비례하여 축소된 모델 등을 비롯한 각종 정보를 저장하는 모델정보데이터베이스부(113)를 포함할 수 있다.
본 발명의 일 실시례에 따른 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템(100)은 단말기(200)의 입력부나 메모리부에 의해 모델등록부(103)에 제공되는 사용자의 실제 얼굴에 대한 3D 정보를 추출하는 얼굴3D변환부(108)와, 데이터베이스부(110)로부터 패션 아이템의 3D 정보를 제공받아, 패션 아이템의 방향 및 형상을 변화시키는 아이템형상변화부(107)를 더 포함할 수 있다.
얼굴3D변환부(108)는 단말기(200)의 카메라로부터 획득하거나 미리 메모리부에 저장된 사용자의 얼굴 이미지의 명암 정보에 대한 통계적 특징정보를 기반으로 부위별로 3차원적인 높이 등 정보를 추출하고, 추출한 특징점을 기반으로 얼굴의 3D 형상 데이타를 복원할 수 있다. 2D 영상 데이터를 이용하여 3D 방향 전환이 가능한 입체적 형상 추출이 가능한 3차원 데이타를 추출하는 과정은 위에서 언급한 명암이나 명도 내지 채도를 이용하고, 이들의 변화에 따른 차이를 이용하여 3차원적인 높이값을 얻어내는 방법이 있다. 즉, 한 예로 명암값이 커질수록 상대적인 깊이 내지 높이값도 커지도록 하는 것이다. 이는 예시로서, 그 밖에 2차원 데이타를 이용하여 3차원 데이타(깊이 내지 높이)를 획득하기 위한 다양한 방법들이 존재하고 있으며, 이러한 알려진 방법들을 활용할 수 있음은 물론이다.
아이템형상변화부(107)는 패션 아이템이 모델의 착용 부위에 덮히도록 하되, 모델의 방향이나 동작에 따른 모델의 골격 프레임의 변화나 방향 전환에 따라, 패션 아이템에서 모델에서 변화되는 골격 프레임에 대응되는 부분 역시 골격 프레임과 상응하도록 변형되도록 하고, 모델의 방향 각도에 상응하도록 패션 아이템의 방향 전환이 이루어지도록 함으로써, 모델의 자세 변화에 상응하여 패션 아이템이 착용된 상태로 자연스럽게 변형되도록 하여, 모델과 패션 아이템의 일체화가 뛰어나도록 하고, 이로 인해 시뮬레이션시 동작의 신뢰성을 높이도록 할 수 있다.
증강현실처리부(104)는 얼굴3D변환부(108)로부터 모델에 대해서 얼굴에 대한 3D 정보를 제공받음과 아울러, 데이터베이스부(110)로부터 모델에서 얼굴을 제외한 신체에 대한 3D 정보를 제공받고, 단말기(200)의 입력부 조작신호에 따라 모델의 동작 및 방향을 변화시키도록 제어하며, 모델의 동작에 따른 골격과 방향 변화에 상응하도록 아이템형상변화부(107)가 패션 아이템의 형상 및 방향을 변화시키도록 제어할 수 있다.
본 발명의 일 실시례에 따른 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템(100)은 AI추천자세산출부(109)를 더 포함할 수 있다. AI추천자세산출부(109)는 단말기(200)의 입력부 조작에 의해 가장 빈도수가 높거나, 빈도수가 동일한 경우 많은 시간을 할애하는 모델의 자세 정보를 데이터베이스부(110)에 저장되도록 하고, 단말기(200)의 입력부를 통해 모델에 대한 자세 추천을 요청시, 증강현실처리부(104)가 데이터베이스부(110)에 저장된 자세 정보에 상응하도록 모델의 동작 및 방향을 제시하도록 한다. 따라서, AI추천자세산출부(109)는 단말기(200)의 입력부 조작에 의해 사용자가 모델의 특정 자세를 가지도록 하는 것을 횟수와 시간을 각각 카운트하되, 1차적으로 횟수와 2차적으로 시간을 고려하여, 특정 자세가 많을수록 사용자의 맘에 드는 것으로 판단하여, 이후 사용자가 자세 추천을 단말기(200)의 입력부를 통해서 요청하면, 증강현실처리부(104)가 모델이 해당 자세를 가지도록 그의 동작 및 바라보는 방향을 조절하도록 한다.
도 3은 본 발명의 다른 실시례에 따른 증강현실을 이용한 인공지능형 토탈패션 스타일링 방법을 설명하기 위한 흐름도이다.
도 3을 참조하면, 본 발명의 다른 실시례에 따른 증강현실을 이용한 인공지능형 토탈패션 스타일링 방법은 등록단계(S11~S13), 보상단계(S14~S16) 및 증강현실 처리단계(S17~S19)를 포함할 수 있다.
등록단계(S11~S13)는 단말기(200)가 무선통신으로 접속인증서버(101)에 의해 제공되는 웹페이지에 접속하여 인증받도록 하고(S11), 사이즈등록부(102)에 의해 사용자에 대한 다수의 신체 부위 치수를 등록하도록 하며(S12), 모델등록부(103)에 의해 사용자를 나타내는 모델을 등록하도록 한다(S13).
보상단계(S14~S16)는 증강현실처리부(104)에 의해 제공되기 위한 모델이 사이즈등록부(102)에 의해 등록된 사용자의 신체 부위 치수에 상응하는 크기를 가지도록 모델스케일부(105)에 의해 처리하고(S14), 증강현실처리부(104)에 의해 모델이 착용하기 위한 패션 아이템이 모델의 크기를 기준으로 실제 치수를 반영하여 축소되도록 아이템사이즈보상부(106)에 의해 처리한다(S15). 또한 보상단계(S14~S16)는 아이템사이즈보상부(106)에 의해, 패션 아이템에 대한 다수의 사이즈 각각에 대한 치수 정보와 사용자의 신체 부위 치수 정보를 데이터베이스부(110)로부터 각각 획득하여, 사용자가 착용 가능한 패션 아이템에 대한 각각의 사이즈를 단말기(200)의 디스플레이부에 제시하고, 패션 아이템이 단말기(200)의 입력부를 통해서 선택한 사이즈의 실제 치수를 반영하여 모델의 크기를 기준으로 축소되도록 할 수 있다(S16).
증강현실 처리단계(S17~S19)는 모델등록부(103)에 등록되어 모델스케일부(105)에 의해 크기가 조절된 모델이 단말기(200)의 입력부나 메모리부 또는 카메라 등에 의해 선택 또는 제공되어 아이템사이즈보상부(106)에 의해 축소된 패션 아이템을 착용한 상태로 단말기(200)의 카메라로부터 제공되는 현실의 배경에 단말기(200)의 디스플레이부를 통해서 디스플레이되도록 증강현실처리부(104)에 의해 처리한다(S17).
증강현실 처리단계(S17~S19)는 단말기(200)의 카메라나 메모리부에 의해 모델등록부(103)에 제공되는 사용자의 실제 얼굴에 대한 3D 정보를 얼굴3D변환부(108)에 의해 추출하도록 하고, 아이템형상변화부(107)가 데이터베이스부(110)로부터 패션 아이템의 3D 정보를 제공받아, 패션 아이템의 방향 및 형상을 변화시키도록 하되, 증강현실처리부(104)에 의해서, 얼굴3D변환부(108)로부터 모델에 대해서 얼굴에 대한 3D 정보를 제공받음과 아울러 데이터베이스부(110)로부터 모델에서 얼굴을 제외한 신체에 대한 3D 정보를 제공받고, 단말기(200)의 입력부 조작신호에 따라 모델의 동작 및 방향을 변화시키도록 제어하며, 모델의 동작에 따른 골격과 방향 변화에 상응하도록 아이템형상변화부(107)가 패션 아이템의 형상 및 방향을 변화시키도록 제어하는 단계(S18)를 더 포함할 수 있다.
증강현실 처리단계(S17~S19)는 AI추천자세산출부(109)에 의해서, 단말기(200)의 입력부 조작에 의해 가장 빈도수가 높거나, 빈도수가 동일한 경우 많은 시간을 할애하는 모델의 자세 정보를 데이터베이스부(110)에 저장되도록 하고, 단말기(200)의 입력부를 통해 모델에 대한 자세 추천을 요청시, 증강현실처리부(104)가 데이터베이스부(110)에 저장된 자세 정보에 상응하도록 모델의 동작 및 방향을 제시하도록 하는 단계(S19)를 더 포함할 수 있다.
이와 같은 본 발명에 따른 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템 및 방법에 따르면, 원하는 패션아이템의 선택이 용이하도록 할 수 있고, 정해진 큐알코드 등의 스캔 절차를 필요로 하지 않도록 함으로써, 이러한 절차의 수행에 따른 불편함을 해소할 수 있으며, 패션아이템의 사이즈에 대해서도 스타일링이 가능할 뿐만 아니라, 패션아이템의 착용에 대한 3D 및 다양한 방향에서의 디스플레이를 제공할 수 있다.
또한 본 발명은 나아가서, 사용자의 신체 사이즈를 반영한 사용자 모델에 대한 패션아이템의 사이즈 보상을 통해서 패션아이템에 대한 스타일링에 대한 만족도를 높이도록 할 수 있으며, 이로 인해 패션아이템의 구매 판단에 대해 크게 도움을 줄 수 있다.
이와 같이 본 발명에 대해서 첨부된 도면을 참조하여 설명하였으나, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 수정 및 변형이 이루어질 수 있음은 물론이다. 그러므로, 본 발명의 범위는 설명된 실시례에 한정되어서는 아니되며, 후술하는 특허청구범위뿐만 아니라 이러한 특허청구범위와 균등한 것들에 의해 정해져야 한다.
10 : 정보전달매체 11 : 카다록
11a : 패션아이템정보 12 : 전단지
12a : 패션아이템정보 13 : 홈페이지화면
13a : 패션아이템정보 14 : 메시지
14a : 패션아이템정보 101 : 접속인증서버
102 : 사이즈등록부 103 : 모델등록부
104 : 증강현실처리부 105 : 모델스케일부
106 : 아이템사이즈보상부 107 : 아이템형상변화부
108 : 얼굴3D변환부 109 : AI추천자세산출부
110 : 데이터베이스부 111 : 고객정보데이터베이스부
112 : 아이템데이터베이스부 113 : 모델정보데이터베이스부
200 : 단말기 210 : HMD

Claims (8)

  1. 단말기가 접속하여 인증받기 위한 웹페이지를 제공하는 접속인증서버;
    상기 접속인증서버에 접속된 단말기를 통해서, 사용자에 대한 다수의 신체 부위 치수를 등록하도록 하는 사이즈등록부;
    상기 접속인증서버에 접속된 단말기를 통해서, 사용자를 나타내는 모델을 등록하도록 하는 모델등록부;
    상기 모델등록부에 등록된 모델이 상기 단말기에 의해 선택 또는 제공된 패션 아이템을 착용한 상태로 상기 단말기로부터 제공되는 현실의 배경에 디스플레이되도록 처리하는 증강현실처리부;
    상기 증강현실처리부에 의해 제공되는 모델이 상기 사이즈등록부에 의해 등록된 사용자의 신체 부위 치수에 상응하는 크기를 가지도록 하는 모델스케일부;
    상기 증강현실처리부에 의해 제공되는 패션 아이템이 상기 모델의 크기를 기준으로 실제 치수를 반영하여 축소되도록 하는 아이템사이즈보상부; 및
    상기 사용자의 신체 부위 치수, 인적 및 인증에 대한 정보, 상기 패션 아이템에 대한 정보, 그리고 상기 모델에 대한 정보를 저장하는 데이터베이스부;
    를 포함하는, 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템.
  2. 청구항 1에 있어서,
    상기 아이템사이즈보상부는,
    상기 패션 아이템에 대한 다수의 사이즈 각각에 대한 치수 정보와 상기 사용자의 신체 부위 치수 정보를 상기 데이터베이스부로부터 각각 획득하여, 상기 사용자가 착용 가능한 상기 패션 아이템에 대한 각각의 사이즈를 상기 단말기에 제시하고, 상기 패션 아이템이 상기 단말기를 통해서 선택한 사이즈의 실제 치수를 반영하여 상기 모델의 크기를 기준으로 축소되도록 하는, 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템.
  3. 청구항 1 또는 청구항 2에 있어서,
    상기 단말기에 의해 상기 모델등록부에 제공되는 사용자의 실제 얼굴에 대한 3D 정보를 추출하는 얼굴3D변환부; 및
    상기 데이터베이스부로부터 상기 패션 아이템의 3D 정보를 제공받아, 상기 패션 아이템의 방향 및 형상을 변화시키는 아이템형상변화부;를 더 포함하고,
    상기 증강현실처리부는,
    상기 얼굴3D변환부로부터 상기 모델에 대해서 얼굴에 대한 3D 정보를 제공받음과 아울러 상기 데이터베이스부로부터 상기 모델에서 얼굴을 제외한 신체에 대한 3D 정보를 제공받고, 상기 단말기의 조작신호에 따라 상기 모델의 동작 및 방향을 변화시키도록 제어하며, 상기 모델의 동작에 따른 골격과 방향 변화에 상응하도록 상기 아이템형상변화부가 상기 패션 아이템의 형상 및 방향을 변화시키도록 제어하는, 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템.
  4. 청구항 1 또는 청구항 2에 있어서,
    상기 단말기의 조작에 의해 가장 빈도수가 높거나, 빈도수가 동일한 경우 많은 시간을 할애하는 상기 모델의 자세 정보를 상기 데이터베이스부에 저장되도록 하고, 상기 단말기를 통해 상기 모델에 대한 자세 추천을 요청시, 상기 증강현실처리부가 상기 데이터베이스부에 저장된 자세 정보에 상응하도록 상기 모델의 동작 및 방향을 제시하도록 하는 AI추천자세산출부를 더 포함하는, 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템.
  5. 단말기가 접속인증서버에 의해 제공되는 웹페이지에 접속하여 인증받도록 하고, 사이즈등록부에 의해 사용자에 대한 다수의 신체 부위 치수를 등록하도록 하며, 모델등록부에 의해 사용자를 나타내는 모델을 등록하도록 하는 등록단계;
    증강현실처리부에 의해 제공되기 위한 모델이 상기 사이즈등록부에 의해 등록된 사용자의 신체 부위 치수에 상응하는 크기를 가지도록 모델스케일부에 의해 처리하고, 상기 증강현실처리부에 의해 상기 모델이 착용하기 위한 패션 아이템이 상기 모델의 크기를 기준으로 실제 치수를 반영하여 축소되도록 아이템사이즈보상부에 의해 처리하는 보상단계; 및
    상기 모델등록부에 등록되어 상기 모델스케일부에 의해 크기가 조절된 모델이 상기 단말기에 의해 선택 또는 제공되어 상기 아이템사이즈보상부에 의해 축소된 패션 아이템을 착용한 상태로 상기 단말기로부터 제공되는 현실의 배경에 디스플레이되도록 상기 증강현실처리부에 의해 처리하는 증강현실 처리단계;
    를 포함하는, 증강현실을 이용한 인공지능형 토탈패션 스타일링 방법.
  6. 청구항 5에 있어서,
    상기 보상단계는,
    상기 아이템사이즈보상부에 의해, 상기 패션 아이템에 대한 다수의 사이즈 각각에 대한 치수 정보와 상기 사용자의 신체 부위 치수 정보를 상기 데이터베이스부로부터 각각 획득하여, 상기 사용자가 착용 가능한 상기 패션 아이템에 대한 각각의 사이즈를 상기 단말기에 제시하고, 상기 패션 아이템이 상기 단말기를 통해서 선택한 사이즈의 실제 치수를 반영하여 상기 모델의 크기를 기준으로 축소되도록 하는, 증강현실을 이용한 인공지능형 토탈패션 스타일링 방법.
  7. 청구항 5 또는 청구항 6에 있어서,
    상기 증강현실 처리단계는,
    상기 단말기에 의해 상기 모델등록부에 제공되는 사용자의 실제 얼굴에 대한 3D 정보를 얼굴3D변환부에 의해 추출하도록 하고, 아이템형상변환부가 데이터베이스부로부터 상기 패션 아이템의 3D 정보를 제공받아, 상기 패션 아이템의 방향 및 형상을 변화시키도록 하되, 상기 증강현실처리부에 의해서, 상기 얼굴3D변환부로부터 상기 모델에 대해서 얼굴에 대한 3D 정보를 제공받음과 아울러 상기 데이터베이스부로부터 상기 모델에서 얼굴을 제외한 신체에 대한 3D 정보를 제공받고, 상기 단말기의 조작신호에 따라 상기 모델의 동작 및 방향을 변화시키도록 제어하며, 상기 모델의 동작에 따른 골격과 방향 변화에 상응하도록 상기 아이템형상변화부가 상기 패션 아이템의 형상 및 방향을 변화시키도록 제어하는, 증강현실을 이용한 인공지능형 토탈패션 스타일링 방법.
  8. 청구항 5 또는 청구항 6에 있어서,
    상기 증강현실 처리단계는,
    AI추천자세산출부에 의해서, 상기 단말기의 조작에 의해 가장 빈도수가 높거나, 빈도수가 동일한 경우 많은 시간을 할애하는 상기 모델의 자세 정보를 상기 데이터베이스부에 저장되도록 하고, 상기 단말기를 통해 상기 모델에 대한 자세 추천을 요청시, 상기 증강현실처리부가 상기 데이터베이스부에 저장된 자세 정보에 상응하도록 상기 모델의 동작 및 방향을 제시하도록 하는, 증강현실을 이용한 인공지능형 토탈패션 스타일링 방법.
KR1020170154511A 2017-11-20 2017-11-20 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템 KR20190057516A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170154511A KR20190057516A (ko) 2017-11-20 2017-11-20 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170154511A KR20190057516A (ko) 2017-11-20 2017-11-20 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템

Publications (1)

Publication Number Publication Date
KR20190057516A true KR20190057516A (ko) 2019-05-29

Family

ID=66672790

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170154511A KR20190057516A (ko) 2017-11-20 2017-11-20 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템

Country Status (1)

Country Link
KR (1) KR20190057516A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102185638B1 (ko) * 2019-10-31 2020-12-02 김다솜 인공지능을 이용한 패션 스타일 종합 코디네이션 제안 시스템 및 그 운용방법
KR20200145074A (ko) 2019-06-20 2020-12-30 (주)대왕시스템 인공 지능 코디네이션 시스템
KR102392163B1 (ko) * 2020-11-20 2022-04-28 김종훈 인공지능 기반의 스타일 추천과 스타일 피팅 시뮬레이션 서비스 제공 장치 및 방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200145074A (ko) 2019-06-20 2020-12-30 (주)대왕시스템 인공 지능 코디네이션 시스템
KR102185638B1 (ko) * 2019-10-31 2020-12-02 김다솜 인공지능을 이용한 패션 스타일 종합 코디네이션 제안 시스템 및 그 운용방법
KR102392163B1 (ko) * 2020-11-20 2022-04-28 김종훈 인공지능 기반의 스타일 추천과 스타일 피팅 시뮬레이션 서비스 제공 장치 및 방법

Similar Documents

Publication Publication Date Title
US9369638B2 (en) Methods for extracting objects from digital images and for performing color change on the object
US8976160B2 (en) User interface and authentication for a virtual mirror
US8982110B2 (en) Method for image transformation, augmented reality, and teleperence
US8970569B2 (en) Devices, systems and methods of virtualizing a mirror
KR102506341B1 (ko) 거울을 가상화하는 디바이스들, 시스템들 및 방법들
EP3745352B1 (en) Methods and systems for determining body measurements and providing clothing size recommendations
US20170352091A1 (en) Methods for generating a 3d virtual body model of a person combined with a 3d garment image, and related devices, systems and computer program products
US20220198780A1 (en) Information processing apparatus, information processing method, and program
US11069089B2 (en) Information processing apparatus, information processing method, and computer program product
CN106210504A (zh) 图像处理装置、图像处理系统及图像处理方法
CN105989617A (zh) 虚拟试穿装置及虚拟试穿方法
CN105374057A (zh) 虚拟试穿装置及虚拟试穿方法
CN105989618A (zh) 虚拟试穿装置及虚拟试穿方法
KR20190057516A (ko) 증강현실을 이용한 인공지능형 토탈패션 스타일링 시스템
KR102506352B1 (ko) 전자상거래를 위한 3d 인체 측정 데이터 기반의 디지털 트윈 아바타 제공 시스템
KR20200025291A (ko) 사용자 단말기를 이용한 퍼스널 컬러진단을 통한 쇼핑서비스 제공방법 및 그 시스템
CN115908701A (zh) 基于style3d的虚拟试衣方法及系统
CN114638929A (zh) 线上虚拟试衣方法、装置、电子设备及存储介质
KR102466408B1 (ko) 스타일링 장치 및 이의 구동 방법
KR20220135526A (ko) 3d 아바타를 이용한 시착 서비스 제공 시스템
KR102143439B1 (ko) 의류 공유 및 코디네이션 방법
KR20120078290A (ko) 의류 착용 서비스 제공 방법 및 그 시스템
WO2022081745A1 (en) Real-time rendering of 3d wearable articles on human bodies for camera-supported computing devices
JP2005216094A (ja) 試着シミュレーション方法
JPWO2019003429A1 (ja) 人体モデル表示システム、人体モデル表示方法、通信端末装置、及びコンピュータプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application