KR102279872B1 - 대상체에 따른 증강 현실 콘텐츠 제공 시스템 및 그 방법 - Google Patents
대상체에 따른 증강 현실 콘텐츠 제공 시스템 및 그 방법 Download PDFInfo
- Publication number
- KR102279872B1 KR102279872B1 KR1020190096777A KR20190096777A KR102279872B1 KR 102279872 B1 KR102279872 B1 KR 102279872B1 KR 1020190096777 A KR1020190096777 A KR 1020190096777A KR 20190096777 A KR20190096777 A KR 20190096777A KR 102279872 B1 KR102279872 B1 KR 102279872B1
- Authority
- KR
- South Korea
- Prior art keywords
- content
- recipe
- user
- augmented reality
- selection
- Prior art date
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 80
- 238000000034 method Methods 0.000 title claims abstract description 17
- 230000009471 action Effects 0.000 claims abstract description 35
- 230000010365 information processing Effects 0.000 claims abstract description 15
- 238000000059 patterning Methods 0.000 claims description 8
- 230000008859 change Effects 0.000 claims description 7
- 239000004615 ingredient Substances 0.000 claims description 6
- LFQSCWFLJHTTHZ-UHFFFAOYSA-N Ethanol Chemical compound CCO LFQSCWFLJHTTHZ-UHFFFAOYSA-N 0.000 claims description 4
- 239000000463 material Substances 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 3
- 230000035622 drinking Effects 0.000 claims description 2
- 239000011521 glass Substances 0.000 description 43
- PCTMTFRHKVHKIS-BMFZQQSSSA-N (1s,3r,4e,6e,8e,10e,12e,14e,16e,18s,19r,20r,21s,25r,27r,30r,31r,33s,35r,37s,38r)-3-[(2r,3s,4s,5s,6r)-4-amino-3,5-dihydroxy-6-methyloxan-2-yl]oxy-19,25,27,30,31,33,35,37-octahydroxy-18,20,21-trimethyl-23-oxo-22,39-dioxabicyclo[33.3.1]nonatriaconta-4,6,8,10 Chemical compound C1C=C2C[C@@H](OS(O)(=O)=O)CC[C@]2(C)[C@@H]2[C@@H]1[C@@H]1CC[C@H]([C@H](C)CCCC(C)C)[C@@]1(C)CC2.O[C@H]1[C@@H](N)[C@H](O)[C@@H](C)O[C@H]1O[C@H]1/C=C/C=C/C=C/C=C/C=C/C=C/C=C/[C@H](C)[C@@H](O)[C@@H](C)[C@H](C)OC(=O)C[C@H](O)C[C@H](O)CC[C@@H](O)[C@H](O)C[C@H](O)C[C@](O)(C[C@H](O)[C@H]2C(O)=O)O[C@H]2C1 PCTMTFRHKVHKIS-BMFZQQSSSA-N 0.000 description 20
- 241000209140 Triticum Species 0.000 description 19
- 235000021307 Triticum Nutrition 0.000 description 19
- 235000019997 soju Nutrition 0.000 description 9
- 235000013405 beer Nutrition 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 238000004091 panning Methods 0.000 description 4
- 230000004913 activation Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 235000015897 energy drink Nutrition 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 235000011389 fruit/vegetable juice Nutrition 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G06K9/325—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0255—Targeted advertisements based on user history
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0257—User requested
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0261—Targeted advertisements based on user location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Game Theory and Decision Science (AREA)
- Tourism & Hospitality (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Primary Health Care (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
본 발명은 대상체에 포함된 문자 이미지에 대응되는 콘텐츠를 증강 현실로 대상체에 적용하여 제공하는 증강 현실 콘텐츠 제공 시스템 및 그 방법에 관한 것으로, 대상체 및 상기 대상체에 포함되는 문자 이미지를 인식하고, 사용자 액션 및 선택에 따른 사용자 데이터를 인식하는 인식부, 상기 문자 이미지에 대응된 복수의 콘텐츠들 중에서 상기 대상체에 적용되는 상기 사용자 액션 및 상기 사용자 선택에 따라 선택되는 콘텐츠를 상기 대상체에 증강 현실로 적용하여 제공하는 콘텐츠 제공부 및 상기 대상체에 적용되는 상기 사용자 액션 및 상기 사용자 선택에 따른 가이드 정보 및 콘텐츠 선택 정보를 제공하는 정보 처리부를 포함한다.
Description
본 발명은 대상체에 따른 증강 현실 콘텐츠 제공 시스템 및 그 방법에 관한 것으로, 보다 상세하게는 대상체에 포함된 문자 이미지에 대응되는 콘텐츠를 증강 현실로 대상체에 적용하여 제공하는 기술에 관한 것이다.
종래의 문자인식은 스캐너를 통한 이미지 생성과 문서처리에 집중되어 상용화되었다. 하지만, 모바일 단말 환경의 발전으로 사용자의 이동성이 활발해지는 최근에는 모바일 카메라를 통해 취득되는 영상의 문자 인식을 통해 정보를 수집하고, 인식된 텍스트에 대한 콘텐츠를 제공하는 서비스가 요구되고 있다.
다만, 종래의 문자인식은 외국어를 한국어로 번역 또는 한국어를 외국어로 번역하거나, 코드를 인식하는 기술에 불과한 것으로, 이는 카메라를 이용하여 취득한 영상에 존재하는 특정 문자정보(scene text)를 추출하여 인식한 후, 이를 실시간으로 번역하여 정보 검색에 활용하여 제공하는 것이다.
이에, 본 발명은 카메라를 통해 취득된 영상에 존재하는 문자 이미지를 인식하여 광고 콘텐츠, 애니메이션 콘텐츠 및 레시피 콘텐츠와 같은 다양한 서비스를 제공하는 기술을 제안한다.
본 발명의 목적은 대상체에 포함된 문자 이미지에 대응하는 광고 콘텐츠, 애니메이션 콘텐츠 및 레시피 콘텐츠를 대상체에 증강 현실로 적용하여 제공하고자 한다.
본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 대상체 및 상기 대상체에 포함되는 문자 이미지를 인식하고, 사용자 액션 및 선택에 따른 사용자 데이터를 인식하는 인식부, 상기 문자 이미지에 대응된 복수의 콘텐츠들 중에서 상기 대상체에 적용되는 상기 사용자 액션 및 상기 사용자 선택에 따라 선택되는 콘텐츠를 상기 대상체에 증강 현실로 적용하여 제공하는 콘텐츠 제공부 및 상기 대상체에 적용되는 상기 사용자 액션 및 상기 사용자 선택에 따른 가이드 정보 및 콘텐츠 선택 정보를 제공하는 정보 처리부를 포함한다.
상기 인식부는 카메라를 통해 획득되는 영상 데이터에서 물체의 상기 대상체와 상기 대상체에 포함되는 문구, 이미지 및 상표의 상기 문자 이미지를 인식하고, 상기 대상체에 적용되는 상기 사용자 액션 및 디스플레이에 감지되는 상기 사용자 선택을 인식할 수 있다.
상기 인식부는 특정한 문구, 이미지 및 상표의 특정 문자 이미지만 인식하고, 상기 콘텐츠 제공부는 상기 특정 문자 이미지에 대응하여 선택되는 상기 콘텐츠를 상기 대상체에 증강 현실로 적용하여 제공할 수 있다.
상기 콘텐츠 제공부는 상기 문자 이미지에 대응되는 광고 콘텐츠, 레시피 콘텐츠 및 애니메이션 콘텐츠 중에서 상기 사용자 선택에 따라 선택된 적어도 어느 하나 이상의 콘텐츠를 상기 대상체의 형태 및 용도에 따라 증강 현실로 적용하여 제공할 수 있다.
상기 콘텐츠 제공부는 상기 대상체의 높이, 넓이 및 용량을 나타내는 상기 대상체의 형태와 용도에 따라 재료의 정량을 표시하는 상기 레시피 콘텐츠를 제공할 수 있다.
상기 콘텐츠 제공부는 상기 레시피 콘텐츠에 의해 레시피가 완료되는 경우, 상기 콘텐츠 완료 정보의 제공을 위한 상기 애니메이션 콘텐츠 및 상기 광고 콘텐츠 중 어느 하나 이상을 제공할 수 있다.
상기 정보 처리부는 상기 레시피 콘텐츠에 따라 행동하는 상기 사용자 액션으로부터 상기 대상체의 기울기 조정 및 재료의 정량 조정과 같은 상기 가이드 정보를 제공할 수 있다.
상기 정보 처리부는 단일 터치, 롱 터치, 더블 터치, 드래그, 3D 터치의 상기 사용자 선택에 따라 콘텐츠 선택, 레시피 정보, 레시피 콘텐츠 변경 및 선호 레시피 선택 중 어느 하나의 상기 콘텐츠 선택 정보를 제공할 수 있다.
또한, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 상기 대상체에 증강 현실로 제공되는 상기 콘텐츠의 사용 히스토리를 패턴화하며, 사용자의 위치 정보에 기반한 상기 콘텐츠의 제공을 제어하는 제어부를 더 포함할 수 있다.
상기 제어부는 레시피 콘텐츠를 사용하는 시간 및 위치, 사용자의 주종 및 주량을 패턴화한 상기 사용 히스토리 및 상기 사용자의 위치 정보에 따라 상기 사용자에게 맞춤형 상기 레시피 콘텐츠의 제공을 제어할 수 있다.
본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 방법은 대상체 및 상기 대상체에 포함되는 문자 이미지를 인식하고, 사용자 액션 및 선택에 따른 사용자 데이터를 인식하는 단계, 상기 문자 이미지에 대응된 복수의 콘텐츠들 중에서 상기 대상체에 적용되는 상기 사용자 액션 및 상기 사용자 선택에 따라 선택되는 콘텐츠를 상기 대상체에 증강 현실로 적용하여 제공하는 단계 및 상기 대상체에 적용되는 상기 사용자 액션 및 상기 사용자 선택에 따른 가이드 정보 및 콘텐츠 선택 정보를 제공하는 단계를 포함한다.
또한, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 방법은 상기 대상체에 증강 현실로 제공되는 상기 콘텐츠의 사용 히스토리를 패턴화하며, 사용자의 위치 정보에 기반한 상기 콘텐츠의 제공을 제어하는 단계를 더 포함할 수 있다.
본 발명의 실시예에 따르면, 대상체에 포함된 문자 이미지에 대응하는 광고 콘텐츠, 애니메이션 콘텐츠 및 레시피 콘텐츠를 대상체에 증강 현실로 적용하여 대상체에 적합한 다양한 서비스를 제공할 수 있다.
또한, 본 발명의 실시예에 따르면, 대상체에 적용되는 사용자 액션 및 사용자 선택에 따라 가이드 정보, 콘텐츠 선택 정보와 콘텐츠 완료 정보에 따른 애니메이션 콘텐츠 및 광고 콘텐츠를 제공하여 사용자의 흥미를 유발시킬 수 있다.
또한, 본 발명의 실시예에 따르면, 사용자의 소비 패턴에 따라 맞춤형 콘텐츠를 제공할 수 있다.
도 1은 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템의 세부 구성을 블록도로 도시한 것이다.
도 2 내지 도 7은 본 발명의 실시예에 따른 레시피 콘텐츠에 대해 상세히 설명하기 위해 도시한 것이다.
도 8 내지 도 11은 본 발명의 실시예에 따른 레시피 콘텐츠 적용 예를 도시한 것이다.
도 12는 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 방법의 동작 흐름도를 도시한 것이다.
도 2 내지 도 7은 본 발명의 실시예에 따른 레시피 콘텐츠에 대해 상세히 설명하기 위해 도시한 것이다.
도 8 내지 도 11은 본 발명의 실시예에 따른 레시피 콘텐츠 적용 예를 도시한 것이다.
도 12는 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 방법의 동작 흐름도를 도시한 것이다.
이하, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 또한, 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
또한, 본 명세서에서 사용되는 용어(terminology)들은 본 발명의 바람직한 실시예를 적절히 표현하기 위해 사용된 용어들로서, 이는 시청자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템의 세부 구성을 블록도로 도시한 것이다.
도 1을 참조하면, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 대상체에 포함된 문자 이미지에 대응되는 콘텐츠를 증강 현실로 대상체에 적용하여 제공한다.
이를 위해, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템(100)은 인식부(110), 콘텐츠 제공부(120) 및 정보 처리부(130)를 포함하며, 출력부(140), 데이터베이스부(150) 및 제어부(160)를 더 포함할 수 있다.
본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템(100)은 사용자가 소지하는 모바일 디바이스에 포함된 애플리케이션(Application)일 수 있으며, 모바일 디바이스는 스마트폰, 데스크탑 PC, 모바일 단말, PDA, 노트북, 태블릿 PC 및 웨어러블 기기 중 적어도 어느 하나의 모바일 단말기일 수 있다. 나아가, 모바일 디바이스는 사용자의 선택 입력을 수신할 수 있으며, 터치-감지 영역을 포함하는 스크린을 통해 소정의 기능 집합의 동작을 수행할 수 있는 터치 스크린 형태의 디스플레이를 포함하는 것일 수 있고, 하나 이상의 물리적 버튼 또는 가상의 버튼을 포함하는 기기일 수 있으므로 종류 및 형태는 이에 한정되지 않는다.
이에, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템(100)은 모바일 디바이스에 포함된 카메라를 통해 대상체 및 문자 이미지와 사용자 액션을 인식하며, 디스플레이를 통해 입력되는 사용자 선택을 인식할 수 있다. 예를 들어, 인식부(110)는 디스플레이에 입력되는 단일 터치, 롱 터치, 더블 터치, 드래그, 3D 터치의 사용자 선택을 감지할 수 있다.
인식부(110)는 대상체 및 대상체에 포함되는 문자 이미지를 인식하고, 사용자 액션 및 선택에 따른 사용자 데이터를 인식한다.
인식부(110)는 카메라를 통해 획득되는 영상 데이터에서 물체의 대상체와 대상체에 포함되는 문구, 이미지 및 상표의 문자 이미지를 인식하고, 대상체에 적용되는 사용자 액션 및 디스플레이에 감지되는 사용자 선택을 인식할 수 있다. 여기서, 상기 대상체는 컵, 잔, 병, 용기 또는 그릇과 같은 물체일 수 있다.
예를 들어 설명하면, 사용자가 모바일 디바이스의 카메라를 통해 앞에 놓여진 유리컵(대상체)을 촬영하는 경우, 인식부(110)는 카메라를 통해 획득되는 유리컵에 대한 영상 데이터에서 유리컵과 유리컵에 프린팅된 업체명인 ‘ABCD’의 문자 이미지를 인식할 수 있다. 나아가, 사용자가 유리컵의 위치를 이동시키거나, 유리컵에 액체류를 붓는 등의 행동을 하는 경우, 인식부(110)는 카메라를 통해 획득되는 유리컵에 대한 영상 데이터에서 유리컵의 움직임 또는 유리컵에 적용되는 사용자 액션을 인식할 수 있다.
실시예에 따라서, 인식부(110)는 특정한 문구, 이미지 및 상표의 특정 문자 이미지만 인식할 수도 있다. 예를 들면, 유리컵(대상체)에 ‘DRINK’ 또는 ‘JUICE’와 같은 문자 이미지가 프린팅되어 있는 경우에 인식부(110)는 이를 인식할 수 있으나, 콘텐츠 제공부(120)에 인식 결과를 전송하지 않을 수 있다. 반면에, 유리컵에 업체명인 ‘ABCD’가 프린팅되어 있는 경우에 인식부(110)는 특정 문자 이미지인 ‘ABCD’를 인식하여 콘텐츠 제공부(120)에 인식 결과를 전송하고, 콘텐츠 제공부(120)는 특정 문자 이미지에 대응하여 선택되는 콘텐츠를 대상체에 증강 현실로 적용하여 제공할 수 있다.
다만, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템(100)이 특정 문자 이미지만을 인식하여 별도의 광고 콘텐츠, 애니메이션 콘텐츠 또는 레시피 콘텐츠를 제공하는 경우, 제어부(160)는 특정 문자 이미지의 노출 형태 및 횟수에 따라서 해당 업체에 과금을 청구할 수 있다.
콘텐츠 제공부(120)는 문자 이미지에 대응된 복수의 콘텐츠들 중에서 대상체에 적용되는 사용자 액션 및 사용자 선택에 따라 선택되는 콘텐츠를 대상체에 증강 현실로 적용하여 제공한다.
콘텐츠 제공부(120)는 문자 이미지에 대응되는 광고 콘텐츠, 레시피 콘텐츠 및 애니메이션 콘텐츠 중에서 사용자 선택에 따라 선택된 적어도 어느 하나 이상의 콘텐츠를 대상체의 형태 및 용도에 따라 증강 현실로 적용하여 제공할 수 있다.
일 예로, 콘텐츠 제공부(120)는 문자 이미지에 대응되는 광고 콘텐츠를 대상체의 형태 및 용도에 따라 증강 현실로 적용하여 제공할 수 있다. 구체적으로, 주류 업체인 ‘ABCD’가 존재한다고 가정한 경우, 사용자가 모바일 디바이스의 카메라를 통해 앞에 놓여진 유리컵을 촬영하면, 인식부(110)는 카메라를 통해 획득되는 유리컵에 대한 영상 데이터에서 유리컵에 프린팅된 업체명인 ‘ABCD’를 인식할 수 있다. 이에, 콘텐츠 제공부(120)는 ‘ABCD’ 업체에서 선전하는 슬로건인 문구를 유리컵의 형태에 따라 증강 현실로 적용하여 제공할 수 있으며, 예를 들면 유리컵의 입구 라인에 따라 ‘오늘도 ABCD와 함께’와 같은 광고 콘텐츠를 제공할 수 있다.
다른 예로, 콘텐츠 제공부(120)는 문자 이미지에 대응되는 애니메이션 콘텐츠를 대상체의 형태 및 용도에 따라 증강 현실로 적용하여 제공할 수 있다. 구체적으로, 앞선 광고 콘텐츠와 동일하게 주류 업체인 ‘ABCD’가 존재한다고 가정한 경우, 사용자가 모바일 디바이스의 카메라를 통해 앞에 놓여진 유리컵을 촬영하면, 인식부(110)는 카메라를 통해 획득되는 유리컵에 대한 영상 데이터에서 유리컵에 프린팅된 업체명인 ‘ABCD’를 인식할 수 있다. 이에, 콘텐츠 제공부(120)는 ‘ABCD’ 업체에서 선전하는 CF 광고를 유리컵의 형태에 따라 증강 현실로 적용하여 마치 유리컵 주변에서 CF 광고의 광고 모델이 ‘ABCD’ 업체의 주류를 선전하는 듯한 콘텐츠를 제공할 수 있다.
즉, 상기 광고 콘텐츠는 정적인 콘텐츠를 제공하고, 상기 애니메이션 콘텐츠는 역동적인 콘텐츠를 제공하는 것일 수 있으며, 광고 콘텐츠와 애니메이션 콘텐츠가 결합되어 동시에 제공될 수도 있다.
또 다른 예로, 콘텐츠 제공부(120)는 문자 이미지에 대응되는 레시피 콘텐츠를 대상체의 형태 및 용도에 따라 증강 현실로 적용하여 제공할 수 있다. 구체적으로, 앞선 광고 콘텐츠 및 애니메이션 콘텐츠와 동일하게 주류 업체인 ‘ABCD’가 존재한다고 가정한 경우, 사용자가 모바일 디바이스의 카메라를 통해 앞에 놓여진 유리컵을 촬영하면, 인식부(110)는 카메라를 통해 획득되는 유리컵에 대한 영상 데이터에서 유리컵에 프린팅된 업체명인 ‘ABCD’를 인식할 수 있다. 이에, 콘텐츠 제공부(120)는 ‘ABCD’ 업체에서 제공된 유리컵의 사이즈에 적용할 수 있는 소맥 레시피, 에너자이저 레시피 또는 소메리카노 레시피와 같은 레시피 콘텐츠를 제공할 수 있다.
레시피 콘텐츠에 대해 상세히 설명하자면, 콘텐츠 제공부(120)는 대상체의 높이, 넓이 및 용량을 나타내는 대상체의 형태와 용도에 따라 재료의 정량을 표시하는 레시피 콘텐츠를 제공할 수 있다. 예를 들면, 콘텐츠 제공부(120)는 유리컵의 높이, 넓이 및 용량을 감지하여 카메라를 통해 획득되는 유리컵에 대한 영상 데이터에서 어느 정도의 위치까지 맥주를 담고, 그 위에 어느 정도의 위치까지 소주를 담아야 하는지를 유리컵에 증강 현실로 적용하여 제공할 수 있다. 이에, 사용자는 모바일 디바이스의 디스플레이를 통해 제공되는 맥주 라인 및 소주 라인까지 맥주 및 소주를 담아 소맥을 제조할 수 있으며, 콘텐츠 제공부(120)는 인식부(110)를 통해 사용자가 맥주 및 소주를 유리컵에 붓는 사용자 액션을 실시간으로 감지하여 정량의 소맥 레시피를 제조할 수 있도록 콘텐츠를 제공할 수 있다.
이후에, 콘텐츠 제공부(120)는 레시피 콘텐츠에 의해 레시피가 완료되는 경우, 콘텐츠 완료 정보의 제공을 위한 애니메이션 콘텐츠 및 광고 콘텐츠 중 어느 하나 이상을 제공할 수 있다. 예를 들면, 콘텐츠 제공부(120)에서 알려준 소맥 레시피 콘텐츠에 따라서 사용자가 유리컵에 맥주 및 소주를 담은 경우 즉, 소맥을 완성한 경우에 콘텐츠 제공부(120)는 완성을 나타내는 축포 및 화려한 액션의 애니메이션 콘텐츠 또는 ‘ABCD’ 업체의 CF 광고 콘텐츠를 제공할 수 있다.
실시예에 따라서, 콘텐츠 제공부(120)는 카메라를 통해 대상체가 비춰지는 시점에서 광고 콘텐츠 또는 애니메이션 콘텐츠를 제공할 수 있으며, 레시피 콘텐츠의 경우에는 레시피 완료에 따른 보상의 개념으로 광고 콘텐츠 또는 애니메이션 콘텐츠를 제공할 수 있다.
본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템(100)은 출력부(140)를 통해 상기 전술한 각 실시 예에 의해 제공되는 콘텐츠 및 콘텐츠 완료 정보와 동시에 모바일 디바이스에 포함된 오디오 모듈, 스피커 모듈, 경고등 및 진동 모듈로부터 출력 정보를 제공할 수 있다. 예를 들면, 출력부(140)는 콘텐츠 및 콘텐츠 완료 정보와 동시에 경고음을 출력하거나, LED(Light Emitting Diode)를 점멸할 수 있으며, 진동 모듈을 이용하여 진동을 출력할 수 있고, 스피커 모듈을 이용하여 안내 음성, CF 송(song) 또는 CF 모델의 음성의 사운드를 출력할 수 있다.
이때, 출력부(140)를 통한 경고음, 경고등, 진동 및 사운드는 전술한 각 실시 예에 따라 각기 다르게 출력될 수 있으며, 이는 광고 콘텐츠, 레시피 콘텐츠 및 애니메이션 콘텐츠 및 콘텐츠 완료 정보에 대응하게 제어부(160)를 통해 제어될 수 있다.
정보 처리부(130)는 대상체에 적용되는 사용자 액션 및 사용자 선택에 따른 가이드 정보 및 콘텐츠 선택 정보를 제공한다.
일 예로, 정보 처리부(130)는 단일 터치, 롱 터치, 더블 터치, 드래그, 3D 터치의 사용자 선택에 따라 콘텐츠 선택, 레시피 정보, 레시피 콘텐츠 변경 및 선호 레시피 선택 중 어느 하나의 콘텐츠 선택 정보를 제공할 수 있다.
예를 들면, 인식부(110)를 통해 단일 터치, 롱 터치, 더블 터치, 드래그, 플릭(Flick), 패닝(panning), 핀치 줌 아웃(Pinch zoom out), 핀치 줌 인(Pinch zoom in) 및 3D 터치 중 어느 하나의 사용자 선택이 입력되면, 정보 처리부(130)는 사용자 선택에 따라 콘텐츠 선택, 레시피 정보, 레시피 콘텐츠 변경 및 선호 레시피 선택 중 어느 하나의 콘텐츠 선택 정보를 제공할 수 있다. 이때, 상기 콘텐츠 선택은 광고 콘텐츠, 레시피 콘텐츠 및 애니메이션 콘텐츠에서 콘텐츠를 선택하는 것이고, 상기 레시피 정보는 제공되는 레시피 콘텐츠에 대한 상세한 정보를 나타내는 것이다. 또한, 상기 레시피 콘텐츠 변경은 소맥 레시피, 에너자이저 레시피 또는 소메리카노 레시피와 같은 레시피 콘텐츠에서 레시피를 변경하는 것이며, 상기 선호 레시피 선택은 복수의 레시피 중에서 사용자가 선호하는 레시피를 선택하는 것이다.
다른 예로, 정보 처리부(130)는 레시피 콘텐츠에 따라 행동하는 사용자 액션으로부터 대상체의 기울기 조정 및 재료의 정량 조정과 같은 가이드 정보를 제공할 수 있다.
예를 들면, 콘텐츠 제공부(120)가 유리컵에 따라 정량의 소주와 맥주의 비율을 알려주고 있으나, 사용자가 유리컵의 위치를 정확히 하지 않거나, 카메라를 통해 획득되는 영상 데이터에서 유리컵이 비스듬히 위치하는 경우에는 레시피 콘텐츠가 정확하게 적용되지 않을 수 있다. 이에 따라서, 정보 처리부(130)는 사용자 액션으로부터 대상체의 기울기를 조정하거나, 재료의 정량을 조정하고, 대상체가 정위치에 위치하도록 하는 등의 가이드 정보를 제공할 수 있다.
이때, 정보 처리부(130)는 가이드 정보 및 콘텐츠 선택 정보를 사용자 인터페이스(User Interface; UI)로 제공할 수 있다.
제어부(160)는 대상체에 증강 현실로 제공되는 콘텐츠의 사용 히스토리를 패턴화하며, 사용자의 위치 정보에 기반한 콘텐츠의 제공을 제어할 수 있다.
제어부(160)는 레시피 콘텐츠를 사용하는 시간 및 위치, 사용자의 주종 및 주량을 사용 히스토리로 패턴화하며, 사용자의 위치 정보에 따라 사용자에게 맞춤형 레시피 콘텐츠의 제공을 제어할 수 있다. 예를 들면, 제어부(160)는 소맥 레시피, 에너자이저 레시피 또는 소메리카노 레시피 중 사용자가 선호하는 레시피와 주로 레시피 콘텐츠를 사용하는 시간 및 위치에 따라 사용 히스토리 즉, 음주 소비를 패턴화할 수 있다. 이에, 제어부(160)는 사용 히스토리를 기반으로 사용자의 위치 정보로부터 집 또는 번화가를 파악하여 사용자에게 맞춤형 레시피 콘텐츠의 제공을 제어할 수 있다. 또한, 제어부(160)는 사용 히스토리를 기반으로 사용자에게 레시피를 추천할 수 있다. 또한, 제어부(160)는 레시피 모음에 등록되어 있지 않은, 사용자만 알고있는 나만의 레시피를 사용자에게 등록하도록 요청할 수도 있다.
본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템(100)은 데이터베이스부(150)를 더 포함하며, 데이터베이스부(150)는 사용 히스토리를 기반으로, 사용자별 콘텐츠 선택 정보, 가이드 정보, 콘텐츠 완료 정보 및 위치 정보를 저장하여 유지할 수 있다. 또한, 데이터베이스부(150)는 다양한 레시피 데이터를 저장하여 유지하며, 사용자에 의해 업데이트되거나 새로이 등록되는 레시피를 데이터화할 수 있다.
도 2 내지 도 7은 본 발명의 실시예에 따른 레시피 콘텐츠에 대해 상세히 설명하기 위해 도시한 것이다.
이하에서는 주류 업체명이 ‘ABCD’인 경우로 가정하여 레시피 콘텐츠에 대해 설명하고자 한다.
도 2를 참조하면, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 모바일 디바이스의 카메라를 통해 앞에 놓여진 유리컵(대상체)를 인식(210)하며, 유리컵과 유리컵에 프린팅된 업체명인 ‘ABCD’의 문자 이미지를 인식(220)할 수 있다. 실시예에 따라서, 인식이 실패하는 경우, 활성화(221)를 통해 대상체 및 문자 이미지를 재인식할 수 있다.
유리컵과 ‘ABCD’의 업체명이 인식되면, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 대상체 및 문자 이미지에 대응하는 레시피 콘텐츠(232)를 증강 현실로 적용하여 제공할 수 있다. 예를 들면, 주류 업체인 ‘ABCD’와 유리컵이 인식되면, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 기본 레시피 또는 최근 사용자가 사용한 레시피를 콘텐츠로 제공할 수 있으며, 도 2에 도시된 바와 같이 소맥 레시피(230) 및 소맥 레시피에 해당하는 레시피 가이드인 레시피 콘텐츠(232)를 제공할 수 있다.
레시피 콘텐츠(232)는 유리컵의 형태 및 용도에 따라 유리컵에 맥주(Beer)의 정량과 소주(Soju)의 정량을 표시하여 나타낼 수 있다. 이에, 사용자는 소맥 레시피에 대한 선호도(231)를 체크할 수 있다.
도 2에서, 사용자가 선호도(231)를 체크하는 경우, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 도 3에 도시된 바와 같이 레시피 즐겨찾기(320)를 제공할 수 있다.
도 3을 참조하면, 레시피에 대한 간략한 정보를 나타내는 복수의 레시피 카드를 포함한 레시피 모음(310)이 존재하며, 레시피 모음(310)에는 사용자가 선호한 즐겨찾기 레시피(320)가 순서대로 리스트화될 수 있다. 이때, 복수의 레시피 중에는 결제 후에 적용 가능한 레시피(330)가 존재할 수 있으며, 도 4에 도시된 바와 같이 레시피 결제(410) 후에 해당 레시피를 사용할 수 있다.
본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 유리컵에 증강 현실로 적용하여 제공하는 레시피 콘텐츠에 대한 레시피 정보를 도 5에 도시된 바와 같이 제공할 수 있다. 도 5를 참조하면, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 소맥 레시피에 대한 일러스트(510)와 함께 소맥 레시피의 이름(520), 설명(530) 그리고 선호도 표시(540)를 나타내는 레시피 정보를 제공할 수 있다.
또한, 선호도(540)가 표시되는 경우, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 도 6에 도시된 바와 같이 선호도가 표시된 레시피들만 모아놓은 선호 레시피 모음(610)을 제공하며, 각 레시피에 대한 간략한 정보를 포함하는 레시피 카드(620)를 일러스트레이션으로 제공할 수 있다.
반면에, 선호 레시피가 존재하지 않는 경우에 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 도 7에 도시된 바와 같이 노 선호 레시피(710)를 제공하며, 사용자에게 선호하는 레시피를 등록할 수 있도록 안내할 수 있다.
도 8 내지 도 11은 본 발명의 실시예에 따른 레시피 콘텐츠 적용 예를 도시한 것이다.
도 8을 참조하면, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 사용자가 모바일 디바이스의 카메라를 통해 앞에 놓여진 유리컵(대상체)을 촬영하는 경우, 촬영된 영상 데이터에서 유리컵과 유리컵에 프린팅된 업체명인 ‘ABCD’의 문자 이미지를 인식할 수 있다(도 8(a)). 인식 후, 도 8(b)에서, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 유리컵 및 문자 이미지에 따라 기본 레시피 또는 최근 사용자가 사용한 레시피인 소맥 레시피를 제공하며, 디스플레이 일측에 입력된 단일 클릭의 사용자 선택에 따라 도 8(c)에 도시된 바와 같이 소맥 레시피에 대한 레시피 정보를 제공할 수 있다.
도 9를 참조하면, 도 9(a)와 같이 소맥 레시피가 제공될 때, 디스플레이 일측에 패닝(panning)의 사용자 선택이 입력되는 경우, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 사용자 선택에 따라 도 9(b)와 같이 소맥 레시피를 에너자이저 레시피로 변경하여 레시피 콘텐츠를 제공할 수 있다. 나아가, 사용자가 도 9(b)에서 제공하는 에너자이저 레시피를 선호하지 않아 다시 한번 패닝의 사용자 선택을 입력하는 경우, 도 9(c)와 같이 에너자이저 레시피를 소메리카노 레시피로 변경하여 레시피 콘텐츠를 제공할 수 있다.
다만, 소메리카노는 결제 후에 사용할 수 있는 레시피이므로, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 도 9(d) 및 도 9(e)를 통한 사용자의 결제 이후에 도 9(f)와 같이 소주와 아이스 커피를 이용한 소메리카노 레시피를 제공할 수 있게 된다.
도 10을 참조하면, 도 10(a)와 같이 소맥 레시피가 제공될 때, 디스플레이 일측에 핀치 줌 아웃(Pinch zoom out)의 사용자 선택이 입력되는 경우, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 도 10(b)와 같이 복수의 레시피가 리스트화된 레시피 모음을 제공하며, 사용자는 소맥 레시피가 아닌 에너자이저 레시피를 선택할 수 있다. 이에, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 도 10(c)와 같이 대상체에 소주(Soju) 및 에너지 음료(Hot 6, PowerAde)를 섞은 에너자이저 레시피를 제공할 수 있다.
도 11을 참조하면, 도 11은 도 10에서 제공하는 레시피 정보를 보다 상세히 제공하기 위한 것으로, 도 11(a)와 같이 소맥 레시피가 제공될 때, 디스플레이 일측에 핀치 줌 아웃(Pinch zoom out)의 사용자 선택이 입력되는 경우, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 도 11(b)와 같이 복수의 레시피가 리스트화된 레시피 모음을 제공하며, 사용자는 소맥 레시피에 대해 상세히 기록된 레시피 정보(도 11(c))를 확인한 후, 소맥 레시피가 아닌 에너자이저 레시피를 선택할 수 있다. 이에, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템은 도 11(d)와 같이 대상체에 에너자이저 레시피를 증강 현실로 적용하여 제공할 수 있다.
도 12는 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 방법의 동작 흐름도를 도시한 것이다.
도 12의 방법은 도 1에 도시된 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 시스템에 의해 수행된다.
도 12를 참조하면, 단계 1210에서, 대상체 및 대상체에 포함되는 문자 이미지를 인식하고, 사용자 액션 및 선택에 따른 사용자 데이터를 인식한다.
단계 1210은 카메라를 통해 획득되는 영상 데이터에서 물체의 대상체와 대상체에 포함되는 문구, 이미지 및 상표의 문자 이미지를 인식하고, 대상체에 적용되는 사용자 액션 및 디스플레이에 감지되는 사용자 선택을 인식할 수 있다. 여기서, 상기 대상체는 컵, 잔, 병, 용기 또는 그릇과 같은 물체일 수 있다.
단계 1220에서, 문자 이미지에 대응된 복수의 콘텐츠들 중에서 대상체에 적용되는 사용자 액션 및 사용자 선택에 따라 선택되는 콘텐츠를 대상체에 증강 현실로 적용하여 제공한다.
단계 1220은 문자 이미지에 대응되는 광고 콘텐츠, 레시피 콘텐츠 및 애니메이션 콘텐츠 중에서 사용자 선택에 따라 선택된 적어도 어느 하나 이상의 콘텐츠를 대상체의 형태 및 용도에 따라 증강 현실로 적용하여 제공할 수 있다.
단계 1230에서, 대상체에 적용되는 사용자 액션 및 사용자 선택에 따른 가이드 정보 및 콘텐츠 선택 정보를 제공한다.
일 예로, 단계 1230은 단일 터치, 롱 터치, 더블 터치, 드래그, 3D 터치의 사용자 선택에 따라 콘텐츠 선택, 레시피 정보, 레시피 콘텐츠 변경 및 선호 레시피 선택 중 어느 하나의 콘텐츠 선택 정보를 제공할 수 있다.
다른 예로, 단계 1230은 레시피 콘텐츠에 따라 행동하는 사용자 액션으로부터 대상체의 기울기 조정 및 재료의 정량 조정과 같은 가이드 정보를 제공할 수 있다.
또한, 본 발명의 실시예에 따른 증강 현실 콘텐츠 제공 방법은 대상체에 증강 현실로 제공되는 콘텐츠의 사용 히스토리를 패턴화하며, 사용자의 위치 정보에 기반한 콘텐츠의 제공을 제어하는 단계(미도시)를 더 포함할 수 있다.
상기 제어하는 단계는 레시피 콘텐츠를 사용하는 시간 및 위치, 사용자의 주종 및 주량을 사용 히스토리로 패턴화하며, 사용자의 위치 정보에 따라 사용자에게 맞춤형 레시피 콘텐츠의 제공을 제어할 수 있다.
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(Field Programmable Gate Array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 어플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.
Claims (12)
- 카메라를 통해 획득되는 영상 데이터에서, 대상체 및 상기 대상체에 포함되는 문구, 이미지 및 상표의 문자 이미지를 인식하고, 상기 대상체에 적용되는 사용자 액션 및 디스플레이에 감지되는 선택에 따른 사용자 데이터를 인식하는 인식부;
상기 문자 이미지에 대응되는 광고 콘텐츠, 레시피 콘텐츠 및 애니메이션 콘텐츠 중에서 상기 대상체에 적용되는 상기 사용자 액션 및 상기 사용자 선택에 따라 선택되는 콘텐츠를 상기 대상체에 증강 현실로 적용하여 제공하는 콘텐츠 제공부;
상기 대상체에 적용되는 상기 사용자 액션 및 상기 사용자 선택에 따른 가이드 정보 및 콘텐츠 선택 정보를 제공하는 정보 처리부; 및
상기 대상체에 증강 현실로 제공되는 콘텐츠의 사용 히스토리를 패턴화하며, 사용자의 위치 정보에 기반한 콘텐츠의 제공을 제어하는 제어부를 포함하되,
상기 콘텐츠 제공부는
상기 대상체의 높이, 넓이 및 용량을 나타내는 상기 대상체의 형태와 용도에 따라 재료의 정량을 표시하는 상기 레시피 콘텐츠를 제공하며, 상기 레시피 콘텐츠에 의해 레시피가 완료되는 경우, 콘텐츠 완료 정보의 제공을 위한 상기 애니메이션 콘텐츠 및 상기 광고 콘텐츠 중 어느 하나 이상을 제공하고,
상기 정보 처리부는
상기 레시피 콘텐츠에 따라 행동하는 상기 사용자 액션으로부터 상기 대상체의 기울기 조정 및 재료의 정량 조정과 같은 상기 가이드 정보를 제공하며,
상기 제어부는
레시피 콘텐츠를 사용하는 시간 및 위치, 사용자의 주종 및 주량을 패턴화한 상기 사용 히스토리 및 상기 사용자의 위치 정보에 따라 상기 사용자에게 맞춤형 상기 레시피 콘텐츠의 제공을 제어하는 것을 특징으로 하는, 증강 현실 콘텐츠 제공 시스템. - 삭제
- 제1항에 있어서,
상기 인식부는
특정한 문구, 이미지 및 상표의 특정 문자 이미지만 인식하고,
상기 콘텐츠 제공부는
상기 특정 문자 이미지에 대응하여 선택되는 콘텐츠를 상기 대상체에 증강 현실로 적용하여 제공하는, 증강 현실 콘텐츠 제공 시스템. - 삭제
- 삭제
- 삭제
- 삭제
- 제1항에 있어서,
상기 정보 처리부는
단일 터치, 롱 터치, 더블 터치, 드래그, 3D 터치의 상기 사용자 선택에 따라 콘텐츠 선택, 레시피 정보, 레시피 콘텐츠 변경 및 선호 레시피 선택 중 어느 하나의 상기 콘텐츠 선택 정보를 제공하는, 증강 현실 콘텐츠 제공 시스템. - 삭제
- 삭제
- 증강 현실 콘텐츠 제공 시스템에 의해 제공되는 증강 현실 콘텐츠 제공 방법에 있어서,
상기 증강 현실 콘텐츠 제공 시스템의 인식부에 의해, 카메라를 통해 획득되는 영상 데이터에서, 대상체 및 상기 대상체에 포함되는 문구, 이미지 및 상표의 문자 이미지를 인식하고, 상기 대상체에 적용되는 사용자 액션 및 디스플레이에 감지되는 선택에 따른 사용자 데이터를 인식하는 단계;
상기 증강 현실 콘텐츠 제공 시스템의 콘텐츠 제공부에 의해, 상기 문자 이미지에 대응되는 광고 콘텐츠, 레시피 콘텐츠 및 애니메이션 콘텐츠 중에서 상기 대상체에 적용되는 상기 사용자 액션 및 상기 사용자 선택에 따라 선택되는 콘텐츠를 상기 대상체에 증강 현실로 적용하여 제공하는 단계;
상기 증강 현실 콘텐츠 제공 시스템의 정보 처리부에 의해, 상기 대상체에 적용되는 상기 사용자 액션 및 상기 사용자 선택에 따른 가이드 정보 및 콘텐츠 선택 정보를 제공하는 단계; 및
상기 증강 현실 콘텐츠 제공 시스템의 제어부에 의해, 상기 대상체에 증강 현실로 제공되는 상기 콘텐츠의 사용 히스토리를 패턴화하며, 사용자의 위치 정보에 기반한 상기 콘텐츠의 제공을 제어하는 단계를 포함하되,
상기 대상체에 증강 현실로 적용하여 제공하는 단계는
상기 대상체의 높이, 넓이 및 용량을 나타내는 상기 대상체의 형태와 용도에 따라 재료의 정량을 표시하는 상기 레시피 콘텐츠를 제공하며, 상기 레시피 콘텐츠에 의해 레시피가 완료되는 경우, 콘텐츠 완료 정보의 제공을 위한 상기 애니메이션 콘텐츠 및 상기 광고 콘텐츠 중 어느 하나 이상을 제공하고,
상기 가이드 정보 및 콘텐츠 선택 정보를 제공하는 단계는
상기 레시피 콘텐츠에 따라 행동하는 상기 사용자 액션으로부터 상기 대상체의 기울기 조정 및 재료의 정량 조정과 같은 상기 가이드 정보를 제공하며,
상기 제어하는 단계는
레시피 콘텐츠를 사용하는 시간 및 위치, 사용자의 주종 및 주량을 패턴화한 상기 사용 히스토리 및 상기 사용자의 위치 정보에 따라 상기 사용자에게 맞춤형 상기 레시피 콘텐츠의 제공을 제어하는 것을 특징으로 하는, 증강 현실 콘텐츠 제공 방법. - 삭제
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190096777A KR102279872B1 (ko) | 2019-08-08 | 2019-08-08 | 대상체에 따른 증강 현실 콘텐츠 제공 시스템 및 그 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190096777A KR102279872B1 (ko) | 2019-08-08 | 2019-08-08 | 대상체에 따른 증강 현실 콘텐츠 제공 시스템 및 그 방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20210017471A KR20210017471A (ko) | 2021-02-17 |
| KR102279872B1 true KR102279872B1 (ko) | 2021-07-21 |
Family
ID=74731664
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020190096777A KR102279872B1 (ko) | 2019-08-08 | 2019-08-08 | 대상체에 따른 증강 현실 콘텐츠 제공 시스템 및 그 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102279872B1 (ko) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100912264B1 (ko) * | 2008-02-12 | 2009-08-17 | 광주과학기술원 | 사용자 반응형 증강 영상 생성 방법 및 시스템 |
| KR101483054B1 (ko) * | 2014-05-31 | 2015-01-16 | 연세대학교 산학협력단 | 상호작용을 지원하는 모바일 기반 증강현실 제작 시스템 및 방법 |
| KR101587985B1 (ko) | 2015-07-13 | 2016-01-27 | 한상선 | 다양한 추가기능이 탑재된 제품증강현실 애플리케이션시스템 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20100124952A (ko) * | 2009-05-20 | 2010-11-30 | 삼성에스디에스 주식회사 | 문자인식을 이용한 휴대형 단말기의 증강현실 기반 실시간 ａｒ컨텐츠 제공시스템 및 그 방법 |
| KR20140068302A (ko) | 2012-11-26 | 2014-06-09 | 주식회사 인지소프트 | 자연영상 텍스트 인식을 이용한 콘텐츠 서비스 시스템 및 방법 |
| KR20140139696A (ko) * | 2013-05-28 | 2014-12-08 | 주홍찬 | 증강현실을 이용한 레시피 콘텐츠 서비스 장치 및 방법 |
| KR20160013451A (ko) * | 2014-07-25 | 2016-02-04 | 한상선 | 증강현실 애플리케이션을 접목한 제품현시시스템 |
-
2019
- 2019-08-08 KR KR1020190096777A patent/KR102279872B1/ko active IP Right Grant
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100912264B1 (ko) * | 2008-02-12 | 2009-08-17 | 광주과학기술원 | 사용자 반응형 증강 영상 생성 방법 및 시스템 |
| KR101483054B1 (ko) * | 2014-05-31 | 2015-01-16 | 연세대학교 산학협력단 | 상호작용을 지원하는 모바일 기반 증강현실 제작 시스템 및 방법 |
| KR101587985B1 (ko) | 2015-07-13 | 2016-01-27 | 한상선 | 다양한 추가기능이 탑재된 제품증강현실 애플리케이션시스템 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20210017471A (ko) | 2021-02-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9741149B2 (en) | User terminal device for providing animation effect and display method thereof | |
| US10786196B2 (en) | Display apparatus and control method thereof for skin care analysis | |
| KR102173123B1 (ko) | 전자장치에서 이미지 내의 특정 객체를 인식하기 위한 방법 및 장치 | |
| CN109189879B (zh) | 电子书籍显示方法及装置 | |
| US20200258140A1 (en) | E-order generation method, terminal and storage medium | |
| CN104025003B (zh) | 平移动画 | |
| TW201821966A (zh) | 資訊展示方法及裝置 | |
| WO2021008295A1 (zh) | 小程序的制作方法、装置、终端及存储介质 | |
| US20140111542A1 (en) | Platform for recognising text using mobile devices with a built-in device video camera and automatically retrieving associated content based on the recognised text | |
| CN104272306B (zh) | 向前翻 | |
| KR20160086090A (ko) | 이미지를 디스플레이하는 사용자 단말기 및 이의 이미지 디스플레이 방법 | |
| CN106204186B (zh) | 订单信息确定方法及装置 | |
| CN104412225A (zh) | 与主机兼容的可下载应用的标识 | |
| US10915747B2 (en) | Graphical user interface created via inputs from an electronic document | |
| US20140081801A1 (en) | User terminal device and network server apparatus for providing evaluation information and methods thereof | |
| US10908764B2 (en) | Inter-context coordination to facilitate synchronized presentation of image content | |
| KR102279872B1 (ko) | 대상체에 따른 증강 현실 콘텐츠 제공 시스템 및 그 방법 | |
| US10963141B2 (en) | Smart multi-touch layout control for mobile devices | |
| KR101640688B1 (ko) | 메모지와 스티커 기반 스마트 단말의 앱화면 구성 시스템 | |
| JP7119106B2 (ja) | プロフィール写真を推薦する方法とシステム、および非一時的なコンピュータ読み取り可能な記録媒体 | |
| CN107862728B (zh) | 图片标签的添加方法、装置及计算机可读存储介质 | |
| US10838589B2 (en) | Graphical user interface modified via inputs from an electronic document | |
| KR102213871B1 (ko) | 광고 제공 시스템 및 그 방법, 그리고 이에 적용되는 장치 | |
| TWI732139B (zh) | 數位物件唯一識別碼（ｄｏｉ）展示和交易資訊校驗方法、裝置及設備 | |
| US20200126517A1 (en) | Image adjustment method, apparatus, device and computer readable storage medium |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |