KR20140068332A

KR20140068332A - 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템 및 그 방법

Info

Publication number: KR20140068332A
Application number: KR1020120135216A
Authority: KR
Inventors: 이우영; 정대수; 천명곤; 오민형
Original assignee: (주) 씨이랩
Priority date: 2012-11-27
Filing date: 2012-11-27
Publication date: 2014-06-09

Abstract

본 발명은 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템 및 그 방법에 관한 것으로서, 더욱 상세하게는 모바일 단말기의 증강현실(Augmented Reality, AR) 기능을 통해 메뉴판의 특정 메뉴를 나타내는 AR 마커를 인식하여 그 AR 마커 위에 특정 메뉴의 실제 영상을 보여주어 광고를 하는 시스템 및 방법에 관한 것이다.
본 발명에 따른 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템은, 메뉴를 나타내는 AR 마커가 다수 구비되는 메뉴판; AR기능을 수행하는 AR 마커 앱이 탑재되어 상기 AR 마커를 촬영하고 인식하여 정보를 추출하며, 상기 촬영된 AR 마커 이미지를 화면에 출력하면서 AR 마커에서 추출한 정보를 전송하고, 상기 AR 마커의 정보에 매칭되는 광고 영상을 수신하여 화면에 출력된 AR 마커 이미지 위에 실시간으로 재생하는 고객 모바일 단말; 및 상기 메뉴판에 구비된 AR 마커의 정보에 매칭되는 광고 영상이 등록된 영상 DB를 구비하여, 상기 AR 마커의 정보를 수신하는 경우 그에 매칭되는 광고 영상을 영상 DB에서 획득하고 이 광고 영상을 고객 모바일 단말에 전송하는 메뉴판광고 서비스서버; 를 포함하여 구성된다.

Description

증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템 및 그 방법 {MENU BOARD ADVERTISING SERVICE SYSTEM USING RECOGNITION OF AUGMENTED REALITY MARKER AND METHOD THEREOF}

본 발명은 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템 및 그 방법에 관한 것으로서, 더욱 상세하게는 모바일 단말기의 증강현실(Augmented Reality, AR) 기능을 통해 메뉴판의 특정 메뉴를 나타내는 AR 마커를 인식하여 그 AR 마커 위에 특정 메뉴의 실제 영상을 보여주어 광고를 하는 시스템 및 방법에 관한 것이다.

일반적으로, 메뉴판은 레스토랑, 한정식, 일식, 중식, 피자판매점 및 패스트푸드점 등에서 준비한 여러 가지 음식 및 음료 중에서 소비자가 선택할 수 있도록 하는 차림표이다.

종래 메뉴판의 음식 및 음료와 같은 메뉴 이미지는 메뉴판의 형태에 따라 다른 이미지로 구현되는 바, 일반적인 형태의 메뉴판은 움직이지 않는 정적인 이미지로 이루어지고, 태블릿과 같은 형태의 전자 메뉴판은 특정 메뉴를 효과적으로 표현하기 위해 동적으로 이미지가 이루어진다.

그런데 일반적인 메뉴판의 경우 너무 과장된 이미지를 사용하여 실제의 메뉴와 전혀 다른 모습을 보여주어 이용자에게 혼란을 주고 있고, 전자 메뉴판의 경우 전자 메뉴판 제작에 많은 비용이 들어가고 제작하는 방법 또한 어려워 실용적으로 많은 곳에서 사용하기 어렵다는 문제점이 있다.

또한, 스마트폰을 통해 특정 상점의 상품을 표현할 수 있는 메뉴판이 종래기술로 개시되어 있으나, 스마트폰의 앱의 형태로 제작된 메뉴판의 경우 특정한 상점을 기준으로 제작되어 하나의 앱을 사용하여 여러 곳의 메뉴판으로 사용이 어렵다는 문제점이 있었다.

한편, 본원발명과 대비되는 선행특허로 국내 공개번호 제10-2012-0076541호에는 증강 현실 코드를 이용한 광고 방법이 개시된다.

상기 선행특허는 단말에 설치된 증강현실(Augmented Reality(AR)) 코드 응용 프로그램이 TV 화면을 통하여 디스플레이되는 TV 영상에 삽입된 AR 코드를 촬영하는 단계와, 상기 AR 코드 응용 프로그램이 상기 AR 코드로부터 ID를 추출하는 단계와, 상기 AR 코드 응용 프로그램이 추출된 ID를 플랫폼으로 전송하는 단계와, 상기 AR 코드 응용 프로그램이 상기 플랫폼으로부터 전송되고 상기 ID에 매치되는 광고 정보를 상기 단말의 디스플레이 장치를 이용하여 디스플레이하는 단계를 포함하여 구성된다.

그런데 이 선행특허에서 AR 코드는 특정한 정보를 나타낼 수 있는 2차원 또는 3차원 형태의 코드, 예컨대 바코드와 같은 형태를 의미하며, AR 코드에 ID가 저장되어 있어, AR 코드로부터 ID를 추출하여 ID에 매치되는 광고 정보를 디스플레이하기 때문에 AR 코드와 광고 정보의 연관성이 떨어지고, AR 코드의 이미지와 광고 정보의 이미지가 일치하지 않기 때문에 사용자가 이 광고 정보를 눈으로 확인하는 경우 직관성이 떨어지며, 효과적이면서 신뢰를 줄 수 있는 광고를 할 수 없는 문제점이 있었다.

국내 공개번호 제10-2012-0076541호(2012년07월09일)

본 발명은 상술한 문제점을 해결하기 위하여 안출된 것으로서, 메뉴를 나타내는 AR 마커를 메뉴판에 기록하는 방식으로 메뉴판을 제작하여, 많은 비용을 들이지 않고서도 메뉴판을 제작할 수 있고 AR 기능을 하는 앱 하나만으로 여러 상점의 메뉴판에 실용적으로 사용할 수 있는 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템 및 그 방법을 제공하는데 그 목적이 있다.

또한, 본 발명이 제공하고자 하는 목적은 메뉴 이미지로 표현되는 AR 마커를 모바일 단말로 인식하여 해당하는 메뉴의 광고 영상을 그 메뉴 이미지 위에 실시간으로 재생시킴으로써 직관성을 향상시킬 수 있고, 더 효과적이면서 신뢰성 있는 광고를 할 수 있는 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템 및 그 방법을 제공하는데 있다.

상술한 목적을 달성하기 위한 본 발명에 따른 증강현실 마커 인식을 통한 메뉴판광고 서비스시스템은, 메뉴를 나타내는 AR 마커가 다수 구비되는 메뉴판;

AR기능을 수행하는 AR 마커 앱이 탑재되어 상기 AR 마커를 촬영하고 인식하여 정보를 추출하며, 상기 촬영된 AR 마커 이미지를 화면에 출력하면서 AR 마커에서 추출한 정보를 전송하고, 상기 AR 마커의 정보에 매칭되는 광고 영상을 수신하여 화면에 출력된 AR 마커 이미지 위에 실시간으로 재생하는 고객 모바일 단말; 및

상기 메뉴판에 구비된 AR 마커의 정보에 매칭되는 광고 영상이 등록된 영상 DB를 구비하여, 상기 AR 마커의 정보를 수신하는 경우 그에 매칭되는 광고 영상을 영상 DB에서 획득하고 이 광고 영상을 고객 모바일 단말에 전송하는 메뉴판광고 서비스서버;

를 포함하여 구성된다.

또한, 상기 AR 마커는 메뉴 이미지, 바코드 형태나 격자 무늬의 마커, 숫자나 텍스트를 포함하는 코드, 메뉴판의 특정 부분의 모양 중에서 어느 하나 또는 하나 이상의 결합으로 이루어지는 것을 특징으로 한다.

또한, 상기 AR 마커가 메뉴 이미지로 이루어진 경우 그 메뉴 이미지는 화면에 재생되는 광고 영상의 첫 화면과 같은 이미지인 것을 특징으로 한다.

또한, 상기 AR 마커가 사각형인 경우 고객 모바일 단말에서 그 사각형의 네 꼭지점을 인식하여 그 네 꼭지점 안으로 광고 영상을 재생하는 것을 특징으로 한다.

또한, 상기 AR 마커 하나에 매칭되는 다수의 광고 영상이 영상 DB에 등록되는 것을 특징으로 한다.

또한, 상기 메뉴가 음식인 경우에 메뉴판의 AR 마커는 조리 과정의 한 장면을 나타내는 이미지이고, 그 이미지 위에 재생되는 광고 영상은 상기 이미지 장면 이후부터의 조리 과정을 나타내는 영상인 것을 특징으로 한다.

본 발명에 따른 증강현실 마커 인식을 통한 메뉴판광고 서비스방법은, 메뉴판을 광고 서비스에 등록하여 상기 메뉴판에 다수 구비된 AR 마커를 등록하는 제1단계;

모바일 단말에 부착된 카메라를 이용해 메뉴판에 구비된 다수의 AR 마커 중에서 어느 하나를 촬영하는 제2단계;

상기 촬영된 AR 마커에서 AR 마커를 인식하고 정보를 추출하는 제3단계;

상기 모바일 단말의 화면에 촬영된 AR 마커 이미지를 출력하는 제4단계;

상기 AR 마커에서 추출한 정보와 매칭되는 광고 영상이 영상 DB에 있는지 확인하여 매칭된 광고 영상을 획득하는 제5단계; 및

상기 획득한 광고 영상을 상기 모바일 단말의 화면에 출력된 AR 마커 이미지 위에 실시간으로 재생하는 제6단계;

를 포함하여 구성된다.

또한, 상기 모바일 단말과 네트워킹 되는 메뉴판광고 서비스서버를 더 구비하여,

상기 제5단계 이전에 상기 AR 마커에서 추출한 정보를 메뉴판광고 서비스서버에 전송하고, 상기 메뉴판광고 서비스서버에서 제5단계를 수행한 후 획득한 광고 영상을 모바일 단말에 전송하며,

상기 모바일 단말이 제6단계에서 광고 영상을 수신하여 실시간으로 재생하는 것을 특징으로 한다.

또한, 상기 제6단계에서 AR 마커 촬영시 카메라의 촬영 각도에 따라 재생되는 광고 영상에 기울기를 적용하되, 상기 AR 마커가 사각형인 경우 그 사각형의 네 꼭지점을 인식하여 그 네 꼭지점 안으로 광고 영상을 재생하는 것을 특징으로 한다.

또한, 상기 AR 마커가 메뉴 이미지인 경우 재생되는 광고 영상의 첫 화면 이미지는 메뉴 이미지와 같은 것을 특징으로 한다.

그리고 상기 AR 마커 하나에 매칭되는 다수의 광고 영상이 영상 DB에 등록되어 상기 제6단계에서 다수의 광고 영상을 재생 우선 순위에 따라 실시간으로 재생하는 것을 특징으로 한다.

상술한 과제의 해결 수단에 의하면, 메뉴를 나타내는 AR 마커를 메뉴판에 기록하는 방식으로 메뉴판을 제작하여, 많은 비용을 들이지 않고서도 메뉴판을 제작할 수 있고 AR 기능을 하는 앱 하나만으로 여러 상점의 메뉴판에 실용적으로 사용할 수 있다.

또한, 메뉴 이미지로 표현되는 AR 마커를 모바일 단말로 인식하여 해당하는 메뉴의 광고 영상을 그 메뉴 이미지 위에 실시간으로 재생시킴으로써 직관성을 향상시킬 수 있고, 더 효과적이면서 신뢰성 있는 광고를 할 수 있다.

도 1은 본 발명의 실시예에 따른 메뉴판광고 서비스시스템의 블록도이다.
도 2는 도 1에 나타낸 고객 모바일 단말의 구성도이다.
도 3은 본 발명의 실시예에 따른 메뉴판광고 서비스방법의 순서도이다.

이하 본 발명의 실시예에 대하여 첨부된 도면을 참고로 그 구성 및 작용을 설명하기로 한다.

도면들 중 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 참조번호 및 부호들로 나타내고 있음에 유의해야 한다.

하기에서 본 발명을 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.

또한, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.

먼저, 본 발명의 이해를 돕기 위해 증강현실에 대해 설명하면, 증강현실(AR)은 가상현실(Virtual Reality)의 한 분야로 실제 환경에 가상 사물이나 정보를 합성하여 원래의 환경에 존재하는 것처럼 보여주는 컴퓨터 그래픽 기법이다.

이 증강현실은 물리공간과 전자공간이 융합된 공간으로, 실제 환경 또는 실세계의 영상에 컴퓨터 그래픽과 같은 가상의 영상을 혼합하여 사용자의 지각 인식에 가상 정보를 부가함으로써 현실세계를 보강하기 위해 사용된다.

즉, 증강현실 시스템은 현실 세계와 가상 세계를 결합함으로써 실시간으로 사용자와 상호 작용이 이루어지도록 하는 것으로 가상현실 시스템보다 더욱 향상된 몰입감을 제공한다는 이점이 있다.

도 1은 본 발명의 실시예에 따른 메뉴판광고 서비스시스템의 블록도이다.

도 1에 도시된 바와 같이 메뉴판(300)과 고객 모바일 단말(100) 및 메뉴판광고 서비스서버(200)를 포함하여 구성된다.

상기 메뉴판(300)에는 각 상점(예를 들어 식당, 커피숍 등)에서 제공하거나 서비스하는 다수의 상품(메뉴) 이미지(310a,310b,…)가 구비된다.

이하에서는 메뉴 이미지를 AR 마커로 등록하여 특정 광고 영상을 획득해서 광고하는 것을 예를 들어 설명하나 기존 이미지를 마커로 등록하여 이 마커 정보를 이용해 특정 광고 영상을 획득해서 광고할 수 있음은 물론이다.

여기서 상기 AR 마커는 메뉴 이미지, 바코드 형태나 격자 무늬의 마커, 숫자나 텍스트를 포함하는 코드, 메뉴판의 특정 부분의 모양(예를 들어 메뉴판 자체의 특징점, 모서리 등의 모양) 중에서 어느 하나 이상으로 이루어지는 것으로, 여기서는 AR 마커가 메뉴 이미지로 이루어진 것을 예를 들어 설명한다.

즉, 상기 메뉴 이미지(310a,310b,…) 자체가 AR 마커이다.

고객 모바일 단말(100)은 네트워킹 기능을 구비하여 메뉴판광고 서비스서버(200)와 통신을 수행하고 AR기능을 수행할 수 있는 특정 앱(이하 AR 마커 앱)이 탑재되며, 상기 AR 마커 앱은 태블릿(tablet) PC, 노트북, 스마트폰(smartphone)과 같은 고객 모바일 단말(100)에서 동작하는 응용 프로그램을 의미한다.

상기 AR 마커 앱은 응용 프로그램이 탑재된 고객 모바일 단말(100)에 부착된 카메라에서 촬영된 메뉴 이미지에서 AR 마커를 인식하고, 이 AR 마커에서 정보를 추출하며, 메뉴판광고 서비스서버(200)에서 전송되는, AR 마커에서 추출한 정보에 매칭되는 광고 영상을 AR 마커 앱이 실행되는 고객 모바일 단말(100)의 화면에 출력된 메뉴 이미지 위에 광고 영상을 실시간으로 데이터 스트리밍하여 재생한다.

이때 AR 마커 앱은 메뉴 이미지(310a,310b,…) 즉, AR 마커가 사각형인 경우 그 사각형의 네 꼭지점을 인식하여 그 네 꼭지점 안으로 광고 영상을 출력하도록 세팅되어, 카메라의 화각이 변하여 즉, 고객 모바일 단말(100)에 부착된 카메라의 촬영 각도가 변하여 네 꼭지점이 원근감있는 마름모꼴로 변하게 되면 광고 영상 역시 마름모꼴로 재생한다.

이를 통해 광고 영상의 실제감과 비주얼 임팩트(visual impact)를 강하게 할 수 있다.

상기 메뉴판광고 서비스서버(200)는 각 상점에 구축되거나 연합된 다수 상점에 구축되는 것으로, 영상 DB(220)에 상기 AR 마터에서 추출된 정보와 매칭되는 광고 영상을 미리 등록한다.

상기 메뉴판(300)의 메뉴 이미지(310a,310b,…) 하나에 매칭되는 광고 영상이 여러 개여서 하나의 AR 마커에 매칭되는 다수의 광고 영상이 영상 DB(220)에 저장될 수 있다.

상기 메뉴판광고 서비스서버(200)는 고객 모바일 단말(100)에서 전송한 AR 마커의 정보를 수신하여 이 AR 마커의 정보에 매칭되는 광고 영상을 영상 DB(220)에서 검색하여 고객 모바일 단말(100)에 전송한다.

본 발명에서 상기 메뉴판(300)의 메뉴가 음식 메뉴인 경우 메뉴판(300)에 구비되는 음식 이미지는 조리 과정의 한 장면을 나타내는 이미지이고, 광고 영상은 그 장면 이후의 조리 과정을 나타내며, 이때 조리 이미지는 AR 마커가 된다.

예를 들어 상기 음식 메뉴가 김치찌개인 경우 조리 과정 중 김치찌개가 끓는 한 장면이 메뉴 이미지(310a,310b,…)로 메뉴판(300)에 구비되고, 고객 모바일 단말(100)의 화면에 출력되는 메뉴 이미지 위에 재생되는 광고 영상은, 메뉴판(300)에 나타낸 끓는 이미지 이후의 끓는 모습을 나타내는 영상이다.

즉, 광고 영상의 재생되는 첫 화면은 상기 메뉴판(300)에 구비된 메뉴 이미지(310a,310b,…)가 되어 광고 영상의 연속성에 의해 직관성을 향상시킬 수 있다.

도 2는 도 1에 나타낸 고객 모바일 단말의 구성도이다.

도 2에 도시된 바와 같이 고객 모바일 단말, 보다 구체적으로 고객 모바일 단말(100)에 설치된 고객 단말 애플리케이션은 네트워크 접속부(110), 관리부(140), 디스플레이 작동부(130), 영상 보정 처리부(120), 카메라 작동부(150), 인식부(160)를 포함하여 구성되는 것으로, 카메라를 이용해 메뉴판의 메뉴 이미지(310)를 촬영하고 메뉴 이미지의 AR 마커를 인식하여 정보를 추출하며 이를 메뉴판광고 서비스서버(200)에 전송한 후, 메뉴판광고 서비스서버(200)에 전송한 AR 마커의 정보에 매칭되는 광고 영상을 화면에 출력된 메뉴 이미지 위에 광고 영상을 출력한다.

상기 네트워크 접속부(110)는 고객 모바일 단말(110)의 네트워크 입출력을 담당하고 관리부(140)를 통해 제어되는 것으로, 특히 AR 마커의 정보를 네트워크를 통해 메뉴판광고 서비스서버(200)에 전송하고, 메뉴판광고 서비스서버(200)에 전송하는, AR 마커의 정보에 매칭되는 광고 영상을 네트워크를 통해 수신한다.

관리부(140)는 고객 모바일 단말(100)의 네트워크 입출력, 하드웨어 제어, 기능제어 등 전반적인 기능을 제어한다.

카메라 작동부(150)는 상기 관리부(140)의 제어에 의해 메뉴판의 메뉴 이미지(310)를 촬영하여 인식부(160)에 제공한다.

상기 인식부(160)는 카메라에서 촬영한 메뉴 이미지에서 AR 마커를 인식하고 그 AR 마커의 정보를 추출하여 촬영된 메뉴 이미지와 함께 관리부(140)에 제공한다.

상기 관리부(140)는 촬영된 메뉴 이미지를 디스플레이 작동부(130) 제어에 의해 고객 모바일 단말(100)의 화면에 출력함과 동시에 AR 마커의 정보를 네트워크 접속부(110)를 통해 메뉴판광고 서비스서버(200)에 전송한다.

영상 보정 처리부(120)는 메뉴판광고 서버스서버(200)에서 전송한 광고 영상을 카메라의 촬영 각도에 맞게 보정 처리한다.

즉, 메뉴 이미지(310a,310b,…) AR 마커가 사각형인 경우 그 사각형의 네 꼭지점을 인식하여 그 네 꼭지점 안으로 광고 영상을 출력하도록 세팅되어, 카메라의 화각이 변하여 네 꼭지점이 원근감있는 마름모꼴로 변하게 되면 광고 영상 역시 마름모꼴로 재생되도록 한다.

디스플레이 작동부(130)는 카메라에서 촬영한 메뉴 이미지를 고객 모바일 단말(100)의 화면에 출력하고, 이 출력 메뉴 이미지 위에 영상 보정 처리부(120)에서 보정 처리한 광고 영상을 실시간으로 재생한다.

이와 같이 광고 영상을 실시간으로 재생함으로써 고객 모바일 단말기(100)의 화면에 메뉴판(300)의 메뉴(상품)를 더 효과적으로 광고할 수 있다.

도 3은 본 발명의 실시예에 따른 메뉴판광고 서비스방법의 순서도이다.

상점에서는 상점에서 제공하거나 서비스하는 메뉴(상품) 이미지를 메뉴판(300)에 구비하되, 상기 메뉴 이미지(310a,310b,…)가 AR 마커가 되도록 메뉴판을 제작한다.

또한, 메뉴판광고 서버스서버(200)에 기존 메뉴판을 광고 서비스로 등록하여 메뉴 이미지 즉, AR 마커를 등록하고, 영상 DB(220)에 상기 AR 마커의 정보에 매칭되는 영상 정보를 등록한다(S302).

이와 같은 상태에서 고객이 특정 상점을 방문하여 그 상점에 구비된 메뉴판을 보고 메뉴를 정하여 주문을 하게 되는데, 이때 고객은 상점을 처음 방문하거나 사전 정보 없이 상점을 방문하여 메뉴판의 메뉴(이미지나 텍스트)만 보고 특정 메뉴를 주문하기가 망설여진다.

이런 경우 고객은 AR 마커 앱이 탑재된 고객 모바일 단말(100)의 카메라를 이용해 자신이 원하는 메뉴판(300)의 메뉴 이미지(310a,310b,…)를 촬영한다(S304).

상기 AR 마커 앱이 탑재되지 않은 경우에는 앱스토어나 메뉴판광고 서비스서버(200)로부터 AR 마커 앱을 다운받아 설치한 후 특정 메뉴 이미지를 촬영할 수 있다.

상기 AR 마커 앱은 카메라에서 촬영한 메뉴 이미지에서 AR 마커를 인식하고 정보를 추출한다(S306).

고객 모바일 단말(100)에서는 화면에 촬영 메뉴 이미지를 출력하며(S308), AR 마커의 정보를 메뉴판광고 서비스서버(200)에 전송하여, 메뉴판광고 서비스서버(200)에서 AR 마커의 정보에 매칭되는 광고 영상을 영상 DB(220)에서 검색하여 획득한다(S310).

이때 하나의 AR 마커의 다수의 광고 영상이 매칭되어 다수의 광고 영상을 획득할 수도 있다.

메뉴판광고 서비스서버(200)는 획득한 광고 영상을 고객 모바일 단말(100)에 전송하되, 하나의 AR 마커에 매칭되는 광고 영상이 다수인 경우 재생 우선 순위에 따라 광고 영상을 전송한다.

여기서 재생 우선 순위에 관한 정보는 광고 영상에 포함될 수도 있다.

상기 고객 모바일 단말(100)에서는 상기 S308단계에서 화면에 출력된 메뉴 이미지 위에 광고 영상을 실시간으로 재생한다(S312).

이때 고객 모바일 단말(100)의 AR 마커 앱은 메뉴 이미지와 고객 모바일 단말에 구비된 카메라와의 촬영 각도에 따라 광고 영상에 기울기를 적용하여 재생한다.

여기서 하나의 AR 마커와 관련된 광고 영상이 다수인 경우에 재생 우선 순위에 따라 차례로 재생하되, 상기 처음 재생되는 광고 영상의 첫 화면 이미지는 메뉴판의 메뉴 이미지와 같도록 하여 직관성을 향상시킨다.

이후 고객은 자신이 원하는 메뉴의 광고 영상을 보고 고객 모바일 단말(100)을 이용해 해당 메뉴를 주문할 수 있다.

이상에서는 메뉴판의 메뉴 이미지를 AR 마커로 등록하여 특정 광고 영상을 획득하는 절차에 대해 설명하였으나, 기존 이미지를 마커로 등록하여 특정 광고 영상을 획득할 수 있음은 물론이다.

100: 고객 모바일 단말 110: 네트워크 접속부
120: 영상 보정 처리부 130: 디스플레이 작동부
140: 관리부 150: 카메라 작동부
160: 인식부 200: 메뉴판광고 서비스서버
220: 영상 DB 300: 메뉴판
310: 메뉴 이미지

Claims

메뉴를 나타내는 AR 마커가 다수 구비되는 메뉴판;
AR기능을 수행하는 AR 마커 앱이 탑재되어 상기 AR 마커를 촬영하고 인식하여 정보를 추출하며, 상기 촬영된 AR 마커 이미지를 화면에 출력하면서 AR 마커에서 추출한 정보를 전송하고, 상기 AR 마커의 정보에 매칭되는 광고 영상을 수신하여 화면에 출력된 AR 마커 이미지 위에 실시간으로 재생하는 고객 모바일 단말; 및
상기 메뉴판에 구비된 AR 마커의 정보에 매칭되는 광고 영상이 등록된 영상 DB를 구비하여, 상기 AR 마커의 정보를 수신하는 경우 그에 매칭되는 광고 영상을 영상 DB에서 획득하고 이 광고 영상을 고객 모바일 단말에 전송하는 메뉴판광고 서비스서버;
를 포함하는 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템.
제1항에 있어서,
상기 AR 마커는 메뉴 이미지, 바코드 형태나 격자 무늬의 마커, 숫자나 텍스트를 포함하는 코드, 메뉴판의 특정 부분의 모양 중에서 어느 하나 또는 하나 이상의 결합으로 이루어지는 것을 특징으로 하는 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템.
제2항에 있어서,
상기 AR 마커가 메뉴 이미지로 이루어진 경우 그 메뉴 이미지는 화면에 재생되는 광고 영상의 첫 화면과 같은 이미지인 것을 특징으로 하는 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템.
제1항 내지 제3항 중 어느 한 항에 있어서,
상기 AR 마커가 사각형인 경우 고객 모바일 단말에서 그 사각형의 네 꼭지점을 인식하여 그 네 꼭지점 안으로 광고 영상을 재생하는 것을 특징으로 하는 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템.
제1항에 있어서,
상기 AR 마커 하나에 매칭되는 다수의 광고 영상이 영상 DB에 등록되는 것을 특징으로 하는 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템.
제1항에 있어서,
상기 메뉴가 음식인 경우에 메뉴판의 AR 마커는 조리 과정의 한 장면을 나타내는 이미지이고, 그 이미지 위에 재생되는 광고 영상은 상기 이미지 장면 이후부터의 조리 과정을 나타내는 영상인 것을 특징으로 하는 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템.
메뉴판을 광고 서비스에 등록하여 상기 메뉴판에 다수 구비된 AR 마커를 등록하는 제1단계;
모바일 단말에 부착된 카메라를 이용해 메뉴판에 구비된 다수의 AR 마커 중에서 어느 하나를 촬영하는 제2단계;
상기 촬영된 AR 마커에서 AR 마커를 인식하고 정보를 추출하는 제3단계;
상기 모바일 단말의 화면에 촬영된 AR 마커 이미지를 출력하는 제4단계;
상기 AR 마커에서 추출한 정보와 매칭되는 광고 영상이 영상 DB에 있는지 확인하여 매칭된 광고 영상을 획득하는 제5단계; 및
상기 획득한 광고 영상을 상기 모바일 단말의 화면에 출력된 AR 마커 이미지 위에 실시간으로 재생하는 제6단계;
를 포함하는 증강현실 마커 인식을 이용한 메뉴판광고 서비스방법.
제7항에 있어서,
상기 모바일 단말과 네트워킹 되는 메뉴판광고 서비스서버를 더 구비하여,
상기 제5단계 이전에 상기 AR 마커에서 추출한 정보를 메뉴판광고 서비스서버에 전송하고, 상기 메뉴판광고 서비스서버에서 제5단계를 수행한 후 획득한 광고 영상을 모바일 단말에 전송하며,
상기 모바일 단말이 제6단계에서 광고 영상을 수신하여 실시간으로 재생하는 것을 특징으로 하는 증강현실 마커 인식을 이용한 메뉴판광고 서비스방법.
제7항 또는 제8항에 있어서,
상기 제6단계에서 AR 마커 촬영시 카메라의 촬영 각도에 따라 재생되는 광고 영상에 기울기를 적용하되, 상기 AR 마커가 사각형인 경우 그 사각형의 네 꼭지점을 인식하여 그 꼭지점 안으로 광고 영상을 재생하는 것을 특징으로 하는 증강현실 마커 인식을 이용한 메뉴판광고 서비스방법.
제9항에 있어서,
상기 AR 마커가 메뉴 이미지인 경우 재생되는 광고 영상의 첫 화면 이미지는 메뉴 이미지와 같은 것을 특징으로 하는 증강현실 마커 인식을 이용한 메뉴판광고 서비스방법.
제7항 또는 제8항에 있어서,
상기 AR 마커 하나에 매칭되는 다수의 광고 영상이 영상 DB에 등록되어 상기 제6단계에서 다수의 광고 영상을 재생 우선 순위에 따라 실시간으로 재생하는 것을 특징으로 하는 증강현실 마커 인식을 이용한 메뉴판광고 서비스방법.