KR20160092292A

KR20160092292A - 광고물에 대한 증강현실 서비스 제공 시스템 및 방법

Info

Publication number: KR20160092292A
Application number: KR1020150012737A
Authority: KR
Inventors: 이상혁
Original assignee: 주식회사 아이마카
Priority date: 2015-01-27
Filing date: 2015-01-27
Publication date: 2016-08-04

Abstract

본 발명은 증강현실 구현 마커를 포함하는 광고물; 상기 광고물을 화상 프레임으로 촬영하여 화상 프레임에 포함된 광고물 이미지를 인식하고, 상기 광고물 이미지에 매칭되는 광고물 이미지 정보를 서버로 전송할 수 있는 이동 단말기; 상기 이동 단말기로부터 전송된 광고물 이미지 정보에 매칭되는 증강현실 이미지를 상기 이동 단말기에 전송하는 서버; 및 상기 이동 단말기와 상기 서버 간의 데이터 송수신이 이루어지는 통신망;을 포함하여, 상기 화상 프레임과 상기 증강현실 이미지를 정합하여 증강현실로 구현된 광고 정보를 제공하는 광고물에 대한 증강현실 서비스 제공 시스템을 제공한다.
이러한 본 발명에 의하면, 광고물에 증강현실을 적용하여 광고 대상에 관련된 정보들을 피광고자에게 효과적으로 전달할 수 있으며, 이를 통해, 광고 효과를 증대시켜 판촉 대상물 구입, 인식 제고 등 의도하고자 하는 피광고자의 행위를 유도할 수 있는 효과가 있다.

Description

광고물에 대한 증강현실 서비스 제공 시스템 및 방법 {System and method for providing augmented reality service of materials for an promotional objects}

본 발명은 광고물에 대한 증강현실 서비스 제공 시스템 및 방법에 관한 것으로서, 더욱 구체적으로는 광고물에 증강 현실을 적용하여 효과적으로 판촉 및 홍보 대상에 대한 정보를 전달할 수 있는 시스템 및 방법에 관한 것이다.

최근 스마트 폰의 보편화에 따라 스마트 폰을 이용한 각종 정보의 제공이나 홍보 등이 다양한 방식으로 이루어지고 있다. 특히, 사용자에게 가장 편의적인 방식의 하나로서 카메라 모듈을 이용하여 QR 코드를 인식하도록 하고, 인식된 QR 코드가 지시하는 특정 웹 사이트의 접속이나 특정 웹 사이트의 컨텐츠 제공 등이 가장 보편적인 예시이다. 최근에는 카메라 모듈을 이용한 촬영 시 현실의 공간에 다양한 정보를 덧씌워 보여 주는 증강 현실(augmented reality) 기법을 이용한 컨텐츠 제공이 활발히 연구되고 있다.

증강현실(Augmented Reality, AR)이란 가상현실(Virtual Reality: VR)의 한 분야에 속하는 기술로, 사용자가 감각으로 느끼는 실제환경에 가상환경을 합성하여 원래의 실제환경에 가상환경이 존재하는 것처럼 느끼게 하는 컴퓨터 기법이다.

이러한 증강 현실은 가상의 공간과 사물만을 대상으로 하는 기존의 가상 현실과 달리 현실 세계의 기반에 가상 사물을 합성하여 현실 세계만으로는 얻기 어려운 부가적인 정보들을 보강해 제공할 수 있는 장점이 있다.

즉, 사용자가 보고 있는 실사 영상에 컴퓨터 그래픽으로 만들어진 가상환경, 예를 들면, 3차원 가상환경을 정합함으로써 구현된 현실을 증강현실이라고 할 수 있다. 여기서, 3차원 가상환경은 사용자가 바라보는 실사 영상에서 필요한 정보를 제공해주고, 3차원 가상영상은 실사영상과 정합되어 사용자의 몰입도를 높일 수 있다.

이러한 증강현실은 단순 가상현실 기술에 비하여 3차원 가상환경에 실사영상도 같이 제공하여 현실환경과 가상환경과의 구분이 모호해지게 함으로써, 보다 나은 현실감을 제공할 수 있다.

이와 같은 증강현실 시스템의 장점에 기인하여, 최근 전세계적으로 증강현실을 접목한 기술에 대해 활발한 연구/개발이 진행되고 있다. 예를 들어, 증강 현실 기술은 방송, 광고, 전시, 게임, 테마 파크, 군용, 교육 및 프로모션 등의 분야에서 실용화가 진행 중인 상태이다. 그러나, 아직까지는 대중적으로 확산되지는 않았다.

한편, 단말기는 이동 가능 여부에 따라 이동 단말기(mobile/portable terminal) 및 고정 단말기(stationary terminal)으로 나뉠 수 있다. 다시 이동 단말기는 사용자의 직접 휴대 가능 여부에 따라 휴대(형) 단말기(handheld terminal) 및 거치형 단말기(vehicle mount terminal)로 나뉠 수 있다.

이와 같은 단말기(terminal)는 기능이 다양화됨에 따라 예를 들어, 사진이나 동영상의 촬영, 음악이나 동영상 파일의 재생, 게임, 방송의 수신 등의 복합적인 기능들을 갖춘 멀티미디어 기기(Multimedia player) 형태로 구현되고 있다. 이러한 단말기의 기능 지지 및 증대를 위해, 단말기의 구조적인 부분 및/또는 소프트웨어적인 부분을 개량하는 것이 고려될 수 있다.

특히, 앞서 설명한 증강현실 기술에 대한 연구가 시작된 이래 다양한 분야에서 이 기술을 응용하려는 연구가 이어져 왔고, 최근 이동 단말기의 어플리케이션 분야에서도 이 기술을 접목하려는 연구가 활발히 이루어지고 있다.

그리고, 이동 단말기는 최근 휴대폰, PDA(personal digital assistants), UMPC(ultra mobile personal computer) 등 모바일 기기의 컴퓨팅 능력 향상 및 무선 네트워크 장치의 발달로 핸드헬드(handheld) 증강현실 시스템이 가능해 졌다.

이러한 시스템이 가능해지면서 모바일 기기를 사용한 증강현실 어플리케이션이 다수 개발되었다. 그리고 모바일 기기의 보급이 매우 빠르게 보편화되어 증강현실 어플리케이션을 접할 수 있는 환경이 조성되고 있는 상황이다.

더불어, 단말기의 증강현실을 이용한 다양한 부가서비스에 대한 사용자 요구가 증대하고 있으며, 이를 이용하여 단말기 사용자에게 다양한 증강현실 컨텐츠를 적용하려는 시도가 증가하고 있다.

본 발명은 촬영되는 화면 프레임 속의 광고물에 반응하여 증강현실 구현하는 어플리케이션을 통해, 광고(홍보) 효과를 증대시킴과 동시에 사용자에게 광고 대상에 관한 다양한 정보를 제공할 수 있는 시스템 및 방법을 제공하고자 한다.

본 발명은 증강현실 구현 마커를 포함하는 광고물; 상기 광고물을 화상 프레임으로 촬영하여 화상 프레임에 포함된 광고물 이미지를 인식하고, 상기 광고물 이미지에 매칭되는 광고물 이미지 정보를 서버로 전송할 수 있는 이동 단말기; 상기 이동 단말기로부터 전송된 광고물 이미지 정보에 매칭되는 증강현실 이미지를 상기 이동 단말기에 전송하는 서버; 및 상기 이동 단말기와 상기 서버 간의 데이터 송수신이 이루어지는 통신망;을 포함하여, 상기 화상 프레임과 상기 증강현실 이미지를 정합하여 증강현실로 구현된 광고 정보를 제공하는 광고물에 대한 증강현실 서비스 제공 시스템을 제공한다.

본 발명에 의하면, 광고물에 증강현실을 적용하여 광고 대상에 관련된 정보들을 피광고자가 손쉽게 취득할 수 있고 흥미롭게 몰입하여 습득할 수 있도록 하는 등 효과적으로 전달할 수 있으며, 이를 통해, 광고 효과를 증대시켜 판촉 대상물 구입, 인식 제고 등 의도하고자 하는 피광고자의 행위를 유도할 수 있는 효과가 있다.

도 1은 본 발명의 실시예에 따른, 증강현실 서비스 어플리케이션 제공 시스템을 나타내는 도면이다.
도 2는 본 발명의 실시예와 관련된 이동 단말기의 블록 구성도(block diagram)이다.
도 3은 본 발명의 실시예에 따른, 증강현실 서비스 제공서버의 구성을 나타내는 도면이다.
도 4는 본 발명의 실시예에 따른 광고물에 대하여 증강현실 서비스를 제공하는 어플리케이션이 설치된 이동 단말기 및 서버의 동작을 나타내는 흐름도이다.
도 5는 본 발명의 실시예에 따른, 광고물 및 증강현실 광고물 이미지가 터치스크린에 표시된 모습을 나타낸다.
도 6는 본 발명의 실시예에 따른, 광고물에 증강현실 서비스를 제공하는 어플리케이션이 설치된 이동 단말기의 동작을 나타내는 흐름도이다.
도 7은 본 발명의 실시예에 따른, 광고물 이미지가 포함된 화상 프레임이 터치 스크린에 표시된 모습을 나타낸다.
도 8는 본 발명의 실시예에 따른, 증강현실 광고물 이미지가 터치스크린에 표시된 모습을 나타낸다.

이하에 본 발명을 상세하게 설명하기에 앞서, 본 명세서에 사용된 용어는 특정의 실시예를 기술하기 위한 것일 뿐 첨부하는 특허청구의 범위에 의해서만 한정되는 본 발명의 범위를 한정하려는 것은 아님을 이해하여야 한다. 본 명세서에 사용되는 모든 기술용어 및 과학용어는 다른 언급이 없는 한은 기술적으로 통상의 기술을 가진 자에게 일반적으로 이해되는 것과 동일한 의미를 가진다.

본 명세서 및 청구범위의 전반에 걸쳐, 다른 언급이 없는 한 포함(comprise, comprises, comprising)이라는 용어는 언급된 물건, 단계 또는 일군의 물건, 및 단계를 포함하는 것을 의미하고, 임의의 어떤 다른 물건, 단계 또는 일군의 물건 또는 일군의 단계를 배제하는 의미로 사용된 것은 아니다.

이하에서는, 본 실시예에 대하여 첨부되는 도면을 참조하여 상세하게 살펴보도록 한다. 다만, 본 실시예가 개시하는 사항으로부터 본 실시예가 갖는 발명의 사상의 범위가 정해질 수 있을 것이며, 본 실시예가 갖는 발명의 사상은 제안되는 실시예에 대하여 구성요소의 추가, 삭제, 변경 등의 실시 변형을 포함한다고 할 것이다.

본 발명과 관련되는 이동 단말기의 설명에 사용되는 접미수 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.

본 명세서에서 설명되는 "이동 단말기"에는 휴대폰, 스마트폰, 태블릿 PC, 노트북 컴퓨터, 디지털방송용 단말기, PDA(Personal Digital Assistant), PMP(Portable Multimedia Player), 네비게이션 등이 포함될 수 있다. 그러나, 본 명세서에 기재되는 실시예에 따른 구성은 이동 단말기에만 적용 가능한 경우를 제외하면, 디지털 TV, 데스크탑 컴퓨터 등과 같은 고정 단말기에도 적용될 수 있다.

또한 광고는 판매자 등이 구매자 등에게 상품이나 서비스를 팔기 위한 행위, 즉 판촉을 위한 모든 행위를 의미하며, 홍보는 기업, 개인, 단체 등의 홍보자가 소기의 목적을 거두기 위하여 상품이나 서비스, 이념, 신조, 정책 등을 피홍보자에 알리는 모든 행위를 의미하는 것으로, 양자는 구별되지만, 본 명세서 전반에 기재된 "광고"는 "홍보"를 포함하는 의미로 기재되었다. 따라서 특허청구범위를 포함한 본 명세서 전반에 기재된 "광고물", "광고 대상", "광고자", "피광고자"는 각각 "홍보물", "홍보 대상", "홍보자", "피홍보자"를 포함하는 의미이다.

또한, 특허청구범위를 포함한 본 명세서 전반에 기재된 "광고 대상"은 판매자 등이 판매하고자 하는 상품, 서비스 및 홍보자가 전달하고자 하는 이념, 신조, 정책 등을 의미하며, "광고물"은 광고 및 홍보에 이용되는 물건, 예를 들면, 전단지, 광고(홍보) 책자, 명함, 간판, 현수막 등을 의미한다. 경우에 따라서는, 광고물이 광고 대상을 포함하는 의미로도 사용되었다.

본 발명은 광고물에 증강현실 서비스를 적용하여 광고 대상에 관련된 정보를 제공함으로써, 광고자는 광고 효과를 증대시키고, 피광고자는 물건을 구입하는 등의 행위를 함에 있어서 광고 대상 관련 정보를 흥미롭고 효과적으로 취득하도록 하려는 것이다.

도 1은 본 발명의 실시예에 따른, 피광고자의 이동 단말기를 이용하여 광고물에 대한 증강현실 서비스를 제공하는 시스템을 나타내는 도면이며, 도 2는 본 발명의 실시예와 관련된 이동 단말기(100)의 블록 구성도(block diagram)이며, 도 3은 본 발명의 실시예에 따른, 증강현실 서비스 제공 서버(200)의 구성을 나타내는 도면이다.

이하에서는 이러한 광고물에 대한 증강현실 서비스 제공 시스템에 대해, 도 1 내지 도 3를 참조하여 좀 더 상세히 설명하기로 한다.

도 1을 참조하면, 본 발명의 실시예에 따른 광고물에 대한 증강현실 서비스를 제공 시스템(10)은 광고물에 대한 증강현실 서비스를 제공하는 어플리케이션이 설치되어 작동되는 이동 단말기(100)와, 상기 이동 단말기(100)에 증강현실 데이터를 제공하는 증강현실 서비스 제공 서버(200)와, 이동 단말기와 서버 간의 데이터 송수신이 이루어지는 통신망(300)을 포함한다.

먼저, 상기 통신망(300)은 이동 단말기(100)와, 증강현실 서비스 제공 서버(200) 간의 정보 송수신을 위한 통로를 제공하는 역할을 한다. 즉, 광고물(400)에 증강현실 서비스를 제공하기 위하여, 이동 단말기(100)와 증강현실 서비스 제공 서버(200)간의 데이터 송수신이 이루어질 수 있도록 하는 데이터망에 해당한다.

예를 들어, 이와 같은 기능을 수행하는 통신망(300)은 인터넷 프로토콜(IP, Internet Protocol)을 통하여 대용량 데이터의 송수신 서비스 및 끊기는 현상이 없는 데이터 서비스를 제공하는 아이피망으로, 아이피를 기반으로 서로 다른 망을 통합한 아이피망 구조인 올 아이피(All IP)망 일 수 있다. 또한, 통신망(300)은 유선통신망, 이동통신망, Wibro(Wireless Broadband)망, HSDPA(High Speed Downlink Packet Access)망, 위성통신망 및 와이파이(WI-FI, Wireless Fidelity)망 중 하나일 수 있다.

그리고, 상기 이동 단말기(100)는 피광고자에게 명령에 따라서 증강현실 광고 이미지를 출력하는 역할로서, 이러한 이동 단말기(100)의 세부적인 구성에 대하여 설명하면 다음과 같다.

도 2를 참조하면, 단말기(100)는 제어부(110), 저장부(120), A/V(Audio/Video) 입력부(130), 인터페이스(140), 사용자 입력부(150), 전원공급부(160), 출력부(170), 통신부(180) 등을 포함한다.

다만, 도 2는 이동 단말기(100)의 필수 요소들로만 구성된 것이 아니며, 본 실시예의 이동 단말기(100)는 인터페이스부, 사용자 입력부 등 다른 구성을 더 포함하거나 도시된 구성들 중 일부는 포함되지 않을 수 있다.

먼저, 상기 저장부(120)는 제어부(110)의 처리 및 제어를 위한 프로그램(예를 들면, 화상 프레임과 증강현실 이미지를 정합하는 알고리즘), 마커에 대한 정보, 이에 매칭되는 광고물 이미지 정보 데이터가 저장되는 데이터베이스를 포함하며, 입/출력되는 데이터들의 임시 저장을 위한 역할을 한다.

이러한 저장부(120)는 플래시 저장부 타입, 하드디스크 타입, 멀티미디어 카드 마이크로 타입, 카드 타입의 저장부(SD 등), 램(RAM), SRAM(Static RAM), 롬(ROM), EEPROM(Electrically Erasable Programmable ROM), PROM(Programmable ROM), 자기 저장부, 자기 디스크, 광 디스크 중 어느 하나의 타입으로 이루어진 저장매체가 될 수 있다.

그리고, A/V 입력부(130)는 이동 단말기(100)에 이미지, 영상, 소리 등의 시청각 정보를 입력하기 위한 구성요소로서, 카메라(131), 마이크 등을 포함할 수 있다. 예를 들어, 카메라(131)는 광고물을 촬영하여 광고물 이미지 등을 이동 단말기(100)에 전달할 수 있다.

그리고, 출력부(170)는 이동 단말기(100)의 시각, 청각 또는 촉각과 관련되는 출력을 발생시키기 위한 구성요소로서, 터치 스크린(171), 스피커(speaker), 알람부 및 햅틱 모듈 등으로 구성될 수 있다. 예를 들어, 터치 스크린(171)은 제어부(110)에서 처리되는 정보를 표시할 수 있는데, 광고물(400)이 카메라(131)로 촬영되는 경우, 촬영되는 화상 프레임을 표시할 수 있으며, 상기 화상 프레임에 증강현실이 구현된 광고 이미지를 표시할 수 있다.

이러한 터치 스크린(171)은 액정 디스플레이(LCD), 박막 트랜지스터 액정 디스플레이(TFT LCD), 유기 발광 다이오드(OLED), 플렉서블 디스플레이, 3차원 디스플레이 등으로 이루어질 수 있다. 이들 중 일부 디스플레이는 그를 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이것은 투명 디스플레이라 할 수 있으며, 이러한 투명 디스플레이의 예로는 TOLED(Transparent OLED)가 될 수 있다. 그리고, 터치 스크린의 후방 구조 또한 광 투과형 구조로 구성될 수 있으며, 이 경우 사용자는 단말기 바디의 터치 스크린이 차지하는 영역을 통해 단말기 바디의 후방에 위치한 사물을 볼 수 있다.

그리고, 터치 스크린(171)에는 터치 동작을 감지하기 위한 센서(터치 센서)가 상호 레이어 구조를 이루어 구성될 수 있으며, 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태가 해당될 수 있다.

이러한 터치 센서는 터치 스크린의 특정 영역에 가해지는 압력, 또는 터치 스크린의 특정 영역에 발생되는 정전 용량의 변화, 또는 터치 스크린의 특정 영역에 발생되는 자기장 변화를 전기적인 입력 신호로 변환하도록 구성될 수 있다. 터치 센서는 터치되는 위치 및 면적뿐만 아니라, 터치 순간의 압력까지도 검출할 수 있도록 구성될 수 있다.

터치 센서에 의하여 터치 입력이 감지되는 경우에, 그에 대응하는 신호는 터치 제어기로 보내지며, 터치 제어기는 수신한 신호에 대응되는 데이터를 제어부(110)로 전송한다. 이러한 과정을 통하여, 제어부(110)는 터치 스크린(171)에 터치가 있는지 여부, 디스플레이의 어느 영역에 터치가 이루어졌는지 여부, 디스플레이의 어느 영역에 어느 정도의 필압으로 터치가 이루어졌는지 여부 등을 확인할 수 있다.

그리고, 상기 통신부(180)는 방송 수신 모듈, 이동통신 모듈, 무선 인터넷 모듈, 근거리 통신 모듈 및 위치 정보 모듈 등 중 어느 하나 이상을 포함하여 구성될 수 있으며, 통신부(180)를 이용하여 통신망(300)을 통해 증강현실 구현을 통한 각종 데이터를 증강현실 서비스 제공 서버(200)에 요청하거나 전송받을 수 있다.

여기서, 무선 인터넷 모듈은 무선 인터넷 접속을 위한 모듈을 나타내는 것으로서, 이동 단말기(100)에 내장되어 구성되거나 외장 연결가능하도록 구성될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless Lan)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.

이동 단말기(100)의 전원 공급부(160)는 제어부(110)의 제어에 따라 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.

이동 단말기(100)의 제어부(110)는 단말기의 전체적인 동작 각각을 제어할 수 있다. 예를 들어, 상기 제어부(110)는 카메라(131)로부터 촬영되는 광고물 이미지가 포함된 화상 프레임과, 증강현실 서비스 제공 서버(200)로부터 전달된 증강현실 이미지를 정합하여, 터치 스크린(171)을 통해 출력할 수 있다.

본 실시예에서는 설명의 편의를 위하여, 상기 증강현실 서비스 제공과 관련된 모바일 증강현실 모듈(111)이 제어부(110) 내에 구성된 것으로 설명하나, 상기 모바일 증강현실 모듈(111)은 제어부(110)의 일부로 이해해도 무방하다.

그리고, 상기 제어부(110)는 터치 스크린(171) 상에서 행하여지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 수행할 수 있다.

여기에서 설명되는 다양한 실시예는, 예를 들어, 소프트웨어, 하드웨어 또는 이들이 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.

하드웨어적인 구현에 의하면, ASICs(Application Specific Integrated Circuits), DSPs(Digital Signal Processors), DSPDs(Digital Signal Processing Devices), PLDs(Programmable Logic Devices), FPGAs(Field Programmable Gate Arrays), 프로세서, 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(micro-processors), 기타 기능 수행을 위한 전기적인 유닛 중 어느 하나로 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 실시예들이 제어부(110) 자체로 구현될 수 있다.

소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시예들은 별도의 소프트웨어 모듈로 구현될 수 있다. 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다. 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션으로 소프트웨어 코드가 구현될 수 있다. 상기 소프트웨어 코드는 저장부(120)에 저장되고, 제어부(110)에 의하여 실행/동작될 수 있다.

한편, 상기 증강현실 서비스 제공 서버(200)는 광고물에 대한 증강현실 서비스 제공 어플리케이션을 이동 단말기(100)에 제공할 수 있으며, 상기 어플리케이션이 설치된 이동 단말기(100)에 요청에 따라서 필요한 데이터를 이동 단말기(100)에 제공할 수 있다.

예를 들어, 상기 이동 단말기(100)에서 광고물을 촬영하여 얻은 광고물 이미지에 대응되는 증강현실 이미지로 표현되는 광고 정보를 이동 단말기(100)에 제공하여, 이동 단말기(100)가 증강현실 광고 이미지를 출력할 수 있도록 도울 수 있다.

도 3을 참조하면, 이러한 증강현실 서비스 제공 서버(200)는 서버제어부(210), 서버저장부(220) 및 서버통신부(230)를 포함한다.

좀더 상세히, 먼저, 상기 서버통신부(230)는 이동 단말기(100)와 증강현실 어플리케이션 서비스를 위한 데이터를 송수신하는 역할을 한다.

그리고, 상기 서버저장부(220)는 광고 대상 관련 광고물 이미지와 3D 가상이미지를 매칭하여 저장한다. 또한, 3D 가상 이미지와 함께 광고 대상 정보를 전달하기 위한 각종 음향 효과 및 관련 동영상, 홈페이지 링크 등이 함께 매칭되어 저장될 수 있다.

그리고, 상기 서버제어부(210)는 이동 단말기(100)로부터 광고물 이미지에 포함된 마커 정보가 수신되면, 수신된 마커와 매칭되는 가상이미지와 그 밖의 보조 데이터를 서버저장부(220)에서 검색하고, 이를 서버통신부(230)를 통해 이동 단말기(10)로 전송하는 역할을 하며, 그 밖의 서버 구성 전체를 통합 관리 및 제어하는 역할을 한다.

이하에서는 증강현실을 이용한 광고 서비스 제공방법에 대해 좀 더 상세히 설명한다.

광고물에 대한 증강현실 서비스를 제공하기 위해서는, 먼저, 이동 단말기(100)에 광고물에 대한 증강현실 서비스 제공 어플리케이션(이하, 'AR 어플리케이션' 이라고 한다)이 설치되어야 한다. 이를 위하여, 피광고자는 어플리케이션 제공서버(예를 들면, OS 제공 서버, 통신사 서버)나 증강현실 서비스 제공 서버(200)를 통해 AR 어플리케이션을 이동 단말기(100)에 설치할 수 있을 것이다.

이하 설명에서는 도 4를 참조하여, 이동 단말기(100)에 AR 어플리케이션이 설치된 이동 단말기 및 증강현실 서비스 제공 서버를 통한 증강현실 서비스 제공 과정을 설명한다.

AR 어플리케이션이 설치된 이동 단말기(100)는 사용자의 실행 명령이 입력되면 AR 어플리케이션을 실행한다. (S101)

상기 제어부(110)는 AR 어플리케이션 동작과 관련된 매뉴얼 제공 또는 AR 어플리케이션 설정 등을 위한 시작 페이지를 터치 스크린(171)에 표시할 수 있으며, 이 단계는 생략될 수도 있다.

AR 어플리케이션이 실행되면, 상기 제어부(110)는 증강현실을 구현하기 위하여 카메라(131)를 동작시키고, 카메라(131)를 통해 입력되는 화상 프레임을 터치 스크린(171)에 출력한다.

이후, 상기 제어부(110)는 모바일 증강현실 모듈(111)을 로딩한다. (S103)

상기 제어부(110) 내에 별도로 모바일 증강현실 모듈(110)이 구성되는 것도 가능하나, 상기 모바일 증강현실 모듈(110)은 상기 제어부(110)에 일부로 볼 수 있다.

이러한 상기 모바일 증강현실 모듈(111)은 카메라(131)에서 촬영되는 화상프레임을 분석하여, 상기 화상 프레임에 광고물 이미지가 포함되면, 이를 인식한다. (S105)

여기서, 광고물 이미지는 증강현실이 구현되는 마커(marker)를 포함하고, 상기 마커는 광고물에 별도로 도시되는 것도 가능하며, 광고물에 포함된 사진이나 기호 등의 이미지가 마커 역할을 할 수도 있다.

상기 설정된 마커를 포함한 광고물이 카메라(131)를 통해 촬영되면 이를 광고물 이미지로 인식한다.

그리고, 로딩된 상기 모바일 증강현실 모듈(111)은 인식된 마커를 저장부(120)의 데이터베이스 내에서 검색하여, 광고물 이미지에 대한 영상정보를 분류 기준별로 생성한다. (S107)

좀 더 상세히, 상기 모바일 증강현실 모듈(111)은 카메라(131)가 광고물을 촬영하는 경우, 상기 광고물에서 마커를 검색하고, 상기 마커에 대응되는 광고물 이미지에 정보를 분류 기준별로 생성된 저장부(120)의 데이터베이스에서 검색하여 출력한다.

즉, 증강현실은 기 설정된 광고물 이미지에 포함된 마커(marker)가 촬영되는 경우, 상기 마커 위에 구현되는데, 이를 위하여, 상기 모바일 증강현실 모듈(111)은 마커를 포함하는 광고물 이미지를 검색하고, 상기 광고물 이미지가 검색되는 경우 해당 광고물 이미지에 매칭되는 광고물 이미지 정보를 데이터베이스로부터 검색하려는 것이다.

검색된 광고물 이미지 정보는 통신부를 통해 증강현실 서비스 제공 서버(200)로 전송된다.(S109) 즉, 검색되어진 광고물 이미지 정보를 증강현실 서비스 제공 서버(200)의 서버저장부(220)에 송신한다.(S301)

서버저장부(220)에는 광고물 이미지와 증강현실 이미지가 매칭되어 저장되어 있으며, 광고 대상에 대한 정보를 전달하기 위한 각종 음향 효과 및 관련 동영상, 홈페이지 링크 등이 함께 매칭되어 저장되어 있다.

광고물 이미지 정보(또는 광고물 이미지에 포함된 마커 정보)가 서버제어부(210)에 전송되면, 서버저장부(220)에서 광고물 이미지 정보(또는 광고물 이미지에 포함된 마커 정보)에 매칭되는 증강현실 이미지를 검색하고(S303), 검색된 증강현실 이미지를 서버통신부(230)을 통해 이동 단말기(100)로 전송한다.(S305)

이동 단말기에서는 증강현실 이미지를 수신 받아(S111), 화상 프레임과 전송받은 증강현실 이미지를 정합(S113)하여 증강현실로 구현된 광고 정보를 출력한다.(S115)

이하 설명에서는 증강현실이 구현되는 광고 대상 및 광고물을 인테리어 시공 "서비스" 및 "팜플렛"을 대표로 설명하나, 기타 광고 및 홍보가 가능한 대상과 관련된 각종 카탈로그나 명함 등과 같은 광고 대상 및 광고물 모두에 본 실시예가 적용될 수 있음은 당연하다.

본 발명과 다른 실시예에서는, 상기 모바일 증강현실 모듈(111)은 통신부(180) 내에 위치정보 모듈(151), 예를 들면, GPS 등을 통해 팜플렛 이미지 정보와 함께 이동 단말기(100)의 위치 정보를 함께 검색하여 출력할 수 있다. 이를 통해, 이동 단말기(100)에 서비스 정보를 증강현실로 제공할 때, 이동 단말기(100)의 위치 정보에 해당하는 지역에 관련된 인테리어 시공 서비스 정보를 집중적으로 제공하여, 이동 단말기(100) 피광고자에게 맞춤형 정보를 제공할 수 있다.

상기 팜플렛 이미지 정보가 검색되면, 상기 제어부(110)는 팜플렛 이미지 정보를 통신부(180)를 통해 증강현실 서비스 제공서버(200)로 송신한다. (S109)

본 발명의 다른 실시예는, AR 어플리케이션 설치 시 미리 증강현실 구현을 위한 데이터들을 모두 저장 및 설치하여, 증강현실 서비스 제공서버(200)와 별도의 데이터 송수신 없이 이동 단말기(100) 내에서 증강현실 서비스를 제공할 수 있다.

상기 팜플렛 이미지 정보를 증강현실 서비스 제공서버(200)에 송신하면, 상기 증강현실 서비스 제공서버(200)는 상기 팜플렛 이미지 정보에 해당하는 증강현실 구현을 위한 인테리어 시공 서비스 정보 데이터를 검색(S303)하여 이동 단말기(100)에 송신하며(S305), 이를 통해, 상기 이동 단말기(100)는 서비스 정보 데이터를 수신한다. (S111)

여기서, 상기 정보 데이터란 팜플렛 이미지에 대응되는 서비스 정보를 증강현실로 구현하기 위한 광고 대상 관련 정보를 포함하는 증강현실 이미지를 의미한다.

예를 들어, 상기 인테리어 시공 서비스 정보 데이터에는 제공되는 인테리어 디자인, 견적 또는 홈페이지 링크 등이 3D 이미지로 포함될 수 있으며, 홍보 영상 등이 동영상으로 포함될 수 있다.

또한, 본 발명의 다른 실시예에서는, 상기 팜플렛 이미지 정보와 함께 이동 단말기(100)의 위치 정보를 동시에 고려하여, 위치 정보에 해당하는 지역에 관련된 인테리어 시공 서비스 정보들을 집중적으로 증강현실로 구현할 수 있다.

상기 인테리어 시공 서비스 정보 데이터를 수신하면, 상기 모바일 증강현실 모듈(111)은 카메라(131)를 통해 입력되는 팜플렛 이미지와 상기정보 데이터를 정합하여(S113), 증강현실로 구현된 팜플렛 이미지를 터치스크린에 출력한다. (S115)

또한, 상기 모바일 증강현실 모듈(111)은 증강현실 팜플렛 이미지와 함께 서비스와 관련된 소리나 효과음을 출력부(170)에 스피커를 통해 출력할 수도 있다.

이를 통해, 피광고자에게 서비스에 관한 정보를 효과적으로 전달할 수 있으며, 피광고자는 증강현실 이미지를 통해 몰입하여 서비스 정보를 습득할 수 있다.

도 5는 본 발명의 일실시예에 따른 증강현실 팜플렛 이미지가 포함된 터치 스크린에 표시된 모습을 나타낸다.

이러한 팜플렛 상의 증강현실 이미지를 통해, 피광고자는 흥미롭게 인테리어 시공 서비스에 관한 정보를 얻을 수 있으며, 광고자는 광고 효과를 향상시킬 수 있는 장점이 있다.

특히, 본 발명의 다른 실시예에 따르면, 자신의 지역과 관련된 서비스 정보들을 집중적으로 증강현실로써 제공 받음을 수 있어서, 피광고자에게 맞춤형 정보를 제공할 수 있는 장점이 있다.

이하 설명에서는 증강현실이 구현되는 광고 대상 및 광고물로 "선거 홍보" 및 "선거 공보용 책자"를 대표로 설명하나, 기타 광고 및 홍보가 가능한 대상과 관련된 각종 카탈로그나 명함 등과 같은 광고 대상 및 광고물 모두에 본 실시예가 적용될 수 있음은 당연하다. 도 6에 광고물에 증강현실 서비스를 제공하는 어플리케이션이 설치된 이동 단말기의 동작을 나타내는 흐름도를 도시하였다.

본 발명과 다른 실시예에서는, 상기 모바일 증강현실 모듈(111)은 통신부(180) 내에 위치정보 모듈(151), 예를 들면, GPS 등을 통해 공보 이미지 정보와 함께 이동 단말기(100)의 위치정보를 함께 검색하여 출력할 수 있다. 이를 통해, 이동 단말기(100)에 선거 정보를 증강현실로 제공할 때, 이동 단말기(100)의 위치정보에 해당하는 지역에 관련된 선거 정보를 집중적으로 제공하여, 이동 단말기(100) 피홍보자에게 맞춤형 선거 정보를 제공할 수 있다.

상기 공보 이미지 정보가 검색되면, 상기 제어부(110)는 공보 이미지 정보를 통신부(180)를 통해 증강현실 서비스 제공서버(200)로 송신한다. (S109)

본 발명의 다른 실시예는, AR 어플리케이션 설치시 미리 증강현실 구현을 위한 데이터들을 모두 저장 및 설치하여, 증강현실 서비스 제공서버(200)와 별도의 데이터 송수신 없이 이동 단말기(100) 내에서 선거 공보용 증강현실 서비스를 제공할 수 있다.

상기 공보 이미지 정보를 증강현실 서비스 제공서버(200)에 송신하면, 상기 증강현실 서비스 제공서버(200)는 상기 공보 이미지 정보에 해당하는 증강현실 구현을 위한 선거 정보 데이터를 이동 단말기(100)에 송신하며, 이를 통해, 상기 이동 단말기(100)는 선거 정보 데이터를 수신한다. (S111)

여기서, 상기 선거 정보 데이터란 공보 이미지에 대응되는 선거 정보를 증강현실로 구현하기 위한 선거 정보를 포함하는 증강현실 이미지를 의미한다.

예를 들어, 상기 선거 정보 데이터에는 후보자(홍보자)의 3D 미니어쳐, 이력, 공약 또는 홈페이지 링크 등이 3D 이미지로 포함될 수 있으며, 선거 홍보 영상이나 공약에 관련된 이슈 등이 동영상으로 포함될 수 있다.

또한, 본 발명의 다른 실시예에서는, 상기 공보 이미지 정보와 함께 이동 단말기(100)의 위치 정보를 동시에 고려하여, 위치 정보에 해당하는 지역에 관련된 선거 정보들이 집중적으로 증강현실로 구현할 수 있다.

상기 선거 정보 데이터를 수신하면, 상기 모바일 증강현실 모듈(111)은 카메라(131)를 통해 입력되는 공보 이미지와 상기 선거 정보 데이터를 정합하여, 증강현실로 구현된 공보 이미지를 터치스크린에 출력한다. (S113)

또한, 상기 모바일 증강현실 모듈(111)은 증강현실 선거 공보 이미지와 함께 선거와 관련된 소리나 효과음을 출력부(170)에 스피커를 통해 출력할 수도 있다.

이를 통해, 피홍보자에게 선거에 관한 정보를 효과적으로 전달할 수 있으며, 피홍보자는 증강현실 이미지를 통해 몰입하여 선거 정보를 습득할 수 있다.

그리고, 상기 증강현실 선거 공보 이미지에는 후보자 기부를 위한 홈페이지 링크가 연결될 수도 있으며, 상기 증강현실 공보 이미지를 사용자의 SNS 에 올려 직접 홍보할 수 있도록 SNS 서버와 연결되는 링크가 포함될 수도 있다.

이를 통해, 사용자는 자신이 지지하는 후보자를 쉽게 지원할 수 있으며, 선거에 좀더 직접적으로 참여할 수 있는 장점이 있다.

그리고, 상기 증강현실 선거 공보 이미지에는 선거 연설, 공약에 관련된 이슈들을 동영상으로 볼 수 있는 링크도 포함될 수 있다.

사용자가 링크 터치시, 상기 모바일 증강현실 모듈(111)은 터치 스크린을 통해 링크에 해당하는 영상 및 소리를 출력할 수 있다. (S115)

도 7은 본 발명의 실시예에 따른, 공보 이미지가 포함된 화상 프레임이 터치 스크린에 표시된 모습을 나타내며, 도 8은 본 발명의 실시예에 따른, 증강현실 선거 공보 이미지가 터치스크린에 표시된 모습을 나타낸다.

도 7을 참조하면, 터치 스크린에는 증강현실이 구현될 공보 이미지를 포함하는 선거 공보용 책자(500)가 표시되고 있다. 상기 선거 공보용 책자(500)에는 각종 선거 정보들이 포함되어 있으며, 후보자의 이미지를 마커로 설정하여, 상기 마커 위에 증강현실을 구현할 수 있다.

도 8을 참조하면, 공보 이미지로 설정된 후보자의 사진 위에 증강현실 선거 이미지가 3D 로 구현된 모습을 나타낸다. 상기 증강현실 선거 이미지는 동영상으로 제작될 수 있다. 예를 들어, 상기 증강현실 선거 이미지는 후보자의 3D 미니어쳐(600)로 제작되어 움직이며 선거에 관련된 정보(610)들을 제스쳐와 효과음으로 이동 단말기(100)를 통해 출력할 수 있다.

또한, 상기 증강현실 선거 이미지에는 각종 공약들이나 선거 정보를 나타내는 메뉴, 링크 등이 포함될 수 있다.

이러한 증강현실 선거 공보를 통해, 피홍보자는 흥미롭게 선거에 관한 정보를 얻을 수 있으며, 후보자는 공보 효과를 향상시킬 수 있는 장점이 있다.

특히, 본 발명의 다른 실시예에 따르면, 자신의 지역과 관련된 이슈들을 집중적으로 증강현실로써 제공 받음을 수 있어서, 피홍보자에게 맞춤형 선거 정보를 제공할 수 있는 장점이 있다.

100: 이동 단말기
200: 증강현실 서비스 제공서버
300: 통신망
400: 광고물

Claims

증강현실 구현 마커를 포함하는 광고물;
상기 광고물을 화상 프레임으로 촬영하여 화상 프레임에 포함된 광고물 이미지를 인식하고, 상기 광고물 이미지에 매칭되는 광고물 이미지 정보를 서버로 전송할 수 있는 이동 단말기;
상기 이동 단말기로부터 전송된 광고물 이미지 정보에 매칭되는 증강현실 이미지를 상기 이동 단말기에 전송하는 서버; 및
상기 이동 단말기와 상기 서버 간의 데이터 송수신이 이루어지는 통신망;을 포함하여, 상기 화상 프레임과 상기 증강현실 이미지를 정합하여 증강현실로 구현된 광고 정보를 제공하는 광고물에 대한 증강현실 서비스 제공 시스템.
제1항에 있어서,
상기 마커는 상기 광고물에 별도로 표시되는 것이거나 상기 광고물에 포함된 이미지 중에서 설정되는 것인 것을 특징으로 하는 광고물에 대한 증강현실 서비스 제공 시스템.
제1항에 있어서,
상기 이동 단말기는 모바일 증강현실 모듈을 포함하는 제어부, 광고물 이미지 정보를 포함하는 저장부를 포함하며,
상기 모바일 증강현실 모듈은 상기 광고물 이미지에 포함된 마커를 통해 상기 저장부로부터 광고물 이미지 정보를 검색하는 것을 특징으로 하는 광고물에 대한 증강현실 서비스 제공 시스템.
제1항에 있어서,
상기 서버는 서버제어부, 서버저장부, 서버통신부를 포함하며,
상기 서버통신부는 상기 이동 단말기와 증강현실 서비스 제공을 위한 데이터를 송수신하며,
상기 서버저장부는 광고물 이미지와 증강현실 이미지를 매칭하여 저장하고,
상기 서버제어부는 상기 이동 단말기로부터 광고물 이미지 정보가 전송되면 상기 광고물 이미지 정보와 매칭되는 증강현실 이미지를 상기 서버저장부로부터 검색하여 상기 서버통신부를 통해 상기 이동 단말기로 전송하는 것을 특징으로 하는 광고물에 대한 증강현실 서비스 제공 시스템.
제 1 항에 있어서,
상기 광고물 이미지 정보에는 위치 정보가 더 포함되는 것을 특징으로 하는 광고물에 대한 증강현실 서비스 제공 시스템.
제 5 항에 있어서,
상기 증강현실 이미지는 상기 위치 정보를 고려하여 검색된 것인 것을 특징으로 하는 광고물에 대한 증강현실 서비스 제공 시스템.