KR101545138B1 - 증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기 - Google Patents

증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기 Download PDF

Info

Publication number
KR101545138B1
KR101545138B1 KR1020100132992A KR20100132992A KR101545138B1 KR 101545138 B1 KR101545138 B1 KR 101545138B1 KR 1020100132992 A KR1020100132992 A KR 1020100132992A KR 20100132992 A KR20100132992 A KR 20100132992A KR 101545138 B1 KR101545138 B1 KR 101545138B1
Authority
KR
South Korea
Prior art keywords
information
advertisement
terminal
image
local
Prior art date
Application number
KR1020100132992A
Other languages
English (en)
Other versions
KR20120071444A (ko
Inventor
진태영
김남훈
양진욱
정원석
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to KR1020100132992A priority Critical patent/KR101545138B1/ko
Publication of KR20120071444A publication Critical patent/KR20120071444A/ko
Application granted granted Critical
Publication of KR101545138B1 publication Critical patent/KR101545138B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0267Wireless devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0261Targeted advertisements based on user location

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Accounting & Taxation (AREA)
  • Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Marketing (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명의 일 실시예는 증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, AR 광고 제공 장치 및 단말기에 관한 것이다.
본 발명의 일 실시예는 수신된 위치 정보를 기준으로 검색 범위를 설정하고 상기 검색 범위에 포함되는 후보(Candidate) 데이터를 선별하며, 수신된 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보를 추출하여 전송하는 영상 인식 매칭 장치; 상기 특징점에 해당하는 광고 정보가 있는 경우, 상기 광고 정보를 전송하는 광고 제공 장치; 및 상기 위치 정보 및 획득한 상기 영상 정보를 전송하고, 그에 대응하는 상기 지역 정보 및 상기 광고 정보를 수신한 후 상기 특징점에 상기 지역 정보 및 상기 광고 정보 중 적어도 하나 이상의 정보 오버레이(Overlay)되어 나타나도록 하는 단말기를 포함하는 것을 특징으로 하는 증강 현실을 이용한 광고 제공 시스템을 제공한다.

Description

증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기{Method for Providing Advertisement by Using Augmented Reality, System, Apparatus, Server And Terminal Therefor}
본 발명의 일 실시예는 증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기에 관한 것이다. 더욱 상세하게는, 단말기에 구비된 카메라 모듈을 통해 획득한 영상 정보에 포함된 오브젝트(옥내/외 간판, 상점 구조물 등)를 인식하고, 해당 오브젝트에 해당하는 지역 정보 또는 광고 정보가 영상 정보에 오버레이(Overlay)되도록 하여, 사용자가 증강 현실을 체험하면서 해당 지역에 대한 정보뿐 아니라 광고 정보를 제공받을 수 있도록 하는 증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기에 관한 것이다.
이 부분에 기술된 내용은 단순히 본 발명의 실시예에 대한 배경 정보를 제공할 뿐 종래기술을 구성하는 것은 아니다.
위치 및 방향 정보를 이용하여 대략적인 위치를 파악하고 주변의 건물 정보와 같은 시설물 정보와 카메라의 움직임에 따라 입력되는 실사 영상 정보 간의 비교를 통해 사용자가 원하는 서비스를 파악하여 관련 정보를 제공하는 기술을 증강 현실(Augmented Reality: AR) 기술이라 한다. 더욱 구체적으로, 증강 현실은 가상현실(Virtual Reality: VR)의 한 분야로서 실제 환경에 가상 사물을 합성하여 원래의 환경에 존재하는 사물처럼 보이도록 하는 컴퓨터 그래픽 기법으로서, 증강 현실은 가상의 공간과 사물만을 대상으로 하는 기존의 가상 현실과 달리 현실 세계의 기반에 가상 사물을 합성하여 현실 세계만으로는 얻기 어려운 부가적인 정보들을 보강해 제공할 수 있는 기술이다. 현재 증강 현실 기술은 방송, 광고, 전시, 게임, 테마 파크, 군용, 교육 및 프로모션 등의 분야에서 사용 중이지만 아직 대중적으로 확산되지는 않은 상태이다.
이에 따라, 보다 정밀하게 영상을 인식하고 그에 대응하는 각종 정보를 제공할 수 있는 기술이 필요한 실정이다.
전술한 문제점을 해결하기 위해 본 발명의 일 실시예는, 단말기에 구비된 카메라 모듈을 통해 획득한 영상 정보에 포함된 오브젝트를 인식하고, 해당 오브젝트에 해당하는 지역 정보 또는 광고 정보가 영상 정보에 오버레이(Overlay)되도록 하여, 사용자가 증강 현실을 체험하면서 해당 지역에 대한 정보뿐 아니라 광고 정보를 제공받을 수 있도록 하는 증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기를 제공하는 데 주된 목적이 있다.
전술한 목적을 달성하기 위해 본 발명의 일 실시예는, 수신된 위치 정보를 기준으로 검색 범위를 설정하고 상기 검색 범위에 포함되는 후보(Candidate) 데이터를 선별하며, 수신된 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보를 추출하여 전송하는 영상 인식 매칭 장치; 상기 특징점에 해당하는 광고 정보가 있는 경우, 상기 광고 정보를 전송하는 광고 제공 장치; 및 상기 위치 정보 및 획득한 상기 영상 정보를 전송하고, 그에 대응하는 상기 지역 정보 및 상기 광고 정보를 수신한 후 상기 특징점에 상기 지역 정보 및 상기 광고 정보 중 적어도 하나 이상의 정보 오버레이(Overlay)되어 나타나도록 하는 단말기를 포함하는 것을 특징으로 하는 증강 현실을 이용한 광고 제공 시스템을 제공한다.
또한, 본 발명의 다른 목적에 의하면, 단말기로부터 수신된 위치 정보를 기준으로 검색 범위를 설정하고 상기 검색 범위 내에 포함되는 후보 데이터를 선별하는 데이터 선별부; 상기 단말기로부터 수신된 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보를 추출하여 상기 단말기로 전송하는 지역 정보 추출부; 및 상기 특징점에 해당하는 광고 정보가 있는 경우, 상기 광고 정보를 상기 단말기로 전송하는 광고 제공부를 포함하는 것을 특징으로 하는 AR 광고 제공 장치를 제공한다.
또한, 본 발명의 다른 목적에 의하면, 수신된 위치 정보를 기준으로 검색 범위를 설정하고 상기 검색 범위 내에 포함되는 후보 데이터를 선별하며, 수신된 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보 및 광고 정보를 전송하는 저장 매체를 저장하는 저장부; 및 단말기로 하여금 상기 저장 매체에 대한 데이터의 읽기 및 쓰기가 수행되도록 하는 클라우드 컴퓨팅부를 포함하는 것을 특징으로 하는 AR 광고 제공 장치를 제공한다.
또한, 본 발명의 다른 목적에 의하면, 구비된 GPS 모듈 및 전자 방향 센서 중 적어도 하나 이상의 모듈을 이용하여 위치 정보를 생성하는 위치 정보 생성부; 상기 위치 정보를 기준으로 검색 범위를 설정하고, 상기 검색 범위에 포함되는 후보 데이터를 선별하는 단말 데이터 선별부; 구비된 카메라 모듈을 이용하여 영상 정보를 획득하는 영상 정보 획득부; 상기 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보를 추출하는 단말 지역 정보 추출부; 상기 특징점에 해당하는 광고 정보를 추출하는 단말 광고 제공부; 및 상기 특징점에 상기 지역 정보 및 상기 광고 정보 중 적어도 하나 이상의 정보가 오버레이되도록 하는 증강 현실 제공부를 포함하는 것을 특징으로 하는 단말기를 제공한다.
또한, 본 발명의 다른 목적에 의하면, 단말기로부터 수신된 위치 정보를 기준으로 검색 범위를 설정하고 상기 검색 범위 내에 포함되는 후보 데이터를 선별하는 단계; 상기 단말기로부터 수신된 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보를 추출하여 상기 단말기로 전송하는 단계; 및 상기 특징점에 해당하는 광고 정보가 있는 경우, 상기 광고 정보를 상기 단말기로 전송하는 단계를 포함하는 것을 특징으로 하는 증강 현실을 이용한 광고 제공 방법을 제공한다.
또한, 본 발명의 다른 목적에 의하면, 구비된 GPS 모듈 및 전자 방향 센서 중 적어도 하나 이상의 모듈을 이용하여 위치 정보를 생성하는 단계; 상기 위치 정보를 기준으로 검색 범위를 설정하고, 상기 검색 범위에 포함되는 후보 데이터를 선별하는 단계; 구비된 카메라 모듈을 이용하여 영상 정보를 획득하는 단계; 상기 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보를 추출하는 단말 지역 정보 추출부; 상기 특징점에 해당하는 광고 정보를 추출하는 단계; 및 상기 특징점에 상기 지역 정보 및 상기 광고 정보 중 적어도 하나 이상의 정보가 오버레이되도록 하는 단계를 포함하는 것을 특징으로 하는 증강 현실을 이용한 광고 제공 방법을 제공한다.
이상에서 설명한 바와 같이 본 발명의 일 실시예에 의하면, 단말기에 구비된 카메라 모듈을 통해 획득한 영상 정보에 포함된 오브젝트를 인식하고, 해당 오브젝트에 해당하는 지역 정보 또는 광고 정보가 영상 정보에 오버레이되도록 하여, 사용자가 증강 현실을 체험하면서 해당 지역에 대한 정보뿐 아니라 광고 정보를 제공받을 수 있도록 하는 효과가 있다. 또한, 본 발명의 일 실시예에 의하면, 사용자가 촬영한 실사 영상 정보에 포함된 오브젝트를 인식하여 해당하는 오브젝트의 위치에 필요한 지역 정보 또는 광고 정보가 오버레이되도록 하여 AR 광고를 통해 광고 효과를 극대화 할 수 있다.
또한, 본 발명의 일 실시예에 의하면, 획득한 영상 정보를 구성하는 각각의 오브젝트에 대한 좌표값을 추출한 후 해당 좌표값에 지역 정보 및 광고 정보 중 어느 하나가 유동적으로 매핑되어 나타나도록 하기 때문에, 사용자가 촬영하고 있는 영상 화면을 이동하는 경우에도, 해당 좌표값을 트래킹(Tracking)하여 해당 오브젝트에 지역 정보 및 광고 정보가 정확하게 매핑될 수 있도록 하는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 증강 현실을 이용한 광고 제공 시스템을 개략적으로 나타낸 블럭 구성도,
도 2는 본 발명의 일 실시예에 따른 AR 광고 제공 장치를 개략적으로 나타낸 블럭 구성도,
도 3은 본 발명의 일 실시예에 따른 단말기를 개략적으로 나타낸 블럭 구성도,
도 4는 본 발명의 일 실시예에 따른 증강 현실을 이용한 광고 제공 방법을 설명하기 위한 순서도,
도 5는 본 발명의 일 실시예에 따른 증강 현실을 이용한 광고 제공 시스템의 예시도,
도 6은 본 발명의 일 실시예에 따른 예시도이다.
도 1은 본 발명의 일 실시예에 따른 증강 현실을 이용한 광고 제공 시스템을 개략적으로 나타낸 블럭 구성도이다.
본 발명의 일 실시예에 따른 증강 현실을 이용한 광고 제공 시스템은 단말기(110), 통신망(120), 영상 인식 매칭 장치(130), 광고 제공 장치(140) 및 데이터베이스(160)를 포함한다. 한편, 본 발명의 일 실시예에서는 증강 현실을 이용한 광고 제공 시스템이 단말기(110), 통신망(120), 영상 인식 매칭 장치(130), 광고 제공 장치(140) 및 데이터베이스(160)만을 포함하는 것으로 기재하고 있으나, 이는 본 발명의 일 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명의 일 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 일 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 광고 제공 시스템에 포함되는 구성 요소에 대하여 다양하게 수정 및 변형하여 적용 가능할 것이다.
단말기(110)는 사용자의 키 조작에 따라 통신망(120)을 경유하여 각종 데이터를 송수신할 수 있는 단말기를 말하는 것이며, 태블릿 PC(Tablet PC), 랩톱(Laptop), 개인용 컴퓨터(PC: Personal Computer), 스마트폰(Smart Phone), 개인휴대용 정보단말기(PDA: Personal Digital Assistant) 및 이동통신 단말기(Mobile Communication Terminal) 등 중 어느 하나일 수 있다. 또한, 단말기(110)는 통신망(120)을 통하여 데이터 읽고 쓰기 및 저장, 네트워크, 컨텐츠 사용 등의 서비스를 이용할 수 있는 클라우드 컴퓨팅(Cloud Computing)을 지원하는 클라우드 컴퓨팅 단말기가 될 수 있다. 즉, 단말기(110)는 통신망(120)을 경유하여 영상 인식 매칭 장치(130), 광고 제공 장치(140) 또는 AR 광고 제공 장치(140)에 접속하기 위한 프로그램을 저장하기 위한 메모리, 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하고 있는 장치를 의미한다. 즉, 단말기(110)는 통신망(120)에 연결되어 영상 인식 매칭 장치(130), 광고 제공 장치(140) 또는 AR 광고 제공 장치(140)와 서버-클라이언트 통신이 가능하다면 그 어떠한 단말기도 가능하며, 노트북 컴퓨터, 이동통신 단말기, PDA 등 여하한 통신 컴퓨팅 장치를 모두 포함하는 넓은 개념이다. 한편, 단말기(110)는 터치 스크린을 구비한 형태로 제작되는 것이 바람직하나 반드시 이에 한정되는 것은 아니다. 한편, 단말기(110)에서 다운로드 하는 애플리케이션은 단말기(110)가 스마트 폰인 경우 애플리케이션 스토어를 통해 다운로드된 후 인스톨된 애플리케이션을 말하며, 단말기(110)가 피쳐 폰(Feature Phone)인 경우 통신사 서버를 통해 다운로드된 VM(Virtual Machine) 및 애플리케이션을 말한다.
본 발명의 일 실시예에 따른 단말기(110)는 영상 인식 매칭 장치(130) 및 광고 제공 장치(140)와 연동하여 AR 광고 정보를 구비된 표시부를 통해 나타낼 수 있다. 이에 대한 구체적인 동작을 설명하자면 다음과 같다. 단말기(110)는 구비된 GPS 모듈 및 전자 방향 센서 중 적어도 하나 이상의 모듈을 이용하여 생성된 위치 정보를 영상 인식 매칭 장치(130)로 전송하며, 구비된 카메라 모듈을 이용하여 획득된 영상 정보를 영상 인식 매칭 장치(130)로 전송한다. 단말기(110)는 영상 인식 매칭 장치(130)로부터 위치 정보 및 영상 정보에 대응하는 지역 정보를 수신한 후 획득한 영상 정보의 특징점에 오버레이(Overlay)하여 나타낸다.
또한, 단말기(110)는 광고 제공 장치(140)로부터 영상 정보의 특징점에 대한 광고 정보를 수신하는 경우, 획득한 영상 정보의 특징점에 광고 정보를 오버레이하여 나타낸다. 이후, 단말기(110)는 영상 정보 상에 오버레이되어 나타내는 광고 정보에 대해 사용자의 명령 또는 조작에 의한 선택이 있는 경우, 광고 제공 장치(140)로 해당 광고 정보에 대한 상세 광고 정보 요청 신호 또는 쿠폰 정보 요청 신호를 전송하고, 그에 대응하는 상세 광고 정보 응답 신호 또는 쿠폰 정보 응답 신호를 수신하여 영상 정보의 특징점에 오버레이하여 나타낼 수 있다.
본 발명에서는 단말기(110)는 영상 인식 매칭 장치(130) 또는 광고 제공 장치(140)와 별도의 장치로 구현된 것으로 기재하고 있으나, 실제 발명의 구현에 있어서, 단말기(110)는 영상 인식 매칭 장치(130) 또는 광고 제공 장치(140)의 기능을 모두 포함한 자립형(Stand Alone) 장치로 구현될 수 있을 것이다. 이에 따른 단말기(110)의 일 실시예는 다음과 같다. 단말기(110)는 구비된 GPS 모듈 및 전자 방향 센서 중 적어도 하나 이상의 모듈을 이용하여 위치 정보를 생성하며, 위치 정보를 기준으로 검색 범위를 설정하고, 검색 범위에 포함되는 후보 데이터를 선별한다. 단말기(110)가 구비된 카메라 모듈을 이용하여 영상 정보를 획득하고, 영상 정보에서 특징점을 추출한 후 후보 데이터 중 특징점과 일치하는 지역 정보를 추출한다. 단말기(110)가 특징점에 해당하는 광고 정보를 추출하고, 특징점에 지역 정보 및 광고 정보 중 적어도 하나 이상의 정보가 오버레이되어 구비된 표시부를 통해 출력되도록 한다. 여기서, 단말기(110)가 후보 데이터를 선별하는 과정에 대해 보다 구체적으로 설명하자면, GPS 모듈을 통해 수신된 GPS 전파 신호에 근거하여 현재 위치 정보를 산출하고, 현재 위치 정보를 기준으로 검색 범위를 설정한 후 검색 범위 내에 포함된 데이터 중 전자 방향 센서를 통해 수신한 전자 방향 정보에 해당하는 데이터만을 후보 데이터로 선별할 수 있다.
또한, 단말기(110)가 영상 정보의 특징점에 지역 정보 또는 광고 정보를 오버레이하는 과정에 대해 구체적으로 설명하자면, 단말기(110)는 영상 정보를 구성하는 각각의 오브젝트(Object)에 대한 X, Y, Z 좌표값을 추출한 후 X, Y, Z 좌표값에 근거한 센터값 또는 센터값으로부터 기 설정된 거리만큼 이격된 좌표값에 지역 정보 및 광고 정보 중 어느 하나가 유동적으로 매핑(Mapping)되어 나타나도록 한다. 이때, 단말기(110)는 오브젝트에 대한 X, Y, Z 좌표값을 이용하여 오브젝트의 모서리 좌표값을 산출하고, 모서리 좌표값을 이용하여 오브젝트에 대한 중심값을 산출한다. 한편, 단말기(110)는 지역 정보를 추출하기 위해 단말기(110)는 구비된 카메라 모듈을 통해 획득한 영상 정보를 구성하고 있는 특정 오브젝트에 대한 색상 정보, 에지(Edge) 정보, 외곽선 정보, 텍스처(Texture) 정보, 텍스트(Text) 정보 및 특정 각도에 따른 외곽 형태 정보 중 적어도 하나 이상의 정보를 특징 벡터(Feature Vector)로 변환하고, 특징 벡터와 후보 데이터의 영상 매칭을 수행하여 유사도 가장 높은 데이터를 선별한 후 선별된 데이터들의 상관관계(Correlation Coefficient)에 근거하여 지역 정보를 추출한다. 한편, 단말기(110) 구비된 표시부 상에 출력된 영상 정보의 특징점에 오버레이된 광고 정보가 사용자에 의해 선택되는 경우, 데이터베이스(160)에 접속하여 선택된 광고 정보에 대한 상세 광고 정보 및 쿠폰 정보 중 적어도 하나 이상의 정보를 수신한 후 이를 특징점에 오버레이되도록 한다. 또한, 단말기(110)는 사용자의 선택에 의해 출력된 광고 정보에 대한 광고 실적 정보 또는 광고 통계 정보를 생성하고, 이를 연동하는 관리자 단말기로 전송할 수 있다.
한편, 단말기(110)에서 구비된 GPS 모듈 및 전자 방향 센서 중 적어도 하나 이상의 모듈을 이용하여 위치 정보를 생성하며, 위치 정보를 기준으로 검색 범위를 설정하고 검색 범위에 포함되는 후보 데이터를 선별하며, 구비된 카메라 모듈을 이용하여 영상 정보를 획득하고 영상 정보에서 특징점을 추출한 후 후보 데이터 중 특징점과 일치하는 지역 정보를 추출하며, 특징점에 해당하는 광고 정보를 추출하고, 특징점에 지역 정보 및 광고 정보 중 적어도 하나 이상의 정보가 오버레이되어 구비된 표시부를 통해 출력하는 일련의 기능은 단말기(110) 내에 탑재된 AR 광고 애플리케이션을 통해 수행될 수 있다. 즉, 단말기(110)는 다운로드한 AR 광고 애플리케이션을 인스톨(Install)하고, 이를 구동하여 AR 광고를 제공받는 것으로 구현가능하나 반드시 이에 한정되는 것은 아니며, AR 광고 제공 장치(140)를 통해 클라우드 컴퓨팅 방식으로 AR 광고를 제공받을 수 있다. 즉, 단말기(110)는 AR 광고 제공 장치(150)로부터 클라우팅 컴퓨팅 방식으로 AR 광고를 제공받기 위해 AR 광고 제공 장치(150)에 저장된 저장 매체와의 입출력 인터페이스를 제공하는 별도의 입출력 인터페이스부를 포함할 수 있으며, 입출력 인터페이스부를 통해 AR 광고 제공 장치(150)에 저장된 저장 매체에 대한 데이터 읽기 및 쓰기가 수행되도록 하는 인터페이스 제어부를 포함할 수 있다.
통신망(120)은 인터넷망, 인트라넷망, 이동통신망, 위성 통신망 등 다양한 유무선 통신 기술을 이용하여 인터넷 프로토콜로 데이터를 송수신할 수 있는 망을 말한다. 한편, 통신망(120)은 영상 인식 매칭 장치(130) 또는 광고 제공 장치(140)와 결합되어 하드웨어, 소프트웨어 등의 컴퓨팅 자원을 저장하고, 클라이언트가 필요로 하는 컴퓨팅 자원을 해당 단말기(110)로 제공할 수 있는 클라우딩 컴퓨팅망을 포함할 수 있다.
영상 인식 매칭 장치(130)는 단말기(110)가 AR 서비스를 수행할 수 있도록 단말기(110)로부터 수신된 위치 정보를 기준으로 검색 범위를 설정하고 검색 범위에 포함되는 후보(Candidate) 데이터를 선별하며, 수신된 영상 정보에서 특징점을 추출한 후 후보 데이터 중 특징점과 일치하는 지역 정보를 추출하여 단말기(110)로 전송한다. 영상 인식 매칭 장치(130)가 수행하는 동작에 대해 보다 구체적으로 설명하자면, 영상 인식 매칭 장치(130)는 단말기(110)로부터 수신된 위치 정보를 기준으로 검색 범위를 설정하고 검색 범위 내에 포함되는 후보 데이터를 선별하고, 단말기(110)로부터 수신된 영상 정보에서 특징점을 추출한 후 후보 데이터 중 특징점과 일치하는 지역 정보를 추출하여 단말기(110)로 전송한다. 여기서, 영상 인식 매칭 장치(130)는 지역 정보를 추출하기 위해 영상 정보를 구성하고 있는 특정 오브젝트에 대한 색상 정보, 에지 정보, 외곽선 정보, 텍스처 정보, 텍스트 정보 및 특정 각도에 따른 외곽 형태 정보 중 적어도 하나 이상의 정보를 특징 벡터로 변환하고, 특징 벡터와 후보 데이터의 영상 매칭을 수행하여 유사도 가장 높은 데이터를 선별한 후 선별된 데이터들의 상관관계에 근거하여 지역 정보를 추출한다. 이때, 지역 정보는 데이터베이스(160)에 저장될 수 있으며, 이름 정보, 전화번호 정보, 관심 지점(POI: Point Of Interest) 정보, 인터넷 링크 정보 및 태깅(Tagging) 정보 중 적어도 하나 이상의 정보를 포함한다. 또한, 영상 인식 매칭 장치(130)는 후보 데이터를 선별하기 위해 단말기(110)로부터 GPS 전파 신호 및 전자 방향 정보 중 적어도 하나 이상의 정보를 포함하는 위치 정보를 수신하며, GPS 전파 신호에 근거하여 현재 위치 정보를 산출하고, 현재 위치 정보를 기준으로 검색 범위를 설정하고, 검색 범위 내에 포함된 데이터 중 전자 방향 정보에 해당하는 데이터만을 후보 데이터로 선별한다.
광고 제공 장치(140)는 단말기(110)가 AR 서비스를 수행 시 광고 정보를 함께 출력할 수 있도록, 단말기(110)에서 획득한 영상 정보의 특징점에 해당하는 광고 정보가 있는 경우, 해당 광고 정보를 단말기(110)로 전송한다. 여기서, 광고 정보는 데이터베이스(160)에 저장되어 있으며, 3D 광고 정보, 2D 광고 정보 및 애니메이션(Animation) 광고 정보 중 적어도 하나 이상의 정보를 포함한다. 또한, 광고 제공 장치(140)는 단말기(110)로부터 선택된 광고 정보가 있는 경우, 선택된 광고 정보에 대한 상세 광고 정보 및 쿠폰 정보 중 적어도 하나 이상의 정보를 단말기(110)로 전송한다. 한편, 광고 제공 장치(140)는 광고 정보에 전송하고 관리하기 위해 단말기(110)로 전송된 광고 정보에 대한 광고 실적 정보 또는 광고 통계 정보를 생성하며, 광고 실적 정보 및 광고 통계 정보를 연동하는 관리자 단말기로 전송한다.
한편, 본 발명에서는 영상 인식 매칭 장치(130)와 광고 제공 장치(140)가 각각의 장치인 것으로 기재하고 있으나, 이는 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 영상 인식 매칭 장치(130)와 광고 제공 장치(140)가 하나의 장치인 AR 광고 제공 장치(140)로 구현할 수 있을 것이다. 즉, AR 광고 제공 장치(140)는 영상 인식 매칭 장치(130)와 광고 제공 장치(140)를 포함한 하나의 장치로 구현될 수 있으며, 이에 대한 구체적인 설명은 도 2를 통해 하도록 한다. 한편, AR 광고 제공 장치(140)는 단말기(110)로부터 수신된 위치 정보를 기준으로 검색 범위를 설정하고 검색 범위 내에 포함되는 후보 데이터를 선별하고, 단말기(110)로부터 수신된 영상 정보에서 특징점을 추출한 후 후보 데이터 중 특징점과 일치하는 지역 정보를 추출하여 단말기(110)로 전송하며, 특징점에 해당하는 광고 정보가 있는 경우, 광고 정보를 단말기로 전송하는 컴퓨터로 읽을 수 있는 기록매체를 저장하며, 해당 기록매체의 일부 데이터만을 단말기(110)로 전송하여, 단말기(110)에서 어플리케이션의 설치없이 AR 광고를 제공받을 수 있도록 하는 클라우드 컴퓨팅을 제공할 수 있다.
데이터베이스(160)는 영상 인식 매칭 장치(130) 또는 광고 제공 장치(140)는 회원 가입 정보, 증강 현실 서비스 및 AR 광고 정보에 필요한 정보를 분류하여 저장한다. 또한, 데이터베이스(160)는 이름 정보, 전화번호 정보, 관심 지점 정보, 인터넷 링크 정보 및 태깅 정보 중 적어도 하나 이상의 정보를 포함하는 지역 정보를 저장한다. 이러한 데이터베이스(160)는 영상 인식 매칭 장치(130) 또는 광고 제공 장치(140)의 내부 또는 외부에 구현될 수 있다. 이러한 데이터베이스는 데이터베이스 관리 프로그램(DBMS)을 이용하여 컴퓨터 시스템의 저장공간(하드디스크 또는 메모리)에 구현된 일반적인 데이터구조를 의미하는 것으로, 데이터의 검색(추출), 삭제, 편집, 추가 등을 자유롭게 행할 수 있는 데이터 저장형태를 뜻하는 것으로, 오라클(Oracle), 인포믹스(Infomix), 사이베이스(Sybase), DB2와 같은 관계형 데이타베이스 관리 시스템(RDBMS)이나, 겜스톤(Gemston), 오리온(Orion), O2 등과 같은 객체 지향 데이타베이스 관리 시스템(OODBMS) 및 엑셀론(Excelon), 타미노(Tamino), 세카이주(Sekaiju) 등의 XML 전용 데이터베이스(XML Native Database)를 이용하여 본 발명의 일 실시예의 목적에 맞게 구현될 수 있고, 자신의 기능을 달성하기 위하여 적당한 필드(Field) 또는 엘리먼트들을 가지고 있다.
도 2는 본 발명의 일 실시예에 따른 AR 광고 제공 장치를 개략적으로 나타낸 블럭 구성도이다.
본 발명의 일 실시예에 따른 AR 광고 제공 장치(140)는 영상 인식 매칭 장치(130)와 광고 제공 장치(140)를 포함하여 하나의 장치로 구현된 장치를 말한다. 또한, 본 발명의 일 실시예에 따른 AR 광고 제공 장치(140)는 데이터 선별부(210), 지역 정보 추출부(220) 및 광고 제공부(230)를 포함한다. 한편, 본 발명의 일 실시예에서는 AR 광고 제공 장치(140)가 데이터 선별부(210), 지역 정보 추출부(220) 및 광고 제공부(230)만을 포함하는 것으로 기재하고 있으나, 이는 본 발명의 일 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명의 일 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 일 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 AR 광고 제공 장치(140)에 포함되는 구성 요소에 대하여 다양하게 수정 및 변형하여 적용 가능할 것이다.
데이터 선별부(210)는 단말기(110)로부터 수신된 위치 정보를 기준으로 검색 범위를 설정하고 검색 범위 내에 포함되는 후보 데이터를 선별한다. 여기서, 위치 정보는 단말기(110)에 구비된 GPS 전파 모듈을 통해 생성된 GPS 전파 신호와 단말기(110)에 구비된 전자 방향 센서를 통해 생성된 전자 방향 정보 중 적어도 하나 이상의 정보를 포함한다. 즉, 데이터 선별부(210)는 후보 데이터로 선별하기 위해 GPS 전파 신호에 근거하여 현재 위치 정보를 산출하고, 현재 위치 정보를 기준으로 검색 범위를 설정하고, 검색 범위 내에 포함된 데이터 중 전자 방향 정보에 해당하는 데이터만을 후보 데이터로 선별한다.
지역 정보 추출부(220)는 단말기(110)로부터 수신된 영상 정보에서 특징점을 추출한 후 후보 데이터 중 특징점과 일치하는 지역 정보를 추출하여 단말기(110)로 전송한다. 여기서, 지역 정보는 데이터베이스(160)에 저장되며, 이름 정보, 전화번호 정보, 관심 지점 정보, 인터넷 링크 정보 및 태깅 정보 중 적어도 하나 이상의 정보를 포함한다. 또한, 지역 정보 추출부(220)는 영상 정보를 구성하고 있는 특정 오브젝트에 대한 색상 정보, 에지 정보, 외곽선 정보, 텍스처 정보, 텍스트 정보 및 특정 각도에 따른 외곽 형태 정보 중 적어도 하나 이상의 정보를 특징 벡터로 변환하고, 특징 벡터와 후보 데이터의 영상 매칭을 수행하여 유사도 가장 높은 데이터를 선별한 후 선별된 데이터들의 상관관계에 근거하여 지역 정보를 추출한다.
광고 제공부(230)는 특징점에 해당하는 광고 정보가 있는 경우, 광고 정보를 단말기(110)로 전송한다. 여기서, 광고 정보는 데이터베이스(160)에 저장되며, 3D 광고 정보, 2D 광고 정보 및 애니메이션 광고 정보 중 적어도 하나 이상의 정보를 포함한다. 또한, 광고 제공부(230)는 단말기(110)로부터 사용자에 의해 선택된 광고 정보가 있는 경우, 선택된 광고 정보에 대한 상세 광고 정보 및 쿠폰 정보 중 적어도 하나 이상의 정보를 단말기(110)로 전송한다. 또한, 광고 제공부(230)는 단말기(110)로 전송된 광고 정보에 대한 광고 실적 정보 또는 광고 통계 정보를 생성하며, 광고 실적 정보 및 광고 통계 정보를 연동하는 관리자 단말기로 전송한다. 즉, 관리자는 광고 제공부(230)로부터 제공되는 광고 실적 정보 및 광고 통계 정보를 수신하여 AR 광고에 대한 전반적인 관리를 할 수 있는 것이다.
한편, 본 발명의 일 실시예에 따른 AR 광고 제공 장치(140)는 클라우딩 컴퓨팅을 위해 저장부(240) 및 클라우드 컴퓨팅부(250)를 추가로 포함할 수 있다. 저장부(240)는 수신된 위치 정보를 기준으로 검색 범위를 설정하고 검색 범위 내에 포함되는 후보 데이터를 선별하며, 수신된 영상 정보에서 특징점을 추출한 후 후보 데이터 중 특징점과 일치하는 지역 정보 및 광고 정보를 전송하는 저장 매체를 저장하며, 클라우드 컴퓨팅부(250)는 단말기(110)로부터 저장 매체에 대한 데이터의 읽기 및 쓰기가 수행되도록 한다.
도 3은 본 발명의 일 실시예에 따른 단말기를 개략적으로 나타낸 블럭 구성도이다.
본 발명의 일 실시예에 따른 단말기(110)는 위치 정보 생성부(310), 단말 데이터 선별부(320), 영상 정보 획득부(330), 단말 지역 정보 추출부(340), 단말 광고 제공부(350) 및 증강 현실 제공부(360)를 포함한다. 한편, 본 발명의 일 실시예에서는 단말기(110)가 위치 정보 생성부(310), 단말 데이터 선별부(320), 영상 정보 획득부(330), 단말 지역 정보 추출부(340), 단말 광고 제공부(350) 및 증강 현실 제공부(360)만을 포함하는 것으로 기재하고 있으나, 이는 본 발명의 일 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명의 일 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 일 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 단말기(110)에 포함되는 구성 요소에 대하여 다양하게 수정 및 변형하여 적용 가능할 것이다. 즉, 본 발명의 일 실시예에 따른 단말기(110)는 메모리부, 표시부, 단말기 제어부, 마이크로폰, 스피커, GPS 모듈 및 전자 방향 센서 등을 포함하여 구성될 수 있으나, 본 발명에서는 설명의 편의상, 단말기(110)가 위치 정보 생성부(310), 단말 데이터 선별부(320), 영상 정보 획득부(330), 단말 지역 정보 추출부(340), 단말 광고 제공부(350) 및 증강 현실 제공부(360)만을 포함한 것으로 기재토록 한다.
위치 정보 생성부(310)는 구비된 GPS 모듈 및 전자 방향 센서 중 적어도 하나 이상의 모듈을 이용하여 위치 정보를 생성한다. 여기서, 위치 정보는 GPS 전파 신호 및 전자 방향 정보 중 적어도 하나 이상의 정보를 포함한다. 즉, 위치 정보 생성부(310)는 단말기(110)에 구비된 GPS 모듈을 이용하여 GPS 전파 신호를 수신하고, 단말기(110)에 구비된 전자 방향 센서를 이용하여 전자 방향 정보를 생성한다.
단말 데이터 선별부(320)는 위치 정보를 기준으로 검색 범위를 설정하고, 검색 범위에 포함되는 후보 데이터를 선별한다. 즉, 단말 데이터 선별부(320)는 위치 정보 생성부(310)를 통해 수신된 GPS 전파 신호에 근거하여 현재 위치 정보를 산출하고, 현재 위치 정보를 기준으로 검색 범위를 설정하고, 검색 범위 내에 포함된 데이터 중 전자 방향 정보에 해당하는 데이터만을 후보 데이터로 선별할 수 있다.
영상 정보 획득부(330)는 구비된 카메라 모듈을 이용하여 영상 정보를 획득한다. 즉, 사용자가 단말기(110)에 구비된 카메라 모듈을 이용하여 정지 영상 또는 동영상을 촬영하는 경우, 카메라 모듈을 통해 입력된 영상 정보가 영상 정보 획득부(330)로 전달되는 것이다.
단말 지역 정보 추출부(340)는 영상 정보에서 특징점을 추출한 후 후보 데이터 중 특징점과 일치하는 지역 정보를 추출한다. 단말 지역 정보 추출부(340)는 영상 정보를 구성하고 있는 특정 오브젝트에 대한 색상 정보, 에지 정보, 외곽선 정보, 텍스처 정보, 텍스트 정보 및 특정 각도에 따른 외곽 형태 정보 중 적어도 하나 이상의 정보를 특징 벡터로 변환하고, 특징 벡터와 후보 데이터의 영상 매칭을 수행하여 유사도 가장 높은 데이터를 선별한 후 선별된 데이터들의 상관관계에 근거하여 지역 정보를 추출한다. 여기서, 단말 지역 정보 추출부(340)는 영상 정보를 구성하는 각각의 오브젝트에 대한 X, Y, Z 좌표값을 추출한 후 X, Y, Z 좌표값에 근거한 센터값 또는 센터값으로부터 기 설정된 거리만큼 이격된 좌표값에 지역 정보 및 광고 정보 중 어느 하나가 유동적으로 매핑되어 나타나도록 한다. 단말 지역 정보 추출부(340)는 오브젝트에 대한 X, Y, Z 좌표값을 이용하여 오브젝트의 모서리 좌표값을 산출하고, 모서리 좌표값을 이용하여 오브젝트에 대한 중심값을 산출한다.
단말 광고 제공부(350)는 특징점에 해당하는 광고 정보를 추출한다. 즉, 단말 광고 제공부(350)는 데이터베이스(160)에 접속하여 특징점에 해당하는 광고 정보가 있는지의 여부를 확인하고, 확인 결과, 특징점에 해당하는 광고 정보가 있는 경우, 해당 광고 정보를 추출하는 것이다. 증강 현실 제공부(360)는 특징점에 지역 정보 및 광고 정보 중 적어도 하나 이상의 정보가 오버레이되어 단말기(110)에 구비된 표시부를 통해 나타나도록 한다.
한편, 단말기(110)는 AR 광고 제공 장치(140)를 통해 클라우드 컴퓨팅 방식으로 AR 광고를 제공받을 수도 있는 데 이를 위해 단말기(110)는 AR 광고 제공 장치(150)에 저장된 저장 매체와의 입출력 인터페이스를 제공하는 별도의 입출력 인터페이스부를 포함할 수 있으며, 입출력 인터페이스부를 통해 AR 광고 제공 장치(150)에 저장된 저장 매체에 대한 데이터 읽기 및 쓰기가 수행되도록 하는 인터페이스 제어부를 포함할 수 있다.
도 4는 본 발명의 일 실시예에 따른 증강 현실을 이용한 광고 제공 방법을 설명하기 위한 순서도이다.
단말기(110)는 사용자의 조작 또는 명령에 의해 탑재된 AR 광고 애플리케이션을 구동한다(S410). 여기서, AR 광고 애플리케이션은 단말기(110)에 다운로드된 후 인스톨된 애플리케이션이거나 AR 광고 제공 장치(140)와 연동하여 클라우드 컴퓨팅 환경으로 AR 광고를 제공하는 애플리케이션일 수 있다. 단말기(110)는 탑재된 AR 광고 애플리케이션을 통해 AR 광고 제공 장치(140)로 접속한다. AR 광고 제공 장치(140)는 접속한 단말기(110)로부터 위치 정보를 수신하며, 단말기로부터 사용자 정보를 수신하여 사용자를 인증한다(S420). 여기서, 위치 정보는 단말기(110)에 구비된 GPS 전파 모듈을 통해 생성된 GPS 전파 신호와 단말기(110)에 구비된 전자 방향 센서를 통해 생성된 전자 방향 정보 중 적어도 하나 이상의 정보를 포함한다.
AR 광고 제공 장치(140)는 단말기(110)가 AR 서비스를 수행할 수 있도록 단말기(110)로부터 수신된 위치 정보를 기준으로 검색 범위를 설정하고 검색 범위에 포함되는 후보 데이터를 선별하며, 수신된 영상 정보에서 특징점을 추출한 후 후보 데이터 중 특징점과 일치하는 지역 정보를 추출하여 단말기(110)로 전송한다(S430). AR 광고 제공 장치(140)가 수행하는 동작에 대해 보다 구체적으로 설명하자면, AR 광고 제공 장치(140)는 단말기(110)로부터 수신된 위치 정보를 기준으로 검색 범위를 설정하고 검색 범위 내에 포함되는 후보 데이터를 선별하고, 단말기(110)로부터 수신된 영상 정보에서 특징점을 추출한 후 후보 데이터 중 특징점과 일치하는 지역 정보를 추출하여 단말기(110)로 전송한다. 여기서, AR 광고 제공 장치(140)는 지역 정보를 추출하기 위해 영상 정보를 구성하고 있는 특정 오브젝트에 대한 색상 정보, 에지 정보, 외곽선 정보, 텍스처 정보, 텍스트 정보 및 특정 각도에 따른 외곽 형태 정보 중 적어도 하나 이상의 정보를 특징 벡터로 변환하고, 특징 벡터와 후보 데이터의 영상 매칭을 수행하여 유사도 가장 높은 데이터를 선별한 후 선별된 데이터들의 상관관계에 근거하여 지역 정보를 추출한다. 이때, 지역 정보는 데이터베이스(160)에 저장될 수 있으며, 이름 정보, 전화번호 정보, 관심 지점 정보, 인터넷 링크 정보 및 태깅 정보 중 적어도 하나 이상의 정보를 포함한다. 또한, 영상 인식 매칭 장치(130)는 후보 데이터를 선별하기 위해 단말기(110)로부터 GPS 전파 신호 및 전자 방향 정보 중 적어도 하나 이상의 정보를 포함하는 위치 정보를 수신하며, GPS 전파 신호에 근거하여 현재 위치 정보를 산출하고, 현재 위치 정보를 기준으로 검색 범위를 설정하고, 검색 범위 내에 포함된 데이터 중 전자 방향 정보에 해당하는 데이터만을 후보 데이터로 선별한다. AR 광고 제공 장치(140)는 단말기(110)가 AR 서비스를 수행 시 광고 정보를 함께 출력할 수 있도록, 단말기(110)에서 획득한 영상 정보의 특징점에 해당하는 광고 정보가 있는 경우, 해당 광고 정보를 단말기(110)로 전송한다(S440). 여기서, 광고 정보는 데이터베이스(160)에 저장되어 있으며, 3D 광고 정보, 2D 광고 정보 및 애니메이션 광고 정보 중 적어도 하나 이상의 정보를 포함한다.
AR 광고 제공 장치(140)는 단말기(110)로부터 사용자의 명령 또는 조작에 의해 선택되는 광고 정보가 있는지의 여부를 확인한다(S450). 단계 S450의 확인 결과, 단말기(110)로부터 선택된 광고 정보가 있는 경우, AR 광고 제공 장치(140)는 선택된 광고 정보에 대한 상세 광고 정보 및 쿠폰 정보 중 적어도 하나 이상의 정보를 단말기(110)로 전송한다(S460). 즉, 단말기(110)는 AR 광고 제공 장치(140)를 통해 상세 광고 정보 및 쿠폰 정보를 수신하며, 획득된 영상 정보의 특징점에 상세 광고 정보 및 쿠폰 정보 중 적어도 하나 이상의 정보를 오버레이하여 나타낼 수 있다. AR 광고 제공 장치(140)는 광고 정보에 전송하고 관리하기 위해 단말기(110)로 전송된 광고 정보에 대한 광고 실적 정보 또는 광고 통계 정보를 생성하며, 광고 실적 정보 및 광고 통계 정보를 연동하는 관리자 단말기로 전송한다(S470).
도 4에서는 단계 S410 내지 단계 S470을 순차적으로 실행하는 것으로 기재하고 있으나, 이는 본 발명의 일 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명의 일 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 일 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 도 4에 기재된 순서를 변경하여 실행하거나 단계 S410 내지 단계 S470 중 하나 이상의 단계를 병렬적으로 실행하는 것으로 다양하게 수정 및 변형하여 적용 가능할 것이므로, 도 4는 시계열적인 순서로 한정되는 것은 아니다.
전술한 바와 같이 도 4에 기재된 본 발명의 일 실시예에 따른 증강 현실을 이용한 광고 제공 방법은 프로그램으로 구현되고 컴퓨터로 읽을 수 있는 기록매체에 기록될 수 있다. 본 발명의 일 실시예에 따른 증강 현실을 이용한 광고 제공 방법을 구현하기 위한 프로그램이 기록되고 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 이러한 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수도 있다. 또한, 본 발명의 일 실시예를 구현하기 위한 기능적인(Functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명의 일 실시예가 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있을 것이다.
도 5는 본 발명의 일 실시예에 따른 증강 현실을 이용한 광고 제공 시스템의 예시도이다.
도 5에 도시된 바와 같이, 단말기(110)는 GPS 모듈, 전자 방향 센서(Digital Compass)를 구비하며, 탑재된 AR 광고 애플리케이션을 이용하여 '영상 추출', '양상 트래킹', '3 차원 랜더링'을 수행할 수 있다. 단말기(110)는 구비된 GPS 모듈 및 전자 방향 센서 중 적어도 하나 이상의 모듈을 이용하여 위치 정보를 생성하고, 생성된 위치 정보를 영상 인식 매칭 장치(130)로 전송할 수 있다. '영상 추출'을 위해 단말기(110)는 구비된 카메라 모듈을 이용하여 영상 정보를 획득하고, 획득된 영상 정보를 AR 광고 제공 장치(140)로 전송한다. 또한, 단말기(110)는 AR 광고 제공 장치(140)로부터 위치 정보 및 영상 정보에 대응하는 지역 정보를 수신한 후 획득한 영상 정보의 특징점에 오버레이하여 나타낸다. 영상 트래킹이란 단말기(110)가 영상 정보를 구성하는 각각의 오브젝트에 대한 X, Y, Z 좌표값을 추출한 후 X, Y, Z 좌표값에 근거한 센터값 또는 센터값으로부터 기 설정된 거리만큼 이격된 좌표값에 지역 정보 및 광고 정보 중 어느 하나가 유동적으로 매핑되어 나타나도록 하기 때문에, 사용자가 촬영하고 있는 영상 화면을 이동하는 경우에도, 해당 오브젝트에 지역 정보 및 광고 정보가 매핑되어 나타나게 되므로, 특징점의 좌표를 트래킹하여 지역 정보 또는 광고 정보가 정확한 위치에 오버레이되도록 할 수 있다. '3 차원 랜더링'이란 영상 정보의 특징점에 대한 광고 정보가 있는 경우, 광고 제공 장치(140)로부터 광고 정보를 수신한 후 획득한 영상 정보의 특징점에 오버레이하여 나타낼 때, 해당 광고 정보가 3D 광고 정보인 경우, 해당 데이터를 수신한 후 3D 랜더링된 광고 정보를 영상 정보의 특징점에 오버레이하여 나타내는 것을 말한다.
영상 인식 매칭 장치(130)는 '이미지 매쳐(Image Matcher)', '사용자 인증부', '이미지 피쳐(Image Feature) DB', '사용자 DB'를 포함할 수 있으며, '이미지 매쳐'를 통해 단말기(110)로부터 수신된 위치 정보를 기준으로 검색 범위를 설정하고 검색 범위 내에 포함되는 후보 데이터를 선별하고, 단말기(110)로부터 수신된 영상 정보에서 특징점을 추출한 후 후보 데이터 중 특징점과 일치하는 지역 정보를 추출하여 단말기로 전송할 수 있으며, '사용자 인증부'를 통해 단말기(110)로부터 사용자 정보를 수신하여 사용자를 인증할 수 있다. 또한, '이미지 피쳐 DB'에는 획득한 영상 정보의 특징점과 비교할 수 있는 후보 데이터가 저장될 수 있으며, '사용자 DB'에는 사용자 인증을 위한 사용자 정보가 저장될 수 있다.
광고 제공 장치(140)는 '이미지 매쳐', '특정 광고 송출 기능부', '광고 인벤토리(Inventory) 관리부', '상호 동작 정보 관리부', '광고 통계 시스템', '광고 제작 API(Application Programming Interface)'가 포함될 수 있다. '이미지 매쳐'를 통해서는 단말기(110)에서 획득한 영상 정보의 특징점에 해당하는 광고 정보가 있는지의 여부를 확인하고, '특정 광고 송출 기능부'를 통해서는 영상 정보의 특징점에 해당하는 광고 정보를 단말기(110)로 전송하며, '광고 인벤토리 관리부'를 통해서는 영상 정보의 특징점에 해당하는 광고 정보의 목록을 관리하며, '상호 동작 정보 관리부'를 통해서는 단말기(110)로부터 사용자의 명령 또는 조작에 의해 선택된 광고 정보가 있는 경우, 선택된 광고 정보에 대한 상세 광고 정보 및 쿠폰 정보 중 적어도 하나 이상의 정보를 단말기(110)로 전송하며, '광고 통계 시스템'를 통해서는 단말기(110)로 전송된 광고 정보에 대한 광고 실적 정보 또는 광고 통계 정보를 생성하며, 광고 실적 정보 및 광고 통계 정보를 연동하는 관리자 단말기로 전송한다. '광고 제작 API'를 통해서는 광고를 제작할 수 있는 API를 제공한다.
도 6은 본 발명의 일 실시예에 따른 예시도이다.
도 6의 (A)에 도시된 바와 같이, 단말기(110)는 구비된 카메라 모듈을 통해 획득한 영상 정보의 특징점에 지역 정보 또는 광고 정보 오버레이하여 나타낸다. 이때, 단말기(110)는 도 6의 (B)에 도시된 바와 같이, 획득한 영상 정보에서 간판을 하나의 오브젝트로 인식하여 오브젝트에 대한 색상 정보, 에지 정보, 외곽선 정보, 텍스처 정보, 텍스트 정보 및 특정 각도에 따른 외곽 형태 정보 중 적어도 하나 이상의 정보를 특징 벡터로 변환하고, 특징 벡터와 후보 데이터의 영상 매칭을 수행하여 유사도 가장 높은 데이터를 선별한 후 선별된 데이터들의 상관관계에 근거하여 지역 정보를 추출할 수 있다. 또한, 단말기(110)는 영상 정보를 구성하는 각각의 오브젝트에 대한 X, Y, Z 좌표값을 추출한 후 X, Y, Z 좌표값에 근거한 센터값 또는 센터값으로부터 기 설정된 거리만큼 이격된 좌표값에 지역 정보 및 광고 정보 중 어느 하나가 유동적으로 매핑되어 나타나도록 할 수 있다. 한편, 도 6의 (C)에 도시된 바와 같이, 단말기(110)에 구비된 표시부 상에 출력된 영상 정보의 특징점에 오버레이된 광고 정보가 사용자의 명령 또는 조작에 의해 선택되는 경우, 데이터베이스(160)로부터 수신된 광고 정보에 대한 상세 광고 정보가 출력되도록 할 수 있다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
이상에서 설명한 바와 같이 본 발명은 사용자가 증강 현실을 체험하면서 해당 지역에 대한 정보뿐 아니라 광고 정보를 제공받을 수 있도록 하는 다양한 분야에 적용되어, 사용자가 촬영한 실사 영상 정보에 포함된 오브젝트를 인식하여 해당하는 오브젝트의 위치에 필요한 지역 정보 또는 광고 정보가 오버레이되도록 하여 AR 광고를 통해 광고 효과를 극대화 할 수 있도록 하는 유용한 발명이다.
110: 단말기 120: 통신망
130: 영상 인식 매칭 장치 140: 광고 제공 장치
150: AR 광고 제공 장치 160: 데이터베이스
210: 데이터 선별부 220: 지역 정보 추출부
230: 광고 제공부 310: 위치 정보 생성부
320: 단말 데이터 선별부 330: 영상 정보 획득부
340: 단말 지역 정보 추출부 350: 단말 광고 제공부
360: 증강 현실 제공부

Claims (16)

  1. 수신된 위치 정보를 기준으로 검색 범위를 설정하고 상기 검색 범위에 포함되는 후보(Candidate) 데이터를 선별하며, 수신된 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보를 추출하여 전송하는 영상 인식 매칭 장치;
    상기 특징점에 해당하는 광고 정보가 있는 경우, 상기 광고 정보를 전송하는 광고 제공 장치; 및
    상기 위치 정보 및 획득한 상기 영상 정보를 전송하고, 그에 대응하는 상기 지역 정보 및 상기 광고 정보를 수신한 후 상기 특징점에 상기 지역 정보 및 상기 광고 정보 중 적어도 하나 이상의 정보 오버레이(Overlay)되어 나타나도록 하는 단말기;
    를 포함하고,
    상기 광고 제공 장치는, 상기 영상 정보를 구성하고 있는 특정 오브젝트(Object)에 대한 색상 정보, 에지(Edge) 정보, 외곽선 정보, 텍스처(Texture) 정보, 텍스트(Text) 정보 및 특정 각도에 따른 외곽 형태 정보 중 적어도 하나 이상의 정보를 특징 벡터(Feature Vector)로 변환하고, 상기 특징 벡터와 상기 후보 데이터의 영상 매칭을 수행하여 유사도 가장 높은 데이터를 선별한 후 선별된 데이터들의 상관관계에 근거하여 상기 지역 정보를 추출하며,
    상기 단말기는, 상기 영상 정보를 구성하는 각각의 오브젝트에 대한 X, Y, Z 좌표값을 추출한 후 X, Y, Z 좌표값에 근거한 센터값 또는 상기 센터값으로부터 기 설정된 거리만큼 이격된 좌표값에 상기 지역 정보 및 상기 광고 정보 중 어느 하나가 유동적으로 매핑되어 나타나도록 하는 것을 특징으로 하는 증강 현실을 이용한 광고 제공 시스템.
  2. 단말기로부터 수신된 위치 정보를 기준으로 검색 범위를 설정하고 상기 검색 범위 내에 포함되는 후보 데이터를 선별하는 데이터 선별부;
    상기 단말기로부터 수신된 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보를 추출하여 상기 단말기로 전송하는 지역 정보 추출부; 및
    상기 특징점에 해당하는 광고 정보가 있는 경우, 상기 광고 정보를 상기 단말기로 전송하는 광고 제공부;
    를 포함하고,
    상기 지역 정보 추출부는, 상기 영상 정보를 구성하고 있는 특정 오브젝트에 대한 색상 정보, 에지 정보, 외곽선 정보, 텍스처 정보, 텍스트 정보 및 특정 각도에 따른 외곽 형태 정보 중 적어도 하나 이상의 정보를 특징 벡터로 변환하고, 상기 특징 벡터와 상기 후보 데이터의 영상 매칭을 수행하여 유사도 가장 높은 데이터를 선별한 후 선별된 데이터들의 상관관계에 근거하여 상기 지역 정보를 추출하고,
    상기 단말기는, 상기 영상 정보를 구성하는 각각의 오브젝트에 대한 X, Y, Z 좌표값을 추출한 후 X, Y, Z 좌표값에 근거한 센터값 또는 상기 센터값으로부터 기 설정된 거리만큼 이격된 좌표값에 상기 지역 정보 및 상기 광고 정보 중 어느 하나가 유동적으로 매핑되어 나타나도록 하는 것을 특징으로 하는 AR 광고 제공 장치.
  3. 삭제
  4. 제 2 항에 있어서,
    상기 지역 정보는,
    이름 정보, 전화번호 정보, 관심 지점(POI: Point Of Interest) 정보, 인터넷 링크 정보 및 태깅(Tagging) 정보 중 적어도 하나 이상의 정보를 포함하는 것을 특징으로 하는 AR 광고 제공 장치.
  5. 제 2 항에 있어서,
    상기 광고 정보는,
    3D 광고 정보, 2D 광고 정보 및 애니메이션(Animation) 광고 정보 중 적어도 하나 이상의 정보를 포함하는 것을 특징으로 하는 AR 광고 제공 장치.
  6. 제 2 항에 있어서,
    상기 광고 제공부는,
    상기 단말기로부터 사용자에 의해 선택된 광고 정보가 있는 경우, 상기 선택된 광고 정보에 대한 상세 광고 정보 및 쿠폰 정보 중 적어도 하나 이상의 정보를 상기 단말기로 전송하는 것을 특징으로 하는 AR 광고 제공 장치.
  7. 제 2 항에 있어서,
    상기 광고 제공부는,
    상기 단말기로 전송된 광고 정보에 대한 광고 실적 정보 또는 광고 통계 정보를 생성하며, 상기 광고 실적 정보 및 광고 통계 정보를 연동하는 관리자 단말기로 전송하는 것을 특징으로 하는 AR 광고 제공 장치.
  8. 제 2 항에 있어서,
    상기 위치 정보는 GPS 전파 신호 및 전자 방향 정보 중 적어도 하나 이상의 정보를 포함하는 것을 특징으로 하는 AR 광고 제공 장치.
  9. 제 8 항에 있어서,
    상기 데이터 선별부는,
    상기 GPS 전파 신호에 근거하여 현재 위치 정보를 산출하고, 상기 현재 위치 정보를 기준으로 상기 검색 범위를 설정하고, 상기 검색 범위 내에 포함된 데이터 중 상기 전자 방향 정보에 해당하는 데이터만을 상기 후보 데이터로 선별하는 것을 특징으로 하는 AR 광고 제공 장치.
  10. 삭제
  11. 구비된 GPS 모듈 및 전자 방향 센서 중 적어도 하나 이상의 모듈을 이용하여 위치 정보를 생성하는 위치 정보 생성부;
    상기 위치 정보를 기준으로 검색 범위를 설정하고, 상기 검색 범위에 포함되는 후보 데이터를 선별하는 단말 데이터 선별부;
    구비된 카메라 모듈을 이용하여 영상 정보를 획득하는 영상 정보 획득부;
    상기 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보를 추출하는 단말 지역 정보 추출부;
    상기 특징점에 해당하는 광고 정보를 추출하는 단말 광고 제공부; 및
    상기 특징점에 상기 지역 정보 및 상기 광고 정보 중 적어도 하나 이상의 정보가 오버레이되도록 하는 증강 현실 제공부;
    를 포함하고,
    상기 단말 지역 정보 추출부는, 상기 영상 정보를 구성하는 각각의 오브젝트에 대한 X, Y, Z 좌표값을 추출한 후 X, Y, Z 좌표값에 근거한 센터값 또는 상기 센터값으로부터 기 설정된 거리만큼 이격된 좌표값에 상기 지역 정보 및 상기 광고 정보 중 어느 하나가 유동적으로 매핑되어 나타나도록 하며,
    상기 단말 지역 정보 추출부는, 상기 영상 정보를 구성하고 있는 특정 오브젝트에 대한 색상 정보, 에지 정보, 외곽선 정보, 텍스처 정보, 텍스트 정보 및 특정 각도에 따른 외곽 형태 정보 중 적어도 하나 이상의 정보를 특징 벡터로 변환하고, 상기 특징 벡터와 상기 후보 데이터의 영상 매칭을 수행하여 유사도 가장 높은 데이터를 선별한 후 선별된 데이터들의 상관관계에 근거하여 상기 지역 정보를 추출하는 것을 특징으로 하는 단말기.
  12. 삭제
  13. 제 11 항에 있어서,
    상기 단말 지역 정보 추출부는,
    상기 오브젝트에 대한 X, Y, Z 좌표값을 이용하여 상기 오브젝트의 모서리 좌표값을 산출하고, 상기 모서리 좌표값을 이용하여 상기 오브젝트에 대한 중심값을 산출하는 것을 특징으로 하는 단말기.
  14. 삭제
  15. 데이터 선별부가 단말기로부터 수신된 위치 정보를 기준으로 검색 범위를 설정하고 상기 검색 범위 내에 포함되는 후보 데이터를 선별하는 단계;
    지역 정보 추출부가 상기 단말기로부터 수신된 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보를 추출하여 상기 단말기로 전송하는 단계; 및
    상기 특징점에 해당하는 광고 정보가 있는 경우, 광고 제공부가 상기 광고 정보를 상기 단말기로 전송하는 단계;
    를 포함하고,
    상기 지역 정보 추출부는, 상기 영상 정보를 구성하고 있는 특정 오브젝트에 대한 색상 정보, 에지 정보, 외곽선 정보, 텍스처 정보, 텍스트 정보 및 특정 각도에 따른 외곽 형태 정보 중 적어도 하나 이상의 정보를 특징 벡터로 변환하고, 상기 특징 벡터와 상기 후보 데이터의 영상 매칭을 수행하여 유사도 가장 높은 데이터를 선별한 후 선별된 데이터들의 상관관계에 근거하여 상기 지역 정보를 추출하고,
    상기 단말기는, 상기 영상 정보를 구성하는 각각의 오브젝트에 대한 X, Y, Z 좌표값을 추출한 후 X, Y, Z 좌표값에 근거한 센터값 또는 상기 센터값으로부터 기 설정된 거리만큼 이격된 좌표값에 상기 지역 정보 및 상기 광고 정보 중 어느 하나가 유동적으로 매핑되어 나타나도록 하는 것을 특징으로 하는 증강 현실을 이용한 광고 제공 방법.
  16. 구비된 GPS 모듈 및 전자 방향 센서 중 적어도 하나 이상의 모듈을 이용하여 위치 정보를 생성하는 단계;
    상기 위치 정보를 기준으로 검색 범위를 설정하고, 상기 검색 범위에 포함되는 후보 데이터를 선별하는 단계;
    구비된 카메라 모듈을 이용하여 영상 정보를 획득하는 단계;
    상기 영상 정보에서 특징점을 추출한 후 상기 후보 데이터 중 상기 특징점과 일치하는 지역 정보를 추출하는 단말 지역 정보 추출부;
    상기 특징점에 해당하는 광고 정보를 추출하는 단계; 및
    상기 특징점에 상기 지역 정보 및 상기 광고 정보 중 적어도 하나 이상의 정보가 오버레이되도록 하는 단계;
    를 포함하고,
    상기 단말 지역 정보 추출부는, 상기 영상 정보를 구성하는 각각의 오브젝트에 대한 X, Y, Z 좌표값을 추출한 후 X, Y, Z 좌표값에 근거한 센터값 또는 상기 센터값으로부터 기 설정된 거리만큼 이격된 좌표값에 상기 지역 정보 및 상기 광고 정보 중 어느 하나가 유동적으로 매핑되어 나타나도록 하며,
    상기 단말 지역 정보 추출부는, 상기 영상 정보를 구성하고 있는 특정 오브젝트에 대한 색상 정보, 에지 정보, 외곽선 정보, 텍스처 정보, 텍스트 정보 및 특정 각도에 따른 외곽 형태 정보 중 적어도 하나 이상의 정보를 특징 벡터로 변환하고, 상기 특징 벡터와 상기 후보 데이터의 영상 매칭을 수행하여 유사도 가장 높은 데이터를 선별한 후 선별된 데이터들의 상관관계에 근거하여 상기 지역 정보를 추출하는 것을 특징으로 하는 증강 현실을 이용한 광고 제공 방법.
KR1020100132992A 2010-12-23 2010-12-23 증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기 KR101545138B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100132992A KR101545138B1 (ko) 2010-12-23 2010-12-23 증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100132992A KR101545138B1 (ko) 2010-12-23 2010-12-23 증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기

Publications (2)

Publication Number Publication Date
KR20120071444A KR20120071444A (ko) 2012-07-03
KR101545138B1 true KR101545138B1 (ko) 2015-08-19

Family

ID=46706427

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100132992A KR101545138B1 (ko) 2010-12-23 2010-12-23 증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기

Country Status (1)

Country Link
KR (1) KR101545138B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240075181A (ko) 2022-11-22 2024-05-29 민선기 위치기반 증강현실 메모 광고 서비스 시스템 및 그 시스템의 광고 서비스 방법

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150295959A1 (en) * 2012-10-23 2015-10-15 Hewlett-Packard Development Company, L.P. Augmented reality tag clipper
KR20230173231A (ko) 2013-03-11 2023-12-26 매직 립, 인코포레이티드 증강 및 가상 현실을 위한 시스템 및 방법
KR101506610B1 (ko) * 2013-04-29 2015-03-27 주식회사 제이엠랩 증강현실 제공 장치 및 그 방법
KR102167273B1 (ko) * 2013-06-25 2020-10-20 한양대학교 산학협력단 실제 객체를 증강하는 방법, 장치 및 컴퓨터 프로그램 제품
KR102156440B1 (ko) * 2013-12-10 2020-09-17 한국전자통신연구원 시각언어 기반의 영상주석 자동 생성 장치 및 방법
KR101879130B1 (ko) * 2017-06-13 2018-07-16 이강호 증강 현실을 이용한 소셜 네트워크 서비스 시스템
KR102054230B1 (ko) * 2017-07-31 2019-12-10 정민수 Nfc 태그를 이용한 비교광고 서비스 제공 방법
KR101975506B1 (ko) * 2017-12-18 2019-05-08 신동화 간판 이미지 표시 시스템 및 그의 제어 방법
KR101975505B1 (ko) * 2017-12-18 2019-05-08 신동화 수집된 정보에 기반하여 간판 이미지를 표시하는 시스템 및 그의 제어 방법
KR102420503B1 (ko) * 2020-11-11 2022-07-14 엔티콘 주식회사 증강현실 기반의 공연 콘텐츠 제공 방법 및 제공장치
KR102604906B1 (ko) 2021-04-22 2023-11-22 주식회사 아셈블 증강 현실 콘텐츠 제공 방법과 이를 수행하기 위한 컴퓨팅 장치 및 시스템

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240075181A (ko) 2022-11-22 2024-05-29 민선기 위치기반 증강현실 메모 광고 서비스 시스템 및 그 시스템의 광고 서비스 방법

Also Published As

Publication number Publication date
KR20120071444A (ko) 2012-07-03

Similar Documents

Publication Publication Date Title
KR101545138B1 (ko) 증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기
CN111556278B (zh) 一种视频处理的方法、视频展示的方法、装置及存储介质
US9317133B2 (en) Method and apparatus for generating augmented reality content
EP2656245B1 (en) Computerized method and device for annotating at least one feature of an image of a view
WO2020005635A1 (en) Object-based localization
US20140079281A1 (en) Augmented reality creation and consumption
KR101363559B1 (ko) 부가 데이터를 이용한 증강 현실 제공 장치 및 증강 현실 제공 방법
KR20140082610A (ko) 휴대용 단말을 이용한 증강현실 전시 콘텐츠 재생 방법 및 장치
US20140078174A1 (en) Augmented reality creation and consumption
KR20150075532A (ko) 증강 현실 제공 장치 및 방법
US11010947B2 (en) Information processing system and information processing apparatus
US20140232748A1 (en) Device, method and computer readable recording medium for operating the same
CN106130886A (zh) 扩展信息的展示方法及装置
US11758218B2 (en) Integrating overlaid digital content into displayed data via graphics processing circuitry
KR20190124436A (ko) 영상 기반 건물 검색 방법 및 장치
CN112215964A (zh) 基于ar的场景导览方法和设备
KR20120099814A (ko) 증강현실 컨텐츠 서비스 시스템과 장치 및 그 방법
US20170034586A1 (en) System for content matching and triggering for reality-virtuality continuum-based environment and methods thereof
Schall et al. 3D tracking in unknown environments using on-line keypoint learning for mobile augmented reality
KR100945288B1 (ko) 확장된 에이알지를 활용한 증강현실 기반의 싱글미디어멀티서비스 방법 및 시스템
CN113709584A (zh) 视频划分方法、装置、服务器、终端及存储介质
KR102443049B1 (ko) 전자 장치 및 그 동작 방법
Singh et al. A Marker-based AR System on Image Shadowing for Tourists
US20230326094A1 (en) Integrating overlaid content into displayed data via graphics processing circuitry and processing circuitry using a computing memory and an operating system memory
CN111681255B (zh) 一种对象识别方法和相关装置

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180807

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190806

Year of fee payment: 5