KR101136944B1 - 무선 단말을 이용한 컨텐츠 제공 시스템 및 방법 - Google Patents

무선 단말을 이용한 컨텐츠 제공 시스템 및 방법 Download PDF

Info

Publication number
KR101136944B1
KR101136944B1 KR1020100045913A KR20100045913A KR101136944B1 KR 101136944 B1 KR101136944 B1 KR 101136944B1 KR 1020100045913 A KR1020100045913 A KR 1020100045913A KR 20100045913 A KR20100045913 A KR 20100045913A KR 101136944 B1 KR101136944 B1 KR 101136944B1
Authority
KR
South Korea
Prior art keywords
content
module
image
marker
identifier
Prior art date
Application number
KR1020100045913A
Other languages
English (en)
Other versions
KR20110126310A (ko
Inventor
이주문
Original Assignee
에스디 솔루션스(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스디 솔루션스(주) filed Critical 에스디 솔루션스(주)
Priority to KR1020100045913A priority Critical patent/KR101136944B1/ko
Publication of KR20110126310A publication Critical patent/KR20110126310A/ko
Application granted granted Critical
Publication of KR101136944B1 publication Critical patent/KR101136944B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0267—Wireless devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0277—Online advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/60—Subscription-based services using application servers or record carriers, e.g. SIM application toolkits

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Theoretical Computer Science (AREA)
  • Development Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 무선 단말을 이용한 컨텐츠 제공 시스템 및 방법에 관한 것으로, 단말의 어플리케이션이 구동되면 카메라 구동 모듈이 카메라를 작동시키고 촬영된 영상을 영상 인식 모듈로 전달하는 단계, 영상 인식 모듈이 해당 영상을 인식하여 영상에 마커가 포함되어 있는지 확인하는 단계, 영상에 마커가 포함된 것으로 확인되면, 마커 및 식별자가 포함된 영상을 어플리케이션의 데이터 송수신 모듈이 컨텐츠 제공 서버로 전송하는 단계, 컨텐츠 제공서버의 데이터 송수신 모듈이 영상을 수신하여 영상 분석 모듈로 전달하는 단계, 영상 분석 모듈이 영상을 분석하여 식별자를 추출하는 단계, 컨텐츠 매핑 모듈이 추출된 식별자에 대응되는 컨텐츠를 검색하는 단계, 컨텐츠 획득 모듈이 컨텐츠 저장 DB로부터 컨텐츠를 획득하고, 컨텐츠 제공서버의 데이터 송수신 모듈이 무선 단말로 컨텐츠를 전송하는 단계, 무선 단말의 컨텐츠 구동 모듈이 컨텐츠를 사용자에게 디스플레이하는 단계를 포함한다.

Description

무선 단말을 이용한 컨텐츠 제공 시스템 및 방법{Contents providing system and method by using mobile terminal}
본 발명은 무선 단말을 이용한 컨텐츠 제공 시스템 및 방법에 관한 것으로, 구체적으로는 무선 단말의 카메라가 촬영한 영상에서 특정한 마커를 인식한 경우 식별자에 대한 컨텐츠를 실시간으로 무선 단말에게 전달해 주는 시스템 및 방법에 대한 것이다.
현재 무선 통신 시장은 스마트 폰 등의 무선 단말기 보급 확대에 따른 어플리케이션 시장이 크게 활성화 되고 있는 상황이다. 무선 통신이 가능한 단말기는 스마트폰을 위시한 휴대폰과 넷북, 태블릿 PC, e북 단말기 등으로 확대되고 있으며, 이를 기반으로 새로운 서비스와 어플리케이션 시장이 창출되어 수많은 서비스와 어플리케이션이 공급되고 있다.
특히 최근 스마트 폰은 카메라를 이용하여 건물모양, 위치 등 실제 영상정보를 획득하고, 그러한 영상정보를 바탕으로 그와 연관되는 좀더 자세한 정보를 제공하는 증강현실 서비스가 보급되고 있다. 이러한 증강현실 서비스는 스마트 폰이 보유한 GPS 기능을 이용하는데, GPS 방식은 건물의 내부에서는 사용하기 어렵고 건물이 밀집된 지역에서는 오류가 발생하기 쉽다는 단점이 있다. 따라서 GPS 방식은 거대한 쇼핑몰 내부 등에서 특정 상점이나 레스토랑에 대한 정보를 얻기에는 정확도가 떨어지는 문제점이 있다. 또한 증강현실 서비스는 상점 등의 광고 컨텐츠를 전달하고 광고비를 정산하는 시스템이 아니었다.
본 발명은 상기한 점을 감안하여 발명된 것으로, 마커 및 식별자 방식을 이용하여 정확한 컨텐츠를 실시간으로 무선 단말에게 전달해 주는 컨텐츠 제공 시스템 및 방법을 제공함에 그 목적이 있다.
상기 목적을 달성하기 위한 본 발명에 의한 무선 단말을 이용한 컨텐츠 제공 시스템은, 카메라를 작동시켜 촬영된 영상을 영상 인식 모듈로 전달하는 카메라 구동 모듈, 촬영된 영상에 마커가 포함되어 있는지 인식하는 영상 인식 모듈 및, 마커 및 식별자가 포함된 영상을 컨텐츠 제공 서버로 전송하는 데이터 송수신 모듈을 포함하는 무선 단말의 어플리케이션; 마커 및 식별자가 포함된 영상을 상기 무선 단말의 어플리케이션으로부터 수신하여 영상 분석 모듈로 전달하는 데이터 송수신 모듈, 마커 및 식별자가 포함된 영상을 분석하여 식별자를 추출하는 영상 분석 모듈, 상기 영상 분석 모듈에서 분석된 식별자에 대응하는 컨텐츠의 위치를 컨텐츠 저장 DB에서 찾아 매핑하는 컨텐츠 매핑 모듈 및, 상기 컨텐츠 매핑 모듈이 확인한 위치에 있는 컨텐츠를 가져오는 컨텐츠 획득 모듈을 포함하는 컨텐츠 제공 서버; 광고주가 자신의 식별자 및 컨텐츠를 등록할 수 있게 하는 식별자 등록 모듈, 광고주가 자신의 식별자와 관련하여 등록한 컨텐츠가 저장되는 컨텐츠 저장 DB를 포함하는 광고 관리 서버를 포함하되, 촬영된 영상에 마커가 포함된 경우, 촬영된 영상의 식별자에 대응하는 컨텐츠가 단말의 어플리케이션으로 전송된다.
여기서, 카메라가 마커를 비추었을 때, 상기 영상 인식 모듈에 의해 무선 단말의 화면에 마커가 현재의 실시간 화면상에 존재하는지 표시해주는 표시자가 제공되는 것이 바람직하다.
그리고 영상 인식 모듈은 영상 이진화, 영상 레이블링 및, 레이블 맵과 마커 패턴 데이터의 비교를 통해 영상을 인식하는 것이 바람직하다.
무선 단말의 어플리케이션이 상기 컨텐츠 제공 서버로부터 수신 받은 컨텐츠를 구동하기 위한 컨텐츠 구동 모듈을 더 포함할 수 있고, 광고 관리 서버는 광고주가 자신의 컨텐츠를 인터넷을 통해 관리할 수 있도록 하는 웹 인터페이스 모듈을 더 포함할 수 있으며, 광고 관리 서버는 컨텐츠의 제공 빈도수에 따라 광고주와 광고비를 정산하는 광고비 정산 모듈을 더 포함할 수 있다.
더욱이, 영상 분석 모듈은 영상을 분석하여 마커를 추출하고, 마커가 추출된 경우 식별자를 추출하는 것이 바람직하며, 여기서 식별자는 문자, 숫자, 도형 또는 로고인 것이 바람직하다.
상기 목적을 달성하기 위한 본 발명에 의한 무선 단말을 이용한 컨텐츠 제공 방법은, 카메라 구동 모듈, 영상 인식 모듈, 데이터 송수신 모듈 및, 컨텐츠 구동 모듈을 포함하는 무선 단말의 어플리케이션, 데이터 송수신 모듈, 영상 분석 모듈, 컨텐츠 매핑 모듈 및, 컨텐츠 획득 모듈을 포함하는 컨텐츠 제공 서버 및, 식별자 등록 모듈, 컨텐츠 저장 DB를 포함하는 광고 관리 서버를 포함하는 무선 단말을 이용한 컨텐츠 제공 시스템에서 수행되는 컨텐츠 제공 방법에 있어서, (a) 단말의 어플리케이션이 구동되면 상기 카메라 구동 모듈이 카메라를 작동시키고 촬영된 영상을 상기 영상 인식 모듈로 전달하는 단계; (b) 상기 영상 인식 모듈이 해당 영상을 인식하여 영상에 마커가 포함되어 있는지 확인하는 단계; (c) 영상에 마커가 포함된 것으로 확인되면, 마커 및 식별자가 포함된 영상을 상기 어플리케이션의 데이터 송수신 모듈이 상기 컨텐츠 제공 서버로 전송하는 단계; (d) 상기 컨텐츠 제공서버의 데이터 송수신 모듈이 영상을 수신하여 상기 영상 분석 모듈로 전달하는 단계; (e) 상기 영상 분석 모듈이 영상을 분석하여 식별자를 추출하는 단계; (f) 상기 컨텐츠 매핑 모듈이 추출된 식별자에 대응되는 컨텐츠를 검색하는 단계; (g) 상기 컨텐츠 획득 모듈이 상기 컨텐츠 저장 DB로부터 컨텐츠를 획득하고, 상기 컨텐츠 제공서버의 데이터 송수신 모듈이 무선 단말로 컨텐츠를 전송하는 단계; (h) 무선 단말의 상기 컨텐츠 구동 모듈이 컨텐츠를 사용자에게 디스플레이하는 단계를 포함한다.
이때, 상기 (e) 단계 전에, 상기 영상 분석 모듈이 영상을 분석하여 영상에 마커가 포함된 경우에만 (e) 단계로 진행할 수 있다. 그리고 마커가 포함되어 있지 않은 경우 단말의 어플리케이션으로 오류 메시지를 통보하는 것이 바람직하다.
상기 (b) 단계는, 영상 이진화 단계, 영상 레이블링 단계 및, 레이블 맵과 마커 패턴 데이터의 비교 단계를 포함한다.
더욱이, 상기 광고 관리 서버가 광고비 정산 모듈을 더 포함하고, 상기 (h) 단계 이후에, 상기 광고비 정산 모듈이 컨텐츠의 제공 빈도수에 따라 광고주와 광고비를 정산하는 단계를 더 포함하는 것이 바람직하다.
상기한 바와 같이 본 발명에 의하면, 무선 단말이 구비한 카메라를 이용해 마커를 인식하고 마커가 확인된 대상에 대해서만 광고 컨텐츠를 제공하므로, GPS 방식 등을 이용하는 증강현실 서비스보다 더 정확한 서비스를 제공할 수 있는 효과가 있다. 아울러, 문자, 숫자, 로고 등의 식별자를 인식하여 그에 대해 미리 지정된 광고 컨텐츠를 실시간으로 무선 단말의 사용자에게 제공해 주므로, 사용자는 상점 등에 대해 원하는 정보를 즉각 얻을 수 있고 광고주는 자신의 상점 등을 효과적으로 홍보할 수 있는 효과가 있다.
도 1은 본 발명의 바람직한 실시예에 의한 무선 단말을 이용한 컨텐츠 제공 방법을 설명하기 위한 개념도,
도 2는 본 발명의 바람직한 실시예에 의한 무선 단말을 이용한 컨텐츠 제공 시스템을 설명하기 위한 블록도,
도 3은 무선 단말을 이용한 컨텐츠 제공 시스템에서 수행되는 컨텐츠 제공 방법을 설명하기 위한 흐름도이다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세하게 설명하기로 한다. 그러나, 이하의 실시예는 이 기술분야에서 통상적인 지식을 가진 자에게 본 발명이 충분히 이해되도록 제공되는 것으로서 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 다음에 기술되는 실시예에 한정되는 것은 아니다.
도 1은 본 발명의 바람직한 실시예에 의한 무선 단말을 이용한 컨텐츠 제공 방법을 설명하기 위한 개념도이다.
도 1을 참조하면, 카메라가 지원되는 스마트폰과 같은 단말기를 이용하여 사용자가 어플리케이션 프로그램을 구동시킨다. 그리고 카메라를 이용하여 상점의 간판 등에 인쇄된 마커 및 식별자를 비춘다. 그러면 스마트폰의 어플리케이션 프로그램이 마커를 인식하고, 해당 영상을 무선 통신을 이용하여 컨텐츠 제공 서버로 송신한다. 컨텐츠 제공 서버는 식별자를 인식하여 컨텐츠를 매핑하고 해당 컨텐츠를 사용자 단말로 전송한다. 그러면 사용자는 실시간으로 해당 상점에 대한 컨텐츠, 예를 들어 상점이 레스토랑인 경우 레스토랑의 메뉴 및 가격, 이벤트 정보 등을 받아 볼 수 있다.
도 1에 도시된 바와 같이 마커는 원모양 등의 어떠한 모양이라도 가능한데, 스마트폰이 촬영한 영상에 이러한 특정 마커가 포함된 경우 컨텐츠 제공 서버는 식별자인 문자열 SD와 관련된 컨텐츠, 예를 들어 광고를 사용자 단말로 전송하는 것이다. 여기서 컨텐츠란 광고를 포함한 모든 정보를 포괄하는 개념이다. 만약, 식별자가 버스정류장에 인쇄된 정류소 고유 번호인 경우에는 해당 정류장을 통과하는 버스 번호, 도착시간 정보 등을 단말에 제공할 수 있다. 또는 식별자가 고궁 같은 관광지에서 특정 건물에 대한 것이라면, 그 건물의 역사에 관한 컨텐츠를 단말에 제공할 수도 있다. 이러한 마커 및 식별자는 상점의 간판에 인쇄될 수도 있고, 쇼핑몰의 안내판, 잡지 등의 서적에 인쇄되어 사용자에게 특정 광고주의 광고 등의 컨텐츠를 정확하게 제공하게 된다.
이하, 도 2를 이용하여 무선 단말을 이용한 컨텐츠 제공 시스템에 대해 더욱 상세하게 설명한다.
도 2는 본 발명의 바람직한 실시예에 의한 무선 단말을 이용한 컨텐츠 제공 시스템을 설명하기 위한 블록도이다. 도 2를 참조하면, 무선 단말을 이용한 컨텐츠 제공 시스템은 어플리케이션 프로그램(100)을 구비한 무선 단말과 광고 제공자의 컨텐츠 제공 서버(200) 및 광고 관리 서버(300)로 이루어진다. 사용자 단말은 Wi-Fi나 3G와 같은 무선 통신을 통해 광고 제공자의 서버와 연결된다. 광고 제공자의 컨텐츠 제공 서버(200)와 광고 관리 서버(300)는 유선 또는 무선으로 연결되며, 실시예에 따라 하나의 서버로 구현될 수도 있다.
무선 단말의 어플리케이션 프로그램(100)은 사용자가 어플리케이션 스토어를 통해 다운 받아 설치할 수 있는 것으로, 카메라 구동 모듈(110), 영상 인식 모듈(120), 데이터 송수신 모듈(130) 및 컨텐츠 구동 모듈(140)로 이루어진다.
카메라 구동 모듈(110)은 사용자가 단말의 어플리케이션을 실행시키면 단말에 구비된 카메라를 작동시키는 역할을 한다. 예를 들어, 카메라 구동 모듈(110)은 단말 플랫폼의 카메라 H/W 접근 API(Aplication programming interface)를 이용하여 현재 카메라에 잡히고 있는 영상을 실시간으로 사용자 UI(User interface) 화면에 표출한다. 그리고 카메라 구동 모듈(110)은 화면에 표시되고 있는 영상 데이터를 영상 인식 모듈(120)로 전달한다.
영상 인식 모듈(120)은 카메라가 촬영하는 영상에서 특정한 마커(Marker)가 포함되어 있는지 인식하는 역할을 한다. 마커(Marker)는 본 시스템의 컨텐츠 제공 서버(200)가 컨텐츠를 제공할 수 있는 대상인지 아닌지 구분하는 것이다. 마커(Marker)는 컨텐츠 제공 시스템의 운영자가 임의로 정할 수 있는 것으로, 도 1에 도시된 것처럼 원고리 모양 등이 가능하며 정확하게 인식이 가능하도록 간단한 모양인 것이 바람직하다. 그러면 단말 사용자는 원고리 모양 같은 마커가 그려진 임의의 간판을 보면 이를 촬영하여 컨텐츠를 제공받을 수 있다는 것을 알게 된다. 단말의 카메라가 마커를 비추었을 때 사용자 UI 화면에는 영상 인식 모듈(120)에 의해 마커가 현재의 실시간 화면상에 존재하는지 표시해주는 표시자(Indicator) UI가 제공될 수 있다.
마커(Marker)를 인식하는 방법은 영상처리 알고리즘을 동원하여 촬영된 영상 데이터에서 본 시스템의 특정한 마커와 동일한 패턴의 영상 객체(object)를 추출할 수 있는지 검사하는 것이다. 이 때, 영상 인식 모듈(120)이 사용하는 영상처리 흐름은 크게 아래와 같다.
우선 촬영된 영상을 이진화(binarization)한다. 이는 구동 중인 단말의 카메라 H/W 종류와 접근 API 성능/기능에 따라 다양한 색 규격을 가질 수 있는 영상 데이터를 일관된 패턴 인식 분석 절차를 통해 검사할 수 있도록 하는 것이다. 이를 위해 영상의 각 화소(pixel)가 완전 흑백(0, 1) 값을 갖는 1-bit 비트평면이 될 수 있도록 미리 설정된 화질 개선 필터(filter)와 흑백 임계 값(threshold) 또는 임계 값 결정 함수를 통해 변환한다.
이어서, 영상 레이블링(labeling)을 실시한다. 이는 이진화된 전체 영상을 스캐닝(영상 내의 모든 화소를 일괄 검사함)하여 영상 내에서 서로 연결되어 다른 화소 집합과 구분될 수 있는 각각의 화소(pixel) 집합을 구하고, 각 화소 집합에 대해 고유값(label)을 부여하는 것이다. 레이블링된 각 화소 집합은 사람이 육안으로 식별할 수 있는 화면 내에 존재하는 영상 객체(사물, 도형)를 근사적으로 대표한다고 할 수 있다. 이 과정의 결과로 이후 패턴 데이터 비교를 위한 픽셀 집합 분류 자료구조인 레이블 맵(label map)이 형성된다.
다음으로, 레이블 맵과 패턴 데이터를 비교(pattern matching)한다. 즉, 영상 인식 모듈은 레이블링 과정을 통해 얻어진 레이블 맵(label map)을 기준으로 미리 만들어져 영상 인식 모듈 내에 참조할 수 있도록 탑재된 본 시스템의 고유 마커 패턴 데이터와 각 픽셀 집합의 패턴을 비교한다. 예를 들어, 영상 인식 모듈은 각 레이블에 해당 화소 집합을 2차원 평면 상에서 둘러싸는 최소 사각 영역을 설정하고, 그 최소 사각 영역 안에서 화소의 분포에 대한 통계값을 얻어낸 후, 이를 미리 지정된 마커 패턴 데이터 내의 각 레이블 맵에서 같은 방식으로 처리한 유사한 값을 찾을 수 있는지 검사한다. 이 때, 사용자에 의해 카메라를 통해 얻어진 마커를 포함한 영상은 정면에서 정확히 비추어지지 않고 기울여지거나 옆으로 틀어진 공간적인 자세에서 얻어질 수도 있다. 그러므로 영상 인식 모듈은 마커 패턴 데이터의 각 형태 픽셀 집합에 대해 회전, 3차원 좌표 변환 등의 전처리를 통해 카메라 영상에서 얻어진 화소 집합의 통계값과 비교할 수 있는 방법을 포함하는 것이 바람직하다.
이렇게 영상 인식 모듈(120)은 미리 정해져 있는 패턴 일치 비율보다 높은 일치율을 보이는 화상을 마커가 포함된 영상으로 확정하고, 단말 UI 화면상의 마커 인식 표시자(Indicator)가 인식 확정으로 변경될 수 있도록 한다. 그러면 카메라 구동 모듈(110)은 해당 영상을 정지 영상으로 캡쳐하여 데이터 송수신 모듈(130)로 전달한다. 이 때, 정지 영상에는 마커와 식별자가 포함된다. 이러한 목표 정지 영상의 캡쳐와 전송은 단말 어플리케이션의 사용자 설정 여부에 따라 전체 자동 동작으로 진행될 수도 있고, 사용자의 UI 화면 입력에 의해 각 단계를 수동 진행할 수도 있다.
데이터 송수신 모듈(130)은 카메라 구동 모듈(110)로부터 전달된 정지 영상을 Wi-Fi 네트워크 또는 이동전화(3G) 네트워크를 통해 컨텐츠 제공 서버(200)로 전송하는 기능을 담당한다. 데이터 송수신 모듈(130)은 Wi-Fi 신호분석 모듈 및 네트워크 선택 및 셋업(Setup) 모듈을 포함할 수 있다. Wi-Fi 신호분석 모듈은 단말이 포착할 수 있는 모든 Wi-Fi 네트워크를 찾아내고 패스워드 없이 접속 가능한 네트워크를 분별하여 네트워크 선택 및 셋업 모듈에 네트워크 정보를 제공한다. 네트워크 선택 및 셋업 모듈은 Wi-Fi 신호 분석 모듈로부터 받은 정보에 따라 Wi-Fi 접속을 시도하고 Wi-Fi 망을 통해 컨텐츠 제공 서버의 데이터 송수신 모듈에 접속한다. 만약 Wi-Fi 신호분석 모듈로부터 가용한 Wi-Fi망 정보를 얻지 못하였을 때는 사용자에게 이동전화 네트워크에 접속할 것인지를 묻고, 사용자의 선택에 따라 이동전화망 접속을 시도하여 컨텐츠 제공 서버에 접속을 시도한다.
컨텐츠 구동 모듈(140)은 컨텐츠 제공 서버(200)로부터 수신 받은 컨텐츠를 구동하기 위한 것으로, 동영상 플레이어 구동 모듈과 텍스트 뷰어(Text Viewer) 구동 모듈을 포함한다. 만약 컨텐츠 제공 서버에서 제공 받은 컨텐츠가 동영상 컨텐츠일 경우에는 동영상 플레이어를 구동시키고, 컨텐츠 제공 서버에서 제공 받은 컨텐츠가 텍스트일 경우 텍스트 뷰어를 구동시킨다. 또는 컨텐츠 제공 서버(200)에서 모바일 웹 주소(IP address)를 제공받은 경우에는 단말의 웹 브라우저를 구동시킨다.
이하 광고 컨텐츠 제공자의 컨텐츠 제공 서버(200)와 광고 관리 서버(300)에 대해 설명한다.
컨텐츠 제공 서버(200)는 데이터 송수신 모듈(210), 영상 분석 모듈(220), 컨텐츠 매핑 모듈(230) 및 컨텐츠 획득 모듈(240)로 이루어진다.
데이터 송수신 모듈(210)은 단말 어플리케이션의 데이터 송수신 모듈에 대응하여 Wi-Fi 혹은 이동전화 네트워크를 통해 통신 네트워크를 셋업하고 유지한다.
영상 분석 모듈(220)은 단말로부터 수신된 정지 영상을 분석하여 정지 영상에 포함된 식별자를 추출한다. 이러한 식별자는 도 1에 도시된 것처럼 SD와 같은 문자, 삼각형과 같은 도형, 로고 또는 숫자 등이 가능하다.
영상 분석 모듈(220)은 정지 영상을 분석하여 다음과 같이 식별자를 추출할 수 있다.
우선 정지 영상 중 마커를 식별하고 이를 재검증한다. 컴퓨팅 성능이 제한된 무선 단말 어플리케이션에서 카메라로부터 얻어진 영상을 실시간으로 인식한 결과는 오류를 포함할 수 있으므로, 컨텐츠 제공 서버(200)의 영상 분석 모듈(220)은 정지 영상을 보다 정교하게 필터링하여 올바른 마커가 포함된 것인지 최종 확정한다. 만약, 올바른 마커가 포함되지 않은 것으로 판정되면, 컨텐츠 제공 서버(200)는 단말의 어플리케이션(100)으로 오류 메시지를 전송할 수 있다.
이어서 영상 분석 모듈(220)은 정지 영상으로부터 식별자를 추출한다. 식별자로는 상점의 명칭과 같은 문자, 전화번호와 같은 숫자, 또는 도형이나 로고일 수 있는데, 이들 이외에도 영상 분석 모듈(220)이 분석 가능한 다른 형태의 것도 사용될 수 있음은 물론이다. 식별자가 문자 및 숫자인 경우 영상 분석 모듈은 광학 문자 인식(OCR:Optical Character Recognition) 기술에 기반하여 정지 영상을 데이터 처리 가능한 문자열로 변환한다. 만약, 로고가 그래픽 기반의 도형일 경우 단말 어플리케이션의 영상 인식 모듈(120)에서 사용하는 방법과 유사한 방법으로 인식한다.
컨텐츠 매핑 모듈(230)은 영상 분석 모듈(220)로부터 분석된 식별자에 대응하는 컨텐츠를 찾아 매핑한다. 이를 위해 컨텐츠 매핑 모듈(230)은 컨텐츠 위치 DB를 구비할 수 있다. 컨텐츠 위치 DB는 영상 분석 모듈(220)로부터 제공된 결과 데이터에 대응하는 컨텐츠의 물리적 위치를 기록한다.
컨텐츠 획득 모듈(240)은 컨텐츠 매핑 모듈(230)이 확인한 물리적인 위치에 있는 컨텐츠를 광고 관리 서버(300)로부터 컨텐츠 제공 서버(200)로 가져오는 기능을 수행한다.
광고 관리 서버(300)는 웹 인터페이스 모듈(310), 컨텐츠 저장 DB(320), 식별자 등록 모듈(330) 및 광고비 정산 모듈(340)로 이루어진다.
식별자 등록 모듈(330)은 광고주가 자신의 식별자 및 컨텐츠를 등록할 수 있도록 한다. 식별자로는 전술한 바와 같이 영상 분석 모듈이 인식할 수 있는 문자, 숫자, 도형 등이 가능하며, 컨텐츠는 동영상 광고, 텍스트 광고, 사진 등의 광고주가 원하는 어떠한 종류의 컨텐츠라도 가능하다. 아울러, 본 시스템에서 컨텐츠란 넓은 의미에서 식별자를 등록하는 광고주와 관련된 모든 정보, 예를 들어 버스 운행 정보, 고궁의 역사 등을 포괄하는 개념이다. 또한 컨텐츠 대신 모바일 웹 주소를 등록할 수도 있다. 이 경우, 컨텐츠 제공 서버의 컨텐츠 매핑 모듈(230)에는 식별자에 대응하는 모바일 웹 주소가 기록되며, 데이터 송수신 모듈(210)은 이 모바일 웹 주소를 단말 어플리케이션(100)에게 전달한다.
컨텐츠 저장 DB(320)는 광고주가 자신의 식별자와 관련하여 등록한 컨텐츠가 저장되는 곳이다. 웹 인터페이스(Web interface) 모듈(310)은 광고주가 자신이 광고하고자 하는 광고 컨텐츠를 인터넷을 통하여 관리할 수 있도록 한다. 즉, 광고주가 이미 등록된 광고 컨텐츠를 수정하거나 업데이트 할 때 웹 인터페이스 모듈(310)이 이용된다.
광고비 정산 모듈(340)은 광고 컨텐츠 제공 빈도수에 따라 광고비를 정산하는 모듈이다. 광고비 정산의 방식으로는 다음의 두 가지 방식이 이용될 수 있다.
우선, 광고 노출 기반의 광고비 정산 방법이다. 본 컨텐츠 제공 시스템은 단말의 어플리케이션에 광고 컨텐츠를 제공하여 사용자에게 디스플레이하게 하거나, 모바일 웹 주소를 전달하여 해당 웹 페이지가 단말에 표시되게 한다. 이렇게 광고 컨텐츠의 노출 회수를 광고비 정산 모듈(340)이 인식하여 노출 횟수당 일정한 광고비를 책정할 수 있다.
또는 광고 노출 이후 사용자 행동에 따라 광고비를 정산할 수도 있다. 예를 들어, 모바일 웹 주소를 전달한 경우 웹 고유의 Http 링크(link) 방식에 의해, 사용자 단말의 어플리케이션 화면에 노출되는 콘텐츠인 경우 사용자의 입력(클릭 및 터치 인풋)을 인식할 수 있는 어플리케이션의 기능에 의해, 사용자의 동작에 따라 광고주가 애초에 지정한 특정 콘텐츠 화면으로의 이동을 유도할 수 있다. 이 때 사용자의 행동의 회수 및 목표 콘텐츠로의 도달 성공 회수를 측정하여 해당 광고주 및 콘텐츠 별로 책정되어 있는 CPC(Cost Per Click) 또는 CPA(Cost Per Action) 광고비를 정산할 수 있다.
이하, 도 3을 참조하여 무선 단말을 이용한 컨텐츠 제공 시스템에서 수행되는 컨텐츠 제공 방법에 대해 설명한다.
도 3은 무선 단말을 이용한 컨텐츠 제공 시스템에서 수행되는 컨텐츠 제공 방법을 설명하기 위한 흐름도이다. 먼저 사용자가 단말의 어플리케이션 프로그램을 구동시킨다(제400단계). 그러면 카메라 구동 모듈(110)이 카메라를 작동시키고, 촬영된 영상은 영상 인식 모듈(120)로 전달된다(제401단계).
영상 인식 모듈(120)이 해당 영상을 인식(제402단계)하여 영상에 마커가 포함되어 있는지 확인한다(제403단계). 만약, 영상에 마커가 포함되어 있는 것으로 확인되지 않는다면 다시 촬영을 계속하거나 오류 메시지를 출력할 수 있다.
영상에 마커가 포함된 것으로 확인되면, 마커 및 식별자가 포함된 정지 영상을 데이터 송수신 모듈(130)이 컨텐츠 제공 서버(200)로 전송한다(제404단계).
이어서 컨텐츠 제공서버(200)의 데이서 송수신 모듈(210)은 정지 영상을 수신하여 영상 분석 모듈(220)로 전달한다(제405단계). 그러면 영상 분석 모듈(220)은 마커를 재검증한다(제406단계). 즉, 영상 분석 모듈(220)은 정지 영상을 분석하여 마커가 포함되어 있는지 확인하고(제407단계), 마커가 포함되어 있지 않는 것으로 확인되면 단말의 어플리케이션으로 오류 메시지를 통보한다(제414단계).
정지 영상에 마커가 포함된 것으로 확인되면, 영상 분석 모듈(220)이 정지 영상으로부터 식별자를 추출한다(제408단계). 그러면 컨텐츠 매핑 모듈(230)이 식별자에 대응되는 컨텐츠를 검색한다(제409단계). 이어서 컨텐츠 획득 모듈(240)이 컨텐츠 저장 DB(320)로부터 컨텐츠를 획득하고(제410단계), 데이터 송수신 모듈(210)이 무선 단말로 컨텐츠를 전송하게 된다(제411단계).
그러면 무선 단말의 컨텐츠 구동 모듈(140)이 동영상 또는 텍스트 등의 컨텐츠의 종류에 따라 컨텐츠를 사용자에게 디스플레이한다(제412단계).
이후 광고 관리 서버(300)의 광고비 정산 모듈(340)은 단말 사용자의 컨텐츠 사용 형태에 따라 광고비를 정산한다(제413단계).
100: 단말 어플리케이션, 110: 카메라 구동 모듈
120: 영상 인식 모듈, 130: 데이터 송수신 모듈
140: 컨텐츠 구동 모듈, 200: 컨텐츠 제공 서버
210: 데이터 송수신 모듈, 220: 영상 분석 모듈
230: 컨텐츠 매핑 모듈, 240: 컨텐츠 획득 모듈
300: 광고 관리 서버, 310: 웹 인터페이스 모듈
320: 컨텐츠 저장 DB, 330: 식별자 등록 모듈
340: 광고비 정산 모듈

Claims (14)

  1. 카메라를 작동시켜 촬영된 영상을 영상 인식 모듈로 전달하는 카메라 구동 모듈, 촬영된 영상에 마커가 포함되어 있는지 인식하는 영상 인식 모듈 및, 마커 및 식별자가 포함된 영상을 컨텐츠 제공 서버로 전송하는 데이터 송수신 모듈을 포함하는 무선 단말의 어플리케이션;
    마커 및 식별자가 포함된 영상을 상기 무선 단말의 어플리케이션으로부터 수신하여 영상 분석 모듈로 전달하는 데이터 송수신 모듈, 마커 및 식별자가 포함된 영상을 분석하여 식별자를 추출하는 영상 분석 모듈, 상기 영상 분석 모듈에서 분석된 식별자에 대응하는 컨텐츠의 위치를 컨텐츠 저장 DB에서 찾아 매핑하는 컨텐츠 매핑 모듈 및, 상기 컨텐츠 매핑 모듈이 확인한 위치에 있는 컨텐츠를 가져오는 컨텐츠 획득 모듈을 포함하는 컨텐츠 제공 서버 및;
    광고주가 자신의 식별자 및 컨텐츠를 등록할 수 있게 하는 식별자 등록 모듈, 광고주가 자신의 식별자와 관련하여 등록한 컨텐츠가 저장되는 컨텐츠 저장 DB를 포함하는 광고 관리 서버를 포함하되,
    촬영된 영상에 마커가 포함된 경우, 촬영된 영상의 식별자에 대응하는 컨텐츠가 상기 무선 단말의 어플리케이션으로 전송되는 것을 특징으로 하는 무선 단말을 이용한 컨텐츠 제공 시스템.
  2. 제1항에 있어서, 카메라가 마커를 비추었을 때, 상기 영상 인식 모듈에 의해 상기 무선 단말의 화면에 마커가 현재의 실시간 화면상에 존재하는지 표시해주는 표시자가 제공되는 것을 특징으로 하는 무선 단말을 이용한 컨텐츠 제공 시스템.
  3. 제1항에 있어서, 상기 영상 인식 모듈은 영상 이진화, 영상 레이블링 및, 레이블 맵과 마커 패턴 데이터의 비교를 통해 영상을 인식하는 것을 특징으로 하는 무선 단말을 이용한 컨텐츠 제공 시스템.
  4. 제1항에 있어서, 상기 무선 단말의 어플리케이션이 상기 컨텐츠 제공 서버로부터 수신 받은 컨텐츠를 구동하기 위한 컨텐츠 구동 모듈을 더 포함하는 것을 특징으로 하는 무선 단말을 이용한 컨텐츠 제공 시스템.
  5. 제1항에 있어서, 상기 영상 분석 모듈은 영상을 분석하여 마커를 추출하고, 마커가 추출된 경우 식별자를 추출하는 것을 특징으로 하는 무선 단말을 이용한 컨텐츠 제공 시스템.
  6. 제1항에 있어서, 상기 식별자는 문자, 숫자, 도형 또는 로고인 것을 특징으로 하는 무선 단말을 이용한 컨텐츠 제공 시스템.
  7. 제1항에 있어서, 상기 광고 관리 서버는 광고주가 자신의 컨텐츠를 인터넷을 통해 관리할 수 있도록 하는 웹 인터페이스 모듈을 더 포함하는 것을 특징으로 하는 무선 단말을 이용한 컨텐츠 제공 시스템.
  8. 제1항에 있어서, 상기 광고 관리 서버는 컨텐츠의 제공 빈도수에 따라 광고주와 광고비를 정산하는 광고비 정산 모듈을 더 포함하는 것을 특징으로 하는 무선 단말을 이용한 컨텐츠 제공 시스템.
  9. 카메라 구동 모듈, 영상 인식 모듈, 데이터 송수신 모듈 및, 컨텐츠 구동 모듈을 포함하는 무선 단말의 어플리케이션, 데이터 송수신 모듈, 영상 분석 모듈, 컨텐츠 매핑 모듈 및, 컨텐츠 획득 모듈을 포함하는 컨텐츠 제공 서버 및, 식별자 등록 모듈, 컨텐츠 저장 DB를 포함하는 광고 관리 서버를 포함하는 무선 단말을 이용한 컨텐츠 제공 시스템에서 수행되는 컨텐츠 제공 방법에 있어서,
    (a) 상기 무선 단말의 어플리케이션이 구동되면 상기 카메라 구동 모듈이 카메라를 작동시키고 촬영된 영상을 상기 영상 인식 모듈로 전달하는 단계;
    (b) 상기 영상 인식 모듈이 해당 영상을 인식하여 영상에 마커가 포함되어 있는지 확인하는 단계;
    (c) 영상에 마커가 포함된 것으로 확인되면, 마커 및 식별자가 포함된 영상을 상기 어플리케이션의 데이터 송수신 모듈이 상기 컨텐츠 제공 서버로 전송하는 단계;
    (d) 상기 컨텐츠 제공서버의 데이터 송수신 모듈이 영상을 수신하여 상기 영상 분석 모듈로 전달하는 단계;
    (e) 상기 영상 분석 모듈이 영상을 분석하여 식별자를 추출하는 단계;
    (f) 상기 컨텐츠 매핑 모듈이 추출된 식별자에 대응되는 컨텐츠를 검색하는 단계;
    (g) 상기 컨텐츠 획득 모듈이 상기 컨텐츠 저장 DB로부터 컨텐츠를 획득하고, 상기 컨텐츠 제공서버의 데이터 송수신 모듈이 상기 무선 단말로 컨텐츠를 전송하는 단계 및;
    (h) 상기 무선 단말의 상기 컨텐츠 구동 모듈이 컨텐츠를 사용자에게 디스플레이하는 단계를 포함하는 것을 특징으로 하는 컨텐츠 제공 방법.
  10. 제9항에 있어서, 상기 (e) 단계 전에, 상기 영상 분석 모듈이 영상을 분석하여 영상에 마커가 포함된 경우에만 (e) 단계로 진행하는 것을 특징으로 하는 컨텐츠 제공 방법.
  11. 제10항에 있어서, 마커가 포함되어 있지 않은 경우 상기 무선 단말의 어플리케이션으로 오류 메시지를 통보하는 것을 특징으로 하는 컨텐츠 제공 방법.
  12. 제9항에 있어서, 상기 (b) 단계는, 영상 이진화 단계, 영상 레이블링 단계 및, 레이블 맵과 마커 패턴 데이터의 비교 단계를 포함하는 것을 특징으로 하는 컨텐츠 제공 방법.
  13. 제9항에 있어서, 상기 광고 관리 서버가 광고비 정산 모듈을 더 포함하고, 상기 (h) 단계 이후에, 상기 광고비 정산 모듈이 컨텐츠의 제공 빈도수에 따라 광고주와 광고비를 정산하는 단계를 더 포함하는 것을 특징으로 하는 컨텐츠 제공 방법.
  14. 제9항에 있어서, 상기 식별자는 문자, 숫자, 도형 또는 로고인 것을 특징으로 하는 컨텐츠 제공 방법.
KR1020100045913A 2010-05-17 2010-05-17 무선 단말을 이용한 컨텐츠 제공 시스템 및 방법 KR101136944B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100045913A KR101136944B1 (ko) 2010-05-17 2010-05-17 무선 단말을 이용한 컨텐츠 제공 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100045913A KR101136944B1 (ko) 2010-05-17 2010-05-17 무선 단말을 이용한 컨텐츠 제공 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20110126310A KR20110126310A (ko) 2011-11-23
KR101136944B1 true KR101136944B1 (ko) 2012-04-19

Family

ID=45395457

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100045913A KR101136944B1 (ko) 2010-05-17 2010-05-17 무선 단말을 이용한 컨텐츠 제공 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR101136944B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101893223B1 (ko) * 2012-03-26 2018-08-29 주식회사 소프트펍 오답노트 제공 방법
KR101276313B1 (ko) * 2013-02-27 2013-06-18 주식회사 케이쓰리아이 영상 인식을 위한 모바일단말기와 서버간의 통신 프로토콜 처리시스템

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040082789A (ko) * 2003-03-20 2004-09-30 주식회사 케이티프리텔 코드 패턴을 이용한 지리 정보 제공장치 및 그 방법
JP2006301664A (ja) 2002-05-24 2006-11-02 Olympus Corp 視野一致型情報呈示システム
JP2008250474A (ja) 2007-03-29 2008-10-16 Hitachi Ltd カメラ付き情報検索装置
WO2009152169A2 (en) 2008-06-10 2009-12-17 Google Inc. Machine-readable representation of geographic information

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006301664A (ja) 2002-05-24 2006-11-02 Olympus Corp 視野一致型情報呈示システム
KR20040082789A (ko) * 2003-03-20 2004-09-30 주식회사 케이티프리텔 코드 패턴을 이용한 지리 정보 제공장치 및 그 방법
JP2008250474A (ja) 2007-03-29 2008-10-16 Hitachi Ltd カメラ付き情報検索装置
WO2009152169A2 (en) 2008-06-10 2009-12-17 Google Inc. Machine-readable representation of geographic information

Also Published As

Publication number Publication date
KR20110126310A (ko) 2011-11-23

Similar Documents

Publication Publication Date Title
KR101523811B1 (ko) 모바일 디바이스들을 이용한 이미지 인식을 위한 시스템 및 방법
US9754183B2 (en) System and method for providing additional information using image matching
US9576195B2 (en) Integrated image searching system and service method thereof
CN103635954B (zh) 基于地理和可视信息增强可视数据流的系统
JP4774346B2 (ja) 画像処理方法、画像処理装置およびプログラム
US20180188033A1 (en) Navigation method and device
CN102214222B (zh) 通过手机摄像获取景物资讯的预分类及交互系统和方法
US20150015609A1 (en) Method of augmented reality communication and information
CN109040960A (zh) 一种实现位置服务的方法和装置
TW201018298A (en) Data access based on content of image recorded by a mobile device
KR101738443B1 (ko) 증강 현실 콘텐츠를 스크리닝하는 방법, 장치, 및 시스템
TWI470549B (zh) A method of using an image recognition guide to install an application, and an electronic device
CN102880853A (zh) 基于网络的中药识别系统及方法
KR20160048006A (ko) 버스 정보 조회, 피드백 방법, 모바일 단말 및 서버
CN103425993A (zh) 图像识别方法和系统
CN109522503B (zh) 基于ar与lbs技术的旅游景点虚拟留言板系统
CN110533440A (zh) 一种基于视频摄像头的互联网广告信息投放应用方法
CN112218027A (zh) 信息交互方法、第一终端设备、服务器及第二终端设备
EP3007098A1 (en) Method, device and system for realizing visual identification
KR101136944B1 (ko) 무선 단말을 이용한 컨텐츠 제공 시스템 및 방법
US20190026617A1 (en) Method of identifying, locating, tracking, acquiring and selling tangible and intangible objects utilizing predictive transpose morphology
KR20120022483A (ko) 증강현실을 이용한 광고 제공 방법 및 시스템
US20130339271A1 (en) Evaluation system, evaluation method, and storage medium
KR20140136088A (ko) 증강현실을 이용한 컨텐츠 제공 방법, 이를 위한 시스템 및 장치
CN111160946A (zh) 基于视频技术的广告精准投放隐私保护方法和系统

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee