KR102668559B1 - 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 방법 및 장치 - Google Patents

콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 방법 및 장치 Download PDF

Info

Publication number
KR102668559B1
KR102668559B1 KR1020160112698A KR20160112698A KR102668559B1 KR 102668559 B1 KR102668559 B1 KR 102668559B1 KR 1020160112698 A KR1020160112698 A KR 1020160112698A KR 20160112698 A KR20160112698 A KR 20160112698A KR 102668559 B1 KR102668559 B1 KR 102668559B1
Authority
KR
South Korea
Prior art keywords
content
information
identification information
sound wave
mobile terminal
Prior art date
Application number
KR1020160112698A
Other languages
English (en)
Other versions
KR20180025694A (ko
Inventor
김태현
Original Assignee
주식회사 모티브인텔리전스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 모티브인텔리전스 filed Critical 주식회사 모티브인텔리전스
Priority to KR1020160112698A priority Critical patent/KR102668559B1/ko
Publication of KR20180025694A publication Critical patent/KR20180025694A/ko
Application granted granted Critical
Publication of KR102668559B1 publication Critical patent/KR102668559B1/ko

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/683—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/029—Location-based management or tracking services

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Strategic Management (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Library & Information Science (AREA)
  • Game Theory and Decision Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명의 일 실시예에 따르면, 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 서버 장치에 의한 콘텐츠 추정 방법으로서, 서버 장치가 모바일 단말기로부터 콘텐츠 식별정보 및 부가정보를 수신하는 단계; 및 수신한 상기 식별정보 및 부가정보에 기초해서 적어도 하나의 후보 콘텐츠를 선택하는 단계;를 포함하고, 상기 식별정보는 콘텐츠의 음파신호에 포함되고 콘텐츠를 다른 콘텐츠와 구별하는 정보로서, 상기 모바일 단말기가 음파신호를 수신하여 이 음파신호에서 추출한 정보이고, 상기 부가정보는 상기 모바일 단말기가 상기 음파신호를 수신할 때의 모바일 단말기의 위치정보 또는 시간정보 중 적어도 하나를 포함하는 것을 특징으로 하는 콘텐츠 추정 방법이 제공된다.

Description

콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 방법 및 장치 {Method and apparatus for presuming contents based on sound wave signal included in contents}
본 발명은 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 방법 및 장치에 관한 것으로, 보다 상세하게는, 사용자의 모바일 단말기가 콘텐츠의 음파신호를 정확히 수신하지 못한 경우에도 해당 콘텐츠를 추정하고 이 콘텐츠에 관련된 정보들을 사용자에게 제공할 수 있는 콘텐츠 추정 방법 및 장치에 관한 것이다.
최근 스마트 기기가 보편화되면서 스마트 기기에 내장된 오디오 인터페이스, 즉 스피커와 마이크를 활용하는 음파 통신이 연구되고 있다. 예를 들어 대한민국 특허출원 제2013-0043862호(2013년 4월 19일 출원)에 개시한 바와 같이 텔레비전(TV) 방송에 특정 정보를 내포한 비가청 음파를 삽입하여 시청자에게 방송하면 시청자가 소지한 스마트폰이 비가청 음파를 수신하고 이에 기초하여 시청자에게 맞춤형 광고 등의 콘텐츠를 제공하는 기술 등이 연구되고 있다.
그런데 이러한 음파통신 기술을 이용한 기존의 콘테츠 제공 방법에서는 스피커의 노후화나 주위환경의 노이즈 등으로 인해 사용자가 소지한 모바일 단말기가 비가청 음파를 제대로 수신하지 못하는 경우가 종종 있고, 이 경우 비가청 음파에서 정보를 정확히 추출할 수 없어 사용자에게 콘텐츠를 제공할 수 없는 문제가 있었다.
많은 모바일 단말기 사용자들은 여전히 비가청 음파를 이용한 콘텐츠 제공 방식에 흥미를 느끼고 있지만, 상기와 같은 기술적 문제로 인해 콘텐츠를 적시에 제공받지 못하면 비가청 음파 기술의 신뢰성에 의문을 갖게 되고 흥미를 잃어버리게 되어 더 이상 이러한 방식의 콘텐츠 제공 서비스를 이용하지 않게 될 수도 있다.
본 발명의 일 실시예에 따르면, 모바일 단말기가 콘텐츠에 포함된 비가청 음파를 정확히 수신하지 못하는 경우에도 기수신한 정보에 기초하여 해당 콘텐츠가 무엇인지 추정하고 이 콘텐츠에 연관된 정보들을 사용자에게 제공할 수 있는 콘텐츠 추정 방법 및 장치를 제공한다.
본 발명의 일 실시예에 따르면, 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 서버 장치에 의한 콘텐츠 추정 방법으로서, 서버 장치가 모바일 단말기로부터 콘텐츠 식별정보 및 부가정보를 수신하는 단계; 및 수신한 상기 식별정보 및 부가정보에 기초해서 적어도 하나의 후보 콘텐츠를 선택하는 단계;를 포함하고, 상기 식별정보는 콘텐츠의 음파신호에 포함되고 콘텐츠를 다른 콘텐츠와 구별하는 정보로서, 상기 모바일 단말기가 음파신호를 수신하여 이 음파신호에서 추출한 정보이고, 상기 부가정보는 상기 모바일 단말기가 상기 음파신호를 수신할 때의 모바일 단말기의 위치정보 또는 시간정보 중 적어도 하나를 포함하는 것을 특징으로 하는 콘텐츠 추정 방법이 제공된다.
본 발명의 일 실시예에 따르면, 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 서버 장치로서, 모바일 단말기로부터 수신한 콘텐츠 식별정보 및 부가정보에 기초하여 적어도 하나의 후보 콘텐츠를 선택하도록 구성된 후보 콘텐츠 추출부를 포함하고, 이 때 상기 식별정보는 콘텐츠의 음파신호에 포함되고 콘텐츠를 다른 콘텐츠와 구별하는 정보로서, 상기 모바일 단말기가 음파신호를 수신하여 이 음파신호에서 추출한 정보이고, 상기 부가정보는 상기 모바일 단말기가 상기 음파신호를 수신할 때의 모바일 단말기의 위치정보 또는 시간정보 중 적어도 하나를 포함하는 것을 특징으로 하는 서버 장치가 제공된다.
본 발명의 일 실시예에 따르면, 모바일 단말기가 콘텐츠에 포함된 비가청 음파를 정확히 수신하지 못하는 경우에도 기수신한 정보에 기초하여 해당 콘텐츠가 무엇인지 추정하고 이 콘텐츠에 연관된 정보들을 사용자에게 제공할 수 있으므로 사용자가 본 발명에 따른 비가청 음파를 이용한 서비스에 지속적으로 흥미를 느끼게 되고 향후에도 계속하여 이 서비스를 이용하도록 유도할 수 있는 장점이 있다.
도1은 본 발명의 일 실시예에 따른 콘텐츠 추정 방법 및 장치를 설명하기 위한 도면,
도2는 일 실시예에 따른 서버 장치의 예시적인 블록도,
도3은 일 실시예에 따른 콘텐츠 추정 방법을 설명하기 위한 흐름도,
도4는 일 실시예에 따른 모바일 단말기의 동작을 설명하기 위한 흐름도,
도5는 제1 실시예에 따른 식별정보와 부가정보를 이용한 후보 콘텐츠 선택 방법을 설명하기 위한 흐름도,
도6은 제2 실시예에 따른 식별정보와 부가정보를 이용한 후보 콘텐츠 선택 방법을 설명하기 위한 흐름도,
도7은 일 실시예에 따른 부가정보를 이용한 후보 콘텐츠 선택 방법을 설명하기 위한 흐름도,
도8은 제3 실시예에 따른 식별정보와 부가정보를 이용한 후보 콘텐츠 선택 방법을 설명하기 위한 흐름도,
도9는 제4 실시예에 따른 식별정보와 부가정보를 이용한 후보 콘텐츠 선택 방법을 설명하기 위한 흐름도,
도10은 극장 또는 매장에서 콘텐츠를 재생할 때 본 발명의 일 실시예에 따라 콘텐츠를 추정하고 사용자에게 알림 정보를 디스플레이하는 방법을 설명하기 위한 도면이다.
이상의 본 발명의 목적들, 다른 목적들, 특징들 및 이점들은 첨부된 도면과 관련된 이하의 바람직한 실시예들을 통해서 쉽게 이해될 것이다. 그러나 본 발명은 여기서 설명되는 실시예들에 한정되지 않고 다른 형태로 구체화될 수도 있다. 오히려, 여기서 소개되는 실시예들은 개시된 내용이 철저하고 완전해질 수 있도록 그리고 당업자에게 본 발명의 사상이 충분히 전달될 수 있도록 하기 위해 제공되는 것이다. 본 명세서에서, 어떤 구성요소가 다른 구성요소 상에 있다고 언급되는 경우에 그것은 다른 구성요소 상에 직접 형성될 수 있거나 또는 그들 사이에 제 3의 구성요소가 게재될 수도 있다는 것을 의미한다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 '포함한다(comprises)' 및/또는 '포함하는(comprising)'은 언급된 구성요소는 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다.
또한 본 명세서에서 발명의 구성요소를 지칭하기 위해 사용된 "...부", "…모듈", "...보드", "…블록" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미할 수 있고 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
이하, 도면을 참조하여 본 발명을 상세히 설명하도록 한다. 아래의 특정 실시예들을 기술하는데 있어서, 여러 가지의 특정적인 내용들은 발명을 더 구체적으로 설명하고 이해를 돕기 위해 작성되었다. 하지만 본 발명을 이해할 수 있을 정도로 이 분야의 지식을 갖고 있는 독자는 이러한 여러 가지의 특정적인 내용들이 없어도 사용될 수 있다는 것을 인지할 수 있다. 어떤 경우에는, 발명을 기술하는 데 있어서 흔히 알려졌으면서 발명과 크게 관련 없는 부분들은 본 발명을 설명하는 데 있어 혼돈이 오는 것을 막기 위해 기술하지 않음을 미리 언급해 둔다.
도1은 본 발명의 일 실시예에 따른 콘텐츠 추정 방법 및 장치를 설명하기 위한 도면이고 도2는 일 실시예에 따른 서버 장치의 예시적인 블록도이다.
도면을 참조하면, 일 실시예에 따른 콘텐츠 추정 장치는 서버 장치(30)일 수 있다. 서버 장치(30)는 네트워크를 통해 다수의 모바일 단말기(20)와 통신할 수 있다. 모바일 단말기(20)는 콘텐츠 재생 수단(10)에서 재생되는 콘텐츠의 오디오 신호를 수신할 수 있다.
일 실시예에서 콘텐츠 재생 수단(10)은 임의의 비디오/오디오 콘텐츠를 사용자가 보거나 들을 수 있도록 재생하는 수단으로서, 구체적 실시형태에 따라 다양하게 구현될 수 있다. 예를 들어 사용자가 영화관에서 영화를 보는 경우, 콘텐츠 재생 수단(10)은 영화관의 스크린 및 스피커일 수 있고, 이 때의 '콘텐츠'는 영화관에서 상영하는 특정 광고나 영화예고편이 될 수 있다.
다른 예로서 본 발명이 각종 제품을 판매하는 매장이나 마트에 적용되는 경우 콘텐츠 재생 수단(10)은 디스플레이 및 스피커일 수 있고, 이 때의 콘텐츠는 특정 제품의 오디오 광고가 될 수 있다. 또 다른 예로서 본 발명이 TV에 적용되는 경우 콘텐츠 재생 수단(10)은 TV 디스플레이 및 스피커가 될 수 있고 이 때의 콘텐츠는 특정 TV 프로그램이나 TV 광고가 될 수 있다.
이와 같이 본 명세서에서 "콘텐츠"는 영화, TV 프로그램, 및 각종 광고를 의미할 수 있으나 이에 제한되지 않으며, 예를 들어 음악이나 동영상 등의 각종 멀티미디어 데이터를 포함할 수 있다.
바람직한 일 실시예에서 콘텐츠 재생 수단(10)에서 재생되는 콘텐츠는 음파신호(오디오 신호)를 포함하고 있으며, 이 음파신호에 각 콘텐츠를 다른 콘텐츠와 구별하는 콘텐츠 식별정보(이하 간단히 "식별정보"라고도 함)를 포함한다. 식별정보는 각 콘텐츠마다 고유하게 할당되어 다른 콘텐츠와 구별하는 정보이고, 예를 들어 소정 길이의 디지털 비트로 구성될 수 있다.
일 실시예에서 콘텐츠 식별정보가 콘텐츠의 비가청 대역의 음파에 포함될 수 있다. 비가청 대역은 사람의 청력으로 들을 수 없는 주파수 대역을 의미하며, 예컨대 18 내지 24 KHz 대역의 주파수를 포함할 수 있다.
본 명세서에서 사용되는 용어인 "음파"는 물체의 진동이 매질(공기)을 통해 전파되어 사람이 청각으로 들을 수 있는 것으로, 특별히 구분의 필요성이 없는 한 본 명세서에서 "음향", "오디오", 또는 "사운드"와 동일한 의미로 사용하기로 한다.
일 실시예에서, 비가청 음파 발생기(도시 생략)에 의해 비가청 대역의 음파가 생성되고 이 비가청대역 음파에 콘텐츠 식별정보와 같은 특정 정보가 주입될 수 있다. 예를 들어 디지털 데이터인 식별정보를 진폭변조(ASK), 주파수 변조(FSK), 시변화 변조(Chirp Modulation), 또는 위상변조(PSK)와 같은 다양한 변조 방식 중 하나에 의해 변조하고, 이를 비가청 음파에 실음으로써 식별정보가 포함된 비가청 음파를 생성할 수 있다.
콘텐츠 식별정보와 같은 임의의 특정 정보를 비가청 음파에 삽입하고 이 비가청 음파를 콘텐츠에 포함시키는 기술은 공지기술을 이용하여 구현될 수 있으며, 예를 들어 한국 특허출원 제10-1448823호 (시변 주파수 기반의 심볼을 이용한 음파 송수신 방법 및 이를 이용한 장치)에 개시된 기술 혹은 한국 특허출원 제2014-0169557호 (비가청 음파가 포함된 방송영상 파일 또는 스트리밍 패킷의 생성 방법 및 이 방법을 이용하는 텔레비전 방송 시스템)에 개시된 기술을 이용할 수 있다.
모바일 단말기(20)는 예를 들면 셀룰라 폰, 스마트폰, 태블릿 PC, 노트북 등과 같은 통신 가능한 컴퓨팅 장치일 수 있다.
모바일 단말기(20)는 음파신호를 수신하는 장치(예컨대, 마이크)를 포함한다. 모바일 단말기(20)는 콘텐츠 재생 수단(10)으로부터 출력되는 음파 신호를 인식하고, 인식한 음파 신호에서 콘텐츠 식별정보를 추출할 수 있다.
음파신호로부터 특정 정보를 추출하는 기술은 공지되어 있으며, 예를 들어 한국 특허출원 제2013-0107604호 (시변 주파수 기반의 심볼을 이용한 음파 송수신 방법 및 이를 이용한 장치) 또는 한국 특허출원 제2015-0118809호 (훈련열 동기화 위치 추정방법 및 이를 이용한 수신기) 등에 개시된 기술을 이용할 수 있다.
모바일 단말기(20)는 콘텐츠 재생 수단(10)에서 출력되는 음파신호를 수신하고 이로부터 콘텐츠 식별정보를 추출하면, 이 추출된 식별정보를 서버 장치(30)로 전송할 수 있다. 일 실시예에서 모바일 단말기(20)는 추출된 식별정보와 함께 부가정보를 서버 장치(30)로 전송한다.
이 때 본 명세서에서 "부가정보"는 모바일 단말기(20)가 추출한 콘텐츠 식별정보에 대응하는 콘텐츠를 정확히 찾기(identify) 위해 참조하는 정보로서, 구체적 실시 형태에 따라 하나 이상의 다양한 정보를 의미할 수 있다.
도시한 일 실시예에서 부가정보는, 모바일 단말기(20)가 콘텐츠의 음파신호를 수신할 때의 모바일 단말기(20)의 위치정보 또는 시간정보 중 적어도 하나를 포함한다.
여기서 위치정보는 모바일 단말기(20)가 콘텐츠의 음파신호를 수신할 때의 위치에 관한 정보로서, 예를 들어 GPS, 무선통신 중계기, 및 이동통신 중계기 중 적어도 하나 이상을 이용하여 획득한 위치 정보일 수 있다. 또한 시간정보는 모바일 단말기(20)가 콘텐츠의 음파신호를 수신할 때의 위치에 관한 시간 정보로서, 예를 들어 음파신호에서 콘텐츠 식별정보를 추출하면, 이 추출 대상이 된 음파신호를 수신했던 시간을 의미할 수 있다.
대안적 실시예에서, 부가정보로서 콘텐츠의 핑거프린트(fingerprint)를 더 포함할 수 있다. 예를 들어 콘텐츠가 가청대역의 오디오 신호를 포함하고 있을 때, 이 가청대역에 해당 콘텐츠를 다른 콘텐츠와 식별할 수 있도록 하는 오디오 핑거프린트가 심겨져 있을 수 있으며, 이러한 경우 본 발명의 일 실시예에서 오디오 핑거프린트가 부가정보에 더 포함될 수 있다. 본 명세서에서 '오디오 핑거프린트'를 간단히 '핑거프린트'라고 칭하기도 한다.
부가정보로서 오디오 핑거프린트를 포함하는 경우, 모바일 단말기(20)는 콘텐츠의 음파신호를 수신하면, 이 음파신호의 비가청 대역에서 콘텐츠 식별정보를 추출하고 가청대역에서 오디오 핑거프린트를 추출하도록 동작할 수 있다. 이 때 동일 시간 동안 수신한 음파신호에 대해 콘텐츠 식별정보와 핑거프린트를 각각 추출할 수도 있지만, 서로 상이한 시간에 제1 음파신호와 제2 음파신호를 수신하고 제1 음파신호로부터 콘텐츠 식별정보를 추출하고 제2 음파신호로부터 핑거프린트를 추출할 수도 있다.
오디오 핑거프린트를 음파신호에 주입하거나 음파신호로부터 오디오 핑거프린트를 추출하는 기술은 공지된 기술이며, 예를 들어 한국특허등록번호 10-1310943호 (2013. 9. 11) (방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템 및 방법), 한국특허등록번호 10-1313293호 (2013. 9. 24) (방송콘텐츠의 부가정보 제공 시스템 및 그 방법) 등에 개시된 기술을 이용할 수 있다.
모바일 단말기(20)는 네트워크를 통해 콘텐츠 식별정보와 부가정보를 서버 장치(30)로 전송한다. 여기서 네트워크는 예컨대 인터넷이 될 수 있지만 이에 제한되지 않으며, 임의의 무선 및/또는 유선 통신망 또는 이들의 조합이 될 수 있다.
서버 장치(30)는 모바일 단말기(20)로부터 콘텐츠 식별정보와 부가정보를 수신한 뒤, 이 정보들에 기초하여 상기 콘텐츠 식별정보에 대응하는 콘텐츠라고 추정되는 적어도 하나의 콘텐츠들(이하 "후보 콘텐츠"라고 함)을 선택하고, 후보 콘텐츠에 관한 알림 정보를 모바일 단말기(20)로 전송한다.
여기서 "알림 정보"는 후보 콘텐츠와 관련하여 모바일 단말기(20)의 사용자에게 공지할 임의의 정보를 의미한다. 예를 들어 후보 콘텐츠가 특정 제품의 광고인 경우 알림 정보는 예컨대 이 제품의 할인행사에 관한 정보일 수 있다.
이제 도2를 참조하여 상술한 기능을 수행할 수 있는 예시적인 서버 장치 구성에 대해 설명하기로 한다.
도2를 참조하면, 일 실시예에 따른 서버 장치(30)는 후보 콘텐츠 추출부(310), 해밍 거리(hamming distance) 산출부(320), 콘텐츠 핑거프린트 데이터베이스(DB)(330), 식별정보 발신 스케줄 DB(340), 및 알림 정보 DB(350)를 포함할 수 있다.
후보 콘텐츠 추출부(310)는 모바일 단말기(20)로부터 수신한 콘텐츠 식별정보 및 부가정보에 기초하여 적어도 하나의 후보 콘텐츠를 선택하도록 구성된다. 후보 콘텐츠 추출부(310)는 적어도 하나의 후보 콘텐츠를 선택하는 동작을 수행하기 위해 해밍거리 산출부(320), 콘텐츠 핑거프린트 DB(330), 및 식별정보 발신 스케줄 DB(340) 중 적어도 하나와 통신하며 필요한 데이터를 주고받을 수 있다.
해밍거리 산출부(320)는 모바일 단말기(20)로부터 수신한 콘텐츠 식별정보와 식별정보 발신 스케줄 DB(340)에 저장된 콘텐츠 식별정보들 간의 각각의 해밍거리를 계산하는 기능을 수행할 수 있다. 해밍거리는 두 개의 데이터간의 유사성을 수치화하는 방법 중 하나이며, DB(340)에 저장된 각각의 콘텐츠 식별정보에 대해 모바일 단말기(20)로부터 수신한 콘텐츠 식별정보와의 각각의 해밍거리를 산출함으로써, 수신한 콘텐츠와 동일한 또는 가장 유사한 식별정보를 DB(340)에서 추출할 수 있다.
이 때 후보 콘텐츠 추출부(310)는 후보 콘텐츠를 선정할 때, 산출된 해밍거리 값이 작은 소정 개수의 식별정보를 후보 콘텐츠로서 선정할 수 있다. 또한 대안적 실시예에서 콘텐츠 추출부(310)는 소정 임계값 이하의 해밍거리 값을 갖는 식별정보를 후보 콘텐츠로서 선정할 수도 있다.
콘테츠 핑거프린트 DB(330)는 콘텐츠에 포함된 핑거프린트를 저장한다. 콘텐츠 핑거프린트 DB(330)는 각각의 콘텐츠에 대해 각 콘텐츠를 특정할 수 있도록 각 콘텐츠에 적어도 하나씩 포함되어 있는 핑거프린트 데이터를 포함할 수 있다.
콘텐츠 식별정보 발신 스케줄 DB(340)는 콘텐츠 재생 수단(10)을 통해 콘테츠 식별정보가 발신(재생)되는 스케줄 정보를 저장한다. 도시한 일 실시예에서 식별정보 발신 스케줄 DB(340)는 콘텐츠 식별정보 목록, 및 이에 매칭된 식별정보 발신 시간 목록과 식별정보 발신 위치 목록을 포함할 수 있다.
콘텐츠 식별정보 목록은 각 콘텐츠의 콘텐츠 식별정보의 리스트이다. 일 실시예에서 콘텐츠 식별정보는 소정 비트수의 일련의 비트열로 구성된다. 예컨대 도시한 실시예에서 본 발명을 간단히 설명하기 위해 식별정보가 4비트인 것으로 예시하였지만, 구체적 실시 형태에 따라 예컨대 8비트, 16비트 등으로 구성될 수도 있을 것이다.
식별정보 발신 시간 목록은, 각 콘텐츠 식별정보에 대해, 해당 콘텐츠 식별정보가 모바일 단말기(20)의 사용자에게 발신될 때의 발신 시간에 관한 정보의 리스트이다. 예를 들어 발신 시간 정보는 콘텐츠 식별정보를 포함하는 콘텐츠가 콘텐츠 재생 수단(10)을 통해 재생될 때의 재생 시간(예컨대 재생 시작 시간 및 재생 종료 시간 등)을 포함할 수 있다. 대안적으로, 콘텐츠 재생 수단(10)을 통해 콘텐츠가 재생될 때 비가청대역의 (식별정보가 주입된) 음파신호가 스피커를 통해 발신되는 시간 정보를 포함할 수도 있다.
식별정보 발신 위치 목록은, 각 콘텐츠 식별정보에 대해, 해당 콘텐츠 식별정보가 모바일 단말기(20)의 사용자에게 발신될 때의 발신 위치에 관한 정보의 리스트이다. 예를 들어 발신 위치 정보는 콘텐츠 식별정보를 포함하는 콘텐츠가 콘텐츠 재생 수단(10)을 통해 재생될 때의 재생 위치 정보를 포함할 수 있다. 일 실시예에서 이 위치정보는 GPS, 무선통신 중계기, 및 이동통신 중계기 중 적어도 하나 이상을 이용하여 획득한 위치 정보일 수 있고, 콘텐츠 재생 수단(10)이 설치된 영화관 또는 매장의 위치를 식별할 수 있는 정보를 포함할 수도 있다.
알림 정보 DB(350)는 각 콘텐츠에 대응하는 알림 정보를 저장한다. 예를 들어 알림 정보 DB(350)는 각 콘텐츠의 콘텐츠 식별정보 및 각각의 식별정보에 매칭되는 알림 정보를 저장할 수 있다.
후보 콘텐츠 추출부(310)와 해밍거리 산출부(320)는 서버 장치(30) 내에서 소프트웨어 또는 소프트웨어와 하드웨어의 조합으로 구현될 수 있다. 또한 콘텐츠 핑거프린트 DB(330), 식별정보 발신 스케줄 DB(340), 및 알림 정보 DB(350)의 각각은 서버 장치(30) 내부 또는 외부에 배치될 수 있고, 서버 장치(30) 외부에 배치되는 경우 예컨대 네트워크를 통해 서버 장치(30)와 통신할 수 있다.
상술한 서버 장치(30)에 의해 후보 콘텐츠를 선택하는 방법으로서 예를 들어 아래와 같이 몇가지 구체적 실시예를 생각할 수 있다.
후보 콘테츠를 추출하는 제1 실시예로서, 후보 콘텐츠 추출부(310)는, 모바일 단말기(20)로부터 수신한 식별정보에 매칭되는 콘텐츠 식별정보가 식별정보 발신 스케줄 DB(340)의 목록에 존재하는지 판단하고, 매칭되는 콘텐츠 식별정보가 존재하는 경우 이 매칭된 콘텐츠 식별정보의 콘텐츠를 후보 콘텐츠로 선택할 수 있다.
이 때 만일 매칭되는 콘텐츠 식별정보가 존재하지 않는 경우, 콘텐츠 식별정보 목록에서 적어도 하나의 예비후보 콘텐츠를 선정하고, 모바일 단말기(20)로부터 수신한 부가정보와 식별정보 발신 스케줄 DB(340)의 발신 시간 정보 및/또는 발신 위치 정보의 비교에 기초하여, 예비후보 콘텐츠 중에서 하나 이상의 후보 콘텐츠를 선택하도록 구성될 수 있다. 이러한 제1 실시예에 대해서는 도5를 참조하여 후술하기로 한다.
후보 콘테츠를 추출하는 제2 실시예로서, 후보 콘텐츠 추출부(310)가, 수신한 식별정보에 매칭되는 콘텐츠 식별정보가 콘텐츠 식별정보 목록에 존재하는지 판단하고, 매칭되는 콘텐츠 식별정보가 존재하는 경우 이 매칭된 콘텐츠 식별정보의 콘텐츠를 후보 콘텐츠로 선택하도록 구성되고, 이 때 만일 매칭되는 식별정보가 존재하지 않는 경우, 부가정보와 콘텐츠 식별정보 발신 스케줄 데이터베이스의 발신 시간 정보 및/또는 발신 위치 정보의 비교에 기초하여, 하나 이상의 후보 콘텐츠를 선택하도록 구성될 수 있다. 제2 실시예에 대해서는 도6을 참조하여 후술하기로 한다.
후보 콘테츠를 추출하는 제3 실시예로서, 후보 콘텐츠 추출부(310)가, 수신한 상기 식별정보에 매칭되는 콘텐츠 식별정보가 콘텐츠 식별정보 목록에 존재하는지 판단하고, 매칭되는 콘텐츠 식별정보가 존재하는 경우 이 매칭된 콘텐츠 식별정보에 대해 수신한 부가정보 중 적어도 일부 부가정보를 콘텐츠 식별정보 발신 스케줄 DB(340)의 발신 시간 정보 및 발신 위치 정보와 비교하고, 비교된 모든 부가정보가 발신 시간 정보 및 발신 위치 정보와 매칭되는 경우 매칭된 콘텐츠 식별정보의 콘텐츠를 후보 콘텐츠로 선택할 수 있다.
이 때 수신한 식별정보에 매칭되는 콘텐츠 식별정보가 존재하지 않는 경우, 예비후보 콘텐츠를 선정한 후 부가정보를 이용하여 최종 후보 콘텐츠를 추출할 수도 있고, 예비후보 콘텐츠 선정 없이 부가정보를 이용하여 곧바로 후보 콘텐츠를 추출할 수도 있다. 이에 대해서는 각각 도7과 도8을 각각 참조하여 후술하기로 한다.
도3은 일 실시예에 따라 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 방법을 설명하기 위한 흐름도이다.
단계(S10)에서, 모바일 단말기(20)가 콘텐츠 재생 수단(10)에서 재생되는 콘텐츠 내의 비가청대역의 음파신호를 수신하고 이로부터 식별정보를 획득한다. 모바일 단말기(20)는 획득한 식별정보를 부가정보와 함께 서버 장치(30)로 전송한다.
콘텐츠 식별정보와 부가정보를 수신한 서버 장치(30)는, 식별정보 및 부가정보에 기초해서 적어도 하나의 후보 콘텐츠를 선택하고(단계 S20), 선택된 후보 콘텐츠에 관한 알림 정보를 모바일 단말기(20)로 전송한다(단계 S30).
알림 정보를 수신한 모바일 단말기(20)는 알림 정보를 디스플레이하여 사용자에게 보여준다(단계 S40). 일 실시예에서, 복수개의 후보 콘텐츠에 대응하는 복수개의 알림 정보를 표시해야 할 경우, 후보 콘텐츠의 리스트나 그에 대응하는 알림 정보의 리스트만 디스플레이 할 수도 있다.
사용자가 디스플레이되는 후보 콘텐츠 중에서 현재 보거나 듣고 있는 콘텐츠를 선택하면(단계 S50), 모바일 단말기(20)는 이 선택된 콘텐츠에 관한 추가 정보를 서버 장치(30)에 요청할 수 있다. 이에 따라 서버 장치(30)는 요청된 추가 정보를 모바일 단말기(20)로 전송하고(단계 S70) 모바일 단말기(20)는 이 추가 정보를 디스플레이한다(단계 S80).
이 때 "추가 정보"는 예를 들어 알림 정보에 관한 보다 상세한 정보를 의미할 수 있다. 예를 들어 단계(S30)에서 모바일 단말기(20)로 전송된 알림 정보는 예컨대 특정 제품에 대한 할인행사가 있다는 간단한 정보만 포함하고, 단계(S70)에서 전송되는 추가 정보는 이 할인행사의 대상, 시기, 장소 등 구체적 정보를 포함할 수 있다.
대안적 실시예에서, 알림 정보 및 이에 대한 추가 정보가 단계(S30)에서 모두 모바일 단말기(20)로 전송될 수도 있고, 따라서 단계(S60,S70)의 절차가 생략될 수도 있다.
도4는 일 실시예에 따른 모바일 단말기의 동작을 설명하기 위한 흐름도로서, 도3의 단계(S10), 즉 모바일 단말기(20)에서 수행하는 단계를 보다 구체적으로 예시하여 나타내었다.
도면을 참조하면, 단계(S110)에서 모바일 단말기(20)가 사용자로부터 비가청음파 수신에 관한 이벤트를 수신한다. 즉 음파신호의 수신을 개시할 것을 명령하는 사용자 명령을 수신할 수 있다.
이러한 사용자 명령은 구체적 실시 형태에 따라 다양하게 구현될 수 있다. 예를 들어 음파수신 및 식별정보 추출을 위한 애플리케이션 프로그램이 모바일 단말기(20)에 설치되어 있다고 전제하면, 단계(S110)는 이 애플리케이션을 실행하는 것을 의미할 수 있고, 대안적 실시예에서, 사용자가 이 애플리케이션을 실행한 후 음파신호 수신을 명령하는 사용자 입력을 수행하는 것을 의미할 수도 있다. 또 다른 예로서, 예컨대 이 애플리케이션을 실행하는 상태에서 사용자가 특정 동작(예컨대 모바일 단말기(20)를 소정 시간 간격 동안 흔드는 동작)을 수행하면 애플리케이션이 이 동작을 음파신호 수신 명령으로 인식할 수도 있다.
단계(S110)에서 음파신호 수신 개시 명령을 수신하면, 단계(S120)에서, 모바일 단말기(20)가 음파수신을 개시한다. 즉 현재 재생되는 콘텐츠의 비가청 음파대역의 음파신호를 수신한다. 이 때 예컨대 오디오 핑거프린트가 부가정보로서 포함되어 있는 경우, 모바일 단말기(20)는 콘텐츠의 가청대역의 음파신호도 함께 수신할 수도 있다.
한편 구체적 실시예에 따라 단계S110)와 단계S120)는 서로 순서가 바뀌거나 둘 중 어느 한 단계가 생략될 수도 있다.
모바일 단말기(20)가 비가청 음파신호 수신기능을 작동하여 비가청 음파신호를 수신하면(S130_Yes) 비가청 음파신호로부터 콘텐츠 식별정보를 추출하고(S140), 식별정보를 부가정보와 함께 서버 장치(30)로 전송한다(S150). 이 때 부가정보는 도1 및 도2를 참조하여 설명한 바와 같이 비가청 음파신호를 수신할 때의 시간 정보와 위치 정보 등의 정보를 포함할 수 있고, 대안적 실시예에서, 오디오 핑거프린트 정보를 더 포함할 수 있다.
비가청 음파신호를 수신하지 못하는 경우(S130_No), 도시한 실시예에 따르면 식별정보 없이 부가정보만 서버 장치(30)로 전송하도록 구성할 수 있다(S160). 비가청 음파신호를 수신하지 못한 경우 아무런 정보를 서버 장치(30)로 전송하지 않고 따라서 모바일 단말기(20)에 아무 정보도 디스플레이하지 않을 수도 있겠지만, 본 발명의 바람직한 일 실시예에서는, 부가정보를 서버 장치(30)로 전송하여, 서버 장치(30)가 부가정보에 기초하여 후보 콘텐츠를 추정하고 이 후보 콘텐츠에 대응하는 알림 정보를 사용자에게 디스플레이 하도록 구성된다. 이와 같이 부가정보에만 기초하여 후보 콘텐츠를 추출하는 구성에 대해서는 도7을 참조하여 후술하기로 한다.
도5는 도3에서의 단계(S20 및 S30)를 구체화한 예로서, 식별정보와 부가정보를 이용한 후보 콘텐츠 선택 방법의 제1 실시예를 나타낸다.
도5를 참조하면, 단계(S210)에서, 서버 장치(30)는 수신한 식별정보에 매칭되는 콘텐츠 식별정보가 (예컨대 식별정보 발신 스케줄 DB(340)에) 기저장된 콘텐츠 식별정보 목록에 존재하는지 여부를 확인한다. 만일 매칭되는 콘텐츠 식별정보가 콘텐츠 식별정보 목록에 존재하는 경우(S220_Yes) 이 콘텐츠 식별정보의 콘텐츠를 후보 콘텐츠로 선택하고(단계 S230), 후보 콘텐츠에 관한 알림 정보를 (예컨대 알림 정보 DB(350)에서 가져와서) 모바일 단말기(20)로 전송한다(단계 S240).
그러나 예컨대 콘텐츠 재생 수단(10)의 스피커의 노화나 주변 노이즈 등에 의해 모바일 단말기(20)가 올바른 식별정보를 추출하지 못했거나 올바른 식별정보를 추출했더라도 서버 장치(30)로 전송하는 과정에서 네트워크상 오류로 인해 서버 장치(30)가 올바른 식별정보를 수신하지 못하는 경우가 발생할 수 있고, 따라서 단계(S210)에서의 판단 결과 매칭되는 콘텐츠 식별정보가 존재하지 않는다고 판단될 수 있다.
이와 같이 수신한 식별정보에 매칭되는 식별정보가 식별정보 목록에 없는 경우(S210_No), 서버 장치(30)는 기저장된 콘텐츠 식별정보 목록에서 적어도 하나의 예비후보 콘텐츠를 선정한다(S250).
이 때 상기 예비후보 콘텐츠를 선정하는 단계(S250)는 다양한 기준이나 방식에 따라 수행될 수 있으며, 도시한 일 실시예에서는 식별정보의 해밍 거리(hamming distance)를 산출하고 이에 기초하여 예비후보 콘텐츠를 선정한다.
구체적 예로서, 우선 단계(S251)에서, 수신한 식별정보와 식별정보 목록의 기저장된 식별정보들 간의 각각의 해밍 거리를 계산한다. 즉 수신한 식별정보와 식별정보 목록의 제1 식별정보와의 제1 해밍거리, 수신한 식별정보와 식별정보 목록의 제2 식별정보와의 제2 해밍거리,… 등과 같이 식별정보 목록의 각각의 식별정보와 수신한 식별정보와의 해밍거리를 계산한다.
그 후 계산된 해밍거리 값을 정렬한 후 해밍거리 값이 작은 소정 개수의 식별정보에 대응하는 콘텐츠들을 예비후보 콘텐츠로서 선정할 수 있다(S252). 대안적으로, 소정 임계값 이하의 해밍거리 값을 갖는 식별정보를 예비후보 콘텐츠로서 선정할 수도 있다.
이렇게 예비후보 콘텐츠가 선정되면, 예비후보 콘텐츠들 중에서 부가정보에 기초하여 최종적으로 하나 이상의 후보 콘텐츠를 선택하고(S260), 선택된 후보 콘텐츠에 대한 알림 정보를 모바일 단말기(20)로 전송할 수 있다(S240).
예비후보 콘텐츠들 중에서 하나 이상의 후보 콘텐츠를 선택하는 단계(S260)도 다양한 기준이나 방식으로 수행될 수 있다.
예를 들면, 부가정보에 대해 미리 우선순위를 설정할 수 있고, 우선순위가 높은 부가정보를 기준으로 후보 콘텐츠를 선택할 수 있다. 예컨대 부가정보 중 콘텐츠의 음파신호를 수신하는 시간 정보를 제1 순위로 설정했다고 가정하면, 모바일 단말기(20)로부터 수신한 부가정보 중의 시간 정보와 식별정보 발신 스케줄 DB(340)의 식별정보 발신 시간 목록의 시간 정보를 비교하여, 동일한 (또는 유사한, 또는 시간 범위가 겹치는) 시간 정보를 갖는 예비후보 콘텐츠를 후보 콘텐츠로서 선택할 수 있다.
도6은 도3에서의 단계(S20 및 S30)를 구체화한 또 다른 예로서, 식별정보와 부가정보를 이용한 후보 콘텐츠 선택 방법의 제2 실시예를 나타낸다.
도5와 비교할 때 도6의 단계(S310~S340)가 도5의 단계(S210~S240)와 동일 또는 유사하며 따라서 설명을 생략한다. 그러나 도6의 제2 실시예에 따르면, 수신한 식별정보에 매칭되는 식별정보가 식별정보 목록에 없는 경우(S310_No), 서버 장치(30)는 수신한 부가정보에 기초하여 후보 콘텐츠를 선택한다(S350). 즉 모바일 단말기(20)로부터 수신한 식별정보를 더 이상 이용하지 않고 부가정보에만 기초하여 후보 콘텐츠를 선택하고, 선택된 후보 콘텐츠에 대한 알림 정보를 모바일 단말기(20)로 전송할 수 있다(S340).
이 때 부가정보에만 기초하여 후보 콘텐츠를 선택하는 단계(S350)는 여러 다양한 기준이나 방식에 따라 수행될 수 있으며, 본 발명의 일 실시예에 따르면 도7과 같이 우선순위를 이용할 수 있다.
도7은 부가정보를 이용한 후보 콘텐츠 선택 방법의 예시적 구성을 나타낸다. 이 예시적 방법은 도6의 단계(S350)의 구체적인 예일 수도 있고, 서버 장치(30)가 모바일 단말기(20)로부터 식별정보 없이 부가정보만 수신한 경우 서버 장치(30)에서 수행하는 단계들(즉 도4의 단계(S160) 이후의 단계들)의 구체적인 예일 수도 있다.
도7의 실시예에 따르면, 수신한 부가정보에 기초하여 하나 이상의 후보 콘텐츠를 선택하는 단계(S410)는, 부가정보에 우선순위가 미리 설정되어 있다고 가정할 때, 수신한 부가정보 중 우선순위가 높은 제1 부가정보에 대해, 제1 부가정보와 매칭되는 부가정보가 식별정보 발신 스케줄 DB(340)의 부가정보 데이터로 존재하는지를 판단한다(단계 S411).
만일 수신한 제1 부가정보와 매칭되는 부가정보가 DB(340)에 존재하는 경우, 이 매칭되는 부가정보에 대응하는 콘텐츠의 전부 또는 일부를 후보 콘텐츠로 선택할 수 있고(단계 S413),
예컨대 부가정보 중 시간 정보를 제1 순위로 설정했다고 가정하면, 모바일 단말기(20)로부터 수신한 부가정보 중의 시간 정보와 식별정보 발신 스케줄 DB(340)의 식별정보 발신 시간 목록의 시간 정보를 비교하여, 동일한 (또는 유사한, 또는 시간 범위가 겹치는) 시간 정보를 갖는 모든 콘텐츠 또는 일부 콘텐츠를 후보 콘텐츠로서 선택할 수 있다. 이 때 제1 부가정보와 매칭되는 콘텐츠의 일부 콘텐츠만 후보 콘텐츠로 선택하고자 하는 경우, 예를 들어 제2 순위의 부가정보(예컨대 위치 정보)에 기초하여 이 작업을 수행할 수 있을 것이고, 그 외에 후보 콘텐츠를 선택하는 여러 다양한 방법이 존재할 수 있다.
한편 제1 순위의 부가정보에 매칭되는 콘텐츠가 DB(340)에 존재하지 않는다면(단계 S412), 이것은 적절한 식별정보도 존재하지 않고 제1 순위 부가정보에 매칭되는 콘텐츠도 발견되지 않은 경우이므로 제2 순위 부가정보를 고려하지 않고 기설정된 프로세스에 따라 예외처리(예를 들어 에러 발생 사실을 모바일 단말기(20)에 통지하는 동작 등)를 수행할 수 있다(S414). 그러나 대안적 실시예에서, 제2 순위 부가정보, 제3 순위 부가정보 등 순차적 기준에 따라 후보 콘텐츠를 선정하여 이에 대한 알림 정보를 모바일 단말기(20)로 전송할 수도 있을 것이다.
도8은 도3에서의 단계(S20 및 S30)를 구체화한 또 다른 예로서, 식별정보와 부가정보를 이용한 후보 콘텐츠 선택 방법의 제3 실시예를 나타낸다.
도5의 제1 실시예와 비교할 때 도8의 단계(S510,S520)는 도5의 단계(S210,S220)와 동일 또는 유사하다. 그러나 도8의 제3 실시예에 따르면, 수신한 식별정보와 매칭되는 콘텐츠 식별정보가 존재하는 경우(S520_Yes), 이 매칭된 콘텐츠 식별정보의 콘텐츠를 곧바로 후보 콘텐츠로 선정하지 않고, 부가정보를 이용하여 올바른 콘텐츠인지 여부를 확인하는 절차를 더 포함한다.
구체적으로, 단계(S530)에서, 매칭된 식별정보의 콘텐츠에 대해, 수신한 부가정보 중 적어도 일부 부가정보(예컨대 시간 정보, 위치 정보, 및 오디오 핑거프린트 정보 중 적어도 하나)를 식별정보 발신 스케줄 DB(340) 또는 핑거프린트 DB(350)에 저장된 부가정보 데이터와 비교하고(S530), 비교된 부가정보가 모두 매칭되는 경우(S540_Yes) 해당 콘텐츠를 후보 콘텐츠로 선택하고(S550) 이 후보 콘텐츠에 대한 알림 정보를 모바일 단말기(20)로 전송한다(S560).
그러나 단계(S530)의 비교 결과 일부 부가정보가 매칭되지 않는 경우(S540_No), 식별정보가 매칭된 콘텐츠(즉 단계 S510~S530을 통해 매칭된 콘텐츠)가 진정한 콘텐츠가 아닐 가능성도 있으므로 부가정보에 기초하여 후보 콘텐츠를 추가로 더 선정한다. 즉 매칭된 부가정보에 기초하여 하나 이상의 콘텐츠를 더 선정하고(S570), 이 추가로 선정한 콘텐츠 및 식별정보가 매칭된 콘텐츠를 모두 후보 콘텐츠로 선택하여 후보 콘텐츠에 관한 알림 정보를 모바일 단말기(20)로 전송할 수 있다.
한편 단계(S520)에서, 수신한 식별정보와 매칭되는 식별정보가 DB(340)에 존재하지 않는 경우 예컨대 해밍거리를 산출하여 예비후보 콘텐츠를 선정하고(S580) 그 후 부가정보에 기초하여 후보 콘텐츠를 선택하는 절차(S590)를 수행할 수 있으며, 이 단계들(S580,S590)은 도5의 제1 실시예의 단계들(S250,S260)과 동일 또는 유사하므로 설명을 생략한다.
도9는 도3에서의 단계(S20 및 S30)를 구체화한 또 다른 예로서, 식별정보와 부가정보를 이용한 후보 콘텐츠 선택 방법의 제4 실시예를 나타낸다.
도9의 제4 실시예의 단계들(S610~S670)은 도8의 제3 실시예의 단계들(S510~S570)과 동일 또는 유사하고, 도9에서 수신한 식별정보와 매칭되는 콘텐츠 식별정보가 DB(340)에 존재하지 않는 경우에 대한 단계(S680)는 도6의 제2 실시예의 단계(S350)와 동일 또는 유사하다. 따라서 도9에 대해서는 구체적 설명을 생략하기로 한다.
이제 도10을 참조하여 본 발명의 콘텐츠 추정 방법이 적용되는 예시적 상황을 설명하기로 한다.
도10은 일 예로서 영화관에서 콘텐츠를 재생할 때 본 발명의 일 실시예에 따라 콘텐츠를 추정하고 사용자에게 알림 정보를 디스플레이하는 방법을 나타낸다.
우선 모바일 단말기(20)를 소지한 사용자가 어느 특정 영화관에 앉아있고 이 영화관의 콘텐츠 재생 수단(10)(예컨대 영화관의 스크린 및 스피커)을 통해 특정 제품의 광고("광고A")가 상영되고 있다고 가정한다(단계①).
사용자가 예컨대 모바일 단말기(20)를 일정 시간동안 흔드는 동작을 하여 음파신호의 수신 개시를 명령하면, 모바일 단말기(20)가 비가청대역 음파신호를 수신하여 광고A의 식별정보를 추출하고(단계②), 이 추출한 식별정보와 부가정보(음파신호를 수신할 때의 시간정보 및 위치정보 및 핑거프린트 중 적어도 하나)를 서버 장치(30)로 전송한다(단계③).
서버 장치(30)는 수신한 식별정보와 부가정보에 기초하여 예를 들어 도5 내지 도9를 참조하여 설명한 실시예 중 하나에 따른 동작을 수행하여 후보 콘텐츠(예컨대 광고A, 광고B, 광고C,… 등)를 추출하고(단계④), 선택된 후보 콘텐츠에 관한 알림 정보를 모바일 단말기(20)로 전송한다(단계⑤).
모바일 단말기(20)는 광고A, 광고B, 광고C 등의 후보 콘텐츠에 관한 알림 정보의 목록을 사용자에게 보여주고(단계⑥), 사용자가 현재 상영되는 특정 콘텐츠(즉 광고A)에 대응하는 알림 정보를 선택하면, 이 광고A에 대한 추가정보를 서버 장치(30)로부터 수신하여 사용자에게 디스플레이 할 수 있다(단계⑦).
이와 같이 본 발명의 일 실시예에 따르면, 모바일 단말기가 콘텐츠에 포함된 비가청 음파를 정확히 수신하지 못하는 경우에도 기수신한 정보에 기초하여 해당 콘텐츠가 무엇인지 추정하고 이 콘텐츠에 연관된 정보들을 사용자에게 제공할 수 있으므로 사용자가 본 발명에 따른 비가청 음파를 이용한 서비스에 지속적으로 흥미를 느끼게 되고 향후에도 계속하여 이 서비스를 이용하도록 유도할 수 있는 장점이 있다.
지금까지 도면을 참조하여 본 발명의 실시예들을 설명하였지만 본 발명이 속하는 분야에서 통상의 지식을 가진 당업자라면 상술한 명세서의 기재로부터 다양한 수정 및 변형이 가능함을 이해할 것이다. 예를 들어 도10은 본 발명의 콘텐츠 추정 방법이 영화관에 사용되는 경우를 예로서 도시하였지만, 당업자는 본 발명의 다양한 실시예들이 각종 마트나 매장, TV 방송 등에 적용될 수 있음을 알 것이다. 또한 이렇게 여러 분야에 응용될 경우 콘텐츠 식별정보나 부가정보가 구체적 실시 형태에 따라 달라질 수 있음도 당업자는 이해할 것이다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니되며 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
10: 콘텐츠 재생 수단
20: 모바일 단말기
30: 서버 장치

Claims (24)

  1. 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 서버 장치에 의한 콘텐츠 추정 방법으로서,
    서버 장치가 모바일 단말기로부터 콘텐츠 식별정보 및 부가정보를 수신하는 단계;
    상기 콘텐츠 식별정보에 대응하는 식별정보가 기저장된 식별정보 목록에 존재하는 경우(S520_Yes), 상기 수신한 부가정보 중 적어도 일부 부가정보를 데이터베이스 내의 상기 콘텐츠 식별정보에 대응하는 콘텐츠의 부가정보와 비교하는 단계(S530);
    상기 비교 결과, 상기 수신한 부가정보가 기저장된 부가정보에 매칭되면 상기 콘텐츠를 후보 콘텐츠로 선택하고(S550), 상기 수신한 부가정보 중 일부가 기저장된 부가정보에 매칭되지 않으면 상기 수신한 부가정보 중 매칭된 나머지 부가정보에 기초하여 적어도 하나의 후보 콘텐츠를 선택하는 단계(S570);
    상기 콘텐츠 식별정보에 매칭되는 식별정보가 기저장된 식별정보 목록에 존재하지 않는 경우(S520_No), 수신한 식별정보와 상기 식별정보 목록의 기저장된 식별정보들 간의 유사성에 기초하여, 상기 기저장된 콘텐츠 식별정보 목록에서 적어도 하나의 예비후보 콘텐츠를 선정하는 단계(S580); 및
    선정된 상기 예비후보 콘텐츠 중에서, 상기 부가정보에 기초하여 하나 이상의 후보 콘텐츠를 선택하는 단계(S590);를 포함하고,
    상기 식별정보는 콘텐츠의 음파신호에 포함되고 콘텐츠를 다른 콘텐츠와 구별하는 정보로서, 상기 모바일 단말기가 음파신호를 수신하여 이 음파신호에서 추출한 정보이고,
    상기 부가정보는, 상기 모바일 단말기가 상기 음파신호를 수신할 때의 모바일 단말기의 위치에 관한 위치정보 및 상기 음파신호를 수신할 때의 수신 시간에 관한 시간정보를 포함하는 것을 특징으로 하는 콘텐츠 추정 방법.
  2. 제 1 항에 있어서,
    상기 식별정보는 각각의 콘텐츠를 식별하는 소정 길이의 디지털 비트를 포함하는 것을 특징으로 하는 콘텐츠 추정 방법.
  3. 제 1 항에 있어서,
    상기 음파신호가 상기 콘텐츠의 오디오 핑거프린트를 더 포함하고,
    상기 부가정보는 상기 모바일 단말기에 의해 음파신호에서 추출된 상기 콘텐츠의 오디오 핑거프린트를 더 포함하는 것을 특징으로 하는 콘텐츠 추정 방법.
  4. 제 1 항에 있어서,
    서버 장치가 선택된 상기 후보 콘텐츠에 관한 알림 정보를 상기 모바일 단말기로 전송하는 단계(S30);를 더 포함하고,
    상기 알림 정보는 상기 후보 콘텐츠와 관련하여 상기 모바일 단말기의 사용자에게 공지할 정보를 포함하는 것을 특징으로 하는 콘텐츠 추정 방법.
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 삭제
  13. 제 1 항에 있어서, 상기 예비후보 콘텐츠를 선정하는 단계(S580)가,
    수신한 식별정보와 상기 식별정보 목록의 기저장된 식별정보들 간의 각각의 해밍거리(hamming distance)를 산출하는 단계(S581); 및
    해밍거리 값이 작은 소정 개수의 식별정보 또는 소정 임계값 이하의 해밍거리 값을 갖는 식별정보를 예비후보 콘텐츠로서 선정하는 단계(S582);를 포함하는 것을 특징으로 하는 콘텐츠 추정 방법.
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
  21. 삭제
  22. 삭제
  23. 삭제
  24. 삭제
KR1020160112698A 2016-09-01 2016-09-01 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 방법 및 장치 KR102668559B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160112698A KR102668559B1 (ko) 2016-09-01 2016-09-01 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160112698A KR102668559B1 (ko) 2016-09-01 2016-09-01 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20180025694A KR20180025694A (ko) 2018-03-09
KR102668559B1 true KR102668559B1 (ko) 2024-05-27

Family

ID=61728178

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160112698A KR102668559B1 (ko) 2016-09-01 2016-09-01 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 방법 및 장치

Country Status (1)

Country Link
KR (1) KR102668559B1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101277523B1 (ko) * 2013-03-08 2013-06-21 (주) 에이노드 사운드 신호 기반의 로컬 인터랙티브 플랫폼 시스템, 이를 이용한 로컬 인터랙티브 서비스 제공 방법 및 이를 위한 컴퓨터로 판독가능한 기록매체

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007519986A (ja) * 2003-11-18 2007-07-19 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 導出されたフィンガープリントのマッチングによるデータオブジェクトのマッチング
KR20150106299A (ko) * 2014-03-11 2015-09-21 주식회사 사운들리 저 전력 연관 콘텐츠 제공 시스템, 방법, 및 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101277523B1 (ko) * 2013-03-08 2013-06-21 (주) 에이노드 사운드 신호 기반의 로컬 인터랙티브 플랫폼 시스템, 이를 이용한 로컬 인터랙티브 서비스 제공 방법 및 이를 위한 컴퓨터로 판독가능한 기록매체

Also Published As

Publication number Publication date
KR20180025694A (ko) 2018-03-09

Similar Documents

Publication Publication Date Title
US10044448B2 (en) Sonic signaling communication for user devices
CN110741651A (zh) 用于呈现指示推荐内容的通知的方法、系统和介质
US20130301392A1 (en) Methods and apparatuses for communication of audio tokens
US10469907B2 (en) Signal processing method for determining audience rating of media, and additional information inserting apparatus, media reproducing apparatus and audience rating determining apparatus for performing the same method
JP6454741B2 (ja) 低電力関連コンテンツ提供システム、方法、及びプログラムを記録したコンピューターで読むことができる記録媒体
CN104361847B (zh) 一种通过音频进行互动的广告播放系统以及方法
KR101358807B1 (ko) 디지털 워터마크를 이용한 멀티 디바이스간 프로그램 동기화 방법 및 이를 구현하기 위한 시스템
CN107785037B (zh) 使用音频时间码同步媒体内容的方法、系统和介质
US11902632B2 (en) Timely addition of human-perceptible audio to mask an audio watermark
WO2020146716A4 (en) Augmenting content for over-the -air broadcast radio (am or fm) in connected radio and/or on mobile applications synchronized with over-the-air broadcast radio
US9363562B1 (en) Method and system for authorizing a user device
KR102668559B1 (ko) 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 방법 및 장치
US10560207B2 (en) System and method for providing targeted secondary content delivery
KR20140126237A (ko) 저 전력 연관 콘텐츠 제공 시스템, 방법, 및 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
JP6063300B2 (ja) 情報表示システム及び方法及び装置及びプログラム
KR20180025697A (ko) 콘텐츠에 포함된 음파신호로부터 콘텐츠를 추정하는 방법 및 장치
KR20170123991A (ko) 음파신호 처리 방법 및 음파신호 처리 시스템, 및 이 시스템을 이용한 주문형 콘텐츠 제공 방법 및 시스템
KR102524066B1 (ko) 웹기반으로 디바이스를 식별하는 방법 및 장치
AU2014271223B2 (en) Method and system for authorizing a user device
JP6103975B2 (ja) 情報表示装置及びシステム及び方法及びプログラム
CA2873150C (en) Method and system for authorizing a user device
KR20170136877A (ko) 웹기반으로 디바이스를 식별하는 방법 및 장치
KR20170136872A (ko) 웹기반으로 디바이스를 식별하는 방법 및 장치
WO2015168899A1 (zh) 视频播放系统和方法

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant