KR20020093994A - 오디오 신호에서 삽입된 숨은 데이터를 추출하고,디코딩하며, 이용하기 위한 시스템 및 방법 - Google Patents

오디오 신호에서 삽입된 숨은 데이터를 추출하고,디코딩하며, 이용하기 위한 시스템 및 방법 Download PDF

Info

Publication number
KR20020093994A
KR20020093994A KR1020027014497A KR20027014497A KR20020093994A KR 20020093994 A KR20020093994 A KR 20020093994A KR 1020027014497 A KR1020027014497 A KR 1020027014497A KR 20027014497 A KR20027014497 A KR 20027014497A KR 20020093994 A KR20020093994 A KR 20020093994A
Authority
KR
South Korea
Prior art keywords
user
information
signal
hidden data
output
Prior art date
Application number
KR1020027014497A
Other languages
English (en)
Other versions
KR100766762B1 (ko
Inventor
제이콥스폴이
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20020093994A publication Critical patent/KR20020093994A/ko
Application granted granted Critical
Publication of KR100766762B1 publication Critical patent/KR100766762B1/ko

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/018—Audio watermarking, i.e. embedding inaudible data in the audio signal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/28—Arrangements for simultaneous broadcast of plural pieces of information
    • H04H20/30—Arrangements for simultaneous broadcast of plural pieces of information by a single channel
    • H04H20/31—Arrangements for simultaneous broadcast of plural pieces of information by a single channel using in-band signals, e.g. subsonic or cue signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Circuits Of Receivers In General (AREA)

Abstract

이용자가 오디오 신호들내에 삽입된 숨은 데이터를 복원하고, 디코딩하며, 이용하도록 하는 시스템 및 방법. 바람직한 실시예는 오디오 신호 및 오디오 신호내에 삽입된 숨은 데이터를 나타내는 음파를 수신하도록 구성된 마이크로폰을 포함한다. 그 후, 마이크로폰은 수신된 음파를 전기 출력 신호로 변환한다. 또한, 숨은 데이터를 추출하고, 숨은 데이터에 의해 나타내어지는 정보를 그 출력으로서 제공하기 위해, 시스템은 마이크로폰에 전기적으로 결합되고, 전기 출력 신호를 수신하도록 구성된 프로세서를 포함한다. 프로세서는 숨은 데이터에 의해 나타내어지는 정보를 출력으로서 발생한다. 결국, 시스템은 이용자에게 정보를 제공하도록 구성된 이용자 프리젠테이션 메카니즘을 포함한다.

Description

오디오 신호에서 삽입된 숨은 데이터를 추출하고, 디코딩하며, 이용하기 위한 시스템 및 방법{SYSTEM AND METHOD FOR EXTRACTING, DECODING, AND UTILIZING HIDDEN DATA EMBEDDED IN AUDIO SIGNALS}
일반적으로, 숨은 데이터를 전자 신호들에 삽입하기 위한 기술은 당업계에 잘 알려져 있다. 하나의 그러한 기술이 디지탈 워터마킹이다. 디지탈 워커마킹 기술은, 인터넷을 통해 공중에 이용가능하게 된 이미지들 및 음악에 대한 저작권을 보호하기 위한 더 효과적인 방법들을 고안하기 위한 필요에 따라 개발되었다.
디지탈 워터마킹에서, 워터마크는 예를 들면, 스펙트럼 확산 기술들을 이용하여 데이터 신호의 스펙트럼 성분들에 삽입된다. 실제로 숨은 정보 스트림들인 이 워터마크는 주로, 전자 신호들의 형태로 생성된 독점적인 이미지들 및/또는 음악의 불법적인 이용에 대하여 보호하는데 이용된다. 워터마크가 제거되는 것은 실제로 불가능하고, 신호를 통해 통합된다. 따라서, 디지탈 워터마킹은 예를 들면, 전자 이미지들 및 음악의 이용을 보호하고 추적하는데 특히 효과적이다. 워터마크는 인간 감각들에 의해 지각될 수는 없지만 다양한 다른 검출 및 복원 기술들을 이용하여 전자적으로 검출될 수 있다. 이 기술의 특히 유리한 이용은 오디오 신호들을 워터마킹하는 기술이다. 이러한 능력에서, 워터마크들이 예를 들면, 저작권의 보호를 받는 노래가 불법적으로 이용되는 것을 방지하고, 광고의 이용 및 방송을 모니터링하는데 상업적으로 이용될 수 있다.
워터마킹의 종래의 이용들에서, 워터마크들이 예를 들면, 레코딩 및/또는 배포 사이클의 다양한 시기에서 음악 또는 광고에 부가될 수 있다. 노래에서, 워터마크는 스튜디오에서 부가될 수 있고 스튜디오의 명칭, 음악가들의 성명들, 및 그 저작권 설명을 포함할 수 있다. 컴팩트 디스크 (CD) 를 제조할 때, 그 저작권 설명을 포함하는 또 다른 워터마크가 레코딩코드 회사에 의해 부가될 수 있다. 결국, CD 또는 광고가 상영되거나 방송될 때, 또 다른 워터마크가 라디오국에 의해 부가될 수 있다. 청취자에게 들리지는 않지만, 실제로 파괴할 수 없는 워터마크가 오디오 신호와 관련된 오디오에 남아 있다. 즉, 워터마크는 노래 또는 광고의 전자 버전으로 삽입되어 남아 있다.
음악이 오디오 스피커를 통해 재생될 때와 같이, 이용자가 음악을 청취할 수 있는 어떤 시점에서도, 청취자는 적절한 장비를 이용하여 삽입된 워터마크를 디코딩할 수 있을 것이다. 방송 음악의 경우에, 디코딩된 워터마크는 이용자에게 특정 노래의 제목 및 레코딩코드 회사의 명칭을 제공할 수 있다. 또한, 워터마크는라디오국의 호출 부호 (call letter) 들을 제공하고, 관련 오디오 신호의 레코딩코딩 및/또는 배포 사이클에 따라 워터마크에 부가된 다른 어떤 정보도 제공한다. 또한, 이러한 방식으로 워터마크들을 디코딩하는 능력은 이용 및/또는 라디오 광고들과 같은 자료의 전파의 양을 모니터링하는 수단을 제공한다.
상술한 바와 같이, 숨은 정보를 데이터 신호들에 삽입하는 기술이 당업계에 알려져 있다. 예를 들면, 1998년 10월 13일에 Lee 등에 허여된 미국특허 제 5,822,360 호는 하나의 그러한 방법을 개시한다. Lee의 특허에서, 유색 잡음의 형태로 데이터를 숨김으로써 부속 데이터가 오디오 신호에 운반된다. 유색 잡음은 오디오 신호들에 유사한 신호 스펙트럼을 갖는다. 따라서, 부속 데이터는 먼저 스펙트럼 확산 신호로 변환되고, 발생되는 오디오 신호는 그 스펙트럼의 형태를 결정하기 위해 분석된다. 그 후, 동일한 스펙트럼 형상이 스펙트럼 확산 신호에 삽입되고, 스펙트럼 확산 신호는 송신을 위해 오디오 신호와 결합된다. 스펙트럼 성형은 선형 예측 코딩 또는 빠른 푸리에 변환과 같은 서브-밴드 코딩 기술들과 같은 기술들을 이용하여 수행될 수 있다.
워터마크를 신호에 삽입하는 또 다른 기술이 1999년 5월 18일에 Moskowitz에 허여된 미국특허 제 5,905,800 호에 개시된다. Moskowitz의 특허에서는, 먼저, 워터마크 키 (key) 가 식별된다. 키는 2진 시퀀스, 및 신호에 대한 2진 시퀀스의 적용을 설명하는 정보를 포함한다. 그 후, 디지탈 워터마크는 워터마크 키에 의해 하나 이상의 위치에서 콘텐트 신호내에 인코딩된다.
유사하게, 많은 종래 방법은 삽입된 워터마크를 오디오 신호로부터 디코딩하는데 이용가능하다. 하나의 기술은 오디오 신호가 음파의 형태로 라디오 신호와 같은 오디오 스피커를 통해 먼저 방송될 것을 요한다. 워터마크가 청취자에게 들리지 않기 때문에, 마이크로폰이 관련 음파를 수신하고 수신된 음파들을 전기 신호로 변환는하는데 이용된다. 다음, 전기 신호는 워터마크를 위치시키고, 디코딩하며, 그 안에 삽입된 정보를 복원하기 위해 종래의 신호 프로세싱 기술들을 이용하여 분석된다. 상술한 바와 같이, 정보는 노래의 제목, 레코딩코드 회사의 명칭, 라디오국의 호출 부호, 방송 광고에 관한 정보, 및/또는 정보의 다른 어떤 유형일 수 있다.
무선 통신 영역으로 디지탈 워터마킹의 이용을 통합할 필요가 있다. 또한, 이와 관련하여, 워터마크 및/또는 오디오 신호에 숨겨진 다른 정보를 검출하고 디코딩하는 능력을 이용자에게 제공하고, 디코딩된 정보를 목표 이용자에게 제공하는 시스템이 요구되고 있다.
본 발명은 일반적으로 전자 신호들에 숨은 데이터의 인코딩 및 디코딩의 분야에 관한 것이다. 특히, 본 발명은 이용자가 오디오 신호들에 삽입된 숨은 데이터를 복원하고, 디코딩하며, 이용하도록 하기 위한 시스템 및 방법에 관한 것이다.
여기에 포함되고, 이 명세서의 일부를 이루는 첨부 도면들은 바람직한 실시예들을 나타내고, 상세한 설명과 함께 본 발명의 목적, 이점, 및 원리들을 나타낸다.
도 1 은 본 발명의 실시예에 따라 비지니스 모델을 나타내는 도면이다.
도 2 는 콘텐트 제공자 위치에서 오디오 신호의 워터마크를 제공하기 위한 종래의 시스템을 나타내는 도면이다.
도 3 은 방송 설비에서 오디오 신호의 워터마크를 제공하기 위한 종래의 시스템을 나타내는 도면이다.
도 4 는 바람직한 통신 장치 및 하나의 오디오 신호 소스를 나타내는 도면이다.
도 5 는 통신 장치에 포함된 오디오 소스를 나타내는 도면이다.
도 6 은 바람직한 통신 장치를 나타내는 블록도이다.
도 7 은 바람직한 프로세서의 동작을 나타내는 플로우챠트이다.
도 8 은 본 발명에 따른 프로세서 동작을 나타내는 도면이다.
도 9 는 이용자에게 디코딩된 워터마크 정보를 재공하는 디스플레코딩이를 나타내는 도면이다.
도 10 은 예시적인 통신 장치를 나타내는 도면이다.
비지니스 모델의 경우에, 무선 전화와 같은 휴대용 장치라면 워터마크를 디코딩하고, 획득한 정보를 목표 이용자에게 제공할 수 있다. 예를 들면, 사람들은 자동차를 운전하는 동안 라디오를 통해 관심있는 광고 또는 노래를 들을 수 있다. 이 특정의 예에서, 청취자들은 광고된 상품을 구입하기를 원하거나, 어디서 아티스트가 콘서트를 열 것인지와 같은 노래에 대한 더 많은 정보를 원할 수 있다.
이 정보를 획득하기 위해, 이용자는 무선 전화와 같은 그의 이동 통신 장치를 이용할 수 있고, 전화상에 지정된 "더 많은 정보" 버튼을 누른다. 무선 전화는 자동차의 라디오의 스피커들을 통해 들리는 음향을 수신하는 하드웨어 및 전자회로를 갖출 수 있다. 무선 전화 회로는 어떤 인코딩된 정보를 추출하기 위해 오디오 신호를 처리하고, 워터마크를 디코딩할 것이다. 인코딩된 정보는 전화번호, 및 라디오를 통한 노래 또는 상업적인 방송과 관련된 인터넷 균일 자원 로케이터 (URL) 어드레코딩스와 같은 긴밀한 정보를 포함한다. 그 후, 그 정보는 지정된 전화 번호에 대한 전화 호의 배치를 용이하게 하고, URL을 이용하여 인터넷 링크를 확립하기 위해 이용자에게 표시된다. 그 후, 이용자는 운영자에세 말을 걸거나 통상의 방식으로 웹사이트와 통신하여, 콘서트 정보를 요구하거나 및/또는 물품을 주문할 수 있다. 취급과 관련된 수입 흐름이 추적될 수 있고, 그러한 환경에 참여하는 다양한 주체들 사이에 공유될 수 있다.
설명되는 바와 같은 본 발명의 원칙에 따라, 그리고 이하에 널리 설명되는 바와 같이, 바람직한 실시예는 (ⅰ) 오디오 신호 및 (ⅱ) 오디오 신호의 숨은 데이터를 나타내는 음파를 수신하도록 구성된 마이크로폰을 포함한다. 마이크로폰은 수신된 음파들을 전자 출력 신호로 변환한다. 시스템은 마이크로폰에 전기적으로 결합되고, 숨은 데이터를 추출하고 그 출력으로서 숨은 데이터에 의해 나타내어지는 정보를 제공하기 위해 전기적인 출력 신호를 수신하도록 구성된 프로세서를 포함한다. 또한, 이용자 인터페이스가 제공된다. 이용자 인터페이스는 프로세서에 전기적으로 결합되고, (ⅰ) 이용자로부터 제 1 입력을 수신하고, (ⅱ) 제 1 이용자 입력에 따라, 프로세서를 활성화시켜 숨은 데이터의 추출을 선택적으로 개시하도록 구성된다. 프로세서는 숨은 데이터에 의해 나타내어지는 정보를출력으로서 발생한다. 마지막으로, 시스템은 이용자에게 숨은 데이터에 의해 나타내어지는 정보를 제공하도록 구성된 프리젠테이션 메카니즘을 포함한다.
다음 상세한 설명은 본 발명에 따른 바람직한 실시예들을 나타내는 첨부 도면들을 참조한다. 본 발명의 정신 및 범위로부터 벗어나지 않고 다른 실시예들이 가능하고, 변형들이 실시예들에 이루어질 수 있다. 따라서, 다음 상세한 설명이 본 발명을 설명되는 실시예들에 제한하는 것으로 의도되지 않는다.
도 1 은 본 발명의 실시예에 따라 비지니스 모델을 나타낸다. 특히, 도 1 은 많은 성분들, 콘텐트 제공자 (10), 방송 설비 (20), 오디오 소스 (30), 통신 장치 (40), 및 기지국 (50) 을 나타낸다. 또한, 네트워크 (60), 인터넷에 대한 접속 (70) 및 공중 전화 네트워크 (80) 가 포함된다. 이 성분들의 각각을 이하에서 더 상세히 설명한다.
예를 들면, 콘텐트 제공자 (10) 는 레코딩코드 회사 또는 레코딩코딩 스튜디오일 수 있다. 콘텐트 제공자 (10) 는 노래 또는 다른 자료와 같은 시스템 이용자에게 관심있는 오디오 정보를 포함하는 레코딩코딩 매체를 생성한다. 도 2 에서 더 상세히 나타나는 바와 같이, 콘텐트 제공자 (10) 는 먼저 음악 아티스트의 레코딩코딩 세션으로부터 생성된 오리지날 오디오 신호 (11) 와 같은 콘텐트 정보를 생성한다. 오디오 신호 (11) 는 특정 노래, 예를 들며, 음악 그룹 Maze에 의해 레코딩코딩된 Southern California 노래의 전자 표시일 수 있다. 다음, 이상에서 설명된, 당업계에 잘 알려진 기술들을 이용하여, 워터마크 (12) 는 예를 들면, 노래의 제목을 나타내는 식별 (ID) 정보, 연주하는 아티스트, 노래가 구입될 수 있는 판매처의 이름, 또는 저작권 소유자의 정보 등을 포함할 수 있다. 워터마크 (12) 는 예를 들면, 노래의 제목, 연주하는 아티스트, 노래가 구입될 수 있는 판매처의 명칭을 나타내는 식별 (ID) 정보 또는 저작권자의 정보 등를 포함할 수 있다. 또한, 워터마크 (12) 는 이용자가 노래 또는 광고 상품들을 구입하도록 하기 위해, 또는 다른 어떤 대화 및 처리를 용이하게 하기 위해 전화 번호 또는 URL과 같은 링크 정보를 포함할 수 있다.
공지의 워터마킹 기술을 구현하는 삽입 유닛 (45) 은 오디오 신호 (11) 및 워터마크 (12) 를 입력으로서 수신하고, 워터마크 (12) 를 오디오 신호에 숨기거나 삽입한다. 따라서, 삽입 유닛 (45) 은 출력으로서 워터마크 오디오 신호 (13) 를 발생한다. 삽입 프로세스가 완성될 때, 콘텐트 제공자 (10) 는 노래를 레코딩코딩하고, 워터마크 오디오 신호 (13) 를 포함하는 워터마킹된 오디오 신호 (13) 를 포함하는 CD와 같은 출력 매체 (14) 를 생성한다. 또한, 도 1 에 나타나는 바와 같이, 삽입 유닛 (45) 이 방송 설비 (20) 및 통신 장치 (40) 에 포함될 수 있다.
그 후, 콘텐트 제공자 (10) 가 예를 들면, 호출 부호 (KGFJ) 들을 갖는 라디오국과 같은 출력 매체 (14) 를 방송 설비 (20) 에 제공한다. 도 1 및 3 에 나타나는 바와 같이, 방송 설비 (20) 가 공중을 통해 방송용 출력 매체 (14) 를 수신한다. 또한, 방송 설비 (20) 는 라디오국의 호출 부호 (KGFJ) 를 포함할 수 있는 그 자신의 워터마크 (21) 를 부가하기를 원할 수 있다. 따라서, 방송 설비 (20) 는 그 삽입 유닛 (45) 을 이용하여 워터마킹된 오디오 신호 (13) 및 워터마크 (21) 를 입력으로서 수신한다. 삽입 유닛 (45) 은 출력으로서 오리지날 워터마크 (12) 및 새로운 워터마크 (21) 를 포함하는 신호 (22) 를 발생한다. 그 후, 송신기와 같은, 방송 설비 (20) 내의 송신 유닛 (23) 은 신호 (22) 를 적절히 포맷팅된 방송 신호 (24) 로 변환할 수 있다. 그 후, 일단 변환되면, 방송 설비 (20) 는 방송 신호 (24) 를 방송용 안테나 (29) 로부터 공중으로 전파한다. 방송 신호 (24) 는 예를 들면, 라디오 주파수 (RF) 또는 마이크로웨이브 신호일 수 있다.
도 1 을 다시 참조하면, 자동차 (도면에 미도시) 로 여행하는 이용자는 자동차의 라디오와 같은 라디오 소스 (30) 을 청취할 수 있다. 본 바람직한 실시예의 라디오 소스 (30) 는 라디오이지만, 오디오 소스는 또한 텔레코딩비젼 (38), 공중 어드레코딩스 (PA) 시스템 (39) 등일 수 있다.
다음, 도 4 에 더 분명히 나타나 있듯이, 오디오 소스 (30) 는 방송 신호 (24) 를 안테나 (33) 를 통해 수신한다. 이용자가 오디오 소스 (30) 의 다이얼 (35) 을 방송 설비 (20) 의 동작 주파수로 돌릴 때, 라디오 소스 (30) 의 회로 성분들 (도면에 미도시) 은 방송 신호 (24) 를 복조하여 정보 신호를 복원한다. 당업계에 알려져 있듯이, 정보 신호는 적절히 포맷팅된 전기 신호로 변환되고, 스피커 (31) 에 제공된다. 그 후, 스피커 (31) 는 전기 신호를, 이용자가 Souththern California 노래의 형태로 청취하는 음파 (32) 로 변환한다. 따라서, 도 3 에 도시된 바와 같이, 음파 (32) 가 워터마크 (12 및 21) 을 포함하는 신호 (22) 를 나타낸다. 이용자가 음파 (32) 에 의해 생성된 노래를 청취할 수 있지만, 이용자는 또한 음파 (32) 에 삽입된 워터마크 (12 및 21) 을 청취할 수 없다.
이용자가 스피커 (31) 를 통해 노래를 청취할 수 있더라도, 이용자는 노래의 제목, 또는 상품과 같은 다른 어떤 오디오 콘텐트에 관한 설명도 알 수 없다. 그러나, 이용자는 노래의 제목, 연주하는 아티스트를 알기를 원할 수 있고, 노래의 카피본 또는 광고된 상품을 구입하기를 원할 수 있다. 또한, 이용자는 노래를 방송하는 방송 설비 (20) 의 호출부호를 알기를 원할 수 있다. 본 발명의 바람직한 실시예에서, 그리고, 도 1 에 도시된 바와 같이, 이용자는 원하는 정보를 획득하도록 또는 CD 또는 다른 자료를 주문할 수 있도록 통신 장치 (40) 을 제공받는다.
통신 장치 (40) 는 오디오 소스 (30) 로부터 음파 (32) 를 수신할 수 있는 마이크로폰, 및 수신되는 음파로부터 워터마크들을 추출하기 위한 프로세서 (예를 들면, 도 6 의 프로세서 44) 을 갖는 어떤 장치일 수도 있다. 도 1 의 바람직한 실시예에서, 통신 장치 (40) 는 무선 전화, 랩탑 컴퓨터와 같은 다른 장치들이거나, 개인 휴대 정보 단말기 (PDA) 가 이용될 수 있다.
도 4 를 참조하면, 통신 장치 (40) 는 이용자가 정보 모드를 활성화시키도록 하거나 표시된 정보에 관한 선택들에 들어가도록 하기 위한 이용자 인터페이스 (42) 를 포함한다. 예를 들면, 이용자가 스피커 (31) 를 통해 청취된 노래 또는 광고에 관한 추가 정보를 원한다면, 이용자는 이용자 인터페이스 (42) 를 활성화시켜 노래 또는 광고에 관한 추가 정보를 요청한다. 추가 정보가 디스플레코딩이 (46) 상에서 이용자에게 제공될 것이다. 또한, 모든 이용가능한 정보를디스플레코딩이하는 대신에, 이용자는 단지 디스플레코딩이 (46) 상의 프레코딩젠테이션을 위해 표시되는 부분만을 선택한다. 또한, 추가 정보가 이용자에세 제공된 후에, 이용자 인터페이스 (42) 는 제공되는 정보에 속하는 특정 선택들을 하도록 동작될 수 있다. 메뉴 방식이 정보에 포함된 특정 아이템들의 선택을 용이하게 하도록 디스플레코딩이 (46) 및 이용자 인터페이스 (42) 를 이용하여 구현될 수 있다. 이용자가 먼저 인터페이스 (42) 를 동작할 때, 마이크로폰 (41) 은 활성화되어, 음파 (32) 를 수신하고, 음파 (32) 를 전기 신호로 변환한다. 도 4 및 6 내지 7 에 도시된 바와 같이, 통신 장치 (40) 는 이제 워터마크 (12 및 21) 로부터 ID 및 링크 정보를 추출하도록 설치된다.
또 다른 실시예에서, 오디오 소스가 통신 장치에 삽입될 수 있다. 도 5 에서, 예를 들면, 셀 전화와 같은 통신 장치 (40') 는 라디오와 같은 오디오 소스 (30') 를 포함한다. 이러한 배치에서, 통신 장치 (40') 는 안테나 (43b') 을 통해 방송 신호 (24) 를 직접 수신할 수 있다. 이제, 음파는 스피커 (31') 에 의해 발생될 필요가 없고, 이 후, 도 4 의 실시예에서 도시된 바와 같이, 방송 신호 (24) 의 워터마크들로부터 ID 및 링크 정보를 추출하기 전에 마이크로폰 (41') 에 의해 수신될 필요가 없다. 대신에, 통신 장치 (40') 은 방송 신호 (24) 를 복조하고, 복조 신호를 적절히 포맷팅하며, 포맷팅된 신호를 직접적인 입력으로서 프로세서 (44; 도 6 에 도시) 에 제공하도록 구성될 수 있다. 이 점으로부터, 통신 장치 (40') 는 방송 신호 (24) 에 삽입된 워터마크들로부터 ID 및 링크 정보를 추출함으로써 통신 장치 (40) 와 동일하게 동작할 것이다.
도 6 은 도 4 에 도시된 통신 장치 (40) 의 바람직한 구현예를 나타내는 블록도이다. 도 6 에서, 마이크로폰 (41) 은 프로세서 (44) 에 적어도 간접적으로 전기적으로 결합된다. 프로세서 (44) 는 워터마크 (12 및 21) 를 추출하고 디코딩하며, 워터마크와 관련된 주체 와의 대화 (interaction) (예를 들면, CD 또는 다른 광고된 상품의 구입) 를 용이하게 하기 위해 관련된 ID 및 링크 정보를 표시하거나 새로운 링크를 활성화하는데 이용가능하다. 마이크로폰 (41) 은 음파 (32) 를 수신하고, 음파를 전자 출력 신호 (32a) 로 변환한다. 그 후, 신호 (32a) 는 프로세서 (44) 에 제공된다. 또한, 통신 장치 (40) 의 이용자 인터페이스 (42) 가 프로세서 (44) 에 결합된다. 프로세서 (44) 는 정보 출력 (44a) 을 디스플레코딩이 (46) 에 제공하고, 또한, 추가적인 워터마크들을 삽입하기 위한 삽입 유닛 (45) 에 링크 출력 (44b) 을 제공하도록 구성될 수 있다. 통신 장치 (40) 의 삽입 유닛 (45) 은 출력 신호를 출력 메카니즘 (43a 및 43b) 에 제공한다. 무선 통신에서 통상 이용되는 바와 같이, 출력 메카니즘 (43a 및 43b) 은 각각 송신기 또는 안테나일 수 있다.
그러나, 본 발명은 상기의 출력 메카니즘 (43a 및 43b) 의 이용에 제한되지 않고, 출력 메카니즘의 또 다른 형태로 실행될 수 있다. 통신 장치 (40) 의 삽입 유닛 (45) 에 의해 발생된 출력 신호에 응하여, 이용자 응답 신호 (92) 는 발생되고, 안테나 (43b) 로부터 방사된다. 이용자 응답 신호 (92) 는 디스플레코딩이 (46) 상에 표시된 정보에 대한 이용자 응답을 포함한다. 특히, 정보는 이용자의 신용카드 번호 및/또는 워터마크 (12 및 21) 와 대화하기 위해 필요한 (예를들면, CD 또는 다른 광고된 상품을 구입하기 위한) 부속 정보를 포함할 수 있다. 또한, 무선 링크를 통한 송신을 위해 포캣팅되는 이용자 응답 신호 (92) 는 통신 장치 (40) 의 삽입 유닛 (45) 에 의해 추가된 워터마크를 포함할 수 있다.
도 7 은 통신 장치 (40) 의 내부 동작을 도시한다. 이상에서 설명된 바와 같이, 이용자가 노래, 광고된 상품, 또는 스피커 (31) 를 통해 청취된 다른 정보에 관한 추가 정보를 원할 때, 이용자는 도 7 의 블록 (42) 에 도시된 바와 같이 이용자 인터페이스 (42) 를 동작한다. 또한, 이 과정이 도 4 및 도 6 에 도시된다. 도 7 의 블록 (404) 에 도시된 바와 같이, 인터페이스 (42) 가 동작될 때, 프로세서 (44) 는 마이크로폰 (41) 으로부터 전기 신호를 수신하고, ID 및 링크 정보를 추출한다.
도 8 은 프로세서 (44) 의 추출 공정에 관한 더 상세한 도면을 제공한다. 도시된 바와 같이, 음파 (32) 를 나타내고 워터마크 (12 및 21) 를 포함하는 전기 신호 (32a) 는 프로세서 (44) 에 대한 입력으로서 수신된다. 프로세서 (44) 는 당업계에 알려진 하나 이상의 기술을 이용하여, 신호 (32a) 로부터 워터마크들을 제거한다. 그 후, 블록 (406) 에서, 프로세서 (44) 는 디스플레코딩이 (46) 상에 프리젠테이션하기 위한 ID 정보 및 링크 정보를 포함하는 출력 (44a) 을 발생한다. 따라서, 연주하는 아티스트의 이름, 노래의 제목의 형태로 ID 정보를 포함하고, 웹 사이트의 이름의 형태로 링크 정보를 포함하는 워터마크 (12) 가 예시적인 포맷 (21') 에서 출력 (44a) 으로서 제공된다. 또한, 유사하게, ID 정보를 포함하는 워터마크 (21) 는 예시적인 포맷 (21') 에 제공된다. 그 후, 도 7 의블록 (406) 에 도시된 바와 같이, 그리고, 도 9 에 도시된 바와 같이, 포맷 (12' 및 21') 의 정보가 이용자에게 디스플레코딩이 (46) 상에 제공된다. 이용자는, 실제로 관련 주체와 통신 링크를 확립하기 위해 (예를 들면, CD 또는 또 다른 광고된 상품을 구입하기 위해), 이제 디스플레코딩이 (46) 상에 제공된 링크 정보를 링크 정보를 이용할지를 결정할 수 있다.
도 7 의 블록 (408) 에 도시된 바와 같이, 이용자가 단지 ID 정보를 검토하기를 원하고, 통신 링크를 확립하기를 원하지 않는다면, 프로세스는 블록 (410) 에서 끝난다. 한편, 이용자가 통신 장치 (40) 가 표시된 링크 정보를 이용하여 통신 링크를 확립하기를 원한다면, 블록 (412) 에 도시된 바와 같이, 이용자 인터페이스 (42) 를 동작시킴으로써 나타낼 수 있다. 확립된 동신 링크는 통신 장치 (40) 가 예를 들면, 도 1 에 도시된 공중전화 네트워크 (80) 을 이용하여 자동적으로 표시된 전화 번호를 자동적으로 다이얼하도록 한다. 또한, 통신 링크는 통신 장치 (40) 가 예를 들면, URL로서 표시될 수 있는 인터넷 웹 사이트에 접속하도록 한다. 통신 링크가 실제로 확립될 때, 통신 장치 (40) 는 이용자 응답 신호 (92) 를 송신하고, 그 후, 이용자 응답 신호 (92) 는 도 1 에 도시된 무선 통신 네트워크 기지국 (50) 과 같은 네트워크 소스 장치에 접속된 안테나 (53) 에 의해 수신된다.
통신 링크가 확립되기 전에, 통신 장치 (40) 의 이용자 및/또는 제조업자는 추가 정보를 프로세스 출력 (44b) 에 추가하기를 원할 수 있다. 예를 들면, 제조업자는 제조업자가 삽입된 정보를 추출할 수 있는 통신 장치를 제공하는데 대한보상으로서 수입중의 그의 몫을 수집할 수 있도록 통신 장치 (40) 의 일련 번호를 삽입하기를 원할 원할 수 있다. 또한, 무선 서비스 제공자는 이상에서 설명된 특징들로 구체화된 무선 네트워크를 제공하는데 대한 수입을 수집하는 것을 원할 수 있다. 이러한 목적으로, 서비스 (예를 들면, 아티스트, CD 제공자, 라디오국. 수신기 제조업자, 통신 장치 제조업자 등) 를 제공하는 시스템의 어떤 부분도 제공될 수 있다. 수입 분배와 같은 목적으로 삽입된 워터마크 또는 다른 정보를 삽입할 수 있는 능력을 제공받을 수 있다.
도 10 은 추가적인 워터마크의 삽입을 나타낸다. 도 7 의 블록 (414) 에 도시된 바와 같이, 추가적인 워터마크를 삽입하기 위해, 프로세서 (44) 의 출력 (44b) 은 먼저 통신 장치 (40) 의 삽입 유닛 (45) 에 제공된다. 그 후, 블록 (416) 에서, 워터마크 (88) 는 이용자의 선택에 추가된다. 여기서, 통신 장치 (40) 의 삽입 유닛 (45) 은 입력들, 프로세서 (44) 로부터의 출력, 및 워터마크 (88) 로서 수신한다. 그 후, 통신 장치 (40) 삽입 유닛 (45) 는 이용자의 상품 선택 및 워터마크 (88) 를 포함하는 출력 응답 (95) 을 제공한다. 블록 (418) 에 도시된 바와 같이, 그 후, 응답 신호 (92) 는 도 1 의 기지국 (50) 에 송신된다. 기지국 (50) 은 이용자 응답 신호 (92) 를 포함하고, 신호 (92) 로부터 일련 번호 정보를 추출한다. 또한, 기지국 (50) 은 블록 (420) 에 표시되고, 도 1 에 도시된 네트워크 서버 (60) 을 통해 통신 네트워크 접속을 확립한다. 기지국 (50) 은 이전에 개시된 협정에 따라 수입을 할당하기 위해 제조업자 및/또는 무선 서비스 제공자의 정보를 이용한다. 결국, 통신 장치 (40) 및 기지국 (50)를 이용하여 달성되는 어떤 상품의 실제의 구입도 종래의 인터넷 구입과 유사한 방식으로 이용자에게 청구될 수 있다.
네트워크 서버 (60) 는 통신 장치 (40) 에 의해 워터마크 (12) 에 제공되는 URL에 의해 식별되는 주체와의 통신을 용이하게 한다. 따라서, 이용자는 워터마크 (12) 를 그의 자동차로부터 추출하고 디코딩하는데 통신 장치 (40) 를 이용할 수 있고, 인터넷 (70) 을 이용하여 웹 사이트와 관련된 링크를 확립할 수 있으며, 예를 들면, CD 또는 광고된 상품을 주문할 수 있거나 그 웹 사이트와 대화할 수 있다. 따라서, 콘텐트 제공자 (10) 는 또한 디스플레코딩이 (46) 상에 프리젠테이션하기 위한 웹 페이지 정보를 인터넷 (70) 을 통해 통신 장치 (40) 에 다시 송신할 수 있다. 또한, 도 1 의 블록 (422) 에 도시된 바와 같이, 전화 번호가 웹 사이트 대신에 링크 정보에 제공된다면, 네트워크 서버 (60) 는 통신 링크 (40) 와 공중 전화 네트워크 (80) 사이의 통신 링크를 확립할 수 없다. 그 후 , 이용자는 확립된 통신 링크의 상대쪽 단에서 그 전화에 응답하는 주체와 대화할 수 있다.
바람직한 실시예에 관한 이상의 설명은 예시 및 설명을 제공하지만, 포괄적이라거나, 본 발명을 개시된 형태에 제한하는 것으로 의도되지 않는다. 수정 및 변형들이 이상의 교시에 따라 가능하고, 본 발명의 실행으로부터 획득될 수 있다. 따라서, 이상의 예시적인 구현예들은 숨은 데이터를 오디오 신호로부터 추출하거나 및/또는 관련 주체와 대화하는 편리한 방법을 제공한다.

Claims (13)

  1. (i) 오디오 신호와 (ii) 상기 오디오 신호에 삽입된 숨은 데이터로 표현되는 음파를 수신하고, 그 수신된 음파를 상기 전기 출력 신호로 변환하는 마이크로폰;
    숨은 데이터를 추출하고 상기 숨은 데이터에 의해 나타내어지는 정보를 출력으로서 제공하기 위해 상기 마이크로폰에 전기적으로 결합되고, 상기 전기 출력 신호를 수신하도록 구성되는 프로세서;
    상기 프로세서에 전기적으로 접속되고, (ⅰ) 이용자로부터 제 1 입력을 수신하고 (ⅱ) 상기 프로세서를 구동하여 상기 이용자의 제 1 입력에 따라 숨은 데이터의 추출을 선택적으로 개시하고, 상기 숨은 데이터에 의해 나타내어지는 정보를 출력으로서 발생하도록 구성된 이용자 인터페이스; 및
    상기 숨은 데이터에 의해 나타내어지는 정보를 이용자에게 제공하도록 구성된 이용자 프리젠테이션 메카니즘을 포함하는 것을 특징으로 하는 휴대용 통신 장치.
  2. 제 1 항에 있어서,
    상기 이용자 인터페이스는 또한 (ⅰ) 이용자로부터 제 2 입력을 수신하고 (ⅱ) 프로세서를 구동하여 제 2 입력을 나타내는 데이터를 출력하도록 구성되고, 상기 제 2 입력은 상기 이용자에게 프리젠테이션되는 숨은 데이터를 나타내는 정보 중 이용자가 원하는 부분들을 나타내는 것을 특징으로 하는 휴대용 통신 장치
  3. 제 2 항에 있어서,
    상기 프로세서에 전기적으로 접속되고 상기 프로세서로부터의 출력을 수신하여 그 수신된 출력에 대응하는 신호를 송신하도록 구성된 출력 메카니즘을 더 구비하는 것을 특징으로 하는 휴대용 통신 장치.
  4. 제 3 항에 있어서,
    상기 송신된 신호는 컴퓨터 네트워크 기능부들을 활성화시키는 것을 특징으로 하는 휴대용 통신 장치.
  5. 제 3 항에 있어서,
    (ⅰ) 상기 프로세서로부터의 출력을 수신하고 (ⅱ) 식별 정보를 상기 출력에 삽입하는 삽입 장치를 더 구비하고, 수신된 출력에 대응하는 상기 신호는 삽입된 식별 정보를 포함하는 것을 특징으로 하는 휴대용 통신 장치.
  6. 숨은 데이터를 포함하는 라디오 주파수 신호를 수신하여 상기 라디오 주파수 신호를 전기 출력 신호로 변환하도록 구성된 수신기;
    상기 숨은 데이터를 추출하고 숨은 데이터에 의해 나타내어지는 정보를 제공하기 위해 상기 수신기에 전기적으로 접속되고, 상기 전기 출력 신호를 수신하도록 구성된 프로세서;
    상기 프로세서에 전기적으로 접속되고, (ⅰ) 상기 이용자로부터 제 1 입력을 수신하고 (ⅱ) 상기 프로세서를 구동하여 상기 이용자의 제 1 입력에 따라 숨은 데이터의 추출을 선택적으로 개시하고, 상기 숨은 데이터에 의해 나타내어지는 정보를 출력으로서 발생하도록 구성된 이용자 인터페이스; 및
    상기 숨은 데이터에 의해 나타내어지는 정보를 상기 이용자에게 제공하도록 구성된 이용자 프리젠테이션 메카니즘을 포함하는 것을 특징으로 하는 휴대용 통신 장치.
  7. (ⅰ) 휴대용 통신 장치로부터의 방송된 정보를 수신하고 프로세싱하고, (ⅱ) 그 프로세싱된 방송 정보로부터 식별자 정보 및 링크 정보를 포함하는 숨은 데이터를 추출하고 (ⅲ) 상기 링크 정보에 의해 나타내어지는 목적지와 통신 링크를 확립하는 것을 특징으로 하는 기지국.
  8. 숨은 데이터를 포함하는 방송 오디오 신호를 프로세싱하는 통신 시스템으로서,
    (ⅰ) 오디오 신호와 (ⅱ) 상기 오디오 신호에 삽입된 숨은 데이터를 나타내는 음파를 수신하여 수신된 음파를 전기 출력 신호로 변환하도록 구성된 마이크로폰을 구비하는 휴대용 통신 장치;
    상기 숨은 데이터를 추출하고 상기 숨은 데이터를 나타내는 정보를 출력으로서 제공하기 위해 상기 마이크로폰에 전기적으로 접속되고, 상기 전기 출력 신호를수신하도록 구성되는 프로세서;
    상기 프로세스에 전기적으로 접속되고, (ⅰ) 상기 이용자로부터 제 1 입력을 수신하고 (ⅱ) 상기 프로세서를 구동하여 상기 이용자의 제 1 입력에 따라 상기 숨은 데이터의 추출을 선택적으로 개시하고, 상기 숨은 데이터에 의해 나타내어지는 정보를 출력으로서 발생하도록 구성된 이용자 인터페이스;
    상기 숨은 데이터에 의해 나타난 정보를 상기 이용자에게 제공하도록 구성된 이용자 프리젠테이션 메카니즘;
    상기 프로세서에 전기적으로 접속되고, 상기 프로세서로부터의 출력을 수신하여 수신된 출력에 대응하는 신호를 송신하도록 구성된 출력 메카니즘; 및
    (ⅰ) 휴대용 통신 장치로부터의 출력에 대응하는 신호를 수신하고 프로세싱하고, (ⅱ) 프로세싱된 신호로부터 식별자 정보 및 링크 정보를 포함하는 숨은 데이터를 추출하며, (ⅲ) 상기 링크 정보에 의해 나타내어지는 목적지와 데이터 링크를 확립하도록 구성되는 기지국을 포함하고,
    상기 이용자 인터페이스는 또한 (ⅰ) 상기 이용자로부터 제 2 입력을 수신하고 (ⅱ) 상기 프로세서를 구동시켜 상기 제 2 입력을 나타내는 데이터를 출력하도록 구성되고,
    상기 제 2 입력은 상기 이용자에게 제공된 숨은 데이터에 의해 나타내어지는 정보중 이용자가 원하는 부분들을 나타내는 것을 특징으로 하는 통신 시스템.
  9. (ⅰ) 오디오 신호와 (ⅱ) 상기 오디오 신호에 삽입된 숨은 데이터를 나타내는 방송 신호를 수신하고, 수신된 방송 신호를 전기 출력 신호로 변환하도록 구성된 수신기;
    상기 수신기에 전기적으로 접속되고, 상기 숨은 데이터를 추출하기 위해 전기 출력 신호를 수신하고, 상기 숨은 데이터를 나타내는 정보를 출력으로서 제공하도록 구성된 프로세서;
    상기 프로세서에 전기적으로 접속되고, (ⅰ) 이용자로부터 입력을 수신하고 (ⅱ) 그 입력에 따라 프로세서를 구동시켜 상기 숨은 데이터의 추출을 선택적으로 개시하도록 구성된 이용자 인터페이스; 및
    상기 숨은 데이터에 의해 나타난 정보를 상기 이용자에게 제공하도록 구성되는 이용자 프리젠테이션 메카니즘을 포함하는 것을 특징으로 하는 휴대용 통신 장치.
  10. 프로세서, 이용자 인터페이스, 및 이용자 프레젠테이션 인터페이스, 및 이용자 프리젠테이션 메카니즘를 구비하는 시스템을 이용하는 통신 방법으로서,
    (ⅰ) 오디오 신호 및 (ⅱ) 상기 오디오 신호에 삽입된 숨은 데이터를 나타내는 음파를 마이크로폰을 이용하여 수신하고, 수신된 음파를 전기 신호로 변환하는 단계;
    이용자로부터의 제 1 입력에 따라 상기 전기 신호로부터 숨은 데이터를 선택적으로 추출하고, 상기 숨은 데이터를 나타내는 정보를 발생하는 단계; 및
    상기 숨은 데이터를 나타내는 정보를 이용자에게 발생하는 단계를 포함하는것을 특징으로 하는 방법.
  11. 오디오 콘텐트를 나타내며 내부에 숨은 정보가 포함된 데이터 신호의 방송에 기초하여 엔티티 각각이 수입 분배액을 받는 복수의 상기 엔티티 간에 방송 수입을 분배하는 방법으로서,
    각 엔티티의 하나 이상의 아이덴티티를 포함하는 상기 숨은 정보를 갖는 데이터 신호를 방송하는 단계;
    휴대용 통신 장치에서 방송되는 상기 데이터 신호를 수신하는 단계;
    상기 숨은 정보와 관련된 이용자 선택이 용이하도록 수신된 상기 방송 데이터 신호들에서 정보 콘텐트로부터 숨은 정보를 분리하고 상기 숨은 정보를 이용자에게 제공하는 단계;
    상기 이용자 선택을 수입 결정 센터에 무선으로 송신하는 단계;
    상기 방송 데이터 신호 및 상기 이용자 선택에 기초하여, 복수의 엔티티의 각각에 대한 수입 분배액을 결정하는 단계; 및
    결정된 수입 분배액을 상기 복수의 엔티티의 각각에 할당하는 단계를 포함하는 것을 특징으로 하는 방법.
  12. 제 11 항에 있어서,
    상기 분리하는 단계는 방송 데이터 신호들을 전기 신호들로 변환하고 전기 신호들로부터 숨은 정보를 추출하는 단계를 포함하는 것을 특징으로 하는 방법.
  13. 제 11 항에 있어서,
    상기 무선 송신 단계는 이용자 선택을 무선 네트워크 리소스에 송신하는 단계를 포함하고, 상기 무선 네트워크 리소스는 적어도 간접적으로 상기 수입 결정 센터에 결합된 것을 특징으로 하는 방법.
KR1020027014497A 2000-04-27 2001-04-26 오디오 신호에 삽입된 은닉 데이터를 추출, 디코딩, 및 이용하기 위한 시스템 및 방법 KR100766762B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US20052700P 2000-04-27 2000-04-27
US60/200,527 2000-04-27
US09/805,679 2001-03-13
US09/805,679 US20010055391A1 (en) 2000-04-27 2001-03-13 System and method for extracting, decoding, and utilizing hidden data embedded in audio signals

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020077015623A Division KR100770187B1 (ko) 2000-04-27 2001-04-26 오디오 신호에 삽입된 은닉 데이터를 추출, 디코딩, 및이용하기 위한 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20020093994A true KR20020093994A (ko) 2002-12-16
KR100766762B1 KR100766762B1 (ko) 2007-10-17

Family

ID=26895838

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020077015623A KR100770187B1 (ko) 2000-04-27 2001-04-26 오디오 신호에 삽입된 은닉 데이터를 추출, 디코딩, 및이용하기 위한 시스템 및 방법
KR1020027014497A KR100766762B1 (ko) 2000-04-27 2001-04-26 오디오 신호에 삽입된 은닉 데이터를 추출, 디코딩, 및 이용하기 위한 시스템 및 방법

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020077015623A KR100770187B1 (ko) 2000-04-27 2001-04-26 오디오 신호에 삽입된 은닉 데이터를 추출, 디코딩, 및이용하기 위한 시스템 및 방법

Country Status (6)

Country Link
US (3) US20010055391A1 (ko)
EP (1) EP1277297A2 (ko)
JP (1) JP5198706B2 (ko)
KR (2) KR100770187B1 (ko)
AU (1) AU2001253811A1 (ko)
WO (1) WO2001082554A2 (ko)

Families Citing this family (120)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5822436A (en) * 1996-04-25 1998-10-13 Digimarc Corporation Photographic products and methods employing embedded information
US6522770B1 (en) 1999-05-19 2003-02-18 Digimarc Corporation Management of documents and other objects using optical devices
US8094949B1 (en) 1994-10-21 2012-01-10 Digimarc Corporation Music methods and systems
US7711564B2 (en) 1995-07-27 2010-05-04 Digimarc Corporation Connected audio and other media objects
US7006661B2 (en) 1995-07-27 2006-02-28 Digimarc Corp Digital watermarking systems and methods
US20030040326A1 (en) * 1996-04-25 2003-02-27 Levy Kenneth L. Wireless methods and devices employing steganography
US8095796B2 (en) 1999-05-19 2012-01-10 Digimarc Corporation Content identifiers
US8752118B1 (en) 1999-05-19 2014-06-10 Digimarc Corporation Audio and video content-based methods
US7185201B2 (en) 1999-05-19 2007-02-27 Digimarc Corporation Content identifiers triggering corresponding responses
US8355525B2 (en) 2000-02-14 2013-01-15 Digimarc Corporation Parallel processing of digital watermarking operations
US6834308B1 (en) 2000-02-17 2004-12-21 Audible Magic Corporation Method and apparatus for identifying media content presented on a media playing device
JP4494389B2 (ja) * 2000-04-14 2010-06-30 日本電信電話株式会社 放送情報に関連した情報の取得方法及びシステム並びに装置
US20010055391A1 (en) * 2000-04-27 2001-12-27 Jacobs Paul E. System and method for extracting, decoding, and utilizing hidden data embedded in audio signals
US7228327B2 (en) * 2000-05-08 2007-06-05 Hoshiko Llc Method and apparatus for delivering content via information retrieval devices
US6970886B1 (en) 2000-05-25 2005-11-29 Digimarc Corporation Consumer driven methods for associating content indentifiers with related web addresses
US8594364B2 (en) * 2000-11-02 2013-11-26 Digimarc Corporation Batch identifier registration and embedding in media signals
US20020080976A1 (en) * 2000-12-14 2002-06-27 Schreer Scott P. System and method for accessing authorized recordings
WO2002051063A1 (en) 2000-12-21 2002-06-27 Digimarc Corporation Methods, apparatus and programs for generating and utilizing content signatures
US9001702B2 (en) 2000-12-26 2015-04-07 Polycom, Inc. Speakerphone using a secure audio connection to initiate a second secure connection
US7864938B2 (en) 2000-12-26 2011-01-04 Polycom, Inc. Speakerphone transmitting URL information to a remote device
US7339605B2 (en) 2004-04-16 2008-03-04 Polycom, Inc. Conference link between a speakerphone and a video conference unit
US8977683B2 (en) 2000-12-26 2015-03-10 Polycom, Inc. Speakerphone transmitting password information to a remote device
US8948059B2 (en) 2000-12-26 2015-02-03 Polycom, Inc. Conference endpoint controlling audio volume of a remote device
US8964604B2 (en) 2000-12-26 2015-02-24 Polycom, Inc. Conference endpoint instructing conference bridge to dial phone number
US20020141582A1 (en) * 2001-03-28 2002-10-03 Kocher Paul C. Content security layer providing long-term renewable security
US7472075B2 (en) * 2001-03-29 2008-12-30 Intellisist, Inc. System and method to associate broadcast radio content with a transaction via an internet server
US20020144130A1 (en) * 2001-03-29 2002-10-03 Koninklijke Philips Electronics N.V. Apparatus and methods for detecting illicit content that has been imported into a secure domain
EP1490767B1 (en) * 2001-04-05 2014-06-11 Audible Magic Corporation Copyright detection and protection system and method
US7046819B2 (en) 2001-04-25 2006-05-16 Digimarc Corporation Encoded reference signal for digital watermarks
CA2446707C (en) 2001-05-10 2013-07-30 Polycom Israel Ltd. Control unit for multipoint multimedia/audio system
US8934382B2 (en) 2001-05-10 2015-01-13 Polycom, Inc. Conference endpoint controlling functions of a remote device
US8976712B2 (en) 2001-05-10 2015-03-10 Polycom, Inc. Speakerphone and conference bridge which request and perform polling operations
US7689506B2 (en) 2001-06-07 2010-03-30 Jpmorgan Chase Bank, N.A. System and method for rapid updating of credit information
CA2451616A1 (en) * 2001-06-25 2003-01-03 Vincent Sethi Electronic vouchers and a system and method for issuing the same
US7266839B2 (en) 2001-07-12 2007-09-04 J P Morgan Chase Bank System and method for providing discriminated content to network users
US8972481B2 (en) 2001-07-20 2015-03-03 Audible Magic, Inc. Playlist generation method and apparatus
EP1306991A1 (en) * 2001-10-23 2003-05-02 Hewlett-Packard Company Conveying information to a communication device using sonic representations
US20030088773A1 (en) * 2001-11-07 2003-05-08 Koninklijke Philips Electronics N. V. Method of and apparatus for preventing illicit copying of digital content
US7987501B2 (en) 2001-12-04 2011-07-26 Jpmorgan Chase Bank, N.A. System and method for single session sign-on
US7742588B2 (en) 2001-12-31 2010-06-22 Polycom, Inc. Speakerphone establishing and using a second connection of graphics information
US8934381B2 (en) 2001-12-31 2015-01-13 Polycom, Inc. Conference endpoint instructing a remote device to establish a new connection
US8705719B2 (en) 2001-12-31 2014-04-22 Polycom, Inc. Speakerphone and conference bridge which receive and provide participant monitoring information
US8885523B2 (en) 2001-12-31 2014-11-11 Polycom, Inc. Speakerphone transmitting control information embedded in audio information through a conference bridge
US7978838B2 (en) 2001-12-31 2011-07-12 Polycom, Inc. Conference endpoint instructing conference bridge to mute participants
US8102984B2 (en) 2001-12-31 2012-01-24 Polycom Inc. Speakerphone and conference bridge which receive and provide participant monitoring information
US8144854B2 (en) 2001-12-31 2012-03-27 Polycom Inc. Conference bridge which detects control information embedded in audio information to prioritize operations
US7787605B2 (en) 2001-12-31 2010-08-31 Polycom, Inc. Conference bridge which decodes and responds to control information embedded in audio information
US8223942B2 (en) * 2001-12-31 2012-07-17 Polycom, Inc. Conference endpoint requesting and receiving billing information from a conference bridge
US8947487B2 (en) 2001-12-31 2015-02-03 Polycom, Inc. Method and apparatus for combining speakerphone and video conference unit operations
US20030188020A1 (en) * 2002-03-29 2003-10-02 Steven Barile Tangible artifact referencing digital content
US9349411B2 (en) * 2002-07-16 2016-05-24 Digimarc Corporation Digital watermarking and fingerprinting applications for copy protection
US8301493B2 (en) 2002-11-05 2012-10-30 Jpmorgan Chase Bank, N.A. System and method for providing incentives to consumers to share information
US8407752B2 (en) * 2004-03-18 2013-03-26 Digimarc Corporation Synchronizing broadcast content with corresponding network content
WO2007017887A1 (en) * 2005-08-10 2007-02-15 Hewlett-Packard Development Company, L.P. Delivering specific contents to specific recipients using broadcast networks
US9021520B2 (en) * 2004-09-29 2015-04-28 Hewlett-Packard Development Company, L.P. Systems and methods for providing and processing print-augmented broadcast signals
WO2006035450A1 (en) 2004-09-29 2006-04-06 Hewlett-Packard Development Company L.P. Systems and methods for soliciting feedback using print-augmented broadcast signal
US8126029B2 (en) 2005-06-08 2012-02-28 Polycom, Inc. Voice interference correction for mixed voice and spread spectrum data signaling
US8199791B2 (en) 2005-06-08 2012-06-12 Polycom, Inc. Mixed voice and spread spectrum data signaling with enhanced concealment of data
US7796565B2 (en) * 2005-06-08 2010-09-14 Polycom, Inc. Mixed voice and spread spectrum data signaling with multiplexing multiple users with CDMA
US10015630B2 (en) 2016-09-15 2018-07-03 Proximity Grid, Inc. Tracking people
US10390212B2 (en) 2016-09-15 2019-08-20 Proximity Grid, Inc. Tracking system having an option of not being trackable
US7761400B2 (en) * 2005-07-22 2010-07-20 John Reimer Identifying events
GB0516794D0 (en) * 2005-08-16 2005-09-21 Vodafone Plc Data transmission
US20080066092A1 (en) * 2006-08-09 2008-03-13 Michael Laude System for interactive images and video
KR20080029446A (ko) * 2006-09-29 2008-04-03 (주)이스트랩 오디오 워터마킹을 이용하여 정보를 제공하는 시스템 및 그제공 방법.
US8391155B2 (en) * 2006-11-13 2013-03-05 Joseph Harb Digital content download associated with corresponding radio broadcast items
US8310985B2 (en) * 2006-11-13 2012-11-13 Joseph Harb Interactive radio advertising and social networking
US8718538B2 (en) * 2006-11-13 2014-05-06 Joseph Harb Real-time remote purchase-list capture system
US8296195B2 (en) * 2006-11-13 2012-10-23 Joseph Harb Broadcast programming data capture
US8462645B1 (en) 2006-11-13 2013-06-11 Joseph Harb Interactive advertising system, business methods and software
GB0710211D0 (en) * 2007-05-29 2007-07-11 Intrasonics Ltd AMR Spectrography
US8006314B2 (en) 2007-07-27 2011-08-23 Audible Magic Corporation System for identifying content of digital data
US8805110B2 (en) 2008-08-19 2014-08-12 Digimarc Corporation Methods and systems for content processing
JP5343758B2 (ja) * 2008-08-21 2013-11-13 ヤマハ株式会社 音声再生装置
CN102144398A (zh) * 2008-10-28 2011-08-03 爱尔比奎特公司 对车辆内无线电设备中播放的音乐的购买
US8918333B2 (en) 2009-02-23 2014-12-23 Joseph Harb Method, system and apparatus for interactive radio advertising
US8577345B2 (en) * 2009-03-02 2013-11-05 First Data Corporation Systems, methods, and apparatus for providing promotion information to a mobile device
US8577346B2 (en) * 2009-03-02 2013-11-05 First Data Corporation Systems, methods, and apparatus for receiving promotion information by a mobile device
US20100222037A1 (en) * 2009-03-02 2010-09-02 First Data Corporation Systems, Methods, and Apparatus for Providing Terms and Conditions and Program Enrollment Information to a Mobile Device
US8725121B2 (en) * 2009-03-02 2014-05-13 First Data Corporation Systems, methods, and devices for prompting mobile device users for feedback information using tone transmissions
US9077800B2 (en) * 2009-03-02 2015-07-07 First Data Corporation Systems, methods, and devices for processing feedback information received from mobile devices responding to tone transmissions
US20100268573A1 (en) * 2009-04-17 2010-10-21 Anand Jain System and method for utilizing supplemental audio beaconing in audience measurement
US10008212B2 (en) * 2009-04-17 2018-06-26 The Nielsen Company (Us), Llc System and method for utilizing audio encoding for measuring media exposure with environmental masking
KR101683676B1 (ko) * 2010-07-22 2016-12-07 삼성전자 주식회사 사운드를 이용한 증강 현실 서비스 제공 장치 및 방법
US9876905B2 (en) * 2010-09-29 2018-01-23 Genesys Telecommunications Laboratories, Inc. System for initiating interactive communication in response to audio codes
EP2663068A1 (en) * 2011-01-07 2013-11-13 Yamaha Corporation Information-providing system, portable terminal device, server, and program
US20130058507A1 (en) * 2011-08-31 2013-03-07 The Tc Group A/S Method for transferring data to a musical signal processor
US9460465B2 (en) 2011-09-21 2016-10-04 Genesys Telecommunications Laboratories, Inc. Graphical menu builder for encoding applications in an image
JP5364141B2 (ja) * 2011-10-28 2013-12-11 楽天株式会社 携帯端末、店舗端末、送信方法、受信方法、決済システム、決済方法、プログラムおよびコンピュータ読み取り可能な記憶媒体
JP5429826B2 (ja) * 2011-12-28 2014-02-26 株式会社スポットライト 超音波通信システム及びビーコン
US9812137B2 (en) 2012-07-25 2017-11-07 Paypal, Inc. Data communication using audio patterns systems and methods
US8930005B2 (en) * 2012-08-07 2015-01-06 Sonos, Inc. Acoustic signatures in a playback system
US9081778B2 (en) 2012-09-25 2015-07-14 Audible Magic Corporation Using digital fingerprints to associate data with a work
WO2014068065A2 (en) * 2012-10-31 2014-05-08 Jf Oceans Method for remotely controlling human perceivable output of a plurality of devices, system, transmitter, device, software product and human unperceivable acoustic signal for performing the method
KR101994294B1 (ko) * 2012-12-07 2019-06-28 한국과학기술원 Tv를 이용한 광고 시스템 및 방법
TW201444360A (zh) * 2013-05-03 2014-11-16 Ikala Interactive Media Inc 一種雲端互動服務系統及其運作方法
JP6423187B2 (ja) * 2013-10-29 2018-11-14 楽天株式会社 近距離場音響信号を使用したエンドユーザデバイスの構成
KR20150057707A (ko) * 2013-11-20 2015-05-28 삼성전자주식회사 파일 공유 방법 및 그 전자 장치
GB2522611A (en) * 2013-12-13 2015-08-05 Xspet Ltd Transaction making method and system
WO2015100430A1 (en) 2013-12-24 2015-07-02 Digimarc Corporation Methods and system for cue detection from audio input, low-power data processing and related arrangements
TW201528803A (zh) * 2014-01-10 2015-07-16 Waystorm Co Ltd 行動廣告推送系統及其操作行動電子裝置的方法
KR20150106299A (ko) * 2014-03-11 2015-09-21 주식회사 사운들리 저 전력 연관 콘텐츠 제공 시스템, 방법, 및 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
US10410643B2 (en) * 2014-07-15 2019-09-10 The Nielson Company (Us), Llc Audio watermarking for people monitoring
JP5887446B1 (ja) 2014-07-29 2016-03-16 ヤマハ株式会社 情報管理システム、情報管理方法およびプログラム
JP5871088B1 (ja) 2014-07-29 2016-03-01 ヤマハ株式会社 端末装置、情報提供システム、情報提供方法およびプログラム
JP6484958B2 (ja) * 2014-08-26 2019-03-20 ヤマハ株式会社 音響処理装置、音響処理方法およびプログラム
US10210545B2 (en) * 2015-12-30 2019-02-19 TCL Research America Inc. Method and system for grouping devices in a same space for cross-device marketing
US10699296B2 (en) * 2015-12-30 2020-06-30 Verizon Patent And Licensing, Inc. Native video advertising with voice-based ad management and machine-to-machine ad bidding
JP6231244B1 (ja) * 2017-08-04 2017-11-15 ヤマハ株式会社 再生システム、端末装置、情報提供方法、端末装置の動作方法およびプログラム
US11107128B1 (en) 2017-10-16 2021-08-31 Amazon Technologies, Inc. Portable interactive product displays with region-specific products
US10580066B1 (en) 2017-10-16 2020-03-03 Amazon Technologies, Inc. Personalizing portable shopping displays using mobile devices and inaudible tones
CN108206976B (zh) * 2018-01-12 2020-06-23 和君纵达数据科技有限公司 选择性播放声音信号的方法和用户终端
JP6596144B2 (ja) * 2018-12-05 2019-10-23 ヤマハ株式会社 情報提供方法、音響処理装置およびプログラム
US10756795B2 (en) 2018-12-18 2020-08-25 XCOM Labs, Inc. User equipment with cellular link and peer-to-peer link
US11063645B2 (en) 2018-12-18 2021-07-13 XCOM Labs, Inc. Methods of wirelessly communicating with a group of devices
US11330649B2 (en) 2019-01-25 2022-05-10 XCOM Labs, Inc. Methods and systems of multi-link peer-to-peer communications
US10756767B1 (en) 2019-02-05 2020-08-25 XCOM Labs, Inc. User equipment for wirelessly communicating cellular signal with another user equipment
WO2021021059A1 (en) * 2019-08-01 2021-02-04 Ertuerk Ismail Robust code / data hiding method against analog transmission (over the air) for digital audio
US11665538B2 (en) * 2019-09-16 2023-05-30 International Business Machines Corporation System for embedding an identification code in a phone call via an inaudible signal
JP2021005871A (ja) * 2020-08-20 2021-01-14 Toa株式会社 放送装置、放送システム、及びコンピュータプログラム

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6192068A (ja) * 1984-10-11 1986-05-10 Matsushita Electric Ind Co Ltd ２線式電話装置
US4916691A (en) * 1988-10-28 1990-04-10 American Telephone And Telegraph Company Telecommunications switching system
EP0389689B1 (en) * 1989-03-28 1997-06-04 POLYGRAM MANUFACTURING & DISTRIBUTION CENTRES GMBH Method for transmitting a transmission signal and a transmitting device and a receiving device for use in the method
JPH04334227A (ja) * 1991-05-10 1992-11-20 Matsushita Electric Ind Co Ltd 有料放送課金方法
US7010144B1 (en) * 1994-10-21 2006-03-07 Digimarc Corporation Associating data with images in imaging systems
US6427064B1 (en) * 1994-01-05 2002-07-30 Daniel A. Henderson Method and apparatus for maintaining a database in a portable communication device
US6947571B1 (en) * 1999-05-19 2005-09-20 Digimarc Corporation Cell phones with optical capabilities, and related applications
EP0713335A2 (en) * 1994-11-15 1996-05-22 AT&T Corp. System and method for wireless capture of encoded data transmitted with a television, video or audio signal and subsequent initiation of a transaction using such data
JPH0969820A (ja) * 1995-08-30 1997-03-11 Toshiba Corp データ受信装置
JPH08149163A (ja) * 1994-11-18 1996-06-07 Toshiba Corp 信号伝送装置及び受信装置及び方法
KR960020437A (ko) * 1994-11-18 1996-06-17 사또오 후미오 신호 전송장치 및 수신장치
US5774452A (en) * 1995-03-14 1998-06-30 Aris Technologies, Inc. Apparatus and method for encoding and decoding information in audio signals
EP1049320B1 (en) * 1995-05-08 2003-01-02 Digimarc Corporation Initiating a link between computers based on the decoding of an address steganographically embedded in an audio object
US7562392B1 (en) * 1999-05-19 2009-07-14 Digimarc Corporation Methods of interacting with audio and ambient music
US6505160B1 (en) * 1995-07-27 2003-01-07 Digimarc Corporation Connected audio and other media objects
US6965682B1 (en) * 1999-05-19 2005-11-15 Digimarc Corp Data transmission by watermark proxy
US6311214B1 (en) * 1995-07-27 2001-10-30 Digimarc Corporation Linking of computers based on optical sensing of digital data
US6408331B1 (en) * 1995-07-27 2002-06-18 Digimarc Corporation Computer linking methods using encoded graphics
US5822360A (en) 1995-09-06 1998-10-13 Solana Technology Development Corporation Method and apparatus for transporting auxiliary data in audio signals
US5822432A (en) 1996-01-17 1998-10-13 The Dice Company Method for human-assisted random key generation and application for digital watermark system
US6088586A (en) * 1996-01-24 2000-07-11 Codem Systems, Inc. System for signaling within a cellular telephone system
JP3109575B2 (ja) * 1996-09-30 2000-11-20 日本電気株式会社 画像データ処理装置
US5893903A (en) * 1996-12-20 1999-04-13 At&T Corp. Multimedia message system with revenue allocation
EP1016021A4 (en) * 1997-01-27 2004-05-19 Benjamin Slotznick SYSTEM FOR DELIVERING AND SIMULTANEOUSLY PLAYING PRIMARY AND SECONDARY INFORMATION AND FOR PLAYING ONLY SECONDARY INFORMATION DURING THE INTERSTITIAL TIME
US6125172A (en) * 1997-04-18 2000-09-26 Lucent Technologies, Inc. Apparatus and method for initiating a transaction having acoustic data receiver that filters human voice
US5940135A (en) * 1997-05-19 1999-08-17 Aris Technologies, Inc. Apparatus and method for encoding and decoding information in analog signals
US6366876B1 (en) * 1997-09-29 2002-04-02 Sun Microsystems, Inc. Method and apparatus for assessing compatibility between platforms and applications
US6351467B1 (en) * 1997-10-27 2002-02-26 Hughes Electronics Corporation System and method for multicasting multimedia content
US6941154B1 (en) * 1998-01-09 2005-09-06 Swisscom Mobile Ag Telecommunication method
JP3818474B2 (ja) * 1998-03-10 2006-09-06 日本ビクター株式会社 ディスク状記録媒体の再生装置
US6389055B1 (en) * 1998-03-30 2002-05-14 Lucent Technologies, Inc. Integrating digital data with perceptible signals
US6188767B1 (en) * 1998-04-29 2001-02-13 Motorola, Inc. Method of providing group call services in a CDMA communications system
US6553022B2 (en) * 1998-07-16 2003-04-22 Openwave Systems, Inc. Method and apparatus for providing a connection to a data network
JP2000050048A (ja) * 1998-07-29 2000-02-18 Konica Corp 画像処理装置
US6209094B1 (en) * 1998-10-14 2001-03-27 Liquid Audio Inc. Robust watermark method and apparatus for digital signals
US6870914B1 (en) * 1999-01-29 2005-03-22 Sbc Properties, L.P. Distributed text-to-speech synthesis between a telephone network and a telephone subscriber unit
US6510234B1 (en) * 1999-05-12 2003-01-21 Signafy, Inc. Method for increasing the functionality of a media player/recorder device
US6456725B1 (en) * 1999-06-24 2002-09-24 Signafy, Inc. Method for increasing the functionality of a media player/recorder device or an application program
AU6695100A (en) * 1999-07-19 2001-02-05 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Method and device for identifying pieces of music
US7451177B1 (en) * 1999-08-12 2008-11-11 Avintaquin Capital, Llc System for and method of implementing a closed loop response architecture for electronic commerce
US7003789B1 (en) * 1999-12-21 2006-02-21 International Business Machines Corporation Television commerce payments
US6737957B1 (en) * 2000-02-16 2004-05-18 Verance Corporation Remote control signaling using audio watermarks
US7142691B2 (en) * 2000-03-18 2006-11-28 Digimarc Corporation Watermark embedding functions in rendering description files
US20010055391A1 (en) 2000-04-27 2001-12-27 Jacobs Paul E. System and method for extracting, decoding, and utilizing hidden data embedded in audio signals
EP1499033B1 (en) * 2003-07-16 2007-03-28 Sony Deutschland GmbH Detection of broadcast signals for defining useable frequency bands for powerline communication

Also Published As

Publication number Publication date
US20010055391A1 (en) 2001-12-27
US20090132391A1 (en) 2009-05-21
KR20070092271A (ko) 2007-09-12
WO2001082554A3 (en) 2002-09-12
US20130253918A1 (en) 2013-09-26
KR100766762B1 (ko) 2007-10-17
KR100770187B1 (ko) 2007-10-25
JP2003536094A (ja) 2003-12-02
JP5198706B2 (ja) 2013-05-15
US8462950B2 (en) 2013-06-11
WO2001082554A2 (en) 2001-11-01
AU2001253811A1 (en) 2001-11-07
EP1277297A2 (en) 2003-01-22

Similar Documents

Publication Publication Date Title
KR100770187B1 (ko) 오디오 신호에 삽입된 은닉 데이터를 추출, 디코딩, 및이용하기 위한 시스템 및 방법
US20050028189A1 (en) System to provide access to information related to a broadcast signal
KR101484321B1 (ko) 미디어 콘텐츠 주문 및 배달 방법 및 시스템
US6925489B1 (en) Methods and apparatus for identification and purchase of broadcast digital music and other types of information
JP4880650B2 (ja) 通信システム
US8155582B2 (en) Methods and systems employing digital content
US9100132B2 (en) Systems and methods for gathering audience measurement data
CN105392022B (zh) 基于音频水印的信息交互方法与装置
US20090077604A1 (en) Connected Video and Audio
US20020152388A1 (en) Method and arrangement for enabling disintermediation, and receiver for use thereby
JP2004531103A6 (ja) 通信システム
JP2009276776A (ja) 楽曲同定装置及び方法、楽曲同定配信装置及び方法
KR20020063917A (ko) 렌더링 디바이스 및 장치
JP4433594B2 (ja) 楽曲同定装置及び方法
JP2002150102A (ja) 商取引方法
JP2002091455A (ja) 端末装置及び電子音楽配信システム
EP1973103B1 (en) System and method for providing additional information related to an audio piece
JP2000322443A (ja) 楽曲特定情報の端末装置、楽曲の送受信端末装置およびデータベース装置
WO2003017135A2 (en) Assisted web-browsing system
JP2000252929A (ja) 送信装置および送信方法、受信装置および受信方法、並びに提供媒体

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
A107 Divisional application of patent
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
G170 Re-publication after modification of scope of protection [patent]
FPAY Annual fee payment

Payment date: 20120927

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20130927

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140929

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20150930

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20160929

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20180928

Year of fee payment: 12

FPAY Annual fee payment

Payment date: 20190924

Year of fee payment: 13