KR20060124062A

KR20060124062A - 멀티모달을 이용하여 화자 및 음성을 인증하는 복합 인증방법 및 시스템

Info

Publication number: KR20060124062A
Application number: KR1020050045803A
Authority: KR
Inventors: 김경민; 나동원; 엄봉수
Original assignee: 에스케이 텔레콤주식회사
Priority date: 2005-05-30
Filing date: 2005-05-30
Publication date: 2006-12-05

Abstract

본 발명은 멀티모달(Multi-modal)을 이용하여 화자와 음성을 인증하는 복합 인증 방법 및 시스템에 관한 것이다.

본 발명은 (a) 이동통신 단말기로부터 무선 데이터 서비스 중에 입력된 음성을 변환한 결제용 발성 데이터를 수신하는 단계 (b) 음성 인식 시스템을 이용하여 결제용 발성 데이터에 포함된 음성을 인식하여 제 1 인증을 수행하는 단계; (c) 단계 (b)에서 제 1 인증을 수행한 결과, 제 1 인증에 성공한 경우에는 화자 인증 시스템을 이용하여 결제용 발성 데이터에 포함된 음성의 목소리 특성에 대한 제 2 인증을 수행하는 단계; (d) 단계 (c)에서 제 2 인증을 수행한 결과, 제 2 인증에 성공한 경우에는 이동통신 단말기로 인증 성공을 통보하는 단계를 포함하는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 방법을 제공한다.

본 발명에 의하면, 신뢰할 수 있는 보안을 도모할 수 있고, 간편하고 안전하게 사용자 인증을 할 수 있는 편리한 효과가 있다.

멀티모달, 화자 인증, 음성 인식, 모바일 결제, 무선 데이터 서비스, Multi-modal, Speaker Verification, Speech Recognition, Mobile

Description

멀티모달을 이용하여 화자 및 음성을 인증하는 복합 인증 방법 및 시스템{Complex Certificaton Method and System for Certificating Speaker and Speech by Using Multi-modal}

도 1은 본 발명의 바람직한 실시예에 따른 멀티모달을 이용하여 화자와 음성을 인증하는 모바일 결제 인증 시스템을 간략하게 나타낸 블록 구성도,

도 2는 본 발명의 바람직한 실시예에 따른 화자 인증 키워드를 등록하는 방법을 설명하기 위한 순서도,

도 3은 본 발명의 바람직한 실시예에 따른 멀티모달을 이용한 화자와 음성을 인증하는 모바일 결제 인증 방법을 설명하기 위한 순서도,

도 4는 본 발명의 바람직한 실시예에 따른 멀티모달을 이용하여 화자와 음성을 인증하는 모바일 결제 인증을 수행하는 과정을 설명하기 위한 예시도이다.

< 도면의 주요 부분에 대한 부호의 설명 >

110: 이동통신 단말기 120: 이동통신망

122: 기지국 전송기 124: 기지국 제어기

126: 이동통신 교환국 128: 데이터 코어망

130: 멀티모달 서버 140: 복합 인증 서버

150: 화자 인증 시스템 152: 화자 인증 서버

154: 목소리 DB 160: 음성 인식 시스템

162: 음성 인식 서버 164: 키워드 DB

본 발명은 멀티모달(Multi-modal)을 이용하여 화자 인증(Speaker Verification)과 음성 인식(Speech Recognition)을 결합한 인증 방법 및 시스템에 관한 것이다. 더욱 상세하게는, 이동통신 단말기를 이용한 무선 데이터 서비스를 제공하는 데에 있어서, 무선 데이터 서비스 중에 사용자를 인증할 때에 음성 입출력, 문자/그래픽 출력, 버튼 입력 등이 가능한 사용자 인터페이스(UI: User Interface)인 멀티모달을 이용하여 음성으로 사용자를 인증하는 화자 인증과 음성을 변환하여 문자로서 인식하는 음성 인식을 결합하여 진정한 사용자를 인증하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 방법 및 시스템에 관한 것이다.

이동통신 시스템은 제 1 세대 아날로그 AMPS(Advanced Mobile Phone System) 방식과, 제 2 세대 셀룰러(Cellular) / 개인 휴대 통신(PCS: Personal Communication Service) 방식을 거쳐 발전하여 왔으며, 최근에는 정보통신의 발달로 ITU-R에서 표준으로 제정하고 있는 제 3 세대 이동통신 시스템인 IMT-2000(International Mobile Telecommunication 2000)이 상용화되고 있다. IMT-2000은 CDMA 2000 1X, 3X, EV-DO, WCDMA(Wide band CDMA) 등으로 기존의 IS-95A, IS- 95B 망에서 진화한 IS-95C 망을 이용하여 IS-95A, IS-95B 망에서 지원 가능한 데이터 전송 속도인 14.4 Kbps나 56 Kbps보다 훨씬 빠른 최고 144 Kbps의 전송 속도로 무선 인터넷을 제공할 수 있는 서비스이다. 특히 IMT-2000 서비스를 이용하면 기존의 음성 및 WBS(Wireless Broadcasting Service) 서비스 품질의 향상은 물론 각종 멀티미디어 서비스(AOD, VOD 등)를 더욱 빠른 속도로 제공할 수 있다.

또한, 최근에는 전술한 이동통신 시스템이 갖는 무선 인터넷 서비스를 제공하는 데에 있어서의 한계를 극복하기 위한 일환으로서, 이동하면서도 저렴한 요금으로 초고속 무선 인터넷 서비스를 이용할 수 있는 휴대 인터넷 시스템(HPi: High Speed Portable Internet System 또는 WiBro: Wireless Broadband Internet System)에 대한 개발이 진행 중에 있다. 휴대 인터넷 시스템은 노트북, PDA, Handheld PC 등 다양한 형태의 휴대용 단말기를 이용하여 실내 및 실외의 정지 환경에서와 보행 속도 및 중저속 이동 수준의 이동 환경에서 인터넷에 접속하여 다양한 정보 및 콘텐츠를 이용할 수 있는 서비스이다. 또한, 이동통신 가입자로 하여금 시속 60 km/h의 속도로 이동하면서 무선 인터넷을 이용할 수 있게 하고, 24 Mbps의 하향 전송 속도를 제공하고 MIMO(Multiple Input Multiple Output) 시스템을 적용하면 50 Mbps의 하향 전송 속도까지도 제공할 수 있는 IP(Internet Protocol) 기반의 무선 데이터 시스템이다.

이동통신 가입자는 이러한 이동통신 시스템을 이용하여 이동통신 단말기를 휴대하면서 음성 통신을 수행할 뿐만 아니라, 무선 데이터 기술, 무선 인터넷(Wireless Internet) 기술을 이용하여 이동통신 시스템을 통해 무선으로 인터넷에 접속하여 문자, 이미지, 음성 또는 동영상 등의 멀티미디어 데이터 서비스를 제공 받는다. 이러한 무선 인터넷 서비스 또는 무선 데이터 서비스는 이동통신 가입자가 이동통신 단말기를 이용하여 시간적 또는 공간적 제약 없이 인터넷에 접속하여 다양한 정보를 검색 및 다운로드할 수 있게 한다.

이러한 무선 인터넷 서비스, 무선 데이터 서비스가 발전함에 따라 이동통신 단말기를 이용하여 물품을 구매하는 모바일 결제 서비스가 등장하였고, 이동통신 가입자는 이러한 모바일 결제 서비스를 이용하여 원격에서 특정 사업자가 제공하는 서비스를 이용하고 그 대금을 이동통신 단말기로 결제하거나 오프라인에서 서비스를 제공 받거나 물품을 구매한 후에 이동통신 단말기로 대금을 결제하는 편의를 제공받는다.

한편, 통상적인 이동통신 단말기의 사용자 인터페이스는 음성만(Voice-Only)의 인터페이스와 디스플레이만(Display-Only)의 인터페이스로 구성되었다. 음성만의 인터페이스는 자동 응답 시스템(ARS: Automatic Response System) 대표되는 인터페이스 방식으로 DTMF(Dual Tone Multi Frequency)/음성 인식 입력과 음성 출력이 가능하지만, 음성 안내를 듣고 메뉴를 찾아가는 데에 불편하고, DTMF로는 이름이나 주소 같은 문자 데이터를 입력할 수 없는 단점이 있으며, 음성 인식의 경우에는 인식률에 한계가 있다. 또한, 디스플레이만의 인터페이스는 WAP(Wireless Application Protocol)으로 대표되는 인터페이스 방식으로 버튼입력과 화면출력이 가능하지만, 작은 화면으로 인해 출력 정보 내용이 잘 전달되지 않는 문제가 있고, 특정 환경(화면을 잘 보지 못하고, 버튼 입력이 어려운 환경)에서는 부적절한 단점 이 있다.

이에 대한 대안으로서, 이동통신 단말기의 사용자 인터페이스로 멀티모달 인터페이스가 등장하였다. 멀티모달 인터페이스는 다양한 입출력 방식을 제공하는 인터페이스로 정보 전달력을 향상시킬 수 있다. 멀티모달 인터페이스는 음성 인식 입력, 버튼 입력을 모두 제공하고, 음성 출력과 화면 출력을 모두 제공하여 사용자로부터 다양한 방식으로 데이터를 입력 받을 수 있다.

또 한편으로는, 이동통신 단말기를 이용하여 대금을 결제하는 모바일 결제 서비스는 그 편리함으로 인해 그 사용의 정도가 급속도로 증가하고 있다. 그러나 모바일 결제 서비스는 대금을 결제하는 이동통신 가입자가 진정한 구매자인지 여부를 결정하는 사용자 인증이 중요하다.

만일, 이동통신 가입자가 이동통신 단말기를 분실한 경우 이동통신 단말기를 습득한 부당 사용자가 습득한 이동통신 단말기를 이용하여 결제를 수행하면 결제 대금이 분실한 이동통신 가입자에게 청구가 되므로, 모바일 결제 시에는 결제를 시도하는 구매자가 이동통신 단말기의 진정한 사용자인지 여부를 엄격하게 확인해야 한다.

한편, 통상적으로 모바일 결제 서비스에는 비밀번호를 이용한 인증 방법과 스마트 카드를 이용한 인증 방법이 사용자 인증 방법으로 사용되고 있다. 비밀번호를 이용한 인증 방법은 모바일 결제 서비스 도중에 결제를 완료하기 전에 사용자로부터 비밀번호의 입력을 요구하고 입력된 비밀번호가 사전에 등록된 비밀번호와 일치하는지 여부를 확인하여 사용자를 인증한다. 스마트 카드를 이용한 인증 방법은 이동통신 단말기에 장착하는 스마트 카드로부터 인증 데이터를 읽어 들여 사전에 등록된 인증 데이터와 일치하는지 여부를 확인하여 사용자를 인증한다.

그런데 비밀번호를 이용한 인증 방법은 비밀번호가 누출된 경우 타인에 의해 비밀번호가 도용되어 부당하게 이용될 수 있는 문제점이 있으며, 스마트 카드를 이용한 인증 방법은 본인을 인증하기 위한 것이라기보다는 비대칭 암호화를 위한 사설키(Private Key)를 보관하고 연산하는 기능이어서 암호화에 가깝다.

이에 대한 대안으로 지문인식, 홍채인식, 목소리인식(화자 인증) 등의 생체인식을 이용한 본인 인증 방법이 있는데, 이중 지문인식은 특수한 단말에서만 가능하다는 단점이 있고, 홍채인식은 카메라의 정밀도가 높아야 하는 문제점이 있기 때문에 거의 모든 이동통신 단말기에서 수행할 수 있는 생체인식 방법은 화자 인증이 거의 유일한 방법이다.

화자 인증 방법은 종래에 개발이 되었으나, 자동 응답 시스템을 이용하여 목소리를 등록한 후 모바일 결제 시에 목소리를 인증하는 방식이 주를 이뤄 특정 자동 응답 시스템 번호에 전화를 걸어 목소리를 등록한 후 모바일 결제에 이용하는 번거로움으로 인해 그 활용이 미약하였다.

이러한 문제점을 해결하기 위해 본 발명은, 이동통신 단말기를 이용한 무선 데이터 서비스를 제공하는 데에 있어서, 무선 데이터 서비스 중에 사용자를 인증할 때에 음성 입출력, 문자/그래픽 출력, 버튼 입력 등이 가능한 사용자 인터페이스인 멀티모달을 이용하여 음성으로 사용자를 인증하는 화자 인증과 음성을 변환하여 문 자로서 인식하는 음성 인식을 결합하여 진정한 사용자를 인증하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 방법 및 시스템을 제공하는 데에 그 목적이 있다.

이러한 목적을 달성하기 위해 본 발명은, 무선 데이터 서비스를 수행하는 중에 인증을 수행하는 이동통신 단말기, 이동통신 단말기로 무선 데이터 서비스를 제공하는 이동통신망, 이동통신 단말기로 멀티모달(Multi-modal) 인터페이스를 제공하는 멀티모달 서버, 인증을 수행하는 복합 인증 서버, 음성을 인식하여 키워드를 확인하는 음성 인식 시스템 및 음성의 특성을 추출하여 화자를 확인하는 화자 인증 시스템을 포함하는 시스템에서, 인증을 수행하는 방법에 있어서, (a) 이동통신 단말기로부터 무선 데이터 서비스 중에 입력된 음성을 변환한 결제용 발성 데이터를 수신하는 단계 (b) 음성 인식 시스템을 이용하여 결제용 발성 데이터에 포함된 음성을 인식하여 제 1 인증을 수행하는 단계; (c) 단계 (b)에서 제 1 인증을 수행한 결과, 제 1 인증에 성공한 경우에는 화자 인증 시스템을 이용하여 결제용 발성 데이터에 포함된 음성의 목소리 특성에 대한 제 2 인증을 수행하는 단계; (d) 단계 (c)에서 제 2 인증을 수행한 결과, 제 2 인증에 성공한 경우에는 이동통신 단말기로 인증 성공을 통보하는 단계를 포함하는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 방법을 제공한다.

또한, 본 발명의 다른 목적에 의하면, 무선 데이터 서비스의 인증에 이용되는 음성을 등록하는 이동통신 단말기, 이동통신 단말기로 무선 데이터 서비스를 제 공하는 이동통신망, 이동통신 단말기로 멀티모달(Multi-modal) 인터페이스를 제공하는 멀티모달 서버, 음성을 등록하는 복합 인증 서버, 음성을 인식하여 키워드로 저장하는 음성 인식 시스템 및 음성의 특성을 추출하여 음성의 특성을 저장하는 화자 인증 시스템을 포함하는 시스템에서, 음성을 등록하는 방법에 있어서, (a) 이동통신 단말기로부터 음성을 변환한 등록용 발성 데이터를 수신하는 단계; (b) 음성 인식 시스템을 이용하여 등록용 발성 데이터에 포함된 음성을 분석하고, 정상 인식 여부를 확인한 후 음성을 인식하여 등록하는 단계; (c) 단계 (b)에서, 정상 인식 여부를 확인한 결과, 음성이 정상 인식된 경우에는 화자 인증 시스템을 이용하여 등록용 발성 데이터에 포함된 음성의 목소리의 특성을 추출하여 등록하는 단계를 포함하는 것을 특징으로 하는 인증을 위한 음성을 등록하는 방법을 제공한다.

또한, 본 발명의 또 다른 목적에 의하면, 사용자를 인증하는 시스템에 있어서, 음성을 입력 받아 음성을 등록용 발성 데이터로 변환하여 무선 데이터 서비스를 이용하여 전달하고, 음성을 입력 받아 음성을 결제용 발성 데이터로 변환하여 무선 데이터 서비스를 이용하여 전달하는 이동통신 단말기; 이동통신 단말기로 무선 데이터 서비스를 제공하는 이동통신망;

이동통신 단말기로 멀티모달 인터페이스(Multi-modal Interface)를 제공하는 멀티모달 서버; 등록용 발성 데이터를 수신하고 등록용 발성 데이터에 포함된 음성을 분석하여 정상 인식 여부를 확인하고, 음성을 등록하며, 결제용 발성 데이터를 수신하고 결제용 발성 데이터에 포함된 음성을 분석하여 제 1 인증을 수행한 후 제 1 인증을 수행한 결과를 전달하는 음성 인식 시스템; 등록용 발성 데이터를 수신하 고 등록용 발성 데이터에 포함된 음성을 분석하여 음성의 목소리 특성을 추출하여 등록하고, 결제용 발성 데이터를 수신하고 결제용 발성 데이터에 포함된 음성의 목소리 특성을 추출하여 제 2 인증을 수행한 후 제 2 인증을 수행한 결과를 전달하는 화자 인증 시스템; 및 등록용 발성 데이터를 수신하고, 음성 인식 시스템과 화자 인증 시스템을 제어하여 인증을 수행하는 복합 인증 서버를 포함하는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 시스템을 제공한다.

이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 우선 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.

또한, 이하에서는 모바일 결제 서비스에서 대금을 결제할 때에 사용자를 인증하는 경우를 가정하여 본 발명을 설명한다. 단, 모바일 결제 서비스의 사용자 인증으로 가정한 것은 설명의 편의에 따른 것으로, 본 발명은 이에 한정되지 않고, 무선 데이터 서비스 또는 무선 인터넷 서비스를 이용하는 중에 사용자를 인증할 때에 사용될 수 있다.

그리고 이하에서는 이동통신망을 CDMA(Code Division Multiple Access) 2000망이라고 가정하여 본 발명을 설명하기로 한다. 단, 본 발명이 적용되는 이동통신 망을 이에 한정되는 것이 아니고, 무선 데이터 서비스 또는 무선 인터넷 서비스를 제공하는 WCDMA(Wide-band CDMA)망, 휴대 인터넷망(HPi: High Speed Portable Internet Network 또는 WiBro: Wireless Broadband Internet Network)을 포함하는 다른 방식의 이동통신망에 적용될 수 있다.

도 1은 본 발명의 바람직한 실시예에 따른 멀티모달을 이용하여 화자와 음성을 인증하는 모바일 결제 인증 시스템을 간략하게 나타낸 블록 구성도이다.

본 발명의 바람직한 실시예에 따른 멀티모달을 이용하여 화자와 음성을 인증하는 모바일 결제 인증 시스템은 이동통신 단말기(110), 이동통신망(120), 멀티모달 서버(130), 복합 인증 서버(140), 화자 인증 시스템(150) 및 음성 인식 시스템(160)을 포함한다.

이동통신 단말기(110)는 이동통신망(120)을 이용하여 상대방과 무선 통신으로 전화 통화를 수행할 뿐만 아니라 구비된 정보 검색 기능으로 이동통신망(120)이 제공하는 무선 데이터 서비스 또는 무선 인터넷 서비스를 이용하여 정보를 검색하는 단말기이다. 이를 위해 이동통신 단말기(110)는 무선 데이터 서비스 또는 무선 인터넷 서비스를 수행하기 위한 애플리케이션을 구비하고, 애플리케이션을 구동하는 무선 인터넷 플랫폼을 탑재하고 있으며, 무선 인터넷에 접속하기 위한 무선 인터넷 접속용 브라우저를 내장한다.

여기서, 무선 인터넷 플랫폼은 WIPI(Wireless Internet Platform for Interoperability), SK Telecom에서 WIPI를 기반으로 자체 제작한 WI-TOP(Wireless Internet-Terminal Open Platform), J2ME(Java 2 Micro Edition) 등이 될 수 있으 며, 무선 인터넷 접속용 브라우저는 무선 애플리케이션 프로토콜(WAP: Wireless Application Protocol)에 기반한 WAP 브라우저뿐만 아니라, HTTP 프로토콜을 사용하는 HTML에 기반한 MIN(Microsoft Internet Explorer), 핸드헬드 디바이스 트랜스포트 프로토콜(HDTP: Handheld Device Transport Protocol), NTT DOKOMO사의 i-Mode 또는 SK Telecom사의 Nate 등을 이용할 수도 있다.

또한, 본 발명의 바람직한 실시예에 따른 이동통신 단말기(110)는 이동통신망(120)에서 제공하는 모바일 결제 서비스를 이용하여 대금을 결제하고, 그에 따른 사용자 인증을 수행하는 단말기이다. 이동통신 단말기(110)는 본 발명의 바람직한 실시예에 따른 멀티모달을 이용하여 화자와 음성을 인증하는 모바일 결제 인증을 이용하여 사용자 인증을 수행한다.

즉, 본 발명의 바람직한 실시예에 따른 이동통신 단말기(110)는 모바일 결제 애플리케이션의 알고리즘에 따라 저장된 다수의 키워드 중 특정 키워드를 화자 인증 키워드로서 제시하여 이동통신 가입자의 발성을 유도하고, 이동통신 가입자로부터 발성된 음성을 입력 받아 등록용 발성 데이터를 생성한 후 이동통신망(120)을 이용하여 멀티 모달 서버(130)로 전송하여 화자 인증 키워드를 등록한다. 또한, 이동통신 단말기(110)는 모바일 결제 서비스를 수행하는 중에 사용자 인증이 필요하면, 이동통신 가입자에게 화자 인증 키워드를 요구하여 이동통신 가입자로부터 발성된 음성을 입력 받아 결제용 발성 데이터를 생성한 후 이동통신망(120)을 이용하여 멀티 모달 서버(130)로 전송한다.

여기서, 이동통신 단말기(110)는 PDA(Personal Digital Assistant), 셀룰러 폰, PCS(Personal Communication Service)폰, 핸드헬드 PC(Hand-Held PC), GSM(Global System for Mobile)폰, W-CDMA(Wide band CDMA)폰, CDMA-2000폰, MBS(Mobile Broadband System)폰 등이 될 수 있으며, 그 종류는 이동통신망을 구성하는 이동통신 시스템의 종류에 따라 결정될 수 있다. 여기서, MBS폰은 현재 논의되고 있는 제 4세대 시스템에서 사용될 핸드폰을 말한다.

이동통신망(120)은 기지국 전송기(122), 기지국 제어기(124), 이동통신 교환국(MSC: Mobile Switching Center)(126), 및 데이터 코어망(DCN: Data Core Network)(128)을 포함하며, 이동통신 단말기(110)와 무선으로 연결되고, 멀티모달 서버(130)와 연결되어 이동통신 단말기(120)가 음성 통신 서비스, 무선 데이터 서비스 또는 무선 인터넷 서비스, 모바일 결제 서비스 등의 이동통신 서비스를 수행하도록 하기 위한 제반 기능 등을 수행한다.

여기서, 기지국 전송기(122)는 이동통신 단말기(110)로부터 수신한 위치 정보를 기지국 제어기(124)로 전송할 뿐만 아니라 이동통신 단말기(110)와 기지국 제어기(124) 사이에서 유무선 변환, 무선 신호의 송수신 등을 수행하며, 이동통신 단말기(110)와 직접적으로 연결되는 망 종단 장치이다. 또한, 기지국 전송기(122)는 각기 셀(Cell) 단위로 배치되어 자신이 관할하는 셀 영역에 존재하는 이동통신 단말기(110)의 위치를 파악하는 위치 등록을 수행한다.

기지국 제어기(124)는 기지국 전송기(122)를 제어하며, 이동통신 단말기(110)에 대한 페이징 채널, 트래픽 채널 등의 무선 채널 할당 및 해제, 이동통신 단말기(110) 및 기지국 전송기(122)의 송신 출력 제어, 소프트 핸드오프(Soft Hand-off) 및 하드 핸드오프(Hard Hand-off) 결정, 트랜스코딩(Transcoding) 및 보코딩(Vocoding), 무선 접속망에 대한 운용 및 유지 보수 기능 등을 수행한다.

이동통신 교환국(126)은 다수의 전자식 교환기를 구비하여 기본 및 부가 서비스 처리, 가입자의 착신 및 발신 호 처리, 위치 등록 절차 및 핸드오프 절차 처리, 타망과의 연동 기능 등을 수행한다.

이를 위해 이동통신 교환국(126)은 분산된 호 처리 기능을 수행하는 ASS(Access Switching Subsystem), 집중화된 호 처리 기능을 수행하는 INS(Interconnection Network Subsystem), 운용 및 보전의 집중화 기능을 담당하는 CCS(Central Control Subsystem), 이동통신 가입자에 대한 정보의 저장 및 관리 기능을 수행하는 LRS(Location Registration Subsystem) 등의 서브 시스템을 포함할 수 있다. 또한, 이동통신 교환국(126)은 셀 단위의 패킷(Packet) 방식으로 데이터를 전송하여 전송 속도와 회선 사용의 효율을 증대시키기 위해 ATM(Asynchronous Transfer Mode) 스위치(미도시)를 포함할 수 있다.

데이터 코어망(128)은 패킷 데이터 통신 서비스를 제공하기 위한 고속 데이터 서비스, 인터넷/인트라넷 접속 서비스, 가상 사설망(VPN: Virtual Private Network) 접속 서비스, 심플(Simple) IP 및 모바일(Mobile) IP 서비스, PPP(Point-to-Point Protocol) 인증, 과금 및 패킷 압축 기능 등을 수행한다.

멀티모달 서버(130)는 멀티모달 인터페이스를 제공하는 서버이다. 또한, 본 발명의 바람직한 실시예에 따른 멀티모달 서버(130)는 이동통신망(120)을 이용하여 이동통신 단말기(110)로부터 등록용 발성 데이터와 결제용 발성 데이터를 수신하여 복합 인증 서버(140)로 전달한다.

복합 인증 서버(140)는 이동통신 단말기(110)를 사용하는 이동통신 가입자를 인증하는 서버이다. 본 발명의 바람직한 실시예에 따른 복합 인증 서버(140)는 멀티 모달 서버(130)로부터 수신한 등록용 발성 데이터를 음성 인식 시스템(160)으로 전달하여 음성 인식 시스템(160)으로 하여금 등록용 발성 데이터에 포함된 음성이 정상적으로 인식되었는지 여부를 확인하도록 제어하고, 그에 대한 결과를 수신하여 정상 인식이 된 경우에는 화자 인증 시스템(150)으로 등록용 발성 데이터를 전송하여 화자 인증 시스템(150)으로 하여금 등록용 발성 데이터에 포함된 음성의 특성을 추출하는 목소리 특성 추출 작업을 수행하여 이를 데이터베이스(DB: Database, 이하 'DB'라 칭함)로 구축하도록 제어한다.

또한, 본 발명의 바람직한 실시예에 따른 복합 인증 서버(140)는 멀티모달 서버(130)로부터 수신한 결제용 발성 데이터를 음성 인식 시스템(120)으로 전송하여 음성 인식 시스템(160)으로 하여금 결제용 발성 데이터에 포함된 음성을 인식하여 등록된 화자의 인증 키워드인지 여부를 확인하게 하고, 등록된 화자의 인증 키워드가 아닌 경우에는 화자 인증 실패를 이동통신 단말기(110)로 통보하고, 등록된 화자의 인증 키워드인 경우에는 화자 인증 시스템(150)으로 결제용 발성 데이터를 송신하여 화자 인증 시스템(150)으로 하여금 등록된 화자인지 여부를 확인하게 하여 그 결과에 따라 이동통신 단말기(110)로 화자 인증 성공을 통보하거나 화자 인증 실패를 통보한다.

화자 인증 시스템(150)은 음성의 목소리 특성을 추출하여 화자를 인증하는 시스템이다. 또한, 본 발명의 바람직한 실시예에 따른 화자 인증 시스템(150)은 화자 인증 서버(152)와 목소리 DB(52)를 포함하며, 복합 인증 서버(140)로부터 등록용 발성 데이터를 수신하여 목소리 특성 추출 작업을 수행하여 음성의 목소리 특성을 저장 및 등록하며, 결제용 발성 데이터를 수신하여 목소리 특성 추출 작업을 수행한 후 저장된 이동통신 가입자의 목소리 특성과 비교하여 화자를 인증한다.

본 발명의 바람직한 실시예에 따른 화자 인증 서버(152)는 복합 인증 서버(140)로부터 수신한 등록용 발성 데이터를 분석하여 등록용 발성 데이터에 포함된 음성의 목소리의 특성을 추출하는 목소리 특성 추출 작업을 수행하고, 그 결과를 목소리 DB(154)에 가입자별로 저장한다. 또한, 화자 인증 서버(152)는 복합 인증 서버(140)로부터 수신한 결제용 발성 데이터를 분석하여 결제용 발성 데이터에 포함된 음성의 목소리의 특성을 추출하는 목소리 특성 추출 작업을 수행하고, 그 결과를 목소리 DB(154)를 검색하여 목소리 DB(154)에 저장된 해당 가입자의 목소리의 특성과 비교하여 동일한지 여부를 확인하여 등록된 화자인지 여부를 확인한다.

본 발명의 바람직한 실시예에 따른 목소리 DB(154)는 화자 인증 서버(152)의 제어에 따라 이동통신 가입자별로 목소리 특성을 저장한다.

음성 인식 시스템(160)은 음성을 인식하여 음성을 문자로 변환하는 시스템이다. 또한, 본 발명의 바람직한 실시예에 따른 음성 인식 시스템(160)은 음성 인식 서버(162) 및 키워드 DB(164)를 포함하며, 복합 인증 서버(140)로부터 등록용 발성 데이터를 수신하여 화자 인증 키워드를 등록하고, 결제용 발성 데이터를 수신하여 결제용 발성 데이터가 등록된 화자 인증 키워드와 동일한 문자를 포함하고 있는지 여부를 확인한다.

본 발명의 바람직한 실시예에 따른 음성 인식 서버(162)는 복합 인증 서버(140)로부터 수신한 등록용 발성 데이터를 분석하여 등록용 발성 데이터에 포함된 음성을 문자로 변환하고, 변환된 문자를 화자 인증 키워드로서 생성하여 키워드 DB(164)에 각 이동통신 가입자별로 저장한다. 또한, 음성 인식 서버(162)는 복합 인증 서버(140)로부터 수신한 결제용 발성 데이터를 분석하여 결제용 발성 데이터에 포함된 음성을 문자로 변환하고, 키워드 DB(164)를 검색하여 해당 이동통신 가입자에 대해 키워드 DB(164)에 저장된 화자 인증 키워드와 동일한지 여부를 확인하여 그 결과를 복합 인증 서버(140)로 송신한다.

본 발명의 바람직한 실시예에 따른 키워드 DB(164)는 음성 인식 서버(162)의 제어에 따라 이동통신 가입자별로 화자 인증 키워드를 저장한다.

도 2는 본 발명의 바람직한 실시예에 따른 모바일 결제를 위한 음성을 등록하는 방법을 설명하기 위한 순서도이다.

이동통신 가입자는 이동통신 단말기(110)에 구비된 모바일 결제 애플리케이션을 실행하여 본 발명의 바람직한 실시예에 따른 멀티모달을 이용하여 화자와 음성을 인증하는 모바일 결제 인증을 위한 화자 인증 키워드를 등록할 수 있다.

이동통신 단말기(110)는 이동통신 가입자의 조작에 따라 모바일 결제 애플리케이션을 실행하여 모바일 결제 애플리케이션의 알고리즘에 따라 저장된 다수의 키워드 중에서 하나의 키워드를 화자 인증 키워드로서 선택하여 구비된 화면에 출력함으로써 이동통신 가입자에게 키워드를 제시한다(S210).

이동통신 단말기(110)의 화면에 출력된 화자 인증 키워드를 확인한 이동통신 가입자는 이동통신 단말기(110)에 구비된 마이크로폰에 제시된 화자 인증 키워드를 3회 발성함으로써 이동통신 단말기(110)에 음성을 입력한다. 이동통신 단말기(110)는 이동통신 가입자로부터 입력된 음성을 변환하여 등록용 발성 데이터로서 생성한다(S220). 단, 여기에서는 이동통신 가입자가 제시된 화자 인증 키워드를 3회 발성한다고 설명했지만, 본 발명은 이에 한정되는 것이 아니고, 정확한 음성 인식이 가능하다면 그 회수의 제한은 없다.

등록용 발성 데이터를 생성한 이동통신 단말기(110)는 이동통신망(120)이 제공하는 무선 데이터 서비스 또는 무선 인터넷 서비스를 이용하여 등록용 발성 데이터를 멀티모달 서버(130)로 전송하고, 멀티모달 서버(130)는 등록용 발성 데이터를 복합 인증 서버(140)로 전달한다(S230).

등록용 발성 데이터를 수신한 복합 인증 서버(140)는 등록용 발성 데이터를 음성 인식 시스템(162)으로 송신하면서, 정상적으로 인식이 되었는지 여부에 대한 확인을 요청한다(S240).

복합 인증 서버(140)로부터 등록용 발성 데이터를 수신하면서, 정상적으로 인식이 되었는지 여부에 대한 확인을 요청 받은 음성 인식 시스템(160)은 음성 인식 서버(162)를 이용하여 등록용 발성 데이터를 분석하여 등록용 발성 데이터에 포함된 음성을 분석하여 음성이 정상적으로 인식되었는지 여부를 확인하여(S250), 정상적으로 인식된 경우에는 음성을 문자로 변환하여 키워드 DB(162)에 해당 이동통신 가입자별로 화자 인증 키워드로서 저장하고 정상적으로 인식되었음을 복합 인증 서버(140)로 통보하고, 정상적으로 인식되지 않은 경우에는 복합 인증 서버(140)로 정상적으로 인식이 되지 않았음을 통보한다. 복합 인증 서버(140)는 음성이 정상적으로 인식되지 않은 경우에는 단계 S220으로 진행하여 이동통신 단말기(110)로 하여금 이동통신 가입자로부터 새로운 음성을 입력 받아 새로운 등록용 발성 데이터를 생성하여 송신할 것을 요청한다.

음성 인식 시스템(160)으로부터 음성이 정상적으로 인식되었음을 통보 받은 복합 인증 서버(140)는 화자 인증 시스템(150)으로 등록용 발성 데이터를 송신하면서 목소리 특성 추출 작업을 요청한다(S260).

목소리 특성 추출 작업을 요청 받은 화자 인증 시스템(150)은 화자 인증 서버(152)를 이용하여 수신한 등록용 발성 데이터를 분석하여 포함된 음성으로부터 목소리의 특성을 추출하여 추출한 목소리 특성을 목소리 DB(154)에 해당 이동통신 가입자별로 저장한다(S270).

이로써, 모바일 결제 서비스를 위한 이동통신 가입자의 화자 인증 키워드가 등록되게 된다.

도 3은 본 발명의 바람직한 실시예에 따른 멀티모달을 이용한 화자와 음성을 인증하는 모바일 결제 인증 방법을 설명하기 위한 순서도이다.

이동통신 가입자는 물품 등을 구매하고, 그에 대한 결제를 이동통신 단말기(110)를 이용하여 수행할 수 있다. 또한, 이동통신 가입자는 이동통신 단말기(110)에서 실행되고 있는 모바일 결제 애플리케이션에서 제공하는 멀티모달 인터페이스를 이용하여 사용자를 인증한다.

이동통신 가입자가 이동통신 단말기(110)의 모바일 결제 애플리케이션을 실행하여 구매한 물품에 대한 대금을 결제하고자 하면, 이동통신 단말기(110)는 모바일 결제 애플리케이션의 알고리즘에 따라 화자 인증 키워드의 입력을 요구한다(S310).

이동통신 가입자가 화자 인증 키워드를 발성하여 음성을 입력하면, 이동통신 단말기(110)는 입력된 음성을 변환하여 결제용 발성 데이터로서 생성한다(S320).

결제용 발성 데이터를 생성한 이동통신 단말기(110)는 결제용 발성 데이터를 이동통신망(120)이 제공하는 무선 데이터 서비스 또는 무선 인터넷 서비스를 이용하여 멀티모달 서버(130)로 송신하고, 멀티모달 서버(130)는 결제용 발성 데이터를 복합 인증 서버(140)로 전달한다(S330).

멀티모달 서버(130)로부터 결제용 발성 데이터를 수신한 복합 인증 서버(140)는 결제용 발성 데이터를 음성 인식 시스템(160)으로 송신하면서 제 1 인증을 요청하고(S340), 결제용 발성 데이터를 수신하면서 음성 인식을 요청 받은 음성 인식 시스템(160)은 음성 인식 서버(162)를 이용하여 결제용 발성 데이터에 포함된 음성을 분석하여 음성을 문자로 변환한 후 키워드 DB(164)를 검색하여 변환된 문자가 키워드 DB(164)에 저장된 화자 인증 키워드와 동일한지를 비교하여 등록된 화자 인증 키워드인지 여부를 확인함으로써 제 1 인증을 수행한다(S350).

음성 인식 시스템(160)은 제 1 인증을 수행한 결과, 등록된 화자 인증 키워드가 아닌 경우에는 복합 인증 서버(140)로 그 결과를 통보하고, 복합 인증 서버(140)는 이동통신 단말기(110)로 화자 인증 실패를 통보한다(S352).

음성 인식 시스템(160)은 제 1 인증을 수행한 결과, 등록된 화자 인증 키워드인 경우에는 복합 인증 서버(140)로 그 결과를 통보하고, 복합 인증 서버(140)는 결제용 발성 데이터를 화자 인증 시스템(150)으로 송신하면서, 목소리 특성 추출 작업을 요청한다(S360).

목소리 특성 추출 작업을 요청 받은 화자 인증 시스템(150)은 화자 인증 서버(152)를 이용하여 수신한 결제용 발성 데이터를 분석하여 음성의 특성을 추출하는 목소리 특성 추출 작업을 수행하고, 목소리 DB(154)를 검색하여 추출한 목소리 특성과 목소리 DB(154)에 저장된 해당 가입자의 목소리 특성을 비교하고 동일 여부를 확인하여 등록된 화자인지 여부를 확인함으로써 제 2 인증을 수행한다(S370).

화자 인증 시스템은 제 2 인증을 수행한 결과, 등록된 화자가 아닌 경우에는 복합 인증 서버(140)로 그 결과를 통보하고, 복합 인증 서버(140)는 이동통신 단말기(110)로 화자 인증 실패를 통보한다(S372).

화자 인증 시스템은 제 2 인증을 수행한 결과, 등록된 화자인 경우에는 복합 인증 서버(140)로 그 결과를 통보하고, 복합 인증 서버(140)는 이동통신 단말기(110)로 화자 인증 성공을 통보한다(S380).

이로써, 이동통신 가입자는 이동통신 단말기(110)를 이용하여 모바일 결제 서비스를 제공 받는 중에 멀티모달 인터페이스를 이용하여 음성으로 화자 인증 키워드를 발성하여 인증을 수행할 수 있고, 복합 인증 서버(140)는 음성 인식과 화자 인증을 결합하여 사용자를 인증하게 되어 진정한 사용자의 결제 여부를 확인할 수 있게 된다.

4A는 화자 인증 키워드를 등록하기 위한 화면을 나타낸 것이다. 이동통신 가입자는 모바일 결제 서비스를 이용하기 위해서, 인증을 위한 화자 키워드를 등록해야 한다. 이동통신 가입자가 이동통신 단말기에서 모바일 결제 애플리케이션을 실행하여 '결제 키워드 등록' 메뉴를 선택하면, 이동통신 단말기(110)는 4A에 도시된 바와 같이 키워드를 등록하기 위한 안내 메시지와 저장된 다수의 키워드 중 선택된 키워드를 화면을 출력한다. 이동통신 가입자는 화면에 제시된 키워드를 3회 발성하고, '확인' 버튼을 눌러 키워드를 등록한다.

4B는 화자 인증 키워드가 등록되었음을 출력한 화면을 나타낸 것이다. 이동통신 단말기(110)는 이동통신 가입자로부터 음성을 입력 받으면 등록용 발성 데이터를 생성하여 이동통신망(120), 멀티모달 서버(130)를 통해 복합 인증 서버(140)로 전송하고, 복합 인증 서버(140)는 음성 인식 시스템(160)과 화자 인증 시스템(150)을 이용하여 화자 인증 키워드를 등록한 후 화자 인증 키워드가 정상적으로 등록되었음을 이동통신 단말기(110)로 통보할 수 있고, 이를 통보 받은 이동통신 단말기(110)는 그에 대한 메시지를 4B와 같이 화면에 출력한다.

여기에서는, 화자 인증 키워드로서 '아지랑이'를 예를 들어 설명했지만, 이동통신 단말기(110)에 의해 제시되는 키워드는 이동통신 가입자의 특성(예를 들면, 이름, 주소, 전화번호 등)을 고려한 키워드일 수 있고, 이러한 키워드는 이동통신 단말기(110)의 메모리 내에 수만 단어의 키워드로 저장되어, 키워드를 제시할 때에 는 저장된 수만 단어의 키워드 중 하나의 키워드가 선택되어 제시된다.

4C는 모바일 결제 수행 중 결제 여부를 확인하는 화면을 나타낸 것이다. 이동통신 가입자는 물품 등을 구매하고 그 대금을 결제할 때, 이동통신 단말기(110)를 이용하여 이동통신망(120)이 제공하는 모바일 결제 서비스에 접속하고, 그 과정에서 사용자 인증을 위해 이동통신 단말기(110)는 4C에 도시된 바와 같이 사용자 인증을 위한 안내 메시지를 출력한다. 이동통신 가입자는 이동통신 단말기(110)에 출력된 안내 메시지를 확인하고, '확인' 버튼을 선택하여 결제를 선택한다.

4D는 사용자 인증을 위한 화면을 나타낸 것이다. 이동통신 단말기(110)는 모바일 결제 애플리케이션의 알고리즘에 따라 멀티모달을 이용하여 화자 인증과 음성 인식을 결합하여 인증을 수행하기 위해 이동통신 가입자에게 결제 키워드를 입력할 것을 요구한다. 이동통신 가입자는 4D와 같이 출력된 안내 메시지를 확인하고, 4A를 통해 설명한 등록된 결제 키워드를 발성하고, '확인' 버튼을 선택함으로써 인증을 시도한다.

4E는 사용자 인증에 성공하여 인증 성공 메시지가 출력된 화면을 나타낸 것이다. 이동통신 가입자로부터 음성을 입력 받은 이동통신 단말기(110)는 이를 이동통신망(120), 멀티모달 서버(130)를 통해 복합 인증 서버(140)로 전송하고, 복합 인증 서버(140)는 음성 인식 시스템(160)과 화자 인증 시스템(150)을 이용하여 이중으로 인증을 수행하고 인증에 성공하면 이동통신 단말기(110)로 화자 인증 성공을 통보한다. 화자 인증 성공을 통보 받은 이동통신 단말기(110)는 4E에 도시된 바와 같이 인증 성공에 대한 메시지를 출력하여 최종 인증에 성공했음을 이동통신 가 입자에게 알린다. 이동통신 가입자는 이동통신 단말기(110)에 출력된 메시지를 확인하고 '계속' 버튼을 선택함으로써 모바일 결제 서비스의 다음 단계의 절차를 진행한다.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

이상에서 설명한 바와 같이 본 발명에 의하면, 무선 인터넷 서비스를 제공하는 데에 있어서, 화자 인증과 음성 인식을 결합하여 이중으로 사용자를 인증할 수 있어, 분실 및 도용이 쉬운 종래의 인증 방법의 단점을 개선하여 신뢰할 수 있는 보안을 도모할 수 있고, 그로 인해 무선 데이터 서비스가 더욱 활성화될 수 있다.

또한, 무선 데이터 서비스를 이용하는 도중에 음성을 입력하여 인증을 할 수 있어, 이동통신 가입자는 간편하고 안전하게 사용자 인증을 할 수 있고, 그 결과를 화면 상으로 즉시 확인할 수 있어 편리한 효과가 있다.

Claims

무선 데이터 서비스를 수행하는 중에 인증을 수행하는 이동통신 단말기, 상기 이동통신 단말기로 상기 무선 데이터 서비스를 제공하는 이동통신망, 상기 이동통신 단말기로 멀티모달(Multi-modal) 인터페이스를 제공하는 멀티모달 서버, 상기 인증을 수행하는 복합 인증 서버, 음성을 인식하여 키워드를 확인하는 음성 인식 시스템 및 상기 음성의 특성을 추출하여 화자를 확인하는 화자 인증 시스템을 포함하는 시스템에서, 상기 인증을 수행하는 방법에 있어서,

(a) 상기 이동통신 단말기로부터 상기 무선 데이터 서비스 중에 입력된 음성을 변환한 결제용 발성 데이터를 수신하는 단계;

(b) 상기 음성 인식 시스템을 이용하여 상기 결제용 발성 데이터에 포함된 음성을 인식하여 제 1 인증을 수행하는 단계;

(c) 상기 단계 (b)에서 상기 제 1 인증을 수행한 결과, 상기 제 1 인증에 성공한 경우에는 상기 화자 인증 시스템을 이용하여 상기 결제용 발성 데이터에 포함된 음성의 목소리 특성에 대한 제 2 인증을 수행하는 단계; 및

(d) 상기 단계 (c)에서 상기 제 2 인증을 수행한 결과, 상기 제 2 인증에 성공한 경우에는 상기 이동통신 단말기로 인증 성공을 통보하는 단계

를 포함하는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 방법.
제 1 항에 있어서, 상기 단계 (a)는,

(a1) 상기 이동통신 단말기가 상기 무선 데이터 서비스를 수행하는 단계;

(a2) 상기 이동통신 단말기가 화자 인증 키워드의 입력을 요청하는 단계;

(a3) 상기 이동통신 단말기가 이동통신 가입자로부터 상기 음성을 입력받는 단계; 및

(a4) 상기 이동통신 단말기가 상기 음성을 상기 결제용 발성 데이터로 변환하여 상기 복합 인증 서버로 송신하는 단계

를 포함하는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 방법.
제 1 항에 있어서, 상기 단계 (a)에서,

상기 이동통신 단말기는 상기 멀티모달 인터페이스를 이용하여 상기 무선 데이터 서비스 중에 상기 음성을 입력 받는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 방법.
제 1 항에 있어서, 상기 단계 (b)는,

(b1) 상기 복합 인증 서버가 상기 결제용 발성 데이터를 상기 음성 인식 시스템으로 송신하면서 상기 제 1 인증을 요청하는 단계;

(b2) 상기 음성 인식 시스템이 상기 결제용 발성 데이터를 분석하여 상기 결제용 발성 데이터에 포함된 음성을 문자로 변환하는 단계;

(b3) 상기 음성 시스템이 구비된 키워드 데이터베이스에 상기 이동통신 단말기의 이동통신 가입자에 대해 기 등록되어 저장된 화자 인증 키워드를 검색하여 상기 문자와 비교함으로써 상기 제 1 인증을 수행하는 단계; 및

(b4) 상기 음성 시스템이 상기 제 1 인증을 수행한 결과를 상기 복합 인증 서버로 송신하는 단계

를 포함하는 것을 특징으로 하는 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 방법.
제 1 항에 있어서, 상기 단계 (c)는,

(c1) 상기 복합 인증 서버가 상기 제 1 인증을 수행한 결과, 상기 제 1 인증에 성공한 경우에는 상기 결제용 발성 데이터를 상기 화자 인증 시스템으로 송신하면서, 상기 제 2 인증을 요청하는 단계;

(c2) 상기 화자 인증 시스템이 상기 결제용 발성 데이터를 분석하여 상기 결제용 발성 데이터에 포함된 음성의 목소리의 특성을 추출하는 목소리 특성 추출 작업을 수행하는 단계;

(c3) 상기 화자 인증 시스템이 구비된 목소리 데이터베이스에 상기 이동통신 단말기의 이동통신 가입자에 대해 기 등록되어 저장된 목소리 특성과 상기 결제용 발성 데이터에 포함된 음성의 목소리의 특성을 비교함으로써 상기 제 2 인증을 수행하는 단계; 및

(c4) 상기 화자 인증 시스템이 상기 제 2 인증을 수행한 결과를 상기 복합 인증 서버로 송신하는 단계; 및

(c5) 상기 복합 인증 서버가 상기 제 2 인증에 성공한 경우에는 상기 이동통신 단말기로 인증 성공을 통보하는 단계

를 포함하는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 방법.
제 1 항에 있어서, 상기 인증 방법은,

상기 단계 (b)와 상기 단계 (c) 사이에,

(b5) 상기 단계 (b)에서 상기 제 1 인증을 수행한 결과, 상기 제 1 인증에 실패한 경우에는 상기 이동통신 단말기로 인증 실패를 통보하는 단계

를 추가로 포함하는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 방법.
제 1 항에 있어서, 상기 인증 방법은,

상기 단계 (c)와 상기 단계 (d) 사이에,

(c6) 상기 단계 (c)에서 상기 제 2 인증을 수행한 결과, 상기 제 2 인증에 실패한 경우에는 상기 이동통신 단말기로 인증 실패를 통보하는 단계

를 추가로 포함하는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 방법.
무선 데이터 서비스의 인증에 이용되는 음성을 등록하는 이동통신 단말기, 상기 이동통신 단말기로 상기 무선 데이터 서비스를 제공하는 이동통신망, 상기 이동통신 단말기로 멀티모달(Multi-modal) 인터페이스를 제공하는 멀티모달 서버, 상기 음성을 등록하는 복합 인증 서버, 상기 음성을 인식하여 키워드로 저장하는 음성 인식 시스템 및 상기 음성의 특성을 추출하여 상기 음성의 특성을 저장하는 화자 인증 시스템을 포함하는 시스템에서, 상기 음성을 등록하는 방법에 있어서,

(a) 상기 이동통신 단말기로부터 상기 음성을 변환한 등록용 발성 데이터를 수신하는 단계;

(b) 상기 음성 인식 시스템을 이용하여 상기 등록용 발성 데이터에 포함된 상기 음성을 분석하고, 정상 인식 여부를 확인한 후 상기 음성을 인식하여 등록하는 단계; 및

(c) 상기 단계 (b)에서, 상기 정상 인식 여부를 확인한 결과, 상기 음성이 정상 인식된 경우에는 상기 화자 인증 시스템을 이용하여 상기 등록용 발성 데이터에 포함된 상기 음성의 목소리의 특성을 추출하여 등록하는 단계

를 포함하는 것을 특징으로 하는 인증을 위한 음성을 등록하는 방법.
제 8 항에 있어서, 상기 단계 (a)는,

(a1) 상기 이동통신 단말기가 화자 인증 키워드를 제시하는 단계;

(a2) 상기 이동통신 단말기가 이동통신 가입자로부터 상기 음성을 입력받는 단계; 및

(a3) 상기 이동통신 단말기가 상기 음성을 등록용 발성 데이터로 변환하여 상기 복합 인증 서버로 송신하는 단계

를 포함하는 것을 특징으로 하는 인증을 위한 음성을 등록하는 방법.
제 9 항에 있어서, 상기 단계 (a1)에서,

상기 이동통신 단말기는 구비한 메모리에 저장된 다수의 키워드 중의 어느 하나의 키워드를 선정하여 상기 화자 인증 키워드로서 제시하는 것을 특징으로 하는 인증을 위한 음성을 등록하는 방법.
제 8 항에 있어서, 상기 단계 (a)에서,

상기 이동통신 단말기는 멀티모달 인터페이스를 이용하여 상기 모바일 결제 서비스 중에 상기 음성을 입력 받는 것을 특징으로 하는 인증을 위한 음성을 등록하는 방법.
제 8 항에 있어서, 상기 단계 (b)는,

(b1) 상기 복합 인증 서버가 상기 등록용 발성 데이터를 상기 음성 인식 시스템으로 송신하면서 상기 음성에 대한 상기 정상 인식 여부의 확인을 요청하는 단계;

(b2) 상기 음성 인식 시스템이 상기 등록용 발성 데이터를 분석하여 상기 정상 인식 여부를 확인하는 단계;

(b3) 상기 음성 인식 시스템이 상기 단계 (b2)의 확인 결과, 상기 음성이 정상 인식된 경우에는 상기 음성을 문자로 변환하여 구비된 키워드 데이터베이스에 상기 이동통신 단말기의 이동통신 가입자에 대해 화자 인증 키워드로서 저장하여 등록하는 단계; 및

(b4) 상기 음성 인식 시스템이 상기 정상 인식 여부를 확인한 결과를 상기 복합 인증 서버로 송신하는 단계

를 포함하는 것을 특징으로 하는 인증을 위한 음성을 등록하는 방법.
제 8 항에 있어서, 상기 단계 (c)는,

(c1) 상기 복합 인증 서버가 상기 정상 인식 여부를 확인한 결과, 상기 음성이 정상 인식된 경우에는 상기 등록용 발성 데이터를 상기 화자 인증 시스템으로 송신하면서 목소리 특성 추출 작업을 요청하는 단계;

(c2) 상기 화자 인증 시스템이 상기 등록용 발성 데이터를 분석하여 상기 등록용 발성 데이터에 포함된 음성의 목소리의 특성을 추출함으로써 상기 목소리 특성 추출 작업을 수행하는 단계;

(c3) 상기 단계 (c2)에서 추출한 상기 목소리의 특성을 구비된 목소리 데이터베이스(DB: Database)에 상기 이동통신 단말기의 이동통신 가입자에 대해 저장하여 등록하는 단계

를 포함하는 것을 특징으로 하는 인증을 위한 음성을 등록하는 방법.
제 8 항에 있어서, 상기 음성을 등록하는 방법은,

상기 단계 (c) 이후에,

(c4) 상기 복합 인증 서버가 상기 정상 인식 여부를 확인한 결과, 상기 음성이 정상 인식되지 않은 경우에는 상기 이동통신 단말기로 상기 음성이 정상적으로 인식되지 않았음을 통보하고, 상기 이동통신 단말기로 새로운 음성을 등록할 것을 요청하는 단계

를 추가로 포함하는 것을 특징으로 하는 인증을 위한 음성을 등록하는 방법.
사용자를 인증하는 시스템에 있어서,

상기 사용자의 음성을 입력 받아 상기 음성을 등록용 발성 데이터로 변환하여 상기 무선 데이터 서비스를 이용하여 전달하고, 상기 음성을 입력 받아 상기 음성을 결제용 발성 데이터로 변환하여 상기 무선 데이터 서비스를 이용하여 전달하는 이동통신 단말기;

상기 이동통신 단말기로 상기 무선 데이터 서비스를 제공하는 이동통신망;

상기 이동통신 단말기로 멀티모달 인터페이스(Multi-modal Interface)를 제공하는 멀티모달 서버;

상기 등록용 발성 데이터를 수신하고 상기 등록용 발성 데이터에 포함된 음성을 분석하여 정상 인식 여부를 확인하고, 상기 음성을 등록하며, 상기 결제용 발성 데이터를 수신하고 상기 결제용 발성 데이터에 포함된 음성을 분석하여 제 1 인증을 수행한 후 제 1 인증을 수행한 결과를 전달하는 음성 인식 시스템;

상기 등록용 발성 데이터를 수신하고 상기 등록용 발성 데이터에 포함된 음성을 분석하여 상기 음성의 목소리 특성을 추출하여 등록하고, 상기 결제용 발성 데이터를 수신하고 상기 결제용 발성 데이터에 포함된 음성의 목소리 특성을 추출하여 제 2 인증을 수행한 후 제 2 인증을 수행한 결과를 전달하는 화자 인증 시스템; 및

상기 등록용 발성 데이터를 수신하고, 상기 음성 인식 시스템과 상기 화자 인증 시스템을 제어하여 상기 인증을 수행하는 복합 인증 서버

를 포함하는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 시스템.
제 15 항에 있어서, 상기 이동통신 단말기는,

상기 멀티모달 인터페이스를 이용하여 상기 무선 데이터 서비스 중에 상기 음성을 입력 받는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 시스템.
제 15 항에 있어서, 상기 음성 인식 시스템은,

상기 등록용 발성 데이터에 포함된 음성을 분석하여 상기 등록용 발성 데이터에 포함된 음성의 정상 인식 여부를 확인하고 상기 등록용 발성 데이터에 포함된 음성을 문자로 변환하여 상기 문자를 화자 인증 키워드로서 저장함으로써 상기 음성을 등록하며, 상기 결제용 발성 데이터에 포함된 음성을 분석하여 상기 결제용 발성 데이터에 포함된 음성을 문자로 변환하여 기 등록되어 저장된 상기 화자 인증 키워드와 비교함으로써 상기 제 1 인증을 수행하는 음성 인식 서버; 및

상기 이동통신 단말기의 이동통신 가입자별로 상기 화자 인증 키워드를 저장하는 키워드 데이터베이스

를 포함하는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 시스템.
제 15 항에 있어서, 상기 화자 인증 시스템은,

상기 등록용 발성 데이터에 포함된 음성의 목소리의 특성을 추출하여 저장함으로써 상기 목소리의 특성을 등록하고, 상기 결제용 발성 데이터에 포함된 음성의 목소리의 특성을 추출하여 기 등록되어 저장된 상기 목소리의 특성과 비교함으로써 상기 제 2 인증을 수행하는 화자 인증 서버; 및

상기 이동통신 단말기의 이동통신 가입자별로 상기 목소리의 특성을 저장하는 목소리 데이터베이스

를 포함하는 것을 특징으로 하는 멀티모달을 이용하여 화자와 음성을 인증하는 복합 인증 시스템.