KR100992174B1 - 음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지전송 방법 및 장치 - Google Patents

음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지전송 방법 및 장치 Download PDF

Info

Publication number
KR100992174B1
KR100992174B1 KR20080055570A KR20080055570A KR100992174B1 KR 100992174 B1 KR100992174 B1 KR 100992174B1 KR 20080055570 A KR20080055570 A KR 20080055570A KR 20080055570 A KR20080055570 A KR 20080055570A KR 100992174 B1 KR100992174 B1 KR 100992174B1
Authority
KR
South Korea
Prior art keywords
multimedia content
message
data
transmitting
client
Prior art date
Application number
KR20080055570A
Other languages
English (en)
Other versions
KR20090129580A (ko
Inventor
이길수
최도연
Original Assignee
(주)티아이스퀘어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)티아이스퀘어 filed Critical (주)티아이스퀘어
Priority to KR20080055570A priority Critical patent/KR100992174B1/ko
Publication of KR20090129580A publication Critical patent/KR20090129580A/ko
Application granted granted Critical
Publication of KR100992174B1 publication Critical patent/KR100992174B1/ko

Links

Images

Landscapes

  • Telephonic Communication Services (AREA)

Abstract

본 발명은 음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 방법 및 장치에 관한 것으로서, 발신 클라이언트 및 착신 클라이언트와 네트워크를 통해 결합하는 멀티미디어 콘텐츠 합성 메시지 전송 장치에서 음성/문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법에 있어서, 상기 발신 클라이언트로부터 음성/문자 데이터가 포함된 메시지를 수신하는 단계; 상기 수신된 메시지에 포함된 음성/문자 데이터를 추출하는 단계; 상기 추출된 음성/문자 데이터에 포함되어 있는 단어 데이터를 추출하는 단계; 상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계; 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계; 및 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계를 포함하는 음성/문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법 및 이를 이용한 장치를 제공한다.
음성/문자 인식, 멀티미디어 콘텐츠 데이터, 멀티미디어 콘텐츠 합성 메시지

Description

음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 방법 및 장치{METHOD AND APPARATUS FOR TRANSMITTING COMPOUNDING MESSAGE OF MULTIMEDIA CONTENT USING SPEECH/CHARACTER RECOGNITION}
본 발명은 음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 방법 및 장치에 관한 것으로서, 보다 상세하게는 네트워크를 통해 수신한 메시지를 이용하여 다양한 형태의 멀티미디어 콘텐츠 합성 메시지를 생성하여 전송하는 방법 및 장치에 관한 것이다.
인터넷 기술 및 유무선 통신 네트워크의 발전에 따라 이를 이용한 각종 메시지가 널리 이용되고 있다. 이동 통신망을 이용하는 경우, 이동 통신 단말기를 사용하여 단문 메시지 서비스(SMS), 멀티미디어 메시지 서비스(MMS) 등과 같은 문자 메시지를 전송하거나, 음성 통화 호 또는 영상 통화 호를 이용하여 음성 메시지나 영상 메시지를 전송하는 등과 같은 다양한 메시지를 전송하는 방법이 존재하고 있다. 또한, 인터넷에 접속 가능한 컴퓨터 단말이나 PDA 등과 같은 수단을 이용하여 서도 상호 간에 문자 메시지, 음성 메시지 및 영상 메시지 등을 주고 받는 방법 역시 널리 사용되는 실정이다.
이러한 유무선 통신망 및 인터넷과 같은 네트워크를 통해 전술한 바와 같은 각종 메시지의 전송이 이루어질 때 여러 가지 형태의 부가적인 광고 서비스가 제공되고 있다. 통신 단말의 사용자는 문자 메시지, 음성 메시지 및 영상 메시지 등을 단순히 전송하는 것이 아니라, 메시지의 전송과 더불어 다양한 볼거리 및 흥미를 유발할 수 있는 메시지를 전송할 수 있는 서비스를 원하고 있기 때문이다.
현재의 영상 메시지 서비스는 단순히 사용자의 모습만을 녹화하여 전송하기 때문에 전송되는 영상 내용이 단조롭고 지루하다는 문제점이 존재한다. 이러한 점을 개선하기 위한 영상 합성을 위한 몇 가지 종래의 기술이 존재하고 있다. 그러나, 이러한 종래의 영상 합성 기술은 미리 지정된 배경 화면이나 콘텐츠를 단순히 합성하는 형태로 존재한다. 즉, 이러한 영상 합성 기술을 이용하기 위해서는 사용자가 웹이나 무선 인터넷 등을 이용하여 미리 배경 이미지나 영상을 지정하여 설정하여야 하므로, 매우 번거로운 것이 사실이다.
그리고, 사용자의 통신 단말이 영상 메시지를 작성할 수 없는 음성 단말인 경우에는, 음성 단말의 사용자는 상대방에게 영상 메시지를 전송하고 싶어도, 단순히 음성 메시지만을 전송할 수 있을 뿐, 영상 호를 이용하여 영상 메시지를 전송할 수 없다는 불편함 역시 존재하는 실정이다.
상기와 같이 음성 메시지의 전송뿐 아니라, 각종 단말을 이용하여 문자 형태의 메시지를 전송하는 경우에도, 단말을 이용하여 작성된 문자 메시지에 단말에 저 장되어 있는 사진 데이터나 플래시 데이터 등을 직접 사용자가 첨부하여 전송할 수는 있으나, 이러한 방법은 단말의 사용자가 해당 첨부 데이터 등을 다운받거나 하는 등의 과정을 거치는 것은 물론 문자 메시지를 작성하는 경우에 메시지 작성과는 별도의 데이터 첨부 과정을 거쳐야 하므로 단말 사용자를 매우 번거롭게 하는 문제점이 존재하였다.
또한, 음성 메시지와 문자 메시지 등에 기존의 방법 등을 이용한 예컨대 단말에 저장되어 있는 배경 화면이나, 플래시 콘텐츠 및 동영상 콘텐츠 등을 메시지와 함께 전송하는 경우에 있어서, 메시지와 함께 전송되는 데이터는 기존의 단말에 단순히 저장되어 있는 데이터를 이용하여 전송하는 것이 일반적이다. 따라서, 메시지와 함께 전송되는 각종 데이터는 메시지의 내용과는 전혀 관련없는 형태의 데이터인 경우가 많아 메시지의 수신자에게 흥미를 유발시킬 수 없는 경우가 빈번하였다.
요컨대, 기존에 이루어지고 있는 메시지 전송 과정에 있어서의 서비스 제공은 통신 단말 사용자의 편의성을 고려하지 않고, 흥미를 유발할 수 없는 시스템을 가지고 있는바, 문자, 음성 및 영상 메시지를 전송하는 경우 통신 단말 사용자의 복잡한 조작을 거치지 않고도 메시지 관련성이 존재하는 다양한 형태의 멀티미디어 콘텐츠를 상대방에게 제공할 수 있는 서비스가 요구된다고 할 수 있다.
본 발명은 상기와 같은 문제점을 감안하여 안출된 것으로서, 네트워크를 통해 전송되는 음성/문자 데이터가 포함된 각종 형태의 메시지를 수신하고, 수신된 메시지에 포함되어 있는 음성/문자 데이터를 이용하여 다양한 형태의 멀티미디어 콘텐츠 합성 메시지를 생성하여 전송함으로써 사용자의 흥미를 유발할 수 있는 메시지 전송 방법 및 장치를 제공하는 것을 목적으로 한다.
또한, 본 발명은 수신된 메시지에 포함된 음성/단어 데이터를 분석하여, 메시지를 전송한 사용자가 사용한 음성/문자와 대응되는 멀티미디어 콘텐츠 데이터가 포함된 멀티미디어 콘텐츠 합성 메시지를 생성하여 전송함으로써, 메시지 발신자가 전달하고자 하는 메시지를 더욱 재미있게 변화시키며 또한 발신자의 의미 전달 역시 효율적으로 이루어질 수 있도록 하는 메시지 전송 방법 및 장치를 제공하는 것을 또 다른 목적으로 한다.
또한, 본 발명은 발신자 측에서 종래의 일반적인 방법을 이용하여 전송한 음성/문자 메시지를 분석하여 그에 대응되는 다양한 형태의 멀티미디어 콘텐츠 합성 메시지를 자동적으로 생성하여 착신자 측으로 전송함으로써, 발신자는 별도의 신경을 쓸 필요없이 착신자에게 흥미를 유발하는 멀티미디어 콘텐츠 합성 메시지를 전송할 수 있고, 착신자는 이를 통하여 발신자가 전달하고자 하는 메시지를 재미있는 메시지의 형태로 제공받을 수 있는 방법 및 장치를 제공하는 것을 또 다른 목적으로 한다.
상기와 같은 목적을 달성하기 위한 본 발명은, 발신 클라이언트 및 착신 클라이언트와 네트워크를 통해 결합하는 멀티미디어 콘텐츠 합성 메시지 전송 장치에서 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법에 있어서, 상기 발신 클라이언트로부터 음성 데이터가 포함된 메시지를 수신하는 단계; 상기 수신된 메시지에 포함된 음성 데이터를 추출하는 단계; 상기 추출된 음성 데이터에 포함되어 있는 단어 데이터를 추출하는 단계; 상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계; 상기 메시지 내의 상기 단어 데이터에 대응하는 상기 음성 데이터가 위치하는 시점에서 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계; 및 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계를 포함하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법을 제공한다.
여기서, 상기 네트워크는 유선 또는 이동 통신망이고, 상기 발신 클라이언트 및 착신 클라이언트는 유선 통신 단말기 또는 이동 통신 단말기로 구성할 수 있다.
여기서, 상기 네트워크는 인터넷망이고, 상기 발신 클라이언트 및 착신 클라이언트는 인터넷에 접속 가능한 수단인 것으로 구성할 수 있다.
여기서, 상기 추출된 음성 데이터에 포함되어 있는 단어 데이터를 추출하는 단계에 있어서, 상기 추출된 음성 데이터 중 일정 크기(Amplitude) 이상의 음성 데이터만을 대상으로 하여 단어 데이터를 추출하도록 구성할 수 있다.
여기서, 상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계에서, 상기 멀티미디어 콘텐츠 데이터는 상기 각각의 단어 데이터에 대응하여 멀티미디어 콘텐츠 데이터베이스에 미리 저장되어 있도록 구성할 수 있다.
여기서, 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계는, 상기 수신된 메시지와 상기 검색한 멀티미디어 콘텐츠가 서로 겹쳐지도록(overlay) 함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하도록 구성할 수 있다.
여기서, 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계는, 상기 수신된 메시지에 포함되어 있는 음성 데이터와 상기 검색한 멀티미디어 콘텐츠 데이터를 서로 결합함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하도록 구성할 수 있다.
여기서, 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계는, 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지의 앞 부분에 위치하도록 결합함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하도록 할 수 있다.
여기서, 상기 검색한 멀티미디어 콘텐츠 데이터가 상기 수신된 메시지에 서로 겹쳐지는 시점은, 상기 검색한 멀티미디어 콘텐츠 데이터와 대응되는 단어 데이터에 대응되는 음성 데이터가 위치하는 시점이 되도록 구성할 수 있다.
여기서, 상기 수신된 메시지에 포함되어 있는 음성 데이터와 상기 검색한 멀 티미디어 콘텐츠 데이터가 서로 결합되는 시점은, 상기 검색한 멀티미디어 콘텐츠 데이터와 대응되는 단어 데이터에 대응되는 음성 데이터가 위치하는 시점이 되도록 구성할 수 있다.
여기서, 상기 검색한 멀티미디어 콘텐츠 데이터와 대응되는 단어 데이터에 대응되는 음성 데이터가 위치하는 시점은, 상기 수신된 메시지에서 음성 데이터 인식을 시작하는 시점으로부터 상기 검색한 멀티미디어 콘텐츠 데이터에 대응되는 단어 데이터에 대응되는 음성 데이터의 시작 시점까지의 시간 간격 x를 이용하여 결정하도록 할 수 있다.
여기서, 상기 멀티미디어 콘텐츠 데이터와 대응되는 단어 데이터에 대응되는 음성 데이터가 위치하는 시점은, 상기 검색한 멀티미디어 콘텐츠 데이터와 대응되는 단어 데이터에 대응되는 음성 데이터가 시작하는 시점과 종료되는 시점까지의 시간 간격 y를 획득하여, 상기 종료되는 시점으로부터 상기 획득한 시간 간격 y만큼 앞으로 이동하여 결정하도록 할 수 있다.
여기서, 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계는, 상기 착신 클라이언트와 영상 통화 호를 생성하고, 상기 생성된 영상 통화 호를 이용하여 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송하도록 구성할 수 있다.
여기서, 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계는, 상기 착신 클라이언트로 멀티미디어 메시지 서비스(MMS) 형태로 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송하도록 구성할 수 있다.
본 발명의 또 다른 측면에 의하면, 발신 클라이언트 및 착신 클라이언트와 네트워크를 통해 결합하여 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 멀티미디어 콘텐츠 합성 메시지 전송 장치에 있어서, 상기 네트워크와 연동하는 상기 발신 클라이언트에서 전송된 음성 데이터가 포함된 메시지를 수신하는 메시지 수신부; 상기 메시지 수신부로부터 수신한 메시지에 포함된 음성 데이터를 추출하는 음성 데이터 추출부; 상기 음성 데이터 추출부에서 추출한 음성 데이터를 문장 데이터로 변환하는 문장 데이터 변환부; 상기 추출된 음성 데이터 중 일정 크기 이상의 음성 데이터만을 대상으로 하여 상기 문장 데이터 변환부에서 변환된 문장 데이터로부터 단어 데이터를 분리하여 추출하는 단어 데이터 추출부; 상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 멀티미디어 콘텐츠 데이터 검색부; 상기 멀티미디어 콘텐츠 데이터 검색부로부터 검색한 상기 멀티미디어 콘텐츠 데이터를 상기 메시지 내의 상기 단어 데이터에 대응하는 상기 음성 데이터가 위치한 시점에서 상기 메시지 수신부로부터 수신한 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 생성부; 및 상기 생성된 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 메시지 전송부를 포함하는 음성 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치를 제공한다.
본 발명의 또 다른 측면에 의하면, 발신 클라이언트 및 착신 클라이언트와 네트워크를 통해 결합하는 멀티미디어 콘텐츠 합성 메시지 전송 장치에서 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법에 있어서, 상기 발신 클라이언트로부터 문자 데이터가 포함된 메시지를 수신하는 단계; 상기 수신된 메시지에 포함된 문자 데이터를 추출하는 단계; 상기 추출된 문자 데이터로부터 단어 데이터를 분리하여 추출하는 단계; 상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계; 상기 메시지 내의 상기 단어 데이터가 위치하는 시점에서 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신한 문자 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계; 및 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계를 포함하는 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법을 제공한다.
여기서, 상기 네트워크는 유선 또는 이동 통신망이고, 상기 발신 클라이언트 및 착신 클라이언트는 유선 통신 단말기 또는 이동 통신 단말기가 되도록 구성할 수 있다.
여기서, 상기 네트워크는 인터넷망이고, 상기 발신 클라이언트 및 착신 클라이언트는 인터넷에 접속 가능한 수단이 되도록 구성할 수 있다.
여기서, 상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계에서, 상기 멀티미디어 콘텐츠 데이터는 상기 각각의 단어 데이터에 대응하여 멀티미디어 콘텐츠 데이터베이스에 미리 저장되어 있도록 구성할 수 있다.
여기서, 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계는, 상기 수신된 메시지 위에 상기 검색한 멀티미디어 콘텐츠 데이터가 겹쳐지도록(overlay) 하여 멀티미디어 콘텐츠 합성 메시지를 생성하거나 또는 상기 수신된 메시지에 포함되어 있는 단어 데이터를 상기 검색한 멀티미디어 콘텐츠 데이터로 대체하여 멀티미디어 콘텐츠 합 성 메시지를 생성하도록 할 수 있다.
여기서, 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계는, 상기 착신 클라이언트와 멀티미디어 이름 정보를 포함하는 영상 통화 호를 생성하고 상기 영상 통화 호를 이용하여 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송하도록 할 수 있다.
여기서, 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계는, 상기 착신 클라이언트와 영상 통화 호를 생성하고 상기 영상 통화 호를 이용하여 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송하도록 구성할 수 있다.
여기서, 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계는, 상기 착신 클라이언트로 멀티미디어 메시지 서비스(MMS) 형태로 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송할 수 있다.
본 발명의 또 다른 측면에 의하면, 발신 클라이언트 및 착신 클라이언트와 네트워크를 통해 결합하여 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 멀티미디어 콘텐츠 합성 메시지 전송 장치에 있어서, 상기 네트워크와 연동하여 상기 발신 클라이언트가 문자 데이터가 포함된 메시지를 전송한 경우에 메시지를 수신하는 메시지 수신부; 상기 메시지 수신부로부터 수신한 메시지에 포함된 문자 데이터를 추출하는 문자 데이터 추출부; 상기 문자 데이터 추출부로부터 추출된 문자 데이터로부터 단어 데이터를 분리하여 추출하는 단어 데이터 추출부; 상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 멀티미디어 콘텐츠 데이터 검색부; 상기 메시지 수신부에서 수신한 메시지 내의 상기 단어 데이터가 위치하는 시점에서 상기 검색된 멀티미디어 콘텐츠 데이터를 상기 문자 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 생성부; 상기 생성된 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 메시지 전송부를 포함하는 문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치를 제공한다.
본 발명에 의하면, 네트워크를 통해 전송되는 음성/문자 데이터가 포함된 각종 형태의 메시지를 수신하고, 수신된 메시지에 포함되어 있는 음성/문자 데이터를 이용하여 다양한 형태의 멀티미디어 콘텐츠 합성 메시지를 생성하여 전송함으로써 사용자의 흥미를 유발할 수 있는 메시지 전송 방법 및 장치를 제공할 수 있다.
또한, 본 발명에 의하면, 수신된 메시지에 포함된 음성/단어 데이터를 분석하여, 메시지를 전송한 사용자가 사용한 음성/문자 데이터와 대응되는 멀티미디어 콘텐츠 데이터가 포함된 멀티미디어 콘텐츠 합성 메시지를 생성하여 전송함으로써, 메시지 발신자가 전달하고자 하는 메시지를 더욱 재미있게 변화시키며 또한 발신자의 의미 전달 역시 효율적으로 이루어질 수 있도록 하는 메시지 전송 방법 및 장치를 제공할 수 있다.
또한, 본 발명에 의하면, 발신자 측에서 종래의 방법을 이용하여 전송한 음성/문자 메시지를 분석하고, 그에 대응되는 다양한 형태의 멀티미디어 콘텐츠 합성 메시지를 자동적으로 생성하여 착신자에게 전송함으로써, 발신자는 별도의 신경을 쓸 필요없이 착신자에게 흥미를 유발하는 멀티미디어 콘텐츠 합성 메시지를 전송할 수 있고, 착신자는 이를 통하여 발신자가 전달하고자 하는 메시지를 재미있는 메시지의 형태로 제공받을 수 있는 방법 및 장치를 제공할 수 있다.
이하 첨부된 도면들을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.
도 1은 본 발명에 의한 음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)와 발신 클라이언트(200) 및 착신 클라이언트(300)와의 결합상태를 나타낸 전체 구성도이다.
도 1을 참조하면, 본 발명의 음성/문자 인식을 이용하여 멀티미디어 합성 콘텐츠 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)는 네트워크를 통해 발신 클라이언트(200) 및 착신 클라이언트(300)와 결합되어 있다. 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)는 발신 클라이언트(200) 측에서 전송된 음성/문자 데이터가 포함된 메시지를 네트워크를 통해 수신한 후, 상기 수신된 메시지에 포함된 음성/문자 데이터를 이용하여 다양한 멀티미디어 콘텐츠 데이터 합성 메시지를 생성하여, 생성된 멀티미디어 콘텐츠 합성 메시지를 네트워크를 통해 착신 클라이언트(300) 측으로 전송하는 수단이다. 본 발명에서의 멀티미디어 콘텐츠 합성 메시지는 발신 클라이언트(200) 측에서 전송된 음성/문자 데이터가 포함된 메시지를 수신한 경우, 수신된 메시지에 포함된 음성/문자 데이터에 포함된 단어 데이터와 대응하는 다양한 멀티미디어 콘텐츠 데이터를 찾아 원래의 메시지에 겹쳐지도록 합성하거나 대체 영상으로 변환하는 등의 과정을 거쳐 생성될 수 있다. 이러한 멀티미디어 콘텐츠 합성 메시지의 생성 과정에 대해서는 도 2 내지 도 8에서 더욱 자세히 후술하도록 하겠다.
발신 클라이언트(200) 및 착신 클라이언트(300)는 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)와 연결되어 음성/문자 데이터가 포함된 메시지를 전송하거나 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)에서 생성되어 전송된 멀티미디어 콘텐츠 합성 메시지를 수신하여 재생하는 수단으로서 예컨대, 유선 단말, 무선 단말, VoIP 폰, 컴퓨터 단말, 메신져 등 네트워크를 통해 음성/문자 데이터가 포함된 메시지를 전송하거나 멀티미디어 콘텐츠 합성 메시지 전송 장치에서 생성된 멀티미디어 콘텐츠 합성 메시지를 수신할 수 있는 모든 수단을 의미할 수 있다.
본 발명에 의한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)에서 멀티미디어 콘텐츠 합성 메시지를 생성하는 과정은, 음성 인식을 이용하여 멀티미디어 합성 메시지를 생성하는 과정과 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 과정으로 나눌 수 있는바, 도 2 내지 도 5에서는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하여 전송하는 일실시예에 관하여 설명하고, 도 6 내지 도 8에서는 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하여 전송하는 일실시예에 관하여 설명하도록 한다.
도 2는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)의 상세 구성을 나타낸 블록도이다.
도 2를 참조하면, 음성 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)는 메시지 수신부(101), 음성 데이터 추출부(103), 문장 데이터 변환부(105), 단어 데이터 추출부(107), 멀티미디어 콘텐츠 데이터 검색부(109), 멀티미디어 콘텐츠 합성 메시지 생성부(111) 및 메시지 전송부(113)를 포함한다.
메시지 수신부(101)는 발신 클라이언트(200)에서 전송된 음성 데이터가 포함된 메시지를 네트워크와 연동하여 수신하는 역할을 수행한다. 여기서, 발신 클라이언트(200)에서 전송되는 메시지는 음성 데이터를 포함할 수 있는 모든 종류의 메시지를 의미하는 용어로서, 음성 데이터만을 포함한 음성 메시지, 음성 데이터 및 영상 데이터를 포함하는 영상 메시지 등의 형태로 존재할 수 있다. 또한, 음성 데이터가 포함된 메시지를 전송하는 주체인 발신 클라이언트(200)는 일반적으로 메시지를 전송하는데 사용되는 음성 단말 및 영상 단말을 포함하는 휴대폰 단말뿐 아니라, 컴퓨터 단말, VoIP 폰 등 음성 데이터가 포함된 메시지를 전송할 수 있는 모든 수단을 포함하는 개념이다.
음성 데이터 추출부(103)는 상기 메시지 수신부(103)로부터 수신한 메시지에 포함된 음성 데이터를 추출하는 역할을 수행한다. 즉, 발신 클라이언트(200)로부터 수신한 메시지에는 음성 데이터뿐 아니라, 이미지 데이터, 텍스트 데이터 및 영상 데이터 등 다양한 데이터가 결합한 형태로 존재할 수 있는바, 음성 데이터 추출부(103)는 이 중에서 음성 데이터만을 추출하기 위한 수단이다. 음성 데이터 추출 부(103)에서 단어 데이터를 추출하는 경우에 모든 음성 데이터에 대응하는 단어 데이터를 추출하는 것이 일반적이지만, 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)의 설정에 의하여 예컨대 일정 크기(Amplitide) 이상의 음성 데이터만을 대상으로 하여, 상기 일정 크기 이상의 음성 데이터에 포함된 단어 데이터만을 추출하도록 구성하는 것도 가능하다. 즉, 음성 데이터가 포함된 영상 편지를 전송하는 경우, 모든 음성 데이터를 분석하는 것은 비효율적일 수 있으므로, 일정 크기 이상의 음성 데이터만을 분석하여 단어 데이터를 추출함으로써 음성 인식에 소요되는 비용 및 시간을 줄일 수 있는 효과를 가질 수 있을 것이다.
문장 데이터 변환부(105)는 상기 음성 데이터 추출부(103)에서 추출한 음성 데이터를 문장 데이터로 변환하는 역할을 수행한다. 여기서, 문장이란 적어도 하나 이상의 단어를 포함하는 텍스트를 의미한다. 단어 데이터 추출부(107)는 상기 문장 데이터 변환부(105)에서 변환된 문장 데이터로부터 단어 데이터를 분리하여 추출하는 역할을 수행한다.
멀티미디어 콘텐츠 데이터 검색부(109)는 상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 역할을 수행한다. 여기서, 멀티미디어 콘텐츠 데이터는 각각의 단어 데이터에 대응하여 멀티미디어 콘텐츠 데이터 베이스에 미리 저장되어 있을 수 있다. 예컨대, 멀티미디어 콘텐츠 데이터 베이스에는 "사랑", "술", 맥주", 전화", "밤" 등의 각각의 단어 데이터에 해당하는 멀티미디어 콘텐츠 데이터가 저장되어 있을 수 있다. 멀티미디어 콘텐츠 데이터는 각각의 단어 데이터와 연관성이 있는 이미지 데이터, 플래시 데이터 및 동영상 데이터 등의 형태로 존재하는 것이 바람직하다.
멀티미디어 콘텐츠 합성 메시지 생성부(111)는 상기 멀티미디어 콘텐츠 데이터 검색부(109)로부터 검색된 각각의 멀티미디어 콘텐츠 데이터를 상기 메시지 수신부(101)에서 수신한 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 역할을 수행한다. 여기서, 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 것은, 상기 수신된 메시지와 상기 검색한 멀티미디어 콘텐츠 데이터가 서로 겹쳐지도록(overlay) 함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하거나, 상기 수신된 메시지에 포함되어 있는 음성 데이터만을 상기 검색한 멀티미디어 콘텐츠 데이터를 서로 결합함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하거나, 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지의 앞 부분에 위치하도록 결합함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하도록 할 수 있다.
즉, 발신 클라이언트(200) 측에서 예컨대 "사랑해"라는 음성 데이터가 포함된 영상 메시지를 전송하는 경우, 상기의 영상 메시지의 영상 위에 예컨대 하트 모양의 상기 검색한 멀티미디어 콘텐츠 데이터가 서로 겹쳐지도록(overlay)하여 멀티미디어 콘텐츠 합성 메시지가 생성되거나 상기의 영상 메시지 중에서 음성 데이터인 "사랑해"만을 분리한 후, 분리된 음성 데이터 "사랑해"와 상기 검색한 멀티미디어 콘텐츠 데이터인 하트 모양를 서로 결합함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하거나 또는 상기 검색한 멀티미디어 콘텐츠 데이터인 하트 모양을 상기의 영상 메시지의 앞 부분에 위치하도록 결합하여 멀티미디어 콘텐츠 합성 메시지 를 생성하도록 할 수 있는 것이다.
또한, 상기 설명한 바와 같이 상기 검색한 멀티미디어 콘텐츠 데이터가 상기 수신된 메시지에 서로 겹쳐지는(overlay) 시점 또는 상기 수신된 메시지에 포함되어 있는 음성 데이터가 상기 검색한 멀티미디어 콘텐츠 데이터와 결합되는 시점은, 상기 검색한 멀티미디어 콘텐츠 데이터와 대응되는 단어 데이터에 대응되는 음성 데이터가 위치하는 시점인 것이 바람직하다. 즉, 수신된 메시지를 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하여 착신 클라이언트(300) 측으로 전송하는 경우, 전송될 멀티미디어 콘텐츠 합성 메시지가 원래의 메시지에 포함된 음성 데이터와 동기가 맞아야만 착신 클라이언트(300) 측 사용자의 감각을 자극하고, 그 의미의 정확한 전달이 가능하기 때문이다. 이러한, 멀티미디어 콘텐츠 데이터의 합성 시점에 관해서는 도 5에서 자세히 후술하도록 한다.
메시지 전송부(113)는 상기 멀티미디어 콘텐츠 합성 메시지 생성부(111)에서 생성된 멀티미디어 콘텐츠 합성 메시지를 착신 클라이언트(300) 측으로 전송하는 역할을 수행한다. 멀티미디어 콘텐츠 합성 메시지가 착신 클라이언트(300) 측으로 전송되는 경우, 예컨대 착신 클라이언트(300) 측이 영상 단말이라면 영상 통화 망을 통하여 멀티미디어 콘텐츠 합성 메시지를 전송하고, 착신 클라이언트(300) 측이 영상 단말이 아니라면 멀티미디어 메시지 서비스(MMS, Multimedia Message Service) 망을 통하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 것이 바람직하다. 또한, 착신 클라이언트(300) 측이 인터넷에 접속 가능한 예컨대 컴퓨터 단말인 경우 멀티미디어 콘텐츠 합성 메시지는 인터넷 망을 통하여 착신 클라이언 트(300) 측으로 전송될 수 있다.
도 3은 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)에서 수행하는 서비스 절차를 나타낸 흐름도이다.
도 3을 참조하면, 우선 음성 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)는 네트워크를 통해 발신 클라이언트(200) 측으로부터 전송된 음성 데이터가 포함된 메시지를 수신한다(S300). 발신 클라이언트(200) 측에서 전송되는 메시지는 발신 클라이언트(200) 측의 사용자가 착신 클라이언트(300) 측의 사용자에게 전달하고자 하는 메시지로서, 음성 데이터를 포함하는 모든 메시지 형태 예컨대, 음성 사서함 메시지, 음성 편지 메시지, 영상 편지 메시지 등을 포함하는 개념이다. 여기서, 발신 클라이언트(200) 및 착신 클라이언트(300)가 유선 통신 단말기 또는 이동 통신 단말기인 경우, 상기 네트워크는 유선 또는 이동 통신망인 것이 바람직하며, 발신 클라이언트(200) 및 착신 클라이언트(300)가 인터넷에 접속 가능한 수단인 경우, 상기 네트워크는 인터넷망인 것이 바람직하다.
음성 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)는 상기 음성 데이터가 포함된 메시지를 수신한 후, 메시지에 포함된 다양한 형태의 데이터 중에서 음성 데이터만을 분리하여 추출한다(S310). 음성 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)는 수신된 메시지의 음성 데이터를 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 것을 주요 목적으로 하기 때문에 수신 된 메시지에서 음성 데이터만을 분리하여 추출하는 것이다.
음성 데이터만이 분리되어 추출된 이후, 상기 추출된 음성 데이터를 문장 데이터로 변환한다(S320). 여기서, 음성 데이터를 문장 데이터로 변환하는 것은 음성 인식기 등을 이용하여 수행될 수 있다. 이러한 음성 인식기 등을 이용하여 음성 데이터를 문장 데이터로 변환하는 것은 종래의 기술을 이용한 것이므로 별도의 자세한 설명은 생략하도록 한다.
다음 과정으로, 음성 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)는 상기 변환된 문장 데이터를 분석하여 각각의 단어 데이터를 추출한다(S330). 그리고, 상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색한다(S340). 멀티미디어 콘텐츠 데이터는 상기 추출된 각각의 단어 데이터와 대응되는 데이터로서, 각각의 단어 데이터가 연상될 수 있는 이미지 데이터, 플래시 데이터 및 동영상 데이터 등의 형태로 존재할 수 있다. 이러한 멀티미디어 콘텐츠 데이터는 상기 각각의 단어 데이터에 대응하여 멀티미디어 콘텐츠 데이터 베이스에 미리 저장되어 있을 수 있다. 또한, 본 실시예에서는 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 것을 설명하였으나, 이는 하나의 실시예에 불과할 뿐이며, 단어 데이터가 아닌 문장 데이터를 기초로 하여 각각의 문장에 대응하는 멀티미디어 콘텐츠 데이터가 검색되도록 구성하는 것도 가능하다 할 것이다.
마지막으로 음성 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)는 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하 여 멀티미디어 콘텐츠 합성 메시지를 생성하고(S350), 상기 생성된 멀티미디어 콘텐츠 합성 메시지를 네트워크를 통해 착신 클라이언트(300) 측으로 전송한다(S360). 여기서, 상기 검색한 멀티미디어 콘텐츠 데이터와 상기 수신된 메시지를 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 다양한 방법에 의하여 이루어질 수 있다. 즉, 도 2에서 상술한 바와 같이 멀티미디어 콘텐츠 합성 메시지의 생성은, 상기 수신된 메시지와 상기 검색한 멀티미디어 콘텐츠 데이터가 서로 겹쳐지도록(overlay) 함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하거나, 상기 수신된 메시지에 포함되어 있는 음성 데이터와 상기 검색한 멀티미디어 콘텐츠 데이터를 서로 결합함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하거나, 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지의 앞 부분에 위치하도록 결합함으로써 이루어질 수 있다.
상기의 멀티미디어 콘텐츠 합성 메시지를 생성하는 과정을 예를 들어 설명해 보면, 도 2에서 상술한 바와 같이, 발신 클라이언트(200) 측에서 예컨대 "사랑해"라는 음성 데이터가 포함된 영상 메시지를 전송하는 경우, 상기의 영상 메시지의 영상 위에 예컨대 하트 모양의 상기 검색한 멀티미디어 콘텐츠 데이터가 서로 겹쳐지도록(overlay)하여 멀티미디어 콘텐츠 합성 메시지가 생성되거나 상기의 영상 메시지 중에서 음성 데이터인 "사랑해"만을 분리한 후, 분리된 음성 데이터 "사랑해"와 상기 검색한 멀티미디어 콘텐츠 데이터인 하트 모양을 서로 결합함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하거나 또는 상기 검색한 멀티미디어 콘텐츠 데이터인 하트 모양을 상기의 영상 메시지의 앞 부분에 위치하도록 결합하여 멀티미 디어 콘텐츠 합성 메시지를 생성하도록 할 수 있는 것이다.
또한, 발신 클라이언트(200) 및 착신 클라이언트(300) 측이 유선 또는 무선 통신 단말기인 경우 상기 네트워크는 유선 또는 이동 통신망이며, 발신 클라이언트(200) 및 착신 클라이언트(300) 측이 인터넷에 접속 가능한 수단인 경우 상기 네트워크는 인터넷망일 수 있다. 또한, 생성된 멀티미디어 콘텐츠 합성 메시지를 착신 클라이언트(300)로 전송하는 경우, 멀티미디어 콘텐츠 합성 메시지는 착신 클라이언트(300)와 영상 통화 호를 생성하여, 상기 생성된 영상 통화 호를 이용하여 전송되거나 상기 착신 클라이언트(300)로 멀티미디어 메시지 서비스(Multimedia Message Service) 형태로 전송되거나 또는 착신 클라이언트(300) 측이 인터넷 접속 가능한 수단이라면 인터넷 망을 통하여 전송될 수 있다.
도 4는 도 3에서 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 방법을 나타내기 위한 도면이다.
도 4를 참조하면, 발신 클라이언트(200) 측에서 전송된 "오늘 밤에 맥주나 한잔 할까"라는 음성 데이터가 포함된 메시지를 수신한 후, 음성 데이터 추출부(103)가 상기 수신한 메시지에 포함된 음성 데이터를 추출한다. 추출된 음성 데이터는 문장 데이터 변환부(105)에 의하여 "오늘 밤에 맥주나 한잔 할까"라는 문장 데이터로 변환된다. 상기 변환된 문장 데이터는 단어 데이터 추출부(107)에 의하여 "오늘", "밤", "맥주" 라는 3개의 단어 데이터로 분리되어 추출된다. 그리고 나서, 멀티미디어 콘텐츠 데이터 검색부(109)는 각각 "오늘", "밤", "맥주"라는 단 어 데이터에 상응하는 멀티미디어 콘텐츠 데이터가 저장되어 있는지를 검색하게 되며, 도 4를 참조하면 "밤", "맥주"에 상응하는 멀티미디어 콘텐츠는 존재하나 "오늘"에 상응하는 멀티미디어 콘텐츠는 존재하지 않는 것으로 설정되어 있다. 상기와 같이 멀티미디어 콘텐츠 데이터 검색부(109)에서 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터의 검색이 완료된 이후에, 이러한 정보는 멀티미디어 콘텐츠 합성 메시지 생성부(111)로 전송되며, 멀티미디어 콘텐츠 합성 메시지 생성부(111)에서는 상기의 멀티미디어 콘텐츠 데이터를 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하게 된다. 이러한 경우, 상기 "밤", "맥주"와 대응하는 멀티미디어 콘텐츠 데이터는 각각 "밤", "맥주"의 음성 데이터가 위치하는 시점에서 합성되는 것이 바람직하다.
도 4에서는 각각의 단어 데이터와 대응하는 멀티미디어 콘텐츠 데이터가 정지 형태의 이미지 데이터인 것으로 표현되었으나, 멀티미디어 콘텐츠 데이터는 도 4에서와 같은 이미지 데이터뿐 아니라, 플래시 데이터, 영상 데이터 등 다양한 형태의 데이터 형태로 존재할 수 있음에 유의하여야 한다.
도 5a 및 도 5b는 음성 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)에서 수신한 메시지에 포함된 음성 데이터에 멀티미디어 콘텐츠 데이터가 합성되는 시점을 찾기 위한 방법을 나타내는 도면이다.
본 발명에 의한 음성 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)는 발신 클라이언트(200) 측에서 전송된 음성 데이터가 포함된 메시지를 수 신하고, 수신된 메시지에 포함된 음성 데이터에 포함된 단어 데이터를 추출하고, 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하고, 검색된 멀티미디어 콘텐츠 데이터를 상기 수신한 메시지와의 합성을 통해서 멀티미디어 콘텐츠 합성 메시지를 생성하는 것을 주요 특징의 하나로 포함한다. 여기서, 검색된 멀티미디어 콘텐츠 데이터를 수신한 메시지와 합성하는 경우, 멀티미디어 콘텐츠 데이터는 멀티미디어 콘텐츠 데이터와 대응하는 음성 데이터가 위치하는 시점에 합성되는 것이 바람직하다. 즉, 착신 클라이언트(300) 측으로 멀티미디어 콘텐츠 합성 메시지를 전송하는 경우에 멀티미디어 콘텐츠 데이터는 그에 대응하는 음성 데이터와 동기가 맞아야만 수신자의 감각을 자극할 수 있고, 음성 데이터 중 해당 단어에 정확히 맞는 멀티미디어 콘텐츠 합성 메시지가 생성되어야 발신 클라이언트(200) 측에서 전송한 메시지가 착신 클라이언트(300) 측의 사용자에게 정확히 그 의미가 전달되기 때문이다.
도 5a를 참조하면, 발신 클라이언트(200) 측으로부터 수신한 메시지 "오늘 맥주나 한잔 할까" 에 포함된 음성 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 상기 수신한 메시지와의 동기화를 통해 멀티미디어 콘텐츠 합성 메시지를 생성하는 것은, 상기 수신한 메시지에서 음성 데이터 인식을 시작하는 시점으로부터 인식 대상이 되는 상기 음성 데이터에 포함된 단어 데이터의 시작 시점까지의 시간 간격 x를 획득하는 제1 단계, 상기 시간 간격 x를 포함하는 인식 결과를 생성하는 제2 단계 및 상기 시간 간격 x를 포함하는 인식 결과를 이용하여 상기 수신된 메시지에서 음성 데이터 인식을 시작한 시점으로부터 x 시점에 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지에 합성하는 제3 단계를 거쳐 이루어질 수 있다. 즉, 도 5a에서 멀티미디어 콘텐츠 데이터에 대응되는 단어 데이터가 "맥주"라고 한다면, "맥주"에 대응하는 멀티미디어 콘텐츠 데이터는 음성 데이터가 시작한 시점으로부터 x의 시간 간격이 지난 후에 합성됨으로써 멀티미디어 콘텐츠 데이터와 수신된 메시지와의 동기화를 수행하게 되는 것이다.
또한, 도 5b를 참조하면, 발신 클라이언트(200) 측으로부터 수신한 메시지 "오늘 맥주나 한잔 할까" 에 포함된 음성 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 상기 수신한 메시지와의 동기화를 통해 멀티미디어 콘텐츠 합성 메시지를 생성하는 것은, 상기 음성 데이터에 포함된 단어 데이터가 시작하는 시점과 종료 시점까지의 시간 간격 y를 획득하는 제1 단계, 상기 획득한 시간 간격 y를 포함하는 인식 결과를 생성하는 제2 단계 및 상기 인식 결과를 생성한 시점으로부터 시간 간격 y만큼 이전 시점에서 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하는 제3 단계를 거쳐 이루어질 수 있다. 즉, 도 5b에서 멀티미디어 콘텐츠 데이터에 대응되는 단어 데이터가 "맥주"라고 한다면, "맥주"에 대응하는 멀티미디어 콘텐츠 데이터는 상기 인식 결과가 생성된 시점으로부터 y의 시간 간격만큼 이전 시점에서 합성됨으로써 멀티미디어 콘텐츠 데이터와 수신된 메시지와의 동기화를 수행하게 되는 것이다.
상기 수신된 메시지에서 음성 데이터 인식을 시작하는 시점으로부터 상기 수신된 메시지에서 음성 데이터에 포함된 단어 데이터가 시작하는 시점까지의 시간 간격 x에 대한 정보가 존재하는 경우에는 도 5a 과정을 거쳐 동기화 시점을 찾을 수 있으며, 상기 시간 간격 x에 대한 정보가 존재하지 않는 경우에는 도 5b 과정을 거쳐 동기화 시점을 찾을 수 있다. 상술한 바와 같은 동기화 방법은 멀티미디어 콘텐츠 데이터가 합성되는 시점을 찾는 하나의 예에 불과할 뿐이므로, 상기의 방법뿐 아니라, 다른 다양한 방법에 의하여서도 동기화에 의한 합성 시점을 찾을 수 있음은 물론이라 할 것이다.
도 6은 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)의 상세 구성을 나타낸 블록도이다.
도 6을 참조하면, 문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)는 메시지 수신부(121), 문자 데이터 추출부(123), 단어 데이터 추출부(125), 멀티미디어 콘텐츠 데이터 검색부(127), 멀티미디어 콘텐츠 합성 메시지 생성부(129) 및 메시지 전송부(131)를 포함한다.
메시지 수신부(121)는 발신 클라이언트(200)에서 전송된 문자 데이터가 포함된 메시지를 네트워크와 연동하여 수신하는 역할을 수행한다. 여기서, 문자 데이터가 포함된 메시지는 문자 데이터를 포함할 수 있는 모든 종류의 메시지를 의미하는 용어로서 예컨대 발신 클라이이언트(200)가 무선 단말인 경우 단말을 이용한 단문 메시지(SMS) 또는 멀티미디어 메시지(MMS)의 형태로 존재할 수 있으며, 발신 클라이언트(200)가 인터넷에 접속 가능한 컴퓨터 단말인 경우, 컴퓨터 단말에 설치된 메신져 등의 응용 프로그램을 통한 문자 데이터가 포함된 메시지 예컨대 쪽지, 메신져의 채팅창을 이용한 문자 입력 등의 형태로도 존재할 수 있다. 또한, 문자 데 이터가 포함된 메시지를 전송하는 발신 클라이언트(200)는 일반적으로 메시지를 전송하는데 사용되는 음성 단말 및 영상 단말을 포함하는 휴대폰 단말뿐 아니라, 컴퓨터 단말, PDA 등 문자 데이터가 포함된 메시지를 전송할 수 있는 모든 수단을 포함하는 개념이다. 문자 데이터 추출부(123)는 상기 메시지 수신부(121)로부터 수신한 메시지에 포함된 문자 데이터를 추출하는 역할을 수행한다. 즉, 다양한 데이터의 결합으로 되어 있는 메시지에서 문자 데이터만을 분리하여 추출한다.
단어 데이터 추출부(125), 멀티미디어 콘텐츠 데이터 검색부(127), 멀티미디어 콘텐츠 합성 메시지 생성부(127) 및 메시지 전송부(131)는 각각 도 2에서 상술한 단어 데이터 추출부(107), 멀티미디어 콘텐츠 데이터 검색부(109), 멀티미디어 콘텐츠 합성 메시지 생성부(111) 및 메시지 전송부(113)와 동일한 기능을 수행하므로 상세한 설명은 생략하기로 한다. 단, 여기서 멀티미디어 콘텐츠 합성 메시지 생성부(127)에서 수신한 메시지와 검색한 멀티미디어 콘텐츠 데이터를 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 경우, 수신된 메시지 위에 검색한 멀티미디어 콘텐츠 데이터가 겹쳐지도록(overlay) 하여 멀티미디어 콘텐츠 합성 메시지를 생성하거나 또는 수신된 메시지에 포함되어 있는 단어 데이터를 검색한 멀티미디어 콘텐츠 데이터로 대체하여 멀티미디어 콘텐츠 합성 메시지를 생성하도록 한다는 것이 도 2의 멀티미디어 콘텐츠 합성 메시지 생성부(111)와의 차이점이다.
도 7은 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)에서 수행하는 서비스 과정을 나타낸 흐름도이다.
도 7을 참조하면, 우선 발신 클라이언트(200) 측으로부터 문자 데이터가 포함된 메시지를 수신한다(S700). 메시지를 수신한 후, 메시지에 포함되어 있는 문자 데이터를 추출한다(S710). 다음으로, 상기 추출된 문자 데이터를 이용하여 분리하여 각각의 단어 데이터를 추출한다(S720). 그리고, 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하고(S730), 검색된 멀티미디어 콘텐츠 데이터를 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성한다(S740). 마지막으로, 상기 생성된 멀티미디어 콘텐츠 합성 메시지는 네트워크를 통해 착신 클라이언트(300) 측으로 전송된다(S750). 여기서, 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 경우에, 상기 착신 클라이언트와 멀티미디어 이름 정보를 포함하는 영상 통화 호를 생성하고 상기 영상 통화 호를 이용하여 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송하거나 상기 착신 클라이언트와 영상 통화 호를 생성하고 상기 영상 통화 호를 이용하여 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송하거나 또는 상기 착신 클라이언트로 멀티미디어 메시지 서비스(MMS) 형태로 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송할 수 있다.
도 7의 과정은 도 3에서 상술한 내용과 비교하여, 도 3에서는 음성 데이터가 포함된 메시지를 수신하여 멀티미디어 콘텐츠 합성 메시지를 생성하고, 도 7에서는 문자 데이터가 포함된 메시지를 수신하여 멀티미디어 콘텐츠 합성 메시지를 생성한다는 점에서 차이가 있을 뿐, 나머지 과정은 동일하므로 도 7의 자세한 설명은 역 시 생략하도록 한다.
도 8은 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 일실시예를 나타낸 도면이다.
도 8을 참조하면, 우선 발신 클라이언트(200) 측에서 문자 데이터인 "오늘 밤 맥주나 한잔 할까"라는 문장이 포함된 메시지를 작성하여 전송한다. 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)에서는 상기 문자 데이터가 포함된 메시지를 수신하여, 수신된 메시지 중 문자 데이터 부분인 "오늘 밤 맥주나 한잔 할까"라는 부분을 추출한다. 다음 과정으로, "오늘 밤 맥주나 한잔 할까"라는 문장을 단어 데이터로 분리하여 추출한다. 도 8을 참조하면, 단어 데이터로 "오늘", "밤", "맥주"가 분리되어 추출된 것을 볼 수 있다. 각각의 단어 데이터가 추출되면, 각각의 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색한다. 멀티미디어 콘텐츠 데이터는 단어 데이터를 연상시킬 수 있는 데이터로서, 이미지 데이터, 플래시 데이터 및 동영상 데이터 등 다양한 형태로 존재할 수 있다. 이러한, 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터는 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)의 내부에 멀티미디어 콘텐츠 데이터 베이스 등에 미리 설정되어 저장되어 있는 것이 바람직하다.
도 8을 참조하면, "오늘"이라는 단어 데이터에 해당하는 멀티미디어 콘텐츠 데이터는 존재하지 않으며, "밤"이라는 단어 데이터 및 "맥주"라는 단어 데이터에 해당하는 멀티미디어 콘텐츠 데이터는 존재하는 것으로 설정되어 있다. 각각의 단 어 데이터에 해당하는 멀티미디어 콘텐츠 데이터가 검색된 후에는, 상기 검색된 멀티미디어 콘텐츠 데이터와 발신 클라이언트(200) 측에서 전송한 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성한다. 도 8에는 착신 클라이언트(300) 측으로 전송된 멀티미디어 콘텐츠 합성 메시지는 원래의 메시지 위에 상기 검색된 "밤" 및 "맥주"에 대응하는 멀티미디어 콘텐츠 데이터가 겹쳐지도록 하는 방법에 의하여 생성되는 것과 수신된 메시지 중에서 "밤"에 해당하는 문자 데이터를 "밤"에 대응하는 초승달 모양의 멀티미디어 콘텐츠 데이터로 대체하여 표시하고, "맥주"에 해당하는 문자 데이터를 "맥주"에 대응하는 맥주컵 모양의 멀티미디어 콘텐츠 데이터로 대체하여 표시하도록 하여 멀티미디어 콘텐츠 합성 메시지가 생성되는 것에 대하여 나타내고 있다. 상기와 같은 과정을 거쳐서 생성된 멀티미디어 콘텐츠 합성 메시지는 네트워크를 통해 착신 클라이언트(300) 측으로 전송된다. 여기서, 생성된 멀티미디어 콘텐츠 합성 메시지가 전송되는 경우, 상기와 같은 두 가지 형태의 합성 메시지 중 임의로 선택하여 전송이 되거나 발신 또는 착신 클라이언트 사용자의 설정에 의하여 미리 정해진 형태의 합성 메시지가 전송이 되도록 설정될 수 있음은 물론이다.
이상에서, 본 발명의 바람직한 실시예를 참조하여 본 발명의 구성을 설명하였으나, 본 발명이 상기 실시예에 한정되는 것이 아님은 물론이며, 첨부한 청구범위 및 도면에 의해 파악되는 본 발명의 범위 내에서 여러 가지의 변형, 수정 및 개선이 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 충분히 이해할 수 있을 것이다.
도 1은 본 발명에 의한 음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)와 발신 클라이언트(200) 및 착신 클라이언트(300)와의 결합상태를 나타낸 전체 구성도이다.
도 2는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)의 상세 구성을 나타낸 블록도이다.
도 3은 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)에서 수행하는 서비스 절차를 나타낸 흐름도이다.
도 4는 도 3에서 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 방법을 나타내기 위한 도면이다.
도 5a 및 도 5b는 음성 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)에서 수신한 메시지에 포함된 음성 데이터에 멀티미디어 콘텐츠 데이터가 합성되는 시점을 찾기 위한 방법을 나타내는 도면이다.
도 6은 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)의 상세 구성을 나타낸 블록도이다.
도 7은 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 전송 장치(100)에서 수행하는 서비스 과정을 나타낸 흐름도이다.
도 8은 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 일 실시예를 나타낸 도면이다.

Claims (24)

  1. 발신 클라이언트 및 착신 클라이언트와 네트워크를 통해 결합하는 멀티미디어 콘텐츠 합성 메시지 전송 장치에서 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법에 있어서,
    상기 발신 클라이언트로부터 음성 데이터가 포함된 메시지를 수신하는 단계;
    상기 수신된 메시지에 포함된 음성 데이터를 추출하는 단계;
    상기 추출된 음성 데이터에 포함되어 있는 단어 데이터를 추출하는 단계;
    상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계;
    상기 메시지 내의 상기 단어 데이터에 대응하는 상기 음성 데이터가 위치하는 시점에서 상기 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계; 및
    상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계
    를 포함하고,
    상기 추출된 음성 데이터에 포함되어 있는 단어 데이터를 추출하는 단계는, 상기 추출된 음성 데이터 중 일정 크기(Amplitude) 이상의 음성 데이터만을 대상으로 하여 상기 단어 데이터를 추출하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  2. 제1항에 있어서,
    상기 네트워크는 유선 또는 이동 통신망이고, 상기 발신 클라이언트 및 착신 클라이언트는 유선 통신 단말기 또는 이동 통신 단말기인 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  3. 제1항에 있어서,
    상기 네트워크는 인터넷망이고, 상기 발신 클라이언트 및 착신 클라이언트는 인터넷에 접속 가능한 수단인 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  4. 삭제
  5. 제1항에 있어서,
    상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계에서,
    상기 멀티미디어 콘텐츠 데이터는 상기 각각의 단어 데이터에 대응하여 멀티미디어 콘텐츠 데이터베이스에 미리 저장되어 있는 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  6. 제1항에 있어서,
    상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계는,
    상기 수신된 메시지와 상기 검색한 멀티미디어 콘텐츠가 서로 겹쳐지도록(overlay) 함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하는 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  7. 제1항에 있어서,
    상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계는,
    상기 수신된 메시지에 포함되어 있는 음성 데이터와 상기 검색한 멀티미디어 콘텐츠 데이터를 서로 결합함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하는 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하 는 방법.
  8. 제1항에 있어서,
    상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계는,
    상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지의 앞 부분에 위치하도록 결합함으로써 멀티미디어 콘텐츠 합성 메시지를 생성하는 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  9. 제6항에 있어서,
    상기 검색한 멀티미디어 콘텐츠 데이터가 상기 수신된 메시지에 서로 겹쳐지는 시점은,
    상기 검색한 멀티미디어 콘텐츠 데이터와 대응되는 단어 데이터에 대응되는 음성 데이터가 위치하는 시점인 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법. .
  10. 제7항에 있어서,
    상기 수신된 메시지에 포함되어 있는 음성 데이터와 상기 검색한 멀티미디어 콘텐츠 데이터가 서로 결합되는 시점은,
    상기 검색한 멀티미디어 콘텐츠 데이터와 대응되는 단어 데이터에 대응되는 음성 데이터가 위치하는 시점인 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법. .
  11. 제9항 또는 제10항에 있어서,
    상기 검색한 멀티미디어 콘텐츠 데이터와 대응되는 단어 데이터에 대응되는 음성 데이터가 위치하는 시점은,
    상기 수신된 메시지에서 음성 데이터 인식을 시작하는 시점으로부터 상기 검색한 멀티미디어 콘텐츠 데이터에 대응되는 단어 데이터에 대응되는 음성 데이터의 시작 시점까지의 시간 간격 x를 이용하여 결정하는 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  12. 제9항 또는 제10항에 있어서,
    상기 멀티미디어 콘텐츠 데이터와 대응되는 단어 데이터에 대응되는 음성 데이터가 위치하는 시점은,
    상기 검색한 멀티미디어 콘텐츠 데이터와 대응되는 단어 데이터에 대응되는 음성 데이터가 시작하는 시점과 종료되는 시점까지의 시간 간격 y를 획득하여, 상기 종료되는 시점으로부터 상기 획득한 시간 간격 y만큼 앞으로 이동하여 결정하는 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  13. 제1항에 있어서,
    상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계는,
    상기 착신 클라이언트와 영상 통화 호를 생성하고, 상기 생성된 영상 통화 호를 이용하여 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송하는 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  14. 제1항에 있어서,
    상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계는,
    상기 착신 클라이언트로 멀티미디어 메시지 서비스(MMS) 형태로 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송하는 것을 특징으로 하는 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  15. 발신 클라이언트 및 착신 클라이언트와 네트워크를 통해 결합하여 음성 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 멀티미디어 콘텐츠 합성 메시지 전송 장치에 있어서,
    상기 네트워크와 연동하는 상기 발신 클라이언트에서 전송된 음성 데이터가 포함된 메시지를 수신하는 메시지 수신부;
    상기 메시지 수신부로부터 수신한 메시지에 포함된 음성 데이터를 추출하는 음성 데이터 추출부;
    상기 음성 데이터 추출부에서 추출한 음성 데이터를 문장 데이터로 변환하는 문장 데이터 변환부;
    상기 추출된 음성 데이터 중 일정 크기 이상의 음성 데이터만을 대상으로 하여 상기 문장 데이터 변환부에서 변환된 문장 데이터로부터 단어 데이터를 분리하여 추출하는 단어 데이터 추출부;
    상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 멀티미디어 콘텐츠 데이터 검색부;
    상기 멀티미디어 콘텐츠 데이터 검색부로부터 검색한 상기 멀티미디어 콘텐츠 데이터를 상기 메시지 내의 상기 단어 데이터에 대응하는 상기 음성 데이터가 위치한 시점에서 상기 메시지 수신부로부터 수신한 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 생성부; 및
    상기 생성된 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 메시지 전송부
    를 포함하는 음성 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치.
  16. 발신 클라이언트 및 착신 클라이언트와 네트워크를 통해 결합하는 멀티미디어 콘텐츠 합성 메시지 전송 장치에서 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법에 있어서,
    상기 발신 클라이언트로부터 문자 데이터가 포함된 메시지를 수신하는 단계;
    상기 수신된 메시지에 포함된 문자 데이터를 추출하는 단계;
    상기 추출된 문자 데이터로부터 단어 데이터를 분리하여 추출하는 단계;
    상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계;
    상기 메시지 내의 상기 단어 데이터가 위치하는 시점에서 상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신한 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계; 및
    상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계
    를 포함하는 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  17. 제16항에 있어서,
    상기 네트워크는 유선 또는 이동 통신망이고, 상기 발신 클라이언트 및 착신 클라이언트는 유선 통신 단말기 또는 이동 통신 단말기인 것을 특징으로 하는 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  18. 제16항에 있어서,
    상기 네트워크는 인터넷망이고, 상기 발신 클라이언트 및 착신 클라이언트는 인터넷에 접속 가능한 수단인 것을 특징으로 하는 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  19. 제16항에 있어서,
    상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계에서,
    상기 멀티미디어 콘텐츠 데이터는 상기 각각의 단어 데이터에 대응하여 멀티미디어 콘텐츠 데이터베이스에 미리 저장되어 있는 것을 특징으로 하는 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  20. 제16항에 있어서,
    상기 검색한 멀티미디어 콘텐츠 데이터를 상기 수신된 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 단계는,
    상기 수신된 메시지 위에 상기 검색한 멀티미디어 콘텐츠 데이터가 겹쳐지도록(overlay) 하여 멀티미디어 콘텐츠 합성 메시지를 생성하거나 또는 상기 수신된 메시지에 포함되어 있는 단어 데이터를 상기 검색한 멀티미디어 콘텐츠 데이터로 대체하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 것을 특징으로 하는 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  21. 제16항에 있어서,
    상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계는,
    상기 착신 클라이언트와 멀티미디어 이름 정보를 포함하는 영상 통화 호를 생성하고 상기 영상 통화 호를 이용하여 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송하는 것을 특징으로 하는 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  22. 제16항에 있어서,
    상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송 하는 단계는,
    상기 착신 클라이언트와 영상 통화 호를 생성하고 상기 영상 통화 호를 이용하여 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송하는 것을 특징으로 하는 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  23. 제16항에 있어서,
    상기 생성한 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 단계는,
    상기 착신 클라이언트로 멀티미디어 메시지 서비스(MMS) 형태로 상기 생성한 멀티미디어 콘텐츠 합성 메시지를 전송하는 것을 특징으로 하는 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 방법.
  24. 발신 클라이언트 및 착신 클라이언트와 네트워크를 통해 결합하여 문자 인식을 이용하여 멀티미디어 콘텐츠 합성 메시지를 전송하는 멀티미디어 콘텐츠 합성 메시지 전송 장치에 있어서,
    상기 네트워크와 연동하여 상기 발신 클라이언트가 문자 데이터가 포함된 메시지를 전송한 경우에 메시지를 수신하는 메시지 수신부;
    상기 메시지 수신부로부터 수신한 메시지에 포함된 문자 데이터를 추출하는 문자 데이터 추출부;
    상기 문자 데이터 추출부로부터 추출된 문자 데이터로부터 단어 데이터를 분리하여 추출하는 단어 데이터 추출부;
    상기 추출된 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 멀티미디어 콘텐츠 데이터 검색부;
    상기 메시지 수신부에서 수신한 메시지 내의 상기 단어 데이터가 위치하는 시점에서 상기 검색된 멀티미디어 콘텐츠 데이터를 상기 메시지와 합성하여 멀티미디어 콘텐츠 합성 메시지를 생성하는 멀티미디어 콘텐츠 합성 메시지 생성부;
    상기 생성된 멀티미디어 콘텐츠 합성 메시지를 상기 착신 클라이언트로 전송하는 메시지 전송부
    를 포함하는 문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지 전송 장치.
KR20080055570A 2008-06-13 2008-06-13 음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지전송 방법 및 장치 KR100992174B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20080055570A KR100992174B1 (ko) 2008-06-13 2008-06-13 음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지전송 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20080055570A KR100992174B1 (ko) 2008-06-13 2008-06-13 음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지전송 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20090129580A KR20090129580A (ko) 2009-12-17
KR100992174B1 true KR100992174B1 (ko) 2010-11-04

Family

ID=41689489

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20080055570A KR100992174B1 (ko) 2008-06-13 2008-06-13 음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지전송 방법 및 장치

Country Status (1)

Country Link
KR (1) KR100992174B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6727413B2 (ja) * 2016-08-22 2020-07-22 スノー コーポレーション メッセージ共有方法及びコンピュータプログラム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050102139A1 (en) * 2003-11-11 2005-05-12 Canon Kabushiki Kaisha Information processing method and apparatus

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050102139A1 (en) * 2003-11-11 2005-05-12 Canon Kabushiki Kaisha Information processing method and apparatus

Also Published As

Publication number Publication date
KR20090129580A (ko) 2009-12-17

Similar Documents

Publication Publication Date Title
JP3968277B2 (ja) メールサーバ、そのメールサーバを実現するためのプログラム及び携帯端末
CA2648617C (en) Hosted voice recognition system for wireless devices
US20080126491A1 (en) Method for Transmitting Messages from a Sender to a Recipient, a Messaging System and Message Converting Means
US20090177617A1 (en) Systems, methods and apparatus for providing unread message alerts
US8077838B2 (en) Method and voice communicator to provide a voice communication
US9972303B1 (en) Media files in voice-based social media
CN102404251A (zh) 具有备注功能的即时通信的实现方法、客户端及系统
CN102215289B (zh) 一种移动终端及提取地址信息进行导航的方法
KR100698324B1 (ko) Ｗａｐ 컨텐츠를 ｍｍｓ 메시지를 통해 전송하는 장치 및방법
KR101351264B1 (ko) 음성인식 기반의 메시징 통역서비스 제공 시스템 및 그 방법
KR20150129182A (ko) 메시지 제공 방법 및 메시지 제공 장치
KR100992174B1 (ko) 음성/문자 인식을 이용한 멀티미디어 콘텐츠 합성 메시지전송 방법 및 장치
CN101897170A (zh) 通过消息传送分享网络馈源
KR20080006955A (ko) 이동통신 단말기의 문자메시지 변환 장치 및 방법
KR101597248B1 (ko) ＶｏＩＰ 기반 음성 통화 시 음성 인식을 이용한 광고 제공 시스템 및 방법
KR100969218B1 (ko) 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법및 장치
KR20170140714A (ko) 통화대기시간을 이용한 광고 출력 시스템
KR20130069262A (ko) 통신 단말 및 그 통신 단말의 정보처리 방법
KR101776660B1 (ko) 다이얼 방식으로 음성메세지 송수신이 가능한 소셜 네트워크 서비스 제공 시스템
KR20040105999A (ko) 네트워크 기반 소리 아바타 생성 방법 및 시스템
EP2154932A1 (en) Service information conversion method and system
KR20090106912A (ko) 음성 또는 문자 인식을 이용하여 메시지를 합성 또는생성하여 전송하거나 영상 호를 발생하여 메시지를재생하는 방법 및 장치
US8611841B2 (en) Apparatus for enhanced messaging and a method for enhanced messaging
KR101039960B1 (ko) 이동단말에서의 데이터 동기화 시스템 및 방법
KR100664696B1 (ko) 서비스 단말에서 예약어를 통하여 문자메시지를 전송하는방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130730

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140729

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee