KR20090118512A - Method and apparatus for providing a image overlay call service using recognition chatting text - Google Patents
Method and apparatus for providing a image overlay call service using recognition chatting text Download PDFInfo
- Publication number
- KR20090118512A KR20090118512A KR1020080044341A KR20080044341A KR20090118512A KR 20090118512 A KR20090118512 A KR 20090118512A KR 1020080044341 A KR1020080044341 A KR 1020080044341A KR 20080044341 A KR20080044341 A KR 20080044341A KR 20090118512 A KR20090118512 A KR 20090118512A
- Authority
- KR
- South Korea
- Prior art keywords
- video
- data
- multimedia content
- chat
- terminal
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M11/00—Telephonic communication systems specially adapted for combination with other electrical systems
- H04M11/06—Simultaneous speech and data transmission, e.g. telegraphic transmission over the same conductors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Telephonic Communication Services (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Computer Networks & Wireless Communication (AREA)
- Information Transfer Between Computers (AREA)
Abstract
Description
본 발명은 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치에 관한 것으로서, 보다 상세하게는 영상 통화 중에 영상 단말의 사용자가 서로 상대방 영상을 보면서 문자 채팅 서비스를 이용하는 경우에, 채팅 창에서 주고받는 문자를 인식하여 인식한 문자에 상응하는 멀티미디어 콘텐츠를 검색/합성하여 상대방 영상 단말로 전송하는 방법 및 장치에 관한 것이다.The present invention relates to a method and apparatus for providing a video synthesis call service using chat text recognition, and more particularly, when a user of a video terminal uses a text chat service while viewing a video of each other during a video call, a chat window is exchanged. The present invention relates to a method and apparatus for retrieving / synthesizing multimedia content corresponding to a recognized character and transmitting the same to a counterpart video terminal.
최근, 이동통신 기술이 발전함에 따라 단순히 음성 통화만을 제공하는 서비스에서 벗어나 통화시 상대방의 얼굴을 보면서 통화할 수 있는 영상 통화 서비스가 제공되고 있다. 그러나 종래의 영상 통화 서비스에서는 주로 사용자의 얼굴 영상을 전송하는 것에 머물러 있으며 이러한 이유로 영상 통화 내용이 단조롭고 음성 통화보다 어색한 통화를 하게 된다는 점에서 문제점이 있었다.Recently, with the development of mobile communication technology, a video call service that provides a voice call while looking at the other party's face is provided. However, in the conventional video call service, there is a problem in that the user mainly stays in transmitting the face image of the user, and for this reason, the video call contents are monotonous and awkward than the voice call.
이러한 점에 착안하여 화면에 대한 장식 효과를 주기 위하여 배경 화면을 합성하는 등의 영상 합성 방법이 제안되어 있으나, 이러한 방법도 주로 정지 이미지 영상을 사용하기 때문에 화면이 단조롭다는 한계점은 피할 수 없으며 이를 변경하기 위해서 사용자가 수시로 장식 효과를 위한 설정을 해야 한다는 문제점이 있다. 예컨대, 사용자는 자신의 단말에 배경 화면용 이미지 또는 영상을 저장해 두어야 하고 이를 영상 통화 중에 사용할 것인지 또 어떠한 배경 화면을 사용할 것인지를 결정해야 한다는 불편함이 있었다.In view of these points, an image synthesizing method such as composing a background screen is proposed to give a decorative effect to the screen. However, this method also uses a still image image, and thus the limitation of monotonous screen cannot be avoided. In order to do this, there is a problem in that the user has to set the decoration effect at any time. For example, a user may have to store an image or a video for a background screen in his terminal and decide whether to use it during a video call or which wallpaper to use.
한편, 현재 제공되는 영상 통화 서비스에서는 부가 기능으로서 채팅 대화 기능이 제공되고 있으나, 이러한 채팅 대화 기능은 영상 화면 창과 별도로 구성된 채팅 창에서 문자 메시지를 작성하여 전송하는 형태로 제공되고 있는 실정이다. 이러한 단순히 문자 메시지를 실시간을 송수신하는 형태의 서비스는 사용자로 하여금 흥미를 유발하기 쉽지 않다는 문제점이 있었다.On the other hand, the current video call service is provided as a chat chat function as an additional function, but the chat chat function is provided in the form of sending a text message in a chat window configured separately from the video screen window. Such a service of simply sending and receiving a text message in real time has a problem in that it is not easy for a user to cause an interest.
본 발명은 상기한 바와 같은 문제점에 착안하여 안출된 것으로서, 사용자가 영상 단말을 이용하여 영상 통화중에 영상 통화의 채팅 서비스를 이용하는 경우에 영상 단말의 채팅 창에 입력하여 전송한 단어를 인식하여 인식한 단어에 대응되는 멀티미디어 콘텐츠를 검색/합성하여 상대방 영상 단말로 전송하면, 상대방은 자신의 영상 단말의 화면에 상대방의 영상 화면과 합성(overlay)된 채팅 문자에 대응하는 멀티미디어 콘텐츠를 전송받을 수 있는바, 영상 통화 중에 채팅 기능을 사용하는 사용자의 흥미와 재미를 유발할 수 있으며, 영상 통화 중의 채팅 서비스의 단조로움을 극복할 수 있는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공하는 것을 목적으로 한다.The present invention has been made in view of the above problems, and when a user uses a video call chat service during a video call using a video terminal, the user recognizes and recognizes a word transmitted by inputting it into a chat window of the video terminal. When the multimedia content corresponding to the word is searched / synthesized and transmitted to the video terminal of the other party, the other party can receive the multimedia content corresponding to the chat text overlaid with the video screen of the other party on the screen of his video terminal. To provide a method and apparatus for providing a video synthesis call service using a chat text recognition that can induce interest and fun of a user who uses a chat function during a video call, and can overcome the monotony of a chat service during a video call. It is done.
또한, 본 발명은 영상 통화 단말 사용자가 영상 통화중에 채팅 기능을 이용하는 경우에 별도의 특별한 조작을 하지 않아도 서비스 제공 장치 또는 영상 단말 자체에서 자동으로 영상 통화 도중에 다양하고 입체감 있는 형태의 멀티미디어 콘텐츠를 합성하여 상대방 영상 단말로 제공할 수 있도록 하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공하는 것을 또 다른 목적으로 한다.In addition, when the video call terminal user uses a chat function during a video call, the present invention automatically synthesizes multimedia contents having various and three-dimensional shapes during a video call in the service providing apparatus or the video terminal itself without any special operation. Another object of the present invention is to provide a method and apparatus for providing a video call service using chat text recognition, which can be provided to a counterpart video terminal.
또한, 본 발명은 영상 통화중에 채팅 기능을 이용하는 경우에 채팅 대화 내용에 포함되어 있는 단어에 대하여 외부의 멀티미디어 콘텐츠 제공 장치로부터 멀티미디어 콘텐츠를 다운로드 및 저장하여 동일한 단어에 상응하는 멀티미디어 콘텐 츠를 합성하여 전송함으로써, 다양한 멀티미디어 콘텐츠를 합성할 수 있는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공하는 것을 또 다른 목적으로 한다.In addition, when the chat function is used during a video call, the present invention downloads and stores multimedia content from an external multimedia content providing device for words included in a chat conversation, and synthesizes and transmits multimedia content corresponding to the same word. Accordingly, another object of the present invention is to provide a method and apparatus for providing a video call service using chat text recognition, which can synthesize various multimedia contents.
상술한 목적들을 달성하기 위하여, 본 발명의 일 측면에 따르면, 발신 영상 단말 및 착신 영상 단말과 영상 통화망을 통해 결합하는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치에서 채팅 문자 인식을 이용한 영상 합성 통화 서비스를 제공하는 방법에 있어서, 상기 발신 영상 단말과 상기 착신 영상 단말 간에 영상 통화 호가 형성되는 단계, 상기 형성된 영상 통화 호를 통해 발신 영상 단말 또는 착신 영상 단말 사이에서 영상 채팅이 수행되는 경우, 상기 영상 채팅에 의해 상기 양 단말 사이에 전송되는 채팅 데이터를 추출하는 단계, 상기 추출한 채팅 데이터로부터 단어 데이터를 검출하는 단계, 상기 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계, 상기 검색된 멀티미디어 콘텐츠 데이터에 상응하는 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하는 단계 및 상기 합성한 영상 통화 신호를 상기 발신 영상 단말 또는 상기 착신 영상 단말 중 적어도 어느 하나의 단말로 전송하는 단계를 포함하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법을 제공할 수 있다.In order to achieve the above objects, according to an aspect of the present invention, a video synthesis call service using the chat text recognition in the video chat service providing apparatus for text recognition to combine the calling video terminal and the incoming video terminal and the video call network In the method for providing a video call call is formed between the calling video terminal and the called video terminal, when the video chat is performed between the calling video terminal or the called video terminal through the formed video call, the video chat Extracting chat data transmitted between the both terminals by detecting the word data from the extracted chat data; retrieving the multimedia content data corresponding to the detected word data; The corresponding image of the foot And a step of synthesizing a video call signal performed between a video terminal and the called video terminal, and transmitting the synthesized video call signal to at least one of the calling video terminal and the called video terminal. It is possible to provide a method for providing a video synthesis call service.
여기에서, 상기 형성된 영상 통화 호를 통해 발신 영상 단말 또는 착신 영상 단말 사이에서 영상 채팅이 수행되는 경우, 상기 영상 채팅에 의해 상기 양 단말 사이에 전송되는 채팅 데이터를 추출하는 단계는, 상기 형성된 영상 통화 신호에 포함되어 있는 H.245 UserInputIndication 신호로부터 채팅 데이터를 추출함으로써 이루어지도록 구성할 수 있다. 또한, 상기 추출한 채팅 데이터로부터 단어 데이터를 검출하는 단계는, 상기 추출한 채팅 데이터를 적어도 하나 이상의 단어 데이터로 분리하여 검출하도록 구성할 수 있다. 또한, 상기 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계에서, 상기 멀티미디어 콘텐츠는 각각의 단어 데이터에 대응하여 멀티미디어 콘텐츠 데이터베이스에 미리 저장되도록 구성할 수 있다. 또한, 상기 멀티미디어 콘텐츠 데이터는 이미지 데이터 또는 동영상 데이터인 것을 특징으로 할 수 있다. 또한, 상기 검색된 멀티미디어 콘텐츠 데이터에 상응하는 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하는 단계는, 상기 발신 영상 단말과 착신 영상 단말에 출력되는 영상 단말의 사용자 영상 화면과 상기 검색된 영상이 합성(overlay)되도록 구성할 수 있다. 또한, 상기 검색된 멀티미디어 콘텐츠 데이터에 상응하는 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하는 단계는, 상기 검색된 영상이 상기 발신 영상 단말과 착신 영상 단말에 출력되는 채팅 문자를 대체하여 표시되도록 구성할 수 있다.Here, when the video chat is performed between the calling video terminal or the called video terminal through the formed video call, the step of extracting the chat data transmitted between the both terminals by the video chat, the formed video call It can be configured to extract chat data from the H.245 UserInputIndication signal included in the signal. The detecting of the word data from the extracted chat data may be configured to separate and detect the extracted chat data into at least one word data. In addition, in the searching of the multimedia content data corresponding to the detected word data, the multimedia content may be configured to be previously stored in the multimedia content database corresponding to each word data. In addition, the multimedia content data may be characterized in that the image data or video data. The synthesizing of the video call signal performed between the calling video terminal and the called video terminal may include synthesizing a video corresponding to the retrieved multimedia content data to the calling video terminal and the called video terminal. And the retrieved image are overlaid. In addition, synthesizing the video corresponding to the retrieved multimedia content data to the video call signal performed between the calling video terminal and the called video terminal, the searched video is output to the calling video terminal and the called video terminal Can be configured to replace
본 발명의 다른 측면에 따르면, 발신 영상 단말 및 착신 영상 단말과 영상 통화망을 통해 결합하여 채팅 문자 인식 영상 합성 통화 서비스를 제공하는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치에 있어서, 상기 발신 영상 단말과 상 기 착신 영상 단말 간에 영상 통화 호가 형성된 경우에, 상기 영상 통화망과 연동하여 상기 발신 영상 단말 및 상기 착신 영상 단말 간에 수행되는 영상 통화 신호를 수신하는 영상 통화망 연동부, 상기 영상 통화망 연동부로부터 수신한 영상 통화 신호에 포함된 채팅 데이터를 추출하는 채팅 데이터 추출부, 상기 채팅 데이터 추출부에서 추출한 채팅 데이터를 단어 데이터로 분리하는 단어 데이터 검출부, 상기 단어 데이터 검출부에서 검출한 단어 데이터를 미리 저장해 둔 멀티미디어 콘텐츠 데이터와 비교하여, 상기 검출한 단어 데이터에 대하여 저장된 멀티미디어 콘텐츠 데이터에 대응되는 영상을 선택하는 멀티미디어 콘텐츠 데이터 검색부 및 상기 멀티미디어 콘텐츠 데이터 검색부에서 선택된 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하여 영상 통화망 연동부로 전송하는 멀티미디어 콘텐츠 합성부를 포함하되, 상기 영상 통화망 연동부는 상기 멀티미디어 콘텐츠 데이터에 상응하는 영상이 합성된 영상 통화 신호를 상기 멀티미디어 콘텐츠 합성부로부터 수신하여 상기 발신 영상 단말 또는 상기 착신 영상 단말 중 적어도 어느 하나의 단말 또는 두 단말 모두에게 전송하는 것을 특징으로 하는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치를 제공할 수 있다.According to another aspect of the present invention, an apparatus for providing a chat text recognition video synthesis call service providing a chat text recognition video synthesis call service by combining an outgoing video terminal and an incoming video terminal with a video call network, When a video call is made between the called video terminal, a video call network interworking unit for receiving a video call signal performed between the calling video terminal and the called video terminal in association with the video call network; A chat data extraction unit for extracting chat data included in the video call signal received from the mobile terminal; a word data detector for separating chat data extracted from the chat data extractor into word data; and storing word data detected by the word data detector in advance Compared to the multimedia content data, The multimedia content data retrieval unit which selects an image corresponding to the stored multimedia content data with respect to the detected word data and the image selected by the multimedia content data retrieval unit are synthesized into a video call signal performed between the calling video terminal and the called video terminal. And a multimedia content synthesizing unit for transmitting to the video communication network interworking unit, wherein the video communication network interworking unit receives a video call signal obtained by synthesizing a video corresponding to the multimedia content data from the multimedia content synthesizing unit, and transmits the video call network interworking unit. An apparatus for providing a chat character recognition video synthesis call service, which is transmitted to at least one terminal or both terminals of an incoming video terminal.
여기에서, 상기 단어 데이터 검출부에서 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 저장하는 멀티미디어 콘텐츠 데이터베이스를 더 포함하도록 구성할 수 있다.The multimedia content database may further include a multimedia content database storing multimedia content data corresponding to the word data detected by the word data detector.
본 발명의 또 다른 측면에 따르면, 영상 통화망을 통해 채팅 문자 인식 영상 합성 통화 서비스를 제공하는 영상 단말에 있어서, 영상 통화 신호를 수신하는 영상 통화 신호 수신부, 상기 영상 통화 신호 수신부로부터 수신한 영상 통화 신호에 포함된 채팅 데이터를 추출하는 채팅 데이터 추출부, 상기 채팅 데이터 추출부에서 추출한 채팅 데이터를 단어 데이터로 분리하는 단어 데이터 검출부, 상기 단어 데이터 검출부에서 검출한 단어 데이터를 미리 저장해 둔 멀티미디어 콘텐츠 데이터와 비교하여, 상기 검출한 단어 데이터에 대하여 저장된 멀티미디어 콘텐츠 데이터에 대응되는 영상을 선택하는 멀티미디어 콘텐츠 데이터 검색부 및 상기 멀티미디어 콘텐츠 데이터 검색부에서 선택된 영상을 영상 통화 신호에 합성하여 영상/음성 통신부로 전송하는 멀티미디어 콘텐츠 합성부를 포함하되, 상기 영상/음성 통신부는 상기 멀티미디어 콘텐츠 데이터에 상응하는 영상이 합성된 영상 통화 신호를 상기 멀티미디어 콘텐츠 합성부로부터 수신하여 상대방 영상 단말로 전송하는 것을 특징으로 하는 영상 단말을 제공할 수 있다.According to still another aspect of the present invention, a video terminal for providing a video chat call recognition text chat service through a video call network, the video call signal receiving unit for receiving a video call signal, the video call received from the video call signal receiving unit A chat data extractor for extracting chat data included in a signal, a word data detector for separating chat data extracted from the chat data extractor into word data, and multimedia content data previously stored in the word data detected by the word data detector; In comparison, the multimedia content data search unit for selecting an image corresponding to the stored multimedia content data with respect to the detected word data and the image selected by the multimedia content data search unit are combined with a video call signal and transmitted to the video / audio communication unit. Includes a multimedia content synthesizing unit, wherein the video / audio communication unit receives a video call signal obtained by synthesizing an image corresponding to the multimedia content data from the multimedia content synthesizing unit and transmits the video call signal to a counterpart video terminal. Can provide.
여기에서, 상기 단어 데이터 검출부에서 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 저장하는 멀티미디어 콘텐츠 데이터베이스를 더 포함하도록 구성할 수 있다. 또한, 외부의 멀티미디어 콘텐츠 제공 장치로부터 멀티미디어 콘텐츠를 다운로드 받은 후에 상기 멀티미디어 콘텐츠 데이터베이스로 전송하는 다운로드 처리부를 더 포함하도록 구성할 수 있다.The multimedia content database may further include a multimedia content database storing multimedia content data corresponding to the word data detected by the word data detector. The electronic device may further include a download processor that transmits the multimedia content to the multimedia content database after downloading the multimedia content from an external multimedia content providing device.
본 발명에 의하면, 사용자가 영상 단말을 이용하여 영상 통화중에 영상 통화 의 채팅 서비스를 이용하는 경우에 영상 단말의 채팅 창에 입력하여 전송한 단어를 인식하여 인식한 단어에 대응되는 멀티미디어 콘텐츠를 검색/합성하여 상대방 영상 단말로 전송하며, 상대방은 자신의 영상 단말의 화면에 상대방의 영상 화면과 합성(overlay)된 채팅 문자에 대응하는 멀티미디어 콘텐츠를 전송받음으로써, 영상 통화 중에 채팅 기능을 사용하는 사용자의 흥미와 재미를 유발할 수 있으며, 영상 통화 중의 채팅 서비스의 단조로움을 극복할 수 있는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공할 수 있다.According to the present invention, when a user uses a video call chat service during a video call using a video terminal, a multimedia content corresponding to the recognized word is searched / synthesized by recognizing a word inputted through a chat window of the video terminal. To the other party's video terminal, and the other party receives the multimedia content corresponding to the chat text overlaid with the other party's video screen on the screen of the video terminal of the other party. It can provide a method and apparatus for providing a video synthesis call service using a chat text recognition that can induce fun and can overcome the monotony of a chat service during a video call.
또한, 본 발명에 의하면, 영상 통화 단말 사용자가 영상 통화중에 채팅 기능을 이용하는 경우에 별도의 특별한 조작을 하지 않아도 서비스 제공 장치 또는 영상 단말 자체에서 자동으로 영상 통화 도중에 다양하고 입체감 있는 형태의 멀티미디어 콘텐츠를 합성하여 합성된 화면을 상대방 영상 단말로 제공할 수 있도록 하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공할 수 있다.In addition, according to the present invention, when a video call terminal user uses a chat function during a video call, the service providing apparatus or the video terminal itself automatically provides various and three-dimensional multimedia contents during the video call without any special operation. A method and apparatus for providing a video synthesis call service using chat text recognition to provide a synthesized screen to a counterpart video terminal may be provided.
또한, 본 발명에 의하면, 영상 통화중에 채팅 기능을 이용하는 경우에 채팅 대화 내용에 포함되어 있는 단어에 대하여 외부의 멀티미디어 콘텐츠 제공 장치로부터 멀티미디어 콘텐츠를 다운로드 및 저장하여 동일한 단어에 상응하는 멀티미디어 콘텐츠를 합성하여 전송함으로써, 다양한 멀티미디어 콘텐츠를 합성할 수 있는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공할 수 있다.In addition, according to the present invention, when using a chat function during a video call, the multimedia content corresponding to the same word is synthesized by downloading and storing the multimedia content from an external multimedia content providing device for the words included in the chat conversation contents. By transmitting, it is possible to provide a method and apparatus for providing a video call service using chat text recognition that can synthesize various multimedia contents.
이하, 첨부된 도면들을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 장치(30)와 발신 영상 단말(10) 및 착신 영상 단말(20)과의 결합 상태를 나타낸 전체 구성도이다.FIG. 1 is an overall configuration diagram illustrating a combined state of a video synthesis call
도 1을 참조하면, 본 발명의 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 영상 통화 망을 통해 발신 영상 단말(10)과 착신 영상 단말(20)과 결합되어 있다. 발신 영상 단말(10)과 착신 영상 단말(20)이 영상 통화 호가 형성되어 영상 통화를 하는 경우에 채팅 기능을 이용하여 문자 대화를 할 수 있다. 이러한 경우에 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 발신 영상 단말(10) 또는 착신 영상 단말(20)이 상대방 영상 단말로 전송 채팅 문자 데이터를 영상 통화 신호에서 추출하고 추출한 채팅 문자 데이터를 인식하여, 인식한 채팅 문자 데이터에 상응하는 멀티미디어 콘텐츠를 데이터를 검색하여 이를 영상 통화 신호에 합성(overlay)하여 상대방 영상 단말로 전송하게 된다. 이러한 과정을 통하여 사용자는 영상 단말에서 상대방의 얼굴 영상 화면에 상대방이 채팅 기능을 이용하여 전송한 채팅 문자에 상응하는 멀티미디어 콘텐츠가 합성된 화면을 전송받게 된다.Referring to FIG. 1, the apparatus for providing a text synthesis call service for chatting text recognition of the
도 2는 도 1의 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)의 상세 구성을 나타낸 블록도이다.FIG. 2 is a block diagram illustrating a detailed configuration of the apparatus for providing a chat character recognition video synthesis call service of FIG. 1.
도 2를 참조하면, 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 영상 통화망 연동부(31), 채팅 데이터 추출부(32), 단어 데이터 검출부(33), 멀티미디어 콘텐츠 검색부(34), 멀티미디어 콘텐츠 합성부(35) 및 멀티미디어 콘텐츠 데이터베이스(36)를 포함한다.Referring to FIG. 2, the apparatus for providing a chat text recognition video
영상 통화망 연동부(31)는 영상 통화 망과 연동해서 발신 영상 단말(10)과 착신 영상 단말(20) 간의 형성된 영상 통화 신호를 수신하는 역할을 수행하며, 아래에서 설명할 멀티미디어 콘텐츠 합성부(35)에 의해 합성된 영상 통화 신호를 수신하여 영상 통화 망을 통해 발신 영상 단말(10) 또는 착신 영상 단말(20)로 전송하는 역할도 아울러 수행한다. 채팅 데이터 추출부(32)는 영상 통화망 연동부(31)로부터 수신한 영상 통화 신호로부터 채팅 데이터를 추출하는 역할을 수행한다. 즉, 채팅 데이터 추출부(32)는 영상 통화 신호에 포함되어 있는 H.245 UserInputIndication 신호 내에 존재하는 영상 단말의 사용자가 입력한 채팅 문자 내용을 검출함으로써 채팅 문자 데이터를 추출하게 된다. 단어 데이터 검출부(33)는 채팅 데이터 추출부(32)로부터 추출된 채팅 문자 데이터를 수신하여 각각의 단어 데이터로 분리하는 역할을 수행한다. 멀티미디어 콘텐츠 검색부(34)는 단어 데이터 검출부(33)로부터 분리된 각각의 단어 데이터를 수신하고, 수신한 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터가 멀티미디어 콘텐츠 데이터베이스(36)에 존재하는지를 검색한다. 여기서, 단어 데이터 검출부(33)로부터 수신한 단어에 상 응하는 멀티미디어 콘텐츠 데이터가 멀티미디어 콘텐츠 데이터베이스(36)에 존재하는 경우에는 상응하는 멀티미디어 콘텐츠 데이터를 아래에서 설명할 멀티미디어 콘텐츠 합성부(35)로 전송하게 되나, 존재하지 않는 경우에는 다음 단어에 대하여 앞서 설명한 검색 과정을 반복하게 된다. 멀티미디어 콘텐츠 합성부(35)는 멀티미디어 콘텐츠 데이터 검색부(34)로부터 전송받은 채팅 문자 데이터와 상응하는 멀티미디어 콘텐츠 데이터를 합성하고, 이를 영상 통화망 연동부(31)로 전송하는 역할을 수행한다. 멀티미디어 콘텐츠 데이터베이스(36)는 영상 통화 사용자가 자주 사용하는 단어와 이와 상응하는 멀티미디어 콘텐츠를 미리 저장해 두는 역할을 한다. 이러한 멀티미디어 콘텐츠는 주기적으로 갱신될 수 있다.The video call
도 3은 도 1 및 도 2에서 설명한 영상 합성 통화 서비스의 절차를 나타낸 흐름도이다.3 is a flowchart illustrating a procedure of the video synthesis call service described with reference to FIGS. 1 and 2.
도 3을 참조하면, 발신 영상 단말(10)과 착신 영상 단말(20) 간에 영상 통화 호가 설정되면(S301), 설정된 영상 통화 호를 통한 영상 통화 중에 사용자가 채팅 기능을 이용하게 된다. 이러한, 채팅 기능은 현재 영상 통화 수행중에 영상 단말의 사용자가 채팅 기능을 실행하면 영상 단말의 화면상에 채팅 메시지 입력 창이 뜨며, 일반 문자 메시지를 작성하는 방법으로 채팅 메시지를 작성하여 전송 버튼을 누르면 채팅 메시지가 상대방 및 작성자 본인의 영상 단말의 화면에 표시되도록 제공되고 있다.Referring to FIG. 3, when a video call call is established between the calling
그리고 나서, 영상 채팅에 의해 발신 영상 단말(10)과 착신 영상 단말(20) 사이에 전송되는 영상 통화 신호로부터 채팅 데이터를 추출한다(S303). 여기서, 영상 통화 신호로부터 채팅 데이터를 추출하는 방법은 앞서 설명한 바와 같이, 영상 통화 신호에 포함되어 있는 H.245 UserInputIndication 신호 내에 존재하는 영상 단말의 사용자가 입력한 채팅 문자 내용을 검출함으로써 채팅 문자 데이터를 추출하게 된다. 다음으로, 추출된 채팅 데이터를 수신한 단어 데이터 검출부(33)는 수신한 채팅 데이터로부터 단어 데이터를 검출하게 되며(S305), 이러한 단어 데이터의 검출은 수신한 채팅 데이터에 포함된 적어도 하나 이상의 단어 데이터를 분리함으로써 수행된다.Then, the chat data is extracted from the video call signal transmitted between the calling
단계 305를 통하여 각각 단어 데이터가 분리된 후, 각각의 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터를 검색하게 되며(S307), 이러한 검색은 멀티미디어 콘텐츠 데이터베이스(36)에 저장해둔 멀티미디어 콘텐츠를 대상으로 수행된다. 그리고 나서, 검출된 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터가 존재하는지를 판단하여(S309), 상응하는 멀티미디어 콘텐츠 데이터가 존재하는 경우에 발신 영상 단말(10)과 착신 영상 단말(20) 사이에 수행되는 영상 통화 신호에 추출한 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터를 합성하여(S311) 영상 단말로 전송하게 된다(S313). 만일 단계 309에서 검출된 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터가 존재하지 않는 경우에는 다음 단어 데이터에 대하여 단계 307을 수행한다(S315). 한편, 검출한 단어 데이터에 해당하는 멀티미디어 콘텐츠 데이터를 검색하는 과정에 대한 단계 307에 대해서는, 도 5에서 자세히 설명하기로 한다.After the word data is separated through the step 305, the multimedia content data corresponding to each word data is searched for (S307). Such a search is performed on the multimedia content stored in the
도 4는 도 3의 서비스를 제공하기 위한 호 흐름도이다.4 is a call flow diagram for providing the service of FIG.
도 4를 참조하면, 발신 영상 단말(10)에서 영상 통화 망을 통해 교환기로 착신 영상 단말(20)로의 영상 통화 호를 시도하고(S401), 교환기는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)로 호 설정 요청을 한다(S403). 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 이에 상응하여 교환기를 거쳐 착신 영상 단말(20)로 영상 통화 호 설정 요청을 한다(S405,407). 착신 영상 단말(20)로부터 교환기로 영상 통화 호 연결 응답 신호를 전송하면(S409), 교환기는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)로 착신 영상 단말(20)의 영상 통화 호 응답 신호를 전송한다(S411). 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 착신 영상 단말(20)의 영상 통화 호 응답 신호에 상응하여 교환기를 거쳐 발신 영상 단말(10)로 영상 통화 호 응답 신호를 전송한다(S413,415). 그리고 나서, 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)와 착신 영상 단말(20) 간에 H.245 negotiation을 통해 영상 및 음성 통화 신호에 대한 채널을 생성하고(S417), 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)와 발신 영상 단말(10) 간에 역시 H.245 negotiation을 통해 영상 및 음성 통화 신호에 대한 채널을 생성한다(S419). 단계 419까지의 과정을 거치면, 발신 영상 단말(10), 착신 영상 단말(20) 및 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30) 간에 영상 및 음성 통화로가 설정되며(S421), 설정된 영상 및 음성 통화로를 통하여 발신 영상 단말(10)과 착신 영상 단말(20) 사이에 영상 통화를 할 수 있으며, 또한 영상 단말에서 채팅 기능을 선택하여 상대방 사용자의 영상을 보면서 채팅 대화를 나눌 수 있다(S423). 단계 423 과정에서의 발신 영상 단말(10)에서 입력된 채팅 데이터는 H.245 UserInputIndication 신호를 통해 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)로 전송된다(S425). 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 전송받은 채팅 데이터를 단어 데이터로 분리하고, 분리된 단어 데이터를 인식하고, 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터를 검색하고, 검색된 멀티미디어 콘텐츠 데이터를 영상 통화 신호와 합성한다(S427). 단계 427 이후에 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)가 발신 영상 단말(10)로부터 입력된 채팅 데이터를 H.245 UserInputIndication 신호를 통해 착신 영상 단말(20)로 전송하고(S429), 멀티미디어 콘텐츠 데이터가 합성된 영상 통화 신호를 착신 영상 단말(20)로 전송한다(S431).Referring to FIG. 4, an
도 5는 도 3에서 추출된 단어에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 방법을 나타내기 위한 도면이다.FIG. 5 is a diagram illustrating a method of searching for multimedia content data corresponding to a word extracted from FIG. 3.
도 5를 참조하면, 채팅 데이터 추출부(32)가 영상 통화 신호로부터 발신 영상 단말(10)이 작성하여 전송한 "오늘 밤에 사무실에서 보자"라는 채팅 데이터를 추출하면, 단어 데이터 검출부(33)는 채팅 데이터를 수신하여 각각의 단어 데이터로 분리하여 검출하게 된다. 앞선 예에 따르면, 단어 데이터 검출부(33)는 추출된 채팅 데이터로부터 "오늘", "밤", "사무실"이라는 3개의 단어 데이터를 분리/검출하게 된다. 그리고 나서, 멀티미디어 콘텐츠 데이터 검색부(34)는 각각 "오늘", " 밤", "사무실"이라는 단어에 대하여 멀티미디어 콘텐츠 데이터베이스(36)를 검색하여 상응하는 멀티미디어 콘텐츠 데이터가 저장되어 있는지를 검색하게 되며, 앞선 예에 따르면, "밤", "사무실"에 상응하는 멀티미디어 콘텐츠는 존재하나 "오늘"에 상응하는 멀티미디어 콘텐츠는 존재하지 않는다.Referring to FIG. 5, when the chat
멀티미디어 콘텐츠 데이터 검색부(34)에서 각각의 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터를 멀티미디어 콘텐츠 합성부(35)로 전송하면, 멀티미디어 콘텐츠 합성부(36)는 각각의 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터를 영상 통화 신호에 합성한다. 본 발명의 일 실시예에 의할 경우, 멀티미디어 콘텐츠 데이터가 합성되는 방법으로 발신 영상 단말(10)과 착신 영상 단말(20)에 출력되는 영상 단말의 사용자 영상 화면과 검색된 멀티미디어 콘텐츠 데이터에 해당하는 영상이 합성(overlay)되어 표시되도록 구성할 수 있다. 또한, 본 발명의 다른 실시예에 의할 경우, 사용자 영상 화면이 아닌 발신 영상 단말(10)과 착신 영상 단말(20)의 채팅 메시지 창에서 출력되는 채팅 문자를 대체하여 표시되도록 구성할 수도 있다.When the multimedia content
도 6은 본 발명의 다른 실시예에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스를 제공할 수 있는 영상 단말(60)의 상세 구성을 나타낸 도면이다.FIG. 6 is a diagram illustrating a detailed configuration of a
본 발명에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)에서 제공될 수도 있으나, 별도의 영상 합성 통화 서비스 제공 장치를 구성하지 않고, 이러한 구성을 영상 단말에 포함 할 수도 있다. 본 발명의 다른 실시예에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스를 제공할 수 있는 영상 단말(60)은 영상 통화 신호 수신부(61), 채팅 데이터 추출부(62), 단어 데이터 검출부(63), 멀티미디어 콘텐츠 데이터 검색부(64), 멀티미디어 콘텐츠 합성부(65), 영상/음성 통신부(66), 다운로드 처리부(67) 및 멀티미디어 콘텐츠 데이터베이스(68)를 포함하도록 구성되어 있다.The video synthesis call service using the chat text recognition according to the present invention may be provided by the chat text recognition video synthesis call
영상 통화 신호 수신부(61)는 영상 단말의 사용자의 영상과 음성을 수신하는 역할을 수행한다. 채팅 데이터 추출부(62)는 영상 통화 신호 수신부(61)로부터 수신한 영상 통화 신호로부터 채팅 데이터를 추출하는 역할을 수행한다. 즉, 채팅 데이터 추출부(62)는 영상 통화 신호에 포함되어 있는 H.245 UserInputIndication 신호 내에 존재하는 영상 단말의 사용자가 입력한 채팅 문자 내용을 검출함으로써 채팅 문자 데이터를 추출하게 된다. 단어 데이터 검출부(63)는 채팅 데이터 추출부(62)로부터 추출된 채팅 문자 데이터를 수신하여 각각의 단어 데이터로 분리하는 역할을 수행한다. 멀티미디어 콘텐츠 검색부(64)는 단어 데이터 검출부(63)로부터 분리된 각각의 단어 데이터를 수신하고, 수신한 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터가 멀티미디어 콘텐츠 데이터베이스(68)에 존재하는지를 검색한다. 여기서, 단어 데이터 검출부(63)로부터 수신한 단어에 상응하는 멀티미디어 콘텐츠 데이터가 멀티미디어 콘텐츠 데이터베이스(68)에 존재하는 경우에는 상응하는 멀티미디어 콘텐츠 데이터를 아래에서 설명할 멀티미디어 콘텐츠 합성부(65)로 전송하게 되나, 존재하지 않는 경우에는 다음 단어에 대하여 앞서 설명한 검색 과정을 반복하게 된다. 멀티미디어 콘텐츠 합성부(65)는 멀티미디어 콘텐츠 데이터 검 색부(64)로부터 전송받은 채팅 문자 데이터와 상응하는 멀티미디어 콘텐츠 데이터를 합성하고, 이를 영상/음성 통신부(66)로 전송하는 역할을 수행하며, 영상/음성 통신부(66)는 합성된 영상 통화 신호를 영상 통화망을 통해 상대방 영상 단말로 전송하는 역할을 한다. 한편, 다운로드 처리부(67)는 외부의 멀티미디어 콘텐츠 제공 장치로부터 멀티미디어 콘텐츠를 다운로드 받은 후에 멀티미디어 콘텐츠 데이터베이스(67)로 전송하는 역할을 하며, 멀티미디어 콘텐츠 데이터베이스(68)는 영상 통화 사용자가 자주 사용하는 단어와 이와 상응하는 멀티미디어 콘텐츠를 미리 저장해 두는 역할을 한다. 이러한 멀티미디어 콘텐츠는 주기적으로 갱신될 수 있다.The video
이상에서, 본 발명의 바람직한 실시예를 참조하여 본 발명의 구성을 설명하였으나 본 발명은 상기 실시예들에 한정되는 것이 아니며 첨부된 특허청구범위 및 도면에 의거하여 여러 가지 형태의 변형, 부가, 수정 실시가 가능하다는 점을 유의해야 한다.In the above, the configuration of the present invention has been described with reference to the preferred embodiment of the present invention, but the present invention is not limited to the above embodiments, and various modifications, additions, and modifications based on the appended claims and drawings. It should be noted that implementation is possible.
도 1은 본 발명에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 장치(30)와 발신 영상 단말(10) 및 착신 영상 단말(20)과의 결합 상태를 나타낸 전체 구성도,1 is an overall configuration diagram showing a combined state of the video synthesis call
도 2는 도 1의 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)의 상세 구성을 나타낸 블록도,FIG. 2 is a block diagram illustrating a detailed configuration of the apparatus for providing a chat character recognition video synthesis call service of FIG. 1;
도 3은 도 1 및 도 2에서 설명한 영상 합성 통화 서비스의 절차를 나타낸 흐름도,3 is a flowchart illustrating a procedure of a video synthesis call service described with reference to FIGS. 1 and 2;
도 4는 도 3의 서비스를 제공하기 위한 호 흐름도이다.4 is a call flow diagram for providing the service of FIG.
도 5는 도 3에서 추출된 단어에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 방법을 나타내기 위한 도면,5 is a diagram illustrating a method of searching for multimedia content data corresponding to a word extracted from FIG. 3;
도 6은 본 발명의 다른 실시예에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스를 제공할 수 있는 영상 단말(60)의 상세 구성을 나타낸 도면이다.FIG. 6 is a diagram illustrating a detailed configuration of a
Claims (12)
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20080044341A KR100969218B1 (en) | 2008-05-14 | 2008-05-14 | Method and apparatus for providing a image overlay call service using recognition chatting text |
PCT/KR2009/002395 WO2009139553A2 (en) | 2008-05-14 | 2009-05-07 | Method and apparatus for providing image overlay call service by recognizing chat text |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20080044341A KR100969218B1 (en) | 2008-05-14 | 2008-05-14 | Method and apparatus for providing a image overlay call service using recognition chatting text |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20090118512A true KR20090118512A (en) | 2009-11-18 |
KR100969218B1 KR100969218B1 (en) | 2010-07-09 |
Family
ID=41319144
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR20080044341A KR100969218B1 (en) | 2008-05-14 | 2008-05-14 | Method and apparatus for providing a image overlay call service using recognition chatting text |
Country Status (2)
Country | Link |
---|---|
KR (1) | KR100969218B1 (en) |
WO (1) | WO2009139553A2 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012134150A2 (en) * | 2011-03-29 | 2012-10-04 | (주)티아이스퀘어 | Method and system for providing multimedia content sharing service while conducting communication service |
KR101226560B1 (en) * | 2011-03-29 | 2013-01-25 | (주)티아이스퀘어 | System and method for providing multidedia content sharing service during communication service |
WO2014200453A1 (en) * | 2013-06-10 | 2014-12-18 | Intel Corporation | Dynamic visual profiles |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20020084302A (en) * | 2001-04-27 | 2002-11-05 | (주)트러스트테크놀로지 | Apparatus of extract and transmission of image using the character message, its method |
KR100605143B1 (en) * | 2005-01-14 | 2006-07-31 | (주)필링크 | System and method for producing multimedia message |
KR100564940B1 (en) * | 2005-11-23 | 2006-03-30 | 주식회사 케이티씨 | Multimedia message changing system and changing method |
KR100827802B1 (en) * | 2006-10-24 | 2008-05-07 | 삼성전자주식회사 | Video telephony apparatus of potable device and transmit-receiving method thereof |
-
2008
- 2008-05-14 KR KR20080044341A patent/KR100969218B1/en active IP Right Grant
-
2009
- 2009-05-07 WO PCT/KR2009/002395 patent/WO2009139553A2/en active Application Filing
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012134150A2 (en) * | 2011-03-29 | 2012-10-04 | (주)티아이스퀘어 | Method and system for providing multimedia content sharing service while conducting communication service |
WO2012134150A3 (en) * | 2011-03-29 | 2013-01-03 | (주)티아이스퀘어 | Method and system for providing multimedia content sharing service while conducting communication service |
KR101226560B1 (en) * | 2011-03-29 | 2013-01-25 | (주)티아이스퀘어 | System and method for providing multidedia content sharing service during communication service |
CN103748610A (en) * | 2011-03-29 | 2014-04-23 | Ti广场技术株式会社 | Method and system for providing multimedia content sharing service while conducting communication service |
WO2014200453A1 (en) * | 2013-06-10 | 2014-12-18 | Intel Corporation | Dynamic visual profiles |
US9491601B2 (en) | 2013-06-10 | 2016-11-08 | Intel Corporation | Dynamic visual profiles |
Also Published As
Publication number | Publication date |
---|---|
WO2009139553A3 (en) | 2010-01-21 |
KR100969218B1 (en) | 2010-07-09 |
WO2009139553A2 (en) | 2009-11-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101338818B1 (en) | Mobile terminal and information display method using the same | |
CN106101747B (en) | A kind of barrage content processing method and application server, user terminal | |
CN104505091B (en) | Man machine language's exchange method and system | |
KR101380430B1 (en) | Portable terminal for providing convenience information during call and method for providing convenience information during call in portable terminal | |
CN102075605A (en) | Method, system and mobile terminal for displaying incoming call | |
KR20100026701A (en) | Sign language translator and method thereof | |
KR20130005406A (en) | Method and apparatus for transmitting message in portable terminnal | |
US20170270948A1 (en) | Method and device for realizing voice message visualization service | |
WO2016022737A1 (en) | Phone call context setting | |
CN107657469A (en) | A kind of method for pushing of advertising message, device and set top box | |
EP1478178A1 (en) | Communication apparatus and method | |
KR100969218B1 (en) | Method and apparatus for providing a image overlay call service using recognition chatting text | |
KR20080097784A (en) | System and method for providing automatic response service | |
KR100893546B1 (en) | Method and apparatus for providing video synthesizing call service using voice recognition | |
JP2001268241A (en) | Wireless mobile terminal communication system | |
KR101597248B1 (en) | SYSTEM AND METHOD FOR PROVIDING ADVERTISEMENT USING VOISE RECOGNITION WHEN TELEPHONE CONVERSATION ON THE VoIP BASE | |
JP2012249266A (en) | Television telephone interpretation system, server, user terminal, and program | |
KR20030061505A (en) | Apparatus and method for transmitting a sender information | |
US20130136246A1 (en) | Initiating a telephonic connection | |
KR100945162B1 (en) | System and method for providing ringback tone | |
KR100703383B1 (en) | Method for serving electronic dictionary in the portable terminal | |
JP2004072674A (en) | Telephone equipment, base station equipment, and communication method | |
KR100992174B1 (en) | Method and apparatus for transmitting compounding message of multimedia content using speech/character recognition | |
JPH11250068A (en) | Information processor, information processing method and recording medium | |
KR20090106912A (en) | Method and apparatus for synthesyzing or generating and transmitting message or playing message with video call using voice or text recognition |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20130605 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20140428 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20150702 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20160607 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20170601 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20180702 Year of fee payment: 9 |
|
FPAY | Annual fee payment |
Payment date: 20190610 Year of fee payment: 10 |