WO2009139553A2 - Method and apparatus for providing image overlay call service by recognizing chat text - Google Patents

Method and apparatus for providing image overlay call service by recognizing chat text Download PDF

Info

Publication number
WO2009139553A2
WO2009139553A2 PCT/KR2009/002395 KR2009002395W WO2009139553A2 WO 2009139553 A2 WO2009139553 A2 WO 2009139553A2 KR 2009002395 W KR2009002395 W KR 2009002395W WO 2009139553 A2 WO2009139553 A2 WO 2009139553A2
Authority
WO
WIPO (PCT)
Prior art keywords
video
data
multimedia content
chat
terminal
Prior art date
Application number
PCT/KR2009/002395
Other languages
French (fr)
Korean (ko)
Other versions
WO2009139553A3 (en
Inventor
이길수
허봉규
Original Assignee
(주)티아이스퀘어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)티아이스퀘어 filed Critical (주)티아이스퀘어
Publication of WO2009139553A2 publication Critical patent/WO2009139553A2/en
Publication of WO2009139553A3 publication Critical patent/WO2009139553A3/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals

Definitions

  • the present invention relates to a method and apparatus for providing a video synthesis call service using chat text recognition. More particularly, when a user of a video terminal uses a text chat service while viewing a video of each other during a video call, the user can exchange text messages through a chat window.
  • the present invention relates to a method and apparatus for recognizing a character, searching / synthesizing multimedia content corresponding to the recognized character, and transmitting the same to a counterpart video terminal.
  • image synthesis methods have been proposed, such as composing a background screen to give a decorative effect to the screen.However, this method also uses a still image image, so the limitation of monotonous screen cannot be avoided. In order to do this, there is a problem in that the user has to set the decoration effect at any time. For example, a user may have to store an image or a video for a background screen in his terminal and decide whether to use it during a video call or which wallpaper to use.
  • the current video call service is provided as a chat chat function as an additional function, but the chat chat function is provided in the form of sending a text message in a chat window configured separately from the video screen window.
  • chat chat function is provided in the form of sending a text message in a chat window configured separately from the video screen window.
  • the present invention has been made in view of the above problems, and when a user uses a video call chat service during a video call using a video terminal, the user recognizes and recognizes a word transmitted by inputting it into a chat window of the video terminal.
  • the multimedia content corresponding to the word is searched / synthesized and transmitted to the video terminal of the other party
  • the other party can receive the multimedia content corresponding to the chat text overlaid with the video screen of the other party on the screen of his video terminal.
  • the present invention automatically synthesizes multimedia contents having various and three-dimensional shapes during a video call in the service providing apparatus or the video terminal itself without any special operation.
  • Another object of the present invention is to provide a method and apparatus for providing a video call service using chat text recognition, which can be provided to a counterpart video terminal.
  • the present invention downloads and stores the multimedia content from an external multimedia content providing device with respect to the words included in the chat conversation, and synthesizes and transmits multimedia content corresponding to the same word.
  • Another object of the present invention is to provide a method and apparatus for providing a video call service using chat text recognition, which can synthesize various multimedia contents.
  • a video synthesis call service using the chat text recognition in the video chat service providing apparatus for text recognition to combine the calling video terminal and the incoming video terminal and the video call network In the method for providing a video call call is formed between the calling video terminal and the called video terminal, when the video chat is performed between the calling video terminal or the called video terminal through the formed video call, the video chat Extracting chat data transmitted between the both terminals by detecting the word data from the extracted chat data; retrieving the multimedia content data corresponding to the detected word data; The corresponding image of the foot And a step of synthesizing a video call signal performed between a video terminal and the called video terminal, and transmitting the synthesized video call signal to at least one of the calling video terminal and the called video terminal. It is possible to provide a method for providing a video synthesis call service.
  • the step of extracting the chat data transmitted between the both terminals by the video chat the formed video call It can be configured to extract chat data from the H.245 UserInputIndication signal included in the signal.
  • the detecting of the word data from the extracted chat data may be configured to separate and detect the extracted chat data into at least one word data.
  • the multimedia content in the searching of the multimedia content data corresponding to the detected word data, the multimedia content may be configured to be previously stored in the multimedia content database corresponding to each word data.
  • the multimedia content data may be characterized in that the image data or video data.
  • the synthesizing of the video call signal performed between the calling video terminal and the called video terminal may include synthesizing a video corresponding to the retrieved multimedia content data to the calling video terminal and the called video terminal. And the retrieved image are overlaid.
  • synthesizing the video corresponding to the retrieved multimedia content data to the video call signal performed between the calling video terminal and the called video terminal the searched video is output to the calling video terminal and the called video terminal Can be configured to replace
  • an apparatus for providing a chat text recognition video synthesis call service providing a chat text recognition video synthesis call service by combining an outgoing video terminal and an incoming video terminal with a video call network
  • a video call network interworking unit for receiving a video call signal performed between the calling video terminal and the called video terminal in association with the video call network when a video call is made between the incoming video terminals
  • a chat data extractor for extracting chat data included in the received video call signal, a word data detector for separating chat data extracted from the chat data extractor into word data, and prestored word data detected by the word data detector
  • the multimedia content data retrieval unit which selects an image corresponding to the stored multimedia content data with respect to the detected word data and the image selected by the multimedia content data retrieval unit are synthesized into a video call signal performed between the calling video terminal and the called video terminal.
  • a multimedia content synthesizing unit for transmitting to the video communication network interworking unit, wherein the video communication network interworking unit receives a video call signal obtained by synthesizing a video corresponding to the multimedia content data from the multimedia content synthesizing unit, and transmits the video call network interworking unit.
  • An apparatus for providing a chat text recognition video synthesis call service which is transmitted to at least one terminal or both terminals of an incoming video terminal.
  • the multimedia content database may further include a multimedia content database storing multimedia content data corresponding to the word data detected by the word data detector.
  • a video terminal for providing a video chat call recognition text chat service through a video call network
  • the video call signal receiving unit for receiving a video call signal
  • the video call received from the video call signal receiving unit A chat data extractor for extracting chat data included in a signal
  • a word data detector for separating chat data extracted from the chat data extractor into word data, and multimedia content data previously stored in the word data detected by the word data detector
  • the multimedia content data search unit for selecting an image corresponding to the stored multimedia content data with respect to the detected word data and the image selected by the multimedia content data search unit are combined with a video call signal and transmitted to the video / audio communication unit.
  • a multimedia content synthesizing unit wherein the video / audio communication unit receives a video call signal obtained by synthesizing an image corresponding to the multimedia content data from the multimedia contents synthesizing unit and transmits the video call signal to a counterpart video terminal. can do.
  • the multimedia content database may further include a multimedia content database storing multimedia content data corresponding to the word data detected by the word data detector.
  • the electronic device may further include a download processor that transmits the multimedia content to the multimedia content database after downloading the multimedia content from an external multimedia content providing device.
  • the multimedia content corresponding to the recognized word is searched / synthesized by recognizing a word inputted and transmitted in a chat window of the video terminal.
  • the other party receives the multimedia content corresponding to the chat text overlaid with the other party's video screen on the screen of the video terminal of the other party. It can provide a method and apparatus for providing a video synthesis call service using a chat text recognition that can induce fun and can overcome the monotony of a chat service during a video call.
  • the service providing apparatus or the video terminal itself automatically provides various and three-dimensional multimedia contents during the video call without any special operation.
  • a method and apparatus for providing a video synthesis call service using chat text recognition to provide a synthesized screen to a counterpart video terminal may be provided.
  • the multimedia content corresponding to the same word is synthesized by downloading and storing the multimedia content from an external multimedia content providing device for the words included in the chat conversation contents.
  • FIG. 1 is an overall configuration diagram showing a combined state of the video synthesis call service providing apparatus 30 using the chat text recognition according to the present invention, the outgoing video terminal 10 and the incoming video terminal 20,
  • FIG. 2 is a block diagram illustrating a detailed configuration of the apparatus for providing a chat character recognition video synthesis call service of FIG. 1;
  • FIG. 3 is a flowchart illustrating a procedure of a video synthesis call service described with reference to FIGS. 1 and 2;
  • FIG. 4 is a call flow diagram for providing the service of FIG.
  • FIG. 5 is a diagram illustrating a method of searching for multimedia content data corresponding to a word extracted from FIG. 3;
  • FIG. 6 is a diagram illustrating a detailed configuration of a video terminal 60 capable of providing a video synthesis call service using chat text recognition according to another embodiment of the present invention.
  • FIG. 1 is an overall configuration diagram illustrating a combined state of a video synthesis call service providing apparatus 30 using a chat text recognition, an outgoing video terminal 10 and a called video terminal 20 according to the present invention.
  • the apparatus for providing a text synthesis call service for chatting text recognition of the present invention 30 is coupled to the calling video terminal 10 and the called video terminal 20 through a video call network.
  • a text conversation may be performed using a chat function.
  • the chat text recognition video synthesis call service providing apparatus 30 extracts the chat text data transmitted from the video call signal by the calling video terminal 10 or the called video terminal 20 to the counterpart video terminal. Recognizing and retrieving the multimedia content corresponding to the recognized chat text data, the data is overlaid on the video call signal and transmitted to the counterpart video terminal. Through this process, the user receives a screen on which the multimedia content corresponding to the chat text transmitted by the counterpart is transmitted to the face image screen of the counterpart from the video terminal.
  • FIG. 2 is a block diagram illustrating a detailed configuration of the apparatus for providing a chat character recognition video synthesis call service of FIG. 1.
  • the apparatus for providing a chat text recognition video synthesis call service 30 may include a video call network interworking unit 31, a chat data extractor 32, a word data detector 33, and a multimedia content search unit 34. , A multimedia content synthesizing unit 35, and a multimedia content database 36.
  • the video call network interworking unit 31 performs a function of receiving a video call signal formed between the calling video terminal 10 and the called video terminal 20 by interworking with the video call network. It also performs the role of receiving the video call signal synthesized by 35) to the calling video terminal 10 or the called video terminal 20 through the video call network.
  • the chat data extractor 32 extracts chat data from the video call signal received from the video call network interworking unit 31. That is, the chat data extracting unit 32 extracts chat text data by detecting chat text content input by the user of the video terminal present in the H.245 UserInputIndication signal included in the video call signal.
  • the word data detector 33 receives the chat text data extracted from the chat data extractor 32 and divides the chat text data into respective word data.
  • the multimedia content retrieval unit 34 receives respective word data separated from the word data detection unit 33 and retrieves whether multimedia content data corresponding to the received word data exists in the multimedia content database 36.
  • the multimedia content data corresponding to the word received from the word data detector 33 exists in the multimedia content database 36
  • the corresponding multimedia content data is transmitted to the multimedia content synthesizer 35 to be described below.
  • the multimedia content synthesizing unit 35 synthesizes multimedia content data corresponding to the chat text data received from the multimedia content data searching unit 34 and transmits the multimedia content data to the video call network interworking unit 31.
  • the multimedia contents database 36 stores the words frequently used by the video call user and the corresponding multimedia contents in advance. Such multimedia content may be updated periodically.
  • FIG. 3 is a flowchart illustrating a procedure of the video synthesis call service described with reference to FIGS. 1 and 2.
  • chat function when a user of a video terminal executes a chat function during a current video call, a chat message input window appears on the screen of the video terminal. The message is provided to be displayed on the screen of the video terminal of the counterpart and the creator.
  • the chat data is extracted from the video call signal transmitted between the calling video terminal 10 and the called video terminal 20 by video chatting (S303).
  • the method of extracting chat data from a video call signal includes detecting chat text data input by a user of a video terminal present in the H.245 UserInputIndication signal included in the video call signal. Will be extracted.
  • the word data detector 33 receiving the extracted chat data detects the word data from the received chat data (S305), and the detection of the word data includes at least one or more word data included in the received chat data. By separating it.
  • the multimedia content data corresponding to each word data is searched for (S307). Such a search is performed on the multimedia content stored in the multimedia content database 36.
  • FIG. it is determined whether there is multimedia content data corresponding to the detected word data (S309), and when the corresponding multimedia content data exists, an image performed between the calling video terminal 10 and the called video terminal 20.
  • the multimedia content data corresponding to the word data extracted from the call signal is synthesized (S311) and transmitted to the video terminal (S313). If the multimedia content data corresponding to the word data detected in step 309 does not exist, step 307 is performed on the next word data (S315). Meanwhile, step 307 for the process of searching for multimedia content data corresponding to the detected word data will be described in detail with reference to FIG. 5.
  • FIG. 4 is a call flow diagram for providing the service of FIG.
  • an outgoing video terminal 10 attempts a video call call to an incoming video terminal 20 through a video call network to an exchange (S401), and the exchange provides a chat character recognition video synthesis call service providing device 30 Request a call setup at step S403.
  • the apparatus for providing a chat text recognition video synthesis call service 30 requests a video call call setup to the called video terminal 20 via the switch (S405 and 407).
  • the exchange transmits the video call call response signal of the incoming video terminal 20 to the chat character recognition video synthesis call service providing apparatus 30. It transmits (S411).
  • the apparatus for providing a chat text recognition video synthesis call service 30 transmits a video call call response signal to the calling video terminal 10 via an exchange in response to the video call call response signal of the incoming video terminal 20 (S413,415). ). Then, a channel for video and voice call signal is generated through H.245 negotiation between the chatting text recognition video synthesis call service providing device 30 and the called video terminal 20 (S417), and the chat text recognition video synthesis call is performed. A channel for video and audio call signals is also generated between the service providing device 30 and the calling video terminal 10 through H.245 negotiation (S419).
  • a video and voice call path is set between the calling video terminal 10, the called video terminal 20, and the apparatus for providing a text recognition video chatting service for chatting text (S421).
  • a video call can be made between the calling video terminal 10 and the called video terminal 20 through the voice call path, and the user can select a chat function from the video terminal to have a chat conversation while watching the video of the counterpart user (S423).
  • Chat data input from the calling video terminal 10 in step 423 is transmitted to the chat character recognition video synthesis call service providing apparatus 30 through the H.245 UserInputIndication signal (S425).
  • the chat character recognition video synthesis call service providing apparatus 30 separates the received chat data into word data, recognizes the separated word data, retrieves multimedia content data corresponding to the word data, and displays the retrieved multimedia content data. Synthesize with a call signal (S427). After step 427, the chat text recognition video synthesis call service providing apparatus 30 transmits the chat data input from the calling video terminal 10 to the called video terminal 20 through the H.245 UserInputIndication signal (S429). The video call signal synthesized with the content data is transmitted to the called video terminal 20 (S431).
  • FIG. 5 is a diagram illustrating a method of searching for multimedia content data corresponding to a word extracted from FIG. 3.
  • the word data detector 33 receives chat data and detects the word data separately. According to the above example, the word data detection unit 33 separates / detects three word data of “today”, “night” and “office” from the extracted chat data. Then, the multimedia content data search unit 34 searches the multimedia content database 36 for the words " today ", " night “ and " office ", respectively, to find out whether corresponding multimedia content data is stored. , According to the previous example, there is multimedia content corresponding to "night” and "office", but no multimedia content corresponding to "today”.
  • the multimedia content synthesizing unit 36 transmits the multimedia content data corresponding to the respective word data. Synthesize to video call signal.
  • the video corresponding to the user video screen and the searched multimedia content data of the video terminal outputted to the calling video terminal 10 and the called video terminal 20 by the method of synthesizing the multimedia content data This can be configured to be overlaid and displayed.
  • it may be configured to replace the chat text output from the chat message window of the calling video terminal 10 and the called video terminal 20 instead of the user video screen.
  • FIG. 6 is a diagram illustrating a detailed configuration of a video terminal 60 capable of providing a video synthesis call service using chat text recognition according to another embodiment of the present invention.
  • a video terminal 60 capable of providing a video synthesis call service using chat text recognition may include a video call signal receiver 61, a chat data extractor 62, and a word data detector 63.
  • the video call signal receiver 61 serves to receive video and audio of a user of a video terminal.
  • the chat data extractor 62 extracts chat data from the video call signal received from the video call signal receiver 61. That is, the chat data extractor 62 extracts chat text data by detecting chat text content input by the user of the video terminal existing in the H.245 UserInputIndication signal included in the video call signal.
  • the word data detector 63 receives the chat text data extracted from the chat data extractor 62 and separates the chat text data into respective word data.
  • the multimedia content retrieval unit 64 receives respective word data separated from the word data detection unit 63 and retrieves whether multimedia content data corresponding to the received word data exists in the multimedia content database 68.
  • the multimedia content synthesizing unit 65 synthesizes the multimedia content data corresponding to the chat text data received from the multimedia content data searching unit 64 and transmits the multimedia content data to the video / audio communication unit 66.
  • the voice communication unit 66 transmits the synthesized video call signal to the counterpart video terminal through the video call network.
  • the download processor 67 transmits the multimedia content to the multimedia content database 67 after downloading the multimedia content from the external multimedia content providing device, and the multimedia content database 68 includes words frequently used by the video call user. It stores the corresponding multimedia contents in advance. Such multimedia content may be updated periodically.

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Telephonic Communication Services (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

The present invention relates to a method and an apparatus for providing an image overlay call service by recognizing a chat text. The present invention provides: a method for providing an image overlay call service through the recognition of a chat text in an apparatus for providing an image overlay call service which is connected to visual display terminals of a sender and a receiver through a visual communication network; and an apparatus for carrying out the method, the method comprising the steps of: connecting a visual communication call between the visual terminals of a sender and a receiver; extracting chat data transmitted between the visual terminals based on visual chatting while the visual chatting is performed between the visual terminals through the connected visual communication call; detecting word data from the extracted chat data; searching multimedia content data corresponding to the detected word data; synthesizing a visual image corresponding to the searched multimedia content data with a visual communication signal transmitted and received between the visual terminals; and transmitting the synthesized visual communication signal to at least one of the visual terminals.

Description

[규칙 제26조에 의한 보정 15.06.2009]　채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치[Revision 15.06.2009] according to Rule 26. Method and apparatus for providing video synthesis call service using chat character recognition
본 발명은 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치에 관한 것으로서, 보다 상세하게는 영상 통화 중에 영상 단말의 사용자가 서로 상대방 영상을 보면서 문자 채팅 서비스를 이용하는 경우, 채팅 창을 통해 주고받는 문자를 인식하고 인식된 문자에 상응하는 멀티미디어 콘텐츠를 검색/합성하여 상대방 영상 단말로 전송하는 방법 및 장치에 관한 것이다.The present invention relates to a method and apparatus for providing a video synthesis call service using chat text recognition. More particularly, when a user of a video terminal uses a text chat service while viewing a video of each other during a video call, the user can exchange text messages through a chat window. The present invention relates to a method and apparatus for recognizing a character, searching / synthesizing multimedia content corresponding to the recognized character, and transmitting the same to a counterpart video terminal.
최근, 이동통신 기술이 발전함에 따라 단순히 음성 통화만을 제공하는 서비스에서 벗어나 상대방의 얼굴을 보면서 통화할 수 있는 영상 통화 서비스가 제공되고 있다. 그러나 종래의 영상 통화 서비스는 주로 사용자의 얼굴 영상을 전송하는 것에 불과하므로 영상 통화 서비스 화면이 단조롭고 때로는 음성 통화를 할 때보다 어색한 경우가 많다는 문제점이 있다.Recently, with the development of mobile communication technology, a video call service capable of making a phone call while looking at the other party's face has been provided. However, since the conventional video call service mainly transmits a face image of a user, the video call service screen is monotonous and sometimes awkward than when making a voice call.
이러한 점에 착안하여 화면에 장식 효과를 줄 수 있도록 배경 화면을 합성하는 등의 영상 합성 방법이 제안되고 있으나, 이러한 방법도 정지 이미지 영상을 사용하기 때문에 화면이 단조롭다는 한계점은 피할 수 없으며 또한 이를 변경하기 위해서 사용자가 수시로 장식 효과를 위한 설정을 해야 한다는 문제점이 있다. 예컨대, 사용자는 자신의 단말에 배경 화면용 이미지 또는 영상을 저장해 두어야 하고 이를 영상 통화 중에 사용할 것인지 또 어떠한 배경 화면을 사용할 것인지를 결정해야 한다는 불편함이 있었다.In view of these points, image synthesis methods have been proposed, such as composing a background screen to give a decorative effect to the screen.However, this method also uses a still image image, so the limitation of monotonous screen cannot be avoided. In order to do this, there is a problem in that the user has to set the decoration effect at any time. For example, a user may have to store an image or a video for a background screen in his terminal and decide whether to use it during a video call or which wallpaper to use.
한편, 현재 제공되는 영상 통화 서비스에서는 부가 기능으로서 채팅 대화 기능이 제공되고 있으나, 이러한 채팅 대화 기능은 영상 화면 창과 별도로 구성된 채팅 창에서 문자 메시지를 작성하여 전송하는 형태로 제공되고 있는 실정이다. 이러한 단순히 문자 메시지를 실시간을 송수신하는 형태의 서비스는 사용자로 하여금 흥미를 유발하기 쉽지 않다는 문제점이 있었다.On the other hand, the current video call service is provided as a chat chat function as an additional function, but the chat chat function is provided in the form of sending a text message in a chat window configured separately from the video screen window. Such a service of simply sending and receiving a text message in real time has a problem in that it is not easy for a user to cause an interest.
본 발명은 상기한 바와 같은 문제점에 착안하여 안출된 것으로서, 사용자가 영상 단말을 이용하여 영상 통화중에 영상 통화의 채팅 서비스를 이용하는 경우에 영상 단말의 채팅 창에 입력하여 전송한 단어를 인식하여 인식한 단어에 대응되는 멀티미디어 콘텐츠를 검색/합성하여 상대방 영상 단말로 전송하면, 상대방은 자신의 영상 단말의 화면에 상대방의 영상 화면과 합성(overlay)된 채팅 문자에 대응하는 멀티미디어 콘텐츠를 전송받을 수 있는바, 영상 통화 중에 채팅 기능을 사용하는 사용자의 흥미와 재미를 유발할 수 있으며, 영상 통화 중의 채팅 서비스의 단조로움을 극복할 수 있는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공하는 것을 목적으로 한다.The present invention has been made in view of the above problems, and when a user uses a video call chat service during a video call using a video terminal, the user recognizes and recognizes a word transmitted by inputting it into a chat window of the video terminal. When the multimedia content corresponding to the word is searched / synthesized and transmitted to the video terminal of the other party, the other party can receive the multimedia content corresponding to the chat text overlaid with the video screen of the other party on the screen of his video terminal. To provide a method and apparatus for providing a video synthesis call service using a chat text recognition that can induce interest and fun of a user who uses a chat function during a video call, and can overcome the monotony of a chat service during a video call. It is done.
또한, 본 발명은 영상 통화 단말 사용자가 영상 통화중에 채팅 기능을 이용하는 경우에 별도의 특별한 조작을 하지 않아도 서비스 제공 장치 또는 영상 단말 자체에서 자동으로 영상 통화 도중에 다양하고 입체감 있는 형태의 멀티미디어 콘텐츠를 합성하여 상대방 영상 단말로 제공할 수 있도록 하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공하는 것을 또 다른 목적으로 한다.In addition, when the video call terminal user uses a chat function during a video call, the present invention automatically synthesizes multimedia contents having various and three-dimensional shapes during a video call in the service providing apparatus or the video terminal itself without any special operation. Another object of the present invention is to provide a method and apparatus for providing a video call service using chat text recognition, which can be provided to a counterpart video terminal.
또한, 본 발명은 영상 통화중에 채팅 기능을 이용하는 경우에 채팅 대화 내용에 포함되어 있는 단어에 대하여 외부의 멀티미디어 콘텐츠 제공 장치로부터 멀티미디어 콘텐츠를 다운로드 및 저장하여 동일한 단어에 상응하는 멀티미디어 콘텐츠를 합성하여 전송함으로써, 다양한 멀티미디어 콘텐츠를 합성할 수 있는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공하는 것을 또 다른 목적으로 한다.In addition, when the chat function is used during a video call, the present invention downloads and stores the multimedia content from an external multimedia content providing device with respect to the words included in the chat conversation, and synthesizes and transmits multimedia content corresponding to the same word. Another object of the present invention is to provide a method and apparatus for providing a video call service using chat text recognition, which can synthesize various multimedia contents.
상술한 목적들을 달성하기 위하여, 본 발명의 일 측면에 따르면, 발신 영상 단말 및 착신 영상 단말과 영상 통화망을 통해 결합하는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치에서 채팅 문자 인식을 이용한 영상 합성 통화 서비스를 제공하는 방법에 있어서, 상기 발신 영상 단말과 상기 착신 영상 단말 간에 영상 통화 호가 형성되는 단계, 상기 형성된 영상 통화 호를 통해 발신 영상 단말 또는 착신 영상 단말 사이에서 영상 채팅이 수행되는 경우, 상기 영상 채팅에 의해 상기 양 단말 사이에 전송되는 채팅 데이터를 추출하는 단계, 상기 추출한 채팅 데이터로부터 단어 데이터를 검출하는 단계, 상기 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계, 상기 검색된 멀티미디어 콘텐츠 데이터에 상응하는 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하는 단계 및 상기 합성한 영상 통화 신호를 상기 발신 영상 단말 또는 상기 착신 영상 단말 중 적어도 어느 하나의 단말로 전송하는 단계를 포함하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법을 제공할 수 있다.In order to achieve the above objects, according to an aspect of the present invention, a video synthesis call service using the chat text recognition in the video chat service providing apparatus for text recognition to combine the calling video terminal and the incoming video terminal and the video call network In the method for providing a video call call is formed between the calling video terminal and the called video terminal, when the video chat is performed between the calling video terminal or the called video terminal through the formed video call, the video chat Extracting chat data transmitted between the both terminals by detecting the word data from the extracted chat data; retrieving the multimedia content data corresponding to the detected word data; The corresponding image of the foot And a step of synthesizing a video call signal performed between a video terminal and the called video terminal, and transmitting the synthesized video call signal to at least one of the calling video terminal and the called video terminal. It is possible to provide a method for providing a video synthesis call service.
여기에서, 상기 형성된 영상 통화 호를 통해 발신 영상 단말 또는 착신 영상 단말 사이에서 영상 채팅이 수행되는 경우, 상기 영상 채팅에 의해 상기 양 단말 사이에 전송되는 채팅 데이터를 추출하는 단계는, 상기 형성된 영상 통화 신호에 포함되어 있는 H.245 UserInputIndication 신호로부터 채팅 데이터를 추출함으로써 이루어지도록 구성할 수 있다. 또한, 상기 추출한 채팅 데이터로부터 단어 데이터를 검출하는 단계는, 상기 추출한 채팅 데이터를 적어도 하나 이상의 단어 데이터로 분리하여 검출하도록 구성할 수 있다. 또한, 상기 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계에서, 상기 멀티미디어 콘텐츠는 각각의 단어 데이터에 대응하여 멀티미디어 콘텐츠 데이터베이스에 미리 저장되도록 구성할 수 있다. 또한, 상기 멀티미디어 콘텐츠 데이터는 이미지 데이터 또는 동영상 데이터인 것을 특징으로 할 수 있다. 또한, 상기 검색된 멀티미디어 콘텐츠 데이터에 상응하는 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하는 단계는, 상기 발신 영상 단말과 착신 영상 단말에 출력되는 영상 단말의 사용자 영상 화면과 상기 검색된 영상이 합성(overlay)되도록 구성할 수 있다. 또한, 상기 검색된 멀티미디어 콘텐츠 데이터에 상응하는 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하는 단계는, 상기 검색된 영상이 상기 발신 영상 단말과 착신 영상 단말에 출력되는 채팅 문자를 대체하여 표시되도록 구성할 수 있다.Here, when the video chat is performed between the calling video terminal or the called video terminal through the formed video call, the step of extracting the chat data transmitted between the both terminals by the video chat, the formed video call It can be configured to extract chat data from the H.245 UserInputIndication signal included in the signal. The detecting of the word data from the extracted chat data may be configured to separate and detect the extracted chat data into at least one word data. In addition, in the searching of the multimedia content data corresponding to the detected word data, the multimedia content may be configured to be previously stored in the multimedia content database corresponding to each word data. In addition, the multimedia content data may be characterized in that the image data or video data. The synthesizing of the video call signal performed between the calling video terminal and the called video terminal may include synthesizing a video corresponding to the retrieved multimedia content data to the calling video terminal and the called video terminal. And the retrieved image are overlaid. In addition, synthesizing the video corresponding to the retrieved multimedia content data to the video call signal performed between the calling video terminal and the called video terminal, the searched video is output to the calling video terminal and the called video terminal Can be configured to replace
본 발명의 다른 측면에 따르면, 발신 영상 단말 및 착신 영상 단말과 영상 통화망을 통해 결합하여 채팅 문자 인식 영상 합성 통화 서비스를 제공하는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치에 있어서, 상기 발신 영상 단말과 상기 착신 영상 단말 간에 영상 통화 호가 형성된 경우에, 상기 영상 통화망과 연동하여 상기 발신 영상 단말 및 상기 착신 영상 단말 간에 수행되는 영상 통화 신호를 수신하는 영상 통화망 연동부, 상기 영상 통화망 연동부로부터 수신한 영상 통화 신호에 포함된 채팅 데이터를 추출하는 채팅 데이터 추출부, 상기 채팅 데이터 추출부에서 추출한 채팅 데이터를 단어 데이터로 분리하는 단어 데이터 검출부, 상기 단어 데이터 검출부에서 검출한 단어 데이터를 미리 저장해 둔 멀티미디어 콘텐츠 데이터와 비교하여, 상기 검출한 단어 데이터에 대하여 저장된 멀티미디어 콘텐츠 데이터에 대응되는 영상을 선택하는 멀티미디어 콘텐츠 데이터 검색부 및 상기 멀티미디어 콘텐츠 데이터 검색부에서 선택된 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하여 영상 통화망 연동부로 전송하는 멀티미디어 콘텐츠 합성부를 포함하되, 상기 영상 통화망 연동부는 상기 멀티미디어 콘텐츠 데이터에 상응하는 영상이 합성된 영상 통화 신호를 상기 멀티미디어 콘텐츠 합성부로부터 수신하여 상기 발신 영상 단말 또는 상기 착신 영상 단말 중 적어도 어느 하나의 단말 또는 두 단말 모두에게 전송하는 것을 특징으로 하는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치를 제공할 수 있다.According to another aspect of the present invention, an apparatus for providing a chat text recognition video synthesis call service providing a chat text recognition video synthesis call service by combining an outgoing video terminal and an incoming video terminal with a video call network, A video call network interworking unit for receiving a video call signal performed between the calling video terminal and the called video terminal in association with the video call network when a video call is made between the incoming video terminals; A chat data extractor for extracting chat data included in the received video call signal, a word data detector for separating chat data extracted from the chat data extractor into word data, and prestored word data detected by the word data detector Compared with the multimedia content data, The multimedia content data retrieval unit which selects an image corresponding to the stored multimedia content data with respect to the detected word data and the image selected by the multimedia content data retrieval unit are synthesized into a video call signal performed between the calling video terminal and the called video terminal. And a multimedia content synthesizing unit for transmitting to the video communication network interworking unit, wherein the video communication network interworking unit receives a video call signal obtained by synthesizing a video corresponding to the multimedia content data from the multimedia content synthesizing unit, and transmits the video call network interworking unit. An apparatus for providing a chat text recognition video synthesis call service, which is transmitted to at least one terminal or both terminals of an incoming video terminal.
여기에서, 상기 단어 데이터 검출부에서 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 저장하는 멀티미디어 콘텐츠 데이터베이스를 더 포함하도록 구성할 수 있다.The multimedia content database may further include a multimedia content database storing multimedia content data corresponding to the word data detected by the word data detector.
본 발명의 또 다른 측면에 따르면, 영상 통화망을 통해 채팅 문자 인식 영상 합성 통화 서비스를 제공하는 영상 단말에 있어서, 영상 통화 신호를 수신하는 영상 통화 신호 수신부, 상기 영상 통화 신호 수신부로부터 수신한 영상 통화 신호에 포함된 채팅 데이터를 추출하는 채팅 데이터 추출부, 상기 채팅 데이터 추출부에서 추출한 채팅 데이터를 단어 데이터로 분리하는 단어 데이터 검출부, 상기 단어 데이터 검출부에서 검출한 단어 데이터를 미리 저장해 둔 멀티미디어 콘텐츠 데이터와 비교하여, 상기 검출한 단어 데이터에 대하여 저장된 멀티미디어 콘텐츠 데이터에 대응되는 영상을 선택하는 멀티미디어 콘텐츠 데이터 검색부 및 상기 멀티미디어 콘텐츠 데이터 검색부에서 선택된 영상을 영상 통화 신호에 합성하여 영상/음성 통신부로 전송하는 멀티미디어 콘텐츠 합성부를 포함하되, 상기 영상/음성 통신부는 상기 멀티미디어 콘텐츠 데이터에 상응하는 영상이 합성된 영상 통화 신호를 상기 멀티미디어 콘텐츠 합성부로부터 수신하여 상대방 영상 단말로 전송하는 것을 특징으로 하는 영상 단말을 제공할 수 있다.According to still another aspect of the present invention, a video terminal for providing a video chat call recognition text chat service through a video call network, the video call signal receiving unit for receiving a video call signal, the video call received from the video call signal receiving unit A chat data extractor for extracting chat data included in a signal, a word data detector for separating chat data extracted from the chat data extractor into word data, and multimedia content data previously stored in the word data detected by the word data detector; In comparison, the multimedia content data search unit for selecting an image corresponding to the stored multimedia content data with respect to the detected word data and the image selected by the multimedia content data search unit are combined with a video call signal and transmitted to the video / audio communication unit. And a multimedia content synthesizing unit, wherein the video / audio communication unit receives a video call signal obtained by synthesizing an image corresponding to the multimedia content data from the multimedia contents synthesizing unit and transmits the video call signal to a counterpart video terminal. can do.
여기에서, 상기 단어 데이터 검출부에서 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 저장하는 멀티미디어 콘텐츠 데이터베이스를 더 포함하도록 구성할 수 있다. 또한, 외부의 멀티미디어 콘텐츠 제공 장치로부터 멀티미디어 콘텐츠를 다운로드 받은 후에 상기 멀티미디어 콘텐츠 데이터베이스로 전송하는 다운로드 처리부를 더 포함하도록 구성할 수 있다.The multimedia content database may further include a multimedia content database storing multimedia content data corresponding to the word data detected by the word data detector. The electronic device may further include a download processor that transmits the multimedia content to the multimedia content database after downloading the multimedia content from an external multimedia content providing device.
본 발명에 의하면, 사용자가 영상 단말을 이용하여 영상 통화중에 영상 통화의 채팅 서비스를 이용하는 경우에 영상 단말의 채팅 창에 입력하여 전송한 단어를 인식하여 인식한 단어에 대응되는 멀티미디어 콘텐츠를 검색/합성하여 상대방 영상 단말로 전송하며, 상대방은 자신의 영상 단말의 화면에 상대방의 영상 화면과 합성(overlay)된 채팅 문자에 대응하는 멀티미디어 콘텐츠를 전송받음으로써, 영상 통화 중에 채팅 기능을 사용하는 사용자의 흥미와 재미를 유발할 수 있으며, 영상 통화 중의 채팅 서비스의 단조로움을 극복할 수 있는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공할 수 있다.According to the present invention, when a user uses a video call chat service during a video call using a video terminal, the multimedia content corresponding to the recognized word is searched / synthesized by recognizing a word inputted and transmitted in a chat window of the video terminal. To the other party's video terminal, and the other party receives the multimedia content corresponding to the chat text overlaid with the other party's video screen on the screen of the video terminal of the other party. It can provide a method and apparatus for providing a video synthesis call service using a chat text recognition that can induce fun and can overcome the monotony of a chat service during a video call.
또한, 본 발명에 의하면, 영상 통화 단말 사용자가 영상 통화중에 채팅 기능을 이용하는 경우에 별도의 특별한 조작을 하지 않아도 서비스 제공 장치 또는 영상 단말 자체에서 자동으로 영상 통화 도중에 다양하고 입체감 있는 형태의 멀티미디어 콘텐츠를 합성하여 합성된 화면을 상대방 영상 단말로 제공할 수 있도록 하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공할 수 있다.In addition, according to the present invention, when a video call terminal user uses a chat function during a video call, the service providing apparatus or the video terminal itself automatically provides various and three-dimensional multimedia contents during the video call without any special operation. A method and apparatus for providing a video synthesis call service using chat text recognition to provide a synthesized screen to a counterpart video terminal may be provided.
또한, 본 발명에 의하면, 영상 통화중에 채팅 기능을 이용하는 경우에 채팅 대화 내용에 포함되어 있는 단어에 대하여 외부의 멀티미디어 콘텐츠 제공 장치로부터 멀티미디어 콘텐츠를 다운로드 및 저장하여 동일한 단어에 상응하는 멀티미디어 콘텐츠를 합성하여 전송함으로써, 다양한 멀티미디어 콘텐츠를 합성할 수 있는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법 및 장치를 제공할 수 있다.In addition, according to the present invention, when using a chat function during a video call, the multimedia content corresponding to the same word is synthesized by downloading and storing the multimedia content from an external multimedia content providing device for the words included in the chat conversation contents. By transmitting, it is possible to provide a method and apparatus for providing a video call service using chat text recognition that can synthesize various multimedia contents.
도 1은 본 발명에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 장치(30)와 발신 영상 단말(10) 및 착신 영상 단말(20)과의 결합 상태를 나타낸 전체 구성도,1 is an overall configuration diagram showing a combined state of the video synthesis call service providing apparatus 30 using the chat text recognition according to the present invention, the outgoing video terminal 10 and the incoming video terminal 20,
도 2는 도 1의 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)의 상세 구성을 나타낸 블록도,FIG. 2 is a block diagram illustrating a detailed configuration of the apparatus for providing a chat character recognition video synthesis call service of FIG. 1;
도 3은 도 1 및 도 2에서 설명한 영상 합성 통화 서비스의 절차를 나타낸 흐름도,3 is a flowchart illustrating a procedure of a video synthesis call service described with reference to FIGS. 1 and 2;
도 4는 도 3의 서비스를 제공하기 위한 호 흐름도이다.4 is a call flow diagram for providing the service of FIG.
도 5는 도 3에서 추출된 단어에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 방법을 나타내기 위한 도면,5 is a diagram illustrating a method of searching for multimedia content data corresponding to a word extracted from FIG. 3;
도 6은 본 발명의 다른 실시예에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스를 제공할 수 있는 영상 단말(60)의 상세 구성을 나타낸 도면이다.FIG. 6 is a diagram illustrating a detailed configuration of a video terminal 60 capable of providing a video synthesis call service using chat text recognition according to another embodiment of the present invention.
이하, 첨부된 도면들을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 장치(30)와 발신 영상 단말(10) 및 착신 영상 단말(20)과의 결합 상태를 나타낸 전체 구성도이다.FIG. 1 is an overall configuration diagram illustrating a combined state of a video synthesis call service providing apparatus 30 using a chat text recognition, an outgoing video terminal 10 and a called video terminal 20 according to the present invention.
도 1을 참조하면, 본 발명의 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 영상 통화 망을 통해 발신 영상 단말(10)과 착신 영상 단말(20)과 결합되어 있다. 발신 영상 단말(10)과 착신 영상 단말(20)이 영상 통화 호가 형성되어 영상 통화를 하는 경우에 채팅 기능을 이용하여 문자 대화를 할 수 있다. 이러한 경우에 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 발신 영상 단말(10) 또는 착신 영상 단말(20)이 상대방 영상 단말로 전송 채팅 문자 데이터를 영상 통화 신호에서 추출하고 추출한 채팅 문자 데이터를 인식하여, 인식한 채팅 문자 데이터에 상응하는 멀티미디어 콘텐츠를 데이터를 검색하여 이를 영상 통화 신호에 합성(overlay)하여 상대방 영상 단말로 전송하게 된다. 이러한 과정을 통하여 사용자는 영상 단말에서 상대방의 얼굴 영상 화면에 상대방이 채팅 기능을 이용하여 전송한 채팅 문자에 상응하는 멀티미디어 콘텐츠가 합성된 화면을 전송받게 된다.Referring to FIG. 1, the apparatus for providing a text synthesis call service for chatting text recognition of the present invention 30 is coupled to the calling video terminal 10 and the called video terminal 20 through a video call network. When the outgoing video terminal 10 and the incoming video terminal 20 make a video call by making a video call, a text conversation may be performed using a chat function. In this case, the chat text recognition video synthesis call service providing apparatus 30 extracts the chat text data transmitted from the video call signal by the calling video terminal 10 or the called video terminal 20 to the counterpart video terminal. Recognizing and retrieving the multimedia content corresponding to the recognized chat text data, the data is overlaid on the video call signal and transmitted to the counterpart video terminal. Through this process, the user receives a screen on which the multimedia content corresponding to the chat text transmitted by the counterpart is transmitted to the face image screen of the counterpart from the video terminal.
도 2는 도 1의 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)의 상세 구성을 나타낸 블록도이다.FIG. 2 is a block diagram illustrating a detailed configuration of the apparatus for providing a chat character recognition video synthesis call service of FIG. 1.
도 2를 참조하면, 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 영상 통화망 연동부(31), 채팅 데이터 추출부(32), 단어 데이터 검출부(33), 멀티미디어 콘텐츠 검색부(34), 멀티미디어 콘텐츠 합성부(35) 및 멀티미디어 콘텐츠 데이터베이스(36)를 포함한다.Referring to FIG. 2, the apparatus for providing a chat text recognition video synthesis call service 30 may include a video call network interworking unit 31, a chat data extractor 32, a word data detector 33, and a multimedia content search unit 34. , A multimedia content synthesizing unit 35, and a multimedia content database 36.
영상 통화망 연동부(31)는 영상 통화 망과 연동해서 발신 영상 단말(10)과 착신 영상 단말(20) 간의 형성된 영상 통화 신호를 수신하는 역할을 수행하며, 아래에서 설명할 멀티미디어 콘텐츠 합성부(35)에 의해 합성된 영상 통화 신호를 수신하여 영상 통화 망을 통해 발신 영상 단말(10) 또는 착신 영상 단말(20)로 전송하는 역할도 아울러 수행한다. 채팅 데이터 추출부(32)는 영상 통화망 연동부(31)로부터 수신한 영상 통화 신호로부터 채팅 데이터를 추출하는 역할을 수행한다. 즉, 채팅 데이터 추출부(32)는 영상 통화 신호에 포함되어 있는 H.245 UserInputIndication 신호 내에 존재하는 영상 단말의 사용자가 입력한 채팅 문자 내용을 검출함으로써 채팅 문자 데이터를 추출하게 된다. 단어 데이터 검출부(33)는 채팅 데이터 추출부(32)로부터 추출된 채팅 문자 데이터를 수신하여 각각의 단어 데이터로 분리하는 역할을 수행한다. 멀티미디어 콘텐츠 검색부(34)는 단어 데이터 검출부(33)로부터 분리된 각각의 단어 데이터를 수신하고, 수신한 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터가 멀티미디어 콘텐츠 데이터베이스(36)에 존재하는지를 검색한다. 여기서, 단어 데이터 검출부(33)로부터 수신한 단어에 상응하는 멀티미디어 콘텐츠 데이터가 멀티미디어 콘텐츠 데이터베이스(36)에 존재하는 경우에는 상응하는 멀티미디어 콘텐츠 데이터를 아래에서 설명할 멀티미디어 콘텐츠 합성부(35)로 전송하게 되나, 존재하지 않는 경우에는 다음 단어에 대하여 앞서 설명한 검색 과정을 반복하게 된다. 멀티미디어 콘텐츠 합성부(35)는 멀티미디어 콘텐츠 데이터 검색부(34)로부터 전송받은 채팅 문자 데이터와 상응하는 멀티미디어 콘텐츠 데이터를 합성하고, 이를 영상 통화망 연동부(31)로 전송하는 역할을 수행한다. 멀티미디어 콘텐츠 데이터베이스(36)는 영상 통화 사용자가 자주 사용하는 단어와 이와 상응하는 멀티미디어 콘텐츠를 미리 저장해 두는 역할을 한다. 이러한 멀티미디어 콘텐츠는 주기적으로 갱신될 수 있다.The video call network interworking unit 31 performs a function of receiving a video call signal formed between the calling video terminal 10 and the called video terminal 20 by interworking with the video call network. It also performs the role of receiving the video call signal synthesized by 35) to the calling video terminal 10 or the called video terminal 20 through the video call network. The chat data extractor 32 extracts chat data from the video call signal received from the video call network interworking unit 31. That is, the chat data extracting unit 32 extracts chat text data by detecting chat text content input by the user of the video terminal present in the H.245 UserInputIndication signal included in the video call signal. The word data detector 33 receives the chat text data extracted from the chat data extractor 32 and divides the chat text data into respective word data. The multimedia content retrieval unit 34 receives respective word data separated from the word data detection unit 33 and retrieves whether multimedia content data corresponding to the received word data exists in the multimedia content database 36. Here, when the multimedia content data corresponding to the word received from the word data detector 33 exists in the multimedia content database 36, the corresponding multimedia content data is transmitted to the multimedia content synthesizer 35 to be described below. However, if it does not exist, the search process described above is repeated for the next word. The multimedia content synthesizing unit 35 synthesizes multimedia content data corresponding to the chat text data received from the multimedia content data searching unit 34 and transmits the multimedia content data to the video call network interworking unit 31. The multimedia contents database 36 stores the words frequently used by the video call user and the corresponding multimedia contents in advance. Such multimedia content may be updated periodically.
도 3은 도 1 및 도 2에서 설명한 영상 합성 통화 서비스의 절차를 나타낸 흐름도이다.3 is a flowchart illustrating a procedure of the video synthesis call service described with reference to FIGS. 1 and 2.
도 3을 참조하면, 발신 영상 단말(10)과 착신 영상 단말(20) 간에 영상 통화 호가 설정되면(S301), 설정된 영상 통화 호를 통한 영상 통화 중에 사용자가 채팅 기능을 이용하게 된다. 이러한, 채팅 기능은 현재 영상 통화 수행중에 영상 단말의 사용자가 채팅 기능을 실행하면 영상 단말의 화면상에 채팅 메시지 입력 창이 뜨며, 일반 문자 메시지를 작성하는 방법으로 채팅 메시지를 작성하여 전송 버튼을 누르면 채팅 메시지가 상대방 및 작성자 본인의 영상 단말의 화면에 표시되도록 제공되고 있다.Referring to FIG. 3, when a video call call is established between the calling video terminal 10 and the called video terminal 20 (S301), the user uses a chat function during a video call through the set video call. In the chat function, when a user of a video terminal executes a chat function during a current video call, a chat message input window appears on the screen of the video terminal. The message is provided to be displayed on the screen of the video terminal of the counterpart and the creator.
그리고 나서, 영상 채팅에 의해 발신 영상 단말(10)과 착신 영상 단말(20) 사이에 전송되는 영상 통화 신호로부터 채팅 데이터를 추출한다(S303). 여기서, 영상 통화 신호로부터 채팅 데이터를 추출하는 방법은 앞서 설명한 바와 같이, 영상 통화 신호에 포함되어 있는 H.245 UserInputIndication 신호 내에 존재하는 영상 단말의 사용자가 입력한 채팅 문자 내용을 검출함으로써 채팅 문자 데이터를 추출하게 된다. 다음으로, 추출된 채팅 데이터를 수신한 단어 데이터 검출부(33)는 수신한 채팅 데이터로부터 단어 데이터를 검출하게 되며(S305), 이러한 단어 데이터의 검출은 수신한 채팅 데이터에 포함된 적어도 하나 이상의 단어 데이터를 분리함으로써 수행된다.Then, the chat data is extracted from the video call signal transmitted between the calling video terminal 10 and the called video terminal 20 by video chatting (S303). Here, as described above, the method of extracting chat data from a video call signal includes detecting chat text data input by a user of a video terminal present in the H.245 UserInputIndication signal included in the video call signal. Will be extracted. Next, the word data detector 33 receiving the extracted chat data detects the word data from the received chat data (S305), and the detection of the word data includes at least one or more word data included in the received chat data. By separating it.
단계 305를 통하여 각각 단어 데이터가 분리된 후, 각각의 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터를 검색하게 되며(S307), 이러한 검색은 멀티미디어 콘텐츠 데이터베이스(36)에 저장해둔 멀티미디어 콘텐츠를 대상으로 수행된다. 그리고 나서, 검출된 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터가 존재하는지를 판단하여(S309), 상응하는 멀티미디어 콘텐츠 데이터가 존재하는 경우에 발신 영상 단말(10)과 착신 영상 단말(20) 사이에 수행되는 영상 통화 신호에 추출한 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터를 합성하여(S311) 영상 단말로 전송하게 된다(S313). 만일 단계 309에서 검출된 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터가 존재하지 않는 경우에는 다음 단어 데이터에 대하여 단계 307을 수행한다(S315). 한편, 검출한 단어 데이터에 해당하는 멀티미디어 콘텐츠 데이터를 검색하는 과정에 대한 단계 307에 대해서는, 도 5에서 자세히 설명하기로 한다.After the word data is separated through the step 305, the multimedia content data corresponding to each word data is searched for (S307). Such a search is performed on the multimedia content stored in the multimedia content database 36. FIG. Then, it is determined whether there is multimedia content data corresponding to the detected word data (S309), and when the corresponding multimedia content data exists, an image performed between the calling video terminal 10 and the called video terminal 20. The multimedia content data corresponding to the word data extracted from the call signal is synthesized (S311) and transmitted to the video terminal (S313). If the multimedia content data corresponding to the word data detected in step 309 does not exist, step 307 is performed on the next word data (S315). Meanwhile, step 307 for the process of searching for multimedia content data corresponding to the detected word data will be described in detail with reference to FIG. 5.
도 4는 도 3의 서비스를 제공하기 위한 호 흐름도이다.4 is a call flow diagram for providing the service of FIG.
도 4를 참조하면, 발신 영상 단말(10)에서 영상 통화 망을 통해 교환기로 착신 영상 단말(20)로의 영상 통화 호를 시도하고(S401), 교환기는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)로 호 설정 요청을 한다(S403). 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 이에 상응하여 교환기를 거쳐 착신 영상 단말(20)로 영상 통화 호 설정 요청을 한다(S405,407). 착신 영상 단말(20)로부터 교환기로 영상 통화 호 연결 응답 신호를 전송하면(S409), 교환기는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)로 착신 영상 단말(20)의 영상 통화 호 응답 신호를 전송한다(S411). 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 착신 영상 단말(20)의 영상 통화 호 응답 신호에 상응하여 교환기를 거쳐 발신 영상 단말(10)로 영상 통화 호 응답 신호를 전송한다(S413,415). 그리고 나서, 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)와 착신 영상 단말(20) 간에 H.245 negotiation을 통해 영상 및 음성 통화 신호에 대한 채널을 생성하고(S417), 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)와 발신 영상 단말(10) 간에 역시 H.245 negotiation을 통해 영상 및 음성 통화 신호에 대한 채널을 생성한다(S419). 단계 419까지의 과정을 거치면, 발신 영상 단말(10), 착신 영상 단말(20) 및 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30) 간에 영상 및 음성 통화로가 설정되며(S421), 설정된 영상 및 음성 통화로를 통하여 발신 영상 단말(10)과 착신 영상 단말(20) 사이에 영상 통화를 할 수 있으며, 또한 영상 단말에서 채팅 기능을 선택하여 상대방 사용자의 영상을 보면서 채팅 대화를 나눌 수 있다(S423). 단계 423 과정에서의 발신 영상 단말(10)에서 입력된 채팅 데이터는 H.245 UserInputIndication 신호를 통해 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)로 전송된다(S425). 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)는 전송받은 채팅 데이터를 단어 데이터로 분리하고, 분리된 단어 데이터를 인식하고, 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터를 검색하고, 검색된 멀티미디어 콘텐츠 데이터를 영상 통화 신호와 합성한다(S427). 단계 427 이후에 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)가 발신 영상 단말(10)로부터 입력된 채팅 데이터를 H.245 UserInputIndication 신호를 통해 착신 영상 단말(20)로 전송하고(S429), 멀티미디어 콘텐츠 데이터가 합성된 영상 통화 신호를 착신 영상 단말(20)로 전송한다(S431).Referring to FIG. 4, an outgoing video terminal 10 attempts a video call call to an incoming video terminal 20 through a video call network to an exchange (S401), and the exchange provides a chat character recognition video synthesis call service providing device 30 Request a call setup at step S403. The apparatus for providing a chat text recognition video synthesis call service 30 requests a video call call setup to the called video terminal 20 via the switch (S405 and 407). When the video call call connection response signal is transmitted from the incoming video terminal 20 to the exchange (S409), the exchange transmits the video call call response signal of the incoming video terminal 20 to the chat character recognition video synthesis call service providing apparatus 30. It transmits (S411). The apparatus for providing a chat text recognition video synthesis call service 30 transmits a video call call response signal to the calling video terminal 10 via an exchange in response to the video call call response signal of the incoming video terminal 20 (S413,415). ). Then, a channel for video and voice call signal is generated through H.245 negotiation between the chatting text recognition video synthesis call service providing device 30 and the called video terminal 20 (S417), and the chat text recognition video synthesis call is performed. A channel for video and audio call signals is also generated between the service providing device 30 and the calling video terminal 10 through H.245 negotiation (S419). After the process up to step 419, a video and voice call path is set between the calling video terminal 10, the called video terminal 20, and the apparatus for providing a text recognition video chatting service for chatting text (S421). A video call can be made between the calling video terminal 10 and the called video terminal 20 through the voice call path, and the user can select a chat function from the video terminal to have a chat conversation while watching the video of the counterpart user (S423). ). Chat data input from the calling video terminal 10 in step 423 is transmitted to the chat character recognition video synthesis call service providing apparatus 30 through the H.245 UserInputIndication signal (S425). The chat character recognition video synthesis call service providing apparatus 30 separates the received chat data into word data, recognizes the separated word data, retrieves multimedia content data corresponding to the word data, and displays the retrieved multimedia content data. Synthesize with a call signal (S427). After step 427, the chat text recognition video synthesis call service providing apparatus 30 transmits the chat data input from the calling video terminal 10 to the called video terminal 20 through the H.245 UserInputIndication signal (S429). The video call signal synthesized with the content data is transmitted to the called video terminal 20 (S431).
도 5는 도 3에서 추출된 단어에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 방법을 나타내기 위한 도면이다.FIG. 5 is a diagram illustrating a method of searching for multimedia content data corresponding to a word extracted from FIG. 3.
도 5를 참조하면, 채팅 데이터 추출부(32)가 영상 통화 신호로부터 발신 영상 단말(10)이 작성하여 전송한 "오늘 밤에 사무실에서 보자"라는 채팅 데이터를 추출하면, 단어 데이터 검출부(33)는 채팅 데이터를 수신하여 각각의 단어 데이터로 분리하여 검출하게 된다. 앞선 예에 따르면, 단어 데이터 검출부(33)는 추출된 채팅 데이터로부터 "오늘", "밤", "사무실"이라는 3개의 단어 데이터를 분리/검출하게 된다. 그리고 나서, 멀티미디어 콘텐츠 데이터 검색부(34)는 각각 "오늘", "밤", "사무실"이라는 단어에 대하여 멀티미디어 콘텐츠 데이터베이스(36)를 검색하여 상응하는 멀티미디어 콘텐츠 데이터가 저장되어 있는지를 검색하게 되며, 앞선 예에 따르면, "밤", "사무실"에 상응하는 멀티미디어 콘텐츠는 존재하나 "오늘"에 상응하는 멀티미디어 콘텐츠는 존재하지 않는다.Referring to FIG. 5, when the chat data extracting unit 32 extracts chat data "See you in the office tonight" created and transmitted by the calling video terminal 10 from the video call signal, the word data detector 33 Receives chat data and detects the word data separately. According to the above example, the word data detection unit 33 separates / detects three word data of “today”, “night” and “office” from the extracted chat data. Then, the multimedia content data search unit 34 searches the multimedia content database 36 for the words " today ", " night " and " office ", respectively, to find out whether corresponding multimedia content data is stored. , According to the previous example, there is multimedia content corresponding to "night" and "office", but no multimedia content corresponding to "today".
멀티미디어 콘텐츠 데이터 검색부(34)에서 각각의 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터를 멀티미디어 콘텐츠 합성부(35)로 전송하면, 멀티미디어 콘텐츠 합성부(36)는 각각의 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터를 영상 통화 신호에 합성한다. 본 발명의 일 실시예에 의할 경우, 멀티미디어 콘텐츠 데이터가 합성되는 방법으로 발신 영상 단말(10)과 착신 영상 단말(20)에 출력되는 영상 단말의 사용자 영상 화면과 검색된 멀티미디어 콘텐츠 데이터에 해당하는 영상이 합성(overlay)되어 표시되도록 구성할 수 있다. 또한, 본 발명의 다른 실시예에 의할 경우, 사용자 영상 화면이 아닌 발신 영상 단말(10)과 착신 영상 단말(20)의 채팅 메시지 창에서 출력되는 채팅 문자를 대체하여 표시되도록 구성할 수도 있다.When the multimedia content data retrieval unit 34 transmits the multimedia content data corresponding to the respective word data to the multimedia content synthesizing unit 35, the multimedia content synthesizing unit 36 transmits the multimedia content data corresponding to the respective word data. Synthesize to video call signal. According to an embodiment of the present invention, the video corresponding to the user video screen and the searched multimedia content data of the video terminal outputted to the calling video terminal 10 and the called video terminal 20 by the method of synthesizing the multimedia content data. This can be configured to be overlaid and displayed. In addition, according to another embodiment of the present invention, it may be configured to replace the chat text output from the chat message window of the calling video terminal 10 and the called video terminal 20 instead of the user video screen.
도 6은 본 발명의 다른 실시예에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스를 제공할 수 있는 영상 단말(60)의 상세 구성을 나타낸 도면이다.FIG. 6 is a diagram illustrating a detailed configuration of a video terminal 60 capable of providing a video synthesis call service using chat text recognition according to another embodiment of the present invention.
본 발명에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치(30)에서 제공될 수도 있으나, 별도의 영상 합성 통화 서비스 제공 장치를 구성하지 않고, 이러한 구성을 영상 단말에 포함할 수도 있다. 본 발명의 다른 실시예에 의한 채팅 문자 인식을 이용한 영상 합성 통화 서비스를 제공할 수 있는 영상 단말(60)은 영상 통화 신호 수신부(61), 채팅 데이터 추출부(62), 단어 데이터 검출부(63), 멀티미디어 콘텐츠 데이터 검색부(64), 멀티미디어 콘텐츠 합성부(65), 영상/음성 통신부(66), 다운로드 처리부(67) 및 멀티미디어 콘텐츠 데이터베이스(68)를 포함하도록 구성되어 있다.The video synthesis call service using the chat text recognition according to the present invention may be provided by the chat text recognition video synthesis call service providing apparatus 30, but does not constitute a separate video synthesis call service providing apparatus, and the configuration of the video terminal It can also be included. According to another exemplary embodiment of the present invention, a video terminal 60 capable of providing a video synthesis call service using chat text recognition may include a video call signal receiver 61, a chat data extractor 62, and a word data detector 63. , A multimedia content data retrieval unit 64, a multimedia content synthesis unit 65, a video / audio communication unit 66, a download processing unit 67, and a multimedia content database 68.
영상 통화 신호 수신부(61)는 영상 단말의 사용자의 영상과 음성을 수신하는 역할을 수행한다. 채팅 데이터 추출부(62)는 영상 통화 신호 수신부(61)로부터 수신한 영상 통화 신호로부터 채팅 데이터를 추출하는 역할을 수행한다. 즉, 채팅 데이터 추출부(62)는 영상 통화 신호에 포함되어 있는 H.245 UserInputIndication 신호 내에 존재하는 영상 단말의 사용자가 입력한 채팅 문자 내용을 검출함으로써 채팅 문자 데이터를 추출하게 된다. 단어 데이터 검출부(63)는 채팅 데이터 추출부(62)로부터 추출된 채팅 문자 데이터를 수신하여 각각의 단어 데이터로 분리하는 역할을 수행한다. 멀티미디어 콘텐츠 검색부(64)는 단어 데이터 검출부(63)로부터 분리된 각각의 단어 데이터를 수신하고, 수신한 단어 데이터에 상응하는 멀티미디어 콘텐츠 데이터가 멀티미디어 콘텐츠 데이터베이스(68)에 존재하는지를 검색한다. 여기서, 단어 데이터 검출부(63)로부터 수신한 단어에 상응하는 멀티미디어 콘텐츠 데이터가 멀티미디어 콘텐츠 데이터베이스(68)에 존재하는 경우에는 상응하는 멀티미디어 콘텐츠 데이터를 아래에서 설명할 멀티미디어 콘텐츠 합성부(65)로 전송하게 되나, 존재하지 않는 경우에는 다음 단어에 대하여 앞서 설명한 검색 과정을 반복하게 된다. 멀티미디어 콘텐츠 합성부(65)는 멀티미디어 콘텐츠 데이터 검색부(64)로부터 전송받은 채팅 문자 데이터와 상응하는 멀티미디어 콘텐츠 데이터를 합성하고, 이를 영상/음성 통신부(66)로 전송하는 역할을 수행하며, 영상/음성 통신부(66)는 합성된 영상 통화 신호를 영상 통화망을 통해 상대방 영상 단말로 전송하는 역할을 한다. 한편, 다운로드 처리부(67)는 외부의 멀티미디어 콘텐츠 제공 장치로부터 멀티미디어 콘텐츠를 다운로드 받은 후에 멀티미디어 콘텐츠 데이터베이스(67)로 전송하는 역할을 하며, 멀티미디어 콘텐츠 데이터베이스(68)는 영상 통화 사용자가 자주 사용하는 단어와 이와 상응하는 멀티미디어 콘텐츠를 미리 저장해 두는 역할을 한다. 이러한 멀티미디어 콘텐츠는 주기적으로 갱신될 수 있다.The video call signal receiver 61 serves to receive video and audio of a user of a video terminal. The chat data extractor 62 extracts chat data from the video call signal received from the video call signal receiver 61. That is, the chat data extractor 62 extracts chat text data by detecting chat text content input by the user of the video terminal existing in the H.245 UserInputIndication signal included in the video call signal. The word data detector 63 receives the chat text data extracted from the chat data extractor 62 and separates the chat text data into respective word data. The multimedia content retrieval unit 64 receives respective word data separated from the word data detection unit 63 and retrieves whether multimedia content data corresponding to the received word data exists in the multimedia content database 68. Here, when the multimedia content data corresponding to the word received from the word data detection unit 63 exists in the multimedia content database 68, the corresponding multimedia content data is transmitted to the multimedia content synthesizing unit 65 to be described below. However, if it does not exist, the search process described above is repeated for the next word. The multimedia content synthesizing unit 65 synthesizes the multimedia content data corresponding to the chat text data received from the multimedia content data searching unit 64 and transmits the multimedia content data to the video / audio communication unit 66. The voice communication unit 66 transmits the synthesized video call signal to the counterpart video terminal through the video call network. Meanwhile, the download processor 67 transmits the multimedia content to the multimedia content database 67 after downloading the multimedia content from the external multimedia content providing device, and the multimedia content database 68 includes words frequently used by the video call user. It stores the corresponding multimedia contents in advance. Such multimedia content may be updated periodically.
이상에서, 본 발명의 바람직한 실시예를 참조하여 본 발명의 구성을 설명하였으나 본 발명은 상기 실시예들에 한정되는 것이 아니며 첨부된 특허청구범위 및 도면에 의거하여 여러 가지 형태의 변형, 부가, 수정 실시가 가능하다는 점을 유의해야 한다.In the above, the configuration of the present invention has been described with reference to the preferred embodiment of the present invention, but the present invention is not limited to the above embodiments, and various modifications, additions, and modifications based on the appended claims and drawings. It should be noted that implementation is possible.

Claims (12)

  1. 발신 영상 단말 및 착신 영상 단말과 영상 통화망을 통해 결합하는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치에서 채팅 문자 인식을 이용한 영상 합성 통화 서비스를 제공하는 방법에 있어서,In the method for providing a video synthesis call service using the chat text recognition in the video text messaging service providing apparatus for combining the calling video terminal and the incoming video terminal and the video call network,
    상기 발신 영상 단말과 상기 착신 영상 단말 간에 영상 통화 호가 형성되는 단계;Forming a video call call between the calling video terminal and the called video terminal;
    상기 형성된 영상 통화 호를 통해 발신 영상 단말 또는 착신 영상 단말 사이에서 영상 채팅이 수행되는 경우, 상기 영상 채팅에 의해 상기 양 단말 사이에 전송되는 채팅 데이터를 추출하는 단계;Extracting chat data transmitted between the two terminals by the video chat when the video chat is performed between the calling video terminal and the called video terminal through the formed video call;
    상기 추출한 채팅 데이터로부터 단어 데이터를 검출하는 단계;Detecting word data from the extracted chat data;
    상기 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계;Searching for multimedia content data corresponding to the detected word data;
    상기 검색된 멀티미디어 콘텐츠 데이터에 상응하는 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하는 단계; 및Synthesizing a video corresponding to the retrieved multimedia content data into a video call signal performed between the calling video terminal and the called video terminal; And
    상기 합성한 영상 통화 신호를 상기 발신 영상 단말 또는 상기 착신 영상 단말 중 적어도 어느 하나의 단말로 전송하는 단계Transmitting the synthesized video call signal to at least one of the calling video terminal and the called video terminal.
    를 포함하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법.Video synthesis call service providing method using a chat character recognition comprising a.
  2. 제1항에 있어서,The method of claim 1,
    상기 형성된 영상 통화 호를 통해 발신 영상 단말 또는 착신 영상 단말 사이에서 영상 채팅이 수행되는 경우, 상기 영상 채팅에 의해 상기 양 단말 사이에 전송되는 채팅 데이터를 추출하는 단계는,When the video chat is performed between the calling video terminal or the called video terminal through the formed video call, the step of extracting the chat data transmitted between the both terminals by the video chat,
    상기 형성된 영상 통화 신호에 포함되어 있는 H.245 UserInputIndication 신호로부터 채팅 데이터를 추출함으로써 이루어지는 것을 특징으로 하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법.And a method of extracting chat data from the H.245 UserInputIndication signal included in the formed video call signal.
  3. 제1항에 있어서,The method of claim 1,
    상기 추출한 채팅 데이터로부터 단어 데이터를 검출하는 단계는,Detecting word data from the extracted chat data,
    상기 추출한 채팅 데이터를 적어도 하나 이상의 단어 데이터로 분리하여 검출하는 것을 특징으로 하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법.The method of claim 1, wherein the extracted chat data is separated into at least one word data and detected.
  4. 제1항에 있어서,The method of claim 1,
    상기 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 검색하는 단계에서,Retrieving multimedia content data corresponding to the detected word data;
    상기 멀티미디어 콘텐츠는 각각의 단어 데이터에 대응하여 멀티미디어 콘텐츠 데이터베이스에 미리 저장되어 있는 것을 특징으로 하는 것을 특징으로 하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법.And the multimedia content is pre-stored in a multimedia content database corresponding to each word data.
  5. 제1항에 있어서,The method of claim 1,
    상기 멀티미디어 콘텐츠 데이터는 이미지 데이터 또는 동영상 데이터인 것을 특징으로 하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법.The multimedia content data is a video synthesis call service providing method using a chat text recognition, characterized in that the image data or video data.
  6. 제1항에 있어서,The method of claim 1,
    상기 검색된 멀티미디어 콘텐츠 데이터에 상응하는 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하는 단계는,Synthesizing a video corresponding to the retrieved multimedia content data to a video call signal performed between the calling video terminal and the called video terminal,
    상기 발신 영상 단말과 착신 영상 단말에 출력되는 영상 단말의 사용자 영상 화면과 상기 검색된 영상이 합성(overlay)되어 표시되는 것을 특징으로 하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법.Method for providing a video synthesis call service using a chat character recognition, characterized in that the user video screen of the video terminal and the searched video output to the outgoing video terminal and the incoming video terminal is displayed.
  7. 제1항에 있어서,The method of claim 1,
    상기 검색된 멀티미디어 콘텐츠 데이터에 상응하는 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하는 단계는,Synthesizing a video corresponding to the retrieved multimedia content data to a video call signal performed between the calling video terminal and the called video terminal,
    상기 검색된 영상이 상기 발신 영상 단말과 착신 영상 단말에 출력되는 채팅 문자를 대체하여 표시되는 것을 특징으로 하는 채팅 문자 인식을 이용한 영상 합성 통화 서비스 제공 방법.And the searched video is displayed by replacing the chat text outputted from the calling video terminal and the called video terminal.
  8. 발신 영상 단말 및 착신 영상 단말과 영상 통화망을 통해 결합하여 채팅 문자 인식 영상 합성 통화 서비스를 제공하는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치에 있어서,An apparatus for providing a chat text recognition video synthesis call service for providing a chat text recognition video synthesis call service by combining an outgoing video terminal and an incoming video terminal with a video call network,
    상기 발신 영상 단말과 상기 착신 영상 단말 간에 영상 통화 호가 형성된 경우에, 상기 영상 통화망과 연동하여 상기 발신 영상 단말 및 상기 착신 영상 단말 간에 수행되는 영상 통화 신호를 수신하는 영상 통화망 연동부;A video call network interworking unit for receiving a video call signal performed between the calling video terminal and the called video terminal when the video call is formed between the calling video terminal and the called video terminal;
    상기 영상 통화망 연동부로부터 수신한 영상 통화 신호에 포함된 채팅 데이터를 추출하는 채팅 데이터 추출부;A chat data extractor configured to extract chat data included in a video call signal received from the video call network interworking unit;
    상기 채팅 데이터 추출부에서 추출한 채팅 데이터를 단어 데이터로 분리하는 단어 데이터 검출부;A word data detector for dividing the chat data extracted by the chat data extractor into word data;
    상기 단어 데이터 검출부에서 검출한 단어 데이터를 미리 저장해 둔 멀티미디어 콘텐츠 데이터와 비교하여, 상기 검출한 단어 데이터에 대하여 저장된 멀티미디어 콘텐츠 데이터에 대응되는 영상을 선택하는 멀티미디어 콘텐츠 데이터 검색부; 및A multimedia content data retrieval unit for selecting an image corresponding to the stored multimedia content data with respect to the detected word data by comparing the word data detected by the word data detection unit with previously stored multimedia content data; And
    상기 멀티미디어 콘텐츠 데이터 검색부에서 선택된 영상을 상기 발신 영상 단말과 상기 착신 영상 단말 간에 수행되는 영상 통화 신호에 합성하여 영상 통화망 연동부로 전송하는 멀티미디어 콘텐츠 합성부A multimedia content synthesizing unit for synthesizing the video selected by the multimedia content data retrieval unit to a video call signal performed between the calling video terminal and the called video terminal and transmitting the same to a video call network interworking unit.
    를 포함하되,Including,
    상기 영상 통화망 연동부는 상기 멀티미디어 콘텐츠 데이터에 상응하는 영상이 합성된 영상 통화 신호를 상기 멀티미디어 콘텐츠 합성부로부터 수신하여 상기 발신 영상 단말 또는 상기 착신 영상 단말 중 적어도 어느 하나의 단말 또는 두 단말 모두에게 전송하는 것을 특징으로 하는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치.The video call network interworking unit receives a video call signal obtained by synthesizing a video corresponding to the multimedia content data from the multimedia content synthesizing unit, and transmits the video call signal to at least one of the calling video terminal and the called video terminal. Apparatus for providing a chat character recognition video synthesis call service, characterized in that.
  9. 제8항에 있어서,The method of claim 8,
    상기 단어 데이터 검출부에서 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 저장하는 멀티미디어 콘텐츠 데이터베이스를 더 포함하는 것을 특징으로 하는 채팅 문자 인식 영상 합성 통화 서비스 제공 장치.And a multimedia content database for storing multimedia content data corresponding to the word data detected by the word data detection unit.
  10. 영상 통화망을 통해 채팅 문자 인식 영상 합성 통화 서비스를 제공하는 영상 단말에 있어서,In a video terminal providing a video text messaging service to chat text recognition through a video call network,
    영상 통화 신호를 수신하는 영상 통화 신호 수신부;A video call signal receiving unit for receiving a video call signal;
    상기 영상 통화 신호 수신부로부터 수신한 영상 통화 신호에 포함된 채팅 데이터를 추출하는 채팅 데이터 추출부;A chat data extractor configured to extract chat data included in the video call signal received from the video call signal receiver;
    상기 채팅 데이터 추출부에서 추출한 채팅 데이터를 단어 데이터로 분리하는 단어 데이터 검출부;A word data detector for dividing the chat data extracted by the chat data extractor into word data;
    상기 단어 데이터 검출부에서 검출한 단어 데이터를 미리 저장해 둔 멀티미디어 콘텐츠 데이터와 비교하여, 상기 검출한 단어 데이터에 대하여 저장된 멀티미디어 콘텐츠 데이터에 대응되는 영상을 선택하는 멀티미디어 콘텐츠 데이터 검색부; 및A multimedia content data retrieval unit for selecting an image corresponding to the stored multimedia content data with respect to the detected word data by comparing the word data detected by the word data detection unit with previously stored multimedia content data; And
    상기 멀티미디어 콘텐츠 데이터 검색부에서 선택된 영상을 영상 통화 신호에 합성하여 영상/음성 통신부로 전송하는 멀티미디어 콘텐츠 합성부A multimedia content synthesizing unit for synthesizing the video selected by the multimedia content data searching unit to a video call signal and transmitting the video / audio communication unit
    를 포함하되,Including,
    상기 영상/음성 통신부는 상기 멀티미디어 콘텐츠 데이터에 상응하는 영상이 합성된 영상 통화 신호를 상기 멀티미디어 콘텐츠 합성부로부터 수신하여 상대방 영상 단말로 전송하는 것을 특징으로 하는 영상 단말.And the video / audio communication unit receives a video call signal obtained by synthesizing a video corresponding to the multimedia content data from the multimedia content synthesizing unit and transmits the video call signal to the counterpart video terminal.
  11. 제10항에 있어서,The method of claim 10,
    상기 단어 데이터 검출부에서 검출한 단어 데이터에 대응하는 멀티미디어 콘텐츠 데이터를 저장하는 멀티미디어 콘텐츠 데이터베이스Multimedia content database for storing multimedia content data corresponding to the word data detected by the word data detection unit
    를 더 포함하는 것을 특징으로 하는 영상 단말.The video terminal further comprises.
  12. 제10항에 있어서,The method of claim 10,
    외부의 멀티미디어 콘텐츠 제공 장치로부터 멀티미디어 콘텐츠를 다운로드 받은 후에 상기 멀티미디어 콘텐츠 데이터베이스로 전송하는 다운로드 처리부Download processing unit for transmitting the multimedia content after downloading the multimedia content from the external multimedia content providing device;
    를 더 포함하는 것을 특징으로 하는 영상 단말.The video terminal further comprises.
PCT/KR2009/002395 2008-05-14 2009-05-07 Method and apparatus for providing image overlay call service by recognizing chat text WO2009139553A2 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20080044341A KR100969218B1 (en) 2008-05-14 2008-05-14 Method and apparatus for providing a image overlay call service using recognition chatting text
KR10-2008-0044341 2008-05-14

Publications (2)

Publication Number Publication Date
WO2009139553A2 true WO2009139553A2 (en) 2009-11-19
WO2009139553A3 WO2009139553A3 (en) 2010-01-21

Family

ID=41319144

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2009/002395 WO2009139553A2 (en) 2008-05-14 2009-05-07 Method and apparatus for providing image overlay call service by recognizing chat text

Country Status (2)

Country Link
KR (1) KR100969218B1 (en)
WO (1) WO2009139553A2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012134150A2 (en) * 2011-03-29 2012-10-04 (주)티아이스퀘어 Method and system for providing multimedia content sharing service while conducting communication service
KR101226560B1 (en) * 2011-03-29 2013-01-25 (주)티아이스퀘어 System and method for providing multidedia content sharing service during communication service
US9491601B2 (en) 2013-06-10 2016-11-08 Intel Corporation Dynamic visual profiles

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020084302A (en) * 2001-04-27 2002-11-05 (주)트러스트테크놀로지 Apparatus of extract and transmission of image using the character message, its method
KR100564940B1 (en) * 2005-11-23 2006-03-30 주식회사 케이티씨 Multimedia message changing system and changing method
KR20060083240A (en) * 2005-01-14 2006-07-20 (주)필링크 System and method for producing multimedia message
KR20080036703A (en) * 2006-10-24 2008-04-29 삼성전자주식회사 Video telephony apparatus of potable device and transmit-receiving method thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020084302A (en) * 2001-04-27 2002-11-05 (주)트러스트테크놀로지 Apparatus of extract and transmission of image using the character message, its method
KR20060083240A (en) * 2005-01-14 2006-07-20 (주)필링크 System and method for producing multimedia message
KR100564940B1 (en) * 2005-11-23 2006-03-30 주식회사 케이티씨 Multimedia message changing system and changing method
KR20080036703A (en) * 2006-10-24 2008-04-29 삼성전자주식회사 Video telephony apparatus of potable device and transmit-receiving method thereof

Also Published As

Publication number Publication date
WO2009139553A3 (en) 2010-01-21
KR100969218B1 (en) 2010-07-09
KR20090118512A (en) 2009-11-18

Similar Documents

Publication Publication Date Title
KR101338818B1 (en) Mobile terminal and information display method using the same
KR101718770B1 (en) Method for displaying message in mobile communication terminal
CN102075605A (en) Method, system and mobile terminal for displaying incoming call
US20060099978A1 (en) Wireless communication terminal with function of confiirming receiver's identity by displaying image corresponding to the receiver and method thereof
EP1478178A1 (en) Communication apparatus and method
WO2009139553A2 (en) Method and apparatus for providing image overlay call service by recognizing chat text
KR100426364B1 (en) Method of the transmission and reception of a character image in mobile phone
US20080254829A1 (en) Control Apparatus, Mobile Communications System, and Communications Terminal
KR20080097784A (en) System and method for providing automatic response service
KR20070029488A (en) Method for displaying caller information of mobile phone
KR20050078349A (en) Method for searching and providing contents using sms and system there-of
KR20030061505A (en) Apparatus and method for transmitting a sender information
KR100893546B1 (en) Method and apparatus for providing video synthesizing call service using voice recognition
KR101597248B1 (en) SYSTEM AND METHOD FOR PROVIDING ADVERTISEMENT USING VOISE RECOGNITION WHEN TELEPHONE CONVERSATION ON THE VoIP BASE
KR100945162B1 (en) System and method for providing ringback tone
KR100998288B1 (en) Method for transmitting multimedia data in voice communication
KR100873389B1 (en) Method and apparatus for serving video response service using visible communication service
KR100610898B1 (en) Mobile communication terminal for input of voicememo and method thereof
KR100647006B1 (en) Background picture transmitting method and apparatus in a mobile communication terminal capable of a vedio phone
JPH11250068A (en) Information processor, information processing method and recording medium
KR100834281B1 (en) Mobile for two way lettering service in real time and method for lettering service
KR101049461B1 (en) Method and apparatus for transmitting multimedia data in voice communication
KR101056895B1 (en) How to store caller ID information on a mobile terminal
KR20090007932A (en) Mobile network system and method for converting short message to multimedia message
KR100992679B1 (en) Method for attatching contents file in a mobile telecommunication terminal equipment

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09746732

Country of ref document: EP

Kind code of ref document: A2

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09746732

Country of ref document: EP

Kind code of ref document: A2