KR101137091B1 - Method and system for offering search result using caption information - Google Patents
Method and system for offering search result using caption information Download PDFInfo
- Publication number
- KR101137091B1 KR101137091B1 KR1020100078871A KR20100078871A KR101137091B1 KR 101137091 B1 KR101137091 B1 KR 101137091B1 KR 1020100078871 A KR1020100078871 A KR 1020100078871A KR 20100078871 A KR20100078871 A KR 20100078871A KR 101137091 B1 KR101137091 B1 KR 101137091B1
- Authority
- KR
- South Korea
- Prior art keywords
- caption information
- image data
- search
- extracting
- providing
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/237—Lexical tools
- G06F40/247—Thesauruses; Synonyms
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
검색어에 따른 검색 결과 제공 방법 및 시스템이 개시된다. 수신된 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 데이터베이스에서 추출하고, 추출한 영상 데이터와 자막 정보를 수신된 검색어의 검색 결과로 제공할 수 있다. A method and system for providing search results according to search terms. The image data matching with the caption information related to the received search word may be extracted from the database and the extracted image data and the caption information may be provided as a search result of the received search term.
Description
본 발명은 수신된 검색어에 해당하는 검색 결과를 제공하는 방법 및 시스템에 관한 것으로, 수신된 검색어에 대한 상세 검색 결과를 제공하는 방법 및 시스템에 관한 것이다.The present invention relates to a method and system for providing a search result corresponding to a received search word, and a method and system for providing a detailed search result on a received search word.
일반적으로, 대부분의 어학 학습자들은 전자 사전 등을 이용하여 단어를 검색한다. 최근에는, 휴대 인터넷이 발달함에 따라, 대부분의 사람들이 일상 생활에서 휴대 인터넷을 이용하여 포털 사이트에 접속하고, 접속된 포털 사이트에서 제공하는 인터넷 사전을 이용하여 단어를 검색한다. 특히, 단어 검색 시에, 일상 생활에서 단어의 활용 및 단어의 의미를 돕기 위해 검색한 단어의 예문이 제공된다. In general, most language learners search for words using an electronic dictionary or the like. In recent years, as the portable Internet has developed, most people access the portal site using the portable Internet in their daily lives, and search for words using an Internet dictionary provided on a portal site connected thereto. In particular, examples of words searched to assist in the use of words and meanings of words in daily life are provided at the time of word search.
그러나, 종래의 전자 사전, 인터넷 사전에서는 텍스트 형태의 예문을 제공한다. 이에 따라, 검색 결과로 제공되는 예문 만으로는 예문이 나타내는 상황, 즉, 단어가 포함하고 있는 뉘앙스(nuance)를 사용자가 이해하는데 어려움이 있다. 더욱이, 검색 결과로 제공되는 예문에 검색이 필요한 새로운 단어가 포함된 경우에는 예문이 사용자의 이해를 방해하기도 한다.However, conventional electronic dictionaries and Internet dictionaries provide textual examples. Accordingly, it is difficult for the user to understand the situation represented by the illustrative sentence, that is, the nuance included in the word, only by the illustrative sentence provided as the search result. Furthermore, if the example sentence provided as a result of the search includes a new word that needs to be searched, the example sentence may interfere with the user's understanding.
따라서, 사용자가 입력한 검색어에 대한 검색 결과를 제공함에 있어서, 검색 결과에 대한 사용자의 이해를 도울 수 있는 방안이 필요하다.Accordingly, there is a need for a method that can help users understand search results in providing search results for search terms entered by the user.
본 발명은, 자막 정보를 이용하여 사용자가 입력한 검색어의 검색 결과를 제공함으로써, 검색 결과에 대한 사용자의 이해를 도울 수 있는 검색 결과 제공 방법 및 시스템을 제공하고자 한다.An object of the present invention is to provide a search result providing method and system that can help a user understand a search result by providing a search result of a search term input by a user using caption information.
또한, 본 발명은, 자막 정보와 매칭하는 영상 데이터를 검색어의 검색 결과로 제공함으로써, 검색어의 활용에 대한 사용자 이해를 도울 수 있는 검색 결과 제공 방법 및 시스템을 제공하고자 한다.The present invention also provides a method and system for providing search results that can help a user understand the utilization of a search term by providing video data matched with the caption information as a search result of the search term.
또한, 본 발명은, 자막 정보 및 자막 정보와 매칭하는 영상 데이터를 검색어의 예문으로 제공함으로써, 검색어의 검색 결과로 제공되는 예문의 정확도를 향상시킬 수 있는 방법 및 시스템을 제공하고자 한다. The present invention also provides a method and system for improving the accuracy of a sentence provided as a search result of a search term by providing image data matching the subtitle information and the caption information as an example sentence of the search term.
본 발명의 일실시예에 따른 검색 결과 제공 방법은, 검색어를 수신하는 단계, 데이터베이스로부터 상기 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출하는 단계, 및 상기 자막 정보와 상기 영상 데이터를 제공하는 단계를 포함할 수 있다.A method for providing a search result according to an embodiment of the present invention includes receiving a search word, extracting image data matching with caption information related to the search term from a database, and providing the caption information and the image data . ≪ / RTI >
또한, 상기 추출하는 단계는, 상기 검색어 또는 상기 검색어의 동의어를 포함하는 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다.The extracting step may extract image data matching the caption information including the search word or the synonym of the search term.
또한, 상기 추출하는 단계는, 상기 영상 데이터의 오디오 정보를 이용하여 결정된 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다.The extracting may extract image data matching the caption information determined using the audio information of the image data.
또한, 상기 추출하는 단계는, 상기 영상 데이터를 구성하는 복수의 프레임들 중 상기 자막 정보와 매칭하는 현재 프레임, 상기 현재 프레임과 연속하는 이전 프레임 또는 다음 프레임을 추출할 수 있다.The extracting may extract a current frame matching the caption information among a plurality of frames constituting the image data, a previous frame contiguous to the current frame, or a next frame.
또한, 상기 추출하는 단계는, 상기 검색어가 제1 국가의 언어인 경우, 제2 국가의 언어로 표현된 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다.In addition, if the search term is a language of a first country, the extracting step may extract image data matching with caption information expressed in a language of a second country.
또한, 상기 제공하는 단계는, 상기 자막 정보 및 상기 영상 데이터를 재생하기 위한 표시 정보를 함께 제공할 수 있다.In addition, the providing step may provide the caption information and the display information for reproducing the video data.
또한, 상기 제공하는 단계는 사전 검색 요청에 따라 검색어를 수신한 경우, 검색어의 사전 검색 결과의 예문으로 자막 정보 및 자막 정보에 대응하는 영상 데이터를 제공할 수 있다.In addition, the providing step may provide the image data corresponding to the caption information and the caption information as an example sentence of the search result of the search term when receiving the search term according to the dictionary search request.
또한, 본 발명의 일실시예에 따른 검색 결과 제공 시스템은, 검색어를 수신하는 수신부, 데이터베이스로부터 상기 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출하는 추출부, 및 상기 자막 정보와 상기 영상 데이터를 제공하는 제공부를 포함할 수 있다.According to another aspect of the present invention, there is provided a search result providing system including: a receiver for receiving a search word; an extracting unit for extracting image data matching with caption information related to the search term from a database; And the like.
또한, 상기 추출부는, 상기 검색어 또는 상기 검색어의 동의어를 포함하는 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다.The extracting unit may extract image data matching the caption information including the search word or the synonym of the search term.
또한, 상기 추출부는, 상기 영상 데이터의 오디오 정보를 이용하여 결정된 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다.The extracting unit may extract image data matching the caption information determined using the audio information of the image data.
또한, 상기 추출부는, 상기 영상 데이터를 구성하는 복수의 프레임들 중 상기 자막 정보와 매칭하는 현재 프레임, 상기 현재 프레임과 연속하는 이전 프레임 또는 다음 프레임을 추출할 수 있다.The extraction unit may extract a current frame matching the caption information among a plurality of frames constituting the image data, a previous frame contiguous to the current frame, or a next frame.
또한, 상기 추출부는, 상기 검색어가 제1 국가의 언어인 경우, 제2 국가의 언어로 표현된 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다.The extracting unit may extract image data matching the caption information expressed in the language of the second country when the search term is a language of the first country.
또한, 상기 제공부는, 상기 자막 정보 및 상기 영상 데이터를 재생하기 위한 표시 정보를 함께 제공할 수 있다.Also, the providing unit may provide the caption information and the display information for reproducing the video data together.
또한, 상기 제공부는, 사전 검색 요청에 따라 검색어를 수신한 경우, 검색어의 사전 검색 결과의 예문으로 자막 정보 및 자막 정보에 대응하는 영상 데이터를 제공할 수 있다.In addition, when the search word is received according to the dictionary search request, the providing unit may provide the image data corresponding to the caption information and the caption information as an example sentence of the search result of the search term.
본 발명의 일실시예에 따르면, 자막 정보를 이용하여 사용자가 입력한 검색어의 검색 결과를 제공함으로써, 검색 결과에 대한 사용자의 이해를 도울 수 있다.According to an embodiment of the present invention, it is possible to help a user understand a search result by providing a search result of a search term input by a user using subtitle information.
또한, 자막 정보와 매칭하는 영상 데이터를 검색어의 검색 결과로 제공함으로써, 검색어의 활용에 대한 사용자 이해를 도울 수 있다.In addition, by providing video data matched with the caption information as a search result of the search term, it is possible to help the user understand the utilization of the search term.
또한, 자막 정보 및 자막 정보와 매칭하는 영상 데이터를 검색어의 예문으로 제공함으로써, 검색어의 검색 결과로 제공되는 예문의 정확도를 향상시킬 수 있다. In addition, by providing video data matched with caption information and caption information as an example sentence of a search term, it is possible to improve the accuracy of a sentence provided as a search result of a search term.
도 1은 본 발명의 일실시예에 따라 검색 결과를 제공하는 전반적인 구성을 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 검색 결과 제공 시스템의 구성을 도시한 블록도이다.
도 3 및 도 4는 본 발명의 일실시예에 따라 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 제공하는 구성을 설명하기 위해 제공되는 도면이다.
도 5는 본 발명의 일실시예에 따른 검색 결과 제공 시스템의 동작을 설명하기 위해 제공되는 흐름도이다.1 is a diagram illustrating an overall configuration for providing search results according to an embodiment of the present invention.
2 is a block diagram showing a configuration of a search result providing system according to an embodiment of the present invention.
3 and 4 are diagrams for explaining a configuration for providing image data matching with caption information related to a search term according to an embodiment of the present invention.
5 is a flowchart illustrating an operation of a search result providing system according to an embodiment of the present invention.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다. 다만, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. However, the present invention is not limited to or limited by the embodiments. Like reference symbols in the drawings denote like elements.
도 1은 본 발명의 일실시예에 따라 검색 결과를 제공하는 전반적인 구성을 도시한 도면이다.1 is a diagram illustrating an overall configuration for providing search results according to an embodiment of the present invention.
도 1을 따르면, 검색 결과 제공 시스템(20)은 수신된 검색어(10)의 검색 결과를 DB(Database: 30)로부터 추출할 수 있다. 이때, 검색 결과 제공 시스템(20)은 검색어(10)의 검색 결과로서, DB(30)에서 검색어와 관련된 자막 정보 및 영상 데이터를 추출할 수 있다. 여기서, 추출된 영상 데이터는 검색어와 관련된 자막 정보와 매칭하는 영상 데이터일 수 있다.Referring to FIG. 1, the search
일례로, 인터넷 사전에서 단어를 검색하는 경우, 사용자로부터 입력된 검색어(10)가 수신되면, 검색 결과 제공 시스템(20)은 DB(30)에서 수신된 검색어와 관련된 자막 정보, 그리고 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다. 이처럼, DB(30)에는 자막 정보와 영상 데이터가 매칭하여 저장될 수 있다. 이때, 영화가 영상으로 이용되는 경우, 영화의 자막이 자막 정보로 이용될 수 있다.For example, in the case of searching a word in the Internet dictionary, the search
다른 예로, 검색 결과 제공 시스템(20)은 웹 기반의 사전 검색 이외에, 스마트 폰 등의 이동 단말에서 제공되는 사전 검색 및 전자 사전 검색에서도 이용될 수 있다. 즉, 이동 단말 또는 전자 사전을 통해 검색어가 수신된 경우, 검색 결과 제공 시스템(20)은 수신된 검색어와 관련된 자막 정보, 그리고 자막 정보와 매칭하는 영상 데이터를 추출하여 사전 검색 결과로서 제공할 수 있다.As another example, the search
이하에서는 도 2 내지 도 4를 참조하여, 수신된 검색어와 관련된 자막 정보 및 자막 정보와 매칭하는 영상 데이터를 추출하여 제공하는 과정에 대해 상세히 설명하기로 한다.Hereinafter, a process of extracting and providing image data matching with caption information and caption information related to a received search term will be described in detail with reference to FIG. 2 to FIG.
도 2는 본 발명의 일실시예에 따른 검색 결과 제공 시스템의 구성을 도시한 블록도이다.2 is a block diagram showing a configuration of a search result providing system according to an embodiment of the present invention.
도 2에 따르면, 검색 결과 제공 시스템(200)은 수신부(210), 추출부(220), 제공부(230)를 포함할 수 있다. Referring to FIG. 2, the search
이때, DB(100)는 검색 결과 제공 시스템(200)과는 별도로 외부에 위치할 수도 있고, 또는 검색 결과 제공 시스템(200)에 포함될 수도 있다. DB(100)가 검색 결과 제공 시스템(200)의 외부에 위치하는 경우, 검색 결과 제공 시스템(200)은 유선 또는 무선 네트워크를 통해 통신 연결된 DB(100)로부터 검색어와 관련된 자막 정보 및 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다. 일례로, 영상 데이터로는 영화, 애니매이션(animation), 광고 영상, 드라마, 교육 영상 등의 동영상이 이용될 수 있다.At this time, the DB 100 may be located outside the search
먼저, 수신부(210)는 사용자 입력을 통해 검색어를 수신할 수 있다. 일례로, 수신부(210)는 포털 사이트에서 제공하는 검색 창을 통해 입력된 검색어를 수신할 수 있다. 그러면, 추출부(220)는 수신한 검색어의 검색 결과를 데이터베이스(DB: 100)로부터 추출할 수 있다. 이때, 추출부(220)는 검색 결과로서, 수신한 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다.First, the
일례로, 추출부(220)는 DB(100)에 저장된 자막 정보들 중에서 수신한 검색어를 포함하는 자막 정보를 결정할 수 있다. 그리고, 추출부(220)는 DB(100)로부터 검색어를 포함하는 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다. For example, the extracting
이때, 추출부(220)는, 영상 데이터를 구성하는 복수의 프레임들 중 검색어를 포함하는 자막 정보와 매칭하는 현재 프레임을 추출할 수 있다. 그리고, 추출부(220)는 현재 프레임이 영상 데이터를 구성하는 시작 프레임 또는 마지막 프레임이 아닌 경우, 현재 프레임과 연속하는 이전 프레임 및 다음 프레임을 추출할 수 있다. 이어, 추출부(220)는 추출한 이전 프레임, 현재 프레임, 및 다음 프레임을 연결하여 클립 영상을 생성할 수 있다. 일례로, 이전 프레임은 현재 프레임과 연속하는 이전 n초 (n은 자연수) 분량의 프레임이고, 다음 프레임은 현재 프레임과 연속하는 이후 n초 분량의 프레임이 될 수 있다. 이 경우, 사용자는 입력한 검색어에 대응하는 장면에서 일정 시간동안의 앞뒤 상황을 알 수 있어 장면에 대한 혼란을 방지할 수 있다.At this time, the extracting
한편, 현재 프레임이 시작 프레임인 경우, 추출부(220)는 현재 프레임과 연속하는 다음 프레임을 추출할 수 있다. 그리고, 추출부(220)는 추출한 현재 프레임 및 다음 프레임을 연결하여 클립 영상을 생성할 수 있다. 다른 한편, 현재 프레임이 마지막 프레임인 경우, 추출부(220)는 현재 프레임과 연속하는 이전 프레임을 추출할 수 있다. 그리고, 추출부(220)는 추출한 이전 프레임 및 현재 프레임을 연결하여 클립 영상을 생성할 수 있다.On the other hand, if the current frame is the start frame, the extracting
다른 예로, DB(100)에 저장된 자막 정보들 중 수신한 검색어를 포함하는 자막 정보가 없는 경우, 추출부(220)는 DB(100)에 저장된 자막 정보들 중에서 검색어의 동의어를 포함하는 자막 정보를 결정할 수 있다. 그리고, 추출부(220)는 동의어를 포함하는 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다. As another example, when there is no caption information including the received search term among the caption information stored in the
이때, 추출부(220)는, 영상 데이터를 구성하는 복수의 프레임들 중 검색어의 동의어를 포함하는 자막 정보와 매칭하는 현재 프레임을 추출할 수 있다. 그리고, 추출부(220)는 현재 프레임이 시작 프레임인지, 마지막 프레임인지, 혹은 시작 프레임과 마지막 프레임 사이에 위치하는 프레임인지에 따라 현재 프레임과 연속하는 이전 프레임 및 다음 프레임 중 적어도 하나를 추출할 수 있다. 그리고, 추출부(220)는 이전 프레임 및 다음 프레임 중 적어도 하나와 현재 프레임을 연결하여 클립 영상을 생성할 수 있다.At this time, the extracting
또 다른 예로, DB(100)에 자막 정보가 저장되지 않은 경우, 추출부(220)는 DB(100)에 저장된 영상 데이터의 오디오 정보를 이용하여 자막 정보를 프레임 별로 생성할 수 있다. 그리고, 추출부(220)는 생성된 프레임 별 자막 정보 중에서 검색어 또는 검색어의 동의어를 포함하는 자막 정보를 결정할 수 있다. 이어, 추출부(220)는 검색어 또는 검색어의 동의어를 포함하는 자막 정보와 매칭하는 영상 데이터를 DB(100)에서 추출할 수 있다. 이때, 추출부(220)는 영상 데이터를 구성하는 복수의 프레임들 중 오디오 정보를 통해 결정된 자막 정보와 매칭하는 현재 프레임을 추출할 수 있다. 그리고, 추출부(220)는 현재 프레임이 시작 프레임인지, 마지막 프레임인지, 혹은 시작 프레임과 마지막 프레임 사이에 위치하는 프레임인지에 따라 현재 프레임과 연속하는 이전 프레임 및 다음 프레임 중 적어도 하나를 추출할 수 있다. 이어, 추출부(220)는 이전 프레임 치 다음 프레임 중 적어도 하나와 현재 프레임을 연결하여 클립 영상을 생성할 수 있다.As another example, when caption information is not stored in the
제공부(230)는 추출한 영상 데이터 및 자막 정보를 검색어의 검색 결과로서 제공할 수 있다. 이때, 제공부(230)는 웹 페이지 상에 검색어의 검색 결과로서 클립 영상을 제공할 수 있다. The providing
일례로, 도 3을 참조하면, 검색어로 AAA가 입력된 경우, 제공부(230)는 검색어 AAA(310), 검색어와 관련된 자막 정보(330), 및 자막 정보와 매칭하는 영상 데이터(320)를 웹 페이지 상에 표시할 수 있다. 이때, 검색어와 관련된 자막 정보(330) 및 영상 데이터(320)는 검색어 AAA(310)의 예문으로 이용될 수 있다. 이처럼, 검색어 AAA(310)의 예문으로 자막 정보(330)가 이용되고, 자막 정보(330)와 매칭하는 영상 데이터(320)를 제공함에 따라, 예문이 나타내는 상황이 무엇인지 사용자가 쉽게 이해할 수 있다.3, when the AAA is inputted as a search term, the providing
다른 예로, 제공부(230)는 검색어 AAA와 관련된 자막 정보를 포함하는 영상 데이터, 그리고, 영상 데이터 주변에 자막 정보를 별도로 웹 페이지 상에 표시할 수 있다. 즉, 도 3에서, 제공부(230)는 영상과 자막을 모두 포함하는 영상 데이터를 재생하고, 사용자 혼란을 방지하기 위해 영상 데이터의 상, 하, 좌, 우 중 어느 하나에 자막 정보(330)를 부가적으로 표시할 수 있다.As another example, the providing
또 다른 예로, 제공부(230)는 검색어와 관련된 자막 정보 및 영상 데이터를 재생하기 위한 표시 정보를 제공할 수도 있다. 이때, 도 4를 참조하면, 제공부(230)는 검색어(410), 발음 기호(420), 표시 정보(430), 및 검색어와 관련된 자막 정보(440)를 웹 페이지 상에 표시할 수 있다. 그리고, 표시 정보(430)가 사용자에 의해 선택되면, 제공부(230)는 도 3과 같이, 영상 데이터(320)를 웹 페이지 상에 표시할 수 있다.As another example, the providing
그리고, 제공부(230)는 사전 검색 요청에 따라 검색어를 수신한 경우, 검색어의 사전 검색 결과의 예문으로 자막 정보 및 자막 정보에 대응하는 영상 데이터를 제공할 수 있다. 그러면, 사용자는 사전 검색을 위해 검색어를 입력한 경우, 검색어가 실제로 사용되는 예시를 자막 정보를 통해 제공받는 한편, 이러한 자막 정보가 나타내는 상황을 보다 이해하기 용이하도록 자막 정보에 대응하는 영상 데이터도 함께 제공받을 수 있다.When the
이상에서는, 수신된 검색어의 검색 결과로서, 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출하여 제공하는 것에 대해 설명하였다. 이때, 검색어와 자막 정보는 동일 국가의 언어일 수도 있고, 서로 다른 국가의 언어일 수도 있다. 일례로, 수신된 검색어가 한국어, 일본어, 독어, 불어 등의 제1 국가의 언어인 경우, 추출부(220)는 검색어와 마찬가지로 제1 국가의 언어로 표현된 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다. In the above description, as the search result of the received search word, the image data matching with the caption information related to the search term is extracted and provided. At this time, the search term and the caption information may be a language of the same country or a different country. For example, when the received search term is a language of a first country such as Korean, Japanese, German, French, etc., the extracting
또한, 수신된 검색어가 한국어, 일본어, 중국어, 독어, 불어 등의 제1 국가의 언어인 경우, 추출부(220)는 영어, 스페인어, 아랍어 등의 제2 국가의 언어로 표현된 자막 정보와 매칭하는 영상 데이터를 추출할 수도 있다. 여기서, 제2 국가의 언어는 제1 국가의 언어와 서로 다른 종류의 언어를 의미할 수 있다. When the received search term is a language of a first country such as Korean, Japanese, Chinese, German, French, etc., the extracting
도 5는 본 발명의 일실시예에 따른 검색 결과 제공 시스템의 동작을 설명하기 위해 제공되는 흐름도이다.5 is a flowchart illustrating an operation of a search result providing system according to an embodiment of the present invention.
도 5를 참조하면, 수신부(210)는 사용자로부터 입력된 검색어를 수신할 수 있다(S510). Referring to FIG. 5, the receiving
이어, 추출부(220)는 DB(100)에서 수신된 검색어와 관련된 자막 정보가 존재하는지 검색할 수 있다(S520). 이때, DB(100)는 검색 결과 제공 시스템(200) 내부에 포함될 수도 있고, 검색 결과 제공 시스템(200) 외부에 위치하여 네트워크를 통해 검색 결과 제공 시스템(200)과 통신할 수도 있다.Then, the extracting
이어, 검색어와 관련된 자막 정보가 존재하는 경우(S520:YES), 추출부(220)는 검색어와 관련된 자막 정보를 결정하고, 결정된 자막 정보와 매칭하는 영상 데이터를 추출할 수 있다(S530). 일례로, 추출부(220)는 DB(100)에 저장된 자막 정보들 중에서 수신된 검색어를 포함하는 자막 정보를 검색어와 관련된 자막 정보로 결정할 수 있다. 다른 예로, 추출부(220)는 DB(100)에 저장된 자막 정보들 중에서 수신된 검색어의 동의어를 포함하는 자막 정보를 검색어와 관련된 자막 정보로 결정할 수도 있다.If there is the caption information related to the search term (S520: YES), the extracting
이때, DB(100)에 검색어와 관련된 자막 정보가 존재하지 않는 경우(S520:NO), 추출부(220)는 영상 데이터의 오디오 정보를 이용하여 자막 정보를 생성할 수 있다(S540). 일례로, 추출부(220)는 자막 정보를 프레임 별로 생성할 수 있다.At this time, if there is no caption information related to the search term in the DB 100 (S520: NO), the extracting
그리고, 추출부(220)는 생성된 자막 정보 중에서 검색어와 관련된 자막 정보를 결정하고, 결정된 자막 정보와 매칭하는 영상 데이터를 DB(100)에서 추출할 수 있다(S550).The
이때, 추출부(220)는 영상 데이터를 구성하는 복수의 프레임들 중에서 결정된 자막 정보와 매칭하는 현재 프레임을 DB(100)로부터 추출할 수 있다(S560).At this time, the extracting
그리고, 추출부(220)는 DB(100)로부터 현재 프레임과 연속하는 이전 프레임 및 다음 프레임 중 적어도 하나를 추출할 수 있다(S570).The extracting
일례로, 현재 프레임이 시작 프레임인 경우, 추출부(220)는 현재 프레임과 연속하는 다음 프레임을 추출할 수 있다. 다른 예로, 현재 프레임이 마지막 프레임인 경우, 추출부(220)는 현재 프레임과 연속하는 이전 프레임을 추출할 수 있다. 또 다른 예로, 현재 프레임이 시작 프레임과 마지막 프레임 사이에 위치하는 경우, 추출부(220)는 현재 프레임과 연속하는 이전 프레임 및 다음 프레임을 추출할 수 있다.For example, if the current frame is the start frame, the extracting
이어, 추출부(220)는 추출된 현재 프레임, 그리고, 이전 프레임 및 다음 프레임 중 적어도 하나의 프레임을 연결하여 클립 영상을 생성할 수 있다(S580). 이때, 추출부(220)는 자막 정보가 영상에 포함되지 않도록 클립 영상을 생성할 수도 있고, 자막 정보가 영상에 포함되도록 클립 영상을 생성할 수 있다. The
그러면, 제공부(230)는 검색어와 관련된 자막 정보 및 자막 정보와 매칭하는 영상 데이터를 제공할 수 있다. 이때, 제공부(230)는 검색어의 검색 결과로서 생성된 클립 영상을 웹 페이지 상에 제공할 수 있다. Then, the providing
일례로, 클립 영상에 자막 정보를 포함하지 않는 경우, 도 3을 참조하면, 제공부(230)는 검색어 AAA(310), 클립 영상(320), 및 검색어 AAA를 포함하는 자막 정보(330)를 웹 페이지 상에 표시할 수 있다. 이때, 클립 영상에 자막 정보가 포함되는 경우, 도 3의 클립 영상(320)에 검색어 AAA를 포함하는 자막 정보(330)가 포함되어 웹 페이지 상에 표시될 수 있다.Referring to FIG. 3, the providing
그리고, 제공부(230)는 자막 정보 및 영상 데이터를 재생하기 위한 표시 정보를 함께 제공할 수도 있다(S590). 이 때, 제공부(230)는 사전 검색 요청에 따라 검색어를 수신한 경우, 검색어의 사전 검색 결과의 예문으로 자막 정보 및 자막 정보에 대응하는 영상 데이터를 제공할 수 있다.Then, the providing
일례로, 도 4를 참조하면, 제공부(230)는 생성한 클립 영상을 재생하기 위한 표시 정보(430)를 웹 페이지 상에 표시할 수 있다. 이때, 제공부(230)는 검색어(410)의 검색 결과로서, 검색어와 관련된 자막 정보(440)와 표시 정보(430)를 함께 표시할 수 있다. 그리고, 사용자에 의해 표시 정보(430)가 선택되면, 제공부(230)는 자막 정보(440)와 클립 영상을 웹 페이지 상에 함께 표시할 수 있다. 이때, 클립 영상에 자막 정보가 포함된 경우, 제공부(230)는 웹 페이지 상에 자막 정보(440)를 별도로 표시하지 않고 클립 영상 만을 표시할 수도 있다. For example, referring to FIG. 4, the providing
한편, S530 및 S550 단계에서, 수신된 검색어가 제1 국가의 언어인 경우, 추출부(220)는 검색어와 마찬가지로 제1 국가의 언어로 표현된 자막 정보와 매칭하는 영상 데이터를 추출할 수도 있고, 제2 국가의 언어로 표현된 자막 정보와 매칭하는 영상 데이터를 추출할 수도 있다. 여기서, 제2 국가의 언어는 제1 국가의 언어와 서로 다른 종류의 언어를 의미할 수 있다.If the received search term is the language of the first country, the extracting
지금까지, 도 2 내지 도 5를 참조하여, 검색어의 검색 결과로서 영상 데이터와 자막 정보를 별도로 제공하는 것에 대해 설명하였으나, 자막 정보는 영상 데이터에 포함될 수도 있다. 다시 말해, 제공부(230)는 자막 정보를 별도로 제공하지 않고, 영상 데이터와 자막 정보를 동기화한 후, 영상 데이터를 재생 시에 자막 정보를 함께 제공할 수 있다. 이때, 제공부(230)는 영상 데이터와 자막 정보 간의 동기 정보를 기초로 영상의 대화 내용에 대응하여 표시되는 자막 정보의 색상을 변경하여 웹 페이지 상에 표시할 수도 있다. 일례로, 자막 정보가 하얀색으로 표시되는 경우, 제공부(230)는 시간이 경과함에 따라 자막 정보를 하얀색에서 노란색으로 변경하여 표시할 수 있다. 그러면, 웹 페이지 상에 이미 재생된 영상 데이터에 대응하는 자막 정보는 노란색으로 표시되고, 재생될 영상 데이터에 대응하는 자막 정보는 하얀색으로 표시될 수 있다.2 to 5, description has been given of separately providing video data and caption information as a search result of a search word, but the caption information may be included in the video data. In other words, the providing
또한, 이상에서는 검색어의 검색 결과로서, 검색어와 관련된 자막 정보 및 자막 정보와 매칭하는 영상 데이터를 제공하는 것에 대해 설명하였으나, 제공부(230)는 검색어의 디스크립션(description)을 제공할 수도 있다. 일례로, 추출부(220)는 DB(100)로부터 수신된 검색어 AAA와 매칭하는 디스크립션을 추출할 수 있다. 그러면, 제공부(230)는 추출한 AAA의 디스크립션과 검색어 AAA를 함께 웹 페이지 상에 표시할 수 있다. 여기서, 디스크립션은, 검색어 AAA를 나타내는 사전적 의미로서, 텍스트 형태로 웹 페이지 상에 표시될 수 있다.Also, in the above description, as the search result of the search term, description has been given for providing the image data matching with the caption information and the caption information related to the search term, the
본 발명의 실시 예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. The methods according to embodiments of the present invention may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions recorded on the medium may be those specially designed and constructed for the present invention or may be available to those skilled in the art of computer software.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.While the invention has been shown and described with reference to certain preferred embodiments thereof, it will be understood by those of ordinary skill in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. This is possible.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined by the equivalents of the claims, as well as the claims.
200: 검색 결과 제공 시스템
210: 수신부
220: 추출부
230: 제공부
100: DB200: Search result providing system
210:
220:
230: Offering
100: DB
Claims (15)
데이터베이스로부터 상기 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출하는 단계; 및
상기 자막 정보와 상기 영상 데이터를 제공하는 단계
를 포함하고,
상기 추출하는 단계는,
상기 영상 데이터를 구성하는 복수의 프레임들 중 상기 자막 정보와 매칭하는 현재 프레임, 상기 현재 프레임과 연속하는 이전 프레임 또는 다음 프레임을 추출하는 것을 특징으로 하는 검색 결과 제공 방법.Receiving a search term;
Extracting image data matching with caption information related to the search term from a database; And
Providing the caption information and the video data
Lt; / RTI >
Wherein the extracting comprises:
Wherein the extracting unit extracts a current frame matching the caption information among a plurality of frames constituting the image data, a previous frame or a next frame continuous with the current frame.
상기 추출하는 단계는,
상기 검색어 또는 상기 검색어의 동의어를 포함하는 자막 정보와 매칭하는 영상 데이터를 추출하는 것을 특징으로 하는 검색 결과 제공 방법.The method according to claim 1,
Wherein the extracting comprises:
And extracting image data matching the caption information or the caption information including a synonym of the search term.
데이터베이스로부터 상기 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출하는 단계; 및
상기 자막 정보와 상기 영상 데이터를 제공하는 단계
를 포함하고,
상기 추출하는 단계는,
상기 영상 데이터의 오디오 정보를 이용하여 결정된 자막 정보와 매칭하는 영상 데이터를 추출하는 것을 특징으로 하는 검색 결과 제공 방법.Receiving a search term;
Extracting image data matching with caption information related to the search term from a database; And
Providing the caption information and the video data
Lt; / RTI >
Wherein the extracting comprises:
And extracting image data matching the caption information determined using the audio information of the image data.
데이터베이스로부터 상기 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출하는 단계; 및
상기 자막 정보와 상기 영상 데이터를 제공하는 단계
를 포함하고,
상기 추출하는 단계는,
상기 검색어가 제1 국가의 언어인 경우, 제2 국가의 언어로 표현된 자막 정보와 매칭하는 영상 데이터를 추출하는 것을 특징으로 하는 검색 결과 제공 방법.Receiving a search term;
Extracting image data matching with caption information related to the search term from a database; And
Providing the caption information and the video data
Lt; / RTI >
Wherein the extracting comprises:
If the search term is a language of a first country, extracting image data matching with caption information expressed in a language of a second country.
상기 제공하는 단계는,
상기 자막 정보 및 상기 영상 데이터를 재생하기 위한 표시 정보를 함께 제공하는 것을 특징으로 하는 검색 결과 제공 방법.The method according to claim 1,
Wherein the providing step comprises:
And providing the subtitle information and the display information for reproducing the video data together.
데이터베이스로부터 상기 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출하는 단계; 및
상기 자막 정보와 상기 영상 데이터를 제공하는 단계
를 포함하고,
상기 자막 정보와 상기 영상 데이터를 제공하는 단계는,
사전 검색 요청에 따라 상기 검색어를 수신한 경우, 상기 검색어의 사전 검색 결과의 예문으로 자막 정보 및 상기 자막 정보에 대응하는 영상 데이터를 제공하는 것을 특징으로 하는 검색 결과 제공 방법.Receiving a search term;
Extracting image data matching with caption information related to the search term from a database; And
Providing the caption information and the video data
Lt; / RTI >
Wherein the providing of the caption information and the image data comprises:
And providing the caption information and the image data corresponding to the caption information as an example sentence of the search result of the search term when the search term is received according to the dictionary search request.
데이터베이스로부터 상기 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출하는 추출부; 및
상기 자막 정보와 상기 영상 데이터를 제공하는 제공부
를 포함하고,
상기 추출부는,
상기 영상 데이터를 구성하는 복수의 프레임들 중 상기 자막 정보와 매칭하는 현재 프레임, 상기 현재 프레임과 연속하는 이전 프레임 또는 다음 프레임을 추출하는 것을 특징으로 하는 검색 결과 제공 시스템.A receiving unit for receiving a search word;
An extracting unit for extracting image data matching with caption information related to the search word from a database; And
And providing the caption information and the video data,
Lt; / RTI >
The extracting unit extracts,
Wherein the extracting unit extracts a current frame matching the caption information among a plurality of frames constituting the image data, a previous frame continuing to the current frame, or a subsequent frame.
상기 추출부는,
상기 검색어 또는 상기 검색어의 동의어를 포함하는 자막 정보와 매칭하는 영상 데이터를 추출하는 것을 특징으로 하는 검색 결과 제공 시스템.10. The method of claim 9,
The extracting unit extracts,
And extracts image data matching with the caption information or the caption information including a synonym of the search term.
데이터베이스로부터 상기 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출하는 추출부; 및
상기 자막 정보와 상기 영상 데이터를 제공하는 제공부
를 포함하고,
상기 추출부는,
상기 영상 데이터의 오디오 정보를 이용하여 결정된 자막 정보와 매칭하는 영상 데이터를 추출하는 것을 특징으로 하는 검색 결과 제공 시스템.A receiving unit for receiving a search word;
An extracting unit for extracting image data matching with caption information related to the search word from a database; And
And providing the caption information and the video data,
Lt; / RTI >
The extracting unit extracts,
And extracts image data matching with the subtitle information determined using the audio information of the image data.
데이터베이스로부터 상기 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출하는 추출부; 및
상기 자막 정보와 상기 영상 데이터를 제공하는 제공부
를 포함하고,
상기 추출부는,
상기 검색어가 제1 국가의 언어인 경우, 제2 국가의 언어로 표현된 자막 정보와 매칭하는 영상 데이터를 추출하는 것을 특징으로 하는 검색 결과 제공 시스템.A receiving unit for receiving a search word;
An extracting unit for extracting image data matching with caption information related to the search word from a database; And
And providing the caption information and the video data,
Lt; / RTI >
The extracting unit extracts,
If the search term is a language of a first country, extracting image data matching with caption information expressed in a language of a second country.
상기 제공부는,
상기 자막 정보 및 상기 영상 데이터를 재생하기 위한 표시 정보를 함께 제공하는 것을 특징으로 하는 검색 결과 제공 시스템.10. The method of claim 9,
Wherein the providing unit comprises:
And providing display information for reproducing the caption information and the image data.
데이터베이스로부터 상기 검색어와 관련된 자막 정보와 매칭하는 영상 데이터를 추출하는 추출부; 및
상기 자막 정보와 상기 영상 데이터를 제공하는 제공부
를 포함하고,
상기 제공부는,
사전 검색 요청에 따라 상기 검색어를 수신한 경우, 상기 검색어의 사전 검색 결과의 예문으로 자막 정보 및 상기 자막 정보에 대응하는 영상 데이터를 제공하는 것을 특징으로 하는 검색 결과 제공 시스템.A receiving unit for receiving a search word;
An extracting unit for extracting image data matching with caption information related to the search word from a database; And
And providing the caption information and the video data,
Lt; / RTI >
Wherein the providing unit comprises:
And provides the caption information and the image data corresponding to the caption information as an example sentence of the search result of the search term when the search term is received according to the dictionary search request.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100078871A KR101137091B1 (en) | 2010-08-16 | 2010-08-16 | Method and system for offering search result using caption information |
JP2011176488A JP5832815B2 (en) | 2010-08-16 | 2011-08-12 | Search result providing method and system using caption information |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100078871A KR101137091B1 (en) | 2010-08-16 | 2010-08-16 | Method and system for offering search result using caption information |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20120016480A KR20120016480A (en) | 2012-02-24 |
KR101137091B1 true KR101137091B1 (en) | 2012-04-19 |
Family
ID=45838735
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020100078871A KR101137091B1 (en) | 2010-08-16 | 2010-08-16 | Method and system for offering search result using caption information |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP5832815B2 (en) |
KR (1) | KR101137091B1 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103309865B (en) * | 2012-03-07 | 2017-03-22 | 腾讯科技(深圳)有限公司 | Method and system for realizing video source clustering |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR19990043031A (en) * | 1997-11-28 | 1999-06-15 | 전주범 | Television receiver with caption information indexing function by search word |
KR20060027973A (en) * | 2004-09-24 | 2006-03-29 | 주식회사 파미르 | Apparatus for reproducing multimedia file and method of the same |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001265780A (en) * | 2000-03-22 | 2001-09-28 | Casio Comput Co Ltd | Electronic device and recording medium |
JP2005115607A (en) * | 2003-10-07 | 2005-04-28 | Matsushita Electric Ind Co Ltd | Video retrieving device |
JP2005173814A (en) * | 2003-12-09 | 2005-06-30 | Matsushita Electric Ind Co Ltd | Device and method for content retrieval |
-
2010
- 2010-08-16 KR KR1020100078871A patent/KR101137091B1/en active IP Right Grant
-
2011
- 2011-08-12 JP JP2011176488A patent/JP5832815B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR19990043031A (en) * | 1997-11-28 | 1999-06-15 | 전주범 | Television receiver with caption information indexing function by search word |
KR20060027973A (en) * | 2004-09-24 | 2006-03-29 | 주식회사 파미르 | Apparatus for reproducing multimedia file and method of the same |
Also Published As
Publication number | Publication date |
---|---|
JP2012043422A (en) | 2012-03-01 |
KR20120016480A (en) | 2012-02-24 |
JP5832815B2 (en) | 2015-12-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9275150B2 (en) | System and method for search and display of content in the form of audio, video or audio-video | |
US20130196292A1 (en) | Method and system for multimedia-based language-learning, and computer program therefor | |
CN103761892B (en) | Method and device for playing paper book contents in voice mode | |
JP4635891B2 (en) | Information processing apparatus and method, and program | |
US10210148B2 (en) | Method and apparatus for file processing | |
JP2005504395A (en) | Multilingual transcription system | |
CN113035199B (en) | Audio processing method, device, equipment and readable storage medium | |
US10089898B2 (en) | Information processing device, control method therefor, and computer program | |
JP6202815B2 (en) | Character recognition device, character recognition method, and character recognition program | |
CN103984772A (en) | Method and device for generating text retrieval subtitle library and video retrieval method and device | |
CN112382295B (en) | Speech recognition method, device, equipment and readable storage medium | |
US20190213998A1 (en) | Method and device for processing data visualization information | |
US20240103697A1 (en) | Video display method and apparatus, and computer device and storage medium | |
KR20060089922A (en) | Data abstraction apparatus by using speech recognition and method thereof | |
CN112711954B (en) | Translation method, translation device, electronic equipment and storage medium | |
CN103473220A (en) | Subtitle-file-based documentary content automatic segmentation and subhead automatic generation method | |
KR101137091B1 (en) | Method and system for offering search result using caption information | |
WO2020070483A1 (en) | Data processing apparatus and method | |
TW200411433A (en) | Method and recording medium for creating film search database | |
CN103997657A (en) | Converting method and device of audio in video | |
JP2004343352A (en) | Electronic equipment and telop information processing method | |
JP2008225676A (en) | Dictionary retrieving device and its control program | |
KR102098377B1 (en) | Method for providing foreign language education service learning grammar using puzzle game | |
JP2005293174A (en) | Text data editing device, method and program | |
CN112313726A (en) | Method and system for teaching language through multimedia |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20160329 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20170328 Year of fee payment: 6 |