KR101412229B1 - Apparatus and method for processing moving picture - Google Patents

Apparatus and method for processing moving picture Download PDF

Info

Publication number
KR101412229B1
KR101412229B1 KR1020070089495A KR20070089495A KR101412229B1 KR 101412229 B1 KR101412229 B1 KR 101412229B1 KR 1020070089495 A KR1020070089495 A KR 1020070089495A KR 20070089495 A KR20070089495 A KR 20070089495A KR 101412229 B1 KR101412229 B1 KR 101412229B1
Authority
KR
South Korea
Prior art keywords
word
moving picture
point
character data
reproduced
Prior art date
Application number
KR1020070089495A
Other languages
Korean (ko)
Other versions
KR20090024458A (en
Inventor
최현석
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070089495A priority Critical patent/KR101412229B1/en
Publication of KR20090024458A publication Critical patent/KR20090024458A/en
Application granted granted Critical
Publication of KR101412229B1 publication Critical patent/KR101412229B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks

Abstract

본 발명은 동영상을 손쉽게 검색하여 재생할 수 있는 동영상의 처리 장치 및 방법을 제공하기 위한 것이다.An apparatus and method for processing a moving image capable of easily searching and reproducing a moving image.

이를 위해, 본 발명은 동영상의 처리 방법에 있어서, 적어도 하나의 검색어가 입력되는 과정과, 각 동영상의 음성데이터로부터 변환된 적어도 하나의 문자데이터와 상기 입력된 검색어를 비교하는 과정과, 상기 비교 결과, 상기 입력된 검색어와 일치하는 문자데이터가 적어도 하나 존재할 경우, 해당 동영상의 재생지점의 정보를 표시하는 과정을 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a method of processing a moving picture, comprising the steps of: inputting at least one search word; comparing at least one character data converted from the audio data of each moving picture with the inputted search word; And displaying information of a reproduction point of the moving picture when at least one character data matching the inputted search word exists.

이를 통해, 본 발명은 사용자가 재생하고자 하는 동영상 또는 동영상의 재생 장면을 신속하고 정확하게 검색하여 재생할 수 있는 효과가 있다.Accordingly, the present invention has an effect of enabling a user to quickly and accurately search and reproduce a reproduction scene of a moving picture or a moving picture to be reproduced.

문자데이터, 재생지점의 정보 Character data, information of the playback point

Description

동영상의 처리 장치 및 방법{APPARATUS AND METHOD FOR PROCESSING MOVING PICTURE}[0001] APPARATUS AND METHOD FOR PROCESSING MOVING PICTURE [0002]

본 발명은 동영상의 처리 장치 및 방법에 관한 것으로, 동영상을 손쉽게 검색하여 재생할 수 있는 동영상의 처리 장치 및 방법에 관한 것이다.The present invention relates to an apparatus and method for processing a moving image, and more particularly, to a moving image processing apparatus and method capable of easily searching and reproducing a moving image.

일반적으로 휴대단말기는 휴대가 용이하여 이동중에 통신 기능 또는 기타 기능들을 사용자에게 제공하는 전자 기기를 의미한다. 이러한 휴대단말기의 사용은 보편화되어, 디지털 컨버전스(Digital Convergence)의 시대에 맞추어 여러 가지 다양하고 유용한 기능들을 구현하는 추세에 있다. 예를 들어, 사용자는 휴대단말기를 사용하여 AOD(Audio On Demand)와 VOD(Video ON Demand) 서비스를 이용하거나, 통화 당사자들이 상대방의 얼굴을 직접 볼 수 있는 화상통화를 하거나, 게임을 다운로드하여 플레이한다. 특히, 근래의 휴대단말기는 초고속이동통신(HSDPA) 서비스와 같은 고속의 유무선 통신 환경을 통해 다양한 동영상을 손쉽게 다운로드하고, 구비된 카메라를 통해 UCC(User Created Content) 동영상을 촬영한다. 휴대단말기에 동영상을 저장할 수 있는 메모리(예를 들어, T-Flash, Memory Stick 및 Compat Flash등)가 고용량화되고 휴대단말기를 이용한 멀티미디어의 사용이 더욱 일반화되면, 휴대단말기에 저장되는 동영상의 개수는 늘어날 수 밖에 없을 것이다. 이렇게 휴대단말기에 저장되는 동영상의 수가 많아지게 되면, 사용자는 특정 동영상을 검색하여 재생하는데 여러 가지 불편함을 느끼게 된다. 더욱이 휴대성이라는 특성상 휴대단말기의 표시부는 한정적이기 때문에, 다수의 동영상 중 특정 동영상을 검색하는 것은 사용자에게 여러 가지 불편함을 초래한다.2. Description of the Related Art Generally, a portable terminal is an electronic device that provides a communication function or other functions to a user while moving on the move. The use of such a portable terminal is becoming common, and it is in the trend of implementing various various useful functions according to the era of digital convergence. For example, the user can use the AOD (Audio On Demand) and VOD (Video On Demand) services using the portable terminal, or make a video call in which the parties can directly view the face of the other party, do. In particular, recent mobile terminals easily download various videos through a high-speed wired / wireless communication environment such as a high-speed mobile communication (HSDPA) service, and take a UCC (User Created Content) video through a camera. When a memory capable of storing moving pictures (e.g., T-Flash, Memory Stick, and Compat Flash) in a portable terminal is increased in capacity and the use of multimedia using a portable terminal becomes more general, the number of moving pictures stored in the portable terminal increases It will be out of order. When the number of videos stored in the portable terminal increases, the user feels various inconveniences in searching and playing a specific video. Furthermore, due to the nature of portability, the display portion of the portable terminal is limited, so searching for a specific video among a large number of videos causes various inconveniences to the user.

따라서, 본 발명은 동영상을 손쉽게 검색하여 재생할 수 있는 동영상의 처리 장치 및 방법을 제공한다.Accordingly, the present invention provides an apparatus and method for processing moving images that can easily search and reproduce moving images.

따라서, 본 발명은 동영상의 처리 방법에 있어서, 적어도 하나의 검색어가 입력되는 과정과, 각 동영상의 음성데이터로부터 변환된 적어도 하나의 문자데이터와 상기 입력된 검색어를 비교하는 과정과, 상기 비교 결과, 상기 입력된 검색어와 일치하는 문자데이터가 적어도 하나 존재할 경우, 해당 동영상의 재생지점의 정보를 표시하는 과정을 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a method of processing a moving picture, comprising the steps of inputting at least one search word, comparing at least one character data converted from audio data of each moving picture with the input search word, And displaying information of a reproduction point of the moving picture when there is at least one character data that matches the input search word.

또한, 본 발명은 동영상의 처리 장치에 있어서, 동영상의 처리 장치에 있어서, 적어도 하나의 동영상과 상기 동영상의 음성데이터로부터 변환되는 적어도 하나의 문자데이터를 저장하는 메모리와, 적어도 하나의 검색어가 입력되면, 각 동영상의 음성데이터로부터 변환된 적어도 하나의 문자데이터와 상기 입력된 검색어를 비교하고, 상기 비교 결과, 상기 입력된 검색어와 일치하는 문자데이터가 적어도 하나 존재할 경우, 상기 일치하는 단어에 대응되는 문자데이터의 해당 동영상의 재생지점의 정보를 표시하도록 제어하는 제어부와, 상기 동영상의 재생지점의 정보를 표시하는 표시부를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided an apparatus for processing moving images, comprising: a memory for storing at least one moving image and at least one character data converted from the moving image audio data; And comparing at least one character data converted from the audio data of each moving picture with the inputted search word, and when there is at least one character data matching the input search word as a result of the comparison, A control unit for controlling the display unit to display information of a reproduction point of the moving picture of the data, and a display unit for displaying information of the reproduction point of the moving picture.

본 발명은 사용자가 재생하고자 하는 동영상 또는 동영상의 재생 장면을 신 속하고 정확하게 검색하여 재생할 수 있는 효과가 있다.The present invention has the effect that a user can quickly and accurately search and reproduce a reproduction scene of a moving image or a moving image to be reproduced by the user.

이하 본 발명의 실시 예를 첨부한 도면을 참조하여 상세히 설명하도록 한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 실시 예에 따른 휴대단말기에 관한 블록도이다.1 is a block diagram of a portable terminal according to an embodiment of the present invention.

도 1을 참조하면, 무선 송수신부(23)는 RF부와 모뎀(MODEM)을 포함한다. RF부는 송신되는 신호의 주파수를 상승변환 및 증폭하는 RF송신기와, 수신되는 신호를 저잡음 증폭하고 주파수를 하강 변환하는 RF수신기 등을 포함한다. 모뎀(MODEM)은 송신될 신호를 부호화 및 변조하는 송신기 및 RF부에서 수신되는 신호를 복조 및 복호화하는 수신기 등을 포함한다. 이 때, 상기와 같은 무선 송수신부(23)는 본 발명의 실시 예에 따른 휴대단말기가 코덱 플레이어(예를 들어, Portable Multimedia Player 또는 동영상 재생이 가능한 Mp3 Player)일 경우에 블루투스(Bluetooth) 또는 와이파이(Wi-Fi)같은 무선 모듈로 대체될 수 있다.Referring to FIG. 1, the wireless transceiver 23 includes an RF unit and a modem. The RF unit includes an RF transmitter for up-converting and amplifying the frequency of the transmitted signal, and an RF receiver for low-noise amplifying the received signal and down-converting the frequency. A modem (MODEM) includes a transmitter for encoding and modulating a signal to be transmitted, and a receiver for demodulating and decoding a signal received by the RF unit. In this case, when the portable terminal according to the embodiment of the present invention is a codec player (for example, a portable multimedia player or an Mp3 Player capable of playing back moving pictures), the wireless transmitting and receiving unit 23 may be a Bluetooth or Wi- (Wi-Fi).

오디오 처리부(25)는 코덱(Codec)을 구성할 수 있으며, 코덱은 데이터 코덱과 오디오 코덱을 포함한다. 데이터 코덱은 패킷데이터 등을 처리하고, 오디오 코덱은 음성과 멀티미디어 파일 등의 오디오 신호를 처리한다. 또한, 오디오 처리부(25)는 모뎀에서 수신되는 디지털 오디오신호를 상기 오디오 코덱을 통해 아날로그신호를 변환하여 재생하거나 또는 마이크(MIC)로부터 발생되는 아날로그 오디오 신호를 상기 오디오 코덱을 통해 디지털 오디오 신호로 변환하여 모뎀으로 전송하는 기능을 수행한다. 상기 코덱은 별도로 구비되거나 제어부(10)에 포함될 수 있다. 본 발명의 실시 예에 따른 오디오 처리부(25)는 동영상 또는 동영상의 특정 재 생구간을 검색하도록 하는 검색어를 사용자의 음성으로 입력받는다.The audio processing unit 25 may constitute a codec, and the codec includes a data codec and an audio codec. The data codec processes packet data and the audio codec processes audio signals such as voice and multimedia files. The audio processor 25 converts the digital audio signal received from the modem into an analog audio signal through the audio codec or converts the analog audio signal generated from the microphone into a digital audio signal through the audio codec And transmits it to the modem. The codec may be provided separately or may be included in the controller 10. The audio processing unit 25 according to the embodiment of the present invention receives a search word for searching for a specific playback section of a moving image or a moving image as a user's voice.

키입력부(27)는 숫자 및 문자 정보의 입력에 필요한 키들 및 각종 기능들의 설정에 필요한 기능 키들을 구비한다. 이 때, 키입력부(27)는 터치센서를 포함하여, 사용자의 터치를 통해 키입력을 받을 수 있다. 본 발명의 실시 예에 따른 키입력부(27)는 키입력을 통해 동영상의 특정 재생구간을 검색하도록 하는 검색어를 입력받는다.The key input unit 27 includes keys necessary for inputting numeric and character information and function keys necessary for setting various functions. At this time, the key input unit 27 includes a touch sensor, and can receive a key input through the touch of the user. The key input unit 27 according to the embodiment of the present invention receives a search word for searching for a specific reproduction section of a moving picture through a key input.

메모리(30)는 프로그램 메모리 및 데이터 메모리들로 구성될 수 있다. 프로그램 메모리에는 휴대단말기의 일반적인 동작을 제어하기 위한 프로그램이 저장된다. 본 발명의 실시 예에 따른 메모리(30)는 동영상을 저장한다. 또한, 본 발명의 실시 예에 따른 메모리(30)는 각 동영상으로부터 추출된 각 음성데이터가 문자데이터로 각각 변환되면, 문자데이터를 해당 동영상에 대응되게 저장한다. 이 때, 문자데이터는 동영상에서 해당 문자들이 출력되는 재생지점의 시간 정보를 대응되게 저장한다. 예를 들어, 문자데이터는 영화 자막의 캡션(Caption)파일과 같이, 소정의 자막내용(즉, 본 발명에서 문자데이터에 저장된 문자 또는 문자열)과 자막내용이 출력될 때 해당 영화에서의 시간 정보를 대응되게 저장한다.The memory 30 may be constituted by a program memory and data memories. A program for controlling the general operation of the portable terminal is stored in the program memory. The memory 30 according to the embodiment of the present invention stores moving pictures. In addition, the memory 30 according to the embodiment of the present invention stores character data corresponding to the moving image when each of the voice data extracted from each moving image is converted into character data. At this time, the character data corresponds to the time information of the reproduction point at which the characters are output from the moving picture. For example, character data may include time information in a movie when a predetermined caption content (i.e., a character or a string stored in character data in the present invention) and subtitle content are output, such as a caption file of a movie subtitle Correspondingly store.

표시부(50)는 휴대단말기에서 발생하는 각종 표시 정보를 출력한다. 이 때, 표시부는 LCD(Liquid Crystal Display) 또는 OLED(Organic Light Emitting Diodes)등으로 이루어질 수 있다. 또한, 본 발명의 실시 예에 따른 표시부(50)는 터치스크린(Touch Screen) 기능을 제공하여 키입력부(27)와 함께 휴대단말기를 제어하는 입력부로 동작할 수 있다. The display unit 50 outputs various display information generated in the portable terminal. At this time, the display unit may be formed of a liquid crystal display (LCD), an organic light emitting diode (OLED), or the like. In addition, the display unit 50 according to the embodiment of the present invention may function as an input unit for controlling the portable terminal together with the key input unit 27 by providing a touch screen function.

제어부(10)는 휴대단말기의 전반적인 동작 또는 구동모드를 전환 및 제어한다. 본 발명의 실시 예에 따른 제어부(10)는 메모리(30)에 저장된 소정의 동영상으로부터 음성데이터만을 추출하고, STT(Speech-To-Text) 프로세스를 통해 음성데이터를 문자데이터(즉, 음성이 문자로 변환된 데이터)로 변환(또는 생성)하도록 제어한다. 즉, 본 발명의 실시 예에 따른 제어부(10)는 이 각 동영상으로부터 음성데이터(또는 음성데이터를 포함하는 오디오데이터)만을 따로 추출하며, 추출된 음성데이터로부터 문자데이터를 생성하고, 생성된 각 문자데이터를 해당 동영상에 대응되게 저장하도록 제어한다. 이후, 본 발명의 실시 예에 따른 제어부(10)는 동영상의 재생구간 검색 모드에서 검색어가 입력되면 문자데이터를 확인하고, 입력받은 검색어와 일치하는 단어(즉, 문자열로써 Text)가 문자데이터들에 존재하는지 검색한다. 문자데이터에 검색어와 일치하는 단어가 있으면, 제어부(10)는 일치하는 단어가 존재하는 문자데이터의 해당 동영상의 재생지점의 정보를 표시 하도록 제어한다. 상기와 같은 제어부(10)의 상세한 동작은 하기의 도2 및 도3을 통해 설명하도록 한다.The controller 10 switches and controls the overall operation or drive mode of the portable terminal. The control unit 10 according to the embodiment of the present invention extracts only voice data from a predetermined moving picture stored in the memory 30 and converts the voice data into character data (i.e., (Or converted) data to be converted (or generated). That is, the control unit 10 according to the embodiment of the present invention separately extracts audio data (or audio data including audio data) from each video, generates character data from the extracted audio data, And controls to store the data corresponding to the corresponding moving image. The control unit 10 according to the embodiment of the present invention confirms the character data when a search word is input in the moving image playback section search mode, and determines whether a word matching the input search word (i.e., text as a character string) Searches for existence. If there is a word matching the search word in the character data, the control unit 10 controls to display the information of the reproduction point of the moving image of the character data in which the matching word exists. The detailed operation of the controller 10 will be described with reference to FIG. 2 and FIG. 3. FIG.

도 2는 본 발명의 실시 예에 따라 동영상을 처리하는 과정에 대한 흐름도이며, 도 3은 본 발명의 실시 예에 따라 동영상을 처리하는 과정에 대한 예시도이다. 본 발명의 실시 예를 도 2 내지 도3을 통해 살펴보면, 다음과 같다.FIG. 2 is a flowchart illustrating a process of processing a moving image according to an exemplary embodiment of the present invention, and FIG. 3 is an exemplary view illustrating a process of processing a moving image according to an exemplary embodiment of the present invention. An embodiment of the present invention will be described with reference to FIGS. 2 to 3 as follows.

검색모드로 진입되어(S201), 검색어가 입력되면(S202), 제어부(10)는 동영상 별로 문자데이터가 존재하는지 확인하도록 제어한다(S203).(S201). When a search word is input (S202), the control unit 10 controls to check whether character data exists for each moving image (S203).

사용자는 동영상의 검색 또는 동영상의 특정 재생구간을 검색하기 위해 검색모드로의 진입을 요청하고, 검색어를 입력한다. 예를 들어, 사용자는 도 3에 도시된 바와 같이, 검색어 입력창(51)에 “스승”이라는 단어를 입력할 수 있다. 검색어를 입력받으면, 제어부(10)는 메모리(30)에 저장된 각 동영상에 문자데이터가 존재하는지 확인한다. 상술한 바와 같이, 문자는 STT(Speech-To-Text) 프로세스가 수행되어 동영상에서 음성데이터(또는 오디오데이터)를 추출하고, 추출된 음성데이터로부터 생성된 문자 또는 문자들의 집합(즉, 문자열로써 텍스트)을 의미한다. 이 때, 검색어는 키입력부(27)를 통해 입력되거나, 마이크를 통해 입력된 사용자의 음성이 STT프로세스에 의해 검색어(즉, 문자로써 단어 또는 단어열)로 변환된 것일 수도 있다. The user requests entry of the search mode to search for a moving image or a specific playback section of the moving image, and inputs a search term. For example, the user can input the word " teacher " in the search word input window 51 as shown in Fig. Upon receipt of the search word, the control unit 10 checks whether or not character data exists in each moving image stored in the memory 30. As described above, the text is processed by a STT (Speech-To-Text) process to extract voice data (or audio data) from a moving picture, and a set of characters or characters generated from the extracted voice data ). At this time, the search word may be inputted through the key input unit 27, or the voice of the user inputted through the microphone may be converted into a search word (that is, a word or a word string as a character) by the STT process.

이후, 제어부(10)는 문자데이터가 없는 동영상의 존재를 확인하고(S204), 문자데이터가 없는 동영상의 경우 STT 데이터를 생성하도록 제어한다(S205).Thereafter, the control unit 10 confirms the presence of the moving image without the character data (S204), and controls the STT data to be generated in the case of the moving image without the character data (S205).

사용자는 컨텐츠 제공업체(CP; Contents Provider)로부터 동영상을 새로 다운받거나, 카메라(미도시)의 동영상 촬영을 통해 동영상을 새롭게 생성하거나, 소정의 동영상(예를 들어, 영화 클립)을 휴대단말기에서 재생가능한 포맷(예를 들어, mpeg4)으로 컨버팅하여 휴대단말기에 저장할 수 있다. 상기와 같이, 다양한 경로를 통해 획득된 동영상은 영상(또는 자막과 함께)만이 제공되므로, 휴대단말기에 저장되는 동영상의 숫자가 늘어나게되면 재생하고자 하는 동영상을 검색하기가 용이하지 않게 된다. 따라서, 본 발명의 실시 예에 따른 제어부(10), 문자데이터가 없는 동영상이 존재하면, 해당 동영상으로부터 음성데이터(또는 음성데이터를 포함하는 오디오데이터)를 추출하고, 추출된 음성데이터를 통해 문자데이터를 생성한다. 생성된 문자데이터는 음성데이터로부터 변환된 단어들(즉, 문자들)과 해당 동영상 내에서 각 단어가 출력되는 재생지점의 시간 정보를 대응되게 저장한다. 동영상(즉, 동영상의 음성데이터)으로부터 문자데이터를 생성하는 이러한 과정은 장치 내(예를 들어, 휴대단말기)에 동영상이 생성되면(예를 들어, 저장되거나 복사되거나, 새롭게 촬영되어 생성되는) 자동으로 수행될 수 있다. 이와 반대로, 제어부(10)는 장치(예를 들어, 휴대단말기)내의 소정의 동영상이 삭제되면, 삭제된 동영상에 해당하는 문자데이터를 자동으로 삭제할 수도 있다. 또한, 각 동영상별로 문자데이터가 모두 있을 경우에 S203 내지 S205 단계는 생략될 수도 있다.A user may newly download a video from a content provider (CP), create a new video through movie shooting of a camera (not shown), or play a predetermined movie (e.g., a movie clip) It can be converted into a possible format (for example, mpeg4) and stored in the portable terminal. As described above, since only the video (or the subtitle) is provided through the various paths, if the number of videos stored in the portable terminal increases, it becomes difficult to search the video to be played back. Accordingly, when there is a moving image without text data, the control unit 10 according to the embodiment of the present invention extracts audio data (or audio data including audio data) from the moving image, . The generated character data stores the words (i.e., characters) converted from the voice data and the time information of the reproduction point at which each word is output in the corresponding video. This process of generating the character data from the moving picture (i.e., the moving picture data of the moving picture) is automatically performed when a moving picture is generated (for example, stored, copied, or newly photographed) Lt; / RTI > On the contrary, when the predetermined moving picture in the device (for example, a portable terminal) is deleted, the control unit 10 may automatically delete the character data corresponding to the deleted moving picture. Also, if there is character data for each moving picture, steps S203 to S205 may be omitted.

이후, 제어부(10)는 각 동영상의 문자데이터에서 검색어와 일치하는 단어가 있는지 검색하여(S206), 각 동영상의 문자데이터 내에 일치하는 단어가 존재하는지 확인하고(S207), 동영상에서 일치하는 단어에 대응되는 재생지점의 정보를 표시하도록 제어한다(S208).Then, the control unit 10 searches the character data of each moving image for a word matching the search word (S206). Then, the control unit 10 determines whether there is a matching word in the character data of each moving image (S207) And controls to display the information of the corresponding reproduction point (S208).

상술한 바와 같이, 문자데이터는 동영상에서 재생되는 음성들로부터 변환된 문자(또는 문자열)들을 저장하고 있다. 따라서, 본 발명의 실시 예에 따른 제어부(10)는 문자데이터내의 문자열을 확인하여, 사용자로부터 입력된 검색어와 일치하는 문자 또는 문자열이 존재하는지 확인한다. 이후, 입력된 검색어와 일치하는 문자가 문자데이터 내에서 확인되면, 제어부(10)는 일치하는 문자가 해당 동영상에서 출력될 때의 시각을 문자데이터에서 확인한다. 도 3을 참조하면, 제어부(10)는 검색창(51)에 입력된 '스승'이라는 검색어와 일치하는 단어가 메모리(30)에 저장된 문자데이터들에 저장되어 있는지 확인하고, 일치하는 단어가 해당 동영상에서 출력될 때의 시간 정보를 확인한다. 이후, 제어부(10)는 일치하는 단어가 대응되는 재생지점의 정보(검색어와 일치하는 단어를 저장하고있는 문자데이터에 해당하는 영상 내에서의)를 표시하도록 제어한다. 본 발명의 실시 예에서, 재생지점의 정보는 영상이미지(52 및 56), 파일명(53 및 57), 재생지점의 시각(54 또는 58) 및 소정시간동안의 단어열(55 및 59)로 구성된다. 검색어는 단순한 단어 또는 단어열에 불과하다. 따라서, 검색어에 대응되는 단어만을 통해 동영상을 검색하게 되면, 검색되는 동영상의 숫자도 증가하게 되어 재생하고자 하는 이외의 동영상들도 검색될 여지가 있다. 또한, 검색어에 대응되는 단어만으로 동영상을 검색하는 것은 하나의 동영상에서(즉, 동영상에 대응되는 문자데이터에서) 다수 개의 단어가 검색어가 검색될 여지도 있다. 따라서, 본 발명의 실시 예에 따른 제어부(10)는 영상이미지(52 및 56)를 제공하여, 문자데이터에 해당하는 동영상의 재생구간 중에서 검색어(예를 들어, 스승)가 출력될 때(즉, 영상이미지와 함께 스승이라는 소리가 출력될 때)의 화면을 사용자가 확인할 수 있도록 한다. 또한, 본 발명의 실시 예에 따른 제어부(10)는 재생지점의 시각(54 또는 58)을 제공하여, 문자데이터에 해당하는 동영상의 재생구간 중에서 검색어가 출력될 때의 시각을 확인하도록 한다. 또한, 본 발명의 실시 예에 따른 제어부(10)는 문자데이터에 해당하는 동영상의 재생구간 중에서 검색어로부터 소정 시간동안 재생되는(정방향 또는 역방향) 단어열(55 및 59)을 제공함으로써, 검색어로부터 시작하는(또는 포함하는) 문장을 확인할 수 있도록 한다. 상기와 같은 재생지점의 정보를 통해, 사용자는 해당 동영상의 재생구간 중에서 검색어가 등장하는(검색어에 대응되는 음성이 재생될 때의) 영상의 이미지를 확인하며, 검색어에 대응되는 음성이 재생될 때의 영상 내의 시각을 확인하며, 일정 시간동안의 문자열(예를 들어, 영화에서 자막의 일정 부분이 될 수 있음)을 확인함으로써 보다 정확하게 동영상 또는 동영상 내의 재생지점을 검색할 수 있다.As described above, character data stores converted characters (or strings) from voices reproduced in moving pictures. Therefore, the control unit 10 according to the embodiment of the present invention checks the character string in the character data to check whether a character or a character matching the search word input from the user exists. Thereafter, when a character matching the inputted search word is confirmed in the character data, the control unit 10 confirms the time when the matching character is outputted from the moving image from the character data. Referring to FIG. 3, the control unit 10 determines whether a word matching the search term 'teacher' entered in the search window 51 is stored in the character data stored in the memory 30, Check the time information when the video is output. Then, the control unit 10 controls to display the information of the corresponding reproduction point (in the video corresponding to the character data storing the word matching the search word) corresponding to the matching word. In the embodiment of the present invention, the information of the reproduction point is composed of video images 52 and 56, file names 53 and 57, time (54 or 58) of the reproduction point and word strings 55 and 59 for a predetermined time do. The search term is simply a word or a word sequence. Accordingly, if a moving image is searched only through words corresponding to a search term, the number of searched moving images also increases, and there is a possibility that other moving images to be searched are also searched. In addition, searching for a moving picture using only words corresponding to a search term may be performed for a plurality of words in a single moving picture (i.e., character data corresponding to a moving picture). Accordingly, the control unit 10 according to the embodiment of the present invention provides the video images 52 and 56, and when the search word (e.g., teacher) is output from the video data of the video data corresponding to the character data, So that the user can check the screen of the image when the image of the teacher is outputted together with the image of the image). In addition, the control unit 10 according to the embodiment of the present invention provides the time (54 or 58) of the playback point to confirm the time when the search term is output from the playback period of the moving image corresponding to the character data. In addition, the control unit 10 according to the embodiment of the present invention provides word sequences 55 and 59 that are reproduced (forward or backward) for a predetermined period of time from the search term in the moving picture playback interval corresponding to the character data, (Or contain) the sentence. Through the above information of the reproduction point, the user confirms the image of the image in which the search word appears (when the audio corresponding to the search word is reproduced) from the reproduction section of the moving image, and when the audio corresponding to the search word is reproduced (E.g., a part of the subtitles in the movie) for a certain period of time so as to more accurately search for the reproduction point in the moving image or the moving image.

표시된 재생지점의 정보가 선택되면(S209), 제어부(10)는 선택된 재생지점의 정보에 따라 해당 동영상을 재생하도록 제어한다(S210).When the information of the displayed reproduction point is selected (S209), the control unit 10 controls to reproduce the corresponding moving picture according to the information of the selected reproduction point (S210).

상술한 바와 같이, 재생지점의 정보는 영상이미지(52 및 56), 파일명(53 및 57), 재생지점의 시각(54 또는 58) 및 소정시간동안의 단어열(55 및 59)등의 여러 가지 정보로 구성된다. 상기와 같은 재생지점의 정보중에서 선택되는 종류에 따라 제어부(10)는 동영상의 재생 방법을 달리 한다. 도 3을 참조하여 예를 들면, 제어부(10)는 표시된 재생지점의 정보 중에서 파일명(53 및 57)이 선택되면 일치하는 단어가 존재하는 동영상을 재생하여, 일치하는 단어가 존재하는 동영상을 처음 재생구간부터 재생하도록 제어한다. 이와 달리, 제어부(10)는 일치하는 단어가 재생되는 지점의 시각(54 및 58) 또는 상기 일치하는 단어가 재생되는 지점의 영상이미지(52 및 56)가 선택되면, 일치하는 단어가 존재하는 동영상을 상기 일치하는 단어가 재생되는 지점부터 재생하도록 제어한다. 또한, 제어부(10)는 문자데이터의 단어열(55 및 59)가 선택되면, 선택된 단어열의 재생구간동안만 동영상을 재생하도록 제어한다. 예를 들어 단어열(55)가 선택되면, 제어부(10)는 “스승님, 저것은 나뭇가지가 움직이는 겁니까, 바람이 움직이는 겁니까?”의 단어열이 해당 동영상(달콤한 인생)내에서 (음성으로) 출력되는 소정의 재생구간동안만 해당 동영상(달콤한 인생)을 재생하도록 제어한다.As described above, the information of the reproduction point includes various images such as video images 52 and 56, file names 53 and 57, time 54 or 58 of the reproduction point, and word strings 55 and 59 for a predetermined time Information. According to the type of information selected from the above information of the reproduction point, the controller 10 changes the reproduction method of the moving picture. Referring to FIG. 3, for example, when the file names 53 and 57 are selected from among the information of the displayed reproduction point, the control unit 10 reproduces a moving image in which a matching word exists, To be reproduced from the section. Alternatively, when the time 54 and 58 of the point at which a matching word is reproduced or the video image 52 and 56 at the point where the matching word is reproduced are selected, Is reproduced from the point at which the matching word is reproduced. In addition, when the word strings 55 and 59 of character data are selected, the control unit 10 controls to reproduce the moving picture only during the reproduction period of the selected word string. For example, when the word string 55 is selected, the control unit 10 determines whether the word string "Master, is that the twig moving, or the wind moving?" In the video (sweet life) (Sweet life) is reproduced only for a predetermined reproduction section to be outputted.

지금까지 본 발명에 대해서 상세히 설명하였으나, 그 과정에서 언급한 실시 예는 예시적인 것일 뿐, 한정적인 것이 아님을 분명히 하며, 본 발명은 이하의 특허청구범위에 의해 제공되는 본 발명의 기술적 사상이나 분야를 벗어나지 않는 범위 내에서, 본 발명으로부터 균등하게 대체될 수 있는 정도의 구성요소 변경은 본 발명의 범위에 속한다 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is clearly understood that the same is by way of illustration and example only and is not to be taken by way of example, It is to be understood that within the scope of the appended claims the invention may be practiced otherwise than as specifically described herein.

도 1은 본 발명의 실시 예에 따른 휴대단말기에 대한 블록도.1 is a block diagram of a mobile terminal according to an embodiment of the present invention;

도2는 본 발명의 실시 예에 따라 동영상을 처리하는 과정에 대한 흐름도.FIG. 2 is a flowchart illustrating a process of processing a moving picture according to an embodiment of the present invention; FIG.

도 3은 본 발명의 실시 예에 따라 동영상을 처리하는 과정에 대한 예시도.FIG. 3 is an exemplary view illustrating a process of processing a moving picture according to an embodiment of the present invention; FIG.

Claims (12)

동영상의 처리 방법에 있어서,In a video processing method, 적어도 하나의 검색어가 입력되는 과정과, Inputting at least one search word; 각 동영상의 음성데이터로부터 변환된 적어도 하나의 문자데이터와 상기 입력된 검색어를 비교하는 과정과, Comparing at least one character data converted from the voice data of each moving picture with the inputted search word; 상기 비교 결과, 상기 입력된 검색어와 일치하는 문자데이터가 적어도 하나 존재할 경우, 해당 동영상의 재생지점의 정보를 표시하는 과정을 포함하는 것을 특징으로 하는 동영상의 처리 방법.And displaying information of a reproduction point of the moving picture when there is at least one character data that matches the input search word as a result of the comparison. 제1항에 있어서, 상기 재생지점의 정보는,The information reproducing method according to claim 1, 상기 일치하는 단어가 존재하는 동영상의 파일명, 상기 일치하는 단어가 재생되는 지점의 시각, 상기 일치하는 단어가 재생되는 지점의 영상이미지 또는 상기 일치하는 단어가 재생되는 지점으로부터 소정시간동안의 동영상 재생구간에 대응되는 문자데이터의 단어열 중에서 적어도 어느 하나를 포함하는 것을 특징으로 하는 동영상의 처리 방법.A video image of a point at which the coincident word is reproduced, a video image at a point at which the coincident word is reproduced, or a video image reproduced during a predetermined time from a point at which the coincident word is reproduced, And a word string of character data corresponding to the character string. 제2항에 있어서,3. The method of claim 2, 상기 표시된 재생지점의 정보 중에서 어느 하나가 선택되면, 선택된 재생지 점의 정보에 따라 해당 동영상을 재생하는 과정을 더 포함하는 것을 특징으로 하는 동영상의 처리 방법.And reproducing the moving picture according to the information of the selected playback point when any one of the information of the displayed playback point is selected. 제3항에 있어서, 상기 재생 과정은,4. The method of claim 3, 상기 파일명이 선택되면, 상기 일치하는 단어가 존재하는 동영상을 재생하는 과정과,Reproducing the moving picture in which the matching word exists, if the file name is selected; 상기 일치하는 단어가 재생되는 지점의 시각 또는 상기 일치하는 단어가 재생되는 지점의 영상이미지가 선택되면, 상기 일치하는 단어가 존재하는 동영상을 상기 일치하는 단어가 재생되는 지점부터 재생하는 과정과,Reproducing a moving picture in which the matching word exists, from a point at which the matching word is reproduced, when a video image at a point at which the matching word is reproduced or at a point at which the matching word is reproduced is selected; 상기 문자데이터의 단어열 중 어느 하나가 선택되면, 상기 선택된 단어열의 재생구간동안만 상기 동영상을 재생하는 과정을 포함하는 것을 특징으로 하는 동영상의 처리 방법.And reproducing the moving picture only during a reproduction period of the selected word string when any one of the word strings of the character data is selected. 제1항에 있어서,The method according to claim 1, 상기 검색어가 입력되면 상기 문자데이터가 생성되지 않은 동영상이 있는지 확인하는 과정과,If the search word is input, checking whether there is a video in which the character data is not generated; 상기 문자데이터가 생성되지 않은 동영상이 있으면, 상기 문자데이터가 생성되지 않은 동영상의 음성데이터로부터 문자데이터를 생성하는 과정을 더 포함하는 것을 특징으로 하는 동영상의 처리 방법.And generating character data from the audio data of the moving image in which the character data is not generated if the character data is not generated. 제1항에 있어서, 상기 검색어는,The method according to claim 1, 키입력에 의한 문자 또는 사용자의 음성을 문자로 변환한 문자 중 어느 하나인 것을 특징으로 하는 동영상의 처리 방법.Wherein the character is one of a character by a key input or a character whose voice is converted into a character. 동영상의 처리 장치에 있어서,A video processing apparatus comprising: 적어도 하나의 동영상과 상기 동영상의 음성데이터로부터 변환되는 적어도 하나의 문자데이터를 저장하는 메모리와, A memory for storing at least one moving image and at least one character data converted from the moving image voice data; 적어도 하나의 검색어가 입력되면, 각 동영상의 음성데이터로부터 변환된 적어도 하나의 문자데이터와 상기 입력된 검색어를 비교하고, 상기 비교 결과, 상기 입력된 검색어와 일치하는 문자데이터가 적어도 하나 존재할 경우, 상기 일치하는 단어에 대응되는 문자데이터의 해당 동영상의 재생지점의 정보를 표시하도록 제어하는 제어부와,When at least one search word is input, compares at least one character data converted from the voice data of each moving picture with the input search word, and when there is at least one character data matching the input search word, A control unit for controlling to display information of a reproduction point of the moving picture of the character data corresponding to the matching word, 상기 동영상의 재생지점의 정보를 표시하는 표시부를 포함하는 것을 특징으로 하는 동영상의 처리 장치.And a display unit for displaying information on a reproduction point of the moving picture. 제7항에 있어서, 상기 재생지점의 정보는,8. The method according to claim 7, 상기 일치하는 단어가 존재하는 동영상의 파일명, 상기 일치하는 단어가 재 생되는 지점의 시각, 상기 일치하는 단어가 재생되는 지점의 영상이미지 또는 상기 일치하는 단어가 재생되는 지점으로부터 소정시간동안의 동영상 재생구간에 대응되는 문자데이터의 단어열 중에서 적어도 어느 하나를 포함하는 것을 특징으로 하는 동영상의 처리 장치.A video image of a point at which the matching word is reproduced, a video image at a point at which the matching word is reproduced, or a moving image for a predetermined period of time from a point at which the matching word is reproduced And a word string of character data corresponding to the section. 제8항에 있어서, 상기 제어부는,9. The apparatus according to claim 8, 상기 표시된 재생지점의 정보 중에서 어느 하나가 선택되면, 상기 표시부를 통해 선택된 재생지점의 정보에 따라 해당 동영상을 재생하도록 제어하는 것을 특징으로 하는 동영상의 처리 장치.Wherein the control unit controls to reproduce the moving picture according to the information of the reproduction point selected through the display unit when any one of the information of the displayed reproduction point is selected. 제9항에 있어서, 상기 제어부는,10. The apparatus according to claim 9, 상기 파일명이 선택되면 상기 일치하는 단어가 존재하는 동영상을 재생하도록 제어하고,When the file name is selected, controlling to reproduce a moving picture in which the matching word exists, 상기 일치하는 단어가 재생되는 지점의 시각 또는 상기 일치하는 단어가 재생되는 지점의 영상이미지가 선택되면, 상기 일치하는 단어가 존재하는 동영상을 상기 일치하는 단어가 재생되는 지점부터 재생하도록 제어하고,When the video image at the point at which the matching word is reproduced or the video image at the point at which the matching word is reproduced is selected, the moving picture in which the matching word exists is reproduced from the point at which the matching word is reproduced, 상기 문자데이터의 단어열 중 어느 하나가 선택되면, 상기 선택된 단어열의 재생구간동안만 상기 동영상을 재생하도록 제어하는 것을 특징으로 하는 동영상의 처리 장치.And controls the moving picture to be reproduced only during the reproduction period of the selected word string when any one of the word strings of the character data is selected. 제7항에 있어서, 상기 제어부는,8. The apparatus of claim 7, 상기 검색어가 입력되면 상기 문자데이터가 생성되지 않은 동영상이 있는지 확인하고, 상기 문자데이터가 생성되지 않은 동영상이 있으면 상기 문자데이터가 생성되지 않은 동영상의 음성데이터로부터 문자데이터를 생성하도록 제어하는 것을 특징으로 하는 동영상의 처리 장치.When the search word is inputted, it is checked whether or not there is a video data in which the character data is not generated, and if there is a video data in which the character data is not generated, character data is generated from the audio data of the video data in which the character data is not generated Processing device of the moving picture. 제7항에 있어서, 상기 검색어는,8. The method according to claim 7, 키입력에 의한 문자 또는 사용자의 음성을 문자로 변환한 문자 중 어느 하나인 것을 특징으로 하는 동영상의 처리 장치.And a character by a key input or a character whose voice is converted into a character.
KR1020070089495A 2007-09-04 2007-09-04 Apparatus and method for processing moving picture KR101412229B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070089495A KR101412229B1 (en) 2007-09-04 2007-09-04 Apparatus and method for processing moving picture

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070089495A KR101412229B1 (en) 2007-09-04 2007-09-04 Apparatus and method for processing moving picture

Publications (2)

Publication Number Publication Date
KR20090024458A KR20090024458A (en) 2009-03-09
KR101412229B1 true KR101412229B1 (en) 2014-06-25

Family

ID=40693318

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070089495A KR101412229B1 (en) 2007-09-04 2007-09-04 Apparatus and method for processing moving picture

Country Status (1)

Country Link
KR (1) KR101412229B1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101028839B1 (en) * 2009-05-07 2011-04-12 쏠스펙트럼(주) Apparatus for editing multi-picture
KR101009973B1 (en) * 2010-04-07 2011-01-21 김덕훈 Method for providing media contents, and apparatus for the same
KR102467081B1 (en) * 2021-04-05 2022-11-11 한밭대학교 산학협력단 Video review system, method and program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001056822A (en) 1999-08-20 2001-02-27 Fukushima Printing Co Ltd Production of digital contents capable of text retrieval
KR20030007736A (en) * 2001-03-30 2003-01-23 코닌클리케 필립스 일렉트로닉스 엔.브이. Streaming video bookmarks
KR20060100646A (en) * 2005-03-17 2006-09-21 주식회사 코난테크놀로지 Method and system for searching the position of an image thing
KR20070042000A (en) * 2005-10-17 2007-04-20 삼성전자주식회사 Method for setting the title for a chapter of moving picture stream and apparatus therefor

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001056822A (en) 1999-08-20 2001-02-27 Fukushima Printing Co Ltd Production of digital contents capable of text retrieval
KR20030007736A (en) * 2001-03-30 2003-01-23 코닌클리케 필립스 일렉트로닉스 엔.브이. Streaming video bookmarks
KR20060100646A (en) * 2005-03-17 2006-09-21 주식회사 코난테크놀로지 Method and system for searching the position of an image thing
KR20070042000A (en) * 2005-10-17 2007-04-20 삼성전자주식회사 Method for setting the title for a chapter of moving picture stream and apparatus therefor

Also Published As

Publication number Publication date
KR20090024458A (en) 2009-03-09

Similar Documents

Publication Publication Date Title
US11580290B2 (en) Text description generating method and device, mobile terminal and storage medium
CN107155138A (en) Video playback jump method, equipment and computer-readable recording medium
KR101513847B1 (en) Method and apparatus for playing pictures
CN106911967B (en) Live broadcast playback method and device
US20110039598A1 (en) Methods and devices for adding sound annotation to picture and for highlighting on photos and mobile terminal including the devices
US20180253274A1 (en) Method for Muting and Electronic Device
CN109063101B (en) Video cover generation method and device
CN112532931A (en) Video processing method and device and electronic equipment
KR101412229B1 (en) Apparatus and method for processing moving picture
KR20160011532A (en) Method and apparatus for displaying videos
JP5472960B2 (en) Terminal device and program
CN112988956A (en) Method and device for automatically generating conversation and method and device for detecting information recommendation effect
US20230067387A1 (en) Method for music generation, electronic device, storage medium cross reference to related applications
CN114464186A (en) Keyword determination method and device
KR100775898B1 (en) Method for setting play-lists of contents files in mobile terminal
CN113259754B (en) Video generation method, device, electronic equipment and storage medium
KR101422283B1 (en) Method for playing of moving picture using caption and portable terminla having the same
KR100593989B1 (en) Method for displaying moving picture in the mobile terminal
KR100879684B1 (en) Method for learning foreign language using portable terminal and portable terminal having the same
KR20070001482A (en) Method for remote controlling of mobile terminal
KR20080111282A (en) System and method for uploading user contents in communication terminal
KR100678119B1 (en) Method for replaying music file in wireless terminal
CN110300323B (en) Music recognition method and device
KR20070113393A (en) Apparatus and method for making and transmitting multimedia message service(mms) message using special characters and reserved words
KR100775190B1 (en) Method for multimedia synthesis and terminal using the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170529

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180530

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190530

Year of fee payment: 6