JPH11167583A - Telop character recognition method, video storage display device, telop character recognition and retrieval terminal and video retrieval terminal - Google Patents
Telop character recognition method, video storage display device, telop character recognition and retrieval terminal and video retrieval terminalInfo
- Publication number
- JPH11167583A JPH11167583A JP9334459A JP33445997A JPH11167583A JP H11167583 A JPH11167583 A JP H11167583A JP 9334459 A JP9334459 A JP 9334459A JP 33445997 A JP33445997 A JP 33445997A JP H11167583 A JPH11167583 A JP H11167583A
- Authority
- JP
- Japan
- Prior art keywords
- video
- information
- telop character
- search
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Management Or Editing Of Information On Record Carriers (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、例えばテレビ番組
等の映像を蓄積する機能と映像中に表示されるテロップ
文字を認識する機能とを有する映像蓄積表示装置に関す
る。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a video storage and display device having a function of storing a video such as a television program and a function of recognizing telop characters displayed in the video.
【０００２】[0002]
【従来の技術】テレビ番組等の映像を検索する機能と映
像中に表示されるテロップ文字を認識する機能とを有す
る映像検索表示装置が特開平３−１６０６６４号公報に
提案されている。これは、ビデオテープレコーダ（ＶＴ
Ｒ）とワークステーションと組み合わせた装置構成とな
っており、テレビ信号をＶＴＲおよびコンピュータに入
力し、ＶＴＲでは入力テレビ信号をＶＴＲテープに録画
し、コンピュータでは録画中の映像に表示される文字を
認識する処理を行い、文字認識結果をコンピュータの外
部記憶装置にインデックスファイルとして記録し、ＶＴ
Ｒテープ上にも該ファイルと対応する番号をマーキング
しておく方法を採っている。なお、文字認識処理は、一
定時間おきに行われている。また、文字認識結果、ＶＴ
Ｒテープ上のマーキングに基づいて、所望の映像を録画
した映像の中から簡単に検索し、表示する機能も持つ装
置として提案されている。2. Description of the Related Art Japanese Patent Application Laid-Open No. 3-160664 proposes a video search and display device having a function of searching for a video such as a television program and a function of recognizing telop characters displayed in the video. This is a video tape recorder (VT
R) and a workstation combined with a TV signal input to a VTR and a computer, the VTR records the input TV signal on a VTR tape, and the computer recognizes characters displayed on the video being recorded. And records the character recognition result in an external storage device of the computer as an index file.
A method is adopted in which a number corresponding to the file is marked on the R tape. The character recognition process is performed at regular intervals. In addition, the character recognition result, VT
It has been proposed as an apparatus having a function of easily searching and displaying a desired video from a recorded video based on the marking on the R tape.
【０００３】[0003]
【発明が解決しようとする課題】上述した従来の方法で
は、ワークステーションに入力された映像に対し、一定
時間間隔（例えば５秒間隔）でテロップ文字認識を行っ
ているため、テロップが表示されていないフレームにつ
いても文字認識処理を行い、文字情報の入っていない無
駄なインデックスファイルが多数生成されるという問題
がある（図７（１）参照）。In the above-described conventional method, the telop is displayed on the video input to the workstation because the telop character recognition is performed at regular time intervals (for example, every 5 seconds). There is a problem in that character recognition processing is performed for a frame that does not exist, and a large number of useless index files containing no character information are generated (see FIG. 7A).
【０００４】さらに、従来の方法では、コンピュータの
外部記憶装置に蓄積されるインデックスファイルに含ま
れるテロップ文字認識結果に対応するＶＴＲテープ中の
時刻情報として、テロップ文字認識処理の終了した時点
の時刻を設定する。ところが、映像中には様々な被写体
が様々な配色で表示されており、テロップ文字の認識処
理を、決まった一定時間内で終了することは困難であ
る。つまり、従来の方法では、インデックスファイルに
含まれるテロップ文字認識結果と対応するＶＴＲテープ
中の時刻情報は、実際にテロップ文字が表示されている
時刻よりもテロップ文字認識処理にかかる時間だけ後の
時刻となる。このため、映像検索を行った場合、検索結
果の映像は検索された入力テロップ文字が表示されてい
る時刻よりも後の時刻のフレームから開始されてしま
い、利用者の所望のテロップ文字が検索結果の映像から
は確認できないという問題点もある（図７（２）参
照）。Further, in the conventional method, the time at which the telop character recognition processing is completed is used as time information in the VTR tape corresponding to the telop character recognition result included in the index file stored in the external storage device of the computer. Set. However, various subjects are displayed in various colors in the video, and it is difficult to end the telop character recognition processing within a fixed time. In other words, according to the conventional method, the time information in the VTR tape corresponding to the telop character recognition result included in the index file is a time that is later than the time when the telop character is actually displayed by the time required for the telop character recognition processing. Becomes Therefore, when a video search is performed, the video of the search result starts from a frame at a time later than the time at which the searched input telop character is displayed, and the telop character desired by the user is not searched. However, there is also a problem that it cannot be confirmed from the image of FIG.
【０００５】本発明の目的は、一定周期でテロップ文字
認識処理を行うことによる無駄なインデックスファイル
の生成を抑制すること、およびコンピュータディスク，
ＶＴＲ等の映像蓄積媒体へ書き込まれるテロップ文字表
示時刻の遅れを改善する映像蓄積表示方法および装置を
提供することにある。SUMMARY OF THE INVENTION It is an object of the present invention to suppress generation of useless index files by performing telop character recognition processing at a fixed period.
It is an object of the present invention to provide a video storage and display method and apparatus for improving a delay in displaying a telop character written on a video storage medium such as a VTR.
【０００６】[0006]
【課題を解決するための手段】本発明は、入力された映
像信号の各フレームに対し、テロップ文字が表示されて
いるかどうか判断し、テロップ文字が表示されているフ
レームに対して文字領域抽出、文字認識処理を行う。こ
れによりテロップ文字情報の存在しないインデックスフ
ァイルの生成を抑制することが可能となる（図３（１）
参照）。SUMMARY OF THE INVENTION The present invention determines whether or not a telop character is displayed for each frame of an input video signal, and extracts a character area from the frame where the telop character is displayed. Perform character recognition processing. This makes it possible to suppress generation of an index file in which no telop character information exists (FIG. 3A).
reference).
【０００７】テロップ文字認識処理部において、テロッ
プ文字認識結果と該テロップ文字の表示時のＩＤ情報を
含むインデックスファイルを生成するが、本発明はこの
ときのＩＤ情報として、従来のようなテロップ文字認識
処理が終了した時点のＩＤではなく、認識処理対象のフ
レームがテロップ文字認識・検索端末に入力された時点
のＩＤを用いる。これにより、映像検索を行う際に、テ
ロップ文字が表示されているフレームを先頭とする映像
を表示することが可能となる（図３（２）参照）。In the telop character recognition processing section, an index file including a telop character recognition result and ID information at the time of displaying the telop character is generated. Instead of the ID at the time when the processing is completed, the ID at the time when the frame to be recognized is input to the telop character recognition / search terminal is used. Thus, when performing a video search, it is possible to display a video starting with a frame displaying a telop character (see FIG. 3 (2)).
【０００８】本発明の映像蓄積・表示装置は、映像信号
をフレーム単位に入力して記憶する映像情報蓄積手段
と、映像信号を映像蓄積媒体に入力し、入力した時点の
ＩＤ情報を含む映像のデータベースを構成する映像情報
蓄積手段と、映像信号入力記憶手段により入力された各
フレームに対し、フレーム中にテロップ文字が表示され
ているかどうかを判断し、テロップ文字が表示されてい
ると判断されたフレームに対してテロップ文字の領域を
抽出し、抽出された各テロップ文字領域を辞書データを
用いて認識することによりテロップ文字の文字コード化
処理を行うテロップ文字認識手段と、前記テロップ文字
認識手段により得られた文字コードと、該文字コードが
得られたフレームが映像入力記憶手段に入力された時点
のＩＤ情報を映像のインデックスファイルとして蓄積す
るインデックスファイル蓄積手段と、映像情報蓄積手段
の中から所望の映像を検索するための検索キーを文字コ
ードで入力する映像検索情報入力手段と、インデックス
ファイル蓄積手段の中から映像検索情報入力手段により
入力された文字コードを検索するテロップ文字認識結果
検索手段と、映像情報蓄積手段により構成される映像デ
ータベースの中から、テロップ文字認識結果検索手段に
より得られた文字コードと対応するＩＤ情報を持つ映像
を検索する映像検索手段と、映像を映像表示装置に表示
する映像表示手段と、映像検索手段により検索された映
像を映像表示手段に渡す映像表示制御手段を有する。A video storage / display device according to the present invention comprises a video information storage means for inputting and storing a video signal in frame units, a video signal input to a video storage medium, and a video signal containing ID information at the time of input. For each frame input by the video information storage means and the video signal input storage means constituting the database, it was determined whether or not a telop character was displayed in the frame, and it was determined that the telop character was displayed. A telop character recognizing unit that extracts a telop character region from a frame and recognizes each extracted telop character region using dictionary data to perform a telop character character encoding process, and the telop character recognition unit. The obtained character code and the ID information at the time when the frame in which the character code was obtained are input to the video input storage means Index file storage means for storing as an index file, video search information input means for inputting a search key for searching for a desired video from the video information storage means by a character code, and video search from the index file storage means. A telop character recognition result search means for searching for a character code input by the information input means, and an ID corresponding to a character code obtained by the telop character recognition result search means from a video database constituted by the video information storage means. The system includes a video search unit for searching for a video having information, a video display unit for displaying the video on a video display device, and a video display control unit for passing the video searched by the video search unit to the video display unit.
【０００９】本発明のテロップ文字認識・検索端末は、
映像信号をフレーム単位に入力して記憶する映像信号入
力記憶手段と、映像信号入力記憶手段により入力された
各フレームに対し、フレーム中にテロップ文字が表示さ
れているかどうかを判断し、テロップ文字が表示されて
いると判断されたフレームに対してのみテロップ文字の
領域を抽出し、抽出された各テロップ文字領域を辞書デ
ータを用いて認識することによりテロップ文字の文字コ
ード化処理を行うテロップ文字認識手段と、テロップ文
字認識手段により得られた文字コードと、該文字コード
が得られたフレームが映像入力記憶手段に入力された時
点のＩＤ情報を映像インデックスファイルとして蓄積す
るインデックスファイル蓄積手段を有する。The telop character recognition / search terminal of the present invention comprises:
Video signal input storage means for inputting and storing a video signal in frame units; and for each frame input by the video signal input storage means, determine whether or not a telop character is displayed in the frame. A telop character recognition that extracts telop character regions only from frames determined to be displayed and recognizes the extracted telop character regions using dictionary data, thereby performing telop character character encoding processing. Means for storing a character code obtained by the telop character recognizing means and an ID file at the time when the frame obtained by the character code is input to the video input storage means as a video index file.
【００１０】本発明の映像検索端末は、映像情報蓄積手
段により構成されるデータベースの中から所望の映像を
検索するための検索キーを文字コードで入力する映像検
索情報入力手段と、インデックスファイル蓄積手段の中
から映像検索情報入力手段により入力された文字コード
を検索するテロップ文字認識結果検索手段と、映像情報
蓄積手段により構成される映像データベースの中から、
前記テロップ文字認識結果検索手段により得られた文字
コードと対応するＩＤ情報を持つ映像を検索する映像検
索手段と、映像を映像表示装置に表示する映像表示手段
と、映像検索手段により指定された映像を映像表示手段
に渡す映像表示制御手段を有する。[0010] The video search terminal of the present invention is a video search information input means for inputting a search key for searching for a desired video from a database constituted by video information storage means by a character code, and an index file storage means. From the telop character recognition result search means for searching the character code input by the video search information input means from among the video database constituted by the video information storage means,
Video search means for searching for a video having ID information corresponding to the character code obtained by the telop character recognition result search means, video display means for displaying the video on a video display device, and video designated by the video search means To the image display means.
【００１１】[0011]
【発明の実施の形態】次に、本発明の実施の形態につい
て図面を参照して説明する。Next, embodiments of the present invention will be described with reference to the drawings.
【００１２】図１を参照すると、本発明の一実施形態の
映像蓄積表示装置は、テレビチューナ、ビデオ等の映像
入力端末４と、パソコン、ワークステーション等のテロ
ップ文字認識・検索端末１と、ハードディスク、ＶＴＲ
等の映像蓄積媒体２と、パソコン、ワークステーション
等の映像検索端末３で構成されている。Referring to FIG. 1, a video storage and display apparatus according to an embodiment of the present invention includes a video input terminal 4 such as a TV tuner and a video, a telop character recognition / search terminal 1 such as a personal computer and a workstation, and a hard disk. , VTR
And a video search terminal 3 such as a personal computer or a workstation.
【００１３】映像入力端末４とテロップ文字認識・検索
端末１はテレビ信号線５で接続され、映像入力端末４と
映像蓄積媒体２はテレビ信号線６で接続されている。テ
ロップ文字認識・検索端末１、映像蓄積媒体２、映像検
索端末３間はデータ通信用ケーブル７で接続されてい
る。The video input terminal 4 and the telop character recognition / search terminal 1 are connected by a television signal line 5, and the video input terminal 4 and the video storage medium 2 are connected by a television signal line 6. The telop character recognition / search terminal 1, video storage medium 2, and video search terminal 3 are connected by a data communication cable 7.
【００１４】テロップ文字認識・検索端末１は、映像入
力端末４からの映像信号をフレーム単位に入力し、記憶
する動画像入力記憶部１１と、インデックスファイルを
蓄積するインデックスファイル蓄積部１５と、動画像入
力記憶部１１から映像信号をフレーム単位に入力し、入
力された各フレームにテロップ文字が表示されているか
どうか判断し、テロップ文字が表示されているフレーム
および該フレームが動画像入力記憶部１１に入力された
時点のＩＤ情報をインデックスファイルとしてインデッ
クスファイル蓄積部１５に蓄積するテロップ文字フレー
ム検出部１２と、テロップ文字の表示されているフレー
ムをテロップ文字フレーム検出部１２から入力し、テロ
ップ文字の領域を検出するテロップ文字領域抽出部１３
と、抽出されたテロップ文字領域を辞書データを用いて
認識し、テロップ文字を文字コード化し、得られた文字
コードをインデックスファイルとしてインデックスファ
イル蓄積部１５に蓄積するテロップ文字認識部１４と、
文字コードで入力された検索キーをもとに、インデック
スファイル蓄積部１５中の文字コードを検索するテロッ
プ文字認識結果検索部１６で構成されている。The telop character recognition / search terminal 1 receives a video signal from the video input terminal 4 on a frame basis and stores the moving image input storage unit 11, an index file storage unit 15 for storing an index file, a moving image A video signal is input from the image input storage unit 11 in frame units, it is determined whether or not a telop character is displayed in each input frame, and the frame in which the telop character is displayed and the frame are displayed in the moving image input storage unit 11. The telop character frame detection unit 12 stores the ID information at the time of input into the index file storage unit 15 as an index file, and the frame in which the telop character is displayed is input from the telop character frame detection unit 12, and the telop character Subtitle character area extraction unit 13 for detecting an area
A telop character recognizing unit 14 for recognizing the extracted telop character area using the dictionary data, converting the telop characters into character codes, and storing the obtained character codes in the index file storage unit 15 as index files;
The telop character recognition result search unit 16 searches for a character code in the index file storage unit 15 based on a search key input by a character code.
【００１５】映像蓄積媒体２は、入力された映像信号を
ＩＤ情報とともに映像蓄積部２１に蓄積し、映像のデー
タベースを構成する。The video storage medium 2 stores the input video signal in the video storage unit 21 together with the ID information, and forms a video database.
【００１６】映像検索端末３は、Ｗｅｂプラウザ等を利
用してユーザが所望の映像を検索するために文字コード
で入力し、記憶する映像検索情報入力記憶部３１と、テ
ロップ文字認識・検索端末１で得られたインデックスフ
ァイル中のＩＤ情報を持つ映像を映像蓄積部２１から検
索する映像検索部３２と、映像表示部３３と、インデッ
クスファイル中のＩＤ情報を映像検索部３２に渡し、映
像検索部３２で得られた映像を映像表示部３３に表示す
る映像表示制御部３４で構成されている。The video search terminal 3 includes a video search information input storage unit 31 for inputting and storing character codes for a user to search for a desired video using a Web browser or the like, and a telop character recognition / search terminal 1. A video search unit 32 for searching the video storage unit 21 for a video having ID information in the index file obtained in the above step, a video display unit 33, and the ID information in the index file are passed to the video search unit 32. An image display control unit 34 displays the image obtained at 32 on an image display unit 33.
【００１７】次に、本実施形態の動作を説明する。Next, the operation of this embodiment will be described.
【００１８】まず、映像を映像蓄積媒体２とテロップ文
字認識・検索端末１に入力する。映像蓄積媒体２側で
は、映像と、映像が入力された時点でのＩＤ情報（例え
ば時間情報）を映像蓄積部２１に蓄積する。テロップ文
字認識・検索端末１側では、テロップ文字表示フレーム
の検出、テロップ文字領域の抽出、テロップ文字の認識
の各処理を行い、テロップ文字の認識結果（文字コー
ド）と該テロップ文字表示フレームが入力された時点の
ＩＤ情報をインデックスファイルとしてインデックスフ
ァイル蓄積部１５に蓄積する。ユーザはあるインタフェ
−ス（例えばＷＷＷプラウザ）から所望の映像を映像検
索端末３の映像検索情報入力記憶部３１から文字コード
で入力する。入力された文字コードをテロップ文字認識
・検索端末１のインデックスファイル蓄積部１５に蓄積
されているインデックスファイルの中から検索し、対応
するＩＤ情報を持つ映像を映像蓄積部２１から引き出
し、映像検索端末３の映像表示部（例えばコンピュータ
ディスプレイ）３３に表示する。First, a video is input to the video storage medium 2 and the telop character recognition / search terminal 1. On the video storage medium 2 side, the video and ID information (for example, time information) at the time when the video is input are stored in the video storage unit 21. The telop character recognition / search terminal 1 performs the processing of detecting the telop character display frame, extracting the telop character area, and recognizing the telop character, and inputs the telop character recognition result (character code) and the telop character display frame. The ID information at the time of the execution is stored in the index file storage unit 15 as an index file. The user inputs a desired video from a certain interface (for example, a WWW browser) from the video search information input storage unit 31 of the video search terminal 3 using a character code. The input character code is searched from the index file stored in the index file storage unit 15 of the telop character recognition / search terminal 1, and a video having the corresponding ID information is extracted from the video storage unit 21. 3 is displayed on a video display unit 33 (for example, a computer display).
【００１９】図４は映像蓄積媒体２としてハードディス
クを用いた例で、映像信号をディジタイズし、映像を入
力した時点のＩＤ情報（例えば時刻情報）とともにファ
イルとしてハードディスク２に蓄積し、映像検索時には
映像検索端末３から検索結果のＩＤ情報を受け取り、該
当する部分の映像を映像検索端末３の映像表表示部３３
上に表示するものである。FIG. 4 shows an example in which a hard disk is used as the video storage medium 2. The video signal is digitized and stored in the hard disk 2 as a file together with ID information (for example, time information) at the time of inputting the video. The ID information of the search result is received from the search terminal 3, and the video of the corresponding portion is displayed in the video table display unit 33 of the video search terminal 3.
It is displayed above.
【００２０】図５は映像蓄積媒体２としてビデオテープ
レコーダ（ＶＴＲ）を用いた例で、ＶＴＲ２にＩＤ情報
（例えばテープの先頭位置を「０」とした場合のカウン
タ情報）とともに蓄積し、映像検索時には映像検索端末
３から検索結果のＩＤ情報を受け取り、該当する部分か
ら頭出しを行い映像検索端末３の映像表示部３３上に表
示するものである。FIG. 5 shows an example in which a video tape recorder (VTR) is used as the video storage medium 2. The video tape recorder (VTR) stores the ID information (for example, counter information when the head position of the tape is set to "0") in the VTR 2, and searches for the video. Sometimes, the ID information of the search result is received from the video search terminal 3, the corresponding portion is searched, and displayed on the video display unit 33 of the video search terminal 3.
【００２１】図６は映像検索端末３におけるユーザイン
タフェースの例を示したもので、検索キーを文字コード
で入力して（例えば「ネットワークサービス」）検索開
始ボタンを押すと、検索結果の映像が表示される。FIG. 6 shows an example of a user interface in the video search terminal 3. When a search key is input by a character code (for example, "network service") and a search start button is pressed, a video of a search result is displayed. Is done.
【００２２】[0022]
【発明の効果】以上説明したように本発明は、映像中の
テロップ文字の認識結果を使って映像を検索し、表示す
るシステムにおいて、テロップ文字情報の存在しない映
像インデックスファイルの生成を抑制し、さらに映像蓄
積装置に蓄えられる映像へのインデックスにテロップ文
字が表示された時点の正確な時刻を設定する効果があ
る。As described above, the present invention suppresses generation of a video index file having no telop character information in a system for retrieving and displaying a video using a recognition result of a telop character in the video, Further, there is an effect of setting an accurate time when the telop character is displayed in the index to the video stored in the video storage device.
【図１】本発明の一実施形態の映像蓄積・表示装置の外
観図である。FIG. 1 is an external view of a video storage / display device according to an embodiment of the present invention.
【図２】図１の映像蓄積・表示装置の構成図である。FIG. 2 is a configuration diagram of the video storage / display device of FIG. 1;
【図３】本発明の作用を説明する図である。FIG. 3 is a diagram illustrating the operation of the present invention.
【図４】ハードディスクへの映像蓄積時の映像検索結果
を表示する説明図である。FIG. 4 is an explanatory diagram showing a video search result when video is stored in a hard disk.
【図５】ＶＴＲへの映像蓄積時の映像検索結果を表示す
る説明図である。FIG. 5 is an explanatory diagram showing a video search result when a video is stored in a VTR.
【図６】映像検索端末３におけるユーザインタフェース
の例を示す図である。FIG. 6 is a diagram illustrating an example of a user interface in the video search terminal 3.
【図７】従来技術の問題点を説明する図である。FIG. 7 is a diagram for explaining a problem of the related art.
１ テロップ文字認識・検索端末 ２ 映像蓄積媒体 ３ 映像検索端末 ４ 入力映像 ５，６ テレビ信号線 ７ データ通信用ケーブル １１ 動画像入力記憶部 １２ テロップ文字フレーム検出部 １３ テロップ文字領域抽出部 １４ テロップ文字認識部 １５ インデックスファイル蓄積部 １６ テロップ文字認識結果検索部 ２１ 映像蓄積部 ３１ 映像検索情報入力記憶部 ３２ 映像検索部 ３３ 映像表示部 ３４ 映像表示制御部 Reference Signs List 1 telop character recognition / search terminal 2 video storage medium 3 video search terminal 4 input video 5, 6 TV signal line 7 data communication cable 11 moving image input storage unit 12 telop character frame detection unit 13 telop character area extraction unit 14 telop characters Recognition unit 15 Index file storage unit 16 Telop character recognition result search unit 21 Video storage unit 31 Video search information input storage unit 32 Video search unit 33 Video display unit 34 Video display control unit
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.6 識別記号 ＦＩ Ｇ０６Ｆ 15/401 ３１０Ａ (72)発明者 小倉 健司 東京都新宿区西新宿三丁目19番２号 日本 電信電話株式会社内 (72)発明者 高畑 実 東京都新宿区西新宿三丁目19番２号 日本 電信電話株式会社内──────────────────────────────────────────────────の Continued on the front page (51) Int.Cl. 6 Identification code FIG06F 15/401 310A (72) Inventor Kenji Ogura 3-2-1, Nishishinjuku, Shinjuku-ku, Tokyo Nippon Telegraph and Telephone Corporation (72 Inventor: Minoru Takahata Nippon Telegraph and Telephone Corporation, 3-19-2 Nishi Shinjuku, Shinjuku-ku, Tokyo
Claims (11)
し、テロップ文字が表示されているかどうか判断し、テ
ロップ文字が表示されているフレームに対して文字領域
の抽出、テロップ文字の認識処理を行うテロップ文字認
識方法。1. A method of determining whether a telop character is displayed for each frame of an input video signal, extracting a character area and recognizing a telop character for the frame displaying the telop character. Subtitle character recognition method.
文字の表示時のＩＤ情報として、認識処理対象のフレー
ムが入力された時点のＩＤ情報を含むインデックスファ
イルを生成する請求項１記載のテロップ文字認識方法。2. A telop character according to claim 1, wherein a recognition result of the telop character and an index file including ID information at the time when a frame to be recognized is input are generated as ID information at the time of displaying the telop character. Recognition method.
た時刻情報である請求項２記載のテロップ文字認識方
法。3. The telop character recognition method according to claim 2, wherein the ID information is time information when the frame is input.
する映像信号入力記憶手段と、 映像信号を映像蓄積媒体に入力し、入力した時点のＩＤ
情報を含む映像のデータベースを構成する映像情報蓄積
手段と、 前記映像信号入力記憶手段により入力された各フレーム
に対し、フレーム中にテロップ文字が表示されているか
どうかを判断し、テロップ文字が表示されていると判断
されたフレームに対してテロップ文字の領域を抽出し、
抽出された各テロップ文字領域を辞書データを用いて認
識することによりテロップ文字の文字コード化処理を行
うテロップ文字認識手段と、 前記テロップ文字認識手段により得られた文字コード
と、該文字コードが得られたフレームが前記入力記憶手
段に入力された時点のＩＤ情報を映像のインデックスフ
ァイルとして蓄積するインデックスファイル蓄積手段
と、 前記映像情報蓄積手段の中から所望の映像を検索するた
めの検索キーを文字コードで入力する映像検索情報入力
手段と、 前記インデックスファイル蓄積手段の中から前記映像検
索情報入力手段により入力された文字コードを検索する
テロップ文字認識結果検索手段と、 前記映像情報蓄積手段により構成される映像データベー
スの中から、前記テロップ文字認識結果検索手段により
得られた文字コードと対応するＩＤ情報を持つ映像を検
索する映像検索手段と、 映像を映像表示装置に表示する映像表示手段と、 前記映像検索手段により検索された映像を前記映像表示
手段に渡す映像表示制御手段を有する映像蓄積表示装
置。4. A video signal input storage means for inputting and storing a video signal in frame units, and an ID at the time when the video signal is input to a video storage medium and input.
Video information storage means constituting a video database including information; and for each frame input by the video signal input storage means, determine whether or not a telop character is displayed in the frame, and the telop character is displayed. Extract the telop character area for the frame determined to be
Telop character recognizing means for performing character code conversion processing on telop characters by recognizing each extracted telop character area using dictionary data; and a character code obtained by the telop character recognizing means. Index file storage means for storing the ID information at the time when the input frame is input to the input storage means as a video index file; and a search key for searching for a desired video from the video information storage means as a character. A video search information input unit for inputting a code, a telop character recognition result search unit for searching for a character code input by the video search information input unit from the index file storage unit, and the video information storage unit. Telop character recognition result search means from the video database Video search means for searching for a video having ID information corresponding to the obtained character code, video display means for displaying a video on a video display device, and displaying the video searched by the video search means to the video display means. A video storage and display device having a video display control means to pass.
入力記憶手段に蓄積された時刻情報である、請求項４記
載の装置。5. The apparatus according to claim 4, wherein said ID information is time information when said frame is stored in said video input storage means.
プ文字認識手段と前記インデックスファイル蓄積手段と
前記テロップ文字認識結果検索手段がテロップ文字認識
・検索端末を構成し、前記映像検索情報入力手段と前記
映像検索手段と前記映像表示手段と前記映像表示制御手
段が映像検索端末を構成する、請求項４記載の装置。6. The video signal input storage means, the telop character recognition means, the index file storage means and the telop character recognition result search means constitute a telop character recognition / search terminal, and the video search information input means and the The apparatus according to claim 4, wherein the video search means, the video display means, and the video display control means constitute a video search terminal.
された映像信号を、該映像信号が入力された時点のＩＤ
情報とともにファイルとして蓄積するハードディスクで
あり、前記映像表示制御手段は、映像検索時には検索結
果のＩＤ情報を前記テロップ文字認識・検索端末から受
け取り、受け取ったＩＤ情報と対応するＩＤ情報を持つ
映像を前記ハードディスクから受け取り、前記映像表示
手段上に表示する請求項４記載の装置。7. The video information storage medium stores a digitized video signal as an ID when the video signal is input.
A hard disk for storing as information and a file as a file, wherein the video display control means receives ID information of a search result from the telop character recognition / search terminal at the time of video search, and stores a video having ID information corresponding to the received ID information. 5. The apparatus according to claim 4, wherein said apparatus is received from a hard disk and displayed on said video display means.
Ｄ情報とともに蓄積するビデオテープレコーダであり、
前記映像表示制御手段は映像検索時には検索結果のＩＤ
情報を前記テロップ文字認識・検索端末から受け取り、
受け取ったＩＤ情報と対応するＩＤ情報を持つ映像から
頭出しを行い、前記映像表示手段上に表示する請求項４
記載の映像蓄積表示装置。8. The video information storage medium converts a video signal to an I signal.
A video tape recorder that stores along with D information,
The image display control means is configured to provide an ID of a search result when searching for an image.
Receiving information from the telop character recognition / search terminal,
5. A cueing is performed from a video having ID information corresponding to the received ID information, and displayed on the video display means.
An image storage and display device as described in the above.
前記映像検索端末がワークステーションまたはパソコ
ン、およびハードディスクである、請求項６記載の装
置。9. The apparatus according to claim 6, wherein the telop character recognition / search terminal and the video search terminal are a workstation or a personal computer and a hard disk.
憶する映像信号入力記憶手段と、 前記映像信号入力記憶手段により入力された各フレーム
に対し、フレーム中にテロップ文字が表示されているか
どうかを判断し、テロップ文字が表示されていると判断
されたフレームに対してのみテロップ文字の領域を抽出
し、抽出された各テロップ文字領域を辞書データを用い
て認識することによりテロップ文字の文字コード化処理
を行うテロップ文字認識手段と、 前記テロップ文字認識手段により得られた文字コード
と、該文字コードが得られたフレームが前記映像入力記
憶手段に入力された時点のＩＤ情報を映像インデックス
ファイルとして蓄積するインデックスファイル蓄積手段
を有するテロップ文字認識・検索端末。10. A video signal input storage means for inputting and storing a video signal in frame units, and for each frame input by said video signal input storage means, determining whether a telop character is displayed in the frame. Judgment, extracting the telop character area only for the frame for which the telop character is judged to be displayed, and recognizing each extracted telop character area using dictionary data to convert the telop character into a character code A telop character recognizing unit for performing processing, a character code obtained by the telop character recognizing unit, and ID information at the time when the frame in which the character code is obtained are input to the video input storage unit are stored as a video index file. A telop character recognizing / searching terminal having an index file storing means for performing the operation.
像データベースの中から所望の映像を検索するための検
索キーを文字コードで入力する映像検索情報入力手段
と、 前記インデックスファイル蓄積手段の中から前記映像検
索情報入力手段により入力された文字コードを検索する
テロップ文字認識結果検索手段と、 前記映像情報蓄積手段の中から、請求項１０中の前記テ
ロップ文字認識結果検索手段により得られた文字コード
と対応するＩＤ情報を持つ映像を検索する映像検索手段
と、 映像を映像表示装置に表示する映像表示手段と、 前記映像検索手段により指定された映像を前記映像表示
手段に渡す映像表示制御手段を有する映像検索端末。11. A video search information input unit for inputting a search key for searching for a desired video from a video database configured by a video information storage unit by a character code, and A telop character recognition result search means for searching for a character code input by a video search information input means, and a character code obtained by the telop character recognition result search means in claim 10 from among the video information storage means. Video search means for searching for a video having the corresponding ID information; video display means for displaying the video on a video display device; and video display control means for passing the video specified by the video search means to the video display means. Video search terminal.
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9334459A JPH11167583A (en) | 1997-12-04 | 1997-12-04 | Telop character recognition method, video storage display device, telop character recognition and retrieval terminal and video retrieval terminal |
| US09/204,957 US6366699B1 (en) | 1997-12-04 | 1998-12-03 | Scheme for extractions and recognitions of telop characters from video data |
| US09/967,431 US6501856B2 (en) | 1997-12-04 | 2001-09-28 | Scheme for extraction and recognition of telop characters from video data |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9334459A JPH11167583A (en) | 1997-12-04 | 1997-12-04 | Telop character recognition method, video storage display device, telop character recognition and retrieval terminal and video retrieval terminal |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH11167583A true JPH11167583A (en) | 1999-06-22 |
Family
ID=18277633
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP9334459A Pending JPH11167583A (en) | 1997-12-04 | 1997-12-04 | Telop character recognition method, video storage display device, telop character recognition and retrieval terminal and video retrieval terminal |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH11167583A (en) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1347455A2 (en) * | 2002-03-19 | 2003-09-24 | Kabushiki Kaisha Toshiba | Contents recording/playback apparatus and contents edit method |
| WO2005057431A1 (en) * | 2003-12-15 | 2005-06-23 | Matsushita Electric Industrial Co., Ltd. | Index imparting system using control signal |
| WO2006068269A1 (en) * | 2004-12-24 | 2006-06-29 | Nec Corporation | Video structurizing device and method |
| WO2006115174A1 (en) * | 2005-04-22 | 2006-11-02 | Matsushita Electric Industrial Co., Ltd. | Electronic dictionary device |
| JP2007521736A (en) * | 2003-07-03 | 2007-08-02 | 松下電器産業株式会社 | Video processing device, integrated circuit of video processing device, video processing method, and video processing program |
| WO2007111297A1 (en) | 2006-03-24 | 2007-10-04 | Nec Corporation | Video data indexing system, video data indexing method and program |
| JP2009159260A (en) * | 2007-12-26 | 2009-07-16 | Nec Corp | Video character detecting method, device and program |
| WO2019088592A1 (en) * | 2017-11-01 | 2019-05-09 | 삼성전자주식회사 | Electronic device and control method thereof |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0630367A (en) * | 1992-07-08 | 1994-02-04 | Nippon Telegr & Teleph Corp <Ntt> | Video image retrieval method and its device |
| JPH09128401A (en) * | 1995-10-27 | 1997-05-16 | Sharp Corp | Moving picture retrieval device and video-on-demand device |
| JPH09282324A (en) * | 1996-04-09 | 1997-10-31 | Nec Corp | Video retrieval system |
-
1997
- 1997-12-04 JP JP9334459A patent/JPH11167583A/en active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0630367A (en) * | 1992-07-08 | 1994-02-04 | Nippon Telegr & Teleph Corp <Ntt> | Video image retrieval method and its device |
| JPH09128401A (en) * | 1995-10-27 | 1997-05-16 | Sharp Corp | Moving picture retrieval device and video-on-demand device |
| JPH09282324A (en) * | 1996-04-09 | 1997-10-31 | Nec Corp | Video retrieval system |
Cited By (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1347455A3 (en) * | 2002-03-19 | 2004-12-22 | Kabushiki Kaisha Toshiba | Contents recording/playback apparatus and contents edit method |
| EP1347455A2 (en) * | 2002-03-19 | 2003-09-24 | Kabushiki Kaisha Toshiba | Contents recording/playback apparatus and contents edit method |
| JP2007521736A (en) * | 2003-07-03 | 2007-08-02 | 松下電器産業株式会社 | Video processing device, integrated circuit of video processing device, video processing method, and video processing program |
| JP4531546B2 (en) * | 2003-12-15 | 2010-08-25 | パナソニック株式会社 | Indexing system using control signals |
| WO2005057431A1 (en) * | 2003-12-15 | 2005-06-23 | Matsushita Electric Industrial Co., Ltd. | Index imparting system using control signal |
| JP2005204291A (en) * | 2003-12-15 | 2005-07-28 | Matsushita Electric Ind Co Ltd | Index-imparting system using control signal |
| US7873637B2 (en) | 2003-12-15 | 2011-01-18 | Panasonic Corporation | Automatically imparting an index by using various kinds of control signals |
| WO2006068269A1 (en) * | 2004-12-24 | 2006-06-29 | Nec Corporation | Video structurizing device and method |
| JPWO2006068269A1 (en) * | 2004-12-24 | 2008-08-07 | 日本電気株式会社 | Image structuring apparatus and method |
| US7949207B2 (en) | 2004-12-24 | 2011-05-24 | Nec Corporation | Video structuring device and method |
| US8126294B2 (en) | 2004-12-24 | 2012-02-28 | Nec Corporation | Video structuring device |
| WO2006115174A1 (en) * | 2005-04-22 | 2006-11-02 | Matsushita Electric Industrial Co., Ltd. | Electronic dictionary device |
| JPWO2007111297A1 (en) * | 2006-03-24 | 2009-08-13 | 日本電気株式会社 | Video data indexing system, video data indexing method and program |
| WO2007111297A1 (en) | 2006-03-24 | 2007-10-04 | Nec Corporation | Video data indexing system, video data indexing method and program |
| US8280195B2 (en) | 2006-03-24 | 2012-10-02 | Nec Corporation | Video data indexing system, video data indexing method and program |
| JP2009159260A (en) * | 2007-12-26 | 2009-07-16 | Nec Corp | Video character detecting method, device and program |
| WO2019088592A1 (en) * | 2017-11-01 | 2019-05-09 | 삼성전자주식회사 | Electronic device and control method thereof |
| US11367283B2 (en) | 2017-11-01 | 2022-06-21 | Samsung Electronics Co., Ltd. | Electronic device and control method thereof |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7949207B2 (en) | Video structuring device and method | |
| JP4905103B2 (en) | Movie playback device | |
| US7876381B2 (en) | Telop collecting apparatus and telop collecting method | |
| CN101438593B (en) | Video browsing based on thumbnail image | |
| US7215436B2 (en) | Device for generating a multimedia paper document | |
| JPH10320400A (en) | Method and device for retrieving video | |
| JP5135024B2 (en) | Apparatus, method, and program for notifying content scene appearance | |
| JP4814849B2 (en) | How to identify the frame | |
| US7743347B2 (en) | Paper-based interface for specifying ranges | |
| EP2026220A1 (en) | Keyword extraction method | |
| US20100209072A1 (en) | Method for creating a new summary of an audiovisual document that already includes a summary and reports and a receiver that can implement said method | |
| CN101547303B (en) | Imaging apparatus, character information association method and character information association system | |
| JPH11167583A (en) | Telop character recognition method, video storage display device, telop character recognition and retrieval terminal and video retrieval terminal | |
| JP2006115052A (en) | Content retrieval device and its input device, content retrieval system, content retrieval method, program and recording medium | |
| JPH1139343A (en) | Video retrieval device | |
| JP3524742B2 (en) | Video related information retrieval device | |
| JPH11331761A (en) | Method and device for automatically summarizing image and recording medium with the method recorded therewith | |
| JP2001119661A (en) | Dynamic image editing system and recording medium | |
| JP5105109B2 (en) | Search device and search system | |
| JP5120265B2 (en) | Preference program extraction device | |
| JP2004336808A (en) | Method and apparatus for searching video image | |
| JP2002014973A (en) | Video retrieving system and method, and recording medium with video retrieving program recorded thereon | |
| JP2006101324A (en) | Recording and reproducing apparatus and method | |
| JP3505375B2 (en) | Video recording method and apparatus, and recording medium recording video recording program | |
| JP2822885B2 (en) | Event recording device and event reproduction device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20040107 |