JP2007184853A - Video recording system - Google Patents

Video recording system Download PDF

Info

Publication number
JP2007184853A
JP2007184853A JP2006002752A JP2006002752A JP2007184853A JP 2007184853 A JP2007184853 A JP 2007184853A JP 2006002752 A JP2006002752 A JP 2006002752A JP 2006002752 A JP2006002752 A JP 2006002752A JP 2007184853 A JP2007184853 A JP 2007184853A
Authority
JP
Japan
Prior art keywords
video
data
recording
video data
search
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2006002752A
Other languages
Japanese (ja)
Inventor
Tetsuji Hashimo
哲司 羽下
Kazuya Sato
和也 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2006002752A priority Critical patent/JP2007184853A/en
Publication of JP2007184853A publication Critical patent/JP2007184853A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To obtain a video recording system which meets demand for extension of a video searching function without damaging real time properties required for a video recording function, and damaging securement of recording operation free from recording omission or the like. <P>SOLUTION: The video recording system includes: a video recorder 2 for recording video data in a video data recording part 12; and a video searching device 4 for analyzing video data output from a video recorder 2 to extract a moving object in video, generating track data representing the trajectory of the moving object and recording the track data in a track data recording part 25 and meanwhile, searching track data matching a search condition from the track data recording part 25 and specifying video data corresponding to the track data. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

この発明は、映像データを記録する機能と、検索条件に合致する映像を検索する機能とを備えている映像記録システムに関するものである。   The present invention relates to a video recording system having a function of recording video data and a function of searching for video that matches a search condition.

映像データを記録する機能と、検索条件に合致する映像を検索する機能とを備えている映像記録システムを構築するに際して、例えば、レコーダーなどの専用の映像記録装置をベースにして構築し、その映像記録装置に映像検索機能を組み込むアプローチが考えられる。
ここで、映像検索機能は、映像データを解析して映像内の移動物体を抽出し、その移動物体の軌跡を表す追跡データを生成する機能や、検索条件に合致する追跡データを検索する機能などを含むものである（例えば、特許文献１を参照）。 When constructing a video recording system having a function for recording video data and a function for searching for video that matches the search conditions, for example, the video recording system is constructed based on a dedicated video recording device such as a recorder. An approach to incorporate a video search function into the recording device is conceivable.
Here, the video search function analyzes video data, extracts moving objects in the video, generates tracking data representing the trajectory of the moving objects, and searches for tracking data that matches the search conditions, etc. (For example, refer to Patent Document 1).

このように、専用の映像記録装置をベースにして映像記録システムを構築する場合、一般的に、映像記録機能に求められるリアルタイム性や漏れのない記録動作などを保証することができる。
しかし、リアルタイム性や漏れのない記録動作などを保証するのに十分な演算リソースやメモリリソースが割り当てられるが、一般的に機能の拡張性などは考慮されないため、これらの演算リソースやメモリリソースには余裕がなく、新たな機能の追加や機能のバージョンアップを実施する余地はほとんどない。 As described above, when a video recording system is constructed based on a dedicated video recording apparatus, it is generally possible to guarantee real-time performance and a recording operation without omission required for the video recording function.
However, although sufficient computing resources and memory resources are allocated to guarantee real-time performance and recording operations without omissions, in general, extensibility of functions is not considered, so these computing resources and memory resources There is no room, and there is little room to add new functions or upgrade functions.

一方、映像データを記録する機能と、検索条件に合致する映像を検索する機能とを備えている映像記録システムを構築するに際して、例えば、パーソナルコンピュータなど、演算機能と豊富なデータ保存領域を有する汎用機器を用いて実現する方法がある。
しかし、パーソナルコンピュータなどの汎用機器を用いて実現する場合、新たな機能の追加や機能のバージョンアップなどを容易に実施することができるが、映像記録機能に求められるリアルタイム性や、漏れのない記録動作などを保証することができない。 On the other hand, when constructing a video recording system having a function of recording video data and a function of searching for video that matches the search conditions, for example, a general-purpose computer having a calculation function and abundant data storage areas such as a personal computer. There is a method that can be implemented using equipment.
However, when using a general-purpose device such as a personal computer, it is easy to add new functions or upgrade functions, but the real-time capability required for video recording functions and recording without omissions. Operation cannot be guaranteed.

特開平１０−８４５２５号公報（段落番号［００１６］から［００１７］、図１）JP-A-10-84525 (paragraph numbers [0016] to [0017], FIG. 1)

従来の映像記録システムは以上のように構成されているので、レコーダーなどの専用の映像記録装置をベースにして構築する場合、新たな機能の追加や機能のバージョンアップを実施する余地がほとんどなく、パーソナルコンピュータなどの汎用機器を用いて構築する場合、新たな機能の追加や機能のバージョンアップなどを容易に実施することができても、映像記録機能に求められるリアルタイム性や、漏れのない記録動作などを保証することができないなどの課題があった。   Since the conventional video recording system is configured as described above, there is almost no room to add new functions or upgrade functions when building based on a dedicated video recording device such as a recorder. When building with a general-purpose device such as a personal computer, even if new functions can be added or functions can be easily upgraded, the real-time performance required for video recording functions and recording operations without omissions are required. There were problems such as being unable to guarantee.

この発明は上記のような課題を解決するためになされたもので、映像記録機能に求められるリアルタイム性や、漏れのない記録動作保証などを損なうことなく、映像検索機能の拡張に対応することができる映像記録システムを得ることを目的とする。   The present invention has been made to solve the above-described problems, and can support the expansion of the video search function without impairing the real-time property required for the video recording function and the guarantee of the recording operation without omission. The purpose is to obtain a video recording system that can be used.

この発明に係る映像記録システムは、映像データを映像データ記録手段に記録する映像記録装置の他に、その映像記録装置から出力された映像データを解析して映像内の移動物体を抽出し、その移動物体の軌跡を表す追跡データを生成して、その追跡データを追跡データ記録手段に記録する一方、その追跡データ記録手段から検索条件に合致する追跡データを検索し、その追跡データに対応する映像データを特定する映像検索装置を設けるようにしたものである。   The video recording system according to the present invention extracts the moving object in the video by analyzing the video data output from the video recording device in addition to the video recording device for recording the video data in the video data recording means, The tracking data representing the trajectory of the moving object is generated, and the tracking data is recorded in the tracking data recording means, while the tracking data that matches the search condition is searched from the tracking data recording means, and the video corresponding to the tracking data A video search device for specifying data is provided.

この発明によれば、映像データを映像データ記録手段に記録する映像記録装置の他に、その映像記録装置から出力された映像データを解析して映像内の移動物体を抽出し、その移動物体の軌跡を表す追跡データを生成して、その追跡データを追跡データ記録手段に記録する一方、その追跡データ記録手段から検索条件に合致する追跡データを検索し、その追跡データに対応する映像データを特定する映像検索装置を設けるように構成したので、映像記録機能に求められるリアルタイム性や、漏れのない記録動作保証などを損なうことなく、映像検索機能の拡張に対応することができる効果がある。   According to the present invention, in addition to the video recording device that records the video data in the video data recording means, the video data output from the video recording device is analyzed to extract the moving object in the video, and the moving object Generates tracking data representing the trajectory and records the tracking data in the tracking data recording means, while searching the tracking data recording means for tracking data that matches the search conditions and identifies the video data corresponding to the tracking data Therefore, there is an effect that it is possible to cope with the expansion of the video search function without impairing the real-time property required for the video recording function and the guarantee of the recording operation without omission.

実施の形態１．
図１はこの発明の実施の形態１による映像記録システムを示す構成図であり、図において、映像提供装置１は例えばカメラ、ビデオ、ハードディスク、ネットワークなど、映像データを配信することが可能な装置である。
映像記録装置２は映像提供装置１から配信される映像データを入力して、その映像データをメモリに記録する一方、そのメモリに記録されている映像データを読み出して、その映像データを出力する装置である。
映像表示装置３は映像記録装置２から出力された映像データにしたがって映像を表示する装置である。
映像検索装置４は映像記録装置２から出力された映像データを解析して映像内の移動物体を抽出し、その移動物体の軌跡を表す追跡データを生成して、その追跡データをメモリに記録する一方、そのメモリから検索条件に合致する追跡データを検索し、その追跡データに対応する映像データを特定する装置である。
なお、映像記録装置２と映像検索装置４は別個独立の装置であり、その映像記録装置２と映像検索装置４は取り外し自在に接続されている。 Embodiment 1 FIG.
FIG. 1 is a block diagram showing a video recording system according to Embodiment 1 of the present invention. In the figure, a video providing apparatus 1 is an apparatus capable of distributing video data, such as a camera, video, hard disk, and network. is there.
The video recording device 2 receives video data distributed from the video providing device 1, records the video data in a memory, reads out the video data recorded in the memory, and outputs the video data It is.
The video display device 3 is a device that displays video according to the video data output from the video recording device 2.
The video search device 4 analyzes the video data output from the video recording device 2 to extract a moving object in the video, generates tracking data representing the locus of the moving object, and records the tracking data in a memory. On the other hand, it is a device that searches the memory for tracking data that matches the search conditions and identifies video data corresponding to the tracking data.
The video recording device 2 and the video search device 4 are separate and independent devices, and the video recording device 2 and the video search device 4 are detachably connected.

映像記録装置２の映像入力部１１は映像提供装置１から配信される映像データを入力し、その映像データに対する圧縮処理などのエンコード処理を実施する。
映像記録装置２の映像データ記録部１２は映像入力部１１によるエンコード処理後の映像データを記録するメモリである。なお、映像入力部１１及び映像データ記録部１２から映像データ記録手段が構成されている。
映像記録装置２の映像読出部１３は映像データ記録部１２に記録されている映像データを読み出して、その映像データに対する圧縮解除処理などのデコード処理を実施し、デコード処理後の映像データを映像表示装置３又は映像検索装置４に出力する。
また、映像読出部１３は映像検索装置４の映像検索部２７から後述するインデックス情報を受けると、映像データ記録部１２に記録されている映像データの中から、そのインデックス情報に対応する映像データを読み出し、その映像データを映像表示装置３又は映像検索装置４の２次映像表示部２９に出力する。
なお、映像読出部１３は映像データ読出手段を構成している。 The video input unit 11 of the video recording device 2 inputs video data distributed from the video providing device 1 and performs encoding processing such as compression processing on the video data.
The video data recording unit 12 of the video recording device 2 is a memory that records video data after the encoding process by the video input unit 11. The video input unit 11 and the video data recording unit 12 constitute video data recording means.
The video reading unit 13 of the video recording device 2 reads the video data recorded in the video data recording unit 12, performs decoding processing such as decompression processing on the video data, and displays the video data after the decoding processing as video. The data is output to the device 3 or the video search device 4.
When the video reading unit 13 receives index information (to be described later) from the video search unit 27 of the video search device 4, the video data corresponding to the index information is recorded from the video data recorded in the video data recording unit 12. The video data is read and output to the secondary video display unit 29 of the video display device 3 or the video search device 4.
The video reading unit 13 constitutes video data reading means.

映像検索装置４の解析用映像入力部２１は映像記録装置２の映像データ記録部１２に記録されている過去の映像データの中から、予め設定された検索期間の映像データを入力する処理を実施する。ただし、検索期間の設定は、ユーザが例えば検索条件入力部２６を操作することにより自由に行えるものとする。
なお、解析用映像入力部２１はユーザにより現在の映像データを入力する設定がなされた場合、映像提供装置１から現在配信されている映像データを映像記録装置２を介して入力する。 The analysis video input unit 21 of the video search device 4 performs a process of inputting video data of a preset search period from past video data recorded in the video data recording unit 12 of the video recording device 2. To do. However, the search period can be freely set by the user operating the search condition input unit 26, for example.
Note that the analysis video input unit 21 inputs the video data currently distributed from the video providing device 1 via the video recording device 2 when the user is set to input the current video data.

映像検索装置４の２次映像データ記録部２２は解析用映像入力部２１により入力された映像データを記録するメモリである。なお、２次映像データ記録部２２は映像データ格納手段を構成している。
映像検索装置４の移動物体抽出部２３は解析用映像入力部２１により入力された映像データを解析して映像内の移動物体を抽出する処理を実施する。なお、移動物体抽出部２３は移動物体抽出手段を構成している。
映像検索装置４の追跡データ生成部２４は移動物体抽出部２３により抽出された移動物体の出現位置、出現時間、消失位置、消失時間、面積、幅、高さ、重心の軌跡、移動ベクトル、速度、滞留時間などの特徴量を抽出することにより、移動物体の軌跡を表す追跡データを生成する処理を実施する。なお、追跡データ生成部２４は追跡データ生成手段を構成している。
映像検索装置４の追跡データ記録部２５は追跡データ生成部２４により生成された追跡データを記録するとともに、その追跡データに対応する映像データのインデックス情報（例えば、移動物体が出現して消失までの映像データを特定する情報）を記録するメモリである。なお、追跡データ記録部２５は追跡データ記録手段を構成している。 The secondary video data recording unit 22 of the video search device 4 is a memory that records the video data input by the analysis video input unit 21. The secondary video data recording unit 22 constitutes video data storage means.
The moving object extraction unit 23 of the video search device 4 analyzes the video data input by the analysis video input unit 21 and performs a process of extracting a moving object in the video. The moving object extraction unit 23 constitutes a moving object extraction unit.
The tracking data generation unit 24 of the video search device 4 includes the appearance position, appearance time, disappearance position, disappearance time, area, width, height, locus of the center of gravity, movement vector, speed of the moving object extracted by the moving object extraction unit 23. Then, a process of generating tracking data representing the trajectory of the moving object is performed by extracting a feature amount such as a residence time. The tracking data generation unit 24 constitutes tracking data generation means.
The tracking data recording unit 25 of the video search device 4 records the tracking data generated by the tracking data generation unit 24 and index information of the video data corresponding to the tracking data (for example, the moving object appears and disappears until it disappears). This is a memory for recording video information). The tracking data recording unit 25 constitutes tracking data recording means.

映像検索装置４の検索条件入力部２６はユーザが再生を希望する映像の検索条件として、例えば、移動物体の通過領域、移動物体の出現・消失領域などの条件の入力を受け付けるユーザインタフェースである。
映像検索装置４の映像検索部２７は追跡データ記録部２５に記録されている追跡データの中から、検索条件入力部２６により入力された検索条件に合致する追跡データを検索し、その追跡データに対応する映像データのインデックス情報を映像記録装置２の映像読出部１３又は２次映像読出部２８に出力することにより、その映像データの出力を指示する。なお、検索条件入力部２６及び映像検索部２７から映像データ特定手段が構成されている。 The search condition input unit 26 of the video search device 4 is a user interface that accepts input of conditions such as a moving object passage area and a moving object appearance / disappearance area as a video search condition that the user desires to reproduce.
The video search unit 27 of the video search device 4 searches the tracking data recorded in the tracking data recording unit 25 for tracking data that matches the search conditions input by the search condition input unit 26, and uses the tracking data as the tracking data. By outputting the index information of the corresponding video data to the video reading unit 13 or the secondary video reading unit 28 of the video recording device 2, the output of the video data is instructed. The search condition input unit 26 and the video search unit 27 constitute video data specifying means.

映像検索装置４の２次映像読出部２８は２次映像データ記録部２２に記録されている映像データの中から、映像検索部２７から出力されたインデックス情報に対応する映像データを読み出し、その映像データを映像表示装置３又は２次映像表示部２９に出力する。
映像検索装置４の２次映像表示部２９は映像記録装置２又は２次映像読出部２８から出力された映像データにしたがって映像を表示する。 The secondary video reading unit 28 of the video search device 4 reads the video data corresponding to the index information output from the video search unit 27 from the video data recorded in the secondary video data recording unit 22, and the video. The data is output to the video display device 3 or the secondary video display unit 29.
The secondary video display unit 29 of the video search device 4 displays a video according to the video data output from the video recording device 2 or the secondary video reading unit 28.

次に動作について説明する。
映像記録装置２の映像入力部１１は、映像提供装置１から配信される映像データを入力し、その映像データに対する圧縮処理などのエンコード処理を実施してから、エンコード処理後の映像データを映像データ記録部１２に記録する。
映像記録装置２の映像読出部１３は、例えば、ユーザから映像の表示指令を受けると、映像データ記録部１２に記録されている映像データを読み出して、その映像データに対する圧縮解除処理などのデコード処理を実施し、デコード処理後の映像データを映像表示装置３に出力する。
これにより、映像表示装置３が映像データを再生することにより、映像が映像表示装置３に表示される。 Next, the operation will be described.
The video input unit 11 of the video recording device 2 inputs video data distributed from the video providing device 1, performs encoding processing such as compression processing on the video data, and then converts the video data after the encoding processing to video data. Records in the recording unit 12.
For example, when receiving a video display command from a user, the video reading unit 13 of the video recording device 2 reads the video data recorded in the video data recording unit 12 and performs decoding processing such as decompression processing on the video data. And the decoded video data is output to the video display device 3.
As a result, the video display device 3 reproduces the video data, whereby the video is displayed on the video display device 3.

映像検索装置４の解析用映像入力部２１は、例えば、ユーザが検索条件入力部２６を操作して、映像データの検索期間を設定すると、その検索期間を映像記録装置２の映像読出部１３に出力することにより、映像記録装置２の映像読出部１３からその検索期間の映像データを入力し、その映像データを２次映像データ記録部２２に記録する。また、その検索期間の映像データを移動物体抽出部２３に出力する。
なお、映像記録装置２の映像読出部１３は、映像検索装置４から映像データの検索期間を受けると、映像データ記録部１２に記録されている映像データの中から、その検索期間の映像データを読み出して、その映像データに対する圧縮解除処理などのデコード処理を実施し、デコード処理後の映像データを映像検索装置４に出力する。 For example, when the user operates the search condition input unit 26 to set a video data search period, the analysis video input unit 21 of the video search apparatus 4 sets the search period to the video reading unit 13 of the video recording apparatus 2. By outputting, the video data of the search period is input from the video reading unit 13 of the video recording device 2, and the video data is recorded in the secondary video data recording unit 22. In addition, the video data of the search period is output to the moving object extraction unit 23.
When the video reading unit 13 of the video recording device 2 receives the video data search period from the video search device 4, the video data of the search period is extracted from the video data recorded in the video data recording unit 12. The video data is read out, decoding processing such as decompression processing is performed on the video data, and the video data after decoding processing is output to the video search device 4.

映像検索装置４の移動物体抽出部２３は、解析用映像入力部２１から映像データを受けると、その映像データを解析して映像内の移動物体を抽出する。
移動物体の抽出処理は、例えば、上記の特許文献１などに開示されている公知の技術を利用すればよいため、ここでは、詳細な説明を省略する。 When receiving the video data from the analysis video input unit 21, the moving object extraction unit 23 of the video search device 4 analyzes the video data and extracts a moving object in the video.
For the moving object extraction processing, for example, a known technique disclosed in the above-described Patent Document 1 may be used, and thus detailed description thereof is omitted here.

映像検索装置４の追跡データ生成部２４は、移動物体抽出部２３が移動物体を抽出すると、その移動物体の出現位置、出現時間、消失位置、消失時間、面積、幅、高さ、重心の軌跡、移動ベクトル、速度、滞留時間などの特徴量を抽出することにより、移動物体の軌跡を表す追跡データを生成する。
追跡データの生成も、例えば、上記の特許文献１などに開示されている公知の技術を利用すればよいため、ここでは、詳細な説明を省略する。
ここで、図２は検索期間の映像データに係る映像シーケンスＡから移動物体の映像シーケンスＢが生成され、移動物体の映像シーケンスＢから追跡データＣ１，Ｃ２が生成されている様子を示している。 When the moving object extraction unit 23 extracts the moving object, the tracking data generation unit 24 of the video search device 4 extracts the moving object's appearance position, appearance time, disappearance position, disappearance time, area, width, height, and locus of the center of gravity. The tracking data representing the trajectory of the moving object is generated by extracting feature quantities such as the movement vector, speed, and dwell time.
For generation of the tracking data, for example, a known technique disclosed in the above-described Patent Document 1 may be used, and thus detailed description thereof is omitted here.
Here, FIG. 2 shows a state in which a moving object video sequence B is generated from the video sequence A related to the video data in the search period, and tracking data C1 and C2 are generated from the moving object video sequence B.

映像検索装置４の追跡データ生成部２４は、上記のようにして、追跡データＣ１，Ｃ２を生成すると、その追跡データＣ１，Ｃ２を追跡データ記録部２５に記録するとともに、その追跡データＣ１，Ｃ２の生成元である移動物体の映像シーケンスＢに対応する映像シーケンスＡのインデックス情報（例えば、移動物体が出現して消失までの映像データを特定する情報）を追跡データ記録部２５に記録する。   When the tracking data generation unit 24 of the video search device 4 generates the tracking data C1 and C2 as described above, the tracking data C1 and C2 are recorded in the tracking data recording unit 25, and the tracking data C1 and C2 are recorded. The index information of the video sequence A corresponding to the video sequence B of the moving object that is the generation source (for example, information specifying video data until the moving object appears and disappears) is recorded in the tracking data recording unit 25.

映像検索装置４の映像検索部２７は、ユーザが検索条件入力部２６を操作して、映像の検索条件として、例えば、移動物体の通過領域Ｄを指定すると、追跡データ記録部２５に記録されている追跡データＣ１，Ｃ２の中から、その検索条件に合致する追跡データを検索する。
即ち、映像検索部２７は、追跡データ記録部２５に記録されている追跡データＣ１，Ｃ２の中から、移動物体の通過領域Ｄを通過する追跡データＣ２を検索する。
映像検索部２７は、上記のように、検索条件に合致する追跡データＣ２を検索すると、追跡データ記録部２５に記録されている追跡データＣ２に対応する映像シーケンスＡのインデックス情報を映像記録装置２の映像読出部１３又は２次映像読出部２８に出力することにより、その映像データの出力を指示する。 The video search unit 27 of the video search device 4 is recorded in the tracking data recording unit 25 when the user operates the search condition input unit 26 and designates, for example, a moving object passage area D as the video search condition. The tracking data that matches the search condition is searched from the tracking data C1 and C2.
That is, the video search unit 27 searches the tracking data C1 and C2 recorded in the tracking data recording unit 25 for the tracking data C2 that passes through the passing area D of the moving object.
When the video search unit 27 searches for the tracking data C2 that matches the search condition as described above, the video recording device 2 obtains the index information of the video sequence A corresponding to the tracking data C2 recorded in the tracking data recording unit 25. Is output to the video reading unit 13 or the secondary video reading unit 28 to instruct the output of the video data.

映像記録装置２の映像読出部１３は、映像検索装置４の映像検索部２７からインデックス情報を受けると、映像データ記録部１２に記録されている映像データの中から、そのインデックス情報に対応する映像データを読み出し、その映像データを映像表示装置３又は映像検索装置４の２次映像表示部２９に出力する。
映像検索装置４の２次映像読出部２８は、映像検索部２７からインデックス情報を受けると、２次映像データ記録部２２に記録されている映像データの中から、そのインデックス情報に対応する映像データを読み出し、その映像データを映像表示装置３又は２次映像表示部２９に出力する。 When the video reading unit 13 of the video recording device 2 receives the index information from the video searching unit 27 of the video searching device 4, the video corresponding to the index information from the video data recorded in the video data recording unit 12. The data is read and the video data is output to the secondary video display unit 29 of the video display device 3 or the video search device 4.
When receiving the index information from the video search unit 27, the secondary video reading unit 28 of the video search device 4 selects video data corresponding to the index information from the video data recorded in the secondary video data recording unit 22. The video data is output to the video display device 3 or the secondary video display unit 29.

映像表示装置３は、映像記録装置２の映像読出部１３又は映像検索装置４の２次映像読出部２８から映像データを受けると、その映像データにしたがって映像を表示する。
映像検索装置４の２次映像表示部２９は、映像記録装置２の映像読出部１３又は２次映像読出部２８から映像データを受けると、その映像データにしたがって映像を表示する。 When receiving video data from the video reading unit 13 of the video recording device 2 or the secondary video reading unit 28 of the video search device 4, the video display device 3 displays a video according to the video data.
When receiving the video data from the video reading unit 13 or the secondary video reading unit 28 of the video recording device 2, the secondary video display unit 29 of the video search device 4 displays the video according to the video data.

以上で明らかなように、この実施の形態１によれば、映像データを映像データ記録部１２に記録する映像記録装置２の他に、その映像記録装置２から出力された映像データを解析して映像内の移動物体を抽出し、その移動物体の軌跡を表す追跡データを生成して、その追跡データを追跡データ記録部２５に記録する一方、その追跡データ記録部２５から検索条件に合致する追跡データを検索し、その追跡データに対応する映像データを特定する映像検索装置４を設けるように構成したので、映像記録機能に求められるリアルタイム性や、漏れのない記録動作保証などを損なうことなく、映像検索機能の拡張に対応することができる効果を奏する。   As apparent from the above, according to the first embodiment, in addition to the video recording device 2 that records video data in the video data recording unit 12, the video data output from the video recording device 2 is analyzed. A moving object in the video is extracted, tracking data representing the locus of the moving object is generated, and the tracking data is recorded in the tracking data recording unit 25, while the tracking data recording unit 25 performs tracking that matches the search condition. Since the video search device 4 for searching for data and specifying video data corresponding to the tracking data is provided, the real-time property required for the video recording function and the guarantee of the recording operation without omission are not impaired. There is an effect that the expansion of the video search function can be supported.

即ち、映像記録装置２と別個独立に映像検索装置４が設けられ、その映像記録装置２と映像検索装置４が取り外し自在に接続されているので、映像記録装置２の機能に影響を与えることなく、映像検索装置４における映像検索機能の拡張を図ることができる効果を奏する。
これにより、映像記録装置２と映像検索装置４の何れか一方を個別にアップグレードすることができる。また、既に映像記録装置２のみが設置されている映像記録システムに対して、映像検索装置４を後付けして、映像記録システムをアップグレードすることもできる。
なお、映像記録装置２及び映像検索装置４の外部インターフェースの整合が取れていれば、それぞれを別個のシステムに変更することも可能である。 That is, since the video search device 4 is provided independently of the video recording device 2 and the video recording device 2 and the video search device 4 are detachably connected, the function of the video recording device 2 is not affected. The video search function in the video search device 4 can be expanded.
Thereby, any one of the video recording device 2 and the video search device 4 can be individually upgraded. Further, the video recording system can be upgraded by retrofitting the video search device 4 to the video recording system in which only the video recording device 2 is already installed.
If the external interfaces of the video recording device 2 and the video search device 4 are consistent, it is possible to change them to separate systems.

この実施の形態１では、映像の検索条件として、例えば、移動物体の通過領域Ｄが指定されているものについて示したが、図３に示すように、映像の検索条件として、例えば、移動物体の出現領域Ｅ１と移動物体の消失領域Ｅ２が指定された場合、追跡データ記録部２５に記録されている追跡データの中から、映像検索部２７が出現領域Ｅ１から現れて、消失領域Ｅ２で消えている移動物体の追跡データＣを検索するようにする。   In the first embodiment, as the video search condition, for example, the moving object passing area D is designated. However, as shown in FIG. 3, as the video search condition, for example, the moving object When the appearance area E1 and the disappearance area E2 of the moving object are designated, the video search unit 27 appears from the appearance area E1 and disappears in the disappearance area E2 from the tracking data recorded in the tracking data recording unit 25. The tracking data C of the moving object is searched.

実施の形態２．
上記実施の形態１では、映像検索装置４が２次映像データ記録部２２と２次映像読出部２８を実装しているものについて示したが、２次映像データ記録部２２と２次映像読出部２８は必須の構成要素ではなく、図４に示すように、映像検索装置４が２次映像データ記録部２２と２次映像読出部２８を実装しないようにしてもよい。 Embodiment 2. FIG.
In the first embodiment, the video search device 4 has been mounted with the secondary video data recording unit 22 and the secondary video reading unit 28. However, the secondary video data recording unit 22 and the secondary video reading unit are described. 28 is not an essential component, and as shown in FIG. 4, the video search device 4 may not include the secondary video data recording unit 22 and the secondary video reading unit 28.

実施の形態３．
上記実施の形態１では、映像提供装置１と映像記録装置２と映像検索装置４が直列に接続されているものについて示したが（図５を参照）、図６に示すように、１台の映像記録装置２に複数台の映像検索装置４を接続するようにしてもよい。
この場合、複数台の映像検索装置４から別個の検索期間が映像記録装置２に出力され、映像記録装置２から別個の映像データが複数台の映像検索装置４に出力されるようになる。
この実施の形態３によれば、複数のユーザが同時に映像を鑑賞することができる効果を奏する。 Embodiment 3 FIG.
In the first embodiment, the video providing device 1, the video recording device 2, and the video search device 4 are connected in series (see FIG. 5), but as shown in FIG. A plurality of video search devices 4 may be connected to the video recording device 2.
In this case, separate search periods are output from the plurality of video search devices 4 to the video recording device 2, and separate video data are output from the video recording device 2 to the multiple video search devices 4.
According to the third embodiment, there is an effect that a plurality of users can view the video at the same time.

実施の形態４．
上記実施の形態１では、映像提供装置１と映像記録装置２と映像検索装置４が直列に接続されているものについて示したが（図５を参照）、図７に示すように、複数台の映像記録装置２に１台の映像検索装置４を接続するようにしてもよい。
この場合、１台の映像検索装置４から映像データの検索期間が複数台の映像記録装置２に出力され、複数台の映像記録装置２から映像データが１台の映像検索装置４に出力されるようになる。
この実施の形態４によれば、数多くの映像提供装置１から配信される映像データを再生することができる効果を奏する。 Embodiment 4 FIG.
In the first embodiment, the video providing device 1, the video recording device 2, and the video search device 4 are connected in series (see FIG. 5). As shown in FIG. One video search device 4 may be connected to the video recording device 2.
In this case, the video data search period is output from one video search device 4 to a plurality of video recording devices 2, and the video data is output from the plurality of video recording devices 2 to one video search device 4. It becomes like this.
According to the fourth embodiment, there is an effect that the video data distributed from many video providing apparatuses 1 can be reproduced.

実施の形態５．
上記実施の形態３では、１台の映像記録装置２に複数台の映像検索装置４を接続し、上記実施の形態４では、複数台の映像記録装置２に１台の映像検索装置４を接続するものについて示したが、図８に示すように、ネットワーク５を介して、複数台の映像記録装置２と複数台の映像検索装置４を接続するようにしてもよい。 Embodiment 5 FIG.
In the third embodiment, a plurality of video search devices 4 are connected to one video recording device 2, and in the fourth embodiment, one video search device 4 is connected to a plurality of video recording devices 2. As shown in FIG. 8, as shown in FIG. 8, a plurality of video recording devices 2 and a plurality of video search devices 4 may be connected via a network 5.

この発明の実施の形態１による映像記録システムを示す構成図である。It is a block diagram which shows the video recording system by Embodiment 1 of this invention. 映像検索装置の映像検索部における追跡データの検索処理を示す説明図である。It is explanatory drawing which shows the search process of the tracking data in the video search part of a video search device. 映像検索装置の映像検索部における追跡データの検索処理を示す説明図である。It is explanatory drawing which shows the search process of the tracking data in the video search part of a video search device. この発明の実施の形態２による映像記録システムを示す構成図である。It is a block diagram which shows the video recording system by Embodiment 2 of this invention. 映像提供装置と映像記録装置と映像検索装置の接続形態を示す構成図である。It is a block diagram which shows the connection form of a video provision apparatus, a video recording apparatus, and a video search apparatus. この発明の実施の形態３による映像記録システムの接続形態を示す構成図である。It is a block diagram which shows the connection form of the video recording system by Embodiment 3 of this invention. この発明の実施の形態４による映像記録システムの接続形態を示す構成図である。It is a block diagram which shows the connection form of the video recording system by Embodiment 4 of this invention. この発明の実施の形態５による映像記録システムの接続形態を示す構成図である。It is a block diagram which shows the connection form of the video recording system by Embodiment 5 of this invention.

符号の説明Explanation of symbols

１ 映像提供装置、２ 映像記録装置、３ 映像表示装置、４ 映像検索装置、５ ネットワーク、１１ 映像入力部（映像データ記録手段）、１２ 映像データ記録部（映像データ記録手段）、１３ 映像読出部（映像データ読出手段）、２１ 解析用映像入力部、２２ ２次映像データ記録部（映像データ格納手段）、２３ 移動物体抽出部（移動物体抽出手段）、２４ 追跡データ生成部（追跡データ生成手段）、２５ 追跡データ記録部（追跡データ記録手段）、２６ 検索条件入力部（映像データ特定手段）、２７ 映像検索部（映像データ特定手段）、２８ ２次映像読出部、２９ ２次映像表示部。   DESCRIPTION OF SYMBOLS 1 Video providing device, 2 Video recording device, 3 Video display device, 4 Video search device, 5 Network, 11 Video input part (video data recording means), 12 Video data recording part (video data recording means), 13 Video reading part (Video data reading means), 21 analysis video input section, 22 secondary video data recording section (video data storage means), 23 moving object extraction section (moving object extraction means), 24 tracking data generation section (tracking data generation means) ), 25 Tracking data recording unit (tracking data recording unit), 26 Search condition input unit (video data specifying unit), 27 Video searching unit (video data specifying unit), 28 Secondary video reading unit, 29 Secondary video display unit .

Claims (5)

映像データを入力して、上記映像データを記録する映像データ記録手段と、上記映像データ記録手段に記録されている映像データを読み出して、上記映像データを出力する映像データ読出手段とを有する映像記録装置と、上記映像記録装置の映像データ読出手段から出力された映像データを解析して映像内の移動物体を抽出する移動物体抽出手段と、上記移動物体抽出手段により抽出された移動物体の軌跡を表す追跡データを生成する追跡データ生成手段と、上記追跡データ生成手段により生成された追跡データを記録する追跡データ記録手段と、上記追跡データ記録手段に記録されている追跡データの中から検索条件に合致する追跡データを検索し、上記追跡データに対応する映像データを特定する映像データ特定手段とを有する映像検索装置とを備えた映像記録システム。   Video recording device having video data recording means for inputting video data and recording the video data; and video data reading means for reading the video data recorded in the video data recording means and outputting the video data Apparatus, moving object extracting means for extracting moving objects in the video by analyzing the video data output from the video data reading means of the video recording apparatus, and the locus of the moving object extracted by the moving object extracting means A tracking data generating means for generating tracking data to be represented, a tracking data recording means for recording the tracking data generated by the tracking data generating means, and a search condition from the tracking data recorded in the tracking data recording means Video search having video data specifying means for searching for matching tracking data and specifying video data corresponding to the tracking data Video recording system including a location. 映像検索装置の追跡データ記録手段が追跡データを記録する際、上記追跡データに対応する映像データのインデックス情報を記録し、上記映像検索装置の映像データ特定手段が映像記録装置の映像データ記録手段に記録されている映像データの中から上記インデックス情報に係る映像データを特定することを特徴とする請求項１記載の映像記録システム。   When the tracking data recording means of the video search device records the tracking data, the index information of the video data corresponding to the tracking data is recorded, and the video data specifying means of the video search device is recorded in the video data recording means of the video recording device. 2. The video recording system according to claim 1, wherein video data related to the index information is specified from the recorded video data. 映像検索装置が映像記録装置の映像データ読出手段から出力された映像データを格納する映像データ格納手段を有し、上記映像検索装置の追跡データ記録手段が追跡データを記録する際、上記追跡データに対応する映像データのインデックス情報を記録し、上記映像検索装置の映像データ特定手段が上記映像データ格納手段に格納されている映像データの中から上記インデックス情報に係る映像データを特定することを特徴とする請求項１記載の映像記録システム。   The video search apparatus has video data storage means for storing video data output from the video data reading means of the video recording apparatus, and the tracking data recording means of the video search apparatus records the tracking data when the tracking data is recorded. The index information of the corresponding video data is recorded, and the video data specifying means of the video search device specifies the video data related to the index information from the video data stored in the video data storage means. The video recording system according to claim 1. 映像記録装置と映像検索装置が別個独立の装置であり、上記映像記録装置と上記映像検索装置が取り外し自在に接続されていることを特徴とする請求項１から請求項３のうちのいずれか１項記載の映像記録システム。   The video recording device and the video search device are separate and independent devices, and the video recording device and the video search device are detachably connected to each other. The video recording system according to item. 少なくとも１以上の映像記録装置と少なくとも１以上の映像検索装置とが相互に接続されていることを特徴とする請求項１から請求項４のうちのいずれか１項記載の映像記録システム。   5. The video recording system according to claim 1, wherein at least one video recording device and at least one video search device are connected to each other.
JP2006002752A 2006-01-10 2006-01-10 Video recording system Pending JP2007184853A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006002752A JP2007184853A (en) 2006-01-10 2006-01-10 Video recording system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006002752A JP2007184853A (en) 2006-01-10 2006-01-10 Video recording system

Publications (1)

Publication Number Publication Date
JP2007184853A true JP2007184853A (en) 2007-07-19

Family

ID=38340540

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006002752A Pending JP2007184853A (en) 2006-01-10 2006-01-10 Video recording system

Country Status (1)

Country Link
JP (1) JP2007184853A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4874425B1 (en) * 2010-12-28 2012-02-15 オリンパスイメージング株式会社 Reproducing apparatus and imaging apparatus

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004064438A (en) * 2002-07-29 2004-02-26 Toshiba Corp Monitoring system and method for monitoring
WO2005002228A1 (en) * 2003-06-27 2005-01-06 Sang Rae Park Portable surveillance camera and personal surveillance system using the same
JP2005210573A (en) * 2004-01-26 2005-08-04 Mitsubishi Electric Corp Video image display system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004064438A (en) * 2002-07-29 2004-02-26 Toshiba Corp Monitoring system and method for monitoring
WO2005002228A1 (en) * 2003-06-27 2005-01-06 Sang Rae Park Portable surveillance camera and personal surveillance system using the same
JP2005210573A (en) * 2004-01-26 2005-08-04 Mitsubishi Electric Corp Video image display system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4874425B1 (en) * 2010-12-28 2012-02-15 オリンパスイメージング株式会社 Reproducing apparatus and imaging apparatus

Similar Documents

Publication Publication Date Title
TWI579838B (en) Automatic generation of compilation videos
Gygli et al. Video summarization by learning submodular mixtures of objectives
JP5087867B2 (en) Information processing apparatus and method, and program
TW201545120A (en) Automatic generation of compilation videos
WO2011125322A1 (en) Apparatus and method for identifying a still image contained in moving image contents
CN113709561A (en) Video editing method, device, equipment and storage medium
KR20070008238A (en) Apparatus and method of music synchronization based on dancing
JP2008017042A (en) Information processing apparatus and method, and program
KR20070118635A (en) Summarization of audio and/or visual data
JP2009201041A (en) Content retrieval apparatus, and display method thereof
KR100335817B1 (en) Method for representing abstract/detail relationship among segments in order to provide efficient browsing of video stream and video browsing method using the abstract/detail relationships among segments
JP4504452B1 (en) Video viewing apparatus, video playback control method, and recording / playback program
JP2003259316A (en) Stream processing system and stream processing program
JP2014109988A (en) Motion video generation device and motion video generation program
JP2007184853A (en) Video recording system
JP5619214B2 (en) Image processing apparatus, image processing program, and image processing method
JP2003208083A (en) Method and device for generating teaching material, teaching material generating program, and storage medium with the teaching material generating program stored therein
US11128927B2 (en) Content providing server, content providing terminal, and content providing method
JP2005165514A (en) Application display device
JP2009283020A (en) Recording apparatus, reproducing apparatus, and program
JP2020080115A (en) Thumbnail output device, thumbnail output method, and thumbnail output program
JP2009081883A (en) Information processor, method, and program
JP2002268667A (en) Presentation system and control method therefor
JP2020161162A (en) Information processing apparatus, information processing method, and program
JP2008271587A (en) Image reproducing device and method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071003

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20071005

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20080626

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091208

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100406