JP2004247913A

JP2004247913A - Imaging apparatus, video data storage device, and imaging system

Info

Publication number: JP2004247913A
Application number: JP2003034941A
Authority: JP
Inventors: Miyuki Kobayashi; 幸小林
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2003-02-13
Filing date: 2003-02-13
Publication date: 2004-09-02

Abstract

<P>PROBLEM TO BE SOLVED: To provide an imaging apparatus capable of simply extracting video data in a range where a desired object to be photographed is photographed from photographed video data for utilization, and to provide a video data storage device and an imaging system. <P>SOLUTION: There are provided: an object-to-be photographed discrimination means for setting discrimination information for discriminating the object to be photographed and discriminating a specific object to be photographed from the video data captured by an imaging means; a video range specification means for specifying the range of the video data where the identified object to be photographed is imaged; an identification information generation means for identifying the video data where the object to be photographed is photographed based on generated video range information; a video data storage means for storing the video data and identification information generated by the identification information generation means; a video data extraction means for extracting the video data where the specific object to be photographed is imaged from the video data stored in the video data storage means based on the identification information generated by the identification information generation means; and a video data output means for outputting the extracted video data. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、撮像装置及び映像データ蓄積装置及び撮像システムに関する。詳しくは、撮影した映像データの中から所望の撮影対象物が撮影されている範囲の映像データを簡単に抽出して利用することができる撮像装置及び映像データ蓄積装置及び撮像システムに関する。
【０００２】
【従来の技術】
従来技術において、音声や映像などのデジタルデータの編集作業を容易にするために、きめ細かで且つ使い易い編集情報（メタ情報）をこれらデジタルデータと共に記録する方法がいくつか提案されており、また、ＩＳＯ（ＩｎｔｅｒｎａｔｉｏｎａｌＯｒｇａｎｉｚａｔｉｏｎｆｏｒＳｔａｎｄａｒｄｉｚａｔｉｏｎ／国際標準化機構）では、音声や映像などのデジタルデータやコンテンツ内容に関する記述方法などを規格化したＭＰＥＧ７（ＭｏｖｉｎｇＰｉｃｔｕｒｅＥｘｐｅｒｔｓＧｒｏｕｐＰｈａｓｅ７）等も策定されつつある。
【０００３】
そこで、このような技術を用いて、デジタルデータを生成する際に、このデジタルデータに関連したデータ関連情報を生成し、生成したデータ関連情報をデジタルデータとして記録したり、送出することができる機器なども考案されている（例えば、特許文献１参照。）。
【０００４】
【特許文献１】
特開２００２−１５２６５５号公報（第６−１１頁、図１）
【０００５】
【発明が解決しようとする課題】
しかしながら、例えば、複数台の撮像装置で撮影された映像データの中から、所望の撮影対象物が撮影されているシーン（映像データ）だけを抽出し、別の映像データとして編集したい場合、一旦、各撮像装置で撮像した映像データからそれぞれ所望の撮影対象物が撮影されているシーン（映像データ）のみを抽出し、更に、抽出したシーン（映像データ）を時系列に並べ直すというような編集作業が必要となり、映像データの編集・加工作業に手間がかかってしまうという問題がある。
【０００６】
従って、撮影した映像データの中から所望の撮影対象物が撮影されている範囲の映像データを簡単に抽出して利用することができる撮像装置及び映像データ蓄積装置及び撮像システムを提供することに解決しなければならない課題を有する。
【０００７】
【課題を解決するための手段】
前記課題を解決するため、本発明に係る撮像装置及び映像データ蓄積装置及び撮像システムは次のような構成にすることである。
【０００８】
（１）撮影した映像を映像データとして取り込む撮像手段と、所定の撮影対象物を判別するための判別情報を設定し、該設定した判別情報に基づいて、前記撮像手段で取り込んだ映像データの中から、所定の撮影対象物を判別する撮像対象判別手段と、前記撮像手段で取り込んだ映像データにおいて、前記撮像対象判別手段で判別した撮影対象物が撮像されている映像データの範囲を特定するための映像範囲情報を生成する映像範囲特定手段と、前記映像範囲特定手段で生成した映像範囲情報に基づいて、前記撮影対象物が撮影されている映像データを識別するための識別情報を生成する識別情報生成手段と、前記撮像手段で取り込んだ映像データ及び前記識別情報生成手段で生成した識別情報を記録して蓄積する映像データ蓄積手段と、前記識別情報生成手段で生成した識別情報に基づいて、前記映像データ蓄積手段に蓄積されている映像データの中から所定の撮影対象物が撮像されている映像データを抽出する映像データ抽出手段と、前記映像データ抽出手段で抽出した映像データを出力する映像データ出力手段と、を備えていることを特徴とする撮像装置。
（２）前記撮像対象判別手段に設定する判別情報は、撮影対象物の形状や音響に関する情報であることを特徴とする（１）に記載の撮像装置。
（３）前記撮像対象判別手段に設定する判別情報は、撮影対象物の位置情報であることを特徴とする（１）に記載の撮像装置。
（４）前記映像範囲特定手段は、前記撮像手段で取り込んだ映像データの時間情報に基づいて前記映像範囲情報を生成することを特徴とする（１）に記載の撮像装置。
【０００９】
（５）撮像装置で撮影した映像データを記録して蓄積することができる映像データ蓄積装置であって、前記撮像装置で撮影した映像データを取得するとともに、該撮影した映像データの中から、所定の撮影対象物を判別するための判別情報に基づいて所定の撮影対象物を判別し、該判別した撮影対象物が撮像されている映像データの範囲を特定し、該特定した範囲の映像データを識別するために生成された識別情報を取得することができるデータ取得手段と、前記データ取得手段で取得した前記映像データ及び識別情報を記録して蓄積するデータ蓄積手段と、前記データ蓄積手段に蓄積した識別情報に基づき、該データ蓄積手段に蓄積している映像データの中から所定の撮影対象物が撮像されている映像データを抽出する映像データ抽出手段と、前記映像データ抽出手段で抽出した映像データを出力する映像データ出力手段と、を備えていることを特徴とする映像データ蓄積装置。
【００１０】
（６）撮像装置で撮影した映像データを記録して蓄積することができる映像データ蓄積装置であって、前記撮像装置で撮影した映像データを取得する映像データ取得手段と、所定の撮影対象物を判別するための判別情報を設定し、該設定した判別情報に基づいて、前記映像データ取得手段で取り込んだ映像データの中から、所定の撮影対象物を判別する撮像対象判別手段と、前記映像データ取得手段で取り込んだ映像データにおいて、前記撮像対象判別手段で判別した撮影対象物が撮像されている映像データの範囲を特定するための映像範囲情報を生成する映像範囲特定手段と、前記映像範囲特定手段で生成した映像範囲情報に基づいて、前記撮影対象物が撮影されている映像データを識別するための識別情報を生成する識別情報生成手段と、前記映像データ取得手段で取り込んだ映像データ及び前記識別情報生成手段で生成した識別情報を記録して蓄積する映像データ蓄積手段と、前記識別情報生成手段で生成した識別情報に基づいて、前記映像データ蓄積手段に蓄積されている映像データの中から所定の撮影対象物が撮像されている映像データを抽出する映像データ抽出手段と、前記映像データ抽出手段で抽出した映像データを出力する映像データ出力手段と、を備えていることを特徴とする映像データ蓄積装置。
【００１１】
（７）撮像装置と、前記撮像装置で撮影した映像データを記録して蓄積することができる映像データ蓄積装置とから構成された撮像システムであって、前記撮像装置は、撮影した映像を映像データとして取り込む撮像手段と、所定の撮影対象物を判別するための判別情報を設定し、該設定した判別情報に基づいて、前記撮像手段で取り込んだ映像データの中から、所定の撮影対象物を判別する撮像対象判別手段と、前記撮像手段で取り込んだ映像データにおいて、前記撮像対象判別手段で判別した撮影対象物が撮像されている映像データの範囲を特定するための映像範囲情報を生成する映像範囲特定手段と、前記映像範囲特定手段で生成した映像範囲情報に基づいて、前記撮影対象物が撮影されている映像データを識別するための識別情報を生成する識別情報生成手段と、前記撮像手段で取り込んだ映像データ及び前記識別情報生成手段で生成した識別情報を出力するデータ出力手段と、を具備しており、前記映像データ蓄積装置は、前記撮像装置のデータ出力手段から出力される映像データ及び識別情報を取得するデータ取得手段と、前記データ取得手段で取得した映像データ及び識別情報を記録して蓄積するデータ蓄積手段と、前記データ蓄積手段に蓄積した識別情報に基づき、該データ蓄積手段に蓄積している映像データの中から所定の撮影対象物が撮像されている映像データを抽出する映像データ抽出手段と、前記映像データ抽出手段で抽出した映像データを出力する映像データ出力手段と、を具備していることを特徴とする撮像システム。
【００１２】
このような構成の撮像装置及び映像データ蓄積装置及び撮像システムにより、所定の撮影対象物を判別するための判別情報を設定しておき、撮影した映像データの中から、設定した判別情報に基づいて所定の撮影対象物が撮影されている範囲の映像データを判別し、判別した撮影対象物を識別するための識別情報を生成して、撮影した映像データと共に記録・蓄積し、この識別情報に基づいて記録・蓄積した映像データの中から所望の撮影対象物が撮影された映像データを抽出するので、所望の撮影対象物の映像データのみを簡単に抽出して編集・加工することができる。
【００１３】
【発明の実施の形態】
次に、本発明に係る撮像装置及び映像データ蓄積装置及び撮像システムにおける実施の形態について図面を参照して説明する。但し、図面は専ら解説のためのものであって、本発明の技術的範囲を限定するものではない。
【００１４】
まず、撮像装置について説明する。図１は、撮像装置１００の主要部の概略を示したブロック図であり、撮像部１１０、映像データ処理部１２０、撮像対象判別部１３０、対象情報受信部１３５、識別情報生成部１４０、映像データ蓄積部１５０、映像データ抽出部１６０、映像データ出力部１７０を備えた構成となっている。
【００１５】
撮像部１１０は、撮像した映像を映像データとして取り込んで映像データ処理部１２０へ送出する。
【００１６】
映像データ処理部１２０は、撮像部１１０で取り込まれた映像データをデジタルデータに変換したり、変換した映像データに補正処理など所定の処理を施し、時間情報（タイムコード）などと共に撮像対象判別部１３０及び識別情報生成部１４０へ送る。
【００１７】
撮像対象判別部１３０は、所望の撮影対象物を判別するための判別情報を設定し、設定した判別情報に基づいて、映像データ処理部１２０からの映像データの中から所定の撮影対象物を判別し、判別した撮影対象物が撮影されている映像データの時間情報（タイムコード）などを設定した判別情報と共に識別情報生成部１４０に送る。
【００１８】
例えば、無線通信可能なタグや赤外線タグなどを撮影対象物に取り付けて、このタグ情報を判別情報として設定したり、撮影対象物の特徴を表すデータ（形状、音響などのデータ）などを判別情報として設定する。
【００１９】
そして、撮像対象判別部１３０は、これら設定した判別情報に基づいて、映像データの中から撮影対象物を判別し、判別した撮影対象物が撮影されている範囲を特定するため、映像データ処理部１２０からの映像データの時間情報（タイムコード）を識別情報生成部１４０に送る。
【００２０】
なお、映像データから撮影対象物を判別できるような特徴を示すデータ（形状データなど）などを抽出して認識する画像認識技術を利用したり、音声認識技術を利用して撮影対象物を音声などの音響によって判別することも可能である。
【００２１】
対象情報受信部１３５は、無線通信可能なタグや赤外線タグなどを取り付けて撮影対象物を判別する場合、タグなどからの電波等を受信して、受信した電波等から撮影対象物を判別し、撮像対象判別部１３０に通知する。なお、無線タグなどを利用しないときは対象情報受信部１３５を有しない構成であってもよいことは勿論のことである。
【００２２】
また、対象情報受信部１３５は、ＧＰＳ（ＧｌｏｂａｌＰｏｓｉｔｉｏｎｉｎｇＳｙｓｔｅｍ）などの人工衛星を使ったシステム等を利用し、ＧＰＳからの電波を受信して撮影対象物の位置情報を割り出し、撮像対象判別部１３０に通知し、撮像対象判別部１３０が映像データの中から位置情報に基づいて撮影対象物を判別することも可能である。
【００２３】
識別情報生成部１４０は、撮像対象判別部１３０から送られてくる時間情報（タイムコード）や設定した判別情報などに基づいて、撮影対象物が撮影されている映像データの範囲を特定し、特定した範囲の映像データを識別するための所定の識別情報（以下、メタ情報という）を生成し、生成したメタ情報を映像データ蓄積部１５０へ送出する。
【００２４】
なお、所定の操作を行うことで、撮影中に判別情報を設定していない映像データに対するメタ情報を生成することも可能である。
【００２５】
映像データ蓄積部１５０は、映像データ処理部１２０からの映像データと、識別情報生成部１４０から送られてくるメタ情報を記録・蓄積する。また、映像データ抽出部１６０（後述）に従い、メタ情報をもとにして所定の撮影対象物が撮影されている映像データを抽出して映像データ出力部１７０へ送出する。
【００２６】
映像データ抽出部１６０は、撮像対象判別部１３０の判別情報やユーザの操作などにより入力されるキーワードなどの検索条件に基づいて映像データ蓄積部１５０に蓄積されているメタ情報を検索し、該当するメタ情報に基づいて所定の撮影対象物が撮影されている映像データを抽出して出力するように映像データ蓄積部１５０に対して指示を送る。
【００２７】
映像データ出力部１７０は、映像データを記録できる記録装置や、映像データを利用する他の装置と接続することが可能であり、映像データ蓄積部１５０から送出される映像データを接続されている装置に出力する。
【００２８】
なお、他の装置との接続は、ケーブルによる接続、無線通信による接続、ネットワークなどを介した接続などが可能である。
【００２９】
このような構成の撮像装置によって映像データを記録・蓄積するまでの動作について説明する。
【００３０】
まず、撮像対象判別部１３０に対して撮影対象物を識別するための判別情報の設定を行う。例えば、撮影対象物に取り付けるタグ（撮影対象物を無線通信で判別できるようなタグや赤外線タグなど）の情報や、撮影対象物の特徴（形状など）を示すデータなどの情報を判別情報として設定する。なお、撮影対象物を判別できる情報であれば、これら以外の情報であってよい。
【００３１】
撮像装置１００で撮影を開始すると、撮像部１１０により撮像している映像を映像データとして取り込んで、映像データ処理部１２０へ送る。
【００３２】
映像データ処理部１２０では、撮像部１１０で取り込んだ映像データをデジタルデータに変換し、変換した映像データに補正処理など所定の処理を施し、時間情報（タイムコード）と共に撮像対象判別部１３０及び映像データ蓄積部１５０へ送る。
【００３３】
撮像対象判別部１３０は、設定した判別情報（及び対象情報受信部１３５からの情報）に基づき、映像データ処理部１２０から送られてくる映像データの中から所定の撮影対象物を判別し、判別した撮影対象物が撮影されている映像データの時間情報（タイムコード）を設定した判別情報と共に識別情報生成部１４０に送る。
【００３４】
なお、判別した撮影対象物が撮影されている映像データの撮影範囲が分かる情報であれば、時間情報（タイムコード）以外の情報であってもよいことは勿論のことである。
【００３５】
また、画像認識技術や音声認識技術、ＧＰＳなどの位置情報を利用して所定の撮影対象物を判別するようにしてもよい。
【００３６】
識別情報生成部１４０では、撮像対象判別部１３０から送られてくる時間情報（タイムコード）と判別情報に基づいて、撮影対象物が撮影されている映像データを識別するためのメタ情報を生成し、生成したメタ情報を映像データ蓄積部１５０へ送出する。
【００３７】
なお、判別情報を設定していない映像データに対しても所定の操作を行うことによって、上述同様にメタ情報を生成させることが可能であり、生成したメタ情報は映像データ蓄積部１５０へ送出される。
【００３８】
映像データ蓄積部１５０は、映像データ処理部１２０からの映像データと、識別情報生成部１４０から送られてくるメタ情報とを記録・蓄積する。
【００３９】
このようにして、撮影した映像データと、この映像データにおける所定の撮影対象物を識別するためのメタ情報とが関連づけられて逐次映像データ蓄積部１５０に記録・蓄積されてゆく。
【００４０】
ここで、映像データ処理部１２０から送出される映像データ及び時間情報（タイムコード）と、識別情報生成部１４０で生成されるメタ情報との対応関係について説明する。
【００４１】
撮像対象判別部１３０は、映像データ処理部１２０から送出される映像データの中から、設定した判別情報（及び対象情報受信部１３５からの情報、画像認識技術による認識情報など）に基づいて、所定の撮影対象物を判別し、判別した時点（判別始点）の映像データの時間情報（タイムコード）と、所定の撮影対象物を判別できなくなった時点（判別終点）の映像データの時間情報（タイムコード）を、設定した判別情報と共に識別情報生成部１４０に送る。
【００４２】
識別情報生成部１４０では、撮像対象判別部１３０からの時間情報（タイムコード）と判別情報によって所定の撮影対象物が撮影されている映像データの範囲を特定することができ、この時間情報（タイムコード）と判別情報に基づいて、各撮影対象物を識別するためのメタ情報を生成する。
【００４３】
例えば、撮像対象判別部１３０に、撮影対象物Ａ、Ｂ、Ｃに関する判別情報が設定され、この判別情報に基づいて各撮影対象物を判別した場合、図２に示すように、撮影対象物Ａは、時間情報ｔ０〜ｔ２、ｔ４〜ｔ６、ｔ７〜ｔ１０、撮影対象物Ｂは、時間情報ｔ０〜ｔ２、ｔ４〜ｔ６、ｔ９〜ｔ１０、撮影対象物Ｃは、時間ｔ１〜ｔ３、ｔ５〜ｔ８の範囲で判別され、この判別された各時間情報（タイムコード）と判別情報とが識別情報生成部１４０に送られる。
【００４４】
そして、識別情報生成部１４０では、撮像対象判別部１３０からの時間情報（タイムコード）と判別情報に基づいて、撮影対象物Ａの映像データを識別するためのメタ情報ａ１〜ａ３、撮影対象物Ｂの映像データを識別するためのメタ情報ｂ１〜ｂ３、撮影対象物Ｃの映像データを識別するためのメタ情報ｃ１、ｃ２を生成し、映像データ蓄積部１５０に送出する。
【００４５】
生成したメタ情報には、各撮影対象物Ａ、Ｂ、Ｃが撮影されている映像データを識別するための情報や各撮像対象物に関連する情報（名称、場所、日時など）等が含まれたインデックス情報であり、また、別途ＧＰＳなどからの位置情報などをメタ情報として持つことも可能である。
【００４６】
そして、映像データ蓄積部１５０には、図３に示すように、撮影した映像データ及びその時間情報（タイムコード）と、識別情報生成部１４０で生成されたメタ情報、位置情報等の映像データに関連するメタ情報などが記録・蓄積される。
【００４７】
この場合、メタ情報は、時間情報（タイムコード）に基づいて生成されており、映像データ処理部１２０からの映像データとは、時間情報（タイムコード）により関連づけられているものである。
【００４８】
次に、映像データ蓄積部１５０に記録・蓄積されている映像データの中から所望の撮影対象物が撮影されている映像データを出力するまでの動作について説明する。
【００４９】
自動的に撮影対象物の映像データを出力する場合は、映像データ抽出部１６０が、撮像対象判別部１３０に設定してあるの判別情報を参照し、映像データ蓄積部１５０に記録・蓄積されているメタ情報（図３参照）を検索し、データ蓄積部１５０に対して該当するメタ情報に基づいて所定の撮影対象物が撮影されている映像データを抽出して出力するように指示を送る。
【００５０】
また、映像データ抽出部１６０は、ユーザーなどの操作によって、キーワード（名称、場所、日時など）が入力されると、入力されたキーワードをもとに映像データ蓄積部１５０に記録・蓄積されているメタ情報（図３参照）を検索し、データ蓄積部１５０に対して該当するメタ情報を基づいて所定の撮影対象物が撮影されている映像データを抽出して出力するように指示を送る。
【００５１】
映像データ蓄積部１５０は、映像データ抽出部１６０の指示に従って、該当するメタ情報をもとに所定の撮影対象物が撮影されている範囲の映像データを抽出して映像データ出力部１７０へ送出する。
【００５２】
映像データ出力部１７０は、接続されている装置に対して、映像データ蓄積部１５０から送られてくる所定の撮影対象物が撮影された映像データを出力する。
【００５３】
映像データ出力部１７０に接続されている装置は、出力された映像データを記録メディアに記録したり、画面表示や印刷出力したりする。
【００５４】
例えば、図３に示すような映像データ及び時間情報（タイムコード）と、メタ情報とが映像データ蓄積部１５０に記録されている場合、撮影対象物「Ａ」に関する映像データを抽出するときは、データ選択部１６０が撮像対象判別部１３０に設定してあるの判別情報、又は、ユーザの入力操作によるキーワードに基づいて、映像データ蓄積部１５０のメタ情報を検索し、データ蓄積部１５０に対して該当する撮影対象物「Ａ」のメタ情報「ａ１〜ａ３」をもとに映像データ蓄積部１５０に蓄積されている映像データの中から撮影対象物「Ａ」が撮影されている範囲の映像データを抽出して映像データ出力部１７０へ出力するように指示する。
【００５５】
映像データ蓄積部１５０は、映像データ抽出部１６０からの指示に従い、撮影対象物「Ａ」のメタ情報「ａ１〜ａ３」をもとに、蓄積されている映像データの中から撮影対象物「Ａ」が撮影されている（範囲の）映像データ▲１▼、▲２▼、▲４▼、▲５▼、▲７▼〜▲９▼を抽出して映像データ出力部１７０へ出力する。
【００５６】
映像データ出力部１７０は、映像データ蓄積部１５０から送られてくる撮影対象物「Ａ」が撮影されている（範囲の）映像データ▲１▼、▲２▼、▲４▼、▲５▼、▲７▼〜▲９▼を接続している装置の記録メディアに記録したり、画面表示や印刷出力する。
【００５７】
次に、このような撮像装置を複数台使用した撮像システムの実施例について図４を参照しながら説明する。
【００５８】
図４に示す撮像システムでは、接続状態を簡略化するために、１台の撮像装置１００と、映像データ蓄積装置２００とから構成されたシステムを用いて説明する。
【００５９】
撮像装置１００は、上述の図１で説明した撮像装置１００に、更に、映像データ蓄積装置２００とデータ通信するための通信部１８０を設けた構成であり、その他の箇所は図１の撮像装置１００と同じであるためその説明は省略する。
【００６０】
撮像装置１００の通信部１８０は、映像データ蓄積装置２００と接続してデータ通信を行い、映像データ出力部１７０（図１参照）から出力される映像データ及び時間情報（タイムコード）とメタ情報とを映像データ蓄積装置２００に送出したり、映像データ蓄積装置２００からの設定情報や制御情報を受信する。
【００６１】
映像データ蓄積装置２００は、通信部２１０、映像データ蓄積部２５０、映像データ抽出部２６０、映像データ出力部２７０とを備えている。
【００６２】
通信部２１０は、複数台の撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）と接続可能であり、各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）の映像データ蓄積部１５０（図１参照）に蓄積されている映像データ及びメタ情報を、各装置の通信部１８０を介して適宜取得し、映像データ蓄積部２５０に送出する。
【００６３】
また、通信部２１０は、各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）に対して撮影対象物を識別するための判別情報などの設定情報や制御情報を送出する。
【００６４】
映像データ蓄積部２５０は、通信部２１０から適宜送られてくる各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）からの映像データ及び時間情報（タイムコード）とメタ情報とを記録・蓄積する。また、映像データ抽出部２６０（後述）に従い、メタ情報をもとにして所定の撮影対象物が撮影されている映像データを抽出して映像データ出力部２７０へ送出する。
【００６５】
映像データ抽出部２６０は、各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）の撮像対象判別部１３０（図１参照）に設定する判別情報や、ユーザの操作などにより入力されるキーワードなどの検索情報（条件）などに基づいて映像データ蓄積部２５０に蓄積されているメタ情報を検索し、所定の撮影対象物のメタ情報に応じた映像データを抽出して出力するように映像データ蓄積部２５０に対して指示を送る。
【００６６】
映像データ出力部２７０は、映像データを記録できる記録装置や、映像データを利用する他の装置と接続することが可能であり、映像データ蓄積部２５０から送出される映像データを接続されている装置や記録メディアに出力する。
【００６７】
なお、他の装置との接続は、ケーブルによる接続、無線通信による接続、ネットワークなどを介した接続などが可能である。
【００６８】
また、各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）と映像データ蓄積装置２００との接続は、ケーブルによる接続、無線通信による接続、ネットワークなどを介した接続などが可能である。
【００６９】
即ち、映像データ蓄積装置２００は、上述の図１で説明した撮像装置１００が有する映像データ蓄積部１５０、映像データ抽出部１６０、映像データ出力部１７０と同等の機能を有し、複数台の撮像装置１００の映像データ及びメタ情報を共有化できるようにした装置である。
【００７０】
このような構成の撮像システムの具体的な使用形態について図を参照しながら説明する。
【００７１】
例えば、テーマパークなど撮影範囲が広範囲である場所において、複数台の撮像装置を設置して使用する場合を例にして説明する。
【００７２】
図５に示すように、各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）をそれぞれ所定の場所（アトラクション）に設置しておく。例えば、撮像装置１００ａはアトラクションＡ、撮像装置１００ｂはアトラクションＢ、撮像装置１００ｃはアトラクションＣ・・・というように、所定の場所（アトラクション）ごとに最適なロケーションで撮影できる位置に各撮像装置を配置しておく。
【００７３】
各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）は、映像データ蓄積装置２００と接続され、また、映像データ蓄積装置２００は、端末機器３００と接続されている。
【００７４】
端末機器３００は、映像データ蓄積装置２００や各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）に設定する判別情報を入力したり、所望の撮影対象物を検索するための検索条件などを入力できるものであり、また、映像データ蓄積装置２００から出力される映像データを記録メディアなどに記録・出力したり、印刷出力できる機器である。
【００７５】
このような構成の撮像システムにより、会場に入場する際、入口などで撮影を希望する入場者（撮像対象者Ａ）対し、例えば、撮影対象者Ａを認識できる無線通信可能なタグなど渡し、端末機器３００によってタグ情報と名前や入場券の番号など撮像対象者Ａを識別できる情報を入力する。
【００７６】
また、撮影対象者Ａの特徴を画像データとして抽出し、判別情報として設定したり、更に、撮影対象者Ａの音声データを判別情報として設定することも可能である。
【００７７】
端末機器３００によって入力されたタグ情報、名前や入場券の番号など撮像対象者Ａを特定できる情報は、端末機３００と接続された映像データ蓄積装置２００の通信部２１０を介し、設置してある各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）の撮像対象判別部１３０に判別情報として設定される。
【００７８】
所定の場所（アトラクションＡ、Ｂ、Ｃ・・・）に設置された各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）は、それぞれ所定の場所の様子を随時撮影しており、撮影した映像は、映像データ処理部１２０で映像データに変換されて映像データ蓄積部１５０へ送出される。
【００７９】
また、各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）は、撮影対象物（撮影対象者Ａ）のタグからの無線通信による電波を対象情報受信部１３５で受信すると、撮像対象判別部１３０によって、撮影した映像データの中から設定してある判別情報に基づいて撮影対象物（撮影対象者Ａ）を判別し、判別した撮影対象物（撮影対象者Ａ）が撮影されている映像データの時間情報（タイムコード）を判別情報と共に識別情報生成部１４０に送る。
【００８０】
なお、判別した撮影対象物（撮影対象者Ａ）が撮影されている映像データの撮影範囲が分かる情報であれば、時間情報（タイムコード）以外の情報であってもよいことは勿論のことである。
【００８１】
また、画像認識技術や音声認識技術を利用したり、ＧＰＳなどの位置情報を利用して撮影対象物（撮影対象者Ａ）を判別するようにしてもよい。
【００８２】
各識別情報生成部１４０では、撮像対象判別部１３０から送られてくる時間情報（タイムコード）と判別情報に基づいて、撮影対象物（撮影対象者Ａ）を識別するためのメタ情報を生成し、生成したメタ情報を映像データ蓄積部１５０へ送出する。
【００８３】
各映像データ蓄積部１５０は、映像データ処理部１２０からの映像データと、識別情報生成部１４０から送られてくるメタ情報とを記録・蓄積する。
【００８４】
このようにして、撮影した映像データと、映像データにおける所定の撮影対象物（撮影対象者Ａ）を識別するためのメタ情報とが映像データ蓄積部１５０に随時記録・蓄積されてゆく。
【００８５】
一方、映像データ蓄積装置２００は、通信部２１０を介して、接続されている各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）の映像データ蓄積部１５０（図１参照）に蓄積されている映像データ及びメタ情報を適宜取得し、映像データ蓄積部２５０に送出し、映像データ蓄積部２５０では、通信部２１０から適宜送られてくる各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）のからの映像データ及びメタ情報を逐次記録・蓄積してゆく。
【００８６】
撮影対象者Ａは、会場をまわって出場するときに、出口などで端末機器３００を操作し、入場の際に入力した名前や入場券の番号などの識別可能な情報を入力する。
【００８７】
映像データ蓄積装置２００では、端末機器３００を介して送られてくる入力情報を検索条件とし、映像データ抽出部１６０がこの入力情報をキーワードとして、映像データ蓄積部２５０に蓄積されているメタ情報の中から「撮影対象者Ａ」のメタ情報を検索する。
【００８８】
そして、検索した「撮影対象者Ａ」のメタ情報をもとに映像データ蓄積部１５０に蓄積されている映像データの中から「撮影対象者Ａ」が撮影されている範囲の映像データを抽出して出力するように映像データ蓄積部２５０に指示する。
【００８９】
映像データ蓄積部２５０は、映像データ抽出部１６０からの指示に従い、蓄積されている映像データの中から「撮影対象者Ａ」のメタ情報をもとに、撮影対象者Ａが撮影されている（範囲の）映像データを抽出して映像データ出力部１７０へ出力する。
【００９０】
映像データ出力部１７０は、映像データ蓄積部１５０から抽出された「撮影対象者Ａ」が撮影されている（範囲の）映像データを端末機器３００へ出力する。
【００９１】
端末機器３００は、映像データ蓄積装置２００から送られてくる「撮影対象者Ａ」が撮影された映像データを、例えば、記録メディアに記録して出力したり、印刷出力する。また、この映像データを画面表示して、所望の映像データを選択して出力できるようすることも可能である。
【００９２】
また、アトラクション名や場所などをキーワードとして入力すれば、撮影対象者Ａが実際に回っていない場所、例えば、図５ではアトラクションＣが撮影されている映像データ等も得ることが可能である。
【００９３】
続いて、上述した撮像システムにおける別の実施形態について説明する。
【００９４】
図４で示した撮像システムにおいて、映像データ蓄積装置２００は、映像データ蓄積部１５０、映像データ抽出部１６０、映像データ出力部１７０と同等の機能を有し、複数の撮像装置の映像データ及びメタ情報を共有化できるようにした装置であるので、各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）は、図１の撮像装置１００における映像データ蓄積部１５０、映像データ抽出部１６０を有しない構成の撮像装置であってもよい。
【００９５】
このような撮像システムは、図６に示すような構成となり、撮像装置１００は、撮像部１１０、映像データ処理部１２０、撮像対象判別部１３０、対象情報受信部１３５、識別情報生成部１４０、映像データ出力部１７０、通信部１８０のみを備えた構成であり、一方、映像データ蓄積装置２００は、図４の構成と同じく、通信部２１０、映像データ蓄積部２５０、映像データ抽出部２６０、映像データ出力部２７０とを備えた構成となる。なお、各部の機能は上記で説明している機能と同等であるので、その説明は省略する。
【００９６】
そして、各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）は、撮影した映像データ及び生成したメタ情報を自装置内に記録・蓄積せず、通信部１８０を介して映像データ蓄積装置２００に随時送出し、映像データ蓄積装置２００の映像データ蓄積部２５０に記録・蓄積する。
【００９７】
このような撮像システムによれば、撮像装置１００の構成を簡素化できるというメリットがある。
【００９８】
更に、別の実施形態として、図４に示す撮像装置１００が具備している撮像対象判別部１３０と識別情報生成部１４０を、映像データ蓄積装置２００側に設けた構成の撮像システムについて説明する。
【００９９】
この撮像システムは、図７に示すように、撮像装置１００は、撮像部１１０、映像データ処理部１２０、映像データ出力部１７０、通信部１８０のみを備えた構成となっており、一方、映像データ蓄積装置２００は、通信部２１０、撮像対象判別部２３０、識別情報生成部２４０、映像データ蓄積部２５０、映像データ抽出部２６０、映像データ出力部２７０を備えた構成となる。なお、各部の機能は上記で説明している機能と同等であるので、その説明は省略する。
【０１００】
図７に示す撮像システムを用いることで、従来の撮像装置のような撮影対象物を判別できない撮像装置やメタ情報を生成できない撮像装置を利用して撮像システムを構成することも可能となる。
【０１０１】
また、上述した図４〜図７の撮像システムにおいて、各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）と映像データ蓄積装置２００をインターネットなどのネットワークを介して接続することで、各撮像装置１００（１００ａ、１００ｂ、１００ｃ・・・）で撮影した映像データ及びメタ情報を映像データ蓄積装置２００にアップロードして映像データ蓄積部２５０に記録・蓄積し、この映像データの中からメタ情報をもとにして所望の撮像対象物が映っている映像データをダウンロードできるので、様々な映像データを多数の人が共用することも可能となる。
【０１０２】
【発明の効果】
以上説明したように、予め設定した判別情報に基づいて撮影対象物を自動的に判別し、判別した撮影対象物が撮影されている範囲の映像データを識別するためのメタ情報を生成し、撮影した映像データとメタ情報とを記録・蓄積しておくことで、メタ情報をもとに撮影した映像データの中から所定の撮影対象物が撮影されている映像データを簡単に抽出できるようになり、特に、複数台の撮像装置を用いて撮影した映像データを編集・加工する作業における手間が大幅に軽減されるという極めて優れた効果を奏するものである。
【０１０３】
また、撮影対象物が移動している場合、撮像装置の撮影範囲に撮影対象物が入ってきたときのみ撮影することも可能となり、不要な映像データを記録・蓄積することを防ぐことができるというメリットもある。
【図面の簡単な説明】
【図１】本発明に係る撮像装置の構成を略示的に示したブロック図である。
【図２】図１に示した撮像装置において、映像データ及び時間情報（タイムコード）とメタ情報との関係を説明するための説明図である。
【図３】図２で説明した映像データ及び時間情報（タイムコード）とメタ情報の記録・蓄積状態を略示的に示した説明図である。
【図４】本発明に係る撮像システムの構成を略示的に示したブロック図である。
【図５】図４の撮像システムを用いた具体的な実施例を略示的に示した説明図である。
【図６】撮像システムの別の構成例を略示的に示したブロック図である。
【図７】撮像システムの別の構成例を略示的に示したブロック図である。
【符号の説明】
１００；撮像装置、１１０；撮像部、１２０；映像データ処理部、１３０；撮像対象判別部、１３５；対象情報受信部、１４０；識別情報生成部、１５０；映像データ蓄積部、１６０；映像データ抽出部、１７０；映像データ出力部、１８０；通信部、１００ａ／１００ｂ／１００ｃ；撮像装置
２００；映像データ蓄積装置、２１０；通信部、２３０；映像データ判別部、２４０；識別情報生成部、２５０；映像データ蓄積部、２６０；映像データ抽出部、２７０；映像データ出力部
３００；端末機器[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an imaging device, a video data storage device, and an imaging system. More specifically, the present invention relates to an imaging device, a video data storage device, and an imaging system that can easily extract and use video data in a range in which a desired shooting target is shot from shot video data.
[0002]
[Prior art]
In the prior art, in order to facilitate editing work of digital data such as audio and video, there have been proposed several methods for recording detailed and easy-to-use editing information (meta information) together with these digital data. In the ISO (International Organization for Standardization), MPEG7 (Moving Picture Experts Group7), which standardizes a description method for digital data such as audio and video and content contents, is being formulated.
[0003]
Therefore, when generating digital data using such a technique, a device that can generate data-related information related to the digital data and record or transmit the generated data-related information as digital data Have been devised (for example, see Patent Document 1).
[0004]
[Patent Document 1]
JP-A-2002-152655 (page 6-11, FIG. 1)
[0005]
[Problems to be solved by the invention]
However, for example, when it is desired to extract only a scene (video data) in which a desired photographing target is captured from video data captured by a plurality of imaging devices and edit the extracted video data as another video data, Editing work such as extracting only a scene (video data) in which a desired photographing target is captured from video data captured by each imaging device, and rearranging the extracted scenes (video data) in chronological order. Therefore, there is a problem that editing and processing operations of video data take time and effort.
[0006]
Therefore, the present invention solves the problem of providing an imaging device, a video data storage device, and an imaging system that can easily extract and use video data in a range where a desired shooting target is shot from shot video data. Have challenges to do.
[0007]
[Means for Solving the Problems]
In order to solve the above-mentioned problems, an imaging device, a video data storage device, and an imaging system according to the present invention have the following configurations.
[0008]
(1) Image capturing means for capturing a captured video as video data and determination information for determining a predetermined shooting target are set, and based on the set determination information, the image data captured by the image capturing means are set. From the above, an imaging target determining unit for determining a predetermined imaging target, and in the video data captured by the imaging unit, for specifying a range of video data in which the imaging target determined by the imaging target determination unit is imaged. Image range specifying means for generating image range information of the object, and identification for generating identification information for identifying image data of the object to be shot based on the image range information generated by the image range specifying means. Information generation means, video data storage means for recording and storing video data captured by the imaging means and identification information generated by the identification information generation means; Video data extraction means for extracting video data of an image of a predetermined object to be shot from video data stored in the video data storage means, based on the identification information generated by the identification information generation means; An image data output means for outputting the video data extracted by the video data extraction means.
(2) The imaging apparatus according to (1), wherein the determination information set in the imaging target determination unit is information on a shape and a sound of the imaging target.
(3) The imaging apparatus according to (1), wherein the determination information set in the imaging target determination unit is position information of an imaging target.
(4) The imaging apparatus according to (1), wherein the video range specifying unit generates the video range information based on time information of video data captured by the imaging unit.
[0009]
(5) A video data storage device capable of recording and accumulating video data captured by an imaging device. The video data storage device acquires video data captured by the imaging device, and performs a predetermined process from the captured video data. A predetermined shooting target is determined based on the determination information for determining the shooting target, a range of video data in which the determined shooting target is captured is specified, and the video data of the specified range is determined. A data acquisition unit capable of acquiring identification information generated for identification, a data accumulation unit for recording and accumulating the video data and the identification information acquired by the data acquisition unit, and an accumulator in the data accumulation unit Video data extracting means for extracting, from the video data stored in the data storing means, video data in which a predetermined object is imaged, based on the identification information obtained , Video data storage apparatus characterized by comprising: a video data output means for outputting the video data extracted by the image data extracting means.
[0010]
(6) A video data storage device capable of recording and accumulating video data captured by an imaging device, comprising: video data obtaining means for obtaining video data captured by the imaging device; Imaging object discriminating means for setting a discriminating information for discriminating, and based on the set discriminating information, discriminating a predetermined photographing target object from the video data captured by the video data obtaining means; and Video range specifying means for generating video range information for specifying a range of video data in which the object to be shot determined by the image sensing target determining means is captured in the video data captured by the obtaining means; and Identification information generating means for generating identification information for identifying video data on which the object is photographed, based on the image range information generated by the means; A video data storage unit that records and stores the video data captured by the video data acquisition unit and the identification information generated by the identification information generation unit; and the video data based on the identification information generated by the identification information generation unit. Video data extraction means for extracting video data of an image of a predetermined object to be photographed from video data stored in the storage means, and video data output means for outputting the video data extracted by the video data extraction means And a video data storage device.
[0011]
(7) An imaging system including an imaging device and a video data storage device capable of recording and storing video data captured by the imaging device, wherein the imaging device converts captured video into video data. The imaging means to be taken in as the image data and the discrimination information for discriminating the predetermined object to be photographed are set. Based on the set discrimination information, the predetermined object to be photographed is determined from the video data taken in by the image pickup means. And a video range for generating video range information for specifying a range of video data in which video objects captured by the imaging target determination unit are captured in video data captured by the imaging unit. Specifying means, based on the image range information generated by the image range specifying means, identification information for identifying image data in which the object to be imaged is photographed; Identification information generating means, and data output means for outputting the video data captured by the imaging means and the identification information generated by the identification information generation means. Data acquisition means for acquiring video data and identification information output from the data output means of the device, data accumulation means for recording and accumulating the video data and identification information acquired by the data acquisition means, and Based on the stored identification information, video data extraction means for extracting video data of a predetermined object to be photographed from video data stored in the data storage means, and the video data extraction means An imaging system comprising: video data output means for outputting video data.
[0012]
With the imaging device, the video data storage device, and the imaging system having such a configuration, determination information for determining a predetermined imaging target is set, and based on the determined identification information from among the captured video data. The video data in a range where a predetermined photographing object is photographed is determined, identification information for identifying the determined photographing object is generated, recorded and stored together with the photographed video data, and based on the identification information, Since video data obtained by capturing a desired object to be photographed is extracted from the video data recorded and stored by the user, only the video data of the desired object to be photographed can be easily extracted, edited, and processed.
[0013]
BEST MODE FOR CARRYING OUT THE INVENTION
Next, embodiments of an imaging device, a video data storage device, and an imaging system according to the present invention will be described with reference to the drawings. However, the drawings are for explanation only, and do not limit the technical scope of the present invention.
[0014]
First, the imaging device will be described. FIG. 1 is a block diagram schematically illustrating a main part of the imaging apparatus 100. The imaging unit 110, the video data processing unit 120, the imaging target determination unit 130, the target information receiving unit 135, the identification information generation unit 140, the video data The configuration includes a storage unit 150, a video data extraction unit 160, and a video data output unit 170.
[0015]
The imaging unit 110 captures the captured video as video data and sends it to the video data processing unit 120.
[0016]
The video data processing unit 120 converts the video data captured by the imaging unit 110 into digital data, performs a predetermined process such as a correction process on the converted video data, and, together with time information (time code) and the like, an imaging target determination unit. 130 and the identification information generation unit 140.
[0017]
The imaging target determination unit 130 sets determination information for determining a desired imaging target, and determines a predetermined imaging target from the video data from the video data processing unit 120 based on the set determination information. The time information (time code) and the like of the video data on which the determined shooting target is shot are sent to the identification information generation unit 140 together with the set determination information.
[0018]
For example, a tag capable of wireless communication, an infrared tag, or the like is attached to the object to be photographed, and this tag information is set as discrimination information, and data (characteristics such as shape and sound) representing characteristics of the object to be photographed is determined. Set as
[0019]
Then, the imaging target determination unit 130 determines a shooting target from the video data based on the set determination information, and specifies a range in which the determined shooting target is captured. The time information (time code) of the video data from 120 is sent to the identification information generation unit 140.
[0020]
It is to be noted that image recognition technology that extracts and recognizes data (shape data and the like) indicating features that can distinguish the shooting target from the video data is used, or that the shooting target is voiced using voice recognition technology. It is also possible to discriminate based on the sound.
[0021]
The target information receiving unit 135 receives a radio wave or the like from a tag or the like when determining a shooting target by attaching a tag capable of wireless communication or an infrared tag, and determines the shooting target from the received radio wave or the like. Notify the imaging target determination unit 130. When a wireless tag or the like is not used, it is needless to say that the target information receiving unit 135 may not be provided.
[0022]
The target information receiving unit 135 receives a radio wave from the GPS to determine the position information of the imaging target using a system using an artificial satellite such as a GPS (Global Positioning System), and determines the position information of the imaging target. , And the imaging target determination unit 130 can determine the imaging target from the video data based on the positional information.
[0023]
The identification information generation unit 140 specifies the range of the video data in which the imaging target is captured based on the time information (time code) transmitted from the imaging target determination unit 130, the set determination information, and the like, and specifies Predetermined identification information (hereinafter, referred to as meta information) for identifying the video data in the specified range is generated, and the generated meta information is transmitted to the video data storage unit 150.
[0024]
By performing a predetermined operation, it is also possible to generate meta information for video data for which identification information has not been set during shooting.
[0025]
The video data storage unit 150 records and stores the video data from the video data processing unit 120 and the meta information sent from the identification information generation unit 140. Further, according to a video data extraction unit 160 (described later), video data on which a predetermined photographic target is captured is extracted based on the meta information and transmitted to the video data output unit 170.
[0026]
The video data extraction unit 160 searches for meta information stored in the video data storage unit 150 based on the determination information of the imaging target determination unit 130 or a search condition such as a keyword input by a user operation or the like. An instruction is sent to the video data storage unit 150 to extract and output video data in which a predetermined target is captured based on the meta information.
[0027]
The video data output unit 170 can be connected to a recording device that can record video data or another device that uses video data, and is a device to which video data sent from the video data storage unit 150 is connected. Output to
[0028]
Note that the connection with another device can be a connection by a cable, a connection by wireless communication, a connection via a network or the like.
[0029]
The operation up to recording and accumulating video data by the imaging device having such a configuration will be described.
[0030]
First, the identification information for identifying the imaging target is set in the imaging target identification unit 130. For example, information such as a tag attached to an object to be photographed (a tag or an infrared tag capable of identifying the object by wireless communication, etc.) and information such as data indicating characteristics (shape, etc.) of the object to be photographed are set as the discrimination information. I do. It should be noted that other information may be used as long as the information can identify the object to be photographed.
[0031]
When photographing is started by the imaging device 100, the image captured by the imaging unit 110 is captured as video data and sent to the video data processing unit 120.
[0032]
The video data processing unit 120 converts the video data captured by the imaging unit 110 into digital data, performs predetermined processing such as a correction process on the converted video data, and, together with time information (time code), the imaging target determination unit 130 and the video data. The data is sent to the data storage unit 150.
[0033]
The imaging target determination unit 130 determines a predetermined shooting target from the video data sent from the video data processing unit 120 based on the set determination information (and information from the target information receiving unit 135), and determines The time information (time code) of the video data on which the photographed object is photographed is sent to the identification information generation unit 140 together with the set discrimination information.
[0034]
Of course, any information other than the time information (time code) may be used as long as the information indicates the shooting range of the video data in which the determined shooting target is shot.
[0035]
Alternatively, a predetermined photographing target may be determined using position information such as an image recognition technology, a voice recognition technology, and GPS.
[0036]
The identification information generation unit 140 generates meta information for identifying the video data of the photographed object based on the time information (time code) and the discrimination information sent from the imaging target discrimination unit 130. , And sends the generated meta information to the video data storage unit 150.
[0037]
By performing a predetermined operation on video data for which discrimination information is not set, meta information can be generated in the same manner as described above. The generated meta information is transmitted to the video data storage unit 150. You.
[0038]
The video data storage unit 150 records and stores the video data from the video data processing unit 120 and the meta information sent from the identification information generation unit 140.
[0039]
In this way, the photographed video data and the meta information for identifying the predetermined photographing target in the video data are associated with each other and are sequentially recorded and stored in the video data storage unit 150.
[0040]
Here, the correspondence between the video data and time information (time code) transmitted from the video data processing unit 120 and the meta information generated by the identification information generation unit 140 will be described.
[0041]
The imaging target determination unit 130 determines a predetermined value from the video data transmitted from the video data processing unit 120 based on the set determination information (and information from the target information reception unit 135, recognition information based on the image recognition technology, and the like). The time information (time code) of the video data at the time when the object to be photographed is determined (determination start point) and the time information (time code) at the time when the predetermined object to be photographed cannot be determined (end point of determination) Is transmitted to the identification information generation unit 140 together with the set discrimination information.
[0042]
The identification information generation unit 140 can specify the range of the video data in which the predetermined object is photographed based on the time information (time code) from the imaging object determination unit 130 and the determination information. Based on the code and the discrimination information, meta information for identifying each photographing target is generated.
[0043]
For example, discrimination information relating to the imaging targets A, B, and C is set in the imaging target determination unit 130, and when each imaging target is determined based on this determination information, as illustrated in FIG. Is time information t0 to t2, t4 to t6, t7 to t10, photographing object B is time information t0 to t2, t4 to t6, t9 to t10, and photographing object C is time t1 to t3, t5 to t8. , And the discriminated time information (time code) and discrimination information are sent to the identification information generation unit 140.
[0044]
Then, the identification information generation unit 140, based on the time information (time code) and the determination information from the imaging target determination unit 130, meta information a1 to a3 for identifying the video data of the imaging target A, the imaging target Meta information b1 to b3 for identifying the video data of B and meta information c1 and c2 for identifying the video data of the photographing target C are generated and transmitted to the video data storage unit 150.
[0045]
The generated meta information includes information for identifying video data in which each of the imaging targets A, B, and C is captured, information (name, location, date and time, etc.) related to each of the imaging targets. Index information, and it is also possible to separately have position information from a GPS or the like as meta information.
[0046]
As shown in FIG. 3, the video data storage unit 150 stores the captured video data and its time information (time code) and the video data such as meta information and position information generated by the identification information generation unit 140. Related meta information and the like are recorded and accumulated.
[0047]
In this case, the meta information is generated based on time information (time code), and is associated with the video data from the video data processing unit 120 by the time information (time code).
[0048]
Next, a description will be given of an operation up to outputting video data in which a desired photographing target is photographed from the video data recorded and stored in the video data storage unit 150.
[0049]
When automatically outputting video data of a shooting target, the video data extraction unit 160 refers to the determination information set in the imaging target determination unit 130, and records and stores the video data in the video data storage unit 150. It retrieves the meta information (see FIG. 3), and sends an instruction to the data storage unit 150 to extract and output video data of a predetermined object to be photographed based on the corresponding meta information.
[0050]
Further, when a keyword (name, place, date, etc.) is input by an operation of a user or the like, the video data extraction unit 160 is recorded and stored in the video data storage unit 150 based on the input keyword. The meta information (see FIG. 3) is searched, and an instruction is sent to the data storage unit 150 to extract and output video data of a predetermined object to be photographed based on the corresponding meta information.
[0051]
The video data storage unit 150 extracts video data in a range where a predetermined photographic object is captured based on the corresponding meta information and sends the video data to the video data output unit 170 according to the instruction of the video data extraction unit 160. .
[0052]
The video data output unit 170 outputs, to the connected device, video data of a predetermined object to be photographed transmitted from the video data storage unit 150.
[0053]
A device connected to the video data output unit 170 records the output video data on a recording medium, displays a screen, and prints out the output.
[0054]
For example, when video data and time information (time code) as shown in FIG. 3 and meta information are recorded in the video data storage unit 150, when extracting video data relating to the shooting target “A”, The meta information of the video data storage unit 150 is searched based on the discrimination information set by the data selection unit 160 in the imaging target discrimination unit 130 or the keyword by the user's input operation. Based on the meta information “a1 to a3” of the corresponding shooting target “A”, the video data in the range where the shooting target “A” is shot from the video data stored in the video data storage unit 150 To be output to the video data output unit 170.
[0055]
The video data storage unit 150, in accordance with the instruction from the video data extraction unit 160, selects the shooting target “A” from the stored video data based on the meta information “a1 to a3” of the shooting target “A”. Is extracted (in the range), and the video data {1}, {2}, {4}, {5}, {7} to {9} are extracted and output to the video data output unit 170.
[0056]
The video data output unit 170 outputs the video data (1), (2), (4), (5), (5), (in the range) in which the shooting target “A” sent from the video data storage unit 150 is shot. (7) to (9) are recorded on the recording medium of the connected device, or displayed on the screen or printed out.
[0057]
Next, an embodiment of an imaging system using a plurality of such imaging devices will be described with reference to FIG.
[0058]
The imaging system illustrated in FIG. 4 will be described using a system including one imaging device 100 and a video data storage device 200 in order to simplify the connection state.
[0059]
The imaging apparatus 100 has a configuration in which a communication unit 180 for performing data communication with the video data storage apparatus 200 is further provided in the imaging apparatus 100 described with reference to FIG. Since it is the same as that described above, the description is omitted.
[0060]
The communication unit 180 of the imaging device 100 performs data communication by connecting to the video data storage device 200, and outputs video data and time information (time code) and meta information output from the video data output unit 170 (see FIG. 1). Is transmitted to the video data storage device 200, and setting information and control information from the video data storage device 200 are received.
[0061]
The video data storage device 200 includes a communication unit 210, a video data storage unit 250, a video data extraction unit 260, and a video data output unit 270.
[0062]
The communication unit 210 is connectable to a plurality of imaging devices 100 (100a, 100b, 100c,...), And the video data storage unit 150 (FIG. 1) of each imaging device 100 (100a, 100b, 100c,. The video data and meta information stored in the video data storage section 250 are appropriately acquired via the communication section 180 of each device, and transmitted to the video data storage section 250.
[0063]
Further, the communication unit 210 sends setting information and control information such as identification information for identifying an imaging target to each imaging device 100 (100a, 100b, 100c,...).
[0064]
The video data storage unit 250 records and stores video data, time information (time code), and meta information from each of the imaging devices 100 (100a, 100b, 100c,...) Appropriately sent from the communication unit 210. . In addition, according to the video data extraction unit 260 (described later), video data on which a predetermined object is captured is extracted based on the meta information and transmitted to the video data output unit 270.
[0065]
The video data extraction unit 260 includes identification information set in the imaging target identification unit 130 (see FIG. 1) of each imaging device 100 (100a, 100b, 100c,...), And a keyword input by a user operation or the like. The video data storage unit retrieves meta information stored in the video data storage unit 250 based on search information (conditions) and the like, and extracts and outputs video data corresponding to meta information of a predetermined object to be photographed. Send instructions to 250.
[0066]
The video data output unit 270 can be connected to a recording device that can record video data or another device that uses video data, and is a device to which video data sent from the video data storage unit 250 is connected. And output to recording media.
[0067]
Note that the connection with another device can be a connection by a cable, a connection by wireless communication, a connection via a network or the like.
[0068]
The connection between each of the imaging devices 100 (100a, 100b, 100c,...) And the video data storage device 200 can be a connection by a cable, a connection by wireless communication, a connection through a network, or the like.
[0069]
That is, the video data storage device 200 has the same functions as the video data storage unit 150, the video data extraction unit 160, and the video data output unit 170 included in the imaging device 100 described with reference to FIG. This is an apparatus that can share video data and meta information of the apparatus 100.
[0070]
A specific use mode of the imaging system having such a configuration will be described with reference to the drawings.
[0071]
For example, a case where a plurality of imaging devices are installed and used in a place where a shooting range is wide such as a theme park will be described as an example.
[0072]
As shown in FIG. 5, each of the imaging devices 100 (100a, 100b, 100c...) Is installed at a predetermined place (attraction). For example, each imaging device is arranged at a position where an image can be captured at an optimal location for each predetermined place (attraction), such as an attraction A for the imaging device 100a, an attraction B for the imaging device 100b, an attraction C for the imaging device 100c, and so on. Keep it.
[0073]
Each of the imaging devices 100 (100a, 100b, 100c,...) Is connected to the video data storage device 200, and the video data storage device 200 is connected to the terminal device 300.
[0074]
The terminal device 300 inputs discrimination information to be set in the video data storage device 200 and each of the imaging devices 100 (100a, 100b, 100c,...), And inputs search conditions for searching for a desired imaging target. It is a device that can record and output video data output from the video data storage device 200 to a recording medium or the like, or print out.
[0075]
With the imaging system having such a configuration, when entering the venue, a visitor (imaging target person A) who wants to take an image at an entrance or the like is passed, for example, a wireless communication tag capable of recognizing the imaging target person A, and a terminal. The device 300 inputs tag information and information that can identify the person A to be imaged, such as a name and a ticket number.
[0076]
In addition, it is also possible to extract the characteristics of the subject A as image data and set it as discrimination information, and further set audio data of the subject A as discrimination information.
[0077]
Tag information input by the terminal device 300, information such as a name and an admission ticket number, which can specify the imaging target A, are installed via the communication unit 210 of the video data storage device 200 connected to the terminal device 300. .. Are set as identification information in the imaging target identification unit 130 of each imaging device 100 (100a, 100b, 100c,...).
[0078]
Each of the imaging devices 100 (100a, 100b, 100c,...) Installed at predetermined locations (attractions A, B, C,...) Photographs the state of the predetermined location at any time. Are converted into video data by the video data processing unit 120 and sent to the video data storage unit 150.
[0079]
Each of the imaging devices 100 (100a, 100b, 100c,...) Receives the radio wave from the tag of the imaging target (the imaging target A) by wireless communication at the target information receiving unit 135, and the imaging target determination unit 130 Thus, the photographing target (photographing person A) is determined based on the discrimination information set from the photographed video data, and the video data in which the determined photographing target (photographing person A) is photographed. The time information (time code) is sent to the identification information generation unit 140 together with the discrimination information.
[0080]
It is needless to say that information other than the time information (time code) may be used as long as the information indicates the shooting range of the video data in which the determined shooting target (shooting subject A) is shot. is there.
[0081]
Further, the object to be photographed (the person A to be photographed) may be determined by using image recognition technology or voice recognition technology, or by using positional information such as GPS.
[0082]
Each identification information generation unit 140 generates meta information for identifying an object to be photographed (person A to be photographed) based on the time information (time code) and the discrimination information sent from the imaging object determination unit 130. , And sends the generated meta information to the video data storage unit 150.
[0083]
Each video data storage unit 150 records and stores the video data from the video data processing unit 120 and the meta information sent from the identification information generation unit 140.
[0084]
In this way, the captured video data and the meta information for identifying the predetermined capturing target (the capturing subject A) in the video data are recorded and stored in the video data storage unit 150 as needed.
[0085]
On the other hand, the video data storage device 200 is stored in the video data storage unit 150 (see FIG. 1) of each of the connected imaging devices 100 (100a, 100b, 100c...) Via the communication unit 210. The video data and the meta information are appropriately acquired and transmitted to the video data storage unit 250. In the video data storage unit 250, each of the imaging devices 100 (100a, 100b, 100c...) Appropriately transmitted from the communication unit 210 is acquired. The video data and meta information from are sequentially recorded and accumulated.
[0086]
When going around the venue, the photographing subject A operates the terminal device 300 at an exit or the like, and inputs identifiable information such as the name entered at the time of entry and the number of the admission ticket.
[0087]
In the video data storage device 200, the input information sent via the terminal device 300 is used as a search condition, and the video data extraction unit 160 uses the input information as a keyword to input the meta information stored in the video data storage unit 250. The meta information of “photographer A” is searched from the inside.
[0088]
Then, based on the retrieved meta information of “photographing subject A”, video data in a range where “photographing subject A” is photographed is extracted from the video data stored in the video data storage unit 150. And instruct the video data storage unit 250 to output.
[0089]
In accordance with the instruction from the video data extraction unit 160, the video data storage unit 250 captures the subject A based on the meta information of the "subject A" from the stored video data ( The video data (of the range) is extracted and output to the video data output unit 170.
[0090]
The video data output unit 170 outputs to the terminal device 300 the video data (of the range) in which the “photographer A” extracted from the video data storage unit 150 is captured.
[0091]
The terminal device 300 records and outputs, or prints out, the video data of the “photographing subject A” sent from the video data storage device 200, for example, on a recording medium. It is also possible to display this video data on a screen so that desired video data can be selected and output.
[0092]
If an attraction name or a place is input as a keyword, it is possible to obtain a place where the photographing subject A does not actually go around, for example, video data in which the attraction C is photographed in FIG.
[0093]
Next, another embodiment of the above-described imaging system will be described.
[0094]
In the imaging system shown in FIG. 4, the video data storage device 200 has functions equivalent to those of the video data storage unit 150, the video data extraction unit 160, and the video data output unit 170. Since the information can be shared, each of the imaging devices 100 (100a, 100b, 100c,...) Does not include the video data storage unit 150 and the video data extraction unit 160 in the imaging device 100 of FIG. An imaging device having a configuration may be used.
[0095]
Such an imaging system has a configuration as shown in FIG. 6, and the imaging apparatus 100 includes an imaging unit 110, a video data processing unit 120, an imaging target determination unit 130, a target information receiving unit 135, an identification information generation unit 140, a video The configuration includes only a data output unit 170 and a communication unit 180. On the other hand, the video data storage device 200 includes a communication unit 210, a video data storage unit 250, a video data extraction unit 260, a video data An output unit 270 is provided. The function of each unit is the same as the function described above, and a description thereof will not be repeated.
[0096]
Each of the imaging devices 100 (100a, 100b, 100c,...) Does not record and accumulate the photographed video data and the generated meta information in its own device. It is transmitted as needed and is recorded and stored in the video data storage unit 250 of the video data storage device 200.
[0097]
According to such an imaging system, there is an advantage that the configuration of the imaging apparatus 100 can be simplified.
[0098]
Further, as another embodiment, an imaging system having a configuration in which an imaging target determination unit 130 and an identification information generation unit 140 included in the imaging device 100 shown in FIG.
[0099]
As shown in FIG. 7, this imaging system has a configuration in which an imaging device 100 includes only an imaging unit 110, a video data processing unit 120, a video data output unit 170, and a communication unit 180. The storage device 200 includes a communication unit 210, an imaging target determination unit 230, an identification information generation unit 240, a video data storage unit 250, a video data extraction unit 260, and a video data output unit 270. The function of each unit is the same as the function described above, and a description thereof will not be repeated.
[0100]
By using the imaging system shown in FIG. 7, it is also possible to configure an imaging system using an imaging device such as a conventional imaging device that cannot determine an imaging target or an imaging device that cannot generate meta information.
[0101]
Further, in the above-described imaging systems of FIGS. 4 to 7, each imaging device 100 (100a, 100b, 100c,...) And the video data storage device 200 are connected via a network such as the Internet so that each imaging device is connected. 100 (100a, 100b, 100c...) Are uploaded to the video data storage device 200 and recorded / stored in the video data storage unit 250, and meta information is also extracted from the video data. Since the video data in which the desired object to be imaged is shown can be downloaded, it becomes possible for many people to share various video data.
[0102]
【The invention's effect】
As described above, the imaging target is automatically determined based on the predetermined identification information, and meta information for identifying video data in a range where the determined imaging target is captured is generated. By recording and storing the captured video data and the meta information, it is possible to easily extract the video data of a predetermined object from the video data captured based on the meta information. In particular, the present invention has an extremely excellent effect that labor in editing and processing video data shot using a plurality of imaging devices is greatly reduced.
[0103]
In addition, when the shooting target is moving, it is possible to shoot only when the shooting target enters the shooting range of the imaging device, and it is possible to prevent recording and accumulating unnecessary video data. There are also benefits.
[Brief description of the drawings]
FIG. 1 is a block diagram schematically showing a configuration of an imaging device according to the present invention.
FIG. 2 is an explanatory diagram for explaining a relationship between video data, time information (time code), and meta information in the imaging device illustrated in FIG. 1;
FIG. 3 is an explanatory diagram schematically showing recording / accumulation states of video data, time information (time code), and meta information described in FIG. 2;
FIG. 4 is a block diagram schematically showing a configuration of an imaging system according to the present invention.
FIG. 5 is an explanatory diagram schematically showing a specific embodiment using the imaging system of FIG. 4;
FIG. 6 is a block diagram schematically illustrating another configuration example of the imaging system.
FIG. 7 is a block diagram schematically illustrating another configuration example of the imaging system.
[Explanation of symbols]
100; imaging apparatus; 110; imaging section; 120; video data processing section; 130; imaging target determination section, 135; target information receiving section, 140; identification information generation section, 150; video data storage section, 160; Unit, 170; video data output unit, 180; communication unit, 100a / 100b / 100c;
200; video data storage device; 210; communication unit; 230; video data determination unit; 240; identification information generation unit; 250; video data storage unit; 260; video data extraction unit;
300; terminal equipment

Claims

Imaging means for capturing the captured video as video data,
Imaging object determining means for determining a predetermined imaging target from among the video data captured by the imaging means, based on the determined identification information, and setting identification information for identifying the predetermined imaging target; ,
In the video data captured by the imaging unit, a video range specifying unit that generates video range information for specifying a range of video data in which the imaging target object determined by the imaging target determination unit is imaged,
Identification information generating means for generating identification information for identifying video data on which the imaging target is captured, based on the video range information generated by the video range identification means,
Video data storage means for recording and storing video data captured by the imaging means and identification information generated by the identification information generation means,
Based on the identification information generated by the identification information generation means, video data extraction means for extracting video data of a predetermined object to be photographed from video data stored in the video data storage means,
Video data output means for outputting the video data extracted by the video data extraction means,
An imaging device comprising:

2. The imaging apparatus according to claim 1, wherein the determination information set in the imaging target determination unit is information on a shape and a sound of the imaging target. 3.

The imaging apparatus according to claim 1, wherein the identification information set in the imaging target identification unit is position information of an imaging target.

The imaging apparatus according to claim 1, wherein the video range specifying unit generates the video range information based on time information of video data captured by the imaging unit.

A video data storage device capable of recording and storing video data captured by an imaging device,
While acquiring video data taken by the imaging device,
From the captured video data, a predetermined imaging target is determined based on determination information for determining the predetermined imaging target, and a range of video data in which the determined imaging target is imaged is specified. And data acquisition means capable of acquiring identification information generated to identify the specified range of video data,
Data storage means for recording and storing the video data and identification information acquired by the data acquisition means,
Video data extraction means for extracting video data of an image of a predetermined object to be shot from video data stored in the data storage means, based on the identification information stored in the data storage means;
Video data output means for outputting the video data extracted by the video data extraction means.

A video data storage device capable of recording and storing video data captured by an imaging device,
Video data acquisition means for acquiring video data captured by the imaging device,
An imaging object discriminator for setting discrimination information for discriminating a predetermined photographing object, and discriminating the predetermined photographing object from the video data captured by the video data acquisition means based on the set discrimination information. Means,
In the video data captured by the video data acquisition unit, a video range identification unit that generates video range information for specifying a range of video data in which a shooting target determined by the imaging target determination unit is captured.
Identification information generating means for generating identification information for identifying video data on which the imaging target is captured, based on the video range information generated by the video range identification means,
Video data storage means for recording and storing video data captured by the video data acquisition means and identification information generated by the identification information generation means,
Based on the identification information generated by the identification information generation means, video data extraction means for extracting video data of a predetermined object to be photographed from video data stored in the video data storage means,
Video data output means for outputting the video data extracted by the video data extraction means.

An imaging system comprising an imaging device and a video data storage device capable of recording and storing video data captured by the imaging device,
The imaging device,
Imaging means for capturing the captured video as video data,
Imaging object determining means for determining a predetermined imaging target from among the video data captured by the imaging means, based on the determined identification information, and setting identification information for identifying the predetermined imaging target; ,
In the video data captured by the imaging unit, a video range specifying unit that generates video range information for specifying a range of video data in which the imaging target object determined by the imaging target determination unit is imaged,
Identification information generating means for generating identification information for identifying video data on which the imaging target is captured, based on the video range information generated by the video range identification means,
Data output means for outputting the video data captured by the imaging means and the identification information generated by the identification information generation means,
The video data storage device,
Data acquisition means for acquiring video data and identification information output from the data output means of the imaging device,
Data storage means for recording and storing video data and identification information acquired by the data acquisition means,
Video data extraction means for extracting video data of an image of a predetermined object to be shot from video data stored in the data storage means, based on the identification information stored in the data storage means;
An image data output unit that outputs the image data extracted by the image data extraction unit.