JP2000261744A - Method and system for photographing video image for edit with object information acquisition function and storage medium recording program describing this method - Google Patents

Method and system for photographing video image for edit with object information acquisition function and storage medium recording program describing this method

Info

Publication number
JP2000261744A
JP2000261744A JP6604399A JP6604399A JP2000261744A JP 2000261744 A JP2000261744 A JP 2000261744A JP 6604399 A JP6604399 A JP 6604399A JP 6604399 A JP6604399 A JP 6604399A JP 2000261744 A JP2000261744 A JP 2000261744A
Authority
JP
Japan
Prior art keywords
subject
video
subject information
information
recording
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP6604399A
Other languages
Japanese (ja)
Other versions
JP3426997B2 (en
Inventor
Yasumasa Niikura
康巨 新倉
Kenichi Minami
憲一 南
Yoshinobu Tonomura
佳伸 外村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP06604399A priority Critical patent/JP3426997B2/en
Publication of JP2000261744A publication Critical patent/JP2000261744A/en
Application granted granted Critical
Publication of JP3426997B2 publication Critical patent/JP3426997B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To provide an image photographing method and a system where a job load on an editor is relieved by arranging and summarizing a video image photographed around a specific object in a way to make editing easy around the object. SOLUTION: A video image 1 including an object photographed by a photographer 2 in a photographing process 11 is recorded by a video recording process 14, and an object information recording process 15 records an object 3 designated by the photographer 2 in an object designation process 12. On the basis of the designated object 3, the object information 4 is extracted from one or both of the video image 1 including the object just after the photographing and video information 7 read in a video reproduction process 16 and the information 7 is recorded by an object information recording process 15. Objet information 8 is read in an object information reproduction process 17, the information 8 and the video information 7 are integrated by an object reflection process 18 to reflect the object information onto the video image. An editor 10 applies edit or the like to the object information reflected video image where the object information reflects on the video image in a video image operation process 19.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、被写体を含む情景
を撮影する機器に関連し、情景を撮影する際に、利用者
によって指定された情景内の被写体を、撮影中乃至は撮
影後に追跡し、その指定及び追跡された被写体情報を編
集時に利用する編集作業も可能とする映像撮影技術に関
する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an apparatus for photographing a scene including a subject, and when photographing a scene, tracks a subject in a scene specified by a user during or after photographing. The present invention also relates to a video photographing technique which enables an editing operation using the designated and tracked subject information at the time of editing.

【0002】[0002]

【従来の技術】小型ビデオカメラと、ビデオデッキの普
及から、一般の人々が映像を記録、撮影することは非常
に多くなっている。
2. Description of the Related Art Due to the widespread use of small video cameras and video decks, ordinary people record and shoot images very often.

【0003】しかし、映像の編集は、その内容を把握す
る必要があり、かつ、繰り返し映像を視聴するなどの反
復作業を必要とするため困難な作業を伴い、ほとんどの
人々が編集作業を行っていないという事情がある。
[0003] However, video editing involves a difficult task because it is necessary to grasp its contents and requires repetitive operations such as repeatedly watching the video, and most people edit the video. There is no situation.

【0004】これには、いくつかの問題があると思われ
るが、一つには、良い素材の入手が困難であることが問
題としてあげられる。また、良い素材が入手できても、
現在普及している映像編集機器は、取り扱いが複雑であ
るため、熟練者以外取り扱えず、熟練していない大部分
の人々は編集作業を行うことができない。例えば、素材
の中から編集に利用したい素材の一部を探し出すことは
煩雑な作業であり、現在の編集機器では容易な作業では
なく、改善が求めらる。
[0004] This seems to have some problems, but one of the problems is that it is difficult to obtain good materials. Also, even if good materials are available,
The video editing equipment currently in widespread use is complicated, so that it cannot be handled by anyone other than a skilled person, and most unskilled people cannot perform editing work. For example, searching for a part of a material that the user wants to use for editing from the material is a complicated task, and is not an easy task with current editing equipment, and requires improvement.

【0005】そこで、良い素材を撮影する目的でビデオ
カメラを高機能化する試みがなされている。例えば、
(特開平7−115584号「画像揺れ補正装置」)
は、小型ビデオカメラを扱う場合に発生しやすい手ぶれ
情報を補正することを目的とし、手ぶれによる細かい振
動があっても、安定したカメラワークによって撮影され
た映像を提供できる。
Therefore, attempts have been made to enhance the function of a video camera for the purpose of shooting a good material. For example,
(Japanese Unexamined Patent Publication No. 7-115584 "Image shake correction device")
The object of the present invention is to correct camera shake information that is likely to occur when a small video camera is handled, and can provide an image captured by a stable camera work even if there is small vibration due to camera shake.

【0006】この方法は、手ぶれを生じている見苦しい
映像よりも、比較的安定したカメラワークによる適切な
素材映像を撮影することができる有効な方法である。し
かし、これらの映像は、よりクオリティが高い映像を撮
影しやすいというものであり、編集に役立つ映像素材を
入手しやすくする効果は期待できるものの、必ずしも編
集作業を促進するものとは言い難い。
[0006] This method is an effective method capable of photographing an appropriate material image with relatively stable camera work, rather than an unsightly image in which camera shake occurs. However, these videos are easy to shoot videos with higher quality, and although it is expected to have an effect of making it easier to obtain video materials useful for editing, they cannot be said to necessarily promote editing work.

【0007】一方で、映像素材から、編集に用いるため
に、内容を把握し、必要な映像を探し出す処理が必要と
なる。こうした作業を支援する方法も試みられている。
例えば、(Yukinobu Taniguti,Yo
shinobu Tonomura、「Panoram
aExcerpts:Extracting andp
acking Panormas for Video
Browsing」1996 ACM Multim
edia 97)である。
On the other hand, in order to use the video material for editing, it is necessary to perform a process of grasping the contents and searching for a required video. Attempts have been made to support such work.
For example, (Yukinobu Taniguchi, Yo
Shinobu Tonomura, "Panorama
aExcerpts: Extracting andp
acking Panormas for Video
Browsing "1996 ACM Multim
edia 97).

【0008】この方法は、映像情報のカメラのON/O
FFに対応するショットチェンジの情報を抽出し、表示
し、カメラワークがあるショットの場合には、カメラワ
ークの作用分だけ画像をずらせる事で、カメラ全体の画
像を作成した代表画像を画面上乃至は紙の上に配置し
て、表示するなどの方法がいくつか提案されている。こ
の方法は、素材として与えられた映像を利用しやすいで
あろう区間に分類し、かつ、分割された区間の内容を容
易に把握できるような効果を期待できる有効な方法であ
る。なお、この方法は、ビデオカメラで撮影された映像
を、別のコンピュータ上で処理する事が想定されてい
る。
This method involves turning on / off a camera for video information.
Extracts and displays the shot change information corresponding to the FF, and in the case of a shot with camera work, shifts the image by the amount of camera work to display the representative image that created the entire camera image on the screen Alternatively, some methods of arranging and displaying on paper have been proposed. This method is an effective method that classifies a video given as a material into sections that are likely to be used, and is expected to have an effect of easily grasping the contents of the divided sections. In this method, it is assumed that a video taken by a video camera is processed on another computer.

【0009】さらに、こうした映像の内容を要約し、素
材として利用しやすいように区間分割し、内容を把握し
やすくする方法を、撮影を行うビデオカメラ内で実現す
る試みも提案されている。例えば、(特開平10−28
250号「インテリジェントビデオカメラ及びインテリ
ジェントスチルカメラ」)があげられる。この方法は、
撮影のためのカメラのON/OFFの間に得られる一つ
の区間である映像を整理、分類し、各区間を代表する画
像である代表画像を表示し、内容を把握できるようにし
ている。
[0009] Further, there has been proposed an attempt to realize a method of summarizing the content of a video, dividing the video into sections so that the video can be easily used as a material, and making it easy to grasp the content in a video camera for shooting. For example, Japanese Patent Application Laid-Open No. 10-28
No. 250 "Intelligent Video Camera and Intelligent Still Camera"). This method
The video, which is one section obtained during ON / OFF of the camera for shooting, is arranged and classified, and a representative image, which is an image representative of each section, is displayed so that the contents can be grasped.

【0010】この方法では、撮影直後に、撮影した内容
を確認できるため、編集に利用できそうな映像が撮影で
きるまで、何度も繰り返し撮影し直すことを可能とし、
より良質な素材映像を取得できる可能性が高くなる効果
が期待できる。
According to this method, the photographed contents can be confirmed immediately after the photographing, so that it is possible to photograph again and again until a video which can be used for editing can be photographed.
The effect of increasing the possibility of obtaining a higher quality material video can be expected.

【0011】さらに、この方法では、表示された代表画
像を組み合わせて簡易な編集を行うことを可能とし、代
表画像に対して文字情報を付加する機能も有する。こう
した付加された文字情報は、撮影した映像を元に編集作
業を行う場合に、その素材映像にどのような映像が含ま
れているかを把握する効果が期待でき、編集用映像の取
得に有効であると思われる。
Furthermore, this method enables a simple editing by combining the displayed representative images, and has a function of adding character information to the representative images. Such added text information can be expected to have an effect of grasping what kind of video is included in the material video when editing work based on the shot video, and it is effective for obtaining video for editing. It appears to be.

【0012】[0012]

【発明が解決しようとする課題】ところで、一般の人々
がビデオカメラで撮影する映像は二つに大別される。一
つには、特定の被写体に注目し、追跡して撮影する場合
であり、もう一つは、特定の被写体とは無関係な情景全
体を撮影する場合である。前者の例は、何らかのイベン
トにおける知已、友人を撮影する場合に多く見受けられ
る。代表的な例として、運動会における子供の映像や、
結婚式等における友人等といった映像である。一方、後
者の例としては、旅先の美しい風景に対してカメラワー
クを駆使して収めるといったものである。それぞれの例
を図11,12に示す。
The images taken by ordinary people with a video camera are roughly classified into two types. One is a case where a specific subject is focused on and tracked and photographed, and the other is a case where an entire scene unrelated to the specific subject is photographed. The former example is often seen when photographing a friend or friend at some event. Typical examples are videos of children at sports days,
This is a video such as a friend at a wedding or the like. On the other hand, an example of the latter is to use a camera work to capture the beautiful scenery of the travel destination. Examples of each are shown in FIGS.

【0013】こうした特定の被写体を中心に撮影を行う
場合には、その映像を用いた編集においても、その被写
体が用いられる事が非常に多い。もちろん、映像の持つ
意味は非常に多義に渡るため、絶対的ではないが撮影者
の特定の被写体を撮影したいという考えは編集に反映さ
れる事は非常に多い。
[0013] In the case where the photographing is performed mainly on such a specific subject, the subject is very often used in editing using the video. Of course, since the meaning of the video is very ambiguous, the idea that the photographer wants to photograph a specific subject is not absolutely reflected in the editing very often.

【0014】しかしながら、前記従来の方法(インテリ
ジェントビデオカメラ及びインテリジェントスチルカメ
ラなど)では、こうした被写体に対する言及はされてい
ない。従って、特定の被写体を中心に撮影した映像か
ら、編集時に、特定の被写体を含む映像をいちいち探し
出す作業が必要となってしまう。これでは速やかな素材
の選択を実現しているとは言い難い。
However, the above-mentioned conventional methods (such as intelligent video cameras and intelligent still cameras) do not refer to such subjects. Therefore, at the time of editing, it is necessary to search for a video including a specific subject one by one from a video mainly shot of a specific subject. It is difficult to say that this has achieved quick material selection.

【0015】即ち、前記従来の発明等では、特定の被写
体を中心に撮影を行い、かつ、編集を行う場合に対し、
十分な支援を行う事ができていないという問題点が存在
するのである。
That is, in the above-mentioned conventional inventions, etc., when shooting and editing are performed around a specific subject,
There is a problem that sufficient support cannot be provided.

【0016】このように、特定の被写体を中心に撮影し
た映像を、特定の被写体を中心に編集しやすいように、
映像を整理し、要約し、編集者の作業負担を軽減する方
法、装置、システムを開発する必要があり、そのような
方法、及び装置を提供することが、本発明の課題であ
る。
As described above, a video shot around a specific subject can be easily edited around the specific subject.
It is an object of the present invention to develop a method, a device and a system for organizing and summarizing videos and to reduce the workload of the editor, and to provide such a method and a device.

【0017】[0017]

【課題を解決するための手段】本発明は、上記課題を以
下の手段によって解決する。
The present invention solves the above problems by the following means.

【0018】即ち、その一手段は、被写体を撮影する撮
影工程と、前記撮影されている被写体を指定する被写体
指定工程と、前記撮影された映像を記録する映像記録工
程と、前記記録された映像を読み出す映像再生工程と、
前記読み出された映像中に前記指定された被写体につい
て取得される被写体情報を反映させる被写体反映工程
と、前記被写体情報が反映された映像を操作する映像操
作工程とを、有する事を特徴とする被写体情報取得機能
付き編集用映像撮影方法である。
That is, one means is a photographing step of photographing a subject, a subject designating step of designating the photographed subject, a video recording step of recording the photographed video, and the recorded video A video playback step for reading
A subject reflection step of reflecting subject information obtained for the designated subject in the read video; and a video operation step of operating a video in which the subject information is reflected. This is an editing video shooting method with a subject information acquisition function.

【0019】この方法では、被写体を撮影する際に、映
像中の被写体を指定し、編集作業等を行う際に、記録さ
れた映像と指定された被写体についての情報が映像に反
映された状態でそれらを取り扱う事ができるので、撮影
者が意図した被写体の情報が、この取り扱いの作業を含
めて編集作業時に明確に把握できる。よって、被写体を
中心とした映像を撮影し、かつ、編集することを支援す
る事ができる。
According to this method, a subject in a video is designated when the subject is photographed, and the recorded video and information on the designated subject are reflected in the video when an editing operation or the like is performed. Since they can be handled, the information of the subject intended by the photographer can be clearly grasped at the time of editing work including this handling work. Therefore, it is possible to support shooting and editing of a video centering on the subject.

【0020】あるいは、上記の被写体情報取得機能付き
編集用映像撮影方法において、前記被写体指定工程の後
に、前記撮影中の映像から被写体情報を取得する被写体
情報取得工程と、前記取得された被写体情報を記録する
被写体情報記録工程と、前記記録された被写体情報を読
み出して前記被写体反映工程に送る被写体情報再生工程
とを、有する事を特徴とする被写体情報取得機能付き編
集用映像撮影方法である。
Alternatively, in the above-described editing video photographing method with a subject information acquiring function, after the subject specifying step, a subject information acquiring step of acquiring subject information from the video being photographed; An editing video photographing method with a subject information acquisition function, comprising: a subject information recording step of recording; and a subject information reproducing step of reading the recorded subject information and sending the read subject information to the subject reflection step.

【0021】この方法では、被写体を撮影する際に、映
像中の被写体を指定し、その情報を撮影しながら取得
し、撮影した映像とともに取得された被写体情報を記録
することができる。そして、編集作業等を行う際に、記
録された映像と被写体情報を読み出し、かつ、被写体情
報が映像に反映された状態でそれらを取り扱う事ができ
るので、撮影者が意図した被写体の情報が、この取り扱
いの作業を含めて編集作業時に明確に把握できる。よっ
て、被写体を中心とした映像を撮影し、かつ、編集する
ことを支援する事ができる。
In this method, when photographing a subject, it is possible to designate a subject in a video, acquire the information while capturing the information, and record the acquired subject information together with the captured video. Then, when performing an editing operation or the like, the recorded video and the subject information can be read out, and the subject information can be handled in a state where the subject information is reflected in the video. It can be clearly understood at the time of editing work including this handling work. Therefore, it is possible to support shooting and editing of a video centering on the subject.

【0022】あるいは、先の被写体情報取得機能付き編
集用映像撮影方法において、前記被写体指定工程の後
に、前記指定された被写体を記録する被写体記録工程
と、前記映像再生工程の後に、前記記録された被写体を
読み出す被写体再生工程と、前記映像再生工程によって
読み出された映像情報を解析して、前記読み出された被
写体についての被写体情報を取得して前記被写体反映工
程に送る被写体情報取得工程とを、有する事を特徴とす
る被写体情報取得機能付き編集用映像撮影方法である。
Alternatively, in the above-mentioned editing video photographing method with a subject information acquisition function, the subject recording step of recording the designated subject after the subject specifying step and the video recording step after the video reproducing step. A subject reproduction step of reading a subject, and analyzing the video information read in the video reproduction step, obtaining subject information on the read subject, and sending the subject information to the subject reflection step. And an editing video photographing method with a subject information acquisition function.

【0023】この方法では、撮影時に指定した被写体を
元に、編集時などにおける映像を再生した際の情報から
被写体の情報を抽出する事ができる。これを行う事で、
被写体を指定しながら撮影した映像区間だけでなく、被
写体を特に指定しないで撮影した映像区間から、指定さ
れた被写体を検出するといった作業を可能とし、編集時
に有効な処理と一つとなり得る。
According to this method, based on the subject specified at the time of shooting, the information of the subject can be extracted from the information at the time of reproducing the video at the time of editing or the like. By doing this,
It is possible to detect a specified subject not only from a video section shot while specifying a subject but also from a video section shot without specifying a subject, which can be one of the processes effective in editing.

【0024】あるいは、以上の被写体情報取得機能付き
編集用映像撮影方法において、前記被写体情報が被写体
の位置、形状、色、明度、移動情報の一つ以上を含む物
理特徴量である事を特徴とする被写体情報取得機能付き
編集用映像撮影方法である。
Alternatively, in the above-described editing video photographing method with a subject information acquisition function, the subject information is a physical feature quantity including at least one of the position, shape, color, brightness, and movement information of the subject. This is an editing video shooting method with a subject information acquisition function.

【0025】この方法では、撮影時に利用者によって特
に指定した被写体の位置、形状、色、明度、移動方向、
距離といった物理量を測定する事ができる。これによ
り、撮影中にカメラワークや被写体の移動といった相対
的な映像内部での被写体の変化に対応して、被写体を追
跡し、被写体を検出するといった処理が可能になるとと
もに、指定された被写体が存在する映像を編集する際
に、編集対象となる映像内の被写体の位置、形状、色、
明度、移動情報などを明示することができる。これによ
り、編集者は被写体を明確に把握しつつ、編集作業を行
う事ができ、より簡易な編集作業を行う事が可能とな
る。
In this method, the position, shape, color, brightness, moving direction,
Physical quantities such as distance can be measured. This makes it possible to track the subject and detect the subject in response to a relative change in the subject within the image, such as camera work or the movement of the subject during shooting. When editing an existing video, the position, shape, color,
Lightness, movement information, etc. can be specified. Thus, the editor can perform the editing operation while clearly grasping the subject, and can perform the editing operation more easily.

【0026】あるいは、以上の被写体情報取得機能付き
編集用映像撮影方法において、前記被写体情報反映工程
では、前記被写体情報を、前記映像再生工程によって読
み出された映像に、重ねあわせ、映像内での被写体の存
在を明示させる工程を有する事を特徴とする被写体情報
取得機能付き編集用映像撮影方法である。
Alternatively, in the above-described editing video photographing method with a subject information acquiring function, in the subject information reflecting step, the subject information is superimposed on the video read out in the video reproducing step, and An editing video photographing method with a subject information acquisition function, characterized by having a step of clearly indicating the presence of a subject.

【0027】この方法では、指定された被写体が存在す
る映像を編集する際に、編集対象となる映像内に被写体
が反映されており、かつ、その被写体を明示することが
できる。これにより、編集者は被写体を明確に把握しつ
つ、編集作業を行う事ができ、より簡易な編集作業を行
う事が可能となる。
According to this method, when editing a video in which a designated subject exists, the subject is reflected in the video to be edited, and the subject can be clearly specified. Thus, the editor can perform the editing operation while clearly grasping the subject, and can perform the editing operation more easily.

【0028】あるいは、以上の被写体情報取得機能付き
編集用映像撮影方法において、前記映像操作工程では、
前記被写体情報を含んだ映像を編集加工する工程を有す
る事を特徴とする被写体情報取得機能付き編集用映像撮
影方法である。
Alternatively, in the above-mentioned editing video photographing method with a subject information acquisition function,
An editing video shooting method with a subject information acquisition function, comprising a step of editing and processing a video including the subject information.

【0029】この方法では、被写体を指定しつつ、記録
した映像と被写体情報とを取り扱って、編集作業をする
ことが可能となる。これにより、撮影直後の被写体を含
む映像を編集するといったことを可能とし、編集に向か
ない映像であれば再度撮影をし直すといったことも可能
になり、より良い素材を取得する機会を増大する効果が
あると考えられる。
According to this method, it is possible to handle the recorded video and the subject information while designating the subject to perform the editing operation. As a result, it is possible to edit a video including a subject immediately after shooting, and it is possible to re-take a video that is not suitable for editing, thereby increasing opportunities to acquire better materials. It is thought that there is.

【0030】また、本発明の別の手段は、被写体を撮影
する撮影手段と、前記撮影されている被写体を指定する
被写体指定手段と、前記指定された被写体の情報を取得
する被写体情報取得手段と、前記撮影された映像を記録
する映像記録手段と、前記取得された被写体情報を記録
する被写体情報記録手段と、前記記録された映像を読み
出す映像再生手段と、前記記録された被写体情報を読み
出す被写体情報再生手段と、前記読み出された映像中に
前記読み出された被写体情報を反映させる被写体反映手
段と、前記被写体情報が反映された映像を操作する映像
操作手段とを、備える事を特徴とする被写体情報取得機
能付き編集用映像撮影装置である。
Further, another means of the present invention is a photographing means for photographing a subject, a subject designating means for designating the photographed subject, and a subject information acquiring means for acquiring information on the designated subject. Video recording means for recording the captured video, subject information recording means for recording the acquired subject information, video reproducing means for reading the recorded video, and subject for reading the recorded subject information Information reproducing means, a subject reflecting means for reflecting the read subject information in the read video, and a video operating means for operating a video in which the subject information is reflected, This is an editing video photographing device with a subject information acquisition function.

【0031】この装置は、上記の編集用映像撮影方法を
装置化したものである。
This apparatus is an apparatus which implements the above-mentioned editing video photographing method.

【0032】あるいは、被写体情報取得機能付き編集用
映像撮影装置において、前記撮影手段、前記被写体指定
手段、前記被写体情報取得手段、前記映像記録手段、及
び、前記被写体情報記録手段、が、単一の筐体に収めら
れている事を特徴とする被写体情報取得機能付き編集用
映像撮影装置である。
Alternatively, in an editing video photographing apparatus having a subject information acquiring function, the photographing means, the subject designating means, the subject information acquiring means, the video recording means, and the subject information recording means are composed of a single An editing video photographing device with a subject information acquisition function, which is housed in a housing.

【0033】この装置は、映像情報及び、被写体情報を
記録する機能を同一筐体に収めたものであり、持ち運ん
で、屋外や屋内などの様々な場所で、被写体及び映像を
記録する事を可能にする。
This apparatus has a function of recording video information and subject information in the same housing, and can be carried to record a subject and video in various places such as outdoors and indoors. To

【0034】あるいは、上記の被写体情報取得機能付き
編集用映像撮影装置において、前記撮影手段、前記被写
体指定手段、前記被写体情報取得手段、前記映像記録手
段、前記被写体情報記録手段、前記映像再生手段、前記
被写体情報再生手段、及び、前記被写体情報反映手段、
が、単一の筐体に収められている事を特徴とする被写体
情報取得機能付き編集用映像撮影装置である。
Alternatively, in the above-mentioned editing video photographing apparatus with a subject information acquiring function, the photographing means, the subject specifying means, the subject information acquiring means, the video recording means, the subject information recording means, the video reproducing means, The subject information reproducing means, and the subject information reflecting means,
Is an editing video photographing apparatus with a subject information acquisition function, which is housed in a single housing.

【0035】この装置は、映像及び被写体の情報を撮影
し、記録し、再生する機能を同一筐体に収めたものであ
り、持ち運んで、屋外や屋内などの様々な場所で、被写
体及び映像を記録し、かつ、それらの情報を読み出し
て、再生し、視聴する事を可能にする。
This apparatus has a function of photographing, recording, and reproducing information of an image and a subject in the same housing. The apparatus is portable and can be used in various places such as outdoors and indoors. It is possible to record, read out, reproduce, and view the information.

【0036】あるいは、上記の被写体情報取得機能付き
編集用映像撮影装置において、前記撮影手段、前記被写
体指定手段、前記被写体情報取得手段、前記映像記録手
段、前記被写体情報記録手段、前記映像再生手段、前記
被写体情報再生手段、前記被写体情報反映手段、及び、
前記映像操作手段が、単一の筐体に収められている事を
特徴とする被写体情報取得機能付き編集用映像撮影装置
である。
Alternatively, in the above-described editing video photographing apparatus with a subject information acquiring function, the photographing means, the subject specifying means, the subject information acquiring means, the video recording means, the subject information recording means, the video reproducing means, The subject information reproducing means, the subject information reflecting means,
An editing video photographing apparatus with a subject information acquiring function, wherein the video operating means is housed in a single housing.

【0037】この装置は、映像及び被写体を撮影し、情
報を取得し、記録し、再生し、それらの情報に対して編
集作業を含む操作を実行する事を実現する機能を同一筐
体に収めたものであり、持ち運び、屋外及び屋内の様々
な場所で装置の利用を可能とする。
This apparatus has a function of photographing a video and a subject, acquiring information, recording and reproducing the information, and executing operations including editing work on the information in the same housing. And allow the device to be carried around and used outdoors and indoors at various locations.

【0038】また、本発明のさらに別の手段は、被写体
を撮影する撮影手段と、前記撮影されている被写体を指
定する被写体指定手段と、前記指定された被写体を記録
する被写体記録手段と、前記撮影された映像を記録する
映像記録手段と、前記記録された映像を読み出す映像再
生手段と、前記記録された指定された被写体を読み出す
被写体記録再生手段と、前記読み出された指定された被
写体の情報を取得する被写体情報取得手段と、前記読み
出された映像中に前記取得された被写体情報を反映させ
る被写体反映手段と、前記被写体情報が反映された映像
を操作する映像操作手段とを、備える事を特徴とする被
写体情報取得機能付き編集用映像撮影装置である。
Still another means of the present invention is a photographing means for photographing a subject, a subject designating means for designating the photographed subject, a subject recording means for recording the designated subject, Video recording means for recording the captured video, video reproduction means for reading the recorded video, subject recording and reproduction means for reading the recorded specified subject, and Subject information acquiring means for acquiring information; subject reflecting means for reflecting the acquired subject information in the read video; and video operating means for operating a video on which the subject information is reflected. This is an editing video photographing apparatus with a subject information acquisition function.

【0039】この装置も、上記の編集用映像撮影方法を
装置化したものである。
This apparatus is also an apparatus in which the above-mentioned editing video photographing method is implemented.

【0040】あるいは、上記の被写体情報取得機能付き
編集用映像撮影装置において、前記撮影手段、前記被写
体指定手段、前記映像記録手段、前記被写体記録手段、
が、単一の筐体に収められている事を特徴とする被写体
情報取得機能付き編集用映像撮影装置である。
Alternatively, in the above-mentioned editing video photographing apparatus with a subject information acquiring function, the photographing means, the subject specifying means, the video recording means, the subject recording means,
Is an editing video photographing apparatus with a subject information acquisition function, which is housed in a single housing.

【0041】この装置は、映像情報及び、被写体情報を
記録する機能を同一筐体に収めたものであり、持ち運ん
で、屋外や屋内などの様々な場所で、被写体及び映像を
記録する事を可能にする。
This apparatus has a function of recording video information and subject information in the same housing, and can be carried to record a subject and video in various places such as outdoors and indoors. To

【0042】あるいは、上記の被写体情報取得機能付き
編集用映像撮影装置において、前記撮影手段、前記被写
体指定手段、前記映像記録手段、前記被写体記録手段、
前記映像再生手段、前記被写体記録再生手段、前記被写
体情報取得手段、及び、前記被写体情報反映手段、が、
単一の筐体に収められている事を特徴とする被写体情報
取得機能付き編集用映像撮影装置である。
Alternatively, in the above-mentioned editing video photographing apparatus with a subject information acquiring function, the photographing means, the subject specifying means, the video recording means, the subject recording means,
The video playback unit, the subject recording and playback unit, the subject information acquisition unit, and the subject information reflection unit,
An editing video photographing apparatus with a subject information acquisition function, which is housed in a single housing.

【0043】この装置は、映像及び被写体の情報を撮影
し、記録し、再生する機能を同一筐体に収めたものであ
り、持ち運んで、屋外や屋内などの様々な場所で、被写
体及び映像を記録し、かつ、それらの情報を読み出し
て、再生し、視聴する事を可能にする。
This apparatus has a function of photographing, recording, and reproducing information of a video and a subject in the same housing, and is used to carry the subject and the video in various places such as outdoors and indoors. It is possible to record, read out, reproduce, and view the information.

【0044】あるいは、被写体情報取得機能付き編集用
映像撮影装置において、前記撮影手段、前記被写体指定
手段、前記映像記録手段、前記被写体記録手段、前記映
像再生手段、前記被写体記録再生手段、前記被写体情報
取得手段、前記被写体情報反映手段、及び、前記映像操
作手段が、単一の筐体に収められている事を特徴とする
被写体情報取得機能付き編集用映像撮影装置である。
Alternatively, in the editing video photographing apparatus with a subject information acquiring function, the photographing means, the subject specifying means, the video recording means, the subject recording means, the video reproducing means, the subject recording and reproducing means, the subject information An editing video photographing apparatus with a subject information acquisition function, wherein the acquisition unit, the subject information reflection unit, and the video operation unit are housed in a single housing.

【0045】この装置は、映像及び被写体を撮影し、情
報を取得し、記録し、再生し、それらの情報に対して編
集作業を含む操作を実行する事を実現する機能を同一筐
体に収めたものであり、持ち運び、屋外及び屋内の様々
な場所で装置の利用を可能とする。
This apparatus has a function of photographing a video and a subject, acquiring information, recording and reproducing the information, and executing an operation including an editing operation on the information in the same housing. And allow the device to be carried around and used outdoors and indoors at various locations.

【0046】なお、先に記載の編集用映像撮影方法にお
ける工程をコンピュータで実行するためのプログラム
を、該コンピュータで読み取り可能な記憶媒体に記録す
ることが可能である。
It is possible to record a program for executing the steps in the above-described editing video photographing method on a computer in a storage medium readable by the computer.

【0047】この編集用映像撮影方法を記述したプログ
ラムを記録した記憶媒体によれば、本発明の方法を記憶
媒体として配布したり、保存したりすることが可能とな
り、コンピュータを用いて本発明の方法を実現すること
が可能となる。
According to the storage medium storing the program describing the editing video photographing method, the method of the present invention can be distributed or stored as a storage medium, and the method of the present invention can be performed using a computer. The method can be realized.

【0048】[0048]

【発明の実施の形態】本発明の被写体情報取得機能付き
編集用映像撮影方法及び装置の具体的な実施形態例を以
下に示す。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Specific embodiments of a method and apparatus for editing video with an object information acquiring function according to the present invention will be described below.

【0049】まず、図1に被写体情報取得機能付き編集
用映像撮影方法の一実施形態例のフローチャートを示
す。
First, FIG. 1 shows a flowchart of an embodiment of an editing video photographing method with a subject information acquiring function.

【0050】まず、撮影対象となる情景0が存在する。
ここには、撮影者2が特に撮影したい被写体が存在する
ものとする。撮影工程11により、この情景は、被写体
を含んだ映像である被写体入り映像1として取り込まれ
る。次に、撮影者2は、映像中の特定の被写体を選択し
たい場合には、被写体指定工程12にて、被写体を指定
し、指定された被写体3を取得する。この指定された被
写体の情報は、まず被写体情報記録工程15にて記録さ
れる。その記録される内容は、指定された位置、時間、
領域の形状、面積、割合、被写体として指定された範囲
の色や明度等の分布、といった物理量が記録される。
First, there is a scene 0 to be photographed.
Here, it is assumed that there is a subject that the photographer 2 particularly wants to photograph. In the photographing step 11, this scene is captured as the image 1 including the object, which is the image including the object. Next, when the photographer 2 wants to select a specific subject in the video, the subject is designated in the subject designating step 12 and the designated subject 3 is acquired. The information of the designated subject is first recorded in a subject information recording step 15. The recorded contents are specified position, time,
Physical quantities such as the shape of the area, the area, the ratio, and the distribution of color, brightness, and the like in the range designated as the subject are recorded.

【0051】一方、被写体入り映像1は、撮影者の要求
に基づきつつ、映像記録工程14にて、映像記録5とし
て記録される。ここで使用する映像を記録する手段は、
特に問わないが、記録した映像を映像再生工程16によ
って、記録を読み出し、映像として再生できるものでな
ければならないことはいうまでもない。映像記録5に
は、カメラのON/OFFや、レンズパラメータ、時間
情報などの各種情報をあわせて記録しておく。
On the other hand, the video 1 containing the subject is recorded as the video recording 5 in the video recording step 14 based on the request of the photographer. The means to record the video used here is
Although it does not matter in particular, it is needless to say that the recorded video must be able to be read out and reproduced as a video by the video reproducing step 16. In the video recording 5, various information such as ON / OFF of the camera, lens parameters, and time information are also recorded.

【0052】一方、撮影者2が指定した指定された被写
体3を元に、撮影直後の被写体入り映像1と、映像記録
5から映像再生工程16によって読み出された映像情報
7のいずれか、または、両方の映像から、被写体情報4
を抽出する。ここで抽出される被写体情報は、指定され
た被写体を指定して、その位置、移動距離や、形状、
色、明度の変化といった物理量として算出される。こう
した物理特徴量でもある被写体情報4は、指定された被
写体3とともに、被写体情報記録工程15にて被写体情
報記録6として記録される。このメディア、及び形状
は、特に指定しないが、被写体情報再生工程17にて、
読み出され、被写体情報8として取り出せるものでなけ
ればならない。この一連の処理により、情景を撮影した
ある時点で指定された被写体に対し、撮影し、記録しつ
つある映像か、または一度撮影し、記録された映像を元
に、被写体情報を抽出し、保存している事になる。
On the other hand, based on the designated subject 3 designated by the photographer 2, any one of the subject-incorporated video 1 immediately after shooting and the video information 7 read out from the video recording 5 in the video reproducing step 16, or , Subject information 4 from both images
Is extracted. The subject information extracted here specifies the designated subject, and its position, moving distance, shape,
It is calculated as a physical quantity such as a change in color or brightness. The subject information 4 which is also such a physical feature is recorded as the subject information record 6 in the subject information recording step 15 together with the designated subject 3. The media and the shape are not specified, but in the subject information reproducing step 17,
It must be read out and taken out as subject information 8. Through this series of processing, for a specified subject at a certain point in time when the scene is captured, the video is being captured and recorded, or once, the subject information is extracted and stored based on the recorded video. You are doing it.

【0053】いずれも一度記録され、読み出された映像
情報7及び被写体情報8を、被写体反映工程18にて、
統合し、映像上に被写体情報を反映させる。この反映の
方法は、被写体の存在を告知し、数値的な情報として文
字等を介して表示しても良いし、その被写体の位置、場
所、形状の変化、移動距離といった物理量を元に、撮影
者2や編集者10が、理解可能である形式でなければな
らない。
The video information 7 and the subject information 8, which have been recorded and read once, are combined in a subject reflecting step 18.
Integrate and reflect subject information on video. This reflection method may notify the existence of the subject and display it as numerical information via characters or the like. Alternatively, the reflection may be performed based on physical quantities such as the position, location, shape change, and movement distance of the subject. It must be in a format that the editor 2 and the editor 10 can understand.

【0054】被写体情報が反映された映像である被写体
情報反映映像9に対して、編集者10は、映像操作工程
19を介して操作を加える事ができる。操作を加えた結
果が、操作済み映像20として出力される。映像操作工
程19では、映像の内容を並べ替えたり、映像に対して
特殊なマーキングを行うなど多様な操作を含む。
The editor 10 can add an operation to the subject information reflecting video 9 which is a video on which the subject information is reflected, through a video operation step 19. The result of the operation is output as the operated video 20. The image operation step 19 includes various operations such as rearranging the contents of the image and performing special marking on the image.

【0055】図2に、被写体情報取得機能付き編集用映
像撮影装置の第一の実施形態例を示す。
FIG. 2 shows a first embodiment of an editing video photographing apparatus having a subject information acquiring function.

【0056】第一の実施形態例では、被写体入り情景3
0に対し、撮影者50が、撮影手段60を駆使して、被
写体入り映像31を取得する。この撮影手段60は、C
CDなどを用いて、光学情報を電子情報に変換し、電気
回路で取り扱うことができるように情報変換するもので
ある。そのサイズ、画素、撮影時の画角、焦点について
は特に制限を設けない。
In the first embodiment, the scene 3 with the subject
For 0, the photographer 50 makes full use of the photographing means 60 to acquire the image 31 containing the subject. This photographing means 60
The optical information is converted into electronic information using a CD or the like, and the information is converted so that it can be handled by an electric circuit. There are no particular restrictions on the size, pixels, angle of view at the time of shooting, and focus.

【0057】撮影者50は、被写体入り映像31に対し
て、特に指定した被写体が存在する場合には、被写体指
定手段61によってその被写体を指定することで、指定
された被写体32を決定する。これら被写体入り映像3
1及び指定された被写体32を格納するために、記録メ
ディア52に保存しておく。被写体指定手段については
後程具体的な説明を加える。
When the photographer 50 specifies a particular subject in the video 31 including the subject, the designated subject 32 is determined by designating the subject by the subject designating means 61. These subject images 3
1 and the designated subject 32 are stored in the recording medium 52. A specific description of the subject designating means will be added later.

【0058】ついで、被写体入り映像31と指定された
被写体32を解析し、被写体情報取得手段62によって
被写体情報(物理特徴量)33を出力する。この被写体
情報33についても記録メディア52に格納する。
Next, the subject image 31 and the designated subject 32 are analyzed, and subject information (physical feature quantity) 33 is output by the subject information obtaining means 62. The subject information 33 is also stored in the recording medium 52.

【0059】この時点で記録メディア52には、映像記
録34及び被写体情報記録35が格納されている事にな
る。記録メディアについてはとくに指定を加えないが、
情報を十分に記録し、かつ、取り出す事が容易なものが
好適である。例えば、磁気ディスクであったり、光情報
を用いたメディアであったり、テープメディアであった
りする。なお、映像記録と被写体情報を格納しておく記
録メディアが同一であったり、共通のメディアである必
要はない。例えば、映像情報については、磁気テープに
保存し、被写体情報については、磁気ディスクに保存す
るという形式でも構わない。メディアを分離する場合に
は、それぞれのメディアから情報を取り出し、同期を行
う事ができるようにしておけば良い。記録される情報に
ついては、その記録フォーマット、サイズ、形状、及び
記録メディアは、特に制限を設けないが、元の情報をほ
ぼ完全な状態に再現できる形式であれば良い。
At this point, the video recording 34 and the subject information recording 35 are stored in the recording medium 52. There is no specific specification for the recording media,
It is preferable that information be sufficiently recorded and be easily retrieved. For example, it is a magnetic disk, a medium using optical information, or a tape medium. It is not necessary that the video recording and the recording medium for storing the subject information be the same or a common medium. For example, the image information may be stored on a magnetic tape, and the subject information may be stored on a magnetic disk. In the case of separating the media, information may be taken out from each media and synchronization may be performed. Regarding the information to be recorded, the recording format, size, shape, and recording medium are not particularly limited, but may be any format that can reproduce the original information in an almost perfect state.

【0060】記録メディアに記録された映像記録34
は、映像再生手段63によって、記録メディア52から
読み出され、映像情報36として再生する事ができる。
一方、被写体情報記録35は、被写体情報再生手段64
によって、記録メディア52から読み出され被写体情報
37として抽出され、メモリ等に保持される事になる。
これら映像記録36と被写体情報37を被写体反映手段
65によって、組み合わせて、被写体情報が反映された
被写体情報反映映像38を構成する。この読み出された
映像記録及び被写体情報記録を用いて被写体反映手段に
よって制作される被写体情報反映映像については、後に
詳細な説明を加える。
Video recording 34 recorded on recording medium
Can be read from the recording medium 52 by the video reproducing means 63 and reproduced as the video information 36.
On the other hand, the subject information record 35 includes a subject information reproducing unit 64
Thus, the information is read from the recording medium 52, extracted as the subject information 37, and stored in a memory or the like.
The video recording 36 and the subject information 37 are combined by the subject reflecting means 65 to form a subject information reflected video 38 on which the subject information is reflected. The subject information reflecting video produced by the subject reflecting means using the read video recording and the subject information recording will be described later in detail.

【0061】ついで、作成された被写体情報反映映像3
8に対し、映像操作手段66によって、編集者51は定
められた手順に従って、いくつかの操作を加える事がで
きるものとする。操作を加える編集者51は、撮影者5
0と同一人物であっても構わないし、別個の人物であっ
ても構わない。また、その人数については、特に制限を
設けない。加える事が可能な操作は、例えば、被写体情
報反映映像38を通常再生したり、特殊再生したり、そ
の並びを組み替えたり、映像や被写体とは直接関係のな
い情報を付加したり、映像の並び順を入れ替えたり、映
像を構成するフレームに変化を加えたりする事を可能と
する。この映像操作手段についても説明を後述する。
Next, the created subject information reflection image 3
8, the editor 51 can perform some operations in accordance with a predetermined procedure by the video operation means 66. The editor 51 who adds the operation is the photographer 5
It may be the same person as 0 or a different person. There is no particular limitation on the number of persons. Operations that can be added include, for example, normal reproduction of the subject information reflection video 38, special reproduction, rearrangement of the sequence, addition of information that is not directly related to the video or the subject, It is possible to change the order or change the frames constituting the video. The description of this video operation means will be described later.

【0062】各機能の説明の前に、その概観及び動作イ
メージを図4、図5に示す。撮影者は、図4の撮影記録
機器を操作する。撮影し、記録した後の操作について
は、図5に示す機器を用いる。これら、図4、図5に示
されている機器は、一つの筐体で構成されており、上述
の第一の実施形態例を実現するための機器の一つの例で
ある。
Before describing each function, an overview and an operation image thereof are shown in FIGS. The photographer operates the photographing and recording device in FIG. For operations after photographing and recording, the apparatus shown in FIG. 5 is used. The devices shown in FIGS. 4 and 5 are constituted by one housing, and are one example of devices for realizing the first embodiment described above.

【0063】図4は、映像撮影を行う場合の装置概観と
その動作イメージを示している。被写体を含む情景10
1を対象に、撮影用レンズ105を用いて、撮影光軸1
04が示す撮影されている範囲102を撮影する。撮影
された情景を反映した映像は、液晶モニタ106を介し
て、撮影した映像107として表示される。撮影者が、
撮影した映像107の中のある特定の被写体に注目した
い場合には、被写体指定用ペン108を用いて、撮影中
の映像内で指定した被写体103を指定する。例えば、
被写体を直方体やその他の形状で囲んだり、こうして撮
影中の映像に被写体を指定する。一方、撮影した映像は
撮影者の命令に対応して記録される。既に記録された映
像については、液晶サブモニタ112の中で、記録され
ている映像の代表画像群109として表示される。な
お、撮影時の画角、焦点距離、絞りといった撮影時のパ
ラメータや、撮影開始及び終了、記録開始及び終了、指
定した被写体の更新、除去といった操作を各種制御ボタ
ン110や、撮影制御ボタン111にて行う。ボタンの
個数は、機能に応じて適宜変更される事はいうまでもな
い。
FIG. 4 shows an overview of the apparatus and its operation image when performing video shooting. Scene 10 including subject
1 and a photographing optical axis 1 using a photographing lens 105.
The photographed area 102 indicated by 04 is photographed. The video reflecting the captured scene is displayed as a captured video 107 via the liquid crystal monitor 106. The photographer
When it is desired to pay attention to a specific subject in the captured video 107, the subject 103 specified in the video being captured is specified using the subject specifying pen. For example,
The subject is surrounded by a rectangular parallelepiped or another shape, and the subject is designated in the video being shot in this way. On the other hand, the photographed video is recorded according to the photographer's command. The already recorded video is displayed on the liquid crystal sub monitor 112 as a representative image group 109 of the recorded video. Note that shooting parameters such as angle of view, focal length, and aperture during shooting, and operations such as starting and ending shooting, starting and ending recording, and updating and removing a specified subject are performed on various control buttons 110 and shooting control buttons 111. Do it. It goes without saying that the number of buttons is appropriately changed according to the function.

【0064】次に、図5を用いて撮影された映像を再生
し、表示するための概観イメージについて示す。撮影さ
れた映像は、液晶モニタ120の中で、再生中の映像1
22として再生される。このとき、再生中の映像以外の
他の時間に撮影された映像の代表画像群を124に示す
ように、他で表示する事も可能である。そして、再生の
開始、終了などの映像再生に関する基本的な動作につい
ては、126の再生制御ボタンを用いて行う。その他
に、早送り、まき戻し、高速再生、スロー再生等の特殊
再生等を行う場合があるが、これらについては画面上の
制御コマンドを介して行っても良いし、127に示すよ
う操作ボタンを介して実現しても構わない。なお、再生
の際に、映像に操作を加える場合がある。こうした操作
を加えるための入力手段の一つとして、映像操作用ペン
121を有していても良い。なお、液晶モニタ120上
で再生表示される再生中の映像122において、指定さ
れた被写体が存在する場合には、被写体の存在を明示す
るような枠を適宜表示しても良い。この枠表示の有無に
ついては、あってもなくても良い。
Next, an overview image for reproducing and displaying the photographed video will be described with reference to FIG. The captured video is a video 1 being reproduced on the LCD monitor 120.
Reproduced as 22. At this time, it is also possible to display a representative image group of a video taken at a time other than the video being reproduced at another time as shown by 124. Basic operations related to video reproduction, such as start and end of reproduction, are performed using the reproduction control button 126. In addition, special playback such as fast-forward, rewind, high-speed playback, and slow playback may be performed. These may be performed via a control command on the screen, or via an operation button as shown at 127. It may be realized. At the time of reproduction, an operation may be added to the video. As one of the input means for performing such an operation, a video operation pen 121 may be provided. In the case where the designated subject exists in the video 122 being played back and displayed on the liquid crystal monitor 120, a frame that clearly indicates the presence of the subject may be displayed as appropriate. The presence or absence of this frame display may or may not be present.

【0065】撮影者が操作を行う機器及びその動作イメ
ージについて言及したことを踏まえて、第一の実施形態
例における被写体指定手段について説明を加える。
The subject designating means in the first embodiment will be described based on the fact that the photographer has referred to the device operated by the photographer and the operation image thereof.

【0066】撮影を行うと、何らかの情景を撮影した映
像が液晶モニタに表示される。撮影者は、特定の被写体
がその映像申に存在する場合には、被写体指定用ペンを
用いて被写体を含む領域を指定する。この指定された結
果が、撮影中の映像内で指定した被写体として反映され
る。なお、指定の際に、本実施形態例では、機器に有線
で指定されたペン形状のものを用いているが、領域を指
定する他の方法でも構わない。それは、例えば、視線入
力技術を応用した物でも構わないし、マウス等を用いて
も構わないし、液晶モニタ上にタッチパネルを装備し
て、指等で入力させても構わない。こうして被写体を指
定し、記録する。映像記録と独立に、被写体記録が保存
される事については上述してある通りである。
When a picture is taken, an image of a certain scene is displayed on a liquid crystal monitor. When a specific subject is present in the video report, the photographer specifies an area including the subject using the subject specifying pen. The specified result is reflected as the specified subject in the video being shot. In the present embodiment, a pen-shaped device designated by wire is used for designation, but another method of designating an area may be used. For example, an object to which the eye-gaze input technology is applied may be used, a mouse or the like may be used, or a touch panel may be provided on the liquid crystal monitor, and input may be made with a finger or the like. Thus, the subject is designated and recorded. The fact that the subject record is saved independently of the video record is as described above.

【0067】なお、映像は時系列情報であり、ある時点
で被写体の指定を行っても、カメラワークや被写体を取
り巻く環境、被写体そのものの移動といった条件によ
り、被写体に変化が発生する可能性がある。この場合、
二つの処理が考えられる。図6にその模式図を示す。
The image is time-series information, and even if the subject is specified at a certain point in time, the subject may change due to conditions such as camera work, the environment surrounding the subject, and the movement of the subject itself. . in this case,
Two processes are possible. FIG. 6 shows a schematic diagram thereof.

【0068】第一の処理(図6(1))は、映像記録に
加えて、被写体指定時の被写体の情報(位置、形状、範
囲、指定された被写体の明度、色、面積、等)と、指定
したタイミングを記録、保存しておき、記録された映像
を読み出すときに同期がとれるようにしておくものであ
る。この処理では、被写体指定時以外の情報は取得せず
にいるため、被写体に変化が生じた場合には、完全な対
応は困難となる。従って、映像を記録したあとに被写体
情報取得手段(または工程)に情報を引き渡すなどし
て、情報を補完する処理が必要になる場合がある。
The first process (FIG. 6 (1)) includes, in addition to the video recording, information (position, shape, range, brightness, color, area, etc., of the specified subject) at the time of specifying the subject. The designated timing is recorded and stored so that synchronization can be achieved when the recorded video is read. In this process, information other than when the subject is specified is not obtained, and it is difficult to completely cope with a change in the subject. Therefore, there is a case where it is necessary to perform a process of complementing the information by, for example, transferring the information to the subject information acquiring means (or process) after recording the video.

【0069】一方、第二の処理(図6(2))は、一度
指定された被写体については、その被写体を撮影されて
いる映像中で追跡し、被写体情報を逐次更新し、記録と
して保存していく。この場合、逐次追跡することが必要
となる。被写体の追跡に対しては、指定された被写体を
含む領域と類似する領域を逐次推定していく事で追跡を
行う。推定された結果としての、逐次算出された被写体
情報と、同期する映像とをそれぞれ逐次記録しておく。
こちらも第一の処理同様、映像記録と被写体情報は別個
に記録されるので、逐次算出された被写体情報と、映像
情報とが関連つくようにしておくことはいうまでもな
い。
On the other hand, in the second processing (FIG. 6 (2)), for a once designated subject, the subject is tracked in the video being photographed, subject information is sequentially updated, and stored as a record. To go. In this case, sequential tracking is required. The tracking of the subject is performed by sequentially estimating a region similar to the region including the designated subject. The sequentially calculated subject information and the synchronized video as the estimated result are sequentially recorded.
Also in this case, as in the first processing, the video recording and the subject information are recorded separately, so that it is needless to say that the subject information calculated sequentially and the video information are associated with each other.

【0070】被写体の追跡に際しては、図7に示すよう
に、領域同士をブロックマッチングで推定する。ある画
像f(t)における領域P(k,t)において、探索対
象となるフレーム、(一般には次のフレーム)f(t+
1)のp(k,t+1)を探索するために、p(k,
t)に相当する領域を様々に移動し、領域内の対応する
画素毎に差分を算出し、その差分が最も小さくなったと
きの領域を被写体領域とする。差分計算を行う際に用い
る情報としては、明度、色等の情報を用いる。本実施形
態例では、RGB明度差分和を差分計算の情報として用
いている。
In tracking a subject, regions are estimated by block matching as shown in FIG. In an area P (k, t) in an image f (t), a frame to be searched, (generally the next frame) f (t +
In order to search for p (k, t + 1) in 1), p (k,
The region corresponding to t) is moved variously, a difference is calculated for each corresponding pixel in the region, and the region where the difference is smallest is defined as the subject region. Information such as lightness and color is used as information used when performing the difference calculation. In the present embodiment, the RGB lightness difference sum is used as information for difference calculation.

【0071】この被写体情報に関する処理については、
その利用形態と、情報を取得できる性能があるかどうか
によって第一又は第二のいずれかの機能が選択される。
情報という点から考えれば逐次取得できる方が望ましい
が、必須ではない。
Regarding the processing relating to the subject information,
Either the first or second function is selected depending on the use form and whether or not there is a capability to acquire information.
From the viewpoint of information, it is desirable that the information can be obtained sequentially, but it is not essential.

【0072】次に、取得された被写体情報を用いて、映
像記録及び被写体情報記録を用いて被写体を反映するこ
とで制作される被写体情報反映映像について詳細な説明
を加える。撮影により映像は映像として記録され、読み
出される。同時に、映像記録とともに記録された情報、
例えば、時間、カメラのON/OFF、レンズパラメー
タといった各種情報も読み出される。一方、指定し抽出
された被写体に関する情報も記録され、読み出される。
読み出した情報を利用するために、必要に応じてこれら
を組み合わせて提示する。
Next, a detailed description will be given of a subject information reflected image produced by reflecting a subject using video recording and subject information recording using the acquired subject information. The video is recorded and read out as a video by shooting. At the same time, information recorded with the video recording,
For example, various information such as time, camera ON / OFF, and lens parameters are also read. On the other hand, information on the designated and extracted subject is also recorded and read out.
In order to use the read information, they are presented in combination as necessary.

【0073】被写体反映映像では、映像を再生させる際
に、被写体の情報があわせて表示される。映像を通常又
は早送りで再生させる際には、映像中に被写体の位置、
場所、形状、色、といったものが明示される。また、編
集等の役に立たせるために、映像を全て見せず、一部の
代表画像だけ提示する場合がある。これは編集作業や、
撮影できているかどうかの確認のためには非常に有効な
手法である。従来技術でも応用されているが、撮影直後
に意図した映像が撮れているかどうか確認する場合に、
撮影されている映像を代表する画像が存在していれば、
その内容を把握しやすい。また、一方で、編集作業で、
良い素材を探し出すときにも有効な方法である。これま
で従来手法の中でも、カメラのON/OFFに対応する
ショットチェンジ直後の映像や、カメラワークを反映し
たパラノマ画像などが用いられている。具体的には、図
8の(4)のような形式で反映される。
In the subject reflection video, when the video is reproduced, information on the subject is also displayed. When playing the video in normal or fast forward, the position of the subject in the video,
Things such as location, shape, and color are specified. In addition, in order to be useful for editing or the like, there are cases where only some of the representative images are presented without showing the entire video. This is for editing work,
This is a very effective method for confirming whether or not shooting has been completed. Although it is applied in the conventional technology, when checking whether the intended image is taken immediately after shooting,
If there is an image representing the video being shot,
It is easy to grasp the contents. On the other hand, in the editing work,
It is also an effective way to find good materials. Up to now, among the conventional methods, a video immediately after a shot change corresponding to ON / OFF of a camera, a paranoma image reflecting camera work, and the like have been used. Specifically, it is reflected in a format as shown in FIG.

【0074】被写体の情報もこれらに類して十分に活用
できる。とくに、本実施形態例による被写体情報は撮影
者が特に注目して指定した被写体であり、撮影者が特に
重要であるとしたものと判断がつけやすい。例えば、被
写体の有無を判別し、指定された被写体を含むショット
区間のみを扱う。被写体を含む区間の代表画像を被写体
を強調して提示する等といった被写体を反映した映像の
提示方法が考えられる。この例は図8の(5)のような
形式で提示される。なお、こうした代表画像は、図4に
示すように、撮影中あるいは、撮影直後に液晶やそれ以
外の専用の液晶モニタ等で表示し、撮影しながら記録さ
れている映像を確認するといった応用を考える事ができ
る。また、映像を再生する際にも、同様に液晶モニタや
サブモニタ上で表示する。こうすることで、撮影者や編
集者が被写体を含む映像の内容を把握しやすくなる。す
なわち、本実施形態例では、図4,5におけるサブモニ
タ等で代表画像が表示され、その形式は図8に示すよう
なショットチェンジ直後の映像等に加えて、被写体情報
を含む映像も代表画像として用いられる。
The information on the subject can be sufficiently utilized in a similar manner. In particular, the subject information according to the present embodiment is a subject specified by the photographer with particular attention, and it is easy to determine that the photographer has determined that the subject information is particularly important. For example, the presence or absence of a subject is determined, and only a shot section including the designated subject is handled. A method of presenting a video reflecting a subject, such as presenting a representative image of a section including the subject with the subject emphasized, may be considered. This example is presented in a format as shown in FIG. As shown in FIG. 4, such a representative image is displayed on a liquid crystal display or another dedicated liquid crystal monitor or the like during or immediately after photographing, and an application in which a recorded image is confirmed while photographing is considered. Can do things. Also, when reproducing a video, the video is similarly displayed on a liquid crystal monitor or a sub monitor. This makes it easier for the photographer and the editor to grasp the contents of the video including the subject. That is, in the present embodiment, the representative image is displayed on the sub-monitor or the like in FIGS. 4 and 5, and in addition to the image immediately after the shot change as shown in FIG. Used.

【0075】次に、映像に操作を加える操作手段につい
て説明を加える。
Next, operation means for operating the video will be described.

【0076】映像に加える操作の一つとして、通常再生
や、特殊再生があげられる。指定した映像を通常のスピ
ードで再生したり、フレームのサイズを変更して再生し
たり、スピードを変更して再生したり、時間又は空間解
像度を変更して再生したり、時間方向を逆にして再生し
たりするという方法である。また、ショットチェンジ直
後や指定された被写体情報を含む映像のみを再生したり
するなどの再生方法もこれに含む。
One of the operations to be added to the video includes normal reproduction and special reproduction. Play the specified video at normal speed, change the size of the frame, play it at a different speed, play it at a different time or space resolution, or reverse the time direction. Or play it. In addition, this also includes a reproducing method such as reproducing only a video including the specified subject information immediately after a shot change or the like.

【0077】液晶やそれ以外の材質で構成されたモニタ
において、代表画像が提示されている場合、それらをペ
ンやそれ以外の入力デバイス系を駆使して入力、指定
し、代表画像と対応している映像を再生させる。例え
ば、図9の(1)に示すような形態で再生させる。
When a representative image is presented on a monitor made of a liquid crystal or other material, the representative image is input and specified by using a pen or other input device system, and is corresponded to the representative image. Play the video that is For example, it is reproduced in a form as shown in FIG.

【0078】また、さらに進めて簡易編集も実現する。
例えば、図9の(3)に示すように、代表画像を表示す
る部分と、その代表画像を選択し、ある特定の領域上へ
並べ、その並びにそって映像を再生する。これにより、
簡易な並べ替えを行うことができ、粗編集等に有効とな
る。こうした操作情報は、そのまま保存したり、出力さ
れ、実際の編集作業の際に反映するといったことは本実
施形態例の容易な拡張である。
Further, simple editing is also realized.
For example, as shown in (3) of FIG. 9, a portion for displaying the representative image and the representative image are selected, arranged on a specific area, and the video is reproduced along the area. This allows
Simple rearrangement can be performed, which is effective for rough editing and the like. Saving or outputting such operation information as it is and reflecting it in actual editing work is an easy extension of this embodiment.

【0079】また、特殊な操作方法として、ある被写体
情報を指定し、その被写体情報と同一の情報を含む映像
を検索するといった応用も考えられる。同一被写体を含
む映像を検索し、同一被写体を含む映像を出力する事が
できる。これは、被写体情報と類似する領域をブロック
マッチングと同様の手法で、演算し、ある閾値よりも小
さな領域が存在する場合には、同一被写体が存在する画
像が出力される。
As a special operation method, there is also an application of designating certain subject information and searching for a video including the same information as the subject information. It is possible to search for a video including the same subject and output a video including the same subject. In this method, an area similar to the subject information is calculated by the same method as block matching, and when an area smaller than a certain threshold exists, an image in which the same subject exists is output.

【0080】これは、本発明の方法の実施形態例の一つ
であるが、撮影時または再生時に、映像中に被写体を指
定し、その映像中に存在する被写体を追跡するだけでな
く、異なる時系列上の映像中の被写体を推定する。これ
は、あらかじめ指定された被写体の物理情報を保持して
おき、他の時間、場所で撮影された映像に対し、保持さ
れている被写体情報を用いて被写体の有無を判定する。
異なる時間の映像は、あらかじめ映像を記録して保持し
ておき、必要に応じてこれを読み出す。一方、指定され
た被写体情報も読み出す。これらを読み出して、被写体
の有無及び追跡を行う対象となる映像及び被写体情報に
ついては、これを操作する利用者が選択し、指示を行っ
ても良いし、記録されているすべての情報に対して自動
的に処理を行っても良い。なお、被写体の有無及び、追
跡については、本実施形態例の他で述べて有る物理量を
元にした比較手法を用いれば良く、その詳細について
は、ここでは触れない。
This is one of the embodiments of the method of the present invention. In addition to specifying a subject in a video at the time of photographing or reproducing and tracking the subject existing in the video, different methods are used. Estimate the subject in the video in time series. In this method, physical information of a predetermined subject is stored in advance, and the presence / absence of a subject is determined using the stored subject information with respect to a video shot at another time and place.
Images at different times are recorded and stored in advance, and read out as necessary. On the other hand, the designated subject information is also read. These are read, and the presence or absence of the subject and the video and subject information to be tracked may be selected and instructed by the user who operates it, or may be performed for all recorded information. The processing may be performed automatically. It should be noted that the presence or absence and tracking of the subject may be determined by using a comparison method based on the physical quantity described in the other embodiments of the present embodiment, and details thereof will not be described here.

【0081】次に、図3に、被写体情報取得機能付き編
集用映像撮影装置の第二の実施形態例を示す。この実施
形態例は、第一の実施形態例と同様の機能を有する回路
を用いている。同一名称については、同一機能を有して
いることはいうまでもない。
Next, FIG. 3 shows a second embodiment of an editing video photographing apparatus having a subject information acquiring function. This embodiment uses a circuit having the same function as the first embodiment. It goes without saying that the same name has the same function.

【0082】第二の実施形態例では、被写体入り情景3
0から被写体入り映像31を記録メディア52に格納す
る一方で、被写体入り映像31に対して、撮影者50が
指定したい被写体に対し、被写体指定手段61によっ
て、指定作業を行い、指定された被写体32を作成す
る。この指定された被写体32も記録メディア52に格
納される。ここまでは、第一の実施形態例とまったく差
はない。
In the second embodiment, the scene 3
0, the subject-specific image 31 is stored in the recording medium 52, while the subject-specific image 32 is designated by the subject specifying means 61 for the subject that the photographer 50 wants to specify. Create The designated subject 32 is also stored in the recording medium 52. Up to this point, there is no difference from the first embodiment.

【0083】次に、第一の実施形態例では、その被写体
入り映像から、指定された被写体を加工し、被写体情報
取得手段によって被写体情報を抽出した。が、第二の実
施形態例では、記録メディア52に格納されている映像
記録34から読み出された映像再生手段63によって得
られる映像情報36と、同じく記録メディア52に格納
されている指定された被写体記録321を元に、被写体
情報取得手段62によって、被写体情報(物理特徴量)
33を算出する。この被写体情報33は記録メディア5
2に格納され、随時読み出す事ができる。こうして算出
された被写体情報33は、被写体反映手段65によっ
て、映像情報36に反映され、被写体情報反映映像38
を作成する。この被写体情報反映映像38はこれも第一
の実施形態例と同様に映像操作手段66にて、編集者5
1により処理され、操作済み映像39を作成する事がで
きる。記録メディア52に格納されている映像記録及び
指定された被写体記録から、操作済み映像を構築するま
でに行われる一連の処理機能は、第一の実施形態例と同
一の処理であることは前述の通りである。
Next, in the first embodiment, a designated subject is processed from the video including the subject, and subject information is extracted by subject information obtaining means. However, in the second embodiment, the video information 36 obtained by the video reproducing means 63 read from the video recording 34 stored in the recording medium 52 and the designated video information 36 stored in the recording medium 52 Based on the subject record 321, subject information (physical feature amount) is obtained by the subject information acquisition unit 62.
33 is calculated. The subject information 33 is stored in the recording medium 5
2 and can be read at any time. The subject information 33 calculated in this way is reflected on the video information 36 by the subject reflecting means 65, and the subject information reflected video 38
Create The subject information reflecting video 38 is also processed by the video operating means 66 and edited by the editor 5 in the same manner as in the first embodiment.
1 and an operated video 39 can be created. As described above, a series of processing functions performed from the video recording stored in the recording medium 52 and the designated subject recording to constructing the operated video are the same as those in the first embodiment. It is on the street.

【0084】第一の実施形態例と、第二の実施形態例で
は、その処理を行うタイミングが異なる。即ち、第一の
実施形態例については、撮影された映像と、撮影時に指
定された被写体を用いて、被写体情報を算出しているの
に対し、第二の実施形態例においては、一度記録メディ
アに記録された映像記録と指定された被写体記録から、
被写体情報を算出している点が大きく異なる。言い換え
ると、映像を撮影し、記録する処理と同時に被写体情報
を抽出するのが第一の実施形態例であり、映像を撮影
し、記録した後、別途被写体情報を抽出するのが第二の
実施形態例である。
The timing at which the processing is performed is different between the first embodiment and the second embodiment. That is, in the first embodiment, the subject information is calculated using the shot video and the subject specified at the time of shooting, whereas in the second embodiment, once the recording medium From the video record recorded in the
The point that the subject information is calculated is greatly different. In other words, in the first embodiment, the subject information is extracted simultaneously with the process of shooting and recording the video, and the second embodiment is to separately extract the subject information after capturing and recording the video. It is a form example.

【0085】なお、図10に、第二の実施形態例の装置
概観及び動作イメージについて記す。これは、撮影し、
被写体を指定し、被写体及び映像の各種情報を取り込む
機器と、それらを処理し、被写体が反映された映像を操
作する機能とが同一の筐体でなく別個に別れている場合
である。撮影時には、なるべく機器を小型化した方が、
使用上便利であることはいうまでもない。従って、撮影
に必要な最低限の機器のみを同一筐体に収め、撮影した
後でも構わない機能及び装置については、別筐体に収め
る事にする。なお、これら撮影後の機能を収める筐体が
複数になっていても構わないことは自明である。撮影機
能と、撮影後に必要な機能との間については、有線で接
続しても良いし、無線でも構わないし、記録されている
記録メディアを可搬式にして、情報を撮影機器から撮影
後の機器、又は、その逆へと情報を受け渡せるようにな
っていても構わない。以上は、第一の実施形態例にも適
用可能である。
FIG. 10 shows an overview of the apparatus and an operation image of the second embodiment. It shoots and
This is a case where a device for designating a subject and taking in various types of information on the subject and the video and a function of processing the information and operating a video on which the subject is reflected are not separately provided in the same casing but are separately provided. When shooting, it is better to make the equipment as small as possible,
It goes without saying that it is convenient for use. Therefore, only the minimum necessary devices for photographing are housed in the same housing, and functions and devices that can be used after shooting are housed in another housing. It is obvious that there may be a plurality of housings for storing the functions after photographing. The connection between the shooting function and the functions required after shooting may be wired or wireless, and the recording medium on which the data is recorded is portable, and the information is obtained from the shooting device by the shooting device. Alternatively, the information may be transferred in the opposite direction. The above is also applicable to the first embodiment.

【0086】なお、この方法をコンピュータプログラム
で記載し、映像を取得する機能を持ち、映像や被写体を
中心とする各種情報を記録する記録メディア(例えば、
ROM,FD,CD,DVD、リムーバブルディスク、
メモリカードなど)をもち、この記録メディア上のプロ
グラムを読み取り実行する演算機能を有するコンピュー
タを用いる事で、同様の処理を構築する事は十分に可能
である。
Note that this method is described in a computer program, has a function of acquiring an image, and has a recording medium (for example,
ROM, FD, CD, DVD, removable disk,
Using a computer having a memory card) and an arithmetic function for reading and executing the program on the recording medium, it is sufficiently possible to construct the same processing.

【0087】なお、上述した実施形態例はその機能の本
質を再現するためのいくつかの実施形態例であり、容易
に類推可能な幾つかの機能及び仕様を変更した場合も本
発明の範囲内である。
The above-described embodiments are some embodiments for reproducing the essence of the function, and even if some easily guessable functions and specifications are changed, they are also within the scope of the present invention. It is.

【0088】[0088]

【発明の効果】本発明は、撮影者が特定の被写体を意識
して撮影したような映像を元に、編集者がその被写体を
中心とした映像を編集しようとする場合、撮影者の指定
した被写体の情報を用いて映像を整理し、構築する事が
可能になるため、簡易な映像編集に有効に機能する。
According to the present invention, when an editor intends to edit a video centering on a specific subject based on a video shot by the user taking a particular subject into consideration, the photographer specifies Since it is possible to organize and construct a video using information of a subject, it effectively functions for simple video editing.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の被写体情報取得機能付き編集用映像撮
影方法の一実施形態例を示すフローチャートである。
FIG. 1 is a flowchart illustrating an embodiment of an editing video shooting method with a subject information acquisition function according to the present invention.

【図2】本発明の被写体情報取得機能付き編集用映像撮
影装置の第一の実施形態例を示すブロック図である。
FIG. 2 is a block diagram illustrating a first embodiment of an editing video photographing apparatus with a subject information acquisition function according to the present invention;

【図3】本発明の被写体情報取得機能付き編集用映像撮
影装置の第二の実施形態例を示すブロック図である。
FIG. 3 is a block diagram showing a second embodiment of an editing video photographing apparatus with a subject information acquisition function according to the present invention;

【図4】上記第一の実施形態例の映像撮影時の装置概観
及び動作イメージを示す図である。
FIG. 4 is a diagram showing an overview and an operation image of the apparatus at the time of capturing an image according to the first embodiment.

【図5】上記第一の実施形態例の映像再生時の装置概観
及び動作イメージを示す図である。
FIG. 5 is a diagram showing an overview of the apparatus and an operation image during video reproduction according to the first embodiment.

【図6】(1),(2)は、本発明の実施形態例におけ
る被写体情報反映映像の例を示す図である。
FIGS. 6A and 6B are diagrams illustrating an example of a subject information reflection video according to the embodiment of the present invention.

【図7】(a),(b),(c)は、本発明の実施形態
例における被写体領域の追跡アルゴリズムを説明する図
である。
FIGS. 7A, 7B, and 7C are diagrams for explaining a tracking algorithm for a subject area according to the embodiment of the present invention.

【図8】(1),(2),(3),(4),(5)は、
本発明の実施形態例における被写体情報反映映像の例を
示す図である。
FIG. 8 shows (1), (2), (3), (4) and (5)
FIG. 4 is a diagram illustrating an example of a subject information reflection video according to the embodiment of the present invention.

【図9】(1),(2),(3)は、本発明の実施形態
例における映像操作例を示す図である。
FIGS. 9 (1), (2), and (3) are diagrams showing examples of video operations in the embodiment of the present invention.

【図10】本発明の第二の実施形態例の装置概観及び動
作イメージを示す図である。
FIG. 10 is a diagram showing an overview of the apparatus and an operation image according to a second embodiment of the present invention.

【図11】特定の被写体を中心とした映像の例を示す図
である。
FIG. 11 is a diagram illustrating an example of a video centering on a specific subject.

【図12】風景映像の撮影の例を示す図である。FIG. 12 is a diagram illustrating an example of shooting a landscape video.

【符号の説明】[Explanation of symbols]

0…被写体入り情景 1…被写体入り映像 2…撮影者 3…指定された被写体 4…被写体情報(物理特徴量) 5…映像記録 6…被写体情報記録 7…映像情報 8…被写体情報 9…被写体情報反映映像 10…編集者 11…撮影工程 12…被写体指定工程 13…被写体情報取得工程 14…映像記録工程 15…被写体情報記録工程 16…映像再生工程 17…被写体情報再生工程 18…被写体反映工程 19…映像操作工程 20…操作済み映像 30…被写体入り情景 31…被写体入り映像 32…指定された被写体 321…指定された被写体記録 33…被写体情報(物理特徴量) 34…映像記録 35…被写体情報記録 36…映像情報 37…被写体情報 38…被写体情報反映映像 39…操作済み映像 50…撮影者 51…編集者 52…記録メディア 60…撮影手段 61…被写体指定手段 62…被写体情報取得手段 63…映像再生手段 64…被写体情報再生手段 65…被写体反映手段 66…映像操作手段 0: Scene with subject 1 ... Video with subject 2 ... Photographer 3 ... Specified subject 4 ... Subject information (physical feature quantity) 5 ... Video recording 6 ... Subject information recording 7 ... Video information 8 ... Subject information 9 ... Subject information Reflected video 10 ... Editor 11 ... Shooting process 12 ... Subject designation process 13 ... Subject information acquisition process 14 ... Video recording process 15 ... Subject information recording process 16 ... Video reproduction process 17 ... Subject information reproduction process 18 ... Subject reflection process 19 ... Image operation step 20 ... Operated image 30 ... Subject scene 31 ... Subject image 32 ... Designated subject 321 ... Designated subject record 33 ... Subject information (physical feature amount) 34 ... Video record 35 ... Subject information record 36 ... Video information 37 ... Subject information 38 ... Subject information reflection video 39 ... Operated video 50 ... Photographer 51 ... Editor 52 ... Recording Media 60 ... Photographing means 61 ... Subject specifying means 62 ... Subject information obtaining means 63 ... Video reproducing means 64 ... Subject information reproducing means 65 ... Subject reflecting means 66 ... Video operating means

フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) H04N 5/232 H04N 5/232 Z 5/765 5/781 510F 5/781 510L (72)発明者 外村 佳伸 東京都新宿区西新宿3丁目19番2号 日本 電信電話株式会社内 Fターム(参考) 5C022 AA11 AB12 AB21 AB66 AC03 AC31 AC32 AC42 AC54 AC69 AC79 5C052 AA01 AB03 AB04 AC05 AC06 AC08 CC06 CC20 DD04 EE02 EE03 5E501 AA20 AC15 AC16 AC34 BA05 CA04 CB03 CB05 CB11 CB14 CC14 EB06 FA14 FA15 Continued on the front page (51) Int.Cl. 7 Identification symbol FI Theme coat II (Reference) H04N 5/232 H04N 5/232 Z 5/765 5/781 510F 5/781 510L (72) Inventor Yoshinobu Toomura Tokyo 3-19-2 Nishi-Shinjuku, Shinjuku-ku Nippon Telegraph and Telephone Corporation F-term (reference) 5C022 AA11 AB12 AB21 AB66 AC03 AC31 AC32 AC42 AC54 AC69 AC79 5C052 AA01 AB03 AB04 AC05 AC06 AC08 CC06 CC20 DD04 EE02 EE03 5E501 AA20 AC15 AC16 AC34 BA05 CA04 CB03 CB05 CB11 CB14 CC14 EB06 FA14 FA15

Claims (15)

【特許請求の範囲】[Claims] 【請求項1】 被写体を撮影する撮影工程と、 前記撮影されている被写体を指定する被写体指定工程
と、 前記撮影された映像を記録する映像記録工程と、 前記記録された映像を読み出す映像再生工程と、 前記読み出された映像中に前記指定された被写体につい
て取得される被写体情報を反映させる被写体反映工程
と、 前記被写体情報が反映された映像を操作する映像操作工
程とを、 有する事を特徴とする被写体情報取得機能付き編集用映
像撮影方法。
A photographing step of photographing a subject; a subject designating step of designating the photographed subject; a video recording step of recording the photographed video; and a video reproducing step of reading out the recorded video. And a subject reflection step of reflecting subject information acquired for the designated subject in the read video; and a video operation step of operating a video on which the subject information is reflected. Video editing method for editing with subject information acquisition function.
【請求項2】 請求項1に記載の被写体情報取得機能付
き編集用映像撮影方法において、 前記被写体指定工程の後に、 前記撮影中の映像から被写体情報を取得する被写体情報
取得工程と、 前記取得された被写体情報を記録する被写体情報記録工
程と、 前記記録された被写体情報を読み出して前記被写体反映
工程に送る被写体情報再生工程とを、 有する事を特徴とする被写体情報取得機能付き編集用映
像撮影方法。
2. The method according to claim 1, wherein, after the subject designating step, a subject information acquiring step of acquiring subject information from the video being photographed; A subject information recording step of recording subject information, and a subject information reproducing step of reading the recorded subject information and sending the subject information to the subject reflecting step. .
【請求項3】 請求項1に記載の被写体情報取得機能付
き編集用映像撮影方法において、 前記被写体指定工程の後に、 前記指定された被写体を記録する被写体記録工程と、 前記映像再生工程の後に、 前記記録された被写体を読み出す被写体再生工程と、 前記映像再生工程によって読み出された映像情報を解析
して、前記読み出された被写体についての被写体情報を
取得して前記被写体反映工程に送る被写体情報取得工程
とを、 有する事を特徴とする被写体情報取得機能付き編集用映
像撮影方法。
3. The method according to claim 1, wherein after the subject designating step, a subject recording step of recording the designated subject, and after the video reproducing step, A subject reproducing step of reading the recorded subject; and analyzing the video information read in the video reproducing step, obtaining subject information about the read subject, and sending the subject information to the subject reflecting step. An image capturing method for editing with a subject information acquiring function.
【請求項4】 請求項1,2,3のいずれか1項に記載
の被写体情報取得機能付き編集用映像撮影方法におい
て、 前記被写体情報が被写体の位置、形状、色、明度、移動
情報の一つ以上を含む物理特徴量である事を特徴とする
被写体情報取得機能付き編集用映像撮影方法。
4. The editing video photographing method with a subject information acquisition function according to claim 1, wherein said subject information is one of a position, a shape, a color, brightness, and movement information of the subject. An editing video photographing method with a subject information acquisition function, characterized in that it is a physical feature quantity including at least two.
【請求項5】 請求項1,2,3,4のいずれか1項に
記載の被写体情報取得機能付き編集用映像撮影方法にお
いて、 前記被写体情報反映工程では、 前記被写体情報を、前記映像再生工程によって読み出さ
れた映像に、重ねあわせ、映像内での被写体の存在を明
示させる工程を有する事を特徴とする被写体情報取得機
能付き編集用映像撮影方法。
5. The editing video photographing method with a subject information acquisition function according to claim 1, wherein said subject information reflecting step includes: transmitting said subject information to said video reproducing step. A method of superimposing on a video read by the above-mentioned method to clearly indicate the presence of a subject in the video, and a method for capturing an editing video with a subject information acquisition function.
【請求項6】 請求項1,2,3,4,5のいずれか1
項に記載の被写体情報取得機能付き編集用映像撮影方法
において、 前記映像操作工程では、 前記被写体情報を含んだ映像を編集加工する工程を有す
る事を特徴とする被写体情報取得機能付き編集用映像撮
影方法。
6. One of claims 1, 2, 3, 4, and 5
3. The editing video shooting method with a subject information acquisition function according to the item, wherein the video operation step includes a step of editing and processing a video including the subject information. Method.
【請求項7】 被写体を撮影する撮影手段と、 前記撮影されている被写体を指定する被写体指定手段
と、 前記指定された被写体の情報を取得する被写体情報取得
手段と、 前記撮影された映像を記録する映像記録手段と、 前記取得された被写体情報を記録する被写体情報記録手
段と、 前記記録された映像を読み出す映像再生手段と、 前記記録された被写体情報を読み出す被写体情報再生手
段と、 前記読み出された映像中に前記読み出された被写体情報
を反映させる被写体反映手段と、 前記被写体情報が反映された映像を操作する映像操作手
段とを、 備える事を特徴とする被写体情報取得機能付き編集用映
像撮影装置。
7. A photographing unit for photographing a subject, a subject designating unit for designating the photographed subject, a subject information acquiring unit for acquiring information on the designated subject, and recording the photographed video. Video recording means for recording, subject information recording means for recording the acquired subject information, video reproduction means for reading the recorded video, subject information reproduction means for reading the recorded subject information, A subject reflection unit that reflects the read subject information in the read video; and a video operation unit that operates a video in which the subject information is reflected. Video shooting device.
【請求項8】 請求項7に記載の被写体情報取得機能付
き編集用映像撮影装置において、 前記撮影手段、前記被写体指定手段、前記被写体情報取
得手段、前記映像記録手段、及び、前記被写体情報記録
手段、が、単一の筐体に収められている事を特徴とする
被写体情報取得機能付き編集用映像撮影装置。
8. The editing video photographing apparatus with a subject information acquiring function according to claim 7, wherein the photographing unit, the subject specifying unit, the subject information acquiring unit, the video recording unit, and the subject information recording unit. , Are housed in a single housing.
【請求項9】 請求項7に記載の被写体情報取得機能付
き編集用映像撮影装置において、 前記撮影手段、前記被写体指定手段、前記被写体情報取
得手段、前記映像記録手段、前記被写体情報記録手段、
前記映像再生手段、前記被写体情報再生手段、及び、前
記被写体情報反映手段、が、単一の筐体に収められてい
る事を特徴とする被写体情報取得機能付き編集用映像撮
影装置。
9. The editing video photographing apparatus with a subject information acquiring function according to claim 7, wherein the photographing unit, the subject designating unit, the subject information acquiring unit, the video recording unit, the subject information recording unit,
An editing video photographing apparatus with a subject information acquisition function, wherein the video reproducing unit, the subject information reproducing unit, and the subject information reflecting unit are contained in a single housing.
【請求項10】 請求項7に記載の被写体情報取得機能
付き編集用映像撮影装置において、 前記撮影手段、前記被写体指定手段、前記被写体情報取
得手段、前記映像記録手段、前記被写体情報記録手段、
前記映像再生手段、前記被写体情報再生手段、前記被写
体情報反映手段、及び、前記映像操作手段が、単一の筐
体に収められている事を特徴とする被写体情報取得機能
付き編集用映像撮影装置。
10. The editing video photographing apparatus with a subject information acquiring function according to claim 7, wherein: the photographing unit, the subject specifying unit, the subject information acquiring unit, the video recording unit, the subject information recording unit,
Wherein the video reproducing means, the subject information reproducing means, the subject information reflecting means, and the video operating means are housed in a single housing. .
【請求項11】 被写体を撮影する撮影手段と、 前記撮影されている被写体を指定する被写体指定手段
と、 前記指定された被写体を記録する被写体記録手段と、 前記撮影された映像を記録する映像記録手段と、 前記記録された映像を読み出す映像再生手段と、 前記記録された指定された被写体を読み出す被写体記録
再生手段と、 前記読み出された指定された被写体の情報を取得する被
写体情報取得手段と、 前記読み出された映像中に前記取得された被写体情報を
反映させる被写体反映手段と、 前記被写体情報が反映された映像を操作する映像操作手
段とを、 備える事を特徴とする被写体情報取得機能付き編集用映
像撮影装置。
11. A photographing means for photographing a subject, a subject designating means for designating the photographed subject, a subject recording means for recording the designated subject, and a video recording for recording the photographed video. Means, video reproducing means for reading the recorded video, subject recording / reproducing means for reading the recorded specified subject, and subject information obtaining means for obtaining the read information of the specified subject. A subject reflection unit that reflects the acquired subject information in the read video; and a video operation unit that operates a video in which the subject information is reflected. Video camera for editing.
【請求項12】 請求項11に記載の被写体情報取得機
能付き編集用映像撮影装置において、 前記撮影手段、前記被写体指定手段、前記映像記録手
段、前記被写体記録手段、が、単一の筐体に収められて
いる事を特徴とする被写体情報取得機能付き編集用映像
撮影装置。
12. The editing video photographing apparatus with a subject information acquiring function according to claim 11, wherein the photographing unit, the subject designating unit, the video recording unit, and the subject recording unit are provided in a single housing. An editing video photographing device with a subject information acquisition function, which is housed therein.
【請求項13】 請求項11に記載の被写体情報取得機
能付き編集用映像撮影装置において、 前記撮影手段、前記被写体指定手段、前記映像記録手
段、前記被写体記録手段、前記映像再生手段、前記被写
体記録再生手段、前記被写体情報取得手段、及び、前記
被写体情報反映手段、が、単一の筐体に収められている
事を特徴とする被写体情報取得機能付き編集用映像撮影
装置。
13. The editing video photographing device with a subject information acquiring function according to claim 11, wherein the photographing means, the subject specifying means, the video recording means, the subject recording means, the video reproducing means, and the subject recording are performed. An editing video photographing apparatus with a subject information acquisition function, wherein the playback unit, the subject information acquisition unit, and the subject information reflection unit are contained in a single housing.
【請求項14】 請求項11に記載の被写体情報取得機
能付き編集用映像撮影装置において、 前記撮影手段、前記被写体指定手段、前記映像記録手
段、前記被写体記録手段、前記映像再生手段、前記被写
体記録再生手段、前記被写体情報取得手段、前記被写体
情報反映手段、及び、前記映像操作手段が、単一の筐体
に収められている事を特徴とする被写体情報取得機能付
き編集用映像撮影装置。
14. The editing video photographing apparatus with a subject information acquiring function according to claim 11, wherein said photographing means, said subject specifying means, said video recording means, said subject recording means, said video reproducing means, and said subject recording are provided. An editing video photographing apparatus with a subject information acquiring function, wherein a reproducing unit, the subject information acquiring unit, the subject information reflecting unit, and the video operating unit are housed in a single housing.
【請求項15】 請求項1,2,3,4,5,6のいず
れか1項に記載の編集用映像撮影方法における工程をコ
ンピュータで実行するためのプログラムを、該コンピュ
ータで読み取り可能な記憶媒体に記録したことを特徴と
する編集用映像撮影方法を記述したプログラムを記録し
た記憶媒体。
15. A computer-readable storage program for executing the steps in the method for capturing an image for editing according to any one of claims 1, 2, 3, 4, 5, and 6 on a computer. A storage medium storing a program describing an editing video shooting method characterized by being recorded on the medium.
JP06604399A 1999-03-12 1999-03-12 Editing video shooting method and apparatus with subject information acquisition function, and storage medium storing program describing the method Expired - Fee Related JP3426997B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP06604399A JP3426997B2 (en) 1999-03-12 1999-03-12 Editing video shooting method and apparatus with subject information acquisition function, and storage medium storing program describing the method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP06604399A JP3426997B2 (en) 1999-03-12 1999-03-12 Editing video shooting method and apparatus with subject information acquisition function, and storage medium storing program describing the method

Publications (2)

Publication Number Publication Date
JP2000261744A true JP2000261744A (en) 2000-09-22
JP3426997B2 JP3426997B2 (en) 2003-07-14

Family

ID=13304467

Family Applications (1)

Application Number Title Priority Date Filing Date
JP06604399A Expired - Fee Related JP3426997B2 (en) 1999-03-12 1999-03-12 Editing video shooting method and apparatus with subject information acquisition function, and storage medium storing program describing the method

Country Status (1)

Country Link
JP (1) JP3426997B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000261657A (en) * 1999-03-12 2000-09-22 Nippon Telegr & Teleph Corp <Ntt> Method for photographing video image for editing with object trimming function, its system and storage medium with program describing the same function stored therein
JP2010283538A (en) * 2009-06-03 2010-12-16 Sony Corp Imaging apparatus, image processing method, and program
JP2011009846A (en) * 2009-06-23 2011-01-13 Sony Corp Image processing device, image processing method and program

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000261657A (en) * 1999-03-12 2000-09-22 Nippon Telegr & Teleph Corp <Ntt> Method for photographing video image for editing with object trimming function, its system and storage medium with program describing the same function stored therein
JP2010283538A (en) * 2009-06-03 2010-12-16 Sony Corp Imaging apparatus, image processing method, and program
JP2011009846A (en) * 2009-06-23 2011-01-13 Sony Corp Image processing device, image processing method and program
US8786630B2 (en) 2009-06-23 2014-07-22 Sony Corporation Image processing device, image processing method and program
US9477388B2 (en) 2009-06-23 2016-10-25 Sony Corporation Image processing device, image processing method and program

Also Published As

Publication number Publication date
JP3426997B2 (en) 2003-07-14

Similar Documents

Publication Publication Date Title
US6683649B1 (en) Method and apparatus for creating a multimedia presentation from heterogeneous media objects in a digital imaging device
US8127232B2 (en) Method and apparatus for editing heterogeneous media objects in a digital imaging device
US6738075B1 (en) Method and apparatus for creating an interactive slide show in a digital imaging device
KR101376455B1 (en) Image processing apparatus and image display method
US8009961B2 (en) Electronic apparatus, playback management method, display control apparatus, and display control method
US20060039674A1 (en) Image editing apparatus, method, and program
JP2010093713A (en) Display control device, display control method, and program
JP3636830B2 (en) Intelligent video camera and intelligent still camera
US20060050166A1 (en) Digital still camera
KR100967551B1 (en) Method and device for linking multimedia data
JP2007323698A (en) Multi-media content display device, method, and program
US20050237579A1 (en) Image editing apparatus, frame searching method and frame searching apparatus for photo movie
JP3462420B2 (en) Video trimming method and apparatus, and storage medium storing program describing this method
JP2010147509A (en) Video processor and video distribution system
JP2007181164A (en) Image reproducing apparatus
JP2006101076A (en) Method and device for moving picture editing and program
JP3426997B2 (en) Editing video shooting method and apparatus with subject information acquisition function, and storage medium storing program describing the method
JP2000209541A (en) Moving picture reproducing device and storage medium storing moving picture reproduction program
JP2006094030A (en) Image pickup device, and composite image creating method, and program
JP2006217060A (en) Recording apparatus, recording and reproducing apparatus, recording method, and recording and reproducing method
JP2005191892A (en) Information acquisition device and multi-media information preparation system using it
JP4719498B2 (en) Playback device
JP3702883B2 (en) Image recording / reproducing apparatus, image recording / reproducing method, and image editing method
JP2006092681A (en) Image management method, image management device and image management system
JP4673916B2 (en) Information processing apparatus, information processing method, and information processing program

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090509

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090509

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100509

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees