JP2003069947A

JP2003069947A - 動画像処理装置、動画像処理方法および記憶媒体

Info

Publication number: JP2003069947A
Application number: JP2001257923A
Authority: JP
Inventors: Hiroshi Tojo; 洋東條
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2001-08-28
Filing date: 2001-08-28
Publication date: 2003-03-07

Abstract

(57)【要約】【課題】特にアマチュアのユーザであっても、容易に
高度な編集結果を得られるような動画像の編集を可能と
し、その編集の過程において、専門的な知識を意識させ
ることなく、自由な作業を行うことが可能な動画像処理
装置、動画像処理方法および記憶媒体を提供する。【解決手段】読み込まれた動画像の基本データに基づ
いて当該動画像が所定のユーザインターフェースで表示
され（ステップＳ１１）、ユーザにより編集対象とした
いクリップ中のシーンが指定される（ステップＳ１２，
Ｓ１３）と、そのシーンに対応するカメラ情報が読み出
される（ステップＳ１４）。そして、このシーンに対応
するカメラ情報（シーン情報）とシーンルール（動画編
集において映像効果を得るための、各シーンのつながり
に関するルール）とが照合され（ステップＳ１５）、シ
ーン情報がシーンルールに反しているときには、ユーザ
に対して警告が発せられる（ステップＳ１７）。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、動画像を編集する
動画像処理装置、動画像処理方法および記憶媒体に関す
る。

【０００２】

【従来の技術】従来の動画像編集装置は、動画素材中の
必要な区間を決定し、これら区間を順番に記録してい
き、これを編集結果としていた。動画像の編集におい
て、映像製作に関わるプロフェッショナルユーザは、動
画素材中のパン・チルト・ズーム・カメラアングル等の
カメラ操作による表現を組み合わせることで、メリハリ
の利いた迫力のある映像を得る技術を持っている。しか
しながら、特にアマチュアのユーザは、カメラ操作によ
る表現やその組み合わせによってどのような効果が得ら
れるかについて、知識が乏しいため、メリハリの利いた
映像を編集結果として得ることは難しかった。この課題
に対し、特開平９−３７１５０号公報に記載の発明で
は、「刺激的に」など自然な言葉の表現とカメラ操作に
よる映像効果の対応辞書を持ち、言葉による指定によっ
て容易に高度な編集結果を得ることを可能としている。

【０００３】

【発明が解決しようとする課題】しかしながら、特開平
９−３７１５０号公報に開示されている方法も、自然言
語による表現で指定するため、ユーザそれぞれの主観に
よる違いには対応し切れなかった。また、作成前にどの
ような映像効果にするか決めておかなければならず、ユ
ーザが作成を進めながら自由に発想を膨らませる、とい
ったことが困難であった。

【０００４】本発明は、上記問題に鑑みてなされたもの
であり、特にアマチュアのユーザであっても、容易に高
度な編集結果を得られるような動画像の編集を可能と
し、その編集の過程において、専門的な知識を意識させ
ることなく、自由な作業を行うことが可能な動画像処理
装置、動画像処理方法および記憶媒体を提供することを
目的としている。

【０００５】

【課題を解決するための手段】上記目的を達成するた
め、請求項１に記載の動画像処理装置は、映像データお
よび該映像データに関するカメラ操作情報を記憶する記
憶手段と、前記記憶手段より前記映像データと前記カメ
ラ操作情報を読み出す読み出し手段と、前記映像データ
中でユーザが所望する区間を複数指定する指定手段と、
前記指定区間の順序を指定する順序指定手段と、前記指
定した区間中に含まれる前記カメラ操作情報を検出する
検出手段と、前記カメラ操作情報の組み合わせに関する
規則を記憶する規則記憶手段と、前記規則と前記指定区
間に含まれるカメラ操作情報を照合し、該カメラ操作情
報が当該規則に反すると判定したときはユーザに注意を
促すように制御する制御手段とを備えたことを特徴とす
る。

【０００６】請求項２に記載の動画像処理装置は、請求
項１の動画像処理装置において、前記カメラ操作情報
は、映像データ作成時のカメラの動きおよびカメラの状
態のうち少なくとも一方に関するものであることを特徴
とする。

【０００７】請求項３に記載の動画像処理装置は、請求
項１の動画像処理装置において、前記規則には、少なく
ともカメラ操作情報の存在区間とその時系列上の並びが
含まれることを特徴とする。

【０００８】請求項４に記載の動画像処理装置は、請求
項１の動画像処理装置において、前記制御手段は、所定
の長さより短い区間のカメラ操作情報については、照合
の対象としないことを特徴とする。

【０００９】請求項５に記載の動画像処理装置は、請求
項１の動画像処理装置において、前記制御手段は、ユー
ザが区間を指定するごとに処理を行うことを特徴とす
る。

【００１０】請求項６に記載の動画像処理装置は、請求
項１の動画像処理装置において、前記制御手段は、ユー
ザに注意を促すときは、前記指定区間との対応関係を示
すことを特徴とする。

【００１１】請求項７に記載の動画像処理装置は、請求
項１の動画像処理装置において、前記検出手段は、予め
カメラ操作情報を区間ごとにまとめておくことを特徴と
する。

【００１２】請求項８に記載の動画像処理装置は、請求
項１の動画像処理装置において、前記読み出し手段によ
って読み出された映像データに係る映像を表示する表示
手段を備え、前記制御手段は、ユーザに注意を促すため
の画像を前記表示手段に表示することを特徴とする。

【００１３】また、上記目的を達成するため、請求項９
に記載の動画像処理装置は、映像データを記憶する記憶
手段と、前記映像データ中のカメラの操作情報を抽出す
る抽出手段と、前記映像データ中でユーザが所望する区
間を複数指定する区間指定手段と、前記指定区間の順序
を指定する順序指定手段と、前記指定した区間中に含ま
れる前記カメラ操作情報を検出する検出手段と、前記カ
メラ操作情報の組み合わせに関する規則を記憶する規則
記憶手段と、前記規則と前記指定区間に含まれるカメラ
操作情報を照合し、該カメラ操作情報が当該規則に反す
ると判定したときはユーザに注意を促すように制御する
制御手段とを備えたことを特徴とする。

【００１４】請求項１０に記載の動画像処理装置は、請
求項９の動画像処理装置において、前記カメラ操作情報
は、映像データ作成時のカメラの動きおよびカメラの状
態のうち少なくとも一方に関するものであることを特徴
とする。

【００１５】請求項１１に記載の動画像処理装置は、請
求項９の動画像処理装置において、前記規則には、少な
くともカメラ操作情報の存在区間とその時系列上の並び
が含まれることを特徴とする。

【００１６】請求項１２に記載の動画像処理装置は、請
求項９の動画像処理装置において、前記制御手段は、所
定の長さより短い区間のカメラ操作情報については、照
合の対象としないことを特徴とする。

【００１７】請求項１３に記載の動画像処理装置は、請
求項９の動画像処理装置において、前記制御手段は、ユ
ーザが区間を指定するごとに処理を行うことを特徴とす
る。

【００１８】請求項１４に記載の動画像処理装置は、請
求項９の動画像処理装置において、前記制御手段は、ユ
ーザに注意を促すときは、前記指定区間との対応関係を
示すことを特徴とする。

【００１９】請求項１５に記載の動画像処理装置は、請
求項９の動画像処理装置において、前記検出手段は、予
めカメラ操作情報を区間ごとにまとめておくことを特徴
とする。

【００２０】請求項１６に記載の動画像処理装置は、請
求項９の動画像処理装置において、前記読み出し手段に
よって読み出された映像データに係る映像を表示する表
示手段を備え、前記制御手段は、ユーザに注意を促すた
めの画像を前記表示手段に表示することを特徴とする。

【００２１】さらに、上記目的を達成するため、請求項
１７に記載の動画像処理装置は、被写体を撮影し、映像
データを生成する撮像手段と、前記撮像手段の状態に関
する情報を検知するセンサ手段と、前記撮像手段におけ
る設定に関する情報および前記センサ手段によって検知
された前記撮像手段の状態に関する情報を、カメラ操作
情報として獲得する獲得手段と、前記映像データと前記
カメラ操作情報を記憶媒体に記録する記録手段と、前記
記憶媒体より前記映像データと前記カメラ操作情報を読
み出す読み出し手段と、前記映像データ中でユーザが所
望する区間を複数指定する区間指定手段と、前記指定区
間の順序を指定する順序指定手段と、前記指定した区間
中に含まれる前記カメラ操作情報を検出する検出手段
と、前記カメラ操作情報の組み合わせに関する規則を記
憶する規則記憶手段と、前記規則と前記指定区間に含ま
れるカメラ操作情報を照合し、該カメラ操作情報が当該
規則に反すると判定したときはユーザに注意を促すよう
に制御する制御手段とを備えたことを特徴とする。

【００２２】請求項１８に記載の動画像処理装置は、請
求項１７の動画像処理装置において、前記記憶媒体に記
憶される前記カメラ操作情報は、種類、存在した区間お
よび方向を含むことを特徴とする。

【００２３】請求項１９に記載の動画像処理装置は、請
求項１７の動画像処理装置において、前記規則には、少
なくともカメラ操作情報の存在区間とその時系列上の並
びが含まれることを特徴とする。

【００２４】請求項２０に記載の動画像処理装置は、請
求項１７の動画像処理装置において、前記制御手段は、
ユーザが区間を指定するごとに処理を行うことを特徴と
する。

【００２５】請求項２１に記載の動画像処理装置は、請
求項１７の動画像処理装置において、前記制御手段は、
ユーザに注意を促すときは、前記指定区間との対応関係
を示すことを特徴とする。

【００２６】請求項２２に記載の動画像処理装置は、請
求項１７の動画像処理装置において、前記検出手段は、
予めカメラ操作情報を区間ごとにまとめておくことを特
徴とする。

【００２７】請求項２３に記載の動画像処理装置は、請
求項１７の動画像処理装置において、前記読み出し手段
によって読み出された映像データに係る映像を表示する
表示手段を備え、前記制御手段は、ユーザに注意を促す
ための画像を前記表示手段に表示することを特徴とす
る。

【００２８】上記目的を達成するため、請求項２４に記
載の動画像処理方法は、映像データおよび該映像データ
に関するカメラ操作情報を記憶する記憶工程と、前記記
憶された前記映像データと前記カメラ操作情報を読み出
す読み出し工程と、前記映像データ中でユーザが所望す
る区間を複数指定する区間指定工程と、前記指定区間の
順序を指定する順序指定工程と、前記指定した区間中に
含まれる前記カメラ操作情報を検出する検出工程と、前
記カメラ操作情報の組み合わせに関する規則を記憶する
規則記憶工程と、前記規則と前記指定区間に含まれるカ
メラ操作情報を照合し、該カメラ操作情報が当該規則に
反すると判定したときはユーザに注意を促すように制御
する制御工程とを備えたことを特徴とする。

【００２９】請求項２５に記載の動画像処理方法は、請
求項２４の動画像処理方法において、前記カメラ操作情
報は、映像データ作成時のカメラの動きおよびカメラの
状態のうち少なくとも一方に関するものであることを特
徴とする。

【００３０】請求項２６に記載の動画像処理方法は、請
求項２４の動画像処理方法において、前記規則には、少
なくともカメラ操作情報の存在区間とその時系列上の並
びが含まれることを特徴とする。

【００３１】請求項２７に記載の動画像処理方法は、請
求項２４の動画像処理方法において、前記制御工程で
は、所定の長さより短い区間のカメラ操作情報について
は、照合の対象としないことを特徴とする。

【００３２】請求項２８に記載の動画像処理方法は、請
求項２４の動画像処理方法において、前記制御工程で
は、ユーザが指定するごとに処理を行うことを特徴とす
る。

【００３３】請求項２９に記載の動画像処理方法は、請
求項２４の動画像処理方法において、前記制御工程で
は、ユーザに注意を促すときは、前記指定区間との対応
関係を示すことを特徴とする。

【００３４】請求項３０に記載の動画像処理方法は、請
求項２４の動画像処理方法において、前記検出工程で
は、予めカメラ操作情報を区間ごとにまとめておくこと
を特徴とする。

【００３５】請求項３１に記載の動画像処理方法は、請
求項２４の動画像処理方法において、前記読み出し工程
によって読み出された映像データに係る映像を表示手段
に表示する表示工程を備え、前記制御工程では、ユーザ
に注意を促すための画像を前記表示手段に表示すること
を特徴とする。

【００３６】また、上記目的を達成するため、請求項３
２に記載の動画像処理方法は、映像データを記憶する記
憶工程と、前記映像データ中のカメラの操作情報を抽出
する抽出工程と、前記映像データ中でユーザが所望する
区間を複数指定する区間指定工程と、前記指定区間の順
序を指定する順序指定工程と、前記指定した区間中に含
まれる前記カメラ操作情報を検出する検出工程と、前記
カメラ操作情報の組み合わせに関する規則を記憶する規
則記憶工程と、前記規則と前記指定区間に含まれるカメ
ラ操作情報を照合し、該カメラ操作情報が当該規則に反
すると判定したときはユーザに注意を促すように制御す
る制御工程とを備えたことを特徴とする。

【００３７】請求項３３に記載の動画像処理方法は、請
求項３２の動画像処理方法において、前記カメラ操作情
報は、映像データ作成時のカメラの動きおよびカメラの
状態のうち少なくとも一方に関するものであることを特
徴とする。

【００３８】請求項３４に記載の動画像処理方法は、請
求項３２の動画像処理方法において、前記規則には、少
なくともカメラ操作情報の存在区間とその時系列上の並
びが含まれることを特徴とする。

【００３９】請求項３５に記載の動画像処理方法は、請
求項３２の動画像処理方法において、前記制御工程で
は、所定の長さより短い区間のカメラ操作情報について
は、照合の対象としないことを特徴とする。

【００４０】請求項３６に記載の動画像処理方法は、請
求項３２の動画像処理方法において、前記制御工程で
は、ユーザが指定するごとに処理を行うことを特徴とす
る。

【００４１】請求項３７に記載の動画像処理方法は、請
求項３２の動画像処理方法において、前記制御工程で
は、ユーザに注意を促すときは、前記指定区間との対応
関係を示すことを特徴とする。

【００４２】請求項３８に記載の動画像処理方法は、請
求項３２の動画像処理方法において、前記検出工程で
は、予めカメラ操作情報を区間ごとにまとめておくこと
を特徴とする。

【００４３】請求項３９に記載の動画像処理方法は、請
求項３２の動画像処理方法において、前記読み出し工程
によって読み出された映像データに係る映像を表示手段
に表示する表示工程を備え、前記制御工程では、ユーザ
に注意を促すための画像を前記表示手段に表示すること
を特徴とする。

【００４４】さらに、上記目的を達成するため、請求項
４０に記載の動画像処理方法は、被写体を撮影し、映像
データを生成する撮像工程と、前記撮像工程における設
定に関する情報およびセンサ手段によって得られた前記
撮像工程の状態に関する情報を、カメラ操作情報として
獲得する獲得工程と、前記映像データと前記カメラ操作
情報を記憶媒体に記録する記録工程と、前記記憶媒体よ
り前記映像データと前記カメラ操作情報を読み出す読み
出し工程と、前記映像データ中でユーザが所望する区間
を複数指定する区間指定工程と、前記指定区間の順序を
指定する順序指定工程と、前記指定した区間中に含まれ
る前記カメラ操作情報を検出する検出工程と、前記カメ
ラ操作情報の組み合わせに関する規則を記憶する規則記
憶工程と、前記規則と前記指定区間に含まれるカメラ操
作情報を照合し、該カメラ操作情報が当該規則に反する
と判定したときはユーザに注意を促すように制御する制
御工程とを備えたことを特徴とする。

【００４５】請求項４１に記載の動画像処理方法は、請
求項４０の動画像処理方法において、前記記憶媒体に記
憶される前記カメラ操作情報は、種類、存在した区間お
よび方向を含むことを特徴とする。

【００４６】請求項４２に記載の動画像処理方法は、請
求項４０の動画像処理方法において、前記規則には、少
なくともカメラ操作情報の存在区間とその時系列上の並
びが含まれることを特徴とする。

【００４７】請求項４３に記載の動画像処理方法は、請
求項４０の動画像処理方法において、前記制御工程で
は、ユーザが指定するごとに処理を行うことを特徴とす
る。

【００４８】請求項４４に記載の動画像処理方法は、請
求項４０の動画像処理方法において、前記制御工程で
は、ユーザに注意を促すときは、前記指定区間との対応
関係を示すことを特徴とする。

【００４９】請求項４５に記載の動画像処理方法は、請
求項４０の動画像処理方法において、前記検出工程で
は、予めカメラ操作情報を区間ごとにまとめておくこと
を特徴とする。

【００５０】請求項４６に記載の動画像処理方法は、請
求項４０の動画像処理方法において、前記読み出し工程
によって読み出された映像データに係る映像を表示手段
に表示する表示工程を備え、前記制御工程では、ユーザ
に注意を促すための画像を前記表示手段に表示すること
を特徴とする。

【００５１】上記目的を達成するため、請求項４７に記
載の記憶媒体は、映像データおよび該映像データに関す
るカメラ操作情報を記憶する記憶工程と、前記記憶され
た前記映像データと前記カメラ操作情報を読み出す読み
出し工程と、前記映像データ中でユーザが所望する区間
を複数指定する区間指定工程と、前記指定区間の順序を
指定する順序指定工程と、前記指定した区間中に含まれ
る前記カメラ操作情報を検出する検出工程と、前記カメ
ラ操作情報の組み合わせに関する規則を記憶する規則記
憶工程と、前記規則と前記指定区間に含まれるカメラ操
作情報を照合し、該カメラ操作情報が当該規則に反する
と判定したときはユーザに注意を促すように制御する制
御工程とを備えた動画像処理方法を含むことを特徴とす
る。

【００５２】また、上記目的を達成するため、請求項４
８に記載の記憶媒体は、映像データを記憶する記憶工程
と、前記映像データ中のカメラの操作情報を抽出する抽
出工程と、前記映像データ中でユーザが所望する区間を
複数指定する区間指定工程と、前記指定区間の順序を指
定する順序指定工程と、前記指定した区間中に含まれる
前記カメラ操作情報を検出する検出工程と、前記カメラ
操作情報の組み合わせに関する規則を記憶する規則記憶
工程と、前記規則と前記指定区間に含まれるカメラ操作
情報を照合し、該カメラ操作情報が当該規則に反すると
判定したときはユーザに注意を促すように制御する制御
工程とを備えた動画像処理方法を含むことを特徴とす
る。

【００５３】さらに、上記目的を達成するため、請求項
４９に記載の記憶媒体は、被写体を撮影し、映像データ
を生成する撮像工程と、前記撮像工程における設定に関
する情報およびセンサ手段によって得られた前記撮像工
程の状態に関する情報を、カメラ操作情報として獲得す
る獲得工程と、前記映像データと前記カメラ操作情報を
記憶媒体に記録する記録工程と、前記記憶媒体より前記
映像データと前記カメラ操作情報を読み出す読み出し工
程と、前記映像データ中でユーザが所望する区間を複数
指定する区間指定工程と、前記指定区間の順序を指定す
る順序指定工程と、前記指定した区間中に含まれる前記
カメラ操作情報を検出する検出工程と、前記カメラ操作
情報の組み合わせに関する規則を記憶する規則記憶工程
と、前記規則と前記指定区間に含まれるカメラ操作情報
を照合し、該カメラ操作情報が当該規則に反すると判定
したときはユーザに注意を促すように制御する制御工程
とを備えた動画像処理方法を含むことを特徴とする。

【００５４】

【発明の実施の形態】以下、本発明の実施の形態を、図
面に基づいて詳細に説明する。

【００５５】図１は、本発明の第１の実施の形態に係る
動画像処理装置の概略構成を示すブロック図である。

【００５６】同図に示すように、本実施の形態の動画像
処理装置は、動画像を撮影する撮影部１と、撮影部１で
撮影された動画像を記録する記録媒体２と、記憶媒体２
に記録された動画を、ユーザの指示に基づいて編集する
動画像編集部３とによって構成されている。

【００５７】図２は、撮影部１の機能構成を示すブロッ
ク図である。

【００５８】同図に示すように、撮影部１は、撮像部１
１と、画像圧縮部１２と、カメラ操作部１３と、センサ
部１４と、制御部１５と、記録部１６とにより、主とし
て構成されている。

【００５９】撮像部１１は、レンズ、撮像素子およびＡ
／Ｄ変換回路等から構成され、撮像を行うものである。

【００６０】画像圧縮部１２は、画像圧縮回路により撮
像部１２の映像信号を所定の圧縮方式のアルゴリズムに
基づいて圧縮符号化処理を行う。たとえば、ディジタル
ビデオにおけるＤＣＴ（Discrete Cosine Transform）
とＶＬＣ（Variable Length Code）を用いた方式やＤＣ
Ｔと動き補償予測を用いたＭＰＥＧ（Moving PictureEx
perts Group）−１、ＭＰＥＧ−２といった形式があ
る。

【００６１】カメラ操作部１３は、撮影開始ボタンやズ
ームボタンなどからなり、ユーザの各種のカメラ操作を
入力するものである。

【００６２】センサ部１４は、カメラの状態を検知する
ための各種のセンサから構成され、絞りの開度や焦点距
離などの情報を取得する。

【００６３】制御部１５は、カメラ操作部１３から得ら
れたユーザの操作情報や、センサ部１４から得られたセ
ンサ情報に基づいて、撮像部１１などカメラを制御する
ものである。

【００６４】記録部１６は、映像データとカメラ操作情
報（ユーザによる操作情報とセンサ情報）をタイミング
を取りながら多重化を行って、記憶媒体２に記録するも
のである。

【００６５】記録媒体２は、多重化された映像データと
カメラ操作情報を記憶するものであり、磁気テープ、光
磁気ディスクまたはハードディスクなどから構成され
る。

【００６６】図３は、動画編集部３の制御構成を示すブ
ロック図である。

【００６７】同図に示すように、動画編集部３は、ＣＰ
Ｕ３１と、ＲＯＭ３２と、ＲＡＭ３３と、キーボード３
４と、マウス３５と、外部記憶装置３６と、表示器３７
と、ネットワークインターフェースカード（ＮＩＣ）３
８とによって構成され、各構成要素３１〜３８は、バス
３９を介して相互に接続されている。

【００６８】ＣＰＵ３１は、動画編集部３全体を制御す
る。

【００６９】ＲＯＭ３２は、動画編集部３の立ち上げ時
に実行されるブートプログラムや各種データを格納す
る。

【００７０】ＲＡＭ３３は、ＣＰＵ３１が処理するため
の制御プログラムを格納するとともに、ＣＰＵ３１が各
種制御を実行する際の作業領域を提供する。

【００７１】キーボード３４およびマウス３５は、ユー
ザによる各種入力操作環境を提供する。

【００７２】外部記憶装置３６は、ハードディスクやフ
レキシブルディスク、ＣＤ−ＲＯＭ等で構成される。

【００７３】表示器３７は、ＣＲＴなどで構成され、結
果等をユーザに対して表示する。

【００７４】ＮＩＣ３８は、ネットワーク上の各機器と
の通信を可能とする。

【００７５】図４は、動画編集部３の機能構成を示すブ
ロック図である。

【００７６】同図に示すように、動画編集部３の機能
は、読み取り部３ａと、表示部３ｂと、シーンルール照
合部３ｃと、ユーザ操作部３ｄと、シーンルール３ｅと
によって構成されている。

【００７７】読み取り部３ａは、記憶媒体２を任意の位
置から読み出し、動画像および前記カメラ操作情報を得
るものである。これは、記憶媒体２を直接読み取るＣＤ
−ＲＯＭドライブのような装置であっても、ＩＥＥＥ１
３９４などのインターフェースを介して、カメラ側に内
蔵されているドライブ装置から読み出す形式であっても
構わない。

【００７８】表示部３ｂは、動画像の編集中の状態や編
集結果をユーザに表示するものである。

【００７９】シーンルール照合部３ｃは、後述のシーン
ルールと編集中の動画像に含まれるカメラ操作情報とを
照合して、ユーザへ注意を促すものである。

【００８０】ユーザ操作部３ｄは、シーンの区間の指定
など動画編集に必要なユーザからの操作を可能とするも
のである。

【００８１】シーンルール３ｅは、動画編集において、
見易さやメリハリなど、映像効果を高める上で必要なル
ールを記述したものであり、外部記憶装置３６などに格
納されている。

【００８２】以上のように構成された動画像編集装置が
実行する制御動作を以下に説明する。

【００８３】図５は、撮影部１が実行する制御処理の手
順を示すフローチャートである。

【００８４】同図において、まず、ステップＳ１では、
ユーザがカメラ操作部１３を介してカメラの設定を行っ
たか否かを判別する。カメラの設定とは、たとえば、フ
ォーカスモード（自動／手動）、露光モード（自動、ゲ
イン優先、シャッター速度優先、絞り優先、手動）、ホ
ワイトバランスモード（自動、ホールド、ワンプッシ
ュ、プリセット）などである。

【００８５】ステップＳ１で、カメラの設定が行われた
ときには、ステップＳ２に進み、制御部１５はカメラの
設定を変更し、変更したカメラの設定情報をカメラ操作
情報として記録部１６に送信する。

【００８６】次に、ステップＳ３では、録画ボタンがＯ
Ｎされたか否かをチェックし、ＯＮされなければ、待機
状態であり、ステップＳ１へ戻る一方、ＯＮされたとき
には、制御部１５は録画状態にするとともに、このとき
の録画開始時刻をカメラ操作情報として記録部１６に送
信する。

【００８７】次に、ステップＳ４では、録画状態となっ
たので、撮像を開始する。撮像部１１で撮像された映像
は、画像圧縮部１２で画像圧縮された後に、記録部１６
へ映像データとして送信される。

【００８８】次に、ステップＳ５では、ユーザによって
カメラ操作が行われたか否かをチェックする。カメラ操
作とは、たとえば、ズームボタンのＯＮ／ＯＦＦ、パ
ン、チルトなどである。

【００８９】ステップＳ５で、カメラ操作がなされたと
判別されたときには、ステップＳ６に進み、制御部１５
がセンサ部１４の情報（センサ情報）に基づいて撮像部
１１などを駆動して、カメラを制御する。センサ情報と
は、たとえば、焦点距離、合焦距離、手ぶれ検出などで
ある。そして、たとえばズームされたときは、ズームボ
タンが押された区間だけ、撮像部１１のレンズを動かし
てズームを行い、焦点距離や合焦距離などのセンサ情報
に基づいてピントを合わせる。このとき、ズームボタン
のＯＮ／ＯＦＦや焦点距離、合焦距離などのセンサ情報
は、カメラ操作情報として記録部１６に送信される。

【００９０】記録部１６は、画像圧縮部１２から送信さ
れる映像データとカメラ操作情報を多重化して、記録媒
体２に記録する。多重化の方法としては、たとえばＭＰ
ＥＧ−２のシステムで規格化されている方法を利用す
る。カメラ操作情報をＰＥＳ（Packetized Elementary
Stream）パケットにして、映像のＰＥＳパケットと共
に、ＴＳ（Transport Stream）やＰＳ（Program Strea
m）の多重ストリームとする。

【００９１】次に、ステップＳ７では、録画ボタンがＯ
ＦＦされたか否かをチェックし、ＯＦＦされていなけれ
ば、ステップＳ４へ戻って撮影状態を維持する一方、Ｏ
ＦＦされたときには、ステップＳ１へ戻って待機状態と
なる。

【００９２】上述したように、本実施の形態では、カメ
ラ操作情報としては、カメラ操作部１３から得られる情
報とセンサ部１４から得られる情報とがある。

【００９３】なお、カメラの操作情報の記述の形式とし
ては、たとえば、図６に挙げたＤＶフォーマットの形式
や、図７に挙げた形式など（両方とも一部のみ図示され
ている）がある。

【００９４】図８は、動画編集部３が実行する制御処理
の手順を示すフローチャートである。

【００９５】同図において、まず、ステップＳ１１で
は、読み取り部３ａを介して動画像の基本データを読み
込む。ここで、動画像はクリップ（カメラで録画ボタン
をＯＮしてからＯＦＦするまで）ごとにファイルになっ
ていても、複数のクリップが同一のファイルになってい
ても構わない。本実施の形態では、クリップごとにファ
イルが生成されている場合について説明する。基本デー
タとは、動画像のファイルのＩＤ、各ファイルの長さ
（たとえばフレーム数）、先頭のサムネイル画像などで
あり、後述するユーザインターフェース上に表示を行っ
たりするためのものである。

【００９６】次に、ステップＳ１２では、ユーザは図９
に示すような、表示部３ｂおよびユーザ操作部３ｄで構
成されるＵＩ（ユーザ・インターフェース）を操作し
て、クリップの指定をする。

【００９７】そして、同様に図９のようなＵＩを操作し
て、シーンを指定する（ステップＳ１３）。なお、詳細
については後述する。また、ここで、シーンとは、編集
対象の動画像中でユーザが採用したい区間であり、編集
時の最小単位である。編集中のシーンに関する情報は、
図１０に例示したようなシーン情報として生成される。
選択されたクリップのＩＤと、それぞれのクリップで、
採用された区間の開始点と終了点をフレームＩＤで指定
してある。また、シーンの順番通りにテーブルに並べら
れる。よって、編集結果として再生される順番は、テー
ブルの先頭からになる。

【００９８】次に、ステップＳ１４では、読み取り部３
ａを介して指定されたシーンに対応するカメラ操作情報
を読み出す。

【００９９】次に、ステップＳ１５では、シーンルール
照合部３ｃは、シーンに対応するカメラ操作情報とシー
ンルール３ｅとを照合する。ここで、シーンルール３ｅ
とは、動画編集において映像効果を得るための、各シー
ンのつながりに関するルールのことである。これらのル
ールに反すると、落ち着きのない映像になったり、メリ
ハリのない単調な映像となったりする。たとえば、（１）パンで終了するシーンとパンで開始するシーン
で、両方のパンの方向が揃っていなければならない（反
すると、落ち着きのない映像になる）（２）チルトで終了するシーンとチルトで開始するシー
ンで、両方のチルトの方向が揃っていなければならない
（反すると、落ち着きのない映像になる）といったもの
がある。なお、照合の方法の詳細については後述する。

【０１００】次に、ステップＳ１６では、シーンルール
照合部３ｃは、シーン情報がシーンルールに反している
か否かを判別し、反していれば、ステップＳ１７へ進ん
で警告をユーザに与え、反していなければステップＳ１
７をスキップする。ステップＳ１７でユーザに警告を与
えるときは、たとえば、図１１に示すようなメッセージ
を表示部３ｂを介してユーザに提示する。これを基に、
ユーザは、シーンの指定（ステップＳ１８）または別の
クリップの指定（ステップＳ１９）を行ってもよい。ま
たは、敢えて警告を無視して編集を行うことももちろん
可能である。

【０１０１】以上の一連の動作を、必要なシーンの指定
について全て終え、最終的なシーン情報が完成するまで
行う。なお、複数のルールを適用する際は、優先順位に
基づいて、それぞれのルールを適応して行けばよい。そ
して、編集結果は、前記最終的なシーン情報に基づいて
各シーンを順次再生して行けばよい。

【０１０２】次に、ユーザによるシーンの指定方法につ
いて詳細に説明する。

【０１０３】前記図９は、このときに表示器３７に表示
されるＵＩの一例を示す図である。

【０１０４】編集作業ウィンドウ４０は、編集作業を行
う領域である。

【０１０５】再生ウィンドウ４１は、選択したクリップ
または編集結果を再生して確認する領域である。

【０１０６】クリップウィンドウ４２は、記憶媒体２中
のクリップを、各クリップの先頭のサムネイルの一覧で
表示するものである。

【０１０７】ボタン４３は、再生ウィンドウ４１で再生
させる動画を操作するためのものであり、左より「再
生」、「一時停止」、「停止」、「巻き戻し」、「早送
り」の各操作を指示する。

【０１０８】シーン指定ウィンドウ４４は、選択したク
リップを並べ、採用する区間を指定するための領域であ
る。なお、各クリップは、ユーザが認識できるようにサ
ムネイル画像を重ねて表示してある。

【０１０９】シーン指定バー４５は、操作することによ
って、選択したクリップ（斜線部分）の開始点と終了点
を指定することが可能である。

【０１１０】操作の手順としては、クリップウィンドウ
４２からクリップを選択して、再生したい順番にシーン
指定ウィンドウ４４へドラッグ＆ドロップし、シーン指
定バー４５で、開始点と終了点の修正を行う。このと
き、ユーザは必要に応じて再生ウィンドウ４３で動画を
再生させて、随時、確認を行うことができる。

【０１１１】次に、シーンに対応するカメラ操作情報と
シーンルールとの照合の方法を詳細に説明する。

【０１１２】図１２は、図８のステップＳ１４〜Ｓ１７
の手順に関して、より詳細に示したものである。ただ
し、ここでは説明を簡単にするために、上記ルール
（１）に関する手順のみ示してある。

【０１１３】同図において、ステップＳ２１では、シー
ン情報にあるシーンとこれに対応するカメラ操作情報を
読み出す。前記図１０の例では、まず先頭のシーンを読
み出し、クリップＩＤ＝１のフレームＩＤ＝１〜３００
に存在するカメラ操作情報（ここではパン）を読み出
す。そして、シーン中のどの区間にパンが存在したか
を、メモリ中に保持しておく。なお、この情報は、一連
の処理が終了するまで保持されるものとする。

【０１１４】次に、ステップＳ２２では、一つ前のシー
ンが存在するか否かを判別する。ここで一つ前とは、シ
ーン情報中で現在読み出しているシーンの一つ前という
ことである。よって、最初は常に“ＮＯ”となる。

【０１１５】次に、ステップＳ２３では、一つ前のシー
ンがパンで終了しているか否かを判別する。すなわち、
メモリから一つ前の操作情報を取り出して判別する。こ
の結果、パンで終了していれば、ステップＳ２４に進
み、パンの長さが所定の長さ以上か否かを判別する。こ
れは、あまりに短いパンであり、人間の目には気になら
ないレベルであれば、上記ルール（１）を適用しない、
という意味である。この長さは実験などで求めることが
できるもので、特に限定されるものではないが、１０フ
レーム程度が望ましい。

【０１１６】ステップＳ２４で、所定の長さ以上であれ
ば、ステップＳ２５へ進み、現在読み込んでいるシーン
はパンで開始しているか否かを判別する。これは、ステ
ップＳ２１で既に読み込んでいるカメラ操作情報から判
別することができる。

【０１１７】ステップＳ２５で、パンで開始していれ
ば、ステップＳ２６へ進み、パンの長さが所定の長さ以
上であるか否かを判別する。この判別は、ステップＳ２
４の判別と全く同じ理由から行われる。

【０１１８】ステップＳ２６で、パンの長さが所定値以
上ならば、ステップＳ２７へ進み、前後のパンの方向が
異なっているか否かを判別する。つまり、一つ前のシー
ンの終了のパンが右から左へのパンであるのに対し、現
在のシーンのパンが左から右へのパンであった場合、上
記ルール（１）に反することになる。よって、この場合
は、ステップＳ２８へ進み、図１３に示すように、シー
ン指定ウィンドウ４４上で該当するシーンを反転表示さ
せ、前記図１１に示したようなメッセージウィンドウを
表示する。

【０１１９】次に、ステップＳ２９では、メッセージウ
ィンドウ中の確認ボタンが押下されたか否かを判別す
る。押下されるとはじめて次のステップＳ３０へ進む。

【０１２０】なお、上記ステップＳ２２〜Ｓ２６の条件
を満たさない場合についても、いずれもステップＳ３０
へ進む。

【０１２１】ステップＳ３０は終了判定であり、シーン
情報中の全てのシーンについてチェックを行ったかを確
認し、終えていなければ、ステップＳ２１に戻り、ステ
ップＳ２１からステップＳ２９までを繰り返す。

【０１２２】本実施の形態では、撮影時にカメラ操作情
報を撮影部１のカメラ操作部１３とセンサ部１４から取
得したが、撮影時にはカメラ操作情報を得る手段がない
場合も考えられる。この場合の実現方法の一例を、第２
の実施の形態として挙げる。

【０１２３】図１４は、本発明の第２の実施の形態に係
る動画像処理装置の制御構成を示すブロック図である。

【０１２４】同図と前記図３とを見比べると分かるよう
に、本実施の形態の動画像処理装置は、前記第１の実施
の形態の動画編集部３の構成に、ビデオインターフェー
ス（Ｉ／Ｆ）６０、ビデオカメラ６１およびＶＴＲ６２
を追加して構成されている。

【０１２５】ビデオインターフェース６０は、ビデオカ
メラ６１やＶＴＲ６２からの動画を取り込むことができ
る。

【０１２６】なお、本実施の形態では、ビデオカメラ６
１、ＶＴＲ６２および外部記憶装置５６は、本装置に直
接接続されるように構成したが、これに限らず、ネット
ワーク上に配置されたものを用いてもよい。

【０１２７】図１５は、本実施の形態の動画像処理装置
の機能構成を示すブロック図である。

【０１２８】同図と前記図４とを見比べると分かるよう
に、本実施の形態の動画像処理装置は、前記第１の実施
の形態の動画編集部３の構成に、動画入力部７１、フレ
ーム抽出部７２、カット検出部７３、動画・インデック
ス蓄積部７４およびカメラ操作判定部７５を追加して構
成されている。

【０１２９】動画入力部７１は、ビデオＩ／Ｆ６０を介
してビデオカメラ６１およびＶＴＲ６２の動画像を読み
出し、本装置に入力するものである。

【０１３０】フレーム抽出部７２は、動画を構成するフ
レーム（画像）を順番に抽出するものである。

【０１３１】カット検出部７３は、動画像中のカット点
を検出するものである。

【０１３２】動画像・インデックス蓄積部７４は、外部
記憶装置５６などで構成され、動画像のフレームやカメ
ラ操作情報等が蓄積されるものである。

【０１３３】読み取り部８１は、動画像・インデックス
蓄積部７４を任意の位置から読み取るものである。

【０１３４】カメラ操作判定部７５は、動画像・インデ
ックス蓄積部７４から読み出した動画像を画像処理し、
カメラ操作情報を判定するものである。

【０１３５】以上のように構成された動画像処理装置が
実行する制御動作を以下に説明する。

【０１３６】図１６は、本実施の形態の動画像処理装置
が実行する制御処理の手順を示すフローチャートであ
る。

【０１３７】同図において、まず、ステップＳ４１で
は、動画入力部７１、フレーム抽出部７２およびカット
検出部７３は、動画像・インデックス蓄積部７４への動
画像の取り込みを行う。

【０１３８】次に、ステップＳ４２では、読み取り部８
１が動画像・インデックス蓄積部７４から動画像を読み
出し、カメラ操作判定部７５が画像処理を行ってカメラ
操作情報を判定し、その判定結果を、動画像・インデッ
クス蓄積部７４へ記憶する。

【０１３９】次に、ステップＳ４３では、読み取り部８
１、表示部８２、シーンルール照合部８３、ユーザ操作
部８４およびシーンルール８５が前記第１の実施の形態
と同様の処理を行うことにより、動画の編集処理を行
う。

【０１４０】図１７は、ステップＳ４１の動画像の取り
込み処理の詳細な手順を示すフローチャートである。

【０１４１】同図において、ステップＳ５１では、動画
入力部７１は、ビデオＩ／Ｆ６０を介してビデオカメラ
６１やＶＴＲ６２などから動画像を取り込む。

【０１４２】次に、ステップＳ５２では、フレーム抽出
部７２はフレームを順次抽出して、カット検出部７３に
送信する。

【０１４３】次に、ステップＳ５３において、カット検
出部７３はまず、フレームに対してフレームＩＤを付与
し、動画像・インデックス蓄積部７４にフレームを蓄積
する。フレームＩＤはクリップ単位ごとに“１”から順
に付与される。

【０１４４】次に、ステップＳ５４では、カット検出部
７３は、隣接フレーム間の類似度を算出する。ここで、
フレーム間の類似度は、フレーム間類似性距離を算出
し、１００％で完全に同じであるとして、百分率で表わ
したものを類似度とする。フレーム間類似性距離計算に
ついては、特にそのアルゴリズムを限定しない。最も簡
単な実施例を挙げると、比較対象のそれぞれのフレーム
を、図１８に示すように縦横に複数のブロックに分割
し、それぞれのブロックに関してＲＧＢの平均値を算出
しておき、比較対象のそれぞれの対応するブロック同士
のＲＧＢ各チャンネルの差の二乗和を求めこれをフレー
ム間類似性距離とし、これが小さいほど類似しており、
大きいほど類似していない、即ちカット点である可能性
が大きいと取る方法がある。その計算式の一例を以下に
示す。

【０１４５】

【数１】

【０１４６】但し、ｉ：処理中のブロックを表すｋ：分割ブロック数Ｐ１_iR：直前のフレームのｉ番目のブロックのＲチャン
ネルの平均値Ｐ１_iG：直前のフレームのｉ番目のブロックのＧチャン
ネルの平均値Ｐ１_iB：直前のフレームのｉ番目のブロックのＢチャン
ネルの平均値Ｐ２_iR：現在のフレームのｉ番目のブロックのＲチャン
ネルの平均値Ｐ２_iG：現在のフレームのｉ番目のブロックのＧチャン
ネルの平均値Ｐ２_iB：現在のフレームのｉ番目のブロックのＢチャン
ネルの平均値上記フレーム間類似距離を、類似度に変換し使用する。

【０１４７】次に、ステップＳ５５では、類似度が所定
値Ｈ以下であるか否かを判別する。クリップの変わり目
（カット点）では、画像が急激に変化するため、前後の
フレームは類似度が低くなる。即ち、所定値Ｈは、カッ
ト点でないとみなせる類似度の下限値である。この値は
実験により求めることができ、特に限定されるものでは
ないが、８０％程度が望ましい。

【０１４８】ステップＳ５５で、所定値Ｈ以下であった
場合は、カット点であるので、インデックスとして採用
するために、ステップＳ５６で、フレーム画像を縮小し
てサムネイル画像を作成する。

【０１４９】次に、ステップＳ５７では、図１９に例示
したように、インデックス情報として、先頭のクリップ
より順に付与されるクリップＩＤ、クリップの長さ（フ
レーム数）およびサムネイルを動画像・インデックス蓄
積部７４に記憶する。

【０１５０】一方、ステップＳ５５で、所定値Ｈより大
きかった場合には、カット点でないので、ステップＳ５
６およびＳ５７はスキップする。

【０１５１】そして、ステップＳ５８では、読み出しが
終了しているか否かを判別し、終了していなければ、ス
テップＳ５１〜Ｓ５７の処理を繰り返す。

【０１５２】図２０は、ステップＳ４２のカメラ操作情
報の判定処理の詳細な手順を示すフローチャートであ
る。

【０１５３】同図において、まず、ステップＳ６１で
は、変数Ｎに初期値として“１”をセットする。

【０１５４】次に、ステップＳ６２では、読み取り部８
１はクリップＮに相当するフレーム郡を取り出す。

【０１５５】次に、ステップＳ６３では、カメラ操作判
定部７５はカメラの操作を判定する。このための手法と
しては、ハフ変換を用いて動きのベクトルの消失点を求
め、複数ある消失点のうちの最大の投票数を得た消失点
を背景に対する消失点とし、カメラ操作情報に関する拘
束式を解くなどの手法がある。カメラ操作情報と消失点
との関係やカメラ操作情報を求める手法は、たとえば
「金谷健一著、『画像理解』、森北出版」などに詳し
い。

【０１５６】カメラ操作情報が判定されると、ステップ
Ｓ６４で、第１の実施の形態で示した図６および図７の
ような形式などで対応するフレームＩＤと関連付け、フ
ァイルのフッタ領域に格納するなどの方法で、動画像・
インデックス蓄積部７４に記憶する。

【０１５７】次に、ステップＳ６５では、終了判定を行
い、処理すべきクリップが残っていれば、ステップＳ６
２へ進み、Ｎを“１”だけインクリメントし、ステップ
Ｓ６２〜Ｓ６４を繰り返す。

【０１５８】最後に、ステップＳ４３の動画の編集処理
であるが、前記第１の実施の形態に示した図５の手順と
全く同様の処理で実現が可能である。

【０１５９】なお、第１の実施の形態では、撮影部と動
画編集部はそれぞれ個別の装置で構成するようにした
が、撮像部が十分な演算能力等を備えていれば、また
は、動画編集部に撮影用のレンズなどを搭載可能なら
ば、ひとつの装置で実現することも可能である。

【０１６０】また、前記第１および第２の形態では、ル
ール（１）のみについて説明したが、ルール（２）のチ
ルトに関しても同様に処理できる。

【０１６１】さらに、前記第１および第２の実施の形態
では、シーン情報とシーンルールとの照合処理をより高
速化するために、フレーム単位についているカメラ操作
情報を予め、区間ごとにまとめ、図２１に例示したよう
に区間とカメラ操作情報の種類、カメラ操作情報のパラ
メータ、という形式にしておいてもよい。

【０１６２】また、前記第１および第２の実施の形態で
は、フレームの位置を示すのにフレームＩＤを用いた
が、タイムコードであってもよい。つまり、動画中でそ
のフレームの位置を特定できれば何であっても構わな
い。

【０１６３】さらに、前記第１の実施の形態では、図５
で示した撮像部１１が実行する制御処理の手順は一例を
示したものに過ぎず、これに限定されるものではない。
たとえば、画像撮像中にカメラの設定を変更可能にして
も構わない。

【０１６４】また、前記第１の実施の形態では、動画像
はクリップ単位に保存され、また、前記第２の実施の形
態では、動画像をカット検出部７３によってクリップ単
位に分けた。これは、ユーザがシーンを指定する際の操
作性を考慮したものである。よって、操作性の低下を容
認するならば、必ずしもクリップ単位に分ける必要はな
い。したがって、第１の実施の形態では全てのクリップ
を一ファイルで保存、第２の実施の形態では、カット点
検出処理の省略が可能である。

【０１６５】なお、本発明は、たとえばホストコンピュ
ータ、インターフェース機器、リーダ、プリンタなどの
複数の機器から構成されるシステムに適用しても、一つ
の機器からなる装置（たとえば、複写機、ファクシミリ
装置など）に適用してもよい。

【０１６６】なお、上述した各実施の形態の機能を実現
するソフトウェアのプログラムコードを記録した記憶媒
体を、システムまたは装置に供給し、そのシステムまた
は装置のコンピュータ（またはＣＰＵやＭＰＵ）が記憶
媒体に格納されたプログラムコードを読出し実行するこ
とによっても、本発明の目的が達成されることは言うま
でもない。

【０１６７】この場合、記憶媒体から読出されたプログ
ラムコード自体が本発明の新規な機能を実現することに
なり、そのプログラムコードを記憶した記憶媒体は本発
明を構成することになる。

【０１６８】プログラムコードを供給するための記憶媒
体としては、たとえば、フレキシブルディスク、ハード
ディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯ
Ｍ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード、
ＲＯＭなどを用いることができる。また、通信ネットワ
ークを介してサーバコンピュータからプログラムコード
が供給されるようにしてもよい。

【０１６９】また、コンピュータが読出したプログラム
コードを実行することにより、上述した各実施の形態の
機能が実現されるだけでなく、そのプログラムコードの
指示に基づき、コンピュータ上で稼働しているＯＳなど
が実際の処理の一部または全部を行い、その処理によっ
て上述した各実施の形態の機能が実現される場合も含ま
れることは言うまでもない。

【０１７０】さらに、記憶媒体から読出されたプログラ
ムコードが、コンピュータに挿入された機能拡張ボード
やコンピュータに接続された機能拡張ユニットに備わる
メモリに書込まれた後、そのプログラムコードの指示に
基づき、その機能拡張ボードや機能拡張ユニットに備わ
るＣＰＵなどが実際の処理の一部または全部を行い、そ
の処理によって上述した各実施の形態の機能が実現され
る場合も含まれることは言うまでもない。

【０１７１】

【発明の効果】以上説明したように、本発明によれば、
カメラ操作による表現の組み合わせのチェックを自動化
でき、専門的な知識を必要としないので、アマチュアで
あっても容易に高度な編集結果を得ることが可能であ
る。また、動画編集中に随時、チェックが行われるの
で、ユーザは自由な工程で編集作業を進めることが可能
である。

【図面の簡単な説明】

【図１】本発明の第１の実施の形態に係る動画像処理装
置の概略構成を示すブロック図である。

【図２】図１の動画像処理装置の撮影部の構成を示すブ
ロック図である。

【図３】図１の動画像処理装置の動画編集部の制御構成
を示すブロック図である。

【図４】実施例１における動画編集部の機能構成を示す
ブロック図である。

【図５】図２の撮影部が実行する制御処理の手順を示す
フローチャートである。

【図６】ＤＶフォーマットにおけるカメラ操作情報の形
式の一例を示す図である。

【図７】カメラ操作情報の形式の一例を示す図である。

【図８】図３の動画編集部が実行する制御処理の手順を
示すフローチャートである。

【図９】図１の動画像処理装置のユーザインターフェー
スの一例を示す図である。

【図１０】シーン情報の一例を示す図である。

【図１１】図１の動画像処理装置で表示されるメッセー
ジの一例を示す図である。

【図１２】シーン情報とシーンルールとの照合の方法の
詳細な手順を示すフローチャートである。

【図１３】メッセージ表示時におけるシーン指定ウィン
ドウの表示例を示す図である。

【図１４】本発明の第２の実施の形態に係る動画像処理
装置の制御構成を示すブロック図である。

【図１５】本発明の第２の実施の形態に係る動画像処理
装置の機能構成を示すブロック図である。

【図１６】図１５の動画処理装置が実行する制御処理概
要の手順を示すフローチャートである。

【図１７】図１６の動画像の取り込み処理の手順を示す
フローチャートである。

【図１８】カット検出時のフレームのブロック分割の一
例を示す図である。

【図１９】インデックス情報の一例を示す図である。

【図２０】図１６の動画のカメラ操作情報の判定処理の
手順を示すフローチャートである。

【図２１】区間ごとにまとめたシーン情報の一例を示す
図である。

【符号の説明】

１撮影部２記録媒体３動画像編集部３ａ読み取り部３ｂ表示部３ｃシーンルール照合部３ｄユーザ操作部３ｅシーンルール１１撮像部１２画像圧縮部１３カメラ操作部１４センサ部１５制御部１６記録部３１ＣＰＵ３２ＲＯＭ３３ＲＡＭ３４キーボード３５マウス３６外部記憶装置３７表示器３８ネットワークインターフェースカード（ＮＩＣ）３９バス

Claims

【特許請求の範囲】

【請求項１】映像データおよび該映像データに関する
カメラ操作情報を記憶する記憶手段と、前記記憶手段より前記映像データと前記カメラ操作情報
を読み出す読み出し手段と、前記映像データ中でユーザが所望する区間を複数指定す
る指定手段と、前記指定区間の順序を指定する順序指定手段と、前記指定した区間中に含まれる前記カメラ操作情報を検
出する検出手段と、前記カメラ操作情報の組み合わせに関する規則を記憶す
る規則記憶手段と、前記規則と前記指定区間に含まれるカメラ操作情報を照
合し、該カメラ操作情報が当該規則に反すると判定した
ときはユーザに注意を促すように制御する制御手段とを
備えたことを特徴とする動画像処理装置。
【請求項２】前記カメラ操作情報は、映像データ作成
時のカメラの動きおよびカメラの状態のうち少なくとも
一方に関するものであることを特徴とする請求項１に記
載の動画像処理装置。
【請求項３】前記規則には、少なくともカメラ操作情
報の存在区間とその時系列上の並びが含まれることを特
徴とする請求項１に記載の動画像処理装置。
【請求項４】前記制御手段は、所定の長さより短い区
間のカメラ操作情報については、照合の対象としないこ
とを特徴とする請求項１に記載の動画像処理装置。
【請求項５】前記制御手段は、ユーザが区間を指定す
るごとに処理を行うことを特徴とする請求項１に記載の
動画像処理装置。
【請求項６】前記制御手段は、ユーザに注意を促すと
きは、前記指定区間との対応関係を示すことを特徴とす
る請求項１に記載の動画像処理装置。
【請求項７】前記検出手段は、予めカメラ操作情報を
区間ごとにまとめておくことを特徴とする請求項１に記
載の動画像処理装置。
【請求項８】前記読み出し手段によって読み出された
映像データに係る映像を表示する表示手段を備え、前記制御手段は、ユーザに注意を促すための画像を前記
表示手段に表示することを特徴とする請求項１に記載の
動画像処理装置。
【請求項９】映像データを記憶する記憶手段と、前記映像データ中のカメラの操作情報を抽出する抽出手
段と、前記映像データ中でユーザが所望する区間を複数指定す
る区間指定手段と、前記指定区間の順序を指定する順序指定手段と、前記指定した区間中に含まれる前記カメラ操作情報を検
出する検出手段と、前記カメラ操作情報の組み合わせに関する規則を記憶す
る規則記憶手段と、前記規則と前記指定区間に含まれるカメラ操作情報を照
合し、該カメラ操作情報が当該規則に反すると判定した
ときはユーザに注意を促すように制御する制御手段とを
備えたことを特徴とする動画像処理装置。
【請求項１０】前記カメラ操作情報は、映像データ作
成時のカメラの動きおよびカメラの状態のうち少なくと
も一方に関するものであることを特徴とする請求項９に
記載の動画像処理装置。
【請求項１１】前記規則には、少なくともカメラ操作
情報の存在区間とその時系列上の並びが含まれることを
特徴とする請求項９に記載の動画像処理装置。
【請求項１２】前記制御手段は、所定の長さより短い
区間のカメラ操作情報については、照合の対象としない
ことを特徴とする請求項９に記載の動画像処理装置。
【請求項１３】前記制御手段は、ユーザが区間を指定
するごとに処理を行うことを特徴とする請求項９に記載
の動画像処理装置。
【請求項１４】前記制御手段は、ユーザに注意を促す
ときは、前記指定区間との対応関係を示すことを特徴と
する請求項９に記載の動画像処理装置。
【請求項１５】前記検出手段は、予めカメラ操作情報
を区間ごとにまとめておくことを特徴とする請求項９に
記載の動画像処理装置。
【請求項１６】前記読み出し手段によって読み出され
た映像データに係る映像を表示する表示手段を備え、前記制御手段は、ユーザに注意を促すための画像を前記
表示手段に表示することを特徴とする請求項９に記載の
動画像処理装置。
【請求項１７】被写体を撮影し、映像データを生成す
る撮像手段と、前記撮像手段の状態に関する情報を検知するセンサ手段
と、前記撮像手段における設定に関する情報および前記セン
サ手段によって検知された前記撮像手段の状態に関する
情報を、カメラ操作情報として獲得する獲得手段と、前記映像データと前記カメラ操作情報を記憶媒体に記録
する記録手段と、前記記憶媒体より前記映像データと前記カメラ操作情報
を読み出す読み出し手段と、前記映像データ中でユーザが所望する区間を複数指定す
る区間指定手段と、前記指定区間の順序を指定する順序指定手段と、前記指定した区間中に含まれる前記カメラ操作情報を検
出する検出手段と、前記カメラ操作情報の組み合わせに関する規則を記憶す
る規則記憶手段と、前記規則と前記指定区間に含まれるカメラ操作情報を照
合し、該カメラ操作情報が当該規則に反すると判定した
ときはユーザに注意を促すように制御する制御手段とを
備えたことを特徴とする動画像処理装置。
【請求項１８】前記記憶媒体に記憶される前記カメラ
操作情報は、種類、存在した区間および方向を含むこと
を特徴とする請求項１７に記載の動画像処理装置。
【請求項１９】前記規則には、少なくともカメラ操作
情報の存在区間とその時系列上の並びが含まれることを
特徴とする請求項１７に記載の動画像処理装置。
【請求項２０】前記制御手段は、ユーザが区間を指定
するごとに処理を行うことを特徴とする請求項１７に記
載の動画像処理装置。
【請求項２１】前記制御手段は、ユーザに注意を促す
ときは、前記指定区間との対応関係を示すことを特徴と
する請求項１７に記載の動画像処理装置。
【請求項２２】前記検出手段は、予めカメラ操作情報
を区間ごとにまとめておくことを特徴とする請求項１７
に記載の動画像処理装置。
【請求項２３】前記読み出し手段によって読み出され
た映像データに係る映像を表示する表示手段を備え、前記制御手段は、ユーザに注意を促すための画像を前記
表示手段に表示することを特徴とする請求項１７に記載
の動画像処理装置。
【請求項２４】映像データおよび該映像データに関す
るカメラ操作情報を記憶する記憶工程と、前記記憶された前記映像データと前記カメラ操作情報を
読み出す読み出し工程と、前記映像データ中でユーザが所望する区間を複数指定す
る区間指定工程と、前記指定区間の順序を指定する順序指定工程と、前記指定した区間中に含まれる前記カメラ操作情報を検
出する検出工程と、前記カメラ操作情報の組み合わせに関する規則を記憶す
る規則記憶工程と、前記規則と前記指定区間に含まれるカメラ操作情報を照
合し、該カメラ操作情報が当該規則に反すると判定した
ときはユーザに注意を促すように制御する制御工程とを
備えたことを特徴とする動画像処理方法。
【請求項２５】前記カメラ操作情報は、映像データ作
成時のカメラの動きおよびカメラの状態のうち少なくと
も一方に関するものであることを特徴とする請求項２４
に記載の動画像処理方法。
【請求項２６】前記規則には、少なくともカメラ操作
情報の存在区間とその時系列上の並びが含まれることを
特徴とする請求項２４に記載の動画像処理方法。
【請求項２７】前記制御工程では、所定の長さより短
い区間のカメラ操作情報については、照合の対象としな
いことを特徴とする請求項２４に記載の動画像処理方
法。
【請求項２８】前記制御工程では、ユーザが指定する
ごとに処理を行うことを特徴とする請求項２４に記載の
動画像処理方法。
【請求項２９】前記制御工程では、ユーザに注意を促
すときは、前記指定区間との対応関係を示すことを特徴
とする請求項２４に記載の動画像処理方法。
【請求項３０】前記検出工程では、予めカメラ操作情
報を区間ごとにまとめておくことを特徴とする請求項２
４に記載の動画像処理方法。
【請求項３１】前記読み出し工程によって読み出され
た映像データに係る映像を表示手段に表示する表示工程
を備え、前記制御工程では、ユーザに注意を促すための画像を前
記表示手段に表示することを特徴とする請求項２４に記
載の動画像処理方法。
【請求項３２】映像データを記憶する記憶工程と、前記映像データ中のカメラの操作情報を抽出する抽出工
程と、前記映像データ中でユーザが所望する区間を複数指定す
る区間指定工程と、前記指定区間の順序を指定する順序指定工程と、前記指定した区間中に含まれる前記カメラ操作情報を検
出する検出工程と、前記カメラ操作情報の組み合わせに関する規則を記憶す
る規則記憶工程と、前記規則と前記指定区間に含まれるカメラ操作情報を照
合し、該カメラ操作情報が当該規則に反すると判定した
ときはユーザに注意を促すように制御する制御工程とを
備えたことを特徴とする動画像処理方法。
【請求項３３】前記カメラ操作情報は、映像データ作
成時のカメラの動きおよびカメラの状態のうち少なくと
も一方に関するものであることを特徴とする請求項３２
に記載の動画像処理方法。
【請求項３４】前記規則には、少なくともカメラ操作
情報の存在区間とその時系列上の並びが含まれることを
特徴とする請求項３２に記載の動画像処理方法。
【請求項３５】前記制御工程では、所定の長さより短
い区間のカメラ操作情報については、照合の対象としな
いことを特徴とする請求項３２に記載の動画像処理方
法。
【請求項３６】前記制御工程では、ユーザが指定する
ごとに処理を行うことを特徴とする請求項３２に記載の
動画像処理方法。
【請求項３７】前記制御工程では、ユーザに注意を促
すときは、前記指定区間との対応関係を示すことを特徴
とする請求項３２に記載の動画像処理方法。
【請求項３８】前記検出工程では、予めカメラ操作情
報を区間ごとにまとめておくことを特徴とする請求項３
２に記載の動画像処理方法。
【請求項３９】前記読み出し工程によって読み出され
た映像データに係る映像を表示手段に表示する表示工程
を備え、前記制御工程では、ユーザに注意を促すための画像を前
記表示手段に表示することを特徴とする請求項３２に記
載の動画像処理方法。
【請求項４０】被写体を撮影し、映像データを生成す
る撮像工程と、前記撮像工程における設定に関する情報およびセンサ手
段によって得られた前記撮像工程の状態に関する情報
を、カメラ操作情報として獲得する獲得工程と、前記映像データと前記カメラ操作情報を記憶媒体に記録
する記録工程と、前記記憶媒体より前記映像データと前記カメラ操作情報
を読み出す読み出し工程と、前記映像データ中でユーザが所望する区間を複数指定す
る区間指定工程と、前記指定区間の順序を指定する順序指定工程と、前記指定した区間中に含まれる前記カメラ操作情報を検
出する検出工程と、前記カメラ操作情報の組み合わせに関する規則を記憶す
る規則記憶工程と、前記規則と前記指定区間に含まれるカメラ操作情報を照
合し、該カメラ操作情報が当該規則に反すると判定した
ときはユーザに注意を促すように制御する制御工程とを
備えたことを特徴とする動画像処理方法。
【請求項４１】前記記憶媒体に記憶される前記カメラ
操作情報は、種類、存在した区間および方向を含むこと
を特徴とする請求項４０に記載の動画像処理方法。
【請求項４２】前記規則には、少なくともカメラ操作
情報の存在区間とその時系列上の並びが含まれることを
特徴とする請求項４０に記載の動画像処理方法。
【請求項４３】前記制御工程では、ユーザが指定する
ごとに処理を行うことを特徴とする請求項４０に記載の
動画像処理方法。
【請求項４４】前記制御工程では、ユーザに注意を促
すときは、前記指定区間との対応関係を示すことを特徴
とする請求項４０に記載の動画像処理方法。
【請求項４５】前記検出工程では、予めカメラ操作情
報を区間ごとにまとめておくことを特徴とする請求項４
０に記載の動画像処理方法。
【請求項４６】前記読み出し工程によって読み出され
た映像データに係る映像を表示手段に表示する表示工程
を備え、前記制御工程では、ユーザに注意を促すための画像を前
記表示手段に表示することを特徴とする請求項４０に記
載の動画像処理方法。
【請求項４７】映像データおよび該映像データに関す
るカメラ操作情報を記憶する記憶工程と、前記記憶された前記映像データと前記カメラ操作情報を
読み出す読み出し工程と、前記映像データ中でユーザが所望する区間を複数指定す
る区間指定工程と、前記指定区間の順序を指定する順序指定工程と、前記指定した区間中に含まれる前記カメラ操作情報を検
出する検出工程と、前記カメラ操作情報の組み合わせに関する規則を記憶す
る規則記憶工程と、前記規則と前記指定区間に含まれるカメラ操作情報を照
合し、該カメラ操作情報が当該規則に反すると判定した
ときはユーザに注意を促すように制御する制御工程とを
備えた動画像処理方法を含む、コンピュータが実現でき
るプログラムを格納した記憶媒体。
【請求項４８】映像データを記憶する記憶工程と、前記映像データ中のカメラの操作情報を抽出する抽出工
程と、前記映像データ中でユーザが所望する区間を複数指定す
る区間指定工程と、前記指定区間の順序を指定する順序指定工程と、前記指定した区間中に含まれる前記カメラ操作情報を検
出する検出工程と、前記カメラ操作情報の組み合わせに関する規則を記憶す
る規則記憶工程と、前記規則と前記指定区間に含まれるカメラ操作情報を照
合し、該カメラ操作情報が当該規則に反すると判定した
ときはユーザに注意を促すように制御する制御工程とを
備えた動画像処理方法を含む、コンピュータが実現でき
るプログラムを格納した記憶媒体。
【請求項４９】被写体を撮影し、映像データを生成す
る撮像工程と、前記撮像工程における設定に関する情報およびセンサ手
段によって得られた前記撮像工程の状態に関する情報
を、カメラ操作情報として獲得する獲得工程と、前記映像データと前記カメラ操作情報を記憶媒体に記録
する記録工程と、前記記憶媒体より前記映像データと前記カメラ操作情報
を読み出す読み出し工程と、前記映像データ中でユーザが所望する区間を複数指定す
る区間指定工程と、前記指定区間の順序を指定する順序指定工程と、前記指定した区間中に含まれる前記カメラ操作情報を検
出する検出工程と、前記カメラ操作情報の組み合わせに関する規則を記憶す
る規則記憶工程と、前記規則と前記指定区間に含まれるカメラ操作情報を照
合し、該カメラ操作情報が当該規則に反すると判定した
ときはユーザに注意を促すように制御する制御工程とを
備えた動画像処理方法を含む、コンピュータが実現でき
るプログラムを格納した記憶媒体。