JP4285287B2 - 画像処理装置、画像処理方法およびそのプログラム、記録媒体 - Google Patents

Description

本発明は、動画像から抽出した複数のシーンを繋ぎ合わせる画像処理装置、画像処理方法およびコンピュータプログラム、記録媒体に関する。

従来から、長時間の動画像の内容を短時間で把握したいというニーズがある。こうしたニーズに対応するため、動画像から代表シーン（画像）を複数抽出し、この代表画像を繋ぎ合わせて、いわゆるダイジェスト動画（要約）を生成する様々な方法が用いられている。例えば、下記特許文献１には、ＤＶＤに収録された動画像の内容について、その動画像の画像、音、字幕などの状態が変化する位置を検出し、検出された位置の情報に基づいて、動画像から幾つかの代表画像を抽出して要約を生成する技術が開示されている。

特開平１０−２３２８８４号公報

こうした技術を用いて、自動的に代表シーンを繋ぎ合わせたダイジェスト動画は、短時間に編集された動画像であり、かつ、動画像の内容が把握できるものとされている。

しかしながら、こうしたダイジェスト動画は、各シーンの繋ぎ合せに何ら配慮がされておらず、見づらいものであるという問題があった。これは、動画像の内容とは無関係に各シーンを単に繋ぎ合わせて編集し、シーンの切り替わり（シーンチェンジ）に効果的な処理を施していないことが一因であった。このため、各シーンを効果的に繋ぎ合わせるように、ユーザがシーンの前後を確認してシーンチェンジの効果を設定しなければならず、煩雑な操作が必要となっていた。また、見栄えを向上するために、シーンチェンジの部分に効果的な処理を施した新たな画像を単に追加する場合、ダイジェスト動画全体の再生時間を延ばすこととなる。特に、ダイジェスト動画の再生時間を決められた時間内に納める必要がある場合、新たな画像を追加することが困難となっていた。

本発明は、こうした問題を解決し、自動的に効果的なシーンチェンジを設定して各シーンを繋ぎ合わせる画像処理装置、画像処理方法の提供を目的とする。

本発明の第１の画像処理装置は、上記課題の少なくとも一部を解決するため、以下の手法を採った。すなわち、動画像から抽出した複数のシーンを繋ぎ合わせる画像処理装置であって、前記複数のシーンの特徴を示すシーン情報を抽出するシーン情報抽出手段と、前記シーンを繋ぎ合わせる際に、該シーンの切替えに用いる複数の種類の切替効果を予め記憶する切替効果記憶手段と、前記抽出したシーン情報に基づいて、前記記憶した切替効果から所定の切替効果を選択する切替効果選択手段と、前記選択された所定の切替効果を用いて、前記シーンを繋ぎ合わせて出力する出力手段とを備え、前記シーン情報抽出手段は、繋ぎ合わせる前後のシーンのうち、時系列順で前のシーンの終わりから時系列的に、該前のシーンの一部を構成する複数枚のフレーム画像から、該複数のフレーム画像間において動きのある部分に基づいて判断される動体の動きを記述する状態量、および時系列順で後のシーンの初めから時系列的に、該後のシーンの一部を構成する複数枚のフレーム画像から、該複数のフレーム画像間において動きのある部分に基づいて判断される動体の動きを記述する状態量のうち、少なくとも一方を含んだ情報を、前記シーン情報として抽出することを要旨としている。

また、本発明の第１の画像処理方法は、
前記シーンを繋ぎ合わせる際に、該シーンの切替えに用いる複数の種類の切替効果を予め記憶し、
前記複数のシーン各々の特徴を示すシーン情報を、繋ぎ合わせる前後のシーンのうち、時系列順で前のシーンの終わりから時系列的に、該前のシーンの一部を構成する複数枚のフレーム画像から、該複数のフレーム画像間において動きのある部分に基づいて判断される動体の動きを記述する状態量、および時系列順で後のシーンの初めから時系列的に、該後のシーンの一部を構成する複数枚のフレーム画像から、該複数のフレーム画像間において動きのある部分に基づいて判断される動体の動きを記述する状態量のうち、少なくとも一方を含んだ情報として抽出し、
前記抽出したシーン情報に基づいて、前記記憶した切替効果から所定の切替効果を選択し、
前記選択された所定の切替効果を用いて、前記シーンを繋ぎ合わせて出力すること
を要旨としている。

第１の画像処理装置および画像処理方法によれば、予め記憶した複数の種類の切替効果の中から、シーン情報に基づいて、シーンの切替えに用いる切替効果を選択し、その切替効果を用いてシーンを繋ぎ合わせる。したがって、シーンの特徴を考慮したシーンの切替えの切替効果を選択することができ、シーンの繋ぎ合わせを自動的に実行することができる。こうして出力された画像は、シーンの内容を考慮しているため、シーンの切替りが見づらいものとなることはない。

上記の構成を有する画像処理装置におけるシーン情報には、シーンの輝度変化、パン、チルトやズームなどカメラワークに関するデータ、こうしたデータを予め画像に付加したメタデータなど種々のものを用いることができるが、特に、一のシーンを構成する複数のフレーム画像間において動きのある物体として判断される動体の動きを記述する状態量を用いることができる。

かかる画像処理装置によれば、一のシーンの特徴を、そのシーンを構成する複数のフレーム画像間の動体の状態量によって認識する。一般的に、動画像の一シーンに動体が存在する場合、その動体がそのシーンの要部であることが多い。一のシーンのシーン情報を、面積変化、位置変化などの動体の動きを記述する状態量で代表することで、シーンの特徴を容易に認識することができ、繋ぎ合わせるシーンの特徴を考慮した処理を実行することができる。

上記の構成を有する画像処理装置のシーン情報抽出手段は、繋ぎ合わせる２つのシーンのうち、時系列順で前のシーンの終わりから順に、および／または、時系列順で後のシーンの初めから順に、それぞれ所定枚数のフレーム画像を抽出するフレーム抽出手段を備えるものとしても良い。

かかる画像処理装置によれば、繋ぎ合わせる２つのシーンの終わり、および／または、初めから、所定枚数のフレーム画像を抽出する。この抽出したフレーム画像に基づいて、そのシーンのシーン情報を抽出する。つまり、シーン全体の情報量を必要とせず、繋ぎ合わせる部分のみのフレーム画像の情報を用いてシーン情報を抽出することができる。

上記の構成を有する画像処理装置のシーン情報抽出手段は、前記抽出されたフレーム画像間のずれ量を検出し、該ずれ量を補正することで前記動体を判定し、該動体の状態量を算出する特徴量算出手段を備えるものとしても良い。

かかる画像処理装置によれば、予め繋ぎ合わせるシーンにシーン情報が付加されていなくても、シーンの一部のフレーム画像間における演算で、動体の情報を認識することができる。したがって、種々の動画像に対応し、効果的なシーンの繋ぎ合わせを実行することができる。

上記の構成を有する画像処理装置のシーン情報には、前記シーン毎の再生時間を含み、前記フレーム抽出手段は、前記シーンの再生時間に応じた枚数のフレーム画像を抽出する手段であるものとしても良い。

かかる画像処理装置によれば、シーンの再生時間が長い場合には、多数枚のフレーム画像を抽出し、再生時間が短い場合に、少数枚のフレーム画像を抽出する。つまり、適切な量のフレーム画像に基づいてシーン情報を抽出することができ、効率的な処理をすることができる。

上記の構成を有する画像処理装置の記憶した複数の種類の切替効果は、少なくともカット、スライド、ワイプ、フェードのいずれかであるとしても良い。こうした切替効果を用いることで、効果的なシーンの繋ぎ合わせをすることができる。

上記の構成を有する画像処理装置のシーン情報には、前記シーンの再生時間を含み、前記切替効果選択手段は、前記再生時間が所定時間より短いシーンの場合には、前記切替効果としてカットを選択するものとしても良い。

かかる画像処理装置によれば、もともと再生時間が所定時間よりも短いシーンについては、所定の切替効果としてカットを選択する。つまり、繋ぎ合わせるシーンの終わり、および／または、初めのフレーム画像に処理を加えず、そのままシーンを繋ぎ合わせる。こうすることで、例えば、アクションシーンなどの頻繁に変わるシーンを効果的に繋ぎ合わせることができる。

上記の構成を有する画像処理装置の切替効果選択手段は、前記シーン情報から繋ぎ合わせる２つのシーンの関係を類型し、該類に応じた前記切替効果を選択する手段であるものとしても良い。

かかる画像処理装置によれば、一のシーンの特徴のみならず、繋ぎ合わせる他のシーンの特徴も加味して切替効果を決定する。こうした２つのシーンの関係を類型し、類毎に切替効果を設定しておくことで、使用する切替効果を容易に選定することができる。

上記の構成を有する画像処理装置の出力手段は、繋ぎ合わせる２つのシーンの一端を重ね合わせて出力する手段とすることができる。

かかる画像処理装置によれば、繋ぎ合わせる２つのシーンの一端を重ね合わせて一つの動画像を出力するため、出力した動画像の全体の再生時間を短くすることがきる。例えば、シーン１の終わりの部分の所定枚数のフレーム画像とシーン２の初めの部分の所定枚数のフレーム画像とから、切替効果を考慮して新たに合成フレーム画像を生成し、シーン１とシーン２とを重ね合わせる部分に合成フレーム画像を使用する。こうして２つのシーンを繋ぎ合わせることで、シーンの切替に配慮しつつ、生成した動画像の全体の再生時間を短くすることがきる。

上記の構成を有する画像処理装置のシーン情報には、前記動体の状態量として該動体の移動速度を含み、前記出力手段は、前記移動速度に基づいて、前記所定の切替効果の変化する速度を調整してシーンを繋ぎ合わせて出力するものとしても良い。

かかる画像処理装置によれば、動体の動きを中心として切替効果の変化する速度を調整する。したがって、動体を長く表示しながら徐々にシーンを切り替えるなどの動体を優先して表示する切替効果を施すことができる。

上記の構成を有する画像処理装置のシーン情報抽出手段は、前記繋ぎ合わせる複数のシーンのうち、時系列順で最初のシーンの前、および／または、時系列順で最後のシーンの後に、擬似的なシーンを追加する手段を備え、前記擬似的なシーンと前記最初のシーン、および／または、前記最後のシーンとを、所定の切替効果を用いて繋ぎ合わせるものとしても良い。

かかる画像処理装置によれば、複数のシーンを繋ぎ合わせた結果として生成される動画像の初めの部分、および／または、終わりの部分に所定の切替効果を追加することができ、出力した動画像を更に効果的なものとすることができる。

本発明は、コンピュータプログラムおよびコンピュータプログラムを記録した記録媒体としても実装することができる。

以下、本発明の実施の形態について、実施例に基づき以下の順序で説明する。
Ａ．第１実施例：
Ａ１．画像処理装置の構成：
Ａ２．画像処理：
Ａ３．シーン特徴量算出処理：
Ａ４．グループ決定処理：
Ａ５．シーン切替設定処理：
Ｂ．第２実施例：
Ｃ．変形例：

Ａ．第１実施例：
Ａ１．画像処理装置の構成：
図１は、本発明の第１実施例としての画像処理システム１００を示す説明図である。図示するように、この画像処理システム１００は、所定の動画像を記憶し、再生するＨＤＤレコーダ１０、ＨＤＤレコーダ１０と接続され動画像を映し出すＴＶモニタ２０等から構成されている。

ＨＤＤレコーダ１０は、記憶した動画像を編集する様々な機能を有している。例えば、動画像の中のシーンの切り替わりを自動で検出し、シーンごとに代表となるフレーム画像のインデックス（サムネイル）を作成するインデックス機能や、シーンごとに動画像の一部を切り出し、これらを繋ぎ合わせてダイジェスト動画を作成するダイジェスト機能である。こうしたシーンの切り替わりの自動検出は、シーン（動画像）を構成する複数のフレーム画像の色調や輝度などの変化を検出することで行なわれている。つまり、このＨＤＤレコーダ１０は、一つの動画像に対して、ダイジェスト動画を生成するための複数のシーンを有している。

このＨＤＤレコーダ１０は、動画像およびユーザ操作の入出力を制御するＩ／Ｆ回路部１２、Ｉ／Ｆ回路部１２を介して動画像を記憶するハードディスク１４、ＨＤＤレコーダ１０の各種機能を制御するＣＰＵ１５，ＲＯＭ１６，ＲＡＭ１７等から構成されており、入力した動画像をデジタルデータとして記憶している。

Ｉ／Ｆ回路部１２は、ＴＶモニタ２０および操作パネル１８と接続しており、操作パネル１８を介したユーザの要求に応じて、ＴＶモニタ２０で受信した動画像を入力する。Ｉ／Ｆ回路部１２は、受信した動画像がアナログデータである場合には、デジタルデータに変換している。なお、操作パネル１８には、赤外線の受光部が設けてあり、外部からのリモコン１９操作によりＨＤＤレコーダ１０を操作することができる。

このＨＤＤレコーダ１０は、図示しないパーソナルコンピュータに接続する端子が設けられており、ハードディスク１４に記憶した動画像をパーソナルコンピュータに取り込むことができる。なお、ＨＤＤレコーダ１０は、予めハードディスク１４に記憶した動画像を記憶媒体に出力するＤＶＤ−Ｒドライブを装着するものとしても良い。

ハードディスク１４は、動画像を記憶する大容量の記憶領域と、ＨＤＤレコーダ１０の各種機能を実行するプログラムを記憶した記憶領域とを備えている。後者の記憶領域には、上述の動画像の編集機能のプログラムと共に、複数のシーンを効果的に繋ぎ合わせるための画像処理のプログラム（以下、画像処理プログラムと呼ぶ）が記憶されている。

この画像処理プログラムは、主に、繋ぎ合わせる２つのシーンの特徴であるシーン情報を抽出する機能、シーンの切替えに用いる複数の種類の切替効果を予め記憶する機能、シーン情報から繋ぎ合わせに用いる切替効果を選択する機能、選択された切替効果を用いてシーンを繋ぎ合わせる機能を実行するものである。つまり、この画像処理プログラムを備えたＨＤＤレコーダ１０は、特許請求の範囲の「シーン情報抽出手段」，「切替効果記憶手段」，「切替効果選択手段」，「出力手段」を備えた画像処理装置となる。

こうした構成の画像処理システム１００において、ユーザが操作パネル１８を用いて、ハードディスク１４に記憶された所定のダイジェスト動画の編集操作をすると、ＣＰＵ１５は、ＲＯＭ１６，ＲＡＭ１７と協働して画像処理プログラムを実行する。なお、画像処理の実行後のダイジェスト動画は、ハードディスク１４に記憶され、必要に応じてＴＶモニタ２０の画面上に再生される。

この画像処理の一連の概念図を、図２に示した。図示するように、この画像処理では、２つのシーンを繋ぎ合わせる際に、シーンの切替効果を選択し、その切替効果を用いたシーンの切り替え（シーンチェンジ）を実行している。例えば、ハードディスク１４内のシーン１とシーン２とを繋ぎ合わせる場合には、シーン１の終わりから時系列に所定枚数のフレーム画像を抽出し、シーン２の初めから時系列に所定枚数のフレーム画像を抽出する。抽出した複数のフレーム画像からシーン１のシーン情報としての特徴量Ａとシーン２の特徴量Ｂとを抽出し、両特徴量Ａ，Ｂからシーン１とシーン２との関係をグループに分類する。分類されたグループに対応して、予め記憶した切替効果の中から切替効果１を選択する。例えば、切替効果１はワイプ、切替効果２はスライドといった画像効果を選択する。選択された切替効果を用いて、２つのシーンを繋ぎ合わせる。こうして繋ぎ合わせるシーンの内容（特徴量）を考慮したシーンチェンジを実行する。なお、シーンの特徴量および切替効果については、後に詳しく説明する。

図２に示した概念図では、シーン１，シーン２，シーン３のシーンチェンジには、それぞれのシーンの繋ぎ合わせ部分を重ね合わせるオーバラップを用いている。具体的には、シーン１とシーン２との繋ぎ合わせ部分は時間α１に相当する再生時間分、シーン２とシーン３との繋ぎ合わせ部分は時間α２に相当する再生時間分、それぞれオーバラップしている。こうして生成された動画像の総再生時間は、単に各シーンを繋ぎ合わせたものよりもオーバラップの時間（α１＋α２）だけ短縮したものとなる。以下に、この画像処理の詳細を説明する。

Ａ２．画像処理：
図３は、動画像から抽出した複数のシーンを繋ぎ合せる第１実施例の画像処理のフローチャートである。上述のハード構成を有する画像処理システム１００において、ユーザがＨＤＤレコーダ１０の操作パネル１８を操作すると、ＣＰＵ１５はハードディスク１４内の画像処理プログラムを読み出し、ＴＶモニタ２０上に編集操作の操作画面を表示する。この操作画面には、例えば、ＨＤＤレコーダ１０のハードディスク１４内に記憶した動画像のタイトル一覧が表示されており、ユーザが操作パネル１８を用いて編集する動画像のタイトルを選択することで、ＣＰＵ１５は画像処理を実行する。

画像処理が開始すると、ＣＰＵ１５は、選択された動画像の複数のシーンのうち、時系列順である２つのシーン（シーンｎ，シーンｎ＋１）を読み出す（ステップＳ３００）。

ＣＰＵ１５は、読み出されたシーンｎとシーンｎ＋１とについて、それぞれのシーンの特徴を示す特徴量を算出する処理を行なう（ステップＳ３１０）。一般に、一のシーンの有する情報（シーン情報）には、画像の輝度変化、色調変化、パン，チルトなどのカメラワーク、被写体の動き、シーンの再生時間など様々な情報がある。こうした情報は、シーンを構成する複数のフレーム画像を精査することで取得できる。本実施例では、種々のシーン情報のうち、「被写体の動き」に相当するフレーム画像間で動きのある部分（これを動体と呼ぶ）に関する情報を用いている。つまり、一のシーンを構成するフレーム画像から動体を判断し、その動体のフレーム画像毎の位置の変化や面積の変化などの状態変化をシーンの特徴量として抽出している。以下、「シーンの特徴量」とは、フレーム画像の動体に関する情報を示し、「シーン情報」とは、「シーンの特徴量」も含んだ種々の情報を示すものとする。なお、このシーンの特徴量を抽出するシーン特徴量算出処理については、後述する。

ステップＳ３１０において、シーン毎に抽出した特徴量に基づいて、シーンｎとシーンｎ＋１との組み合わせの属するグループを決定する（ステップＳ３２０）。本実施例では、シーンｎとシーンｎ＋１とのそれぞれに、動体が存在するか否かによって、繋ぎ合せるシーンを大きく４つのグループ（グループ１からグループ４）に分類する。例えば、シーンｎに動体が存在し、シーンｎ＋１には動体が存在しない場合には、グループ１に属するものとしている。このグループ決定処理によって、繋ぎ合わせる２つのシーンの関係に応じた切替効果を選択することができる。なお、グループ決定処理の詳細については、後述する。

ステップＳ３２０で決定したグループに基づいて、シーンの繋ぎ合わせに用いる切替効果を選択し、その切替効果の詳細を設定する。（ステップＳ３３０）。シーンの切替えの際に用いる切替効果には、例えば、カット，スライド，ワイプ，フェード，ディゾルブ，スパイラル，ズームなどのいわゆる画像効果（トランジション）や、２つのシーンをオーバラップさせる処理、そのまま接続する処理、２つのシーンを拡大、縮小する処理、同時に表示する処理など種々のものがある。本実施例では、主に、シーンの切替効果としてトランジションを設定しているが、例えばトランジションの一つである「スライド」にも、スライドする方向、速度など詳細に設定する必要がある。ステップＳ３３０では、こうしたトランジションの詳細設定を実行している。

例えば、上記のグループ１に属する場合であれば、シーンｎからシーンｎ＋１へのシーンチェンジに「スライド」を利用する。「スライド」は、例えば、シーンｎの動体の動きに合わせて徐々にシーンｎ＋１がフレーム画像内に入り込み、最終的にはシーンｎ+１に切り替わる画像効果である。このシーンｎからシーンｎ＋１への移行期間内（つまり、「スライド」効果の実行期間内）は、２つのシーンがオーバラップしている状態となる。

こうして決定した画像効果を用いて、２つのシーンを繋ぎ合せる処理を行なう（ステップＳ３４０）。具体的には、図４に示すように、シーンｎとシーンｎ＋１との各フレーム画像を「スライド」効果を用いつつ、重ね合わせて合成フレーム画像を生成する。図４に示す一例では、４枚の合成フレーム画像を生成し、シーンｎの終わりから４枚のフレーム画像とシーンｎ＋１の初めから４枚のフレーム画像とに替えて、合成フレーム画像を挿入してシーンを繋ぎ合わせる。

以上の処理を経て、シーンを繋ぎ合わせた動画像は、ハードディスク１４に出力され（ステップＳ３５０）、記憶される。この一連の処理は、他に繋ぎ合わせるシーンがある場合には、繰り返し実行される。他方、繋ぎ合わせるシーンがない場合には、出力された動画像は、ハードディスク１４内に記憶されると共に、ＴＶモニタ２０の画面上に再生される。

Ａ３．シーン特徴量算出処理：
図５は、シーンを構成するフレーム画像からシーンの特徴量を算出するシーン特徴量算出処理のフローチャートである。この処理が開始されるとＣＰＵ１５は、繋ぎ合わせるシーンｎとシーンｎ＋１とについて、両シーンの再生時間を入力する（ステップＳ５００）。本実施例では、ＨＤＤレコーダ１０が有する複数のシーンには、それぞれの再生時間の情報が付加されている。

続いて、シーン毎の再生時間から、抽出するフレーム画像の枚数ｍを決定する（ステップＳ５１０）。この抽出枚数ｍは、シーンｎとシーンｎ＋１とのうち、再生時間の短い方を基準とし、その基準となるシーンが単独で再生される所定の時間を確保するように決定される。例えば、図６に示すように、シーン１とシーン２とを繋ぎ合わせる場合には、両シーンのうち、再生時間が短い（Ｔ１＞Ｔ２）シーン２の再生時間Ｔ２の２割に相当するフレーム画像の枚数を抽出枚数ｍとして決定する。続いて、シーン２とシーン３とを繋ぎ合わせる場合には、再生時間の短い（Ｔ３＞Ｔ２）シーン２の再生時間の２割に相当する枚数を抽出する。こうして、シーンの再生時間が短い方を基準とすることで、各シーン共に、単独の再生時間を全体の再生時間の６割程度確保するように抽出枚数ｍを決定している。

なお、単独再生時間の割合は、６割に限るものではなく、ユーザが入力する初期設定の値としても良い。また、例えば、再生時間が数分を超えるような長いシーン同士を繋ぎ合わせる場合には、予め設定した枚数を抽出するものとしても良い。この場合、例えば両シーンの再生時間がそれぞれ３分以上であれば、２０秒に相当するフレーム画像枚数を設定するものとすれば良い。さらに、再生時間が３〜４分の範囲内であれば、２０秒相当のフレーム画像枚数、４〜５分であれば、２５秒相当のフレーム画像枚数を設定するなど、再生時間によって場合を分けて予め抽出枚数を設定するものとしても良い。

図５に戻り、こうして決定した枚数ｍのフレーム画像を、それぞれのシーンから抽出する（ステップＳ５２０）。具体的には、時系列順で先であるシーンｎについてはシーンの終わりから遡って、また、時系列順で後であるシーンｎ＋１についてはシーンの初めから順に、それぞれｍ枚のフレーム画像を抽出している。

続いて、抽出した各シーンｍ枚のフレーム画像について、フレーム画像間の動き検出処理を実行する（ステップＳ５３０）。この動き検出処理は、抽出したｍ枚のフレーム画像のうち、時系列で最初のフレーム画像とそれに連続する次のフレーム画像とを比較して、動体を判定し、時系列にその動体の状態の変化を追跡する処理である。

具体的には、図７に示すように、シーンｎから抽出した複数のフレーム画像（ｆ１〜ｆe）から、時系列順にフレーム画像ｆ１とフレーム画像ｆ２とを抽出する。抽出した両フレーム画像について、周知の勾配法を用いて、フレーム画像間の並進ずれ量（ｕ，ｖ）、回転ずれ量δを算出する。この算出したずれ量（ｕ，ｖ，δ）を基に、フレーム画像ｆ２をフレーム画像ｆ１に重ね合わせる補正をする。この補正は、２つのフレーム画像間の位置ずれを補正するものとなる。補正後の両フレーム画像をそれぞれ所定の数のブロックに分割し、両フレーム画像の対応するブロック同士で、同様にずれ量（ｕｂ，ｖｂ，δｂ）を算出する。ここで算出したブロック間のずれ量は、両フレーム画像間の位置ずれを除いたものであり、画像内の「動き」を表わす。つまり、ＣＰＵ１５は、ブロック間のずれ量がある閾値を超えたものを、動体と判断している。同様にして、フレーム画像ｆ２とフレーム画像ｆ３について「動き」の検出処理を実行し、フレーム画像毎（時系列順）に、動体の面積および重心位置を算出する。

図５に示すステップＳ５３０の処理をシーンｎ＋１についても実行し、シーンｎ，シーンｎ＋１のそれぞれについて、動体の有無、面積および重心位置の変化をシーンの特徴量として設定し（ステップＳ５４０）、ＮＥＸＴに抜ける。

なお、動体の面積、重心位置等を求める方法は、これに限るものではない。例えば、動体が既知である場合には、予めテンプレートを用意し、フレーム画像毎にパターンマッチングを行なうことで動体の変化を検出するものとしても良い。また、一のフレーム画像についてパターンマッチングを実行して輝度、色相頻度の特徴量を検出し、その特徴量をヒストグラムにして、それを追跡に用いるものとしても良い。さらには、シーン情報として、撮影時に予め動体の動きを記憶したメタデータ等を用いるものとすれば、こうした演算を行なうことなくシーンの特長量を設定することができる。

Ａ４．グループ決定処理：
図８は、繋ぎ合わせる２つのシーンの関係を類型化するグループ決定処理のフローチャートである。前述の通り、ここでは、２つのシーンの特徴量である動体に着目し、グループ分けを行なう。

まず、ＣＰＵ１５は、シーンｎに動体があるか否かを判定する（ステップＳ８００）。このステップで、シーンｎに動体が存在すると判断した場合には、次にシーンｎ＋１に動体があるか否かを判定する（ステップＳ８１０）。

ステップＳ８１０にて、シーンｎ＋１に動体が存在すると判断した場合には、その２つのシーンの関係は「グループ３」に属すると設定し、シーンｎ＋１に動体が存在しないと判断した場合には、「グループ１」に属すると設定し、ＮＥＸＴに抜けて処理を終了する。

他方、ステップＳ８００にて、シーンｎに動体が存在しないと判断した場合には、次にシーンｎ＋１に動体があるか否かを判定する（ステップＳ８２０）。

ステップＳ８２０にて、シーンｎ＋１に動体が存在すると判断した場合には、その２つのシーンの関係は「グループ２」に属すると設定し、シーンｎ＋１に動体が存在しないと判断した場合には、「グループ４」に属すると設定し、ＮＥＸＴに抜けて処理を終了する。

つまり、シーンｎにのみ動体が存在するグループを「グループ１」、シーンｎ＋１にのみ動体が存在するグループを「グループ２」、２つのシーンに動体が存在するグループを「グループ３」、いずれのシーンにも動体が存在しないグループを「グループ４」として分類する。こうして大きく４つに分けたグループ毎に、後述する画像効果のパターンを設定し、２つのシーンをオーバラップして繋ぎ合わせる。

Ａ５．シーン切替設定処理：
シーンの切り替えに用いる画像効果には、前述の通り「カット」、「フェード」、「スライド」、「ワイプ」などの公知のトランジションがあり、更には、その動きによって、「ワイプイン」、「ワイプアウト」など様々な種類がある。図９は、こうした画像効果（トランジション）の一例である。図９（ａ）に示すように、例えば「スライドイン」についても、その方向によって、複数の種類が存在する。また、図９（ｂ）に示すように、「ワイプ」についても、その形状によって、円ワイプ、ボックスワイプ、スプリットワイプなどの複数の種類が存在する。

第１実施例では、図９（ａ）に示した６種類の「スライド（イン・アウト）」と、図９（ｂ）に示した円形の「ワイプ（イン・アウト）」と、一のシーンを徐々に縮小してゆく効果である「縮小」とを用意し、分類されたグループ毎にトランジションを設定している。具体的には、「グループ１」の場合にはシーンｎ＋１に「スライドイン」若しくはシーンｎに「ワイプイン」を用い、「グループ２」の場合にはシーンｎに「スライドアウト」若しくはシーンｎ＋１に「ワイプアウト」を用い、「グループ３」の場合にはシーンｎの「縮小」を用い、「グループ４」の場合にはシーンｎに「スライドアウト」を用いている。

図１０は、繋ぎ合わせる２つのシーンの関係が「グループ１」に属する一例である。図示するように、シーンｎにのみ動体（この例では人物）が存在し、シーンｎ＋１の「スライドイン」またはシーンｎの「ワイプイン」を採用する。図１０（ａ）に示すように、その動体がフレーム画像内の左端から右端へフレームアウトしてシーンが終了する場合には、シーンｎ＋１の左からの「スライドイン」を使用し、図１０（ｂ）に示すように、動体がフレームアウトせず、フレーム画像内で遠のいてシーンが終了する場合には、シーンｎの「ワイプイン」を使用する。

こうしたトランジションの変化の詳細は、動体の動きに応じて設定している。例えば、図１０（ａ）では、シーンｎの特徴量として動体の重心位置の変化から求めた速度Ｖに基づいて、シーンｎ＋１の「スライドイン」の方向、速度を設定している。つまり、「スライドイン」の方向を動体の移動方向に対応して設定し、「スライドイン」の境界線Ｌによって動体が消されないように、動体を優先した速度を設定している。また、図１０（ｂ）では、ほとんど変化しない動体の重心位置を基準として、シーンｎの「ワイプイン」の中心を設定している。勿論、必ずしも、動体の速度と等速で変化させる必要はないし、予め設定した速度、位置で変化させるものとしても良い。

なお、「グループ１」の中での「スライドイン」、「ワイプイン」の選択は、例えば、シーンｎの最後のフレーム画像ｆeに動体が存在するか否かを判定することで使い分けても良いし、シーンの特徴量から判断するものとしても良い。シーンの特徴量を用いる場合には、動体の速度Ｖが所定値βよりも大きいか否かで判断することができる。速度Ｖが所定値βよりも大きい場合には「スライドイン」を選択し、速度Ｖが所定値β以下である場合には「ワイプイン」を選択するものとすれば良い。

また、上述の「ワイプイン」を特殊な態様で用いることもできる。図１１は、「ボックスワイプ」を用いた一例であり、「ワイプ」の中心が動体の移動と共に変化する「変形ボックストランジション」を設定している。このトランジションは、シーンｎの動体の速度Ｖが所定値βよりも大きく、かつ、動体の面積変化ΔＳが所定値γよりも大きい場合に、採用するものとすれば良い。

さらには、シーンの特徴量として肌色領域を検出し、動体のうち、肌色領域を中心に「ワイプイン」を用いても良い。特に動体が人物である場合に、シーンの切り替わりの直前まで人物の顔などを表示することができる。

以上の「グループ１」の場合と同様に、繋ぎ合わせる２つのシーンの関係が「グループ２」に属する場合は、「スライド」、「ワイプ」を中心としたトランジションを設定している。ただし、「グループ１」とは異なり、「グループ２」はシーンｎ＋１にのみ動体が存在する。したがって、これから始まるシーンｎ＋１の動体を優先的に表示するため、シーンｎの「スライドアウト」、シーンｎ＋１の「ワイプアウト」を用いている。なお、トランジションの変化（例えば速度など）は、上述の「グループ１」の場合と同様に設定している。

図１２は、繋ぎ合わせる２つのシーンの関係が「グループ３」に属する一例である。図１２（ａ）はシーンｎの動体の様子を、図１２（ｂ）はシーンｎ＋１の動体の様子を、それぞれ示している。「グループ３」は、シーンｎとシーンｎ＋１との両方に動体（ここでは人物）が存在する場合であり、シーンｎの「縮小」を設定する。

本実施例での「縮小」は、フレーム画像のアスペクト比を固定したまま、一定の時間比率でシーンｎのフレーム画像を徐々に縮小して行く画像効果である。図１２（ｃ）は、この「縮小」を用いた一例を示している。図示するように、シーンｎからシーンｎ＋１への切り替わりの際に、徐々にシーンｎのフレーム画像が縮小して行く。縮小したシーンｎを表示する位置は、シーンｎ＋１の動体の移動方向を考慮して、重なり合う面積の少ない位置を検出している。こうして両シーンともに表示することで、動体を優先して表示することができる。

なお、「グループ３」の場合においても、「グループ１」、「グループ２」と同様に、「スライド」、「ワイプ」を中心としたトランジションを設定するものとしても良い。この場合、シーンｎとシーンｎ＋１とのシーンの再生時間やシーンの特徴量を考慮する。例えば、シーンの特徴量のうち、動体の面積を比較して、動体の表示面積が大きいシーンを優先するトランジションを設定する。つまり、シーンｎの動体の表示面積がシーンｎ＋１のそれに比べて大きい場合には、シーンｎにのみ動体がある（つまり「グループ１」に属する）と判断して、「グループ１」と同様な処理により、トランジションを設定するものとすれば良い。勿論、どちらかのシーンを優先して表示するように予め設定するものとしても良い。

また、シーンｎとシーンｎ＋１とのアスペクト比を変更し、同時に２画面を表示するように設定しても良い。さらには、シーンｎの動体以外の部分（背景部分）からシーンｎ＋１の動体を表示するように設定しても良い。

シーンの特徴量としての動体に注目し、各トランジションを設定する上記の各グループとは異なり、「グループ４」では、両シーンに動体が存在しない。本実施例では、こうしたシーンの繋ぎ合わせにはシーンｎの「スライドアウト」を設定しているが、様々なトランジションを設定することができる。例えば、「ワイプ」，「スライド」の他、「フェード」，「ディゾルブ」，「スパイラル」，「ズーム」などを用いても良い。また、こうしたトランジションをランダムに設定するものとしても良いし、ユーザの好みに応じて予め設定するものとしても良い。

以上、本発明の第１実施例の画像処理装置によれば、繋ぎ合わせるシーン毎に抽出したフレーム画像から、そのシーン情報として動体の状態量を検出する。検出した動体の状態量に基づきシーンの内容を考慮した画像効果を設定し、２つのシーンを重ね合わせて接続する。つまり、シーンの繋ぎ合わせ部分に動体が存在する場合には、動体を優先的に表示する画像効果を自動的に選択する。したがって、繋ぎ合わされた動画像は、効果的なシーンチェンジをするものとなる。さらに、２つのシーンを、所定の時間、繋ぎ合わせる部分で重ね合わせるため、全体の再生時間を短縮することができる。このことは、特に短時間で動画像の内容を把握することを目的とするダイジェスト動画には有効である。

Ｂ．第２実施例：
次に、本発明の第２実施例の画像処理システムについて説明する。第２実施例の画像処理装置は、第１実施例と同様、画像処理プログラムを備えたＨＤＤレコーダである。この第２実施例のＨＤＤレコーダは、第１実施例とは、画像処理プログラムのみが異なる。したがって、ハード構成は、第１実施例の画像処理システム１００と同一の符号を用いることとして説明を省略し、画像処理の内容について説明する。

図１３は、動画像の所定のシーンを繋ぎ合わせる第２実施例の画像処理のフローチャートである。第２実施例の画像処理は、第１実施例の画像処理に加えて、シーンが急激に切り替わるカットチェンジを選択するステップを加えている。その他のステップは、図３に示した第１実施例の画像処理のステップと同様である。なお、同一内容のステップについては、図３と同じ符号を付す。

ユーザの操作パネル１８の操作により画像処理が開始すると、ＣＰＵ１５は、繋ぎ合わせる２つのシーン（シーンｎ，シーンｎ＋１）と共に、２つのシーンの再生時間（Ｔｎ，Ｔｎ＋１）を取得する（ステップＳ９００）。

続いて、２つのシーンの再生時間が所定時間Ｔ０よりも大きいか否かを判断する（ステップＳ９１５）。ここでは、各シーンをオーバラップして繋ぎ合わせるか、カットチェンジにて繋ぎ合せるかの判断をしている。

ステップＳ９１５にて、両シーンの再生時間が所定時間Ｔ０よりも長いと判断した場合（Ｙｅｓの場合）には、第１実施例と同様、シーンの特徴量算出処理（ステップＳ３１０），グループ決定処理（ステップＳ３２０），シーン切替設定処理（ステップＳ３３０）を経て、シーンの特徴量としての動体の動きに対応したトランジションを設定する。設定したトランジションを用い、両シーンを所定時間オーバラップさせて動画像を生成し（ステップＳ３４０）、ハードディスク１４に出力する（ステップＳ３５０）。この一連の処理は、他に繋ぎ合わせるシーンがある場合には繰り返し実行され、繋ぎ合わせるシーンがない場合には終了する。

他方、少なくとも一つのシーンの再生時間が所定時間Ｔ０よりも短いと判断した場合（Ｎｏの場合）には、シーンの特徴量を加味したトランジションを設定することなく、シーンを繋ぎ合わせ（ステップＳ３４０）、ハードディスク１４に出力する（ステップＳ３５０）。つまり、シーンの再生時間が短い場合には、シーンｎとシーンｎ＋１とを単に繋ぎ合わせ、シーンが急激に変化するカットチェンジを用いる。

第１実施例では、オーバラップを用いて動画像を生成して全体の再生時間を短縮したが、第２実施例では、シーン情報としてシーンの再生時間に着目し、もともと再生時間が短いシーンについてはカットチェンジを用いて動画像を生成し、特に再生時間の短縮は行なわない。こうすることで、複雑な処理を実行する必要がない。また、もともと再生時間が短いシーンに対して、オーバラップを用いることで更に再生時間を短くしてしまい、シーンの切り替わりが見づらいものとなるのを防ぐことができる。カットチェンジを用いた動画像は、例えば、映画、ドラマの予告やアクションシーンの連続などのように、強い印象を与える動画像を生成することができる。

Ｃ．変形例：
本発明の画像処理にて設定するトランジションは、シーンｎとシーンｎ＋１との繋ぎ合わせの部分に施す効果であるが、これを繋ぎ合わせて生成される動画像の初めと終わりに施すものとしても良い。具体的には、図１４に示すように、シーン１，シーン２，シーン３を繋ぎ合わせる場合に、シーン１よりも時系列順で前と、シーン３よりも時系列順で後ろに、それぞれ擬似的なシーン（ダミーシーン）を設ける。

このダミーシーンには、シーンの特徴量として動体は存在しない旨の内容が予め設定してある。ダミーシーンとシーン１との関係は、上述の「グループ２」または「グループ４」に該当し、ダミーシーンの「スライドアウト」またはシーン１の「ワイプアウト」により動画像が開始するように設定することができる。他方、シーン３とダミーシーンとの関係は、上述の「グループ１」または「グループ４」に該当し、ダミーシーンの「スライドイン」またはシーン３の「ワイプイン」，「スライドアウト」により動画像が終了するように設定することができる。いずれも、シーンの特徴量を考慮したシーンチェンジを設定することができる。

また、ダミーシーンにダイジェスト動画のタイトル等を付加するものとしても良い。例えば、本発明の画像処理を実行するＨＤＤレコーダ１０内の動画像を選択する際に、タイトル表示や日時等の動画像の情報を取得して、これを画像としてダミーシーンに付加すれば良い。

以上、本発明の実施の形態について説明したが、本発明はこうした実施の形態に何ら限定されるものではなく、本発明の趣旨を逸脱しない範囲内において様々な形態で実施し得ることはもちろんであり、例えば以下のような変形も可能である。

本実施例では、画像処理装置としてのＨＤＤレコーダ１０を用いて説明したが、この一連の画像処理プログラムをパーソナルコンピュータに実装（インストール）するものとしても良い。この場合、ＴＶ放送などの動画像は、ビデオレコーダを介してパーソナルコンピュータに取り込むものとしても良いし、パーソナルコンピュータに直接取り込むものとしても良い。また、動画像の輝度変化や色調変化などから複数のシーンを生成する既存の手法を用いた機能をパーソナルコンピュータに装備することで、例えば、デジタルビデオカメラからの動画像を容易に編集することができる。特に、ダイジェスト動画を生成する素材がデジタルビデオカメラで撮影した動画像であるような場合には、撮影日時などもシーンを生成する（シーンを認識する）情報として使用することができる。

本実施例では、シーンの再生時間が所定時間より長い場合にはシーンの内容を考慮したトランジションを設定し、オーバラップを用いているが、各シーンの始まりと終わりにトランジッションを設定し、オーバラップを用いずに各シーンを単に繋ぎ合わせるものとしても良い。例えば、シーンの始まりは、動体が存在する場合には、動体を中心とした「ワイプアウト」を設定し、シーンの終わりは、動体が存在する場合には、動体を中心とした「ワイプイン」を設定する。こうしてトランジションを加えて編集した各シーンを繋ぎ合わせて動画像を生成する。こうすることで、シーンの内容を考慮したトランジションを設定することができる。

また、本実施例の画像処理を用いて、シーンチェンジの箇所に生成した合成フレーム画像をサムネイル表示して、動画像の内容を表わすインデックスとして使用することもできる。

さらに、本実施例の手法は画像処理のみならず、繋ぎ合わせるシーンの音声の繋ぎ方にも応用できる。例えば、シーンｎとシーンｎ＋１を繋ぎ合わせる場合には、それぞれのシーンの動体の面積比に応じて、音声の「フェードアウト」、「フェードイン」を施すものとすれば良い。

本実施例では、繋ぎ合わせるシーン毎にシーン情報を抽出したが、シーン情報の抽出は全てのシーンに対して行なう必要はない。例えば、繋ぎ合わせる２つのシーンのうち、時系列順で前のシーンのシーン情報を常に抽出するものとしても良いし、時系列順で後のシーンのシーン情報を常に抽出するものとしても良い。例えば、時系列順で前のシーンの終わりからシーン情報を抽出する場合であって、シーンの終わりに動体が存在する場合であれば、その動体を中心としたワイプ等の画像効果を設定することができる。また、シーンの繋ぎ目の全てに、画像効果を設定する必要もない。例えば、１つおきの繋ぎ目に対して、画像効果を設定するものとしても良い。

本発明の第１実施例としての画像処理システムを示す説明図である。 第１実施例の画像処理の概念図である。 第１実施例の画像処理のフローチャートである。 第１実施例の合成フレーム画像の説明図である。 シーン特徴量算出処理のフローチャートである。 フレーム画像の抽出枚数の説明図である。 動体の検出処理の説明図である。 グループ決定処理のフローチャートである。 画像効果（トランジション）の一例である。 ２つのシーンの関係が「グループ１」に属する一例である。 「ボックスワイプ」を用いた一例である。 ２つのシーンの関係が「グループ３」に属する一例である。 第２実施例の画像処理のフローチャートである。 擬似的なシーンの説明図である。

符号の説明

１０...ＨＤＤレコーダ
１２...Ｉ／Ｆ回路部
１４...ハードディスク
１５...ＣＰＵ
１６...ＲＯＭ
１７...ＲＡＭ
１８...操作パネル
１９...リモコン
２０...ＴＶモニタ
１００...画像処理システム

Claims (12)

1. 動画像から抽出した複数のシーンを繋ぎ合わせる画像処理装置であって、
   前記複数のシーンの特徴を示すシーン情報を抽出するシーン情報抽出手段と、
   前記シーンを繋ぎ合わせる際に、該シーンの切替えに用いる複数の種類の切替効果を予め記憶する切替効果記憶手段と、
   前記抽出したシーン情報に基づいて、前記記憶した切替効果から所定の切替効果を選択する切替効果選択手段と、
   前記選択された所定の切替効果を用いて、前記シーンを繋ぎ合わせて出力する出力手段と
   を備え、
   前記シーン情報抽出手段は、繋ぎ合わせる前後のシーンのうち、
   時系列順で前のシーンの終わりから時系列的に、該前のシーンの一部を構成する複数枚のフレーム画像から、該複数のフレーム画像間において動きのある部分に基づいて判断される動体の動きを記述する状態量、および
   時系列順で後のシーンの初めから時系列的に、該後のシーンの一部を構成する複数枚のフレーム画像から、該複数のフレーム画像間において動きのある部分に基づいて判断される動体の動きを記述する状態量
   のうち、少なくとも一方を含んだ情報を、前記シーン情報として抽出する画像処理装置。
2. 動画像から抽出した複数のシーンを繋ぎ合わせる画像処理装置であって、
   前記複数のシーンのシーン毎の再生時間の情報を含み、各シーンの特徴を示すシーン情報を抽出するシーン情報抽出手段と、
   前記シーンを繋ぎ合わせる際に、該シーンの切替えに用いる複数の種類の切替効果を予め記憶する切替効果記憶手段と、
   前記抽出したシーン情報に基づいて、前記記憶した切替効果から所定の切替効果を選択する切替効果選択手段と、
   前記選択された所定の切替効果を用いて、前記シーンを繋ぎ合わせて出力する出力手段と
   を備え、
   前記シーン情報は、少なくとも、一のシーンを構成する複数のフレーム画像間において動きのある物体として判断される動体の動きを記述する状態量を含んだ情報であり、
   前記シーン情報抽出手段は、繋ぎ合わせる２つのシーンのうち、時系列順で前のシーンの終わりから順に、および／または、時系列順で後のシーンの初めから順に、前記シーンの再生時間に応じた枚数のフレーム画像をそれぞれ抽出するフレーム抽出手段を備える
   画像処理装置。
3. 請求項２に記載の画像処理装置であって、
   前記シーン情報抽出手段は、前記抽出されたフレーム画像間のずれ量を検出し、該ずれ量を補正することで前記動体を判定し、該動体の状態量を算出する特徴量算出手段を備えた画像処理装置。
4. 請求項１ないし請求項３のいずれかに記載の画像処理装置であって、
   前記記憶した複数の種類の切替効果は、少なくともカット、スライド、ワイプ、フェードのいずれかである画像処理装置。
5. 請求項４に記載の画像処理装置であって、
   前記シーン情報には、前記シーンの再生時間を含み、
   前記切替効果選択手段は、前記再生時間が所定時間より短いシーンの場合には、前記切替効果としてカットを選択する画像処理装置。
6. 請求項１ないし請求項５のいずれかに記載の画像処理装置であって、
   前記切替効果選択手段は、前記シーン情報から繋ぎ合わせる２つのシーンの関係を類型し、該類に応じた前記切替効果を選択する手段である画像処理装置。
7. 請求項１ないし請求項６のいずれかに記載の画像処理装置であって、
   前記出力手段は、繋ぎ合わせる２つのシーンの一端を重ね合わせて出力する手段である画像処理装置。
8. 請求項７に記載の画像処理装置であって、
   前記シーン情報には、前記動体の状態量として該動体の移動速度を含み、
   前記出力手段は、前記移動速度に基づいて、前記所定の切替効果の変化する速度を調整してシーンを繋ぎ合わせて出力する画像処理装置。
9. 請求項１ないし請求項８のいずれかに記載の画像処理装置であって、
   前記シーン情報抽出手段は、前記繋ぎ合わせる複数のシーンのうち、時系列順で最初のシーンの前、および／または、時系列順で最後のシーンの後に、擬似的なシーンを追加する手段を備え、
   前記擬似的なシーンと前記最初のシーン、および／または、前記最後のシーンとを、所定の切替効果を用いて繋ぎ合わせる画像処理装置。
10. 動画像から抽出した複数のシーンを繋ぎ合わせる画像処理方法であって、
    前記シーンを繋ぎ合わせる際に、該シーンの切替えに用いる複数の種類の切替効果を予め記憶し、
    前記複数のシーン各々の特徴を示すシーン情報を、繋ぎ合わせる前後のシーンのうち、時系列順で前のシーンの終わりから時系列的に、該前のシーンの一部を構成する複数枚のフレーム画像から、該複数のフレーム画像間において動きのある部分に基づいて判断される動体の動きを記述する状態量、および時系列順で後のシーンの初めから時系列的に、該後のシーンの一部を構成する複数枚のフレーム画像から、該複数のフレーム画像間において動きのある部分に基づいて判断される動体の動きを記述する状態量のうち、少なくとも一方を含んだ情報として抽出し、
    前記抽出したシーン情報に基づいて、前記記憶した切替効果から所定の切替効果を選択し、
    前記選択された所定の切替効果を用いて、前記シーンを繋ぎ合わせて出力する
    画像処理方法。
11. 動画像から抽出した複数のシーンを繋ぎ合わせる画像処理装置を制御するコンピュータプログラムであって、
    前記シーンを繋ぎ合わせる際に、該シーンの切替えに用いる複数の種類の切替効果を予め記憶する機能と、
    前記複数のシーン各々の特徴を示すシーン情報を、繋ぎ合わせる前後のシーンのうち、時系列順で前のシーンの終わりから時系列的に、該前のシーンの一部を構成する複数枚のフレーム画像から、該複数のフレーム画像間において動きのある部分に基づいて判断される動体の動きを記述する状態量、および時系列順で後のシーンの初めから時系列的に、該後のシーンの一部を構成する複数枚のフレーム画像から、該複数のフレーム画像間において動きのある部分に基づいて判断される動体の動きを記述する状態量のうち、少なくとも一方を含んだ情報として抽出する機能と、
    前記抽出したシーン情報に基づいて、前記記憶した切替効果から所定の切替効果を選択する機能と、
    前記選択された所定の切替効果を用いて、前記シーンを繋ぎ合わせて出力する機能と
    をコンピュータに実現させるコンピュータプログラム。
12. 請求項１１に記載のコンピュータプログラムをコンピュータに読み取り可能に記録した記録媒体。

Images