JP2012213063A - 画像処理装置、画像処理システム、画像処理方法、及び画像処理プログラム - Google Patents

Abstract

【課題】全体画像から複数の領域を指定して同時に再生すること。
【解決手段】撮影した画像を編集して動画像を生成する画像処理装置であって、撮影した全体画像に含まれる移動体を検出する検出手段と、前記全体画像から前記第１部分画像を抽出する第１抽出手段と、前記全体画像から固定領域を含む第２部分画像を抽出する第２抽出手段と、前記第１抽出手段により抽出した第１部分画像と、前記第２抽出手段により抽出した第２部分画像とを編集して、表示画像を生成する画像生成手段とを含むことを特徴とする。
【選択図】 図１

Description

本発明は、画像処理技術に関する。

上記技術分野において、特許文献１に示されているように、予め定められたデジタルカメラワークを適用して一部の領域の画像を抜き出し再生する技術、又は、視聴者の望んだ範囲の画像を抜き出して再生する技術が知られている。

特開2009-177431号公報

しかしながら、上記従来技術では、全体画像の一部の領域を指定して抜き出して再生することができるとしても、複数の領域を同時に指定して再生することができなかった。

本発明の目的は、上述の課題を解決する技術を提供することにある。

上記目的を達成するため、本発明に係る装置は、
撮影した画像を編集して動画像を生成する画像処理装置であって、
撮影した全体画像に含まれる移動体を検出する検出手段と、
前記全体画像から前記第１部分画像を抽出する第１抽出手段と、
前記全体画像から固定領域を含む第２部分画像を抽出する第２抽出手段と、
前記第１抽出手段により抽出した第１部分画像と、前記第２抽出手段により抽出した第２部分画像とを編集して、表示画像を生成する画像生成手段と
を含むことを特徴とする。

上記目的を達成するため、本発明に係るシステムは、
撮影した画像を編集して動画像を生成する画像処理システムであって、
移動体を含む全体画像を撮影する撮影手段と、
撮影した前記全体画像から前記移動体を検出する検出手段と、
検出した前記移動体を含む第１部分画像を前記全体画像から抽出する指示をユーザから受け付ける受付手段と、
前記指示にしたがって、前記第１部分画像を前記全体画像から抽出する第１抽出手段と、
固定領域を含む第２部分画像を前記全体画像から抽出する第２抽出手段と、
前記第１抽出手段により抽出した第１画像と、前記第２抽出手段により抽出した第２画像とを編集して、表示画像を生成する画像生成手段と
を含むことを特徴とする。

上記目的を達成するため、本発明に係る方法は、
撮影した画像を編集して動画像を生成する画像処理方法であって、
撮影した全体画像に含まれる移動体を検出するステップと、
検出した前記移動体を含む第１部分画像を前記全体画像から抽出する指示をユーザから受け付けるステップと、
前記指示にしたがって、前記第１部分画像を前記全体画像から抽出する第１抽出ステップと、
固定領域を含む第２部分画像を前記全体画像から抽出する第２抽出ステップと、
前記第１抽出ステップにより抽出した第１画像と、前記第２抽出ステップにより抽出した第２画像とを編集して、表示画像を生成するステップと
を含むことを特徴とする。

上記目的を達成するため、本発明に係るプログラムは、
撮影した画像を編集して動画像を生成する画像処理プログラムであって、
撮影した全体画像に含まれる移動体を検出するステップと、
検出した前記移動体を含む部分画像を前記全体画像から抽出する指示をユーザから受け付けるステップと、
前記指示にしたがって、前記部分画像を第１領域として前記全体画像から抽出するステップと、
固定領域を含む部分画像を第２領域として前記全体画像から抽出するステップと、
第１領域として抽出した第１画像と、第２領域として抽出した第２画像とを編集して、表示画像を生成するステップと
を含むことを特徴とする。

本発明によれば、全体画像から複数の領域を指定して同時に再生することができる。

本発明の第１実施形態に係る画像処理装置の構成を示すブロック図である。 本発明の第２実施形態に係る画像処理装置の構成を示すブロック図である。 本発明の第２実施形態に係る画像処理装置の処理の流れを示すフローチャートである。 本発明の第２実施形態に係る表示画像を示す図である。 本発明の第２実施形態に係る表示画像を示す図である。 本発明の第２実施形態に係る表示画像を示す図である。 本発明の第２実施形態に係る表示画像を示す図である。

以下に、本発明を実施するための形態について、図面を参照して、例示的に詳しく説明記載する。ただし、以下の実施の形態に記載されている、構成、数値、処理の流れ、機能要素などは一例に過ぎず、その変形や変更は自由であって、本発明の技術範囲を以下の記載に限定する趣旨のものではない。

（第１実施形態）
本発明の第１実施形態としての画像処理装置１００について、図１を用いて説明する。図１は、撮影した画像を編集して動画像を生成する画像処理装置１００の構成を示すブロック図である。図１に示すように、画像処理装置１００は、検出部１０２と、第１抽出部１０３と、第２抽出部１０４と、画像生成部１０５とを含む。

検出部１０２は、撮影した全体画像１２０に含まれる移動体１２５を検出する。第１抽出部１０３は、ユーザの指示にしたがって、全体画像１２０から第１部分画像１２１を抽出する。第２抽出部１０４は、全体画像１２０から固定領域を含む第２部分画像１２２を抽出する。

画像生成部１０５は、第１抽出部１０３により抽出した第１部分画像１２１と、第２抽出部１０４により抽出した第２部分画像１２２とを編集して、表示画像１３０を生成する。

以上のような構成により、本実施形態によれば、全体画像から特定した領域の部分画像を合成して、表示画像を生成することができる。

（第２実施形態）
図２は、本発明の第２実施形態に係る画像処理装置２０１の構成を示すブロック図である。図２に示すように、画像処理装置２０１は、検出部２０２と、第１領域抽出部２０３と、第２領域抽出部２０４と、画像生成部２０５と、受付部２０６と、演算処理部２０７とを含む。演算処理部２０７は、撮像部２２３を用いて撮影した黒板領域２２０、及び移動体である講師２２５を含む講義画像を読み込む。黒板領域２２０は、講師２２５が板書を書き込む領域であり、講師が移動した場合に講師の背景となる領域である。

検出部２０２は、読み込んだ講義画像から、講師２２５の画像を検出する。受付部２０６は、講義画像から抽出する部分画像の領域についてユーザの指示を受け付ける。第１領域抽出部２０３は、黒板領域２２０から検出した講師２２５の画像、及び背景画像を、第１領域２２１として抽出する。第２領域抽出部２０４は、投影された講義資料などの固定領域を第２領域２２２として抽出する。

画像生成部２０５は、第１領域２２１を抽出した第１画像２３１と、第２領域２２２を抽出した第２画像２３２とを合成した表示画像２３０を生成する。なお、黒板領域２２０は黒板に限定されるものではない。

演算処理部２０７は、撮影対象となる講師２２５、又は講義会場と関連付けられた第２領域２２２を記憶し、同一の講師２２５、又は講義会場を撮影する場合には、記憶した第２領域２２２を読み出す。

画像生成部２０５は、少なくとも１つの表示画像生成用のテンプレート（図４、図５）を有する。受付部２０６は、ユーザから、第１画像２３１、及び第２画像２３２を表示画像２３０に配置するテンプレートの選択を受け付け、画像生成部２０５は、受け付けたユーザの選択に基づいて表示画像２３０を生成する。

図３は、本実施形態に係る画像処理装置の処理の流れを示すフローチャートである。撮像装置２２３は、ステップＳ１０１において講義の撮影を開始し、ステップＳ１０３において講義の撮影を終了する。ステップＳ１０５において、画像処理装置２０１は撮影した講義画像を読み込み、ステップＳ１０６において、受付部２０６は、講義画像から抽出する部分画像の領域についてユーザの指示を受け付ける。ステップＳ１０７において、第１領域抽出部２０３は、第１領域２２１、及び第１領域２２１の背景画像を抽出する。ステップＳ１１１において、第２領域抽出部２０４は、第２領域２２２を抽出する。ステップＳ１１５において、画像生成部２０５は、第１領域２２１及び第２領域２２２を合成し、表示画像２３０を生成する。

図４は、本実施形態に係る表示画像２３０を示す図である。表示画像２３０は、第１画像２３１、及び第２画像２３２を合成して生成した画像である。第１画像２３１は、講師などの移動体２２５、及び背景画像を含む抽出領域を、第１領域２２１として全体画像から抽出した画像を表示する。第２画像２３２は、講義資料を撮影した第２領域２２２を抽出した画像を表示する。第２画像２３２の表示位置は、表示画像２３０の中心に表示するように設定でき、また、第１画像２３１の表示位置は、第２画像２３２の左端、右端、左端上部、左端下部、右端上部、若しくは右端下部のいずれかの位置に表示するように設定できる。

図５は、本実施形態に係る表示画像２３０を示す図である。第２画像２３７の表示位置は、表示画像２３０の中心に表示し、第１画像２３６の表示位置は、第２画像２３７の上部、下部、上部左端、上部右端、下部左端、若しくは下部右端のいずれかの位置に表示するように設定できる。

図６Ａは、本実施形態に係る表示画像３３０Ａを示す図である。図６Ａにおいて、表示画像３３０Ａは、移動体である講師を含む領域の第１画像３３１Ａと、講義資料などの固定領域を含む領域の第２画像３３２Ａとを含む。画像生成部２０５は、第１領域と、第２領域とが重複する場合には、固定領域を含む画像を第１画像３３１Ａに表示するとともに、固定領域の画像を第２画像３３２Ａに表示する。表示画像３３０Ａは、第２画像３３２Ａを表示画像中央から右端側に表示し、第１画像３３１Ａを表示画像３３０Ａの左端下部に、第２画像より小さめに表示する。

図６Ｂは、本実施形態に係る表示画像３３０Ｂを示す図である。画像生成部２０５は、固定領域以外の領域のみを第１画像３３１Ｂに表示するように設定することができる。そこで、第１領域と、第２領域とが重複する場合には、画像生成部２０５は、図６Ｂに示すとおり、表示画像のうち第１画像３３１Ｂには何も表示せず、第２画像３３２Ｂにのみ固定領域を表示する。

以上のような構成及び動作により、画像処理装置は、講義資料の領域、及び講師の領域など複数の領域を指定して１つの画像に編集して再生することができ、また、ユーザが選択した領域を指定して画像を生成することができる。これにより、一部の領域の画像を単に抜き出して再生するだけではなく、複数の領域の画像を一度に抜き出して再生することができ、また、ユーザにおいて満足度の高い画像を生成することができる。

以上のような動作により、本実施形態によれば、ユーザが視たい領域を選択することが可能となり、ユーザにおいて満足度の高い画像を生成することができる。

（他の実施形態）
以上、本発明の実施形態について詳述したが、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステム又は装置も、本発明の範疇に含まれる。

また、本発明は、複数の機器から構成されるシステムに適用されても良いし、単体の装置に適用されても良い。さらに、本発明は、実施形態の機能を実現する情報処理プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされるプログラム、あるいはそのプログラムを格納した媒体、そのプログラムをダウンロードさせるＷＷＷ(World Wide Web)サーバも、本発明の範疇に含まれる。

Claims (9)

1. 撮影した画像を編集して動画像を生成する画像処理装置であって、
   撮影した全体画像に含まれる移動体を検出する検出手段と、
   前記全体画像から前記移動体を含む第１部分画像を抽出する第１抽出手段と、
   前記全体画像から固定領域を含む第２部分画像を抽出する第２抽出手段と、
   前記第１抽出手段により抽出した第１部分画像と、前記第２抽出手段により抽出した第２部分画像とを編集して、表示画像を生成する画像生成手段と
   を含むことを特徴とする画像処理装置。
2. 前記第１部分画像を前記全体画像から抽出する抽出領域の位置及び大きさを含む指示を受け付ける受付手段をさらに有することを特徴とする請求項１に記載の画像処理装置。
3. 前記第２抽出手段は、前記固定領域の位置及び大きさを記憶する第１記憶手段をさらに有し、前記第１記憶手段から前記固定領域の位置及び大きさを読み出して抽出することを特徴とする請求項１又は２に記載の画像処理装置。
4. 前記画像生成手段は、前記表示画像中に配置する前記第１部分画像、及び前記第２部分画像の位置、及び大きさを、予め定めたテンプレートから選択することを特徴とする請求項１、２又は３に記載の画像処理装置。
5. 前記第１抽出手段は、前記固定領域を含む前記全体画像から前記第１部分画像を抽出することを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
6. 前記第１抽出手段は、前記全体画像のうち前記固定領域以外の領域から前記第１部分画像を抽出することを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
7. 撮影した画像を編集して動画像を生成する画像処理システムであって、
   移動体を含む全体画像を撮影する撮影手段と、
   撮影した前記全体画像から前記移動体を検出する検出手段と、
   検出した前記移動体を含む第１部分画像を前記全体画像から抽出する指示をユーザから受け付ける受付手段と、
   前記指示にしたがって、前記第１部分画像を前記全体画像から抽出する第１抽出手段と、
   固定領域を含む第２部分画像を前記全体画像から抽出する第２抽出手段と、
   前記第１抽出手段により抽出した第１画像と、前記第２抽出手段により抽出した第２画像とを編集して、表示画像を生成する画像生成手段と
   を含むことを特徴とする画像処理システム。
8. 撮影した画像を編集して動画像を生成する画像処理方法であって、
   撮影した全体画像に含まれる移動体を検出するステップと、
   検出した前記移動体を含む第１部分画像を前記全体画像から抽出する指示をユーザから受け付けるステップと、
   前記指示にしたがって、前記第１部分画像を前記全体画像から抽出する第１抽出ステップと、
   固定領域を含む第２部分画像を前記全体画像から抽出する第２抽出ステップと、
   前記第１抽出ステップにより抽出した第１画像と、前記第２抽出ステップにより抽出した第２画像とを編集して、表示画像を生成するステップと
   を含むことを特徴とする画像処理方法。
9. 撮影した画像を編集して動画像を生成する画像処理プログラムであって、
   撮影した全体画像に含まれる移動体を検出するステップと、
   検出した前記移動体を含む部分画像を前記全体画像から抽出する指示をユーザから受け付けるステップと、
   前記指示にしたがって、前記部分画像を第１領域として前記全体画像から抽出するステップと、
   固定領域を含む部分画像を第２領域として前記全体画像から抽出するステップと、
   第１領域として抽出した第１画像と、第２領域として抽出した第２画像とを編集して、表示画像を生成するステップと
   をコンピュータに実行させることを特徴とする画像処理プログラム。

Images