JPH07222052A - 撮像画像からの資料領域分離方法及び遠隔プレゼンテーション方法 - Google Patents
撮像画像からの資料領域分離方法及び遠隔プレゼンテーション方法Info
- Publication number
- JPH07222052A JPH07222052A JP6035294A JP3529494A JPH07222052A JP H07222052 A JPH07222052 A JP H07222052A JP 6035294 A JP6035294 A JP 6035294A JP 3529494 A JP3529494 A JP 3529494A JP H07222052 A JPH07222052 A JP H07222052A
- Authority
- JP
- Japan
- Prior art keywords
- image
- presenter
- coefficient
- paper material
- captured image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Processing (AREA)
- Studio Circuits (AREA)
- Image Analysis (AREA)
Abstract
(57)【要約】
【目的】 ブルーバックを用いずに、撮像画像（講師画
像）から資料領域を分離し、プレゼンタが直接資料画像
を見ながらの説明を可能にする。 【構成】 資料画像１はプレゼンテーションの対象とな
る高精度な画像で、切り出し画像３とともにそのままオ
ーディエンス側に伝送されるものである。講師画像２
は、資料画像１をモニタに表示し、その前にプレゼンタ
が立ち、それを撮像した画像で、色変換、歪み、ぼけを
受けている。トレーニング部１０は、トレーニング画像
を用いて表示・撮像系の歪み係数Ａ、ぼけ係数Ｂ、色調
変換係数Ｃを求めておく。画像変換部２０は、講師画像
２について色調補正・歪み補正を施こし、資料画像１に
ぼかしを施こす。画像分離部３０は、両画像の差分より
資料領域を分離し、プレゼンタの切り出し画像３を得
る。
像）から資料領域を分離し、プレゼンタが直接資料画像
を見ながらの説明を可能にする。 【構成】 資料画像１はプレゼンテーションの対象とな
る高精度な画像で、切り出し画像３とともにそのままオ
ーディエンス側に伝送されるものである。講師画像２
は、資料画像１をモニタに表示し、その前にプレゼンタ
が立ち、それを撮像した画像で、色変換、歪み、ぼけを
受けている。トレーニング部１０は、トレーニング画像
を用いて表示・撮像系の歪み係数Ａ、ぼけ係数Ｂ、色調
変換係数Ｃを求めておく。画像変換部２０は、講師画像
２について色調補正・歪み補正を施こし、資料画像１に
ぼかしを施こす。画像分離部３０は、両画像の差分より
資料領域を分離し、プレゼンタの切り出し画像３を得
る。
Description
【０００１】
【産業上の利用分野】本発明は撮影画像からの資料領域
分離方法及び遠隔プレゼンテーション方法に係り、実際
にプレゼンテーションを行う人とオーディエンスが離れ
た場所にいる場合に、その間を通信回線で接続すること
により行う遠隔プレゼンテーションや、同様の仕組みを
用いて遠隔地間で授業や研修を行う遠隔研修などの分野
に利用される。
分離方法及び遠隔プレゼンテーション方法に係り、実際
にプレゼンテーションを行う人とオーディエンスが離れ
た場所にいる場合に、その間を通信回線で接続すること
により行う遠隔プレゼンテーションや、同様の仕組みを
用いて遠隔地間で授業や研修を行う遠隔研修などの分野
に利用される。
【０００２】
【従来の技術】従来の遠隔講義や遠隔プレゼンテーショ
ンにおいては、スタジオでリアプロジェクション高解像
度モニタ上に映し出された資料画像（静止画像、動画
像、テキスト画像など）をプレゼンタ（説明者、講師な
ど）が指示しながら講義し、この様子をカメラが撮像
し、遠隔におけるオーディエンスの複数のモニタに映し
出すのが一般的であった。しかし、この方法では、資料
画像はモニタに表示した後、再度カメラで撮影するた
め、オーディエンスのモニタに映し出される資料画像は
解像度が劣化しており、細かい文字などの判読に困難が
あった。この問題の解決策として、プルーバックの前に
プレゼンタを立たせ、該プレゼンタをあらかじめ切り出
して高解像度の資料画像に合成して伝送する方法があ
る。しかし、この方法は、プレゼンタが合成された画像
を専用モニタで間接的に確認しながら指示を行う必要が
あり、細かい指示を行う時は、操作性に問題がある。
ンにおいては、スタジオでリアプロジェクション高解像
度モニタ上に映し出された資料画像（静止画像、動画
像、テキスト画像など）をプレゼンタ（説明者、講師な
ど）が指示しながら講義し、この様子をカメラが撮像
し、遠隔におけるオーディエンスの複数のモニタに映し
出すのが一般的であった。しかし、この方法では、資料
画像はモニタに表示した後、再度カメラで撮影するた
め、オーディエンスのモニタに映し出される資料画像は
解像度が劣化しており、細かい文字などの判読に困難が
あった。この問題の解決策として、プルーバックの前に
プレゼンタを立たせ、該プレゼンタをあらかじめ切り出
して高解像度の資料画像に合成して伝送する方法があ
る。しかし、この方法は、プレゼンタが合成された画像
を専用モニタで間接的に確認しながら指示を行う必要が
あり、細かい指示を行う時は、操作性に問題がある。
【０００３】
【発明が解決しようとする課題】本発明は、上記従来技
術の問題点を解決し、プルーバックを用いずに資料領域
を分離することを可能にすると共に、プレゼンタの切り
出し画像と高精細な資料画像を伝送し、オーディエンス
側で両画像と合成することにより、プレゼンタが資料画
像を見ながら細かな指示入力を可能にし、オーディエン
ス側では高精細な資料画像を見ることを可能にする、撮
影画像からの資料領域分離方法及び遠隔オーディエンス
方法を提供することにある。
術の問題点を解決し、プルーバックを用いずに資料領域
を分離することを可能にすると共に、プレゼンタの切り
出し画像と高精細な資料画像を伝送し、オーディエンス
側で両画像と合成することにより、プレゼンタが資料画
像を見ながら細かな指示入力を可能にし、オーディエン
ス側では高精細な資料画像を見ることを可能にする、撮
影画像からの資料領域分離方法及び遠隔オーディエンス
方法を提供することにある。
【０００４】
【課題を解決するための手段】本発明では、あらかじめ
トレーニング画像を用いて表示・撮像系の空間歪み、ぼ
け、色調変換の係数を求めておき、空間歪み係数と色調
変換係数にもとづいてスタジオ等で撮像した撮像画像を
補正し、また、ぼけ係数にもとづいて資料画像をぼか
し、該補正された撮像画像と該ぼかした資料画像の差分
をもとに、撮像画像から資料領域を分離する。
トレーニング画像を用いて表示・撮像系の空間歪み、ぼ
け、色調変換の係数を求めておき、空間歪み係数と色調
変換係数にもとづいてスタジオ等で撮像した撮像画像を
補正し、また、ぼけ係数にもとづいて資料画像をぼか
し、該補正された撮像画像と該ぼかした資料画像の差分
をもとに、撮像画像から資料領域を分離する。
【０００５】また、遠隔プレゼンテーションにおいて
は、プレゼンタ側では、上記撮像画像から資料領域を分
離して得られるプレゼンタ切り出し画像と元の資料画像
とをオーディエンス側に送信し、オーディエンス側では
受信したプレゼンタ切り出し画像と資料画像とを合成し
て表示する。
は、プレゼンタ側では、上記撮像画像から資料領域を分
離して得られるプレゼンタ切り出し画像と元の資料画像
とをオーディエンス側に送信し、オーディエンス側では
受信したプレゼンタ切り出し画像と資料画像とを合成し
て表示する。
【０００６】
【作用】色調・歪み補正された撮像画像にはぼけが残っ
ており、ぼけを施こした資料画像との差分をとることに
より、ＲＧＢ値の差分の小さい領域が資料領域として分
離できる。撮像画像における該資料領域以外の部分（プ
レゼンタ切り出し画像）と元の資料画像とを送信し、オ
ーディエンスの端末で合成することで、資料説明など高
解像度で表示すべき画像は高解像度表示でき、かつ、そ
の資料をプレゼンタが直接指し示す画像を表示できるた
め、資料の明瞭度、臨場感が向上する。
ており、ぼけを施こした資料画像との差分をとることに
より、ＲＧＢ値の差分の小さい領域が資料領域として分
離できる。撮像画像における該資料領域以外の部分（プ
レゼンタ切り出し画像）と元の資料画像とを送信し、オ
ーディエンスの端末で合成することで、資料説明など高
解像度で表示すべき画像は高解像度表示でき、かつ、そ
の資料をプレゼンタが直接指し示す画像を表示できるた
め、資料の明瞭度、臨場感が向上する。
【０００７】
【実施例】以下、本発明の一実施例について図面により
詳述する。
詳述する。
【０００８】図１は本発明の資料領域分離方法を実現す
るブロック図である。図１において、１は撮像前の元の
資料画像（静止画像、動画像、テキスト画像など）、２
はスタジオ等で、モニタなどに資料画像を表示し、その
前にプレゼンタ（講師、説明者など）を立たせて撮像し
た画像（ここでは講師画像と称す）、３は講師画像（撮
像画像）から資料領域を分離してプレゼンタを切り出し
た画像である。１０はトレーニング用の画像を撮像し
て、あらかじめ表示・撮像系の空間歪み、ぼけ、色調変
換度の各パラメータを求めるトレーニング部である。２
０はトレーニング部１０で求めた空間歪み、ぼけ、色調
変換度の各パラメータ（係数）にもとづいて資料画像１
と講師画像２を変換する画像変換部であり、色調変換部
２１、歪み変換部２２、ぼけ生成部２３からなる。３０
は画像変換された資料画像１と講師画像２をもとに資料
領域を黒抜き、白抜きしてプレゼンタ部分を切り出す画
像分離部である。
るブロック図である。図１において、１は撮像前の元の
資料画像（静止画像、動画像、テキスト画像など）、２
はスタジオ等で、モニタなどに資料画像を表示し、その
前にプレゼンタ（講師、説明者など）を立たせて撮像し
た画像（ここでは講師画像と称す）、３は講師画像（撮
像画像）から資料領域を分離してプレゼンタを切り出し
た画像である。１０はトレーニング用の画像を撮像し
て、あらかじめ表示・撮像系の空間歪み、ぼけ、色調変
換度の各パラメータを求めるトレーニング部である。２
０はトレーニング部１０で求めた空間歪み、ぼけ、色調
変換度の各パラメータ（係数）にもとづいて資料画像１
と講師画像２を変換する画像変換部であり、色調変換部
２１、歪み変換部２２、ぼけ生成部２３からなる。３０
は画像変換された資料画像１と講師画像２をもとに資料
領域を黒抜き、白抜きしてプレゼンタ部分を切り出す画
像分離部である。
【０００９】初め、トレーニング部１０について説明す
る。図２はトレーニング部１０の詳細図で、１１はトレ
ーニング画像、１２は該トレーニング画像を表示、撮像
することで得られるトレーニング用変換画像、１３は歪
み、ぼけ、色調変換度の各パラメータ（係数）を求める
パラメータ算出部、１４はパラメータ算出部１３で求め
た各パラメータ（係数）を保持しておくパラメータ記憶
部である。ここで、パラメータ算出部１３は歪み算出部
１３１、ぼけ算出部１３２、色調変換算出部１３３から
なる。
る。図２はトレーニング部１０の詳細図で、１１はトレ
ーニング画像、１２は該トレーニング画像を表示、撮像
することで得られるトレーニング用変換画像、１３は歪
み、ぼけ、色調変換度の各パラメータ（係数）を求める
パラメータ算出部、１４はパラメータ算出部１３で求め
た各パラメータ（係数）を保持しておくパラメータ記憶
部である。ここで、パラメータ算出部１３は歪み算出部
１３１、ぼけ算出部１３２、色調変換算出部１３３から
なる。
【００１０】スタジオにおける撮像カメラ、モニタの位
置、アイリス等は一定とすると、資料画像の表示・撮映
系は時不変である。よって、トレーニングによってこれ
らのパラメータを一度求めればよい。一度モニタで映し
出した資料画像を再度撮像する場合、カメラの特性、カ
メラとモニタの位置関係により、色調（輝度も含む）、
歪み、ぼけが表示・撮像系を決定する。すなわち、講師
画像（撮像画像）の資料画像部分Ｉtは、色調変換係数
Ｃ、空間歪み係数Ａ、ぼけ係数Ｂ、原資料画像Ｉoとす
ると、 Ｉt＝ＡＢＣＩo と表現できる。
置、アイリス等は一定とすると、資料画像の表示・撮映
系は時不変である。よって、トレーニングによってこれ
らのパラメータを一度求めればよい。一度モニタで映し
出した資料画像を再度撮像する場合、カメラの特性、カ
メラとモニタの位置関係により、色調（輝度も含む）、
歪み、ぼけが表示・撮像系を決定する。すなわち、講師
画像（撮像画像）の資料画像部分Ｉtは、色調変換係数
Ｃ、空間歪み係数Ａ、ぼけ係数Ｂ、原資料画像Ｉoとす
ると、 Ｉt＝ＡＢＣＩo と表現できる。
【００１１】トレーニング部１０では、あらかじめ単純
なトレーニング画像を用いて、スタジオにおける表示・
撮像系を決定する空間歪み、ぼけ、色調変換度の各パラ
メータ（係数）を以下のように求める。即ち、図２にお
いて、スタジオにてトレーニング用画像１１とそれを表
示、撮像することで得られるトレーニング用変換画像１
２とをパラメータ算出部１３で入力し、歪み算出部１３
１、ぼけ算出部１３２、色調変換算出部１３３におい
て、それぞれ空間歪み係数Ａ、ぼけ係数Ｂ、色調変換係
数Ｃを算出する。
なトレーニング画像を用いて、スタジオにおける表示・
撮像系を決定する空間歪み、ぼけ、色調変換度の各パラ
メータ（係数）を以下のように求める。即ち、図２にお
いて、スタジオにてトレーニング用画像１１とそれを表
示、撮像することで得られるトレーニング用変換画像１
２とをパラメータ算出部１３で入力し、歪み算出部１３
１、ぼけ算出部１３２、色調変換算出部１３３におい
て、それぞれ空間歪み係数Ａ、ぼけ係数Ｂ、色調変換係
数Ｃを算出する。
【００１２】今、図３に示すように、スタジオにおける
表示・撮像系を通る前の原画像（トレーニング画像１
１）をＩ、系を通過後の画像（トレーニング用変換画像
１２）をＩ′とし、Ｉ上の点Ｐ（ｘ、ｙ）に対応する
Ｉ′上の点をＰ′（ｘ′、ｙ′）とする。同様にして、
画像ＩとＩ′上の対応関係にある点をいくつか求める。
表示・撮像系を通る前の原画像（トレーニング画像１
１）をＩ、系を通過後の画像（トレーニング用変換画像
１２）をＩ′とし、Ｉ上の点Ｐ（ｘ、ｙ）に対応する
Ｉ′上の点をＰ′（ｘ′、ｙ′）とする。同様にして、
画像ＩとＩ′上の対応関係にある点をいくつか求める。
【００１３】空間歪み係数Ａは次のようにして求まる。
【００１４】
【数１】 は行列である。例えば、普通のアフィン変換の場合は、
【００１５】
【数２】 となり、（２）式を（１）式に代入した
【００１６】
【数３】 を解くことで、（２）式の行列すなわち空間歪み係数Ａ
が求まる。具体的には、二つの画像Ｉ、Ｉ′間の対応関
係にある座標数十箇所について、最小２乗法などを用い
て求める。
が求まる。具体的には、二つの画像Ｉ、Ｉ′間の対応関
係にある座標数十箇所について、最小２乗法などを用い
て求める。
【００１７】ぼけ係数Ｂは、二つの画像Ｉ、Ｉ′間の数
点の対応する座標について、Ｐ（ｘ、ｙ）、Ｐ′
（ｘ′、ｙ′）の周囲の画素値より、上記と同様に行列
の形で求まる。 色調変換係数Ｃは次のようにして求ま
る。画像Ｉ上の点Ｐ（ｘ、ｙ）の色の値がＨ（ｒ、ｇ、
ｂ）、画像Ｉ′上の対応する点Ｐ′（ｘ′、ｙ′）の色
の値がＨ′（ｒ′、ｇ′、ｂ′）である場合、空間歪み
と同様に行列を用いると、
点の対応する座標について、Ｐ（ｘ、ｙ）、Ｐ′
（ｘ′、ｙ′）の周囲の画素値より、上記と同様に行列
の形で求まる。 色調変換係数Ｃは次のようにして求ま
る。画像Ｉ上の点Ｐ（ｘ、ｙ）の色の値がＨ（ｒ、ｇ、
ｂ）、画像Ｉ′上の対応する点Ｐ′（ｘ′、ｙ′）の色
の値がＨ′（ｒ′、ｇ′、ｂ′）である場合、空間歪み
と同様に行列を用いると、
【００１８】
【数４】 となる。ここで、係数Ｃは行列の形で、次のように表わ
される。
される。
【００１９】
【数５】 このようにして、パラメータ算出部１３で算出された空
間歪み係数Ａ、ぼけ係数Ｂ、色調変換係数Ｃは、パラメ
ータ記憶部１４に記憶しておくことで、何度も使用する
ことができる。
間歪み係数Ａ、ぼけ係数Ｂ、色調変換係数Ｃは、パラメ
ータ記憶部１４に記憶しておくことで、何度も使用する
ことができる。
【００２０】次に、図１の構成を説明する。実際の遠隔
講義や遠隔プレゼンテーションの際、画像変換部２０に
おいて講師画像（撮像画像）２と資料画像１の変換を、
上記トレーニング部１０で求めた各係数Ａ、Ｂ、Ｃに基
づいて行なう。ここで、資料画像１とは元のプレゼンテ
ーションの対象となる高精細な画像で、後述のようにそ
のままオーディエンス側に伝送されるものである。一
方、講師画像２とは、資料画像１が映し出されたディス
プレイの前にプレゼンタが立ち、それを再度カメラで撮
像したもので、もともとの資料画像１が表示、撮像の変
換系を通っている。画像変換部２０では、まず、色調変
換部２１によって講師画像に色調変換係数Ｃの逆数Ｃ-1
をかけることで色調の補正を行う。次に、歪み変換部２
２によって、色調補正された講師画像２に空間歪み係数
Ａの逆数Ａ-1をかけて歪み補正を行う。一方、資料画像
１には、ぼけ生成部２３において、ぼけ係数Ｂをそのま
まかけて、見掛上、表示・撮像系を通過したと同様のぼ
けを資料画像１に生成する。
講義や遠隔プレゼンテーションの際、画像変換部２０に
おいて講師画像（撮像画像）２と資料画像１の変換を、
上記トレーニング部１０で求めた各係数Ａ、Ｂ、Ｃに基
づいて行なう。ここで、資料画像１とは元のプレゼンテ
ーションの対象となる高精細な画像で、後述のようにそ
のままオーディエンス側に伝送されるものである。一
方、講師画像２とは、資料画像１が映し出されたディス
プレイの前にプレゼンタが立ち、それを再度カメラで撮
像したもので、もともとの資料画像１が表示、撮像の変
換系を通っている。画像変換部２０では、まず、色調変
換部２１によって講師画像に色調変換係数Ｃの逆数Ｃ-1
をかけることで色調の補正を行う。次に、歪み変換部２
２によって、色調補正された講師画像２に空間歪み係数
Ａの逆数Ａ-1をかけて歪み補正を行う。一方、資料画像
１には、ぼけ生成部２３において、ぼけ係数Ｂをそのま
まかけて、見掛上、表示・撮像系を通過したと同様のぼ
けを資料画像１に生成する。
【００２１】画像分離部３０では、講師画像２から色調
・歪み補正して得られた画像（Ｉt1とする）と資料画像
１にぼけを施して得られた画像（Ｉo1とする）を入力
し、両画像の差分をとる。ここで、画像Ｉt1にはぼけが
そのまま残っているため、画像Ｉt1とＩo1の差分をとる
ことにより、ＲＧＢの差分の小さい領域が資料領域とし
て検出される。しかし、パラメータ推定誤差の影響によ
り、多少の「ずれ」や雑音があると予想される。これの
対処法としては、画像Ｉt1における点（ｘ，ｙ）と、そ
れに対応する画像Ｉo1上の点（ｘ，ｙ）および周囲のＮ
×Ｎ画素とのそれぞれの距離Ｄijを計算し、そのうちの
最小値がある閾値Ｔより小さい場合、その画素は資料領
域であると判定すればよい。ここで、輝度における１次
微分値の高い画素（境界の画素）に対しては探策範囲を
広げ、また、閾値Ｔの値を大きくする。このようにして
求まった資料領域を白抜き、黒抜きとすることで、残り
領域がプレゼンタとなる切り出し画像３が得られる。
・歪み補正して得られた画像（Ｉt1とする）と資料画像
１にぼけを施して得られた画像（Ｉo1とする）を入力
し、両画像の差分をとる。ここで、画像Ｉt1にはぼけが
そのまま残っているため、画像Ｉt1とＩo1の差分をとる
ことにより、ＲＧＢの差分の小さい領域が資料領域とし
て検出される。しかし、パラメータ推定誤差の影響によ
り、多少の「ずれ」や雑音があると予想される。これの
対処法としては、画像Ｉt1における点（ｘ，ｙ）と、そ
れに対応する画像Ｉo1上の点（ｘ，ｙ）および周囲のＮ
×Ｎ画素とのそれぞれの距離Ｄijを計算し、そのうちの
最小値がある閾値Ｔより小さい場合、その画素は資料領
域であると判定すればよい。ここで、輝度における１次
微分値の高い画素（境界の画素）に対しては探策範囲を
広げ、また、閾値Ｔの値を大きくする。このようにして
求まった資料領域を白抜き、黒抜きとすることで、残り
領域がプレゼンタとなる切り出し画像３が得られる。
【００２２】遠隔オーディエンスには、上記切り出し画
像３と元の高精細な資料画像１を送り、遠隔オーディエ
ンス側で両画像を合成して表示することにより、オーデ
ィエンス側では高精細な資料画像を見ることが可能にな
る。
像３と元の高精細な資料画像１を送り、遠隔オーディエ
ンス側で両画像を合成して表示することにより、オーデ
ィエンス側では高精細な資料画像を見ることが可能にな
る。
【００２３】図４に、本発明による遠隔オーディエンス
方法の一実施例のブロック図を示す。図４において、プ
レゼンタ側は、説明資料表示用高解像度モニタ４１０、
プレゼンタ４１１、カメラ４１２、説明資料蓄積・制御
部４１３、プレゼンタ画像抽出部４１４、切り出し画像
符号化部４１５、説明資料符号部４１６、音声符号化部
４１７、多重化部４１８などよりなる。また、オーディ
エンス側は、多重分離部４２０、切り出し画像復号・再
生部４２１、説明資料復号・再生部４２２、画像合成部
４２３、高解像度モニタ４２４、音声復号・再生部４２
５、スピーカ４２６などよりなる。このようなオーディ
エンスが通信路上に複数存在する。
方法の一実施例のブロック図を示す。図４において、プ
レゼンタ側は、説明資料表示用高解像度モニタ４１０、
プレゼンタ４１１、カメラ４１２、説明資料蓄積・制御
部４１３、プレゼンタ画像抽出部４１４、切り出し画像
符号化部４１５、説明資料符号部４１６、音声符号化部
４１７、多重化部４１８などよりなる。また、オーディ
エンス側は、多重分離部４２０、切り出し画像復号・再
生部４２１、説明資料復号・再生部４２２、画像合成部
４２３、高解像度モニタ４２４、音声復号・再生部４２
５、スピーカ４２６などよりなる。このようなオーディ
エンスが通信路上に複数存在する。
【００２４】プレゼンタ側では、説明資料蓄積・制御部
４１３から出力された高精細な説明資料情報が説明資料
表示用高解像度モニタ４１０に表示される。プレゼンタ
４１１は、該モニタ４１０に表示される説明資料を見な
がら説明を行う。このプレゼンタ画像と説明資料画像が
共にカメラ４１２により撮影されプレゼンタ画像抽出部
４１４に入力される。プレゼンタ画像抽出部４１４に
は、説明資料蓄積・制御部４１３からの高精細な説明資
料情報の資料画像も入力される。該プレゼンタ画像抽出
部４１４は図１の構成からなり、モニタ４１０とカメラ
４１２の系の空間歪み、ぼけ、色変換の各係数Ａ、Ｂ、
Ｃをトレーニング画像を用いて求めて保持してあり、該
各係数に従ってカメラ４１２の出力画像（図１の講師画
像２）と説明資料蓄積・制御部４１３の出力画像（図１
の資料画像１）の変換を行った後、両者の差分等によ
り、資料領域は黒あるいは白抜きのプレゼンタ切り出し
画像（図１の切り出し画像３）を得る。このプレゼンタ
切り出し画像と説明資料蓄積・制御部４１３から出力さ
れる高精細な説明資料画像は、それぞれ切り出し画像符
号化部４１５と説明資料符号化部４１６により符号化さ
れた後、多重化部４１８により多重化され、通信路へ送
られる。同時に、プレゼンタ４１１の音声は、プレゼン
タ４１１が所持するマイク（図示せず）により音声信号
に変換され、音声符号化部４１７で符号化された後、同
様に多重化部４１８により多重化され、通信路へ送られ
る。
４１３から出力された高精細な説明資料情報が説明資料
表示用高解像度モニタ４１０に表示される。プレゼンタ
４１１は、該モニタ４１０に表示される説明資料を見な
がら説明を行う。このプレゼンタ画像と説明資料画像が
共にカメラ４１２により撮影されプレゼンタ画像抽出部
４１４に入力される。プレゼンタ画像抽出部４１４に
は、説明資料蓄積・制御部４１３からの高精細な説明資
料情報の資料画像も入力される。該プレゼンタ画像抽出
部４１４は図１の構成からなり、モニタ４１０とカメラ
４１２の系の空間歪み、ぼけ、色変換の各係数Ａ、Ｂ、
Ｃをトレーニング画像を用いて求めて保持してあり、該
各係数に従ってカメラ４１２の出力画像（図１の講師画
像２）と説明資料蓄積・制御部４１３の出力画像（図１
の資料画像１）の変換を行った後、両者の差分等によ
り、資料領域は黒あるいは白抜きのプレゼンタ切り出し
画像（図１の切り出し画像３）を得る。このプレゼンタ
切り出し画像と説明資料蓄積・制御部４１３から出力さ
れる高精細な説明資料画像は、それぞれ切り出し画像符
号化部４１５と説明資料符号化部４１６により符号化さ
れた後、多重化部４１８により多重化され、通信路へ送
られる。同時に、プレゼンタ４１１の音声は、プレゼン
タ４１１が所持するマイク（図示せず）により音声信号
に変換され、音声符号化部４１７で符号化された後、同
様に多重化部４１８により多重化され、通信路へ送られ
る。
【００２５】オーディエンス側では、多重分離部４２０
において、受信したプレゼンタ切り出し画像情報と説明
資料画像情報と音声情報をそれぞれ分離する。このう
ち、プレゼンタ切り出し画像情報と説明資料画像情報
は、それぞれ、切り出し画像復号・再生部４２１と説明
資料復号・再生部４２２により復号・再生され、画像合
成部４２３により合成され、高精解度モニタ４２４に表
示される。また、音声情報は音声復号・再生部４２３に
より復号・再生され、スピーカ４２６から出力される。
において、受信したプレゼンタ切り出し画像情報と説明
資料画像情報と音声情報をそれぞれ分離する。このう
ち、プレゼンタ切り出し画像情報と説明資料画像情報
は、それぞれ、切り出し画像復号・再生部４２１と説明
資料復号・再生部４２２により復号・再生され、画像合
成部４２３により合成され、高精解度モニタ４２４に表
示される。また、音声情報は音声復号・再生部４２３に
より復号・再生され、スピーカ４２６から出力される。
【００２６】図５乃至図８に具体的処理例を示す。図５
はプレゼンテーションの対象となる高精細な原資料画像
であり、図６は、図５の資料画像を表示し、その前にプ
レゼンタが立ち、それを再度撮像した講師画像（撮像画
像）である。図７は、あらかじめトレーニング画像で求
めた空間歪み、ぼけ、色調変換の各係数にもとづき、図
５と図６の画像を変換し、差分をとり、資料画像領域を
黒抜きとしたプレゼンタ切り出し画像である。色（輝
度）の微系数の大きいところで誤抽出が見られるが、ほ
ぼ資料領域を抜き出していることがわかる。図８は、図
７の切り出し画像と図５の原資料画像を合成した画像で
あり、オーディエンス側で高精細な資料画像が得られ
る。
はプレゼンテーションの対象となる高精細な原資料画像
であり、図６は、図５の資料画像を表示し、その前にプ
レゼンタが立ち、それを再度撮像した講師画像（撮像画
像）である。図７は、あらかじめトレーニング画像で求
めた空間歪み、ぼけ、色調変換の各係数にもとづき、図
５と図６の画像を変換し、差分をとり、資料画像領域を
黒抜きとしたプレゼンタ切り出し画像である。色（輝
度）の微系数の大きいところで誤抽出が見られるが、ほ
ぼ資料領域を抜き出していることがわかる。図８は、図
７の切り出し画像と図５の原資料画像を合成した画像で
あり、オーディエンス側で高精細な資料画像が得られ
る。
【００２７】
【発明の効果】請求項１の発明によれば、ブルーバック
を用いずに、資料画像をを表示し、その前にプレゼンタ
が立ち、それを撮像した画像から資料領域を分離できる
ため、プレゼンタは資料画像を見ながら細かな指示入力
が可能となる。
を用いずに、資料画像をを表示し、その前にプレゼンタ
が立ち、それを撮像した画像から資料領域を分離できる
ため、プレゼンタは資料画像を見ながら細かな指示入力
が可能となる。
【００２８】請求項２の発明によれば、トレーニング時
のパラメータ推定誤差の影響により多少のずれや雑音が
ある場合にも、資料領域を正確に分離することができ
る。
のパラメータ推定誤差の影響により多少のずれや雑音が
ある場合にも、資料領域を正確に分離することができ
る。
【００２９】請求項３の発明によれば、説明資料を高解
像度に保ったまま遠隔プレゼンテーションや遠隔研修を
行なうことができ、資料の明瞭度、説明の臨場感が向上
し、効果的な遠隔説明を行なうことができる。
像度に保ったまま遠隔プレゼンテーションや遠隔研修を
行なうことができ、資料の明瞭度、説明の臨場感が向上
し、効果的な遠隔説明を行なうことができる。
【図１】本発明の資料領域分離方法を実現する一実施例
のブロック図である。
のブロック図である。
【図２】図１のトレーニング部の詳細を示す図である。
【図３】トレーニング画像とその変換画像の関係を示す
図である。
図である。
【図４】本発明による遠隔プレゼンテーション方法の一
実施例のブロック図である。
実施例のブロック図である。
【図５】資料画像の具体例である。
【図６】講師画像（撮像画像）の具体例である。
【図７】切り出し画像の具体例である。
【図８】合成画像の具体例である。
【符号の説明】 １ 資料画像 ２ 講師画像（撮像画像） ３ 切り出し画像 １０ トレーニング部 ２０ 画像変換部 ２１ 色調変換部 ２２ 歪み変換部 ２３ ぼけ生成部 ３０ 画像分離部 ４１０ 説明資料表示用高解像度モニタ ４１１ プレゼンタ ４１２ カメラ ４１３ 説明資料蓄積・制御部 ４１４ プレゼンタ画像抽出部 ４１５ 切り出し画像符号化部 ４１６ 説明資料符号化部 ４１８ 多重化部 ４２０ 多重分離部 ４２１ 切り出し画像復号・再生部 ４２２ 説明資料復号・再生部 ４２３ 画像合成部 ４２４ 高解像度モニタ
─────────────────────────────────────────────────────
【手続補正書】
【提出日】平成６年７月２２日
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】削除
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】図面の簡単な説明
【補正方法】変更
【補正内容】
【図面の簡単な説明】
【図１】本発明の資料領域分離方法を実現する一実施例
のブロック図である。
のブロック図である。
【図２】図１のトレーニング部の詳細を示す図である。
【図３】トレーニング画像とその変換画像の関係を示す
図である。
図である。
【図４】本発明による遠隔プレゼンテーション方法の一
実施例のブロック図である。
実施例のブロック図である。
【符号の説明】 １ 資料画像 ２ 講師画像（撮像画像） ３ 切り出し画像 １０ トレーニング部 ２０ 画像変換部 ２１ 色調変換部 ２２ 歪み変換部 ２３ ぼけ生成部 ３０ 画像分離部 ４１０ 説明資料表示用高解像度モニタ ４１１ プレゼンタ ４１２ カメラ ４１３ 説明資料蓄積・制御部 ４１４ プレゼンタ画像抽出部 ４１５ 切り出し画像符号化部 ４１６ 説明資料符号化部 ４１８ 多重化部 ４２０ 多重分離部 ４２１ 切り出し画像復号・再生部 ４２２ 説明資料復号・再生部 ４２３ 画像合成部 ４２４ 高解像度モニタ
【手続補正３】
【補正対象書類名】図面
【補正対象項目名】図５
【補正方法】削除
【手続補正４】
【補正対象書類名】図面
【補正対象項目名】図６
【補正方法】削除
【手続補正５】
【補正対象書類名】図面
【補正対象項目名】図７
【補正方法】削除
【手続補正６】
【補正対象書類名】図面
【補正対象項目名】図８
【補正方法】削除
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.6 識別記号 庁内整理番号 ＦＩ 技術表示箇所 Ｈ０４Ｎ 5/265
Claims (3)
- 【請求項１】 資料画像を表示し、その前にプレゼンタ
が立ち、それを撮像した画像（以下、撮像画像という）
から資料領域を分離する方法において、 あらかじめトレーニング画像を用いて表示・撮像系の空
間歪み、ぼけ、色調変換の係数を求めておき、 前記空間歪み係数と色調変換係数にもとづいて前記撮像
画像を補正し、前記ぼけ係数にもとづいて前記資料画像
をぼかし、 前記補正された撮像画像と前記ぼかした資料画像の差分
をもとに、撮像画像から資料領域を分離することを特徴
とする撮像画像からの資料領域分離方法。 - 【請求項２】 請求項１記載の撮像画像からの資料領域
分離方法において、補正された撮像画像上の画素に対
し、ぼかした資料画像上の対応する画素及びその周囲の
Ｎ×Ｎ画素との距離を計算し、その最小値が閾値より小
さい場合、当該画素を資料領域と判定し、輝度の１次微
分値の高い画素について探索範囲を広げ、閾値を大きく
することを特徴とする撮像画像からの資料領域分離方
法。 - 【請求項３】 請求項１あるいは２記載の撮像画像から
の資料領域分離方法を利用した遠隔プレゼンテーション
方法であって、 プレゼンタ側では、撮像画像から資料領域を分離して得
られるプレゼンタ切り出し画像と元の資料画像とをオー
ディエンス側に送信し、オーディエンス側では受信した
プレゼンタ切り出し画像と資料画像とを合成して表示す
ることを特徴とする遠隔プレゼンテーション方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP6035294A JPH07222052A (ja) | 1994-02-08 | 1994-02-08 | 撮像画像からの資料領域分離方法及び遠隔プレゼンテーション方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP6035294A JPH07222052A (ja) | 1994-02-08 | 1994-02-08 | 撮像画像からの資料領域分離方法及び遠隔プレゼンテーション方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH07222052A true JPH07222052A (ja) | 1995-08-18 |
Family
ID=12437761
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP6035294A Pending JPH07222052A (ja) | 1994-02-08 | 1994-02-08 | 撮像画像からの資料領域分離方法及び遠隔プレゼンテーション方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH07222052A (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005122327A (ja) * | 2003-10-14 | 2005-05-12 | Casio Comput Co Ltd | 撮影装置、その画像処理方法及びプログラム |
| JP2005122320A (ja) * | 2003-10-14 | 2005-05-12 | Casio Comput Co Ltd | 撮影装置、その画像処理方法及びプログラム |
| JP2005122323A (ja) * | 2003-10-14 | 2005-05-12 | Casio Comput Co Ltd | 撮影装置、画像処理装置、撮影装置の画像処理方法及びプログラム |
| JP2007010807A (ja) * | 2005-06-28 | 2007-01-18 | Fuji Xerox Co Ltd | 情報処理システム、情報処理装置、情報処理方法及びコンピュータ・プログラム |
| JP2011040921A (ja) * | 2009-08-10 | 2011-02-24 | Nippon Telegr & Teleph Corp <Ntt> | コンテンツ生成装置，コンテンツ生成方法およびコンテンツ生成プログラム |
-
1994
- 1994-02-08 JP JP6035294A patent/JPH07222052A/ja active Pending
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005122327A (ja) * | 2003-10-14 | 2005-05-12 | Casio Comput Co Ltd | 撮影装置、その画像処理方法及びプログラム |
| JP2005122320A (ja) * | 2003-10-14 | 2005-05-12 | Casio Comput Co Ltd | 撮影装置、その画像処理方法及びプログラム |
| JP2005122323A (ja) * | 2003-10-14 | 2005-05-12 | Casio Comput Co Ltd | 撮影装置、画像処理装置、撮影装置の画像処理方法及びプログラム |
| JP2007010807A (ja) * | 2005-06-28 | 2007-01-18 | Fuji Xerox Co Ltd | 情報処理システム、情報処理装置、情報処理方法及びコンピュータ・プログラム |
| JP4729999B2 (ja) * | 2005-06-28 | 2011-07-20 | 富士ゼロックス株式会社 | 情報処理システム、情報処理装置、情報処理方法及びコンピュータ・プログラム |
| JP2011040921A (ja) * | 2009-08-10 | 2011-02-24 | Nippon Telegr & Teleph Corp <Ntt> | コンテンツ生成装置，コンテンツ生成方法およびコンテンツ生成プログラム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6704042B2 (en) | Video processing apparatus, control method therefor, and storage medium | |
| JP4631558B2 (ja) | 撮像装置および画像処理プログラム | |
| WO2010027079A1 (ja) | 撮像装置および方法、並びにプログラム | |
| JP4947136B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
| JP2010009417A (ja) | 画像処理装置、画像処理方法、プログラム及び記録媒体 | |
| EP0622000A1 (en) | Method and apparatus for video camera image film simulation | |
| JP2002171398A (ja) | 画像処理方法及び電子カメラ | |
| JPH1091765A (ja) | 画像合成装置及びその方法 | |
| WO1995033337A1 (en) | A method for specifying a video window's boundary coordinates to partition a video signal and compress its components | |
| JP2010211255A (ja) | 撮像装置、画像処理方法及びプログラム | |
| US20020149696A1 (en) | Method for presenting improved motion image sequences | |
| JP5156196B2 (ja) | 撮像装置 | |
| US6606422B1 (en) | Method and apparatus for processing and recovering images | |
| JPH07222052A (ja) | 撮像画像からの資料領域分離方法及び遠隔プレゼンテーション方法 | |
| CN115022609B (zh) | 一种影视拍摄的色域匹配方法、系统和存储介质 | |
| CN111314625B (zh) | 多信号源安全传输方法 | |
| KR102054453B1 (ko) | 화질 개선된 인공지능 기반 영상 출력 방법 | |
| JP2004354913A (ja) | 画像表示装置及び画像表示方法 | |
| JP5493839B2 (ja) | 撮像装置、画像合成方法及びプログラム | |
| JP2005229280A (ja) | 画像処理装置および方法並びにプログラム | |
| JP7458281B2 (ja) | 色調補正装置及びそのプログラム | |
| WO2021192096A1 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
| JP5004680B2 (ja) | 画像処理装置、画像処理方法、テレビ会議システム、テレビ会議方法、プログラムおよび記録媒体 | |
| WO2022181174A1 (ja) | 画像処理装置、画像処理方法、プロジェクタ装置 | |
| JP7408315B2 (ja) | 画像処理装置、画像処理方法、及びプログラム |