JP2007110360A - Stereoscopic image processing apparatus and program - Google Patents
Stereoscopic image processing apparatus and program Download PDFInfo
- Publication number
- JP2007110360A JP2007110360A JP2005298369A JP2005298369A JP2007110360A JP 2007110360 A JP2007110360 A JP 2007110360A JP 2005298369 A JP2005298369 A JP 2005298369A JP 2005298369 A JP2005298369 A JP 2005298369A JP 2007110360 A JP2007110360 A JP 2007110360A
- Authority
- JP
- Japan
- Prior art keywords
- foreground
- image data
- stereoscopic image
- background
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
Description
本発明は、立体画像の立体感を強調する立体画像処理装置およびプログラムに関する。 The present invention relates to a stereoscopic image processing apparatus and program for enhancing the stereoscopic effect of a stereoscopic image.
従来の立体画像の表示は、複数視点の画像を、カメラの配置や人間の目の間隔あるいはディスプレイの設計値などから計算されるパラメータで順当に計算を行い、三次元ディスプレイ上で合成している。そして、この三次元ディスプレイに表示された画像を両目で見ることで、立体的に知覚される。しかし、画像ソースによっては、三次元ディスプレイ上での合成の際に順当に計算を行って表示しただけでは、十分な立体感を得られないことがある。そこで、三次元ディスプレイ上での合成の際に、計算に用いるカメラの配置などのパラメータを調整することで、立体感を強調している。また、動画を対象にして、動きの大きさをコントロールすることで、立体感にメリハリを付ける技術が知られている(特許文献1)。
しかしながら、合成の際に計算に用いるパラメータを調整することで、立体感を強調した画像にすると、この画像を見る人間の目に負担が生じてしまい、疲労感や違和感が発生するという問題がある。また、特許文献1に示す方法にあっては、動画を対象にしており、静止画には対応できないという問題がある。
However, by adjusting the parameters used for the calculation at the time of synthesis, if an image with a three-dimensional effect is emphasized, there is a problem that a burden on the eyes of the human who sees the image occurs, and a feeling of fatigue or discomfort occurs. . Further, the method disclosed in
本発明は、このような事情に鑑みてなされたもので、その目的は、疲労感や違和感が少なく、動画および静止画に対応した、立体感を強調する立体画像処理装置を提供することにある。 The present invention has been made in view of such circumstances, and an object of the present invention is to provide a stereoscopic image processing apparatus that enhances the stereoscopic effect corresponding to moving images and still images with less fatigue and discomfort. .
この発明は上述した課題を解決するためになされたもので、請求項1に記載の発明は、複数視点の画像からなる立体画像データの入力を、各視点について1フレームずつ受け付ける入力受付部と、前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部と、前記前景背景分離部から受けた前景立体画像データに、強調する処理を施して出力する前景処理部と、前記前景背景分離部から受けた背景立体画像データに、前記前景処理部の出力を重ねた立体画像データを出力する前景背景合成部とを備えることを特徴とする立体画像処理装置である。
The present invention has been made to solve the above-described problems, and the invention according to
また、請求項2に記載の発明は、複数視点の画像からなる立体画像データの入力を、各視点について1フレームずつ受け付ける入力受付部と、前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部と、前記前景背景分離部から受けた背景立体画像データに、画像処理を施して出力する背景処理部と、前記背景処理部の出力に、前記前景背景分離部から受けた前景立体画像データを重ねた立体画像データを出力する前景背景合成部とを備えることを特徴とする立体画像処理装置である。 According to the second aspect of the present invention, there is provided an input receiving unit for receiving stereoscopic image data composed of images of a plurality of viewpoints one frame at a time for each viewpoint, and the stereoscopic image data received from the input receiving unit as a foreground stereoscopic image. A foreground / background separation unit that separates data and background stereoscopic image data, a background processing unit that performs image processing on the background stereoscopic image data received from the foreground / background separation unit, and an output of the background processing unit, A stereoscopic image processing apparatus comprising: a foreground / background composition unit that outputs stereoscopic image data obtained by superimposing foreground stereoscopic image data received from a foreground / background separation unit.
また、請求項3に記載の発明は、複数視点の画像からなる立体画像データの入力を、各視点について1フレームずつ受け付ける入力受付部と、前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部と、前記前景背景分離部から受けた前景立体画像データに、強調する処理を施す前景処理部と、前記前景背景分離部から受けた背景立体画像データに、画像処理を施す背景処理部と、前記背景処理部から受けた背景立体画像データに、前記前景処理部から受けた前景立体画像データを重ねた立体画像データを出力する前景背景合成部とを備えることを特徴とする立体画像処理装置である。 According to a third aspect of the present invention, there is provided an input receiving unit for receiving stereoscopic image data composed of images of a plurality of viewpoints one frame at a time for each viewpoint, and the stereoscopic image data received from the input receiving unit as a foreground stereoscopic image. A foreground / background separation unit that separates data and background stereoscopic image data, a foreground processing unit that performs enhancement processing on the foreground stereoscopic image data received from the foreground / background separation unit, and a background stereoscopic image received from the foreground / background separation unit A background processing unit that performs image processing on the data, and a foreground / background synthesis unit that outputs stereoscopic image data obtained by superimposing the foreground stereoscopic image data received from the foreground processing unit on the background stereoscopic image data received from the background processing unit; A stereoscopic image processing apparatus comprising:
また、請求項4に記載の発明は、コンピュータを、複数視点の画像からなる立体画像データの入力を、各視点について1フレームずつ受け付ける入力受付部、前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部、前記前景背景分離部から受けた前景立体画像データに、強調する処理を施して出力する前景処理部、前記前景背景分離部から受けた背景立体画像データに、前記前景処理部の出力を重ねた立体画像データを出力する前景背景合成部として機能させることを特徴とするプログラムである。 According to a fourth aspect of the present invention, there is provided an input receiving unit that accepts input of stereoscopic image data composed of images of a plurality of viewpoints one frame at a time for each viewpoint, and the stereoscopic image data received from the input receiving unit is foreground. Foreground / background separation unit for separating stereoscopic image data and background stereoscopic image data, foreground processing unit for applying foreground processing to the foreground stereoscopic image data received from the foreground / background separation unit, and received from the foreground / background separation unit A program that functions as a foreground / background composition unit that outputs stereoscopic image data in which the output of the foreground processing unit is superimposed on background stereoscopic image data.
また、請求項5に記載の発明は、コンピュータを、複数視点の画像からなる立体画像データの入力を、各視点について1フレームずつ受け付ける入力受付部、前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部、前前記前景背景分離部から受けた背景立体画像データに、画像処理を施して出力する背景処理部、前記背景処理部の出力に、前記前景背景分離部から受けた前景立体画像データを重ねた立体画像データを出力する前景背景合成部として機能させることを特徴とするプログラムである。 According to a fifth aspect of the present invention, there is provided an input receiving unit that receives one frame at a time for each viewpoint from the computer, and the stereoscopic image data received from the input receiving unit is foreground. Foreground / background separation unit that separates stereoscopic image data and background stereoscopic image data, background processing unit that performs image processing on the background stereoscopic image data received from the foreground / background separation unit, and outputs the background processing unit, A program for causing a foreground / background composition unit to output stereoscopic image data obtained by superimposing foreground stereoscopic image data received from the foreground / background separation unit.
また、請求項6に記載の発明は、コンピュータを、複数視点の画像からなる立体画像データの入力を、各視点について1フレームずつ受け付ける入力受付部、前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部、前記前景背景分離部から受けた前景立体画像データに、強調する処理を施す前景処理部、前記前景背景分離部から受けた背景立体画像データに、画像処理を施す背景処理部、前記背景処理部から受けた背景立体画像データに、前記前景処理部から受けた前景立体画像データを重ねた立体画像データを出力する前景背景合成部として機能させることを特徴とするプログラムである。 According to a sixth aspect of the present invention, an input receiving unit that accepts input of stereoscopic image data composed of images of a plurality of viewpoints one frame at a time for each viewpoint, and the stereoscopic image data received from the input receiving unit is foreground. Foreground / background separation unit for separating stereoscopic image data and background stereoscopic image data, foreground processing unit for performing enhancement processing on foreground stereoscopic image data received from the foreground / background separation unit, and background stereoscopic image received from the foreground / background separation unit Functions as a background processing unit that performs image processing on the data, and outputs stereoscopic image data obtained by superimposing the foreground stereoscopic image data received from the foreground processing unit on the background stereoscopic image data received from the background processing unit It is a program characterized by making it carry out.
この発明によれば、立体画像データを前景背景分離部にて、前景立体画像データと背景立体画像データに分離し、前景に対しては前景処理部が、背景に対しては背景処理部が、それぞれ別々の画像処理を施すため、見る人の疲労感や違和感が少なくしつつ、立体感を強調することを可能にしている。 According to the present invention, the foreground / background separation unit separates the stereoscopic image data into the foreground stereoscopic image data and the background stereoscopic image data, the foreground processing unit for the foreground, and the background processing unit for the background, Since each image processing is performed separately, it is possible to enhance the three-dimensional effect while reducing the fatigue and discomfort of the viewer.
また、この発明によれば、画像の時間変化によらず、画像を1フレームずつ処理するため、静止画にも動画にも対応することを可能にしている。 Further, according to the present invention, since the image is processed frame by frame regardless of the time change of the image, it is possible to cope with both a still image and a moving image.
以下、図面を参照して、本発明の実施の形態について説明する。図1は、この発明の一実施形態による立体画像処理装置の構成を示す概略ブロック図である。10は、立体画像処理装置であり、画像データ入力受付部12、前景背景分離部13、前景処理部14、背景処理部15および前景背景合成部16からなる。11は、立体カメラなどで撮影した、両眼用の2視点からの各々1フレームからなる立体画像データである。画像データ入力受付部12は、立体画像データ11の入力を受け付ける処理である。前景背景分離部13は、立体画像データを、予め用意しておいた背景のみの立体画像データと画素ごとに比較し、異なる場合は前景として分離し、同じ場合は背景として分離する処理である。前景処理部14は、前景の立体画像データに対して、明度および彩度を上げることで、色調を視覚的に目立つ色に変化させる処理である。背景処理部15は、予め用意しておいた図2に示すような奥行き感のある立体画像に背景を差し替える処理である。前景背景合成部16は、背景処理部15の出力した背景の上に、前景処理部14の出力した前景を重ねた立体強調画像データ17を出力する処理である。立体強調画像データ17は、三次元ディスプレイに入力すると立体画像を表示するデータであり、両眼用の2視点からの画像からなる。
Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is a schematic block diagram showing a configuration of a stereoscopic image processing apparatus according to an embodiment of the present invention. A stereoscopic
次にこの立体画像処理装置30の動作を説明する。まず、両眼用の画像を撮影できる立体カメラで背景のみを撮影する。立体カメラは、背景のみの立体画像データを立体画像データ11と同じ形式で出力するので、これを立体画像処理装置10の画像データ入力受付部12に入力する。画像データ入力受付部12は、背景のみの立体画像データを受けると、そのまま、これを前景背景分離部13に出力する。前景背景分離部13は、この背景のみの立体画像データを受けると、これを比較用立体画像データとして、そのまま格納する。次に、先ほど撮影した背景と背景が同じなるようにしたまま、対象物を背景の手前に置いて立体カメラにて、目的の画像を撮影する。立体カメラは、撮影結果を立体画像データ11として出力するので、これを立体画像処理装置10の画像データ入力受付部12に入力する。画像データ入力受付部12は、立体画像データ11を受けると、これを各視点について1フレームずつ、前景背景分離部13に出力する。
Next, the operation of the stereoscopic image processing apparatus 30 will be described. First, only the background is photographed with a stereoscopic camera capable of photographing a binocular image. Since the stereoscopic camera outputs stereoscopic image data of only the background in the same format as the
前景背景分離部13は、立体画像データ11を受けると、先に格納した比較用立体画像データと該立体画像データ11とを、各視点のフレームについて、各画素のデータを比較する。データが一致する画素は背景として、データが一致しない画素は、該立体画像データの該当画素のデータを前景として分離する。前景として分離された前景立体画像データは、前景処理部14へ出力され、背景として分離された背景立体画像データは、背景処理部15へ出力される。前景処理部14は、前景立体画像データを受けると、その各画素データの明度および彩度の値を、例えば1.2倍にするなどして、より大きな値に変換する。これにより、前景の各画素は、視覚的に目立つ色となるため、視認性が上がって、立体感が強調される。前景処理部14は、明度および彩度を変換した前景立体画像データを、前景背景合成部16に出力する。
When the foreground /
一方、背景立体画像データを受けた背景処理部15は、予め背景処理部15に登録してあった図2〜図3のような奥行きのある立体画像に差し替えて、これを背景立体画像データとして、前景背景合成部16へ出力する。前景背景合成部16は、背景処理部15から背景立体画像データを、前景処理部14から前景立体画像データを受けると、該前景立体画像データを該背景立体画像データに重ねた立体強調画像データ17を生成して、出力する。出力された立体強調画像データ17を三次元ディスプレイに入力して表示される画像は、前景は色の変換により視認性が上がっており、背景は奥行きのある画像となっているため、三次元ディスプレイにおける合成の際に計算に用いるパラメータを調整することで立体感を強調した画像と比較すると、画像を見る人間の目に負担をかけずに、立体感を強調することができる。
なお、本実施形態の立体画像処理装置10では、動画を1フレームずつ処理するように説明したが、静止画に対しても、これを動画の1フレームとみなして同様の処理を行うことで対応が可能である。
On the other hand, the
The stereoscopic
また、前景背景分離部13は、立体画像データ11と背景のみ立体画像データとを比較することで前景と背景を分離していたが、前景背景分離部13にクロマキーデータを用意しておき、また、入力する立体画像データ11の撮影時の背景をクロマキーデータと一致するクロマキー色にしておき、立体画像データ11の画素がクロマキーデータと一致する場合は背景とみなすクロマキー処理により、前景と背景を分離してもよい。
Further, the foreground /
また、前景処理部14は、色を変換して視認性を上げる色調強調としたが、以下の(1)または(2)のどちらかの処理であってもよい。
(1)視差強調
入力された前景立体画像データの左視点の画像と右視点の画像の視差が大きくなるようにずらす。三次元ディスプレイにて表示すると、これにより、ずれを大きくする前よりも、手前にあるように知覚されるため、立体感が強調される。
(2)拡大
入力された前景立体画像データの画像を拡大する。大きく見えることで、立体感が強調される。
In addition, although the
(1) Parallax enhancement The parallax between the left viewpoint image and the right viewpoint image of the input foreground stereoscopic image data is shifted so as to increase. When displayed on a three-dimensional display, the stereoscopic effect is emphasized because it is perceived as being closer to the front than before the shift is increased.
(2) Enlargement Enlarges the image of the input foreground stereoscopic image data. The three-dimensional effect is emphasized by looking large.
また、背景処理部15は、背景を奥行きのある画像に差し替える差込みとしたが、以下の(a)〜(c)の何れかの処理であってもよい。
(a)ぼかし
入力された背景立体画像データの輪郭をぼかす。ぼかすことで、背景に焦点をあわせづらくなり、前景を目立たせることができる。
(b)コントラスト・明るさ低減
入力された背景のコントラストおよび明度を下げる。背景の色調が目立たなくなることで、前景を強調することができる。
(c)単色化
背景を削除して単色とする。背景を単色として、目立たなくすることで、前景を強調することができる。
Further, the
(A) Blur The outline of the input background stereoscopic image data is blurred. By blurring, it becomes difficult to focus on the background, making the foreground stand out.
(B) Contrast / Brightness Reduction Reduces the contrast and brightness of the input background. The foreground can be emphasized by making the background color inconspicuous.
(C) Monochrome The background is deleted to make a single color. The foreground can be emphasized by making the background a single color and making it inconspicuous.
本実施形態または前景処理部14を前述の(1)または(2)、背景処理部15を前述の(a)〜(c)のいずれかとしたときの、立体感の感じ方の強さについて調べたアンケート結果を図4に示す。図4において、立体画像処理装置による処理前の立体画像と比較して、立体感の強さに変わりがない場合が3点、立体感が強くなっている場合は4点および5点であり、点数が大きいほど立体感が強く感じられたことを示す。また、立体感が処理前より弱くなっている場合は、2点および1点である。図4の表中の各点数に対する数字は、該点数を回答した人数を表し、平均点は、該処理に対して回答された点数の平均を表す。したがって、平均点が高い処理ほど、立体感を強調する効果が高いと言える。アンケートの結果を見ればわかるように、本実施形態の組合せである前景に色調強調、背景に差込みの場合に、最も立体感を強調する効果が高い。
The intensity of how the stereoscopic effect is felt when the present embodiment or
また、本実施形態においては、前景処理部14にて色調強調、背景処理部15にて差込みを行うとしたが、前景処理部14にて色調強調と拡大の処理をする、背景処理部15にてぼかしとコントラスト・明るさ低減の処理をするなど、前景処理部14もしくは背景処理部15にて、単一の処理を行うだけでなく、複数の処理を行うとしてよい。また、前景処理14または背景処理部15のどちらかがなく、前景だけ、もしくは、背景だけに処理を行うとしてもよい。
In this embodiment, the
また、図1における立体画像処理装置10の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより立体画像処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。
Further, a program for realizing the functions of the stereoscopic
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。 The “computer-readable recording medium” refers to a storage device such as a flexible medium, a magneto-optical disk, a portable medium such as a ROM and a CD-ROM, and a hard disk incorporated in a computer system. Furthermore, the “computer-readable recording medium” dynamically holds a program for a short time like a communication line when transmitting a program via a network such as the Internet or a communication line such as a telephone line. In this case, a volatile memory in a computer system serving as a server or a client in that case, and a program that holds a program for a certain period of time are also included. The program may be a program for realizing a part of the functions described above, and may be a program capable of realizing the functions described above in combination with a program already recorded in a computer system.
以上、この発明の実施形態を図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。 The embodiment of the present invention has been described in detail with reference to the drawings. However, the specific configuration is not limited to this embodiment, and includes design and the like within a scope not departing from the gist of the present invention.
10…立体画像処理装置
11…立体画像データ
12…画像データ入力受付部
13…前景背景分離部
14…前景処理部
15…背景処理部
16…前景背景合成部
17…立体強調画像データ
DESCRIPTION OF
Claims (6)
前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部と、
前記前景背景分離部から受けた前景立体画像データに、強調する処理を施して出力する前景処理部と、
前記前景背景分離部から受けた背景立体画像データに、前記前景処理部の出力を重ねた立体画像データを出力する前景背景合成部と
を備えることを特徴とする立体画像処理装置。 An input accepting unit that accepts input of stereoscopic image data composed of images of a plurality of viewpoints, one frame at a time for each viewpoint;
A foreground / background separation unit that separates stereoscopic image data received from the input reception unit into foreground stereoscopic image data and background stereoscopic image data;
A foreground processing unit that performs processing to enhance and output the foreground stereoscopic image data received from the foreground / background separation unit;
A stereoscopic image processing apparatus, comprising: a foreground / background composition unit that outputs stereoscopic image data obtained by superimposing the output of the foreground processing unit on the background stereoscopic image data received from the foreground / background separation unit.
前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部と、
前記前景背景分離部から受けた背景立体画像データに、画像処理を施して出力する背景処理部と、
前記背景処理部の出力に、前記前景背景分離部から受けた前景立体画像データを重ねた立体画像データを出力する前景背景合成部と
を備えることを特徴とする立体画像処理装置。 An input accepting unit that accepts input of stereoscopic image data composed of images of a plurality of viewpoints, one frame at a time for each viewpoint;
A foreground / background separation unit that separates stereoscopic image data received from the input reception unit into foreground stereoscopic image data and background stereoscopic image data;
A background processing unit that performs image processing and outputs the background stereoscopic image data received from the foreground / background separation unit;
A stereoscopic image processing apparatus comprising: a foreground / background composition unit that outputs stereoscopic image data in which the foreground stereoscopic image data received from the foreground / background separation unit is superimposed on an output of the background processing unit.
前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部と、
前記前景背景分離部から受けた前景立体画像データに、強調する処理を施す前景処理部と、
前記前景背景分離部から受けた背景立体画像データに、画像処理を施す背景処理部と、
前記背景処理部から受けた背景立体画像データに、前記前景処理部から受けた前景立体画像データを重ねた立体画像データを出力する前景背景合成部と
を備えることを特徴とする立体画像処理装置。 An input accepting unit that accepts input of stereoscopic image data composed of images of a plurality of viewpoints, one frame at a time for each viewpoint;
A foreground / background separation unit that separates stereoscopic image data received from the input reception unit into foreground stereoscopic image data and background stereoscopic image data;
A foreground processing unit that performs processing for enhancing the foreground stereoscopic image data received from the foreground / background separation unit;
A background processing unit that performs image processing on the background stereoscopic image data received from the foreground / background separation unit;
A stereoscopic image processing apparatus comprising: a foreground / background composition unit that outputs stereoscopic image data obtained by superimposing the foreground stereoscopic image data received from the foreground processing unit on the background stereoscopic image data received from the background processing unit.
複数視点の画像からなる立体画像データの入力を、各視点について1フレームずつ受け付ける入力受付部、
前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部、
前記前景背景分離部から受けた前景立体画像データに、強調する処理を施して出力する前景処理部、
前記前景背景分離部から受けた背景立体画像データに、前記前景処理部の出力を重ねた立体画像データを出力する前景背景合成部
として機能させることを特徴とするプログラム。 Computer
An input receiving unit that receives input of stereoscopic image data composed of images of a plurality of viewpoints, one frame at a time for each viewpoint;
A foreground / background separation unit that separates the stereoscopic image data received from the input reception unit into foreground stereoscopic image data and background stereoscopic image data;
A foreground processing unit for performing processing for emphasizing and outputting the foreground stereoscopic image data received from the foreground / background separation unit;
A program that functions as a foreground / background composition unit that outputs stereoscopic image data obtained by superimposing the output of the foreground processing unit on background stereoscopic image data received from the foreground / background separation unit.
複数視点の画像からなる立体画像データの入力を、各視点について1フレームずつ受け付ける入力受付部、
前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部、
前前記前景背景分離部から受けた背景立体画像データに、画像処理を施して出力する背景処理部、
前記背景処理部の出力に、前記前景背景分離部から受けた前景立体画像データを重ねた立体画像データを出力する前景背景合成部
として機能させることを特徴とするプログラム。 Computer
An input receiving unit that receives input of stereoscopic image data composed of images of a plurality of viewpoints, one frame at a time for each viewpoint;
A foreground / background separation unit that separates the stereoscopic image data received from the input reception unit into foreground stereoscopic image data and background stereoscopic image data;
A background processing unit that performs image processing and outputs the background stereoscopic image data received from the foreground / background separation unit,
A program that causes the output of the background processing unit to function as a foreground / background composition unit that outputs stereoscopic image data obtained by superimposing foreground stereoscopic image data received from the foreground / background separation unit.
複数視点の画像からなる立体画像データの入力を、各視点について1フレームずつ受け付ける入力受付部、
前記入力受付部から受けた立体画像データを前景立体画像データと背景立体画像データに分離する前景背景分離部、
前記前景背景分離部から受けた前景立体画像データに、強調する処理を施す前景処理部、
前記前景背景分離部から受けた背景立体画像データに、画像処理を施す背景処理部、
前記背景処理部から受けた背景立体画像データに、前記前景処理部から受けた前景立体画像データを重ねた立体画像データを出力する前景背景合成部
として機能させることを特徴とするプログラム。
Computer
An input receiving unit that receives input of stereoscopic image data composed of images of a plurality of viewpoints, one frame at a time for each viewpoint;
A foreground / background separation unit that separates the stereoscopic image data received from the input reception unit into foreground stereoscopic image data and background stereoscopic image data;
A foreground processing unit that performs processing for enhancing the foreground stereoscopic image data received from the foreground / background separation unit;
A background processing unit that performs image processing on the background stereoscopic image data received from the foreground / background separation unit;
A program that functions as a foreground / background composition unit that outputs stereoscopic image data obtained by superimposing foreground stereoscopic image data received from the foreground processing unit on background stereoscopic image data received from the background processing unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005298369A JP2007110360A (en) | 2005-10-13 | 2005-10-13 | Stereoscopic image processing apparatus and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005298369A JP2007110360A (en) | 2005-10-13 | 2005-10-13 | Stereoscopic image processing apparatus and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2007110360A true JP2007110360A (en) | 2007-04-26 |
Family
ID=38035865
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005298369A Pending JP2007110360A (en) | 2005-10-13 | 2005-10-13 | Stereoscopic image processing apparatus and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2007110360A (en) |
Cited By (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009021989A (en) * | 2007-06-15 | 2009-01-29 | Fujifilm Corp | Image display apparatus and method |
JP2010206362A (en) * | 2009-03-02 | 2010-09-16 | Sharp Corp | Video processing apparatus, video processing method, and program for executing the same on computer |
JP2010213254A (en) * | 2009-03-06 | 2010-09-24 | Chuka Eikan Kofun Yugenkoshi | Image processing method for three-dimensional display device with multilayer structure |
WO2011118084A1 (en) * | 2010-03-24 | 2011-09-29 | 富士フイルム株式会社 | Image processing device and image processing method |
JP2012015610A (en) * | 2010-06-29 | 2012-01-19 | Fujitsu Semiconductor Ltd | Processing device |
JP2012028964A (en) * | 2010-07-22 | 2012-02-09 | Seiko Epson Corp | Image display device, image supply device, and image processing method |
JP2012028965A (en) * | 2010-07-22 | 2012-02-09 | Seiko Epson Corp | Image display device, image supply device, and image processing method |
WO2012020558A1 (en) * | 2010-08-10 | 2012-02-16 | 株式会社ニコン | Image processing device, image processing method, display device, display method and program |
JP2012039485A (en) * | 2010-08-10 | 2012-02-23 | Nikon Corp | Image processing device, image processing method, and program |
US8135228B2 (en) | 2008-01-22 | 2012-03-13 | Samsung Electronics Co., Ltd. | Apparatus and method for immersion generation |
JP2012070103A (en) * | 2010-09-21 | 2012-04-05 | Olympus Imaging Corp | Imaging device and image communication system |
WO2012056685A1 (en) * | 2010-10-27 | 2012-05-03 | パナソニック株式会社 | 3d image processing device, 3d imaging device, and 3d image processing method |
JP2012099956A (en) * | 2010-10-29 | 2012-05-24 | Toshiba Corp | Video reproduction device and video reproduction method |
JP2012120216A (en) * | 2012-01-18 | 2012-06-21 | Olympus Visual Communications Corp | Three-dimensional video data generating method, three-dimensional video data generating system, and three-dimensional video data generating program |
WO2012131752A1 (en) * | 2011-03-25 | 2012-10-04 | パナソニック株式会社 | Depth information updating device, stereoscopic video generation device, and depth information updating method |
WO2012169217A1 (en) * | 2011-06-10 | 2012-12-13 | シャープ株式会社 | Image generation device, image display device, television reception device, image generation method, and computer program |
JP2013042301A (en) * | 2011-08-12 | 2013-02-28 | Casio Comput Co Ltd | Image processor, image processing method, and program |
KR101366596B1 (en) | 2007-08-03 | 2014-03-14 | 삼성전자주식회사 | Method and system of immersive generation for two-dimension still image and factor dominating method, image content analysis method and scaling parameter prediction method for generating immersive |
JP2014191629A (en) * | 2013-03-27 | 2014-10-06 | Kyocera Corp | Display device and screen control method in the same device |
WO2020149142A1 (en) * | 2019-01-15 | 2020-07-23 | 富士フイルム株式会社 | Stereoscopic image display body |
WO2020149143A1 (en) * | 2019-01-15 | 2020-07-23 | 富士フイルム株式会社 | Stereoscopic image display body |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63157579A (en) * | 1986-12-22 | 1988-06-30 | Nippon Telegr & Teleph Corp <Ntt> | Pseudo three-dimensional image pickup device |
JPH089422A (en) * | 1994-06-17 | 1996-01-12 | Sony Corp | Stereoscopic image output device |
JP2000209614A (en) * | 1999-01-14 | 2000-07-28 | Sony Corp | Stereoscopic video system |
JP2000512833A (en) * | 1997-04-18 | 2000-09-26 | エイ・ティ・アンド・ティ・コーポレーション | Improving depth perception by integrating monocular cues |
JP2001238231A (en) * | 2000-02-24 | 2001-08-31 | Sharp Corp | Device and method for adding stereoscopic vision effect |
JP2002099910A (en) * | 2000-09-21 | 2002-04-05 | Toyota Motor Corp | Image processing device, image processing method, and storage medium |
JP2003209858A (en) * | 2002-01-17 | 2003-07-25 | Canon Inc | Stereoscopic image generating method and recording medium |
JP2004260591A (en) * | 2003-02-26 | 2004-09-16 | Amita Technology Kk | Stereoscopic image display device |
JP2005250978A (en) * | 2004-03-05 | 2005-09-15 | Fuji Xerox Co Ltd | Three-dimensional picture processor and three-dimensional picture processing method |
-
2005
- 2005-10-13 JP JP2005298369A patent/JP2007110360A/en active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63157579A (en) * | 1986-12-22 | 1988-06-30 | Nippon Telegr & Teleph Corp <Ntt> | Pseudo three-dimensional image pickup device |
JPH089422A (en) * | 1994-06-17 | 1996-01-12 | Sony Corp | Stereoscopic image output device |
JP2000512833A (en) * | 1997-04-18 | 2000-09-26 | エイ・ティ・アンド・ティ・コーポレーション | Improving depth perception by integrating monocular cues |
JP2000209614A (en) * | 1999-01-14 | 2000-07-28 | Sony Corp | Stereoscopic video system |
JP2001238231A (en) * | 2000-02-24 | 2001-08-31 | Sharp Corp | Device and method for adding stereoscopic vision effect |
JP2002099910A (en) * | 2000-09-21 | 2002-04-05 | Toyota Motor Corp | Image processing device, image processing method, and storage medium |
JP2003209858A (en) * | 2002-01-17 | 2003-07-25 | Canon Inc | Stereoscopic image generating method and recording medium |
JP2004260591A (en) * | 2003-02-26 | 2004-09-16 | Amita Technology Kk | Stereoscopic image display device |
JP2005250978A (en) * | 2004-03-05 | 2005-09-15 | Fuji Xerox Co Ltd | Three-dimensional picture processor and three-dimensional picture processing method |
Cited By (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009021989A (en) * | 2007-06-15 | 2009-01-29 | Fujifilm Corp | Image display apparatus and method |
KR101366596B1 (en) | 2007-08-03 | 2014-03-14 | 삼성전자주식회사 | Method and system of immersive generation for two-dimension still image and factor dominating method, image content analysis method and scaling parameter prediction method for generating immersive |
US8135228B2 (en) | 2008-01-22 | 2012-03-13 | Samsung Electronics Co., Ltd. | Apparatus and method for immersion generation |
JP2010206362A (en) * | 2009-03-02 | 2010-09-16 | Sharp Corp | Video processing apparatus, video processing method, and program for executing the same on computer |
JP2010213254A (en) * | 2009-03-06 | 2010-09-24 | Chuka Eikan Kofun Yugenkoshi | Image processing method for three-dimensional display device with multilayer structure |
WO2011118084A1 (en) * | 2010-03-24 | 2011-09-29 | 富士フイルム株式会社 | Image processing device and image processing method |
JP2013138442A (en) * | 2010-03-24 | 2013-07-11 | Fujifilm Corp | Image processor and image processing method |
JP5186614B2 (en) * | 2010-03-24 | 2013-04-17 | 富士フイルム株式会社 | Image processing apparatus and image processing method |
CN102812712A (en) * | 2010-03-24 | 2012-12-05 | 富士胶片株式会社 | Image processing device and image processing method |
CN102812712B (en) * | 2010-03-24 | 2015-04-08 | 富士胶片株式会社 | Image processing device and image processing method |
US8749660B2 (en) | 2010-03-24 | 2014-06-10 | Fujifilm Corporation | Image recording apparatus and image processing method |
US8885025B2 (en) | 2010-06-29 | 2014-11-11 | Fujitsu Semiconductor Limited | Processor |
JP2012015610A (en) * | 2010-06-29 | 2012-01-19 | Fujitsu Semiconductor Ltd | Processing device |
JP2012028964A (en) * | 2010-07-22 | 2012-02-09 | Seiko Epson Corp | Image display device, image supply device, and image processing method |
JP2012028965A (en) * | 2010-07-22 | 2012-02-09 | Seiko Epson Corp | Image display device, image supply device, and image processing method |
US10462455B2 (en) | 2010-08-10 | 2019-10-29 | Nikon Corporation | Display apparatus, display method, and computer readable recording medium |
JP2012039485A (en) * | 2010-08-10 | 2012-02-23 | Nikon Corp | Image processing device, image processing method, and program |
US9488841B2 (en) | 2010-08-10 | 2016-11-08 | Nikon Corporation | Image processing apparatus, image processing method, display apparatus, display method, and computer readable recording medium |
WO2012020558A1 (en) * | 2010-08-10 | 2012-02-16 | 株式会社ニコン | Image processing device, image processing method, display device, display method and program |
JP2012070103A (en) * | 2010-09-21 | 2012-04-05 | Olympus Imaging Corp | Imaging device and image communication system |
JP5942195B2 (en) * | 2010-10-27 | 2016-06-29 | パナソニックIpマネジメント株式会社 | 3D image processing apparatus, 3D imaging apparatus, and 3D image processing method |
US9338426B2 (en) | 2010-10-27 | 2016-05-10 | Panasonic Intellectual Property Management Co., Ltd. | Three-dimensional image processing apparatus, three-dimensional imaging apparatus, and three-dimensional image processing method |
WO2012056685A1 (en) * | 2010-10-27 | 2012-05-03 | パナソニック株式会社 | 3d image processing device, 3d imaging device, and 3d image processing method |
JP2012099956A (en) * | 2010-10-29 | 2012-05-24 | Toshiba Corp | Video reproduction device and video reproduction method |
WO2012131752A1 (en) * | 2011-03-25 | 2012-10-04 | パナソニック株式会社 | Depth information updating device, stereoscopic video generation device, and depth information updating method |
WO2012169217A1 (en) * | 2011-06-10 | 2012-12-13 | シャープ株式会社 | Image generation device, image display device, television reception device, image generation method, and computer program |
JP2013004989A (en) * | 2011-06-10 | 2013-01-07 | Sharp Corp | Video generating device, video display device, television image receiving device, video generating method and computer program |
CN102957927A (en) * | 2011-08-12 | 2013-03-06 | 卡西欧计算机株式会社 | Image processing apparatus, image processing method |
JP2013042301A (en) * | 2011-08-12 | 2013-02-28 | Casio Comput Co Ltd | Image processor, image processing method, and program |
JP2012120216A (en) * | 2012-01-18 | 2012-06-21 | Olympus Visual Communications Corp | Three-dimensional video data generating method, three-dimensional video data generating system, and three-dimensional video data generating program |
JP2014191629A (en) * | 2013-03-27 | 2014-10-06 | Kyocera Corp | Display device and screen control method in the same device |
WO2020149142A1 (en) * | 2019-01-15 | 2020-07-23 | 富士フイルム株式会社 | Stereoscopic image display body |
WO2020149143A1 (en) * | 2019-01-15 | 2020-07-23 | 富士フイルム株式会社 | Stereoscopic image display body |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2007110360A (en) | Stereoscopic image processing apparatus and program | |
JP4098235B2 (en) | Stereoscopic image processing apparatus and method | |
Terzić et al. | Methods for reducing visual discomfort in stereoscopic 3D: A review | |
US9014414B2 (en) | Information processing apparatus and information processing method for processing image information at an arbitrary viewpoint in a physical space or virtual space | |
EP1967016B1 (en) | 3d image display method and apparatus | |
EP2197217A1 (en) | Image based 3D video format | |
EP2582143A2 (en) | Method and device for converting three-dimensional image using depth map information | |
CN105894567B (en) | Scaling pixel depth values of user-controlled virtual objects in a three-dimensional scene | |
JP2011182399A (en) | Method and device for cutting image | |
CA2627999A1 (en) | Generation of a depth map from a monoscopic color image for rendering stereoscopic still and video images | |
US20130188862A1 (en) | Method and arrangement for censoring content in images | |
JP2011024151A (en) | Device and method for displaying image, and program | |
US8982187B2 (en) | System and method of rendering stereoscopic images | |
US20110109723A1 (en) | Motion pictures | |
JP2013042301A (en) | Image processor, image processing method, and program | |
JP2010206362A (en) | Video processing apparatus, video processing method, and program for executing the same on computer | |
JPH09504131A (en) | Image processing system for handling depth information | |
KR101212223B1 (en) | Device taking a picture and method to generating the image with depth information | |
Ideses et al. | New methods to produce high quality color anaglyphs for 3-D visualization | |
JP2005018529A (en) | Image processor | |
US7043074B1 (en) | Method and apparatus for embedding three dimensional information into two-dimensional images | |
KR101251049B1 (en) | Stereoscopic 3d image system | |
JP2010226391A (en) | Image processing unit, program, and method of processing image | |
KR20190053565A (en) | Live stitching method using stitching device | |
JP2014022867A (en) | Image processing device, method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20071219 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100121 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100126 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100318 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100406 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100604 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20100713 |