JP2017152764A - Display device, image processing apparatus, and display method - Google Patents
Display device, image processing apparatus, and display method Download PDFInfo
- Publication number
- JP2017152764A JP2017152764A JP2016030674A JP2016030674A JP2017152764A JP 2017152764 A JP2017152764 A JP 2017152764A JP 2016030674 A JP2016030674 A JP 2016030674A JP 2016030674 A JP2016030674 A JP 2016030674A JP 2017152764 A JP2017152764 A JP 2017152764A
- Authority
- JP
- Japan
- Prior art keywords
- image
- eye
- unit
- image data
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、表示装置、画像処理装置、及び、表示方法に関する。 The present invention relates to a display device, an image processing device, and a display method.
従来、立体画像を表示する表示装置が知られている。立体視用の画像の一部を拡大すると、拡大部分の視差が拡大し、拡大後に正常な立体視ができなくなる可能性があることが知られている（例えば、特許文献１参照）。特許文献１に開示の立体映像処理装置は、表示映像内の一部の領域である第１の領域が指定された場合に、指定された第１の領域を含み、視差量が所定の範囲内となる領域を拡大表示領域として選択して拡大画像を表示する。第１の領域そのものを拡大表示領域とせず、視差量が所定の範囲内となる領域とすることで、立体視を正常に行うようにしている。
Conventionally, display devices that display stereoscopic images are known. It is known that when a part of an image for stereoscopic viewing is enlarged, the parallax of the enlarged portion is enlarged, and normal stereoscopic viewing may not be possible after the enlargement (see, for example, Patent Document 1). The stereoscopic video processing device disclosed in
特許文献１に開示の立体映像処理装置は、指定された領域に基づき拡大表示領域を選択するために複雑な処理を必要とした。また、選択された拡大表示領域が、指定された第１の領域と乖離する可能性があり、ユーザーの違和感を招く可能性があった。
本発明は、上述した事情に鑑みてなされたものであり、立体画像を部分的に拡大して表示する処理を、効率よく、ユーザーの違和感を招かないように実行できるようにすることを目的とする。
The stereoscopic video processing apparatus disclosed in
The present invention has been made in view of the above-described circumstances, and an object thereof is to enable the process of partially enlarging and displaying a stereoscopic image to be executed efficiently and without causing the user to feel uncomfortable. To do.
上記目的を達成するために、本発明の表示装置は、立体画像を構成する左目用画像及び右目用画像を表示する表示部と、前記表示部により表示される立体画像に対する領域の選択を受け付ける受け付け部と、前記左目用画像及び前記右目用画像から前記受け付け部で受け付けた選択に係る領域に対応する画像を抽出し、抽出した画像を拡大して、所定の画像に重畳する処理部と、前記処理部により重畳された画像を前記表示部に表示させる表示制御部と、を備えることを特徴とする。
本発明によれば、選択された領域に対応する画像を左目用画像及び右目用画像から抽出し、拡大し、所定の画像に重畳して表示する。これにより、立体画像を部分的に拡大して表示する処理を、効率よく、ユーザーの違和感を招かないように実行できる。
In order to achieve the above object, a display device according to the present invention receives a left-eye image and a right-eye image constituting a stereoscopic image, and accepts selection of a region for the stereoscopic image displayed by the display unit. A processing unit that extracts an image corresponding to a region related to the selection received by the receiving unit from the left-eye image and the right-eye image, enlarges the extracted image, and superimposes the image on a predetermined image; A display control unit that displays the image superimposed by the processing unit on the display unit.
According to the present invention, an image corresponding to the selected region is extracted from the left-eye image and the right-eye image, enlarged, and superimposed on a predetermined image for display. As a result, the process of partially enlarging and displaying the stereoscopic image can be executed efficiently and without causing the user to feel uncomfortable.
また、本発明は、上記表示装置において、前記処理部は、前記左目用画像及び前記右目用画像から抽出した画像を、前記所定の画像としての前記左目用画像に重畳することを特徴とする。
本発明によれば、選択された領域に対応する画像を、左目用画像に重畳して表示することができる。左目用画像及び右目用画像はいわゆる平面画像であるため、選択された領域を拡大する場合に正常な立体視ができなくなる懸念がない。このため、立体画像を部分的に拡大して表示する処理を、効率よく実行できる。
In the display device according to the present invention, the processing unit superimposes the image extracted from the left-eye image and the right-eye image on the left-eye image as the predetermined image.
According to the present invention, an image corresponding to a selected region can be displayed superimposed on the left-eye image. Since the left-eye image and the right-eye image are so-called planar images, there is no concern that normal stereoscopic viewing cannot be performed when the selected area is enlarged. For this reason, the process which expands and displays a stereo image partially can be performed efficiently.
また、本発明は、上記表示装置において、前記処理部は、前記左目用画像及び前記右目用画像から抽出した画像を、前記所定の画像としての前記右目用画像に重畳することを特徴とする。
本発明によれば、選択された領域に対応する画像を、右目用画像に重畳して表示することができる。左目用画像及び右目用画像はいわゆる平面画像であるため、選択された領域を拡大する場合に正常な立体視ができなくなる懸念がない。このため、立体画像を部分的に拡大して表示する処理を、効率よく実行できる。
In the display device according to the present invention, the processing unit superimposes an image extracted from the left-eye image and the right-eye image on the right-eye image as the predetermined image.
According to the present invention, an image corresponding to a selected region can be displayed superimposed on the right-eye image. Since the left-eye image and the right-eye image are so-called planar images, there is no concern that normal stereoscopic viewing cannot be performed when the selected area is enlarged. For this reason, the process which expands and displays a stereo image partially can be performed efficiently.
また、本発明は、上記表示装置において、前記処理部は、前記左目用画像から抽出した画像を、前記所定の画像としての前記左目用画像に重畳し、前記右目用画像から抽出した画像を、前記所定の画像としての前記右目用画像に重畳することを特徴とする。
本発明によれば、選択された領域に対応する画像を、左目用画像又は右目用画像のうち対応する画像に重畳するので、立体画像を部分的に拡大して表示する処理を、効率よく実行できる。
In the display device according to the present invention, the processing unit superimposes the image extracted from the left-eye image on the left-eye image as the predetermined image, and extracts the image extracted from the right-eye image. The image is superimposed on the right-eye image as the predetermined image.
According to the present invention, the image corresponding to the selected region is superimposed on the corresponding image of the left-eye image or the right-eye image, so that the process of partially enlarging and displaying the stereoscopic image is efficiently executed. it can.
また、本発明は、上記表示装置において、前記処理部は、前記左目用画像において前記受け付け部で受け付けた選択に係る領域を拡大した変換左目用画像、及び前記右目用画像から抽出した画像を前記所定の画像としての前記左目用画像に重畳した変換右目用画像を生成する、ことを特徴とする。
本発明によれば、立体画像を部分的に拡大して表示する処理を、効率よく実行できる。
Further, in the display device according to the present invention, the processing unit may include a converted left-eye image obtained by enlarging a selection area received by the receiving unit in the left-eye image, and an image extracted from the right-eye image. A converted right-eye image superimposed on the left-eye image as a predetermined image is generated.
According to the present invention, it is possible to efficiently execute a process of partially enlarging and displaying a stereoscopic image.
また、本発明は、上記表示装置において、前記処理部は、前記左目用画像及び前記右目用画像のそれぞれから抽出した画像の周囲を枠で囲んだ画像を前記所定の画像に重畳する、ことを特徴とする。
本発明によれば、選択された領域の画像を、拡大して枠で囲んだ状態で、見易く表示できる。
In the display device according to the aspect of the invention, the processing unit may superimpose an image surrounded by a frame around an image extracted from each of the left-eye image and the right-eye image on the predetermined image. Features.
According to the present invention, an image of a selected area can be displayed in an easy-to-see manner in an enlarged state surrounded by a frame.
また、本発明は、上記表示装置において、前記処理部は、前記左目用画像及び前記右目用画像のそれぞれから抽出した画像と前記所定の画像との境界をぼかすぼかし処理を行う、ことを特徴とする。
本発明によれば、拡大された画像と所定の画像とを重畳した場合の境界をぼかすことで、見易く表示できる。
Further, the present invention is characterized in that, in the display device, the processing unit performs a blurring process for blurring a boundary between an image extracted from each of the left-eye image and the right-eye image and the predetermined image. To do.
According to the present invention, it is possible to display easily by blurring the boundary when the enlarged image and the predetermined image are superimposed.
また、本発明は、上記表示装置において、前記受け付け部は、前記表示部が前記立体画像を表示する表示面に対する位置指示操作を検出して、前記立体画像に対する領域の選択を受け付ける、ことを特徴とする。
本発明によれば、位置指示操作に対応して、画像の領域を選択できる。
In the display device according to the present invention, the reception unit detects a position instruction operation on a display surface on which the display unit displays the stereoscopic image, and receives selection of an area for the stereoscopic image. And
According to the present invention, an image area can be selected in response to a position instruction operation.
本発明の画像処理装置は、表示部が表示する立体画像に対して領域の選択が行われた場合に、前記立体画像を構成する左目用画像及び右目用画像から、選択された領域に対応する画像を抽出して拡大する画像処理部と、前記画像処理部により拡大した画像を、所定の画像に重畳する画像重畳部と、を備え、前記画像重畳部で重畳した画像を、前記表示部が表示する画像として出力する、ことを特徴とする。
本発明によれば、選択された領域に対応する画像を左目用画像及び右目用画像から抽出し、拡大し、所定の画像に重畳し、この重畳した画像が表示される。このため、立体画像を部分的に拡大して表示する処理を、効率よく、ユーザーの違和感を招かないように実行できる。
The image processing apparatus according to the present invention corresponds to a region selected from a left-eye image and a right-eye image constituting the stereoscopic image when the region is selected for the stereoscopic image displayed by the display unit. An image processing unit that extracts and enlarges an image, and an image superimposing unit that superimposes the image enlarged by the image processing unit on a predetermined image, and the display unit superimposes the image superimposed on the image superimposing unit. It outputs as a picture to display.
According to the present invention, an image corresponding to the selected region is extracted from the left-eye image and the right-eye image, enlarged, superimposed on a predetermined image, and the superimposed image is displayed. For this reason, the process of partially enlarging and displaying the stereoscopic image can be executed efficiently and without causing the user to feel uncomfortable.
本発明の表示方法は、表示部が表示する立体画像に対する領域の選択を受け付けるステップと、前記立体画像を構成する左目用画像及び右目用画像から、前記受け付けるテップで受け付けた選択に係る領域に対応する画像を抽出するステップと、前記抽出するステップで抽出された画像を拡大して所定の画像に重畳するステップと、前記重畳するステップで重畳された画像を前記表示部に表示させるステップと、を有することを特徴とする。
本発明によれば、選択された領域に対応する画像を左目用画像及び右目用画像から抽出し、拡大し、所定の画像に重畳して表示する。これにより、立体画像を部分的に拡大して表示する処理を、効率よく、ユーザーの違和感を招かないような態様で実行できる。
The display method of the present invention corresponds to a step of receiving a selection of a region for a stereoscopic image displayed by the display unit, and a region related to the selection received in the received step from the left-eye image and the right-eye image constituting the stereoscopic image. Extracting the image to be performed, enlarging the image extracted in the extracting step and superimposing the image on a predetermined image, and displaying the image superimposed in the superimposing step on the display unit. It is characterized by having.
According to the present invention, an image corresponding to the selected region is extracted from the left-eye image and the right-eye image, enlarged, and superimposed on a predetermined image for display. Thereby, the process which expands and displays a three-dimensional image efficiently can be performed in the aspect which does not cause a user's uncomfortable feeling efficiently.
以下、図面を参照して本発明の実施形態について説明する。
図１は、表示システム１の構成を示す図である。
表示システム１は、一対の左目用画像と右目用画像とを交互に投射対象に投射するプロジェクター（表示装置）１００と、プロジェクター１００を見る観察者に装着されるメガネ型の立体視装置５０とを備える。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a diagram showing a configuration of the
The
プロジェクター１００が投射対象に交互に投射する立体画像は、視差のある一対の左目用画像のフレームと、右目用画像のフレームとで構成される。プロジェクター１００は、左目用画像のフレームと右目用画像のフレームとを十分に速い速度で切り替えて、交互に投射対象に投射する時分割方式で立体画像を投射対象に投射する。プロジェクター１００により投射対象に投射された画像（以下、投射画像という）を見る人（観察者）は、立体視装置５０を装着して、投射画像を観察する。立体視装置５０は、投射対象に投射される画像が立体画像として視認されるようにする装置である。本実施形態の立体視装置５０は、左右の目に対応して設けられた一対のシャッターを、プロジェクター１００から入力されるシャッター制御信号によって開閉制御するアクティブシャッター方式の装置とする。立体視装置５０が備える左右のシャッターの動作により、立体視装置５０を装着した観察者の左目には左目用画像だけが見え、右目には右目用画像だけが見える。
The stereoscopic image that the
プロジェクター１００は、画像信号の供給元である画像供給装置２００に接続される。プロジェクター１００は、画像供給装置２００から供給される画像信号から取り出した画像データ、又は後述する記憶部１５７に記憶された画像データに基づく画像をスクリーンＳＣに投射する。プロジェクター１００の設置状態は、スクリーンＳＣの前方に床置きした床置き設置としてもよいし、又は天井から吊り下げた天吊り設置としてもよい。なお、床置き設置の場合には、床に設置した台の上にプロジェクター１００を置く、台置き設置としてもよい。また、投射対象は、建物や物体など、一様に平らではない物体であってもよいし、スクリーンＳＣや、建物の壁面等の平らな投射面を有するものであってもよい。本実施形態では平面のスクリーンＳＣ（表示面）に投射する場合を例示する。
The
画像供給装置２００には、ビデオ再生装置、ＤＶＤ（Digital Versatile Disk）再生装置、テレビチューナー装置、ＣＡＴＶ（Cable television）のセットトップボックス、ビデオゲーム装置等の映像出力装置、パーソナルコンピューター等を用いることができる。
The
プロジェクター１００は、画像供給装置２００に接続するインターフェースとして、画像インターフェース部（以下、インターフェースをＩ／Ｆと略記する）１４１を備える。
画像Ｉ／Ｆ部１４１は、ケーブルを接続するコネクター及びＩ／Ｆ回路（いずれも図示略）を備え、ケーブルを介して接続された画像供給装置２００から供給される所定の伝送フォーマットの画像信号を入力する。入力される画像信号のフォーマットは、例えば、ＨＤＭＩ（登録商標）規格に準拠したサイドバイサイド（Side-by-Side Half）方式、トップアンドボトム（Top-and-Bottom）方式、フレームパッキング（Frame packing）方式などである。解像度は、例えば、７２０p，１０８０i，１０８０ｐ等である。プロジェクター１００は、勿論、他のフォーマットを処理し、表示することも可能である。
画像Ｉ／Ｆ部１４１は、入力された画像信号から画像データや、当該画像データのフォーマット情報、垂直同期信号、水平同期信号等の情報（以下、画像情報という）を取り出し、取り出した画像データと、画像情報とを画像分離部１４３に出力する。
The
The image I /
The image I /
プロジェクター１００は、光学的な画像の形成を行い、スクリーンＳＣに画像を投射（表示）する表示部１１０を備える。表示部１１０は、光源としての光源部１１１、光変調装置１１２及び投射光学系１１３を備える。
The
光源部１１１は、キセノンランプ、超高圧水銀ランプ、ＬＥＤ（Light Emitting Diode）又はレーザー光源等の光源を備える。また、光源部１１１は、光源が発した光を光変調装置１１２に導くリフレクター及び補助リフレクターを備えていてもよい。さらに、光源部１１１は、投射光の光学特性を高めるためのレンズ群、偏光板、又は光源が発した光の光量を光変調装置１１２に至る経路上で低減させる調光素子等（いずれも図示略）を備えていてもよい。
The
光源部１１１は、光源駆動部１２１により駆動される。光源駆動部１２１は、内部バス１６０に接続される。光源駆動部１２１は、制御部１５０の制御に従って、光源部１１１の光源を点灯及び消灯させる。
The
光変調装置１１２は、例えばＲＧＢの三原色に対応した３枚の液晶パネルを備える。光源部１１１が発する光はＲＧＢの３色の色光に分離され、対応する液晶パネルに入射される。３枚の液晶パネルは、透過型の液晶パネルであり、透過する光を変調して画像光を生成する。各液晶パネルを通過して変調された画像光は、クロスダイクロイックプリズム等の合成光学系によって合成され、投射光学系１１３に射出される。
The
光変調装置１１２には、光変調装置１１２の液晶パネルを駆動する光変調装置駆動部１２２が接続される。光変調装置駆動部１２２は、内部バス１６０に接続される。
光変調装置駆動部１２２は、画像重畳部１４９から入力される画像データに基づいてＲ，Ｇ，Ｂの表示画像信号をそれぞれに生成する。光変調装置駆動部１２２は、生成したＲ，Ｇ，Ｂの表示画像信号に基づいて、光変調装置１１２の対応する液晶パネルを駆動し、各液晶パネルに画像を描画する。
The
The light
投射光学系１１３は、光変調装置１１２により変調された画像光をスクリーンＳＣ方向に投射して、スクリーンＳＣ上に結像させるレンズ群を備える。また、投射光学系１１３は、スクリーンＳＣの投射画像の拡大・縮小及び焦点の調整を行うズーム機構、フォーカスの調整を行うフォーカス調整機構を備えていてもよい。
The projection
プロジェクター１００は、無線通信部（送信部）１２５を備える。無線通信部１２５は、図示しないアンテナやＲＦ（Radio Frequency）回路等を備え、制御部１５０の制御の下、外部の装置との間で無線通信を実行する。無線通信部１２５は、内部バス１６０を介して制御部１５０に接続される。無線通信部１２５の無線通信方式は、例えば無線ＬＡＮ（Local Area Network）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＵＷＢ（Ultra Wide Band)、赤外線通信等の近距離無線通信方式、又は携帯電話回線を利用した無線通信方式を採用できる。
The
プロジェクター１００は、操作パネル１２６及び入力処理部１２７を備える。入力処理部１２７は、内部バス１６０に接続される。
ユーザーインターフェースとして機能する操作パネル１２６は、各種の操作キーや、液晶パネルにて構成された表示画面を備える。入力処理部１２７は、操作パネル１２６に表示された操作キーが操作されると、操作されたキーに対応したデータを制御部１５０に出力する。また、入力処理部１２７は、制御部１５０の制御に従って、操作パネル１２６に各種画面を表示させる。
また、操作パネル１２６には、操作パネル１２６への接触を検出するタッチセンサーが重ね合わされて一体形成される。入力処理部１２７は、ユーザーの指等が接触した操作パネル１２６の位置を入力位置として検出し、検出した入力位置に対応したデータを制御部１５０に出力する。
The
The
The
また、プロジェクター１００は、ユーザーが使用するリモコン５から送信される赤外線信号を受光するリモコン受光部１２８を備える。リモコン受光部１２８は、入力処理部１２７に接続される。
リモコン受光部１２８は、リモコン５から送信される赤外線信号を受光する。入力処理部１２７は、リモコン受光部１２８が受光した赤外線信号をデコードして、リモコン５における操作内容を示すデータを生成し、制御部１５０に出力する。
入力処理部１２７は、操作パネル１２６及びリモコン５による操作を受け付けるので、本発明の「受け付け部」に相当する。この受け付け部には、操作パネル１２６及びリモコン５を含んでもよい。
The
The remote control
The
プロジェクター１００は、スクリーンＳＣに投射された投射画像に対する指示体７０の操作（位置指示操作）より指示される操作位置を検出する指示体検出部１３０を備える。指示体検出部１３０は、撮影部１３１と位置検出部１３２とを備える。
指示体７０は、例えば、棒状の軸部を有するペン型のデバイスであり、プロジェクター１００を操作するユーザーが手に持って使用する。本実施形態では、指示体７０としてペン型のデバイスを使用する場合を例に挙げて説明するが、指示体７０は、ペン型のデバイスに限定されない。指示体７０には、例えば、指示棒（図示略）等の棒状の指示体であってもよいし、操作者の手や指を指示体として検出することもできる。
The
The
撮影部１３１は、スクリーンＳＣを撮影するデジタルカメラであり、撮影画像データを生成する。撮影部１３１の撮影範囲すなわち画角は、スクリーンＳＣの全体又はスクリーンＳＣを含む範囲であることが好ましい。
撮影部１３１は、可視光による撮影を行うものに限定されず、赤外光を撮影するカメラであってもよい。指示体７０に、赤外線を発光する発光部を設けて、発光部の発光を撮影部１３１により撮影し、指示体７０の操作位置を検出する構成であってもよい。
The
The photographing
位置検出部１３２は、指示体７０の操作により指示される操作位置を検出する。位置検出部１３２は、撮影部１３１の撮影画像データを解析して、撮影画像から指示体７０の画像を検出する。撮影画像に指示体７０の画像が含まれる場合、位置検出部１３２は、指示体７０の先端の位置を検出して、検出した位置の座標を算出する。位置検出部１３２が算出する座標は、撮影画像データ上での指示体７０の操作位置を示す座標である。位置検出部１３２は、検出した撮影画像データ上での操作位置を示す座標を制御部１５０に出力する。
指示体検出部１３０は、指示体７０による操作を受け付けるので、本発明の「受け付け部」に相当する。また、後述する描画制御部１５３も「受け付け部」に相当する。
The
The
プロジェクター１００は、シャッター制御部１３５を備える。シャッター制御部１３５は、後述する左目用画像と右目用画像との切り替わりのタイミングを示すタイミング信号を画像処理部１４５から入力する。シャッター制御部１３５は、タイミング信号に基づいて、立体視装置５０に設けられた左右一対のシャッターを開閉させるシャッター制御信号を生成し、生成したシャッター制御信号を無線で立体視装置５０に送信する。
立体視装置５０は、シャッター制御信号を無線で受信する無線受信部（図史略）を備え、受信したシャッター制御信号に基づいて、左右の目に対応する一対のシャッターの開閉動作を交互に行う。
The
The
プロジェクター１００は、画像処理系を備える。画像処理系は、プロジェクター１００の全体を統括的に制御する制御部１５０を中心に構成される。画像処理系は、制御部１５０の他に、画像分離部１４３、画像処理部１４５、フレームメモリー１４７、画像重畳部１４９及び記憶部１５７を備える。フレームメモリー１４７は、左目用フレームメモリー（以下、左目用ＦＭと表記する）１４７１と、右目用フレームメモリー（以下、右目用ＦＭと表記する）１４７２とを備える。制御部１５０、画像分離部１４３、画像処理部１４５、画像重畳部１４９及び記憶部１５７は、内部バス１６０に接続される。
画像処理部１４５、左目用ＦＭ１４７１、右目用ＦＭ１４７２及び画像重畳部１４９は、画像処理装置３００に相当する。画像処理装置３００は、本発明の「処理部」及び「画像処理装置」に相当し、制御部１５０は表示制御部に相当する。
The
The
画像分離部１４３には、画像Ｉ／Ｆ部１４１から画像データ及び画像情報が入力される。
画像分離部１４３は、入力された画像情報に基づいて、画像データが立体視用の３Ｄ画像データであるか否かを判定する。画像分離部１４３は、画像データが３Ｄ画像データである場合には、画像データの画像フォーマットを判定する。画像供給装置２００から送信される画像信号には、様々な画像フォーマットが存在する。例えば、１フレーム期間内で左目用画像データの後に右目用画像データを送出するフレームパッキング方式や、１水平期間内で左目用画像データの１ラインの後に右目用画像データの１ラインを送出するサイドバイサイド方式等が存在する。さらに、各画像フォーマットの中でも、映像のサイズや走査方式（インターレース／プログレッシブ）等が種々存在する。
画像分離部１４３は、画像データが３Ｄ画像データである場合には、画像データに対しスケーリング処理やＩＰ（Interlace／Progressive）変換処理等の処理を施す。画像分離部１４３は、画像データに変換処理を施して、１フレームサイズの左目用画像データと、１フレームサイズの右目用画像データとを生成する。画像分離部１４３は、生成した左目用画像データ及び右目用画像データと、画像情報とを画像処理部１４５に出力する。
Image data and image information are input from the image I /
The
When the image data is 3D image data, the
画像処理部１４５は、画像分離部１４３から入力される左目用画像データを、左目用ＦＭ１４７１又は右目用ＦＭ１４７２に書き込み、右目用画像データを、右目用ＦＭ１４７２に書き込む。画像処理部１４５は、書き込んだ画像データに対して画像処理を実行する。画像処理部１４５は、処理後の画像データをフレームメモリー１４７から読み出して、画像重畳部１４９に出力する。
画像処理部１４５が実行する処理は、例えば、解像度変換処理、デジタルズーム処理、色調補正処理、輝度補正処理、台形歪み補正処理等である。画像処理部１４５は、制御部１５０により指定された処理を実行し、必要に応じて、制御部１５０から入力されるパラメーターを使用して処理を行う。また、上記の処理のうち複数の処理を組み合わせて実行することも勿論可能である。
The
The processing executed by the
また、画像処理部１４５には、画像データの一部を拡大させる部分拡大の指示と、部分拡大させる範囲を指定する範囲指定情報と、部分拡大させる範囲の拡大率を指定する情報（以下、拡大率指定情報という）とが制御部１５０から入力される。画像処理部１４５は、これらの指示や情報が入力されると、左目用ＦＭ１４７１及び右目用ＦＭ１４７２のいずれか一方から、範囲指定情報により指定された範囲の画像データを切り出す。画像処理部１４５は、切り出した画像データを、拡大率指定情報により指定された拡大率で拡大させる。
The
記憶部１５７は、フラッシュメモリー、ＥＥＰＲＯＭ等の不揮発性のメモリーにより構成される。記憶部１５７は、制御部１５０が処理するデータや制御部１５０が実行する制御プログラムを不揮発的に記憶する。また、記憶部１５７は、画像処理部１４５が実行する各種処理の設定値や、制御部１５０が参照するテーブルを記憶する。さらに、記憶部１５７は、後述するキャリブレーション制御部１５２がキャリブレーションに使用するキャリブレーション画像を記憶する。
また、記憶部１５７に外部から供給される画像データを記憶させておくこともできる。記憶部１５７に記憶させた画像データの表示要求を操作パネル１２６又はリモコン５により受け付けると、制御部１５０は、記憶部１５７から表示要求のあった画像データを読み出し、画像処理部１４５に出力する。
The
In addition, image data supplied from the outside can be stored in the
制御部１５０は、ハードウェアとしてＣＰＵ、ＲＯＭ及びＲＡＭ（いずれも図示略）を備える。ＲＯＭは、フラッシュＲＯＭ等の不揮発性の記憶装置であり、ＯＳ（Operating System）等の制御プログラム及びデータを格納する。ＲＡＭは、ＣＰＵのワークエリアを構成する。ＣＰＵは、ＲＯＭや記憶部１５７から読み出した制御プログラムをＲＡＭに展開し、展開した制御プログラムを実行してプロジェクター１００の各部を制御する。
The
また、制御部１５０は、機能ブロックとして、投射制御部１５１、キャリブレーション制御部１５２、描画制御部１５３、拡大制御部１５４を備える。これらの機能ブロックは、ＲＯＭや記憶部１５７が記憶する制御プログラムをＣＰＵが実行することで実現される。
The
投射制御部１５１は、プロジェクター１００の各部を制御して、スクリーンＳＣに画像を投射させる。例えば、投射制御部１５１は、画像処理部１４５を制御して、左目用画像データ及び右目用画像データに対する画像処理を実行させる。この際、投射制御部１５１は、画像処理部１４５が実行する画像処理に必要なパラメーターを記憶部１５７から読み出して画像処理部１４５に渡してもよい。
The
キャリブレーション制御部１５２は、スクリーンＳＣに投射された投射画像に対する指示体７０の指示位置を特定するキャリブレーションを実行する。キャリブレーションとは、例えば、フレームメモリー１４７に書き込まれた画像データにおける位置と、撮影部１３１により撮影された撮影画像データ上の位置とを対応付ける処理である。
キャリブレーション制御部１５２は、例えば、予め設定されたマークが所定間隔で形成されたキャリブレーション画像データを記憶部１５７から読み出し、スクリーンＳＣにキャリブレーション画像を投射させる。キャリブレーション制御部１５２は、指示体検出部１３０を制御して撮影部１３１に撮影を実行させる。キャリブレーション制御部１５２は、撮影部１３１により撮影された撮影画像データを指示体検出部１３０から取得する。キャリブレーション制御部１５２は、取得した撮影画像データからマークを検出し、各マークの重心位置を各マークの座標値として取得する。キャリブレーション制御部１５２は、撮影画像データから検出されたマークと、フレームメモリー１４７に書き込まれたキャリブレーション画像のマークとの対応付けを行う。キャリブレーション制御部１５２は、この対応付けにより、フレームメモリー１４７に書き込まれた画像データにおける位置と、撮影部１３１が撮影する撮影画像データ上の位置とを対応付けるキャリブレーションデータを生成する。
The
For example, the
描画制御部１５３は、撮影画像データ上での操作位置を示す座標を指示体検出部１３０から入力する。描画制御部１５３は、キャリブレーションデータを用いて、撮影画像データ上での操作位置を示す座標を、フレームメモリー１４７における座標に変換する。
描画制御部１５３は、変換したフレームメモリー１４７における座標に基づいて、指示体７０により指定された位置を特定し、特定した位置に、文字や図形、記号等を描画するように画像処理部１４５に指示する。また、描画制御部１５３は、変換したフレームメモリー１４７における座標の履歴を作成する。描画制御部１５３は、作成した座標の履歴に基づいて、指示体７０により指定された領域を検出し、検出した領域を示す範囲指定情報を生成する。描画制御部１５３が検出する領域は、ユーザーが指示体７０を用いて指定したスクリーンＳＣの領域に対応するフレームメモリー１４７の領域である。より具体的には、指示体７０により指定されたスクリーンＳＣの領域に表示される画像が書き込まれたフレームメモリー１４７の領域である。
描画制御部１５３は、生成した範囲指定情報を拡大制御部１５４に出力する。
The
The
The
図２は、スクリーンに表示された３Ｄ画像を示す図である。
ユーザーは、指示体７０を使用して、３Ｄ画像が投射されたスクリーンＳＣ上の範囲を指定する。図２には、指示体７０により指定されたスクリーンＳＣ上の範囲を破線で囲まれた範囲Ａで示す。
プロジェクター１００は、撮影部１３１によりスクリーンＳＣを撮影して撮影画像データを生成する。位置検出部１３２及び制御部１５０（描画制御部１５３）は、撮影画像データに基づき、指定された範囲Ａに対応する左目用ＦＭ１４７１及び右目用ＦＭ１４７２の範囲を検出する。
FIG. 2 is a diagram illustrating a 3D image displayed on the screen.
The user uses the
The
拡大制御部１５４には、入力処理部１２７から部分拡大を指示する操作信号が入力される。ユーザーにより、操作パネル１２６又はリモコン５が操作されると、入力処理部１２７は、受け付けた操作に対応した操作信号を制御部１５０に出力する。
拡大制御部１５４は、部分拡大を指示する操作信号が入力されると、ユーザーが指示体７０を操作して指定する操作位置を描画制御部１５３に検出させる。部分拡大の指示とは、スクリーンＳＣに投射された画像の一部を選択して、選択した画像を拡大させる指示である。拡大制御部１５４は、描画制御部１５３から範囲指定情報が入力されると、入力された範囲指定情報に、部分拡大の指示と、拡大率指定情報とを付加して画像処理部１４５に出力する。
また、拡大制御部１５４は、部分拡大の指示を受け付けると、画像重畳部１４９に、範囲指定情報と、画像データの重畳を指示する重畳指示とを出力する。
The
When an operation signal instructing partial enlargement is input, the
In addition, when the
画像処理部１４５は、画像分離部１４３から入力される左目用画像データを左目用ＦＭ１４７１に書き込み、左目用画像データ又は右目用画像データを右目用ＦＭ１４７２に書き込む。
画像処理部１４５は、拡大制御部１５４から範囲指定情報と、部分拡大の指示と、拡大率指定情報とが入力されると、処理対象として設定された右目用ＦＭ１４７２に書き込まれた画像データから、範囲指定情報により指定された範囲の画像データを切り出す。切り出された画像データを、以下では切出画像データという。さらに、画像処理部１４５は、切出画像データを、拡大率指定情報により指定された拡大率で拡大させる。
そして、画像処理部１４５は、右目用ＦＭ１４７２から拡大された切出画像データを読み出して画像重畳部１４９に出力する。
The
When the range designation information, the partial enlargement instruction, and the enlargement ratio designation information are input from the
Then, the
なお、この実施形態では、予め右目用ＦＭ１４７２を処理対象として設定して処理を行う場合を説明するが、左目用ＦＭ１４７１を処理対象として設定して処理を行うこともできる。また、拡大制御部１５４が、左目用ＦＭ１４７１又は右目用ＦＭ１４７２を選択し、選択した左目用ＦＭ１４７１又は右目用ＦＭ１４７２を画像処理部１４５に通知してもよい。
In this embodiment, a case is described in which processing is performed by setting the right-
また、画像処理部１４５は、前回の処理で、右目用ＦＭ１４７２に画像データとして右目用画像データを書き込んだ場合、今回の処理では、画像分離部１４３から入力される左目用画像データを左目用ＦＭ１４７１及び右目用ＦＭ１４７２に書き込む。画像処理部１４５は、画像分離部１４３から入力される右目用画像データは破棄する。
そして、画像処理部１４５は、右目用ＦＭ１４７２から、範囲指定情報により指定された範囲の左目用画像データを切り出して切出画像データを生成する。さらに、画像処理部１４５は、生成した切出画像データを、拡大率指定情報に指定された拡大率で拡大する。
Further, when the right-eye image data is written as image data in the right-
Then, the
また、画像処理部１４５は、前回の処理で、左目用画像データを右目用ＦＭ１４７２に書き込んだ場合、今回の処理では、画像分離部１４３から入力される左目用画像データを左目用ＦＭ１４７１に書き込み、右目用画像データを右目用ＦＭ１４７２に書き込む。
そして、画像処理部１４５は、同様に、右目用ＦＭ１４７２から、範囲指定情報により指定された範囲の右目用画像データを切り出して切出画像データを生成する。さらに、画像処理部１４５は、生成した切出画像データを、拡大率指定情報により指定された拡大率で拡大する。
図３は、右目用ＦＭ１４７２に書き込まれた切出画像データを示す図である。より詳細には、右目用ＦＭ１４７２に書き込まれた画像データ（右目用画像データ又は左目用画像データ）から、範囲指定情報により指定された範囲の画像データを切り出し、切り出した切出画像データを拡大率指定情報により指定された拡大率で拡大した切出画像データを示す。
なお、図３に示す破線は、切出画像データである「ＥＦ」の範囲を示す破線である。
Further, when the
Similarly, the
FIG. 3 is a diagram illustrating the cut-out image data written in the right-
The broken line shown in FIG. 3 is a broken line indicating the range of “EF” that is the cut-out image data.
また、画像処理部１４５は、例えば画像情報に含まれる垂直同期信号等の信号に従って、表示部１１０が表示する画像の切り替わりを示すタイミング信号を生成する。画像処理部１４５は、生成したタイミング信号をシャッター制御部１３５に出力する。
立体画像を表示する場合、１枚の立体画像を構成する一対の左目用画像及び右目用画像を交互にスクリーンＳＣに投射する。１枚の立体画像を構成する一対の左目用画像及び右目用画像の表示に要する期間を１フレーム期間という。１フレーム期間は、左目用画像が表示されるサブフレーム期間と、右目用画像が表示されるサブフレーム期間との合計２つのサブフレーム期間によって構成される。画像処理部１４５は、サブフレーム期間が切り替わるタイミングに同期したタイミング信号を生成してシャッター制御部１３５に出力する。
Further, the
When displaying a stereoscopic image, a pair of left-eye images and right-eye images constituting one stereoscopic image are alternately projected on the screen SC. A period required to display a pair of left-eye images and right-eye images constituting one stereoscopic image is referred to as one frame period. One frame period is composed of a total of two subframe periods, a subframe period in which the left-eye image is displayed and a subframe period in which the right-eye image is displayed. The
画像処理部１４５は、プロジェクター１００に入力される画像データが３Ｄ画像データである場合、垂直同期信号等の信号に従って左目用ＦＭ１４７１及び右目用ＦＭ１４７２から交互に画像データを読み出し、画像重畳部１４９に送る。また、画像処理部１４５は、画像データが３Ｄ画像データである場合、左目用ＦＭ１４７１に書き込まれた画像データの読み出しは行わず、右目用ＦＭ１４７２に書き込まれた切出画像データを読み出し、画像重畳部１４９に送る構成であってもよい。以下では、後者の場合、すなわち、右目用ＦＭ１４７２から画像データを読み出し画像重畳部１４９に送る場合を例に説明する。
When the image data input to the
図４は、左目用ＦＭ１４７１に書き込まれた左目用画像データを示す図である。特に、図４は、画像重畳部１４９により切出画像データが重畳される前の左目用ＦＭ１４７１の状態を示す。
画像重畳部１４９は、拡大制御部１５４から重畳指示が入力されると、画像処理部１４５から入力される画像データである切出画像データを、左目用ＦＭ１４７１に書き込む。
左目用ＦＭ１４７１には、左目用画像データがすでに書き込まれている。画像重畳部１４９は、左目用ＦＭ１４７１の一部の領域を、画像処理部１４５から入力される切出画像データで書き換える。切出画像データにより書き換えられる左目用ＦＭ１４７１の一部の領域は、切出画像データが書き込まれた右目用ＦＭ１４７２の領域に対応する左目用ＦＭ１４７１の領域である。なお、左目用画像データが本発明の「所定の画像」に相当する。
また、画像重畳部１４９は、左目用画像データから切り出された切出画像データと、右目用画像データから切り出された切出画像データとで、左目用ＦＭ１４７１の書き込み位置を変更してもよい。例えば、画像重畳部１４９は、３Ｄ画像データの視差量に基づき、左目用画像データから切り出した切出画像データを書き込む左目用ＦＭ１４７１の書き込み位置と、右目用画像データから切り出した切出画像データを書き込む左目用ＦＭ１４７１の書き込み位置とを変更してもよい。
FIG. 4 is a diagram illustrating the left-eye image data written in the left-
When the superimposition instruction is input from the
Left-eye image data is already written in the left-
The
また、画像重畳部１４９は、左目用ＦＭ１４７１に書き込んだ切出画像データの周囲に黒枠を表す枠画像６０を付加して、重畳画像データ（変換左目用画像、変換右目用画像）を生成する。
図５は、左目用ＦＭ１４７１に書き込まれた左目用画像データの一部を、切出画像データにより書き換え、書き換えた切出画像データの周囲に黒枠を表す枠画像６０を付加した状態を示す。
Also, the
FIG. 5 shows a state in which part of the left-eye image data written in the left-
また、画像重畳部１４９は、切出画像の周囲に枠画像６０を付加する代わりに、切出画像の周辺部に対してシャープネス調整を行い、重畳する切出画像データと、左目用画像データとの境界をぼかすぼかし処理を行ってもよい。ぼかし処理は、切出画像データと、左目用画像データとの境界における色の変化を緩和する画像処理であり、いわゆるアンチエイリアシング処理に相当する。
Further, the
図６は、表示部１１０によりスクリーンＳＣに投射された重畳画像データを示す図である。
切出画像データの生成に使用した画像データと、切出画像データが重畳される画像データとが異なる場合、重畳画像データにおいて画像が連続する場合がある。例えば、切出画像データを右目用画像データから切り出し、切り出した切出画像データを左目用画像データに重畳させる場合、左目用画像データと右目用画像データには視差があるため、同一の画像がずれた位置に表示され、重畳画像データにおいて同一の画像が連続して表示される場合がある。このような画像がスクリーンＳＣに投射されると、ユーザーにとっては見にくい画像となる。また、切出画像データを拡大した場合、視差も拡大され、ユーザーにとってはさらに見にくい画像となる場合がある。
このため、本実施形態では、図４に示すように、切出画像データの周囲を枠画像６０で囲み、同一の画像が連続する部分が枠画像６０で隠れるようにすることで、部分的に拡大された画像が見やすくなるようにすることができる。
FIG. 6 is a diagram showing superimposed image data projected on the screen SC by the
When the image data used for generating the cut-out image data is different from the image data on which the cut-out image data is superimposed, the images may be continuous in the superimposed image data. For example, when the cut-out image data is cut out from the right-eye image data, and the cut-out cut-out image data is superimposed on the left-eye image data, the left-eye image data and the right-eye image data have parallax, so the same image There are cases in which the same image is displayed continuously in the superimposed image data. When such an image is projected onto the screen SC, the image becomes difficult for the user to see. In addition, when the cut-out image data is enlarged, the parallax is also enlarged, and the image may be more difficult for the user to see.
For this reason, in the present embodiment, as shown in FIG. 4, the periphery of the cut image data is surrounded by a
図７は、プロジェクター１００の動作を示すフローチャートである。
画像供給装置２００が画像信号の供給を開始すると、プロジェクター１００は、供給される画像信号を画像Ｉ／Ｆ部１４１により入力する。画像Ｉ／Ｆ部１４１は、入力された画像信号から画像データ及び画像情報を取り出す。画像Ｉ／Ｆ部１４１は、取り出した画像データ及び画像情報を画像分離部１４３に出力する。
FIG. 7 is a flowchart showing the operation of the
When the
画像分離部１４３は、画像データ及び画像情報が入力されると、入力された画像情報に基づいて、画像データが３Ｄ画像データであるか否かを判定する（ステップＳ１）。入力された画像データが３Ｄ画像データではない場合（ステップＳ１／ＮＯ）、画像分離部１４３は、入力された画像データをそのまま画像処理部１４５に出力する。この後、画像処理部１４５が、入力された画像データを画像処理し、処理された画像データに基づく画像が表示部１１０によりスクリーンＳＣに投射される（ステップＳ２）。
When image data and image information are input, the
また、画像分離部１４３は、入力された画像データが３Ｄ画像データであると判定した場合（ステップＳ１／ＹＥＳ）、画像情報に基づいて３Ｄ画像データを変換処理し、１フレームサイズの左目用画像データ及び右目用画像データを生成する（ステップＳ３）。画像分離部１４３は、生成した左目用画像データ及び右目用画像データを画像処理部１４５に出力する。
When the
画像処理部１４５は、入力される左目用画像データを左目用ＦＭ１４７１に書き込み、右目用画像データを右目用ＦＭ１４７２に書き込む。
画像処理部１４５は、左目用画像データ及び右目用画像データのそれぞれに対して、所定の画像処理を施して、交互に画像重畳部１４９に出力する。画像重畳部１４９は、制御部１５０から部分拡大の指示が入力されていない場合、画像処理部１４５から入力される左目用画像データ及び右目用画像データをそのまま表示部１１０に出力し、表示部１１０によりスクリーンＳＣに投射する（ステップＳ４）。
The
The
制御部１５０は、３Ｄ画像データに基づく画像がスクリーンＳＣに投射されると、画像の一部を拡大させる部分拡大の指示を操作パネル１２６又はリモコン５により受け付けたか否かを判定する（ステップＳ５）。部分拡大の指示を受け付けていない場合（ステップＳ５／ＮＯ）、プロジェクター１００は、ステップＳ３の処理に戻る。すなわち、プロジェクター１００は、３Ｄ画像データに基づいて左目用画像データ及び右目用画像データを生成し、スクリーンＳＣに投射する処理を、画像信号の供給が停止されるまで継続する。
When the image based on the 3D image data is projected onto the screen SC, the
また、部分拡大の指示が入力された場合（ステップＳ５／ＹＥＳ）、拡大制御部１５４は、指示体７０による操作位置の検出を指示体検出部１３０に実行させる。
指示体検出部１３０は、撮影部１３１により生成される撮影画像データに基づいて、指示体７０の操作位置の座標を検出する。指示体検出部１３０は、検出した操作位置の座標を制御部１５０に出力する。描画制御部１５３は、指示体検出部１３０により検出される操作位置の座標に基づいて、ユーザーが指示体７０を操作して指定した範囲Ａを示す範囲指定情報を生成し、拡大制御部１５４に出力する。
When an instruction for partial enlargement is input (step S5 / YES), the
The
拡大制御部１５４は、描画制御部１５３から範囲指定情報が入力されたか否かを判定する（ステップＳ６）。範囲指定情報の入力がない場合（ステップＳ６／ＮＯ）、拡大制御部１５４は、範囲指定情報が入力されるまで待機する。また、範囲指定情報が入力されると（ステップＳ６／ＹＥＳ）、拡大制御部１５４は、描画制御部１５３から入力される範囲指定情報に、拡大率指定情報と、部分拡大の指示とを付加して画像処理部１４５に出力する。
画像処理部１４５は、入力された範囲指定情報に基づいて、右目用ＦＭ１４７２に書き込まれた左目用画像データ又は右目用画像データの所定領域を切り出して切出画像データを生成し（ステップＳ７）する。また、画像処理部１４５は、生成した切出画像データを拡大率指定情報により指定された拡大率で拡大する（ステップＳ８）。この拡大率は、ユーザーが部分拡大の指示を入力する際に、指定するものであってもよいし、事前に設定されるものであってもよい。また、拡大制御部１５４が、切出画像データのサイズに応じて拡大率を変更してもよい。
The
The
画像処理部１４５は、右目用ＦＭ１４７２から切出画像データを読み出して画像重畳部１４９に出力する。
The
画像重畳部１４９は、拡大制御部１５４から重畳指示が入力され、画像処理部１４５から切出画像データが入力されると、左目用ＦＭ１４７１に書き込まれた左目用画像データに、切出画像データを重畳する（ステップＳ９）。具体的には、画像重畳部１４９は、切出画像データが書き込まれた右目用ＦＭ１４７２の領域に対応する左目用ＦＭ１４７１の領域に書き込まれた左目用画像データを、切出画像データに書き換える。さらに、画像重畳部１４９は、書き換えた切出画像データの周囲に黒枠を表す枠画像６０を付加して重畳画像データを生成する（ステップＳ１０）。
When the superimposition instruction is input from the
画像重畳部１４９は、生成した重畳画像データを表示部１１０に出力する。表示部１１０は、光変調装置駆動部１２２により重畳画像データに基づくＲ，Ｇ，Ｂの表示画像信号を生成する。表示部１１０は、生成した表示画像信号に基づいて光変調装置１１２の対応する液晶パネルを駆動し、各液晶パネルに画像光を描画する。各液晶パネルに描画された画像光は、投射光学系１１３によりスクリーンＳＣに投射される（ステップＳ１１）。
The
上述した処理フローでは、拡大した切出画像データを所定の画像としての左目用画像データに重畳する場合を例に挙げて説明したが、所定の画像としての右目用画像データに切出画像データを重畳してもよい。
また、切出画像データに対応した画像データを選択して、選択した画像データに切出画像データを重畳してもよい。すなわち、切出画像データが左目用画像データから切り出した画像データである場合、切出画像データを左目用画像データに重畳し、切出画像データが右目用画像データから切り出した画像データである場合、切出画像データを右目用画像データに重畳してもよい。
In the processing flow described above, the case where the enlarged cut-out image data is superimposed on the left-eye image data as a predetermined image has been described as an example. However, the cut-out image data is added to the right-eye image data as the predetermined image. You may superimpose.
Alternatively, image data corresponding to the cut image data may be selected, and the cut image data may be superimposed on the selected image data. That is, when the cut-out image data is image data cut out from the left-eye image data, the cut-out image data is superimposed on the left-eye image data, and the cut-out image data is image data cut out from the right-eye image data The cut-out image data may be superimposed on the right-eye image data.
以上説明したように本発明の表示装置及び表示方法の実施形態は、表示部１１０、受け付け部としての入力処理部１２７、指示体検出部１３０及び描画制御部１５３と、画像処理部１４５と、画像重畳部１４９とを備える。
表示部１１０は、３Ｄ画像を構成する左目用画像及び右目用画像を表示する。
受け付け部としての指示体検出部１３０及び描画制御部１５３は、表示部１１０により表示される３Ｄ画像に対する領域の選択を受け付ける。
画像処理装置３００が備える画像処理部１４５は、左目用画像及び右目用画像から、受け付けた選択に係る領域、すなわち選択された領域に対応する画像を切り出し、切り出した切出画像を拡大する。画像重畳部１４９は、切り出された切出画像を、所定の画像に重畳して表示部１１０に立体表示させる。
従って、選択された領域を抽出して拡大した立体画像を簡易な処理により表示することができる。そして、立体画像を部分的に拡大して表示する処理を、効率よく、ユーザーの違和感を招かないように実行できる。
As described above, the display device and the display method according to the embodiment of the present invention include the
The
The
The
Therefore, it is possible to display a stereoscopic image obtained by extracting and enlarging the selected region by a simple process. And the process which expands and displays a stereo image partially can be performed efficiently, without causing a user's uncomfortable feeling.
また、画像重畳部１４９は、画像処理部１４５により切り出された切出画像を、所定の画像としての左目用画像に重畳する。また、画像重畳部１４９は、画像処理部１４５により切り出された切出画像を、所定の画像としての右目用画像に重畳してもよい。左目用画像及び右目用画像はいわゆる平面画像であるため、選択された領域を拡大する場合に正常な立体視ができなくなる懸念がない。このため、立体画像を部分的に拡大して表示する処理を、効率よく実行できる。
Further, the
また、画像重畳部１４９は、左目用画像において選択された領域を拡大した変換左目用画像、及び右目用画像から抽出した画像を所定の画像としての左目用画像に重畳した変換右目用画像を生成する、このため、立体画像を部分的に拡大して表示する処理を、効率よく実行できる。
Further, the
また、画像重畳部１４９は、画像処理部１４５が切り出した画像の周囲を枠で囲んだ画像を、切出画像に重畳する。従って、画像処理部１４５により切り出された画像を拡大して枠で囲んだ状態で、見易く表示することができる。
Further, the
また、画像重畳部１４９は、画像処理部１４５が切り出した切出画像と、所定の画像との境界をぼかすぼかし処理を行う。従って、画像処理部１４５により切り出された画像を見易く表示することができる。
In addition, the
また、指示体検出部１３０は、指示体７０の操作を検出して、３Ｄ画像に対する領域の選択を描画制御部１５３で検出する。従って、指示体７０の操作により、立体表示させる画像の領域を選択することができる。
In addition, the
なお、上述した実施形態は、本発明の好適な実施形態を示すものであり、本発明を限定するものではなく、本発明の要旨を逸脱しない範囲内において種々の変形実施が可能である。
例えば、上述した実施形態では、指示体７０としてペン型のデバイスを例に説明したが、指示体７０は、例えば、ユーザーの手指であってもよい。指示体７０として操作者の手指を用いる場合、例えば、スクリーンＳＣの上部にプロジェクター１００を設置し、プロジェクター１００に、赤外光を照射するユニットを接続する。このユニットにより、スクリーンＳＣの上部から、スクリーンＳＣに略平行かつ近距離で指示体７０の検出用の赤外光を照射する。ユーザーが手指で、スクリーンＳＣ上に投射された投射画像に触れる（指示する）と、手指に当たった赤外光が反射する。この反射光をプロジェクター１００に搭載された撮影装置で撮影し、ユーザーによる指示位置を検出する。
The above-described embodiment shows a preferred embodiment of the present invention, does not limit the present invention, and various modifications can be made without departing from the gist of the present invention.
For example, in the above-described embodiment, a pen-type device has been described as an example of the
また、上述した実施形態では、プロジェクター１００に、指示体検出部１３０を設け、指示体７０を用いる操作により部分拡大させたい範囲を指定する方法を説明したが、指示体検出部１３０はプロジェクター１００の必須の構成ではない。例えば、操作パネル１２６やリモコン５の操作により、部分拡大させる範囲を指定してもよい。
例えば、部分拡大の指示を受け付けると、制御部１５０は、操作パネル１２６に、部分拡大させたい範囲を指定可能なカーソルを表示させる。操作パネル１２６の全面を、表示部１１０が投射画像を投射する投射領域として、投射画像における部分拡大させたい範囲を、カーソルの位置、大きさにより指定する。カーソルは、例えば矩形であって、操作パネル１２６の操作や、タッチ操作によりサイズや形状を変更することができる。ユーザーは、部分拡大させたい範囲にカーソルを移動させ、操作パネル１２６に設けられた決定ボタンを押下する。決定ボタンが押下された時点でのカーソルの操作パネル１２６上での位置が、部分拡大させる範囲として選択される。
Further, in the embodiment described above, the
For example, when an instruction for partial enlargement is received, the
また、本実施形態のプロジェクター１００は、ユーザーに立体画像を視認させるために立体視装置５０を備える構成を例示したが、本発明はこれに限定されず、ユーザーが立体画像（３Ｄ画像）を視認可能な表示を行う表示装置であれば良い。例えば、異なる偏光を施した左目用画像及び右目用画像を同時にスクリーンＳＣ上に表示する構成であってもよい。この場合、立体視装置５０に代えて、異なる偏光を施した左目用画像及び右目用画像を選択的に透過する透過部を備えるパッシブ方式の表示用のメガネを、立体視装置として備える構成であってもよい。
また、専用の立体視装置５０を用いずに、スクリーンＳＣの前面に左右の画像を振り分けるためのパララックスバリアや、レンティキュラーレンズを設けて、適視位置において裸眼で３Ｄ画像を鑑賞可能とした表示装置であっても良い。
Moreover, although the
In addition, a parallax barrier for allocating left and right images and a lenticular lens are provided on the front surface of the screen SC without using the dedicated
また、上述した実施形態では、画像処理部１４５は、画像分離部１４３から入力される１フレームの左目用画像データと、１フレームの右目用画像データとを対象に処理を行っていたが、これらの画像データは同期していなくてもよい。
例えば、画像処理部１４５は、左目用ＦＭ１４７１に左目用画像データを書き込み、画像重畳部１４９に出力する場合に、所定期間、左目用ＦＭ１４７１の書き換えは行わず、同一の左目用画像データを画像重畳部１４９に出力してもよい。
In the above-described embodiment, the
For example, when the
また、画像処理部１４５は、画像データのフレームレートとは異なるフレームレートで光変調装置１１２に描画するため、フレームレート変換処理を実行してもよい。フレームレート変換処理では、例えば、６０Ｈｚの画像データに対し、１２０Ｈｚ（倍速駆動）や２４０Ｈｚ（４倍速駆動）への変換を行う。このフレームレート変換処理でフレームレートを高速化することにより、光変調装置１１２の液晶パネルにおける描画フレーム数を高め、画像の残像感の軽減を図ることができる。
また、画像処理部１４５は、フレームレート変換処理を行った場合、変換したフレームレートに対応したタイミング信号を生成してシャッター制御部１３５に出力する。
Further, the
When the frame rate conversion process is performed, the
また、本発明の表示装置は、透過型液晶パネルを用いた液晶プロジェクターとして説明したが、反射型の液晶パネルやデジタルミラーデバイスを用いたプロジェクターであってもよい。また、スクリーンＳＣに画像を投射するプロジェクターに限定されず、液晶表示パネルに画像を表示する液晶モニター又は液晶テレビ、或いは、ＰＤＰ（プラズマディスプレイパネル）に画像を表示するモニター装置又はテレビ受像機、ＯＬＥＤ（Organic light-emitting diode）、ＯＥＬ（Organic Electro-Luminescence）等と呼ばれる有機ＥＬ表示パネルに画像を表示するモニター装置又はテレビ受像機等の自発光型の表示装置など、各種の表示装置も本発明の表示装置に含まれる。 The display device of the present invention has been described as a liquid crystal projector using a transmissive liquid crystal panel, but may be a projector using a reflective liquid crystal panel or a digital mirror device. Further, the projector is not limited to a projector that projects an image on the screen SC, but a liquid crystal monitor or liquid crystal television that displays an image on a liquid crystal display panel, or a monitor device or television receiver that displays an image on a plasma display panel (PDP), OLED Various display devices such as a monitor device that displays an image on an organic EL display panel called (Organic light-emitting diode), OEL (Organic Electro-Luminescence), or a self-luminous display device such as a television receiver are also included in the present invention. It is included in the display device.
また、図１に示すプロジェクター１００の各機能部は、ハードウェアとソフトウェアとの協働により実現される機能的構成を示すものであって、具体的な実装形態は特に制限されない。従って、必ずしも各機能部に個別に対応するハードウェアが実装される必要はなく、一つのプロセッサーがプログラムを実行することで複数の機能部の機能を実現する構成とすることも勿論可能である。また、上記実施形態においてソフトウェアで実現されている機能の一部をハードウェアで実現してもよく、あるいは、ハードウェアで実現されている機能の一部をソフトウェアで実現してもよい。その他、表示システム１の他の各部の具体的な細部構成についても、本発明の趣旨を逸脱しない範囲で任意に変更可能である。
Each functional unit of the
１…表示システム、５…リモコン、５０…立体視装置、６０…枠画像、７０…指示体、１００…プロジェクター、１１１…光源部、１１２…光変調装置、１１３…投射光学系、１２１…光源駆動部、１２２…光変調装置駆動部、１２５…無線通信部、１２６…操作パネル、１２７…入力処理部（受け付け部）、１２８…リモコン受光部、１３０…指示体検出部（受け付け部）、１３１…撮影部、１３２…位置検出部、１３５…シャッター制御部、１４１…画像Ｉ／Ｆ部、１４３…画像分離部、１４５…画像処理部、１４７…フレームメモリー、１４９…画像重畳部、１５０…制御部（表示制御部）、１５１…投射制御部、１５２…キャリブレーション制御部、１５３…描画制御部（受け付け部）、１５４…拡大制御部、１５７…記憶部、１６０…内部バス、２００…画像供給装置、３００…画像処理装置（処理部）、１４７１…左目用ＦＭ、１４７２…右目用ＦＭ、ＳＣ…スクリーン（表示面）。
DESCRIPTION OF
Claims (10)
前記表示部により表示される立体画像に対する領域の選択を受け付ける受け付け部と、
前記左目用画像及び前記右目用画像から前記受け付け部で受け付けた選択に係る領域に対応する画像を抽出し、抽出した画像を拡大して、所定の画像に重畳する処理部と、
前記処理部により重畳された画像を前記表示部に表示させる表示制御部と、
を備えることを特徴とする表示装置。 A display unit for displaying a left-eye image and a right-eye image constituting a stereoscopic image;
A receiving unit that receives a selection of a region for a stereoscopic image displayed by the display unit;
A processing unit that extracts an image corresponding to a selection area received by the receiving unit from the left-eye image and the right-eye image, enlarges the extracted image, and superimposes the image on a predetermined image;
A display control unit that causes the display unit to display an image superimposed by the processing unit;
A display device comprising:
前記画像処理部により拡大した画像を、所定の画像に重畳する画像重畳部と、を備え、
前記画像重畳部で重畳した画像を、前記表示部が表示する画像として出力する、
ことを特徴とする画像処理装置。 When a region is selected for a stereoscopic image displayed on the display unit, an image corresponding to the selected region is extracted and enlarged from the left-eye image and the right-eye image constituting the stereoscopic image. A processing unit;
An image superimposing unit that superimposes the image enlarged by the image processing unit on a predetermined image,
Outputting an image superimposed by the image superimposing unit as an image displayed by the display unit;
An image processing apparatus.
前記立体画像を構成する左目用画像及び右目用画像から、前記受け付けるテップで受け付けた選択に係る領域に対応する画像を抽出するステップと、
前記抽出するステップで抽出された画像を拡大して所定の画像に重畳するステップと、
前記重畳するステップで重畳された画像を前記表示部に表示させるステップと、
を有することを特徴とする表示方法。 Receiving a selection of a region for a stereoscopic image displayed by the display unit;
Extracting an image corresponding to an area related to the selection received in the received step from the left-eye image and the right-eye image constituting the stereoscopic image;
Enlarging the image extracted in the extracting step and superimposing the image on a predetermined image;
Displaying the image superimposed in the superimposing step on the display unit;
A display method characterized by comprising:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016030674A JP2017152764A (en) | 2016-02-22 | 2016-02-22 | Display device, image processing apparatus, and display method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016030674A JP2017152764A (en) | 2016-02-22 | 2016-02-22 | Display device, image processing apparatus, and display method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2017152764A true JP2017152764A (en) | 2017-08-31 |
Family
ID=59739204
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016030674A Pending JP2017152764A (en) | 2016-02-22 | 2016-02-22 | Display device, image processing apparatus, and display method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2017152764A (en) |
-
2016
- 2016-02-22 JP JP2016030674A patent/JP2017152764A/en active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8684531B2 (en) | Stereoscopic display device projecting parallax image and adjusting amount of parallax | |
| JP2012108479A (en) | Projection type display device and control method thereof | |
| US20130222410A1 (en) | Image display apparatus | |
| JP2012195728A (en) | Display device, display system, and method for controlling display device | |
| US20110248989A1 (en) | 3d display apparatus, method for setting display mode, and 3d display system | |
| JPWO2014155670A1 (en) | Stereoscopic video processing apparatus, stereoscopic video processing method, and stereoscopic video processing program | |
| JP2013197797A (en) | Image display device and image display method | |
| JP2013051629A (en) | Stereoscopic image display device | |
| JP2011010126A (en) | Image processing apparatus, and image processing method | |
| US20160034048A1 (en) | Video display system, three-dimensional video pointing device and video display device | |
| JP2016180942A (en) | Display device, display system, control method for display device, and program | |
| JP5618587B2 (en) | Imaging device, image display device, and image display system | |
| JP6069854B2 (en) | Video display device and video display method | |
| JP2016161611A (en) | Display system and display control method | |
| JP5786315B2 (en) | Display device, display device control method, and program | |
| US9131226B2 (en) | Display device and control method for the display device | |
| JP2017152764A (en) | Display device, image processing apparatus, and display method | |
| JP2015159460A (en) | Projection system, projection device, photographing device, method for generating guide frame, and program | |
| JP2012151641A (en) | Stereoscopic image display device, control method of stereoscopic image display device, and stereoscopic image display system | |
| JP5789960B2 (en) | Display device, display device control method, and program | |
| US11336877B2 (en) | Projection-type display device and method for adjusting a projected image | |
| EP2432235A2 (en) | Display Apparatus and Method for Processing Image Thereof | |
| JP7427739B2 (en) | display device | |
| KR20130079044A (en) | Display apparatus and control method thereof | |
| KR20110130708A (en) | 3d glasses and 3d display apparatus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD05 | Notification of revocation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7425 Effective date: 20180906 |