JP2011223640A - Electronic device and image output method - Google Patents
Electronic device and image output method Download PDFInfo
- Publication number
- JP2011223640A JP2011223640A JP2011174015A JP2011174015A JP2011223640A JP 2011223640 A JP2011223640 A JP 2011223640A JP 2011174015 A JP2011174015 A JP 2011174015A JP 2011174015 A JP2011174015 A JP 2011174015A JP 2011223640 A JP2011223640 A JP 2011223640A
- Authority
- JP
- Japan
- Prior art keywords
- image
- unit
- eye
- parallax
- moving image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
本発明は電子機器及び出力方法に関するものであって、特に立体視動画を出力する電子機器及び出力方法に関する。 The present invention relates to an electronic device and an output method, and more particularly to an electronic device and an output method for outputting a stereoscopic moving image.
近年の技術の発達によって、ユーザが立体動画として視聴可能な動画(以下では、立体視動画と呼ぶ)を出力可能な電子機器が提案されている。 With the development of technology in recent years, electronic devices that can output a moving image that can be viewed as a stereoscopic moving image by a user (hereinafter referred to as a stereoscopic moving image) have been proposed.
この電子機器が立体動画をユーザに提供するときの一般的な提供方法の一例としては、視差の存在する右眼用画像と左眼用画像とをそれぞれ右眼のみ、左眼のみに見せることで、ユーザに動画を立体として捉えさせる方法が挙げられる。 As an example of a general providing method when this electronic device provides a stereoscopic video to a user, a right-eye image and a left-eye image with parallax can be shown only to the right eye and the left eye, respectively. A method for causing the user to view a moving image as a three-dimensional image can be given.
電子機器がユーザに画像の立体視を提供するとき、ユーザと画面との距離、又は表示される表画面の大きさ等の要因で、それぞれの眼にこの眼に見せるための画像が好適に提供されず、ユーザが立体動画を捉えられなくなってしまう場合が存在する。 When an electronic device provides a stereoscopic view of an image to a user, an image to be seen by each eye is suitably provided depending on factors such as the distance between the user and the screen, or the size of the displayed front screen. In some cases, the user cannot capture the stereoscopic video.
例えば、立体視動画を大きな表示画面で表示する場合には右眼用画像と左眼用画像との間の視差が大きくなりすぎ、立体視動画をユーザが適切に立体として捉えることができなくなってしまう場合がある。そこで、自然な飛び出し量の立体映像を得ることができる立体映像表示装置が提案されている(特許文献1を参照)。 For example, when displaying a stereoscopic video on a large display screen, the parallax between the image for the right eye and the image for the left eye becomes too large, and the user cannot properly recognize the stereoscopic video as a stereoscopic image. May end up. In view of this, a stereoscopic video display device capable of obtaining a stereoscopic video with a natural pop-out amount has been proposed (see Patent Document 1).
しかし、上記提案では表示画面上に画像が表示されていない領域が発生してしまう。 However, in the above proposal, an area where no image is displayed on the display screen occurs.
表示画面上に画像が表示されていない領域を発生させることなく、ユーザに適切に立体視動画を視聴させる。 A user appropriately views a stereoscopic video without generating an area where no image is displayed on the display screen.
本発明にかかる電子機器は、第1の画像と第2の画像の視差量の調整をユーザに許可する視差量調整手段と、前記視差量調整手段の視差量の調整に応じて、前記第1の画像及び第2の画像を引き伸ばす引き伸ばし手段と、前記引き伸ばされた第1の画像の第1の領域に対応する第3の画像および前記引き伸ばされた第2の画像の第2の領域に対応する第4の画像のデータを出力する出力手段とを具備する。 The electronic apparatus according to the present invention includes: a parallax amount adjusting unit that allows a user to adjust a parallax amount between the first image and the second image; An enlargement means for enlarging the image and the second image, and a third image corresponding to the first area of the stretched first image and a second area of the stretched second image Output means for outputting fourth image data.
本発明における実施の形態の例を、以下で図面を参照しながら説明する。 Embodiments of the present invention will be described below with reference to the drawings.
(第1の実施形態)
本発明の第1の実施形態について以下に説明を行う。
(First embodiment)
The first embodiment of the present invention will be described below.
図1は本実施形態における動画表示システム4の一例を示す概観図である。図1にはDTV1、表示画面2、シャッタメガネ3、および動画表示システム4が示されている。
FIG. 1 is an overview diagram showing an example of a moving image display system 4 in the present embodiment. FIG. 1 shows a
DTV1は例えばデジタルテレビ(Digital Television)であって、本実施形態における電子機器の一例である。DTV1は放送波又は他の動画再生機器から動画データを受信し、この動画データに基づいて表示画面2上に動画を表示する機能を有している。またこのDTV1はユーザが2次元として視聴する2次元動画と立体として視聴することの可能な立体視動画とを選択的に表示することが可能である。立体視動画を表示するとき、DTV1は2つの画面の間に視差が存在する左眼用画像と右眼用画像とを表示画面2に交互に表示し、シャッタメガネ3に対してこの表示と同期するように液晶シャッタの遮蔽、透過を切替させるための開閉信号を送信することで、シャッタメガネ3を装着したユーザに立体動画を提供する。本実施形態では電子機器の一例としてDTV1を示すが、これに限定されるものではなく、例えばSTB(Set Top Box)、PC(Personal Computer)等の様々なものが電子機器の例として考えられる。
The DTV 1 is, for example, a digital television, and is an example of an electronic device in the present embodiment. The DTV 1 has a function of receiving moving image data from broadcast waves or other moving image playback devices and displaying a moving image on the
シャッタメガネ3は左眼用レンズ及び右眼用レンズにそれぞれ遮蔽可能な液晶シャッタが設けられており、これらのレンズと液晶シャッタとを合わせてレンズユニットと呼ぶこととする。本実施形態に於いては左眼用レンズ、右眼用レンズ等のようにレンズとして説明しているが、これに限定されず、レンズではなく例えばガラス等の透明性を有する素材でできた平板等であってもよい。シャッタメガネ3は、DTV1から受信する液晶シャッタの開閉信号に基づいて、左右のレンズユニットのそれぞれの液晶シャッタを異なるタイミングで開閉し、ユーザに立体動画を提供する。例えば、DTV1に左眼用画像が表示されているときには、シャッタメガネ3はDTV1からの開閉信号に基づいて右眼用レンズユニットの液晶シャッタを閉状態(遮蔽状態)、左眼用レンズユニットの液晶シャッタを開状態(透過状態)として、ユーザの左眼のみに左眼用画像を見せる。また右眼用画像が表示されているときには、シャッタメガネ3は左眼用レンズユニットのシャッタを閉状態、右眼用レンズユニットのシャッタを開状態として、ユーザの右眼のみに右眼用画像を見せる。この動作によってユーザは見ている動画を立体として捉えることができる。
The shutter glasses 3 are provided with a liquid crystal shutter that can be shielded by the left eye lens and the right eye lens, respectively, and these lenses and the liquid crystal shutter are collectively referred to as a lens unit. In the present embodiment, the lens is described as a lens for the left eye, a lens for the right eye, etc., but is not limited thereto, and is not a lens but a flat plate made of a transparent material such as glass. Etc. The shutter glasses 3 open and close the liquid crystal shutters of the left and right lens units at different timings based on the liquid crystal shutter open / close signals received from the
上記の立体視の原理を、ここで詳細に説明する。人間は通常、物体を位置の異なる左眼と右眼とのそれぞれで見ており、この左眼と右眼とで見る像にはこの間に視差が存在する。この視差の存在する左眼で見る像と右眼で見る像とを脳内で合成することによって人間は見ている物体を立体として認識することができる。よって、上述のようにそれぞれ視差を有する左眼用の画像と右眼用の画像とをそれぞれの眼で見せることによって、ユーザに動画を立体として捉えさせることが可能となる。このようにシャッタメガネ3はDTV1の動画をユーザに立体映像として提供している。
The principle of stereoscopic viewing will now be described in detail. Humans usually view an object with the left eye and the right eye, which are located at different positions, and there is a parallax between the images seen by the left eye and the right eye. By synthesizing the image seen with the left eye and the image seen with the right eye in the brain where the parallax exists, a human can recognize the object being seen as a solid. Therefore, as described above, the left eye image and the right eye image each having a parallax can be viewed by the respective eyes, thereby allowing the user to perceive the moving image as a three-dimensional image. As described above, the shutter glasses 3 provide the user with the moving image of the
動画表示システム4はDTV1及びシャッタメガネ3によって構成される。立体視動画を視聴するときは、ユーザはシャッタメガネ3を装着してDTV1に表示されている立体視動画を見ることで、この立体視動画を立体として視聴することができる。
The moving image display system 4 includes a
次にDTV1が立体視動画を表示するときに発生しうる問題についての説明を行う。
Next, problems that may occur when the
図2は立体視動画を表示するときのユーザの視聴の様子の一例を示す概念図である。 FIG. 2 is a conceptual diagram showing an example of a state of viewing by the user when displaying a stereoscopic video.
まず、図2(A)図は左眼用画像21をユーザの左眼にのみ見せているときのユーザの視線を示している。DTV1が左眼用画像21を表示している際、シャッタメガネ3はDTV1から送信される開閉信号に基づいて左眼用レンズを透過、右眼用レンズを遮蔽として、ユーザの右眼からDTV1に表示されている画像を見えないようにする。これによりユーザは左眼のみで左眼用画像21を見ることとなる。この場合、左眼用画像21に描画された物体22を見ているときのユーザの視線は図中の破線に示すような視線となる。
First, FIG. 2A shows the user's line of sight when the left-eye image 21 is shown only to the user's left eye. When the
次に、図2(B)図は左眼用画像21と視差がある右眼用画像23をユーザの右眼にのみ見せているときのユーザの視線を示している。DTV1が右眼用画像23を表示している際、シャッタメガネ3はDTV1から送信される開閉信号に基づいて右眼レンズを透過、左眼用レンズを遮蔽として、ユーザの左眼からDTV1に表示されている画像を見えないようにする。これによりユーザは右眼のみで右眼用画像21を見ることとなり、この場合、右眼用画像23に描画された物体24(実質的に物体22と同じもの)を見ているときのユーザの視線は、図中の破線に示すような視線となる。
Next, FIG. 2B shows the user's line of sight when the left eye image 21 and the right eye image 23 having parallax are shown only to the user's right eye. When the
図2(C)図はユーザが左眼用画像21を左眼のみで、右眼用画像23を右眼のみで視聴しているときのそれぞれの視線を合成して概念的に示した図である。ユーザは右眼と左眼と視線が交差する点に物体が存在するように認識するため、左眼で物体22を右眼で物体24を見るとき、ユーザは視線の交差する点に物体25が存在するように認識する。このようにして、ユーザは平面として表示された立体動画を立体として認識している。
FIG. 2C is a diagram conceptually showing a combination of the lines of sight when the user views the left-eye image 21 with only the left eye and the right-eye image 23 with only the right eye. is there. Since the user recognizes that an object exists at a point where the right eye, the left eye, and the line of sight intersect, when viewing the
図3は視差の大きい立体動画を表示するときのユーザ視聴の様子の一例を示す概念図である。 FIG. 3 is a conceptual diagram illustrating an example of a user viewing state when displaying a stereoscopic video with a large parallax.
図3(A)図には左眼用画像31が示されており、左眼用画像31には物体32が描画されている。図3(B)図には左眼用画像31と視差を有する右眼用画像33が示されており、右眼用画像33には物体34が描画されている。左眼用画像31と右眼用画像33との間の視差は、左眼用画像21と右眼用画像23との間の視差よりも大きいものとなっている。
FIG. 3A shows a left-eye image 31, and an
図3(C)図はユーザが左眼用画像31を左眼のみで、右眼用画像33を右眼のみで視聴しているときのそれぞれの視線を合成して概念的に示した図である。図3においては左眼用画像31と右眼用画像33との間の視差が大きいため、左眼で物体32を、右眼で物体34を見るユーザのそれぞれの眼の視線の交差する点は、ユーザと極遠くなってしまっている。このように、視線の交差する点がユーザから見て極めて遠くなってしまうと、ユーザは物体32及び物体34を一つの物体として認識することができず、物体32と物体34とがそれぞれ別の物体として見え、左右にブレたような像を見ることとなる。
FIG. 3C is a diagram conceptually showing a combination of the lines of sight when the user views the left eye image 31 only with the left eye and the
上述のように、左眼用画像と右眼用画像との間の視差が大きすぎると、ユーザは動画を立体として認識することが困難となる。このように左眼用画像と右眼用画像の視差が大きくなってしまい、立体動画の視聴が困難となってしまうケースは様々な要因によって引き起こされることが考えら得る。 As described above, if the parallax between the left-eye image and the right-eye image is too large, it becomes difficult for the user to recognize the moving image as a three-dimensional image. In this way, the parallax between the image for the left eye and the image for the right eye becomes large, and it is conceivable that the case where viewing of the stereoscopic video becomes difficult is caused by various factors.
例えば、動画が表示を想定されている画面よりも大きい画面で表示され、ユーザが通常画面を見る距離で視聴を行う場合に上述のケースが起こり得る。この場合、想定されている画面よりも大きい画面で動画が表示されるため、左眼用画像と右眼用画像とがそれぞれ拡大され、これにより視差が想定より大きくなってしまい、ユーザが動画を立体として認識する難しくなる。 For example, the above-described case may occur when a moving image is displayed on a screen larger than a screen that is supposed to be displayed and the user views at a distance at which the normal screen is viewed. In this case, since the moving image is displayed on a screen larger than the assumed screen, the image for the left eye and the image for the right eye are enlarged respectively, and thereby the parallax becomes larger than expected, and the user It becomes difficult to recognize as a solid.
また、動画を表示する表示画面とユーザの視聴位置とが近い場合にも上記ケースが起こり得る。更に、子供が視聴する場合等のように左右の眼の距離が小さい場合にも上記ケースが起こり得る。 The above case may also occur when the display screen for displaying a moving image is close to the viewing position of the user. Furthermore, the above case can also occur when the distance between the left and right eyes is small, such as when a child watches.
本実施形態におけるDTV1は上述のように表示する立体視動画の視差が大きくなりすぎることを防止し、ユーザが視聴しやすい立体視動画を提供することができる。この機能にかかる説明を以下に行う。
The
図4は本実施形態におけるDTV1の内部構成の一例を示すブロック図である。図4には、DTV1、制御部401、受信部402、動画受信部403、判別部404、フレームレート設定部405、左右画像分離部406、視差量検出部407、画像処理部A408、画像処理部B409、画像配列部410、切替部411、表示制御部412、表示部413、シャッタ制御信号送信部414、及びOSD生成部415が示されている。
FIG. 4 is a block diagram showing an example of the internal configuration of the
制御部401はCPU(Central Processing Unit)及びメモリを含み、DTV1全体を制御する機能を有している。制御部401はDTV1内の構成に対して各種指示を行う。
The control unit 401 includes a CPU (Central Processing Unit) and a memory, and has a function of controlling the
受信部402は例えば赤外線受信装置等の受信モジュールであり、リモートコントローラ(図示しない)からの操作指示としての赤外線信号を受信する機能を有している。リモートコントローラはユーザからボタンが押圧されたことを検知し、押圧を検知したボタンに基づいた赤外線信号をDTV1に送信する。受信部402はこの赤外線信号を受信し、制御部401にこの赤外線信号に基づいた電気信号を送信する機能を有している。制御部401は受信部402から受け取る電気信号に基づいた各種処理を行う。本実施形態においては赤外線信号によって、リモートコントローラが受信部402に信号を送信するものとして例示したがこれに限定されず、信号を送受信できるのであれば他の通信規格等に準拠しているとしてもかまわない。
The receiving unit 402 is a receiving module such as an infrared receiving device, for example, and has a function of receiving an infrared signal as an operation instruction from a remote controller (not shown). The remote controller detects that the button has been pressed by the user, and transmits an infrared signal based on the button that has detected the press to the
動画受信部403は2次元動画または立体視動画が含まれる動画データを受信する機能を有している。動画受信部403が受信する動画としては、例えばTS(Transport Stream)形式で送信された動画、又はベースバンド信号等によって送信された動画等が考えられる。動画受信部403はDTV1と接続されたレコーダ等から又は放送波によって、メタデータと動画とを含む動画データを受信する。また、動画受信部403は受信した動画データをDTV1内の所定の構成に対して送信する機能を有している。更に、動画受信部403は受信した動画をデコードする機能を有している。
The moving image receiving unit 403 has a function of receiving moving image data including a two-dimensional moving image or a stereoscopic moving image. As the moving image received by the moving image receiving unit 403, for example, a moving image transmitted in a TS (Transport Stream) format, a moving image transmitted by a baseband signal, or the like can be considered. The moving image receiving unit 403 receives moving image data including metadata and moving images from a recorder or the like connected to the
判別部404は、動画データに含まれる動画が2次元動画であるのか立体視動画であるのかを判別する機能を有している。また、動画データに含まれる動画を表示するために推奨されているディスプレイサイズのデータを抽出する機能を有している。判別部404は受信した動画データのメタデータに基づいて、動画データに含まれる動画が2次元動画であるのか立体視動画であるのかを判別する。また、このメタデータ内に、この動画を表示するために推奨されるディスプレイのサイズ等のデータが含まれる場合には、この情報を抽出し、制御部401に送信する機能を有している。このときのメタデータは、例えばTSに含まれるとしてもよいし、DTV1と接続されたレコーダからTSとは別に送信されるものであってもよい。判別部404は動画が2次元動画であると判別すると、動画受信部403はフレームレート設定部405にデコード後の動画データを送信する。また、判別部404は動画が立体視動画であると判別すると、動画受信部403左右画像分離部406及び視差量検出部407にデコード後の動画データを送信する。しかし、上述のようにメタデータに動画表示に推奨されるディスプレイサイズ等の情報が含まれている場合には、動画受信部403は視差量検出部407に対して動画データの送信を行わない。本実施形態において、判別部404が動画データは2次元動画を含むか、3次元動画を含むかを判別する方法として、動画データのメタデータを参照して判別すると例示したがこれに限定されるものではない。例えば、判別部404はデコードされた動画の信号に基づいて、動画が立体視動画伝送用の所定の形式をしているか否かを検出し、この結果によって判別するとしてもよい。例えば、それぞれ解像度の小さい左眼用画像と右眼用画像が、左右に並んで一枚の画像として送信されるサイドバイサイド方式による立体視動画転送の場合は、判別部404は一枚の画像の左側半分と右側半分との間に画像の相関関係があるか否かを検出し、これに応じて2次元動画であるか立体視動画であるかの判別を行う等の判別方法が考えられる。
The determination unit 404 has a function of determining whether the moving image included in the moving image data is a two-dimensional moving image or a stereoscopic moving image. In addition, it has a function of extracting data of a display size recommended for displaying a moving image included in the moving image data. The determining unit 404 determines whether the moving image included in the moving image data is a two-dimensional moving image or a stereoscopic moving image based on the received moving image data metadata. In addition, when the metadata includes data such as a display size recommended for displaying the moving image, the metadata is extracted and transmitted to the control unit 401. The metadata at this time may be included in the TS, for example, or may be transmitted separately from the TS from the recorder connected to the
フレームレート設定部405は、DTV1の表示部413のスペック等に応じて、動画受信部403から受信する2次元動画を表示部413に表示する際のフレームレートを設定する機能を有している。フレームレート設定部405はフレームレートを設定した2次元動画及びこのフレームレートの情報を切替部411に対して出力する。
The frame
左右画像分離部406は、動画受信部403より立体視動画を受信すると、この動画の画像を左眼用画像と右眼用画像とに分離する機能を有している。左右画像分離部406は分離した左眼用画像を画像処理部A408に、右眼用画像を画像処理部B409に送信する。 The left and right image separation unit 406 has a function of separating a moving image image into a left-eye image and a right-eye image when receiving a stereoscopic moving image from the moving image receiving unit 403. The left and right image separation unit 406 transmits the separated left eye image to the image processing unit A408 and the right eye image to the image processing unit B409.
視差量検出部407は、動画受信部403より立体動画を受信すると、これに含まれる左眼用画像と右眼用画像との間の視差を検出する機能を有している。視差量検出部407は検出した視差量の情報を制御部401に送信する。 The parallax amount detection unit 407 has a function of detecting parallax between the left-eye image and the right-eye image included in the stereoscopic video received from the video receiving unit 403. The parallax amount detection unit 407 transmits information on the detected parallax amount to the control unit 401.
ここで制御部401は、動画受信部403より受信する動画のディスプレイ推奨サイズの情報、視差量検出部407より検出する動画の視差情報、又は受信部402より受信するユーザのリモートコントローラ操作に基づいて、画像処理部A408及び画像処理部B409に対して画像の引き伸ばし処理に関する指示を行う。すなわち、制御部401は画像処理部A408及び画像処理部B409に対して画像引き伸ばし等の処理を行うか否か、また画像引き伸ばし等の処理を行う場合には、どれだけ量の引き伸ばし(拡大)を行うかの指示を行う。 Here, the control unit 401 is based on the recommended display size information of the moving image received from the moving image reception unit 403, the disparity information of the moving image detected by the disparity amount detection unit 407, or the user's remote controller operation received from the receiving unit 402. The image processing unit A 408 and the image processing unit B 409 are instructed to enlarge the image. That is, the control unit 401 determines whether or not the image processing unit A 408 and the image processing unit B 409 perform processing such as image enlargement, and when performing processing such as image enlargement, how much enlargement (enlargement) is performed. Give instructions on what to do.
制御部401は、動画受信部403より動画のディスプレイ推奨サイズの情報を受信すると、この推奨されたディスプレイのサイズが所定値よりも小さいときには、画像処理部A408及び画像処理部B409に対して引き伸ばし処理を行うように指示を行う。また、制御部401は引き伸ばし処理を行う際には推奨されたディスプレイのサイズに応じて引き伸ばし処理量を設定し、推奨されたディスプレイサイズが小さいほど、引き伸ばし処理量を大きく設定する。ここで、制御部401が引き伸ばし処理指示を行うか否かの基準とする、ディスプレイサイズと比較する所定値はDTV1の表示装置のディスプレイサイズによって決定される。この所定値は制御部401中のメモリに格納されている。また、制御部401は視差量検出部407より立体視動画の視差情報を受信すると、この視差情報が所定値より大きい場合には、画像処理部A408及び画像処理部B409に対して引き伸ばし等の処理を行うように指示を行う。また、制御部401は引き伸ばし処理を行う際には受信する視差の値に応じて引き伸ばし処理量を設定し、視差の値が大きいほど引き伸ばし処理量を大きく設定する。また、ここで視差情報と比較する所定値もディスプレイサイズによって決定されており、制御部401はこの所定値の情報をメモリに記憶している。
When the recommended display size information of the moving image is received from the moving image receiving unit 403, the control unit 401 enlarges the image processing unit A408 and the image processing unit B409 when the recommended display size is smaller than a predetermined value. Instruct to do. The control unit 401 sets the enlargement processing amount according to the recommended display size when performing the enlargement processing, and sets the enlargement processing amount larger as the recommended display size is smaller. Here, the predetermined value to be compared with the display size, which is used as a reference for whether or not the control unit 401 issues an enlargement processing instruction, is determined by the display size of the display device of the
また、制御部401はユーザのリモートコントローラ操作に基づいても画像処理部A408及び画像処理部B409に対して画像引き伸ばし処理の指示を行うが、これに関しては図7を用いて後述にて説明を行う。 The control unit 401 also instructs the image processing unit A408 and the image processing unit B409 to perform image enlargement processing based on the user's remote controller operation, which will be described later with reference to FIG. .
画像処理部A408及び画像処理部B409は、左右画像分離部406より受信する左眼用画像、右眼用画像のそれぞれに対して画像引き伸ばし等の処理を行うことができる。画像処理部A408及び画像処理部B409が行う画像引き伸ばし等の処理方法に関しては図5を用いて後述にて説明を行う。画像処理部A408及び画像処理部B409は、画像の引き伸ばし処理を行うと引き伸ばした画像の一部を切り出し、切り出した画像を画像配列部410に送る。また、画像処理部A408及び画像処理部B409は、制御部401からの指示に基づいて画像引き伸ばし等の処理を行うが、制御部401が引き伸ばし処理を行わないように指示するとき、または制御部401より指示が来ない場合には引き伸ばし処理および切り出し処理を行わずに画像を画像配列部410に送る。 The image processing unit A408 and the image processing unit B409 can perform processing such as image enlargement on each of the left eye image and the right eye image received from the left and right image separation unit 406. A processing method such as image enlargement performed by the image processing unit A408 and the image processing unit B409 will be described later with reference to FIG. When the image processing unit A 408 and the image processing unit B 409 perform the image enlargement process, the image processing unit A 408 and the image processing unit B 409 cut out a part of the stretched image and send the cut out image to the image arrangement unit 410. The image processing unit A 408 and the image processing unit B 409 perform processing such as image enlargement based on an instruction from the control unit 401, but when the control unit 401 instructs not to perform the enlargement processing, or the control unit 401. When there is no more instruction, the image is sent to the image arrangement unit 410 without performing the enlargement process and the cutout process.
画像配列部410は、受信する左眼用画像及び右眼用画像を並べて出力する機能を有している。画像配列部410は受信する左眼用画像及び右眼用画像を交互に並べ、更に左眼用画像及び右眼用画像が含まれる立体視動画を表示する際のフレームレートを設定して、切替部411に対して出力する。画像配列部410の行う左眼用画像及び右眼用画像の並べ方に関しては図6を用いて説明を行う。 The image arrangement unit 410 has a function of arranging and outputting the received left-eye image and right-eye image. The image arrangement unit 410 alternately arranges the received left-eye images and right-eye images, and further sets and switches the frame rate for displaying a stereoscopic video including the left-eye images and the right-eye images. Output to the unit 411. The arrangement of the left eye image and the right eye image performed by the image arrangement unit 410 will be described with reference to FIG.
切替部411はフレームレート設定部405又は画像配列部410から受信する動画の信号を選択的に出力する出力手段としての機能を有している。切替部411は、2次元動画又は立体視動画の信号をフレームレートで示されたレートで表示制御部412に対して出力する。また、切替部411は立体視動画を出力するとき、この立体視動画のフレームレートに応じて、シャッタ制御信号送信部414に開閉信号の指示を行う。
The switching unit 411 has a function as an output unit that selectively outputs a moving image signal received from the frame
表示制御部412は表示部413を制御する機能を有しており、切替部411より入力する動画の信号に基づいて表示部413にこの動画を表示する機能を有している。
The display control unit 412 has a function of controlling the
表示部413は本実施形態に於いては例えばLCD(Liquid Crystal Display)であって、表示制御部412からの制御に基づいて、自身の有する表示画面2に動画を表示する機能を有している。また表示部413はLCDに限定されず、他にも表示部413の例としては、PDP(Plasma Display Panel)、有機EL(Electro-Luminescence)等の様々な表示装置が考えられる。
In this embodiment, the
シャッタ制御信号送信部414は切替部411からの指示に基づいてシャッタメガネ33に対して開閉信号の送信を行う。この開閉信号の送信は例えば赤外線通信に準拠して送信したとしてもよいし、他の通信規格に準拠しての送信であるとしてもよい。
The shutter control signal transmission unit 414 transmits an open / close signal to the
OSD生成部415は制御部401の制御に従って、UI(ユーザ・インタフェース)画面などを表示するためのOSD(On Screen Display)信号を生成する。OSD生成部415は生成した信号を表示制御部412に送信する。表示制御部412はこのOSD信号に基づくUI画像を動画に重畳させて表示する。 The OSD generation unit 415 generates an OSD (On Screen Display) signal for displaying a UI (user interface) screen and the like under the control of the control unit 401. The OSD generation unit 415 transmits the generated signal to the display control unit 412. The display control unit 412 displays a UI image based on the OSD signal superimposed on the moving image.
本実施形態では、画像の引き伸ばし等の処理を行う画像処理モジュールとして、左眼用画像の画像編集処理を行う画像処理部A408と右眼用画像の画像処理を行う画像処理部B410の2つが設けられている。これによって左眼用画像と右眼用画像とのそれぞれの画像の引き伸ばし等を並行して実行することができるため、1つのモジュールで画像処理を行う場合と比較して、画像処理速度を向上させることができる。 In the present embodiment, two image processing modules that perform image enlargement processing and the like are provided: an image processing unit A408 that performs image editing processing for a left-eye image and an image processing unit B410 that performs image processing for a right-eye image. It has been. As a result, the image for the left eye and the image for the right eye can be stretched in parallel, so the image processing speed is improved compared to the case where image processing is performed with one module. be able to.
本実施形態において、画像処理部A408及び画像処理部B409は制御部401からの指示に従って左眼用画像及び右眼用画像にそれぞれ画像引き伸ばし等の処理を行う。この処理について以下で詳細に説明を行う。 In the present embodiment, the image processing unit A 408 and the image processing unit B 409 perform processing such as image enlargement on the left eye image and the right eye image, respectively, according to instructions from the control unit 401. This process will be described in detail below.
図5は本実施形態における立体視動画の画像引き伸ばし等の処理方法の一例を示す概念図である。 FIG. 5 is a conceptual diagram showing an example of a processing method such as image enlargement of a stereoscopic video in the present embodiment.
図5(A)図は画像処理部A408及び画像処理部B409に入力される左眼用画像31と右眼用画像33を合成した画像を概念的に示した図である。図3で説明したように左眼用画像31と右眼用画像33とは視差が大きすぎてユーザはこれを立体として捉えることが難しい。
FIG. 5A is a diagram conceptually showing an image obtained by synthesizing the left eye image 31 and the
図5(B)図は画像処理部A408及び画像処理部B409が行う画像引き伸ばし等の処理について概念的に示した図である。 FIG. 5B is a diagram conceptually showing processing such as image enlargement performed by the image processing unit A408 and the image processing unit B409.
画像処理部A408は、入力される左眼用画像31を水平方向に引き伸ばす処理を行い、この引き伸ばされた画像の一部の領域を切り出す。このとき切り出される領域は、引き伸ばされる前の左眼用画像31と同じサイズであって、この引き伸ばされた画像の右端部の画素を含まない領域である。本実施形態に於いては、この切り出される領域は引き伸ばされた画像の左端近傍の画素を含む(例えば左端から1から10の画素のいずれかを含む等)領域であるものと例示して説明を行う。これらの処理によって左利眼用画像51が生成される。左眼用画像51に描画されている物体52は左眼用画像31に描画される物体32よりも右側に寄っている。
The image processing unit A408 performs a process of stretching the input left-eye image 31 in the horizontal direction, and cuts out a partial region of the stretched image. The area cut out at this time is the same size as the image 31 for the left eye before being stretched, and does not include the pixel at the right end of the stretched image. In the present embodiment, the cutout area is described as an example including an area including pixels near the left end of the stretched image (for example, including any one of
また、画像処理部B409は、入力される右眼用画像33を水平方向に引き伸ばす処理を行い、この引き伸ばされた画像の一部の領域を切り出す。この引き伸ばされた画像の左端部の画素を含まない領域である。本実施形態に於いては、この切り出される領域は引き伸ばされた画像の右端近傍の画素を含む(例えば右端から1から10の画素のいずれかを含む等)領域であるものと例示して説明を行う。これらの処理によって右利眼用画像53が生成される。右眼用画像53に描画されている物体54は右眼用画像33に描画される物体34よりも左側に寄っている。
Further, the image processing unit B409 performs a process of stretching the input right-
図5(C)図はユーザが左眼用画像51を左眼のみで、右眼用画像53を右眼のみで見ているときのそれぞれの視線を合成して概念的に示した図である。
FIG. 5C is a diagram conceptually showing a combination of the lines of sight when the user views the left-eye image 51 only with the left eye and the right-
画像処理部A408及び画像処理部B409が上述のように、左眼用画像31と右眼用画像33の引き伸ばし及び切り出し処理によって生成した左眼用画像51と右眼用画像53では、物体52と物体54との距離が近づいておりそれぞれの画像の間の視差は小さいものとなっている。このため、ユーザの左右それぞれの眼の視線が交差する点ができ、ユーザは立体として物体55を捉えることができる。
As described above, in the left eye image 51 and the
本実施形態に於いては、左眼用画像31の左端近傍を含む領域と右眼用画像33の右端近傍を含む領域とを切り出して左眼用画像51と右眼用画像53を出力している。この場合、左眼用画像31と右眼用画像33との間の視差が大きい場合にも対応することが可能である。
In the present embodiment, a region including the vicinity of the left end of the left eye image 31 and a region including the vicinity of the right end of the
本実施形態に於いては画像を水平方向に引き伸ばす場合を説明したがこれに限定されず、例えば画像の縦横比を変えずに画像を引き伸ばすとしてもよい(画像の拡大)。この様に画像の縦横比を変えずに画像を引き伸ばすとした場合においても、画像近傍を含む領域であって引き伸ばし前の画像と同じ大きさの画像を切り出して出力する。この様に引き伸ばす方向は水平方向のみに限定されず、画像の垂直方向にも引き伸ばされるとしてもよい。 In this embodiment, the case where the image is stretched in the horizontal direction has been described. However, the present invention is not limited to this. For example, the image may be stretched without changing the aspect ratio of the image (image enlargement). Even when the image is stretched without changing the aspect ratio of the image in this way, an image having the same size as the unstretched image in the region including the vicinity of the image is cut out and output. The extending direction is not limited to the horizontal direction, but may be extended in the vertical direction of the image.
本実施形態に於いては説明の簡単のため、ユーザが立体として捉えるものを物体52等として示しているが、当然左眼用画像51及び右眼用画像53に描画された他のものに関してもユーザは立体として認識することができる。
In the present embodiment, for the sake of simplicity of explanation, what the user perceives as a three-dimensional object is shown as an object 52 or the like, but naturally other things drawn on the left-eye image 51 and the right-
また上述では画像処理部A408及び画像処理部B409が行う処理手順を、引き伸ばし処理、切り出し処理の順で行うように説明したがこれに限定されず、先に切り出し処理を行った上で、引き伸ばし処理を行うとしてもよい。 In the above description, the processing procedure performed by the image processing unit A408 and the image processing unit B409 is described as being performed in the order of the enlargement process and the cutout process. However, the present invention is not limited to this, and the enlargement process is performed after performing the cutout process first. May be performed.
本実施形態では、画像を局所的にではなく全体的に引き伸ばすため、画像の中に局所的な不自然さが生じることがない。 In the present embodiment, since the image is stretched as a whole rather than locally, local unnaturalness does not occur in the image.
しかし、本実施形態では画像全体を引き伸ばすものとして説明するが、例えば局所的に画像を引き伸ばすとしてもよい。 However, in the present embodiment, the description will be made assuming that the entire image is stretched. However, for example, the image may be stretched locally.
また、本実施形態におけるDTV1は画像を切り出して表示するのみではなく引き伸ばし処理によって元の画像のサイズ以上に引き伸ばしているため、切り出して表示する場合とは異なり、表示画面端部等に何も表示されていない領域が生じることがない。
In addition, the
次に画像配列部410が行う左眼用画像及び右眼用画像を並べる処理に関して説明を行う。 Next, the process of arranging the left eye image and the right eye image performed by the image arrangement unit 410 will be described.
図6は本実施形態における画像配列部410が行う画像を並べる処理の一例を示す概念図である。 FIG. 6 is a conceptual diagram illustrating an example of processing for arranging images performed by the image arrangement unit 410 according to the present embodiment.
画像配列部410は画像処理部A408及び画像処理部B409の画像を左右交互に時系列的に並べて出力する。図6において左眼用画像61は左眼用画像51より後に表示されるべき画像であり、右眼用画像62は右眼用画像53より後に表示されるべき画像であるとする。
The image arrangement unit 410 outputs the images of the image processing unit A 408 and the image processing unit B 409 arranged side by side in time series alternately. In FIG. 6, it is assumed that the left-
このとき画像配列部410は左眼用画像51、右眼用画像53、左眼用画像61、右眼用画像62の順で画像を出力する。
At this time, the image arrangement unit 410 outputs images in the order of the left eye image 51, the
本実施形態のDTV1はOSD生成部415によって生成されるOSD信号に基づいてUI画像を表示する。この表示に関して次に説明を行う。
The
図7は本実施形態におけるUI画像表示時のDTV1の表示画面の一例を示す概観図である。図7には表示画面2、表示画像71、視差量調整表示72、視差量調整スライダ73、年齢入力ボックス74、OKボタン75、及びキャンセルボタン76が示されている。
FIG. 7 is an overview diagram showing an example of a display screen of the
DTV1の表示画面2には立体視動画の内の1画像である表示画像71が表示され、更に表示画像71に重層されて視差量調整表示72が表示されている。視差量調整表示72はOSD生成部415によって生成されるOSD信号に基づいて表示されており、この視差量調整表示72を用いてユーザは立体視動画の連続する画像間の視差量を調整することができる。視差量調整表示72には、視差量調整スライダ73、年齢入力ボックス74、
OKボタン75、及びキャンセルボタン76が表示されている。
On the
An
視差量調整スライダ73はユーザがリモートコントローラの左右キーの操作に応じて、斜線で示されるスライダが移動し、このスライダの位置と対応するように、立体視動画の画像間の視差量は制御される。このスライダの位置が固定されるとこの位置に対応した視差量で動画が表示される。具体的には、ユーザがリモートコントローラを操作すると、制御部401に操作に関する信号が入力され、この信号に基づいて制御部401は画像処理部A408及び画像処理部B409に画像の引き伸ばし処理指示及び引き伸ばし処理量の指示を行う。画像処理部A408及び画像処理部B409はこの指示に基づいて画像を引き伸ばし、上述のように一部切り出す。この様に処理を行われた画像が表示画面2に表示されることとなる。
The
年齢入力ボックス74はユーザが視聴者の年齢を入力可能なボックスである。ユーザはリモートコントローラの数字キー(チャンネルキー)等を用いて、この年齢入力ボックス74に数値を入力することが可能である。制御部401は自身のメモリに画像処理部A408及び画像処理部B409に画像引き伸ばし指示を行う際の引き伸ばし処理量の値と、ユーザの年齢の値とを対応させているテーブルを有している。年齢入力ボックス74に視聴者の年齢が入力されるとこのテーブルを参照して引き伸ばし処理量を決定し、画像処理部A408及び画像処理部B409に画像の引き伸ばし処理指示及び引き伸ばし処理量の指示を行う。視聴者が子供である等の理由で両眼の間隔が小さい場合、表示される立体視動画の画像間の視差は、視聴者の両眼の間隔に対して大きくなってしまうため、視聴者は立体視動画を立体として捉えることが難しくなる。このため、視聴者の両眼の間隔が小さい場合には立体動画の視差を小さくしたほうがよく、DTV1は視聴者の年齢に応じて立体視動画の左右それぞれの画像間の視差を小さくよう引き伸ばし処理を行う。
The
OKボタン75は、ユーザが視差量の設定を適用する場合に選択するボタンである。OKボタン75をユーザが選択すると、視差量の調整は行われたままで、視差量調整表示72は非表示となる。また、キャンセルボタン76はユーザが視差量の設定をキャンセルするために選択するボタンである。OKボタン75又はキャンセルボタン76がユーザによって選択されるとOSD生成部415はOSD信号の生成及び出力を停止し、視差量調整表示72の表示をやめる。
The
次にDTV1が行う視差量調整処理の処理フローに関して説明を行う。
Next, the process flow of the parallax amount adjustment process performed by the
図8は本実施形態におけるDTV1が行う視差量調整処理の一例を示すフロー図である。
FIG. 8 is a flowchart showing an example of the parallax amount adjustment processing performed by the
DTV1は先ず、動画受信部403によって動画データを受信する(ステップS801)。
First, the
次に動画受信部403がこの動画データのデコードを行い、判別部404が動画データのメタデータを読み込み、動画データに含まれる動画が立体視動画であるか否かの判別を行う(ステップS802)。このときの判別方法はこれに限定されず、上述のように判別部404は動画データに含まれる画像信号に基づいて立体視動画であるか否かの判別を行ってもよい。 Next, the moving image receiving unit 403 decodes the moving image data, and the determination unit 404 reads the metadata of the moving image data, and determines whether or not the moving image included in the moving image data is a stereoscopic moving image (step S802). . The determination method at this time is not limited to this, and as described above, the determination unit 404 may determine whether or not the video is a stereoscopic video based on the image signal included in the video data.
判別部404が立体視動画であると判別しないとき(ステップS802、No)、すなわち動画が2次元動画であると判別するとき、動画受信部403はフレームレート設定部405に動画データを出力する。フレームレート設定部405は入力された動画のフレームレートを設定した後に、動画データ及びフレームレートの情報を切替部411に出力する。これらが入力された切替部411は設定されたフレームレートに基づいて表示制御部412に動画を出力し、表示制御部412は表示部413に動画を表示させる(ステップS803)。
When the determination unit 404 does not determine that the video is a stereoscopic video (No in step S802), that is, when it is determined that the video is a two-dimensional video, the video reception unit 403 outputs video data to the frame
判別部404が動画は立体視動画であると判別したとき(ステップS802、Yes)、判別部404はメタデータから動画を表示する推奨ディスプレイサイズの情報があるかどうかを検出し、これが存在する場合にはこの情報を制御部401に対して送信する。また動画受信部403はこの動画データを左右画像分離部406及び視差量検出部407に対して出力する(動画データ内に推奨ディスプレイサイズの情報がある場合には動画受信部403は視差量検出部407へは動画データを出力しない)。動画データが入力された左右画像分離部406は、この動画データに含まれる立体視動画から左右それぞれの画像を分離し(ステップS804)、左眼用画像を画像処理部A408へ、右眼用画像を画像処理部B409へ出力する。 When the determining unit 404 determines that the moving image is a stereoscopic moving image (step S802, Yes), the determining unit 404 detects whether there is information on a recommended display size for displaying the moving image from the metadata, and this exists. This information is transmitted to the control unit 401. The moving image receiving unit 403 outputs the moving image data to the left and right image separating unit 406 and the parallax amount detecting unit 407 (if the moving image data includes information on the recommended display size, the moving image receiving unit 403 No moving image data is output to 407). The left and right image separating unit 406 to which the moving image data is input separates the left and right images from the stereoscopic moving image included in the moving image data (step S804), and the left eye image is transferred to the image processing unit A408. Is output to the image processing unit B409.
また、視差量検出部407は入力された動画の左眼用画像と右眼用画像とを比較し、それぞれの画像間にどれだけの視差量が存在するのかを検出する(ステップS805)。視差量検出部407は検出した視差量の情報を制御部401に出力する。 In addition, the parallax amount detection unit 407 compares the left-eye image and the right-eye image of the input moving image, and detects how much parallax amount exists between the images (step S805). The parallax amount detection unit 407 outputs information on the detected parallax amount to the control unit 401.
制御部401は、推奨ディスプレイサイズ情報又は視差量情報を受信し、この情報に基づいて視差調整を行うか否かの判別を行う(ステップS806)。 The control unit 401 receives recommended display size information or parallax amount information, and determines whether or not to perform parallax adjustment based on this information (step S806).
推奨ディスプレイサイズが所定値より大きいとき、又は視差量が所定値より小さいときには視差調整を行わないと判別し(ステップS806、No)、推奨ディスプレイサイズが所定値より小さいとき、又は視差量が所定値より大きいときには視差調整を行うと判別する(ステップS806、Yes)。 When the recommended display size is larger than the predetermined value or when the parallax amount is smaller than the predetermined value, it is determined that the parallax adjustment is not performed (No in step S806), and when the recommended display size is smaller than the predetermined value or the parallax amount is the predetermined value If larger, it is determined that parallax adjustment is performed (step S806, Yes).
制御部401は視差調整を行わないと判別するとき(ステップS806、No)、ユーザから視差調整指示を受信するか否かの判別を行う(ステップS807)。ユーザのリモートコントローラの所定の操作によって、DTV1は視差量調整表示72を表示し、視差量調整表示72に基づいたユーザからの操作指示を受信すると(ステップS807、Yes)、制御部401はこの操作指示に応じた調整量の視差調整を行う。
When determining that the parallax adjustment is not performed (No in Step S806), the control unit 401 determines whether or not a parallax adjustment instruction is received from the user (Step S807). When the user's remote controller performs a predetermined operation, the
ステップS806又はステップS807において視差量を調整するとき(ステップS806、Yes)(ステップS807、Yes)、制御部401は画像処理部A408および画像処理部B409に画像の引き伸ばし処理の指示及び画像引き伸ばし量の指示を行う。画像処理部A408および画像処理部B409は、この指示に基づいて左眼用画像及び右眼用画像に引き伸ばし処理を行う(ステップS808)。 When the parallax amount is adjusted in step S806 or step S807 (step S806, Yes) (step S807, Yes), the control unit 401 instructs the image processing unit A408 and the image processing unit B409 to perform the image enlargement processing and the image enlargement amount. Give instructions. Based on this instruction, the image processing unit A408 and the image processing unit B409 perform enlargement processing on the left-eye image and the right-eye image (step S808).
次に、画像処理部A408および画像処理部B409は、引き伸ばした画像の一部の領域を切り出し(ステップS809)、切り出した画像を画像配列部410へと出力する。 Next, the image processing unit A408 and the image processing unit B409 cut out a partial region of the stretched image (step S809), and output the cut out image to the image arrangement unit 410.
ステップS807においてユーザから視差調整指示を受信しないとき(ステップS807、No)、制御部401は、画像処理部A408および画像処理部B409に画像の引き伸ばし処理を行わないに指示を行う。この指示を受信した画像処理部A408および画像処理部B409は左眼用画像及び右眼用画像に処理を施さず、これらを画像配列部410に出力する。 When a parallax adjustment instruction is not received from the user in step S807 (No in step S807), the control unit 401 instructs the image processing unit A408 and the image processing unit B409 not to perform image enlargement processing. Upon receiving this instruction, the image processing unit A 408 and the image processing unit B 409 do not process the left eye image and the right eye image, and output them to the image arrangement unit 410.
画像処理部A408および画像処理部B409より画像を入力された画像配列部410は、入力された画像を時系列的に左右交互に配列し、立体視動画のフレームレートを設定した後、配列した画像群とフレームレートの情報とを切替部411に対して出力する。 The image arrangement unit 410 to which images are input from the image processing unit A 408 and the image processing unit B 409 alternately arrange the input images in the left and right in time series, set the frame rate of the stereoscopic video, and then arrange the images. The group and frame rate information is output to the switching unit 411.
配列した画像群(立体視動画)とフレームレートの情報とを入力された切替部411は受信したフレームレートに基づいて、表示制御部412にこの画像群を出力する。この入力を受けた表示制御部412は表示部413に立体動画を表示させる(ステップS811)。 The switching unit 411 to which the arranged image group (stereoscopic moving image) and frame rate information are input outputs the image group to the display control unit 412 based on the received frame rate. Receiving this input, the display control unit 412 displays a stereoscopic video on the display unit 413 (step S811).
ステップS803またはステップS811が終了すると一連の処理フローは終了となる。 When step S803 or step S811 ends, a series of processing flows ends.
本実施形態に於いてはシャッタメガネ2を用いたフレームシーケンシャル方式で立体動画をユーザに提供するため、左眼用画像及び右眼用画像は交互に出力される。しかし、本実施形態はこれに限定されず、他の立体視動画提供方法によってユーザに立体動画を提供するとしてもよい。例えば表示される一つの画像の内に左眼用画像と右眼用画像とが混在しており、それぞれの画像を偏光等によってユーザの左右それぞれの眼に見せて、立体視を提供する立体視提供方法を採用したとしてもよい。このときには、DTV1は左眼用画像と右眼用画像とを同時に一つの画像として出力することとなる。
In this embodiment, in order to provide a user with a stereoscopic video using a frame sequential method using the
本実施形態に於いて、DTV1は立体視動画に含まれる左眼用画像と右眼用画像の視差を検出し、この視差に基づいて引き伸ばし処理を行うか否かを判別するため、DTV1は立体視動画の視差が大きい場合には自動的に視差量の調整を行うことができる。
In the present embodiment, the
また、本実施形態に於いてDTV1は立体視動画の表示が推奨されるディプレイサイズに応じて、引き伸ばし処理を行うため、DTV1は立体視動画の特性に応じて自動的に視差量の調整を行うことができる。
In this embodiment, since the
さらに、DTV1は立体視動画の視差量や、立体動画の推奨ディスプレイサイズに応じて、引き伸ばし処理の処理量を制御するため、DTV1は自動的に視差の調整量を制御する。
Furthermore, since the
本実施形態では、DTV1はユーザが視差量を設定するためのインターフェースを設けるため、ユーザは視差量を自分で好適に設定することが可能となる。更にDTV1は視差量調整のための表示を設けるため、ユーザは調整量を直感的に把握することができる。
In the present embodiment, since the
本実施形態に於いては左眼用画像と右眼用画像との視差量が大きすぎる場合に、この視差を小さくするために画像の引き伸ばし処理を行った場合を例示したが、これに限定されず、画像間の視差が小さすぎる場合に画像の引き伸ばし処理を行うとしてもよい。このときは、画像処理部A408および画像処理部B409は画像の引き伸ばしを行った後、左眼用画像の右端近傍の元画像と同じ大きさの領域と、右眼用画像の左端近傍の元画像と同じ大きさの領域と、を切り出して、切り出した画像を出力する。これによって画像間の視差は大きくなるため、DTV1は小さすぎた視差量を調整し、ユーザの視聴により好適な立体視動画を提供することが可能となる。この場合に表示画面上に画像が表示されない領域が発生することを防ぐことができる。
In this embodiment, when the amount of parallax between the image for the left eye and the image for the right eye is too large, the case where the image is stretched to reduce the parallax is illustrated, but the present invention is not limited to this. Alternatively, the image enlargement process may be performed when the parallax between the images is too small. At this time, after the image processing unit A408 and the image processing unit B409 stretch the image, an area having the same size as the original image near the right end of the left eye image and the original image near the left end of the right eye image And an area having the same size as is cut out, and the cut out image is output. As a result, the parallax between the images increases, so that the
本実施形態におけるDTV1は表示装置の表示画面上に画像が表示されていない領域を発生させることなく、ユーザに適切に立体視動画を視聴させることができる。
The
(第2の実施形態)
本発明における第2の実施形態について以下にて説明を行う。
(Second Embodiment)
The second embodiment of the present invention will be described below.
図9は本実施形態におけるODDレコーダ9の内部構成の一例を示すブロック図である。図9にはODDレコーダ9、制御部901、受信部902、動画受信部903、判別部904、フレームレート設定部905、左右画像分離部906、視差量検出部907、画像処理部A908、画像処理部B909、画像配列部910、切替部911、通信部912、表示装置情報検出部913、ODD914、および光ディスク915が示されている。 FIG. 9 is a block diagram showing an example of the internal configuration of the ODD recorder 9 in the present embodiment. 9 shows an ODD recorder 9, a control unit 901, a reception unit 902, a moving image reception unit 903, a determination unit 904, a frame rate setting unit 905, a left / right image separation unit 906, a parallax amount detection unit 907, an image processing unit A 908, an image processing unit. A part B909, an image arrangement part 910, a switching part 911, a communication part 912, a display device information detection part 913, an ODD 914, and an optical disk 915 are shown.
本実施形態のODDレコーダ9の内部構成において、第1の実施形態と同様の名称が付されている構成については第1の実施形態とほぼ同様の機能を持つものとする。以下では第1の実施形態では説明されなかった構成、また第1の実施形態と同様の名称が付されているが異なる機能を有する構成について重点的に説明を行う。 In the internal configuration of the ODD recorder 9 according to the present embodiment, a configuration having the same name as that of the first embodiment has substantially the same function as that of the first embodiment. Hereinafter, a configuration that has not been described in the first embodiment and a configuration that has the same name as the first embodiment but has different functions will be described mainly.
ODDレコーダ9は装填された光ディスク915に動画を格納、又は光ディスク915に格納されている動画を再生することの可能なレコーダである。光ディスク915とは例えば、DVD(Digital Versatile Disc)、BD(Blu-ray(登録商標) Disc)等を指す。 The ODD recorder 9 is a recorder that can store a moving image on a loaded optical disk 915 or reproduce a moving image stored on the optical disk 915. The optical disk 915 indicates, for example, a DVD (Digital Versatile Disc), a BD (Blu-ray (registered trademark) Disc), or the like.
通信部912は、例えばHDMI(High-Definition Multimedia Interface)規格に準拠した通信モジュールであって、HDMIケーブルによって接続されたDTV等の表示装置と通信を行う機能を有している。本実施形態において通信部912は外部機器であるDTVと通信を行い、種々のデータの送受信を行う。 The communication unit 912 is a communication module compliant with, for example, the HDMI (High-Definition Multimedia Interface) standard, and has a function of communicating with a display device such as a DTV connected by an HDMI cable. In this embodiment, the communication unit 912 communicates with a DTV that is an external device, and transmits and receives various data.
表示装置情報検出部913は、通信部912が通信を行っている表示装置(ここではDTV)に対して、この表示装置のディスプレイ(表示画面)のサイズ情報を送信するように通信部912を介した指示を行う。表示装置情報検出部913は通信部912を介してDTVよりディスプレイサイズの情報を取得すると、この情報を制御部901に対して送信する機能を有している。 The display device information detection unit 913 passes the communication unit 912 through the communication unit 912 so as to transmit the size information of the display (display screen) of the display device to the display device (in this case, the DTV) with which the communication unit 912 is communicating. Follow the instructions. When the display device information detection unit 913 acquires display size information from the DTV via the communication unit 912, the display device information detection unit 913 has a function of transmitting this information to the control unit 901.
第1の実施形態において制御部401はDTV1のディスプレイのサイズ情報を自身の有するメモリ内に格納しており、この情報と動画の推奨ディスプレイサイズ情報及び動画の視差情報に基づいて、画像の引き伸ばし処理を行うか否か、さらに引き伸ばし処理量の決定を行う。本実施形態における制御部901はODDレコーダ9と接続されたDTVのディスプレイのサイズ情報を表示装置情報検出部913より受信し、この情報と動画の推奨ディスプレイサイズ情報及び動画の視差情報に基づいて、画像の引き伸ばし処理を行うか否か、さらに引き伸ばし処理量の決定を行う。このとき、制御部901はこの接続機器のディスプレイサイズ情報をメモリに格納するとしてもよい。
In the first embodiment, the control unit 401 stores the display size information of the
ODD914は、光ディスク915からのデータ読み出し、及び光ディスク915へのデータ書き込みを行う機能を有する光ディスクドライブ(Optical Disk Drive)である。また、ODD914は光ディスク915より読み出した動画データを動画受信部903に対して出力する機能を有している。 The ODD 914 is an optical disk drive (Optical Disk Drive) having a function of reading data from the optical disk 915 and writing data to the optical disk 915. The ODD 914 has a function of outputting the moving image data read from the optical disc 915 to the moving image receiving unit 903.
本実施形態に於いては電子機器の一例としてODDレコーダ9を示したがこれに限定されず、例えばHDD(Hard Disk Drive)レコーダ等のレコーダも電子機器の例として考えられる。 In the present embodiment, the ODD recorder 9 is shown as an example of the electronic device. However, the present invention is not limited to this, and a recorder such as an HDD (Hard Disk Drive) recorder is also considered as an example of the electronic device.
本実施形態のODDレコーダ9は外部接続された表示装置の情報を受信し、この情報に応じて視差量調整を行うことができる。 The ODD recorder 9 of the present embodiment can receive information on an externally connected display device and can adjust the amount of parallax according to this information.
なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具現化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに異なる実施形態にわたる構成要素を適宜組み合わせてもよい。 Note that the present invention is not limited to the above-described embodiments as they are, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. In addition, various inventions can be formed by appropriately combining a plurality of components disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, constituent elements over different embodiments may be appropriately combined.
1…DTV、2…表示画面、3…シャッタメガネ、4…動画表示システム、21…左眼用画像、22…物体、23…右眼用画像、24…物体、25…物体、31…左眼用画像、32…物体、33…右眼用画像、34…物体、401…制御部、402…受信部、403…動画受信部、404…判別部、405…フレームレート設定部、406…左右画像分離部、407…視差量検出部、408…画像処理部A、409…画像処理部B、410…画像配列部、411…切替部、412…表示制御部、413…表示部、414…シャッタ制御信号送信部、415…OSD生成部、51…左眼用画像、52…物体、53…右眼用画像、54…物体、55…物体、61…左眼用画像、62…右眼用画像、71…表示画像、72…視差量調整表示、73…視差量調整スライダ、74…年齢入力ボックス、75…OKボタン、76…キャンセルボタン、9…ODDレコーダ、901…制御部、902…受信部、903…動画受信部、904…判別部、905…フレームレート設定部、906…左右画像分離部、907…視差量検出部、908…画像処理部A、909…画像処理部B、910…画像配列部、911…切替部、912…通信部、913…表示装置情報検出部、914…ODD、915…光ディスク
DESCRIPTION OF
Claims (6)
前記視差量調整手段の視差量の調整に応じて、前記第1の画像及び第2の画像を引き伸ばす引き伸ばし手段と、
前記引き伸ばされた第1の画像の第1の領域に対応する第3の画像および前記引き伸ばされた第2の画像の第2の領域に対応する第4の画像のデータを出力する出力手段と
を具備する電子機器。 Parallax amount adjusting means for allowing a user to adjust the parallax amount between the first image and the second image;
Stretching means for stretching the first image and the second image in accordance with adjustment of the amount of parallax of the parallax amount adjusting means;
Output means for outputting data of a third image corresponding to a first region of the stretched first image and a fourth image corresponding to a second region of the stretched second image; Electronic equipment provided.
前記第4の画像は、前記引き伸ばされた第2の画像のうち、少なくとも右側または左側のいずれか他方の端部を含まない領域に対応する
請求項1記載の電子機器。 The third image corresponds to a region that does not include at least either the right side or the left side of the stretched first image,
2. The electronic device according to claim 1, wherein the fourth image corresponds to a region that does not include at least either the right side or the left side of the stretched second image.
請求項1または2に記載の電子機器。 The electronic device according to claim 1, wherein the output unit outputs the data of the third image and the fourth image continuously or simultaneously.
請求項1記載の電子機器。 The electronic apparatus according to claim 1, wherein the stretching unit stretches the first image and the second image at least in a horizontal direction.
請求項1記載の電子機器。 The electronic device according to claim 1, further comprising receiving means for receiving the first image and the second image from a broadcast wave or a storage medium.
前記視差量の調整に応じて、前記第1の画像及び第2の画像を引き伸ばし、
前記引き伸ばされた第1の画像の第1の領域に対応する第3の画像および前記引き伸ばされた第2の画像の第2の領域に対応する第4の画像のデータを出力する
画像出力方法。 Adjusting the amount of parallax between the first image and the second image;
In response to the adjustment of the parallax amount, the first image and the second image are stretched,
An image output method for outputting data of a third image corresponding to a first region of the stretched first image and a fourth image corresponding to a second region of the stretched second image.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011174015A JP2011223640A (en) | 2011-08-09 | 2011-08-09 | Electronic device and image output method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011174015A JP2011223640A (en) | 2011-08-09 | 2011-08-09 | Electronic device and image output method |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010079838A Division JP4806082B2 (en) | 2010-03-30 | 2010-03-30 | Electronic apparatus and image output method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2011223640A true JP2011223640A (en) | 2011-11-04 |
Family
ID=45039883
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011174015A Pending JP2011223640A (en) | 2011-08-09 | 2011-08-09 | Electronic device and image output method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2011223640A (en) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08317429A (en) * | 1995-05-23 | 1996-11-29 | Matsushita Electric Ind Co Ltd | Stereoscopic electronic zoom device and stereoscopic picture quality controller |
JP2005073013A (en) * | 2003-08-26 | 2005-03-17 | Sharp Corp | Device and method for stereo image display, program for making computer execute the method, and recording medium recording the program |
JP2005073049A (en) * | 2003-08-26 | 2005-03-17 | Sharp Corp | Device and method for reproducing stereoscopic image |
-
2011
- 2011-08-09 JP JP2011174015A patent/JP2011223640A/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08317429A (en) * | 1995-05-23 | 1996-11-29 | Matsushita Electric Ind Co Ltd | Stereoscopic electronic zoom device and stereoscopic picture quality controller |
JP2005073013A (en) * | 2003-08-26 | 2005-03-17 | Sharp Corp | Device and method for stereo image display, program for making computer execute the method, and recording medium recording the program |
JP2005073049A (en) * | 2003-08-26 | 2005-03-17 | Sharp Corp | Device and method for reproducing stereoscopic image |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20150350626A1 (en) | Method for providing three-dimensional (3d) image, method for converting 3d message, graphical user interface (gui) providing method related to 3d image, and 3d display apparatus and system for providing 3d image | |
WO2010064448A1 (en) | Stereoscopic video player, stereoscopic video playback system, stereoscopic video playback method, and semiconductor device for stereoscopic video playback | |
US20110012993A1 (en) | Image reproducing apparatus | |
EP2320669B1 (en) | Stereoscopic image reproduction method in case of pause mode and stereoscopic image reproduction apparatus using same | |
US20110063422A1 (en) | Video processing system and video processing method | |
WO2011132242A1 (en) | 3d video playback method and 3d video playback device | |
JP2011191347A (en) | Display device and audiovisual device | |
EP2627092B1 (en) | Three-dimensional glasses, three-dimensional image display apparatus, and method for driving the three-dimensional glasses and the three-dimensional image display apparatus | |
JP2011118351A (en) | Video display apparatus and control method thereof | |
JP4806082B2 (en) | Electronic apparatus and image output method | |
US20120050509A1 (en) | Stereoscopic glasses, stereoscopic video display device, and stereoscopic video display system | |
CN102300114B (en) | The display packing of stereoscopic display device and stereoscopic display device | |
US20130016196A1 (en) | Display apparatus and method for displaying 3d image thereof | |
US20110134226A1 (en) | 3d image display apparatus and method for determining 3d image thereof | |
KR101885215B1 (en) | Display apparatus and display method using the same | |
US20130266287A1 (en) | Reproduction device and reproduction method | |
JP2014207492A (en) | Stereoscopic image display device | |
JP5166567B2 (en) | Electronic device, video data display control method, and program | |
US8736668B2 (en) | Electronic apparatus and image processing method | |
US20130021454A1 (en) | 3d display apparatus and content displaying method thereof | |
JP2011223640A (en) | Electronic device and image output method | |
KR101620969B1 (en) | Display apparatus and method for providing 3D image preview applied to the same and system for providing 3D Image | |
KR20120062428A (en) | Image display apparatus, and method for operating the same | |
KR20110037068A (en) | An apparatus for displaying stereoscopic image and a method for controlling video quality | |
KR101804912B1 (en) | An apparatus for displaying a 3-dimensional image and a method for displaying subtitles of a 3-dimensional image |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110810 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20110810 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20110901 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111018 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20120228 |