WO2012133398A1 - 立体映像処理装置及び立体映像処理方法 - Google Patents

立体映像処理装置及び立体映像処理方法 Download PDF

Info

Publication number
WO2012133398A1
WO2012133398A1 PCT/JP2012/057917 JP2012057917W WO2012133398A1 WO 2012133398 A1 WO2012133398 A1 WO 2012133398A1 JP 2012057917 W JP2012057917 W JP 2012057917W WO 2012133398 A1 WO2012133398 A1 WO 2012133398A1
Authority
WO
WIPO (PCT)
Prior art keywords
signal
vertical
video
video signal
unit
Prior art date
Application number
PCT/JP2012/057917
Other languages
English (en)
French (fr)
Inventor
吉田 篤史
Original Assignee
株式会社Jvcケンウッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社Jvcケンウッド filed Critical 株式会社Jvcケンウッド
Priority to JP2013507606A priority Critical patent/JP5741683B2/ja
Publication of WO2012133398A1 publication Critical patent/WO2012133398A1/ja
Priority to US14/025,914 priority patent/US9350971B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals

Definitions

  • the present invention relates to a stereoscopic video processing apparatus and a stereoscopic video processing method, and more particularly, to a stereoscopic video processing apparatus and a stereoscopic video processing method capable of switching a display image vertically and horizontally and capable of 2D3D conversion.
  • a method for acquiring a video signal for displaying a three-dimensional video a method of photographing using two cameras, or a two-dimensional video signal as disclosed in Patent Document 1 is converted into a three-dimensional video signal.
  • a method using 2D3D conversion has attracted attention in recent years because it can display a past video asset in 3D, and many studies have been made.
  • Patent Document 2 it is determined whether the display device is viewed in the vertical direction or the horizontal direction using a gravity sensor, etc. Increasingly, there is an increase in the aspect conversion technology that changes the screen display by rotating it vertically and horizontally.
  • the basic image 1 is converted into the 2D3D conversion image 2 and converted into the vertical / horizontal conversion image 3 as shown in FIG.
  • the output signal is obtained by shifting the right-eye signal and the left-eye signal left and right.
  • a method may be considered in which a right-eye signal and a left-eye signal are output for one frame, and each signal is converted into an output signal by vertical and horizontal conversion via a frame memory.
  • this method has a problem that the required capacity of the frame memory used for vertical / horizontal conversion is doubled because the frame memory holds the right-eye signal and the left-eye signal after 2D3D conversion one frame at a time.
  • a method is conceivable in which the right-eye signal and the left-eye signal are output in a state of being combined into one frame, and are converted into an output signal through vertical and horizontal conversion via a frame memory.
  • the signal after 2D3D conversion is the right-eye signal and the left-eye signal for one frame, so the required capacity of the frame memory does not increase, but the resolution of the right-eye signal and left-eye signal decreases, so There is a problem that the scaling accuracy performed at the time of conversion is lowered.
  • the basic image 1 shown in FIG. 1 is converted into a vertical / horizontal converted image 5, converted into a 2D3D converted image 6, and a completed image 7 is obtained.
  • the vertical / horizontal conversion is performed first, the right-eye signal and the left-eye signal are shifted up and down, so that it is necessary to change the shift direction of the 2D3D conversion.
  • a method is conceivable in which an input signal is subjected to vertical / horizontal conversion via a frame memory and 2D3D converted into an output signal.
  • the present invention provides a stereoscopic video processing apparatus and a stereoscopic video processing method that can reduce the use capacity of a memory and realize 2D3D conversion and vertical / horizontal conversion without reducing scaling accuracy.
  • the purpose is to do.
  • the first feature of the present invention is: (1) Identification indicating the vertical and horizontal directions of an image based on an input video signal and the vertical and horizontal directions when displaying an image based on the video signal on a display unit; A discriminating unit that discriminates whether or not to change the reading position of the video signal based on the signal for use, and generates a signal indicating whether or not to change the reading position; and (2) a display unit based on the video signal (3) a parallax generation unit that generates a shift amount for generating a left-eye signal and a right-eye signal based on a video signal, and (4) ) A frame memory unit for temporarily storing the video signal; and (5) a control unit for controlling the reading position of the video signal stored in the frame memory unit. To change When the signal indicating that the readout position is not changed is received from the determination unit, the readout position of the video signal is determined based on the shift amount.
  • the gist is that it is a stereoscopic video processing device to be controlled.
  • the parameter generation unit generates an aspect ratio based on a ratio between the number of horizontal effective pixels and the number of vertical effective pixels of the display unit, and (8) an interframe of the video input signal.
  • a motion vector parameter generation unit that determines a motion vector based on the difference between the signals, and when the control unit receives a signal indicating that the read position is to be changed from the determination unit, the control unit, based on the parameter, the shift amount, and the motion vector Controlling the video signal readout position and receiving the signal indicating that the readout position is not changed from the determination unit; controlling the video signal readout position based on the shift amount and the motion vector; and (9) a motion vector parameter.
  • the generation unit determines the motion vector based on the difference between the video input signal and the signal obtained by delaying the video input signal by the frame memory unit. It may be added Rukoto.
  • the second feature of the present invention is based on (10) a vertical and horizontal direction of an image based on an input video signal and an identification signal indicating a vertical and horizontal direction when the image based on the video signal is displayed on a display unit. Determining whether or not to change the readout position of the video signal, and generating a signal indicating whether or not to change the readout position; and (11) an image to be displayed on the display unit based on the video signal (12) generating a shift amount for generating a left-eye signal and a right-eye signal based on the video signal; and (13) changing the readout position.
  • the gist is that it is a video processing method.
  • the aspect ratio is generated by a ratio of the number of horizontal effective pixels and the number of vertical effective pixels of the display unit, and (16) an interval between frames of the video input signal. Determining a motion vector based on the difference between the signals, and receiving a signal indicating that the readout position is changed, the readout position of the video signal is based on the parameter, the shift amount, and the motion vector. When the signal indicating that the readout position is not changed is received, the readout position of the video signal is controlled based on the shift amount and the motion vector. (17) The motion vector is It may be added that it is determined by the difference between the input signal and the signal obtained by delaying the video input signal by the frame memory unit. .
  • the stereoscopic video processing apparatus and the stereoscopic video processing method of the present invention it is possible to realize a configuration capable of reducing the memory capacity and reducing the circuit scale even when the 2D3D conversion function and the vertical / horizontal conversion function are provided. .
  • FIG. 1 is a configuration diagram of a stereoscopic video processing apparatus according to a first embodiment of the present invention. It is a flowchart of the three-dimensional video processing method which concerns on the 1st Embodiment of this invention. It is a block diagram of the stereo image processing apparatus which concerns on the 2nd Embodiment of this invention. It is a flowchart of the stereoscopic image processing method which concerns on the 2nd Embodiment of this invention.
  • a stereoscopic video processing apparatus 100 according to a first embodiment of the present invention will be described with reference to FIG.
  • Examples of the stereoscopic image processing apparatus 100 include a portable apparatus having a display unit, such as a mobile phone, a smartphone, a book reader, and a portable DVD player.
  • the stereoscopic video processing apparatus 100 includes an input signal receiving unit 11, a vertical / horizontal identification signal receiving unit 12, a vertical / horizontal conversion determining unit 13, a vertical / horizontal conversion parameter generating unit 14, a 2D3D conversion parameter generating unit 15, a read address control unit 16, and a frame memory unit. 17 and an output signal transmitter 18 are provided.
  • the input signal receiving unit 11 receives video signal data that is an object to be subjected to vertical / horizontal conversion and 2D3D conversion.
  • the input signal receiving unit 11 supplies the video signal to the vertical / horizontal conversion determination unit 13, vertical / horizontal conversion parameter generation unit 14, 2D3D conversion parameter generation unit 15, and frame memory unit 17.
  • the vertical / horizontal identification signal receiving unit 12 receives a vertical / horizontal identification signal for identifying the vertical / horizontal orientation (display direction) of the image when the video signal is displayed on a display unit (not shown).
  • the vertical / horizontal identification signal is, for example, a signal indicating the vertical / horizontal direction of an image displayed on a display unit output from a gravity sensor (not shown) or the vertical / horizontal orientation of the image displayed on the display unit by a manual input or the like. It is a signal indicating an instruction.
  • the vertical / horizontal conversion determination unit 13 reads the video signal based on the vertical / horizontal direction of the image based on the input video signal and the identification signal indicating the vertical / horizontal direction when the image based on the video signal is displayed on the display unit. Is changed, and a signal indicating whether to change the reading position is generated.
  • the vertical / horizontal conversion determination unit 13 receives the video signal from the input signal receiving unit 11 and the vertical / horizontal identification signal from the vertical / horizontal identification signal receiving unit 12.
  • the vertical / horizontal conversion determination unit 13 determines whether vertical / horizontal conversion of the video signal output to the display unit is necessary based on the vertical / horizontal identification signal and the display direction of the image determined from the video signal. In order to determine the display direction of the image from the video signal, it may be determined based on the user input or the format of the video signal.
  • the vertical / horizontal conversion determination unit 13 needs vertical / horizontal conversion of the video signal output to the display unit based on the display direction of the image indicated by the vertical / horizontal identification signal and the display direction of the image determined from the input video signal. It is determined whether or not, and a signal (hereinafter referred to as a vertical / horizontal conversion signal) hvc indicating the presence / absence of vertical / horizontal conversion is output to the vertical / horizontal conversion parameter generation unit 14.
  • the vertical / horizontal conversion determination unit 13 determines that vertical / horizontal conversion is necessary (present) and requires vertical / horizontal conversion.
  • the vertical / horizontal conversion parameter generation unit 14 is a parameter generation unit that generates a parameter indicating an aspect ratio of an image to be displayed on the display unit based on the video signal. Generate a ratio.
  • the vertical / horizontal conversion parameter generation unit 14 generates a scaling ratio of the video signal based on the vertical / horizontal conversion signal hvc supplied from the vertical / horizontal conversion determination unit 13. The scaling ratio is obtained from the ratio between the number of horizontal effective pixels and the number of vertical effective pixels of the display unit.
  • the 2D3D conversion parameter generation unit 15 is a parallax generation unit that generates a shift amount for generating a left-eye signal and a right-eye signal based on a video signal.
  • the 2D3D conversion parameter generation unit 15 receives a video signal from the input signal reception unit 11, and generates a shift amount for generating a right-eye signal and a left-eye signal from the video signal based on the characteristics of the video signal. .
  • the 2D3D conversion parameter is a shift amount for giving a parallax between the signal for the right eye and the signal for the left eye when a feature in one frame of the video signal is detected.
  • the frame memory unit 17 delays the frame of the video signal received from the input signal receiving unit 11, that is, temporarily stores it.
  • the read address control unit 16 controls the reading position of the video signal stored in the frame memory unit 17.
  • the read address control unit 16 receives a signal indicating that the read position is to be changed from the vertical / horizontal conversion determination unit 13
  • the read address control unit 16 controls the read position of the video signal based on the parameter and the shift amount, and reads from the vertical / horizontal conversion determination unit 13.
  • the reading position of the video signal is controlled based on the shift amount.
  • the read address control unit 16 The readout position of the video input signal temporarily stored in the unit 17 is determined.
  • the output signal transmission unit 18 outputs a video signal obtained by performing a predetermined conversion process on the video signal to a display device or the like.
  • the vertical / horizontal conversion determination unit 13 needs to perform vertical / horizontal conversion of the video signal output to the display unit based on the display direction of the image indicated by the vertical / horizontal identification signal and the display direction of the image determined from the input video signal. Whether or not, the vertical / horizontal conversion signal hvc is generated (step S1).
  • the vertical / horizontal conversion parameter generation unit 14 receives the vertical / horizontal conversion signal hvc determined and output by the vertical / horizontal conversion determination unit 13 and the video signal data transmitted from the input signal receiving unit 11, and generates vertical / horizontal conversion parameters (step S2). .
  • the vertical / horizontal conversion parameter generation unit 14 generates a scaling coefficient k when the horizontal effective pixel number Ph and the vertical effective pixel number Pv of the display unit are used as parameters. Let the scaling factor k be the value 1.
  • the vertical / horizontal conversion determination unit 13 outputs the vertical / horizontal conversion signal hvc to the read address control unit 16.
  • the vertical / horizontal conversion signal hvc is set to value 2.
  • the 2D3D conversion parameter generation unit 15 generates the right-eye shift amount and the left-eye shift amount as parameters from the characteristics of the video signal data (step S2).
  • the read address control unit 16 When the read address control unit 16 receives the value 1, the value 2, the value 3, and the value 4 from the vertical / horizontal conversion determination unit 13, the vertical / horizontal conversion parameter generation unit 14, and the 2D3D conversion parameter generation unit 15, the video in the frame memory unit 17 is received.
  • the reading position of the signal data is calculated (step S3).
  • the vertical / horizontal conversion signal hvc having the value 2 may be supplied from the vertical / horizontal conversion parameter generation unit 14 to the read address control unit 16.
  • the shift in the 2D3D conversion is performed in the horizontal scanning direction of the display unit, so the 2D3D conversion parameter is given only in the horizontal direction. Therefore, the left-eye read address and right-eye read address at the coordinates (x, y) of an arbitrary pixel are positions indicated by Expression 1 and Expression 2 that are moved in the horizontal direction by the 2D3D parameter that is the shift amount.
  • the 2D3D conversion parameter is given only in the vertical direction. If the vertical / horizontal conversion is rotated 90 degrees clockwise, the upper and lower sides of the video are the right and left sides of the display unit, and the left and right sides of the video are the upper and lower sides of the display unit.
  • the horizontal coordinate after vertical / horizontal conversion is a value obtained by subtracting the vertical coordinate before conversion from the number of vertical pixels, and the vertical coordinate after vertical / horizontal conversion becomes the horizontal coordinate before conversion.
  • the scaling ratio it is necessary to consider the scaling ratio. From the above, the left-eye read address and right-eye read address at the coordinates (x, y) of an arbitrary pixel are obtained by moving the 2D3D parameter in the vertical direction to add vertical / horizontal conversion and the accompanying scaling coefficient, respectively. It becomes the position shown by.
  • the read address control unit 16 obtains the vertical pixel number Pv used in Equations 3 and 4 from the vertical / horizontal conversion parameter generation unit 14.
  • the video signal subjected to the predetermined conversion process is output from the output signal transmission unit 18 to the display unit or the like (step S4).
  • the read address of the frame memory unit 17 is selectively used according to the vertical / horizontal conversion signal hvc to control the read address of the frame memory unit 17, thereby using an independent memory or register for the shift in 2D3D conversion. This leads to a reduction in circuit scale.
  • the stereoscopic video processing apparatus 200 includes an input signal receiving unit 21, a vertical / horizontal identification signal receiving unit 22, a vertical / horizontal conversion determining unit 23, a vertical / horizontal conversion parameter generating unit 24, a 2D3D conversion parameter generating unit 25, a motion vector parameter generating unit 26, and a read address.
  • a control unit 27, a frame memory unit 28, and an output signal transmission unit 29 are provided.
  • the stereoscopic video processing device 200 is different from the stereoscopic video processing device 100 according to the first embodiment in the motion vector parameter generation unit 26 and the read address control unit 27.
  • the other components are an input signal receiving unit 21, a vertical / horizontal identification signal receiving unit 22, a vertical / horizontal conversion determining unit 23, a vertical / horizontal conversion parameter generating unit 24, a 2D3D conversion parameter generating unit 25, a frame memory unit 28, and an output signal transmitting unit. 29 is the same as the component having the same name in the stereoscopic video processing apparatus 100, and thus the description thereof is omitted.
  • the motion vector parameter generation unit 26 generates a motion vector parameter determined by a difference between the video signal and a signal obtained by delaying the video signal by the frame memory unit 28. Specifically, the motion vector is calculated from the video signal received from the input signal receiving unit 21 and the signal obtained by delaying the video signal by the frame memory unit 28.
  • the motion vector parameter horizontal and vertical are interchanged with vertical and horizontal conversion. At the time of vertical and horizontal conversion, the horizontal motion vector contributes to vertical address control, and the vertical motion vector contributes to horizontal address control.
  • the read address control unit 27 When the read address control unit 27 receives a signal indicating that the read position is to be changed from the vertical / horizontal conversion determination unit 23, the read address control unit 27 controls the read position of the video signal based on the parameter, the shift amount, and the motion vector, and the vertical / horizontal conversion determination unit. When a signal indicating that the reading position is not changed is received from 23, the control unit controls the reading position of the video signal based on the shift amount and the motion vector.
  • the read address control unit 27 receives the scaling ratio at the time of vertical / horizontal conversion with vertical / horizontal conversion received from the vertical / horizontal conversion parameter generation unit 24, and the shift amounts of the left-eye signal and right-eye signal received from the 2D3D conversion parameter generation unit 25 Based on the motion vector received from the motion vector parameter generation unit 26, the readout position of the video input signal temporarily stored in the frame memory unit 28 is determined.
  • the vertical / horizontal conversion determination unit 23 requires vertical / horizontal conversion of the video signal output to the display unit based on the display direction of the image indicated by the vertical / horizontal identification signal and the display direction of the image determined from the input video signal. Whether or not, the vertical / horizontal conversion signal hvc is generated (step S11).
  • the vertical / horizontal conversion parameter generation unit 24 receives the vertical / horizontal conversion signal hvc determined and output by the vertical / horizontal conversion determination unit 23 and the video signal data transmitted from the input signal receiving unit 21, and generates vertical / horizontal conversion parameters (step S12). .
  • the following values output from the vertical / horizontal conversion parameter generation unit 24 and the 2D3D conversion parameter generation unit 25 are used as parameters.
  • the vertical / horizontal conversion parameter generation unit 24 generates a scaling coefficient k when the horizontal effective pixel number Ph and the vertical effective pixel number Pv of the display unit are used as parameters. Let the scaling factor k be the value 1.
  • the vertical / horizontal conversion parameter generation unit 24 outputs the vertical / horizontal conversion signal hvc output from the vertical / horizontal conversion determination unit 23.
  • the vertical / horizontal conversion signal hvc is set to value 2.
  • the 2D3D conversion parameter generation unit 25 generates the right eye shift amount and the left eye shift amount as parameters (step S12).
  • the motion vector parameter generation unit 26 generates and outputs a horizontal motion vector and a vertical motion vector (step S12).
  • the read address control unit 27 receives all the values 1 to 6, and calculates the reading position of the video signal data in the frame memory unit 28 (step S13).
  • the read addresses for the left eye and the right eye at arbitrary pixel coordinates (x, y) are respectively
  • the motion vector parameter is added to the read addresses of Equations 1 and 2. Therefore, the position is expressed by Expression 5 and Expression 6.
  • the direction in which the motion vector parameter contributes is orthogonal to the display direction of the display unit, the left-eye read address and the right-eye read address at arbitrary pixel coordinates (x, y)
  • the motion vector parameter is added to the read addresses of 3 and 4 and the positions shown by Equations 7 and 8 are obtained.
  • the read address control unit 27 acquires the vertical pixel number Pv used in Expressions 7 and 8 from the vertical / horizontal conversion parameter generation unit 24.
  • the video signal data subjected to the predetermined conversion process is output from the output signal transmission unit 29 to the display unit or the like (step S14).
  • address control is selectively performed according to the vertical / horizontal conversion signal hvc, so that a separate memory is used not only for the shift in 2D3D conversion but also for the interpolation frame generation by the motion vector. Further, a configuration that does not require a register is possible, and the circuit scale can be reduced.
  • the stereoscopic video processing apparatus of the present invention even when 2D3D conversion and vertical / horizontal conversion are performed on a video, by controlling the reading position from the memory, a memory in which each function is independent without degrading scaling accuracy is provided. In other words, the memory capacity can be reduced and the circuit scale can be reduced.

Abstract

 立体映像処理装置100は、映像信号の読み出し位置を変更するか否かを示す信号を生成する縦横変換判別部13、映像信号に基づいて画像の縦横比を示すパラメータを生成する縦横変換パラメータ生成部14、映像信号に基づいて左目用信号及び右目用信号を生成するためのシフト量を生成する2D3D変換パラメータ生成部15、映像信号を一時格納するフレームメモリ部17、パラメータとシフト量とに基づいて映像信号の読み出し位置を制御し、シフト量に基づいて映像信号の読み出し位置を制御するフレームメモリリードアドレス制御部16を備える。

Description

立体映像処理装置及び立体映像処理方法
 本発明は、立体映像処理装置及び立体映像処理方法に係り、詳細には、表示画像が縦横に切り替え表示可能で、2D3D変換可能な立体映像処理装置及び立体映像処理方法に関する。
 近年、液晶パネルに、両眼視差のある左右2つの映像データを右眼用映像データおよび左眼用映像データとして表示し、映像視聴者に対してあたかもオブジェクトが立体的に存在するように知覚させる立体映像技術が脚光を浴びている。このような立体的な映像表示を実現するために様々な技術が公開されている。例えば、μpolやXpol(登録商標)といった偏光フィルタ方式(パッシブタイプ)や、電子シャッタ方式(アクティブタイプ)等がある。
 立体的な映像表示をするための映像信号の取得方法としては、2台のカメラを用いて撮影を行う方法や、特許文献1に示されるような、2次元の映像信号を3次元映像信号に変換する2D3D変換を行う方法がある。特に2D3D変換を用いる方法は、過去の映像資産を立体表示可能とすることができるため近年注目されており、多くの研究がなされている。
 一方で、主に携帯可能な表示デバイスにおいて、特許文献2に示されるような、重力センサ等を用いて表示デバイスを縦方向か横方向のどちらで視聴しているかを判別して、それに合わせて画面表示の縦横を回転させて変更する縦横変換の技術が搭載されているものが増えてきている。
特開2001-298753号公報 特開2010-107665号公報
 ここで、特許文献1や特許文献2の技術を使用して、縦横視聴可能な表示デバイスにおいて2D3D変換を実現するための構成を考える。
 先に2D3D変換、後に縦横変換を行う場合、図1に示すように基本画像1は2D3D変換画像2に変換され、縦横変換画像3に変換され、完成画像4となる。2D3D変換を先に行う方法では出力信号は右目用信号と左目用信号が左右にシフトした形で得られる。例えば、右目用信号と左目用信号とを1フレーム分出力し、それぞれの信号をフレームメモリを介して縦横変換し、出力信号とする手法が考えられる。しかしこの手法では、2D3D変換後の右目用信号と左目用信号を1フレームずつフレームメモリが保持するため、縦横変換に用いるフレームメモリの必要容量が倍になるという問題がある。右目用信号と左目用信号を1フレームにまとめた状態で出力し、フレームメモリを介して縦横変換し、出力信号とするという手法が考えられる。しかしこの手法では、2D3D変換後の信号は右目用信号、左目用信号を1フレーム分としているためフレームメモリの必要容量は増えないが、右目用信号、左目用信号の解像度が低下するため、縦横変換時に行われるスケーリング精度が落ちるという問題がある。
 次に、先に縦横変換、後に2D3D変換を行う場合、図1に示す基本画像1は縦横変換画像5に変換され、2D3D変換画像6に変換され、完成画像7となる。縦横変換を先に行う方法では右目用信号と左目用信号とが上下にシフトするため、2D3D変換のシフト方向を変える必要がある。例えば、入力信号にフレームメモリを介して縦横変換を行い、2D3D変換をして出力信号とする手法が考えられる。しかしこの手法では、縦横変換後に2D3D変換が行われるため、出力信号の右目用信号と左目用信号は表示部の表示の縦横によってシフト方向が変わる。ラインメモリを最大シフト分用意する必要があるという問題がある。
 そこで本発明は、上記の課題に鑑み、メモリの使用容量を少なくすることができ、且つスケーリング精度を落とすことのない、2D3D変換及び縦横変換を実現する立体映像処理装置及び立体映像処理方法を提供することを目的とする。
 上記目的を達成するため、本発明の第1の特徴は、(1)入力された映像信号に基づく画像の縦横方向と、映像信号に基づく画像を表示部に表示させる際の縦横方向を示す識別用信号とに基づいて、映像信号の読み出し位置を変更するか否かを判別し、読み出し位置を変更するか否かを示す信号を生成する判別部と、(2)映像信号に基づいて表示部に表示させる画像の縦横比を示すパラメータを生成するパラメータ生成部と、(3)映像信号に基づいて左目用信号及び右目用信号を生成するためのシフト量を生成する視差生成部と、(4)映像信号を一時格納するフレームメモリ部と、(5)フレームメモリ部に格納された映像信号の読み出し位置を制御する制御部と、を備え、(6)制御部は、判別部から読み出し位置を変更することを示す信号を受信すると、パラメータとシフト量とに基づいて映像信号の読み出し位置を制御し、判別部から読み出し位置を変更しないことを示す信号を受信すると、シフト量に基づいて映像信号の読み出し位置を制御する立体映像処理装置であることを要旨とする。
 更に本発明の第1の特徴には、(7)パラメータ生成部は、表示部の水平有効画素数と垂直有効画素数の比より縦横比を生成すること、(8)映像入力信号のフレーム間の信号の差異によって動きベクトルを決定する動きベクトルパラメータ生成部を更に備え、制御部は、判別部から読み出し位置を変更することを示す信号を受信すると、パラメータとシフト量と動きベクトルとに基づいて映像信号の読み出し位置を制御し、判別部から読み出し位置を変更しないことを示す信号を受信すると、シフト量と動きベクトルとに基づいて映像信号の読み出し位置を制御すること、(9)動きベクトルパラメータ生成部は、映像入力信号と、映像入力信号をフレームメモリ部によってフレーム遅延させた信号との差異によって動きベクトルを決定することを加えても良い。
 本発明の第2の特徴は、(10)入力された映像信号に基づく画像の縦横方向と、前記映像信号に基づく画像を表示部に表示させる際の縦横方向を示す識別用信号とに基づいて、前記映像信号の読み出し位置を変更するか否かを判別し、読み出し位置を変更するか否かを示す信号を生成するステップと、(11)前記映像信号に基づいて前記表示部に表示させる画像の縦横比を示すパラメータを生成するステップと、(12)前記映像信号に基づいて左目用信号及び右目用信号を生成するためのシフト量を生成するステップと、(13)前記読み出し位置を変更することを示す信号を受信すると、前記パラメータと前記シフト量に基づいて、フレームメモリ部に一時格納された前記映像信号の読み出し位置を制御するステップと、(14)前記読み出し位置を変更しないことを示す信号を受信すると、前記シフト量に基づいて、前記フレームメモリ部に一時格納された前記映像信号の読み出し位置を制御するステップと、を備えることを特徴とする立体映像処理方法であることを要旨とする。
 更に本発明の第2の特徴には、(15)前記縦横比は、前記表示部の水平有効画素数と垂直有効画素数の比により生成されること、(16)前記映像入力信号のフレーム間の信号の差異によって動きベクトルを決定するステップを更に備え、前記読み出し位置を変更することを示す信号を受信すると、前記映像信号の読み出し位置は、前記パラメータと前記シフト量と前記動きベクトルとに基づいて制御され、前記読み出し位置を変更しないことを示す信号を受信すると、前記映像信号の読み出し位置は、前記シフト量と前記動きベクトルとに基づいて制御され、(17)前記動きベクトルは、前記映像入力信号と、前記映像入力信号を前記フレームメモリ部によってフレーム遅延させた信号との差異によって決定されることを加えても良い。
 本発明の立体映像処理装置及び立体映像処理方法によれば、2D3D変換機能及び縦横変換機能を有していても、メモリ容量を少なくし回路規模を縮小することができる構成を実現することができる。
2D3D変換と縦横変換の構成パターンを示す画像遷移図である。 本発明の第1の実施の形態に係る立体映像処理装置の構成図である。 本発明の第1の実施の形態に係る立体映像処理方法のフローチャートである。 本発明の第2の実施の形態に係る立体映像処理装置の構成図である。 本発明の第2の実施の形態に係る立体映像処理方法のフローチャートである。
 次に、図面を参照して、本発明の実施の形態を説明する。以下の図面の記載において、同一又は類似の部分には同一又は類似の符号を付している。ただし、図面は模式的なものであることに留意すべきである。更に以下に記載される数式は一例であり、その本質を同一とする範囲において適宜変更可能であることに留意すべきである。
 (第1の実施の形態)
 (立体映像処理装置)
 本発明の第1の実施の形態に係る立体映像処理装置100について図2を参照して説明する。尚、立体映像処理装置100としては、表示部を有する携帯可能な装置、例えば携帯電話、スマートフォン、ブックリーダおよび携帯用DVDプレイヤ等が挙げられる。
 立体映像処理装置100は、入力信号受信部11、縦横識別用信号受信部12、縦横変換判別部13、縦横変換パラメータ生成部14、2D3D変換パラメータ生成部15、リードアドレス制御部16、フレームメモリ部17および出力信号送信部18を備えている。
 入力信号受信部11は、縦横変換及び2D3D変換の実行対象である映像信号データを受信する。入力信号受信部11は映像信号を、縦横変換判別部13、縦横変換パラメータ生成部14、2D3D変換パラメータ生成部15、フレームメモリ部17にそれぞれ供給する。
 縦横識別用信号受信部12は、映像信号を図示しない表示部に表示させる際の画像の縦横の向き(表示方向)を識別するための縦横識別用信号を受信する。縦横識別用信号は、例えば図示しない重力センサから出力される表示部に表示する画像の縦横を示す信号や、ユーザが手入力等で表示部に表示する画像の縦横の向きを決定した場合の当該指示を示す信号である。
 縦横変換判別部13は、入力された映像信号に基づく画像の縦横方向と、映像信号に基づく画像を表示部に表示させる際の縦横方向を示す識別用信号とに基づいて、映像信号の読み出し位置を変更するか否かを判別し、読み出し位置を変更するか否かを示す信号を生成する。縦横変換判別部13は、入力信号受信部11より映像信号を、縦横識別用信号受信部12より縦横識別用信号をそれぞれ受け取る。縦横変換判別部13は縦横識別用信号と映像信号から判別する画像の表示方向とから、表示部に出力する映像信号の縦横変換が必要か否かを判別する。映像信号から画像の表示方向を判別するには、ユーザ入力や映像信号のフォーマットに基づいて判別すればよい。
 縦横変換判別部13は縦横識別用信号が示す画像の表示方向と、入力された映像信号から判別した画像の表示方向とを基に、表示部に対して出力する映像信号の縦横変換が必要か否かを判断して、縦横変換の有無を示す信号(以下、縦横変換信号)hvcを縦横変換パラメータ生成部14に出力する。縦横変換判別部13は縦横変換が必要と判断すると縦横変換信号hvc=1を出力し、縦横変換が不要と判断すると縦横変換信号hvc=0を出力する。
 一例として、縦横識別用信号が画像の縦表示を示し、映像信号が横表示の画像である場合は、縦横変換判別部13は縦横変換が必要(有り)と判断し、縦横変換を必要なことを示す縦横変換信号hvc(=1)を出力する。
 縦横変換パラメータ生成部14は、映像信号に基づいて表示部に表示させる画像の縦横比を示すパラメータを生成するパラメータ生成部であり、表示部の水平有効画素数と垂直有効画素数の比より縦横比を生成する。縦横変換パラメータ生成部14は、縦横変換判別部13より供給された縦横変換信号hvcを基に映像信号のスケーリング比を生成する。スケーリング比は、表示部の水平有効画素数と垂直有効画素数の比より求められる。
 2D3D変換パラメータ生成部15は、映像信号に基づいて左目用信号及び右目用信号を生成するためのシフト量を生成する視差生成部である。2D3D変換パラメータ生成部15は、入力信号受信部11より映像信号を受信し、映像信号から右目用信号、左目用信号をそれぞれ生成するためのシフト量を、映像信号の特徴等を基に生成する。2D3D変換パラメータは、映像信号の1フレーム内の特徴を検出した際の右目用信号と左目用信号の視差を与えるためのシフト量である。
 フレームメモリ部17は、入力信号受信部11から受信する映像信号をフレーム遅延させる、即ち、一時格納する。
 リードアドレス制御部16は、フレームメモリ部17に格納された映像信号の読み出し位置を制御する。リードアドレス制御部16は、縦横変換判別部13から読み出し位置を変更することを示す信号を受信すると、パラメータとシフト量とに基づいて映像信号の読み出し位置を制御し、縦横変換判別部13から読み出し位置を変更しないことを示す信号を受信すると、シフト量に基づいて映像信号の読み出し位置を制御する。リードアドレス制御部16は、縦横変換パラメータ生成部14から受信するスケーリング比と、2D3D変換パラメータ生成部15から受信する左目用信号および右目用信号を生成するためのシフト量とを基に、フレームメモリ部17に一時格納される映像入力信号の読み出し位置を決定する。
 出力信号送信部18は、映像信号に所定の変換処理を施した映像信号を、表示装置等に出力する。
 (立体映像処理装置における映像変換動作)
 立体映像処理装置100における映像変換動作(立体映像処理方法)について図3を参照して説明する。縦横変換判別部13は、縦横識別用信号が示す画像の表示方向と、入力された映像信号から判別した画像の表示方向とを基に、表示部に対して出力する映像信号の縦横変換が必要か否かを判断して、縦横変換信号hvcを生成する(ステップS1)。縦横変換判別部13が判別して出力した縦横変換信号hvcと、入力信号受信部11から送信される映像信号データを縦横変換パラメータ生成部14は受信し、縦横変換パラメータを生成する(ステップS2)。
 縦横変換パラメータ生成部14はパラメータとして、表示部の水平有効画素数Ph、垂直有効画素数Pvとした場合のスケーリング係数kを生成する。スケーリング係数kを値1とする。
 k=Ph/Pv…(値1)
 なお、縦横変換信号hvcが縦横変換なしを示す(0)のとき、縦横変換パラメータ生成部14はスケーリング係数kとして予め定めた値である1(k=1)をリードアドレス制御部16に出力する。
 縦横変換判別部13は、縦横変換信号hvcをリードアドレス制御部16に出力する。縦横変換信号hvcを値2とする。
 また、2D3D変換パラメータ生成部15は、映像信号データの特徴から、右目用シフト量及び左目用シフト量をパラメータとして生成する(ステップS2)。
 右目用シフト量 αr …(値3)
 左目用シフト量 αl …(値4)
 リードアドレス制御部16は、縦横変換判別部13、縦横変換パラメータ生成部14及び2D3D変換パラメータ生成部15より、値1、値2、値3および値4を受信すると、フレームメモリ部17内の映像信号データの読み出し位置を算出する(ステップS3)。なお、値2である縦横変換信号hvcは、縦横変換パラメータ生成部14よりリードアドレス制御部16に供給されてもよい。
 まず、値2である縦横変換信号hvcが縦横変換なしを示す(hvc=0)場合の、リードアドレス制御部16が算出する読み出し位置について説明する。縦横変換をしない場合は、2D3D変換におけるシフトは表示部の水平走査方向に行われるため、2D3D変換パラメータは水平方向のみに与えられる。よって任意の画素の座標(x,y)における左目用・右目用のリードアドレスはそれぞれ、シフト量である2D3Dパラメータ分だけ水平方向に移動した式1、式2にて示される位置となる。
 右目用リードアドレス (x+αr,y)…(式1)
 左目用リードアドレス (x+αl,y)…(式2)
 次に値2である縦横変換信号hvcが縦横変換ありを示す(hvc=1)場合の、リードアドレス制御部16が算出する読み出し位置について説明する。縦横変換をする場合は、2D3D変換におけるシフトは表示部の垂直走査方向に行われるため、2D3D変換パラメータは垂直方向のみに与えられる。縦横変換を右回りに90度回転させるとすると、映像の上下が表示部の右側・左側になり、映像の左右が表示部の上側・下側になる。そのため、縦横変換後の水平座標は垂直画素数から変換前の垂直座標を引いた値で、縦横変換後の垂直座標は変換前の水平座標となる。また、縦横変換に伴ってスケーリングが行われる場合、スケーリングの比率も加味して考える必要がある。以上より、任意の画素の座標(x,y)における左目用・右目用のリードアドレスはそれぞれ、2D3Dパラメータ分を垂直方向に移動させて縦横変換とそれに伴うスケーリング係数を加えた式3、式4にて示される位置となる。
 右目用リードアドレス(k(Pv-(y+αr)),kx)…(式3)
 左目用リードアドレス(k(Pv-(y+αl)),kx)…(式4)
 式3、式4にて用いられる垂直画素数Pvは、縦横変換パラメータ生成部14よりリードアドレス制御部16が取得する。
 所定変換処理の行われた映像信号は、出力信号送信部18から表示部等に出力される(ステップS4)。
 リードアドレス制御部16において、縦横変換信号hvcに応じて式1~式4を選択的に用いフレームメモリ部17のリードアドレスを制御することで、2D3D変換におけるシフトに独立のメモリやレジスタを使用せずにすむようになり、回路規模の削減につながる。
 (第2の実施の形態)
 (立体映像処理装置)
 本発明の第2の実施の形態に係る立体映像処理装置200について図4を参照して説明する。
 立体映像処理装置200は、入力信号受信部21、縦横識別用信号受信部22、縦横変換判別部23、縦横変換パラメータ生成部24、2D3D変換パラメータ生成部25、動きベクトルパラメータ生成部26、リードアドレス制御部27、フレームメモリ部28および出力信号送信部29を備えている。
 立体映像処理装置200は、第1の実施の形態にかかる立体映像処理装置100と、動きベクトルパラメータ生成部26及びリードアドレス制御部27が異なる。その他の構成部である、入力信号受信部21、縦横識別用信号受信部22、縦横変換判別部23、縦横変換パラメータ生成部24、2D3D変換パラメータ生成部25、フレームメモリ部28および出力信号送信部29は、立体映像処理装置100における同名称の構成部と同様の働きをするため、説明を省略する。
 動きベクトルパラメータ生成部26は、映像信号と、映像信号をフレームメモリ部28によってフレーム遅延させた信号との差異によって決定される動きベクトルパラメータを生成する。具体的には、入力信号受信部21より受信する映像信号と映像信号をフレームメモリ部28でフレーム遅延させた信号とによって動きベクトルを算出する。動きベクトルパラメータは縦横変換に伴って水平と垂直が入れ替わり、縦横変換時には水平動きベクトルが垂直方向のアドレス制御に寄与し、垂直動きベクトルが水平方向のアドレス制御に寄与する。
 リードアドレス制御部27は、縦横変換判別部23から読み出し位置を変更することを示す信号を受信すると、パラメータとシフト量と動きベクトルとに基づいて映像信号の読み出し位置を制御し、縦横変換判別部23から読み出し位置を変更しないことを示す信号を受信すると、シフト量と動きベクトルに基づいて映像信号の読み出し位置を制御する制御部である。リードアドレス制御部27は、縦横変換パラメータ生成部24から受信する縦横変換有りの場合の縦横変換時のスケーリング比と、2D3D変換パラメータ生成部25から受信する左目用信号および右目用信号のシフト量と、動きベクトルパラメータ生成部26から受信する動きベクトルを基に、フレームメモリ部28に一時格納される映像入力信号の読み出し位置を決定する。
 (立体映像処理装置における映像変換動作)
 立体映像処理装置200における映像変換動作(立体映像処理方法)について図5を参照して説明する。縦横変換判別部23は、縦横識別用信号が示す画像の表示方向と、入力された映像信号から判別した画像の表示方向とを基に、表示部に対して出力する映像信号の縦横変換が必要か否かを判断して、縦横変換信号hvcを生成する(ステップS11)。縦横変換判別部23が判別して出力した縦横変換信号hvcと、入力信号受信部21から送信される映像信号データを縦横変換パラメータ生成部24は受信し、縦横変換パラメータを生成する(ステップS12)。
 第1の実施の形態と同様に、縦横変換パラメータ生成部24及び2D3D変換パラメータ生成部25から出力される以下の値をパラメータとする。
 縦横変換パラメータ生成部24はパラメータとして、表示部の水平有効画素数Ph、垂直有効画素数Pvとした場合のスケーリング係数kを生成する。スケーリング係数kを値1とする。
  k=Ph/Pv…(値1)
 また縦横変換パラメータ生成部24は、縦横変換判別部23より出力された縦横変換信号hvcを出力する。縦横変換信号hvcを値2とする。
 2D3D変換パラメータ生成部25は、右目用シフト量及び左目用シフト量をパラメータとして生成する(ステップS12)。
 右目用シフト量 αr …(値3)
 左目用シフト量 αl …(値4)
更に、第2実施形態では動きベクトルパラメータ生成部26が、水平動きベクトル及び垂直動きベクトルを生成し(ステップS12)、出力する。
 水平動きベクトル βh…(値5)
 垂直動きベクトル βv…(値6)
 リードアドレス制御部27は、値1~値6を全て受信し、フレームメモリ部28内の映像信号データの読み出し位置を算出する(ステップS13)。
 値2である縦横変換信号hvcが縦横変換なしを示す(hvc=0)場合のフレームメモリリードアドレス制御部27が算出する読み出し位置について説明する。縦横変換なしの場合は、動きベクトルパラメータの寄与する方向は表示部における画像の表示方向と同方向となるため、任意の画素の座標(x,y)における左目用・右目用のリードアドレスはそれぞれ、式1および式2のリードアドレスに動きベクトルパラメータを加えたものとなる。よって、式5、式6にて示される位置となる。
 右目用リードアドレス(x+αr+βh,y+βv)…(式5)
 左目用リードアドレス(x+αl+βh,y+βv)…(式6)
 次に値2である縦横変換信号hvcが縦横変換ありを示す(hvc=1)場合のリードアドレス制御部27が算出する読み出し位置について説明する。縦横変換をする場合は、動きベクトルパラメータの寄与する方向は表示部の表示方向と直交方向となるため、任意の画素の座標(x,y)における左目用・右目用のリードアドレスはそれぞれ、式3および式4のリードアドレスに動きベクトルパラメータを加えたものとなり、式7、式8にて示される位置となる。
 右目用リードアドレス
 (k(Pv-(y+αr+βv)),k(x+βh))…(式7)
 左目用リードアドレス
 (k(Pv-(y+αl+βv)),k(x+βh))…(式8)
 式7、式8にて用いられる垂直画素数Pvは、縦横変換パラメータ生成部24よりリードアドレス制御部27が取得する。
 所定変換処理の行われた映像信号データは、出力信号送信部29から表示部等に出力される(ステップS14)。
 リードアドレス制御部27において縦横変換信号hvcに応じて式5~式8を選択的に用いてアドレス制御を行うことで、2D3D変換におけるシフトに加え、動きベクトルによる補間フレーム生成においても、別途のメモリやレジスタを必要としない構成が可能となり、回路規模の削減を図ることができる。
 本発明の立体映像処理装置によれば、映像に2D3D変換及び縦横変換を行う場合でも、メモリからの読み出し位置を制御することで、スケーリング精度を劣化させず、且つ各々の機能が独立したメモリを要しないようにする、即ちメモリ容量を少なくし回路規模を縮小することができる。
11,21 … 入力信号受信部
12,22 … 縦横識別用信号受信部
13,23 … 縦横変換判別部
14,24 … 縦横変換パラメータ生成部
15,25 … 2D3D変換パラメータ生成部
16,27 … リードアドレス制御部
17,28 … フレームメモリ部
18,29 … 出力信号送信部
26 … 動きベクトルパラメータ生成部

Claims (8)

  1.  入力された映像信号に基づく画像の縦横方向と、前記映像信号に基づく画像を表示部に表示させる際の縦横方向を示す識別用信号とに基づいて、前記映像信号の読み出し位置を変更するか否かを判別し、読み出し位置を変更するか否かを示す信号を生成する判別部と、
     前記映像信号に基づいて前記表示部に表示させる画像の縦横比を示すパラメータを生成するパラメータ生成部と、
     前記映像信号に基づいて左目用信号及び右目用信号を生成するためのシフト量を生成する視差生成部と、
     前記映像信号を一時格納するフレームメモリ部と、
     前記フレームメモリ部に格納された前記映像信号の読み出し位置を制御する制御部と、を備え、
     前記制御部は、前記判別部から読み出し位置を変更することを示す信号を受信すると、前記パラメータと前記シフト量とに基づいて前記映像信号の読み出し位置を制御し、前記判別部から読み出し位置を変更しないことを示す信号を受信すると、前記シフト量に基づいて前記映像信号の読み出し位置を制御することを特徴とする立体映像処理装置。
  2.  前記パラメータ生成部は、前記表示部の水平有効画素数と垂直有効画素数の比より前記縦横比を生成することを特徴とする請求項1に記載の立体映像処理装置。
  3.  前記映像入力信号のフレーム間の信号の差異によって動きベクトルを決定する動きベクトルパラメータ生成部を更に備え、
     前記制御部は、前記判別部から読み出し位置を変更することを示す信号を受信すると、前記パラメータと前記シフト量と前記動きベクトルとに基づいて前記映像信号の読み出し位置を制御し、前記判別部から読み出し位置を変更しないことを示す信号を受信すると、前記シフト量と前記動きベクトルとに基づいて前記映像信号の読み出し位置を制御することを特徴とする請求項1または2に記載の立体映像処理装置。
  4.  前記動きベクトルパラメータ生成部は、前記映像入力信号と、前記映像入力信号を前記フレームメモリ部によってフレーム遅延させた信号との差異によって前記動きベクトルを決定することを特徴とする請求項3に記載の立体映像処理装置。
  5.  入力された映像信号に基づく画像の縦横方向と、前記映像信号に基づく画像を表示部に表示させる際の縦横方向を示す識別用信号とに基づいて、前記映像信号の読み出し位置を変更するか否かを判別し、読み出し位置を変更するか否かを示す信号を生成するステップと、
     前記映像信号に基づいて前記表示部に表示させる画像の縦横比を示すパラメータを生成するステップと、
     前記映像信号に基づいて左目用信号及び右目用信号を生成するためのシフト量を生成するステップと、
     前記読み出し位置を変更することを示す信号を受信すると、前記パラメータと前記シフト量に基づいて、フレームメモリ部に一時格納された前記映像信号の読み出し位置を制御するステップと、
     前記読み出し位置を変更しないことを示す信号を受信すると、前記シフト量に基づいて、前記フレームメモリ部に一時格納された前記映像信号の読み出し位置を制御するステップと、
     を備えることを特徴とする立体映像処理方法。
  6.  前記縦横比は、前記表示部の水平有効画素数と垂直有効画素数の比により生成されることを特徴とする請求項5に記載の立体映像処理方法。
  7.  前記映像入力信号のフレーム間の信号の差異によって動きベクトルを決定するステップを更に備え、
     前記読み出し位置を変更することを示す信号を受信すると、前記映像信号の読み出し位置は、前記パラメータと前記シフト量と前記動きベクトルとに基づいて制御され、
     前記読み出し位置を変更しないことを示す信号を受信すると、前記映像信号の読み出し位置は、前記シフト量と前記動きベクトルとに基づいて制御されることを特徴とする請求項5又は6に記載の立体映像処理方法。
  8.  前記動きベクトルは、前記映像入力信号と、前記映像入力信号を前記フレームメモリ部によってフレーム遅延させた信号との差異によって決定されることを特徴とする請求項7に記載の立体映像処理方法。
PCT/JP2012/057917 2011-03-28 2012-03-27 立体映像処理装置及び立体映像処理方法 WO2012133398A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2013507606A JP5741683B2 (ja) 2011-03-28 2012-03-27 立体映像処理装置及び立体映像処理方法
US14/025,914 US9350971B2 (en) 2011-03-28 2013-09-13 Three-dimensional image processor and three-dimensional image processing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011-070624 2011-03-28
JP2011070624 2011-03-28

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US14/025,914 Continuation US9350971B2 (en) 2011-03-28 2013-09-13 Three-dimensional image processor and three-dimensional image processing method

Publications (1)

Publication Number Publication Date
WO2012133398A1 true WO2012133398A1 (ja) 2012-10-04

Family

ID=46931114

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/057917 WO2012133398A1 (ja) 2011-03-28 2012-03-27 立体映像処理装置及び立体映像処理方法

Country Status (4)

Country Link
US (1) US9350971B2 (ja)
JP (1) JP5741683B2 (ja)
TW (1) TWI488470B (ja)
WO (1) WO2012133398A1 (ja)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9190110B2 (en) 2009-05-12 2015-11-17 JBF Interlude 2009 LTD System and method for assembling a recorded composition
US11232458B2 (en) 2010-02-17 2022-01-25 JBF Interlude 2009 LTD System and method for data mining within interactive multimedia
TWI489152B (zh) * 2012-12-18 2015-06-21 Delta Electronics Inc 投影系統及其投影方法
JP2015129787A (ja) * 2014-01-06 2015-07-16 キヤノン株式会社 表示装置および表示装置の制御方法
US9653115B2 (en) 2014-04-10 2017-05-16 JBF Interlude 2009 LTD Systems and methods for creating linear video from branched video
US9792957B2 (en) 2014-10-08 2017-10-17 JBF Interlude 2009 LTD Systems and methods for dynamic video bookmarking
US11412276B2 (en) 2014-10-10 2022-08-09 JBF Interlude 2009 LTD Systems and methods for parallel track transitions
US10460765B2 (en) 2015-08-26 2019-10-29 JBF Interlude 2009 LTD Systems and methods for adaptive and responsive video
US11164548B2 (en) 2015-12-22 2021-11-02 JBF Interlude 2009 LTD Intelligent buffering of large-scale video
US11128853B2 (en) 2015-12-22 2021-09-21 JBF Interlude 2009 LTD Seamless transitions in large-scale video
US11856271B2 (en) 2016-04-12 2023-12-26 JBF Interlude 2009 LTD Symbiotic interactive video
US11050809B2 (en) 2016-12-30 2021-06-29 JBF Interlude 2009 LTD Systems and methods for dynamic weighting of branched video paths
CN107635132B (zh) * 2017-09-26 2019-12-24 深圳超多维科技有限公司 裸眼3d显示终端的显示控制方法、装置及显示终端
US10257578B1 (en) 2018-01-05 2019-04-09 JBF Interlude 2009 LTD Dynamic library display for interactive videos
US11601721B2 (en) 2018-06-04 2023-03-07 JBF Interlude 2009 LTD Interactive video dynamic adaptation and user profiling
US20200296462A1 (en) 2019-03-11 2020-09-17 Wci One, Llc Media content presentation
US11490047B2 (en) 2019-10-02 2022-11-01 JBF Interlude 2009 LTD Systems and methods for dynamically adjusting video aspect ratios
US11245961B2 (en) 2020-02-18 2022-02-08 JBF Interlude 2009 LTD System and methods for detecting anomalous activities for interactive videos
US11882337B2 (en) 2021-05-28 2024-01-23 JBF Interlude 2009 LTD Automated platform for generating interactive videos
US11934477B2 (en) 2021-09-24 2024-03-19 JBF Interlude 2009 LTD Video player integration within websites

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010109414A (ja) * 2008-10-28 2010-05-13 Seiko Epson Corp 表示装置、および電子機器、並びに視差画像データの表示方法
JP2010183154A (ja) * 2009-02-03 2010-08-19 Casio Hitachi Mobile Communications Co Ltd 端末装置及びプログラム
JP2011028263A (ja) * 2010-07-09 2011-02-10 Nec Casio Mobile Communications Ltd 電子機器、および、プログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW421969B (en) * 1999-03-19 2001-02-11 Asustek Comp Inc 3D image processing device and method
JP4036599B2 (ja) 2000-04-11 2008-01-23 三洋電機株式会社 2次元映像を3次元映像に変換する方法
TWM266475U (en) * 2004-11-23 2005-06-01 Ling-Gau Liou Mobile 3D image processing and output center
JP2010107665A (ja) 2008-10-29 2010-05-13 Nec Corp 画像回転装置、方法、プログラム及び携帯端末装置
KR101598653B1 (ko) * 2009-07-10 2016-02-29 아이씨3디 인크. 단일 이미징 경로를 사용하여 3차원 이미지 정보를 발생시키는 방법 및 장치
US20130033490A1 (en) * 2011-08-04 2013-02-07 Texas Instruments Incorporated Method, System and Computer Program Product for Reorienting a Stereoscopic Image

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010109414A (ja) * 2008-10-28 2010-05-13 Seiko Epson Corp 表示装置、および電子機器、並びに視差画像データの表示方法
JP2010183154A (ja) * 2009-02-03 2010-08-19 Casio Hitachi Mobile Communications Co Ltd 端末装置及びプログラム
JP2011028263A (ja) * 2010-07-09 2011-02-10 Nec Casio Mobile Communications Ltd 電子機器、および、プログラム

Also Published As

Publication number Publication date
TW201246912A (en) 2012-11-16
TWI488470B (zh) 2015-06-11
US9350971B2 (en) 2016-05-24
JPWO2012133398A1 (ja) 2014-07-28
US20140015940A1 (en) 2014-01-16
JP5741683B2 (ja) 2015-07-01

Similar Documents

Publication Publication Date Title
JP5741683B2 (ja) 立体映像処理装置及び立体映像処理方法
US8884952B2 (en) 3D display apparatus and method for processing image using the same
EP2549762B1 (en) Stereovision-image position matching apparatus, stereovision-image position matching method, and program therefor
EP2618584A1 (en) Stereoscopic video creation device and stereoscopic video creation method
JP2011019202A (ja) 映像信号処理装置および映像表示装置
US8279221B2 (en) 3D graphics processor and autostereoscopic display device using the same
KR101616216B1 (ko) 배향 기반 3d 이미지 디스플레이
JP2009516447A (ja) 3次元画像データを生成、転送および処理するための方法および装置
KR20110096494A (ko) 전자 장치 및 입체영상 재생 방법
US20120044241A1 (en) Three-dimensional on-screen display imaging system and method
CN103444193A (zh) 图像处理设备和图像处理方法
TW201301202A (zh) 影像處理方法以及影像處理裝置
CN102256143A (zh) 视频处理装置及方法
WO2011099314A1 (ja) 画像処理装置、および画像処理方法、並びにプログラム
JP2014072801A (ja) 多視点画像生成装置、画像生成方法、表示装置、プログラム、及び、記録媒体
US20130343635A1 (en) Image processing apparatus, image processing method, and program
US20120163700A1 (en) Image processing device and image processing method
CN103037236A (zh) 图像处理方法以及装置
CN102281423A (zh) 3d视频场频转换系统及场频转换方法
JP2014030103A (ja) 画像処理装置、画像処理方法、およびプログラム
JP5871113B2 (ja) 立体画像生成装置、立体画像生成方法及び立体画像生成プログラム
JP2012134885A (ja) 画像処理装置及び画像処理方法
EP2843948B1 (en) Method and device for generating stereoscopic video pair
WO2012035927A1 (ja) 遠隔映像監視システム
JP2011066507A (ja) 画像処理装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12763200

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2013507606

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12763200

Country of ref document: EP

Kind code of ref document: A1