JP7141975B2 - 画像表示モジュール、画像表示システム、移動体、画像表示方法及び画像表示プログラム - Google Patents

画像表示モジュール、画像表示システム、移動体、画像表示方法及び画像表示プログラム Download PDF

Info

Publication number
JP7141975B2
JP7141975B2 JP2019059289A JP2019059289A JP7141975B2 JP 7141975 B2 JP7141975 B2 JP 7141975B2 JP 2019059289 A JP2019059289 A JP 2019059289A JP 2019059289 A JP2019059289 A JP 2019059289A JP 7141975 B2 JP7141975 B2 JP 7141975B2
Authority
JP
Japan
Prior art keywords
eye
image
display
parallax
optical system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019059289A
Other languages
English (en)
Other versions
JP2020160252A (ja
Inventor
薫 草深
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Corp
Original Assignee
Kyocera Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Corp filed Critical Kyocera Corp
Priority to JP2019059289A priority Critical patent/JP7141975B2/ja
Priority to PCT/JP2020/011526 priority patent/WO2020196052A1/ja
Priority to EP20778448.9A priority patent/EP3951480A4/en
Priority to CN202080023384.2A priority patent/CN113614619B/zh
Priority to US17/442,032 priority patent/US11849103B2/en
Publication of JP2020160252A publication Critical patent/JP2020160252A/ja
Application granted granted Critical
Publication of JP7141975B2 publication Critical patent/JP7141975B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/31Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/211Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays producing three-dimensional [3D] effects, e.g. stereoscopic images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/30Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/30Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers
    • G02B30/31Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers involving active parallax barriers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/363Image reproducers using image projection screens
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/383Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149Instrument input by detecting viewing direction not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/011Head-up displays characterised by optical features comprising device for correcting geometrical aberrations, distortion
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0132Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Instrument Panels (AREA)

Description

本開示は、画像表示モジュール、画像表示システム、移動体、画像表示方法及び画像表示プログラムに関する。
従来、立体視を提供する画像表示装置において光学系の歪みを補正する構成が知られている(例えば、特許文献1等)。
特開2019-15823号公報
利用者に提供する立体視の画質をより一層向上することが求められる。
本開示は、利用者に提供する立体視の画質を向上しうる画像表示モジュール、画像表示システム、移動体、画像表示方法及び画像表示プログラムを提供することを目的とする。
本開示の一実施形態に係る画像表示モジュールは、表示部と、バリア部と、制御部とを備える。前記表示部は、利用者の第1眼及び第2眼に対して光学系を介して投影される視差画像を表示する。前記バリア部は、前記視差画像の画像光の進行方向を規定することによって、前記第1眼及び前記第2眼に視差を与える。前記制御部は、前記表示部を制御する。前記制御部は、前記光学系を介して投影される前記視差画像の歪みの大きさに基づいて、前記表示部を複数の表示制御領域に分割する。前記制御部は、前記表示制御領域ごとの歪みの大きさに基づいて前記視差画像の最小繰り返し単位を制御する。前記制御部は、前記最小繰り返し単位における特定サブピクセルを示すインデックスに基づいて前記光学系を介して投影される前記視差画像の歪みの位置を制御する。
本開示の一実施形態に係る画像表示システムは、撮像装置と、画像表示モジュールとを備える。前記撮像装置は、利用者の第1眼及び第2眼の位置を表す眼位置情報を検出する。前記画像表示モジュールは、表示部と、バリア部と、制御部とを備える。前記表示部は、利用者の第1眼及び第2眼に対して光学系を介して投影される視差画像を表示する。前記バリア部は、前記視差画像の画像光の進行方向を規定することによって、前記第1眼及び前記第2眼に視差を与える。前記制御部は、前記眼位置情報に基づいて前記表示部を制御する。前記制御部は、前記光学系を介して投影される前記視差画像の歪みの大きさに基づいて、前記表示部を複数の表示制御領域に分割する。前記制御部は、前記表示制御領域ごとの歪みの大きさに基づいて前記視差画像の最小繰り返し単位を制御する。前記制御部は、前記最小繰り返し単位における特定サブピクセルを示すインデックスに基づいて前記光学系を介して投影される前記視差画像の歪みの位置を制御する。
本開示の一実施形態に係る移動体は、画像表示システムを搭載する。前記画像表示システムは、撮像装置と、画像表示モジュールとを備える。前記撮像装置は、利用者の第1眼及び第2眼の位置を表す眼位置情報を検出する。前記画像表示モジュールは、表示部と、バリア部と、制御部とを備える。前記表示部は、利用者の第1眼及び第2眼に対して光学系を介して投影される視差画像を表示する。前記バリア部は、前記視差画像の画像光の進行方向を規定することによって、前記第1眼及び前記第2眼に視差を与える。前記制御部は、前記眼位置情報に基づいて前記表示部を制御する。前記制御部は、前記光学系を介して投影される前記視差画像の歪みの大きさに基づいて、前記表示部を複数の表示制御領域に分割する。前記制御部は、前記表示制御領域ごとの歪みの大きさに基づいて前記視差画像の最小繰り返し単位を制御する。前記制御部は、前記最小繰り返し単位における特定サブピクセルを示すインデックスに基づいて前記光学系を介して投影される前記視差画像の歪みの位置を制御する。前記移動体は、前記光学系の一部を構成するウィンドシールドを備える。
本開示の一実施形態に係る画像表示方法において、利用者の第1眼及び第2眼に対して光学系を介して投影される視差画像の歪みの大きさに基づいて、前記視差画像を表示する表示部が複数の表示制御領域に分割される。前記画像表示方法において、前記表示制御領域ごとの歪みの大きさに基づいて前記視差画像の最小繰り返し単位が制御される。前記画像表示方法において、前記最小繰り返し単位における特定サブピクセルを示すインデックスに基づいて前記光学系を介して投影される前記視差画像の歪みの位置が制御される。
本開示の一実施形態に係る画像表示プログラムは、プロセッサに、利用者の第1眼及び第2眼に対して光学系を介して投影される視差画像の歪みの大きさに基づいて、前記視差画像を表示する表示部を複数の表示制御領域に分割させる。前記画像表示プログラムは、前記プロセッサに、前記表示制御領域ごとの歪みの大きさに基づいて前記視差画像の最小繰り返し単位を制御させる。前記画像表示プログラムは、前記プロセッサに、前記最小繰り返し単位における特定サブピクセルを示すインデックスに基づいて前記光学系を介して投影される前記視差画像の歪みの位置を制御させる。
本開示の一実施形態に係る画像表示モジュール、画像表示システム、移動体、画像表示方法及び画像表示プログラムによれば、利用者に提供する立体視の画質が向上しうる。
本開示の一実施形態に係る移動体の概略構成の一例を示す図である。 図1の3次元投影装置の概略構成を示す図である。 表示面の構成例を示す平面図である。 バリアの構成例を示す平面図である。 利用者の眼と表示部とバリア部との関係を示す模式図である。 光学系を介して投影された虚像の歪みの一例を示す図である。 図6の歪みの逆変換に基づいて表示面に表示された画像の一例を示す図である。 利用者が立体視できるように構成された最小繰り返し単位を有する表示面の例を示す図である。 光学系を介して拡大されて投影された場合に利用者が立体視できるように最小繰り返し単位が設定されている表示面の例を示す図である。 光学系を介して拡大されて投影された場合に利用者が立体視できるようにu軸方向に沿って最小繰り返し単位が変更されている表示面の例を示す図である。 適視距離面におけるドット領域及び制御領域の例を示す図である。 利用者が立体視できるように構成されたバリアピッチを有するバリア部の例を示す図である。 光学系を介して拡大されて投影された場合に利用者が立体視できるようにバリアピッチが決定されているバリア部の例を示す図である。 光学系を介して拡大されて投影された場合に利用者が立体視できるようにu軸方向に沿ってバリアピッチが変更されているバリア部の例を示す図である。
以下、本開示の実施形態について、図面を参照しながら詳細に説明がされる。なお、以下の説明で用いられる図は模式的なものである。図面上の寸法比率等は現実のものとは必ずしも一致していない。
図1に示されるように、本開示の一実施形態に係る移動体10は、3次元投影システム100と、光学部材15とを備える。3次元投影システム100は、3次元投影装置12を含む。移動体10は、3次元投影システム100及び3次元投影装置12を搭載しているといえる。3次元投影システム100は、画像表示システムとも称される。
3次元投影装置12の位置は、移動体10の内部及び外部において任意である。例えば、3次元投影装置12は、移動体10のダッシュボード内に位置してよい。3次元投影装置12は、光学部材15に向けて画像光を射出する。
光学部材15は、3次元投影装置12から射出された画像光を反射する。光学部材15で反射された画像光は、アイボックス16に到達する。アイボックス16は、例えば利用者13の体格、姿勢、及び姿勢の変化等を考慮して、利用者13の眼5が存在しうると想定される実空間上の領域である。アイボックス16の形状は任意である。アイボックス16は、平面的又は立体的な領域を含んでよい。図1に示されている実線の矢印は、3次元投影装置12から射出される画像光の少なくとも一部がアイボックス16まで到達する経路を示す。画像光が進む経路は、光路とも称される。利用者13の眼5がアイボックス16内に位置する場合、利用者13は、アイボックス16に到達する画像光によって、虚像14を視認可能である。虚像14は、光学部材15から眼5に到達する経路を前方に延長した、一点鎖線で示されている線の上に位置する。3次元投影装置12は、利用者13に虚像14を視認させることによって、ヘッドアップディスプレイとして機能しうる。光学部材15は、ウィンドシールド又はコンバイナ等を含んでよい。本実施形態において、光学部材15は、ウィンドシールドであるとする。図1において、利用者13の眼5が並ぶ方向は、x軸方向に対応する。鉛直方向は、y軸方向に対応する。x軸方向及びy軸方向に直交する方向は、z軸方向に対応する。
本開示における「移動体」は、例えば車両、船舶、及び航空機等を含んでよい。車両は、例えば自動車、産業車両、鉄道車両、生活車両、及び滑走路を走行する固定翼機等を含んでよい。自動車は、例えば乗用車、トラック、バス、二輪車、及びトロリーバス等を含んでよい。産業車両は、例えば農業及び建設向けの産業車両等を含んでよい。産業車両は、例えばフォークリフト及びゴルフカート等を含んでよい。農業向けの産業車両は、例えばトラクター、耕耘機、移植機、バインダー、コンバイン、及び芝刈り機等を含んでよい。建設向けの産業車両は、例えばブルドーザー、スクレーバー、ショベルカー、クレーン車、ダンプカー、及びロードローラ等を含んでよい。車両は、人力で走行するものを含んでよい。車両の分類は、上述した例に限られない。例えば、自動車は、道路を走行可能な産業車両を含んでよい。複数の分類に同じ車両が含まれてよい。船舶は、例えばマリンジェット、ボート、及びタンカー等を含んでよい。航空機は、例えば固定翼機及び回転翼機等を含んでよい。
3次元投影システム100は、利用者13の眼5の位置を検出する検出装置11をさらに含んでよい。検出装置11は、利用者13の眼5の位置を検出し、検出した眼5の位置に関する情報を3次元投影装置12に出力する。検出した眼5の位置に関する情報は、眼位置情報とも称される。3次元投影装置12は、検出装置11が検出した利用者13の眼5の位置に基づいて、投影する画像を制御してよい。検出装置11の位置は、移動体10の内部及び外部において任意である。例えば、検出装置11は、移動体10のダッシュボード内に位置しうる。検出装置11は、例えば有線、無線、及びCAN(Controller Area Network)等を介して眼5の位置に関する情報を3次元投影装置12へ出力してよい。
検出装置11は、撮像装置を含んでよい。撮像装置は、例えばCCD(Charge Coupled Device)又はCMOS(Complementary Metal Oxide Semiconductor)イメージセンサを含んでよい。撮像装置は、利用者13の顔を撮像可能である。撮像装置の撮像範囲は、アイボックス16を含む。利用者13は、例えば移動体10の運転者等を含んでよい。検出装置11は、撮像装置によって生成された撮像画像に基づいて、実空間における利用者13の両眼の位置を検出してよい。
検出装置11は、撮像装置を含まず、撮像装置に接続されていてよい。検出装置11は、撮像装置からの信号を入力する入力端子を含んでよい。この場合、撮像装置は、入力端子に直接的に接続されてよい。検出装置11は、共有のネットワークを介して入力端子に間接的に接続されてよい。検出装置11は、入力端子に入力された映像信号から利用者13の眼5の位置を検出してよい。
検出装置11は、例えば、センサを含んでよい。センサは、超音波センサ又は光センサ等であってよい。検出装置11は、センサによって利用者13の頭部の位置を検出し、頭部の位置に基づいて、利用者13の眼5の位置を検出してよい。検出装置11は、2つ以上のセンサによって、利用者13の眼5の位置を三次元空間の座標として検出してよい。
図2に示されるように、3次元投影装置12は、3次元表示装置17と、光学素子18とを備える。3次元投影装置12は、画像表示モジュールとも称される。3次元表示装置17は、バックライト19と、表示面20aを有する表示部20と、バリア部21と、制御部24とを備える。3次元表示装置17は、通信部22をさらに備えてよい。3次元表示装置17は、記憶部23をさらに備えてよい。
光学素子18は、第1ミラー18aと、第2ミラー18bとを含んでよい。第1ミラー18a及び第2ミラー18bの少なくとも一方は、光学的なパワーを有してよい。本実施形態において、第1ミラー18aは、光学的なパワーを有する凹面鏡であるとする。第2ミラー18bは、平面鏡であるとする。光学素子18は、3次元表示装置17に表示された画像を拡大する拡大光学系として機能してよい。図2に示される一点鎖線の矢印は、3次元表示装置17から射出される画像光の少なくとも一部が、第1ミラー18a及び第2ミラー18bによって反射され、3次元投影装置12の外部に射出される経路を示す。3次元投影装置12の外部に射出された画像光は、光学部材15に到達し、光学部材15で反射されて利用者13の眼5に到達する。その結果、利用者13は、3次元表示装置17に表示された画像を視認できる。
光学素子18と光学部材15とは、3次元表示装置17から射出させる画像光を利用者13の眼5に到達させる。光学素子18と光学部材15とは、光学系30を構成してよい。言い換えれば、光学系30は、光学素子18と光学部材15とを含む。光学系30は、3次元表示装置17から射出される画像光を一点鎖線で示されている光路に沿って利用者13の眼5に到達させる。光学系30は、利用者13に視認させる画像が拡大したり縮小したりするように、画像光の進行方向を制御してよい。光学系30は、利用者13に視認させる画像の形状を所定の行列に基づいて変形させるように、画像光の進行方向を制御してもよい。
光学素子18は、例示される構成に限られない。ミラーは、凹面鏡であってもよいし、凸面鏡であってもよいし、平面鏡であってもよい。ミラーが凹面鏡又は凸面鏡である場合、その形状は、少なくとも一部に球面形状を含んでもよいし、少なくとも一部に非球面形状を含んでもよい。光学素子18を構成する要素の数は、2つに限られず、1つであってもよいし、3つ以上であってもよい。光学素子18は、ミラーに限られずレンズを含んでもよい。レンズは、凹面レンズであってもよいし、凸面レンズであってもよい。レンズの形状は、少なくとも一部に球面形状を含んでもよいし、少なくとも一部に非球面形状を含んでもよい。
バックライト19は、利用者13から見て、表示部20及びバリア部21よりも遠い側に位置する。バックライト19は、バリア部21と表示部20とに向けて光を射出する。バックライト19が射出した光の少なくとも一部は、一点鎖線で示されている光路に沿って進行し、利用者13の眼5に到達する。バックライト19は、LED(Light Emission Diode)又は有機EL若しくは無機EL等の発光素子を含んでよい。バックライト19は、発光強度、及び、その分布を制御可能に構成されてもよい。
表示部20は、表示パネルを含む。表示部20は、例えば、LCD(Liquid Crystal Display)等の液晶デバイスであってよい。本実施形態において、表示部20は、透過型の液晶表示パネルを含むとする。表示部20は、この例に限られず、種々の表示パネルを含んでよい。
表示部20は、複数の画素を有し、各画素においてバックライト19から入射する光の透過率を制御し、利用者13の眼5に到達する画像光として射出する。利用者13は、表示部20の各画素から射出される画像光によって構成される画像を視認する。
バリア部21は、入射してくる光の進行方向を規定する。バリア部21が表示部20よりもバックライト19に近い側に位置する場合、バックライト19から射出される光は、バリア部21に入射し、さらに表示部20に入射する。この場合、バリア部21は、バックライト19から射出される光の一部を遮ったり減衰させたりし、他の一部を表示部20に向けて透過させる。表示部20は、バリア部21によって規定された方向に進行する入射光を、同じ方向に進行する画像光としてそのまま射出する。表示部20がバリア部21よりもバックライト19に近い側に位置する場合、バックライト19から射出される光は、表示部20に入射し、さらにバリア部21に入射する。この場合、バリア部21は、表示部20から射出される画像光の一部を遮ったり減衰させたりし、他の一部を利用者13の眼5に向けて透過させる。
表示部20とバリア部21とのどちらが利用者13の近くに位置するかにかかわらず、バリア部21は、画像光の進行方向を制御できる。バリア部21は、表示部20から射出される画像光の一部を利用者13の左眼5L及び右眼5R(図5参照)のいずれかに到達させ、画像光の他の一部を利用者13の左眼5L及び右眼5Rの他方に到達させる。つまり、バリア部21は、画像光の少なくとも一部の進行方向を利用者13の左眼5Lと右眼5Rとに分ける。左眼5L及び右眼5Rはそれぞれ、第1眼及び第2眼ともいう。本実施形態において、バリア部21は、バックライト19と表示部20との間に位置する。つまり、バックライト19から射出される光は、先にバリア部21に入射し、次に表示部20に入射する。
バリア部21によって画像光の進行方向が規定されることによって、利用者13の左眼5L及び右眼5Rそれぞれに異なる画像光が到達しうる。その結果、利用者13は、左眼5L及び右眼5Rそれぞれで異なる画像を視認しうる。
図3に示されるように、表示部20は、表示面20a上に、第1表示領域201と、第2表示領域202とを有する。第1表示領域201は、利用者13の左眼5Lで視認される左眼視認領域201Lと、利用者13の右眼5Rで視認される右眼視認領域201Rとを含む。表示部20は、利用者13の左眼5Lに視認させる左眼画像と、利用者13の右眼5Rに視認させる右眼画像とを含む視差画像を表示する。視差画像は、利用者13の左眼5L及び右眼5Rそれぞれに投影される画像であって、利用者13の両眼に視差を与える画像であるとする。表示部20は、左眼視認領域201Lに左眼画像を表示し、右眼視認領域201Rに右眼画像を表示する。つまり、表示部20は、左眼視認領域201Lと右眼視認領域201Rとに視差画像を表示する。左眼視認領域201Lと右眼視認領域201Rとは、視差方向を表すu軸方向に並んでいるとする。左眼視認領域201L及び右眼視認領域201Rは、視差方向に直交するv軸方向に沿って延在してよいし、v軸方向に対して所定角度で傾斜する方向に延在してもよい。つまり、左眼視認領域201L及び右眼視認領域201Rは、視差方向の成分を含む所定方向に沿って交互に並んでもよい。左眼視認領域201Lと右眼視認領域201Rとが交互に並ぶピッチは、視差画像ピッチともいう。左眼視認領域201Lと右眼視認領域201Rとは、間隔をあけて位置していてもよいし、互いに隣接していてもよい。表示部20は、第2表示領域202に平面画像を表示する。平面画像は、利用者13の眼5に視差を与えず、立体視されない画像であるとする。
図4に示されるように、バリア部21は、第1バリア領域211と、第2バリア領域212とを有する。バリア部21が利用者13から見て表示部20よりも近い側に位置する場合、バリア部21は、表示部20から射出される画像光の透過率を制御する。第1バリア領域211は、第1表示領域201に対応し、第1表示領域201から射出される視差画像に係る画像光の透過率を制御する。第1バリア領域211は、開口領域21bと、遮光面21aとを有する。開口領域21bは、表示部20からバリア部21に入射する光を透過させる。開口領域21bは、第1所定値以上の透過率で光を透過させてよい。第1所定値は、例えば100%であってよいし、100%に近い値であってよい。遮光面21aは、表示部20からバリア部21に入射する光を遮る。遮光面21aは、第2所定値以下の透過率で光を透過させてよい。第2所定値は、例えば0%であってよいし、0%に近い値であってよい。第1所定値は、第2所定値よりも大きい。
開口領域21bと遮光面21aとは、視差方向を表すu軸方向に交互に並ぶとする。開口領域21bと遮光面21aとの境界は、図4に例示されているように視差方向に直交するv軸方向に沿ってよいし、v軸方向に対して所定角度で傾斜する方向に沿ってもよい。言い換えれば、開口領域21bと遮光面21aとは、視差方向の成分を含む所定方向に沿って交互に並んでよい。
開口領域21b及び遮光面21aの形状は、左眼視認領域201L及び右眼視認領域201Rの形状に基づいて決定されてよい。逆に言えば、左眼視認領域201L及び右眼視認領域201Rの形状は、開口領域21b及び遮光面21aの形状に基づいて決定されてよい。
第2バリア領域212は、第2表示領域202に対応し、第2表示領域202から射出される平面画像に係る画像光の透過率を制御する。
本実施形態において、バリア部21は、利用者13から見て表示部20よりも遠い側に位置している。バリア部21は、バックライト19から表示部20に向けて入射する光の透過率を制御する。開口領域21bは、バックライト19から表示部20に向けて入射する光を透過させる。遮光面21aは、バックライト19から表示部20に入射する光を遮る。このようにすることで、第1表示領域201に入射する光の進行方向が所定方向に限定される。その結果、画像光の一部は、バリア部21によって利用者13の左眼5Lに到達するように制御されうる。画像光の他の一部は、バリア部21によって利用者13の右眼5Rに到達するように制御されうる。
バリア部21は、液晶シャッターで構成されてよい。液晶シャッターは、印加する電圧に基づいて光の透過率を制御しうる。液晶シャッターは、複数の画素で構成され、各画素における光の透過率を制御してよい。液晶シャッターは、光の透過率が高い領域又は光の透過率が低い領域を任意の形状に形成しうる。バリア部21が液晶シャッターで構成される場合、開口領域21bは、第1所定値以上の透過率を有してよい。バリア部21が液晶シャッターで構成される場合、遮光面21aは、第2所定値以下の透過率を有してよい。第1所定値は、第2所定値より高い値に設定されてよい。第1所定値に対する第2所定値の比率は、一例では、1/100に設定されてよい。第1所定値に対する第2所定値の比率は、他の例では、1/1000に設定されてもよい。開口領域21bと遮光面21aとの形状が変更可能に構成されるバリア部21は、アクティブバリアとも称される。
制御部24は、表示部20を制御する。バリア部21がアクティブバリアである場合、制御部24は、バリア部21を制御してよい。制御部24は、バックライト19を制御してもよい。制御部24は、検出装置11から利用者13の眼5の位置に関する情報を取得し、その情報に基づいて表示部20、バリア部21、又はバックライト19を制御してもよい。制御部24は、例えばプロセッサとして構成される。制御部24は、1以上のプロセッサを含んでよい。プロセッサは、特定のプログラムを読み込ませて特定の機能を実行する汎用のプロセッサ、及び特定の処理に特化した専用のプロセッサを含んでよい。専用のプロセッサは、特定用途向けIC(ASIC:Application Specific Integrated Circuit)を含んでよい。プロセッサは、プログラマブルロジックデバイス(PLD:Programmable Logic Device)を含んでよい。PLDは、FPGA(Field-Programmable Gate Array)を含んでよい。制御部24は、1つ又は複数のプロセッサが協働するSoC(System-on-a-Chip)、及びSiP(System In a Package)のいずれかであってよい。
通信部22は、外部装置と通信可能なインタフェースを含んでよい。外部装置は、例えば検出装置11を含んでよい。通信部22は、検出装置11から情報を取得し、制御部24に出力してよい。本開示における「通信インタフェース」は、例えば物理コネクタ、及び無線通信機を含んでよい。物理コネクタは、電気信号による伝送に対応した電気コネクタ、光信号による伝送に対応した光コネクタ、及び電磁波による伝送に対応した電磁コネクタを含んでよい。電気コネクタは、IEC60603に準拠するコネクタ、USB規格に準拠するコネクタ、又はRCA端子に対応するコネクタを含んでよい。電気コネクタは、EIAJ CP-121aAに規定されるS端子に対応するコネクタ、又はEIAJ RC-5237に規定されるD端子に対応するコネクタを含んでよい。電気コネクタは、HDMI(登録商標)規格に準拠するコネクタ、又はBNC(British Naval Connector又はBaby-series N Connector等)を含む同軸ケーブルに対応するコネクタを含んでよい。光コネクタは、IEC 61754に準拠する種々のコネクタを含んでよい。無線通信機は、Bluetooth(登録商標)、及びIEEE8021aを含む各規格に準拠する無線通信機を含んでよい。無線通信機は、少なくとも1つのアンテナを含む。
記憶部23は、各種情報、又は3次元表示装置17の各構成部を動作させるためのプログラム等を格納してよい。記憶部23は、例えば半導体メモリ等で構成されてよい。記憶部23は、制御部24のワークメモリとして機能してよい。記憶部23は、制御部24に含まれてもよい。
図5に示されるように、バックライト19から射出された光は、バリア部21と表示部20とを透過して利用者13の眼5に到達する。バックライト19から射出された光が眼5に到達するまでの経路は、破線で表されている。バリア部21の開口領域21bを透過して右眼5Rに到達する光は、表示部20の右眼視認領域201Rを透過する。つまり、右眼5Rは、開口領域21bを透過した光によって右眼視認領域201Rを視認できる。バリア部21の開口領域21bを透過して左眼5Lに到達する光は、表示部20の左眼視認領域201Lを透過する。つまり、左眼5Lは、開口領域21bを透過した光によって左眼視認領域201Lを視認できる。
表示部20は、右眼視認領域201R及び左眼視認領域201Lに、それぞれ右眼画像及び左眼画像を表示する。これによって、バリア部21は、左眼画像に係る画像光を左眼5Lに到達させ、右眼画像に係る画像光を右眼5Rに到達させる。つまり、開口領域21bは、左眼画像に係る画像光を利用者13の左眼5Lに到達させ、右眼画像に係る画像光を利用者13の右眼5Rに到達させるように構成される。このようにすることで、3次元表示装置17は、利用者13の両眼に対して視差画像を投影できる。利用者13は、左眼5Lと右眼5Rとで視差画像を見ることによって、画像を立体視できる。利用者13の両眼に視差を与える方向は、視差方向ともいう。視差方向は、利用者13の左眼5L及び右眼5Rが並ぶ方向に対応する。
利用者13が立体視している場合において、左眼5Lに右眼画像に係る画像光が入射したり、右眼5Rに左眼画像に係る画像光が入射したりすることによって、利用者13が立体視を失うことがある。左眼5Lに右眼画像に係る画像光が入射したり、右眼5Rに左眼画像に係る画像光が入射したりする現象は、クロストークとも称される。クロストークは、利用者13に提供する立体視の画質を悪化させる。バリア部21は、左眼画像に係る画像光を右眼5Rに到達させず、右眼画像に係る画像光を左眼5Lに到達させないようにする。つまり、遮光面21aは、左眼画像に係る画像光を利用者13の右眼5Rに到達させず、右眼画像に係る画像光を利用者13の左眼5Lに到達させないように構成される。このようにすることで、利用者13は、左眼5Lで左眼画像だけを視認し、右眼5Rで右眼画像だけを視認できる。その結果、クロストークが発生しにくくなる。
表示部20の表示面20aから射出された画像光の少なくとも一部は、バリア部21の開口領域21bを透過し、光学素子18を介して光学部材15に到達する。画像光は、光学部材15で反射されて利用者13の眼5に到達する。これにより、利用者13の眼5は光学部材15よりもz軸の負の方向の側に位置する第1虚像14aを視認できる。第1虚像14aは、表示面20aが表示している画像に対応する。バリア部21の開口領域21bと遮光面21aとは、光学部材15の前方であって第1虚像14aの光学部材15側に第2虚像14bをつくる。図5に示すように、利用者13は、見かけ上、第1虚像14aの位置に表示部20が存在し、第2虚像14bの位置にバリア部21が存在するかのように、画像を視認しうる。
表示面20aに表示される画像に係る画像光は、バリア部21によって規定される方向に向けて、3次元表示装置17から射出される。光学素子18は、画像光を反射したり屈折させたりし、光学部材15に向けて射出する。光学部材15は、画像光を反射し、利用者13の眼5に向けて進行させる。画像光が利用者13の眼5に入射することによって、利用者13は、視差画像を虚像14として視認する。利用者13は、虚像14を視認することによって立体視できる。虚像14のうち視差画像に対応する画像は、視差虚像とも称される。視差虚像は、光学系30を介して投影される視差画像であるともいえる。虚像14のうち平面画像に対応する画像は、平面虚像とも称される。平面虚像は、光学系30を介して投影される平面画像であるともいえる。
利用者13が視認する視差虚像は、光学系30を介して利用者13の眼5に投影される。光学系30は、画像光の入射によって入力される画像を、相似の関係を維持したまま拡大したり縮小したりして投影することが求められることがある。しかし、光学系30は、入力される画像と投影する画像との間の相似の関係を維持できないことがある。つまり、光学系30に入射する前の視差画像と、光学系30を介して投影される視差画像(視差虚像)との間に歪みが生じることがある。例えば図6に示されるように、矩形の表示面20aに表示されている画像は、光学系30を介して利用者13の眼5に投影されることによって、v軸の正の方向に行くほどu軸方向に拡大するように歪んだ形状の虚像14になることがある。表示面20aの形状は、実線で表されている。虚像14の形状は、破線で表されている。
左眼5L及び右眼5Rが光学系30を介して投影された虚像14を視認する場合、虚像14は、表示面20aに表示されている画像に対して歪みを有しうる。制御部24は、図7に示されるように、光学系30を介して投影された虚像14が矩形の画像となるように、表示面20aに表示されている画像を制御してよい。虚像14は、破線で表されている。画像の表示面20aは、実線で表されており、矩形から歪んでいる。表示面20aの形状は、虚像14として表示しようとする矩形の形状を、光学系30の歪みを表す行列で逆変換した形状に対応する。図7の例では、表示面20aのうちv軸の正の側の領域は、光学系30を介して投影されることによって、表示面20aのうちv軸の負の側の領域よりも、u軸方向に大きく拡大される。つまり、制御部24は、表示面20aのv軸の正の側の領域に表示する画像をu軸方向に縮小する。
光学系30を介して投影された虚像14において左眼視認領域201Lと右眼視認領域201Rとが図8に例示されるように見える場合に、利用者13が立体視できると仮定する。左眼視認領域201Lと右眼視認領域201Rとが繰り返すピッチは、kで表されている。kは、最小繰り返し単位とも称される。図8の例において、最小繰り返し単位は、12個のサブピクセル20pがu軸方向に並んでいる長さに対応する。
例えば、表示面20aに表示された画像が光学系30を介して投影された虚像14において、u軸方向に1.2倍に拡大されるとする。この場合、制御部24は、図9に例示されるように、u軸方向に並んでいる10個のサブピクセル20pの長さを最小繰り返し単位に設定する。このようにすることで、虚像14における最小繰り返し単位が12個のサブピクセル20pの長さとなる。その結果、利用者13が立体視できる。言い換えれば、制御部24は、虚像14における最小繰り返し単位が12個のサブピクセル20pの長さになるように、表示面20aにおける最小繰り返し単位を設定する。
虚像14のu軸方向の倍率がu軸に沿って変化することがある。この場合、制御部24は、図10に例示されるように、第1表示領域201をu軸方向に沿って複数の領域に分割し、各領域で最小繰り返し単位を設定する。A1で表される領域において、最小繰り返し単位は、k1で表されており、10個のサブピクセル20pの長さに対応している。A2で表される領域において、最小繰り返し単位は、k2で表されており、8個のサブピクセル20pの長さに対応している。制御部24は、各領域に対応する虚像14の最小繰り返し単位が12個のサブピクセル20pの長さとなるように、第1表示領域201において領域を分割し、各領域の最小繰り返し単位を設定する。最小繰り返し単位を設定するために分割された領域は、最小繰り返し単位制御領域とも称される。
図11に示されるように、表示部20は、左眼画像が表示される左眼視認領域201Lと、右眼画像が表示される右眼視認領域201Rとを含む。左眼視認領域201Lと右眼視認領域201Rとは、表示境界20bで分けられ、u軸方向にそれぞれ4個ずつ並ぶサブピクセル20pを含む。8個のサブピクセル20pはそれぞれ、1番から8番までの番号を有する。各サブピクセル20pが有する番号は、サブピクセル20pの番号ともいう。左眼視認領域201Lは、5番から8番までの番号を有するサブピクセル20pを含む。右眼視認領域201Rは、1番から4番までの番号を有するサブピクセル20pを含む。左眼画像と右眼画像とは、8個のサブピクセル20pを周期として繰り返し表示されるとする。左眼視認領域201Lの数と右眼視認領域201Rの数とは、同じである。サブピクセル20pの番号の周期は、左眼視認領域201L又は右眼視認領域201Rが並ぶ数の2倍であるともいえる。左眼視認領域201Lと右眼視認領域201Rが並ぶ数は、所定数とされてよい。所定数は、4個に限られず、3個以下であってよいし、5個以上であってよい。左眼画像と右眼画像とは、所定数の2倍の数のサブピクセル20pを周期として繰り返し表示されてよい。
図11において、バリア部21は、表示部20の表示面20aに含まれると仮定する。表示部20とバリア部21との間のギャップは、左眼5L及び右眼5Rから表示部20の表示面20aまでの距離を表すdに比べて十分小さく、無視されるとする。dは、適視距離に対応しているとする。
左眼5L及び右眼5Rの位置には、表示部20の表示面20aにおける左眼視認領域201Lと右眼視認領域201Rとに対応する領域が仮想的に設けられる。左眼5L及び右眼5Rの位置に仮想的に設けられる領域は、ドット領域51ともいう。ドット領域51は、眼間距離に合わせて設けられる。図11において、左眼画像と右眼画像とは、8個のサブピクセル20pを周期として表示される。この場合、ドット領域51は、左眼5L及び右眼5Rそれぞれに4つずつ割り当てられる。左眼5Lと右眼5Rとの間に4つのドット領域51が位置することに基づいて、ドット領域51のu軸方向の幅は、眼間距離の1/4として算出される。左眼画像と右眼画像とが表示される周期は、8個に限られない。左眼5L及び右眼5Rそれぞれに割り当てられるドット領域51の数は、4つに限られない。ドット領域51のu軸方向の幅は、左眼5L及び右眼5Rそれぞれに割り当てられるドット領域51の数で眼間距離を除算することによって算出される。
ドット領域51は、各サブピクセル20pの番号に対応する番号を有する。図11に示されるドット領域51は、1番から8番までの番号を有する。右眼5Rが2番及び3番のドット領域51の間に位置する場合、1番、2番、3番及び4番のサブピクセル20pは、右眼画像を表示する右眼視認領域201Rに含まれる。左眼5Lが6番及び7番のドット領域51の間に位置する場合、5番、6番、7番及び8番のサブピクセル20pは、左眼画像を表示する左眼視認領域201Lに含まれる。つまり、ドット領域51は、右眼視認領域201R及び左眼視認領域201Lに含まれるサブピクセル20pの番号に対応する。
ドット領域51のu軸方向の中央には、×印で示される制御境界52が設定される。制御境界52によって区切られた領域は、制御領域53という。左眼5Lが同一の制御領域53の中にある間、左眼視認領域201Lに含まれるサブピクセル20pの番号は同じとされる。同様に、右眼5Rが同一の制御領域53の中にある間、右眼視認領域201Rに含まれるサブピクセル20pの番号は同じとされる。左眼5Lが異なる制御領域53に移動した場合、制御部24は、左眼視認領域201Lに含まれるサブピクセル20pの番号を変更する。つまり、制御部24は、左眼視認領域201Lの範囲を変更する。右眼5Rが異なる制御領域53に移動した場合、制御部24は、右眼視認領域201Rに含まれるサブピクセル20pの番号を変更する。つまり、制御部24は、右眼視認領域201Rの範囲を変更する。
例えば、右眼5Rが2番及び3番のドット領域51の間を含む制御領域53から3番及び4番のドット領域51の間を含む制御領域53まで移動すると仮定する。この場合、左眼5Lは、6番及び7番のドット領域51の間を含む制御領域53から7番及び8番のドット領域51の間を含む制御領域53まで移動する。制御部24は、左眼5L及び右眼5Rが制御境界52を通過したときに、表示境界20bの位置を動かし、左眼視認領域201L及び右眼視認領域201Rに含まれるサブピクセル20pの番号を変更する。表示境界20bの移動後、2番、3番、4番及び5番のサブピクセル20pが右眼視認領域201Rに含まれる。6番、7番、8番及び1番のサブピクセル20pが左眼視認領域201Lに含まれる。
右眼視認領域201Rに含まれるサブピクセル20pの番号は、u軸の正の方向の端に位置するサブピクセル20pの番号で特定されるとする。u軸の正の方向の端に位置するサブピクセル20pの番号は、インデックスとも称される。例えば、右眼視認領域201Rに1番から4番までのサブピクセル20pが含まれる場合、インデックスは、1番となる。左眼視認領域201Lに含まれるサブピクセル20pの番号は、右眼視認領域201Rに含まれるサブピクセル20pの番号によって特定される場合、インデックスで特定されうる。例えば、インデックスが1番である場合、左眼視認領域201Lに含まれるサブピクセル20pの番号は、5番から8番までに特定されうる。
図11において、ドット領域51及び制御領域53は、u軸方向に延在する線分として示される。ドット領域51及び制御領域53は、紙面の手前側及び奥側にも延在する。つまり、ドット領域51及び制御領域53は、u軸及びv軸方向に広がる面である。図11において、制御境界52は、ドット領域51を示す線分の中点、又は、制御領域53を示す線分の端点として示される。制御境界52は、紙面の手前側及び奥側にも延在する。つまり、制御境界52は、v軸方向の成分を有する線である。
左眼5L及び右眼5Rは、表示部20の表示面20aから適視距離だけ離れ、Z軸方向に垂直な面の中で移動しうる。表示面20aから適視距離だけ離れ、Z軸方向に垂直な面は、適視距離面とも称される。ドット領域51、制御境界52、及び制御領域53は、適視距離面の上で、バリア部21の開口領域21bの端線が延在する方向と同じ方向に延在する。
左眼5Lが表示面20aから適視距離だけ離れた位置から光学系30を介さずに画像を視認する場合、左眼視認領域201Lに含まれるサブピクセル20pの番号は、u軸方向に並ぶ全てのサブピクセル20pの中で繰り返される。右眼5Rが表示面20aから適視距離だけ離れた位置から光学系30を介さずに画像を視認する場合、右眼視認領域201Rに含まれるサブピクセル20pの番号は、u軸方向に並ぶ全てのサブピクセル20pの中で繰り返される。つまり、u軸方向に並ぶ全てのサブピクセル20pの番号は、1つのインデックスで特定される。
利用者13が視認するバリア部21の位置と表示面20aの位置との関係は、利用者13が表示面20aを直視する場合と、光学系30を介して投影された虚像14を視認する場合とで変化しうる。利用者13が虚像14を立体視できるように、制御部24は、虚像14におけるインデックスから逆算して第1表示領域201に表示する画像のインデックスを設定する。制御部24は、光学系30を介した虚像14の歪みに基づいて、第1表示領域201を領域に分割し、各領域で表示する画像のインデックスを設定してよい。インデックスを設定するために分割された領域は、インデックス制御領域とも称される。
制御部24は、最小繰り返し単位とインデックスとをそれぞれ独立に設定できる。制御部24は、最小繰り返し単位制御領域をさらにインデックス制御領域に分割してよい。最小繰り返し単位制御領域をさらにインデックス制御領域に分割した領域は、表示制御領域とも称される。
制御部24は、光学系30に対応してどのような領域に分割するか予め決定しておき、記憶部23に格納しておいてよい。
利用者13に視差画像を立体視させる場合、視差画像に含まれる左眼画像及び右眼画像に共通に含まれる画像要素が所定深さで立体視されるように、画像要素は、左眼画像と右眼画像とで所定距離だけずらして表示される。画像要素がずらされる所定距離は、視差量とも称される。制御部24は、光学系30を介して投影される虚像14の歪みに基づいて、第1表示領域201に表示する画像の視差量を制御してよい。視差量は、最小繰り返し単位に対応するように制御されてよい。制御部24は、最小繰り返し単位制御領域ごとに視差量を設定してもよいし、表示制御領域ごとに視差量を設定してもよい。
光学系30を介して投影される虚像14が歪みを有する場合、虚像14に輝度むらが生じうる。制御部24は、虚像14の輝度むらを補正するために、第1表示領域201に表示する画像の輝度を制御してよい。輝度は、最小繰り返し単位に対応するように制御されてよい。輝度むらは、v軸方向の倍率の分布によっても生じうる。制御部24は、v軸方向の倍率の分布に基づいて最小繰り返し単位制御領域をさらに分割し、分割した各領域で画像の輝度を制御してもよい。
光学系30を介して投影される虚像14の歪みは、利用者13の眼5の位置に応じて変化しうる。制御部24は、利用者13の眼5の位置に関する情報に基づいて、第1表示領域201を最小繰り返し単位制御領域に分割してもよい。制御部24は、利用者13の眼5の位置に関する情報に基づいて、第1表示領域201をインデックス制御領域に分割してもよい。制御部24は、利用者13の眼5の位置と、領域の分割パターンとの関係を予め決定しておき、例えばテーブルとして記憶部23に格納しておいてよい。
制御部24は、利用者13の眼5の位置の変化に応じて、インデックスを変更してよい。この場合、制御部24は、領域の分割パターンを変更せずにインデックスだけ変更してもよいし、領域の分割パターンを変更するとともにインデックスをあわせて変更してもよい。
光学系30を介して投影される虚像14におけるバリア部21の開口領域21bの形状は、利用者13が直視する場合の形状に対して、歪みを有しうる。
光学系30を介して投影された虚像14において開口領域21bと遮光面21aとが図12に例示されるように見える場合に、利用者13が立体視できると仮定する。開口領域21bと遮光面21aと繰り返すピッチは、Bpで表されている。Bpは、バリアピッチとも称される。図12の例において、バリアピッチは、12個の区画分の長さに対応する。
例えば、光学系30を介して投影された虚像14において、バリア部21がu軸方向に1.2倍に拡大されて見えるとする。この場合、バリア部21は、図13に例示されるように、バリアピッチが10個の区画分の長さとなるように構成されてよい。このようにすることで、虚像14においてバリアピッチが12個の区画分の長さに対応するように見える。その結果、利用者13が立体視できる。言い換えれば、虚像14におけるバリアピッチが12個の区画分の長さになるように、バリア部21の実際のバリアピッチを決定してよい。
虚像14のu軸方向の倍率がu軸に沿って変化することがある。この場合、バリア部21は、図14に例示されるように、第1バリア領域211をu軸方向に沿って複数の領域に分割し、各領域で異なるバリアピッチとなるように構成されてよい。B1で表される領域において、バリアピッチは、Bp1で表されており、10個の区画分の長さに対応している。B2で表される領域において、バリアピッチは、Bp2で表されており、8個の区画分の長さに対応している。バリア部21は、各領域に対応する虚像14においてバリアピッチが12個の区画分の長さに見えるように、第1バリア領域211において領域を分割し、各領域で異なるバリアピッチとなるように構成されてよい。バリアピッチを決定するために分割された領域は、バリアピッチ制御領域とも称される。
光学系30を介して投影される虚像14の歪みは、利用者13の眼5の位置に応じて変化しうる。つまり、バリア部21の虚像14の歪みは、利用者13の眼5の位置に応じて変化しうる。
バリア部21が固定バリアとして構成される場合、利用者13の眼5が所定位置に存在するとの仮定の下で、バリア部21が構成されてもよい。利用者13の眼5が存在しうる複数の位置それぞれにおけるバリア部21の構成を平均化した結果に基づいて、バリア部21が構成されてもよい。
バリア部21がアクティブバリアとして構成される場合、制御部24は、利用者13の眼5の位置に基づいて、第1バリア領域211をバリアピッチ制御領域に分割し、バリアピッチ制御領域ごとにバリアピッチを決定してよい。制御部24は、利用者13の眼5の位置と、領域の分割パターンとの関係を予め決定しておき、例えばテーブルとして記憶部23に格納しておいてよい。
制御部24は、利用者13の眼5の位置の変化に応じて、開口領域21bのu軸方向の位置を移動させてもよい。この場合、制御部24は、領域の分割パターンを変更せずに開口領域21bの位置だけ変更してもよいし、領域の分割パターンを変更するとともに開口領域21bの位置をあわせて変更してもよい。
以上説明してきたように、本実施形態に係る3次元投影装置12及び3次元投影システム100によれば、光学系30を介して投影される視差画像の歪みが高精度で補正される。その結果、利用者13に提供する立体視の画質が向上しうる。
本実施形態に係る構成は、画像表示方法としても実現されうる。画像表示方法は、以下のステップを含んでよい。
(ステップ1)制御部24が、光学系30を介して投影される視差画像の歪みの大きさに基づいて、表示部20又は表示面20aを複数の表示制御領域に分割する。
(ステップ2)制御部24が、表示制御領域ごとに、視差画像の最小繰り返し単位とインデックスとを制御する。
画像表示方法は、プロセッサに実行させる画像表示プログラムとして実現されてもよい。
本開示に係る構成は、以上説明してきた実施形態にのみ限定されるものではなく、幾多の変形又は変更が可能である。例えば、各構成部等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の構成部等を1つに組み合わせたり、或いは分割したりすることが可能である。
本開示に係る構成を説明する図は、模式的なものである。図面上の寸法比率等は、現実のものと必ずしも一致しない。
本開示において「第1」及び「第2」等の記載は、当該構成を区別するための識別子である。本開示における「第1」及び「第2」等の記載で区別された構成は、当該構成における番号を交換することができる。例えば、第1眼は、第2眼と識別子である「第1」と「第2」とを交換することができる。識別子の交換は同時に行われる。識別子の交換後も当該構成は区別される。識別子は削除してよい。識別子を削除した構成は、符号で区別される。本開示における「第1」及び「第2」等の識別子の記載のみに基づいて、当該構成の順序の解釈、小さい番号の識別子が存在することの根拠に利用してはならない。
本開示において、X軸、Y軸、及びZ軸は、説明の便宜上設けられたものであり、互いに入れ替えられてよい。本開示に係る構成は、X軸、Y軸、及びZ軸によって構成される直交座標系を用いて説明されてきた。本開示に係る各構成の位置関係は、直交関係にあると限定されるものではない。
5 眼(5L:左眼、5R:右眼)
10 移動体
11 検出装置
12 3次元投影装置(画像表示モジュール)
13 利用者
14 虚像(14a:第1虚像、14b:第2虚像)
15 光学部材
16 アイボックス
17 3次元表示装置
18 光学素子(18a:第1ミラー、18b:第2ミラー)
19 バックライト
20 表示部(20a:表示面、20b:表示境界、20p:サブピクセル)
201 第1表示領域
201L 左眼視認領域
201R 右眼視認領域
202 第2表示領域
21 バリア部(21a:遮光面、21b:開口領域)
211 第1バリア領域
212 第2バリア領域
22 通信部
23 記憶部
24 制御部
30 光学系
51 ドット領域
52 制御境界
53 制御領域
100 3次元投影システム

Claims (11)

  1. 利用者の第1眼及び第2眼に対して光学系を介して投影される視差画像を表示する表示部と、
    前記視差画像の画像光の進行方向を規定することによって、前記第1眼及び前記第2眼に視差を与えるバリア部と、
    前記表示部を制御する制御部と
    を備え、
    前記制御部は、
    前記光学系を介して投影される前記視差画像の歪みの大きさに基づいて、前記表示部を複数の表示制御領域に分割し、
    前記表示制御領域ごとの歪みの大きさに基づいて前記視差画像の最小繰り返し単位を制御し、
    前記最小繰り返し単位における特定サブピクセルを示すインデックスに基づいて前記光学系を介して投影される前記視差画像の歪みの位置を制御する、
    画像表示モジュール。
  2. 前記制御部は、前記表示制御領域ごとに、前記最小繰り返し単位に基づいて前記視差画像の視差量を制御する、請求項1に記載の画像表示モジュール。
  3. 前記制御部は、前記表示制御領域ごとに、前記最小繰り返し単位に基づいて前記視差画像の輝度を制御する、請求項1又は2に記載の画像表示モジュール。
  4. 前記制御部は、
    前記第1眼及び前記第2眼の位置を表す眼位置情報を取得可能に構成され、
    前記眼位置情報にさらに基づいて、前記表示部を制御する、請求項1から3までのいずれか一項に記載の画像表示モジュール。
  5. 前記制御部は、前記眼位置情報にさらに基づいて、前記視差画像の最小繰り返し単位とインデックスとを制御する、請求項4に記載の画像表示モジュール。
  6. 前記制御部は、前記眼位置情報にさらに基づいて、前記表示部を複数の表示制御領域に分割する、請求項4又は5に記載の画像表示モジュール。
  7. 前記制御部は、
    前記光学系を介して投影される前記視差画像の歪みの大きさに基づいて、前記バリア部を複数のバリア制御領域に分割し、
    前記バリア制御領域ごとに、前記バリア部のバリアピッチを制御する、請求項1から6までのいずれか一項に記載の画像表示モジュール。
  8. 撮像装置と、画像表示モジュールとを備え、
    前記撮像装置は、利用者の第1眼及び第2眼の位置を表す眼位置情報を検出し、
    前記画像表示モジュールは、
    前記利用者の前記第1眼及び前記第2眼に対して光学系を介して投影される視差画像を表示する表示部と、
    前記視差画像の画像光の進行方向を規定することによって、前記第1眼及び前記第2眼に視差を与えるバリア部と、
    前記眼位置情報に基づいて前記表示部を制御する制御部と
    を備え、
    前記制御部は、
    前記光学系を介して投影される前記視差画像の歪みの大きさに基づいて、前記表示部を複数の表示制御領域に分割し、
    前記表示制御領域ごとの歪みの大きさに基づいて前記視差画像の最小繰り返し単位を制御し、
    前記最小繰り返し単位における特定サブピクセルを示すインデックスに基づいて前記光学系を介して投影される前記視差画像の歪みの位置を制御する、
    画像表示システム。
  9. 撮像装置と、画像表示モジュールとを備え、
    前記撮像装置は、利用者の第1眼及び第2眼の位置を表す眼位置情報を検出し、
    前記画像表示モジュールは、
    前記利用者の前記第1眼及び前記第2眼に対して光学系を介して投影される視差画像を表示する表示部と、
    前記視差画像の画像光の進行方向を規定することによって、前記第1眼及び前記第2眼に視差を与えるバリア部と、
    前記眼位置情報に基づいて前記表示部を制御する制御部と
    を備え、
    前記制御部は、
    前記光学系を介して投影される前記視差画像の歪みの大きさに基づいて、前記表示部を複数の表示制御領域に分割し、
    前記表示制御領域ごとの歪みの大きさに基づいて前記視差画像の最小繰り返し単位を制御し、
    前記最小繰り返し単位における特定サブピクセルを示すインデックスに基づいて前記光学系を介して投影される前記視差画像の歪みの位置を制御する、画像表示システムを搭載し、
    前記光学系の一部を構成するウィンドシールドを備える、移動体。
  10. 利用者の第1眼及び第2眼に対して光学系を介して投影される視差画像の歪みの大きさに基づいて、前記視差画像を表示する表示部を複数の表示制御領域に分割し、
    前記表示制御領域ごとの歪みの大きさに基づいて前記視差画像の最小繰り返し単位を制御し、
    前記最小繰り返し単位における特定サブピクセルを示すインデックスに基づいて前記光学系を介して投影される前記視差画像の歪みの位置を制御する、
    画像表示方法。
  11. プロセッサに、利用者の第1眼及び第2眼に対して光学系を介して投影される視差画像の歪みの大きさに基づいて、前記視差画像を表示する表示部を複数の表示制御領域に分割させ、
    前記プロセッサに、前記表示制御領域ごとの歪みの大きさに基づいて前記視差画像の最小繰り返し単位を制御させ、前記最小繰り返し単位における特定サブピクセルを示すインデックスに基づいて前記光学系を介して投影される前記視差画像の歪みの位置を制御させる、
    画像表示プログラム。
JP2019059289A 2019-03-26 2019-03-26 画像表示モジュール、画像表示システム、移動体、画像表示方法及び画像表示プログラム Active JP7141975B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2019059289A JP7141975B2 (ja) 2019-03-26 2019-03-26 画像表示モジュール、画像表示システム、移動体、画像表示方法及び画像表示プログラム
PCT/JP2020/011526 WO2020196052A1 (ja) 2019-03-26 2020-03-16 画像表示モジュール、画像表示システム、移動体、画像表示方法及び画像表示プログラム
EP20778448.9A EP3951480A4 (en) 2019-03-26 2020-03-16 IMAGE DISPLAY MODULE AND SYSTEM, MOVABLE BODY, IMAGE DISPLAY METHOD AND PROGRAM
CN202080023384.2A CN113614619B (zh) 2019-03-26 2020-03-16 图像显示模块、图像显示系统、移动体、图像显示方法以及图像显示程序
US17/442,032 US11849103B2 (en) 2019-03-26 2020-03-16 Image display module, image display system, movable object, image display method, and non-transitory computer-readable medium storing image display program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019059289A JP7141975B2 (ja) 2019-03-26 2019-03-26 画像表示モジュール、画像表示システム、移動体、画像表示方法及び画像表示プログラム

Publications (2)

Publication Number Publication Date
JP2020160252A JP2020160252A (ja) 2020-10-01
JP7141975B2 true JP7141975B2 (ja) 2022-09-26

Family

ID=72610164

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019059289A Active JP7141975B2 (ja) 2019-03-26 2019-03-26 画像表示モジュール、画像表示システム、移動体、画像表示方法及び画像表示プログラム

Country Status (5)

Country Link
US (1) US11849103B2 (ja)
EP (1) EP3951480A4 (ja)
JP (1) JP7141975B2 (ja)
CN (1) CN113614619B (ja)
WO (1) WO2020196052A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023074703A1 (ja) * 2021-10-26 2023-05-04 京セラ株式会社 3次元表示装置、3次元表示システム、及び移動体

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014199385A (ja) 2013-03-15 2014-10-23 日本精機株式会社 表示装置及びその表示方法
JP2016140056A (ja) 2015-01-22 2016-08-04 Nltテクノロジー株式会社 立体表示装置及び視差画像補正方法
WO2018105534A1 (ja) 2016-12-07 2018-06-14 京セラ株式会社 光源装置、ディスプレイ装置、移動体、3次元投影装置、3次元投影システム、画像投影装置、および画像表示装置
JP2019015823A (ja) 2017-07-05 2019-01-31 京セラ株式会社 3次元投影装置、3次元投影システム、および移動体

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2778543B2 (ja) * 1995-07-27 1998-07-23 日本電気株式会社 立体表示装置
JP5342796B2 (ja) * 2008-03-27 2013-11-13 株式会社東芝 三次元画像表示方法および装置
JP6410167B2 (ja) * 2014-05-12 2018-10-24 パナソニックIpマネジメント株式会社 表示装置及びその表示方法
JP2018185437A (ja) * 2017-04-26 2018-11-22 京セラ株式会社 3次元表示装置、3次元表示システム、ヘッドアップディスプレイシステム、および移動体

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014199385A (ja) 2013-03-15 2014-10-23 日本精機株式会社 表示装置及びその表示方法
JP2016140056A (ja) 2015-01-22 2016-08-04 Nltテクノロジー株式会社 立体表示装置及び視差画像補正方法
WO2018105534A1 (ja) 2016-12-07 2018-06-14 京セラ株式会社 光源装置、ディスプレイ装置、移動体、3次元投影装置、3次元投影システム、画像投影装置、および画像表示装置
JP2019015823A (ja) 2017-07-05 2019-01-31 京セラ株式会社 3次元投影装置、3次元投影システム、および移動体

Also Published As

Publication number Publication date
EP3951480A4 (en) 2022-12-14
WO2020196052A1 (ja) 2020-10-01
US20220174262A1 (en) 2022-06-02
JP2020160252A (ja) 2020-10-01
US11849103B2 (en) 2023-12-19
CN113614619A (zh) 2021-11-05
EP3951480A1 (en) 2022-02-09
CN113614619B (zh) 2023-10-27

Similar Documents

Publication Publication Date Title
US20200228791A1 (en) Image projection apparatus, image display apparatus, and vehicle
US20200053352A1 (en) Three-dimensional display apparatus, three-dimensional display system, head-up display system, and mobile body
EP3876032A1 (en) Image display device, image display system, and moving body
JP7141975B2 (ja) 画像表示モジュール、画像表示システム、移動体、画像表示方法及び画像表示プログラム
US11874464B2 (en) Head-up display, head-up display system, moving object, and method of designing head-up display
JP7362518B2 (ja) カメラ装置、ウインドシールドおよび画像表示モジュール
JP7332764B2 (ja) 画像表示モジュール
JP7250582B2 (ja) 画像表示モジュール、移動体、及び光学系
JP7441333B2 (ja) 3次元表示装置、画像表示システムおよび移動体
WO2021235287A1 (ja) 視点検出装置および表示装置
JP7461215B2 (ja) 画像表示モジュール
JP7337023B2 (ja) 画像表示システム
JP7498053B2 (ja) カメラシステムおよび運転支援システム
WO2022250164A1 (ja) 3次元画像表示システムの設定方法
WO2022186189A1 (ja) 撮像装置および3次元表示装置
CN114728587A (zh) 平视显示器、平视显示器系统以及移动体

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20200808

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210510

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220510

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220711

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220817

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220912

R150 Certificate of patent or registration of utility model

Ref document number: 7141975

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150