JP4474985B2

JP4474985B2 - In-vehicle information provider

Info

Publication number: JP4474985B2
Application number: JP2004127785A
Authority: JP
Inventors: 和人加藤; 晴夫竹澤
Original assignee: Nissan Motor Co Ltd
Current assignee: Nissan Motor Co Ltd
Priority date: 2004-04-23
Filing date: 2004-04-23
Publication date: 2010-06-09
Anticipated expiration: 2024-04-23
Also published as: JP2005306269A

Description

本発明は、車両内で画像などを表示する車載情報提供装置に関する。 The present invention relates to an in-vehicle information providing apparatus that displays an image or the like in a vehicle.

画像などを表示する表示装置に関し、観察者が動いた場合に当該観察者に違和感を与えないようにする技術が知られている。特許文献１には、表示装置と観察者との間にフレネルレンズなどの光学素子を配設した表示装置が開示されている。この表示装置では、フレネルレンズによって無限遠に近い位置に投影される虚像を観察者が観察する。観察者がフレネルレンズの法線に対して下側から観察すると法線より上側に、法線に対して上側から観察すると法線より下側に、それぞれ投影像が観察される。 With respect to a display device that displays an image or the like, there is known a technique for preventing the observer from feeling uncomfortable when the observer moves. Patent Document 1 discloses a display device in which an optical element such as a Fresnel lens is disposed between the display device and an observer. In this display device, an observer observes a virtual image projected at a position near infinity by a Fresnel lens. When the observer observes the normal of the Fresnel lens from below, a projected image is observed above the normal, and when viewed from above the normal, a projected image is observed below the normal.

また、特許文献２には、表示装置を観察者の頭部に固定した表示装置が開示されている。この表示装置では、当該観察者の頭部の動きに応じて、表示映像を頭部の動きと逆にスクロールさせることにより、観察者にとって映像があたかも固定されているかのように見える。 Patent Document 2 discloses a display device in which the display device is fixed to the observer's head. In this display device, the display image is scrolled in the direction opposite to the movement of the head in accordance with the movement of the head of the observer, so that it looks as if the image is fixed to the observer.

特開平１０−７３７８５号公報Japanese Patent Laid-Open No. 10-73785 特開平８−２２０４７０号公報JP-A-8-220470

特許文献１の技術では、ディスプレイと観察者との間に光学素子を配設するので、たとえば、車両内に配設されたディスプレイを観察する場合には、光学素子用の光路スペースを確保する必要性から小型化が難しい。さらに、車両揺動によってディスプレイが観察者に対して回転運動する場合には、観察者の視線方向が変化して当該観察者が違和感を感じてしまう。また、特許文献２の技術では、表示装置を頭部に固定しているので、車両内に取り付けられている表示装置による映像を観察する場合には適さない。 In the technique of Patent Document 1, an optical element is disposed between a display and an observer. For example, when observing a display disposed in a vehicle, it is necessary to secure an optical path space for the optical element. It is difficult to reduce the size. Further, when the display rotates relative to the observer due to the vehicle swinging, the observer's line of sight changes and the observer feels uncomfortable. Moreover, since the display device is fixed to the head in the technique of Patent Document 2, it is not suitable for observing an image from the display device attached in the vehicle.

本発明による車載情報提供装置は、車両の動きを検出し、検出信号を用いて表示手段に表示される画像の並進方向の変位を演算し、この変位をキャンセルするように画像に含まれる情報の表示位置をリアルタイムに変位させるとともに、変位後に情報が表示手段の有効表示範囲から逸脱する程度を抑えるように画像に含まれる情報の表示形状を変形制御する、および画像変位ゲインを制御することの少なくとも１つを行うものである。 The in-vehicle information providing apparatus according to the present invention detects the movement of the vehicle, calculates the displacement in the translation direction of the image displayed on the display means using the detection signal, and cancels the displacement of the information included in the image. together displaces the display position in real time, after the information is deformed controls the display form of the information contained in the image so as to suppress an extent deviating from the effective display range of the display means, and controlling the image displacement gain displacement Do at least one .

本発明によれば、表示される情報を注視する乗員が感じる違和感・不快感を軽減し、表示される情報が見やすい車載情報提供装置を提供できる。 ADVANTAGE OF THE INVENTION According to this invention, the discomfort and discomfort which the passenger | crew who gazes at the displayed information reduces can be provided, and the vehicle-mounted information provision apparatus which is easy to see the displayed information can be provided.

以下、図面を参照して本発明を実施するための最良の形態について説明する。
（第一の実施形態）
図１は、本発明の第一の実施形態による車載情報提供装置の構成を説明する図である。図１において、車載情報提供装置１００は、車両運動検出部１０１と、人体データベース部１０２と、乗員運動推定部１０３と、情報源装置１０４と、制御部１０５と、画像変形・変位部１０６と、画像表示部１０７とを有する。観察者は、車両内の座席（不図示）に着座して画像表示部１０７に表示される情報を観察する。 The best mode for carrying out the present invention will be described below with reference to the drawings.
(First embodiment)
FIG. 1 is a diagram for explaining the configuration of the in-vehicle information providing apparatus according to the first embodiment of the present invention. In FIG. 1, an in-vehicle information providing apparatus 100 includes a vehicle motion detection unit 101, a human body database unit 102, an occupant motion estimation unit 103, an information source device 104, a control unit 105, an image deformation / displacement unit 106, And an image display unit 107. An observer sits on a seat (not shown) in the vehicle and observes information displayed on the image display unit 107.

車両運動検出部１０１は、車両の並進運動、および車両の回転運動をそれぞれ検出し、検出信号を乗員運動推定部１０３および制御部１０５へそれぞれ出力する。人体データベース部１０２は、車両揺動に対する人体頭部の揺動伝達関数を示すデータを格納する。格納データは、あらかじめ複数の被験者に関して計測したデータがデータベース化されたものである。車両揺動は、車両運動の検出値によって示される。 The vehicle motion detection unit 101 detects the translational motion of the vehicle and the rotational motion of the vehicle, and outputs detection signals to the occupant motion estimation unit 103 and the control unit 105, respectively. The human body database unit 102 stores data indicating a human body head rocking transfer function with respect to vehicle rocking. The stored data is a database of data measured in advance for a plurality of subjects. Vehicle swing is indicated by a detected value of vehicle motion.

乗員運動推定部１０３は、車両運動を示す検出信号を用いて、観察者（この場合は車両の乗員）の頭部運動を示す情報を人体データベース部１０２から読み出し、乗員の頭部、とくに眼球の運動（変位）を推定する。乗員運動推定部１０３は、推定した眼球の変位を示す情報を制御部１０５へ送出する。 The occupant motion estimation unit 103 reads out information indicating the head motion of the observer (in this case, the vehicle occupant) from the human body database unit 102 using the detection signal indicating the vehicle motion, and detects the occupant's head, particularly the eyeball. Estimate motion (displacement). The occupant motion estimation unit 103 sends information indicating the estimated displacement of the eyeball to the control unit 105.

情報源装置１０４は、外部機器（不図示）から入力される表示データを制御部１０５へ送出する。表示データは、画像表示部１０７に表示する画像などのデータである。本説明では、外部機器から入力される表示データを享楽情報と呼ぶことにする。享楽情報による画像は享楽画像である。 The information source device 104 sends display data input from an external device (not shown) to the control unit 105. The display data is data such as an image displayed on the image display unit 107. In this description, display data input from an external device is referred to as enjoyment information. The image by pleasure information is a pleasure image.

制御部１０５は、上記検出した眼球の変位および車両運動に基づいて画像表示部１０７に表示される画像の変位量および画像の変形量を決定する。画像の変位量は、画像表示部１０７の表示画面内で享楽情報の表示位置をリアルタイムに移動させる（画像シフトする）移動量である。画像の変形量は、画像変位によって享楽情報の表示が表示画面外へ逸脱する程度を抑えるように享楽情報の表示形状を変形させる変形量である。表示画像の変位および変形の詳細については後述する。制御部１０５は、画像の変位量および変形量を決定する他に、車載情報提供装置１００の各部を制御するように構成されている。 The control unit 105 determines the displacement amount and the deformation amount of the image displayed on the image display unit 107 based on the detected eyeball displacement and vehicle motion. The displacement amount of the image is a movement amount that moves the display position of the enjoyment information in real time within the display screen of the image display unit 107 (image shift). The deformation amount of the image is a deformation amount that deforms the display shape of the enjoyment information so that the display of the enjoyment information deviates from the display screen due to the image displacement. Details of the displacement and deformation of the display image will be described later. The control unit 105 is configured to control each unit of the in-vehicle information providing apparatus 100 in addition to determining the displacement amount and the deformation amount of the image.

画像変形・変位部１０６は、制御部１０５によって決定された変位量および変形量にしたがって享楽情報の表示データを加工する。データ加工後の表示データは、画像表示部１０７の入力インターフェイスに応じた表示信号として画像表示部１０７へ出力される。 The image deformation / displacement unit 106 processes the display data of the enjoyment information according to the displacement amount and the deformation amount determined by the control unit 105. The display data after data processing is output to the image display unit 107 as a display signal corresponding to the input interface of the image display unit 107.

画像表示部１０７は、たとえば、液晶表示器などで構成され、車室内で乗員に対して車両の進行方向（たとえば、前方）に配設されている。画像表示部１０７は、入力された表示信号による画像やテキストなどを液晶表示パネルに表示する。 The image display unit 107 is configured by, for example, a liquid crystal display or the like, and is disposed in the traveling direction (for example, forward) of the vehicle with respect to the passenger in the vehicle interior. The image display unit 107 displays an image, text, or the like based on the input display signal on the liquid crystal display panel.

本発明は、車両の加減速状態であっても画像表示部１０７に表示されている画像を観察する乗員に違和感・不快感を与えないようにするものである。第一の実施の形態では、乗員の頭部（とくに眼球）と画像表示部１０７との相対変位を算出し、画像表示部１０７の表示画面内で画像（テキストを含む）の表示位置を相対変位に応じて変位させるとともに、変位した画像が表示画面から逸脱する程度を抑えるように画像を縮小する。 The present invention prevents the passengers who observe the image displayed on the image display unit 107 from feeling uncomfortable or uncomfortable even when the vehicle is accelerating or decelerating. In the first embodiment, the relative displacement between the occupant's head (especially the eyeball) and the image display unit 107 is calculated, and the display position of the image (including text) is displayed on the display screen of the image display unit 107. And the image is reduced so as to suppress the extent to which the displaced image deviates from the display screen.

車載情報提供装置１００の制御部１０５で行われる画像変位量および変形量を決定する処理の流れについて、図２のフローチャートを参照して説明する。図２のステップＳ１０において、制御部１０５は、画像表示部１０７の画面電源がオンされているか否かを判定する。制御部１０５は、画面電源がオンされている場合にステップＳ１０を肯定判定してステップＳ２０へ進み、画面電源がオンされていない場合にはステップＳ１０を否定判定し、当該判定処理を繰り返す。 A flow of processing for determining an image displacement amount and a deformation amount performed by the control unit 105 of the in-vehicle information providing apparatus 100 will be described with reference to a flowchart of FIG. In step S <b> 10 of FIG. 2, the control unit 105 determines whether the screen power supply of the image display unit 107 is turned on. The control unit 105 makes an affirmative determination in step S10 when the screen power supply is turned on and proceeds to step S20. If the screen power supply is not turned on, the control unit 105 makes a negative determination in step S10 and repeats the determination process.

ステップＳ２０において、制御部１０５は、変数Ｔout、Ｔin、FlagＴout、FlagＴinをそれぞれ初期値０にリセットしてステップＳ３０へ進む。Ｔoutは、画像変位量の絶対値が所定値Ｌ０を超えると計時開始され、計時値が所定値Ｔout_０を超えると０にリセットされる計時時間である。Ｔinは、画像変位量の絶対値が所定値Ｌ０以下になると計時開始され、計時値が所定値Ｔin_０を超えると０にリセットされる計時時間である。FlagＴoutは、Ｔoutが計時開始されると１にされ、画像変位量の絶対値が所定値Ｌ０以下になると０にリセットされるフラグである。FlagＴinは、Ｔinが計時開始されると１にされ、画像変位量の絶対値が所定値Ｌ０を超えると０にリセットされるフラグである。 In step S20, the control unit 105 resets the variables Tout, Tin, FlagTout, and FlagTin to the initial value 0, and proceeds to step S30. Tout is a time measurement that starts when the absolute value of the image displacement amount exceeds the predetermined value L0 and is reset to 0 when the time measurement value exceeds the predetermined value Tout_0. Tin is a timed time that is started when the absolute value of the image displacement amount is equal to or smaller than the predetermined value L0 and reset to 0 when the timed value exceeds the predetermined value Tin_0. FlagTout is a flag that is set to 1 when Tout starts timing, and is reset to 0 when the absolute value of the image displacement amount is equal to or less than a predetermined value L0. FlagTin is a flag that is set to 1 when Tin starts timing and is reset to 0 when the absolute value of the image displacement exceeds a predetermined value L0.

ステップＳ３０において、制御部１０５は、車両運動検出部１０１へ指令を出力し、車両の運動を検出させて（運動測定）ステップＳ４０へ進む。これにより、車両運動検出部１０１が車両の並進運動および回転運動（たとえば、ピッチ動）をそれぞれ検出する。 In step S30, the control unit 105 outputs a command to the vehicle motion detection unit 101, detects the motion of the vehicle (motion measurement), and proceeds to step S40. Thereby, the vehicle motion detection part 101 detects the translational motion and rotational motion (for example, pitch motion) of a vehicle, respectively.

ステップＳ４０において、制御部１０５は乗員運動推定部１０３へ指令を出力し、乗員の頭部の運動を推定させてステップＳ５０へ進む。具体的には、乗員運動推定部１０３が人体データベース部１０２を検索し、最新の車両運動の検出値に対応する人体揺動伝達関数をデータベースより選択する。乗員運動推定部１０３は、選択した人体揺動伝達関数、ならびに車両運動の検出値を用いて乗員の頭部（とくに眼球）の運動（とくに上下動）の推定値を算出し、算出結果を制御部１０５へ送出する。 In step S40, the control unit 105 outputs a command to the occupant motion estimation unit 103, estimates the motion of the occupant's head, and proceeds to step S50. Specifically, the occupant motion estimation unit 103 searches the human body database unit 102 and selects a human body swing transfer function corresponding to the latest detected value of vehicle motion from the database. The occupant motion estimation unit 103 calculates an estimated value of the occupant's head (particularly the eyeball) motion (particularly vertical movement) using the selected human body oscillation transfer function and the detected value of the vehicle motion, and controls the calculation result. The data is sent to the unit 105.

ステップＳ５０において、制御部１０５は、車両運動を示す検出信号を用いて、車両の回転運動にともなう並進方向の画面移動量を算出し、ステップＳ６０へ進む。この場合の画面移動量は、画像表示部１０７のピッチ方向（上下方向）の移動量である。 In step S50, the control unit 105 calculates the amount of screen movement in the translational direction accompanying the rotational movement of the vehicle using the detection signal indicating the vehicle movement, and proceeds to step S60. The screen movement amount in this case is the movement amount of the image display unit 107 in the pitch direction (vertical direction).

ステップＳ６０において、制御部１０５は、画像表示部１０７による表示画面および眼球間の相対変位を算出し、ステップＳ７０へ進む。具体的には、画像表示部１０７の画面移動量および乗員頭部運動の推定値に基づいて相対変位を得る。 In step S60, the control unit 105 calculates the relative displacement between the display screen and the eyeball by the image display unit 107, and proceeds to step S70. Specifically, the relative displacement is obtained based on the screen movement amount of the image display unit 107 and the estimated value of the occupant head movement.

ステップＳ７０において、制御部１０５は、画面の上下移動量および上記相対変位を用いて、画像表示部１０７に表示される画像が乗員にとって空間上に安定して見えるために必要な画像の変位量Ｌoutを算出し、ステップＳ８０へ進む。 In step S <b> 70, the control unit 105 uses the vertical movement amount of the screen and the relative displacement, and the image displacement amount Lout necessary for the image displayed on the image display unit 107 to be seen stably in space for the occupant. And proceeds to step S80.

ステップＳ８０において、制御部１０５は、算出した変位量Ｌoutの絶対値が所定値Ｌ０を超えているか否かを判定する。制御部１０５は、|Ｌout|＞Ｌ０が成立する場合にステップＳ８０を肯定判定してステップＳ９０へ進み、|Ｌout|＞Ｌ０が成立しない場合にはステップＳ８０を否定判定し、ステップＳ１５０へ進む。所定値Ｌ０はあらかじめ決められている値である。ステップＳ９０へ進む場合は、変位量Ｌoutのとおりに画像を変位させることによって変位後の享楽画像が画像表示部１０７の有効表示範囲（すなわち画面枠）から所定の逸脱量より大きく逸脱する場合である。ステップＳ１５０へ進む場合は、変位量Ｌoutのとおりに画像を変位させる場合に変位後の享楽画像が画面枠から逸脱する量が所定の逸脱量以下の場合である。 In step S80, the control unit 105 determines whether or not the calculated absolute value of the displacement Lout exceeds a predetermined value L0. If | Lout |> L0 is satisfied, control unit 105 makes an affirmative determination in step S80 and proceeds to step S90. If | Lout |> L0 is not satisfied, the control unit 105 makes a negative determination in step S80 and proceeds to step S150. The predetermined value L0 is a predetermined value. The process proceeds to step S90 when the image is displaced according to the displacement amount Lout so that the enjoyed image after displacement deviates from the effective display range (that is, the screen frame) of the image display unit 107 by more than a predetermined deviation amount. . The process proceeds to step S150 when the amount of deviation of the enjoyed image after the displacement from the screen frame is equal to or less than the predetermined deviation amount when the image is displaced according to the displacement amount Lout.

ステップＳ９０において、制御部１０５は、FlagＴinを０にリセットしてステップＳ１００へ進む。ステップＳ１００において、制御部１０５は、FlagＴout＝０か否かを判定する。制御部１０５は、FlagＴout＝０の場合にステップＳ１００を肯定判定してステップＳ１１０へ進み、FlagＴout≠０の場合にはステップＳ１００を否定判定し、ステップＳ１２０へ進む。ステップＳ１１０へ進む場合は、所定量を超える変位量Ｌoutが新たに算出された場合である。ステップＳ１２０へ進む場合は、既にＴoutが計時中の場合である。 In step S90, the control unit 105 resets FlagTin to 0 and proceeds to step S100. In step S100, the control unit 105 determines whether FlagTout = 0. When FlagTout = 0, the control unit 105 makes an affirmative decision in step S100 and proceeds to step S110. If FlagTout ≠ 0, the control unit 105 makes a negative decision in step S100 and proceeds to step S120. The process proceeds to step S110 when the displacement amount Lout exceeding the predetermined amount is newly calculated. The process proceeds to step S120 when Tout is already being measured.

ステップＳ１１０において、制御部１０５は、Ｔoutの計時（計測）を開始するとともに、FlagＴoutに１をセットしてステップＳ１２０へ進む。ステップＳ１２０において、制御部１０５は、Ｔout＞Ｔout_０が成立するか否かを判定する。制御部１０５は、Ｔout＞Ｔout_０が成立する場合にステップＳ１２０を肯定判定してステップＳ１３０へ進み、Ｔout＞Ｔout_０が成立しない場合にはステップＳ１２０を否定判定し、ステップＳ２１０へ進む。ここで、Ｔout_０はあらかじめ決められている時間である。 In step S110, the control unit 105 starts measuring (measuring) Tout, sets 1 to FlagTout, and proceeds to step S120. In step S120, the control unit 105 determines whether or not Tout> Tout_0 is satisfied. If Tout> Tout_0 is satisfied, the control unit 105 makes an affirmative determination in step S120 and proceeds to step S130. If Tout> Tout_0 is not satisfied, the control unit 105 makes a negative determination in step S120 and proceeds to step S210. Here, Tout_0 is a predetermined time.

ステップＳ１３０において、制御部１０５は、画像縮小率を増加させてステップＳ１４０へ進む。画像縮小率は上述した変形量に対応する。ステップＳ１４０において、制御部１０５は、Ｔoutを０にリセットしてステップＳ２１０へ進む。 In step S130, the control unit 105 increases the image reduction rate and proceeds to step S140. The image reduction ratio corresponds to the deformation amount described above. In step S140, the control unit 105 resets Tout to 0 and proceeds to step S210.

上述したステップＳ８０を否定判定して進むステップＳ１５０において、制御部１０５は、FlagＴoutを０にリセットしてステップＳ１６０へ進む。ステップＳ１６０において、制御部１０５は、FlagＴin＝０か否かを判定する。制御部１０５は、FlagＴin＝０の場合にステップＳ１６０を肯定判定してステップＳ１７０へ進み、FlagＴin≠０の場合にはステップＳ１６０を否定判定し、ステップＳ１８０へ進む。ステップＳ１７０へ進む場合は、所定量以下の変位量Ｌoutが新たに算出された場合である。ステップＳ１８０へ進む場合は、既にＴinが計時中の場合である。 In step S150, which proceeds after making a negative determination in step S80 described above, the control unit 105 resets FlagTout to 0 and proceeds to step S160. In step S160, the control unit 105 determines whether FlagTin = 0. When FlagTin = 0, the control unit 105 makes an affirmative determination in step S160 and proceeds to step S170. When FlagTin ≠ 0, the control unit 105 makes a negative determination in step S160 and proceeds to step S180. The process proceeds to step S170 when the displacement amount Lout equal to or smaller than the predetermined amount is newly calculated. The process proceeds to step S180 when Tin is already being measured.

ステップＳ１７０において、制御部１０５は、Ｔinの計時（計測）を開始するとともに、FlagＴinに１をセットしてステップＳ１８０へ進む。ステップＳ１８０において、制御部１０５は、Ｔin＞Ｔin_０が成立するか否かを判定する。制御部１０５は、Ｔin＞Ｔin_０が成立する場合にステップＳ１８０を肯定判定してステップＳ１９０へ進み、Ｔin＞Ｔin_０が成立しない場合にはステップＳ１８０を否定判定し、ステップＳ２１０へ進む。ここで、Ｔin_０はあらかじめ決められている時間である。 In step S170, the control unit 105 starts timing (measurement) of Tin, sets 1 to FlagTin, and proceeds to step S180. In step S180, the control unit 105 determines whether or not Tin> Tin_0 is satisfied. If Tin> Tin_0 is satisfied, the control unit 105 makes an affirmative determination in step S180 and proceeds to step S190. If Tin> Tin_0 is not satisfied, the control unit 105 makes a negative determination in step S180 and proceeds to step S210. Here, Tin_0 is a predetermined time.

ステップＳ１９０において、制御部１０５は、画像縮小率を減少させてステップＳ２００へ進む。ステップＳ２００において、制御部１０５は、Ｔinを０にリセットしてステップＳ２１０へ進む。 In step S190, the control unit 105 decreases the image reduction rate and proceeds to step S200. In step S200, the control unit 105 resets Tin to 0 and proceeds to step S210.

ステップＳ２１０において、制御部１０５は、画像変形・変位部１０６へ表示データ、算出した画像変位量および変形量（この場合は画像縮小率）を示す情報を送り、表示データに対して画像加工を行うように指示してステップＳ２２０へ進む。これにより、画像変形・変位部１０６が上記変位量・変形量に応じて表示データを加工する。 In step S210, the control unit 105 sends display data, information indicating the calculated image displacement amount and deformation amount (in this case, an image reduction ratio) to the image deformation / displacement unit 106, and performs image processing on the display data. The process proceeds to step S220. Thereby, the image deformation / displacement unit 106 processes the display data according to the displacement amount / deformation amount.

ステップＳ２２０において、制御部１０５は、画像表示部１０７へ指令を送り、加工後の表示データによる画像を表示させてステップＳ２３０へ進む。これにより、画面内を変位、変形した画像が画像表示部１０７に表示される。ステップＳ２３０において、制御部１０５は、画像表示部１０７の画面電源がオフされたか否かを判定する。制御部１０５は、画面電源がオフされた場合にステップＳ２３０を肯定判定し、図２による処理を終了する。一方、制御部１０５は、画面電源がオフされていない場合にステップＳ２３０を否定判定し、ステップＳ３０へ戻って上述した処理を繰り返す。 In step S220, the control unit 105 sends a command to the image display unit 107 to display an image based on the processed display data, and the process proceeds to step S230. As a result, the image displaced and deformed in the screen is displayed on the image display unit 107. In step S230, the control unit 105 determines whether the screen power supply of the image display unit 107 is turned off. The control unit 105 makes an affirmative determination in step S230 when the screen power supply is turned off, and ends the process of FIG. On the other hand, when the screen power supply is not turned off, the control unit 105 makes a negative determination in step S230, returns to step S30, and repeats the above-described processing.

（表示画像の変位）
表示画像の変位（画像シフト）の詳細について説明する。車両の加減速にともなうピッチ方向の運動について着目する場合、乗員の眼球および画像表示部１０７間の相対位置の変位は次の２つに大別される。
Ａ．車両側に生じるピッチ動に起因するもの
Ｂ．乗員側（とくに眼球）に生じるピッチ動に起因するもの (Displacement of display image)
Details of the displacement (image shift) of the display image will be described. When attention is paid to the movement in the pitch direction accompanying the acceleration / deceleration of the vehicle, the displacement of the relative position between the occupant's eyeball and the image display unit 107 is roughly divided into the following two.
A. Due to pitch movement occurring on the vehicle side. Due to pitch movement occurring on the passenger side (especially the eyeball)

上記Ａについて図３(a)を参照して説明する。車両が減速すると、車両の前部が沈むノーズダイブ現象が生じる。画像表示部１０７の表示画面が乗員に対して車両の進行方向に位置する場合は、ノーズダイブによって画像表示部１０７にピッチ方向（この場合下向き）の回転運動が生じる。そこで制御部１０５は、画像表示部１０７の移動をキャンセルするようにピッチ方向（この場合上向き）に享楽情報の表示位置を変位させるための変位量を算出する。 The above A will be described with reference to FIG. When the vehicle decelerates, a nose dive phenomenon occurs in which the front portion of the vehicle sinks. When the display screen of the image display unit 107 is positioned in the traveling direction of the vehicle with respect to the occupant, the nose dive causes the image display unit 107 to rotate in the pitch direction (downward in this case). Therefore, the control unit 105 calculates a displacement amount for displacing the display position of the enjoyment information in the pitch direction (in this case, upward) so as to cancel the movement of the image display unit 107.

図３(b)は、ノーズダイブ時に車両ピッチ動をキャンセルするための画像変位が行われた画像表示部１０７の表示画面を示す図である。画像表示部１０７の下方への移動量に応じて、画像表示部１０７に表示される享楽情報を上方へ変位させる結果、表示される享楽情報および眼球間の相対変位が０になり、乗員にとって享楽情報が空間上に安定して見えるようになる。 FIG. 3B is a diagram illustrating a display screen of the image display unit 107 on which image displacement for canceling vehicle pitch movement is performed during nose dive. The pleasure information displayed on the image display unit 107 is displaced upward in accordance with the amount of downward movement of the image display unit 107. As a result, the displayed enjoyment information and the relative displacement between the eyeballs become zero, which is enjoyable for the passenger. Information can be seen stably in space.

車両減速時のノーズダイブと反対に、車両が加速すると車両の後部が沈むスクワット現象が生じる。画像表示部１０７の表示画面が乗員に対して車両の進行方向に位置する場合は、スクワットによって画像表示部１０７にピッチ方向（この場合上向き）の回転運動が生じる。そこで制御部１０５は、画像表示部１０７の移動をキャンセルするようにピッチ方向（この場合下向き）に享楽情報の表示位置を変位させるための変位量を算出する。 Contrary to the nose dive when the vehicle is decelerated, a squat phenomenon occurs in which the rear part of the vehicle sinks when the vehicle accelerates. When the display screen of the image display unit 107 is positioned in the traveling direction of the vehicle with respect to the occupant, a rotational motion in the pitch direction (in this case, upward) is generated in the image display unit 107 by squats. Therefore, the control unit 105 calculates a displacement amount for displacing the display position of the enjoyment information in the pitch direction (downward in this case) so as to cancel the movement of the image display unit 107.

図３(c)は、スクワット時に車両ピッチ動をキャンセルするための画像変位が行われた画像表示部１０７の表示画面を示す図である。画像表示部１０７の上方への移動量に応じて、画像表示部１０７に表示される享楽情報を下方へ変位させる結果、表示される享楽情報および眼球間の相対変位が０になり、乗員にとって享楽情報が空間上に安定して見えるようになる。 FIG. 3C is a diagram showing a display screen of the image display unit 107 on which image displacement for canceling vehicle pitch movement is performed during squat. As a result of displacing the enjoyment information displayed on the image display unit 107 downward in accordance with the amount of upward movement of the image display unit 107, the displayed enjoyment information and the relative displacement between the eyeballs become zero, which is enjoyable for the passenger. Information can be seen stably in space.

上記Ｂについて図４(a)を参照して説明する。実際の車両減速時・加速時においては、乗員の頭部にもピッチ方向の回転運動が生じる。車両減速時に乗員の頭部が前方に回転すると、画像表示部１０７の位置が移動しない場合は、画像表示部１０７に対して乗員の頭部（とくに眼球）の位置が下方へ移動する。そこで制御部１０５は、乗員の眼球の下方移動量に応じて画像表示部１０７に表示される享楽情報を下方へ変位させるための変位量を算出する。図４(b)は、ノーズダイブ時に頭部ピッチ動をキャンセルするための画像変位が行われた画像表示部１０７の表示画面を示す図である。この場合の画像変位の向きは、スクワット時に車両ピッチ動をキャンセルする向きと同様である。 The above B will be described with reference to FIG. During actual vehicle deceleration / acceleration, rotational movement in the pitch direction also occurs on the occupant's head. When the occupant's head rotates forward during vehicle deceleration, the position of the occupant's head (particularly the eyeball) moves downward relative to the image display unit 107 when the position of the image display unit 107 does not move. Therefore, the control unit 105 calculates a displacement amount for displacing the pleasure information displayed on the image display unit 107 downward according to the downward movement amount of the occupant's eyeball. FIG. 4B is a diagram showing a display screen of the image display unit 107 on which image displacement for canceling head pitch movement is performed during nose dive. The direction of the image displacement in this case is the same as the direction in which the vehicle pitch movement is canceled during squat.

車両減速時と反対に、車両加速時に乗員の頭部が後方に回転すると、画像表示部１０７の位置が移動しない場合は画像表示部１０７に対して乗員の頭部（とくに眼球）の位置が上方へ移動する。そこで制御部１０５は、乗員の眼球の上方移動量に応じて画像表示部１０７に表示される享楽情報を上方へ変位させるための変位量を算出する。この場合の画像変位の向きは、ノーズダイブ時に車両ピッチ動をキャンセルする向きと同様である。 Contrary to when the vehicle decelerates, if the occupant's head rotates backward during vehicle acceleration, the position of the occupant's head (particularly the eyeball) is higher than the image display unit 107 when the position of the image display unit 107 does not move. Move to. Therefore, the control unit 105 calculates a displacement amount for displacing the enjoyment information displayed on the image display unit 107 upward according to the upward movement amount of the occupant's eyeball. The direction of image displacement in this case is the same as the direction in which vehicle pitch movement is canceled during nose dive.

本実施形態では、画像表示部１０７および眼球間の相対変位を求め、この相対変位に応じて享楽情報の画像変位を行うので、上記ＡおよびＢの両ピッチ動による影響をキャンセルするように画像変位を行うことが可能である。 In the present embodiment, the relative displacement between the image display unit 107 and the eyeball is obtained, and the image displacement of the enjoyment information is performed according to the relative displacement. Therefore, the image displacement is performed so as to cancel the influence of both the A and B pitch movements. Can be done.

（画像縮小率の変更）
表示画像の変形の詳細について説明する。画像表示部１０７および眼球間の相対変位に応じて画像変位を行うと、変位後の享楽画像が画像表示部１０７の画面枠から逸脱するおそれが生じる。そこで、享楽画像が画面枠から逸脱する場合でもその程度を軽減するように享楽画像の周辺部に余白部（すなわち、移動代）を設けるための画像の加工を行う。 (Change of image reduction ratio)
Details of the deformation of the display image will be described. When the image displacement is performed according to the relative displacement between the image display unit 107 and the eyeball, the pleasure image after the displacement may deviate from the screen frame of the image display unit 107. Therefore, even when the enjoyment image deviates from the screen frame, the image is processed so as to provide a blank portion (that is, a movement allowance) in the peripheral portion of the enjoyment image so as to reduce the extent.

図５(a)は、画像変位前における画像表示部１０７の表示画面を示す図であり、享楽画像が表示画面の画面枠いっぱいに表示されている。この状態で車両にノーズダイブなどのピッチ動が生じると、上下方向への画像変位によって享楽画像の上部または下部が画面枠からはみ出してしまう。 FIG. 5A is a diagram showing the display screen of the image display unit 107 before the image displacement, and the enjoyment image is displayed in the full screen frame of the display screen. When pitch movement such as a nose dive occurs in the vehicle in this state, the upper or lower portion of the enjoyment image protrudes from the screen frame due to the image displacement in the vertical direction.

図５(b)は、享楽画像の周囲に余白部を設けるように享楽画像を縮小する画像加工が行われた後の表示画面を示す図である。図５(a)に比べて、縮小された享楽画像の周囲に余白５１が設けられている。図５(b)の画像が画像表示部１０７に表示されている状態で車両にピッチ動が生じて享楽画像が上下方向に画像変位されても、変位後の享楽画像は画面枠から外れにくくなる。 FIG. 5B is a diagram showing a display screen after image processing for reducing the enjoyment image so as to provide a blank portion around the enjoyment image. Compared to FIG. 5A, a margin 51 is provided around the reduced enjoyment image. Even if the enjoyment image is displaced in the vertical direction due to a pitch movement in the vehicle in a state where the image of FIG. 5B is displayed on the image display unit 107, the enjoyment image after the displacement is not easily detached from the screen frame. .

図５(c)は、図５(b)に比べて享楽画像の画像縮小率を大きくすることにより、享楽画像の周囲に図５(b)の場合より大きな余白５２を設ける画像加工が行われた後の表示画面を示す図である。この状態では、車両に生じるピッチ動がさらに大きくなって上下方向への画像変位量がさらに大きくされる場合でも、変位後の享楽画像の上部または下部が画面枠からはみ出す程度を軽減できる。 In FIG. 5 (c), image processing for providing a larger margin 52 around the enjoyment image than in the case of FIG. 5 (b) is performed by increasing the image reduction ratio of the enjoyment image as compared with FIG. 5 (b). It is a figure which shows the display screen after. In this state, even when the pitch motion generated in the vehicle is further increased and the image displacement amount in the vertical direction is further increased, the extent that the upper or lower part of the enjoyed image after the displacement protrudes from the screen frame can be reduced.

（画像変形量の制限および画像変位量の制限）
上述した余白５１、５２の大きさを必要以上に大きくすると、享楽画像が表示画面の画面枠に対して小さくなりすぎ、乗員にとって享楽画像の見易さが損なわれてしまう。そこで、余白の大きさを決定する画像縮小率の初期値は、たとえば通常の走行時に車両に生じるピッチ動の最大値によって生じる画像表示部１０７および眼球間の相対変位をキャンセルするために必要な画像変位量（上記所定値Ｌ０に対応）に対応する値にする。 (Restrictions on image deformation and image displacement)
If the size of the margins 51 and 52 described above is increased more than necessary, the enjoyment image becomes too small with respect to the screen frame of the display screen, and the ease of viewing the enjoyment image for the passenger is impaired. Therefore, the initial value of the image reduction ratio for determining the size of the margin is, for example, an image necessary for canceling the relative displacement between the image display unit 107 and the eyeball caused by the maximum value of the pitch movement generated in the vehicle during normal traveling. A value corresponding to the displacement amount (corresponding to the predetermined value L0) is set.

余白５１、５２の大きさ、すなわち画像縮小率を制限する一方で画像変位量を制限しない状態では、通常の走行時に生じる相対変位より大きな相対変位が生じると表示画像が画像表示部１０７の表示画面から逸脱するおそれがある。そこで、相対変位が大きくなる領域では画面の変位量（画像表示部１０７の移動量）に対する画像変位量を抑制する。画面の変位量は、ステップＳ５０で算出した値を用いる。 In a state in which the size of the margins 51 and 52, that is, the image reduction rate is limited but the image displacement amount is not limited, the display image is displayed on the display screen of the image display unit 107 when a relative displacement larger than the relative displacement that occurs during normal traveling occurs. May deviate from Therefore, the image displacement amount with respect to the screen displacement amount (movement amount of the image display unit 107) is suppressed in a region where the relative displacement increases. The value calculated in step S50 is used as the screen displacement.

図６(a)は、第一の実施形態における画面変位量と画像変位量との関係例を示す図である。実線は車両の揺動が所定周波数を超えている場合の関係例を表し、破線は車両の揺動が所定周波数以下の場合の関係例を表す。図６(a)によれば、揺動周波数が所定値（たとえば、１Hz）を超える場合について、画面変位量および画像変位量の間に常に線形関係を保つように画像変位ゲインが制御される。とくに、ゲイン＝１とすれば画面の変位量と画像の変位量とを１：１に対応させることができる。一般に、車両の揺動周波数が１Hzを超える場合は揺動の振幅が小さいため、画面変位量に比例させて画像変位を行うことによって変位後の享楽画像が画面枠からはみ出すおそれは少ない。したがって、揺動周波数が１Hzを超える場合には画像変位量の制限をしない。 FIG. 6A is a diagram illustrating a relationship example between the screen displacement amount and the image displacement amount in the first embodiment. A solid line represents a relationship example when the vehicle swing exceeds a predetermined frequency, and a broken line represents a relationship example when the vehicle swing is a predetermined frequency or less. According to FIG. 6A, when the oscillation frequency exceeds a predetermined value (for example, 1 Hz), the image displacement gain is controlled so as to always maintain a linear relationship between the screen displacement amount and the image displacement amount. In particular, if the gain is set to 1, the screen displacement amount and the image displacement amount can be made to correspond to 1: 1. Generally, when the swing frequency of the vehicle exceeds 1 Hz, the swing amplitude is small. Therefore, there is little possibility that the enjoyed image after the displacement protrudes from the screen frame by performing the image displacement in proportion to the screen displacement amount. Therefore, when the oscillation frequency exceeds 1 Hz, the image displacement amount is not limited.

一方、揺動周波数が所定値（たとえば、１Hz）以下の場合について、画面変位量の絶対値が所定値以下の領域では画面変位量および画像変位量の間に線形関係が保たれるように画像変位ゲインを制御し（ただし、ゲインは１より小さくする）、画面変位量の絶対値が所定値を超えると画像変位量をさらに抑制するように画像変位ゲインを制御する。一般に、車両の加速やブレーキングなどで生じる揺動の周波数は１Hz以下である。このような揺動は振幅が大きいため、画面変位量に比例させて画像変位を行うと変位後の享楽画像が画面枠から大きくはみ出すおそれがある。そこで、画像変位量を抑えつつ、画面変位量の絶対値が所定値を超えると画像変位量をさらに抑制する非線形制御とすることにより、変位後の享楽画像が画面枠から逸脱する場合の逸脱量を低減する。なお、画像変位量の上限（下限）を上記余白の範囲内に制限すれば、享楽画像が画面枠からはみ出すことを確実に防止できる。 On the other hand, in the case where the oscillation frequency is a predetermined value (for example, 1 Hz) or less, in the region where the absolute value of the screen displacement amount is not more than the predetermined value, the linear relationship is maintained between the screen displacement amount and the image displacement amount. The displacement gain is controlled (however, the gain is made smaller than 1), and when the absolute value of the screen displacement amount exceeds a predetermined value, the image displacement gain is controlled so as to further suppress the image displacement amount. In general, the frequency of rocking caused by acceleration or braking of a vehicle is 1 Hz or less. Since such a swing has a large amplitude, if the image is displaced in proportion to the amount of screen displacement, the enjoyed image after the displacement may protrude greatly from the screen frame. Therefore, the amount of deviation when the enjoyed image after displacement deviates from the screen frame by non-linear control that further suppresses the image displacement when the absolute value of the screen displacement exceeds a predetermined value while suppressing the image displacement. Reduce. Note that if the upper limit (lower limit) of the image displacement amount is limited within the margin, the enjoyment image can be reliably prevented from protruding from the screen frame.

以上説明した第一の実施形態によれば、次の作用効果が得られる。
（１）車両運動の検出データと、人体データベース部１０２に格納されている頭部揺動伝達関数とを用いて、乗員の頭部（とくに眼球）運動の推定値を算出するので、乗員の頭部などに運動検出センサを設けなくても、乗員の眼球位置を得ることができる。乗員に検出センサを取り付けないので、コスト上昇が抑えられる上に、乗員に負担を与えることもない。 According to the first embodiment described above, the following operational effects can be obtained.
(1) Since the estimated value of the occupant's head (particularly eyeball) motion is calculated using the vehicle motion detection data and the head swing transfer function stored in the human body database unit 102, the occupant's head The position of the occupant's eyeball can be obtained without providing a motion detection sensor in the area. Since no detection sensor is attached to the occupant, cost increases can be suppressed and no burden is placed on the occupant.

（２）車両運動を示す検出データを用いて、車両の回転運動にともなう画像表示部１０７のピッチ方向（上下方向）の移動量を算出するので、画像表示部１０７用に運動検出センサを設けなくても、画像表示部１０７の位置を得ることができる。 (2) Since the amount of movement in the pitch direction (vertical direction) of the image display unit 107 accompanying the rotational motion of the vehicle is calculated using the detection data indicating the vehicle motion, no motion detection sensor is provided for the image display unit 107 However, the position of the image display unit 107 can be obtained.

（３）上記（１）の眼球位置および上記（２）の画像表示部１０７の位置を用いて両者の相対変位を求めるので、それぞれが異なる運動状態であっても、両者間の変位を得ることができる。 (3) Since the relative displacement between them is obtained using the eyeball position in (1) and the position of the image display unit 107 in (2), the displacement between the two can be obtained even in different motion states. Can do.

（４）画像表示部１０７のピッチ方向（上下方向）の移動量、ならびに、上記（３）の相対変位の変化に起因する表示画像の動きをキャンセルするように、画像表示部１０７に表示する享楽画像の表示位置をピッチ方向に変位させたので、乗員にとって表示画像が遠方の静止風景に対応する空間上に安定して見える。この結果、乗員にとって享楽画像が見やすくなる上に、乗員が享楽画像を注視している状態で、乗員が得る視覚情報と前庭器（三半規管、耳石）からの情報が一致するので、享楽画像を変位させない場合に比べて、乗員が感じる違和感・不快感を低減することができる。 (4) A pleasure to be displayed on the image display unit 107 so as to cancel the movement of the image display unit 107 due to the movement amount of the image display unit 107 in the pitch direction (vertical direction) and the change in the relative displacement of (3) above. Since the display position of the image is displaced in the pitch direction, the displayed image can be seen stably on the space corresponding to the distant still scenery for the occupant. As a result, it is easy for the occupant to view the enjoyment image, and while the occupant is gazing at the enjoyment image, the visual information obtained by the occupant and the information from the vestibular apparatus (semicircular canal, otolith) match. Compared to the case where the vehicle is not displaced, it is possible to reduce discomfort and discomfort felt by the passenger.

（５）享楽画像を変位させるために享楽画像を縮小し、享楽画像の周囲に余白５１、５２を設けたので、画像変位後の享楽画像がただちに画面枠から外れることが防止され、享楽画像が見やすくなる。 (5) Since the enjoyment image is reduced in order to displace the enjoyment image and the margins 51 and 52 are provided around the enjoyment image, the enjoyment image after the image displacement is prevented from being immediately detached from the screen frame, and the enjoyment image is It becomes easy to see.

（６）揺動周波数が所定値（たとえば、１Hz）以下の場合、画面変位量の絶対値が所定値以下の領域では画面変位量および画像変位量の間に線形関係が保たれるように画像変位ゲインを制御し、画面変位量の絶対値が所定値を超えると画像変位量をさらに抑制するように画像変位ゲインを制御した。したがって、車両の加速やブレーキングなどで生じる大きな揺動時には画像変位量が抑制され、変位後の享楽画像が画面枠から逸脱する場合の逸脱量を低減するため、享楽画像が見やすくなる。 (6) When the oscillation frequency is a predetermined value (for example, 1 Hz) or less, in the region where the absolute value of the screen displacement amount is the predetermined value or less, the image is such that a linear relationship is maintained between the screen displacement amount and the image displacement amount. The displacement gain was controlled, and the image displacement gain was controlled so as to further suppress the image displacement amount when the absolute value of the screen displacement amount exceeded a predetermined value. Accordingly, the amount of image displacement is suppressed during large swings caused by acceleration or braking of the vehicle, and the amount of deviation when the enjoyed image after displacement deviates from the screen frame is reduced, so that the enjoyable image becomes easy to see.

（７）所定値Ｌ０を超える画像変位量が時間Ｔout_０以上継続して算出される（享楽画像が継続して逸脱する）場合に画像縮小率を増加させた（ステップＳ１３０）ので、変位後の享楽画像の逸脱量を低減することができる。反対に、所定値Ｌ０以下の画像変位量が時間Ｔin_０以上継続して算出される（享楽画像が継続して画面枠内にある）場合に画像縮小率を増加させた（ステップＳ１９０）ので、必要以上に享楽画像を縮小することがなく、享楽画像が見やすくなる。 (7) Since the image reduction rate is increased when the image displacement amount exceeding the predetermined value L0 is continuously calculated for the time Tout_0 or more (the enjoyment image continuously deviates) (step S130), the enjoyment after the displacement The amount of image deviation can be reduced. On the contrary, when the image displacement amount equal to or less than the predetermined value L0 is continuously calculated for the time Tin_0 or longer (the enjoyment image is continuously in the screen frame), the image reduction rate is increased (step S190). The enjoyment image is not reduced as described above, and the enjoyment image becomes easy to see.

画面変位量と画像変位量との関係について、図６(a)の代わりに図６(b)の関係を用いてもよい。図６(b)において、画面変位量および画像変位量の間にヒステリシス特性を持たせる。すなわち、享楽画像が画面枠から逸脱する方向に変位する場合には画像変位ゲインを相対的に低く、画面枠中央に復帰する方向に変位する場合には画像変位ゲインを相対的に高く設定する。これにより、享楽画像の逸脱量の低減と、享楽画像が逸脱している時間の短縮とを両立させることができる。 Regarding the relationship between the screen displacement amount and the image displacement amount, the relationship of FIG. 6B may be used instead of FIG. 6A. In FIG. 6B, a hysteresis characteristic is provided between the screen displacement amount and the image displacement amount. That is, the image displacement gain is set to be relatively low when the enjoyment image is displaced in the direction deviating from the screen frame, and the image displacement gain is set to be relatively high when displaced in the direction of returning to the center of the screen frame. As a result, it is possible to achieve both a reduction in the amount of deviation of the enjoyment image and a reduction in the time during which the enjoyment image deviates.

上述した説明では、享楽画像の逸脱量が所定値Ｌ０以上の場合に時間Ｔout_０を計時すると画像縮小率を変更するようにした。この代わりに、享楽画像が大きく逸脱する場合には享楽画像が画面枠内に表示されるように強制的に享楽画像を変位させるようにしてもよい。このような画像の変位制御を行う場合でも、画像縮小率を変更する場合と同様に、享楽画像の見やすさが損なわれることを防止できる。 In the above description, the image reduction ratio is changed when the time Tout_0 is measured when the amount of deviation of the enjoyment image is equal to or greater than the predetermined value L0. Instead, when the enjoyment image deviates greatly, the enjoyment image may be forcibly displaced so that the enjoyment image is displayed in the screen frame. Even when such image displacement control is performed, it is possible to prevent the enjoyment of the enjoyment image from being impaired as in the case of changing the image reduction ratio.

以上の説明では、主として享楽画像を変位させる移動代を確保するために画像縮小を行ったが、享楽画像が画面枠から逸脱する度合いを抑えるために画像の縮小を行ってもよい。この場合には、逸脱量が大きいほど画像縮小率を大きくする。 In the above description, the image reduction is performed mainly to secure the movement allowance for displacing the enjoyment image. However, the image may be reduced in order to suppress the degree that the enjoyment image deviates from the screen frame. In this case, the image reduction rate is increased as the deviation amount is larger.

（第二の実施形態）
図７は、本発明の第二の実施形態による車載情報提供装置の構成を説明する図である。図７において、車載情報提供装置２００は、車両運動検出部２０１と、人体データベース部２０２と、乗員運動推定部２０３と、情報源装置２０４と、映像内容判定部２０５と、制御部２０６と、画像変形・変位部２０７と、画像表示部２０８とを有する。図１の構成と比べて映像内容判定部２０５が追加されている点が異なるので、この相違点を中心に説明する。 (Second embodiment)
FIG. 7 is a diagram illustrating the configuration of the in-vehicle information providing apparatus according to the second embodiment of the present invention. In FIG. 7, the in-vehicle information providing apparatus 200 includes a vehicle motion detection unit 201, a human body database unit 202, an occupant motion estimation unit 203, an information source device 204, a video content determination unit 205, a control unit 206, and an image. A deformation / displacement unit 207 and an image display unit 208 are provided. Since the video content determination unit 205 is added as compared with the configuration of FIG. 1, this difference will be mainly described.

図７の映像内容判定部２０５は、情報源装置２０４から入力された享楽情報の内容を判定する。具体的には、享楽画像に字幕が有るか否か、および享楽画像に動きが多いか否かを判定する。字幕があるか否かの判定は、画像データに字幕表示のための字幕データが含まれていれば字幕があると判定し、字幕データが含まれていなければ字幕がないと判定する。動きが多いか否かの判定は、フレームごとの画像データを比較した場合に前後のフレーム間で相違するデータが所定数以上存在すれば画像の動きが多いと判定し、前後のフレーム間で相違するデータが所定数未満の場合には画像の動きが少ないと判定する。映像内容の判定情報は、映像内容判定部２０５から制御部２０６へ送出される。 The video content determination unit 205 in FIG. 7 determines the content of the enjoyment information input from the information source device 204. Specifically, it is determined whether or not the enjoyment image has subtitles and whether or not the enjoyment image has a lot of movement. Whether or not there is a caption is determined if there is caption data for caption display in the image data, it is determined that there is a caption, and if caption data is not included, it is determined that there is no caption. Whether there is a lot of motion is determined by comparing the image data for each frame, if there is a predetermined number or more of data that differs between the previous and next frames, it is determined that there is a lot of motion in the image, and there is a difference between the previous and next frames. If the number of data to be processed is less than the predetermined number, it is determined that there is little movement of the image. The video content determination information is sent from the video content determination unit 205 to the control unit 206.

第二の実施の形態では、画像変位後の享楽画像が画面枠から逸脱する場合における逸脱の許容度を、映像内容の判定情報を用いて変更する。 In the second embodiment, the deviation tolerance when the pleasure image after image displacement deviates from the screen frame is changed using the determination information of the video content.

車載情報提供装置２００の制御部２０６で行われる享楽画像を変位させる処理の流れについて、図８のフローチャートを参照して説明する。図２のフローチャートに比べて、ステップＳ６５の処理が追加されている点が異なるので、ステップＳ６５の処理を中心に説明する。 A flow of processing for displacing the pleasure image performed by the control unit 206 of the in-vehicle information providing apparatus 200 will be described with reference to a flowchart of FIG. Compared with the flowchart of FIG. 2, the process of step S65 is different, and therefore, the process of step S65 will be mainly described.

図８のステップＳ６５において、制御部２０６は、字幕の有無や動きの大小などによって映像内容を判定し、判定結果に応じて逸脱量の許容度、および逸脱時間の許容度を決定する。逸脱量は、変位後の享楽画像が画面枠から逸脱する量である。逸脱量の許容度は、ステップＳ８０において変位量Ｌoutの絶対値と比較する所定値Ｌ０に対応する。所定値Ｌ０を大きくすると逸脱量の許容度が大きくなり、所定値Ｌ０を小さくすると逸脱量の許容度が小さくなる。 In step S65 of FIG. 8, the control unit 206 determines the video content based on the presence / absence of captions, the magnitude of motion, and the like, and determines the tolerance of the deviation amount and the tolerance of the deviation time according to the determination result. The deviation amount is an amount by which the enjoyed image after displacement deviates from the screen frame. The tolerance of the deviation amount corresponds to the predetermined value L0 that is compared with the absolute value of the displacement amount Lout in step S80. Increasing the predetermined value L0 increases the tolerance of the deviation amount, and decreasing the predetermined value L0 decreases the tolerance of the deviation amount.

逸脱時間は、変位後の享楽画像が画面枠から逸脱している時間である。逸脱時間の許容度は、ステップＳ１２０において計時時間Ｔoutと比較する所定値Ｔout_０に対応する。所定値Ｔout_０を大きくすると逸脱時間の許容度が大きくなり、所定値Ｔout_０を小さくすると逸脱時間の許容度が小さくなる。 The departure time is the time that the enjoyed image after displacement deviates from the screen frame. The tolerance of the departure time corresponds to the predetermined value Tout_0 that is compared with the time measurement time Tout in step S120. Increasing the predetermined value Tout_0 increases the tolerance of the departure time, and decreasing the predetermined value Tout_0 decreases the tolerance of the departure time.

図９は、享楽情報の内容と変位後の享楽画像が逸脱する場合の許容度との関係を示す図である。提供されるコンテンツ（享楽画像）に動きが少なく、かつ字幕が存在しない場合は、画像の逸脱によって伝達不可能になる情報量が比較的少ないため、許容度を大きくする。コンテンツ画像に動きが多く、かつ字幕が存在しない場合は、画像の逸脱によって伝達不可能になる情報量が増えるため、許容度を中程度に小さくする。 FIG. 9 is a diagram illustrating the relationship between the content of the enjoyment information and the tolerance when the enjoyment image after displacement deviates. If the provided content (enjoyment image) has little movement and no subtitles exist, the amount of information that cannot be transmitted due to the deviation of the image is relatively small, so the tolerance is increased. When there is a lot of motion in the content image and there is no subtitle, the amount of information that cannot be transmitted due to the deviation of the image increases, so the tolerance is reduced to a medium level.

コンテンツ画像に動きが少なく、かつ字幕が存在する場合は、享楽画像のみの逸脱によって伝達不可能になる情報量が比較的少ないため、画像についての許容度を大きくする。しかしながら、字幕については逸脱によって伝達不可能になるおそれがあるため、字幕についての許容度は小さく設定する。 When there is little motion in the content image and subtitles exist, the amount of information that cannot be transmitted due to the deviation of only the enjoyment image is relatively small, so the tolerance for the image is increased. However, since there is a possibility that the caption cannot be transmitted due to deviation, the tolerance for the caption is set small.

コンテンツ画像に動きが多く、かつ字幕が存在する場合は、享楽画像のみの逸脱によって伝達不可能になる情報量が多くなるため、画像についての許容度を小さくする。さらに、字幕についても逸脱によって伝達不可能になるおそれがあるため、字幕についての許容度も小さく設定する。 When the content image has a lot of motion and subtitles exist, the amount of information that cannot be transmitted due to the deviation of only the enjoyment image increases, so the tolerance for the image is reduced. Furthermore, since there is a possibility that the subtitle cannot be transmitted due to deviation, the tolerance for the subtitle is also set small.

以上説明した第二の実施形態によれば、情報源装置２０４から入力されるコンテンツ情報（享楽情報）に含まれる内容を判定し、判定結果に応じて画像変位後の享楽画像が画面枠から逸脱する場合における逸脱の許容度を変更するようにした。したがって、画像に動きが少ない上に字幕もない場合（情報量が少ない場合）には、逸脱によって伝達不能になる情報量が少ないため、許容度を高くした画像変位を行い、違和感や不快感の低減を優先させることができる。一方、画像に動きが多い上に字幕が存在する場合（情報量が多い場合）には、逸脱によって伝達不能になる情報量が多いため、許容度を低くした画像変位を行い、見やすさ（情報伝達性）を優先させることができる。 According to the second embodiment described above, the content included in the content information (enjoyment information) input from the information source device 204 is determined, and the enjoyment image after image displacement deviates from the screen frame according to the determination result. The tolerance of deviation in the case of doing so was changed. Therefore, when there is little motion and no subtitles in the image (when there is a small amount of information), the amount of information that cannot be transmitted due to deviation is small. Reduction can be prioritized. On the other hand, when there is a lot of motion and subtitles in the image (when there is a large amount of information), the amount of information that cannot be transmitted due to the deviation is large. Can be prioritized.

特許請求の範囲における各構成要素と、発明を実施するための最良の形態における各構成要素との対応について説明する。表示手段は、たとえば、画像表示部１０７（２０８）によって構成される。車両運動検出手段は、たとえば、車両運動検出部１０１（２０１）によって構成される。変位演算手段、画像変位手段、および表示制御手段は、たとえば、制御部１０５（２０６）によって構成される。なお、本発明の特徴的な機能を損なわない限り、各構成要素は上記構成に限定されるものではない。 Correspondence between each component in the claims and each component in the best mode for carrying out the invention will be described. A display means is comprised by the image display part 107 (208), for example. The vehicle motion detection means is constituted by, for example, a vehicle motion detection unit 101 (201). The displacement calculation means, the image displacement means, and the display control means are configured by, for example, the control unit 105 (206). In addition, as long as the characteristic function of this invention is not impaired, each component is not limited to the said structure.

本発明の第一の実施形態による車載情報提供装置の構成を説明する図である。It is a figure explaining the structure of the vehicle-mounted information provision apparatus by 1st embodiment of this invention. 画像変位量および変形量決定処理の流れについて説明するフローチャートである。It is a flowchart explaining the flow of an image displacement amount and a deformation | transformation amount determination process. (a)ノーズダイブ現象による表示装置のピッチ動を説明する図である。(b)ピッチ動をキャンセルするための画像変位が行われた表示画面を示す図である。(c)ピッチ動をキャンセルするための画像変位が行われた表示画面を示す図である。(a) It is a figure explaining the pitch motion of the display apparatus by a nose dive phenomenon. (b) It is a figure which shows the display screen in which the image displacement for canceling a pitch movement was performed. (c) It is a figure which shows the display screen in which the image displacement for canceling a pitch movement was performed. (a)ノーズダイブ現象による乗員頭部のピッチ動を説明する図である。(b)ピッチ動をキャンセルするための画像変位が行われた表示画面を示す図である。(a) It is a figure explaining the pitch motion of a passenger | crew's head by a nose dive phenomenon. (b) It is a figure which shows the display screen in which the image displacement for canceling a pitch movement was performed. (a)画像変位前に画像表示部に表示されている画像を示す図である。(b)享楽画像を縮小する画像加工が行われた表示画面を示す図である。(c)画像縮小率を大きくした画像加工が行われた表示画面を示す図である。(a) It is a figure which shows the image currently displayed on the image display part before image displacement. (b) It is a figure which shows the display screen with which the image process which reduces a pleasure image was performed. (c) It is a figure which shows the display screen as which the image process which enlarged the image reduction rate was performed. (a)画面変位量と画像変位量との関係例を示す図である。(b)画面変位量と画像変位量との関係例を示す図である。(a) It is a figure which shows the example of a relationship between screen displacement amount and image displacement amount. (b) It is a figure which shows the example of a relationship between screen displacement amount and image displacement amount. 第二の実施形態による車載情報提供装置の構成を説明する図である。It is a figure explaining the structure of the vehicle-mounted information provision apparatus by 2nd embodiment. 享楽画像を変位させる処理の流れについて説明するフローチャートである。It is a flowchart explaining the flow of the process which displaces a pleasure image. 享楽情報の内容と変位後の享楽画像が逸脱する場合の許容度との関係を示す図である。It is a figure which shows the relationship between the content of enjoyment information, and the tolerance in case the enjoyment image after displacement deviates.

Explanation of symbols

１００（２００）…車載情報提供装置
１０１（２０１）…車両運動検出部
１０２（２０２）…人体データベース部
１０３（２０３）…乗員運動推定部
１０４（２０４）…情報源装置
１０５（２０６）…制御部
１０６（２０７）…画像変形・変位部
１０７（２０８）…画像表示部
２０５…映像内容判定部 DESCRIPTION OF SYMBOLS 100 (200) ... Vehicle-mounted information provision apparatus 101 (201) ... Vehicle motion detection part 102 (202) ... Human body database part 103 (203) ... Passenger motion estimation part 104 (204) ... Information source apparatus 105 (206) ... Control part 106 (207): Image deformation / displacement unit 107 (208): Image display unit 205: Video content determination unit

Claims

Display means for displaying information to be provided to the occupant as an image;
Vehicle motion detection means for detecting the movement of the vehicle;
Displacement calculating means for calculating a displacement in the translation direction of an image displayed on the display means using a detection signal from the vehicle motion detecting means;
Image displacement means for displacing the display position of the information included in the image displayed on the display means in real time so as to cancel the translational displacement calculated by the displacement calculation means;
Deformation control of the display shape of the information included in the image is performed so that at least one of the deviation time and the deviation amount when the information deviates from the effective display range of the display means due to the displacement is kept below a predetermined value ; and An in-vehicle information providing apparatus comprising: a display control unit that performs at least one of controlling a displacement gain .

In the in-vehicle information providing apparatus according to claim 1,
Wherein the display control unit, said to reduce the view shape of the information included in the image to be displayed on the display means, and said reduced information after the reduced performed at least one of be displaced by the image displacement means An in-vehicle information providing apparatus for returning the image to an effective display range of the display means.

In the in-vehicle information providing apparatus according to claim 1,
The image displacing means is: (1) the movement of the vehicle with respect to the relationship between the displacement amount of the display means accompanying the movement of the vehicle and the displacement amount of the display position of the information included in the image displayed by the display means. The deviation is prevented by setting the image displacement gain to 1 when the frequency of the vehicle is equal to or higher than the predetermined frequency, and (2) the deviation is allowed by making the image displacement gain smaller than 1 when the frequency of the movement of the vehicle is less than the predetermined frequency. An in-vehicle information providing apparatus characterized by:

In the in-vehicle information providing apparatus according to claim 1,
The image displacement means includes a displacement amount of the display means accompanying a movement of the vehicle when a frequency of the movement of the vehicle is less than a predetermined frequency, and a displacement of the display position of the information included in the image displayed by the display means. Regarding the relationship with the amount, when the displacement amount of the display means is greater than or equal to a predetermined value and increases, the image displacement gain is decreased, and when the displacement amount of the display means is greater than or equal to the predetermined value and decreases. Is an on-vehicle information providing apparatus that increases an image displacement gain.

In the in-vehicle information providing apparatus according to claim 1,
Wherein the image displacement unit, wherein, when the amount of information is often the image lower the deviation tolerance, characterized in that the display control so as to increase the deviation tolerance when the amount is small image of the information In-vehicle information providing device.