JP2009051253A - Remote control device for vehicle - Google Patents

Remote control device for vehicle Download PDF

Info

Publication number
JP2009051253A
JP2009051253A JP2007217292A JP2007217292A JP2009051253A JP 2009051253 A JP2009051253 A JP 2009051253A JP 2007217292 A JP2007217292 A JP 2007217292A JP 2007217292 A JP2007217292 A JP 2007217292A JP 2009051253 A JP2009051253 A JP 2009051253A
Authority
JP
Japan
Prior art keywords
hand
image
vehicle
display
restricted
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007217292A
Other languages
Japanese (ja)
Other versions
JP4930716B2 (en
Inventor
Osamu Koike
理 小池
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2007217292A priority Critical patent/JP4930716B2/en
Publication of JP2009051253A publication Critical patent/JP2009051253A/en
Application granted granted Critical
Publication of JP4930716B2 publication Critical patent/JP4930716B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Instructional Devices (AREA)
  • Navigation (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)
  • Traffic Control Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a remote control device for a vehicle clarifying whether a driver's operation is possible or not without hindering safe driving. <P>SOLUTION: This remote control device is provided with an operation input section installed at a position operable from a driver's seat in the lower side of the lower edge of a vehicle windshield, an input display section installed in the upper side of the lower edge of the windshield in front of the driver's seat while having a display coordinate system with a primary corresponding relationship with operation system coordinates for showing an input position on the operation input section, and displaying an operation icon at a position corresponding to an icon operation position predetermined on the operation system coordinates, a hand image composite display control means combining and displaying a hand image and an operation icon so that display conditions of an overlap image area between a hand section intending to operate a non-restrictive operation icon operated non-restrictively and the non-restrictive operation icon and an overlap image area between the hand section intending to operate a restrictive operation icon operated restrictively and the restrictive operation icon are differentiated from each other. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、操作入力部と入力表示部とが、車室内の物理的に離れた位置に別々に配置され、入力表示部に、操作入力部で取得された手画像を入力表示部上の対応する位置に合成表示する車両用遠隔操作装置に関するものである。   In the present invention, the operation input unit and the input display unit are separately arranged at physically separated positions in the vehicle interior, and the hand image acquired by the operation input unit is displayed on the input display unit. The present invention relates to a vehicular remote control device that performs composite display at a position to be displayed.

操作スイッチが配置された操作部と、操作部における操作スイッチに対応する操作メニュー画像を表示する表示部とを、車室内の物理的に離れた位置に別々に配置し、表示部に、手の画像を操作メニュー画像に合成表示する合成表示手段を備える車両用遠隔操作装置において、これらの各画像に加えて、ユーザが前記操作部の全体領域における自己の指先の位置の属する領域を容易に把握できるような操作ガイド画像を表示するものが考案されている(特許文献1参照)。   The operation unit in which the operation switch is arranged and the display unit for displaying the operation menu image corresponding to the operation switch in the operation unit are separately arranged at physically separated positions in the vehicle interior, and the display unit has a hand In the vehicle remote control device including a composite display unit that composites and displays an image on an operation menu image, in addition to these images, the user can easily grasp the area to which the position of his fingertip belongs in the entire area of the operation unit. An apparatus that displays an operation guide image that can be used has been devised (see Patent Document 1).

特開2007−152984号公報JP 2007-152984 A

特許文献1の構成では、操作ガイド部を設ける必要があり、部品コストが増大するという問題がある。また、運転者は座席間の表示装置(図14の145)に視線を移動し、操作を確認しながら、操作情報を入力する必要がある。その間は走行方向前方から視線を移動しなければならず、安全運転の妨げになるという問題もある。   In the configuration of Patent Document 1, it is necessary to provide an operation guide portion, which causes a problem that the component cost increases. In addition, the driver needs to input the operation information while moving the line of sight to the display device (145 in FIG. 14) between the seats and confirming the operation. In the meantime, it is necessary to move the line of sight from the front in the running direction, which also hinders safe driving.

また、車両用ナビゲーション装置では、安全上の理由から、車両が走行中には予め定められた操作以外は禁止されている。特許文献1の構成では、運転者の行いたい操作が禁止されているかどうかが明確ではない。   Further, in the vehicle navigation device, for safety reasons, operations other than predetermined operations are prohibited while the vehicle is traveling. In the configuration of Patent Document 1, it is not clear whether an operation desired by the driver is prohibited.

上記問題を背景として、本発明の課題は、安全運転の妨げにならず、運転者の操作が可能か否かが明確となる車両用遠隔操作装置を提供することにある。   Against the background of the above problems, an object of the present invention is to provide a vehicle remote control device that does not hinder safe driving and makes it clear whether or not a driver can operate.

課題を解決するための手段および発明の効果Means for Solving the Problems and Effects of the Invention

上記課題を解決するための車両用遠隔操作装置は、車両のフロントガラス下縁よりも下方にて運転席から操作可能な位置に設置された操作入力部と、運転席の前方にてフロントガラス下縁よりも上方に設置され、操作入力部上での入力位置を示すための操作系座標と一義的な対応関係を有する表示座標系を有し、操作系座標上の予め定められたアイコン操作位置に対応する位置に操作アイコンを表示する入力表示部と、操作入力部上の操作者の手画像を取得する手画像取得手段と、取得された手画像を入力表示部上の対応する位置に合成表示する手画像合成表示制御手段とを備え、操作アイコンは、操作者による操作が非制限となる非制限操作アイコンと、同じく操作が制限される制限操作アイコンとが定められ、手画像合成表示制御手段は、非制限操作アイコンを操作しようとする手部分と当該非制限操作アイコンとの重なり画像領域である非制限手部分画像領域と、制限操作アイコンを操作しようとする手部分と当該制限操作アイコンとの重なり画像領域である制限手部分画像領域との表示状態が互いに異なるものとなるように、手画像と操作アイコンとを合成表示することにより、入力表示部上にて非制限操作アイコンと制限操作アイコンとを操作者に識別させることを特徴とする。   A vehicle remote control device for solving the above problems includes an operation input unit installed at a position operable from a driver seat below a lower edge of a windshield of a vehicle, and a front windshield below a driver seat. It has a display coordinate system that is installed above the edge and has a unique correspondence with the operation system coordinates for indicating the input position on the operation input unit, and a predetermined icon operation position on the operation system coordinates An input display unit that displays an operation icon at a position corresponding to, a hand image acquisition unit that acquires a hand image of an operator on the operation input unit, and a composite of the acquired hand image at a corresponding position on the input display unit A hand image composition display control means for displaying, and the operation icon is defined as an unrestricted operation icon for which the operation by the operator is unrestricted and a restricted operation icon for which the operation is also restricted, and the hand image composition display control Means An overlap between the unrestricted operation icon and the unrestricted operation icon and the unrestricted operation part image area, which is an overlapping image area of the unrestricted operation icon, and the unrestricted operation icon. An unrestricted operation icon and a restricted operation icon are displayed on the input display unit by combining and displaying the hand image and the operation icon so that the display states of the restricted hand partial image area that is an image area are different from each other. This is characterized in that the operator is identified.

上記構成によって、入力表示部は運転者の運転視野内に設置されるので、車両走行時の安全性が確保されるとともに、必要な情報を視認することができる。また、現在どの機能が利用できて、どの機能が利用できないかを瞬時に判別することができる。   With the above configuration, the input display unit is installed within the driving field of view of the driver, so that safety during vehicle travel can be ensured and necessary information can be viewed. In addition, it is possible to instantaneously determine which function is currently available and which function cannot be used.

また、本発明の車両用操作表示装置における入力表示部は、表示画面をフロントガラス上に投影表示するヘッドアップディスプレイであるように構成することもできる。   Further, the input display unit in the vehicle operation display device of the present invention can be configured to be a head-up display that projects and displays the display screen on the windshield.

航空機用に開発されたヘッドアップディスプレイは、近年、車両にも搭載されるようになっている。上記構成によって、比較的低コストで入力表示部を運転者の運転視野内に設置することができる。   In recent years, head-up displays developed for aircraft have been mounted on vehicles. With the above configuration, the input display unit can be installed in the driving field of view of the driver at a relatively low cost.

また、本発明の車両用操作表示装置における入力表示部は、サンバイザに取り付けられるように構成することもできる。   Moreover, the input display part in the operation display apparatus for vehicles of this invention can also be comprised so that it may be attached to a sun visor.

上記構成によっても、入力表示部を運転者の運転視野内に設置することができる。   Also with the above configuration, the input display unit can be installed within the driving field of view of the driver.

また、本発明の車両用操作表示装置における入力表示部は、天井部に収納可能に取り付けられるように構成することもできる。   Moreover, the input display part in the operation display apparatus for vehicles of this invention can also be comprised so that it can accommodate in a ceiling part so that accommodation is possible.

車両の天井に収納する表示器は、いわゆる後席エンターテインメントシステムの一部として、後席向けを中心に普及しつつある。上記構成によっても、入力表示部を運転者の運転視野内に設置することができる。   A display housed on the ceiling of a vehicle is becoming popular mainly for rear seats as a part of a so-called rear seat entertainment system. Also with the above configuration, the input display unit can be installed within the driving field of view of the driver.

また、本発明の車両用操作表示装置における入力表示部は、ダッシュパネル上部に取り付けられるように構成することもできる。   Moreover, the input display part in the operation display apparatus for vehicles of this invention can also be comprised so that it may attach to a dash panel upper part.

車両によっては、表示器をダッシュパネル上部に収納しているが、収納位置はダッシュパネル中央部であり運転視野内には含まれていない。上記構成によって、表示器を運転席前方に取り付ければ、入力表示部を運転者の運転視野内に設置することができる。   Depending on the vehicle, the display is stored in the upper part of the dash panel, but the storage position is in the center of the dash panel and is not included in the driving field of view. With the above configuration, if the display is attached to the front of the driver's seat, the input display unit can be installed in the driver's driving field of view.

また、本発明の車両用操作表示装置は、手画像に基づいて操作者が運転者か否かを判定する操作者判定手段と、判定に基づいて、操作アイコンを、非制限操作アイコンと制限操作アイコンのいずれかに定める操作制限設定手段と、を備えるように構成することもできる。   The vehicle operation display device according to the present invention includes an operator determination unit that determines whether or not the operator is a driver based on a hand image, an operation icon based on the determination, an unrestricted operation icon, and a limited operation. It is also possible to configure so as to include an operation restriction setting means defined in any of the icons.

上記構成によって、運転者以外の乗員が操作した場合に、利便性を損なうことを防止できる。   With the above configuration, it is possible to prevent the convenience from being lost when an occupant other than the driver operates.

また、本発明の車両用操作表示装置は、車両の速度を検出する車速検出手段を備え、操作制限設定手段は、検出された車両の速度に基づいて、操作アイコンを、非制限操作アイコンと制限操作アイコンのいずれかに定めるように構成することもできる。   Further, the vehicle operation display device of the present invention includes vehicle speed detection means for detecting the speed of the vehicle, and the operation restriction setting means limits the operation icon to the unrestricted operation icon and the restriction based on the detected vehicle speed. It can also be configured so as to be defined in one of the operation icons.

上記構成によって、車両用ナビゲーション装置のように、車両が走行中に予め定められた操作が禁止される車載機器にも、本発明の車両用操作表示装置を適用することが可能となる。   With the configuration described above, the vehicle operation display device of the present invention can be applied to an in-vehicle device in which a predetermined operation is prohibited while the vehicle is traveling, such as a vehicle navigation device.

また、本発明の車両用操作表示装置における手画像合成表示制御手段は、非制限手部分画像領域と制限手部分画像領域のいずれか一方において、操作アイコンを手画像よりも前面に表示して、操作アイコンによって手画像を隠すように構成することもできる。   Further, the hand image composition display control means in the vehicle operation display device of the present invention displays an operation icon in front of the hand image in either one of the non-restricted hand partial image region and the restricted hand partial image region, It can also be configured to hide the hand image by the operation icon.

上記構成によって、非制限操作アイコンと制限操作アイコンとを操作者に識別させることが可能となり、これらアイコンに対応する機能が使用可能か否かを視覚的に認識することが可能となる。   With the above configuration, it is possible to make the operator identify the non-restricted operation icon and the restricted operation icon, and visually recognize whether or not the function corresponding to these icons can be used.

また、本発明の車両用操作表示装置における手画像合成表示制御手段は、非制限手部分画像領域と制限手部分画像領域のいずれか一方において、手画像を半透明表示として操作アイコンの前面に表示するように構成することもできる。   The hand image composition display control means in the vehicle operation display device of the present invention displays a hand image as a semi-transparent display in front of the operation icon in either one of the non-restricted hand partial image area and the restricted hand partial image area. It can also be configured to.

上記構成によっても、非制限操作アイコンと制限操作アイコンとを操作者に識別させることが可能となり、これらアイコンに対応する機能が使用可能か否かを視覚的に認識することが可能となる。   Also with the above configuration, it is possible to allow the operator to identify the non-restricted operation icon and the restricted operation icon, and it is possible to visually recognize whether or not the function corresponding to these icons can be used.

以下、本発明の車両用遠隔操作装置における実施の形態を、図面を参照して説明する。図1に、本発明の車両用遠隔操作装置を車両用ナビゲーション装置(以下、ナビゲーション装置と略称)10に適用したものを示す。ナビゲーション装置以外にも、車両用オーディオ装置のような入力操作部と表示部を備える車載機器にも適用可能である。   Embodiments of the remote control device for a vehicle according to the present invention will be described below with reference to the drawings. FIG. 1 shows an application of a vehicle remote control device of the present invention to a vehicle navigation device (hereinafter abbreviated as a navigation device) 10. In addition to the navigation device, the present invention can also be applied to an in-vehicle device including an input operation unit and a display unit such as an audio device for vehicles.

ナビゲーション装置10は、車両の現在位置を検出する位置検出器110と、運転者等の操作者からの各種指示を入力するための操作情報入力部120と、地図データや各種の情報を記録した外部記録媒体から地図データ等を入力する地図データ入力器140と、地図表示画面やTV(Television)画面等の各種表示を行うための表示装置145と、各種のガイド音声等を出力したり、運転者等の操作者の音声を入力したりするための音声入出力装置150と、車両情報等の各種のデータを記憶するためのハードディスク記憶装置155と、車両情報の授受を行うための車両I/F(Interface)部160と、他の通信装置170aと近距離無線通信を行うための無線通信機170と、上述した位置検出器110,操作情報入力部120,地図データ入力器140,ハードディスク記憶装置155,車両I/F部160,無線通信機170からの入力に応じて各種処理を実行し、これら位置検出器110,操作情報入力部120,地図データ入力器140,表示装置145,音声入出力装置150,ハードディスク記憶装置155,車両I/F部160,無線通信機170を制御する制御回路135とを備えている。   The navigation device 10 includes a position detector 110 that detects the current position of the vehicle, an operation information input unit 120 for inputting various instructions from an operator such as a driver, and an external that records map data and various information. A map data input device 140 for inputting map data and the like from a recording medium, a display device 145 for performing various displays such as a map display screen and a TV (Television) screen, various guide voices, etc. A voice input / output device 150 for inputting the voice of an operator such as a hard disk storage device 155 for storing various data such as vehicle information, and a vehicle I / F for exchanging vehicle information (Interface) unit 160, wireless communication device 170 for performing short-range wireless communication with other communication device 170a, position detector 110, operation information input unit 120, map data described above Various processes are executed in response to inputs from the input device 140, the hard disk storage device 155, the vehicle I / F unit 160, and the wireless communication device 170. The position detector 110, the operation information input unit 120, the map data input device 140, A display device 145, a voice input / output device 150, a hard disk storage device 155, a vehicle I / F unit 160, and a control circuit 135 for controlling the wireless communication device 170 are provided.

位置検出器110は、GPS(Global Positioning System)用の人工衛星からの送信電波をGPSアンテナを介して受信し、車両の位置,方位,速度等を検出するGPS受信機110aと、車両に加えられる回転運動の大きさを検出するジャイロスコープ110bと、車両の前後方向の加速度等から走行した距離を検出する距離センサ110cと、地磁気から進行方位を検出する地磁気センサ110dとを備えている。そして、これら各センサ等110a〜110dは、各々が性質の異なる誤差を有しているため、互いに補完しながら使用するように構成されている。なお、精度によっては、上述したうちの一部のセンサで構成してもよく、またステアリングの回転センサや各転動輪の車輪センサ等(図示せず)を用いてもよい。   The position detector 110 receives a radio wave transmitted from an artificial satellite for GPS (Global Positioning System) via a GPS antenna and is added to the vehicle and a GPS receiver 110a that detects the position, direction, speed, and the like of the vehicle. A gyroscope 110b that detects the magnitude of the rotational motion, a distance sensor 110c that detects the distance traveled from the longitudinal acceleration of the vehicle, and the like, and a geomagnetic sensor 110d that detects the traveling direction from the geomagnetism are provided. Each of the sensors 110a to 110d has an error of a different property, and is configured to be used while complementing each other. Depending on the accuracy, some of the sensors described above may be used, or a steering rotation sensor, a wheel sensor for each rolling wheel, or the like (not shown) may be used.

操作情報入力部120は、操作部としてのタッチパネル125と、手画像100を入力するためのビデオカメラである手画像入力カメラ130とを備えている。タッチパネル125は、図2に示すように、車両のセンターコンソール部のような、車両のフロントガラス下縁よりも下方にて運転席から操作可能な位置に設置されており、手画像100の抽出を容易にするために、手との色合いを異ならせるように特定色(例えば、青色)に着色されている。また、手画像入力カメラ130は、タッチパネル125を撮影しており、撮影映像を制御回路135に出力している。なお、操作情報入力部120が本発明の操作入力部に相当する。   The operation information input unit 120 includes a touch panel 125 as an operation unit and a hand image input camera 130 that is a video camera for inputting the hand image 100. As shown in FIG. 2, the touch panel 125 is installed at a position where it can be operated from the driver's seat below the lower edge of the front windshield of the vehicle, such as the center console portion of the vehicle. In order to facilitate, it is colored in a specific color (for example, blue) so as to have a different hue from the hand. The hand image input camera 130 captures the touch panel 125 and outputs the captured image to the control circuit 135. The operation information input unit 120 corresponds to the operation input unit of the present invention.

また、タッチパネル125は、タッチセンサを備えており、タッチパネル125上のタッチセンサが押下されると、その座標が制御回路135に入力されるようになっている。なお、制御回路135において、タッチパネル125上のタッチセンサの操作入力受付範囲とメイン画面200上に表示されたスイッチ画像201とが関連付けられており、タッチパネル125上のタッチセンサが押下されると、メイン画面200上のスイッチ画像201が押下されたと判定されるようになっている(図7,8参照)。手画像入力カメラ130は、図2に示すように、車両のセンターコンソール部(あるいは後部座席部分)にタッチパネル125の表面を斜め上側から撮影するように取り付けられている。なお、手画像入力カメラ130が本発明の手画像取得手段に相当する。   The touch panel 125 includes a touch sensor. When the touch sensor on the touch panel 125 is pressed, the coordinates are input to the control circuit 135. In the control circuit 135, the operation input acceptance range of the touch sensor on the touch panel 125 is associated with the switch image 201 displayed on the main screen 200, and when the touch sensor on the touch panel 125 is pressed, the main It is determined that the switch image 201 on the screen 200 has been pressed (see FIGS. 7 and 8). As shown in FIG. 2, the hand image input camera 130 is attached to the center console portion (or rear seat portion) of the vehicle so as to photograph the surface of the touch panel 125 from an oblique upper side. The hand image input camera 130 corresponds to the hand image acquisition unit of the present invention.

操作情報入力部120において、タッチパネル125の表面に手の指を当てて上下左右に移動させると、図7に示すように、手画像入力カメラ130が操作する手を含むタッチパネル125の表面を撮影する。制御回路135は、タッチパネル125の表面の撮影映像から公知の画像抽出手法(例えば、特開2003−346162号公報参照)を用いて手画像100を抽出し、画像合成部180により、図8に示すように、手画像100をサブ画面として表示装置145に表示されたメイン画面200(ここでは、地図操作画面)上に半透過合成して重畳表示する。なお、画像合成部180が本発明の手画像合成表示制御手段に相当する。   When the operation information input unit 120 moves a finger up and down and left and right by touching the surface of the touch panel 125, the surface of the touch panel 125 including the hand operated by the hand image input camera 130 is photographed as shown in FIG. . The control circuit 135 extracts a hand image 100 from a captured image of the surface of the touch panel 125 using a known image extraction method (see, for example, Japanese Patent Application Laid-Open No. 2003-346162), and the image synthesis unit 180 shows the image shown in FIG. As described above, the hand image 100 is superimposed on the main screen 200 (here, the map operation screen) displayed on the display device 145 as a sub-screen by being translucently synthesized. The image composition unit 180 corresponds to the hand image composition display control means of the present invention.

このため、運転者等の操作者がタッチパネル125の表面に手の指を当てて上下左右に移動させると、これに併せて、表示装置145の表示画面上を手画像100が移動し、あたかも表示装置145の表面にタッチパネル125が存在しているかのような感覚で操作を行うことができる。この際、スイッチ画像201を押下したかどうかの検出は、タッチパネル125上にタッチセンサの操作入力受付範囲とメイン画面200上に表示されたスイッチ画像201とが関連付けられているので、タッチパネル125上のタッチセンサが押下されたことで、制御回路135がメイン画面200上のスイッチ画像201が押下されたと判定する。   For this reason, when an operator such as a driver puts his / her finger on the surface of the touch panel 125 and moves it up / down / left / right, the hand image 100 moves on the display screen of the display device 145 and moves as if displayed. The operation can be performed as if the touch panel 125 exists on the surface of the device 145. At this time, whether or not the switch image 201 is pressed is detected by associating the operation input reception range of the touch sensor with the switch image 201 displayed on the main screen 200 on the touch panel 125. When the touch sensor is pressed, the control circuit 135 determines that the switch image 201 on the main screen 200 is pressed.

また、操作情報入力部120を図3のような構成としてもよい。図3の例は、タッチパネル125,手画像入力カメラ130等を一体型としたものの断面図を示したものである。タッチパネル125に透明あるいは半透明なものを用いて、タッチパネル125を透過して反射装置131に反射した手画像を手画像入力カメラ130で撮影するものである。タッチパネル125に透過型表示装置126を設けて、表示装置145の表示画像(メイン画面200)を補助的に表示してもよい。   Further, the operation information input unit 120 may be configured as shown in FIG. The example of FIG. 3 shows a sectional view of a touch panel 125, a hand image input camera 130, and the like that are integrated. Using a transparent or translucent touch panel 125, the hand image input camera 130 captures a hand image transmitted through the touch panel 125 and reflected by the reflection device 131. The transmissive display device 126 may be provided on the touch panel 125 to display the display image (main screen 200) of the display device 145 as an auxiliary.

図1に戻り、地図データ入力器140は、ネットワークデータとしての道路データ,位置特定の精度向上のためのいわゆるマップマッチング用データ等の地図データ,施設を示すマークデータ,案内用の画像や音声データ等を含む各種のデータを入力するための装置である。これらのデータの記録媒体としては、CD−ROM,DVD−ROM,ハードディスク,メモリ,メモリカード等を用いることができる。   Returning to FIG. 1, the map data input unit 140 includes road data as network data, map data such as so-called map matching data for improving location accuracy, mark data indicating facilities, guidance image and audio data. It is a device for inputting various data including the like. A CD-ROM, DVD-ROM, hard disk, memory, memory card, or the like can be used as a recording medium for these data.

表示装置145は、運転席の前方にてフロントガラス下縁よりも上方に設置されており、その表示画面には、位置検出器110にて検出した車両の現在位置と地図データ入力器140より入力された地図データとから特定した現在地を示すマーク,目的地までの誘導経路,名称,目印,各種施設のマーク等の付加データとを重ねて表示することができる。また、施設のガイド等も表示できる。なお、表示装置145が本発明の入力表示部に相当する。   The display device 145 is installed in front of the driver's seat and above the lower edge of the windshield. The display screen 145 is input from the current position of the vehicle detected by the position detector 110 and the map data input device 140. Additional data such as a mark indicating the current location identified from the map data thus obtained, a guide route to the destination, a name, a landmark, and marks of various facilities can be displayed in an overlapping manner. Also, facility guides can be displayed. The display device 145 corresponds to the input display unit of the present invention.

また、表示装置145は、上述のとおり、操作情報入力部120での入力位置を示すための操作系座標と一義的な対応関係を有する表示座標系を有し、操作系座標上の予め定められたアイコン操作位置に対応する位置に操作アイコンを表示する。   Further, as described above, the display device 145 has a display coordinate system having a unique correspondence with the operation system coordinates for indicating the input position in the operation information input unit 120, and is determined in advance on the operation system coordinates. An operation icon is displayed at a position corresponding to the icon operation position.

図4に表示装置145としてヘッドアップディスプレイ(HUD)を用いた例を示す。HUD145は、車両のウインドシールドガラス138に、上述の画像・データを表示するものである。HUD145は、インストルメントパネル139の内部に組み付けられていて、仮想サイドミラー画像を映し出す液晶パネル145aと、その液晶パネル145aに光を照射するバックライト145bとを備えている。バックライト145bから照射された光は、液晶パネル145aを透過してウインドシールドガラス138に入射し、運転席に着座したドライバーDRの目に向けて反射される。これにより、ウインドシールドガラス138に投影された画像が虚像VとしてドライバーDRの目に捉えられる。また、画像は、無限遠の点に結像するようにウインドシールドガラス138に投影される。なお、透過型の液晶パネル145aを用いたHUDに代えて、例えば反射型の液晶パネルを用いたHUDを使用してもよい。   FIG. 4 shows an example in which a head-up display (HUD) is used as the display device 145. The HUD 145 displays the above-mentioned image / data on the windshield glass 138 of the vehicle. The HUD 145 is assembled inside the instrument panel 139, and includes a liquid crystal panel 145a that displays a virtual side mirror image, and a backlight 145b that irradiates light to the liquid crystal panel 145a. The light emitted from the backlight 145b passes through the liquid crystal panel 145a, enters the windshield glass 138, and is reflected toward the eyes of the driver DR seated in the driver's seat. As a result, the image projected on the windshield glass 138 is captured as a virtual image V by the driver DR. The image is projected onto the windshield glass 138 so as to form an image at a point at infinity. Instead of the HUD using the transmissive liquid crystal panel 145a, for example, an HUD using a reflective liquid crystal panel may be used.

図5に表示装置145の設置方法の別例を示す。表示装置145は液晶ディスプレイ,プラズマディスプレイ,有機ELディスプレイ等、いずれを用いてもよい。表示装置145は、運転席側のサンバイザ137に取り付けられ、サンバイザ137を展張した状態で、運転者は画像を見ることができる。   FIG. 5 shows another example of a method for installing the display device 145. As the display device 145, any of a liquid crystal display, a plasma display, an organic EL display, and the like may be used. The display device 145 is attached to the sun visor 137 on the driver's seat side, and the driver can view images while the sun visor 137 is extended.

図6に表示装置145の設置方法のさらに別例を示す。近年、車両の後席の乗員がTVやDVDを視聴することができる後席エンターテインメントシステムが普及しているが、後席乗員用の表示装置は天井に収納(閉位置)されている。後席乗員がTVやDVDを視聴する際には、表示装置を手動あるいはモータ駆動等により視聴可能となる非収納位置(開位置)に移動させるものである。この収納式表示装置を運転席上部の天井に取り付ける。この場合、サンバイザは周知のスライド式のものを用いることが好ましい。   FIG. 6 shows still another example of the installation method of the display device 145. In recent years, a rear seat entertainment system in which a passenger in a rear seat of a vehicle can watch a TV or a DVD has become widespread, but a display device for the passenger in the rear seat is stored (closed position) on the ceiling. When the rear seat occupant views the TV or DVD, the display device is moved to a non-storage position (open position) where the display device can be viewed manually or by motor drive. This retractable display device is attached to the ceiling above the driver's seat. In this case, the sun visor is preferably a known slide type.

また、図6のように、表示装置145を、運転席の前方のインストルメントパネル139上に設置してもよい。表示装置145をインストルメントパネル139に収納可納としてもよい。   Moreover, as shown in FIG. 6, the display device 145 may be installed on the instrument panel 139 in front of the driver's seat. The display device 145 may be housed in the instrument panel 139.

また、表示装置145が、運転席側のサンバイザ137に収納され、サンバイザ137が収納された状態において、表示装置145が、閉位置と開位置との間で移動するようにしてもよい。   Further, the display device 145 may be accommodated in the sun visor 137 on the driver's seat side, and the display device 145 may be moved between the closed position and the open position in a state where the sun visor 137 is accommodated.

図1に戻り、音声入出力装置150は、地図データ入力器140より入力した施設のガイドや各種案内の音声や、車両I/F部160を介して取得した情報の読み上げ音声を出力することができる。また、音声入出力装置150は、図示しないマイクおよび周知の音声認識ユニットを含み、運転者等の操作者の音声をコマンド等として制御回路135に入力することができる。   Returning to FIG. 1, the voice input / output device 150 may output a facility guide or various guidance voices input from the map data input device 140, or a reading voice of information acquired via the vehicle I / F unit 160. it can. The voice input / output device 150 includes a microphone (not shown) and a known voice recognition unit, and can input the voice of an operator such as a driver to the control circuit 135 as a command or the like.

車速センサ159は周知のロータリエンコーダ等の回転検出部を含み、例えば車輪取り付け部付近に設置されて車輪の回転を検出してパルス信号として制御回路135に送るものである。制御回路135では、その車輪の回転数を車両の速度に換算する。なお、車速センサ159が本発明の車速検出手段に相当する。   The vehicle speed sensor 159 includes a rotation detection unit such as a known rotary encoder, and is installed near the wheel mounting unit, for example, to detect the rotation of the wheel and send it to the control circuit 135 as a pulse signal. The control circuit 135 converts the number of rotations of the wheel into the speed of the vehicle. The vehicle speed sensor 159 corresponds to the vehicle speed detection means of the present invention.

車両I/F部160は、各種の外部情報を入出力するためのものであり、車両状態検出や、図示しないラジオアンテナを介して受信したFM(Frequency Modulation)放送信号や、道路近傍に配置されたVICS(Vehicle Information and Communication System:道路交通情報システム,登録商標)サービス用の固定局から受信した電波ビーコン信号および光ビーコン信号などを入力する。   The vehicle I / F unit 160 is for inputting / outputting various types of external information, and is disposed in the vicinity of the road, vehicle state detection, FM (Frequency Modulation) broadcast signals received via a radio antenna (not shown), and roads. A radio wave beacon signal and an optical beacon signal received from a fixed station for VICS (Vehicle Information and Communication System: registered trademark) service are input.

無線通信機170は、他の通信装置170aと狭帯域通信を行うためのものであり、例えばDSRC(Dedicated Short Range Communications),Bluetooth(登録商標),無線LAN(Local Area Network),UWB(Ultra Wideband)などが使用されている。   The wireless communication device 170 is for performing narrowband communication with another communication device 170a. For example, DSRC (Dedicated Short Range Communications), Bluetooth (registered trademark), wireless LAN (Local Area Network), UWB (Ultra Wideband). ) Etc. are used.

制御回路135は、図示しない周知のCPU,ROM,RAM,I/O(Input/Output)およびこれらの構成を接続するバスラインなどからなる周知のマイクロコンピュータを中心に構成されており、ROM等に記憶されたプログラムに基づいて、操作情報入力部120から取得した手画像100をサブ画面としてメイン画面200(地図操作画面等)に重畳するための画像合成部180を有していて、合成画像を生成している。   The control circuit 135 is configured around a well-known microcomputer (not shown) including a well-known CPU, ROM, RAM, I / O (Input / Output) and a bus line connecting these components. Based on the stored program, it has an image composition unit 180 for superimposing the hand image 100 acquired from the operation information input unit 120 on the main screen 200 (such as a map operation screen) as a sub-screen, Is generated.

また、制御回路135は、ROM等に記憶されたプログラムに基づいて、他にも、位置検出器110からの各検出信号に基づき座標および進行方向の組として車両の現在位置を算出し、地図データ入力器140を介して読み込んだ現在位置付近の地図や、操作情報入力部120の操作によって指示された範囲の地図等を表示装置145に表示する地図表示処理や、地図データ入力器140に格納された地点データに基づき、操作情報入力部120の操作に従って目的地となる施設を選択し、現在位置から目的地までの最適な経路を自動的に求める経路計算を行って経路案内を行う経路案内処理等を行う。このように自動的に最適な経路を設定する手法は、ダイクストラ法等の手法が知られている。また、制御回路135は、無線通信機170を介して他の車両に搭載されたナビゲーション装置10(の他の通信装置170a)との間で情報交換をすることができる。なお、制御回路135が本発明の操作者判定手段,操作制限設定手段に相当する。   In addition, the control circuit 135 calculates the current position of the vehicle as a set of coordinates and traveling directions based on each detection signal from the position detector 110 based on a program stored in the ROM or the like, and generates map data A map display process for displaying on the display device 145 a map in the vicinity of the current position read via the input device 140, a map in the range designated by the operation of the operation information input unit 120, and the map data input device 140. Route guidance processing that selects a facility as a destination according to the operation of the operation information input unit 120 based on the point data and performs route calculation by automatically calculating a route from the current position to the destination. Etc. A technique such as the Dijkstra method is known as a technique for automatically setting an optimum route in this way. Further, the control circuit 135 can exchange information with the navigation device 10 (another communication device 170a) mounted on another vehicle via the wireless communication device 170. The control circuit 135 corresponds to an operator determination unit and an operation restriction setting unit of the present invention.

図9を用いて、制御回路135による表示制御処理について説明する。なお、本処理は、車両用遠隔操作装置が右ハンドルの車両に搭載されていると仮定したものであり、左ハンドルの車両に搭載されている場合には、右手か左手かの判定が逆になる。   The display control process performed by the control circuit 135 will be described with reference to FIG. Note that this process assumes that the vehicle remote control device is mounted on a right-hand drive vehicle. If the vehicle is mounted on a left-hand drive vehicle, the determination of whether it is a right hand or a left hand is reversed. Become.

まず、図7に示すように、タッチパネル125の前面に運転者等の操作者の手が進入してくると、制御回路135は、上述した公知の画像解析手法を使用して、手画像入力カメラ130の撮影映像を解析し、タッチパネル125と運転者等の操作者の手との色の相違等に基づいて手画像100を抽出する(S110)。   First, as shown in FIG. 7, when an operator's hand such as a driver enters the front surface of the touch panel 125, the control circuit 135 uses a known image analysis method described above to perform a hand image input camera. 130 photographed images are analyzed, and a hand image 100 is extracted based on a color difference between the touch panel 125 and an operator's hand such as a driver (S110).

次に、制御回路135は、抽出した手画像100が右手の手画像100であるか左手の手画像100であるかを判定する(S120)。   Next, the control circuit 135 determines whether the extracted hand image 100 is the right-hand hand image 100 or the left-hand hand image 100 (S120).

手画像100が右手の手画像であれば(S120:右手)、制御回路135は、右ハンドルの車両の場合には運転者以外の手画像であり、ナビゲーション装置10の操作を許容してよいと判断し、スイッチ画像201(図10等参照)は非制限操作アイコンとなる。そして、非制限操作アイコンを操作しようとする手部分と当該非制限操作アイコンとの重なり画像領域である非制限手部分画像領域は、画像合成部180により、手画像100をメイン画面200に半透過合成して当該非制限操作アイコンの前面に重畳表示し(S180,図11参照)、表示制御処理を終了する。   If the hand image 100 is a right hand hand image (S120: right hand), the control circuit 135 is a hand image other than the driver in the case of a right-hand drive vehicle, and may allow operation of the navigation device 10. As a result, the switch image 201 (see FIG. 10 and the like) is an unrestricted operation icon. Then, the non-restricted hand part image area, which is an overlapping image area of the hand part to be operated with the unrestricted operation icon and the unrestricted operation icon, is translucently transmitted to the main screen 200 by the image composition unit 180. Combined and superimposed on the front of the unrestricted operation icon (S180, see FIG. 11), the display control process is terminated.

手画像100が左手の手画像であれば(S120:左手)、制御回路135は、右ハンドルの車両の場合には運転者の手画像100であり、走行強制等による操作制限状態であるか否かを判定するために、車速センサ159から車両I/F部160を経由して入力される車両速度が所定の走行強制速度(例えば、6km)以下かどうかを判定する(S140)。   If the hand image 100 is a left hand image (S120: left hand), the control circuit 135 is the driver's hand image 100 in the case of a right-hand drive vehicle, and is in an operation-restricted state due to forced driving or the like. Therefore, it is determined whether or not the vehicle speed input from the vehicle speed sensor 159 via the vehicle I / F unit 160 is equal to or less than a predetermined traveling forced speed (for example, 6 km) (S140).

車両速度が所定の走行強制速度(例えば、6km)以下であれば(S140:YES)、制御回路135は、車両がほぼ停止していると判断し、スイッチ画像201は非制限操作アイコンとなる。そして、非制限操作アイコンを操作しようとする手部分と当該非制限操作アイコンとの重なり画像領域である非制限手部分画像領域は、画像合成部180により、手画像100をメイン画面200に半透過合成して当該非制限操作アイコンの前面に重畳表示し(S180,図11参照)、表示制御処理を終了する。   If the vehicle speed is equal to or less than a predetermined traveling forced speed (for example, 6 km) (S140: YES), the control circuit 135 determines that the vehicle is almost stopped, and the switch image 201 becomes an unrestricted operation icon. Then, the non-restricted hand part image area, which is an overlapping image area of the hand part to be operated with the unrestricted operation icon and the unrestricted operation icon, is translucently transmitted to the main screen 200 by the image composition unit 180. Combined and superimposed on the front of the unrestricted operation icon (S180, see FIG. 11), the display control process is terminated.

一方、車両速度が所定の走行強制速度(例えば、6km)以下でなければ(S130:NO)、制御回路135は、車両が走行していると判断し、走行強制等で操作制限されたスイッチ画像201の位置と、メイン画面200上に表示すべき手画像100の位置とが重なり合っているかどうかを判定する(S150)。   On the other hand, if the vehicle speed is not equal to or less than a predetermined traveling forced speed (for example, 6 km) (S130: NO), the control circuit 135 determines that the vehicle is traveling, and the switch image is restricted in operation due to forced traveling or the like. It is determined whether the position 201 and the position of the hand image 100 to be displayed on the main screen 200 overlap (S150).

操作制限されたスイッチ画像201の位置と手画像100の位置とが重なり合っていない場合には(S150:NO)、制御回路135は、画像合成部180により、手画像100をメイン画面200に半透過合成して重畳表示し(S180,図11参照)、表示制御処理を終了する。   When the position of the switch image 201 whose operation is restricted does not overlap with the position of the hand image 100 (S150: NO), the control circuit 135 causes the image composition unit 180 to translucently transmit the hand image 100 to the main screen 200. The images are combined and superimposed (S180, see FIG. 11), and the display control process is terminated.

操作制限されたスイッチ画像201の位置と手画像100の位置とが重なり合っている場合には(S150:YES)、スイッチ画像201は制限操作アイコンとなる。そして、制限操作アイコンを操作しようとする手部分と当該制限操作アイコンとの重なり画像領域である制限手部分画像領域は、画像合成部180により、当該制限操作アイコンを手画像100の前面に表示するよう加工処理を施す(S160)。   When the position of the switch image 201 whose operation is restricted overlaps with the position of the hand image 100 (S150: YES), the switch image 201 becomes a restriction operation icon. Then, the restricted hand part image area that is an overlapping image area of the hand part to be operated with the restricted operation icon and the restricted operation icon is displayed on the front of the hand image 100 by the image composition unit 180. Processing is performed (S160).

次に、制御回路135は、画像合成部180により、加工処理後の手画像100をメイン画面200に重畳表示して(S170)、表示制御処理を終了する。   Next, the control circuit 135 causes the image composition unit 180 to superimpose and display the processed hand image 100 on the main screen 200 (S170), and ends the display control process.

図10に、図9のステップS170において表示装置145に表示される手画像100の表示例を示す。ここでは、表示装置145のメイン画面200には、地図操作画面が表示されており、このメイン画面200上には、現在地,目的地設定,メニュー,SECURITY,エアコン,オーディオ,画質・消,情報・Gの各種のスイッチ画像201が操作アイコンとして重畳表示されている。各種のスイッチ画像201のうちの、目的地設定,メニュー,情報・Gが、走行強制等で操作制限されたスイッチ画像(制限操作アイコン)であり、操作制限の対象とならない他のスイッチ画像201(非制限操作アイコン)とは異なる色で表示される。   FIG. 10 shows a display example of the hand image 100 displayed on the display device 145 in step S170 of FIG. Here, a map operation screen is displayed on the main screen 200 of the display device 145. On the main screen 200, the present location, destination setting, menu, SECURITY, air conditioner, audio, image quality / off, information / Various switch images 201 of G are superimposed and displayed as operation icons. Of the various switch images 201, the destination setting, menu, and information / G are switch images (restricted operation icons) whose operation is restricted due to forced driving, etc., and other switch images 201 that are not subject to operation restriction ( It is displayed in a different color from the unrestricted operation icon.

上述の実施例によれば、操作制限されたスイッチ画像201の位置と手画像100の位置とが重なり合っている場合には、手画像100と操作制限されたスイッチ画像201(目的地設定)との重畳部分100a(制限手部分画像領域)を削除して手画像100よりも前面に操作制限されたスイッチ画像201を表示する。これにより、運転者等の操作者は、該スイッチ画像201を操作することができないスイッチ操作制限状態であることを視覚的に認識することができる。   According to the above-described embodiment, when the position of the operation-restricted switch image 201 and the position of the hand image 100 overlap, the hand image 100 and the operation-restricted switch image 201 (destination setting) The superposed portion 100a (restricted hand partial image region) is deleted, and the switch image 201 whose operation is restricted in front of the hand image 100 is displayed. Thereby, an operator such as a driver can visually recognize that the switch image 201 is in a switch operation restricted state in which the switch image 201 cannot be operated.

図11に、図9のステップS180において表示装置145に表示される手画像100の表示例を示す。非制限操作アイコンである現在地スイッチを操作しようとしているので、手画像100とスイッチ画像201との重畳部分100a(非制限手部分画像領域)は半透明表示となり、運転者等の操作者は、該スイッチ画像201を操作することができることを視覚的に認識することができる。   FIG. 11 shows a display example of the hand image 100 displayed on the display device 145 in step S180 of FIG. Since the present location switch which is an unrestricted operation icon is to be operated, the overlapping portion 100a (unrestricted hand portion image region) of the hand image 100 and the switch image 201 is displayed semi-transparently, and an operator such as a driver can It can be visually recognized that the switch image 201 can be operated.

ところで、図10では、手画像100の操作制限されたスイッチ画像201との重畳部分を削除して手画像100を表示するようにしたが、重畳部分をどのように加工表示するかに関しては、種々の変形例を考えることができる。   In FIG. 10, the hand image 100 is displayed by deleting the overlapped portion of the hand image 100 with the switch image 201 whose operation is restricted, but there are various methods for processing and displaying the overlapped portion. Can be considered.

例えば、図11に示すように、運転者等の操作者の操作性を向上させるために、どの指が選択/押下する指かを判り易く表示する選択マーカー100bを手画像100に追加表示して、操作するための指の指定と、スイッチ画像201の押下点とを指示するようにした車両用遠隔操作装置も知られている。このような車両用遠隔操作装置の場合には、手画像100の位置がスイッチ画像201の位置と重なった場合には、選択マーカー100bを消去して上述の図10のような表示を行えば、操作者に対し、スイッチを操作することができるか否かを見易くすることができる。   For example, as shown in FIG. 11, in order to improve the operability of an operator such as a driver, a selection marker 100 b that displays in an easy-to-understand manner which finger is to be selected / pressed is additionally displayed on the hand image 100. There is also known a vehicular remote control device that designates a finger for operation and points to press a switch image 201. In the case of such a vehicle remote control device, when the position of the hand image 100 overlaps the position of the switch image 201, if the display as shown in FIG. It can be made easier for the operator to see whether or not the switch can be operated.

また、図12に例示するように、車両の走行速度が所定の走行強制速度(例えば、6km/h)以上になった時に、手画像100自体を表示しないようにしたり、透過度のより高い手画像100に変更したりするようにしてもよい。手画像100自体を表示しないようにするには、図9の表示制御処理のフローチャートにおいて、ステップS160およびS170を削除するようにすればよい。また、車両の走行速度に応じて、徐々に手画像100の透過度を高めるように表示してもよい。この他にも、車両の走行速度に応じて、手画像100の表示色を変更することも可能である。   In addition, as illustrated in FIG. 12, when the traveling speed of the vehicle becomes equal to or higher than a predetermined traveling forcing speed (for example, 6 km / h), the hand image 100 itself is not displayed, or the hand with higher transparency is used. The image 100 may be changed. In order not to display the hand image 100 itself, steps S160 and S170 may be deleted in the flowchart of the display control process of FIG. Moreover, you may display so that the transparency of the hand image 100 may be raised gradually according to the running speed of a vehicle. In addition, the display color of the hand image 100 can be changed according to the traveling speed of the vehicle.

さらに、図13に例示するように、手画像100をメイン画面200に単に重ね合わせて重畳表示するような車両用遠隔操作装置も知られている。このような車両用遠隔操作装置の場合には、走行強制等で操作制限されたスイッチ画像201の位置と、メイン画面200上に表示すべき手画像100の位置とが重なり合っているときには、手画像100の操作制限されたスイッチ画像201との重畳部分100a(制限手部分画像領域)を表示しないようにするのではなく、重畳部分100aを透かし画像にするだけでもよい。   Furthermore, as illustrated in FIG. 13, there is also known a vehicle remote control device in which the hand image 100 is simply superimposed and displayed on the main screen 200. In the case of such a vehicular remote control device, when the position of the switch image 201 whose operation is restricted due to forced driving or the like and the position of the hand image 100 to be displayed on the main screen 200 overlap, Instead of not displaying the superimposed portion 100a (restricted hand partial image region) with the switch image 201 limited to 100 operations, the superimposed portion 100a may only be used as a watermark image.

以上、本発明の実施例を説明したが、これはあくまでも例示にすぎず、本発明はこれに限定されるものではなく、特許請求の範囲の趣旨を逸脱しない限りにおいて、当業者の知識に基づく種々の変更が可能である。   As mentioned above, although the Example of this invention was described, this is only an illustration, this invention is not limited to this, Based on the knowledge of those skilled in the art, unless it deviates from the meaning of a claim Various changes are possible.

本発明の車両用遠隔操作装置を用いた車両用ナビゲーション装置の構成を示すブロック図。The block diagram which shows the structure of the navigation apparatus for vehicles using the remote control apparatus for vehicles of this invention. 車両用遠隔操作装置の概要を説明するための車室内の要部斜視図。The principal part perspective view in a vehicle interior for demonstrating the outline | summary of the remote control device for vehicles. 操作情報入力部の別例の断面図を示す図。The figure which shows sectional drawing of another example of an operation information input part. 表示装置としてヘッドアップディスプレイを用いた例を示す図。The figure which shows the example which used the head-up display as a display apparatus. 表示装置の設置方法の別例を示す図。The figure which shows another example of the installation method of a display apparatus. 表示装置の設置方法のさらに別例を示す図。The figure which shows another example of the installation method of a display apparatus. 撮影映像を例示する図。The figure which illustrates a picked-up image. 表示装置のメイン画面に対する手画像の半透過合成を例示する図。The figure which illustrates the translucent synthesis | combination of the hand image with respect to the main screen of a display apparatus. 表示制御処理を示すフローチャート。The flowchart which shows a display control process. 制限操作アイコンを操作したときの表示例を示す図。The figure which shows the example of a display when a restriction | limiting operation icon is operated. 非制限操作アイコンを操作したときの表示例を示す図。The figure which shows the example of a display when operating a non-restriction operation icon. 重畳表示の別例を示す図。The figure which shows another example of a superimposed display. 重畳表示のさらに別例を示す図。The figure which shows another example of a superimposed display. 従来技術による表示装置設置例を示す図。The figure which shows the example of a display apparatus installation by a prior art.

符号の説明Explanation of symbols

10 車両用ナビゲーション装置
100 手画像
110 位置検出器
120 操作情報入力部(操作入力部)
125 タッチパネル
130 手画像入力カメラ(手画像取得手段)
135 制御回路(操作者判定手段,操作制限設定手段)
140 地図データ入力器
145 表示装置(入力表示部)
159 車速センサ(車速検出手段)
160 車両I/F部
180 画像合成部(手画像合成表示制御手段)
200 メイン画面
201 スイッチ画像(操作アイコン)
DESCRIPTION OF SYMBOLS 10 Vehicle navigation apparatus 100 Hand image 110 Position detector 120 Operation information input part (operation input part)
125 touch panel 130 hand image input camera (hand image acquisition means)
135 Control circuit (operator determination means, operation restriction setting means)
140 Map data input device 145 Display device (input display unit)
159 Vehicle speed sensor (vehicle speed detection means)
160 Vehicle I / F unit 180 Image composition unit (hand image composition display control means)
200 Main screen 201 Switch image (operation icon)

Claims (9)

車両のフロントガラス下縁よりも下方にて運転席から操作可能な位置に設置された操作入力部と、
前記運転席の前方にて前記フロントガラス下縁よりも上方に設置され、前記操作入力部上での入力位置を示すための操作系座標と一義的な対応関係を有する表示座標系を有し、前記操作系座標上の予め定められたアイコン操作位置に対応する位置に操作アイコンを表示する入力表示部と、
前記操作入力部上の操作者の手画像を取得する手画像取得手段と、
取得された前記手画像を前記入力表示部上の対応する位置に合成表示する手画像合成表示制御手段とを備え、
前記操作アイコンは、前記操作者による操作が非制限となる非制限操作アイコンと、同じく操作が制限される制限操作アイコンとが定められ、
前記手画像合成表示制御手段は、前記非制限操作アイコンを操作しようとする手部分と当該非制限操作アイコンとの重なり画像領域である非制限手部分画像領域と、前記制限操作アイコンを操作しようとする手部分と当該制限操作アイコンとの重なり画像領域である制限手部分画像領域との表示状態が互いに異なるものとなるように、前記手画像と前記操作アイコンとを合成表示することにより、前記入力表示部上にて前記非制限操作アイコンと前記制限操作アイコンとを前記操作者に識別させることを特徴とする車両用遠隔操作装置。
An operation input unit installed at a position operable from the driver's seat below the lower edge of the vehicle windshield,
A display coordinate system that is installed above the lower edge of the windshield in front of the driver's seat and has an unambiguous correspondence with operation system coordinates for indicating an input position on the operation input unit; An input display unit for displaying an operation icon at a position corresponding to a predetermined icon operation position on the operation system coordinates;
Hand image acquisition means for acquiring an operator's hand image on the operation input unit;
Hand image composition display control means for compositing and displaying the acquired hand image at a corresponding position on the input display unit,
The operation icons are defined as an unrestricted operation icon in which operations by the operator are unrestricted and a restricted operation icon in which operations are also restricted,
The hand image synthesis display control means tries to operate the non-restricted hand partial image area, which is an overlapping image area of the hand part to be operated with the non-restricted operation icon, and the non-restricted operation icon. The hand image and the operation icon are combined and displayed such that the display state of the restricted hand part image region, which is an overlapping image region of the hand part to be performed and the restricted operation icon, is different from each other, A remote operation device for a vehicle, characterized in that the operator identifies the unrestricted operation icon and the restricted operation icon on a display unit.
前記入力表示部は、表示画面を前記フロントガラス上に投影表示するヘッドアップディスプレイである請求項1に記載の車両用遠隔操作装置。   The remote control device for a vehicle according to claim 1, wherein the input display unit is a head-up display that projects and displays a display screen on the windshield. 前記入力表示部は、サンバイザに取り付けられる請求項1または請求項2に記載の車両用遠隔操作装置。   The remote control device for a vehicle according to claim 1, wherein the input display unit is attached to a sun visor. 前記入力表示部は、天井部に収納可能に取り付けられる請求項1ないし3のいずれかに1項に記載の車両用遠隔操作装置。   The remote control device for a vehicle according to any one of claims 1 to 3, wherein the input display unit is attached to the ceiling so as to be housed. 前記入力表示部は、ダッシュパネル上部に取り付けられる請求項1ないし4のいずれかに1項に記載の車両用遠隔操作装置。   The remote control device for a vehicle according to any one of claims 1 to 4, wherein the input display unit is attached to an upper portion of a dash panel. 前記手画像に基づいて前記操作者が運転者か否かを判定する操作者判定手段と、
前記判定に基づいて、前記操作アイコンを、前記非制限操作アイコンと前記制限操作アイコンのいずれかに定める操作制限設定手段と、
を備える請求項1ないし5のいずれかに1項に記載の車両用遠隔操作装置。
Operator determination means for determining whether the operator is a driver based on the hand image;
Based on the determination, an operation restriction setting means that determines the operation icon as either the non-restricted operation icon or the restricted operation icon;
The vehicular remote control device according to claim 1, further comprising:
前記車両の速度を検出する車速検出手段を備え、
前記操作制限設定手段は、検出された前記車両の速度に基づいて、前記操作アイコンを、前記非制限操作アイコンと前記制限操作アイコンのいずれかに定める請求項6に記載の車両用遠隔操作装置。
Vehicle speed detecting means for detecting the speed of the vehicle,
The remote operation device for a vehicle according to claim 6, wherein the operation restriction setting unit determines the operation icon as one of the non-restriction operation icon and the restriction operation icon based on the detected speed of the vehicle.
前記手画像合成表示制御手段は、前記非制限手部分画像領域と前記制限手部分画像領域のいずれか一方において、前記操作アイコンを前記手画像よりも前面に表示して、前記操作アイコンによって前記手画像を隠す請求項1ないし7のいずれかに1項に記載の車両用遠隔操作装置。   The hand image composition display control means displays the operation icon in front of the hand image in one of the non-restricted hand partial image region and the restricted hand partial image region, and the hand icon is used to display the operation icon. The vehicle remote control device according to any one of claims 1 to 7, wherein the image is hidden. 前記手画像合成表示制御手段は、前記非制限手部分画像領域と前記制限手部分画像領域のいずれか一方において、前記手画像を半透明表示として前記操作アイコンの前面に表示する請求項1ないし8のいずれか1項に記載の車両用遠隔操作装置。   The hand image composition display control means displays the hand image as a semi-transparent display on the front of the operation icon in either one of the non-restricted hand partial image region and the restricted hand partial image region. The remote control device for a vehicle according to any one of the above.
JP2007217292A 2007-08-23 2007-08-23 Remote control device for vehicle Expired - Fee Related JP4930716B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007217292A JP4930716B2 (en) 2007-08-23 2007-08-23 Remote control device for vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007217292A JP4930716B2 (en) 2007-08-23 2007-08-23 Remote control device for vehicle

Publications (2)

Publication Number Publication Date
JP2009051253A true JP2009051253A (en) 2009-03-12
JP4930716B2 JP4930716B2 (en) 2012-05-16

Family

ID=40502752

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007217292A Expired - Fee Related JP4930716B2 (en) 2007-08-23 2007-08-23 Remote control device for vehicle

Country Status (1)

Country Link
JP (1) JP4930716B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4895146B1 (en) * 2011-03-07 2012-03-14 パイオニア株式会社 Navigation device, navigation method, navigation program, and transmissive display
JP2012185150A (en) * 2011-12-14 2012-09-27 Pioneer Electronic Corp Navigation information display device, head-up display and navigation information display method
JP2013205526A (en) * 2012-03-28 2013-10-07 Sony Corp Display device and display control method
JP2014109994A (en) * 2012-12-04 2014-06-12 Alpine Electronics Inc Gesture recognition device, and method and program
CN103885580A (en) * 2012-12-20 2014-06-25 现代自动车株式会社 Control system for using hand gesture for vehicle
US11307762B2 (en) 2018-01-31 2022-04-19 Hewlett-Packard Development Company, L.P. Operating user interfaces
CN114394052A (en) * 2020-10-08 2022-04-26 丰田自动车株式会社 Vehicle display system and vehicle display method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6416437A (en) * 1987-07-10 1989-01-19 Aisin Aw Co Display device for loading on vehicle
JPH03235737A (en) * 1989-10-24 1991-10-21 Mitsubishi Electric Corp Switch system for automobile
WO2006013783A1 (en) * 2004-08-04 2006-02-09 Matsushita Electric Industrial Co., Ltd. Input device
WO2006027924A1 (en) * 2004-09-03 2006-03-16 Matsushita Electric Industrial Co., Ltd. Input device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6416437A (en) * 1987-07-10 1989-01-19 Aisin Aw Co Display device for loading on vehicle
JPH03235737A (en) * 1989-10-24 1991-10-21 Mitsubishi Electric Corp Switch system for automobile
WO2006013783A1 (en) * 2004-08-04 2006-02-09 Matsushita Electric Industrial Co., Ltd. Input device
WO2006027924A1 (en) * 2004-09-03 2006-03-16 Matsushita Electric Industrial Co., Ltd. Input device

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4895146B1 (en) * 2011-03-07 2012-03-14 パイオニア株式会社 Navigation device, navigation method, navigation program, and transmissive display
WO2012120607A1 (en) * 2011-03-07 2012-09-13 パイオニア株式会社 Navigation device, navigation method, navigation program, and see-through display
JP2012185150A (en) * 2011-12-14 2012-09-27 Pioneer Electronic Corp Navigation information display device, head-up display and navigation information display method
JP2013205526A (en) * 2012-03-28 2013-10-07 Sony Corp Display device and display control method
US9952657B2 (en) 2012-03-28 2018-04-24 Sony Corporation Display apparatus and display control method
JP2014109994A (en) * 2012-12-04 2014-06-12 Alpine Electronics Inc Gesture recognition device, and method and program
CN103885580A (en) * 2012-12-20 2014-06-25 现代自动车株式会社 Control system for using hand gesture for vehicle
US11307762B2 (en) 2018-01-31 2022-04-19 Hewlett-Packard Development Company, L.P. Operating user interfaces
CN114394052A (en) * 2020-10-08 2022-04-26 丰田自动车株式会社 Vehicle display system and vehicle display method
CN114394052B (en) * 2020-10-08 2024-04-16 丰田自动车株式会社 Vehicle display system and vehicle display method

Also Published As

Publication number Publication date
JP4930716B2 (en) 2012-05-16

Similar Documents

Publication Publication Date Title
JP4915503B2 (en) Prompter type operation device
JP4930716B2 (en) Remote control device for vehicle
US9688145B2 (en) Terminal, vehicle having the same and method of controlling the same
JP4466581B2 (en) Vehicle display device
JP6260166B2 (en) Vehicle display processing device
JP4962788B2 (en) Vehicle periphery monitoring device
JP5017242B2 (en) Visual support device
CN110487296A (en) Calculation method, device, motor vehicle and the program that &#34; augmented reality &#34; shows
US20080228388A1 (en) Map display apparatus for vehicle
JP2006260011A (en) Display device for vehicle
JPH10176928A (en) Viewpoint position measuring method and device, head-up display, and mirror adjustment device
JP2008018798A (en) Display controlling device, display controlling method, display controlling program, and recording medium which can be read by computer
JP4725259B2 (en) Vehicle information display device
JP2007261308A (en) Display device and program
JP4558753B2 (en) Display device
JP5177789B2 (en) Prompter type operation device for vehicles
JP2010134640A (en) Information acquisition apparatus
JP4305538B2 (en) Display device
JP4682760B2 (en) Vehicle information display device
JP2007069756A (en) Vehicle input operation restricting device
JP2004217188A (en) On-vehicle display device and display method
JP2007076381A (en) Information display device for vehicle
JP2007076383A (en) Information display unit for vehicle
JP5212920B2 (en) Vehicle display device
JP2010538884A (en) Complex navigation system for menu controlled multifunctional vehicle systems

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20091118

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120118

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120119

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120131

R151 Written notification of patent or utility model registration

Ref document number: 4930716

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150224

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees