JP2015194794A

JP2015194794A - Handling device

Info

Publication number: JP2015194794A
Application number: JP2014071047A
Authority: JP
Inventors: 栄広高橋; Shigehiro Takahashi
Original assignee: Tokai Rika Co Ltd
Current assignee: Tokai Rika Co Ltd
Priority date: 2014-03-31
Filing date: 2014-03-31
Publication date: 2015-11-05

Abstract

PROBLEM TO BE SOLVED: To provide a handling device suppressing ambiguity of an operation by gesture.SOLUTION: The handling device 1 comprises: a gesture detecting section 10 that, as shown in Figure 1(a) and Figure 1(b), detects a form of an operator's hand giving an operation command to an operating object receiving a plurality of operation commands; and an armrest 12 that supports a part of the operator's body, is disposed at such a position that the gesture detecting section 10 can detect a form of the hand, and enables an operation command by movement with respect to the operating object.

Description

本発明は、操作装置に関する。 The present invention relates to an operating device.

従来の技術として、表示部の画面上に設けられ、入力操作に基づいた操作情報を出力する操作部と、操作部の前方を撮影する撮影手段と、撮影により得られる映像から、手が、操作部の前方側近傍の第１領域及び第１領域より操作部から離れた第２領域のいずれにあるかを判定する操作物体領域判定手段と、手が第１領域にあると判定されたときに、操作部を有効にする操作部制御手段と、手が第２領域にあると判定されたときに、撮影手段から得られる映像からジェスチャを判定するジェスチャ判定手段と、ジェスチャ判定手段により判定された手の動き及び形の少なくとも一方に応じた操作情報を出力する操作情報出力手段と、を備えた操作入力装置が知られている（例えば、特許文献１参照。）。 As a conventional technique, an operation unit provided on a screen of a display unit that outputs operation information based on an input operation, a photographing unit that photographs the front of the operation unit, and a video obtained by photographing are operated by a hand. An operating object region determining means for determining whether the first region near the front side of the unit or a second region farther from the operating unit than the first region, and when the hand is determined to be in the first region The operation unit control unit that validates the operation unit, the gesture determination unit that determines a gesture from the video obtained from the photographing unit when it is determined that the hand is in the second area, and the gesture determination unit There is known an operation input device including an operation information output unit that outputs operation information corresponding to at least one of hand movement and shape (see, for example, Patent Document 1).

この操作入力装置は、手が第１領域にあると判定されると、操作部が有効になり、操作部の入力操作に基づいた操作情報が出力される。また、操作入力装置は、手が第２領域にあると判定されると、手の動き及び形の少なくとも一方である手の形態が判定され、その手の形態に基づいた操作情報が出力される。従って操作入力装置は、手ではないものが操作部の近傍に位置しても誤った入力を抑制することができる。 In this operation input device, when it is determined that the hand is in the first region, the operation unit is enabled, and operation information based on the input operation of the operation unit is output. Further, when it is determined that the hand is in the second region, the operation input device determines the shape of the hand that is at least one of the hand movement and the shape, and outputs operation information based on the shape of the hand. . Therefore, the operation input device can suppress erroneous input even if a non-hand is located in the vicinity of the operation unit.

特開２０１４−２１７４８号公報JP 2014-21748 A

しかし、従来の操作入力装置は、手を支持してジェスチャを行う訳ではないので、疲労し易く、またジェスチャによる入力が受け付けられたのか、分かり難い問題があった。 However, since the conventional operation input device does not perform the gesture while supporting the hand, there is a problem that it is easy to get tired and it is difficult to understand whether the input by the gesture is accepted.

従って、本発明の目的は、ジェスチャによる操作の曖昧さを抑制する操作装置を提供することにある。 Accordingly, an object of the present invention is to provide an operating device that suppresses ambiguity of operation by a gesture.

本発明の一態様は、複数の操作指示を受け付ける操作対象に操作指示を与える操作者の手の形態を検出する形態検出部と、操作者の体の一部を支持し、形態検出部によって手の形態が検出可能な位置に配置されると共に、操作対象に対して移動による操作指示を可能とする支持部と、を備えた操作装置を提供する。 One embodiment of the present invention supports a form detection unit that detects a form of an operator's hand that gives an operation instruction to an operation target that receives a plurality of operation instructions, and supports a part of the operator's body. Is provided at a position where it can be detected, and a support unit that enables an operation instruction by movement to the operation target is provided.

本発明によれば、ジェスチャによる操作の曖昧さを抑制することができる。 According to the present invention, it is possible to suppress the ambiguity of operations by gestures.

図１（ａ）は、第１の実施の形態に係る操作装置の搭載された車両内部の概略図であり、図１（ｂ）は、操作装置が配置されたフロアコンソール近傍の概略図であり、図１（ｃ）は、アームレストの節度を説明するための概略図である。FIG. 1A is a schematic diagram of the interior of a vehicle on which the operating device according to the first embodiment is mounted, and FIG. 1B is a schematic diagram of the vicinity of the floor console where the operating device is arranged. FIG.1 (c) is the schematic for demonstrating the moderation of an armrest. 図２（ａ）は、第１の実施の形態に係る操作装置のブロック図であり、図２（ｂ）は、操作装置が接続される車両通信システムのブロック図である。FIG. 2A is a block diagram of the operating device according to the first embodiment, and FIG. 2B is a block diagram of a vehicle communication system to which the operating device is connected. 図３（ａ）及び（ｂ）は、第１の実施の形態に係る操作装置のアームレストになされた操作と階層メニューの移動の関係を説明するための概略図である。FIGS. 3A and 3B are schematic diagrams for explaining the relationship between the operation performed on the armrest of the operation device according to the first embodiment and the movement of the hierarchical menu. 図４は、第１の実施の形態に係る操作装置の動作を説明するためのフローチャートである。FIG. 4 is a flowchart for explaining the operation of the controller device according to the first embodiment. 図５（ａ）は、第２の実施の形態に係る操作装置の概略図であり、図５（ｂ）は、操作装置のブロック図である。FIG. 5A is a schematic diagram of the operating device according to the second embodiment, and FIG. 5B is a block diagram of the operating device. 図６（ａ）は、第３の実施の形態に係る操作装置のブロック図であり、図６（ｂ）は、第４の実施の形態に係る操作装置の上面図である。FIG. 6A is a block diagram of the operating device according to the third embodiment, and FIG. 6B is a top view of the operating device according to the fourth embodiment.

（実施の形態の要約）
実施の形態に係る操作装置は、複数の操作指示を受け付ける操作対象に操作指示を与える操作者の手の形態を検出する形態検出部と、操作者の体の一部を支持し、形態検出部によって手の形態が検出可能な位置に配置されると共に、操作対象に対して移動による操作指示を可能とする支持部と、を備えて概略構成されている。 (Summary of embodiment)
An operation device according to an embodiment supports a form detection unit that detects a form of an operator's hand that gives an operation instruction to an operation target that receives a plurality of operation instructions, and a form detection unit that supports a part of the operator's body Is arranged at a position where the shape of the hand can be detected, and a support part that enables an operation instruction by movement with respect to the operation target.

この操作装置は、支持部が操作者の体の一部を支持するので手の形態（ジェスチャ）による操作が容易となると共に、支持部の移動によっても操作指示が可能となるので、確実な入力が必要な操作指示を支持部の移動により行い、その他をジェスチャによって行うことが可能となり、ジェスチャによる操作のみの場合と比べて、ジェスチャによる操作の曖昧さを抑制することができる。 In this operation device, since the support part supports a part of the operator's body, the operation by the form of the hand (gesture) becomes easy, and the operation instruction can be performed by the movement of the support part. Therefore, it is possible to perform necessary operation instructions by moving the support portion and perform other operations by gestures, and the ambiguity of operations by gestures can be suppressed as compared with the case of only operations by gestures.

[第１の実施の形態]
（操作装置１の全体構成）
図１（ａ）は、第１の実施の形態に係る操作装置の搭載された車両内部の概略図であり、図１（ｂ）は、操作装置が配置されたフロアコンソール近傍の概略図であり、図１（ｃ）は、アームレストの節度を説明するための概略図である。図２（ａ）は、第１の実施の形態に係る操作装置のブロック図であり、図２（ｂ）は、操作装置が接続される車両通信システムのブロック図である。なお、以下に記載する実施の形態に係る各図において、図形間の比率は、実際の比率とは異なる場合がある。また図２（ａ）及び図２（ｂ）では、主な信号や情報の流れを矢印で示している。 [First embodiment]
(Overall configuration of operation device 1)
FIG. 1A is a schematic diagram of the interior of a vehicle on which the operating device according to the first embodiment is mounted, and FIG. 1B is a schematic diagram of the vicinity of the floor console where the operating device is arranged. FIG.1 (c) is the schematic for demonstrating the moderation of an armrest. FIG. 2A is a block diagram of the operating device according to the first embodiment, and FIG. 2B is a block diagram of a vehicle communication system to which the operating device is connected. Note that, in each drawing according to the embodiment described below, the ratio between figures may be different from the actual ratio. 2A and 2B, main signals and information flows are indicated by arrows.

この操作装置１は、図１（ａ）に示すように、車両４の運手席と助手席の間のフロアコンソール４０に配置されている。操作装置１は、例えば、この車両４に搭載された操作対象を操作するように構成されている。 As shown in FIG. 1A, the operating device 1 is disposed on a floor console 40 between a driver seat and a passenger seat of the vehicle 4. The operating device 1 is configured, for example, to operate an operation target mounted on the vehicle 4.

操作装置１は、図１（ａ）及び図１（ｂ）に示すように、複数の操作指示を受け付ける操作対象に操作指示を与える操作者の手の形態を検出する形態検出部としてのジェスチャ検出部１０と、操作者の体の一部を支持し、ジェスチャ検出部１０によって手の形態が検出可能な位置に配置されると共に、操作対象に対して移動による操作指示を可能とする支持部としてのアームレスト１２と、を備えて概略構成されている。 As shown in FIGS. 1A and 1B, the operation device 1 detects a gesture as a form detection unit that detects the form of an operator's hand that gives an operation instruction to an operation target that receives a plurality of operation instructions. As a support unit that supports part 10 and part of the operator's body, is arranged at a position where the shape of the hand can be detected by gesture detection unit 10, and enables operation instructions by movement with respect to the operation target The armrest 12 is generally configured.

この手の形態とは、手によって行われるジェスチャである。またアームレスト１２は、例えば、図１（ｂ）に示すように、操作者の体の一部としての操作者の手９の手首９ａ又は腕９ｂを支持するものとする。 This form of hand is a gesture made by the hand. Moreover, the armrest 12 shall support the wrist 9a or the arm 9b of the operator's hand 9 as a part of an operator's body, for example, as shown in FIG.1 (b).

この操作装置１は、ジェスチャによる操作、及びアームレスト１２の移動による操作を行うことが可能となるように構成されている。 The operation device 1 is configured to be able to perform an operation by a gesture and an operation by moving the armrest 12.

また操作装置１は、図２（ａ）に示すように、車両通信システム４５の車両ＬＡＮ（Local Area Network）４６と電磁気的に接続される。なお、この電磁気的に接続とは、導電体による接続、電磁波の一種である光による接続、及び電磁波の一種である電波による接続の少なくとも１つを用いた接続である。 Further, the controller device 1 is electromagnetically connected to a vehicle LAN (Local Area Network) 46 of the vehicle communication system 45 as shown in FIG. The electromagnetic connection is a connection using at least one of a connection using a conductor, a connection using light which is a kind of electromagnetic wave, and a connection using radio wave which is a kind of electromagnetic wave.

（ジェスチャ検出部１０の構成）
ジェスチャ検出部１０は、手の形態に基づく複数のジェスチャを検出するように構成されている。このジェスチャ検出部１０は、後述するステレオカメラ（撮像部１０１）が撮像した画像の差分等に基づいて、ジェスチャ検出部１０の上方の左右、上下及び前後の三次元の検出空間１００におけるジェスチャを検出するように構成されている。 (Configuration of the gesture detection unit 10)
The gesture detection unit 10 is configured to detect a plurality of gestures based on the shape of the hand. The gesture detection unit 10 detects a gesture in the three-dimensional detection space 100 on the left, right, up, down, and front and rear of the gesture detection unit 10 based on a difference between images captured by a stereo camera (imaging unit 101) described later. Is configured to do.

ジェスチャ検出部１０が検出するジェスチャによる操作は、一例として、手や操作指を回転させる回転操作、手を横方向に振るスワイプ操作、キーボードのキーを叩くようなキー操作、仮想の画面をタップするようなタップ操作、手を前後方向に移動させる奥行操作、操作指を開くようなピンチアウト操作、操作指を閉じるようなピンチイン操作、仮想の画面をはらうようなフリック操作等である。なお前後とは、アームレスト１２が移動する方向、つまり車両４の前後方向である。また横方向とは、前後方向とは交差する方向、つまり車両４の左右方向である。 For example, the operation by the gesture detected by the gesture detection unit 10 is a rotation operation for rotating a hand or an operation finger, a swipe operation for shaking a hand horizontally, a key operation for hitting a keyboard key, or a tap on a virtual screen. Such a tap operation, a depth operation for moving the hand back and forth, a pinch-out operation for opening an operation finger, a pinch-in operation for closing an operation finger, a flick operation for opening a virtual screen, and the like. The front and rear are directions in which the armrest 12 moves, that is, the front and rear direction of the vehicle 4. Further, the lateral direction is a direction intersecting with the front-rear direction, that is, the left-right direction of the vehicle 4.

回転操作は、一例として、手の回転に基づいて、表示装置５に表示された立体を回転させる操作である。スワイプ操作は、一例として、手の振りに基づいて、表示装置５に表示された表示画像を、他の表示画像に切り替えさせる操作である。キー操作は、一例として、操作指によるキーを叩く動作に基づいて、仮想的なキーボードを用いて入力を行う操作である。タップ操作は、一例として、操作指による仮想的な画面をタップする動作に基づいて、入力を行う操作である。奥行操作は、一例として、手を前後に移動させる動作に基づいて、複数の階層からなるメニュー等を、他の階層に切り替えさせる操作である。ピンチアウト操作は、一例として、操作指の移動量に基づいて表示画像を拡大させる操作である。ピンチイン操作は、一例として、操作指の移動量に基づいて表示画像を縮小させる操作である。フリック操作は、一例として、スワイプ操作と似た操作であり、本のページをめくるように、表示装置５に表示された表示画像を、他の表示画像に切り替えさせる操作である。 For example, the rotation operation is an operation of rotating a solid displayed on the display device 5 based on the rotation of the hand. As an example, the swipe operation is an operation of switching the display image displayed on the display device 5 to another display image based on a hand shake. For example, the key operation is an operation of performing input using a virtual keyboard based on an operation of hitting a key with an operation finger. As an example, the tap operation is an operation for performing input based on an operation of tapping a virtual screen with an operation finger. Depth operation is operation which switches the menu etc. which consist of a several hierarchy to another hierarchy based on the operation | movement which moves a hand back and forth as an example. As an example, the pinch-out operation is an operation for enlarging the display image based on the movement amount of the operation finger. For example, the pinch-in operation is an operation for reducing the display image based on the movement amount of the operation finger. For example, the flick operation is an operation similar to the swipe operation, and is an operation for switching the display image displayed on the display device 5 to another display image so as to turn the page of the book.

このジェスチャ検出部１０は、図２（ａ）に示すように、撮像部１０１と、照明部１０２と、判定部１０３と、を備えて概略構成されている。 As shown in FIG. 2A, the gesture detection unit 10 is schematically configured to include an imaging unit 101, an illumination unit 102, and a determination unit 103.

撮像部１０１は、例えば、ＣＣＤ（Charge Coupled Device）及びＣＭＯＳ（Complementary Metal-Oxide Semiconductor）等の撮像素子を備えている。さらに本実施の形態の撮像部１０１は、ステレオカメラ、つまり２つの撮像素子が間隔を空けて配置されている。この撮像部１０１は、２つの撮像素子により、実質的に同じタイミングで検出空間１００内の手９を撮像し、撮像した２つの画像の情報を含む撮像情報Ｓ_１を出力するように構成されている。 The imaging unit 101 includes an imaging element such as a charge coupled device (CCD) and a complementary metal-oxide semiconductor (CMOS), for example. Furthermore, the imaging unit 101 of the present embodiment is a stereo camera, that is, two imaging elements are arranged at an interval. The imaging unit 101, the two imaging devices, substantially image the hand 9 in the detection space 100 at the same timing, is configured to output imaging information S ₁ including information of two images captured Yes.

照明部１０２は、例えば、発光素子を有している。この発光素子は、例えば、赤外線領域の光を出力するように構成されている。この光は、例えば、可視光以外の赤外線であることが好ましい。従って発光素子は、一例として、７８０ｎｍよりも長い波長の赤外線の光を出力するように構成されている。この照明部１０２は、判定部１０３から出力された点灯信号Ｓ_２に基づいて、検出空間１００内の手９を照明するように構成されている。また照明部１０２は、例えば、撮像部１０１の周囲に少なくとも１つ配置されている。 The illumination unit 102 includes, for example, a light emitting element. This light emitting element is configured to output light in the infrared region, for example. This light is preferably infrared light other than visible light, for example. Therefore, as an example, the light emitting element is configured to output infrared light having a wavelength longer than 780 nm. The illumination unit 102 based on the lighting signal S ₂ output from the determination unit 103 is configured to illuminate the hand 9 in the detection space 100. For example, at least one illumination unit 102 is disposed around the imaging unit 101.

判定部１０３は、例えば、記憶されたプログラムに従って、取得したデータに演算、加工等を行うＣＰＵ（Central Processing Unit）、半導体メモリであるＲＡＭ（Random Access Memory）及びＲＯＭ（Read Only Memory）等から構成されるマイクロコンピュータである。このＲＯＭには、例えば、判定部１０３が動作するためのプログラムが格納されている。ＲＡＭは、例えば、一時的に演算結果等を格納する記憶領域として用いられる。 The determination unit 103 includes, for example, a CPU (Central Processing Unit) that performs operations and processing on acquired data according to a stored program, a RAM (Random Access Memory) that is a semiconductor memory, a ROM (Read Only Memory), and the like. Microcomputer. In this ROM, for example, a program for operating the determination unit 103 is stored. For example, the RAM is used as a storage area for temporarily storing calculation results and the like.

この判定部１０３は、例えば、取得した撮像情報Ｓ_１を処理して、操作指９０を抽出し、この操作指９０の位置に基づいてジェスチャを判定するように概略構成されている。この操作指９０とは、親指、人差指、薬指、中指及び小指である。判定部１０３は、例えば、取得した撮像情報Ｓ_１に基づいて二値化処理及び差分処理等を行って操作指９０を検出し、検出した操作指９０の時間変化等に基づいてジェスチャを判定する。 For example, the determination unit 103 is configured to process the acquired imaging information S ₁ , extract the operation finger 90, and determine a gesture based on the position of the operation finger 90. The operation fingers 90 are a thumb, an index finger, a ring finger, a middle finger, and a little finger. Determination unit 103 determines, for example, detects an operation finger 90 performs binarization processing and differential processing, etc. on the basis of the imaging information S ₁ acquired, the gesture based on the time change of the detected operation fingers 90 .

判定部１０３は、判定した結果に基づいて判定情報Ｓ_３を生成して制御部１８に出力するように構成されている。 Determination unit 103 is configured to output to the control unit 18 generates the determination information S ₃ based on the judgment result.

（アームレスト１２の構成）
このアームレスト１２は、図１（ｃ）に示すように、ジェスチャ検出部１０に向かう方向（前方向：矢印Ａ方向）、ジェスチャ検出部１０から離れる方向（後方向：矢印Ｂ方向）に移動するように構成されている。アームレスト１２は、一例として、中立位置から矢印Ａ方向に４段階、矢印Ｂ方向に４段階の操作位置を有する。このアームレスト１２の移動による操作指示は、ジェスチャによって指定される操作指示の一部の操作指示である。なお操作位置は、これに限定されず、用途に応じて任意である。 (Configuration of armrest 12)
As shown in FIG. 1C, the armrest 12 moves in a direction toward the gesture detection unit 10 (forward direction: arrow A direction) and away from the gesture detection unit 10 (rear direction: arrow B direction). It is configured. As an example, the armrest 12 has four operation positions in the arrow A direction and four operation positions in the arrow B direction from the neutral position. The operation instruction by the movement of the armrest 12 is a part of the operation instruction specified by the gesture. The operation position is not limited to this, and is arbitrary depending on the application.

アームレスト１２は、図１（ｂ）及び図１（ｃ）に示すように、台座１３と、移動機構部１４と、リニアセンサ１５と、を備えている。 As shown in FIGS. 1B and 1C, the armrest 12 includes a pedestal 13, a moving mechanism unit 14, and a linear sensor 15.

台座１３は、操作者の手首９ａ又は腕９ｂを支持し、操作者がジェスチャを安定して行い易いように補助するものである。この台座１３は、手首９ａ及び腕９ｂを支持するように、中央が凹んだ横長の形状を有している。台座１３は、例えば、置かれた手首９ａや腕９ｂにフィットするように変形するウレタン等の樹脂が内部に設けられている。 The pedestal 13 supports the wrist 9a or the arm 9b of the operator and assists the operator so as to easily perform the gesture stably. The pedestal 13 has a horizontally long shape with a recessed center so as to support the wrist 9a and the arm 9b. The pedestal 13 is provided with, for example, a resin such as urethane that is deformed so as to be fitted to the wrist 9a or the arm 9b.

移動機構部１４は、ジェスチャ検出部１０に対する台座１３の移動を実現する機構を有している。この移動機構部１４は、図１（ｂ）及び図１（ｃ）に示すように、シャフト１４０と、スライダ１４１と、レール１４２と、を備えて概略構成されている。 The movement mechanism unit 14 has a mechanism for realizing the movement of the base 13 with respect to the gesture detection unit 10. As shown in FIGS. 1B and 1C, the moving mechanism unit 14 is roughly configured to include a shaft 140, a slider 141, and a rail 142.

シャフト１４０は、フロアコンソール４０側の台座１３の下面から突出するように設けられている。このシャフト１４０は、例えば、四角柱形状を有している。このシャフト１４０の端部には、スライダ１４１が取り付けられている。フロアコンソール４０は、このシャフト１４０が移動するための開口が設けられている。 The shaft 140 is provided so as to protrude from the lower surface of the base 13 on the floor console 40 side. The shaft 140 has, for example, a quadrangular prism shape. A slider 141 is attached to the end of the shaft 140. The floor console 40 is provided with an opening through which the shaft 140 moves.

スライダ１４１は、例えば、筒形状を有している。このスライダ１４１の貫通孔には、レール１４２が相対移動可能に挿入されている。 The slider 141 has a cylindrical shape, for example. A rail 142 is inserted into the through hole of the slider 141 so as to be relatively movable.

またスライダ１４１の側面には、図１（ｂ）及び図１（ｃ）に示すように、側面から貫通孔に繋がる開口１４１ａが設けられている。この開口１４１ａには、弾性部材１４１ｂの先端部が挿入されている。この先端部の両端部は、スライダ１４１の側面に取り付けられ、弾性部材１４１ｂの開口１４１ａからの抜けを抑制している。 Further, as shown in FIGS. 1B and 1C, an opening 141 a that connects the side surface to the through hole is provided on the side surface of the slider 141. The distal end portion of the elastic member 141b is inserted into the opening 141a. Both end portions of the tip portion are attached to the side surface of the slider 141, and the elastic member 141b is prevented from coming off from the opening 141a.

弾性部材１４１ｂは、細長い板を曲げて形成された半円形状を有し、レール１４２側に突出すると共に、両端部がスライダ１４１に取り付けられている。 The elastic member 141 b has a semicircular shape formed by bending an elongated plate, protrudes toward the rail 142, and both ends are attached to the slider 141.

レール１４２は、図１（ｃ）に示すように、細長い四角柱形状を有している。このレール１４２には、スライダ１４１の弾性部材１４１ｂ側の側面に、複数の凹部が形成されている。この複数の凹部とは、図１（ｃ）に示すように、凹部１４２ａ〜凹部１４２ｉである。従ってアームレスト１２は、一例として、中立位置を含む９つの操作位置を有している。なお操作位置は、９つに限定されず、任意である。中立位置は、一例として、凹部１４２ｅである。この凹部１４２ｅに弾性部材１４１ｂが位置する場合、アームレスト１２は、中立位置にあるものとする。 As shown in FIG. 1C, the rail 142 has an elongated quadrangular prism shape. The rail 142 has a plurality of recesses formed on the side surface of the slider 141 on the elastic member 141b side. The plurality of recesses are a recess 142a to a recess 142i as shown in FIG. Therefore, the armrest 12 has nine operation positions including a neutral position as an example. The operation position is not limited to nine and is arbitrary. As an example, the neutral position is the recess 142e. When the elastic member 141b is located in the recess 142e, the armrest 12 is assumed to be in the neutral position.

この弾性部材１４１ｂと凹部１４２ａ〜凹部１４２ｉは、アームレスト１２の操作位置に応じた節度を形成している。従って操作者は、アームレスト１２を矢印Ａ方向及び矢印Ｂ方向に操作すると、各操作位置に応じて節度を感じることが可能となる。 The elastic member 141b and the recesses 142a to 142i form a moderation according to the operation position of the armrest 12. Therefore, when the operator operates the armrest 12 in the direction of the arrow A and the direction of the arrow B, it becomes possible to feel moderation according to each operation position.

操作者がアームレスト１２を前方向、又は後方向に移動させると、台座１３、シャフト１４０を介してスライダ１４１が、レール１４２に対して移動する。この移動に伴って、凹部１４２ｅに嵌っていた弾性部材１４１ｂが、凹部１４２ｅの側面に押されて変形する。さらにアームレスト１２が移動すると、凹部１４２ｅから弾性部材１４１ｂの先端部が抜け出して操作方向の凹部に嵌る。この弾性部材１４１ｂが変形して隣の凹部に嵌る際に操作者が感じる操作感が節度となる。 When the operator moves the armrest 12 forward or backward, the slider 141 moves with respect to the rail 142 via the base 13 and the shaft 140. Along with this movement, the elastic member 141b fitted in the recess 142e is pushed and deformed by the side surface of the recess 142e. When the armrest 12 further moves, the tip of the elastic member 141b comes out of the recess 142e and fits into the recess in the operation direction. The operational feeling felt by the operator when the elastic member 141b is deformed and fits into the adjacent concave portion is moderate.

（リニアセンサ１５の構成）
リニアセンサ１５は、フロアコンソール４０に対するアームレスト１２の移動を検出し、検出情報Ｓ_４を出力するように構成されている。このリニアセンサ１５は、例えば、スライダ１４１の移動する方向に沿って延びた形状を有し、スライダ１４１の移動を検出するように構成されている。 (Configuration of linear sensor 15)
Linear sensor 15 detects the movement of the armrest 12 for the floor console 40, and is configured to output the detection information S _4. For example, the linear sensor 15 has a shape extending along the direction in which the slider 141 moves, and is configured to detect the movement of the slider 141.

リニアセンサ１５は、一例として、凹部１４２ａ〜凹部１４２ｉに応じて磁気検出素子を配置すると共に、スライダ１４１に磁石を配置し、その磁石の磁場を検出した磁気検出素子により、スライダ１４１の位置を検出する構成を有する。なおリニアセンサ１５は、磁気検出素子を用いた構成に限定されず、複数の受光素子を配置すると共に、スライダ１４１に発光素子を配置し、光を検出した受光素子により、スライダ１４１の位置を検出する構成等であっても良い。 As an example, the linear sensor 15 arranges magnetic detection elements according to the concave portions 142a to 142i, arranges a magnet on the slider 141, and detects the position of the slider 141 by the magnetic detection element that detects the magnetic field of the magnet. It has the composition to do. The linear sensor 15 is not limited to a configuration using a magnetic detection element, and a plurality of light receiving elements are arranged and a light emitting element is arranged on the slider 141, and the position of the slider 141 is detected by the light receiving element that detects light. The structure etc. to perform may be sufficient.

また変形例として、リニアセンサ１５は、スライダ１４１の位置を検出する検出素子を備えたレール１４２として構成されても良い。またリニアセンサ１５は、例えば、節度に応じてスイッチが導通する構成であっても良く、スライダ１４１の位置を検出可能な構成であれば様々な位置検出機構を使用することが可能である。 As a modification, the linear sensor 15 may be configured as a rail 142 provided with a detection element that detects the position of the slider 141. For example, the linear sensor 15 may have a configuration in which a switch is turned on according to moderation, and various position detection mechanisms can be used as long as the position of the slider 141 can be detected.

（通信部１６の構成）
通信部１６は、車両４の車両ＬＡＮ４６を介して、車両制御部４７等と信号及び情報の交換を行うことが可能となるように構成されている。 (Configuration of communication unit 16)
The communication unit 16 is configured to be able to exchange signals and information with the vehicle control unit 47 and the like via the vehicle LAN 46 of the vehicle 4.

（制御部１８の構成）
制御部１８は、例えば、記憶されたプログラムに従って、取得したデータに演算、加工等を行うＣＰＵ（Central Processing Unit）、半導体メモリであるＲＡＭ（Random Access Memory）及びＲＯＭ（Read Only Memory）等から構成されるマイクロコンピュータである。このＲＯＭには、例えば、制御部１８が動作するためのプログラムが格納されている。ＲＡＭは、例えば、一時的に演算結果等を格納する記憶領域として用いられる。 (Configuration of control unit 18)
The control unit 18 includes, for example, a CPU (Central Processing Unit) that performs operations and processes on acquired data according to a stored program, a RAM (Random Access Memory) that is a semiconductor memory, a ROM (Read Only Memory), and the like. Microcomputer. In this ROM, for example, a program for operating the control unit 18 is stored. For example, the RAM is used as a storage area for temporarily storing calculation results and the like.

この制御部１８は、取得した判定情報Ｓ_３及び検出情報Ｓ_４に基づいて操作情報Ｓ_５を生成するように構成されている。この操作情報Ｓ_５は、操作対象に行う操作指示の情報を含むものである。制御部１８は、この操作情報Ｓ_５を通信部１６、車両ＬＡＮ４６を介して操作対象に出力する。 The control unit 18 is configured to generate the operation information S ₅ based on the decision information S ₃ and the detection information S ₄ were obtained. The operation information S ₅ is intended to include information of the operation instruction to perform the operation target. Control unit 18 outputs the operation information _{S 5} communication unit 16, the operation target via the vehicle LAN 46.

本実施の形態では、アームレスト１２の移動による操作指示は、ジェスチャによって行われる操作指示を補うものであるので、制御部１８は、判定情報Ｓ_３よりも検出情報Ｓ_４を優先して操作情報Ｓ_５を生成する。 In this embodiment, an operation instruction by the movement of the armrest 12, since it is a supplement to an operation instruction made by the gesture, the control unit 18, the operation in favor of detection information S ₄ than the determination information S ₃ information S ₅ is generated.

なお変形例として、制御部１８は、ジェスチャによる操作指示とアームレスト１２による操作指示と、の組み合わせに基づく操作情報Ｓ_５を出力するように構成されても良い。 Note Alternatively, control unit 18 may be configured to output the operation instruction by the operation instruction and the armrest 12 with the gesture, the operation information S ₅ based on the combination of.

（車両通信システム４５の構成）
車両通信システム４５は、主に、車両ＬＡＮ４６と、車両制御部４７と、を備えて構成している。この車両通信システム４５の車両ＬＡＮ４６には、図２（ｂ）に示すように、表示装置５と、空調装置６と、ナビゲーション装置７と、音楽再生装置８と、が電磁気的に接続されている。操作装置１は、例えば、表示装置５、空調装置６、ナビゲーション装置７及び音楽再生装置８を操作対象として操作可能である。 (Configuration of vehicle communication system 45)
The vehicle communication system 45 mainly includes a vehicle LAN 46 and a vehicle control unit 47. As shown in FIG. 2 (b), the display device 5, the air conditioner 6, the navigation device 7, and the music playback device 8 are electromagnetically connected to the vehicle LAN 46 of the vehicle communication system 45. . For example, the operation device 1 can be operated with the display device 5, the air conditioner 6, the navigation device 7, and the music playback device 8 as operation targets.

車両ＬＡＮ４６は、例えば、有線及び無線により、車両４に搭載された複数の電子機器と接続され、相互の情報等の交換を可能とするネットワークである。 The vehicle LAN 46 is a network that is connected to a plurality of electronic devices mounted on the vehicle 4 by, for example, wired and wireless, and enables mutual exchange of information and the like.

車両制御部４７は、例えば、ＣＰＵ、半導体メモリであるＲＡＭ及びＲＯＭ等から構成されるマイクロコンピュータである。この車両制御部４７は、例えば、車両４に搭載された電子機器等を総合的に制御している。 The vehicle control unit 47 is a microcomputer including, for example, a CPU, a RAM and a ROM that are semiconductor memories. The vehicle control unit 47 comprehensively controls, for example, electronic devices mounted on the vehicle 4.

表示装置５は、例えば、操作対象の電子機器の表示部として機能するように構成されている。この表示装置５は、例えば、液晶モニタである。 For example, the display device 5 is configured to function as a display unit of an electronic device to be operated. The display device 5 is, for example, a liquid crystal monitor.

空調装置６は、車両４の車室内に温度調整された空気を送出する電子機器である。この空調装置６は、例えば、送出する空気の温度の設定、温度調整された空気の風量、温度調整された空気の吹出し口の選択等を行うことが可能である。本実施の形態では、操作装置１は、この空調装置６を操作対象として操作する場合について説明する。 The air conditioner 6 is an electronic device that sends out temperature-adjusted air into the passenger compartment of the vehicle 4. For example, the air conditioner 6 can set the temperature of the air to be sent out, select the air volume of the temperature adjusted air, select the air outlet of the temperature adjusted, and the like. In the present embodiment, a case will be described in which the controller device 1 operates the air conditioner 6 as an operation target.

ナビゲーション装置７は、表示装置５に地図を表示させると共に、車両４の現在の位置、設定された目的地、現在地から目的地までの経路等を表示させる電子機器である。 The navigation device 7 is an electronic device that displays a map on the display device 5 and displays the current position of the vehicle 4, a set destination, a route from the current location to the destination, and the like.

音楽再生装置８は、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disc）、半導体メモリ等の記録媒体に記憶された音楽データを再生する電子機器である。また音楽再生装置８は、音楽の再生に加えて、映像の再生が行えるように構成されても良い。 The music playback device 8 is an electronic device that plays back music data stored in a recording medium such as a CD (Compact Disc), a DVD (Digital Versatile Disc), or a semiconductor memory. Further, the music playback device 8 may be configured to play back video in addition to playing back music.

ここで、操作装置１のアームレスト１２の移動による操作指示に対応した、空調装置６の階層メニューについて説明する。なおアームレスト１２の操作によって上げ下げされる階層は、下記の階層メニュー６０に限定されない。またアームレスト１２の操作は、階層の上げ下げに限定されず、メニューの切り替え、操作対象の切り替え、ページ送り等を行う操作であっても良い。 Here, the hierarchical menu of the air conditioner 6 corresponding to the operation instruction by the movement of the armrest 12 of the controller device 1 will be described. Note that the level raised or lowered by the operation of the armrest 12 is not limited to the following level menu 60. The operation of the armrest 12 is not limited to raising and lowering the hierarchy, and may be an operation for switching menus, switching operation targets, page turning, and the like.

（空調装置６の階層メニュー６０について）
図３（ａ）及び（ｂ）は、第１の実施の形態に係る操作装置のアームレストになされた操作と階層メニューの移動の関係を説明するための概略図である。図３（ａ）は、アームレスト１２の矢印Ａ方向（前方向）の操作を示している。図３（ｂ）は、アームレスト１２の矢印Ｂ方向（後方向）の操作を示している。 (Regarding the hierarchical menu 60 of the air conditioner 6)
FIGS. 3A and 3B are schematic diagrams for explaining the relationship between the operation performed on the armrest of the operation device according to the first embodiment and the movement of the hierarchical menu. FIG. 3A shows the operation of the armrest 12 in the direction of arrow A (forward direction). FIG. 3B shows an operation of the armrest 12 in the arrow B direction (rearward direction).

まず、空調装置６の階層メニュー６０とは、例えば、メニューの項目を選ぶとその中に複数の項目がある、といったように、複数の階層をもつメニューのことであり、階層ごとに表示装置５に表示される画像が切り替わるものである。 First, the hierarchical menu 60 of the air conditioner 6 is a menu having a plurality of layers, for example, when a menu item is selected, there are a plurality of items in the menu, and the display device 5 is provided for each layer. The image displayed on is switched.

階層メニュー６０は、一例として、図３（ａ）の紙面右側に示すように、第１の階層６１〜第５の階層６５を備えている。以下では、第１の階層６１から第５の階層６５に向かうことを下の階層への移動と記載し、その逆を上の階層への移動と記載する。なお階層メニュー６０は、電子機器の仕様に応じて任意である。 As an example, the hierarchy menu 60 includes a first hierarchy 61 to a fifth hierarchy 65 as shown on the right side of FIG. Hereinafter, going from the first hierarchy 61 to the fifth hierarchy 65 is referred to as a movement to a lower hierarchy, and the opposite is referred to as a movement to an upper hierarchy. The hierarchical menu 60 is arbitrary according to the specifications of the electronic device.

第１の階層６１は、図３（ａ）に示すように、空調装置６を選択するための階層である。この第１の階層６１には、「空調」の文字画像が表示されたアイコン５０１と、「ナビ」の文字画像が表示されたアイコン５０２と、「音楽」の文字画像が表示されたアイコン５０３と、が表示されている。 The 1st hierarchy 61 is a hierarchy for selecting the air conditioner 6, as shown to Fig.3 (a). The first hierarchy 61 includes an icon 501 displaying a character image of “air conditioning”, an icon 502 displaying a character image of “navigation”, and an icon 503 displaying a character image of “music”. , Is displayed.

アイコン５０１は、例えば、空調装置６を操作する際に選択されるアイコンである。アイコン５０２は、例えば、ナビゲーション装置７を操作する際に選択されるアイコンである。アイコン５０３は、例えば、音楽再生装置８を操作する際に選択されるアイコンである。 The icon 501 is an icon selected when operating the air conditioner 6, for example. The icon 502 is an icon that is selected when the navigation device 7 is operated, for example. The icon 503 is an icon that is selected when the music playback device 8 is operated, for example.

このアイコン５０１〜アイコン５０３の選択は、例えば、１本の操作指で所望のアイコンをタップするような、上述のタップ操作により行われる。 The selection of the icons 501 to 503 is performed, for example, by the above-described tap operation in which a desired icon is tapped with one operating finger.

第２の階層６２は、運転席の設定を確認及び変更するための階層である。この第２の階層６２には、例えば、送出される空気の設定温度、風量、吹出し口等が確認及び変更可能となっている。 The second level 62 is a level for confirming and changing the setting of the driver's seat. In the second level 62, for example, the set temperature, the air volume, the outlet, etc. of the air to be sent can be confirmed and changed.

第３の階層６３は、助手席の設定を確認及び変更するための階層である。この第３の階層６３には、例えば、送出される空気の設定温度、風量、吹出し口等が確認及び変更可能となっている。 The third level 63 is a level for confirming and changing the setting of the passenger seat. In the third level 63, for example, the set temperature, the air volume, the air outlet, etc. of the air to be sent can be confirmed and changed.

第４の階層６４は、詳細な設定を確認及び変更するための階層である。この詳細な設定とは、例えば、運転席と助手席の設定温度を独立に設定するモードのオン、オフの設定、吹出し口を首降りさせる設定等である。 The fourth hierarchy 64 is a hierarchy for confirming and changing detailed settings. This detailed setting is, for example, on / off setting of a mode for setting the set temperatures of the driver's seat and the passenger's seat independently, and setting for lowering the outlet.

第５の階層６５は、後部座席の設定を確認及び変更するための階層である。この第５の階層６５には、例えば、後部座席における、送出される空気の設定温度、風量、吹出し口等が確認及び変更可能となっている。 The fifth layer 65 is a layer for confirming and changing the setting of the rear seat. In the fifth level 65, for example, the set temperature, the air volume, the air outlet, and the like of the air to be sent out in the rear seat can be confirmed and changed.

操作者は、上述の前方向の奥行操作を行うことによって、下の階層への移動を操作指示することが可能である。また操作者は、上述の後方向の奥行操作を行うことによって、上の階層への移動を操作指示することが可能である。この奥行操作は、例えば、ジェスチャ検出部１０によって検出された手の移動量に応じて、階層が切り替わる操作である。 The operator can instruct to move to a lower hierarchy by performing the above-described forward depth operation. In addition, the operator can give an operation instruction to move to an upper hierarchy by performing the above-described backward depth operation. This depth operation is, for example, an operation of switching the hierarchy according to the movement amount of the hand detected by the gesture detection unit 10.

しかし、このジェスチャによる奥行操作は、例えば、次の階層に表示を切り替えるための手の移動量が曖昧で操作者には分かり辛い可能性がある。そこで、本実施の形態の操作装置１は、アームレスト１２の操作によって、ジェスチャによる操作の補助を可能としている。 However, the depth operation by this gesture may be difficult for the operator because the amount of movement of the hand for switching the display to the next layer is ambiguous, for example. Therefore, the operation device 1 according to the present embodiment can assist the operation by the gesture by operating the armrest 12.

アームレスト１２による階層の切り替えは、次のような操作によって行われる。現在表示画面５０に表示画像５１として表示されている階層メニュー６０の階層を下げる場合、操作者は、アームレスト１２を前方向（矢印Ａ方向）に移動させる。この移動により、リニアセンサ１５がアームレスト１２の操作位置を検出する。制御部１８は、検出された操作位置に応じた操作情報Ｓ_５を出力する。空調装置６は、車両ＬＡＮ４６を介して操作情報Ｓ_５を取得すると、操作位置に応じて階層を下げて、表示装置５に表示させる。 The hierarchy switching by the armrest 12 is performed by the following operation. When lowering the hierarchy of the hierarchy menu 60 currently displayed as the display image 51 on the display screen 50, the operator moves the armrest 12 in the forward direction (arrow A direction). By this movement, the linear sensor 15 detects the operation position of the armrest 12. Control unit 18 outputs the operation information S ₅ corresponding to the detected operation positions. Air conditioning system 6 acquires the operation information S ₅ via the vehicle LAN 46, to lower the hierarchy according to the operation position on the display device 5.

図３（ａ）に示すように、第１の階層６１が表示画面５０に表示されている場合、矢印Ａ方向の操作により、第１の階層６１から第５の階層６５まで順番に階層が下がって表示画面５０に表示される。アームレスト１２には、節度があるので、節度ごと、つまり、中立位置にある場合は、凹部１４２ｅから凹部１４２ａに基づく節度ごとに階層が下がって表示される。 As shown in FIG. 3A, when the first hierarchy 61 is displayed on the display screen 50, the hierarchy descends in order from the first hierarchy 61 to the fifth hierarchy 65 by the operation in the arrow A direction. Are displayed on the display screen 50. Since the armrest 12 has a moderation, when the armrest 12 is in the neutral position, that is, in the neutral position, the hierarchy is displayed from the recess 142e to the moderation based on the recess 142a.

また現在表示画面５０に表示画像５１として表示されている階層メニュー６０の階層を上げる場合、操作者は、アームレスト１２を後方向（矢印Ｂ方向）に移動させる。この移動により、リニアセンサ１５がアームレスト１２の操作位置を検出する。制御部１８は、検出された操作位置に応じた操作情報Ｓ_５を出力する。空調装置６は、車両ＬＡＮ４６を介して操作情報Ｓ_５を取得すると、操作位置に応じて階層を上げて、表示装置５に表示させる。 When the level of the level menu 60 currently displayed as the display image 51 on the display screen 50 is raised, the operator moves the armrest 12 in the backward direction (arrow B direction). By this movement, the linear sensor 15 detects the operation position of the armrest 12. Control unit 18 outputs the operation information S ₅ corresponding to the detected operation positions. Air conditioning system 6 acquires the operation information S ₅ via the vehicle LAN 46, to raise the hierarchy according to the operation position on the display device 5.

図３（ｂ）に示すように、第４の階層６４が表示画面５０に表示されている場合、矢印Ｂ方向の操作により、第４の階層６４から第１の階層６１まで順番に階層が上がって表示画面５０に表示される。アームレスト１２の操作により第４の階層６４が表示されている場合、凹部１４２ｈから凹部１４２ｅに基づく節度ごとに階層が上がって表示される。 As shown in FIG. 3B, when the fourth hierarchy 64 is displayed on the display screen 50, the hierarchy rises in order from the fourth hierarchy 64 to the first hierarchy 61 by the operation in the arrow B direction. Are displayed on the display screen 50. When the 4th hierarchy 64 is displayed by operation of the armrest 12, a hierarchy is raised and displayed for every moderation based on the recessed part 142e from the recessed part 142h.

なお、階層は、ジェスチャによっても上げ下げ可能であるので、アームレスト１２の操作位置と階層とは、必ずしも一対一の対応とはならない。変形例として、アームレスト１２の操作位置と階層メニュー６０の階層とが、一対一に対応するように構成されても良い。 In addition, since a hierarchy can be raised or lowered by a gesture, the operation position of the armrest 12 and the hierarchy do not necessarily have a one-to-one correspondence. As a modification, the operation position of the armrest 12 and the hierarchy of the hierarchy menu 60 may be configured to correspond one-to-one.

以下に、操作装置１の動作について、図４のフローチャートに従って説明する。 Below, operation | movement of the operating device 1 is demonstrated according to the flowchart of FIG.

（動作）
車両４の電源が投入されると、操作装置１の制御部１８は、ジェスチャ検出部１０から判定情報Ｓ_３と、リニアセンサ１５から検出情報Ｓ_４と、を取得する。 (Operation)
When the power of the vehicle 4 is turned on, the control unit 18 of the controller device 1 acquires the determination information S ₃ from the gesture detection unit 10 and the detection information S ₄ from the linear sensor 15.

制御部１８は、判定情報Ｓ_３に基づいてジェスチャが検出されたと判定すると（Ｓ１：Ｙｅｓ）、検出情報Ｓ_４に基づいてアームレスト１２の操作を確認する。 Control unit 18 determines that the gesture is detected on the basis of the determination information _{S 3} (S1: Yes), to confirm the operation of the armrest 12 on the basis of the detected information _{S 4.}

制御部１８は、アームレスト１２の操作がなされたと判定すると（Ｓ２：Ｙｅｓ）、アームレスト１２の操作を優先して操作情報Ｓ_５を生成し、通信部１６を介して車両通信システム４５に出力する（Ｓ３）。操作対象の電子機器は、例えば、取得した操作情報Ｓ_５に基づいて、階層メニューの階層を上げ下げする。 Control unit 18 determines that the operation of the armrest 12 is made (S2: Yes), in favor of the operation of the armrest 12 generates operation information S _5, via the communication unit 16 outputs to the vehicle communication system 45 ( S3). Operation target electronic device, for example, based on the acquired operation information S _5, to raise or lower hierarchy of the hierarchical menu.

ここで、ステップ１において、制御部１８は、ジェスチャが検出されていないと判定すると（Ｓ１：Ｎｏ）、検出情報Ｓ_４に基づいてアームレスト１２の操作を確認する。制御部１８は、アームレスト１２の操作がなされたと判定すると（Ｓ４：Ｙｅｓ）、アームレスト１２の操作に基づいた操作情報Ｓ_５を生成し、通信部１６を介して車両通信システム４５に出力する（Ｓ５）。またステップ４において、制御部１８は、アームレスト１２の操作がなされていないと判定すると（Ｓ４：Ｎｏ）、ステップ１に処理を進める。 Here, in step 1, the control unit 18, the gesture is determined not to be detected (S1: No), to confirm the operation of the armrest 12 on the basis of the detected information S _4. Control unit 18 determines that the operation of the armrest 12 is made (S4: Yes), generates an operation information _{S 5} based on the operation of the armrest 12, via the communication unit 16 outputs to the vehicle communication system 45 (S5 ). In Step 4, if control part 18 judges with operation of armrest 12 not being made (S4: No), processing will be advanced to Step 1.

またステップ２において、制御部１８は、アームレスト１２の操作がなされていないと判定すると（Ｓ２：Ｎｏ）、検出されたジェスチャに基づいた操作情報Ｓ_５を生成し、通信部１６を介して車両通信システム４５に出力する（Ｓ６）。 In Step 2, the control unit 18 determines that the operation of the armrest 12 is not performed (S2: No), generates operation information S ₅ based on the detected gesture, the vehicle communication via the communication unit 16 It outputs to the system 45 (S6).

操作装置１は、上述の一連の動作を車両４の電源が遮断されるまで継続して行う。 The controller device 1 continuously performs the above-described series of operations until the vehicle 4 is powered off.

（第１の実施の形態の効果）
本実施の形態の操作装置１は、ジェスチャによる操作の曖昧さを抑制することができる。具体的には、操作装置１は、ジェスチャによる操作指示を補うように、アームレスト１２の移動によって操作指示が可能となるので、確実な入力が必要な操作指示をアームレスト１２の移動により行い、その他をジェスチャによって行うことが可能となる。従って操作装置１は、ジェスチャによる操作のみの場合と比べて、ジェスチャによる操作の曖昧さを抑制することができる。 (Effects of the first embodiment)
The operating device 1 according to the present embodiment can suppress ambiguity of operations by gestures. Specifically, since the operation device 1 can perform an operation instruction by moving the armrest 12 so as to supplement the operation instruction by the gesture, the operation device 1 performs an operation instruction that requires a reliable input by moving the armrest 12, and the others. This can be done by gestures. Therefore, the controller device 1 can suppress the ambiguity of the operation by the gesture as compared with the case of only the operation by the gesture.

また操作装置１は、アームレスト１２が操作者の体の一部を支持するので、アームレストを備えない場合と比べて、ジェスチャによる操作が安定すると共に、疲れが抑制される。 In addition, since the armrest 12 supports a part of the operator's body, the operation device 1 is more stable in gesture operation and less fatigued than the case where the armrest 12 is not provided.

［第２の実施の形態］
第２の実施の形態は、アームレスト１２がモーメンタリスイッチを含んで構成される点が第１の実施の形態と異なっている。 [Second Embodiment]
The second embodiment is different from the first embodiment in that the armrest 12 is configured to include a momentary switch.

図５（ａ）は、第２の実施の形態に係る操作装置の概略図であり、図５（ｂ）は、操作装置のブロック図である。なお以下に記載する実施の形態において、第１の実施の形態と同じ機能及び構成を有する部分は、第１の実施の形態と同じ符号を付し、その説明は省略するものとする。 FIG. 5A is a schematic diagram of the operating device according to the second embodiment, and FIG. 5B is a block diagram of the operating device. In the embodiments described below, parts having the same functions and configurations as those of the first embodiment are denoted by the same reference numerals as those of the first embodiment, and description thereof is omitted.

本実施の形態におけるアームレスト１２は、図５（ａ）及び図５（ｂ）に示すように、モーメンタリスイッチ１５ａと、ホームボタン１９と、を備えている。このアームレスト１２は、中立位置から前後方向に操作された後、モーメンタリスイッチ１５ａが生成する、中立位置に戻るための復帰力により、中立位置に復帰するように構成されている。 The armrest 12 in the present embodiment includes a momentary switch 15a and a home button 19 as shown in FIGS. 5 (a) and 5 (b). The armrest 12 is configured to return to the neutral position by the return force for returning to the neutral position generated by the momentary switch 15a after being operated in the front-rear direction from the neutral position.

モーメンタリスイッチ１５ａは、アームレスト１２の操作を検出して検出情報Ｓ_４を出力するように構成されている。 Momentary switch 15a is configured to output the detection information S ₄ detects the operation of the armrest 12.

操作装置１は、アームレスト１２が前方向に１回操作されることにより、階層が１つ下がり、後方向に１回操作されることにより、階層が１つ上がるように構成されている。 The controller device 1 is configured such that when the armrest 12 is operated once in the forward direction, the level is lowered by one, and when operated once in the backward direction, the level is increased by one.

またホームボタン１９は、例えば、操作の際に表示されている階層を、予め定められた階層に移動させるためのボタンである。この予め定められた階層とは、例えば、最も上の階層でも良いし、任意に指定された階層であっても良い。 The home button 19 is a button for moving the level displayed at the time of operation to a predetermined level, for example. The predetermined hierarchy may be, for example, the highest hierarchy or an arbitrarily designated hierarchy.

ホームボタン１９は、操作されたことを示すボタン情報Ｓ_６を制御部１８に出力するように構成されている。制御部１８は、このボタン情報Ｓ_６の情報を含む操作情報Ｓ_５を生成して出力する。 The home button 19 is configured to output button information S ₆ indicating that it has been operated to the control unit 18. Control unit 18 generates and outputs operation information S ₅ including the information of the button information S _6.

（第２の実施の形態の効果）
本実施の形態の操作装置１は、アームレスト１２がモーメンタリスイッチ１５ａの復帰力により、操作された後に中立位置に戻るように構成されている。従って操作装置１は、戻らない場合と比べて、ジェスチャを行う際、アームレスト１２が中立位置に戻っており、ジェスチャ検出部１０に対する手の位置が安定するので、ジェスチャの検出精度が向上する。また操作装置１は、アームレスト１２が中立位置に戻るので、アームレスト１２の操作位置の確認が必要なく、操作性が向上する。 (Effect of the second embodiment)
The operating device 1 according to the present embodiment is configured such that the armrest 12 returns to the neutral position after being operated by the restoring force of the momentary switch 15a. Accordingly, when the gesture is performed, the operation device 1 has the armrest 12 returned to the neutral position when the gesture is performed, and the position of the hand with respect to the gesture detection unit 10 is stabilized, thereby improving the gesture detection accuracy. Moreover, since the armrest 12 returns to the neutral position, the operating device 1 does not require confirmation of the operating position of the armrest 12, and the operability is improved.

また操作装置１は、ホームボタン１９を備えているので、何度もアームレスト１２を操作することなく、予め定められた階層に移動できて操作性が向上する。 Moreover, since the operating device 1 is provided with the home button 19, it can move to a predetermined hierarchy without operating the armrest 12 many times, and the operability is improved.

［第３の実施の形態］
第３の実施の形態は、操作を受け付けたことを報知する点で、上述の実施の形態と異なっている。 [Third Embodiment]
The third embodiment is different from the above-described embodiment in that the operation is accepted.

図６（ａ）は、第３の実施の形態に係る操作装置のブロック図である。この操作装置１は、図６（ａ）に示すように、複数の操作指示を受け付ける操作対象に操作指示を与える操作者の手の形態を検出するジェスチャ検出部１０と、操作者の体の一部を支持し、ジェスチャ検出部１０によって手の形態が検出可能な位置に配置されると共に、操作対象に対して移動による操作指示を可能とするアームレスト１２と、アームレスト１２に配置され、少なくとも手の形態及びアームレスト１２の移動のいずれかが検出された後、操作指示が受け付けられたことを報知する報知部としての振動呈示部２０と、を備えて概略構成されている。 FIG. 6A is a block diagram of an operating device according to the third embodiment. As shown in FIG. 6A, the controller device 1 includes a gesture detection unit 10 that detects a form of an operator's hand that gives an operation instruction to an operation target that receives a plurality of operation instructions, and one of the operator's bodies. Are arranged at positions where the shape of the hand can be detected by the gesture detection unit 10, and the armrest 12 which allows operation instructions by movement with respect to the operation target. After either the form or the movement of the armrest 12 is detected, a vibration presenting unit 20 as a notification unit that notifies that an operation instruction has been received is schematically configured.

この振動呈示部２０は、図６（ａ）に示すように、アームレスト１２に配置され、制御部１８から出力される呈示信号Ｓ_７に基づいてアームレスト１２を振動させるように構成されている。振動呈示部２０は、例えば、振動を呈示するアクチュエータにより構成されている。このアクチュエータは、一例として、偏心した位置に回転中心を有すると共に、その回転中心に出力軸が取り付けられた重りを有するモータである。なお振動呈示部２０は、当該モータに限定されず、圧電素子を用いたアクチュエータ等であっても良い。 As shown in FIG. 6A, the vibration presenting unit 20 is arranged on the armrest 12 and configured to vibrate the armrest 12 based on a presenting signal S ₇ output from the control unit 18. The vibration presenting unit 20 is configured by an actuator that presents vibration, for example. As an example, this actuator is a motor having a center of rotation at an eccentric position and a weight having an output shaft attached to the center of rotation. The vibration presentation unit 20 is not limited to the motor, and may be an actuator using a piezoelectric element.

以下に、本実施の形態の操作装置１の動作について説明する。 Below, operation | movement of the operating device 1 of this Embodiment is demonstrated.

制御部１８は、判定情報Ｓ_３に基づいてジェスチャが検出されたと判定すると、検出情報Ｓ_４に基づいてアームレスト１２の操作を確認する。 Control unit 18 determines that the gesture is detected on the basis of the determination information S _3, to confirm the operation of the armrest 12 on the basis of the detected information S _4.

制御部１８は、アームレスト１２の操作がなされたと判定すると、アームレスト１２の操作を優先して操作情報Ｓ_５を生成し、通信部１６を介して車両通信システム４５に出力すると共に、呈示信号Ｓ_７を生成して振動呈示部２０に出力する。振動呈示部２０は、取得した呈示信号Ｓ_７に基づいて振動を呈示する。操作対象の電子機器は、取得した操作情報Ｓ_５に基づいて、階層メニューの階層を上げ下げする。 Control unit 18 determines that the operation of the armrest 12 is made, in favor of the operation of the armrest 12 generates operation information S _5, and outputs to the vehicle communication system 45 via the communication unit 16, presentation signal S ₇ And output to the vibration presenting unit 20. Vibration presenting unit 20 presents the vibration based on the presentation signal S ₇ obtained. Operation target electronic device based on the acquired operation information S _5, to raise or lower hierarchy of the hierarchical menu.

ここで、制御部１８は、ジェスチャが検出されていないと判定すると、検出情報Ｓ_４に基づいてアームレスト１２の操作を確認する。制御部１８は、アームレスト１２の操作がなされたと判定すると、アームレスト１２の操作に基づいた操作情報Ｓ_５を生成し、通信部１６を介して車両通信システム４５に出力すると共に、呈示信号Ｓ_７を生成して振動呈示部２０に出力する。振動呈示部２０は、取得した呈示信号Ｓ_７に基づいて振動を呈示する。 Here, the control unit 18, the gesture is determined not to be detected, to confirm the operation of the armrest 12 on the basis of the detected information S _4. Control unit 18 determines that the operation of the armrest 12 is made to generate the operation information S ₅ based on the operation of the armrest 12, and outputs to the vehicle communication system 45 via the communication unit 16, a presentation signal S ₇ Generate and output to the vibration presenting unit 20. Vibration presenting unit 20 presents the vibration based on the presentation signal S ₇ obtained.

また制御部１８は、ジェスチャが検出されず、アームレスト１２の操作がなされていないと判定すると、判定情報Ｓ_３及び検出情報Ｓ_４を取得する。 The control unit 18, the gesture is not detected If judged that the operation of the armrest 12 is not performed, and acquires the determination information S ₃ and the detection information S _4.

さらに制御部１８は、ジェスチャが検出されたものの、アームレスト１２の操作がなされていないと判定すると、検出されたジェスチャに基づいた操作情報Ｓ_５を生成し、通信部１６を介して車両通信システム４５に出力すると共に、呈示信号Ｓ_７を生成して振動呈示部２０に出力する。振動呈示部２０は、取得した呈示信号Ｓ_７に基づいて振動を呈示する。 Further, the control unit 18, although the gesture is detected, If judged that the operation of the armrest 12 is not performed, generates operation information S ₅ based on the detected gesture, the vehicle communication system 45 via the communication unit 16 And a presentation signal S ₇ is generated and output to the vibration presentation unit 20. Vibration presenting unit 20 presents the vibration based on the presentation signal S ₇ obtained.

（第３の実施の形態の効果）
本実施の形態に係る操作装置１は、振動呈示部２０によりアームレスト１２に振動を加えることができるので、振動を加えないものと比べて、操作者に操作が受け付けられたことに対するフィードバックとしての振動の呈示を行うことができ、操作が受け付けられたことが分かり易い。 (Effect of the third embodiment)
Since the operation device 1 according to the present embodiment can apply vibration to the armrest 12 by the vibration presenting unit 20, vibration as feedback for an operation accepted by the operator as compared with the case where no vibration is applied. It is easy to understand that the operation has been accepted.

なお、操作装置１は、ジェスチャが検出された場合にのみ、振動を呈示する構成でも良い。また操作装置１は、アームレスト１２が操作された場合にのみ、振動を呈示する構成でも良い。さらに操作装置１は、ジェスチャが検出された場合、又はアームレスト１２が操作された場合に、振動を呈示する構成でも良い。 Note that the controller device 1 may be configured to present vibration only when a gesture is detected. The operation device 1 may be configured to present vibration only when the armrest 12 is operated. Further, the controller device 1 may be configured to present vibration when a gesture is detected or when the armrest 12 is operated.

また変形例として、報知部は、振動、音及び光の少なくとも１つを用いた報知を行う構成であっても良い。 As a modification, the notification unit may be configured to perform notification using at least one of vibration, sound, and light.

［第４の実施の形態］
第４の実施の形態は、アームレスト１２が前後方向に交差する方向にも操作が可能となっている点で上述の実施の形態と異なっている。 [Fourth Embodiment]
The fourth embodiment is different from the above-described embodiment in that the operation can be performed in the direction in which the armrest 12 intersects the front-rear direction.

図６（ｂ）は、第４の実施の形態に係る操作装置の上面図である。この操作装置１は、図６（ｂ）に示すように、移動機構部１４が、第１の方向、及び第１の方向と交差する第２の方向のアームレスト１２の移動を検出する移動検出部１４５を備えている。 FIG. 6B is a top view of the operating device according to the fourth embodiment. As illustrated in FIG. 6B, the operation device 1 includes a movement detection unit in which the movement mechanism unit 14 detects the movement of the armrest 12 in the first direction and in the second direction intersecting the first direction. 145.

この移動検出部１４５は、例えば、アームレスト１２と連結されるシャフト１４０を有している。上述の第１の方向とは、図６に示すように、前後方向、すなわち矢印Ａ方向及び矢印Ｂ方向である。また第２の方向とは、左右方向、すなわち矢印Ｃ方向及び矢印Ｄ方向である。 The movement detection unit 145 includes, for example, a shaft 140 that is coupled to the armrest 12. The above-mentioned first direction is the front-rear direction, that is, the arrow A direction and the arrow B direction, as shown in FIG. The second direction is the left-right direction, that is, the arrow C direction and the arrow D direction.

アームレスト１２は、例えば、矢印Ａ方向〜矢印Ｄ方向に操作された後、移動検出部１４５の復帰力により、中立位置に復帰するように構成されている。 For example, the armrest 12 is configured to return to the neutral position by the return force of the movement detection unit 145 after being operated in the arrow A direction to the arrow D direction.

矢印Ａ方向及び矢印Ｂ方向の操作は、例えば、上述の実施の形態と同様に、ジェスチャの奥行操作に対応している。また矢印Ｃ方向及び矢印Ｄ方向の操作は、例えば、ジェスチャのスワイプ操作に対応している。なお、操作装置１は、アームレスト１２による操作に、上記の操作以外の操作が割り当てられても良い。 The operations in the arrow A direction and the arrow B direction correspond to a gesture depth operation, for example, as in the above-described embodiment. The operations in the directions of the arrows C and D correspond to, for example, a gesture swipe operation. Note that the operation device 1 may be assigned operations other than the above-described operations to the operation by the armrest 12.

（第４の実施の形態の効果）
本実施の形態に係る操作装置１は、アームレスト１２が矢印Ａ方向〜矢印Ｄ方向に操作されるので、アームレストが前後方向にのみ操作される場合と比べて、より多くのジェスチャの操作を補うことができる。従って操作装置１は、曖昧なジェスチャによる操作を矢印Ａ方向〜矢印Ｄ方向の操作によって補うことができるので、ジェスチャによる操作の曖昧さを抑制することができる。 (Effect of the fourth embodiment)
In the operating device 1 according to the present embodiment, the armrest 12 is operated in the direction of the arrow A to the direction of the arrow D, so that the operation of more gestures is compensated as compared with the case where the armrest is operated only in the front-rear direction. Can do. Therefore, since the controller device 1 can supplement the operation by the ambiguous gesture by the operation in the arrow A direction to the arrow D direction, the ambiguity of the operation by the gesture can be suppressed.

なお変形例として、アームレスト１２は、第１の方向及び第２の方向の操作に限定されず、二次元の操作平面内の任意の操作位置に操作可能に構成されても良い。 As a modification, the armrest 12 is not limited to the operations in the first direction and the second direction, and may be configured to be operable at an arbitrary operation position in a two-dimensional operation plane.

他の変形例として、上述の実施の形態の操作装置１は、ジェスチャ検出部１０とアームレスト１２とが、相対的に移動する構成であったが、これに限定されず、配置されたフロアコンソール４０に対してジェスチャ検出部１０とアームレスト１２とが、一体となって移動する構成であっても良い。 As another modification, the operation device 1 according to the above-described embodiment has a configuration in which the gesture detection unit 10 and the armrest 12 are relatively moved. On the other hand, the gesture detection unit 10 and the armrest 12 may move together.

以上述べた少なくとも１つの実施の形態の操作装置１によれば、ジェスチャによる操作の曖昧さを抑制することが可能となる。 According to the operating device 1 of at least one embodiment described above, it becomes possible to suppress the ambiguity of the operation by the gesture.

以上、本発明のいくつかの実施の形態及び変形例を説明したが、これらの実施の形態及び変形例は、一例に過ぎず、特許請求の範囲に係る発明を限定するものではない。これら新規な実施の形態及び変形例は、その他の様々な形態で実施されることが可能であり、本発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更等を行うことができる。また、これら実施の形態及び変形例の中で説明した特徴の組合せの全てが発明の課題を解決するための手段に必須であるとは限らない。さらに、これら実施の形態及び変形例は、発明の範囲及び要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 As mentioned above, although some embodiment and modification of this invention were demonstrated, these embodiment and modification are only examples, and do not limit the invention based on a claim. These novel embodiments and modifications can be implemented in various other forms, and various omissions, replacements, changes, and the like can be made without departing from the scope of the present invention. In addition, not all combinations of features described in these embodiments and modifications are necessarily essential to the means for solving the problems of the invention. Furthermore, these embodiments and modifications are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.

１…操作装置、４…車両、５…表示装置、６…空調装置、７…ナビゲーション装置、８…音楽再生装置、９…手、９ａ…手首、９ｂ…腕、１０…ジェスチャ検出部、１２…アームレスト、１３…台座、１４…移動機構部、１５…リニアセンサ、１５ａ…モーメンタリスイッチ、１６…通信部、１８…制御部、１９…ホームボタン、２０…振動呈示部、４０…フロアコンソール、４５…車両通信システム、４６…車両ＬＡＮ、４７…車両制御部、５０…表示画面、５１…表示画像、６０…階層メニュー、６１〜６５…第１の階層〜第５の階層、９０…操作指、１００…検出空間、１０１…撮像部、１０２…照明部、１０３…判定部、１４０…シャフト、１４１…スライダ、１４１ａ…開口、１４１ｂ…弾性部材、１４２…レール、１４２ａ〜１４２ｉ…凹部、１４５…移動検出部、５０１〜５０３…アイコン DESCRIPTION OF SYMBOLS 1 ... Operation apparatus, 4 ... Vehicle, 5 ... Display apparatus, 6 ... Air conditioning apparatus, 7 ... Navigation apparatus, 8 ... Music reproduction apparatus, 9 ... Hand, 9a ... Wrist, 9b ... Arm, 10 ... Gesture detection part, 12 ... Armrest, 13 ... pedestal, 14 ... moving mechanism, 15 ... linear sensor, 15a ... momentary switch, 16 ... communication unit, 18 ... control unit, 19 ... home button, 20 ... vibration presentation unit, 40 ... floor console, 45 ... Vehicle communication system, 46 ... vehicle LAN, 47 ... vehicle control unit, 50 ... display screen, 51 ... display image, 60 ... hierarchical menu, 61-65 ... first hierarchy to fifth hierarchy, 90 ... operating finger, 100 DESCRIPTION OF SYMBOLS ... Detection space 101 ... Imaging part 102 ... Illumination part 103 ... Determination part 140 ... Shaft 141 ... Slider 141a ... Opening 141b ... Elastic member 142 ... Rail 142a-1 2i ... recess, 145 ... movement detection unit, 501 to 503 ... icon

Claims

A form detecting unit for detecting a form of an operator's hand that gives an operation instruction to an operation target that receives a plurality of operation instructions;
A support unit that supports a part of the operator's body, is disposed at a position where the form of the hand can be detected by the form detection unit, and enables operation instructions by movement with respect to the operation target;
The operating device with.

The operation instruction by the movement of the support part is a part of the operation instruction specified by the form of the hand,
The operating device according to claim 1.

A notification unit that is arranged on the support unit and notifies that the operation instruction has been accepted after at least the operation instruction of either the form of the hand or the movement of the support unit is detected;
The operating device according to claim 1 or 2.