JPWO2014024230A1 - 操作インタフェース装置及び操作インタフェース方法 - Google Patents

操作インタフェース装置及び操作インタフェース方法 Download PDF

Info

Publication number
JPWO2014024230A1
JPWO2014024230A1 JP2014529163A JP2014529163A JPWO2014024230A1 JP WO2014024230 A1 JPWO2014024230 A1 JP WO2014024230A1 JP 2014529163 A JP2014529163 A JP 2014529163A JP 2014529163 A JP2014529163 A JP 2014529163A JP WO2014024230 A1 JPWO2014024230 A1 JP WO2014024230A1
Authority
JP
Japan
Prior art keywords
screen
display
contact
operator
touch panel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014529163A
Other languages
English (en)
Other versions
JP5984939B2 (ja
Inventor
平井　正人
正人 平井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of JPWO2014024230A1 publication Critical patent/JPWO2014024230A1/ja
Application granted granted Critical
Publication of JP5984939B2 publication Critical patent/JP5984939B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/0227—Cooperation and interconnection of the input arrangement with other functional units of a computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0362—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 1D translations or rotations of an operating part of the device, e.g. scroll wheels, sliders, knobs, rollers or belts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Abstract

手元操作用ディスプレイ２の表示面に取り付けられているタッチパネル３と、遠隔操作を受け付ける回転ダイヤル４と、回転ダイヤル４に対する操作者の接触を検知する接触検知部５とを設け、画面表示部１０が、接触検知部５により操作者の接触が検知されていない状況下では、タッチパネル３の操作に適しているタッチパネル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示し、接触検知部５により操作者の接触が検知されている状況下では、回転ダイヤル４の操作に適している回転ダイヤル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。

Description

この発明は、例えば、車載用操作デバイスとして、複数の操作インタフェース（例えば、タッチパネル、回転ダイヤル、リモコンなど）が併用されている操作インタフェース装置及び操作インタフェース方法に関するものである。
車載用操作デバイスとして、タッチパネルの他に、遠隔操作デバイス（例えば、回転ダイヤル、リモコンなど）を併用している操作インタフェース装置がある。
遠隔操作デバイスの操作では、現在選択可能な操作項目を指し示すカーソルがディスプレイに表示されている必要があるが、操作者がタッチパネルで操作を行う場合、カーソルの表示は不要であり、カーソルが表示されていると、むしろ煩わしいものとなる。
そこで、以下の特許文献１に開示されている操作インタフェース装置では、遠隔操作デバイスであるリモコンの出力信号を検知すると、カーソルを非表示にして、煩わしさを解消している。
ただし、ディスプレイに表示されている画面の構成自体は、リモコンの出力信号を検知しても変化するものではない。
特開２００５−３３２１９０号公報（例えば、段落番号［００３４］）
従来の操作インタフェース装置は以上のように構成されているので、遠隔操作デバイスであるリモコンの出力信号を検知すると、カーソルが表示されるが、遠隔操作デバイスで操作を行う場合でも、タッチパネルで操作を行う場合でも、同じ画面がディスプレイに表示される。このため、ディスプレイに表示されている画面の構成が遠隔操作デバイスの操作に適している画面の構成になっていれば、タッチパネルの操作に適していない画面の構成になっている可能性があり、逆に、ディスプレイに表示されている画面の構成がタッチパネルの操作に適している画面の構成になっていれば、遠隔操作デバイスの操作に適していない画面の構成になっている可能性がある。したがって、タッチパネルの操作性又は遠隔操作デバイスの操作性のいずれかが犠牲にされてしまう課題があった。
また、遠隔操作デバイスであるリモコンの出力信号を検知すると、カーソルが表示されるが、リモコンの出力信号を検知するには、操作者がリモコンで空操作（カーソルを表示にするためだけの操作であって、所望の項目を選択する操作とは別の無駄なスイッチ操作）を行う必要があり、使い勝手が悪い課題もあった。
この発明は上記のような課題を解決するためになされたもので、タッチパネル及び遠隔操作デバイスの操作性を高めることができる操作インタフェース装置及び操作インタフェース方法を得ることを目的とする。
また、この発明は、操作者が遠隔操作デバイスで空操作を行うことなく、カーソルを表示することができる操作インタフェース装置を得ることを目的とする。
この発明に係る操作インタフェース装置は、画面を表示するディスプレイと、ディスプレイの表示面に取り付けられているタッチパネルと、遠隔操作を受け付ける遠隔操作デバイスと、遠隔操作デバイスに対する操作者の接触を検知する接触検知手段とを設け、画面表示手段が、接触検知手段により操作者の接触が検知されていない状況下では、タッチパネルの操作に適しているタッチパネル操作用画面をディスプレイに表示し、接触検知手段により操作者の接触が検知されている状況下では、遠隔操作デバイスの操作に適している遠隔操作デバイス操作用画面をディスプレイに表示するようにしたものである。
この発明によれば、画面表示手段が、接触検知手段により操作者の接触が検知されていない状況下では、タッチパネルの操作に適しているタッチパネル操作用画面をディスプレイに表示し、接触検知手段により操作者の接触が検知されている状況下では、遠隔操作デバイスの操作に適している遠隔操作デバイス操作用画面をディスプレイに表示するように構成したので、タッチパネル及び遠隔操作デバイスの操作性を高めることができる効果がある。
この発明の実施の形態１による操作インタフェース装置を示す構成図である。 この発明の実施の形態１による操作インタフェース装置の処理内容（操作インタフェース方法）を示すフローチャートである。 回転ダイヤル４を示す構成図である。 液晶ディスプレイ１に表示されている画面の一例を示す説明図である。 手元操作用ディスプレイ２に表示されている画面の一例を示す説明図である。 液晶ディスプレイ１に表示されている画面、操作デバイス（タッチパネル３、回転ダイヤル４）及び操作対象情報の対応関係を示す説明図である。 操作対象情報と画面構成情報（タッチパネル操作用画面の構成情報、回転ダイヤル操作用画面（遠隔操作デバイス操作用画面）の構成情報）の対応関係を示す説明図である。 液晶ディスプレイ１に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 手元操作用ディスプレイ２に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 手元操作用ディスプレイ２及びタッチパネル３の代わりに、タッチパッドが実装されている場合の液晶ディスプレイ１の表示例を示す説明図である。 液晶ディスプレイ１に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 手元操作用ディスプレイ２に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 液晶ディスプレイ１に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 手元操作用ディスプレイ２に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 液晶ディスプレイ１に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 手元操作用ディスプレイ２に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 液晶ディスプレイ１に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 手元操作用ディスプレイ２に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 液晶ディスプレイ１に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 手元操作用ディスプレイ２に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 液晶ディスプレイ１に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 手元操作用ディスプレイ２に表示されている画面（タッチパネル操作用画面、回転ダイヤル操作用画面）の一例を示す説明図である。 この発明の実施の形態３による操作インタフェース装置を示す構成図である。 ジョイスティック付リモコンの操作例を示す説明図である。 ジョイスティック付リモコンの操作例を示す説明図である。 この発明の実施の形態４による操作インタフェース装置を示す構成図である。 この発明の実施の形態５による操作インタフェース装置を示す構成図である。 この発明の実施の形態６による操作インタフェース装置が適用される誘導加熱調理器を示す斜視図である。
以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態１．
図１はこの発明の実施の形態１による操作インタフェース装置を示す構成図である。
図１において、液晶ディスプレイ１は操作者の手が届きづらい遠い位置に設置（例えば、操作インタフェース装置が車載用操作デバイスとして搭載されている場合、車両のインパネなどに設置）されており、例えば、ナビゲーションの地図やオーディオに関する情報などを含む画面を表示する大型のディスプレイである。なお、液晶ディスプレイ１は第１のディスプレイを構成している。
手元操作用ディスプレイ２は操作者の手が届く位置に設置（例えば、操作インタフェース装置が車載用操作デバイスとして搭載されている場合、車両のコンソールボックスやハンドルなどに設置）されており、ディスプレイ１により表示される画面と略同一の画面（例えば、液晶ディスプレイ１により表示される画面の一部）を表示するディスプレイである。なお、手元操作用ディスプレイ２は第２のディスプレイを構成している。
タッチパネル３は手元操作用ディスプレイ２の表示面に取り付けられており、操作者が触れている位置を検知することで、操作を受け付ける操作インタフェースである。
回転ダイヤル４は操作者の手が届く位置に設置（例えば、操作インタフェース装置が車載用操作デバイスとして搭載されている場合、車両のコンソールボックスやハンドルなどに設置）されており、遠隔操作を受け付ける遠隔操作デバイスである。
この実施の形態１では、遠隔操作デバイスとして、回転ダイヤル４を実装している例を説明するが、遠隔操作デバイスが回転ダイヤル４に限るものではなく、例えば、リモコン、ジョイスティック、タッチパッドなどの操作デバイスでもよい。
接触検知部５は例えば導電体などから構成されており、回転ダイヤル４に対する操作者の接触を検知する処理を実施する。なお、接触検知部５は接触検知手段を構成している。
ここでは、接触検知部５が導電体などから構成されている例を示しているが、回転ダイヤル４に対する操作者の接触を検知することができればよく、例えば、赤外線センサなどから構成されているものであってもよい。
赤外線センサなどから構成されている場合、操作者の手が回転ダイヤル４に近づくことで、赤外線センサが受光していた赤外線が操作者の手で遮られることをもって、操作者の接触を検知する。
操作対象情報格納部６は例えばＲＡＭやハードディスクなどの記録媒体から構成されており、現在、液晶ディスプレイ１に表示されている画面、操作デバイス（タッチパネル３、回転ダイヤル４）及び操作対象情報の対応関係を記憶している。
操作対象情報取得部７は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、現在、液晶ディスプレイ１に表示されている画面を示す画面情報を入力し、接触検知部５により操作者の接触が検知されていない状況下では、操作対象情報格納部６から、その画面情報が示す表示中の画面及びタッチパネル３に対応する操作対象情報を取得する処理を実施する。
また、操作対象情報取得部７は接触検知部５により操作者の接触が検知されている状況下では、操作対象情報格納部６から、その画面情報が示す表示中の画面及び回転ダイヤル４に対応する操作対象情報を取得する処理を実施する。
画面構成情報格納部８は例えばＲＡＭやハードディスクなどの記録媒体から構成されており、操作対象情報と画面構成情報（タッチパネル操作用画面の構成情報、回転ダイヤル操作用画面（遠隔操作デバイス操作用画面）の構成情報）の対応関係を記憶している。
画面構成情報取得部９は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、画面構成情報格納部８から、操作対象情報取得部７により取得された操作対象情報に対応する画面構成情報を取得する処理を実施する。
画面表示部１０は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、画面構成情報取得部９により取得された画面構成情報がタッチパネル操作用画面の構成情報であれば、その画面構成情報にしたがってタッチパネル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示し、その画面構成情報が回転ダイヤル操作用画面の構成情報であれば、その画面構成情報にしたがって回転ダイヤル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する処理を実施する。
なお、操作対象情報格納部６、操作対象情報取得部７、画面構成情報格納部８、画面構成情報取得部９及び画面表示部１０から画面表示手段が構成されている。
図１では、操作インタフェース装置の構成要素である液晶ディスプレイ１、手元操作用ディスプレイ２、タッチパネル３、回転ダイヤル４、接触検知部５、操作対象情報格納部６、操作対象情報取得部７、画面構成情報格納部８、画面構成情報取得部９及び画面表示部１０のそれぞれが専用のハードウェアで構成されているものを想定しているが、操作インタフェース装置の全部又は一部がコンピュータで構成されていてもよい。
例えば、操作インタフェース装置の一部（操作対象情報格納部６、操作対象情報取得部７、画面構成情報格納部８、画面構成情報取得部９、画面表示部１０）がコンピュータで構成されている場合、操作対象情報格納部６及び画面構成情報格納部８をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、操作対象情報取得部７、画面構成情報取得部９及び画面表示部１０の処理内容を記述しているプログラムをコンピュータのメモリに格納し、コンピュータのＣＰＵが当該メモリに格納されているプログラムを実行するようにすればよい。
図２はこの発明の実施の形態１による操作インタフェース装置の処理内容（操作インタフェース方法）を示すフローチャートである。
図３は回転ダイヤル４を示す構成図である。
図３の例では、回転ダイヤル４は、ノブ４ａ、タッチセンサ４ｂ、ロータリーエンコーダ４ｃ及び押下スイッチ４ｄから構成されている。
ノブ４ａは、操作者が回転ダイヤル４を操作する際に手で掴む部分である。また、タッチセンサ４ｂは、接触検知部５に相当する部材であり、回転ダイヤル４に対する操作者の接触を検知する。
図３の例では、接触検知部５がタッチセンサ４ｂとして回転ダイヤル４に組み込まれているが、例えば、接触検知部５が導電体などから構成されているシート状のデバイスであって、回転ダイヤル４の表面を覆うように設置されているものであってもよい。
次に動作について説明する。
図４は液晶ディスプレイ１に表示されている画面の一例を示す説明図であり、図５は手元操作用ディスプレイ２に表示されている画面の一例を示す説明図である。
図４の例では、オーディオに関する情報と、エアコンに関する情報、ナビゲーションの地図を示す画面を表示している。
図５の例では、液晶ディスプレイ１の表示内容のうち、エアコンに関する情報だけが表示されている。
また、図５の例では、手元操作用ディスプレイ２の直ぐ下の位置に回転ダイヤル４が設置されている。
例えば、接触検知部５が、導電体などから構成されている場合、操作者が回転ダイヤル４に触れると、導電体に電流が流れる。
接触検知部５は、導電体に電流が流れたことを検知すると、その事をもって、回転ダイヤル４に対する操作者の接触を検知する。したがって、導電体に電流が流れたことを検知しなければ、回転ダイヤル４に対する操作者の接触を検知しない。
接触検知部５は、回転ダイヤル４に対する操作者の接触の検知結果を操作対象情報取得部７に出力する（図２のステップＳＴ１）。
操作対象情報取得部７は、現在、液晶ディスプレイ１に表示されている画面を示す画面情報を入力する（ステップＳＴ２）。
操作対象情報取得部７は、接触検知部５から出力された検知結果が、操作者が回転ダイヤル４に接触していない旨を示していれば（ステップＳＴ３）、操作対象情報格納部６から、その画面情報が示す表示中の画面及びタッチパネル３に対応する操作対象情報を取得する（ステップＳＴ４）。
操作対象情報取得部７は、接触検知部５から出力された検知結果が、操作者が回転ダイヤル４に接触している旨を示していれば（ステップＳＴ３）、操作対象情報格納部６から、その画面情報が示す表示中の画面及び回転ダイヤル４に対応する操作対象情報を取得する（ステップＳＴ５）。
ここで、図６は液晶ディスプレイ１に表示されている画面、操作デバイス（タッチパネル３、回転ダイヤル４）及び操作対象情報の対応関係を示す説明図である。
接触検知部５から出力された検知結果が、操作者が回転ダイヤル４に接触している旨を示している場合、操作者が回転ダイヤル４で操作することが考えられるため、例えば、現在、液晶ディスプレイ１に表示されている画面が、施設ジャンルリスト画面であれば、操作対象情報として「リスト用Ｉ／Ｆ１」を取得する。また、現在、液晶ディスプレイ１に表示されている画面が、検索結果一覧リスト画面であれば、操作対象情報として「リスト用Ｉ／Ｆ２（検索結果一覧）」を取得する。
一方、接触検知部５から出力された検知結果が、操作者が回転ダイヤル４に接触していない旨を示している場合、操作者がタッチパネル３で操作することが考えられるため、例えば、現在、液晶ディスプレイ１に表示されている画面が、施設ジャンルリスト画面であれば、操作対象情報として「タッチパネル用Ｉ／Ｆ」を取得する。
画面構成情報取得部９は、操作対象情報取得部７が操作対象情報を取得すると、画面構成情報格納部８から、その操作対象情報に対応する画面構成情報を取得する（ステップＳＴ６）。
ここで、図７は操作対象情報と画面構成情報（タッチパネル操作用画面の構成情報、回転ダイヤル操作用画面（遠隔操作デバイス操作用画面）の構成情報）の対応関係を示す説明図である。
例えば、操作対象情報取得部７により取得された操作対象情報が「リスト用Ｉ／Ｆ１」であれば、回転ダイヤル操作用画面の構成情報として、４つの構成情報を取得する。
・リストは「５行表示」
・カーソルは「表示」
・回転ダイヤルを示す円弧を表示
・カーソルを移動する機能と、カーソルが指し示している項目の決定機能とを回転ダイ
ヤルに割り当てる
また、操作対象情報取得部７により取得された操作対象情報が「タッチパネル用Ｉ／Ｆ」であれば、タッチパネル操作用画面の構成情報として、３つの構成情報を取得する。
・リストは「３行表示」
・カーソルは「非表示」
・ボタン操作、リスト操作や地図操作などを行う機能をタッチパネル３に割り当てる
画面表示部１０は、画面構成情報取得部９が画面構成情報を取得すると、その画面構成情報がタッチパネル操作用画面の構成情報であれば、その画面構成情報にしたがってタッチパネル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。
画面表示部１０は、その画面構成情報が回転ダイヤル操作用画面の構成情報であれば、その画面構成情報にしたがって回転ダイヤル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する（ステップＳＴ７）。
なお、画面表示部１０は、回転ダイヤル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示したのち、操作者が回転ダイヤル４から手を離す（接触検知部５が、回転ダイヤル４に対する操作者の接触を検知しない状態になる）と、一定時間経過後に、タッチパネル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。
ここで、図８は液晶ディスプレイ１に表示されている画面の一例を示す説明図であり、（ａ）はタッチパネル操作用画面、（ｂ）は回転ダイヤル操作用画面である。
また、図９は手元操作用ディスプレイ２に表示されている画面の一例を示す説明図であり、（ａ）はタッチパネル操作用画面、（ｂ）は回転ダイヤル操作用画面である。
タッチパネル操作用画面では、図８（ａ）及び図９（ａ）に示すように、操作者がタッチし易い行高がある３行リストを表示して、カーソルを非表示にしている。
回転ダイヤル操作用画面では、図８（ｂ）及び図９（ｂ）に示すように、一覧性が良好な５行リストを表示して、選択可能な操作項目を指し示すカーソルを表示している。
また、回転ダイヤル操作用画面では、回転ダイヤル４をどちらに回せば、どちらの方向にカーソルが動くかを直感的に理解できるようにするために、回転ダイヤル４を示唆する半円のリングを表示している。因みに、回転ダイヤル４を右に回転させると、カーソルが下方向に移動する。
以上で明らかなように、この実施の形態１によれば、画面を表示する液晶ディスプレイ１と、液晶ディスプレイ１により表示される画面と略同一の画面を表示する手元操作用ディスプレイ２と、手元操作用ディスプレイ２の表示面に取り付けられているタッチパネル３と、遠隔操作を受け付ける回転ダイヤル４と、回転ダイヤル４に対する操作者の接触を検知する接触検知部５とを設け、画面表示部１０が、接触検知部５により操作者の接触が検知されていない状況下では、タッチパネル３の操作に適しているタッチパネル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示し、接触検知部５により操作者の接触が検知されている状況下では、回転ダイヤル４の操作に適している回転ダイヤル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示するように構成したので、タッチパネル３及び回転ダイヤル４の操作性を高めることができる効果を奏する。
また、この実施の形態１によれば、画面表示部１０が、回転ダイヤル操作用画面を表示する場合、現在選択可能な操作項目を指し示すカーソルを液晶ディスプレイ１及び手元操作用ディスプレイ２に表示し、タッチパネル操作用画面を表示する場合、カーソルを非表示にしているので、回転ダイヤル操作用画面を表示する際、操作者が回転ダイヤル４で空操作を行うことなく、カーソルを非表示にすることができる効果を奏する。
この実施の形態１では、手元操作用ディスプレイ２の他に、液晶ディスプレイ１が実装されている操作インタフェース装置を示したが、液晶ディスプレイ１が実装されていない操作インタフェース装置であってもよい。
この場合、画面表示部１０は、接触検知部５により操作者の接触が検知されていない状況下では、タッチパネル３の操作に適しているタッチパネル操作用画面を手元操作用ディスプレイ２に表示し、接触検知部５により操作者の接触が検知されている状況下では、回転ダイヤル４の操作に適している回転ダイヤル操作用画面を手元操作用ディスプレイ２に表示する。
この場合でも、タッチパネル３及び回転ダイヤル４の操作性を高めることができる。
この実施の形態１では、液晶ディスプレイ１と手元操作用ディスプレイ２が実装され、手元操作用ディスプレイ２の表示面にタッチパネル３が取り付けられている操作インタフェース装置を示したが、手元操作用ディスプレイ２及びタッチパネル３の代わりに、タッチパッドが実装されている操作インタフェース装置であってもよい。
この場合、画面表示部１０は、接触検知部５により操作者の接触（回転ダイヤル４に対する接触）が検知されていない状況下では、タッチパネル操作用画面と同一の画面であるタッチパッド操作用画面を液晶ディスプレイ１に表示し、接触検知部５により操作者の接触（回転ダイヤル４に対する接触）が検知されている状況下では、回転ダイヤル操作用画面を液晶ディスプレイ１に表示する。
この場合、タッチパッド及び回転ダイヤル４の操作性を高めることができる効果を奏する。
ここで、図１０は手元操作用ディスプレイ２及びタッチパネル３の代わりに、タッチパッドが実装されている場合の液晶ディスプレイ１の表示例を示す説明図である。
図１０（ａ）では、接触検知部５により操作者の接触（回転ダイヤル４に対する接触）が検知されておらず、タッチパネル操作用画面と同一の画面であるタッチパッド操作用画面が液晶ディスプレイ１に表示されているが、図１０（ｂ）に示すように、操作者がタッチパッドに触れると、操作者が触れている位置にカーソルを表示するようにしている。
図１０（ｂ）では、操作者が施設名称に対応する位置を触れているので、施設名称が選択可能な状態になっており、施設名称の欄を青色のカーソルで点灯している。
この実施の形態１では、タッチパネル操作用画面及び回転ダイヤル操作用画面の表示例として、図８及び図９を示しているが、図１１及び図１２は、他の表示例を示している。
図１１及び図１２では、ナビゲーション装置による施設の検索結果を表示しており、特に、液晶ディスプレイ１の画面左側には、検索された施設の位置が表示されている。
このとき、図１１（ｂ）では、リストでカーソルが表示されている１番目の検索結果の施設が、他の施設より大きなマーク等で表示されている（カーソルが表示されている施設が強調表示されている）。
手元操作用ディスプレイ２には、液晶ディスプレイ１の画面右側の表示内容だけが表示されている。
なお、図１２（ａ）にはタッチパネル操作用画面が表示され、図１２（ｂ）には回転ダイヤル操作用画面が表示されている。
また、図１３及び図１４は、他の表示例を示している。
図１３及び図１４では、オーディオ情報（ＣＤの情報）などを示しており、液晶ディスプレイ１の画面左側には、現在演奏中の曲情報が表示されている。
このとき、図１４（ａ）に示すように、手元操作用ディスプレイ２には、前曲送りボタン及び次曲送りボタンや、その他ボタン（Ｓｅｔｔｉｎｇ，Ｓｏｕｒｃｅ）があるタッチパネル操作用画面が表示されており、前曲送りと次曲送りなどをタッチ操作で行うことができる。
一方、回転ダイヤル４には、曲送り（カーソル移動）機能が割り当てられており、図１４（ｂ）に示すように、前曲送りと次曲送りを回転ダイヤル４の操作で行うことができる。
なお、液晶ディスプレイ１に表示されている回転ダイヤル操作用画面（図１３（ｂ）の画面）には、ＣＤに記録されている曲の一覧表が示されている。
図１４（ａ）（ｂ）では、前曲送りと次曲送りを選択する画面構成になっているが、ＣＤに記録されている曲の一覧表が手元操作用ディスプレイ２に表示されていてもよい。
また、図１５及び図１６は、他の表示例を示している。
図１５及び図１６では、オーディオ情報（ラジオの情報）などを示しており、液晶ディスプレイ１の画面左側には、現在選局中の放送局のラジオ番組が表示されている。
このとき、図１６（ａ）に示すように、手元操作用ディスプレイ２には、ラジオの放送局の前局送りボタン及び次局送りボタンや、その他ボタン（Ｓｅｔｔｉｎｇ，Ｓｏｕｒｃｅ）があるタッチパネル操作用画面が表示されており、前局送りと次局送りなどをタッチ操作で行うことができる。
一方、回転ダイヤル４には、局送り（カーソル移動）機能が割り当てられており、図１６（ｂ）に示すように、ラジオの放送局の前局送りと次局送りを回転ダイヤル４の操作で行うことができる。
なお、液晶ディスプレイ１に表示されている回転ダイヤル操作用画面（図１５（ｂ）の画面）には、ラジオの放送局の一覧表が示されている。
図１６（ａ）（ｂ）では、前局送りと次局送りを選択する画面構成になっているが、ラジオの放送局の一覧表が手元操作用ディスプレイ２に表示されていてもよい。
また、図１７及び図１８は、他の表示例を示している。
図１７及び図１８では、電話帳などを示しており、液晶ディスプレイ１の画面左側には、電話番号等が登録されている人の氏名が表示されている。
このとき、図１８（ａ）に示すように、手元操作用ディスプレイ２には、電話帳のリストが表示されており、タッチ操作で電話をかける相手を選択することができる。
また、回転ダイヤル４には、氏名送り（カーソル移動）機能が割り当てられており、図１８（ｂ）に示すように、氏名送りを回転ダイヤル４の操作で行うことができる。
なお、液晶ディスプレイ１に表示されている回転ダイヤル操作用画面（図１８（ｂ）の画面）には、電話帳詳細情報（例えば、電話番号、相手方の写真など）が表示されている。
また、図１９及び図２０は、他の表示例を示している。
図１９及び図２０では、エアコンに関する情報などを示しており、液晶ディスプレイ１の画面中央には、エアコンの設定温度が表示されている。
このとき、図２０（ａ）に示すように、手元操作用ディスプレイ２には、タッチ操作で温度設定が可能なタッチパネル操作用画面が表示されている。
また、回転ダイヤル４には、温度設定（カーソル移動）機能が割り当てられており、図２０（ｂ）に示すように、温度設定を回転ダイヤル４の操作で行うことができる。
また、図２１及び図２２は、他の表示例を示している。
図２１及び図２２では、地図に関する情報などを示しており、液晶ディスプレイ１には、地図が表示されている。
このとき、図２２（ａ）に示すように、手元操作用ディスプレイ２には、目的地、周辺施設、自宅、Ｓｅｔｔｉｎｇ、地図のスクロール、地図の拡大・縮小などをタッチ操作で設定が可能なタッチパネル操作用画面が表示されている。
また、回転ダイヤル４には、地図の拡大・縮小機能が割り当てられており、図２２（ｂ）に示すように、地図の拡大・縮小を回転ダイヤル４の操作で行うことができる。
なお、操作者が回転ダイヤル４に触れると、図２１（ｂ）に示すように、「縮尺スケール」と「地図中央を示すマーク」が液晶ディスプレイ１に表示される。
実施の形態２．
上記実施の形態１では、接触検知部５が、導電体に電流が流れたことを検知することで、回転ダイヤル４に対する操作者の接触を検知するものを示したが、操作者が回転ダイヤル４に接触していない場合でも、回転ダイヤル４と操作者間の距離が所定値以下である近接状態であれば、操作者が回転ダイヤル４に接触している旨を示す検知結果を出力するようにしてもよい。
例えば、接触検知部５が、静電容量式のタッチセンサなどで構成されている場合、回転ダイヤル４と操作者間の距離が所定値以下になると、タッチセンサの静電容量が所定値以上になるので、操作者が回転ダイヤル４に近接していることを検知することができる。
操作対象情報取得部７以降の処理内容は、上記実施の形態１と同様であるため詳細な説明は省略する。
以上で明らかなように、この実施の形態２によれば、接触検知部５が、操作者が遠隔操作デバイスに接触していない場合でも、回転ダイヤル４と操作者間の距離が所定値以下である近接状態であれば、操作者が回転ダイヤル４に接触している旨を示す検知結果を出力するように構成したので、実際に操作者が回転ダイヤル４に触れなくても、接触する可能性が高い場合には、回転ダイヤルの操作に適している回転ダイヤル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示することができる効果を奏する。
実施の形態３．
図２３はこの発明の実施の形態３による操作インタフェース装置を示す構成図であり、図において、図１と同一符号は同一または相当部分を示すので説明を省略する。
リモコン１１は遠隔操作を受け付ける遠隔操作デバイスである。
この実施の形態１では、複数の遠隔操作デバイス（回転ダイヤル４、リモコン１１）が実装されている例を説明する。ただし、複数の遠隔操作デバイスの組み合わせは、回転ダイヤル４とリモコン１１の組み合わせに限るものではなく、また、３つ以上の遠隔操作デバイスが組み合わされていてもよい。
なお、遠隔操作デバイス毎に、接触検知部５が設けられている。
検知デバイス特定部１２は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、遠隔操作デバイスである回転ダイヤル４及びリモコン１１の中で、接触検知部５により操作者の接触が検知された遠隔操作デバイスを特定する処理を実施する。なお、検知デバイス特定部１２は検知デバイス特定手段を構成している。
図２３では、操作インタフェース装置の構成要素である液晶ディスプレイ１、手元操作用ディスプレイ２、タッチパネル３、回転ダイヤル４、リモコン１１、接触検知部５、検知デバイス特定部１２、操作対象情報格納部６、操作対象情報取得部７、画面構成情報格納部８、画面構成情報取得部９及び画面表示部１０のそれぞれが専用のハードウェアで構成されているものを想定しているが、操作インタフェース装置の全部又は一部がコンピュータで構成されていてもよい。
例えば、操作インタフェース装置の一部（検知デバイス特定部１２、操作対象情報格納部６、操作対象情報取得部７、画面構成情報格納部８、画面構成情報取得部９、画面表示部１０）がコンピュータで構成されている場合、操作対象情報格納部６及び画面構成情報格納部８をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、検知デバイス特定部１２、操作対象情報取得部７、画面構成情報取得部９及び画面表示部１０の処理内容を記述しているプログラムをコンピュータのメモリに格納し、コンピュータのＣＰＵが当該メモリに格納されているプログラムを実行するようにすればよい。
次に動作について説明する。
回転ダイヤル４に取り付けられている接触検知部５は、上記実施の形態１と同様に、回転ダイヤル４に対する操作者の接触の検知結果を出力する。
リモコン１１に取り付けられている接触検知部５は、リモコン１１に対する操作者の接触の検知結果を出力する。
ここで、図２４及び図２５はジョイスティック付リモコンの操作例を示す説明図である。
図２４及び図２５では、リモコン１１がジョイスティック付リモコンである場合を示しており、（ａ）は操作者がリモコンのジョイスティックに触れていない状態を示し、（ｂ）は操作者がリモコンのジョイスティックに触れている状態を示している。
検知デバイス特定部１２は、回転ダイヤル４に取り付けられている接触検知部５から出力された検知結果と、リモコン１１に取り付けられている接触検知部５から出力された検知結果とを入力して、遠隔操作デバイスである回転ダイヤル４及びリモコン１１の中で、接触検知部５により操作者の接触が検知された遠隔操作デバイスを特定する。
検知デバイス特定部１２は、接触検知部５により操作者の接触が検知された遠隔操作デバイスを特定すると、その遠隔操作デバイスが回転ダイヤル４であるのか、リモコン１１であるのかを操作対象情報取得部７に通知するが、操作者が回転ダイヤル４及びリモコン１１のどちらにも接触していなければ、その旨を操作対象情報取得部７に通知する。
操作対象情報取得部７は、上記実施の形態１と同様に、現在、液晶ディスプレイ１に表示されている画面を示す画面情報を入力する。
操作対象情報取得部７は、検知デバイス特定部１２から、操作者が回転ダイヤル４及びリモコン１１に接触していない旨の通知を受けていれば、上記実施の形態１と同様に、操作対象情報格納部６から、その画面情報が示す表示中の画面及びタッチパネル３に対応する操作対象情報を取得する。
操作対象情報取得部７は、検知デバイス特定部１２から、操作者が回転ダイヤル４に接触している旨の通知を受けていれば、上記実施の形態１と同様に、操作対象情報格納部６から、その画面情報が示す表示中の画面及び回転ダイヤル４に対応する操作対象情報を取得する。
また、操作対象情報取得部７は、検知デバイス特定部１２から、操作者がリモコン１１に接触している旨の通知を受けていれば、操作対象情報格納部６から、その画面情報が示す表示中の画面及びリモコン１１に対応する操作対象情報を取得する。
画面構成情報取得部９は、操作対象情報取得部７が操作対象情報を取得すると、上記実施の形態１と同様に、画面構成情報格納部８から、その操作対象情報に対応する画面構成情報を取得する。
画面表示部１０は、画面構成情報取得部９が画面構成情報を取得すると、その画面構成情報がタッチパネル操作用画面の構成情報であれば、上記実施の形態１と同様に、その画面構成情報にしたがってタッチパネル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。
画面表示部１０は、その画面構成情報が回転ダイヤル操作用画面の構成情報であれば、上記実施の形態１と同様に、その画面構成情報にしたがって回転ダイヤル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。
また、画面表示部１０は、その画面構成情報がリモコン操作用画面（遠隔操作デバイス操作用画面）の構成情報であれば、その画面構成情報にしたがってリモコン操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。
なお、画面表示部１０は、回転ダイヤル操作用画面又はリモコン操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示したのち、操作者が回転ダイヤル４又はリモコン１１から手を離す（接触検知部５が、回転ダイヤル４又はリモコン１１に対する操作者の接触を検知しない状態になる）と、一定時間経過後に、タッチパネル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。
以上で明らかなように、この実施の形態３によれば、遠隔操作デバイスとして、回転ダイヤル４とリモコン１１が実装されている場合、回転ダイヤル４及びリモコン１１の中で、接触検知部５により操作者の接触が検知された遠隔操作デバイスを特定する検知デバイス特定部１２を設け、接触検知部５により操作者の接触が検知されている状況下では、検知デバイス特定部１２により特定された遠隔操作デバイスに対応する遠隔操作デバイス操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示するように構成したので、複数の遠隔操作デバイスが実装されている場合でも、タッチパネル３及び複数の遠隔操作デバイスの操作性を高めることができる効果を奏する。
実施の形態４．
図２６はこの発明の実施の形態４による操作インタフェース装置を示す構成図であり、図において、図２３と同一符号は同一または相当部分を示すので説明を省略する。
近接検知部１３は例えば静電容量式のタッチセンサなどから構成されており、タッチパネル３に取り付けられている。
近接検知部１３はタッチパネル３と操作者間の距離が所定値以下になると、タッチセンサの静電容量が所定値以上になるので、その事をもって、操作者がタッチパネル３に近接していることを検知する。
なお、近接検知部１３は近接検知手段を構成している。
操作対象情報取得部１４は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、現在、液晶ディスプレイ１に表示されている画面を示す画面情報を入力し、近接検知部１３により操作者の近接が検知されていれば、操作対象情報格納部６から、その画面情報が示す表示中の画面及びタッチパネル３に対応する操作対象情報を取得する処理を実施する。
操作対象情報取得部１４は検知デバイス特定部１２から操作者が回転ダイヤル４に接触している旨の通知を受けていれば、操作対象情報格納部６から、その画面情報が示す表示中の画面及び回転ダイヤル４に対応する操作対象情報を取得する。
また、操作対象情報取得部１４は検知デバイス特定部１２から操作者がリモコン１１に接触している旨の通知を受けていれば、操作対象情報格納部６から、その画面情報が示す表示中の画面及びリモコン１１に対応する操作対象情報を取得する。
また、操作対象情報取得部１４は近接検知部１３により操作者の近接が検知されておらず、かつ、検知デバイス特定部１２から操作者が回転ダイヤル４及びリモコン１１に接触していない旨の通知を受けていれば、その画面情報が示す表示中の画面に対応する操作対象情報であって、タッチパネル操作用画面及び遠隔操作デバイス操作用画面（回転ダイヤル操作用画面、リモコン操作用画面）と異なる非操作用画面を表示するための操作対象情報を取得する処理を実施する。
なお、操作対象情報取得部１４は画面表示手段を構成している。
図２６では、操作インタフェース装置の構成要素である液晶ディスプレイ１、手元操作用ディスプレイ２、タッチパネル３、回転ダイヤル４、リモコン１１、接触検知部５、検知デバイス特定部１２、近接検知部１３、操作対象情報格納部６、操作対象情報取得部１４、画面構成情報格納部８、画面構成情報取得部９及び画面表示部１０のそれぞれが専用のハードウェアで構成されているものを想定しているが、操作インタフェース装置の全部又は一部がコンピュータで構成されていてもよい。
例えば、操作インタフェース装置の一部（検知デバイス特定部１２、操作対象情報格納部６、操作対象情報取得部１４、画面構成情報格納部８、画面構成情報取得部９、画面表示部１０）がコンピュータで構成されている場合、操作対象情報格納部６及び画面構成情報格納部８をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、検知デバイス特定部１２、操作対象情報取得部１４、画面構成情報取得部９及び画面表示部１０の処理内容を記述しているプログラムをコンピュータのメモリに格納し、コンピュータのＣＰＵが当該メモリに格納されているプログラムを実行するようにすればよい。
次に動作について説明する。
回転ダイヤル４に取り付けられている接触検知部５は、上記実施の形態３と同様に、回転ダイヤル４に対する操作者の接触の検知結果を出力する。
リモコン１１に取り付けられている接触検知部５は、上記実施の形態３と同様に、リモコン１１に対する操作者の接触の検知結果を出力する。
検知デバイス特定部１２は、上記実施の形態３と同様に、回転ダイヤル４に取り付けられている接触検知部５から出力された検知結果と、リモコン１１に取り付けられている接触検知部５から出力された検知結果とを入力して、遠隔操作デバイスである回転ダイヤル４及びリモコン１１の中で、接触検知部５により操作者の接触が検知された遠隔操作デバイスを特定する。
検知デバイス特定部１２は、接触検知部５により操作者の接触が検知された遠隔操作デバイスを特定すると、その遠隔操作デバイスが回転ダイヤル４であるのか、リモコン１１であるのかを操作対象情報取得部１４に通知するが、操作者が回転ダイヤル４及びリモコン１１のどちらにも接触していなければ、その旨を操作対象情報取得部１４に通知する。
近接検知部１３は、タッチパネル３と操作者間の距離が所定値以下になると、タッチセンサの静電容量が所定値以上になるので、その事をもって、操作者がタッチパネル３に近接していることを検知する。
近接検知部１３は、操作者がタッチパネル３に近接しているか否かを示す近接検知結果を操作対象情報取得部１４に出力する。
操作対象情報取得部１４は、図２３の操作対象情報取得部７と同様に、現在、液晶ディスプレイ１に表示されている画面を示す画面情報を入力する。
操作対象情報取得部１４は、近接検知部１３により操作者の近接が検知されていれば、操作対象情報格納部６から、その画面情報が示す表示中の画面及びタッチパネル３に対応する操作対象情報を取得する。
操作対象情報取得部１４は、近接検知部１３により操作者の近接が検知されておらず、検知デバイス特定部１２から操作者が回転ダイヤル４に接触している旨の通知を受けていれば、操作対象情報格納部６から、その画面情報が示す表示中の画面及び回転ダイヤル４に対応する操作対象情報を取得する。
また、操作対象情報取得部１４は、近接検知部１３により操作者の近接が検知されておらず、検知デバイス特定部１２から、操作者がリモコン１１に接触している旨の通知を受けていれば、操作対象情報格納部６から、その画面情報が示す表示中の画面及びリモコン１１に対応する操作対象情報を取得する。
ここでは、近接検知部１３により操作者の近接が検知されている場合、操作者が回転ダイヤル４又はリモコン１１に接触していても、タッチパネル３に対応する操作対象情報を優先的に取得するものを示しているが、近接検知部１３により操作者の近接が検知されていても、操作者が回転ダイヤル４又はリモコン１１に接触していれば、回転ダイヤル４又はリモコン１１に対応する操作対象情報を優先的に取得するようにしてもよい。
操作対象情報取得部１４は、近接検知部１３により操作者の近接が検知されておらず、かつ、検知デバイス特定部１２から操作者が回転ダイヤル４及びリモコン１１に接触していない旨の通知を受けていれば、その画面情報が示す表示中の画面に対応する操作対象情報であって、非操作用画面を表示するための操作対象情報を取得する。
非操作用画面としては、例えば、操作性よりも見やすさが優先されている画面などが考えられる。
また、非操作用画面としては、タッチパネル操作用画面と遠隔操作デバイス操作用画面（回転ダイヤル操作用画面、リモコン操作用画面）の中間的な画面が考えられる。具体的には、例えば、タッチパネル操作用画面が３行表示のリスト画面で、遠隔操作デバイス操作用画面が５行表示のリスト画面であれば、非操作用画面が４行表示のリスト画面などが考えられる。
画面構成情報取得部９は、操作対象情報取得部１４が操作対象情報を取得すると、上記実施の形態３と同様に、画面構成情報格納部８から、その操作対象情報に対応する画面構成情報を取得する。
画面表示部１０は、画面構成情報取得部９が画面構成情報を取得すると、その画面構成情報がタッチパネル操作用画面の構成情報であれば、上記実施の形態３と同様に、その画面構成情報にしたがってタッチパネル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。
画面表示部１０は、その画面構成情報が回転ダイヤル操作用画面の構成情報であれば、上記実施の形態３と同様に、その画面構成情報にしたがって回転ダイヤル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。
また、画面表示部１０は、その画面構成情報がリモコン操作用画面の構成情報であれば、上記実施の形態３と同様に、その画面構成情報にしたがってリモコン操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。
また、画面表示部１０は、その画面構成情報が非操作用画面の構成情報であれば、その画面構成情報にしたがって非操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。
なお、画面表示部１０は、タッチパネル操作用画面、回転ダイヤル操作用画面又はリモコン操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示したのち、操作者がタッチパネル３、回転ダイヤル４又はリモコン１１から手を離すと、一定時間経過後に、非操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示する。
以上で明らかなように、この実施の形態４によれば、タッチパネル３に対する操作者の近接を検知する近接検知部１３を設け、近接検知部１３により操作者の近接が検知されている状況下では、タッチパネル３の操作に適しているタッチパネル操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示し、近接検知部１３により操作者の近接が検知されておらず、かつ、接触検知部５により操作者の接触が検知されていない状況下では、タッチパネル操作用画面及び遠隔操作デバイス操作用画面と異なる非操作用画面を液晶ディスプレイ１及び手元操作用ディスプレイ２に表示するように構成したので、タッチパネル３、回転ダイヤル４及びリモコン１１の操作性を高めることができるとともに、操作者が操作を行わない状況下では、例えば、操作性よりも見やすさが優先されている画面などを表示することができる効果を奏する。
実施の形態５．
上記実施の形態１〜４では、接触検知部５により操作者の接触が検知されると、遠隔操作デバイス操作用画面が液晶ディスプレイ１及び手元操作用ディスプレイ２に表示されるものを示したが、図２７に示すように、接触検知部５により操作者の接触が検知されると、音声ガイダンスを出力する音声ガイダンス出力部２０（音声ガイダンス出力手段）を備えているようにしてもよい。
音声ガイダンス出力部２０の構成としては、例えば、音声合成器やスピーカなどから構成されているものが考えられる。
音声ガイダンスとしては、例えば、遠隔操作デバイス操作用画面に表示されるカーソルが指し示している選択項目の内容を読み上げるガイダンス、回転ダイヤル４やリモコン１１に対する接触が検知された旨を示すガイダンス、回転ダイヤル４やリモコン１１の操作方法を知らせるガイダンス、回転ダイヤル４やリモコン１１により選択可能な項目を知らせるガイダンスなどが考えられる。
実施の形態６．
上記実施の形態１〜５では、操作インタフェース装置が車載用操作デバイスとして搭載されている例を示したが、操作インタフェース装置が車載用操作デバイスとして搭載されるものに限るものではなく、図２８に示すような誘導加熱調理器（ＩＨクッキングヒータ）や電子レンジなどの調理家電、冷蔵庫や洗濯機などの家電、ＦＡ機器など、操作を伴う機器であれば、いかなる機器にも操作インタフェース装置を適用することができる。
因みに、図２８の誘導加熱調理器では、ＬＣＤ部が手元操作用ディスプレイ２であり、手元操作用ディスプレイ２の表示面にはタッチパネル３が取り付けられている。
また、誘導加熱調理器には、回転ダイヤル４が取り付けられているほか、複数の操作キー(遠隔操作デバイス)が取り付けられており、回転ダイヤル４及び複数の操作キーには、操作者の接触を検知する接触検知部５が設けられている。
なお、図２８の誘導加熱調理器では、液晶ディスプレイ１が設けられていないタイプの操作インタフェース装置であるが、手元操作用ディスプレイ２の代わりに、液晶ディスプレイ１を用いて、ＬＣＤ部を構成してもよい。この場合、液晶ディスプレイ１の表示面にはタッチパネル３が取り付けられることになる。
なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
この発明に係る操作インタフェース装置は、複数の操作インタフェース（例えば、タッチパネル、回転ダイヤル、リモコンなど）が併用されており、複数の操作インタフェースの操作性を高める必要があるものに適している。
１ 液晶ディスプレイ（第１のディスプレイ）、２ 手元操作用ディスプレイ（第２のディスプレイ）、３ タッチパネル、４ 回転ダイヤル（遠隔操作デバイス）、４ａ ノブ、４ｂ タッチセンサ、４ｃ ロータリーエンコーダ、４ｄ 押下スイッチ、５ 接触検知部（接触検知手段）、６ 操作対象情報格納部（画面表示手段）、７ 操作対象情報取得部（画面表示手段）、８ 画面構成情報格納部（画面表示手段）、９ 画面構成情報取得部（画面表示手段）、１０ 画面表示部（画面表示手段）、１１ リモコン（遠隔操作デバイス）、１２ 検知デバイス特定部（検知デバイス特定手段）、１３ 近接検知部（近接検知手段）、１４ 操作対象情報取得部（画面表示手段）、２０ 音声ガイダンス出力部（音声ガイダンス出力手段）。
この発明に係る操作インタフェース装置は、画面を表示するディスプレイと、ディスプレイの表示面に取り付けられているタッチパネルと、遠隔操作を受け付ける遠隔操作デバイスと、遠隔操作デバイスに対する操作者の接触を検知する接触検知手段とを設け、画面表示手段が、接触検知手段により操作者の接触が検知されていない状況下では、タッチパネルによる項目の選択操作に適している領域または数で選択対象となる項目がリスト表示されたタッチパネル操作用画面をディスプレイに表示し、接触検知手段により操作者の接触が検知されている状況下では、遠隔操作デバイスによる項目の選択操作に適している領域または数で選択対象となる項目がリスト表示された遠隔操作デバイス操作用画面をディスプレイに表示するようにしたものである。
この発明によれば、画面表示手段が、接触検知手段により操作者の接触が検知されていない状況下では、タッチパネルによる項目の選択操作に適している領域または数で選択対象となる項目がリスト表示されたタッチパネル操作用画面をディスプレイに表示し、接触検知手段により操作者の接触が検知されている状況下では、遠隔操作デバイスによる項目の選択操作に適している領域または数で選択対象となる項目がリスト表示された遠隔操作デバイス操作用画面をディスプレイに表示するように構成したので、タッチパネル及び遠隔操作デバイスの操作性を高めることができる効果がある。
この発明に係る操作インタフェース装置は、画面を表示するディスプレイと、ディスプレイの表示面に取り付けられているタッチパネルと、遠隔操作を受け付ける遠隔操作デバイスと、遠隔操作デバイスに対する操作者の接触を検知する接触検知手段とを設け、画面表示手段が、接触検知手段により操作者の接触が検知されていない状況下では、タッチパネルにより選択可能な項目がリスト表示されているタッチパネル操作用画面をディスプレイに表示し、接触検知手段により操作者の接触が検知されている状況下では、遠隔操作デバイスにより選択可能な項目が、タッチパネル操作用画面と異なる表示形態でリスト表示されている遠隔操作デバイス操作用画面をディスプレイに表示するようにしたものである。
この発明によれば、画面表示手段が、接触検知手段により操作者の接触が検知されていない状況下では、タッチパネルにより選択可能な項目がリスト表示されているタッチパネル操作用画面をディスプレイに表示し、接触検知手段により操作者の接触が検知されている状況下では、遠隔操作デバイスにより選択可能な項目が、タッチパネル操作用画面と異なる表示形態でリスト表示されている遠隔操作デバイス操作用画面をディスプレイに表示するように構成したので、タッチパネル及び遠隔操作デバイスの操作性を高めることができる効果がある。

Claims (9)

  1. 画面を表示するディスプレイと、
    上記ディスプレイの表示面に取り付けられているタッチパネルと、
    遠隔操作を受け付ける遠隔操作デバイスと、
    上記遠隔操作デバイスに対する操作者の接触を検知する接触検知手段と、
    上記接触検知手段により操作者の接触が検知されていない状況下では、上記タッチパネルの操作に適しているタッチパネル操作用画面を上記ディスプレイに表示し、上記接触検知手段により操作者の接触が検知されている状況下では、上記遠隔操作デバイスの操作に適している遠隔操作デバイス操作用画面を上記ディスプレイに表示する画面表示手段と
    を備えた操作インタフェース装置。
  2. 画面を表示する第１のディスプレイと、
    上記第１のディスプレイにより表示される画面と略同一の画面を表示する第２のディスプレイと、
    上記第２のディスプレイの表示面に取り付けられているタッチパネルと、
    遠隔操作を受け付ける遠隔操作デバイスと、
    上記遠隔操作デバイスに対する操作者の接触を検知する接触検知手段と、
    上記接触検知手段により操作者の接触が検知されていない状況下では、上記タッチパネルの操作に適しているタッチパネル操作用画面を上記第１及び第２のディスプレイに表示し、上記接触検知手段により操作者の接触が検知されている状況下では、上記遠隔操作デバイスの操作に適している遠隔操作デバイス操作用画面を上記第１及び第２のディスプレイに表示する画面表示手段と
    を備えた操作インタフェース装置。
  3. 画面表示手段は、遠隔操作デバイス操作用画面を表示する場合、現在選択可能な操作項目を指し示すカーソルをディスプレイに表示し、タッチパネル操作用画面を表示する場合、上記カーソルを非表示にすることを特徴とする請求項１記載の操作インタフェース装置。
  4. 接触検知手段は、操作者が遠隔操作デバイスに接触していない場合でも、上記遠隔操作デバイスと上記操作者間の距離が所定値以下である近接状態であれば、上記操作者が上記遠隔操作デバイスに接触している旨を示す検知結果を出力し、
    画面表示手段は、上記接触検知手段から上記検知結果を受けると、上記遠隔操作デバイスの操作に適している遠隔操作デバイス操作用画面をディスプレイに表示することを特徴とする請求項１記載の操作インタフェース装置。
  5. 複数の遠隔操作デバイスが実装されている場合、上記複数の遠隔操作デバイスの中で、接触検知手段により操作者の接触が検知された遠隔操作デバイスを特定する検知デバイス特定手段を設け、
    画面表示手段は、上記接触検知手段により操作者の接触が検知されている状況下では、上記検知デバイス特定手段により特定された遠隔操作デバイスに対応する遠隔操作デバイス操作用画面をディスプレイに表示することを特徴とする請求項１記載の操作インタフェース装置。
  6. タッチパネルに対する操作者の近接を検知する近接検知手段を設け、
    画面表示手段は、上記近接検知手段により操作者の近接が検知されている状況下では、上記タッチパネルの操作に適しているタッチパネル操作用画面をディスプレイに表示し、上記接触検知手段により操作者の接触が検知されている状況下では、遠隔操作デバイスの操作に適している遠隔操作デバイス操作用画面を上記ディスプレイに表示し、上記近接検知手段により操作者の近接が検知されておらず、かつ、上記接触検知手段により操作者の接触が検知されていない状況下では、上記タッチパネル操作用画面及び上記遠隔操作デバイス操作用画面と異なる画面を上記ディスプレイに表示することを特徴とする請求項１記載の操作インタフェース装置。
  7. 接触検知手段により操作者の接触が検知されると、音声ガイダンスを出力する音声ガイダンス出力手段を備えていることを特徴とする請求項１記載の操作インタフェース装置。
  8. 第２のディスプレイ及びタッチパネルの代わりに、タッチパッドが実装される場合、
    画面表示手段は、接触検知手段により操作者の接触が検知されていない状況下では、タッチパネル操作用画面と同一の画面であるタッチパネル操作用画面を第１のディスプレイに表示し、上記接触検知手段により操作者の接触が検知されている状況下では、遠隔操作デバイス操作用画面を上記第１のディスプレイに表示することを特徴とする請求項２記載の操作インタフェース装置。
  9. 接触検知手段が、遠隔操作を受け付ける遠隔操作デバイスに対する操作者の接触を検知する接触検知処理ステップと、
    画面表示手段が、上記接触検知処理ステップで操作者の接触が検知されていない状況下では、ディスプレイの表示面に取り付けられているタッチパネルの操作に適しているタッチパネル操作用画面を上記ディスプレイに表示し、上記接触検知処理ステップで操作者の接触が検知されている状況下では、上記遠隔操作デバイスの操作に適している遠隔操作デバイス操作用画面を上記ディスプレイに表示する画面表示処理ステップと
    を備えた操作インタフェース方法。
JP2014529163A 2012-08-10 2012-08-10 操作インタフェース装置及び操作インタフェース方法 Active JP5984939B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2012/005102 WO2014024230A1 (ja) 2012-08-10 2012-08-10 操作インタフェース装置及び操作インタフェース方法

Publications (2)

Publication Number Publication Date
JPWO2014024230A1 true JPWO2014024230A1 (ja) 2016-07-21
JP5984939B2 JP5984939B2 (ja) 2016-09-06

Family

ID=50067520

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014529163A Active JP5984939B2 (ja) 2012-08-10 2012-08-10 操作インタフェース装置及び操作インタフェース方法

Country Status (5)

Country Link
US (1) US20150130712A1 (ja)
JP (1) JP5984939B2 (ja)
CN (1) CN104508619A (ja)
DE (1) DE112012006801T5 (ja)
WO (1) WO2014024230A1 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016106541A1 (zh) * 2014-12-30 2016-07-07 深圳市柔宇科技有限公司 一种触控操作方法、触控操作组件及电子设备
JP6417251B2 (ja) * 2015-03-20 2018-11-07 アルプス電気株式会社 回転式入力装置
CN107735761B (zh) 2015-07-17 2022-03-04 克朗设备公司 用于工业车辆的具有图形用户界面的处理设备
CN105138257A (zh) * 2015-07-21 2015-12-09 合肥远诚信息科技有限公司 一种电子产品的控制方法
CN106850716A (zh) * 2015-12-07 2017-06-13 沈阳创智家科技有限公司 一种基于旋钮和手机控制的智能马桶盖
AU2017277622A1 (en) * 2016-06-10 2019-01-17 The Coca-Cola Company Dispenser control user interface
CN109792481B (zh) * 2016-09-27 2023-02-07 富士胶片株式会社 相机、相机的显示控制方法及存储介质
AU2017363529B2 (en) 2016-11-22 2022-01-13 Crown Equipment Corporation User interface device for industrial vehicle
US20200011698A1 (en) * 2017-03-23 2020-01-09 Aisin Aw Co., Ltd. Navigation system and navigation program
US11185300B2 (en) * 2017-09-02 2021-11-30 Seung Bum Ryu, SR. Dual exposure buttons controlled by a switch or an audio guide
EP3656932A4 (en) * 2017-12-27 2021-05-12 Kubota Corporation WORK EQUIPMENT AND ITS PRODUCTION PROCESS
HK1252075A2 (zh) 2018-03-28 2019-05-10 Defond Electech Co Ltd 用於控制電氣設備操作的控制系統和設備
GB2579075B (en) * 2018-11-19 2021-06-16 Caterpillar Inc Work machine with sensor enabled user control
KR20210156126A (ko) * 2020-06-17 2021-12-24 현대모비스 주식회사 노브를 이용한 디스플레이 제어 시스템

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08251442A (ja) * 1995-03-10 1996-09-27 Sony Corp 表示制御装置および表示方法
JP2005150921A (ja) * 2003-11-12 2005-06-09 Pioneer Electronic Corp 入力制御装置、入力制御システム
JP2012058909A (ja) * 2010-09-07 2012-03-22 Alpine Electronics Inc 電子機器

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7730401B2 (en) * 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
JP2007127993A (ja) * 2005-11-07 2007-05-24 Matsushita Electric Ind Co Ltd 表示装置およびナビゲーション装置
CN101193230A (zh) * 2006-11-27 2008-06-04 深圳Tcl新技术有限公司 提供最佳用户界面的装置及方法
US20090251609A1 (en) * 2008-04-02 2009-10-08 Gateway Inc. System and method for determining a mode of viewing a display and adapting displayed elements to the mode of viewing
DE102009048043A1 (de) * 2008-10-15 2010-04-22 Volkswagen Ag Multifunktionsanzeige- und Bediensystem sowie Verfahren zum Steuern eines solchen Systems mit optimierter grafischer Bediendarstellung
US8740426B2 (en) * 2010-12-07 2014-06-03 Continental Automotive Systems, Inc. Apparatus and method for vehicle display lighting
KR20120063982A (ko) * 2010-12-08 2012-06-18 한국전자통신연구원 시각장애 사용자를 위한 인터페이스 장치 및 방법
JP2012247911A (ja) * 2011-05-26 2012-12-13 Sony Corp 情報処理装置、情報処理方法、及びプログラム
JP5259772B2 (ja) * 2011-05-27 2013-08-07 株式会社東芝 電子機器、操作支援方法及びプログラム
US9541993B2 (en) * 2011-12-30 2017-01-10 Intel Corporation Mobile device operation using grip intensity
CN102611858A (zh) * 2012-02-24 2012-07-25 深圳创维数字技术股份有限公司 多模式遥控器的遥控控制方法、遥控器、用户终端及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08251442A (ja) * 1995-03-10 1996-09-27 Sony Corp 表示制御装置および表示方法
JP2005150921A (ja) * 2003-11-12 2005-06-09 Pioneer Electronic Corp 入力制御装置、入力制御システム
JP2012058909A (ja) * 2010-09-07 2012-03-22 Alpine Electronics Inc 電子機器

Also Published As

Publication number Publication date
DE112012006801T5 (de) 2015-04-23
CN104508619A (zh) 2015-04-08
JP5984939B2 (ja) 2016-09-06
WO2014024230A1 (ja) 2014-02-13
US20150130712A1 (en) 2015-05-14

Similar Documents

Publication Publication Date Title
JP5984939B2 (ja) 操作インタフェース装置及び操作インタフェース方法
KR101277256B1 (ko) 사용자 인터페이스를 위한 장치 및 방법
CN104520798B (zh) 便携电子设备及其控制方法和程序
US20090153495A1 (en) Input method for use in an electronic device having a touch-sensitive screen
US20120068946A1 (en) Touch display device and control method thereof
US20140055384A1 (en) Touch panel and associated display method
WO2013189014A1 (zh) 终端和界面操作管理方法
JP2007183914A (ja) コンテンツナビゲーション方法及びそのコンテンツナビゲーション装置
TW201309508A (zh) 車輛互動系統、車輛應用控制方法及電腦可讀取記錄媒體
JP2010140321A (ja) 情報処理装置、情報処理方法およびプログラム
JP2010211500A (ja) 操作装置
CN101681226A (zh) 用于输入接口的方法、设备、模块、装置和计算机程序
JP2014002748A (ja) 遠隔制御装置及びその制御方法
US9965148B2 (en) Unit manipulation system, and slave display device and master display device used in the system
JP2012190215A (ja) 入力処理装置、入力処理方法、プログラム
JP2012003404A (ja) 情報表示装置
JP2013145556A (ja) 電子機器およびその制御方法
JP2015170102A (ja) 情報処理装置
JP2017173989A (ja) 画像表示装置
JP2010205146A (ja) 入力装置
KR20180016957A (ko) 장치를 조작하기 위한 방법 및 조작 장치
JP2011134272A (ja) 情報処理装置、情報処理方法およびプログラム
US20130201126A1 (en) Input device
JP2002111813A (ja) 無線通信システムの携帯型通信装置
JP2004135340A (ja) 携帯電子デバイス上で使用するためのタッチパッド技術

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160705

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160802

R150 Certificate of patent or registration of utility model

Ref document number: 5984939

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250