JP6960792B2 - 情報出力装置および情報出力方法 - Google Patents

情報出力装置および情報出力方法 Download PDF

Info

Publication number
JP6960792B2
JP6960792B2 JP2017144928A JP2017144928A JP6960792B2 JP 6960792 B2 JP6960792 B2 JP 6960792B2 JP 2017144928 A JP2017144928 A JP 2017144928A JP 2017144928 A JP2017144928 A JP 2017144928A JP 6960792 B2 JP6960792 B2 JP 6960792B2
Authority
JP
Japan
Prior art keywords
screen
notification
user
display
control unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017144928A
Other languages
English (en)
Other versions
JP2019027837A (ja
Inventor
環 武内
貴洋 中川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Ten Ltd
Original Assignee
Denso Ten Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Ten Ltd filed Critical Denso Ten Ltd
Priority to JP2017144928A priority Critical patent/JP6960792B2/ja
Priority to US15/925,924 priority patent/US20190031098A1/en
Priority to DE102018106811.5A priority patent/DE102018106811A1/de
Publication of JP2019027837A publication Critical patent/JP2019027837A/ja
Application granted granted Critical
Publication of JP6960792B2 publication Critical patent/JP6960792B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11—Instrument graphical user interfaces or menu aspects
    • B60K2360/115—Selection of menu items
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B60K2360/1438—Touch screens
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Transportation (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Navigation (AREA)

Description

本発明は、情報出力装置および情報出力方法に関する。
従来、例えば車載のナビゲーション装置において、例えばポップアップ表示等の通知画面を表示する際に、表示内容に応じた通知音（いわゆるポップアップ音）を出力する情報出力装置が知られている。情報出力装置は、例えば車両において、目的地への接近等といった所定のイベントが発生する毎に通知画面の表示および通知音の出力を行う（例えば、特許文献１参照）。
特開２０１０−６７１２９号公報
しかしながら、従来の技術は、例えば車両等の移動体のように、イベントが数多く発生した場合、全てのイベントに対して通知画面の表示および通知音の出力を行うと、ユーザが煩わしさを感じるおそれがあった。
本発明は、上記に鑑みてなされたものであって、ユーザの煩わしさを低減することができる情報出力装置および情報出力方法を提供することを目的とする。
上述した課題を解決し、目的を達成するために、本発明に係る情報出力装置は、検出部と、表示制御部と、音声制御部とを備える。前記検出部は、表示部に接続される入力部へ行うユーザの操作を検出する。前記表示制御部は、前記ユーザに対して所定の通知情報を提示する通知画面を前記表示部に表示する。前記音声制御部は、前記表示制御部による前記通知画面の表示に伴う通知音を出力する。また、前記音声制御部は、前記検出部によって前記ユーザの操作が検出されている期間において、前記通知音の出力を制限する。
本発明によれば、ユーザの煩わしさを低減することができる。
図１は、実施形態に係る情報出力方法の概要を示す図である。 図２は、実施形態に係る情報出力装置の構成を示すブロック図である。 図３は、音声制御部の処理内容を示す図である。 図４は、音声制御部の処理内容を示す図である。 図５は、音声制御部の処理内容を示す図である。 図６は、入力部および表示部の位置関係を示す図である。 図７は、実施形態に係る情報出力装置が実行する出力制御処理の処理手順を示すフローチャートである。
以下、添付図面を参照して、本願の開示する情報出力装置および情報出力方法の実施形態を詳細に説明する。なお、この実施形態により本発明が限定されるものではない。
まず、図１を用いて実施形態に係る情報出力方法の概要について説明する。図１は、実施形態に係る情報出力方法の概要を説明する図である。図１では、車載のナビゲーション装置Ｎに情報出力方法を適用した場合について説明する。なお、情報出力方法の適用対象は、車載のナビゲーション装置Ｎに限定されるものではなく、画面表示に音声を伴う制御が行われる装置であればよい。
また、図１において、ナビゲーション装置Ｎは、表示部と入力部とを兼ねたタッチパネルディスプレイ１０と、スピーカ１１とを備えることとする。また、図１では、地図が表示された画面をユーザが指Ｕでタッチ操作（ユーザの操作の一例）しているとともに、目的地の周辺であることを示す通知画面１００が表示されていることとする。
通知画面１００とは、例えば所定のイベントが発生する毎に、ユーザに対してかかるイベントの発生を示す通知情報を提示する画面である。例えば、図１に示すように、設定された目的地に自車両が接近している場合に、「目的地周辺です」といった通知画面１００がポップアップ表示される。なお、通知画面１００は、ポップアップ表示に限定されるものではなく、画面全体または一部が変化するものであればよい。
実施形態に係る情報出力方法では、ユーザの操作（タッチ操作）が行われる間は、通知画面１００に伴う通知音１１０の出力を制限する。ここでいう通知音１１０とは、例えば、図１に示すような、「目的地周辺です」といった通知画面１００の内容に合わせた音声等の音に関する情報である。なお、通知音１１０は、音声に限らず、例えば「ポーン」のような単音であってもよい。
ここで、従来の情報出力方法について説明する。従来は、通知画面が表示される毎に、通知画面に伴う通知音を出力していた。しかしながら、例えば車両のような移動体では、通知画面が表示されるイベントが数多く発生するため、全ての通知画面に対して通知音を出力すると、ユーザが煩わしく感じてしまうおそれがあった。
そこで、実施形態に係る情報出力方法では、通知音１１０の出力を制限することとした。具体的には、実施形態に係る情報出力方法では、表示部に接続される入力部（タッチパネルディスプレイ１０）へ行うユーザの操作が検出されている期間において、通知音１１０を制限する。
例えば、図１に示すように、実施形態に係る情報出力方法では、ユーザが指Ｕで画面をタッチ操作している期間において、通知画面１００が表示された場合、通知音１１０の出力を停止、つまり、通知音１１０を出力しないようにする。
すなわち、ユーザが操作中は、画面を見ている可能性が高いため、わざわざ通知音１１０を出力せずとも、必然的に通知画面１００を認識させることができる。換言すれば、ユーザが操作していない期間だけに絞って通知音１１０を出力するようにする。従って、実施形態に係る情報出力方法によれば、ユーザの煩わしさを低減することができる。
なお、実施形態に係る情報出力装置１は、通知音１１０の出力を必ずしも停止する必要はなく、例えば、出力音量を下げたり、通知音１１０の出力を遅延させたり、電話の着信等といった必要最低限の通知すべきものに絞ったりしてもよい。
また、表示部および入力部は、タッチパネルディスプレイ１０に限定されるものではない。表示部および入力部の他の例については、図６を用いて後述する。
次に、図２を参照して、実施形態に係る情報出力装置１の構成について詳細に説明する。図２は、実施形態に係る情報出力装置１の構成を示すブロック図である。なお、図２では、本実施形態の特徴を説明するために必要な構成要素のみを機能ブロックで表しており、一般的な構成要素についての記載を省略している。
換言すれば、図２に図示される各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。例えば、各機能ブロックの分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することが可能である。
図２に示すように、実施形態に係る情報出力装置１は、タッチパネルディスプレイ１０と、スピーカ１１とに接続される。タッチパネルディスプレイ１０は、入力部１０ａと、表示部１０ｂとを備える。
実施形態に係る情報出力装置１は、制御部２と、記憶部３とを備える。制御部２は、操作受付部２１と、検出部２２と、出力制御部２３とを備える。記憶部３は、出力情報３１を記憶する。
ここで、情報出力装置１は、たとえば、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、ＨＤＤ（Hard Disk Drive）、入出力ポートなどを有するコンピュータや各種の回路を含む。
コンピュータのＣＰＵは、たとえば、ＲＯＭに記憶されたプログラムを読み出して実行することによって、制御部２の操作受付部２１、検出部２２および出力制御部２３として機能する。
また、制御部２の操作受付部２１、検出部２２および出力制御部２３の少なくともいずれか一つまたは全部をＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等のハードウェアで構成することもできる。
また、記憶部３は、たとえば、ＲＡＭやＨＤＤに対応する。ＲＡＭやＨＤＤは、出力情報３１や、各種プログラムの情報等を記憶することができる。なお、情報出力装置１は、有線や無線のネットワークで接続された他のコンピュータや可搬型記録媒体を介して上記したプログラムや各種情報を取得することとしてもよい。
出力情報３１は、通知画面１００および通知音１１０に関する情報や、通知情報の優先度に関する情報を含んだ情報である。なお、通知情報の優先度については、図５で後述する。
制御部２は、ユーザが入力部１０ａに対して操作を行っているか否かを検出し、検出結果に基づいてユーザに対して所定の通知情報を提示する通知画面１００の表示に合わせて通知音１１０を出力するか否かの制御を行う。
操作受付部２１は、ユーザの入力部１０ａに対する操作を受け付け、かかる操作に関する操作情報を検出部２２および出力制御部２３へ出力する。例えば、操作受付部２１は、タッチパネルディスプレイ１０におけるタッチ位置の情報を操作情報として出力する。
検出部２２は、操作受付部２１の操作情報に基づいて入力部１０ａへ行うユーザの操作を検出し、出力制御部２３へ出力する。例えば、検出部２２は、タッチ操作が行われてからの経過時間を合わせて計測し、出力制御部２３へ出力する。また、検出部２２は、第１の画面とは異なる第２の画面へのユーザの操作を検出するが、かかる点については後述する。
出力制御部２３は、表示制御部２３ａと、音声制御部２３ｂとを備え、通知画面１００の表示制御および通知音１１０の出力制御を行う。
表示制御部２３ａは、ユーザに対して所定の通知情報を提示する通知画面１００を表示部１０ｂに表示する。通知画面１００として、例えば電話の着信通知や、図示しないナビゲーション装置によって設定された目的地まで経路に関する通知（例えば、目的地周辺を示す通知や交差点等の分岐点に差し掛かった際の拡大表示等）、ＰＯＩ（Point Of Interest）情報に関する通知、外部装置からのデータ取得通知等がある。
音声制御部２３ｂは、表示制御部２３ａによる通知画面１００の表示に伴う通知音１１０の出力制御を行う。例えば、音声制御部２３ｂは、検出部２２によってユーザの操作が検出されている期間において、通知音１１０の出力を制限する。
具体的には、音声制御部２３ｂは、表示制御部２３ａによってユーザの操作に基づく結果を示す通知画面１００が表示される場合、通知音１１０の出力を制限する。例えば、ユーザが目的地を設定する一連の操作を行い、目的地が設定されたとする。
かかる場合、まず、表示制御部２３ａは、例えば「目的地を○○に設定しました」のように操作の結果である設定完了の通知画面１００を表示する。このとき、音声制御部２３ｂは、「目的地を○○に設定しました」の通知画面１００に合わせて通知音１１０を出力しないようにする。
これは、「目的地を○○に設定しました」のような設定完了の通知画面１００は、ユーザが操作した直後に表示されることから、必然的にユーザによって視認されると考えられるためである。従って、ユーザの操作の結果で表示される通知画面１００に対しては通知音１１０の出力を制限することで、ユーザの煩わしさを低減することができる。
なお、検出部２２によってユーザの操作が検出されている期間は、必ずしも連続的にユーザの操作が検出される場合に限定されるものではなく、例えばユーザの操作が断続的に検出される場合であってもよい。例えば、前のユーザの操作が検出されてから次のユーザの操作が検出される時間が所定時間以下（例えば、１秒）であればユーザの操作が継続しているとみなしてもよい。
また、音声制御部２３ｂは、ユーザの操作の結果を示す通知画面１００が表示されるまでにある程度時間がかかる場合には、通知音１１０を出力してもよい。かかる点について図３を用いて説明する。
図３は、音声制御部２３ｂの処理内容を示す図である。図３では、ユーザが画面の一部に表示されたメニュー画面１２０を操作して、例えばＵＳＢ（Universal Serial Bus）メモリ等の外部記憶媒体から所定の情報（例えば電話帳や楽曲データ）をナビゲーション装置Ｎに移行する場面を示している。なお、メニュー画面１２０は、ユーザによる所定の操作により出現する画面である。
通常、外部記憶媒体等から情報を移行する場合、データ量が多いとデータ移行完了までに時間がかかるため、データ移行の処理が行われる間は、表示制御部２３ａは、図３に示すような「Ｌｏａｄｉｎｇ．．．」等のビジーメッセージを通知画面１００として表示する。なお、「Ｌｏａｄｉｎｇ．．．」のような通知画面１００は、ユーザの操作後の即座に表示されるため、音声制御部２３ｂによる通知音１１０は出力されない。
そして、音声制御部２３ｂは、ユーザの操作後からかかる操作の結果を示す通知画面１００が表示されるまでの待機時間に応じて通知音１１０の出力の可否を決定する。具体的には、まず、表示制御部２３ａは、データ移行が完了すると、図３の下段に示すような「完了」といった処理完了を示す通知画面１００を表示する。
そして、図３に示すように、音声制御部２３ｂは、「Ｌｏａｄｉｎｇ．．．」が表示されてから「完了」が表示されるまでの待機時間が所定時間（例えば、４秒）未満であれば、通知音１１０の出力を制限（例えば、出力しない）する。すなわち、音声制御部２３ｂは、ユーザの操作の結果を示す通知画面１００については、ユーザの操作後から所定時間中（例えば、４秒）は、通知音１１０の制限を継続する。
一方、音声制御部２３ｂは、「Ｌｏａｄｉｎｇ．．．」が表示されてから「完了」が表示されるまでの待機時間が所定時間以上であれば、通知音１１０の制限を解除する、すなわち通知音１１０を出力する。
つまり、音声制御部２３ｂは、例えば待機時間が４秒未満であればユーザが未だ画面を見ているとみなして通知音１１０を制限し、一方で、待機時間が４秒以上であればユーザが画面から目をそらしているとみなして通知音１１０を出力する。これにより、ユーザの煩わしさを低減できるとともに、ユーザが画面から目をそらした場合でも処理完了などの通知画面１００を確実に認識させることができる。
また、音声制御部２３ｂは、通知音１１０の出力を停止することで、ユーザが通知音１１０に対して音慣れすることを防止できるため、通知音１１０を効果的にユーザに認識させることができる。
なお、図３では、データ移行の際の通知画面１００および通知音１１０の出力制御について説明したが、データ移行に限らず、ユーザの操作後から通知画面１００が表示されるまでに所定時間以上かかる処理であればよい。
なお、図３では、待機時間中もデータ移行の画面が表示され続けている場合について説明したが、例えば、データ移行等の待機時間中にユーザが他の画面に切り替えた場合には、待機時間が所定時間（例えば、４秒）未満であっても通知音１１０を出力してもよい。かかる点について、図４を用いて説明する。
図４は、音声制御部２３ｂの処理内容を示す図である。図４では、データ移行が行われている待機時間中にユーザがメニュー画面１２０を操作してラジオの画面に切り替えた場面について説明する。かかる場合、ラジオの画面に切り替えたとしても、引き続きデータ移行の処理は行われることとなる。
かかる場合、音声制御部２３ｂは、ユーザの操作の結果を示す通知画面１００が第１の画面に表示されるまでの待機時間中に、第１の画面から第２の画面への切り替えが行われた場合、通知画面１００における通知音１１０については制限を解除する。つまり、音声制御部２３ｂは、第２の画面に対してユーザが操作中であっても、前の画面（第１の画面）での結果を示す通知音１１０については出力する。
例えば、図４では、第１の画面は、メニュー画面１２０の「ＵＳＢ」が選択された状態の画面であり、第２の画面は、メニュー画面１２０の「ラジオ」が選択された状態の画面を指す。
つまり、音声制御部２３ｂは、データ移行中を示す「Ｌｏａｄｉｎｇ．．．」の通知画面１００が表示されている間に、ユーザが「ラジオ」の画面１３０に切り替えた場合には、待機時間が所定時間（例えば、４秒）未満であっても、通知音１１０を出力する。
このとき、表示制御部２３ａは、第１の画面における通知画面１００である「Ｌｏａｄｉｎｇ．．．」を第２の画面に表示し、処理が完了すると「完了」の通知画面１００を表示する。なお、第２の画面に通知画面１００を表示する場合、第１の画面における表示サイズよりもある程度縮小して表示する。
これにより、第２の画面が隠れることを防止できる。なお、第２の画面に通知画面１００（「Ｌｏａｄｉｎｇ．．．」および「完了」双方）を表示せず、通知音１１０のみを出力してもよい。
このように、第１の画面から第２の画面に切り替わった後に、第１の画面での処理結果について通知音１１０を出力することで、第１の画面での処理をユーザが忘れたとしても再度認識させることができる。
なお、音声制御部２３ｂによって通知音１１０の制限が解除されるのは、あくまでも前の画面（第１の画面）でのユーザの操作結果による通知音１１０のみである。換言すれば、第２の画面に切り替わった後もユーザが操作を継続し、第１の画面の通知音１１０とは無関係である第２の画面の通知音１１０については、音声制御部２３ｂによる制限が適用される。
また、図４では、「ＵＳＢ」および「ラジオ」の組み合わせを、第１の画面および第２の画面の組み合わせの一例として示しているに過ぎず、メニュー画面１２０のいずれの組み合わせであってもよい。あるいは、メニュー画面１２０と、図示しない目的地設定画面等の他の画面との組み合わせ等であってもよい。
また、音声制御部２３ｂは、ユーザが操作している間は、通知音１１０の出力を制限することとしたが、ユーザにとって重要なものについては、通知音１１０の制限を解除することとしてもよい。かかる点について、図５を用いて説明する。
図５は、音声制御部２３ｂの処理内容を示す図である。図５では、ユーザが画面を操作中に、電話の着信があった場面を示している。音声制御部２３ｂは、通知画面１００によって提示される通知情報の優先度に基づいて通知音１１０の制限の可否を決定する。
図５に示すように、まず、表示制御部２３ａは、電話の着信があった場合、かかる着信を示す通知画面１００を表示する。そして、音声制御部２３ｂは、ユーザの操作が検出されているか否かに関わらず、通知音１１０である着信音を出力する。
つまり、音声制御部２３ｂは、電話の着信を、ユーザに必ず認識させる通知情報として捉える、つまり、優先度が所定値以上である通知情報とし、通知音１１０を出力する。なお、優先度は、例えばユーザによって予め設定されてもよく、通知情報の種別に応じて任意に設定されてもよい。
このように、優先度の高い通知情報に対しては、ユーザの操作に関わらず通知音１１０を出力することで、ユーザにとって重要な情報を確実に認識させることができる。
なお、図５では、音声制御部２３ｂは、優先度が所定値以上であった場合には、ユーザの操作の有無に関わらず通知音１１０を出力したが、例えば、優先度の値に応じて通知音１１０の制限の度合いを変更することとしてもよい。
具体的には、音声制御部２３ｂは、検出部２２によってユーザの操作が検出されている期間に、優先度が所定値以上の通知情報（例えば、電話の着信）を示す通知画面１００を表示する場合、即座に通知音１１０を出力せず、所定時間後に通知音１１０を出力する。
つまり、ユーザが操作している間は、電話の着信に気が付く可能性が高いことから、通知音１１０を出力しないこととし、一方で、一定時間内にユーザが着信に対して何らかの応答操作を行わない場合に、通知音１１０を出力する。これにより、ユーザにとって重要な情報を確実に認識させることができつつ、ユーザの煩わしさを低減することができる。
次に、図６を用いて、車両Ｃにおける入力部１０ａおよび表示部１０ｂの位置関係における音声制御部２３ｂの処理について説明する。図６は、入力部１０ａおよび表示部１０ｂの位置関係を示す図である。
なお、図６では、入力部１０ａおよび表示部１０ｂが別体である場合について示している。図６に示す例では、入力部１０ａは、ナビゲーション装置Ｎの物理ボタン１１１、ステアリングスイッチ１１２およびタッチパッド１１３を例に挙げて説明する。
また、表示部１０ｂは、ナビゲーション装置Ｎのセンターディスプレイ１０１、ヘッドアップディスプレイ１０２およびメータディスプレイ１０３を例に挙げて説明する。
なお、各表示部１０ｂは、複数の入力部１０ａに接続されていることとする。一例をあげると、センターディスプレイ１０１は、物理ボタン１１１、ステアリングスイッチ１１２およびタッチパッド１１３それぞれに接続される。
かかる場合、音声制御部２３ｂは、表示部１０ｂと入力部１０ａとの位置関係に基づいて通知音１１０の制限の有無を決定する。具体的には、音声制御部２３ｂは、複数の入力部１０ａのうち、表示部１０ｂから所定距離以上離れて配置される入力部１０ａへのユーザの操作が検出された場合、通知音１１０の制限を解除する。
例えば、音声制御部２３ｂは、センターディスプレイ１０１に対してステアリングスイッチ１１２またはタッチパッド１１３を介してユーザの操作があった場合、通知音１１０を出力する、つまり、通知音１１０の制限を解除する。一方で、音声制御部２３ｂは、センターディスプレイ１０１に対して物理ボタン１１１を介してユーザの操作があった場合、通知音１１０の出力を制限する。
つまり、表示部１０ｂからある程度離れた位置の入力部１０ａを介して操作された場合、ユーザが画面を見ている可能性が比較的低くなるため、通知音１１０を出力することで、ユーザに対して確実に通知画面１００を認識させることができる。
また、例えば、ステアリングスイッチ１１２を介してヘッドアップディスプレイ１０２またはメータディスプレイ１０３に対してユーザの操作があった場合、音声制御部２３ｂは、通知音１１０の出力を制限してもよい。
つまり、音声制御部２３ｂは、ユーザである運転者が運転を行うために、必然的にヘッドアップディスプレイ１０２やメータディスプレイ１０３を視界に捉えている可能性が高いため、通知音１１０を出力せずとも通知画面１００を認識できる。すなわち、ユーザの煩わしさを低減することができる。このように、表示部１０ｂと入力１０ａとの位置関係に基づいて通知音１１０の出力制御を行うことで、ユーザの煩わしさを低減できる。
次に、図７を用いて、実施形態に係る情報出力装置１が実行する出力制御処理の処理手順について説明する。図７は、実施形態に係る情報出力装置１が実行する出力制御処理の処理手順を示すフローチャートである。
図７に示すように、まず、表示制御部２３ａは、ユーザに対して所定の通知情報を提示する通知画面１００を表示部１０ｂに表示するか否かを判定する（ステップＳ１０１）。
つづいて、検出部２２は、表示制御部２３ａによって通知画面１００を表示部１０ｂに表示すると判定された場合（ステップＳ１０１，Ｙｅｓ）、表示部１０ｂに接続される入力部１０ａへ行うユーザの操作を検出したか否か（つまり、操作中であるか否か）を判定する（ステップＳ１０２）。
つづいて、音声制御部２３ｂは、検出部２２によってユーザの操作が検出された場合（ステップＳ１０２，Ｙｅｓ）、通知画面１００における通知情報の優先度が所定値以上であるか否かを判定する（ステップＳ１０３）。
つづいて、音声制御部２３ｂは、通知情報の優先度が所定値未満であった場合（ステップＳ１０３，Ｎｏ）、ユーザに操作されている期間において、通知音１１０の出力を制限し（ステップＳ１０４）、処理を終了する。
一方、ステップＳ１０１において、表示制御部２３ａは、通知画面１００を表示部１０ｂに表示しないと判定した場合（ステップＳ１０１，Ｎｏ）、処理を終了する。
また、ステップＳ１０２において、音声制御部２３ｂは、検出部２２によってユーザの操作が検出されない、つまり操作中ではない場合（ステップＳ１０２，Ｎｏ）、通知画面１００が表示されるまでの待機時間が所定時間未満であるか否かを判定する（ステップＳ１０５）。
音声制御部２３ｂは、通知画面１００が表示されるまでの待機時間が所定時間未満である場合（ステップＳ１０４，Ｙｅｓ）、ユーザの操作によって第１の画面から第２の画面に切り替えがあったか否かを判定する（ステップＳ１０６）。
音声制御部２３ｂは、ユーザの操作によって第１の画面から第２の画面に切り替えがない場合（ステップＳ１０６，Ｎｏ）、処理をステップＳ１０４へ移行する。
一方、ステップＳ１０５において、音声制御部２３ｂは、通知画面１００が表示されるまでの待機時間が所定時間以上であった場合（ステップＳ１０５，Ｎｏ）、通知音１１０の制限を解除する、つまり通知音１１０を出力し（ステップＳ１０７）、処理を終了する。
また、ステップＳ１０３において、音声制御部２３ｂは、通知情報の優先度が所定値以上であった場合（ステップＳ１０３，Ｙｅｓ）、処理をステップＳ１０７へ移行する。
また、ステップＳ１０６において、音声制御部２３ｂは、ユーザの操作によって第１の画面から第２の画面に切り替えがあった場合（ステップＳ１０６，Ｙｅｓ）、処理をステップＳ１０７へ移行する。
上述してきたように、実施形態に係る情報出力装置１は、検出部２２と、表示制御部２３ａと、音声制御部２３ｂとを備える。検出部２２は、表示部１０ｂに接続される入力部１０ａへ行うユーザの操作を検出する。表示制御部２３ａは、ユーザに対して所定の通知情報を提示する通知画面１００を表示部１０ｂに表示する。音声制御部２３ｂは、表示制御部２３ａによる通知画面１００の表示に伴う通知音１１０を出力する。また、音声制御部２３ｂは、検出部２２によってユーザの操作が検出されている期間において、通知音１１０の出力を制限する。これにより、ユーザの煩わしさを低減することができる。
さらなる効果や変形例は、当業者によって容易に導き出すことができる。このため、本発明のより広範な態様は、以上のように表しかつ記述した特定の詳細および代表的な実施形態に限定されるものではない。したがって、添付の特許請求の範囲およびその均等物によって定義される総括的な発明の概念の精神または範囲から逸脱することなく、様々な変更が可能である。
１ 情報出力装置
２ 制御部
３ 記憶部
１０ タッチパネルディスプレイ
１０ａ 入力部
１０ｂ 表示部
１１ スピーカ
２１ 操作受付部
２２ 検出部
２３ 出力制御部
２３ａ 表示制御部
２３ｂ 音声制御部
３１ 出力情報
１００ 通知画面
１０１ センターディスプレイ
１０２ ヘッドアップディスプレイ
１０３ メータディスプレイ
１１０ 通知音
１１１ 物理ボタン
１１２ ステアリングスイッチ
１１３ タッチパッド
Ｃ 車両
Ｎ ナビゲーション装置

Claims (11)

  1. 表示部に接続される入力部へ行うユーザの操作を検出する検出部と、
    前記ユーザに対して所定の通知情報を提示する通知画面を前記表示部に表示する表示制御部と、
    前記表示制御部による前記通知画面の表示に伴う通知音を出力する音声制御部と、を備え、
    前記表示制御部は、
    前記ユーザの操作に基づく結果を示す前記通知画面を表示し、
    前記音声制御部は、
    前記検出部によって前記ユーザの操作が検出されている期間において、前記通知音の出力を制限し、前記結果を示す通知画面が表示されるまでの待機時間が所定時間未満である場合には、前記通知音の出力を制限し、前記待機時間が所定時間以上である場合には、前記通知音の制限を解除すること
    を特徴とする情報出力装置。
  2. 前記音声制御部は、
    前記検出部によって前記ユーザの操作が検出されている期間において、前記通知音の出力を停止すること
    を特徴とする請求項１に記載の情報出力装置。
  3. 前記検出部は、
    前記通知画面が表示される第１の画面とは異なる第２の画面への切り替えを行う前記ユーザの切替操作をさらに検出し、
    前記音声制御部は、
    前記第１の画面で行われた前記ユーザの操作に基づく前記結果を示す前記通知画面が前記第１の画面に表示されるまでの待機時間中に、前記第１の画面から前記第２の画面への前記切り替えが行われた場合、当該通知画面における前記通知音については制限を解除すること
    を特徴とする請求項１または２に記載の情報出力装置。
  4. 前記音声制御部は、
    前記表示部と前記入力部との位置関係に基づいて前記通知音の制限の有無を決定すること
    を特徴とする請求項１〜３のいずれか１つに記載の情報出力装置。
  5. 前記表示部は、
    複数の前記入力部に接続され、
    前記音声制御部は、
    前記複数の入力部のうち、前記表示部から所定距離以上離れて配置される前記入力部への前記ユーザの操作が検出された場合、前記通知音の制限を解除すること
    を特徴とする請求項４に記載の情報出力装置。
  6. 表示部に接続される入力部へ行うユーザの操作を検出する検出部と、
    前記ユーザに対して所定の通知情報を提示する通知画面を前記表示部に表示する表示制御部と、
    前記表示制御部による前記通知画面の表示に伴う通知音を出力する音声制御部と、を備え、
    前記表示制御部は、
    前記ユーザの操作に基づく結果を示す前記通知画面を表示し、
    前記検出部は、
    前記通知画面が表示される第１の画面とは異なる第２の画面への切り替えを行う前記ユーザの切替操作をさらに検出し、
    前記音声制御部は、
    前記検出部によって前記ユーザの操作が検出されている期間において、前記通知音の出力を制限し、前記第１の画面で行われた前記ユーザの操作に基づく前記結果を示す前記通知画面が前記第１の画面に表示されるまでの待機時間中に、前記第１の画面から前記第２の画面への前記切り替えが行われた場合、当該通知画面における前記通知音については制限を解除すること
    を特徴とする情報出力装置。
  7. 前記音声制御部は、
    前記結果を示す通知画面が表示されるまでの待機時間が所定時間以上の場合、前記通知音の制限を解除すること
    を特徴とする請求項６に記載の情報出力装置。
  8. 前記音声制御部は、
    前記表示部と前記入力部との位置関係に基づいて前記通知音の制限の有無を決定すること
    を特徴とする請求項６または７に記載の情報出力装置。
  9. 前記表示部は、
    複数の前記入力部に接続され、
    前記音声制御部は、
    前記複数の入力部のうち、前記表示部から所定距離以上離れて配置される前記入力部への前記ユーザの操作が検出された場合、前記通知音の制限を解除すること
    を特徴とする請求項８に記載の情報出力装置。
  10. 表示部に接続される入力部へ行うユーザの操作を検出する検出工程と、
    前記ユーザに対して所定の通知情報を提示する通知画面を前記表示部に表示する表示制御工程と、
    前記表示制御工程による前記通知画面の表示に伴う通知音を出力する音声制御工程と、を含み、
    前記表示制御工程は、
    前記ユーザの操作に基づく結果を示す前記通知画面を表示し、
    前記音声制御工程は、
    前記検出工程によって前記ユーザの操作が検出されている期間において、前記通知音の出力を制限し、前記結果を示す通知画面が表示されるまでの待機時間が所定時間未満である場合には、前記通知音の出力を制限し、前記待機時間が所定時間以上である場合には、前記通知音の制限を解除すること
    を特徴とする情報出力方法。
  11. 表示部に接続される入力部へ行うユーザの操作を検出する検出工程と、
    前記ユーザに対して所定の通知情報を提示する通知画面を前記表示部に表示する表示制御工程と、
    前記表示制御工程による前記通知画面の表示に伴う通知音を出力する音声制御工程と、を含み、
    前記表示制御工程は、
    前記ユーザの操作に基づく結果を示す前記通知画面を表示し、
    前記検出工程は、
    前記通知画面が表示される第１の画面とは異なる第２の画面への切り替えを行う前記ユーザの切替操作をさらに検出し、
    前記音声制御工程は、
    前記検出工程によって前記ユーザの操作が検出されている期間において、前記通知音の出力を制限し、前記第１の画面で行われた前記ユーザの操作に基づく前記結果を示す前記通知画面が前記第１の画面に表示されるまでの待機時間中に、前記第１の画面から前記第２の画面への前記切り替えが行われた場合、当該通知画面における前記通知音については制限を解除すること
    を特徴とする情報出力方法。
JP2017144928A 2017-07-26 2017-07-26 情報出力装置および情報出力方法 Active JP6960792B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2017144928A JP6960792B2 (ja) 2017-07-26 2017-07-26 情報出力装置および情報出力方法
US15/925,924 US20190031098A1 (en) 2017-07-26 2018-03-20 Information output device and information output method
DE102018106811.5A DE102018106811A1 (de) 2017-07-26 2018-03-22 Informationsausgabevorrichtung und informationsausgabeverfahren

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017144928A JP6960792B2 (ja) 2017-07-26 2017-07-26 情報出力装置および情報出力方法

Publications (2)

Publication Number Publication Date
JP2019027837A JP2019027837A (ja) 2019-02-21
JP6960792B2 true JP6960792B2 (ja) 2021-11-05

Family

ID=65004187

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017144928A Active JP6960792B2 (ja) 2017-07-26 2017-07-26 情報出力装置および情報出力方法

Country Status (3)

Country Link
US (1) US20190031098A1 (ja)
JP (1) JP6960792B2 (ja)
DE (1) DE102018106811A1 (ja)

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2929927B2 (ja) * 1993-12-14 1999-08-03 日産自動車株式会社 走行情報提供装置
US20020137505A1 (en) * 2000-02-18 2002-09-26 Eiche Steven A. Audio detection for hands-free wireless
JP2006007919A (ja) * 2004-06-24 2006-01-12 Mazda Motor Corp 車両用操作ユニット
JP2006090962A (ja) * 2004-09-27 2006-04-06 Matsushita Electric Ind Co Ltd ナビゲーション装置
JP4650247B2 (ja) * 2005-12-07 2011-03-16 株式会社デンソー カーナビゲーションシステム
JP4286876B2 (ja) * 2007-03-01 2009-07-01 富士通テン株式会社 画像表示制御装置
JP4942814B2 (ja) * 2007-06-05 2012-05-30 三菱電機株式会社 車両用操作装置
JP5219705B2 (ja) 2008-09-12 2013-06-26 富士通テン株式会社 情報処理装置および情報処理方法
CN101672648A (zh) * 2008-09-12 2010-03-17 富士通天株式会社 信息处理装置、图像处理装置
DE102009058145A1 (de) * 2009-12-12 2011-06-16 Volkswagen Ag Bedienverfahren für eine Anzeigevorrichtung eines Fahrzeugs
JP4918179B2 (ja) * 2010-01-26 2012-04-18 クラリオン株式会社 車載情報装置
EP2624116B1 (en) * 2012-02-03 2017-09-06 EchoStar Technologies L.L.C. Display zoom controlled by proximity detection
US20140309852A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Automatic vehicle diagnostic detection and communication
US9348607B2 (en) * 2012-06-07 2016-05-24 Apple Inc. Quiet hours for notifications
US9638537B2 (en) * 2012-06-21 2017-05-02 Cellepathy Inc. Interface selection in navigation guidance systems
US10728716B2 (en) * 2013-06-28 2020-07-28 Blackberry Limited Context sensitive message notifications
JP6033804B2 (ja) * 2014-02-18 2016-11-30 本田技研工業株式会社 車載機器操作装置
US9171447B2 (en) * 2014-03-14 2015-10-27 Lenovo Enterprise Solutions (Sinagapore) Pte. Ltd. Method, computer program product and system for analyzing an audible alert
US9615350B2 (en) * 2014-06-20 2017-04-04 Google Inc. Notification management
US9444422B2 (en) * 2014-08-27 2016-09-13 Echostar Uk Holdings Limited Contextual volume control
JP6072748B2 (ja) * 2014-10-03 2017-02-01 本田技研工業株式会社 報知装置
KR101623856B1 (ko) * 2014-10-17 2016-05-24 현대자동차주식회사 에이브이엔 장치, 차량, 및 에이브이엔 장치의 제어방법
JP6292218B2 (ja) * 2015-04-03 2018-03-14 株式会社デンソー 情報提示装置及び情報提示方法
US20170185146A1 (en) * 2015-12-29 2017-06-29 Ford Global Technologies, Llc Vehicle notification system including transparent and mirrored displays
US20170210289A1 (en) * 2016-01-22 2017-07-27 Arjun Kundan Dhawan Driver Focus Analyzer
US11691565B2 (en) * 2016-01-22 2023-07-04 Cambridge Mobile Telematics Inc. Systems and methods for sensor-based detection, alerting and modification of driving behaviors
US10048929B2 (en) * 2016-03-24 2018-08-14 Lenovo (Singapore) Pte. Ltd. Adjusting volume settings based on proximity and activity data
US20170291543A1 (en) * 2016-04-11 2017-10-12 GM Global Technology Operations LLC Context-aware alert systems and algorithms used therein
US10546153B2 (en) * 2016-09-20 2020-01-28 International Business Machines Corporation Attention based alert notification
US9975379B1 (en) * 2016-11-18 2018-05-22 GM Global Technology Operations LLC Vehicle alerts for drivers
JP6895634B2 (ja) * 2016-12-16 2021-06-30 パナソニックＩｐマネジメント株式会社 情報処理システム、情報処理方法、およびプログラム
US10166996B2 (en) * 2017-02-09 2019-01-01 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for adaptively communicating notices in a vehicle
US10489105B2 (en) * 2017-03-31 2019-11-26 Toyota Motor Engineering & Manufacturing North America, Inc. Quiet-all input for two or more audio sources in a vehicle
US10788934B2 (en) * 2017-05-14 2020-09-29 Microsoft Technology Licensing, Llc Input adjustment
WO2018212829A1 (en) * 2017-05-16 2018-11-22 Apple Inc. Device, method, and graphical user interface for presenting vehicular notifications

Also Published As

Publication number Publication date
JP2019027837A (ja) 2019-02-21
DE102018106811A1 (de) 2019-01-31
US20190031098A1 (en) 2019-01-31

Similar Documents

Publication Publication Date Title
JP5319852B1 (ja) アンロック画像上でジェスチャを行うことによる機器のアンロッキング
US9377937B2 (en) Method and device for executing object on display
JP5962085B2 (ja) 表示制御装置、その制御方法およびプログラム
US20110093816A1 (en) Data display method and mobile device adapted to thereto
WO2017032068A1 (zh) 一种查看短信的方法及用户终端
US8630150B2 (en) Mobile terminal and method of setting alarm therein
EP3070589A1 (en) Method and device for amplifying selected region of previewing interface
WO2006073020A1 (ja) スクリーン表示装置
JP6902340B2 (ja) 入力装置、プログラムおよび検出方法
US10095277B2 (en) Electronic apparatus and display control method thereof
CN106327580A (zh) 一种基于虚拟现实视景的信息处理方法及终端
CN111198640B (zh) 一种交互界面显示方法及装置
US7715804B2 (en) Keypad display method and apparatus of portable device
WO2017032069A1 (zh) 一种短信处理方法及用户终端
KR20100048297A (ko) 이동통신 단말기의 화면제어장치 및 화면제어방법
JP2016506554A (ja) 適応的入力
WO2018000382A1 (zh) 一种查看应用程序的图形用户界面、方法及终端
US20140302833A1 (en) Method and device for forwarding an incoming call according to a remaining battery capacity
JP2014134867A (ja) 情報処理端末
JP2011170675A (ja) 選択装置、選択方法、ならびに、プログラム
JP6960792B2 (ja) 情報出力装置および情報出力方法
JP2012083831A (ja) タッチパネル装置、タッチパネルの表示方法、タッチパネルの表示処理プログラム、及び記録媒体
JP5065838B2 (ja) 座標入力装置
JP4765893B2 (ja) タッチパネル搭載装置、外部装置、及び外部装置の操作方法
JP6991320B2 (ja) 表示制御装置および表示制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200331

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210331

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210914

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211012

R150 Certificate of patent or registration of utility model

Ref document number: 6960792

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150