JP6978033B2 - ガス機器 - Google Patents

ガス機器 Download PDF

Info

Publication number
JP6978033B2
JP6978033B2 JP2017085756A JP2017085756A JP6978033B2 JP 6978033 B2 JP6978033 B2 JP 6978033B2 JP 2017085756 A JP2017085756 A JP 2017085756A JP 2017085756 A JP2017085756 A JP 2017085756A JP 6978033 B2 JP6978033 B2 JP 6978033B2
Authority
JP
Japan
Prior art keywords
voice
voice instruction
stove
thermal power
cpu
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017085756A
Other languages
English (en)
Other versions
JP2018185077A (ja
Inventor
訓昌 ▲高▼野
Original Assignee
株式会社パロマ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社パロマ filed Critical 株式会社パロマ
Priority to JP2017085756A priority Critical patent/JP6978033B2/ja
Publication of JP2018185077A publication Critical patent/JP2018185077A/ja
Application granted granted Critical
Publication of JP6978033B2 publication Critical patent/JP6978033B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Electric Ovens (AREA)

Description

本発明はガス機器に関する。
バーナを備えるコンロにおいて、使用者の音声指示を認識しそれに従った制御を行うことは、例えば他の作業中で手が離せない場合や、手が汚れていて操作しづらい場合等に有効である。特許文献1に記載の音信号制御式コンロは、制御ユニットに音信号制御ユニットを付設する。音信号制御ユニットは、加熱器の所定の作動に対応した少なくとも1個の制御用音信号を格納したメモリと、音信号入力部と、入力された音信号を認識する音信号認識部と、認識した音信号をメモリ内の制御用音信号と照合する音信号照合部とから構成する。音が入力された時、音信号照合部での照合で音信号認識部が認識した音信号と格納された音信号とが一致した時、その音信号に対応して制御ユニットがバーナの作動を制御する。
特許第4313495号公報
音声指示を誤認識した場合、意図しない操作が勝手に行われる可能性があるので、音声認識は慎重に行う必要がある。特に、コンロにおいて受け付け可能な音声指示の選択肢が多い場合、これらの選択肢と認識した音声指示との一致を全て判断しなければならず、時間がかかるという問題点があった。
本発明の目的は、音声指示の誤認識を低減しつつ認識にかかる時間を短縮できるガス機器を提供することである。
本発明の請求項1に係るガス機器は、複数の加熱部を有し、外部からの音声指示に基づき前記複数の加熱部の夫々の動作を制御する制御部を備えたガス機器であって、前記音声指示は、前記加熱部の火力操作の指示である第1音声指示と、前記加熱部の場所の指示である第2音声指示とを備え、前記制御部は、前記第1音声指示を外部から受け付ける第1受付手段と、前記第1受付手段が受け付けた前記第1音声指示を認識する第1認識手段と、前記複数の加熱部の現在の状態を検出する検出手段と、前記検出手段が検出した前記複数の加熱部の現在の状態に基づき、前記複数の加熱部の夫々に対応する前記第2音声指示の情報である音声指示情報を記憶する記憶手段に記憶した前記音声指示情報の中から、現在受け付け可能な前記第2音声指示の候補を抽出する抽出手段と、前記抽出手段が抽出した前記候補を報知する報知手段と、前記第2音声指示を外部から受け付ける第2受付手段と、前記第2受付手段が受けつけた前記第2音声指示を認識する第2認識手段と、前記抽出手段が抽出した前記候補の中から、前記第2認識手段が認識した前記第2音声指示と一致する前記候補が有るか判断する判断手段と、前記判断手段が前記第2音声指示と一致する前記候補が有ると判断した場合、前記第2認識手段が認識した前記第2音声指示に対応する前記加熱部の場所に対して、前記第1認識手段が前記第1音声指示を認識した前記火力操作の内容に基づき動作を実行する実行手段とを備えてもよい。
請求項1に係る発明のガス機器によれば、ガス機器の現在の状態を検出し、その検出した現在の状態に基づき、記憶手段に記憶した音声指示情報の中から、現在受け付け可能な音声指示の候補を抽出する。そして、抽出された候補の中で、外部から受け付けた音声指示と一致する音声指示が有るか判断するので、一致するか判断する音声指示の数を減らすことができる。これにより、全ての音声指示との一致を判断する場合に比べ、短時間で判断できるので、認識にかかる時間を短縮できる。よって、ガス機器の使い勝手を向上できる。
また、ガス機器は現在の状態に基づき、現在受け付け可能な音声指示を報知するので、使用者は、現在受け付け可能な音声指示を、ガス機器に対して正しく発話できる。これにより、音声指示の誤認識を低減できる
コンロ1の斜視図である。 コンロ1の電気的構成を示すブロック図である。 音声指示情報テーブル741の概念図である。 音声操作制御処理のフローチャートである。 図4の続きを示すフローチャートである。 音声操作制御の一例を示す状態遷移図である。 音声指示情報テーブル741から現在受付可能な項目を抽出するときの説明図である。 表示部22に説明画面101が表示された状態を示す図である。 表示部22に説明画面102が表示された状態を示す図である。
以下、本発明の実施形態を説明する。以下に記載されている装置の構造、フローチャートなどは、特定的な記載がない限り、それのみに限定する趣旨ではなく、単なる説明例である。図面は、本発明が採用しうる技術的特徴を説明するために用いられるものである。以下説明は、図中に矢印で示す左右、前後、上下を使用する。
図1を参照し、コンロ1の構造を説明する。コンロ1は、ビルトインコンロである。コンロ1の上面には、天板3が設置されている。天板3において、右手前には右コンロバーナ4、左手前には左コンロバーナ6、中央奥側には奥コンロバーナ5が設けられる。各コンロバーナ4〜6の中央には、鍋底に当接して調理鍋の温度を検出するセンサ組立20が設けられる。センサ組立20は、上下方向に出退可能に設けられ、サーミスタ40(図2参照)を格納する。コンロバーナ4〜6の近傍には、失火を検出する為の熱電対50(図2参照)、点火する為のイグナイタ60(図2参照)が設けられる。天板3の後方部には、コンロ1内に設置されたグリル庫(図示略)の排気口7が設けられる。天板3の上面手前側の略中央部には、矩形状の表示部22が設けられる。表示部22は例えば液晶である。表示部22には、コンロ1の設定画面(図示略)、後述する音声操作時における説明画面101,102(図8,図9参照)等が表示される。
コンロ1の前面の略中央には、グリル扉8が設けられる。グリル扉8は手前側に移動可能に支持され、コンロ1内部に設けられるグリル庫(図示略)の前側の開口部を開閉する。グリル庫内には、グリルバーナ(図示略)が設けられる。グリルバーナの近傍にも、熱電対50とイグナイタ60が設けられる。グリル扉8の右側の領域には、右側から左側に向かって順に、正面視円形状の操作ボタン11〜13が横一列に並んで設けられる。グリル扉8の左側の領域にも、操作ボタン11〜13と同一高さ位置に、同一円形状の操作ボタン14が設けられる。
操作ボタン11は右コンロバーナ4、操作ボタン12は奥コンロバーナ5、操作ボタン13は左コンロバーナ6、操作ボタン14はグリルバーナを、点火及び消火する為に押下される。操作ボタン11〜14は、対応するバーナの消火時、コンロ1の前面とほぼ面一の状態である(図1参照)。点火の為に押下されると、後述する制御回路70によって、対応するバーナへの点火処理が実行され、公知のプッシュ・プッシュ機構(図示略)によって、操作ボタン11〜14は、コンロ1前面から前方に向けて略円柱状に突出し、該突出した状態で回動操作が可能となる。操作ボタン11〜14を回動操作すると、制御回路70によって、回動操作量に応じたガス量になるように、対応するバーナへのガス供給量が調整される。
コンロ1の内部には、4つのガス量調節機構30(図2参照)が設けられる。ガス量調節機構30は、対応するコンロバーナ4〜6、及びグリルバーナへのガス供給量を調整する。ガス量調節機構30は、弁機構部31とモータ32を備える。弁機構部31は、例えばガス流路を流れるガス量を調整するニードル弁や電磁弁等の各種弁を備える。モータ32は、弁機構部31の弁を駆動し、ガス流路を流れるガス流量が調整される。モータ32の駆動は、制御回路70によって制御される。
操作ボタン11〜14を押し込んで手前に突出させると、制御回路70は、ガス量調節機構30のモータ32に通電する。これにより、弁機構部31が駆動され、ガス流路が開放されることで、対応するバーナにガスが供給される。そして、操作ボタン11〜14の回転方向と回転角度に応じて、制御回路70は、モータ32を正逆方向に回転し、弁機構部31における弁の開度を調節する。これにより、ガス流路を流れるガス量が調節されることで、対応するバーナの火力が調節される。また、操作ボタン11〜14をコンロ1内部に押し込んで収容させると、制御回路70は、モータ32を逆回転させる。これにより、弁機構部31の弁は逆向きに駆動され、ガス流路が閉じられることで、対応するバーナへのガスの供給が遮断される。
操作ボタン11の直上には、電源ボタン25が設けられる。操作ボタン14の左斜め上方には、コンロ1前面のパネルを貫通する穴17が設けられ、その穴17に対して、マイク76がコンロ1内部から臨むようにして設けられる。本実施形態のコンロ1は、音声操作機能を有する。音声操作機能とは、使用者の音声指示をマイク76で受け付け、音声認識を行うことによって音声指示の内容を特定し、対象バーナの火力操作を可能とする機能である。音声指示とは、コンロ1に対して音声で行う火力等の操作指示である。なお、音声操作機能を実現する為の音声操作制御処理(図4,図5)については後述する。
図2を参照し、コンロ1の電気的構成を説明する。コンロ1は、制御回路70を備える。制御回路70は、CPU71、ROM72、RAM73、不揮発性メモリ74等を備える。CPU71は、コンロ1の各種動作を統括制御する。ROM72は、音声操作制御プログラム等の各種プログラムを記憶する。音声操作制御プログラムは、後述する音声操作制御処理(図4,図5参照)を実行するものである。RAM73は、各種情報を一時的に記憶する。不揮発性メモリ74は、後述する音声指示情報テーブル741(図3参照)、温調制御の為の各種パラメータ、音声認識で使用する音響モデルデータ、バーナ火力情報等の各種データを記憶する。バーナ火力情報とは、モータ32の出力軸の回転角度とバーナ火力とを対応づけた情報である。本実施形態では、火力小から大までを1〜10の10段階に分け、夫々の段階に対してモータ32の回転角度を割り当てている。これにより、CPU71は、モータ32の出力軸の回転角度に基づき、対応するバーナ火力を特定できる。
制御回路70には、電源回路81、サーミスタ入力回路82、熱電対入力回路83、イグナイタ回路84、操作パネル24、モータ制御回路85、音声入力回路86、音声出力回路87、ブザー回路88、表示制御回路89、センサ19等が電気的に各々接続される。使用者によって電源ボタン25が押下されると、電源回路81は、電源23から供給される交流(例えば100V)を直流(例えば5V)に降圧して整流し、各種回路に電力を供給する。故にコンロ1の電源はオンする。使用者によって電源ボタン25が再押下されると、電源回路81は、各種回路への電力供給を遮断する。故にコンロ1の電源はオフする。
サーミスタ入力回路82は、各バーナに設けられたセンサ組立20に格納するサーミスタ40からの検出信号を、制御回路70に入力する。熱電対入力回路83は、熱電対50からの検出値(熱起電力に対応する信号)を、制御回路70に入力する。イグナイタ回路84は、CPU71からの制御信号に基づき、対応するバーナのイグナイタ60を駆動する。操作パネル24は、コンロ1の前面パネルの右下部分に収容され、該部分を押し込むことによって手前側に引き出される。操作パネル24は、使用者によるタイマ設定、調理メニューに応じた火力制御の選択等の入力等を受け付け、該入力信号を制御回路70に入力する。モータ制御回路85は、CPU71からの制御信号に基づき、4つのガス量調節機構30のモータ32の駆動を制御する。
音声入力回路86は、マイク76で集音された音声のアナログ信号をデジタル信号に変換し、制御回路70に入力する。音声出力回路87は、CPU71からの制御信号に基づき、音声のデジタル信号をアナログ信号に変換し、スピーカ77に出力する。ブザー回路88は、CPU71の制御信号に基づき、圧電ブザー78を駆動する。表示制御回路89は、CPU71からの制御信号に基づき、表示部22に各種画面を表示する。センサ19は、操作ボタン11〜14の夫々に設けられ、操作ボタン11〜14の回転方向と回転角度を検出し、該検出信号を制御回路70に入力する。CPU71は、センサ19からの検出信号に基づき、操作ボタン11〜14の回転方向と回転角度に対応するように、モータ32の出力軸を回転させ、弁機構部31を駆動させる。これにより、ガス流路を流れるガス量が調節され、対応するバーナの火力が調節される。
ガス量調節機構30には、ポジションメータ35が設けられる。ポジションメータ35は、モータ32の出力軸の回転角度を検出し、該検出信号を制御回路70に入力する。CPU71は、ポジションメータ35からの検出信号に基づき、モータ32の出力軸の回転角度を認識できるので、不揮発性メモリ74に記憶するバーナ火力情報を参照することで、対応するバーナ火力を特定できる。
コンロ1の音声認識機能の原理を簡単に説明する。音声認識は、周知の音声認識技術を用いることができる。例えば不揮発性メモリ74に記憶する「音響モデルデータ」と、入力された音声信号(波形)のマッチング(照合)で行うとよい。「音響モデルデータ」とは、平均的な発音データを基に作られた音声の単語辞書を意味する。マッチングには、例えば「HMM(Hidden Markov Model)」と呼ばれる理論を用いるとよい。マッチングは通常10〜20ミリ秒の単位で、単語の先頭から順次行うのがよい。なお、音声認識技術は、これ以外の技術でもよい。
図3を参照し、音声指示情報テーブル741を説明する。説明の便宜上、右コンロバーナ4、左コンロバーナ6、奥コンロバーナ5、グリルバーナを夫々、右コンロ4、左コンロ6、奥コンロ5、グリルと呼ぶ場合がある。本実施形態で受け付ける音声指示は、主に、点火状態のバーナを特定し、そのバーナの火力を操作(変更)することを目的とする。それ故、音声指示は、火力を操作するバーナの場所と、火力を操作する内容とを夫々特定する必要がある。そこで、不揮発性メモリ74に記憶する音声指示情報テーブル741は、コンロ1において受け付け可能な音声指示について、火力操作(1)、場所(2)、その他(3)の三つのカテゴリに分けて設定する。なお、音声指示とは、音声で受け付けるコンロ1の制御命令である。
火力操作(1)は、右コンロ4、奥コンロ5、左コンロ6、グリルの夫々において調節可能な火力操作であり、本実施形態では、何れのバーナにおいても、「火力大」、「火力中」、「火力小」の3つの操作が設定されている。場所(2)は、火力操作を行うバーナの場所であり、本実施形態では、「右コンロ」、「奥コンロ」、「左コンロ」、「グリル」の4つの場所が設定されている。その他(3)は、火力操作と場所以外の音声指示であり、本実施形態では、何れのバーナにおいても、「消火」と「音声操作終了」の2つの音声指示が設定されている。音声指示情報テーブル741では、4つの場所に対して、3つの火力操作とその他2つの音声指示が夫々設定されているので、音声指示の組み合わせは、4×(3+2)=20通りとなる。即ち、本実施形態のコンロ1では、音声指示で、20通りの操作を受け付け可能である。
ところで、上記の通り、本実施形態では、音声指示情報テーブル741に設定される20通りの操作を音声指示で行うが、仮に一回の音声指示でバーナの場所と火力操作を特定しようとした場合、音声指示の言葉は、場所と火力操作の組み合わせで構成されるので、音声認識する言葉が長くなってしまい、誤認識する可能性が高くなる。例えば、右コンロ4の火力を大に変更する制御命令を、仮に一回の音声指示で行う場合、音声指示は、例えば「右コンロを火力大」となるため、音声認識する言葉は長くなってしまう。音声認識において、音響データとのマッチングによる誤認識を低減するには、認識する音声の言葉を短くすることが有効である。
そこで、本実施形態では、後述する音声操作制御処理(図4,図5参照)において、一回の音声指示で場所と火力操作を特定するのではなく、二回の音声指示に分けて順次特定することで、一回で音声認識する言葉を短くする。これにより、認識率を上げることができるので、誤認識の低減を図ることができる。
なお、コンロ1で受け付け可能な音声指示は、音声指示情報テーブル741に記憶する火力操作(1)、場所(2)、その他(3)の各カテゴリで記憶する音声指示であり、「右コンロ」、「奥コンロ」、「左コンロ」、「グリル」、「火力大」、「火力中」、「火力小」「消火」、「音声操作終了」の9種類である。これらに対応する9つの音響データが不揮発性メモリ74に記憶されている。本実施形態では、外部から受け付けた音声指示のデジタルデータについて、これら9つ全ての音響データとの一致を判断するのではなく、コンロ1の状態に応じて現在受け付け可能な音声指示を抽出し、抽出した音声指示の音響データとの一致を判断する。これにより、音声認識にかかる時間を短縮できる。具体例については後述する。
図4〜図9を参照し、音声操作制御処理を説明する。使用者がコンロ1の電源ボタン25を押下し、電源回路81から制御回路70に電力が供給されると、CPU71はROM72から音声操作制御プログラムを読出し、本処理を実行する。
図4に示すように、CPU71は初期設定を行う(S1)。初期設定では、CPU71は、各種処理に必要な設定値の初期化を行う。次いで、CPU71は、右コンロ4、左コンロ6、奥コンロ5、グリルのうち、何れかのバーナが点火されたか否か判断する(S2)。何れかのバーナが点火されるまで(S2:NO)、CPU71はS2に戻って待機する。何れかのバーナが点火された場合(S2:YES)、CPU71は熱電対50からの検出信号に基づき、点火されたバーナを特定し(S3)、点火中のバーナの情報を、点火バーナ情報としてRAM73に記憶する。
次いで、CPU71は点火案内の音声を出力する(S4)。例えば、右コンロ4が点火された場合、「右コンロが点火されました。」という音声を、スピーカ77から出力する。これにより、使用者は、右コンロ4が点火されたことを認識できる。これ以後、別のバーナが点火されて、複数のバーナが点火状態となる場合も、CPU71は、熱電対50からの検出信号に基づき、点火されたバーナを特定し、点火バーナ情報としてRAM73に記憶する。
次いで、CPU71は、使用者に音声操作の開始方法を知らせる為、音声操作開始の説明の音声を、スピーカ77から出力する(S5)。CPU71は例えば、「音声操作を開始するには、"音声操作開始"と話しかけて下さい。」という音声を、スピーカ77から出力する。CPU71は、音声操作の開始を受け付ける(S6)。使用者は、点火したバーナについて、音声指示で火力操作等を行う場合、コンロ1に向かって「音声操作開始」と話し掛ける。使用者の音声はマイク76で集音され、音声入力回路86によって音声のアナログ信号からデジタル信号に変換され、制御回路70に入力される。CPU71は、変換された音声のデジタル信号について、「音声操作開始」の音響データとのマッチングを行うことで、音声認識処理を行う。
CPU71は、音声認識処理の結果、使用者の音声指示を、「音声操作開始」と認識したか否か判断する(S7)。例えば、「音声操作開始」と認識しなかった、又は認識を失敗した場合(S7:NO)、CPU71はS6に戻り、使用者からの音声指示を再度受け付け、音声認識処理を行う。なお、音声操作を行わない場合、使用者は「音声操作開始」と発話しないので、マイク76から別の音声が集音されても、CPU71は「音声操作開始」とは認識しない(S7:NO)。それ故、音声操作は開始されない。
音声認識処理の結果、マイク76で集音した使用者の音声を「音声操作開始」と認識した場合(S7:YES)、CPU71は音声操作を開始すると共に(S8)、音声操作開始案内の音声を出力する(S9)。CPU71は、例えば、「音声操作を開始します。」という音声を、スピーカ77から出力する。これにより、使用者は、コンロ1において音声操作が開始されたことを認識できる。
次いで、CPU71は、コンロ1の各バーナの現在の状態を検出する(S10)。ここで、例えば、図6に示す状態Aを想定する。状態Aは、左コンロ6、奥コンロ5、及びグリルが何れも点火した状態であり、右コンロ4は消火した状態である。CPU71は、熱電対50からの検出信号に基づき、点火状態にあるバーナを特定し、RAM73に記憶する点火バーナ情報を更新する。CPU71は、RAM73に記憶する点火バーナ情報に基づき、奥コンロ5、左コンロ6、グリルは点火状態、右コンロ4は消火状態であることを速やかに認識できる。
次いで、CPU71は、現在点火中のバーナに基づき、不揮発性メモリ74に記憶する音声指示情報テーブル741の中から、現在受け付け可能な火力操作を抽出する(S11)。現在点火中のバーナは、奥コンロ5、左コンロ6、グリルであるので、現在受け付け可能な火力操作は「火力大」、「火力中」、「火力小」である。それ故、図7に示す第一状態のように、CPU71は、音声指示情報テーブル741の中から、「火力大」、「火力中」、「火力小」を抽出する(図中太枠P1参照)。なお、本実施形態では、上記の通り、調節可能な火力操作は共通しているので、これら3つの火力操作を抽出すればよい。これに合わせ、CPU71は、その他の音声指示である「消火」と「音声操作終了」も抽出する(図中太枠P1参照)。CPU71は、これら抽出した火力操作を含む制御命令の項目の情報を、RAM73に記憶するとよい。
次いで、CPU71は、抽出した現在受け付け可能な制御命令の項目に基づき、コンロ1で現在受け付け可能な項目の選択肢を使用者に知らせる為のガイド音声を作成し、スピーカ77から出力する(S12)。ガイド音声として、例えば、「火力大、火力中、火力小、消火、音声操作終了の中から一つを選び、音声指示をして下さい。」という音声を出力する。なお、現在受け付け可能な項目の中には、「消火」と「音声操作終了」が含まれるので、料理途中で点火中のバーナを消火したい場合や、音声操作から手動操作に切替えたい場合等に特に有効である。
これと同時に、CPU71は、表示部22に、説明画面101(図8参照)を表示する(S13)。説明画面101には、出力したガイド音声と同じ内容で、現在受け付けることができる制御命令の項目がリスト表示される。これにより、使用者は、現在受け付けることができる制御命令の項目を、音声と表示の両方で認識できるので、音声指示の単語を明確に認識できる。よって、コンロ1は、使用者が間違った単語で音声指示を出してしまうのを防止できる。
また、料理中は、例えば食材をフライパン等で炒めるときの油の音、換気扇の音、調理器具同士が当たったときの音等、様々な要因の雑音があるので、スピーカ77からのガイド音声だけでは、聞き逃しがあったり、聞いても後に忘れてしまったりする可能性がある。しかしながら、本実施形態では、ガイド音声をスピーカ77から出力すると共に、表示部22に説明画面101を表示する。これにより、仮にガイド音声で出力された説明を聞き逃してしまった場合でも、表示部22に表示された説明画面101で確認できる。さらに、現在行うことができる火力操作の単語を説明画面101で明確に表示できるので、使用者は、コンロ1に対して正確な単語で発話できる。それ故、誤認識の可能性を低減できる。
使用者は、音声と表示で知らされた火力操作の中から、点火中のバーナに対して行う一つの火力操作を選び、コンロ1に対して話し掛ける。ところが、使用者は、コンロ1から現在受け付け可能な項目のガイド音声を聞いたとしても、その選択肢を忘れてしまったり、音声指示を間違えて行う場合がある。また、選択肢を忘れてしまったことで、音声指示が出せない場合もある。また、使用者がコンロ1から離れた場所にいて、表示部22を確認できない場合もある。そこで、CPU71は、使用者から音声指示を受け付けたか否か判断する(S14)。音声指示を受け付けなかった場合(S14:NO)、CPU71は火力操作の音声指示の受け付けを開始してから、音声指示を受け付けない状態が一定時間(例えば10秒)経過したか否か判断する(S15)。一定時間経過するまでは(S15:NO)、CPU71はS14に戻って待機する。音声指示を受け付けない状態が一定時間経過した場合(S15:YES)、使用者は、現在受け付け可能な項目を忘れてしまっていること等が想定されるので、CPU71はS12に戻り、再度、ガイド音声を、スピーカ77から出力する。これにより、使用者は、現在受け付け可能な項目を再確認できるので、正しい音声指示で、コンロ1に話し掛けることができる。
一方、使用者から音声指示を受け付けた場合(S14:YES)、CPU71は、受け付けた音声指示を認識する(S16)。ここでは、受け付けた音声指示のデジタルデータと、不揮発性メモリ74に記憶された音響データのうち、現在受け付け可能な制御命令の音響データとのマッチングを行う。CPU71は、図7に示す第一状態のように、音声指示情報テーブル741から、マッチングを行う現在受け付け可能な項目の候補を抽出する。ここで、右コンロ4は消火されているので、右コンロ4の火力操作とその他の音声指示は除外される。奥コンロ5、左コンロ6、グリルは点火状態であるので、CPU71は、これらの共通する火力操作である「火力大」、「火力中」、「火力小」と、その他の音声指示である「消火」と「火力操作」を抽出する(図中太枠P1参照)。即ち、5つの候補が抽出されたことになる。よって、CPU71は、抽出した項目に対応する5つの音響データを不揮発性メモリ74から読出し、受け付けた音声指示のデジタルデータとのマッチングを行い、例えば一致率が所定の閾値以上であれば、その項目と一致したと判断できる。
CPU71は、現在受け付け可能な項目と一致したか否か判断する(S17)。上記のように、例えば使用者が、現在受け付け可能な項目を忘れてしまったことで、現在受け付け可能な火力操作の言葉とは異なる火力操作の音声指示をしてしまった場合、現在受け付け可能な火力操作の言葉とは一致していないので(S17:NO)、認識失敗である。そこで、再度正しい火力操作を使用者に知らせる為に、CPU71はS12に戻り、再度ガイド音声を、スピーカ77から出力する。これにより、使用者は、自分が発話した火力操作の言葉が間違っていることに気付くと共に、現在受け付け可能な項目を再確認できるので、正しい音声指示でコンロ1に話し掛けることができる。
そして、音声認識の結果、使用者からの音声指示が、現在受け付け可能な項目と一致した場合(S17:YES)、CPU71は、認識した音声指示は「音声操作終了」であるか否か判断する(S18)。音声指示が「音声操作終了」であった場合(S18:YES)、CPU71は、音声操作を終了すると共に、「音声操作を終了しました。」という音声を、スピーカ77から出力し(S20)、S5の処理に戻る。これにより、使用者は、音声操作が終了したことを認識できる。
ここで、例えば、図6に示す状態Aで、点火中のグリルのみを消火したい場合、「消火」は現在受け付け可能な火力操作であるので、使用者はコンロ1に向かって「消火」と話し掛ける。音声指示が「消火」であった場合(S17:YES、S18:NO)、CPU71は、認識した火力操作である「消火」を、火力操作情報としてRAM73に一旦記憶する(S19)。続いて、図5に示すように、CPU71は、現在点火中のバーナは一つか否か判断する(S21)。ここで、状態Aでは、3つのバーナ(左コンロ6、奥コンロ5、グリル)が点火中であるので(S21:NO)、先に受け付けた火力操作(本実施例では「消火」)が、3つの点火中のバーナのうち、どの場所のバーナを対象としているのか不明である。それ故、火力操作に続き、火力操作の対象バーナの場所を音声指示で特定する必要がある。特に「消火」のような早急に行う必要がある火力操作に対応する為、CPU71は、以下の制御を引き続き実行する。
先ず、CPU71は、3つの点火中のバーナに対応するガス量調節機構30のモータ32の回転角度を求め、不揮発性メモリに記憶するバーナ火力情報を参照し、現在点火中のバーナと、夫々のバーナ火力を特定する(S22)。CPU71は、特定した点火中のバーナと、夫々のバーナ火力の情報を、元火力情報としてRAM73に一旦記憶する(S23)。状態Aでは、点火中のバーナは、左コンロ6、奥コンロ5、グリルであり、左コンロ6の火力は9、奥コンロ5の火力は3、グリルの火力は8である。次いで、CPU71は、これら点火中のバーナの夫々のガス量調節機構30のモータ32を駆動し、弁機構部31を駆動することで、3つの点火中のバーナ火力を一旦全て弱火力に変更する(S24)。よって、図6に示す状態Bのように、左コンロ6、奥コンロ5、グリルの夫々の火力は一旦全て1となる。これにより、火力操作の対象バーナの場所が特定されるまでは、ひとまず火力が弱められるので、火力を弱める等の早急に行う必要がある場合等に十分対応できる。
次いで、CPU71は、コンロ1の各バーナの現在の状態を再度検出する(S25)。例えば、図6に示す状態Bでは、状態Aと同様に、奥コンロ5、左コンロ6、グリルが点火した状態であり、右コンロ4は消火した状態である。CPU71は、熱電対50からの検出信号に基づき、点火状態にあるバーナを特定し、RAM73に記憶する点火バーナ情報を更新する。それ故、CPU71は、RAM73に記憶する点火バーナ情報に基づき、奥コンロ5、左コンロ6、グリルは点火状態、右コンロ4は消火状態であることを認識できる。
次いで、CPU71は、火力操作を行うバーナの場所を特定する為に、現在点火中のバーナに基づき、不揮発性メモリ74に記憶する音声指示情報テーブル741の中から、現在受け付け可能な場所を抽出する(S26)。現在点火中のバーナは、奥コンロ5、左コンロ6、グリルであるので、現在受け付け可能な場所は「奥コンロ」、「左コンロ」、「グリル」である。それ故、図7に示す第二状態のように、CPU71は、音声指示情報テーブル741から「奥コンロ」、「左コンロ」、「グリル」を抽出する(図中太枠P2参照)。これに合わせ、その他の音声指示である「消火」と「音声操作終了」も抽出する(図中太枠P3参照)。CPU71は、抽出したこれら現在受け付け可能な場所等の項目の情報を、RAM73に記憶するとよい。
そして、使用者に火力操作の場所を音声指示で特定させる為、CPU71は、抽出した現在受け付け可能な制御命令の項目に基づき、コンロ1で現在受け付け可能な項目の選択肢を使用者に知らせる為のガイド音声を作成し、スピーカ77から出力する(S27)。ガイド音声として、例えば、「左コンロ、奥コンロ、グリル、消火、音声操作終了の中から一つを選び、音声指示をして下さい。」という音声を出力する。なお、ガイド音声で説明する項目の選択肢の中には、現在受け付け可能な場所に加え、「消火」と「音声操作終了」が含まれるので、料理途中で点火中のバーナを消火したい場合や、音声操作から手動操作に切替えたい場合等に特に有効である。
これと同時に、CPU71は、表示部22に、説明画面102(図9参照)を表示する(S28)。説明画面102には、出力したガイド音声と同じ内容で、現在選択できる場所と、「消火」と「音声操作終了」の各項目がリスト表示される。これにより、使用者は、現在受け付けできる項目の選択肢を、音声と表示の両方で認識できるので、音声指示の単語を明確に認識できる。よって、使用者が間違った単語で音声指示を出してしまうのを防止できる。
使用者は、音声と表示で知らされた場所の中から、音声指示で指定した火力操作を行うバーナの場所を選び、コンロ1に対して話し掛ける。ここで、火力操作の受け付け時と同様に、使用者は、コンロ1から現在受け付け可能な場所のガイド音声を聞いたとしても、その選択肢を忘れてしまったり、音声指示を間違えて行う場合がある。また、選択肢を忘れてしまったことで、音声指示が出せない場合もある。また、使用者がコンロ1から離れた場所にいて、表示部22を確認できない場合もある。そこで、CPU71は、使用者から音声指示を受け付けたか否か判断する(S29)。音声指示を受け付けなかった場合(S29:NO)、CPU71は火力操作の音声指示の受け付けを開始してから、音声指示を受け付けない状態が一定時間(例えば5秒)経過したか否か判断する(S30)。一定時間経過するまでは(S30:NO)、CPU71はS29に戻って待機する。音声指示を受け付けない状態が一定時間経過した場合(S30:YES)、使用者は、例えば現在受け付け可能な項目を忘れてしまっている可能性があるので、CPU71はS27に戻り、再度、現在受け付け可能な項目の選択肢を知らせる為のガイド音声を、スピーカ77から出力する。これにより、使用者は、現在受け付け可能な項目を再確認できるので、正しい音声指示でコンロ1に話し掛けることができる。
そして、使用者から音声指示を受け付けた場合(S29:YES)、CPU71は、受け付けた音声指示を認識する(S31)。ここでは、受け付けた音声指示のデジタルデータと、不揮発性メモリ74に記憶された音響データのうち、現在受け付け可能な制御命令の音響データとのマッチングを行う。CPU71は、図7に示す第二状態のように、音声指示情報テーブル741から、マッチングを行う現在受け付け可能な項目の候補を抽出する。ここで、右コンロ4は消火されているので、右コンロ4の火力操作とその他の音声指示は除外される。奥コンロ5、左コンロ6、グリルは点火状態であるので、「奥コンロ」、「左コンロ」、「グリル」と、その他の音声指示である「消火」と「火力操作」を抽出する(図中太枠P2,P3参照)。即ち、5つの候補が抽出されたことになる。よって、CPU71は、抽出した項目に対応する5つの音響データを不揮発性メモリ74から読出し、受け付けた音声指示のデジタルデータとのマッチングを行い、例えば一致率が所定の閾値以上であれば、その項目と一致したと判断する。
このように、CPU71は、マッチングを行うバーナの場所について、4つ全ての場所の音響データとのマッチングを行うのではなく、消火されている「右コンロ」を除外した3つの場所に限定することで、マッチングを行う音響データの数を少なくできる。これにより、音声認識にかかる時間を短縮できるので、コンロ1の使い勝手を向上できる。
CPU71は、受け付けた音声指示が現在受け付け可能な項目の言葉と一致したか否か判断する(S32)。上記のように、例えば使用者が、現在受け付け可能な場所を忘れてしまったことで、現在受け付け可能な場所とは異なる場所の音声指示をしてしまった場合、現在受け付け可能な場所の言葉とは一致していないので(S32:NO)、再度正しい場所を使用者に知らせる為に、CPU71はS27に戻り、再度ガイド音声を、スピーカ77から出力する。これにより、使用者は、自分が発話した場所が間違っていることに気付くと共に、現在受け付け可能な場所を再確認できるので、正しい音声指示でコンロ1に話し掛けることができる。
そして、音声認識の結果、使用者からの音声指示が、現在受け付け可能な項目と一致した場合(S32:YES)、CPU71は、認識した音声指示は「音声操作終了」であるか否か判断する(S33)。音声指示が「音声操作終了」であった場合(S33:YES)、CPU71は、図4のS20に進み、音声操作を終了する共に、「音声操作を終了しました。」という音声を、スピーカ77から出力する。これにより、使用者は、音声操作が終了したことを認識できる。CPU71はS5に戻り上記処理を繰り返す。
一方、図6に示す状態Bにおいて、使用者はグリルのみを消火したいので、場所指定の音声指示は「グリル」である。CPU71が使用者からの音声指示を「グリル」と認識した場合(S32:YES、S33:NO)、グリルを対象バーナに特定する(S34)。即ち、先に受け付けた火力操作である「消火」を行う対象バーナは、「グリル」であるので、CPU71は、グリルを消火する内容の実行操作音声の音声データを作成し、スピーカ77から出力する(S35)。CPU71は、例えば「グリルを消火します。」という実行操作音声を出力する。これにより、使用者は、これからグリルが消火されることを認識できる。
そして、実行操作音声を出力した後、CPU71は対象バーナである「グリル」に対し、RAM73に記憶された火力操作情報に基づき、先に受け付けた「消火」を実行する(S36)。さらに、これと同時に、又はこれに少し遅れて、CPU71は、対象バーナ以外のバーナ火力を、RAM73に記憶する元火力情報を参照し、元火力に復帰させる(S37)。対象バーナ以外のバーナは、左コンロ6と奥コンロ5である。CPU71は、RAM73に記憶する元火力情報に基づき、左コンロ6と奥コンロ5の夫々の火力を、弱火力に切替える前の元火力に復帰させる。これにより、図6に示す状態Cのように、グリルは消火され、左コンロ6は火力1から元火力9へ、奥コンロ5は火力1から元火力3へ復帰させることができる。これにより、複数のバーナが点火状態であっても、使用者の音声指示で、グリルのみを正しく安全に消火できる。本実施形態では、火力操作が実行される前に、実行操作音声が出力されるので、使用者はこれから火力が切り替わるのを事前に認識できるので、火力が不意に切り替わるのを防止できる。
次いで、CPU71は点火中のバーナが有るか否か判断する(S38)。点火中のバーナが有る場合(S38:YES)、CPU71は、図4のS12に戻り、再度火力操作の説明の音声を出力し、表示部22に説明画面101を表示することで、現在行うことができる火力操作の音声指示を使用者に認識させ、上記処理を繰り返す。
一方、コンロ1のバーナが全て消火されている場合(S38:NO)、CPU71は、音声操作を終了し、音声操作終了の音声をスピーカ77から出力する(S39)。CPU71は、例えば「音声操作を終了します。」という音声を出力する。CPU71は、図4のS2に戻り、再びバーナが点火されたか否かを判断し、上記処理を繰り返す。
なお、点火操作の音声指示を先に受け付けて認識し、点火中のバーナが一つであった場合(図5のS21:YES)。対象バーナは、現在点火中の一つのバーナであるので、点火中のバーナが複数のときのように、場所を特定する必要が無い。よって、仮にグリルのみが点火した状態であった場合、CPU71はグリルを消火する内容の実行操作音声データを作成し、作成したデータを元に実行操作音声を、スピーカ77から出力する(S40)。CPU71は、例えば「グリルを消火します。」という実行操作音声を出力する。実行操作音声を出力した後、CPU71は、点火中であるグリルに対し、火力操作である消火を実行する(S41)。CPU71はS38に処理を進め、上記処理を繰り返す。
このように、本実施形態では、音声指示で、火力操作を先に特定してから、その火力操作を行うバーナの場所を特定するので、例えば点火中のバーナが一つであった場合、火力操作のみを特定すればよい。即ち、火力操作の音声指示のみを認識すればよいので、場所を特定する為の音声指示を認識する作業は不要となる。これにより、音声認識にかかる時間を短縮でき、誤認識も低減できるので、使用勝手を向上できる。
以上説明したように、本実施形態のコンロ1は、使用者からの音声指示を認識し、点火状態にある複数のバーナの火力操作を個別に行うものである。音声操作を開始すると、コンロ1のCPU71は、音声指示を外部から受け付け、予め記憶する音響データとの一致を判断して音声指示を認識する。CPU71は、コンロ1の現在の状態を検出する。現在の状態とは、例えば各バーナの現在の状態であり、点火又は消火状態を意味する。CPU71は、検出した各バーナの点火、消火の現在の状態に基づき、不揮発性メモリ74に記憶された音声指示情報テーブル741の中から、現在受け付け可能な音声指示の候補を抽出する。例えば、火力操作を行うバーナの場所を音声指示で特定する場合、現在受け付け可能な音声指示の候補として、点火状態のバーナのみを抽出し、消火中のバーナを除外する。これにより、受け付けた音声指示と一致するかを判断する音響データの数を減らすことができる。よって、全バーナの場所の音響データとの一致を判断する場合に比べ、短時間で判断できるので、認識にかかる時間を短縮できる。よって、コンロ1の使い勝手を向上できる。
また、CPU71は、現在受け付け可能な音声指示の候補を抽出した後、抽出した候補の項目を使用者に知らせるガイド音声を出力し、該ガイド音声に対応する説明画面101(102)を表示部22に表示する。これにより、使用者は、音声指示で現在受け付け可能な項目を確認してから、コンロ1に対して音声指示を行うことができるので、音声指示の誤認識を低減できる。
以上説明において、制御回路70のCPU71は、本発明の「制御部」の一例である。S14とS29の各処理を実行するCPU71は、本発明の「受付手段」の一例である。S16とS31の各処理を実行するCPU71は、本発明の「認識手段」の一例である。
S10とS25の各処理を実行するCPU71は、本発明の「検出手段」の一例である。
不揮発性メモリ74は、本発明の「記憶手段」の一例である。音声指示情報テーブル741と音響データは、本発明の「音声指示情報」の一例である。S11とS26の各処理を実行するCPU71は、本発明の「抽出手段」の一例である。S17とS32の各処理を実行するCPU71は、本発明の「判断手段」の一例である。S36とS41の各処理を実行するCPU71は、本発明の「実行手段」の一例である。S12、S13、S27、S28の各処理を実行するCPU71は、本発明の「報知手段」の一例である。
なお、本発明は上記実施形態に限定されるものではなく、種々の変更が可能である。本実施形態では、ビルトインタイプのコンロ1を例示したが、テーブルコンロであってもよい。コンロバーナの数は一つでも複数でもよく、グリルは省略してもよい。また、本発明はコンロ等の加熱調理器以外のガス機器にも適用でき、例えば給湯器等にも適用可能である。
上記実施形態の音声指示情報テーブル741では、右コンロ4、奥コンロ5、左コンロ6、グリルの何れのバーナにおいても、受け付け可能な火力操作は、「火力大」、「火力中」、「火力小」の3種類とされているが、バーナ毎に変えてもよい。また、受け付け可能な火力操作の種類も3種類に限らず、自由に変更可能である。
上記実施形態の音声操作制御処理のS7、S17、S32において、音声指示を受け付けて認識が完了したときに、音声を認識したことを報知する為の音声、例えば「ポーン」というチャイム音等をスピーカ77から出力するようにするとよい。これにより、使用者が自ら発話した音声指示がコンロ1に認識されたか否かを速やかに認識できる。発話してもチャイムが鳴らなければ、音声認識は失敗したことが分かるので、使用者は再度発話を試みることができる。
上記実施形態の音声操作制御処理のS12とS13において、スピーカ77からガイド音声を出力し、表示部22に説明画面101を表示したが、何れか一方を省略してもよい。S26とS27においても、スピーカ77からガイド音声を出力し、表示部22に説明画面102を表示したが、何れか一方を省略してもよい。好ましくは、上記実施形態のように、音声の出力と表示部22における表示の両方を行うのがよい。
上記実施形態のS24では、対象バーナ以外の他の点火中のバーナの火力について、一律に火力1に弱めているが、現在の火力よりも弱めればよく、同じ火力に弱めなくてもよい。
上記実施形態では、火力操作の音声指示を認識した後で、対象バーナの場所を認識しているが、対象バーナの場所を先に認識してから、火力操作の音声指示を認識してもよい。
上記実施形態では、バーナに対応するガス量調節機構30のモータ32を駆動することで、弁機構部31の弁の開度を調節し、バーナの火力を調節しているが、ガス量調節機構の構造は、これ以外の構造でもよく、例えば、ガス供給管に複数のバイパス路と電磁弁を設け、電磁弁を開閉することで、バーナに流れるガス量を調節してもよい。
上記実施形態の音声操作制御処理のS15の「一定時間」は一例として10秒、S29の「一定時間」は一例として5秒であるが、自由に設定可能である。
上記実施形態の音声操作制御処理では、使用者から音声指示を受け付けない状態が一定時間続いた場合(S14:NO、S15:YES)、ガイド音声を自動的に再度出力するが(S12)、これとは別に、例えば、使用者が一度聞いたガイド音声を忘れてしまい、もう一度聞き返したいこともある。そのような場合、使用者自ら、例えば、現在受け付け可能な制御命令とは一致しない異なる言葉を敢えて発話することで(S17:NO)、ガイド音声を再度出力させてもよい(S12)。なお、現在受け付け可能な制御命令とは一致しない言葉とは、例えば「リピート」のような特定の言葉でもよく、その都度、言葉の内容を変えてもよい。また、使用者が例えば「リピート」の様な特定の言葉を発話し、CPU71がそれを認識した場合に、ガイド音声を再度出力するようにしてもよい。
1 コンロ
71 CPU
74 不揮発性メモリ
741 音声指示情報テーブル

Claims (1)

  1. 複数の加熱部を有し、外部からの音声指示に基づき前記複数の加熱部の夫々の動作を制御する制御部を備えたガス機器であって、
    前記音声指示は、
    前記加熱部の火力操作の指示である第1音声指示と、
    前記加熱部の場所の指示である第2音声指示と
    を備え、
    前記制御部は、
    前記第1音声指示を外部から受け付ける第1受付手段と、
    前記第1受付手段が受け付けた前記第1音声指示を認識する第1認識手段と、
    前記複数の加熱部の現在の状態を検出する検出手段と、
    前記検出手段が検出した前記複数の加熱部の現在の状態に基づき、前記複数の加熱部の夫々に対応する前記第2音声指示の情報である音声指示情報を記憶する記憶手段に記憶した前記音声指示情報の中から、現在受け付け可能な前記第2音声指示の候補を抽出する抽出手段と、
    前記抽出手段が抽出した前記候補を報知する報知手段と、
    前記第2音声指示を外部から受け付ける第2受付手段と、
    前記第2受付手段が受けつけた前記第2音声指示を認識する第2認識手段と、
    前記抽出手段が抽出した前記候補の中から、前記第2認識手段が認識した前記第2音声指示と一致する前記候補が有るか判断する判断手段と、
    前記判断手段が前記第2音声指示と一致する前記候補が有ると判断した場合、前記第2認識手段が認識した前記第2音声指示に対応する前記加熱部の場所に対して、前記第1認識手段が前記第1音声指示を認識した前記火力操作の内容に基づき動作を実行する実行手段と
    を備えたこと
    を特徴とするガス機器。
JP2017085756A 2017-04-25 2017-04-25 ガス機器 Active JP6978033B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017085756A JP6978033B2 (ja) 2017-04-25 2017-04-25 ガス機器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017085756A JP6978033B2 (ja) 2017-04-25 2017-04-25 ガス機器

Publications (2)

Publication Number Publication Date
JP2018185077A JP2018185077A (ja) 2018-11-22
JP6978033B2 true JP6978033B2 (ja) 2021-12-08

Family

ID=64355720

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017085756A Active JP6978033B2 (ja) 2017-04-25 2017-04-25 ガス機器

Country Status (1)

Country Link
JP (1) JP6978033B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109798546B (zh) * 2018-12-30 2021-02-02 佛山市顺德区美的洗涤电器制造有限公司 灶具的煲汤方法、装置、灶具及存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4313495B2 (ja) * 2000-03-23 2009-08-12 アール・ビー・コントロールズ株式会社 音信号制御式コンロ
JP3951705B2 (ja) * 2001-12-27 2007-08-01 株式会社デンソー 電子機器

Also Published As

Publication number Publication date
JP2018185077A (ja) 2018-11-22

Similar Documents

Publication Publication Date Title
KR100716419B1 (ko) 주의환기기능을 구비한 가스곤로
JP2003108183A (ja) 音声制御装置及び加熱調理器
JP6978033B2 (ja) ガス機器
JP6997437B2 (ja) 加熱調理器
JP6983405B2 (ja) 加熱調理器
JP6841419B2 (ja) コンロ
JP7038400B2 (ja) コンロ
JP6940135B2 (ja) ガス機器
JP2019158155A (ja) 加熱調理システム
JP4369908B2 (ja) ガスコンロ
JP7146240B2 (ja) ガスコンロ
JP4313495B2 (ja) 音信号制御式コンロ
JP7061360B2 (ja) ガス機器
JP2018185075A (ja) コンロ
KR100603989B1 (ko) 가스 레인지의 화력 및 연소시간 자동 제어장치 및 그방법
JP7194972B2 (ja) ガスコンロシステム
JP7162865B2 (ja) ガスコンロ用の制御装置、及びガスコンロシステム
JP2005090837A (ja) 温水システム
JP2019190714A (ja) 加熱調理器
JP7194971B2 (ja) ガスコンロ用制御装置、及びガスコンロシステム
JP7349399B2 (ja) 加熱調理システム
JP5898647B2 (ja) グリル装置
JP2019132564A (ja) コンロ
WO2017056516A1 (ja) 加熱調理器
JPS62169939A (ja) 加熱装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200422

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210318

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210323

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210519

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211019

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211104

R150 Certificate of patent or registration of utility model

Ref document number: 6978033

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150