JPH05333825A - 画像と機器操作の同時進行制御方式 - Google Patents

Abstract

(57)【要約】 【目的】 画像による機器の操作の案内と実際の機器の
操作とを同時に進行させる。 【構成】 情報抽出部１２によりＣＤに記録されている
操作情報を取出し、外部条件入力手段により得られたオ
ーブン２の実際の状態とを、総合制御部１５で比較す
る。総合制御部１５により機器を制御し、ＣＤから与え
られた操作情報と外部条件入力手段１３から得られたオ
ーブン２の状態が一致するまで、液晶表示器４に表示さ
れる動画の再生速度を制御する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、電子出版などの画像に
よる機器（たとえば、電子レンジ）の操作の案内に従っ
て、機器を操作する方式に関するものである。

【０００２】

【従来の技術】たとえば、テレビの料理番組では、料理
の作り方を放送するが、放送時間の関係上実際の進行と
は異なった時間で放送され、これから料理を習いたいと
いう希望をもつ者にとって、テレビを見ながら料理を作
ることは現実にはできない。一方、料理ブックを見なが
ら作ることも、手が塞がっており、頁をめくる動作がや
りにくいことや、食品のダイナミックな変化の様子がわ
かりにくいなど、情報量に乏しく、いずれの場合もヒュ
ーマンインターフェイスの品位が低かった。近年では、
ビデオテープやＣＤ−ＲＯＭといったものに、画像と音
声を伴い料理教室を再現して提供するものもあるが、こ
れにおいても、実際の料理の進行とそれらの媒体上の進
行がずれてくると、人手によりその媒体の進行を一時停
止する等の作業をしなければならない。

【０００３】

【発明が解決しようとする課題】以上のように、従来の
技術では、画像を参照しながら、調理等の作業や調理機
器の制御をしようとする分野では、画像と機器の操作を
同時進行する制御は行なわれていない。本発明の目的
は、画像を参照しながら、たとえば調理作業や調理機器
の制御をしようとするとき、画像の中に指定される操作
状態の変化と、この指定により制御される機器の実際の
操作状態の変化を比較し、この双方の状態が一致するま
で、画像の再生の速度を調節し、あたかも同時に進行す
るような雰囲気を実現することにある。

【０００４】

【課題を解決するための手段】本発明においては、機器
の操作に関連した画像情報と、この操作に関連した機器
の状態に関連した操作情報を記録した媒体と、前記の媒
体から画像情報と操作情報を再生する手段と、機器の状
態を検出する手段と、再生された操作情報と機器の状態
を比較する手段と、再生された操作情報と機器の状態が
一致するまで画像情報の再生速度を制御する手段とを有
する機器と、を組合せて構成した。

【０００５】

【作用】記録媒体から抽出した操作情報と、機器の状態
から検出した値とに差のある状況では、その差を少なく
する方向に機器を制御するとともに、画像情報再生手段
をして画像の進行を一時停止またはスロー再生し、両方
の値に差がなくなれば、出力制御手段を次のステップに
進行するように制御するとともに、画像再生手段をして
通常再生することにより、画像と機器の操作を同時に進
行させることができる。

【０００６】

【実施例】本発明の一実施例として、媒体としてＣＤを
用い、機器として電子レンジを用い、操作情報が、基準
となる温度および加熱方法の変更等である場合につい
て、以下に説明する。

【０００７】図１は、本発明の一実施例である電子レン
ジの斜視図である。電子レンジ本体１には、オーブン２
が設けられ、その中には食品３が置かれる。電子レンジ
本体１の正面には、液晶表示器４，電子レンジを操作す
るための操作スイッチ群５，ＣＤドライブ装置６等が設
けられている。

【０００８】図２は、この電子レンジの本発明に関する
部分の概略のブロック図で、画像再生装置１１，画像か
ら制御に必要な操作情報のデータを取出す情報抽出部１
２，オーブン２の内部またはオーブン２からの排気の温
度を検知する温度検知部や扉の開閉等の状態を検知する
扉スイッチなどの外部条件入力手段１３，マグネトロン
のインバータ制御電源回路のような出力制御部１４，お
よびマイクロコンピュータを主構成部品とする総合制御
部１５等により構成される。画像再生装置１１の内部に
は、ＣＤドライブ装置６および画像伸張部７が設けられ
ている。ＣＤに記録される画像データを増加させるた
め、画像圧縮技術が使用されるが、画像伸張部７により
圧縮された画像を伸張させる。

【０００９】図３は、図２の装置の概略のフローチャー
トで、ステップＳ１〜Ｓ２７により構成される。

【００１０】さて、以下に一例として、電子レンジで例
えば、「いそべ焼き」（餅を焼き、醤油をつけ、焼き海
苔を巻く等の工程がある）を作る場合を例に、図１およ
び２を参照しながら、ＣＤに書込まれている情報（機器
の操作に関連した画像情報と操作情報）と総合制御部１
５の動作を中心に、図３のフローチャートにより詳細に
説明する。

【００１１】まず、ＣＤドライブ装置６に、「いそべ焼
き」の調理方法の画像情報および操作情報の入ったＣＤ
を入れ、スタートスイッチを操作スイッチ群５から選ん
で押す（ステップＳ１）と、ＣＤドライブ装置６が定常
再生をし（ステップＳ２）、液晶表示器４に「餅を入れ
て電子レンジのスタートキーを押して下さい」と文字表
示されるとともに、映像で餅が２個映し出される。この
表示はＣＤから出されるものである。

【００１２】表示された指示は餅が２個であるが、仮に
餅を３個入れてスタートスイッチを押す（ステップＳ
３）と、総合制御部１５の信号により出力制御部１４が
動作し、マグネトロンの電源がＯＮにし加熱が開始され
る（ステップＳ４）。

【００１３】しばらくした後、たとえば１分後に、図４
（ａ）に示すように、液晶表示器４の例えば右上隅の一
部に、映像を見るには邪魔にならず、かつ、はっきりと
識別できる大きさ、例えば全画面面積の数１０分の１程
度の白色領域が点滅する（ステップＳ５）。この部分に
ＣＤに予め記録され、それから抽出されるこの時点にお
ける操作情報の１つである基準温度データが表示され
る。その信号の構成やタイミングチャートの一例を、図
４（ｂ）および（ｃ）に示してある。すなわち、情報種
別を示す２ビットと、温度情報８ビットが白色を１とし
黒色を０としてシリアル出力される。シリアルデータの
ビットレートは、映像信号の３０フレーム毎秒を勘案し
た１０ビット毎秒程度である。この速度は調理における
温度の変化や形状の変化速度からも妥当な速度が選ばれ
る。この制御データは総合制御部１５により具体的な温
度の数値に変換することができる。この数値が映像にス
ーパーインポーズされた形で提供される（ステップＳ
６）。情報種別に２ビットを割当てておけば、温度以外
に時間，出力ワット数およびその他合計４種類を識別で
きる。

【００１４】操作情報を表示する位置は、右上隅とは限
らず動画情報と混同しなければどこでもよい。予めＣＤ
を製造する側と機器を製造する側で協議して決定され
る。また白黒点滅とは限らずカラー表示も可能である。

【００１５】画面右上隅のデータの抽出の具体的方法
は、およそ次のとおりであり、公知の手段により実現で
きる。

【００１６】画面の垂直同期信号を検出し、その後の全
水平ラインのうち最初の数１０本の右端数分の１程度の
データを、Ａ／Ｄ変換した後、メモリに蓄える。もちろ
んすべてのデータを記録する必要はなく、サンプリング
した一部、たとえば図４（ａ）における右上隅上方表示
部のうち平均的に広がりをもつ数箇所でよい。なお、図
４（ｂ）および（ｃ）は、それぞれ情報表示部のレベル
が黒あるいは白である走査線の信号波形の一例を示して
いる。

【００１７】このメモリの内容が白レベルであることを
カウントするカウンタを設け、スタート識別のヘッダと
して所定時間（たとえば２秒間）連続した場合をデータ
の始まりとし、以後白レベルを１，黒レベルを０として
認識する（図６（ｂ）参照）。

【００１８】図５（ａ）および（ｂ）は、それぞれこの
部分を構成する情報抽出部１２と総合制御部１５のブロ
ック図で、同図（ａ）は、白レベル判定をＡ／Ｄ変換を
用いて行なう場合であり、同図（ｂ）はコンパレータを
用いてアナログ的に行なう場合である。総合制御部１５
には、ＣＰＵ，ＲＡＭ，ＲＯＭおよびＩ／Ｏが設けられ
ている。

【００１９】これらの回路は共に、ビデオ信号をクラン
プ回路２０によりクランプし、タイミング回路２１によ
り、画面の右上隅を判定し、そのときの画素のレベルを
総合制御部１５に取込み判定する。前述のカウンタは、
総合制御部１５のＲＡＭ上に設定され、白黒判定のしき
い値はディジタル値の２点、たとえば８ｂｉｔ構成では
それぞれ１９２／６４などで判定される。図５（ａ）で
は、クランプされたビデオ信号をＡ／Ｄ変換回路２２に
よりディジタル信号に変換し、画素ＲＡＭ２３に右上隅
をブロックとして記憶できるので、総合制御部１５のソ
フトウェアを簡単にできる。

【００２０】図５（ｂ）では、クランプされたビデオ信
号を電圧比較回路２４を介して総合制御部１５に送り、
また電圧比較回路２５を介してタイミングされた信号と
タイミングされない信号とを総合制御部１５に送る。こ
の場合は、アナログ的にタイミング回路２１で画素の位
置を特定し、電圧比較器２５でその位置の白黒レベルを
判定するものである。画素ＲＡＭに相当する記憶部は、
総合制御部１５に設けられたことになる。１画素ごとに
総合制御部１５の動作が必要になるが、回路のコストは
安くなる。

【００２１】図５（ａ）および（ｂ）の回路はそれぞれ
単独では公知の技術であるので詳細な説明は省略する。

【００２２】図６（ａ）は、ビデオ信号の各走査線ごと
の状態を示すもので、Ｘ軸Ｔ水平は走査線１本の時間軸
を、Ｙ軸Ｔラインは矢印方向に各走査線を、Ｚ軸映像レ
ベルは振幅を示し、各水平走査線を三次元的に表わして
いる。図で画面の右が白レベルになっている。図６
（ｂ）は各水平走査線の操作情報部の例を示す。

【００２３】再び図３のフローチャートに戻り、総合制
御部１５は、前述の２進シリアルデータからなる温度デ
ータを復号し、外部条件入力手段１３の温度検知部から
得たオーブン内の実際の温度（以下実温度という）デー
タと、ＣＤから得られた操作情報である基準温度とを比
較する（ステップＳ７）。基準温度が１００℃で、実温
度が７０℃であったとすると（すなわち、ＣＤの情報は
餅２個を基準に構成されているが実際に入れた餅は３個
であるので、こういう状況が予測される）、ＣＤドライ
ブ装置６をして画像の進行を停止させ、静止画を液晶表
示器４に出す（ステップＳ８）。この間加熱状態は維持
する。その後、実温度が基準温度と等しくなった時点
で、再びＣＤドライブ装置６を駆動して画像の進行を再
開させる（ステップＳ９）。

【００２４】温度が１００℃を超えた時間が例えば２０
秒経過したときに、加熱方法を変更するときは、画面右
上隅に再びデータが出力される（ステップＳ１０）。今
度は加熱方法の変更を指示する情報で、総合制御部１５
は、これを検知し（ステップＳ１１）、マグネトロンに
よる加熱を停止し電気ヒータによる加熱に変更する（ス
テップＳ１２）。

【００２５】電気ヒータによる加熱が１分（焦げめがつ
くのに必要とされる予測時間）を過ぎると、画面右上隅
に再びデータが出力される（ステップＳ１３）。今度は
加熱の停止を指示する情報で、総合制御部１５はこれを
検知し、電気ヒータによる加熱を停止する（ステップＳ
１４）。

【００２６】さらに画面には「餅を取出し醤油をつけた
後、もう一度レンジに入れて下さい」と文字表示と音声
で案内がある。ここで画面を静止画とし（ステップＳ１
５）、レンジの扉が開かれるのを待つ。扉の開閉の検知
は図示していないが、外部条件入力手段１３の一部であ
る、扉に対向して取付けられた扉スイッチによって行な
う。

【００２７】扉の開けられたことを検知する（ステップ
Ｓ１６）と、総合制御部１５は画像を動画とする（ステ
ップＳ１７）。これにより、画面は醤油のつけ方を説明
するシーンに移行する。さらに画面に「醤油をつけ終わ
ると再びレンジに入れ、スタートスイッチを押して下さ
い」と文字と音声で案内がある。案内の後画面に制御信
号が現われる。この時点での制御信号は画面の繰返し再
生を指示する命令で、総合制御部１５はこれを検出する
とスタートスイッチが押されるまでの間、先の制御信号
が見つかる画面まで逆再生し、該制御信号が見つかると
そこから正常な動画を再生することができる。

【００２８】前述の動作を繰返し（ステップＳ１８〜Ｓ
１９）ながら、スタートスイッチの押された（ステップ
Ｓ２０）ことを総合制御部１５が検知すると、ヒータと
マグネトロンによる加熱で醤油を乾燥させる（ステップ
Ｓ２１）一方、画像を次に進める（ステップＳ２２）。
画像は餅が乾燥されていく状況を映し出し、その後右上
隅には制御データとして温度１００℃が表示される（ス
テップＳ２３）。

【００２９】実温度が基準温度と等しくなれば（ステッ
プＳ２５）、調理完了であり画面は動画となる（ステッ
プＳ２６）が、それまでの間静止画となっている（ステ
ップＳ２４）のは、前述の説明と同様である。総合制御
部１５が調理完了と判定すると加熱を停止し（ステップ
Ｓ２７）、画面に「でき上がりです」と表示があり音声
でも案内することができる。

【００３０】前述の実施例では、説明を簡単にするた
め、わかりやすい初歩的な手段で実現する例を用いた
が、以下のように他の手段を用いることもできる。

【００３１】温度データ等を２進シリアルデータで表示
するかわりに、画面の一部に「温度１００℃」などと表
示し、これを総合制御部１５で文字認識することも可能
である。

【００３２】温度が１００℃になると電気ヒータによる
加熱に変更することを示したが、ＣＣＤカメラや光素子
を用いて形状の変化をとらえ、餅が膨らんだことを直接
検出することも可能である。

【００３３】焦げめのついたことを時間予測で行なうか
わりに、カラーＣＣＤカメラ等を用いて色調の変化で直
接的にとらえることができる。

【００３４】実施例では電子レンジでの調理を例に説明
したが、それ以外に、例えば、電磁調理器の上にフライ
パンを置いて炒めものをする場合などにも適用できる。
すなわち、電磁調理器に、上部に置かれたフライパンの
温度を検出する手段を設けたり、炒めものの温度を遠隔
赤外線温度センサなどでとらえながら、画像の温度情報
を基準値として参照しつつ、実際の調理と画像の進行を
同期させることもできる。

【００３５】

【発明の効果】以上のように、本発明によれば使用者の
行なう実際の動作と、それを教える画像の変化が同時に
進行できるので、いわゆる「ハウツー物」の画像を利用
したソフトウェアの利用が便利になり、実際に料理教室
にて先生から直接教えてもらっている雰囲気が実現でき
る。

【図面の簡単な説明】

【図１】本発明の一実施例の斜視図である。

【図２】本発明の一実施例のブロック図である。

【図３】図２の総合制御部のフローチャートである。

【図４】（ａ），（ｂ）および（ｃ）は、それぞれ表示
画面，情報表示部が黒レベルである水平走査線および白
レベルである水平走査線の例を示している。

【図５】（ａ）および（ｂ）は、それぞれ本発明に使用
される情報抽出部の一例のブロック図である。

【図６】（ａ）は水平走査線の状態を三次元に示し、
（ｂ）は操作情報部の波形の例を示す。

【符号の説明】

１ 電子レンジ本体 ２ オーブン ３ 食品 ４ 液晶表示器 ５ 操作スイッチ群 ６ ＣＤドライブ装置 １１ 画像再生装置 １２ 情報抽出部 １３ 外部条件入力手段 １４ 出力制御部 １５ 総合制御部

Claims (1)

【特許請求の範囲】
1. 【請求項１】 機器の操作に関連した画像情報と、その
   操作に関連した機器の状態に関連した操作情報とを記録
   した媒体と、 前記の媒体から画像情報と操作情報を再生する手段と、
   機器の状態を検出する手段と、再生された操作情報と機
   器の状態を比較する手段と、再生された操作情報と機器
   の状態が一致するまで画像情報の再生速度を制御する手
   段とを有する機器と、 によって構成されることを特徴とする画像と機器操作の
   同時進行制御方式。