JPH06308918A - 画面表示制御方法及び画面表示制御装置 - Google Patents
画面表示制御方法及び画面表示制御装置Info
- Publication number
- JPH06308918A JPH06308918A JP5094537A JP9453793A JPH06308918A JP H06308918 A JPH06308918 A JP H06308918A JP 5094537 A JP5094537 A JP 5094537A JP 9453793 A JP9453793 A JP 9453793A JP H06308918 A JPH06308918 A JP H06308918A
- Authority
- JP
- Japan
- Prior art keywords
- image
- screen
- eyelid
- display data
- closing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
- G09G5/30—Control of display attribute
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/39—Control of the bit-mapped memory
- G09G5/399—Control of the bit-mapped memory using two or more bit-mapped memories, the operations of which are switched in time, e.g. ping-pong buffers
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/02—Improving the quality of display appearance
- G09G2320/0261—Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Image Processing (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
(57)【要約】
【目的】改ページやスクロールなどの操作のために目に
負担をかけることのない画面表示制御方法及び画面表示
制御装置を提供する。 【構成】顔面の画像を入力する画像入力ステップ３０１
と、顔面の画像に基づき瞼の開閉を検出する画像処理ス
テップ３０２と、表示データを画面上に表示する表示ス
テップ３０３と、前記画像処理ステップで得られた瞼の
開閉結果に基づき前記画面上の表示データを変更する画
像出力制御ステップ３０４とを含むよう構成した。
負担をかけることのない画面表示制御方法及び画面表示
制御装置を提供する。 【構成】顔面の画像を入力する画像入力ステップ３０１
と、顔面の画像に基づき瞼の開閉を検出する画像処理ス
テップ３０２と、表示データを画面上に表示する表示ス
テップ３０３と、前記画像処理ステップで得られた瞼の
開閉結果に基づき前記画面上の表示データを変更する画
像出力制御ステップ３０４とを含むよう構成した。
Description
【０００１】
【産業上の利用分野】本発明は、コンピュータの端末装
置などのモニタ画面の表示を対象者の瞼の瞬き開閉に応
じて変更する画面表示制御方法及び画面表示制御装置に
関する。
置などのモニタ画面の表示を対象者の瞼の瞬き開閉に応
じて変更する画面表示制御方法及び画面表示制御装置に
関する。
【０００２】
【従来の技術】従来、コンピュータを用いて画像をモニ
タなどに表示する画面表示制御装置は、図１４に示すよ
うな回路構成からなっている。図１４において、マイク
ロプロセッサユニット（以下、ＭＰＵと称する。）など
の表示データ出力部２０から出力される表示データは、
ビデオランダムアクセスメモリ（以下、ＶＲＡＭと称す
る。）などの画像表示用メモリ３５に一旦書き込まれ
る。そして、その表示データはメモリ３５から読み出さ
れ、モニタ１８に画像が表示される。モニタ１８では、
人がどのような動作にあるかに関係なく画像がモニタ１
８に表示されていた。
タなどに表示する画面表示制御装置は、図１４に示すよ
うな回路構成からなっている。図１４において、マイク
ロプロセッサユニット（以下、ＭＰＵと称する。）など
の表示データ出力部２０から出力される表示データは、
ビデオランダムアクセスメモリ（以下、ＶＲＡＭと称す
る。）などの画像表示用メモリ３５に一旦書き込まれ
る。そして、その表示データはメモリ３５から読み出さ
れ、モニタ１８に画像が表示される。モニタ１８では、
人がどのような動作にあるかに関係なく画像がモニタ１
８に表示されていた。
【０００３】この場合、人の動作として例えば、人がキ
ーボードを一定時間操作しない場合には、表示画面を消
すことにより電気の節約が行える。この目的を達成する
手段としては、例えば、キーボードが一定時間操作され
ないことを検出し、この検出信号に基づきモニタに画面
表示しないように制御を行う従来技術がある。
ーボードを一定時間操作しない場合には、表示画面を消
すことにより電気の節約が行える。この目的を達成する
手段としては、例えば、キーボードが一定時間操作され
ないことを検出し、この検出信号に基づきモニタに画面
表示しないように制御を行う従来技術がある。
【０００４】
【発明が解決しようとする課題】しかしながら、画面上
に表示された文字などの細かいキャラクタを人間が注視
しているとき、画面に対して改ページやスクロールが行
われることがある。このような画面上の操作によってそ
のキャラクタが動くと、目に負担がかかる。このため、
目が疲労して人の目が近視や乱視になったりする。さら
には近視や乱視が悪化することもあった。
に表示された文字などの細かいキャラクタを人間が注視
しているとき、画面に対して改ページやスクロールが行
われることがある。このような画面上の操作によってそ
のキャラクタが動くと、目に負担がかかる。このため、
目が疲労して人の目が近視や乱視になったりする。さら
には近視や乱視が悪化することもあった。
【０００５】また、改ページやスクロールのタイミング
に目をつむるタイミングを合わせることにより、目の疲
労を回避する方法も考えられる。しかし、これらのタイ
ミングを合わせるのは非常に困難であるため、瞬きの時
間よりもかなり長い時間だけ目をつむらなければならな
い。さらに、意識的に目をつむる必要があるので、非常
に煩わしかった。
に目をつむるタイミングを合わせることにより、目の疲
労を回避する方法も考えられる。しかし、これらのタイ
ミングを合わせるのは非常に困難であるため、瞬きの時
間よりもかなり長い時間だけ目をつむらなければならな
い。さらに、意識的に目をつむる必要があるので、非常
に煩わしかった。
【０００６】本発明は、このような点に鑑みてなされた
もので、その目的とするところは、改ページやスクロー
ルなどの操作のために目に負担をかけることのない画面
表示制御方法及び画面表示制御装置を提供することにあ
る。
もので、その目的とするところは、改ページやスクロー
ルなどの操作のために目に負担をかけることのない画面
表示制御方法及び画面表示制御装置を提供することにあ
る。
【０００７】
【課題を解決するための手段】本発明は、上記課題を解
決し目的を達成するために下記の構成とした。図１は本
発明にかかる画面表示制御装置の原理図である。
決し目的を達成するために下記の構成とした。図１は本
発明にかかる画面表示制御装置の原理図である。
【０００８】画像入力手段１２は顔面の画像を入力す
る。画像処理手段１４は画面入力手段１２から出力され
る顔面の画像に基づき瞼の開閉を検出する。表示手段１
８は表示データを画面上に表示する。画像出力制御手段
１６は前記画像処理手段１４から出力される瞼の開閉結
果に基づき前記画面上の表示データを変更する。
る。画像処理手段１４は画面入力手段１２から出力され
る顔面の画像に基づき瞼の開閉を検出する。表示手段１
８は表示データを画面上に表示する。画像出力制御手段
１６は前記画像処理手段１４から出力される瞼の開閉結
果に基づき前記画面上の表示データを変更する。
【０００９】図３は本発明にかかる画面表示制御方法の
原理フローである。画面表示制御方法は、顔面の画像を
入力する画像入力ステップ３０１、顔面の画像に基づき
瞼の開閉を検出する画像処理ステップ３０２、表示デー
タを画面上に表示する表示ステップ３０３、前記画像処
理ステップで得られた瞼の開閉結果に基づき前記画面上
の表示データを変更する画像出力制御ステップ３０４と
を含んで構成される。
原理フローである。画面表示制御方法は、顔面の画像を
入力する画像入力ステップ３０１、顔面の画像に基づき
瞼の開閉を検出する画像処理ステップ３０２、表示デー
タを画面上に表示する表示ステップ３０３、前記画像処
理ステップで得られた瞼の開閉結果に基づき前記画面上
の表示データを変更する画像出力制御ステップ３０４と
を含んで構成される。
【００１０】ここで、画像入力手段１２は、ＴＶカメ
ラ、イメージスキャナやその他の撮像素子を例示でき
る。表示手段１８は、通常のＣＲＴ（陰極線管）、高解
像度モニタ、液晶ディスプレイ装置などである。画像出
力制御手段１６は、中央処理装置（以下、ＣＰＵと称す
る。）、マイクロプロセッサなどである。
ラ、イメージスキャナやその他の撮像素子を例示でき
る。表示手段１８は、通常のＣＲＴ（陰極線管）、高解
像度モニタ、液晶ディスプレイ装置などである。画像出
力制御手段１６は、中央処理装置（以下、ＣＰＵと称す
る。）、マイクロプロセッサなどである。
【００１１】前記画像入力手段１２は、前記瞼が閉じて
いる時間以下の時間毎に顔面の画像を画像処理手段に出
力し、前記画像処理手段１４は、前記瞼が閉じている時
間以下の時間毎に瞼の開閉結果を出力するようにする。
瞼が閉じている時間内に画像処理を行なうことで瞼が閉
じている時間内に画面変更を行うことができる。
いる時間以下の時間毎に顔面の画像を画像処理手段に出
力し、前記画像処理手段１４は、前記瞼が閉じている時
間以下の時間毎に瞼の開閉結果を出力するようにする。
瞼が閉じている時間内に画像処理を行なうことで瞼が閉
じている時間内に画面変更を行うことができる。
【００１２】前記画像出力制御手段１６は、２つの画像
メモリ３５ａ，３５ｂと、これらの画像メモリに対して
表示データの書き込み及び読み出しを行う表示制御回路
３２とを有し、前記表示制御回路３２は、書き換え信号
により一方の画像メモリ内の表示データを書換えた後、
前記瞼が閉じているときには、前記一方の画像メモリか
ら書換えられた表示データを表示手段１８に出力するよ
うにする。
メモリ３５ａ，３５ｂと、これらの画像メモリに対して
表示データの書き込み及び読み出しを行う表示制御回路
３２とを有し、前記表示制御回路３２は、書き換え信号
により一方の画像メモリ内の表示データを書換えた後、
前記瞼が閉じているときには、前記一方の画像メモリか
ら書換えられた表示データを表示手段１８に出力するよ
うにする。
【００１３】前記表示制御回路３２は、表示データが画
面全体を書き換える場合に書換えが終了した後、前記瞼
が閉じているときに書換られた表示データを表示手段１
８に出力し、表示データが画面の一部を書き換える場合
に書換えが終了した後、前記瞼の開閉にかかわらず書換
られた表示データを表示手段１８に出力するようにす
る。画面の一部変更では、対象者の目の疲れにならない
からである。
面全体を書き換える場合に書換えが終了した後、前記瞼
が閉じているときに書換られた表示データを表示手段１
８に出力し、表示データが画面の一部を書き換える場合
に書換えが終了した後、前記瞼の開閉にかかわらず書換
られた表示データを表示手段１８に出力するようにす
る。画面の一部変更では、対象者の目の疲れにならない
からである。
【００１４】前記画像処理手段１４は、顔面の画像のエ
ッジを抽出することによりエッジ画像を生成するエッジ
抽出手段２４を有するようにする。前記画像処理手段１
４は、顔面のエッジ画像から目領域のエッジ画像を切り
出す目領域切り出し部２３と、目領域のエッジ画像から
目の位置及び大きさを検出することにより瞼の開閉を把
握する目位置検出部５１とを有するようにする。
ッジを抽出することによりエッジ画像を生成するエッジ
抽出手段２４を有するようにする。前記画像処理手段１
４は、顔面のエッジ画像から目領域のエッジ画像を切り
出す目領域切り出し部２３と、目領域のエッジ画像から
目の位置及び大きさを検出することにより瞼の開閉を把
握する目位置検出部５１とを有するようにする。
【００１５】前記エッジ抽出回路手段２４は、画像の各
々の画素に対して微分処理を施すことにより空間フィル
タ回路であってもよい。この空間フィルタ回路はＮ×Ｎ
ウィンドウの空間フィルタ係数を有し、Ｎ×Ｎ画素領域
に対してフィルタ係数を演算してＸ方向Ｙ方向微分処理
を行う。なお、この他に、ゾベルフィルタなどを用いる
ようにしてもよい。
々の画素に対して微分処理を施すことにより空間フィル
タ回路であってもよい。この空間フィルタ回路はＮ×Ｎ
ウィンドウの空間フィルタ係数を有し、Ｎ×Ｎ画素領域
に対してフィルタ係数を演算してＸ方向Ｙ方向微分処理
を行う。なお、この他に、ゾベルフィルタなどを用いる
ようにしてもよい。
【００１６】前記画像処理手段１４は、２つの画像メモ
リ５２ａ，５２ｂを有し、一方の画像メモリに顔面のエ
ッジ画像を書き込む場合には、他方の画像メモリを読み
出すことにより瞼の開閉把握するよう構成する。
リ５２ａ，５２ｂを有し、一方の画像メモリに顔面のエ
ッジ画像を書き込む場合には、他方の画像メモリを読み
出すことにより瞼の開閉把握するよう構成する。
【００１７】前記画像処理手段１４は、１フィールドま
たは１フレームおきに顔面のエッジ画像を格納する１つ
の画像メモリ５２ａとその画像メモリを読み出して瞼の
開閉を把握するプロセッサ５４とを有するよう構成す
る。
たは１フレームおきに顔面のエッジ画像を格納する１つ
の画像メモリ５２ａとその画像メモリを読み出して瞼の
開閉を把握するプロセッサ５４とを有するよう構成す
る。
【００１８】さらに、前記画像出力制御ステップ３０４
は、２つの画像メモリを有し、書き換え信号により一方
の画像メモリ内の表示データを書換えた後、前記瞼が閉
じているときには前記一方の画像メモリから書換えられ
た表示データを出力する。
は、２つの画像メモリを有し、書き換え信号により一方
の画像メモリ内の表示データを書換えた後、前記瞼が閉
じているときには前記一方の画像メモリから書換えられ
た表示データを出力する。
【００１９】また、表示データが画面全体を書き換える
場合に書換えが終了した後、前記瞼が閉じているときに
書換られた表示データを出力し、表示データが画面の一
部を書き換える場合に書換えが終了した後、前記瞼の開
閉にかかわらず書換られた表示データを出力する。
場合に書換えが終了した後、前記瞼が閉じているときに
書換られた表示データを出力し、表示データが画面の一
部を書き換える場合に書換えが終了した後、前記瞼の開
閉にかかわらず書換られた表示データを出力する。
【００２０】
【作用】本発明によれば、まず、画像入力ステップ３０
１で、顔面の画像を入力し、画像処理ステップ３０２
で、顔面の画像に基づき瞼の開閉を検出する。表示ステ
ップ３０３で、表示データを画面上に表示する。
１で、顔面の画像を入力し、画像処理ステップ３０２
で、顔面の画像に基づき瞼の開閉を検出する。表示ステ
ップ３０３で、表示データを画面上に表示する。
【００２１】そして、画像出力制御ステップ３０４で、
前記画像処理ステップで得られた瞼の開閉結果に基づき
前記画面上の表示データを変更する。すなわち、改ペー
ジやスクロールなどの画面表示の変更を対象者が画面を
注視していないときに行えば、目に負担がかからなくな
る。一般に、瞬きは３秒に１回程度行われ、瞼が閉じら
れている時間は０．１秒以上であるから、瞼が閉じてい
る時間に画面を変更するようにする。
前記画像処理ステップで得られた瞼の開閉結果に基づき
前記画面上の表示データを変更する。すなわち、改ペー
ジやスクロールなどの画面表示の変更を対象者が画面を
注視していないときに行えば、目に負担がかからなくな
る。一般に、瞬きは３秒に１回程度行われ、瞼が閉じら
れている時間は０．１秒以上であるから、瞼が閉じてい
る時間に画面を変更するようにする。
【００２２】
【実施例】以下、本発明にかかる画面表示制御方法及び
画面表示制御装置を説明する。図３は本発明にかかる画
面表示制御方法を適用した画面表示制御装置の一実施例
の構成ブロック図である。 ＜実施例の構成＞図３において、画像入力手段としての
ＴＶカメラ１２は、人間の顔をリアルタイムで撮像する
ことにより顔の画像を入力する。このＴＶカメラ１２に
は画像処理部１４が接続される。
画面表示制御装置を説明する。図３は本発明にかかる画
面表示制御方法を適用した画面表示制御装置の一実施例
の構成ブロック図である。 ＜実施例の構成＞図３において、画像入力手段としての
ＴＶカメラ１２は、人間の顔をリアルタイムで撮像する
ことにより顔の画像を入力する。このＴＶカメラ１２に
は画像処理部１４が接続される。
【００２３】画像処理部１４は、ＴＶカメラ１２から出
力される画像をリアルタイム（ビデオレート）で画像処
理するものであり、Ａ／Ｄ変換回路２２、目領域切り出
し部２３、エッジ抽出回路２４、瞼開閉検出回路２６か
ら構成される。
力される画像をリアルタイム（ビデオレート）で画像処
理するものであり、Ａ／Ｄ変換回路２２、目領域切り出
し部２３、エッジ抽出回路２４、瞼開閉検出回路２６か
ら構成される。
【００２４】Ａ／Ｄ変換回路２２は、ＴＶカメラ１２か
ら出力される画像をディジタル画像に変換する。このＡ
／Ｄ変換回路２２には目領域切り出し部２３が接続され
る。目領域切り出し部２３は、顔のディジタル画像の中
から黒目及び瞼を含む目領域を切り出す。この目領域切
り出し部２３にエッジ抽出回路２４が接続される。
ら出力される画像をディジタル画像に変換する。このＡ
／Ｄ変換回路２２には目領域切り出し部２３が接続され
る。目領域切り出し部２３は、顔のディジタル画像の中
から黒目及び瞼を含む目領域を切り出す。この目領域切
り出し部２３にエッジ抽出回路２４が接続される。
【００２５】エッジ抽出回路２４は、目領域切り出し部
２３から出力される目領域のディジタル画像からエッジ
（輪郭部）のみをビデオレートで抽出処理することによ
りエッジ画像を得る。このエッジ抽出回路２４の構成ブ
ロック図を図４に示す。エッジ抽出回路２４はＸ方向空
間フィルタ回路４２、Ｙ方向空間フィルタ回路４４、エ
ッジ画像合成回路４５、しきい値決定部４６から構成さ
れる。
２３から出力される目領域のディジタル画像からエッジ
（輪郭部）のみをビデオレートで抽出処理することによ
りエッジ画像を得る。このエッジ抽出回路２４の構成ブ
ロック図を図４に示す。エッジ抽出回路２４はＸ方向空
間フィルタ回路４２、Ｙ方向空間フィルタ回路４４、エ
ッジ画像合成回路４５、しきい値決定部４６から構成さ
れる。
【００２６】Ｘ方向空間フィルタ回路４２は、目領域切
り出し部２３から出力される目領域のディジタル画像の
各々の画素に対してＸ方向微分を行う。Ｙ方向空間フィ
ルタ回路４４は、目領域切り出し部２３から出力される
目領域のディジタル画像の各々の画素に対してＹ方向微
分を行う。図５にＸ方向空間フィルタ回路４２、図６に
Ｙ方向空間フィルタ回路４４の一例を示す。
り出し部２３から出力される目領域のディジタル画像の
各々の画素に対してＸ方向微分を行う。Ｙ方向空間フィ
ルタ回路４４は、目領域切り出し部２３から出力される
目領域のディジタル画像の各々の画素に対してＹ方向微
分を行う。図５にＸ方向空間フィルタ回路４２、図６に
Ｙ方向空間フィルタ回路４４の一例を示す。
【００２７】これらの空間フィルタ回路４２，４４は３
×３ウィンドウの９個の領域画素により空間周波数操作
する。９個のウィンドウはフィルタ係数−１，０，１の
いずれかの値をとる。Ｘ方向空間フィルタ回路４２のフ
ィルタ係数は１行目が全て−１であり、２行目が全て０
である。３行目が全て１であり、Ｘ方向に沿って同一の
フィルタ係数をとる。Ｙ方向空間フィルタ回路４４は、
フィルタ係数は１列目が全て−１であり、２列目が全て
０である。３列目が全て１であり、Ｙ方向に沿って同一
のフィルタ係数をとる。
×３ウィンドウの９個の領域画素により空間周波数操作
する。９個のウィンドウはフィルタ係数−１，０，１の
いずれかの値をとる。Ｘ方向空間フィルタ回路４２のフ
ィルタ係数は１行目が全て−１であり、２行目が全て０
である。３行目が全て１であり、Ｘ方向に沿って同一の
フィルタ係数をとる。Ｙ方向空間フィルタ回路４４は、
フィルタ係数は１列目が全て−１であり、２列目が全て
０である。３列目が全て１であり、Ｙ方向に沿って同一
のフィルタ係数をとる。
【００２８】Ｘ方向空間フィルタ回路４２及びＹ方向空
間フィルタ回路４４にはしきい値決定部４６が接続され
る。しきい値決定部４６はテーブルにしきい値を格納
し、空間フィルタ回路４２，４３からのＸＹ微分された
エッジ画像の画素値の内、しきい値以上の画素値のみを
エッジ画像として決定する。このしきい値決定部４６に
は瞼開閉検出回路２６が接続される。
間フィルタ回路４４にはしきい値決定部４６が接続され
る。しきい値決定部４６はテーブルにしきい値を格納
し、空間フィルタ回路４２，４３からのＸＹ微分された
エッジ画像の画素値の内、しきい値以上の画素値のみを
エッジ画像として決定する。このしきい値決定部４６に
は瞼開閉検出回路２６が接続される。
【００２９】瞼開閉検出回路２６は、しきい値決定部４
６から出力されてくる黒目及び瞼を含むエッジ画像の中
から黒目を検出してこの黒目の大きさから瞼の開閉状態
を把握する。瞼開閉検出回路２６の一例を図７に示す。
図７において、瞼開閉検出回路２６は、画像メモリ５２
ａ，５２ｂ、マルチプレクサ５３ａ，５３ｂ、ディジタ
ルシグナルプロセッサ５４（以下、ＤＳＰと称す
る。）、瞼開閉結果レジスタ５６から構成される。
６から出力されてくる黒目及び瞼を含むエッジ画像の中
から黒目を検出してこの黒目の大きさから瞼の開閉状態
を把握する。瞼開閉検出回路２６の一例を図７に示す。
図７において、瞼開閉検出回路２６は、画像メモリ５２
ａ，５２ｂ、マルチプレクサ５３ａ，５３ｂ、ディジタ
ルシグナルプロセッサ５４（以下、ＤＳＰと称す
る。）、瞼開閉結果レジスタ５６から構成される。
【００３０】画像メモリ５２ａ，５２ｂは、エッジ抽出
回路２４からのエッジ画像を交互に格納する。マルチプ
レクサ５３ａ，５３ｂは相補的に動作し、例えば、マル
チプレクサ５３ａが画像メモリ５２ａを選択したときに
はマルチプレクサ５３ｂが画像メモリ５２ｂを選択す
る。
回路２４からのエッジ画像を交互に格納する。マルチプ
レクサ５３ａ，５３ｂは相補的に動作し、例えば、マル
チプレクサ５３ａが画像メモリ５２ａを選択したときに
はマルチプレクサ５３ｂが画像メモリ５２ｂを選択す
る。
【００３１】ＤＳＰ５４は、マルチプレクサ５３ａ，５
３ｂを相補的に動作するように制御することにより、例
えば、画像メモリ５２ａにエッジ画像を書き込むときに
は画像メモリ５２ｂからエッジ画像を読み出す。
３ｂを相補的に動作するように制御することにより、例
えば、画像メモリ５２ａにエッジ画像を書き込むときに
は画像メモリ５２ｂからエッジ画像を読み出す。
【００３２】そして、ＤＳＰ５４は読み出したエッジ画
像に基づき、黒目及び瞼を含むエッジ画像の内、閉ルー
プを黒目輪郭として検出し、その後に黒目の大きさから
瞼の開閉状態を把握して瞼開閉結果レジスタ５６に格納
する。
像に基づき、黒目及び瞼を含むエッジ画像の内、閉ルー
プを黒目輪郭として検出し、その後に黒目の大きさから
瞼の開閉状態を把握して瞼開閉結果レジスタ５６に格納
する。
【００３３】画像出力制御部１６は、瞼開閉検出回路２
６と表示データ出力部２０とに接続される。この画像出
力制御部１６は表示制御回路３２、表示データ出力回路
３４から構成される。
６と表示データ出力部２０とに接続される。この画像出
力制御部１６は表示制御回路３２、表示データ出力回路
３４から構成される。
【００３４】表示制御回路３２は、瞼開閉検出回路２６
から瞼の開閉の検出結果９１を入力する。また、表示制
御回路３２はスクロールあるいはページ変更などにより
画面全体の書き換えあるいは画面の一部（一文字）の書
き換えを示す書換え信号９２と画面全体を書き換える際
に書換え信号９２を送出し終わったか否かを示す書換え
終了信号９３とを表示データ出力部２０から入力する。
から瞼の開閉の検出結果９１を入力する。また、表示制
御回路３２はスクロールあるいはページ変更などにより
画面全体の書き換えあるいは画面の一部（一文字）の書
き換えを示す書換え信号９２と画面全体を書き換える際
に書換え信号９２を送出し終わったか否かを示す書換え
終了信号９３とを表示データ出力部２０から入力する。
【００３５】表示制御回路３２は、これらの信号を入力
して画面全体を書き換える場合には、画像メモリ又は画
像メモリに書き込み終了したことを示す書き込み終了信
号を得た後、瞼が閉じている状態あるいは閉じかけてい
る状態となった直後に出力を例えば０から１に変化させ
る。
して画面全体を書き換える場合には、画像メモリ又は画
像メモリに書き込み終了したことを示す書き込み終了信
号を得た後、瞼が閉じている状態あるいは閉じかけてい
る状態となった直後に出力を例えば０から１に変化させ
る。
【００３６】表示画像出力回路３４は、表示データ出力
回路２０から出力される表示データを表示制御回路３２
の出力に従ってモニタ１８に出力する。図８に表示画像
出力回路３４の構成ブロック図を示す。表示画像出力回
路３４は、表示用メモリ３５ａ，３５ｂ、マルチプレク
サ３７ａ，３７ｂ、セレクタ３６から構成される。
回路２０から出力される表示データを表示制御回路３２
の出力に従ってモニタ１８に出力する。図８に表示画像
出力回路３４の構成ブロック図を示す。表示画像出力回
路３４は、表示用メモリ３５ａ，３５ｂ、マルチプレク
サ３７ａ，３７ｂ、セレクタ３６から構成される。
【００３７】表示用メモリ３５ａは、表示データ出力部
２０からの表示データの書き込み用とし、表示用メモリ
３５ｂは、モニタ１８への表示データ出力用として用い
る。セレクタ３６は表示制御回路３２からの出力に従っ
て、表示用メモリ３５ｂの結果を選択する。表示画像出
力回路３４にはモニタ１８が接続され、このモニタ１８
は表示データを表示する。 ＜実施例の処理＞図９は実施例の処理フローであり、本
発明にかかる画面表示制御方法の処理の流れを示してい
る。図１０は図９に示す各々の処理で得られる画像を示
す図である。以下、図面を参照して実施例の処理を説明
する。まず、ＴＶカメラ１２が人の顔を撮像することに
より図１０に示すような顔の画像８１を入力する（ステ
ップ１０１）。
２０からの表示データの書き込み用とし、表示用メモリ
３５ｂは、モニタ１８への表示データ出力用として用い
る。セレクタ３６は表示制御回路３２からの出力に従っ
て、表示用メモリ３５ｂの結果を選択する。表示画像出
力回路３４にはモニタ１８が接続され、このモニタ１８
は表示データを表示する。 ＜実施例の処理＞図９は実施例の処理フローであり、本
発明にかかる画面表示制御方法の処理の流れを示してい
る。図１０は図９に示す各々の処理で得られる画像を示
す図である。以下、図面を参照して実施例の処理を説明
する。まず、ＴＶカメラ１２が人の顔を撮像することに
より図１０に示すような顔の画像８１を入力する（ステ
ップ１０１）。
【００３８】次に、画像処理部１４内のＡ／Ｄ変換回路
２２が、ＴＶカメラ１２から出力される画像データを入
力してディジダル画像に変換する（ステップ１０２）。
ここで、ＴＶカメラ１２のフレーム速度は、瞼が閉じて
いる時間以下の時間である。一般に、瞼の閉じている時
間は０．１秒以上であり、フレーム速度は１／３０秒で
ある。
２２が、ＴＶカメラ１２から出力される画像データを入
力してディジダル画像に変換する（ステップ１０２）。
ここで、ＴＶカメラ１２のフレーム速度は、瞼が閉じて
いる時間以下の時間である。一般に、瞼の閉じている時
間は０．１秒以上であり、フレーム速度は１／３０秒で
ある。
【００３９】ここで、１画像を１フィールドとして扱う
場合、ディジタル画像は、そのままエッジ抽出回路２４
に入力される。なお、１画面を１フレーム（２フィール
ド）として扱う場合にはインターレスからノンインター
レス変換した後に出力する。
場合、ディジタル画像は、そのままエッジ抽出回路２４
に入力される。なお、１画面を１フレーム（２フィール
ド）として扱う場合にはインターレスからノンインター
レス変換した後に出力する。
【００４０】次に、画像処理部１４では、ディジタル画
像に対して少なくとも瞼が閉じている時間よりも速い時
間で画処理を行う。目切り出し部２３では、顔のディジ
タル画像から図１０に示すような黒目及び瞼を含む目領
域の画像８２を切り出す（ステップ１０３）。ＴＶカメ
ラ１２から入力される画像は連続画像であるから、前フ
レームの目領域をテンプレートすることにより目領域の
画像を切り出すことができる。
像に対して少なくとも瞼が閉じている時間よりも速い時
間で画処理を行う。目切り出し部２３では、顔のディジ
タル画像から図１０に示すような黒目及び瞼を含む目領
域の画像８２を切り出す（ステップ１０３）。ＴＶカメ
ラ１２から入力される画像は連続画像であるから、前フ
レームの目領域をテンプレートすることにより目領域の
画像を切り出すことができる。
【００４１】エッジ抽出回路２４では、まず、Ｘ方向空
間フィルタ回路４２の３×３ウィンドウのフィルタ係数
によって目領域のディジタル画像に対してＸ方向に微分
処理を行う。次に、さらに、Ｙ方向空間フィルタ回路４
４の３×３ウィンドウのフィルタ係数によって目領域の
ディジタル画像に対してＹ方向に微分処理を行う。そし
て、これらのＸＹ方向のエッジ画像を合成することによ
り目領域のエッジ画像８３を得る（ステップ１０４）。
間フィルタ回路４２の３×３ウィンドウのフィルタ係数
によって目領域のディジタル画像に対してＸ方向に微分
処理を行う。次に、さらに、Ｙ方向空間フィルタ回路４
４の３×３ウィンドウのフィルタ係数によって目領域の
ディジタル画像に対してＹ方向に微分処理を行う。そし
て、これらのＸＹ方向のエッジ画像を合成することによ
り目領域のエッジ画像８３を得る（ステップ１０４）。
【００４２】ここで、図１１にエッジ抽出処理の概念図
を示す。９つのフィルタ係数をこれに対応する９つの領
域画素の画素値に対して乗算し、さらに乗算された各々
の領域画素の画素値の総和を中心領域画素の画素値とす
る。このような処理を目領域の各々の画素に対して行
う。図１１（ａ）は対象とされるディジタル画像であ
り、図１１（ｂ）はＸ方向微分処理によって得られたＸ
方向エッジ画像である。図１１（ｃ）はＸ方向微分処理
によって得られたＸ方向エッジ画像であり、図１１
（ｄ）は得られたエッジ画像である。
を示す。９つのフィルタ係数をこれに対応する９つの領
域画素の画素値に対して乗算し、さらに乗算された各々
の領域画素の画素値の総和を中心領域画素の画素値とす
る。このような処理を目領域の各々の画素に対して行
う。図１１（ａ）は対象とされるディジタル画像であ
り、図１１（ｂ）はＸ方向微分処理によって得られたＸ
方向エッジ画像である。図１１（ｃ）はＸ方向微分処理
によって得られたＸ方向エッジ画像であり、図１１
（ｄ）は得られたエッジ画像である。
【００４３】このようなエッジ抽出処理によって図１０
に示すような目領域のエッジ画像８３を得ることができ
る。次に、しきい値決定部４６では、目領域のエッジ画
像８３の画素値がしきい値以上の画素のみを目領域のエ
ッジ画像として瞼開閉検出回路２６に出力する（ステッ
プ１０５）。
に示すような目領域のエッジ画像８３を得ることができ
る。次に、しきい値決定部４６では、目領域のエッジ画
像８３の画素値がしきい値以上の画素のみを目領域のエ
ッジ画像として瞼開閉検出回路２６に出力する（ステッ
プ１０５）。
【００４４】ＤＳＰ５４が、マルチプレクサ５３ａ，５
３ｂを相補的に制御することによりエッジ抽出回路２４
からの顔面のエッジ画像を一方の画像メモリに書き込む
際には、ＤＳＰ５４が、他方の画像メモリからエッジ画
像を読み出す（ステップ１０６）。
３ｂを相補的に制御することによりエッジ抽出回路２４
からの顔面のエッジ画像を一方の画像メモリに書き込む
際には、ＤＳＰ５４が、他方の画像メモリからエッジ画
像を読み出す（ステップ１０６）。
【００４５】そして、ＤＳＰ５４が、しきい値決定部４
６からの目領域のエッジ画像８３の内、黒目８４を検出
して、この黒目の大きさから瞼８５の開閉状態を把握
し、瞼８５の開閉結果を瞼開閉結果レジスタ５６に格納
させる（ステップ１０７）。すなわち、ＤＳＰ５４が、
黒目及び瞼を含むエッジ画像の内、閉ループを黒目輪郭
として検出する。瞼のエッジ画像は一部が途切れている
から、閉ループにより瞼を容易に検出することができ
る。瞼の開閉状態としては、瞼が開いている状態、瞼が
閉じている状態、瞼が半開きの状態が考えられる。
６からの目領域のエッジ画像８３の内、黒目８４を検出
して、この黒目の大きさから瞼８５の開閉状態を把握
し、瞼８５の開閉結果を瞼開閉結果レジスタ５６に格納
させる（ステップ１０７）。すなわち、ＤＳＰ５４が、
黒目及び瞼を含むエッジ画像の内、閉ループを黒目輪郭
として検出する。瞼のエッジ画像は一部が途切れている
から、閉ループにより瞼を容易に検出することができ
る。瞼の開閉状態としては、瞼が開いている状態、瞼が
閉じている状態、瞼が半開きの状態が考えられる。
【００４６】例えば、ＤＳＰ５４は、顔面のエッジ画像
を画像メモリ５２ａに書き込む際には、画像メモリ５２
ｂから顔面のエッジ画像を読み出し瞼の開閉を把握す
る。次の時点には、ＤＳＰ５４は、画像メモリ５２ｂに
顔面のエッジ画像を書き込み、画像メモリ５２ａから顔
面のエッジ画像を読み出て瞼の開閉を把握する。すなわ
ち、２つ画像メモリ５２ａ，５２ｂを用いて交互に瞼の
開閉結果を出力する。
を画像メモリ５２ａに書き込む際には、画像メモリ５２
ｂから顔面のエッジ画像を読み出し瞼の開閉を把握す
る。次の時点には、ＤＳＰ５４は、画像メモリ５２ｂに
顔面のエッジ画像を書き込み、画像メモリ５２ａから顔
面のエッジ画像を読み出て瞼の開閉を把握する。すなわ
ち、２つ画像メモリ５２ａ，５２ｂを用いて交互に瞼の
開閉結果を出力する。
【００４７】このようにビデオレートで出力されるエッ
ジ画像を交互に読み書きすることにより連続してＤＳＰ
５４の処理を実行できる。これによって、エッジ抽出回
路２４から出力されてくるエッジ画像を逃さずに処理す
ることができる。
ジ画像を交互に読み書きすることにより連続してＤＳＰ
５４の処理を実行できる。これによって、エッジ抽出回
路２４から出力されてくるエッジ画像を逃さずに処理す
ることができる。
【００４８】次に、表示制御回路３２では、瞼開閉検出
回路２６から瞼の開閉の検出結果９１を入力したか否か
を判定する（ステップ１０８）。瞼の開閉の検出結果９
１を入力しない場合、それが入力されるまで待つ。
回路２６から瞼の開閉の検出結果９１を入力したか否か
を判定する（ステップ１０８）。瞼の開閉の検出結果９
１を入力しない場合、それが入力されるまで待つ。
【００４９】また、表示制御回路３２は、スクロールあ
るいはページ変更などにより画面全体の書き換えあるい
は画面の一部（一文字）の書き換えを示す書換え信号９
２と画面全体を書き換える際に書換え信号９２を送出し
終わったか否かを示す書換え終了信号９３とを表示デー
タ出力部２０から入力したか否かを判定する（ステップ
１０９）。書換え信号を入力しない場合、それが入力さ
れるまで待つ。
るいはページ変更などにより画面全体の書き換えあるい
は画面の一部（一文字）の書き換えを示す書換え信号９
２と画面全体を書き換える際に書換え信号９２を送出し
終わったか否かを示す書換え終了信号９３とを表示デー
タ出力部２０から入力したか否かを判定する（ステップ
１０９）。書換え信号を入力しない場合、それが入力さ
れるまで待つ。
【００５０】そして、表示制御回路３２では、書き込み
信号９２を入力して画面全体を書き換える場合には、画
像メモリ又は画像メモリに書き込み終了信号９３を入力
した後、瞼の検出結果により瞼が閉じている状態あるい
は閉じかけている状態となったか否かを判定する（ステ
ップ１１０）。
信号９２を入力して画面全体を書き換える場合には、画
像メモリ又は画像メモリに書き込み終了信号９３を入力
した後、瞼の検出結果により瞼が閉じている状態あるい
は閉じかけている状態となったか否かを判定する（ステ
ップ１１０）。
【００５１】ここで、瞼が閉じている状態あるいは閉じ
かけている状態となった場合には、表示制御回路３２で
は、その直後に出力を例えば０から１に変化させる（ス
テップ１１１）。なお、画面の一部を書き換える場合に
は、瞼の開閉結果にかかわらず書換え信号を画像メモリ
又は画像メモリに書き込み終了信号を入力した直後に出
力を１から０に変化させる。
かけている状態となった場合には、表示制御回路３２で
は、その直後に出力を例えば０から１に変化させる（ス
テップ１１１）。なお、画面の一部を書き換える場合に
は、瞼の開閉結果にかかわらず書換え信号を画像メモリ
又は画像メモリに書き込み終了信号を入力した直後に出
力を１から０に変化させる。
【００５２】次に、表示画像出力回路３４では、表示制
御回路３２からの瞼を閉じていることを示す出力１に従
って、表示データ出力回路２０から出力される変更表示
データに基づきモニタ１８の画面を変更表示させる（ス
テップ１１２）。一般に、瞬きは３秒に１回程度行わ
れ、瞼が閉じられている時間は０．１秒以上であるか
ら、瞼が閉じている時間に画面を変更するようにする。
なお、前記出力の変化とは逆に出力を１から０に変化さ
せるようにしてもよい。
御回路３２からの瞼を閉じていることを示す出力１に従
って、表示データ出力回路２０から出力される変更表示
データに基づきモニタ１８の画面を変更表示させる（ス
テップ１１２）。一般に、瞬きは３秒に１回程度行わ
れ、瞼が閉じられている時間は０．１秒以上であるか
ら、瞼が閉じている時間に画面を変更するようにする。
なお、前記出力の変化とは逆に出力を１から０に変化さ
せるようにしてもよい。
【００５３】一方、瞼が開いている状態となった場合に
は、表示制御回路３２では、出力０を変化させないでそ
のままとする（ステップ１１３）。次に、表示画像出力
回路３４では、表示制御回路３２からの瞼を開いている
ことを示す出力０に従って、表示データ出力回路２０か
ら出力される表示データに基づきモニタ１８の画面を変
更させないで表示させる（ステップ１１４）。
は、表示制御回路３２では、出力０を変化させないでそ
のままとする（ステップ１１３）。次に、表示画像出力
回路３４では、表示制御回路３２からの瞼を開いている
ことを示す出力０に従って、表示データ出力回路２０か
ら出力される表示データに基づきモニタ１８の画面を変
更させないで表示させる（ステップ１１４）。
【００５４】このように、改ページやスクロールなどの
画面表示の変更を対象者が画面を注視していないときに
行うので、目に負担がかからなくなる。 ＜実施例２＞次に、本発明の実施例２を説明する。図１
２に実施例２の瞼開閉検出回路の構成ブロック図を示
す。図１２に示すように瞼開閉検出回路２６ｂはエッジ
抽出回路２４から出力されるエッジ画像を１画像おき
（１フィールドおきあるいは１フレームおき）に格納す
る画像メモリ５２ａを有する。この画像メモリ５２ａに
はＤＳＰ５４が接続される。
画面表示の変更を対象者が画面を注視していないときに
行うので、目に負担がかからなくなる。 ＜実施例２＞次に、本発明の実施例２を説明する。図１
２に実施例２の瞼開閉検出回路の構成ブロック図を示
す。図１２に示すように瞼開閉検出回路２６ｂはエッジ
抽出回路２４から出力されるエッジ画像を１画像おき
（１フィールドおきあるいは１フレームおき）に格納す
る画像メモリ５２ａを有する。この画像メモリ５２ａに
はＤＳＰ５４が接続される。
【００５５】１画像おきに画像メモリ５２ａに書き込ま
れたエッジ画像をＤＳＰ５４が読み出し、処理を行うこ
とにより瞼の開閉を把握して瞼開閉結果レジスタ５６に
格納させる。なお、その他の構成は実施例１の構成と同
一構成であり、同一部分は同一符号を付する。
れたエッジ画像をＤＳＰ５４が読み出し、処理を行うこ
とにより瞼の開閉を把握して瞼開閉結果レジスタ５６に
格納させる。なお、その他の構成は実施例１の構成と同
一構成であり、同一部分は同一符号を付する。
【００５６】図１３に実施例２の瞼開閉検出回路の処理
フローを示す。まず、１画像おきに画像メモリ５２ａに
顔面のエッジ画像を格納する（ステップ２０１）。次
に、ＤＳＰ５４が画像メモリ５２ａから１画像おきに読
み出しを行い瞼の開閉を把握する（ステッブ２０２）。
そして、ＤＳＰ５４が瞼の開閉結果を瞼開閉結果レジス
タ５６に格納するステップ２０３）。さらに、瞼の開閉
結果を表示制御回路３２に出力する（ステップ２０
４）。
フローを示す。まず、１画像おきに画像メモリ５２ａに
顔面のエッジ画像を格納する（ステップ２０１）。次
に、ＤＳＰ５４が画像メモリ５２ａから１画像おきに読
み出しを行い瞼の開閉を把握する（ステッブ２０２）。
そして、ＤＳＰ５４が瞼の開閉結果を瞼開閉結果レジス
タ５６に格納するステップ２０３）。さらに、瞼の開閉
結果を表示制御回路３２に出力する（ステップ２０
４）。
【００５７】このように１つの画像メモリ５２ａであっ
ても、１画像おき（１フィールドおきあるいは１フレー
ムおき）の処理が可能である。特に、１フィールドおき
の処理は１フレームの連続処理と同様となる。
ても、１画像おき（１フィールドおきあるいは１フレー
ムおき）の処理が可能である。特に、１フィールドおき
の処理は１フレームの連続処理と同様となる。
【００５８】従って、実施例２によっても実施例１の効
果と同様な効果が得られるとともに、画像メモリが１つ
で済み、構成が簡単となる。
果と同様な効果が得られるとともに、画像メモリが１つ
で済み、構成が簡単となる。
【００５９】
【発明の効果】本発明によれば、顔面の画像を入力し、
顔面の画像に基づき瞼の開閉を検出し、表示データを画
面上に表示する。そして、得られた瞼の開閉結果に基づ
き前記画面上の表示データを変更する。改ページやスク
ロールなどの画面表示の変更を対象者が画面を注視して
いないときに行うため、目に負担がかからなくなり、使
用者の目の疲れが軽減できる。
顔面の画像に基づき瞼の開閉を検出し、表示データを画
面上に表示する。そして、得られた瞼の開閉結果に基づ
き前記画面上の表示データを変更する。改ページやスク
ロールなどの画面表示の変更を対象者が画面を注視して
いないときに行うため、目に負担がかからなくなり、使
用者の目の疲れが軽減できる。
【図１】本発明にかかる画像表示制御装置の原理図であ
る。
る。
【図２】本発明にかかる画像表示制御方法の処理原理フ
ローである。
ローである。
【図３】本発明の画像表示制御装置の一実施例の構成ブ
ロック図である。
ロック図である。
【図４】エッジ抽出回路の構成ブロック図である。
【図５】Ｘ方向空間フィルタ回路の係数を示す図であ
る。
る。
【図６】Ｙ方向空間フィルタ回路の構成ブロック図であ
る。
る。
【図７】瞼開閉検出回路の構成ブロック図である。
【図８】表示画像出力回路の構成ブロック図である。
【図９】実施例１の処理フローを示す図である。
【図１０】図１０は図９に示す各処理で得られる画像を
示す図である。
示す図である。
【図１１】エッジ抽出処理の概念図である。
【図１２】実施例２の瞼開閉検出回路の構成ブロック図
である。
である。
【図１３】実施例２の瞼開閉検出回路の処理フローであ
る。
る。
【図１４】従来の画面表示制御装置の構成ブロック図で
ある。
ある。
１２・・ＴＶカメラ １４・・画像処理部 １６・・画像出力制御部 １８・・モニタ ２０・・表示データ出力部 ２２・・Ａ／Ｄ変換回路 ２３・・目領域切り出し部 ２４・・エッジ抽出回路 ２６・・瞼開閉検出回路 ３２・・表示制御回路 ３４・・表示画像出力回路 ３５・・表示用メモリ ３６・・セレクタ ３７ａ，３７ｂ，５３ａ，５３ｂ・・マルチプレクサ ４２・・Ｘ方向空間フィルタ回路 ４４・・Ｙ方向空間フィルタ回路 ４６・・しきい値決定部 ５１・・黒目位置検出部 ５２，５２ａ，５２ｂ・・画像メモリ ５４・・ディジタルシグナルプロセッサ ５６・・瞼開閉結果レジスタ
Claims (18)
- 【請求項１】 顔面の画像を入力する画像入力ステップ
（３０１）と、 顔面の画像に基づき瞼の開閉を検出する画像処理ステッ
プ（３０２）と、 表示データを画面上に表示する表示ステップ（３０３）
と、 前記画像処理ステップで得られた瞼の開閉結果に基づき
前記画面上の表示データを変更する画像出力制御ステッ
プ（３０４）とを含むことを特徴とする画面表示制御方
法。 - 【請求項２】 請求項１において、前記画像入力ステッ
プ（３０１）は、前記瞼が閉じている時間以下の時間毎
に顔面の画像を画像処理手段に出力し、前記画像処理ス
テップ（３０２）は、前記瞼が閉じている時間以下の時
間毎に瞼の開閉結果を出力することを特徴とする画面表
示制御方法。 - 【請求項３】 請求項１において、前記画像出力制御ス
テップ（３０４）は、２つの画像メモリを有し、書き換
え信号により一方の画像メモリ内の表示データを書換え
た後、前記瞼が閉じているときには、前記一方の画像メ
モリから書換えられた表示データを出力することを特徴
とする画面表示制御方法。 - 【請求項４】 請求項３において、表示データが画面全
体を書き換える場合に書換えが終了した後、前記瞼が閉
じているときに書換られた表示データを出力し、表示デ
ータが画面の一部を書き換える場合に書換えが終了した
後、前記瞼の開閉にかかわらず書換られた表示データを
出力することを特徴とする画面表示制御方法。 - 【請求項５】 請求項１又は請求項２において、前記画
像処理ステップ（３０２）は、顔面の画像のエッジを抽
出することによりエッジ画像を生成するエッジ抽出ステ
ップを含むことを特徴とする画面表示制御方法。 - 【請求項６】 請求項５において、前記画像処理ステッ
プ（３０２）は、顔面のエッジ画像から目領域のエッジ
画像を切り出し、目領域のエッジ画像から目の位置及び
大きさを検出することにより瞼の開閉を把握することを
特徴とする画面表示制御装置。 - 【請求項７】 請求項６において、前記エッジ画像は、
画像の各々の画素に対して微分処理を施すことにより得
られることを特徴とする画面表示制御方法。 - 【請求項８】 請求項５において、前記画像処理ステッ
プ（３０２）は、一方の画像メモリに顔面のエッジ画像
を書き込む場合には、他方の画像メモリを読み出すこと
により瞼の開閉を把握する構成されてなることを特徴と
する画面表示制御方法。 - 【請求項９】 請求項１において、前記画像処理ステッ
プ（３０２）は、瞼開閉結果レジスタ（５６）に１フィ
ールドまたは１フレームおきに前記瞼の開閉結果を格納
することを特徴とする画面表示制御方法。 - 【請求項１０】 顔面の画像を入力する画像入力手段
（１２）と、 画面入力手段（１２）から出力される顔面の画像に基づ
き瞼の開閉を検出する画像処理手段（１４）と、 表示データを画面上に表示する表示手段（１８）と、 前記画像処理手段（１４）から出力される瞼の開閉結果
に基づき前記画面上の表示データを変更する画像出力制
御手段（１６）とを備えたことを特徴とする画面表示制
御装置。 - 【請求項１１】 請求項１０において、前記画像入力手
段（１２）は、前記瞼が閉じている時間以下の時間毎に
顔面の画像を画像処理手段に出力し、前記画像処理手段
（１４）は、前記瞼が閉じている時間以下の時間毎に瞼
の開閉結果を出力することを特徴とする画面表示制御装
置。 - 【請求項１２】 請求項１０において、前記画像出力制
御手段（１６）は、２つの画像メモリ（３５ａ，３５
ｂ）と、これらの画像メモリに対して表示データの書き
込み及び読み出しを行う表示制御回路（３２）とを有
し、 前記表示制御回路（３２）は、書き換え信号により一方
の画像メモリ内の表示データを書換えた後、前記瞼が閉
じているときには、前記一方の画像メモリから書換えら
れた表示データを表示手段（１８）に出力することを特
徴とする画面表示制御装置。 - 【請求項１３】 請求項１２において、前記表示制御回
路（３２）は、表示データが画面全体を書き換える場合
に書換えが終了した後、前記瞼が閉じているときに書換
られた表示データを表示手段（１８）に出力し、 表示データが画面の一部を書き換える場合に書換えが終
了した後、前記瞼の開閉にかかわらず書換られた表示デ
ータを表示手段（１８）に出力することを特徴とする画
面表示制御装置。 - 【請求項１４】 請求項１０又は請求項１１において、
前記画像処理手段（１４）は、顔面の画像のエッジを抽
出することによりエッジ画像を生成するエッジ抽出手段
（２４）を有することを特徴とする画面表示制御装置。 - 【請求項１５】 請求項１４において、前記画像処理手
段（１４）は、顔面のエッジ画像から目領域のエッジ画
像を切り出す目領域切り出し部（２３）と、目領域のエ
ッジ画像から目の位置及び大きさを検出することにより
瞼の開閉を把握する目位置検出部（５１）とを有するこ
とを特徴とする画面表示制御装置。 - 【請求項１６】 請求項１５において、前記エッジ抽出
回路手段（２４）は、画像の各々の画素に対して微分処
理を施すことにより空間フィルタ回路であることを特徴
とする画面表示制御装置。 - 【請求項１７】 請求項１４において、前記画像処理手
段（１４）は、２つの画像メモリ（５２ａ，５２ｂ）を
有し、一方の画像メモリに顔面のエッジ画像を書き込む
場合には、他方の画像メモリからプロセッサ（５４）が
顔面のエッジ画像を読み出し瞼の開閉を把握する構成さ
れてなることを特徴とする画面表示制御装置。 - 【請求項１８】 請求項１０において、前記画像処理手
段（１４）は、１フィールドまたは１フレームおきに顔
面のエッジ画像を格納する１つの画像メモリ（５２ａ）
と、その画像メモリから顔面のエッジ画像を読み出し瞼
の開閉を把握するプロセッサ（５４）とを有することを
特徴とする画面表示制御装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP5094537A JPH06308918A (ja) | 1993-04-21 | 1993-04-21 | 画面表示制御方法及び画面表示制御装置 |
| US08/202,579 US5455601A (en) | 1993-04-21 | 1994-02-28 | Method of and apparatus for displaying image |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP5094537A JPH06308918A (ja) | 1993-04-21 | 1993-04-21 | 画面表示制御方法及び画面表示制御装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH06308918A true JPH06308918A (ja) | 1994-11-04 |
Family
ID=14113076
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP5094537A Pending JPH06308918A (ja) | 1993-04-21 | 1993-04-21 | 画面表示制御方法及び画面表示制御装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US5455601A (ja) |
| JP (1) | JPH06308918A (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008268725A (ja) * | 2007-04-24 | 2008-11-06 | Toshiba Corp | 情報処理装置および画像データの高解像度化方法 |
| JP2009003730A (ja) * | 2007-06-22 | 2009-01-08 | Nintendo Co Ltd | 情報処理プログラムおよび情報処理装置 |
| JP2013003647A (ja) * | 2011-06-13 | 2013-01-07 | Sony Corp | 情報処理装置及びプログラム |
| WO2013128617A1 (ja) * | 2012-03-01 | 2013-09-06 | 株式会社日本マイクロニクス | 表示デバイスの表示むら検出方法及びその装置 |
Families Citing this family (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3426060B2 (ja) * | 1995-07-28 | 2003-07-14 | 三菱電機株式会社 | 顔画像処理装置 |
| US6351273B1 (en) | 1997-04-30 | 2002-02-26 | Jerome H. Lemelson | System and methods for controlling automatic scrolling of information on a display or screen |
| US6215471B1 (en) * | 1998-04-28 | 2001-04-10 | Deluca Michael Joseph | Vision pointer method and apparatus |
| US6681383B1 (en) * | 2000-04-04 | 2004-01-20 | Sosy, Inc. | Automatic software production system |
| US6603491B2 (en) | 2000-05-26 | 2003-08-05 | Jerome H. Lemelson | System and methods for controlling automatic scrolling of information on a display or screen |
| US10742965B2 (en) * | 2001-01-23 | 2020-08-11 | Visual Effect Innovations, Llc | Faster state transitioning for continuous adjustable 3Deeps filter spectacles using multi-layered variable tint materials |
| JP3631702B2 (ja) * | 2001-07-19 | 2005-03-23 | エヌイーシーシステムテクノロジー株式会社 | 描画表示システム |
| US20060066567A1 (en) * | 2004-09-29 | 2006-03-30 | Scharenbroch Gregory K | System and method of controlling scrolling text display |
| JP4137969B2 (ja) * | 2006-12-04 | 2008-08-20 | アイシン精機株式会社 | 眼部検出装置、眼部検出方法及びプログラム |
| JP4895847B2 (ja) * | 2007-02-08 | 2012-03-14 | アイシン精機株式会社 | 瞼検出装置及びプログラム |
| US9578318B2 (en) | 2012-03-14 | 2017-02-21 | Microsoft Technology Licensing, Llc | Imaging structure emitter calibration |
| US11068049B2 (en) | 2012-03-23 | 2021-07-20 | Microsoft Technology Licensing, Llc | Light guide display and field of view |
| US10191515B2 (en) | 2012-03-28 | 2019-01-29 | Microsoft Technology Licensing, Llc | Mobile device light guide display |
| US9558590B2 (en) * | 2012-03-28 | 2017-01-31 | Microsoft Technology Licensing, Llc | Augmented reality light guide display |
| US9717981B2 (en) | 2012-04-05 | 2017-08-01 | Microsoft Technology Licensing, Llc | Augmented reality and physical games |
| US8937591B2 (en) * | 2012-04-06 | 2015-01-20 | Apple Inc. | Systems and methods for counteracting a perceptual fading of a movable indicator |
| US10502876B2 (en) | 2012-05-22 | 2019-12-10 | Microsoft Technology Licensing, Llc | Waveguide optics focus elements |
| US10192358B2 (en) | 2012-12-20 | 2019-01-29 | Microsoft Technology Licensing, Llc | Auto-stereoscopic augmented reality display |
| WO2014210430A1 (en) | 2013-06-27 | 2014-12-31 | Tractus Corporation | Systems and methods for tissue mapping |
| US9335819B1 (en) * | 2014-06-26 | 2016-05-10 | Audible, Inc. | Automatic creation of sleep bookmarks in content items |
| KR101709087B1 (ko) * | 2014-08-01 | 2017-02-23 | 삼성디스플레이 주식회사 | 타이밍 제어부, 이를 포함하는 표시 장치 및 이의 구동 방법 |
| US10018844B2 (en) | 2015-02-09 | 2018-07-10 | Microsoft Technology Licensing, Llc | Wearable image display system |
| US10317677B2 (en) | 2015-02-09 | 2019-06-11 | Microsoft Technology Licensing, Llc | Display system |
| US11430264B2 (en) * | 2018-07-16 | 2022-08-30 | Honor Device Co., Ltd. | Eye open or closed state detection method and electronic device |
| US11568540B2 (en) * | 2019-10-07 | 2023-01-31 | Optos Plc | System, method, and computer-readable medium for rejecting full and partial blinks for retinal tracking |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4109145A (en) * | 1974-05-20 | 1978-08-22 | Honeywell Inc. | Apparatus being controlled by movement of the eye |
| JPH0687265B2 (ja) * | 1984-04-13 | 1994-11-02 | 富士通株式会社 | 空間フィルタ回路 |
| US4891630A (en) * | 1988-04-22 | 1990-01-02 | Friedman Mark B | Computer vision system with improved object orientation technique |
| JPH03256112A (ja) * | 1990-03-07 | 1991-11-14 | Toshiba Corp | 制御処理装置 |
| JPH04100083A (ja) * | 1990-08-20 | 1992-04-02 | Koperu Denshi Kk | 進行性神経筋疾患者等用意思表現方法およびシステム装置 |
| JPH04225478A (ja) * | 1990-12-27 | 1992-08-14 | Fujitsu Ltd | 視線検出装置 |
-
1993
- 1993-04-21 JP JP5094537A patent/JPH06308918A/ja active Pending
-
1994
- 1994-02-28 US US08/202,579 patent/US5455601A/en not_active Expired - Lifetime
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008268725A (ja) * | 2007-04-24 | 2008-11-06 | Toshiba Corp | 情報処理装置および画像データの高解像度化方法 |
| JP2009003730A (ja) * | 2007-06-22 | 2009-01-08 | Nintendo Co Ltd | 情報処理プログラムおよび情報処理装置 |
| JP2013003647A (ja) * | 2011-06-13 | 2013-01-07 | Sony Corp | 情報処理装置及びプログラム |
| US9182816B2 (en) | 2011-06-13 | 2015-11-10 | Sony Corporation | Information processing apparatus and program |
| US9933850B2 (en) | 2011-06-13 | 2018-04-03 | Sony Corporation | Information processing apparatus and program |
| WO2013128617A1 (ja) * | 2012-03-01 | 2013-09-06 | 株式会社日本マイクロニクス | 表示デバイスの表示むら検出方法及びその装置 |
| JPWO2013128617A1 (ja) * | 2012-03-01 | 2015-07-30 | 株式会社日本マイクロニクス | 表示デバイスの表示むら検出方法及びその装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| US5455601A (en) | 1995-10-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JPH06308918A (ja) | 画面表示制御方法及び画面表示制御装置 | |
| US7623133B1 (en) | Method and apparatus for displaying data from multiple frame buffers on a single display device | |
| JP2006023953A (ja) | 情報表示システム | |
| WO2001052192A8 (en) | Dynamically adjusting a sample-to-pixel filter in response to user input and/or sensor input | |
| KR100421017B1 (ko) | 잔상 현상 제거 장치 및 방법 | |
| JPH0822385A (ja) | 視線対応表示方法及び装置 | |
| US7324161B2 (en) | Display apparatus and control method thereof | |
| JPH1115429A (ja) | 動きベクトル時間軸処理方式 | |
| CN114063845A (zh) | 显示方法、显示装置和电子设备 | |
| JP3154741B2 (ja) | 画像処理装置及びその方式 | |
| US20230288984A1 (en) | Display device and display method | |
| JPH04307034A (ja) | 医用画像表示装置 | |
| JPH05108792A (ja) | 画像処理方法及び装置 | |
| CN114554098A (zh) | 显示方法、显示装置、电子设备和可读存储介质 | |
| KR100777279B1 (ko) | 모니터 및 그 가시화면 조정방법 | |
| JPH08286646A (ja) | 表示装置のドライアイ防止回路 | |
| CN113760212A (zh) | 一种基于win7实现屏幕自适应翻转的方法及装置 | |
| CN113656132A (zh) | 显示方法和装置 | |
| JPH05192334A (ja) | 超音波診断装置 | |
| JPH11338447A (ja) | 情報処理装置 | |
| JPH06333007A (ja) | 画像表示制御装置 | |
| JPH07307895A (ja) | 静止画像表示装置及びその操作盤 | |
| JPH01314321A (ja) | タッチパネル入力装置 | |
| JPH05324794A (ja) | 画像処理装置 | |
| KR19990065614A (ko) | 온 스크린 디스플레이 기능을 구비한 디스플레이 장치 및 이의제어 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20020402 |