JP6911730B2

JP6911730B2 - 表示装置、画像処理装置、処理実行方法、処理実行プログラム

Info

Publication number: JP6911730B2
Application number: JP2017229089A
Authority: JP
Inventors: 隼人南出
Original assignee: Kyocera Document Solutions Inc
Current assignee: Kyocera Document Solutions Inc
Priority date: 2017-11-29
Filing date: 2017-11-29
Publication date: 2021-07-28
Anticipated expiration: 2037-11-29
Also published as: US10715688B2; CN109905556B; JP2019101550A; US20190166267A1; CN109905556A

Description

本発明は、表示装置、表示装置を備える画像処理装置、並びに表示装置で実行される報知方法、報知プログラム、処理実行方法、及び処理実行プログラムに関する。

複合機のような画像処理装置には、液晶ディスプレーのような表示部が設けられることがある。また、この種の画像処理装置では、表示部の上に原稿のような遮蔽物が置かれて、表示部に表示される画面の一部が遮蔽されることがある。これに対し、表示部において遮蔽領域が検出された場合に、当該表示部に表示されている画面を当該表示部における遮蔽領域外に縮小表示させることが可能な表示装置が知られている（特許文献１参照）。

特開２００２−２２９５４６号公報

しかしながら、遮蔽領域が検出された場合に表示部に表示されている画面が当該表示部における遮蔽領域外に縮小表示される場合には、遮蔽領域の検出前に遮蔽領域外に表示されていた表示内容の視認性が低下する。

本発明の目的は、遮蔽領域外の表示内容の視認性を低下させることなく、遮蔽領域の表示内容をユーザーに認識させることが可能な表示装置、画像処理装置、報知方法、報知プログラム、処理実行方法、及び処理実行プログラムを提供することにある。

本発明の一の局面に係る表示装置は、表示部と、表示処理部と、検出部と、報知処理部とを備える。前記表示処理部は、予め定められた表示対象を前記表示部に表示させる。前記検出部は、前記表示部における遮蔽物によって覆われた遮蔽領域を検出可能である。前記報知処理部は、前記検出部によって検出される前記遮蔽領域と一部又は全部が重なり合う前記表示対象を音声によって報知可能である。

本発明の他の局面に係る画像処理装置は、前記表示装置と、原稿の画像データを読取可能な画像読取部、及び画像データに基づく画像を形成可能な画像形成部のいずれか一方又は両方と、を備える。

本発明の他の局面に係る報知方法は、表示部と、前記表示部における遮蔽物によって覆われた遮蔽領域を検出可能な検出部と、を備える表示装置で実行され、予め定められた表示対象を前記表示部に表示させることと、前記検出部によって検出される前記遮蔽領域と一部又は全部が重なり合う前記表示対象を音声によって報知することと、を含む。

本発明の他の局面に係る報知プログラムは、表示部と、前記表示部における遮蔽物によって覆われた遮蔽領域を検出可能な検出部と、を備える表示装置で実行され、予め定められた表示対象を前記表示部に表示させる処理と、前記検出部によって検出される前記遮蔽領域と一部又は全部が重なり合う前記表示対象を音声によって報知する処理と、を含む。

本発明の他の局面に係る処理実行方法は、表示部と、前記表示部における遮蔽物によって覆われた遮蔽領域を検出可能な検出部と、を備える表示装置で実行され、予め定められた処理に対応付けられた操作アイコンを含む表示対象を前記表示部に表示させることと、前記検出部によって検出される前記遮蔽領域と一部又は全部が重なり合う前記表示対象を音声によって報知することと、前記操作アイコンへのタッチ操作に応じて、当該タッチ操作が行われた前記操作アイコンに対応する処理を実行することと、前記表示部へのタッチ操作とは異なる前記遮蔽領域と重なり合う前記操作アイコン各々を識別可能な識別操作に応じて、当該識別操作によって識別される前記操作アイコンに対応する処理を実行することと、を含む。

本発明の他の局面に係る処理実行プログラムは、表示部と、前記表示部における遮蔽物によって覆われた遮蔽領域を検出可能な検出部と、を備える表示装置で実行され、予め定められた処理に対応付けられた操作アイコンを含む表示対象を前記表示部に表示させる処理と、前記検出部によって検出される前記遮蔽領域と一部又は全部が重なり合う前記表示対象を音声によって報知する処理と、前記操作アイコンへのタッチ操作に応じて、当該タッチ操作が行われた前記操作アイコンに対応する処理を実行する処理と、前記表示部へのタッチ操作とは異なる前記遮蔽領域と重なり合う前記操作アイコン各々を識別可能な識別操作に応じて、当該識別操作によって識別される前記操作アイコンに対応する処理を実行する処理と、を含む。

本発明によれば、遮蔽領域外の表示内容の視認性を低下させることなく、遮蔽領域の表示内容をユーザーに認識させることが可能な表示装置、画像処理装置、報知方法、報知プログラム、処理実行方法、及び処理実行プログラムが実現される。

図１は、本発明の実施形態に係る画像処理装置の構成を示す図である。図２は、本発明の実施形態に係る画像処理装置のシステム構成を示すブロック図である。図３は、本発明の実施形態に係る画像処理装置の操作表示部の構成を示す図である。図４は、本発明の実施形態に係る画像処理装置において操作表示部に表示される画面の一例を示す図である。図５は、本発明の実施形態に係る画像処理装置において画面の表示に用いられる画面データの一例を示す図である。図６は、本発明の実施形態に係る画像処理装置において表示対象の読み上げに用いられる読み上げデータの一例を示す図である。図７は、本発明の実施形態に係る画像処理装置で実行される報知処理の一例を示すフローチャートである。

以下、添付図面を参照しながら、本発明の実施形態について説明し、本発明の理解に供する。なお、以下の実施形態は、本発明を具体化した一例であって、本発明の技術的範囲を限定するものではない。

［画像処理装置１０の概略構成］
まず、図１〜図３を参照しつつ、本発明の実施形態に係る画像処理装置１０の概略構成について説明する。ここで、図１は画像処理装置１０の構成を示す断面模式図である。また、図３は操作表示部６の構成を示す平面図である。なお、図３における二点鎖線は、遮蔽領域Ｚ１を示すためのものである。

画像処理装置１０は、原稿から画像データを読み取るスキャン機能、及び画像データに基づいて画像を形成するプリント機能と共に、ファクシミリ機能、及びコピー機能などの複数の機能を有する複合機である。なお、画像処理装置１０は、スキャナー装置、プリンター装置、ファクシミリ装置、及びコピー機などであってもよい。

図１及び図２に示されるように、画像処理装置１０は、ＡＤＦ（自動原稿搬送装置）１、画像読取部２、画像形成部３、給紙部４、制御部５、操作表示部６、及び記憶部７を備える。

ＡＤＦ１は、画像読取部２によって読み取られる原稿を搬送する。具体的に、ＡＤＦ１は、原稿セット部、複数の搬送ローラー、原稿押さえ、及び排紙部を備える。

画像読取部２は、原稿から画像データを読み取ることが可能である。具体的に、画像読取部２は、原稿台、光源、複数のミラー、光学レンズ、及びＣＣＤを備える。

画像形成部３は、画像読取部２で読み取られた画像データに基づいて、電子写真方式でカラー又はモノクロの画像を形成することが可能である。また、画像形成部３は、外部のパーソナルコンピューター等の情報処理装置から入力された画像データに基づいて、画像を形成することも可能である。具体的に、画像形成部３は、Ｃ（シアン）、Ｍ（マゼンタ）、Ｙ（イエロー）、及びＫ（ブラック）に対応する複数の画像形成ユニット、光走査装置（ＬＳＵ）、中間転写ベルト、二次転写ローラー、定着装置、及び排紙トレイを備える。なお、画像形成部３は、インクジェット方式などの他の画像形成方式により画像を形成するものであってもよい。

給紙部４は、画像形成部３にシートを供給する。具体的に、給紙部４は、給紙カセット、及び複数の搬送ローラーを備える。画像処理装置１０では、給紙部４から供給されるシートにカラー又はモノクロの画像が形成されて、画像形成後の前記シートが前記排紙トレイに排出される。

制御部５は、不図示のＣＰＵ、ＲＯＭ、ＲＡＭ、及びＥＥＰＲＯＭ（登録商標）などの制御機器を備える。前記ＣＰＵは、各種の演算処理を実行するプロセッサーである。前記ＲＯＭは、前記ＣＰＵに各種の処理を実行させるための制御プログラムなどの情報が予め記憶される不揮発性の記憶装置である。前記ＲＡＭは揮発性の記憶装置であり、前記ＥＥＰＲＯＭは不揮発性の記憶装置である。前記ＲＡＭ及び前記ＥＥＰＲＯＭは、前記ＣＰＵが実行する各種の処理の一時記憶メモリー（作業領域）として使用される。制御部５では、前記ＣＰＵにより前記ＲＯＭに予め記憶された各種の制御プログラムが実行される。これにより、画像処理装置１０が制御部５により統括的に制御される。なお、制御部５は、集積回路（ＡＳＩＣ）などの電子回路で構成されたものであってもよく、画像処理装置１０を統括的に制御するメイン制御部とは別に設けられた制御部であってもよい。

操作表示部６は、画像処理装置１０におけるユーザーインターフェイスである。図２及び図３に示されるように、操作表示部６は、操作キー部６１、表示部６２、操作検出部６３、スピーカー６４、マイク６５、及び遮蔽検出部６６を備える。

操作キー部６１は、ユーザーの操作に応じて制御部５に各種の情報を入力する複数のハードキーを含む。例えば、操作キー部６１は、画像処理装置１０の各部への給電制御に用いられる電源キー、各種ジョブの実行指示に用いられるスタートキー、及び数字情報の入力に用いられるテンキーなどを含む（図３参照）。

表示部６２は、制御部５からの制御指示に応じて各種の情報を表示する。例えば、表示部６２は液晶ディスプレーである。例えば、表示部６２には、画像処理装置１０で実行されるコピージョブの設定操作に用いられる画面Ｇ１０（図４参照）などが表示される。

操作検出部６３は、ユーザーによる表示部６２への操作を検出することが可能なタッチパネルである。例えば、操作検出部６３は、抵抗膜方式によりユーザーの指などの物体が表示部６２に接触した場合に表示部６２における前記物体との接触位置（タッチ位置）を検出する。なお、操作検出部６３は、静電容量方式など、他の検出方式を用いて前記物体と表示部６２との接触を検出してもよい。

スピーカー６４は、警告音の鳴動、及び音声データの出力などに用いられる。

マイク６５は、画像処理装置１０への音声入力に用いられる。

遮蔽検出部６６は、表示部６２における遮蔽物によって覆われた遮蔽領域を検出可能である。ここに、遮蔽検出部６６が、本発明における検出部の一例である。

例えば、遮蔽検出部６６は、図３に示されるように、表示部６２の縁部に隣接しており、当該縁部に沿って並んで設けられた複数のセンサー６６Ａを含む。例えば、センサー６６Ａは、発光部及び受光部を有する反射型の光センサーである。

例えば、遮蔽検出部６６は、いずれかのセンサー６６Ａの前記受光部において予め定められた閾値を超える光量の光が受光された場合に、前記閾値を超える光量の光が受光された前記受光部を有するセンサー６６Ａ各々の位置に基づいて、前記遮蔽領域を検出する。

例えば、図３において、位置Ｐ１と位置Ｐ２とを結ぶ直線上のセンサー６６Ａ各々、位置Ｐ２と位置Ｐ３とを結ぶ直線上のセンサー６６Ａ各々、及び位置Ｐ３と位置Ｐ４とを結ぶ直線上のセンサー６６Ａ各々の前記受光部において前記閾値を超える光量の光が受光されたと仮定する。この場合、遮蔽検出部６６は、位置Ｐ１と位置Ｐ２とを結ぶ直線、位置Ｐ２と位置Ｐ３とを結ぶ直線、位置Ｐ３と位置Ｐ４とを結ぶ直線、及び位置Ｐ４と位置Ｐ１とを結ぶ直線によって囲まれた四角形の領域を遮蔽領域Ｚ１（図３参照）として検出する。なお、遮蔽検出部６６は、位置Ｐ１、位置Ｐ２、及び位置Ｐ３各々を角部とする長方形の領域を前記遮蔽領域として検出してもよい。また、遮蔽検出部６６は、位置Ｐ２、位置Ｐ３、及び位置Ｐ４各々を角部とする長方形の領域を前記遮蔽領域として検出してもよい。

また、図３において、位置Ｐ１と位置Ｐ２とを結ぶ直線上のセンサー６６Ａ各々、及び位置Ｐ２と位置Ｐ５とを結ぶ直線上のセンサー６６Ａ各々の前記受光部において前記閾値を超える光量の光が受光されたと仮定する。この場合、遮蔽検出部６６は、位置Ｐ１と位置Ｐ２とを結ぶ直線、位置Ｐ２と位置Ｐ５とを結ぶ直線、及び位置Ｐ５と位置Ｐ１とを結ぶ直線によって囲まれた三角形の領域を前記遮蔽領域として検出する。なお、遮蔽検出部６６は、位置Ｐ１、位置Ｐ２、及び位置Ｐ５各々を角部とする長方形の領域を前記遮蔽領域として検出してもよい。

また、図３において、位置Ｐ１と位置Ｐ６とを結ぶ直線上のセンサー６６Ａ各々の前記受光部において前記閾値を超える光量の光が受光されたと仮定する。この場合、遮蔽検出部６６は、位置Ｐ１と位置Ｐ６とを結ぶ直線を一辺とし、表示部６２の表示領域と重なる正方形の領域を前記遮蔽領域として検出する。なお、遮蔽検出部６６は、位置Ｐ１と位置Ｐ６とを結ぶ直線を一辺とし、表示部６２の表示領域と重なる長方形の領域を前記遮蔽領域として検出してもよい。

なお、センサー６６Ａは、前記受光部のみを有する光センサーであってもよい。また、センサー６６Ａは、感圧式のセンサーであってもよい。また、操作検出部６３が、遮蔽検出部６６を兼ねていてもよい。また、遮蔽検出部６６は、以上に説明した手法とは異なる手法で前記遮蔽領域を検出してもよい。

記憶部７は、不揮発性の記憶装置である。例えば、記憶部７は、フラッシュメモリー、ＳＳＤ（ソリッドステートドライブ）、又はＨＤＤ（ハードディスクドライブ）などの記憶装置である。記憶部７には、画像読取部２で読み取られた画像データなどが記憶される。なお、記憶部７は、制御部５の前記ＥＥＰＲＯＭであってもよい。

ところで、画像処理装置１０では、表示部６２の上に原稿のような前記遮蔽物が置かれて、表示部６２に表示される画面の一部が遮蔽されることがある。これに対し、表示部６２において前記遮蔽領域が検出された場合に、表示部６２に表示されている画面を表示部６２における前記遮蔽領域外に縮小表示させることが可能な表示装置が知られている。

しかしながら、前記遮蔽領域が検出された場合に表示部６２に表示されている画面が表示部６２における前記遮蔽領域外に縮小表示される場合には、前記遮蔽領域の検出前に前記遮蔽領域外に表示されていた表示内容の視認性が低下する。これに対し、本発明の実施形態に係る画像処理装置１０では、以下に説明するように、前記遮蔽領域外の表示内容の視認性を低下させることなく、前記遮蔽領域の表示内容をユーザーに認識させることが可能である。

具体的に、制御部５の前記ＲＯＭには、制御部５の前記ＣＰＵに後述の報知処理（図７のフローチャート参照）を実行させるための報知プログラムが予め記憶されている。なお、前記報知プログラムは、ＣＤ、ＤＶＤ、フラッシュメモリーなどのコンピューター読み取り可能な記録媒体に記録されており、前記記録媒体から記憶部７などの記憶装置にインストールされてもよい。

そして、制御部５は、図２に示されるように、表示処理部５１、第１処理実行部５２、報知処理部５３、及び第２処理実行部５４を含む。具体的に、制御部５の前記ＣＰＵは、前記ＲＯＭに記憶された前記報知プログラムを実行する。これにより、制御部５は、表示処理部５１、第１処理実行部５２、報知処理部５３、及び第２処理実行部５４として機能する。ここに、制御部５、及び操作表示部６を備える構成が、本発明における表示装置の一例である。

表示処理部５１は、予め定められた表示対象を表示部６２に表示させる。例えば、前記表示対象は、予め定められた処理に対応付けられた操作アイコンを含む。また、前記表示対象は、ユーザーへのメッセージを示すメッセージ画像を含む。なお、前記表示対象は、現在の時刻を示すデジタル時計などを含んでいてもよい。

例えば、表示処理部５１は、予め定められた表示条件を充足する場合に、当該表示条件に予め対応付けられており、前記表示対象を含む画面を表示部６２に表示させる。例えば、画像処理装置１０では、前記表示条件各々に対応付けられた画面データが予め制御部５の前記ＲＯＭに記憶されている。表示処理部５１は、前記表示条件を充足する場合に、当該表示条件に対応する前記画面データに基づいて、前記画面を表示させる。

ここで、図４には、表示処理部５１によって表示部６２に表示される前記画面の一例である画面Ｇ１０が示されている。図４に示されるように、画面Ｇ１０は、表示対象Ｔ１１〜Ｔ１６を含む。表示対象Ｔ１１、及び表示対象Ｔ１３〜Ｔ１６は操作アイコンである。また、表示対象Ｔ１２はメッセージ画像である。なお、画面Ｇ１０は、画像処理装置１０の電源投入時等に表示部６２に表示されるジョブ選択画面においてコピージョブが選択された場合に表示される。

また、図５には、表示処理部５１による画面Ｇ１０の表示に用いられる前記画面データの一例である画面データＤ１０が示されている。図５に示されるように、画面データＤ１０は、表示対象Ｔ１１〜Ｔ１６各々の種類情報、アドレス情報、及び座標情報を含む。前記種類情報は、表示対象Ｔ１１〜Ｔ１６各々の種類を示す情報である。また、前記アドレス情報は、予め制御部５の前記ＲＯＭに記憶されている表示対象Ｔ１１〜Ｔ１６各々の画像データのアドレスを示す情報である。また、前記座標情報は、表示部６２における表示対象Ｔ１１〜Ｔ１６各々の表示位置を示す情報である。

例えば、表示処理部５１は、表示部６２に画面Ｇ１０を表示する場合に、まず制御部５の前記ＲＯＭから画面データＤ１０を読み出す。次に、表示処理部５１は、画面データＤ１０に含まれる前記アドレス情報各々に基づいて、表示対象Ｔ１１〜Ｔ１６各々の画像データを取得する。そして、表示処理部５１は、取得された画像データ各々を表示部６２における画面データＤ１０に含まれる前記座標情報に基づいて特定される位置各々に表示させる。

第１処理実行部５２は、前記操作アイコンへのタッチ操作に応じて、当該タッチ操作が行われた前記操作アイコンに対応する処理を実行する。

具体的に、第１処理実行部５２は、操作検出部６３によって表示部６２への前記タッチ操作が検出された場合に、前記画面データに含まれる前記種類情報及び前記座標情報に基づいて、検出された前記タッチ操作の位置に前記操作アイコンが存在するか否かを判断する。そして、第１処理実行部５２は、検出された前記タッチ操作の位置に前記操作アイコンが存在すると判断した場合に、操作が検出された前記操作アイコンに対応する処理を実行する。

例えば、第１処理実行部５２は、図４に示される画面Ｇ１０において表示対象Ｔ１１への前記タッチ操作が検出された場合に、前記コピージョブを実行する。また、第１処理実行部５２は、画面Ｇ１０において表示対象Ｔ１４への前記タッチ操作が検出された場合に、印刷濃度の設定に用いられる濃度設定画面を表示部６２に表示させる。

報知処理部５３は、遮蔽検出部６６によって検出される前記遮蔽領域と一部又は全部が重なり合う前記表示対象を音声によって報知可能である。

例えば、報知処理部５３は、前記遮蔽領域と重なり合う領域の占める割合が予め定められた閾値以上の前記表示対象を音声によって報知する。例えば、前記閾値は３０パーセントである。なお、前記閾値は任意に設定される値であってよい。

例えば、報知処理部５３は、遮蔽検出部６６によって前記遮蔽領域が検出された場合に、前記表示対象各々の前記座標情報及び画像データに基づいて、前記表示対象各々が前記遮蔽領域と重なり合うか否かを判断する。また、報知処理部５３は、前記遮蔽領域と重なり合うと判断された前記表示対象について、前記遮蔽領域と重なり合う領域の占める割合が前記閾値以上であるか否かを判断する。そして、報知処理部５３は、前記遮蔽領域と重なり合う領域の占める割合が前記閾値以上であると判断された前記表示対象を、音声によって報知する。なお、報知処理部５３は、音声報知される前記表示対象が複数存在する場合には、当該表示対象各々を順次報知する。

例えば、画像処理装置１０では、前記表示対象各々に予め対応付けられた音声による報知内容を示す報知情報を含む読み上げデータが予め記憶部７に記憶されている。報知処理部５３は、前記表示対象を音声によって報知する場合に、前記読み上げデータに含まれている報知される前記表示対象に対応する前記報知情報を取得する。そして、報知処理部５３は、取得された前記報知情報を音声信号に変換した後、スピーカー６４に出力する。

例えば、報知処理部５３は、図４に示される画面Ｇ１０において図３及び図４に示される遮蔽領域Ｚ１が検出された場合に、表示対象Ｔ１１、表示対象Ｔ１２、表示対象Ｔ１４、及び表示対象Ｔ１６を遮蔽領域Ｚ１と重なり合う前記表示対象として特定する。また、報知処理部５３は、表示対象Ｔ１２、表示対象Ｔ１４、及び表示対象Ｔ１６を、遮蔽領域Ｚ１と重なり合う領域の占める割合が前記閾値以上である前記表示対象であると判断する。そして、報知処理部５３は、前記読み上げデータに含まれている表示対象Ｔ１２、表示対象Ｔ１４、及び表示対象Ｔ１６各々に対応する前記報知情報を取得して、取得された前記報知情報に基づく音声報知を行う。

図６に、前記読み上げデータの一例である読み上げデータＤ２０を示す。例えば、前記報知情報は、図６に示されるように、前記表示対象の種類、及び前記表示対象の画像データに含まれる文字情報を含む情報である（図４参照）。

なお、報知処理部５３は、前記遮蔽領域と重なり合う全ての前記表示対象を音声によって報知してもよい。

第２処理実行部５４は、表示部６２への前記タッチ操作とは異なる前記遮蔽領域と重なり合う前記操作アイコン各々を識別可能な識別操作に応じて、当該識別操作によって識別される前記操作アイコンに対応する処理を実行する。

例えば、第２処理実行部５４は、遮蔽検出部６６によって前記遮蔽領域が検出された場合に、前記識別操作に応じて当該識別操作によって識別される前記操作アイコンに対応する処理を実行する。なお、第２処理実行部５４は、遮蔽検出部６６によって前記遮蔽領域が検出されていない場合に、前記識別操作に応じて当該識別操作によって識別される前記操作アイコンに対応する処理を実行してもよい。

例えば、前記識別操作は、画像処理装置１０に対する音声入力による操作を含む。例えば、前記識別操作は、操作される前記操作アイコンの報知処理部５３による読み上げ終了時から予め定められた待機時間が経過するまでの間に、「ハイ」又は「イエス」のような予め定められた単語を音声入力することである。

なお、前記識別操作は、操作される前記操作アイコンに対応する前記文字情報の一部又は全部を音声入力することであってもよい。

また、前記識別操作は、予め定められた操作キーに対する操作であってもよい。例えば、前記識別操作は、操作される前記操作アイコンの報知処理部５３による読み上げ終了時から前記待機時間が経過するまでの間に、操作キー部６１の予め定められた操作キーを操作することであってもよい。また、前記識別操作は、操作される前記操作アイコンの報知処理部５３による読み上げ順序を示す番号のテンキーを操作することであってもよい。また、前記識別操作は、画像処理装置１０に対する音声入力による操作、及び予め定められた操作キーに対する操作の両方を含んでいてもよい。

ここで、報知処理部５３は、前記表示対象を音声によって報知すると共に、前記識別操作の方法を音声によって報知する。なお、報知処理部５３は、前記識別操作の方法を音声によって報知しなくてもよい。

なお、制御部５は、第１処理実行部５２、及び第２処理実行部５４を含んでいなくてもよい。

［報知処理］
以下、図７を参照しつつ、画像処理装置１０において制御部５により実行される報知処理の手順の一例について説明する。ここで、ステップＳ１１、Ｓ１２・・・は、制御部５により実行される処理手順（ステップ）の番号を表している。なお、前記報知処理は、制御部５により前記表示条件を充足したと判断された場合に実行される。

＜ステップＳ１１＞
まず、ステップＳ１１において、制御部５は、表示部６２に前記表示対象を表示させる。ここで、ステップＳ１１の処理は、制御部５の表示処理部５１により実行される。

具体的に、制御部５は、前記報知処理の実行直前に充足したと判断された前記表示条件に対応する前記画面データに基づいて、前記画面を表示部６２に表示させる。

＜ステップＳ１２＞
ステップＳ１２において、制御部５は、操作検出部６３によって、ステップＳ１１で表示された前記画面に含まれる前記操作アイコンに対する前記タッチ操作が行われたか否かを判断する。

具体的に、制御部５は、操作検出部６３によって表示部６２への前記タッチ操作が検出された場合に、前記画面データに含まれる前記種類情報及び前記座標情報に基づいて、検出された前記タッチ操作の位置に前記操作アイコンが存在するか否かを判断する。そして、制御部５は、検出された前記タッチ操作の位置に前記操作アイコンが存在すると判断した場合に、前記操作アイコンに対する前記タッチ操作が行われたと判断する。

ここで、制御部５は、前記操作アイコンに対する前記タッチ操作が行われたと判断すると（Ｓ１２のＹｅｓ側）、処理をステップＳ１２１に移行させる。また、前記操作アイコンに対する前記タッチ操作が行われていなければ（Ｓ１２のＮｏ側）、制御部５は、処理をステップＳ１３に移行させる。

＜ステップＳ１２１＞
ステップＳ１２１において、制御部５は、ステップＳ１２で前記タッチ操作が行われたと判断された前記操作アイコンに対応する処理を実行する。そして、制御部５は、前記報知処理を終了させる。ここで、ステップＳ１２及びステップＳ１２１の処理は、制御部５の第１処理実行部５２により実行される。なお、当該操作アイコンに対応する処理の実行に伴い表示部６２に前記表示対象を含む新たな画面が表示される場合、制御部５は、前記表示条件を充足したと判断して、当該新たな画面に対応する前記報知処理を実行する。一方、当該操作アイコンに対応する処理の実行に伴い表示部６２に前記表示対象を含まない新たな画面が表示される場合には、前記表示条件を充足しないため、前記報知処理は実行されない。

＜ステップＳ１３＞
ステップＳ１３において、制御部５は、遮蔽検出部６６によって前記遮蔽領域が検出されたか否かを判断する。

ここで、制御部５は、遮蔽検出部６６によって前記遮蔽領域が検出されたと判断すると（Ｓ１３のＹｅｓ側）、処理をステップＳ１４に移行させる。また、遮蔽検出部６６によって前記遮蔽領域が検出されていなければ（Ｓ１３のＮｏ側）、制御部５は、処理をステップＳ１２に移行させて、前記操作アイコンに対する前記タッチ操作の検出及び前記遮蔽領域の検出を待ち受ける。

＜ステップＳ１４＞
ステップＳ１４において、制御部５は、報知される前記表示対象を特定する対象特定処理を実行する。

例えば、前記対象特定処理では、前記表示対象各々の前記座標情報及び画像データに基づいて、前記表示対象各々がステップＳ１３で検出された前記遮蔽領域と重なり合うか否かが判断される。また、前記対象特定処理では、前記遮蔽領域と重なり合うと判断された前記表示対象について、前記遮蔽領域と重なり合う領域の占める割合が前記閾値以上であるか否かが判断される。そして、前記対象特定処理では、前記遮蔽領域と重なり合う領域の占める割合が前記閾値以上であると判断された前記表示対象が、報知される前記表示対象として特定される。

ここで、前記報知処理では、前記遮蔽領域と重なり合う領域の占める割合が前記閾値以上である前記表示対象についてのみ音声による報知が行われる。これにより、前記遮蔽物によって遮蔽されている領域が少ない前記表示対象についてまで音声報知が行われることを回避可能である。

＜ステップＳ１５＞
ステップＳ１５において、制御部５は、ステップＳ１４で実行された前記対象特定処理によって報知される前記表示対象が特定されたか否かを判断する。

ここで、制御部５は、前記対象特定処理によって報知される前記表示対象が特定されたと判断すると（Ｓ１５のＹｅｓ側）、処理をステップＳ１６に移行させる。また、前記対象特定処理によって報知される前記表示対象が特定されていなければ（Ｓ１５のＮｏ側）、制御部５は、処理をステップＳ１２に移行させる。

＜ステップＳ１６＞
ステップＳ１６において、制御部５は、ステップＳ１４で実行された前記対象特定処理において報知される前記表示対象として特定された一つの前記表示対象を報知する。ここで、ステップＳ１４〜ステップＳ１６の処理は、制御部５の報知処理部５３により実行される。

例えば、制御部５は、前記読み上げデータに含まれている報知される前記表示対象に対応する前記報知情報を取得する。そして、制御部５は、取得された前記報知情報を音声信号に変換した後、スピーカー６４に出力する。

なお、制御部５は、最初の前記表示対象の報知の前に、前記識別操作の方法を報知してもよい。これにより、ユーザーは前記識別操作の方法を認識することが可能である。

＜ステップＳ１７＞
ステップＳ１７において、制御部５は、前記識別操作が行われたか否かを判断する。

例えば、制御部５は、「ハイ」又は「イエス」のような予め定められた単語の音声入力がマイク６５によって検出された場合に、前記識別操作が行われたと判断する。

ここで、制御部５は、前記識別操作が行われたと判断すると（Ｓ１７のＹｅｓ側）、処理をステップＳ１２１に移行させる。この場合、ステップＳ１２１では、直前に報知された前記表示対象に対応する処理が実行される。ここで、ステップＳ１６の処理が実行された後のステップＳ１７及びステップＳ１２１の処理は、制御部５の第２処理実行部５４により実行される。また、前記識別操作が行われていなければ（Ｓ１７のＮｏ側）、制御部５は、処理をステップＳ１８に移行させる。

＜ステップＳ１８＞
ステップＳ１８において、制御部５は、前記待機時間が経過したか否かを判断する。

ここで、制御部５は、前記待機時間が経過したと判断すると（Ｓ１８のＹｅｓ側）、処理をステップＳ１９に移行させる。また、前記待機時間が経過していなければ（Ｓ１８のＮｏ側）、制御部５は、処理をステップＳ１７に移行させて、前記識別操作及び前記待機時間の経過を待ち受ける。

＜ステップＳ１９＞
ステップＳ１９において、制御部５は、ステップＳ１４で実行された前記対象特定処理において特定された全ての前記表示対象についてステップＳ１６の処理が実行されたか否かを判断する。

ここで、制御部５は、全ての前記表示対象についてステップＳ１６の処理が実行されたと判断すると（Ｓ１９のＹｅｓ側）、処理をステップＳ１２に移行させる。また、全ての前記表示対象についてステップＳ１６の処理が実行されていなければ（Ｓ１９のＮｏ側）、制御部５は、処理をステップＳ１６に移行させる。この場合、ステップＳ１６では、未だ報知が行われていない前記表示対象について報知が行われる。

このように、画像処理装置１０では、遮蔽検出部６６によって前記遮蔽領域が検出された場合に、当該遮蔽領域と一部又は全部が重なり合う前記表示対象が音声によって報知される。これにより、前記遮蔽領域外の表示内容の視認性を低下させることなく、前記遮蔽領域の表示内容をユーザーに認識させることが可能である。

また、画像処理装置１０では、前記タッチ操作とは異なる前記識別操作に応じて、当該識別操作によって識別される前記操作アイコンに対応する処理が実行される。これにより、ユーザーは、前記遮蔽物を除去することなく、前記遮蔽領域と重なり合う前記操作アイコンを操作することが可能である。

１ＡＤＦ
２画像読取部
３画像形成部
４給紙部
５制御部
６操作表示部
７記憶部
１０画像処理装置
５１表示処理部
５２第１処理実行部
５３報知処理部
５４第２処理実行部
６１操作キー部
６２表示部
６３操作検出部
６４スピーカー
６５マイク
６６遮蔽検出部

Claims

表示部と、
予め定められた処理に対応付けられた操作アイコンを含む複数の表示対象を前記表示部に表示させる表示処理部と、
前記表示部における遮蔽物によって覆われた遮蔽領域を検出可能な検出部と、
前記検出部によって検出される前記遮蔽領域と一部又は全部が重なり合う前記表示対象を音声によって報知可能な報知処理部と、
前記操作アイコンへのタッチ操作に応じて、当該タッチ操作が行われた前記操作アイコンに対応する処理を実行する第１処理実行部と、
前記表示部へのタッチ操作とは異なる前記遮蔽領域と重なり合う前記操作アイコン各々を識別可能な識別操作に応じて、当該識別操作によって識別される前記操作アイコンに対応する処理を実行する第２処理実行部と、
を備え、
前記報知処理部は、音声報知される前記表示対象が複数存在する場合に、当該表示対象各々を順次報知し、
前記識別操作は、前記報知処理部による前記操作アイコンの報知終了時から予め定められた待機時間が経過するまでに行われる操作であって、
前記第２処理実行部は、前記報知処理部による前記操作アイコンの報知終了時から前記待機時間が経過するまでに前記識別操作が行われた場合に、当該操作アイコンに対応する処理を実行し、
前記報知処理部は、報知対象が前記操作アイコンである場合は当該報知対象の報知時から前記待機時間が経過するまでに前記識別操作が行われない場合に次の報知対象を報知し、報知対象が前記操作アイコンではない場合は当該報知対象の報知時から前記待機時間が経過するのを待たずに次の報知対象を報知する表示装置。
前記識別操作は、前記表示装置に対する音声入力による操作を含む、
請求項１に記載の表示装置。
前記識別操作は、予め定められた操作キーに対する操作である、
請求項１に記載の表示装置。
前記報知処理部は、前記識別操作の方法を音声によって報知する、
請求項１〜３のいずれかに記載の表示装置。
前記報知処理部は、前記遮蔽領域と重なり合う領域の占める割合が予め定められた閾値以上の前記表示対象を音声によって報知する、
請求項１〜４のいずれかに記載の表示装置。
請求項１〜５のいずれかに記載の表示装置と、
原稿の画像データを読取可能な画像読取部、及び画像データに基づく画像を形成可能な画像形成部のいずれか一方又は両方と、
を備える画像処理装置。
表示部と、前記表示部における遮蔽物によって覆われた遮蔽領域を検出可能な検出部と、を備える表示装置で実行される処理実行方法であって、
予め定められた処理に対応付けられた操作アイコンを含む複数の表示対象を前記表示部に表示させることと、
前記検出部によって検出される前記遮蔽領域と一部又は全部が重なり合う前記表示対象を音声によって報知することと、
前記操作アイコンへのタッチ操作に応じて、当該タッチ操作が行われた前記操作アイコンに対応する処理を実行することと、
前記表示部へのタッチ操作とは異なる前記遮蔽領域と重なり合う前記操作アイコン各々を識別可能な識別操作に応じて、当該識別操作によって識別される前記操作アイコンに対応する処理を実行することと、
を含み、
音声報知される前記表示対象が複数存在する場合に、当該表示対象各々が順次報知され、
前記識別操作は、前記操作アイコンの報知終了時から予め定められた待機時間が経過するまでに行われる操作であって、
前記操作アイコンの報知終了時から前記待機時間が経過するまでに前記識別操作が行われた場合に、当該操作アイコンに対応する処理が実行され、
報知対象が前記操作アイコンである場合は当該報知対象の報知時から前記待機時間が経過するまでに前記識別操作が行われない場合に次の報知対象が報知され、報知対象が前記操作アイコンではない場合は当該報知対象の報知時から前記待機時間が経過するのを待たずに次の報知対象が報知される処理実行方法。
前記識別操作は、前記表示装置に対する音声入力による操作及び予め定められた操作キーに対する操作のいずれか一方又は両方を含む、
請求項７に記載の処理実行方法。
表示部と、前記表示部における遮蔽物によって覆われた遮蔽領域を検出可能な検出部と、を備える表示装置で実行される処理実行プログラムであって、
予め定められた処理に対応付けられた操作アイコンを含む複数の表示対象を前記表示部に表示させる第１処理と、
前記検出部によって検出される前記遮蔽領域と一部又は全部が重なり合う前記表示対象を音声によって報知する第２処理と、
前記操作アイコンへのタッチ操作に応じて、当該タッチ操作が行われた前記操作アイコンに対応する処理を実行する第３処理と、
前記表示部へのタッチ操作とは異なる前記遮蔽領域と重なり合う前記操作アイコン各々を識別可能な識別操作に応じて、当該識別操作によって識別される前記操作アイコンに対応する処理を実行する第４処理と、
を含み、
前記第２処理では、音声報知される前記表示対象が複数存在する場合に、当該表示対象各々が順次報知され、
前記識別操作は、前記第２処理による前記操作アイコンの報知終了時から予め定められた待機時間が経過するまでに行われる操作であって、
前記第４処理では、前記第２処理による前記操作アイコンの報知終了時から前記待機時間が経過するまでに前記識別操作が行われた場合に、当該操作アイコンに対応する処理が実行され、
前記第２処理では、報知対象が前記操作アイコンである場合は当該報知対象の報知時から前記待機時間が経過するまでに前記識別操作が行われない場合に次の報知対象が報知され、報知対象が前記操作アイコンではない場合は当該報知対象の報知時から前記待機時間が経過するのを待たずに次の報知対象が報知される処理実行プログラム。
前記識別操作は、前記表示装置に対する音声入力による操作及び予め定められた操作キーに対する操作のいずれか一方又は両方を含む、
請求項９に記載の処理実行プログラム。