JP2006186714A - 画像表示装置及び携帯電話機 - Google Patents

Abstract

【課題】高齢者や視力の弱い人など視力の低下したユーザーが新聞等の紙面を装置の移動なしに広範囲に効率よく拡大表示することができる画像表示装置を提供する。
【解決手段】画像表示装置は、撮影手段であるカメラ２と、カメラ２による撮影画像を表示する表示手段である表示パネル３と、カメラ２により撮影された撮影画像を拡大表示するための拡大処理モジュール６１と、文字等の並びやサイズを認識する画像認識モジュール６２とを備えている。そして拡大処理モジュール６１は、画像認識モジュール６２により認識した文字等の並びに基づいて、文字等に沿って拡大対象領域を移動しながら拡大表示する。このときに、画像認識モジュール６２により認識した文字等のサイズに応じて拡大倍率を変更することができる。
【選択図】図２

Description

本発明は、画像表示装置及び携帯電話機、より詳細には、撮影画像を表示デバイスに表示し、更に撮影画像を拡大する拡大表示機能を備えている画像表示装置及び該装置を備えた携帯電話機に関するものである。

高齢者や視力の弱い人などがそれを補う道具として拡大鏡がある。この拡大鏡は光学レンズを利用しており、ある決まった倍率で対象物を拡大して表示する。最近では、携帯電話機などが備えるデジタルカメラ機能の高機能化に伴い、そのカメラ機能の表示手段に拡大機能が付加されており、拡大鏡と同等の機能を提供している。特許文献１で提案されている平板型デジタル拡大鏡も同様で、ユーザーが事前に、もしくはキー操作で拡大倍率を所望の倍率に設定し、対象物を拡大して表示する。また、特許文献１では撮影画像を文字認識でテキストデータに変換して表示する機能も提案されている。
特開２００１−３５９０８８号公報

しかしながら、従来の拡大鏡を用いて拡大表示する場合、特に拡大倍率が大きい場合は装置を少し移動させただけでも撮影画像が大きく移動してしまい、見ようと思っていた対象物が表示領域から簡単に外れてしまう。すなわち、新聞の記事などの細かい文字を文章に沿って移動しながら拡大表示する場合、対象文字が表示領域から外れないように細心の注意を払って装置の移動を行わなければならない。そのため、ユーザーは装置移動に気を取られて、文章を読むという本来の目的から逸脱してしまうという問題がある。また、文章中に大小異なるサイズの文字が混在している場合に文字サイズが変わる毎に拡大鏡を近づけたり遠ざけたりするか、拡大倍率を変更するか、しなければならないという問題がある。また、撮影画像を文字認識によりテキストデータに変換して表示する場合、高い演算能力を持つプロセッサ及びフォント等を格納する大容量メモリが必要になるという問題がある。

本発明は、上述のごとき実情に鑑みてなされたものであり、デジタルカメラ機能を使用した撮影画像を拡大表示する際に、その撮影画像内の所望領域を装置の移動なしに隈無く拡大表示し、それを簡素なシステムで実現した画像表示装置と、該画像表示装置を備えた携帯電話機とを提供することを目的とするものである。

このような課題を解決するために、第１の技術手段は、対象物を撮影する撮影手段と、撮影手段により撮影された撮影画像を表示する表示手段とを備えた画像表示装置であって、撮影手段により撮影された撮影画像の任意部分を拡大表示するための拡大処理手段を備え、拡大処理手段は、撮影画像内で拡大対象領域を移動させながら拡大表示することを特徴としたものである。

第２の技術手段は、第１の技術手段において、撮影手段により撮影された撮影画像内の文字等の並びを認識する画像認識手段を備え、拡大処理手段は、認識された文字等の並びに沿って拡大対象領域を移動させながら拡大表示することを特徴としたものである。

第３の技術手段は、第２の技術手段において、上記画像認識手段が、撮影手段により撮影された撮影画像内の情報を含まない領域を認識する機能を有し、拡大処理手段は、認識された文字等の並びに沿って拡大対象領域を移動させながら、情報を含まない領域をスキップして拡大表示することを特徴としたものである。

第４の技術手段は、第２の技術手段において、上記画像認識手段が、撮影手段により撮影された撮影画像内の文字等のサイズを認識する機能を有し、拡大処理手段は、認識された文字等の並びに沿って拡大対象領域を移動させながら、異なるサイズの文字等を拡大表示で所望の表示サイズになるように拡大倍率を変動させながら拡大表示することを特徴としたものである。

第５の技術手段は、第１ないし第４のいずれか１の技術手段において、装置利用者が拡大状況を確認できるように、撮影画像における拡大対象領域の位置、移動方向、スキップ状態、拡大倍率などを示唆する図形と拡大表示とを合わせて表示することを特徴としたものである。

第６の技術手段は、第１ないし第５のいずれか１の技術手段における画像表示装置を備えた携帯電話機である。

本発明によれば、デジタルカメラ機能を使用した撮影画像を拡大表示する際に、その撮影画像内の所望領域を装置の移動なしに隈無く拡大表示し、それを簡素なシステムで実現した画像表示装置と、該画像表示装置を備えた携帯電話機とを提供することができる。
また本発明では、簡単な操作で、高齢者や視力の弱い人など視力の低下したユーザーに、見たい情報を拡大して提供することができる。また従来からある拡大鏡とは異なり、装置を移動しなくても効率よく拡大表示することができ、ユーザーの使い勝手が格段に向上する。

＜実施例１＞
図１は、本発明による画像表示装置の一実施例を示す模式図で、図１（Ａ）は画像表示装置の表側部分（表示パネル面）を示す図（虫眼鏡をモチーフにしている）、図１（Ｂ）は画像表示装置の裏側部分（カメラ面）を示す図である。図１において、１は画像表示装置の筐体、２は筐体１の裏側に配置されたカメラ、３は筐体１の表側に配置された表示パネル、４は入力装置となっている。本実施例ではその使用形態からカメラ２と表示パネル３が筐体１の表裏に配置されているが、カメラ２はファイバースコープのように筐体１と独立して動く形状をしていてもよい。

入力装置４はキーパッドやホイールボタンなどで構成される。また表示パネル３にタッチセンサが搭載されていて表示パネル３上で入力操作が行える場合、入力装置４は無くても構わない。また本実施例において、表示パネル３と入力装置４は同一面に配置されているが別の面に配置されていても構わない。また入力装置４はユーザーによる設定／操作が必要なければ無くても構わない。

図２は上記筐体１の内部の構成を説明するためのブロック図で、図１と共通する部分には同一の符号を付けている。図２において、５は不揮発メモリ、６はワンチップマイコン、６１はカメラ２で撮影した撮影画像を拡大処理後に表示パネル３に出力する拡大処理モジュール、６２はカメラ２で撮影した撮影画像を認識して撮影位置の移動を検知する画像認識モジュールとなっている。不揮発メモリ５はユーザーが設定した各種情報を保存するために使用する。各種情報は表示パネル３にメニューを表示し、入力装置４を使って対話的に設定する。情報を保存する必要がなければ不揮発メモリ５は無くても構わない。また本実施例ではワンチップマイコン６に拡大処理モジュール６１と画像認識モジュール６２が内蔵されているが、各モジュールはハードウェア実装でも、ソフトウェア実装でも、その両方でもよい。また、拡大処理モジュール６１と画像認識モジュール６２はワンチップマイコン６と別チップになっていてもよい。

次に図３ないし図７を参照して、本実施例の拡大処理モジュール６１および画像認識モジュール６２の動作例を説明する。
図３は、カメラ２で撮影した撮影画像の例を模式的に示す図で、図３（Ａ）は縦書文書の撮影画像の一例を示す図、図３（Ｂ）は横書き文書の撮影画像の一例を示す図である。
図３（Ａ）において、７は縦書き文章をカメラ２で撮影した撮影画像、７１は撮影画像７の右端に存在する文字列、７２は文字列７１の左隣に存在する文字列、７１’は文字列７１と文字列７２の間に存在する行間、７１１は文字列７１の上端に存在する文字、７１２は文字７１１の下隣に存在する文字、７１１’は文字７１１と文字７１２の間に存在する字間である。

また図３（Ｂ）において、８は横書き文章をカメラ２で撮影した撮影画像、８１は撮影画像８の上端に存在する文字列、８２は文字列８１の下隣に存在する文字列、８１’は文字列８１と文字列８２の間に存在する行間、８１１は文字列８１の左端に存在する文字、８１２は文字８１１の右隣に存在する文字、８１１’は文字８１１と文字８１２の間に存在する字間である。

ここで字間とは、文字と文字の間に位置する空間であり、空白で構成され、それ自身には情報を含まない空間を意味する。また特に、行と行の間に位置する字間を行間と呼ぶ。新聞等の紙面を観察すると縦書き、横書きに関わらず一般的に字間よりも行間の方が広い。つまり、新聞等の紙面をカメラ２で撮影し、その撮影画像を解析した結果、行間７１’のような縦長の空間が多く検出された時は撮影画像７に代表される縦書きであると認識することができ、行間８１’のような横長の空間が多く検出された時は撮影画像８に代表される横書きであると認識することができる。

撮影画像によっては各撮影画像７、８のどちらにも属さない（例えば、行間が斜めになっている）状態がありうるが、その場合、撮影位置を移動／回転するようにユーザーに注意を促すことで撮影画像が７または８に集約するように仕向ける。このようにして画像認識モジュール６２は行間を検出して横書きまたは縦書きを認識することができる。この方法は文字認識を行わずに行間認識で文字列の並びを認識している為、演算処理量は少なくて済む。

図４は縦書き時の拡大対象領域の移動順路と拡大表示例を説明するための図で、図中、７’は撮影画像７を拡大した拡大表示画像である。画像認識モジュール６２の認識結果を受けた拡大処理モジュール６１は縦書き時の文字７１１を拡大表示の開始位置として図４（Ｂ）のように拡大表示する。以後、拡大対象領域を文字列７１の下方向に移動しながら拡大表示を行う。そして図４（Ｃ）のように拡大対象領域が文字列７１の下端に到達した場合は、文字列７２の上端に瞬時に移動して引き続き拡大対象領域を下方向に移動しながら拡大表示を行う。こうして図４（Ａ）の矢印で示す順路で撮影画像７の左下端に到達するまで拡大対象領域を移動しながら隈無く拡大表示を行う。

図５は横書き時の拡大対象領域の移動順路と拡大表示例とを説明するための図で、図中、８’は撮影画像７を拡大した拡大表示画像である。横書きの場合は文字８１１を拡大表示の開始位置として図５（Ｂ）のように拡大表示する。以後、拡大対象領域を文字列８１の右方向に移動しながら拡大表示を行う。拡大対象領域が文字列８１の右端に到達した場合は、文字列８２の左端に瞬時に移動して引き続き拡大対象領域を右方向に移動しながら拡大表示を行う。こうして図５（Ａ）の矢印で示す順路で撮影画像８の右下端に到達するまで拡大対象領域を移動しながら隈無く拡大表示を行う。

上記の拡大表示の移動速度及び拡大倍率は入力装置４を使ってユーザーが事前に設定する。また、拡大対象領域の移動の停止／再開／巻戻し／早送りは入力装置４のキーパッドまたはホイールボタンを用いて制御できる。

図６は文字列に空白がある場合の拡大処理モジュール６１および画像認識モジュール６２の動作例を説明するための図である。図６（Ａ）において、９は縦書き文章をカメラ２で撮影した撮影画像、９１は撮影画像９の右端に存在する文字列、９２は文字列９１の左隣に存在する文字列、９２’は文字列９２の下端に位置する空間（空白）、９３は文字列９２の左隣に存在する文字列である。

実際の新聞等の文章では文字列９２のように文字列が段組の最下端に到達する途中で改行または終止する場合がある。このような場合、文字列９２の下端に位置する空間９２’は空白で構成され、情報が含まれていない。このような空間９２’を拡大表示しても情報を得ることが無い為、拡大対象領域から除外するのが望ましい。そこで、画像認識モジュール６２は文字等の並びを認識すると同時に拡大処理モジュール６１の拡大対象領域を監視し、領域内の情報の有無を認識し、空間９２’のような情報を含まない空間を検知した場合は拡大処理モジュール６１に通知する。

図６（Ｂ）は縦書きの文字列に空白が有る場合の拡大対象領域の移動順路を説明するための図である。拡大処理モジュール６１は図６（Ｂ）で示すように画像認識モジュール６２から通知された空間９２’をスキップまたは早送りする。これにより、文章をより短い時間で確認することができるようになる。

さらに画像表示装置では、文字等の並びを認識すると同時に拡大対象領域の文字サイズを認識して、拡大倍率を調整するようにしてもよい。
実際の新聞等の紙面は、記事の先頭に本文の内容が一目で分かるように見出し文が付けられていて、比較的大きなサイズの文字で書かれている。逆に、記事の本文中に挿入されている注釈文等は、本文の文字サイズよりも小さくなっていることがある。このように異なる文字サイズを持つ文章を隈無く拡大表示する場合、画像認識モジュール６２は文字等の並びを認識すると同時に拡大処理モジュール６１の拡大対象領域を監視し、領域内の文字サイズを認識し、拡大処理モジュール６１に通知する。拡大処理モジュール６１は通知された文字サイズから所望の表示サイズになるように拡大倍率を調整して拡大表示を行なう。これにより、対象文字を拡大し過ぎて表示範囲に収まらない、拡大が足りずに読み取りができない、といった問題を回避する事ができる。

新聞等の紙面で使われている文字はほぼ正方形になっている為、文字の幅および高さの両方を認識する必要はなく、幅または高さの一方を認識して他方に当てはめることができる。文字の幅または高さは文字列の幅または高さと同等であると考えられる為、左右（縦書き文章）または上下（横書き文章）に隣接する行間に挟まれた文字列の幅または高さを測定することで文字サイズを得ることができる。この方法は文字一つ一つを認識する場合に比べて認識精度が落ちるが、演算処理量が少ない為、簡素なシステムでも高速に認識を行うことができる。拡大表示における所望の表示サイズは入力装置４を使って事前に設定する。以上により、拡大倍率を手動で変更する必要なく、異なるサイズの文字を持つ文章を、より短い時間で確認することができるようになる。

＜実施例２＞
図７は、本発明の他の実施例に関わる画像表示装置における拡大処理モジュールの他の動作例を説明するための図である。本実施例においても、画像表示装置内部は、図３に示すごとくの構成を備えるものとする。ここでは、図３に示すような縦書き文書をカメラ２にて撮影した撮影画像を考える。図７において、７’’はカメラ２にて撮影した撮影画像（図３（Ａ）の撮影画像７に相当）を拡大した拡大表示画像、１０１は撮影画像７の縮小画像、１０２は縮小画像１０１に対する拡大対象領域の現在位置を示す図形、１０３は拡大対象領域の移動方向を示す図形、１０４は拡大倍率を示唆する図形である。

図７（Ａ）および図７（Ｂ）は、内容的にはそれぞれ図４（Ｂ）および図４（Ｃ）と変わらないが、図４（Ａ）および図４（Ｃ）の撮影画像７’に対して、撮影画像の縮小画像１０１と拡大状況を示唆する図形１０２〜１０４とがオーバーレイして追加された拡大表示画像７’’となっている。拡大状況を示唆する図形が拡大表示に重なって表示されることでユーザーは現在表示されている文字が文章全体のどの位置にあるか容易に把握できる。

また、行間移動では拡大表示の表示画像が大きく変動する。この変動により、ユーザーは文章の連続性に違和感を持つ。これに対して図７（Ｂ）のように図形１０３で事前に行間移動を示すことで、行間移動に伴う違和感を緩和することができる。各図形の形状／色、または表示ＯＮ／ＯＦＦなどは入力装置４を使ってユーザーが設定する。

本発明による画像表示装置の一実施例を示す模式図である。 筐体の内部の構成を説明するためのブロック図である。 カメラで撮影した撮影画像の例を模式的に示す図である。 縦書き時の拡大対象領域の移動順路と拡大表示例を説明するための図である。 横書き時の拡大対象領域の移動順路と拡大表示例とを説明するための図である。 文字列に空白がある場合の拡大処理モジュールおよび画像認識モジュールの動作例を説明するための図である。 本発明の他の実施例に関わる画像表示装置における拡大処理モジュールの他の動作例を説明するための図である。

符号の説明

１…画像表示装置の筐体、１ａ…筐体１の表側、１ｂ…筐体１の裏側、２…カメラ、３…表示パネル、４…入力装置（キーパッド、ホイール等）、５…不揮発メモリ、６…ワンチップマイコン、６１…拡大処理モジュール、６２…画像認識モジュール、７…縦書き文章を撮影した撮影画像、７’，７’’…撮影画像の拡大表示画像、７１，７２…撮影画像に存在する文字列、７１’…文字列間に存在する行間、７１１，７１２…文字、７１１’…文字間に存在する字間、８…横書き文章を撮影した撮影画像、８’…撮影画像の拡大表示画像、８１，８２…撮影画像に存在する文字列、８１’…文字列間に存在する行間、８１１，８１２…文字、８１１’…文字間に存在する字間、９…縦書き文章を撮影した撮影画像、９１，９２，９３…撮影画像に存在する文字列、９２’…文字列の下端に位置する空間（空白）、１０１…撮影画像７の縮小画像、１０２…縮小画像における拡大対象領域の現在位置を示す図形、１０３…拡大対象領域の移動方向を示す図形、１０４…拡大倍率を示唆する図形。

Claims (6)

1. 対象物を撮影する撮影手段と、撮影手段により撮影された撮影画像を表示する表示手段とを備えた画像表示装置であって、前記撮影手段により撮影された撮影画像の任意部分を拡大表示するための拡大処理手段を備え、該拡大処理手段は、撮影画像内で拡大対象領域を移動させながら拡大表示することを特徴とする画像表示装置。
2. 請求項１に記載の画像表示装置において、前記撮影手段により撮影された撮影画像内の文字の並びを認識する画像認識手段を備え、前記拡大処理手段は、認識された文字の並びに沿って拡大対象領域を移動させながら拡大表示することを特徴とする画像表示装置。
3. 請求項２に記載の画像表示装置において、前記画像認識手段は、前記撮影手段により撮影された撮影画像内の情報を含まない領域を認識する機能を有し、前記拡大処理手段は、認識された文字の並びに沿って拡大対象領域を移動させながら、情報を含まない領域をスキップして拡大表示することを特徴とする画像表示装置。
4. 請求項２に記載の画像表示装置において、前記画像認識手段は、前記撮影手段により撮影された撮影画像内の文字のサイズを認識する機能を有し、前記拡大処理手段は、認識された文字の並びに沿って拡大対象領域を移動させながら、異なるサイズの文字を拡大表示で所望の表示サイズになるように拡大倍率を変動させながら拡大表示することを特徴とする画像表示装置。
5. 請求項１ないし４のいずれか１に記載の画像表示装置において、装置利用者が拡大状況を確認できるように、撮影画像における拡大対象領域の位置、移動方向、スキップ状態、拡大倍率などを示唆する図形と拡大表示とを合わせて表示することを特徴とする画像表示装置。
6. 請求項１ないし５のいずれか１に記載の画像表示装置を備えた携帯電話機。

Images