JP2015225506A - Image processing device and program - Google Patents
Image processing device and program Download PDFInfo
- Publication number
- JP2015225506A JP2015225506A JP2014110045A JP2014110045A JP2015225506A JP 2015225506 A JP2015225506 A JP 2015225506A JP 2014110045 A JP2014110045 A JP 2014110045A JP 2014110045 A JP2014110045 A JP 2014110045A JP 2015225506 A JP2015225506 A JP 2015225506A
- Authority
- JP
- Japan
- Prior art keywords
- character string
- character
- moving image
- information
- stroke order
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は、動画像等の画像処理を行うための画像処理装置及びプログラムに関する。 The present invention relates to an image processing apparatus and a program for performing image processing such as moving images.
従来、文字の筆順を学習するなどの目的から、文字を筆順どおりに動画にて表示する文字練習システムが提案されている(例えば、特許文献1)。また、入力された文字を一文字ずつ筆順を示す動画像でスクリーンに表示するネットワークスクリーンシステムも提案されている(例えば、特許文献2)。 Conventionally, for the purpose of learning the stroke order of characters, a character practice system that displays characters in a moving image according to the stroke order has been proposed (for example, Patent Document 1). There has also been proposed a network screen system that displays input characters one by one on the screen as a moving image indicating the stroke order (for example, Patent Document 2).
ところで、失読症などのように、文字自体は脳に記憶されているにもかかわらず文字の読解が困難となる症例が存在することが知られている。文字の読解が困難な場合、通常、音声出力により文字情報を受け取って認識するという方法が採られる。しかし、例えば会議などのように口頭での説明を聞く必要がある場面においては、音声により文字情報を認識するという方法を採ると、口頭での説明を聞きながら資料の文字情報を音声により認識しなければならず、いずれかの情報を聞き漏らすおそれがある。また会議中に音声出力を行うと、会議の進行を妨げるおそれもある。 By the way, it is known that there are cases such as dyslexia that make it difficult to read the characters even though the characters themselves are stored in the brain. When it is difficult to read characters, a method of receiving and recognizing character information by voice output is usually adopted. However, in situations such as meetings where it is necessary to listen to verbal explanations, using the method of recognizing textual information by voice will recognize the textual information in the document while listening to the verbal explanation. There is a risk of missing any information. In addition, if audio is output during the conference, there is a risk that the conference will be hindered.
失読症の場合、文字を筆順どおり動画像にて表示すると、筆順に基づいてその文字を理解することができる場合がある。すなわち、筆順を示す動画像を見、その筆順どおりの文字を記憶していた場合には筆順から当該文字を想起することができるため、当該文字を理解することができるのである。そこで、会議における資料等について、文字を筆順どおりの動画像で表示することが考えられる。 In the case of dyslexia, when characters are displayed in a moving image according to the stroke order, the characters may be understood based on the stroke order. That is, when a moving image showing the stroke order is viewed and characters are stored in accordance with the stroke order, the characters can be recalled from the stroke order, so that the characters can be understood. Therefore, it is conceivable to display characters in a moving image according to a stroke order for materials in a meeting.
しかしながら、特許文献1及び2の従来技術はいずれも一文字ずつ入力を受け付け、入力された一文字につき筆順を示す動画像を表示するものである。これに対して会議等における資料は、通常は複数の文字を含む文章が記載されているものである。そうすると、特許文献1及び2の従来技術を適用すると、資料中の文章を構成する複数の文字を一文字ずつ入力して動画像を表示させなければならず、作業が煩雑であり、会議に集中することができなくなる。
However, the prior arts of
そこで本発明は、上記問題点を解決すべくなされたものであり、失読症などのユーザーが例えば会議中においても資料などに記載された文章を簡単に理解できるようにした画像処理装置及びプログラムを提供することを目的とするものである。 Accordingly, the present invention has been made to solve the above-described problems, and an image processing apparatus and a program that allow a user with dyslexia or the like to easily understand a sentence described in a document during a meeting, for example. It is intended to provide.
上記目的を達成するため、請求項1に係る発明は、画像処理装置であって、文書の文字領域に含まれる文字列を抽出する文字列抽出手段と、前記文字列に含まれる文字を先頭から順に抽出する文字抽出手段と、前記文字抽出手段により抽出された文字の筆順に関する筆順情報に基づき当該文字の筆順を示す動画像を生成する動画像生成手段と、前記動画像生成手段により生成される動画像に基づき、前記文字抽出手段による抽出順に従って一文字ずつ筆順を表示させるための文字列動画像を生成する文字列動画像生成手段と、を備えることを特徴とする構成である。
In order to achieve the above object, the invention according to
請求項2に係る発明は、請求項1に記載の画像処理装置において、前記文字列動画像に基づいて前記文字列に含まれる文字の筆順を一文字ずつ所定の表示手段に表示させる表示制御手段をさらに備えることを特徴とする構成である。 According to a second aspect of the present invention, in the image processing device according to the first aspect, the display control means for causing the predetermined display means to display the stroke order of the characters included in the character string one character at a time based on the character string moving image. It is the structure characterized by further providing.
請求項3に係る発明は、請求項2に記載の画像処理装置において、前記文字列抽出手段により抽出された文字列を解析することにより前記文字列の所定の位置に区切りを設ける区切り設定手段、をさらに備え、前記表示制御手段は、前記文字列動画像に基づいて筆順を一文字ずつ表示しているとき、前記区切り設定手段によって設定された区切り位置で再生動作を一時停止させることを特徴とする構成である。 According to a third aspect of the present invention, in the image processing device according to the second aspect, delimiter setting means for delimiting a predetermined position of the character string by analyzing the character string extracted by the character string extracting means, The display control means, when displaying the stroke order one character at a time based on the character string moving image, pauses the reproduction operation at the break position set by the break setting means. It is a configuration.
請求項4に係る発明は、請求項2又は3に記載の画像処理装置において、前記文字列動画像の再生に関する再生情報を取得する再生情報取得手段、をさらに備え、前記表示制御手段は、前記再生情報に基づいて筆順を一文字ずつ前記表示手段に表示させることを特徴とする構成である。
The invention according to
請求項5に係る発明は、請求項4に記載の画像処理装置において、前記再生情報には、文字種類ごとに再生速度が設定されており、前記表示制御手段は、前記文字列動画像に基づいて前記文字列に含まれる文字の筆順を一文字ずつ前記表示手段に表示させるとき、前記再生情報に設定された文字種類ごとの再生速度に基づいて再生速度を調整することを特徴とする構成である。 According to a fifth aspect of the present invention, in the image processing apparatus according to the fourth aspect, a reproduction speed is set for each character type in the reproduction information, and the display control means is based on the character string moving image. When the display unit displays the stroke order of the characters included in the character string one character at a time, the reproduction speed is adjusted based on the reproduction speed for each character type set in the reproduction information. .
請求項6に係る発明は、請求項4又は5に記載の画像処理装置において、ユーザーが操作入力可能な入力手段と、前記入力手段により入力される情報に基づいて前記再生情報を更新する更新手段と、をさらに備えることを特徴とする構成である。
The invention according to
請求項7に係る発明は、請求項1乃至5のいずれかに記載の画像処理装置において、ユーザーが操作入力可能な入力手段と、前記入力手段により入力される情報に基づいて前記筆順情報を更新する更新手段と、をさらに備えることを特徴とする構成である。 According to a seventh aspect of the present invention, in the image processing apparatus according to any one of the first to fifth aspects, the input means that allows a user to input an operation, and the stroke order information is updated based on information input by the input means. And updating means for further comprising.
請求項8に係る発明は、プログラムであって、コンピュータを、文書の文字領域に含まれる文字列を抽出する文字列抽出手段、前記文字列に含まれる文字を先頭から順に抽出する文字抽出手段、前記文字抽出手段により抽出された文字の筆順に関する筆順情報に基づき当該文字の筆順を示す動画像を生成する動画像生成手段、及び、前記動画像生成手段により生成される動画像に基づき、前記文字抽出手段による抽出順に従って一文字ずつ筆順を表示させるための文字列動画像を生成する文字列動画像生成手段、として機能させることを特徴とする構成である。
The invention according to
請求項9に係る発明は、請求項8に記載のプログラムにおいて、前記文字列動画像に基づいて前記文字列に含まれる文字の筆順を一文字ずつ所定の表示手段に表示させる表示制御手段としてさらに機能させることを特徴とする構成である。
The invention according to
請求項10に係る発明は、請求項9に記載のプログラムにおいて、前記文字列抽出手段により抽出された文字列を解析することにより前記文字列の所定の位置に区切りを設ける区切り設定手段、としてさらに機能させ、前記表示制御手段は、前記文字列動画像に基づいて筆順を一文字ずつ表示しているとき、前記区切り設定手段によって設定された区切り位置で再生動作を一時停止させることを特徴とする構成である。 According to a tenth aspect of the present invention, in the program according to the ninth aspect, as a delimiter setting unit that delimits a predetermined position of the character string by analyzing the character string extracted by the character string extracting unit. The display control means is configured to temporarily stop the reproduction operation at the delimiter position set by the delimiter setting means when displaying the stroke order character by character based on the character string moving image. It is.
請求項11に係る発明は、請求項9又は10に記載のプログラムにおいて、前記文字列動画像の再生に関する再生情報を取得する再生情報取得手段、としてさらに機能させ、前記表示制御手段は、前記再生情報に基づいて筆順を一文字ずつ前記表示手段に表示させることを特徴とする構成である。 According to an eleventh aspect of the present invention, in the program according to the ninth or tenth aspect, the program further functions as reproduction information acquisition means for acquiring reproduction information related to reproduction of the character string moving image, and the display control means The stroke order is displayed on the display unit character by character based on the information.
請求項12に係る発明は、請求項11に記載のプログラムにおいて、前記再生情報には、文字種類ごとに再生速度が設定されており、前記表示制御手段は、前記文字列動画像に基づいて前記文字列に含まれる文字の筆順を一文字ずつ前記表示手段に表示させるとき、前記再生情報に設定された文字種類ごとの再生速度に基づいて再生速度を調整することを特徴とする構成である。 According to a twelfth aspect of the present invention, in the program according to the eleventh aspect, a reproduction speed is set for each character type in the reproduction information, and the display control unit is configured to perform the display based on the character string moving image. When displaying the stroke order of the characters included in the character string one by one on the display means, the reproduction speed is adjusted based on the reproduction speed for each character type set in the reproduction information.
請求項13に係る発明は、請求項11又は12に記載のプログラムにおいて、所定の入力手段により入力される情報に基づいて前記再生情報を更新する更新手段、としてさらに機能させることを特徴とする構成である。 A thirteenth aspect of the present invention is the program according to the eleventh or twelfth aspect, wherein the program further functions as an update unit that updates the reproduction information based on information input by a predetermined input unit. It is.
請求項14に係る発明は、請求項8乃至13のいずれかに記載のプログラムにおいて、所定の入力手段により入力される情報に基づいて前記筆順情報を更新する更新手段、としてさらに機能させることを特徴とする構成である。
The invention according to
本発明によれば、文書に含まれる文字列の先頭から順に一文字ずつ筆順を表示させるための文字列動画像が生成される。そのため、文字列動画像を表示すれば、失読症などのユーザーが会議資料などに記載された文章を容易に理解することができるようになる。 According to the present invention, a character string moving image for displaying a stroke order one character at a time from the top of a character string included in a document is generated. Therefore, if a character string moving image is displayed, a user such as dyslexia can easily understand a sentence described in a conference material or the like.
以下、本発明に関する好ましい実施形態について図面を参照しつつ詳細に説明する。なお、以下に説明する実施形態において互いに共通する部材には同一符号を付しており、それらについての重複する説明は省略する。 Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the drawings. In addition, in embodiment described below, the same code | symbol is attached | subjected to the member which is mutually common, and the overlapping description about them is abbreviate | omitted.
(第1実施形態)
図1は、本発明の一実施形態に関する画像処理装置1の機能構成の一例を示すブロック図である。画像処理装置1は、例えば一般的なパーソナルコンピュータ(PC)やタブレット端末などによって構成される。この画像処理装置1は、CPU2と記憶部3と表示部4と操作部5とを備えている。CPU2は、画像処理装置1に予めインストールされた各種プログラムを実行するものである。記憶部3は、例えばハードディスクドライブなどによって構成される不揮発性の記憶手段であり、各種プログラムや情報などを記憶する。表示部4は、カラー液晶ディスプレイなどによって構成される表示手段である。操作部5は、例えばキーボードやマウス、キーパッド、タッチパッドなどによって構成され、ユーザーが操作入力可能な入力手段である。この画像処理装置1は、記憶部3に予めインストールされているプログラム20を実行することにより、文書データに含まれる文字列を抽出し、更にその文字列を構成する文字を一文字ずつ抽出して各文字の筆順を示す動画像を文字列の先頭から順に表示することができるように構成される。また記憶部3には、プログラム20のインストールに伴い、辞書情報21、筆順情報22及び再生情報23が予め記憶される。これらの情報21,22,23は、CPU2においてプログラム20が起動することに伴い、CPU2によって参照される情報である。
(First embodiment)
FIG. 1 is a block diagram illustrating an example of a functional configuration of an
CPU2は、プログラム20を実行することにより、文字列抽出部11、文字抽出部12、動画像生成部13、文字列動画像生成部14、表示制御部15、区切り設定部16及び更新部17として機能する。このプログラム20は、画像処理装置1において実行されることにより、文字列に含まれる個々の文字の筆順を示す動画像を一連の文字列の順番に従って順次表示させる文字列動画像を生成させるプログラムである。このプログラム20は、単独で機能するプログラムであってもよいし、他のドキュメント編集機能や表示機能を有するプログラムに組み込まれて動画像を生成する機能を追加するアドインソフトであってもよい。
By executing the
辞書情報21は、文法に基づく品詞情報を含むものであり、例えば名詞、形容詞、動詞、副詞、接続詞、助詞、助動詞などの品詞ごとに単語が登録された情報である。さらに、辞書情報21は、品詞情報に加えて単語の意味などの情報を含んでいてもよい。
The
筆順情報22は、文字ごとの筆順が登録された情報である。この筆順情報22には、漢字やひらがな、カタカナ、アルファベットなど、多数の文字について第一画から最終画までの各字画の始点、軌跡、終点が登録されている。初期設定における筆順情報22は、各文字について正確な筆順が予め登録されている。ただし、ユーザーが操作部5を介して文字を指定して筆順を入力したときには、その指定された文字の筆順をユーザーによって入力された筆順に更新することが可能である。
The
再生情報23は、文書データに含まれる文字列に基づいて生成された文字列動画像を再生して表示する際に参照される情報である。図2は、この再生情報23の一例を示す図である。例えば図2(a)に示す再生情報23は、再生速度情報23a、カラー情報23b、サイズ情報23c等により構成される。再生速度情報23aは、文字列動画像の再生速度を定義した情報であり、初期状態においては標準的な再生速度が予め設定されている。カラー情報23bは、文字列動画像の再生時に表示する色を定義した情報であり、初期状態においては例えば黒が設定されている。サイズ情報23cは、文字列動画像を再生する際に表示部4に表示する表示領域のサイズを定義した情報であり、初期状態においては標準的なサイズが予め設定されている。これら再生速度情報23a、カラー情報23b及びサイズ情報23cは、いずれもユーザーが操作部5を介して適宜変更することが可能である。図2(b)は、図2(a)とは異なる再生情報23の例を示している。図2(b)に示す再生情報23は、再生速度情報23aが、漢字やひらがな、アルファベットなどの文字種類ごとに登録されている。したがって、この再生情報23では、文字種類ごとに異なる再生速度を設定することが可能である。また文字列動画像を再生して表示する際には、文字列に含まれる句読点の位置など所定の区切り位置において文字列動画像の再生を一時的に停止させることが可能である。図2(b)に示す再生情報23は、そのような区切り位置での一時停止機能のオンオフが設定可能となっており、区切り設定情報23dに予めオンオフが登録される。
The
なお、本実施形態では、辞書情報21、筆順情報22及び再生情報23が画像処理装置1に設けられた記憶部3に記憶される場合を例示するが、本発明はこれに限られるものではなく、これらの情報21,22,23は画像処理装置1の外部のサーバーに記憶されていてもよく、或いはその他の記憶媒体に記憶されていてもよい。
In this embodiment, the case where the
CPU2は、ユーザーによるプログラム20の起動指示を検知すると、記憶部3からプログラム20を読み出して実行し、上述したように文字列抽出部11、文字抽出部12、動画像生成部13、文字列動画像生成部14、表示制御部15、区切り設定部16及び更新部17として機能する。
When the
文字列抽出部11は、ユーザーによって指定された文書データを取得し、その文書データから文字列を抽出して当該文字列を構成する文字を識別し、また、文字列の属性情報を取得して当該文字列の順番、すなわち文字列を読む順番を識別する処理部である。処理対象となる文書データは、テキストデータを含むものであってもよいし、テキストデータを含まず画像データのみからなるものであってもよい。例えば、ドキュメント編集機能を有するプログラムによって生成された文書データであれば、その文書データにテキストデータが含まれるため、文字列抽出部11は、文書データに含まれるテキストデータに基づいて文字列を抽出する。また文書データがスキャン機能などによって読み込まれたものであれば、文書データはテキストデータを含まない画像データとなる。この場合、文字列抽出部11は、OCR(optical character recognition)などの文字認識処理を行うことにより、画像データからテキストデータを検出する。文字列抽出部11は、文書データから一連のテキストデータを検出すると、それを文字列として抽出し、その文字列を構成する個々の文字を識別する。また文字列抽出部11は文字列の属性情報を取得することにより、例えば文字列が縦書きであるのか横書きであるのか等を識別し、文字列の先頭文字と、各文字の順番を把握する。例えば文書データにテキストデータが含まれる場合、文字列抽出部11は、そのテキストデータの属性情報に基づいて文字列の先頭文字を特定する。また文書データがテキストデータを含まない画像データであった場合、文字列抽出部11は、文字認識処理によって検出される文字領域の分布状態に基づき属性情報を生成し、その属性情報に基づいて文字列の先頭文字を特定する。したがって、文字列抽出部11の処理によって、文書データに含まれる一連の文字列が抽出されると共に、その文字列の先頭文字や文字の配列順序が特定され、更に文字列に含まれる各文字がコード化される。文字列抽出部11は、文書データから文字列を抽出すると、その文字列を文字抽出部12及び区切り設定部16に対して出力する。
The character
区切り設定部16は、文字列抽出部11によって抽出された文字列を解析し、文字列中の区切り位置を検出する処理部である。区切り設定部16は、例えば文字列中に句読点が含まれる場合、その句読点の位置に区切りを設定する。ただし、これに限らず、区切り設定部16は、辞書情報21を参照して文字列を解析し、文字列に含まれる主語の直後の位置などを区切りとして検出し、その検出位置に区切りを設定するようにしても良い。区切り設定部16によって区切りが設定されると、文字列抽出部11によって抽出された文字列に区切り情報が付加される。この区切り情報は、文字列中のどの文字に区切りがあるかを示す情報である。
The
また区切り設定部16は、文字列を解析し、文字列に含まれる個々の文字の文字種類を判別し、文字列に対して個々の文字の文字種類を示す文字種類情報を付加する。ただし、文字列に含まれる全ての文字に対して文字種類情報を付加する必要はなく、例えば文字列の順に文字種類が変化する位置に次の文字の文字種類を示す文字種類情報を付加するようにしても良い。このように区切り設定部16は、文字種類判別手段としても機能する。そして区切り設定部16は、区切り情報及び文字種類情報を付加した文字列情報を文字列動画像生成部14に出力する。尚、文字種類判別手段は、区切り設定部16とは別に機能するものであってもよい。
The
一方、文字抽出部12は、文字列抽出部11により抽出された文字列を取得すると、その文字列を構成する文字を先頭から順に一文字ずつ抽出する。例えば、図3(a)に示すように抽出された文字列C1を、文字列の順番に従い、先頭から一文字ずつ抽出する。このとき、図3(b)に示すように文字列から順に抽出した個々の文字C1a〜C1kに対して、抽出順番を示す番号を付加してもよい。
On the other hand, when the
動画像生成部13は、文字抽出部12により一文字ずつ抽出される文字の筆順を示す動画像を生成する処理部である。文字抽出部12により文字列を構成する文字が一文字抽出されると、動画像生成部13は、筆順情報22を読み出してその文字に対応する筆順を抽出し、その筆順に基づいて当該文字の筆順を示す動画像を生成する。例えば、動画像生成部13は、筆順情報22に登録されている一画目の始点位置を特定し、その始点位置から登録されている軌跡に沿って終点位置までを描画する動画を生成する。一画目の描画が終了すると、二画目以降についても同様の処理を行うことにより、最終画までの描画を行う動画を生成する。そして最後には動画像生成対象となった文字の描画が完了し、当該文字の全体像が表示される動画像が生成される。ただし、動画像の生成態様には幾つかの態様があり、白紙状態の描画領域に対して一画ずつ追加描画していくことにより上記のように最終的に文字の全体像が表示される態様の動画像を生成しても良いし、また一画の描画が終了する度にその描画線を消去してから次の描画線を白紙状態の描画領域に描いていく態様の動画像を生成しても良い。前者の態様の場合には、現在描画中の線画を既に描画が終了した線画とは異なる表示態様(例えば太線表示やハイライト表示)とし、筆順をよりわかりやすくした動画像を生成してもよい。
The moving
また動画像生成部13は、文字抽出部12により抽出された文字の筆順を示す動画像を生成する際、予め指定されたフォント(書体)で一画ずつ描画を行っていく動画像を生成する。例えば、上述した筆順情報22には、1つの文字について複数のフォントの筆順(一画ごとの始点、軌跡、終点など)が登録されており、動画像生成部13は、動画像生成対象文字の筆順を筆順情報22から抽出するとき、複数のフォントの中から予め指定されたフォントの筆順を抽出し、そのフォントの筆順に基づいて動画像を生成する。ユーザーは、複数のフォントのうちから動画像生成時に用いるフォントを予め指定しておくことにより、自身にとって理解し易いフォントで動画像が生成されるようにカスタマイズしておくことができる。
Further, when generating a moving image indicating the stroke order of the characters extracted by the
動画像生成部13は、上記のような動作を文字抽出部12によって文字が1つ抽出される度に繰り返し行うことにより、文字列に含まれる1つ1つの文字について筆順を示す動画像を生成する。
The moving
文字列動画像生成部14は、動画像生成部13により生成される1つ1つの文字の動画像に基づき、文字抽出部12による文字の抽出順序に従って一文字ずつ筆順を表示させるための文字列動画像を生成する処理部である。この文字列動画像生成部14は、文字列に含まれる1つ1つの動画像を文字列の順番に従って組み合わせることにより、その文字列に含まれる全ての文字の筆順を先頭文字から順に一文字ずつ表示させることが可能な一連の動画像として文字列動画像を生成する。このとき、文字列動画像生成部14は、区切り設定部16から出力される文字列情報に付加された区切り情報に基づき、一連の動画像として生成される文字列動画像に対して区切り情報を付加する。このような区切り情報は、例えば区切り設定部16によって区切りが設定された文字に対応する筆順を示す動画像の最後のフレームに付加される。これにより、例えば文字列に句読点が含まれていれば、文字列動画像においてその句読点の動画像の最終フレームの位置に区切り情報を付加することができる。また文字列動画像生成部14は、区切り設定部16から出力される文字列情報に付加された文字種類情報に基づき、一連の動画像として生成される文字列動画像に対して文字種類情報を付加する。このような文字種類情報は、例えば区切り設定部16によってそれ以前とは文字種類が異なる文字に対応する筆順を示す動画像の最初のフレームに付加される。これにより、例えば文字列に漢字が含まれていれば、その漢字の筆順を示す動画像の表示開始タイミングを特定することができるようになる。
The character string moving
このように文字列動画像生成部14は、文字列抽出部11によって抽出される文字列ごとに文字列動画像を生成する。そのため、文字列抽出部11によって文書データから複数の文字列が抽出された場合、文字列動画像生成部14は、それら複数の文字列のそれぞれにつき、一連の文字列動画像を生成する。そのような場合、文字列動画像生成部14によって生成される複数の文字列動画像が文書データに含まれるどの部分の文字列に対応する動画像であるかを特定できるようにしておくことが好ましい。そのため、文字列動画像生成部14は、文字列動画像を生成すると、その文字列動画像が文書データのどの部分の文字列に対応するものであるかを示す付属情報を生成し、その付属情報を文字列動画像に付加しておくことが好ましい。そして文字列動画像生成部14は、文字列動画像を生成すると、その文字列動画像を元の文書データと関連付けて記憶部3に保存する。
As described above, the character string moving
尚、会議資料の場合には、上述した文字列抽出部11、区切り設定部16、文字抽出部12、動画像生成部13及び文字列動画像生成部14を会議の前に機能させて会議資料に含まれる文字列の文字列動画像を予め生成しておくことにより、会議開始時には、予め生成した文字列動画像を読み出して速やかに動画再生を行うことができるため、効率的である。
In the case of meeting materials, the above-described character
次に表示制御部15は、ユーザーによる文字列動画像の再生指示に基づき、ユーザーによって指定された文字列の文字列動画像を読み出して再生し、文字列に含まれる文字の筆順を文字列の先頭から順に一文字ずつ表示部4に表示させる処理部である。このとき、表示制御部15は、再生情報23を読み出し、その再生情報23に基づいて文字列動画像を表示するときの再生速度、表示色、表示サイズなどを設定し、文字列に含まれる文字の筆順を一文字ずつ表示する。これにより、文字列の先頭から順に一文字ずつ筆順が動画像にて表示されるため、例えば失読症のユーザーに対し、文字列を構成する各文字を先頭から順に一文字ずつ読ませることができる。それ故、会議中等においても、失読症のユーザーは、他のユーザーによる口頭での発表や説明の内容と共に、資料に記載された内容も理解することが可能となる。
Next, the
例えば再生情報23において図2(b)に示すように文字種類ごとに再生速度が設定されている場合、表示制御部15は、文字列動画像に付加されている文字種類情報に基づき、文字種類ごとに再生速度を変更しながら筆順を示す動画像を表示する。したがって、ユーザーは、文字種類ごとに予め自身が理解しやすい再生速度を再生情報23に登録しておくことにより、会議中は資料に記載された内容をスムーズに理解することができるようになる。
For example, in the
また再生情報23における区切り設定情報23dがオンに設定されている場合、表示制御部15は、文字列動画像に付加されている区切り情報に基づき、文字列動画像の再生を一時停止させる。例えば文字列動画像の再生中に表示部4に出力したフレームに区切り情報が付加されていれば、表示制御部15は、そのタイミングで文字列動画像の再生を自動的に一時停止させ、その後所定時間が経過することにより、次のフレームからの再生を再開する。これにより、文字列動画像を見る者が、文字列に区切りがあることを認識することができるため、区切りごとに意味を理解することが可能となる。尚、一時停止させる際の停止時間をユーザーが適宜調整できるようにしても良い。
When the
一方、更新部17は、筆順情報22や再生情報23をユーザーによって入力される情報に基づいて更新する処理部である。例えば、表示制御部15が文字列動画像を表示しているとき、ユーザーによって理解不能であることを示す入力操作が行われると、表示制御部15は、その入力操作に基づいて更新フラグをセットすると共に、現在筆順を表示中である文字を特定しておく。更新部17は、表示制御部15による文字列動画像の表示終了後に更新フラグがセットされていれば機能し、ユーザーによる更新操作を受け付けて筆順情報22や再生情報23を更新する処理を行う。特に筆順情報22を更新するときには、表示制御部15によって文字列動画像の再生中に特定された文字の筆順をユーザーによって入力される筆順に変更し、筆順情報22を更新する。すなわち、更新部17は、表示部4に対して筆順情報22や再生情報23を更新するための更新画面を表示し、ユーザーが操作部5に対して入力する情報に基づき、筆順情報22や再生情報23を更新する。
On the other hand, the
例えば文字列動画像の再生速度が速すぎて文字を理解することができなかった場合、ユーザーは、再生情報23に登録されている再生速度情報23aを変更して再生速度を遅くすることができる。このとき、ユーザーは、文字種類ごとに再生速度を変更することができる。また文字を理解することはできたが、再生速度が遅すぎて会議の進行についていけないようなときには、再生速度を速くすることもできる。また文字列動画像によって筆順が表示されるときの色が判りにくかった場合、ユーザーは、再生情報23に登録されているカラー情報23bを変更して別の色で再生表示が行われるように設定変更することができる。さらに文字列動画像の表示サイズが小さすぎて文字を理解することができなかった場合、ユーザーは、再生情報23に登録されているサイズ情報23cを変更して表示サイズを大きくすることができる。更新部17は、上記のようなユーザーの変更操作に基づいて再生情報23を更新することにより、ユーザーにとって文字が理解し易くなる態様で文字列動画像の再生が行われるように再生情報23をカスタマイズする。これにより、ユーザーは文字列動画像を理解し易い態様で再生させることが可能となり、文字列の内容をより確実に理解することが可能となる。
For example, when the reproduction speed of the character string moving image is too fast to understand the character, the user can change the
またユーザーにとっては、文字列動画像の再生速度や表示色、表示サイズが原因で文字を理解しにくいのではなく、表示される筆順そのものが理解できずに文字を認識することができないケースもある。例えば失読症のユーザーがある文字の筆順を誤って記憶している場合、文字列動画像として表示される正しい筆順ではその文字を認識することができない。このような場合、ユーザーは、操作部5を操作することにより、筆順情報22に登録されている筆順を自身が記憶している筆順に変更することができる。すなわち、更新部17は、特定の文字についてユーザーによる筆順入力が行われた場合、筆順情報22に登録されている特定の文字の筆順をユーザーによって入力された筆順に変更し、筆順情報22を更新する。筆順情報22が更新されると、動画像生成部13は更新された筆順情報22に基づいて筆順を示す動画像を生成するため、ユーザーは自身の記憶する筆順により文字列動画像を表示させることが可能となり、文字列の内容をより確実に理解することが可能となる。
In addition, it is not easy for users to understand characters due to the playback speed, display color, and display size of character string moving images, and there are cases in which characters cannot be recognized without understanding the displayed stroke order itself. . For example, when a user with dyslexia incorrectly stores the stroke order of a character, the character cannot be recognized with the correct stroke order displayed as a character string moving image. In such a case, the user can change the stroke order registered in the
次に表示制御部15によって表示部4に表示される画面例について説明する。図4は、表示部4に表示される画面構成の一例を示す図である。図4(a)は、文字列動画像が生成される前の文書を表示部4に表示した第1の文書表示画面D1を示している。第1の文書表示画面D1は、例えば文書データをそのまま表示部4に表示したものである。図4(a)の例に示す文書には、文字列領域R1乃至R7と、図形領域R8とを有する。この状態でユーザーがプログラム20の実行を指示し、表示部4に表示されている文書データを処理対象として上述した文字列抽出部11、文字抽出部12、動画像生成部13及び文字列動画像生成部14が機能すると、文字列領域R1乃至R7のそれぞれから文字列が抽出され、各文字列から文字列動画像が生成される。そして文字列領域R1乃至R7のそれぞれに対応する文字列動画像が、表示部4に表示されている文書データに関連付けて保存される。上述したように文書データに関連付けられる文字列動画像には付属情報が付加されており、その付属情報によって個々の文字列動画像が文字列領域R1乃至R7のいずれに対応するかを特定することが可能である。
Next, an example of a screen displayed on the
文書データに文字列動画像が関連付けて保存されると、表示制御部15は、表示部4の表示画面を、図4(a)に示す第1の文書表示画面D1から図4(b)に示す第2の文書表示画面D2に更新する。この第2の文書表示画面D2では、文字列領域R1乃至R7の近傍位置に、それぞれに対応する文字列動画像の再生を開始するためのボタンB1乃至B7が表示される。文字列領域R1乃至R7のそれぞれの近傍位置に再生用のボタンB1乃至B7が表示されることにより、ユーザーは、文字列動画像の生成が完了したことを把握することができる。そしてユーザーによってボタンB1乃至B7のいずれかが操作されると、表示制御部15は、その操作されたボタンの文字列領域に対応する文字列動画像を読み出し、その読み出した文字列動画像の再生表示を開始する。このとき、表示制御部15は、例えば文字列動画像を表示するためのポップアップ画面を表示させ、そのポップアップ画面に文字列動画像を表示する。このポップアップ画面の表示サイズは、再生情報23に予め登録された表示サイズである。ただし、文字列動画像の表示態様は、ポップアップ画面によるものでなくても良く、他の表示態様で文字列動画像を表示しても良い。例えば、ユーザーによって文字列領域R2に対応するボタンB2が操作されると、表示制御部15は、文字列領域R2に含まれる文字列「午前」に対応する文字列動画像を読み出して再生することにより、はじめに「午」の文字の筆順を示す動画像を表示し、次に「前」の文字の筆順を示す動画像を表示する。
When the character string moving image is stored in association with the document data, the
図5は、筆順を示す動画像の表示態様の一例を示す図であり、「午」の文字の筆順を表示する場合を例示している。表示制御部15が文字列動画像を再生して表示することにより、表示部4には図5(a)、(b)、(c)、(d)の順で「午」の文字に対応する筆順が表示される。すなわち、表示部4には、第1画L1、第2画L2、第3画L3、第4画L4の順で筆順が表示される。なお、筆順をよりユーザーが理解し易くするため、第1画L1乃至第4画L4のそれぞれに対して筆の移動方向を示す矢印f1乃至f4の画像を表示してもよい。ただし、このような矢印f1乃至f4の画像を表示するためには、文字列動画像に矢印f1乃至f4の画像が含まれている必要があるため、動画像生成部13が文字ごとの動画像を生成するときに予め矢印f1乃至f4を含む動画像を予め生成しておくことが必要となる。図5に示すような筆順が表示部4に表示されることにより、ユーザーは、「午」の文字の筆順を認識することによって「午」の文字そのものを理解することができるようになる。
FIG. 5 is a diagram illustrating an example of a moving image display mode indicating the stroke order, and illustrates a case where the stroke order of the characters “noon” is displayed. When the
図6は、文字列動画像を表示するポップアップ画面の表示例を示す図である。まず図6(a)は、第1の表示例を示しており、例えば文字列領域R2の文字列に対応する文字列動画像を表示する際にはその文字列領域R2をポップアップ画面が隠してしまわないように、文字列領域R2とは異なる位置に文字列動画像表示領域R10を設定し、その文字列動画像表示領域R10にポップアップ画面を表示して文字列動画像を表示する。このとき、表示制御部15は、文字列動画像表示領域R10のポップアップ画面に表示される文字列動画像が文字列領域R2に含まれる文字列に対応するものであることを示す表示態様で表示する。図6(a)の例においては、文字列動画像表示領域R10のポップアップ画面を、文字列領域R2を起点とする吹き出し状の表示態様で表示することにより、文字列動画像表示領域R10のポップアップ画面に表示される文字列動画像が文字列領域R2の文字列に対応することを示している。
FIG. 6 is a diagram illustrating a display example of a pop-up screen that displays a character string moving image. First, FIG. 6A shows a first display example. For example, when displaying a character string moving image corresponding to a character string in the character string region R2, the pop-up screen hides the character string region R2. In order not to stutter, the character string moving image display region R10 is set at a position different from the character string region R2, and a pop-up screen is displayed in the character string moving image display region R10 to display the character string moving image. At this time, the
次に図6(b)は第2の表示例を示している。この第2の表示例では、上記第1の表示例と同様、ポップアップ画面を表示する文字列動画像表示領域R13が文字列領域R2を隠してしまわないように文字列領域R2とは異なる位置に表示する。ただし、第1の表示例とは異なり、文字列領域R2を起点とする吹き出し状の表示態様で文字列動画像表示領域R13が表示されるのではなく、独立した態様で文字列動画像表示領域R13が表示される。このような表示例においても、文字列動画像表示領域R10のポップアップ画面において表示される文字列動画像がどの文字列領域の文字列に対応するものであるかを容易に識別できるようにすることが望まれる。そのため、第2の表示例による表示を行うとき、表示制御部15は、例えば文字列領域R2の周囲を太線で表示したり、或いは、文字列領域R2をハイライト表示したりすることで他の領域とは異なる強調表示を行い、文字列動画像表示領域R13のポップアップ画面に表示される文字列動画像が文字列領域R2に含まれる文字列に対応するものであることを示す。
Next, FIG. 6B shows a second display example. In the second display example, as in the first display example, the character string moving image display area R13 displaying the pop-up screen is located at a position different from the character string area R2 so as not to hide the character string area R2. indicate. However, unlike the first display example, the character string moving image display region R13 is not displayed in a balloon-like display mode starting from the character string region R2, but in an independent manner. R13 is displayed. Even in such a display example, the character string moving image displayed on the pop-up screen of the character string moving image display region R10 can be easily identified to which character string region the character string corresponds. Is desired. Therefore, when performing display according to the second display example, the
このように文字列動画像を表示するポップアップ画面を表示するときには、そのポップアップ画面内で表示される文字列動画像が、文書中のどの文字列に対応するものであるかを明示することにより、ユーザーは、ポップアップ画面内で表示される文字列動画像が文書中のどの文字列に対応するものであるかを容易に把握することができるようになる。 When displaying a pop-up screen that displays a character string moving image in this way, by clearly indicating which character string in the document corresponds to the character string moving image displayed in the pop-up screen, The user can easily grasp which character string in the document the character string moving image displayed in the pop-up screen corresponds to.
次に更新部17が機能することによって表示部4に表示される更新画面について説明する。図7は、再生情報23を更新する再生情報更新画面G10の一例を示す図である。再生情報更新画面G10は、再生情報23のうち再生速度を調整する再生速度調整領域R20と、表示サイズを調整するサイズ調整領域R21と、区切りの設定をON又はOFFに設定する区切り設定領域R22と、確定ボタンB20と、再生情報更新処理終了ボタン(キャンセルボタン)B21と、筆順情報更新画面切り替えボタンB22とを備える構成である。再生速度調整領域R20は、再生速度調整ボタンB23と、音声案内再生ボタンB24とを備える。ユーザーは再生速度調整ボタンB23を操作することにより再生速度を所望の速度に調整可能である。またユーザーは音声案内再生ボタンB24を操作することにより、再生速度調整ボタンB23に対する操作で再生速度を調整可能であることを報知する音声が出力される。尚、再生速度の調整は、文字種類ごとに行えるようにすることが好ましい。サイズ調整領域R21は、サイズ調整ボタンB25と、音声案内再生ボタンB26とを備える。ユーザーはサイズ調整ボタンB25を操作することにより、文字列動画像が表示されるポップアップ画面のサイズを所望のサイズに調整可能である。またユーザーによって音声案内再生ボタンB26が操作されると、サイズ調整ボタンB25に対する操作でポップアップ画面のサイズを調整可能であることを報知する音声が出力される。区切り設定領域R22は、区切り設定ボタンB27と、音声案内再生ボタンB28とを備える。ユーザーが区切り設定ボタンB27を操作して区切り設定をオンに操作すると、文字列動画像が再生される際、所定の区切り位置において文字列動画像の再生が一時停止し、所定時間経過後に一時停止位置から再生が再開されるように設定される。またユーザーが区切り設定ボタンB27を操作して区切り設定をオフに操作すると、文字列動画像の再生中は、自動的に文字列動画像の一時停止が行われないように設定される。またユーザーが音声案内再生ボタンB28を操作すると、区切りをオンにすることにより文字列動画像を再生する際に所定の位置において時間間隔が挿入されることを報知する音声が出力される。またこの他にも、例えば文字列動画像を表示するときの表示色などを設定できるようにすることが好ましい。
Next, an update screen displayed on the
再生情報更新画面G10において、ユーザーは上記の例のように再生速度、表示サイズ、区切り設定などを調整して確定ボタンB20を操作すると、更新部17は、現在の設定値から設定変更された設定値を再生情報23に上書きして再生情報23を更新する。ユーザーが再生情報更新処理終了ボタンB21を操作すると、更新部17は再生情報更新画面G10の表示を消去して更新処理を終了する。また、ユーザーによって筆順情報更新画面切り替えボタンB22が操作されると、更新部17は再生情報更新画面G10を消去し、表示部4に表示する画面を、筆順情報更新画面G15に更新する。
In the reproduction information update screen G10, when the user operates the confirm button B20 by adjusting the reproduction speed, display size, separation setting, and the like as in the above example, the
図8は筆順情報更新画面G15の一例を示す図である。更新部17は、この筆順情報更新画面G15に対するユーザーの操作に基づき、筆順情報22を更新する。上述したように、初期状態の筆順情報22には各文字の正確な筆順が記憶されている。その正確な筆順を、更新部17はユーザーによって入力される筆順に書き換えて筆順情報を更新する。ところで、上述したように表示制御部15による文字列動画像の再生表示中にユーザーが理解できないと指定した文字は、表示制御部15によって既に特定されている。更新部17は、ユーザーによる操作に基づいて筆順情報更新画面G15を表示するとき、表示制御部15によって特定された文字の情報を取得し、その文字の筆順を手動操作で更新するための筆順情報更新画面G15を生成して表示する。
FIG. 8 is a diagram illustrating an example of the stroke order information update screen G15. The
例えば図8に示す筆順情報更新画面G15は、筆順入力指示領域R30と、筆順入力領域R31と確定ボタンB40とを備える構成である。筆順入力指示領域R30は、ユーザーが理解し難いと指定した文字の筆順を手動操作で入力することをユーザーに指示案内するための領域である。筆順入力領域R31に表示される文言は、例えばユーザーが理解し難いと指定した文字に関する情報を例えば辞書情報21から抽出することにより自動生成される。図8(a)の例では、「午前」の「午」の筆順を入力させるため、更新部17は「午」を含む成語や熟語等を辞書情報21を参照することにより取得することにより、「午」の筆順情報を入力させるための指示文言を生成する。なお、指示文言は動画像により表示されてもよく、或いは音声により出力されてもよい。ユーザーは、筆順入力指示領域R30に表示される指示文言に従い、例えば図8(a)に示すように白紙状態の筆順入力領域R31に対して自身が記憶する筆順で文字を入力する。このとき、ユーザーは、マウス操作で筆順を入力しても良いし、或いはキーパッドやタッチパッドなどに対して指先やペン先で筆順を入力しても良い。これにより更新部17は、ユーザーが理解し難いと指定した文字についてユーザーが記憶する筆順を取得することができ、筆順情報22を更新可能である。
For example, the stroke order information update screen G15 illustrated in FIG. 8 includes a stroke order input instruction area R30, a stroke order input area R31, and a confirmation button B40. The stroke order input instruction area R30 is an area for instructing and guiding the user to manually input the stroke order of characters designated as difficult to understand by the user. The wording displayed in the stroke order input area R31 is automatically generated by, for example, extracting from the
図8(b)は筆順情報更新画面G15の別の表示態様の一例である。この例では、ユーザーに自身が記憶している筆順を筆順入力領域R31に対して入力させるとき、筆順入力領域R31に、筆順入力対象である文字を表示している。このような表示態様によれば、ユーザーが文字の筆順を入力する際、文字をなぞりながら入力していくことができるため、筆順の入力操作が行い易くなり、操作性が向上する。 FIG. 8B is an example of another display mode of the stroke order information update screen G15. In this example, when the user inputs a stroke order stored by the user to the stroke order input area R31, a character that is a stroke order input target is displayed in the stroke order input area R31. According to such a display mode, when the user inputs the stroke order of characters, it is possible to input while tracing the characters. Therefore, the input operation of the stroke order is facilitated, and the operability is improved.
次に、画像処理装置1のCPU2において行われる処理手順について説明する。図9は、CPU2によって行われる主たる処理手順の一例を示すフローチャートである。この処理は、CPU2がプログラム20を実行することによって開始される。CPU2は、この処理を開始すると、まず文字列抽出部11が機能し、文字列動画像の生成対象となる画像データを取得する(ステップS1)。文字列抽出部11は、画像データを取得すると、その画像データから文字列を抽出する文字列抽出処理を行う(ステップS2)。文字列抽出処理(ステップS2)の具体的な処理手順については後ほど説明する。文字列が抽出されると、次に文字抽出部12が機能し、文字列抽出部11によって抽出された文字列に含まれる文字を一文字抽出する文字抽出処理が行われる(ステップS3)。文字抽出処理(ステップS3)の具体的な処理手順については後ほど説明する。文字列に含まれる文字が抽出されると、動画像生成部13は文字抽出部12によって抽出された文字の筆順を示す動画像を生成する動画像生成処理を行う(ステップS4)。動画像生成処理(ステップS4)の具体的な処理手順については後ほど説明する。動画像生成処理(ステップS4)が行われると、次に文字列に含まれる全ての文字について動画像が生成されたか否かを判断する(ステップS5)。全ての文字について動画像が生成済みでない場合(ステップS5においてNO)、文字抽出処理(ステップS3)に戻り、文字列に含まれる次の文字について動画像が生成される(ステップS4)。そして文字列に含まれる全ての文字について動画像が生成された場合(ステップS5においてYES)、次に文字列動画像生成部14が機能する。文字列動画像生成部14は、文字列に含まれる各文字について生成された動画像を文字列の順序に基づいて組み合わせることにより文字列動画像を生成する文字列動画像生成処理を行う(ステップS6)。文字列動画像生成処理(ステップS6)の具体的処理手順については後ほど説明する。文字列動画像が生成されると、次に表示制御部15が機能し、表示制御部15による動画像表示処理が行われる(ステップS7)。動画像表示処理(ステップS7)の具体的な処理手順については後ほど説明する。動画像表示処理(ステップS7)が行われると、次にCPU2は、更新フラグがセットされているか否かを判断する。更新フラグがある場合(ステップS8でYES)、CPU2は更新部17を機能させる。そして更新部17は更新処理を行う(ステップS9)。更新部17による更新処理が終了すると、CPU2による処理が全て終了する。
Next, a processing procedure performed in the
図10は、文字列抽出処理(図9のステップS2)の詳細な処理手順の一例を示すフローチャートである。文字列抽出部11は、この文字列抽出処理を開始すると、まず取得した画像データ中にテキストデータが含まれているか否かを判断する(ステップS15)。テキストデータが含まれている場合(ステップS15でYES)、文字列抽出部11は、そのテキストデータを文字列として抽出する(ステップS16)。また文字列抽出部11は、抽出したテキストデータに関する属性情報を画像データから抽出する(ステップS17)。この属性情報は、例えばテキストデータのプロパティ情報などから抽出され、文字列が縦書きか横書きかを示す情報や、文書中における文字列の配置位置に関する情報等を含んでいる。
FIG. 10 is a flowchart showing an example of a detailed processing procedure of the character string extraction processing (step S2 in FIG. 9). When starting the character string extraction process, the character
一方、取得した画像データ中にテキストデータが含まれていない場合(ステップS15でNO)、その画像データは例えばスキャン機能などによって読み込まれた画像データである。そのため、文字列抽出部11は、取得した画像データに対してOCRなどの文字認識処理を行うことにより、画像データに文字列領域が存在するか否かを判断する(ステップS18)文字列領域が存在される場合(ステップS18でYES)、文字列抽出部11は、文字認識処理によって検出されたテキストデータ化された文字列領域を抽出する(ステップS19)。そして抽出された文字列領域を解析し(ステップS20)、当該文字列領域の属性情報を生成する(ステップS21)。この属性情報は、例えば画像データ中における文字列領域の配置や位置などに基づいて生成され、ステップS17で取得される情報と同様の情報となる。尚、画像データに文字列領域が存在しない場合(ステップS18でNO)、そのまま文字列抽出処理を終了する。
On the other hand, when the acquired image data does not include text data (NO in step S15), the image data is image data read by a scan function, for example. For this reason, the character
次に文字列が抽出された場合(ステップS15でYES、又はステップS18でYESの場合)、文字列抽出部11は、例えば文字列中の句読点などの位置に対して区切り情報を付加して(ステップS24)文字列抽出処理を終了する。
Next, when a character string is extracted (YES in step S15 or YES in step S18), the character
図11は、文字抽出処理(図9のステップS3)の処理手順の一例を示すフローチャートである。文字抽出処理は、この文字抽出処理を開始すると、まず文字列抽出処理(図9のステップS2)により抽出された文字列の属性情報に基づいて文字列に含まれる文字の配列順序を決定し、その決定した順序に基づき文字列の中から今回抽出すべき文字を特定する(ステップS31)。例えば、文字列抽出部11によって文字列が抽出された後、最初にこの文字抽出処理が行われるときには、ステップS31において文字列の先頭文字が抽出対象として特定される。また2回目以降にこの文字抽出処理が行われるときには、ステップS31において文字列の先頭から2文字目以降の文字が抽出対象として特定される。そして文字抽出部12は、ステップS31で特定した文字を文字列から抽出する(ステップS32)。
FIG. 11 is a flowchart showing an example of the processing procedure of the character extraction process (step S3 in FIG. 9). When this character extraction process is started, the character extraction process first determines the arrangement order of the characters included in the character string based on the character string attribute information extracted by the character string extraction process (step S2 in FIG. 9). Based on the determined order, the character to be extracted this time is specified from the character string (step S31). For example, after the character string is extracted by the character
図12は、動画像生成処理(図9のステップS4)の処理手順の一例を示すフローチャートであり、動画像生成部13により行われる処理である。動画像生成部13は、まず筆順情報22を読み出し(ステップS41)、文字抽出処理において抽出された文字に対応する筆順を抽出する(ステップS42)。そして動画像生成部13は、抽出した筆順に基づき、当該文字の筆順を示す動画像を生成する(ステップS43)。このような動画像生成処理は、文字抽出部12によって文字列から一つの文字が抽出される度に繰り返し行われる。
FIG. 12 is a flowchart illustrating an example of a processing procedure of the moving image generation process (step S <b> 4 in FIG. 9), and is a process performed by the moving
図13は、文字列動画像生成処理(図9のステップS6)の処理手順の一例を示すフローチャートであり、文字列動画像生成部14により行われる。文字列動画像生成部14は、文字列に含まれる全ての文字について筆順を示す動画像が生成されると(図9のステップS5でYES)、文字列の順序に従って動画像生成処理において生成された各文字の筆順を示す複数の動画像を配列する(ステップS51)。そして、複数の動画像を1つに組み合わせて1つの文字列に対応する一連の文字列動画像を生成する(ステップS52)。このとき、文字列動画像生成部14は、上述したように文字列動画像に対して区切り情報や文字種類情報を付加する。そしてステップS52で生成される文字列動画像は、元の画像データと関連付けた状態に保存される。
FIG. 13 is a flowchart showing an example of the processing procedure of the character string moving image generation process (step S6 in FIG. 9), which is performed by the character string moving
上記文字列抽出処理(図9のステップS2)、文字抽出処理(図9のステップS3)、動画像生成処理(図9のステップS4)、及び文字列動画像生成処理(図9のステップS6)が行われることにより、文字列に含まれる文字が文字列の先頭から順に一文字ずつ筆順を表示するための文字列動画像が生成され、1つの文字列動画像から1つの文字列の内容を理解することが可能となる。 The character string extraction processing (step S2 in FIG. 9), character extraction processing (step S3 in FIG. 9), moving image generation processing (step S4 in FIG. 9), and character string moving image generation processing (step S6 in FIG. 9). Is performed, character string moving images for displaying the stroke order of characters included in the character string one by one from the beginning of the character string are generated, and the contents of one character string are understood from one character string moving image It becomes possible to do.
図14は、文字列動画像表示処理(図9にステップS7)の処理手順の一例を示すフローチャートであり、表示制御部15により行われる処理である。文字列動画像が生成された後、ユーザーによって文字列動画像の表示が指示されると、表示制御部15は、ユーザーによって指定された文字列動画像を読み出し(ステップS61)、記憶部3に記憶されている再生情報23を参照し(ステップS62)、再生速度、カラー、表示サイズ等を再生情報23に基づいて反映させた上で、表示部4にポップアップ画面を表示し、そのポップアップ画面において文字列動画像の再生表示を開始する(ステップS63)。表示制御部15は、文字列動画像の再生を開始すると、再生情報23において区切り設定がオンに設定されているか否かを判断し(ステップS64)、オンに設定されている場合(ステップS64でYES)、再生中の文字列動画像から区切り情報を検知したか否かを判断する(ステップS65)。区切り情報を検知した場合(ステップS65でYES)、表示制御部15は区切り情報を検知した位置で文字列動画像の再生を一時停止し(ステップS66)、所定時間を経過したか否かを判断する(ステップS67)。そして所定時間を経過した場合に(ステップS67でYES)、一時停止を解除して(ステップS68)、一時停止位置から文字列動画像の再生を開始する(ステップS69)。
FIG. 14 is a flowchart illustrating an example of a processing procedure of the character string moving image display process (step S <b> 7 in FIG. 9), which is a process performed by the
他方、再生情報23において区切り設定がオフに設定されている場合(ステップS64でNO)、又は再生中の文字列動画像から区切り情報を検知しない場合には(ステップS65でNO)、ステップS66からS69までの処理をスキップする。 On the other hand, when the delimiter setting is set to OFF in the reproduction information 23 (NO in step S64), or when delimiter information is not detected from the character string moving image being reproduced (NO in step S65), from step S66 The processing up to S69 is skipped.
また表示制御部15は、文字列動画像の再生中においてユーザーによるチェックの入力を検知したか否かを判断する(ステップS70)。このチェックとは、例えば文字列動画像の再生中にユーザーが所定の領域に対して簡単な入力操作を行うことを意味し、例えば画面内の所定位置をタップする場合の操作などがチェックに該当する。このようなチェックは、例えば文字列動画像の再生中にユーザーが理解し難いと判断した場合に行われる操作である。表示制御部15は、ユーザーによるチェック入力を検知した場合(ステップS70でYES)、文字列動画像中の現在再生中の文字を特定して(ステップS71)、更新フラグを付加する(ステップS72)。チェック入力検知時における再生中の文字の特定は、例えば再生中のフレーム番号等により特定してもよい。ユーザーによるチェック入力がなされる場合、ユーザーは現在再生中の動画像の文字を何らかの原因により読解できなかったのであり、文字列動画像の再生を終了した後に、後述する更新処理(図9のステップS9)により再生情報23又は筆順情報22を更新することにより、当該文字を理解できるようにする。
Further, the
そして表示制御部15は、文字列動画像を最後まで再生したか否かを判断し(ステップS73)、未だ再生中である場合(ステップS73でNO)、文字列動画像の再生が終了するまでステップS64からステップS72までの処理を繰り返す。一方、文字列動画像の再生が終了した場合(ステップS73でYES)、表示制御部15は、文字列動画像の再生表示を終了させ(ステップS74)、文字列動画像表示処理を終了する。このとき、ポップアップ画面を表示画面から消去しても良い。
Then, the
図15は、更新処理(図9のステップS9)の処理手順の一例を示すフローチャートであり、主として更新部17により行われる処理である。文字列動画像表示処理(図9のステップS7)が行われて文字列動画像の再生が終了した後、表示制御部15によって更新フラグがセットされていると(図9のステップS8)、更新部17は、まず記憶部3等に予め記憶される再生情報更新画面情報(図示せず)を読み出し(ステップS81)、再生情報更新画面を生成して表示部4に表示させる(ステップS82)。次に更新部17は、再生情報更新画面上にてユーザーによる再生情報23の入力があったか否かを判断し(ステップS83)、入力があった場合に(ステップS83でYES)、例えば現在の再生情報の設定値と入力値との差分が検出された場合には再生情報23を入力値に更新する(ステップS84)。再生情報23が更新されると、その再生情報23は、文字列動画像を再生する際に表示制御部15により参照される。そのため、その後の文字列動画像再生において、当該ユーザーにとって読解し易い再生速度、表示サイズの大きさ等により動画像が再生されるため、当該ユーザーによる文字列の理解をさらに促進する。
FIG. 15 is a flowchart showing an example of the processing procedure of the update process (step S9 in FIG. 9), which is mainly performed by the
再生情報23の入力がない場合(ステップS83でNO)、ステップS84をスキップする。そして、現在の再生情報23に基づき文字列動画像を再生した後(ステップS85)、ユーザーによる更新処理終了指示を検知したか否かを判断する(ステップS86)。更新処理終了指示を検知しない場合には(ステップS86でNO)再び再生情報更新画面を表示する指示を検知したか否かを判断し(ステップS87)、検知した場合には、ステップS82に戻り再生情報更新画面を表示してステップS83からS86までのステップを繰り返す。他方、再生情報更新画面を表示する指示を検知しない場合(ステップS87でNO)、さらに筆順情報更新画面表示指示を検知したか否かを判断して(ステップS88)、検知した場合には記憶部3等に予め記憶される筆順情報更新画面情報(図示せず)を読み出して(ステップS90)、予め表示制御部15によって特定されている文字を抽出し(ステップS91)、その文字の筆順を手動入力するための筆順情報更新画面を生成して表示部4に表示させる。
If the
更新処理終了指示を検知した場合(ステップS86でYES)、又は筆順情報更新画面表示指示を検知しない場合(ステップS88でNO)、そのまま更新処理を終了する(ステップS89)。 If an update process end instruction is detected (YES in step S86), or if a stroke order information update screen display instruction is not detected (NO in step S88), the update process is ended as it is (step S89).
他方、文字の筆順を手動入力するための筆順情報更新画面を表示した場合(ステップS92)、更新部17は、次にユーザーによる当該文字の筆順の入力が検知されたか否かを判断し(ステップS93)、筆順の入力を検知した場合(ステップS93でYES)、入力された筆順が当該文字に関する現在の筆順情報22と一致するか否かを判断し(ステップS94)、一致しない場合には入力された筆順により筆順情報22を更新する(ステップS95)。そして筆順情報22を更新すると、更新部17は、動画像生成部13に通知する(ステップS96)。動画像生成部13は、その通知に基づき更新された筆順情報22を参照して図12の動画像生成処理を行い(ステップS97)、再度動画像を生成する。動画像が生成されると、更新部17は、文字列動画像生成部14に通知する(ステップS98)。文字列動画像生成部14は、その通知に基づき図13の文字列動画像生成処理を行い、文字列動画像を生成する(ステップS99)。文字列動画像が生成されると、表示制御部15によってその生成された文字列動画像が再生される(ステップS100)。そして更新処理が終了する(ステップS89)。このように筆順情報22が更新された場合、その更新後の筆順情報22を反映した文字列動画像を新たに生成して再生することにより、ユーザーは、自身で入力した筆順で文字を認識することができるか否かを速やかに確認することができる。
On the other hand, when the stroke order information update screen for manually inputting the stroke order of characters is displayed (step S92), the
次に筆順情報22又は再生情報23の初期設定をユーザーが予めカスタマイズしておく手法について説明する。記憶部3に予め記憶される筆順情報22及び再生情報23は初期状態において予め定められた値(初期設定値)に設定されている。このような初期設定値は、ユーザーにとって必ずしも理解しやすい設定値であるとは限らない。そのため、初期設定値に基づいて再生される文字列動画像をユーザーが理解できるのか否かを、サンプルとなる動画像を用いてテストし、必要であればこれらの初期設定値をユーザーが予め所望の値に設定変更できるようにしておくことが好ましい。これにより、ユーザーは、実際の資料に基づいて文字列動画像を生成する前に筆順情報22や再生情報23を予めカスタマイズしておくことができるようになる。
Next, a method in which the user customizes the initial setting of the
図16は、サンプルとなる動画像を用いたサンプルテスト画面G20の表示態様の一例を示した図である。図16(a)に示すように、サンプルテスト画面G20は、サンプル動画像が初期設定値に設定された筆順情報22及び再生情報23に基づき表示されるサンプル動画像表示領域R40と、サンプル動画像を理解した場合にユーザーが操作する確認ボタンB50と、サンプル動画像を理解できなかった場合にユーザーが操作するチェックボタンB51とを備える。サンプル動画像は、表示制御部15が予め記憶部3等に記憶されるサンプル動画像情報(図示せず)を読み出して表示部4に表示する。図例のように、サンプル動画像表示領域R40にサンプル動画像が表示され、ユーザーは当該サンプル動画像を理解できなかった場合にはチェックボタンB51を操作する。ユーザーがチェックボタンB51を操作した場合、更新部17が筆順情報22又は再生情報23の更新処理(図15のフローチャート)を行う。他方、ユーザーが当該サンプル動画像を理解した場合には確認ボタンB50を操作し、確認ボタンB50が操作されると表示制御部15は別のサンプル動画像を読み出して表示する。
FIG. 16 is a diagram illustrating an example of a display form of the sample test screen G20 using a moving image as a sample. As shown in FIG. 16A, the sample test screen G20 includes a sample moving image display region R40 displayed based on the
また、図16(b)に示すように漢字のサンプル動画像を用いることもできる。ここで、更新部17は、設定情報23に含まれる文字種類毎に再生速度情報23aの設定値を変更することが可能である。例えば、漢字については再生速度をひらがなやカタカナ等の他の文字よりも遅く設定することができる。漢字にはひらがなやカタカナ等と比べて画数が多いものが多数存在することから、例えば漢字についてはひらがなやカタカナ等と比べて動画像の再生速度を遅く設定するなど文字種類毎に再生情報23を更新することが可能となることで、ユーザーがより動画像を理解し易くなり、文字列の理解をより促進することが可能となる。したがって、サンプル動画像を用いてテストを行うときには、再生情報23に含まれる全ての設定項目について、ユーザーが理解できたか否かをテストできるようにしておくことが好ましい。
Also, as shown in FIG. 16B, a kanji sample moving image can be used. Here, the updating
その他、漢字については、例えばその構成要素毎のユーザーが記憶している筆順により筆順情報22を更新してもよい。すなわち、図6(b)に示す漢字「板」は、部首である木偏と部首の右方の「反」という構成要素からなる。そして、例えば木偏の部首についてユーザーが記憶する筆順が筆順情報22の初期設定値と異なる場合、同じく部首を木偏とする他の漢字についても、筆順情報22をユーザーによる入力値に基づき更新してもよい。つまり、漢字の場合には、ユーザーが、一文字単位ではなく、部首単位などで筆順を入力することも可能であり、その場合、更新部17は、ユーザーによって筆順が入力された部首を有する他の全ての漢字についての筆順を変更し、筆順情報22を更新する。漢字には部分的な構成要素を共通にするものが多数存在し、それぞれの構成要素について筆順は同一であるのが原則である。そして、ユーザーが漢字を記憶する際、同一の構成要素については同じ筆順により記憶することが一般的である。そこで、サンプル動画像に用いられた文字の構成要素毎にユーザーが記憶する筆順を取得し、サンプル動画像に用いられた漢字と同一の構成要素を有する他の漢字についても筆順情報22を更新することにより、効率的に筆順情報22を更新することが可能となり、ユーザーがより動画像を理解し易くなる。
In addition, for kanji, the
図17は、サンプル動画像を用いたサンプルテスト処理の処理手順の一例を示すフローチャートである。サンプルテスト処理は、主として表示制御部15により行われる処理である。まず、サンプルテスト開始指示を検知することによりサンプルテスト処理が開始し(ステップS110)、表示制御部15はサンプル動画像の情報(図示せず)を読み出す(ステップS111)。サンプル動画像を読み出すと、サンプル動画像の再生を開始する(ステップS112)。サンプル動画像再生中にユーザーによるチェック入力を検知したか否かを判断し(ステップS113)、検知した場合には当該サンプル動画像情報に更新フラグを付加し(ステップS114)、更新部17を機能させる。更新部17は、更新フラグに基づき上述した更新処理(図15のフローチャート)を行う(ステップS115)。この更新処理により、当該サンプル動画像に対応する文字の筆順情報22又は再生情報23が更新される。ユーザーによるチェック入力を検知しない場合(ステップS113でNO)、ステップS114及びS115の処理をスキップする。そして、全てのサンプル動画像を再生したか否かを判断し(ステップS116)、全てのサンプル動画像を再生した場合にはサンプルテストを終了して(ステップS117)サンプルテスト処理を終了する。他方、全てのサンプル動画像を未だ再生していない場合には、ステップS113に戻り、全てのサンプル動画像を再生するまでステップS113からS115の処理を繰り返す。
FIG. 17 is a flowchart illustrating an example of a processing procedure of sample test processing using a sample moving image. The sample test process is a process mainly performed by the
(第2実施形態)
次に、本発明の第2実施形態につき説明する。上述した第1実施形態では、画像処理装置1において、文字列動画像の生成処理と再生処理との双方の処理が行われる場合を例示した。これに対し、本実施形態では、画像処理装置50において文字列動画像の生成処理までを行う形態について説明する。
(Second Embodiment)
Next, a second embodiment of the present invention will be described. The first embodiment described above exemplifies a case where both the character string moving image generation process and the reproduction process are performed in the
図19は、第2実施形態における画像処理装置50を含むネットワークシステムの構成例を示す図である。図19に示すように、本実施形態の画像処理装置50は、例えばMFP(Multi Function Peripheral)によって構成される。この画像処理装置50は、プリント機能やスキャン機能、コピー機能などの文書データを処理する機能を備えており、LAN(Local Area Network)などのネットワーク52を介してユーザーが使用するコンピュータ51と通信を行うことが可能である。本実施形態ではこのような画像処理装置50によって文字列動画像が生成される場合を例示する。尚、コンピュータ51は、パーソナルコンピュータに限られるものではなく、タブレット端末やその他の装置であっても構わない。
FIG. 19 is a diagram illustrating a configuration example of a network system including the
図19は、画像処理装置50及びコンピュータ51のそれぞれのCPU60,62で実現される機能ブロックの一例を示す図である。画像処理装置50は、CPU60と記憶部61を備え、CPU60は、文字列抽出部65と、文字抽出部66と、動画像生成部67と、文字列動画像生成部68と、区切り設定部69と、更新部70とを備える構成であり、各部は、それぞれ第1実施形態における文字列抽出部11、文字抽出部12、動画像生成部13、文字列動画像生成部14、区切り設定部16及び更新部17と同じ機能を有する。また記憶部61には、プログラム71と、辞書情報72と、筆順情報73と、再生情報74が記憶されており、これらも第1実施形態におけるプログラム20、辞書情報21、筆順情報22、再生情報23とそれぞれ同様のものである。他方、コンピュータ51はCPU62を備え、CPU62は表示制御部75を備えており、この表示制御部75は第1実施形態における表示制御部15と同じ機能を有する。
FIG. 19 is a diagram illustrating an example of functional blocks realized by the
このように本実施形態では、画像処理装置50において文字列動画像が生成され、ネットワーク52を介して接続されるコンピュータ51により当該文字列動画像が画像表示器76に表示される。これにより、画像処理装置50において生成された文字列動画像を、ネットワーク52を介して接続される複数のコンピュータで再生することが可能となり、例えばある会議への出席者全員が、文字列動画像の付加された会議資料データを共有して閲覧することが可能となる。尚、文字列動画像を複数のユーザーで共有して再生する場合には、筆順情報73や再生情報74をユーザーごとに記憶しておくことが好ましい。
As described above, in this embodiment, a character string moving image is generated in the
また本実施形態では、画像処理装置50がスキャン機能によって会議資料を読み取ることにより、その会議資料に含まれる文字列の文字列動画像を生成しておくことができる。そのため、ユーザーは会議前に予め会議資料を画像処理装置50でスキャンしておくことにより、会議開始後はネットワーク52を介して会議室から画像処理装置50にアクセスすることにより、文字列動画像をコンピュータ51で表示することが可能となり、利便性が高まるという利点がある。
Further, in the present embodiment, the
(変形例)
以上、本発明に関する実施形態の例につき説明したが、本発明は上記実施形態において説明した内容に限られるものではなく、種々変形例が適用可能であり、例えば、上記第2実施形態では画像処理装置50としてMFPを例示したが、サーバーであってもよい。
(Modification)
The embodiments of the present invention have been described above. However, the present invention is not limited to the contents described in the above embodiments, and various modifications can be applied. For example, in the second embodiment, image processing is performed. Although the MFP is exemplified as the
1,50 画像処理装置
11,65 文字列抽出部
12,66 文字抽出部
13,67 動画像生成部
14,68 文字列動画像生成部
15,75 表示制御部
16,69 区切り設定部
17,70 更新部
21,72 辞書情報
22,73 筆順情報
23,74 再生情報
1, 50
Claims (14)
前記文字列に含まれる文字を先頭から順に抽出する文字抽出手段と、
前記文字抽出手段により抽出された文字の筆順に関する筆順情報に基づき当該文字の筆順を示す動画像を生成する動画像生成手段と、
前記動画像生成手段により生成される動画像に基づき、前記文字抽出手段による抽出順に従って一文字ずつ筆順を表示させるための文字列動画像を生成する文字列動画像生成手段と、
を備えることを特徴とする画像処理装置。 A character string extraction means for extracting a character string included in the character area of the document;
Character extraction means for extracting characters included in the character string in order from the top;
A moving image generating means for generating a moving image indicating the stroke order of the character based on the stroke order information relating to the stroke order of the character extracted by the character extracting means;
Based on the moving image generated by the moving image generating means, a character string moving image generating means for generating a character string moving image for displaying the stroke order one character at a time according to the extraction order by the character extracting means;
An image processing apparatus comprising:
をさらに備え、
前記表示制御手段は、前記文字列動画像に基づいて筆順を一文字ずつ表示しているとき、前記区切り設定手段によって設定された区切り位置で再生動作を一時停止させることを特徴とする請求項2に記載の画像処理装置。 Delimiter setting means for delimiting a predetermined position of the character string by analyzing the character string extracted by the character string extracting means;
Further comprising
3. The display control unit according to claim 2, wherein when the stroke order is displayed one character at a time based on the character string moving image, the display control unit pauses the reproduction operation at the delimiter position set by the delimiter setting unit. The image processing apparatus described.
をさらに備え、
前記表示制御手段は、前記再生情報に基づいて筆順を一文字ずつ前記表示手段に表示させることを特徴とする請求項2又は3に記載の画像処理装置。 Reproduction information acquisition means for acquiring reproduction information related to reproduction of the character string moving image;
Further comprising
The image processing apparatus according to claim 2, wherein the display control unit causes the display unit to display a stroke order character by character based on the reproduction information.
前記表示制御手段は、前記文字列動画像に基づいて前記文字列に含まれる文字の筆順を一文字ずつ前記表示手段に表示させるとき、前記再生情報に設定された文字種類ごとの再生速度に基づいて再生速度を調整することを特徴とする請求項4に記載の画像処理装置。 In the playback information, a playback speed is set for each character type,
The display control means, when displaying the stroke order of characters included in the character string one character at a time based on the character string moving image, based on the reproduction speed for each character type set in the reproduction information. The image processing apparatus according to claim 4, wherein the reproduction speed is adjusted.
前記入力手段により入力される情報に基づいて前記再生情報を更新する更新手段と、
をさらに備えることを特徴とする請求項4又は5に記載の画像処理装置。 An input means that allows the user to input operations;
Updating means for updating the reproduction information based on information input by the input means;
The image processing apparatus according to claim 4, further comprising:
前記入力手段により入力される情報に基づいて前記筆順情報を更新する更新手段と、
をさらに備えることを特徴とする請求項1乃至5のいずれかに記載の画像処理装置。 An input means that allows the user to input operations;
Updating means for updating the stroke order information based on information input by the input means;
The image processing apparatus according to claim 1, further comprising:
文書の文字領域に含まれる文字列を抽出する文字列抽出手段、
前記文字列に含まれる文字を先頭から順に抽出する文字抽出手段、
前記文字抽出手段により抽出された文字の筆順に関する筆順情報に基づき当該文字の筆順を示す動画像を生成する動画像生成手段、及び、
前記動画像生成手段により生成される動画像に基づき、前記文字抽出手段による抽出順に従って一文字ずつ筆順を表示させるための文字列動画像を生成する文字列動画像生成手段、
として機能させることを特徴とするプログラム。 Computer
A character string extraction means for extracting a character string included in the character area of the document;
Character extraction means for extracting characters included in the character string in order from the top;
A moving image generating means for generating a moving image indicating the stroke order of the character based on the stroke order information regarding the stroke order of the character extracted by the character extracting means; and
A character string moving image generating means for generating a character string moving image for displaying a stroke order one character at a time according to the extraction order by the character extracting means based on the moving image generated by the moving image generating means;
A program characterized by functioning as
としてさらに機能させ、
前記表示制御手段は、前記文字列動画像に基づいて筆順を一文字ずつ表示しているとき、前記区切り設定手段によって設定された区切り位置で再生動作を一時停止させることを特徴とする請求項9に記載のプログラム。 Delimiter setting means for delimiting a predetermined position of the character string by analyzing the character string extracted by the character string extracting means;
Further function as
10. The display control unit according to claim 9, wherein when the stroke order is displayed one character at a time based on the character string moving image, the display control unit pauses the reproduction operation at the delimiter position set by the delimiter setting unit. The listed program.
としてさらに機能させ、
前記表示制御手段は、前記再生情報に基づいて筆順を一文字ずつ前記表示手段に表示させることを特徴とする請求項9又は10に記載のプログラム。 Reproduction information acquisition means for acquiring reproduction information related to reproduction of the character string moving image;
Further function as
The program according to claim 9 or 10, wherein the display control means causes the display means to display a stroke order character by character based on the reproduction information.
前記表示制御手段は、前記文字列動画像に基づいて前記文字列に含まれる文字の筆順を一文字ずつ前記表示手段に表示させるとき、前記再生情報に設定された文字種類ごとの再生速度に基づいて再生速度を調整することを特徴とする請求項11に記載のプログラム。 In the playback information, a playback speed is set for each character type,
The display control means, when displaying the stroke order of characters included in the character string one character at a time based on the character string moving image, based on the reproduction speed for each character type set in the reproduction information. The program according to claim 11, wherein the reproduction speed is adjusted.
としてさらに機能させることを特徴とする請求項11又は12に記載のプログラム。 Updating means for updating the reproduction information based on information input by a predetermined input means;
The program according to claim 11, further functioning as:
としてさらに機能させることを特徴とする請求項8乃至13のいずれかに記載のプログラム。 Updating means for updating the stroke order information based on information input by a predetermined input means;
The program according to claim 8, further functioning as a program.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014110045A JP6458358B2 (en) | 2014-05-28 | 2014-05-28 | Image processing apparatus and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014110045A JP6458358B2 (en) | 2014-05-28 | 2014-05-28 | Image processing apparatus and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015225506A true JP2015225506A (en) | 2015-12-14 |
JP6458358B2 JP6458358B2 (en) | 2019-01-30 |
Family
ID=54842201
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014110045A Active JP6458358B2 (en) | 2014-05-28 | 2014-05-28 | Image processing apparatus and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6458358B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019200466A (en) * | 2018-05-14 | 2019-11-21 | 京セラドキュメントソリューションズ株式会社 | Display processing device, image forming device, display processing method, and display processing program |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03163496A (en) * | 1989-05-31 | 1991-07-15 | Mitsubishi Electric Corp | Character plotting device |
WO2008015825A1 (en) * | 2006-08-01 | 2008-02-07 | Kabushiki Kaisha Digimoji | Letter-writing font data, and letter outputting system |
JP2009026007A (en) * | 2007-07-18 | 2009-02-05 | Casio Comput Co Ltd | Electronic equipment with dictionary function and control program |
JP2009252222A (en) * | 2008-04-09 | 2009-10-29 | Japan 21 Inc | Method for compensating japanese character recognition error in electronic dictionary with optical character recognition device |
JP2010049564A (en) * | 2008-08-22 | 2010-03-04 | Isp:Kk | Chinese character recognition program, portable terminal, and chinese character recognition method |
US20130212469A1 (en) * | 2012-02-11 | 2013-08-15 | Charles Yang Tian | Web Reader for Readers with reading disabilities |
-
2014
- 2014-05-28 JP JP2014110045A patent/JP6458358B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03163496A (en) * | 1989-05-31 | 1991-07-15 | Mitsubishi Electric Corp | Character plotting device |
WO2008015825A1 (en) * | 2006-08-01 | 2008-02-07 | Kabushiki Kaisha Digimoji | Letter-writing font data, and letter outputting system |
JP2009026007A (en) * | 2007-07-18 | 2009-02-05 | Casio Comput Co Ltd | Electronic equipment with dictionary function and control program |
JP2009252222A (en) * | 2008-04-09 | 2009-10-29 | Japan 21 Inc | Method for compensating japanese character recognition error in electronic dictionary with optical character recognition device |
JP2010049564A (en) * | 2008-08-22 | 2010-03-04 | Isp:Kk | Chinese character recognition program, portable terminal, and chinese character recognition method |
US20130212469A1 (en) * | 2012-02-11 | 2013-08-15 | Charles Yang Tian | Web Reader for Readers with reading disabilities |
Non-Patent Citations (1)
Title |
---|
芳野 可奈子: "書字運動の訓練支援ソフトウェアの開発", 電子情報通信学会技術研究報告, vol. 第108巻第66号, JPN6018008663, 22 May 2008 (2008-05-22), JP, pages 79 - 83, ISSN: 0003755509 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019200466A (en) * | 2018-05-14 | 2019-11-21 | 京セラドキュメントソリューションズ株式会社 | Display processing device, image forming device, display processing method, and display processing program |
Also Published As
Publication number | Publication date |
---|---|
JP6458358B2 (en) | 2019-01-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10146318B2 (en) | Techniques for using gesture recognition to effectuate character selection | |
JP5211193B2 (en) | Translation display device | |
CN105580384A (en) | Actionable content displayed on a touch screen | |
JP2004152217A (en) | Display device with touch panel | |
JPH1125098A (en) | Information processor and method for obtaining link destination file and storage medium | |
JP2008090625A (en) | Character input device, character input method, control program, and recording medium | |
US20170147546A1 (en) | Information processing apparatus, information processing method, and information processing program | |
US20160110339A1 (en) | Information processing apparatus, information processing method, and program | |
US8635523B2 (en) | Layout editing device and computer program product | |
US11900931B2 (en) | Information processing apparatus and information processing method | |
JP2000122768A (en) | Character input device, its method and recording medium | |
KR20170009486A (en) | Database generating method for chunk-based language learning and electronic device performing the same | |
JP6458358B2 (en) | Image processing apparatus and program | |
KR20170132643A (en) | Method for displaying character and Apparatus thereof | |
US11606629B2 (en) | Information processing apparatus and non-transitory computer readable medium storing program | |
JP2004199343A (en) | Screen controller | |
JP2017102939A (en) | Authoring device, authoring method, and program | |
JP2013214187A (en) | Character input device, method for controlling character input device, control program and recording medium | |
JP2006276912A (en) | Device, method, and program for editing document | |
KR101587353B1 (en) | Video display device and operating method thereof | |
CN113157966A (en) | Display method and device and electronic equipment | |
JP2019215936A (en) | Automatic translation device and automatic translation program | |
JP2012108899A (en) | Electronic equipment, network system and content edition method | |
JP7036483B1 (en) | Programs, information processing equipment and information processing methods | |
US10970583B2 (en) | Information processing apparatus, and non-transitory computer readable medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170321 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180313 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180417 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180710 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180828 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181127 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181210 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6458358 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |