JP2015121781A - Information processing apparatus, information processing method, and program executable in the information processing apparatus - Google Patents
Information processing apparatus, information processing method, and program executable in the information processing apparatus Download PDFInfo
- Publication number
- JP2015121781A JP2015121781A JP2014236046A JP2014236046A JP2015121781A JP 2015121781 A JP2015121781 A JP 2015121781A JP 2014236046 A JP2014236046 A JP 2014236046A JP 2014236046 A JP2014236046 A JP 2014236046A JP 2015121781 A JP2015121781 A JP 2015121781A
- Authority
- JP
- Japan
- Prior art keywords
- ruby
- reading information
- information
- kanji
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
Description
本発明は、学習のために利用する情報処理装置、情報処理方法、及びそのプログラムに関する。 The present invention relates to an information processing apparatus, an information processing method, and a program for use for learning.
近年、電子書籍端末が普及し、紙の書籍ではなく電子書籍端末を用いて小説などの文章を読む機会が増えている。 In recent years, electronic book terminals have become widespread, and opportunities to read texts such as novels using electronic book terminals instead of paper books have increased.
電子書籍においても通常の紙の書籍と同様に、難しい漢字や特殊な読み方をする熟語に対してルビを振って表示し、ユーザの理解を助けている。 In the case of electronic books as well as ordinary paper books, ruby is displayed for difficult kanji characters and idioms that have special readings to help users understand.
ここで、全ての漢字に対してルビを付し表示すると、読者が読み方を分かっている漢字についてもルビが表示されてしまうことになるため、読者にとってはかえって煩わしく感じてしまう。 Here, if all kanji characters are displayed with ruby attached, the ruby characters are also displayed for kanji that the reader knows how to read, which makes the reader feel bothersome.
そこで、特許文献１には、最初に出てきた漢字に対してルビを振り、それ以降に出てきた既にルビを振った漢字と同じ漢字に対してはルビを振らないよう制御する技術が記載されている。
Therefore,
例えば、小学生が電子書籍を音読する場合、特許文献１では、最初に出てきた漢字に対してルビを振り、それ以降に出てきた既にルビを振った漢字と同じ漢字に対してはルビを振らないようにすると、未学習の漢字の場合、１回目はルビが振ってあるため読むことができるが、２回目以降はルビを振らないため読めないケースが発生する。その場合、正しい読み方がわからないまま音読を続けることができてしまう、または、その漢字の読み方を調べるための手間がかかってしまうという課題が生じる。
For example, when an elementary school student reads an electronic book aloud, in
また、学校教育などでは、教科書や小説などの文章に出てきた漢字を用いて、漢字の読み取りテストを作成するが、生徒一人ひとりの学習度に応じた出題は難しく、生徒によってはわかりきっている漢字を出題されることも多く、学習時間の無駄につながってしまうという課題もある。 In addition, in school education, a kanji reading test is created using kanji that appears in textbooks, novels, etc., but it is difficult to ask questions according to each student's learning level. There are many questions that Kanji is given, leading to wasted learning time.
そこで、本発明は、音声認識により読み情報の表示を制御することで、ユーザが文字を読めるようにする仕組みを提供することを目的とする。 Therefore, an object of the present invention is to provide a mechanism that allows a user to read characters by controlling the display of reading information by voice recognition.
表示する文章に対して、読み情報を表示する情報処理装置であって、音声を受け付ける音声受付手段と、前記読み情報を表示する表示手段とを備え、前記表示手段は、前記音声受付手段で受け付けた音声の認識結果と認識対象となるオブジェクトの読み情報とが一致する場合に当該読み情報を表示することなく、前記認識結果と認識対象となるオブジェクトの読み情報が一致しない場合に当該読み情報を表示することを特徴とする情報処理装置。 An information processing apparatus for displaying reading information for a sentence to be displayed, comprising: a voice receiving unit for receiving voice; and a display unit for displaying the reading information, wherein the display unit is received by the voice receiving unit. If the speech recognition result matches the reading information of the object to be recognized, the reading information is not displayed, and if the recognition result does not match the reading information of the object to be recognized, An information processing apparatus characterized by displaying.
本発明によれば、音声認識により読み情報の表示を制御することで、ユーザが文字を読めるようにする仕組みを提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, the mechanism which enables a user to read a character can be provided by controlling the display of reading information by speech recognition.
〔第１の実施形態〕
以下、図面を参照して本発明の実施形態を詳細に説明する。
[First Embodiment]
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
図１は、本発明に係る情報処理システムのシステム構成の一例を示す図である。 FIG. 1 is a diagram showing an example of a system configuration of an information processing system according to the present invention.
図１に示すように、本実施形態に係る情報処理システムは、電子書籍端末１０１および外部装置１０２が、ネットワーク１０３により通信可能に接続された構成をとる。電子書籍端末１０１は、携帯電話、スマートフォン、タブレット端末、ノートＰＣ、ＰＤＡ端末、およびデスクトップＰＣなどの情報処理装置であり、ブラウザまたは電子書籍を閲覧するためのアプリケーションがインストールされており、無線通信等によりネットワーク１０３を介して、外部装置１０２と通信可能である。外部装置１０２には、サンプル書籍ファイル（図１１）のような電子書籍ファイル１１００が記憶されており、電子書籍端末１０１が外部装置１０２から電子書籍ファイル１１００をダウンロードし、電子書籍端末１０１のディスプレイ装置２１０に電子書籍ファイル１１００に含まれる文字や画像などの情報を表示する。
As shown in FIG. 1, the information processing system according to the present embodiment has a configuration in which an electronic book terminal 101 and an external device 102 are communicably connected via a network 103. The electronic book terminal 101 is an information processing apparatus such as a mobile phone, a smartphone, a tablet terminal, a notebook PC, a PDA terminal, and a desktop PC, and is installed with a browser or an application for browsing an electronic book, such as wireless communication Can communicate with the external device 102 via the network 103. The external device 102 stores an
なお、本実施形態においては、電子書籍端末１０１が外部装置１０２から電子書籍ファイル１１００をダウンロードして外部メモリ２１１に記憶し、電子書籍ファイル１１００に含まれる情報を表示するとしたが、この方法に限定するものではなく、電子書籍端末１０１が外部装置１０２から電子書籍ファイル１１００をダウンロードした情報をＲＡＭ２０２に記憶し、それを電子書籍端末１０１のディスプレイ装置２１０に表示する方法や、電子書籍端末１０１のＣＰＵ２０１が電子書籍ファイル１１００を記憶したＵＳＢメモリやＳＤカードなどの通信可能な記憶装置から電子書籍ファイル１１００に含まれる情報を取得し、電子書籍端末１０１のディスプレイ装置２１０に表示する方法であってもよい。
In the present embodiment, the electronic book terminal 101 downloads the
以下、図２を用いて、図１に示した電子書籍端末１０１に適用可能なハードウエア構成の一例について説明する。 Hereinafter, an example of a hardware configuration applicable to the electronic book terminal 101 illustrated in FIG. 1 will be described with reference to FIG.
図２において、２０１はＣＰＵで、システムバス２０４に接続される各デバイスやコントローラを統括的に制御する。また、ＲＯＭ２０３あるいは外部メモリ２１１には、ＣＰＵ２０１の制御プログラムであるＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ ／ Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）やオペレーティングシステムプログラム（以下、ＯＳ）や、各サーバ或いは各ＰＣの実行する機能を実現するために必要な各種プログラム等が記憶されている。
In FIG. 2,
２０２はＲＡＭで、ＣＰＵ２０１の主メモリ、ワークエリア等として機能する。ＣＰＵ２０１は、処理の実行に際して必要なプログラム等をＲＯＭ２０３あるいは外部メモリ２１１からＲＡＭ２０２にロードして、該ロードしたプログラムを実行することで各種動作を実現するものである。
A
また、２０５は入力コントローラで、入力装置２０９等からの入力を制御する。２０６はビデオコントローラで、液晶ディスプレイ等のディスプレイ装置２１０への表示を制御する。なお、ディスプレイ装置は、液晶ディスプレイに限られず、ＣＲＴディスプレイなどであっても良い。これらは必要に応じてクライアントが使用するものである。
An
２０７はメモリコントローラで、ブートプログラム，各種のアプリケーション，フォントデータ，ユーザファイル，編集ファイル，各種データ等を記憶するハードディスク（ＨＤ）や、フレキシブルディスク（ＦＤ）、或いはＰＣＭＣＩＡカードスロットにアダプタを介して接続されるコンパクトフラッシュ（登録商標）メモリ等の外部メモリ２１１へのアクセスを制御する。
A
２０８は通信Ｉ／Ｆコントローラで、ネットワーク１０３を介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、ＴＣＰ／ＩＰを用いた通信等が可能である。
A communication I /
音声入力コントローラ２１２は、マイク２１３からの入力を制御する。マイク２１３から入力された音声を音声認識することが可能となっている。
The
なお、ＣＰＵ２０１は、例えばＲＡＭ２０２内の表示情報用領域へアウトラインフォントの展開（ラスタライズ）処理を実行することにより、ディスプレイ装置２１０上での表示を可能としている。また、ＣＰＵ２０１は、ディスプレイ装置２１０上の不図示のマウスカーソル等でのユーザ指示を可能とする。
Note that the
ハードウエア上で動作する各種プログラムは、外部メモリ２１１に記録されており、必要に応じてＲＡＭ２０２にロードされることによりＣＰＵ２０１によって実行されるものである。
Various programs that operate on the hardware are recorded in the
なお、全ての装置がこれらの構成を備えているわけではなく、必要なものを夫々備えていればよい。 It should be noted that not all devices have these configurations, and it is only necessary to provide necessary devices.
図３は、電子書籍端末１０１の機能構成の一例を示すブロック図である。 FIG. 3 is a block diagram illustrating an example of a functional configuration of the electronic book terminal 101.
音声受付部３０１は、表示するオブジェクトに対して、当該オブジェクトの読み方を示す読み情報を表示する情報処理装置において、音声を受け付ける機能部である。
表示部３０２は、読み情報を表示する機能部である。
The voice receiving unit 301 is a functional unit that receives voice in an information processing apparatus that displays reading information indicating how to read an object to be displayed.
The display unit 302 is a functional unit that displays reading information.
また、表示部３０２は、音声受付部３０１で受け付けた音声の認識結果と認識対象となるオブジェクトの読み情報とが一致しない場合、音声受付部３０１で更に受け付けた音声の認識結果が当該読み情報と一致するまで、認識対象となるオブジェクトよりも後ろのオブジェクトの表示を抑止する機能部である。 When the speech recognition result received by the voice receiving unit 301 and the reading information of the object to be recognized do not match, the display unit 302 displays the voice recognition result further received by the voice receiving unit 301 as the reading information. This is a functional unit that suppresses the display of objects behind the object to be recognized until they match.
また、表示部３０２は、認識結果と認識対象となるオブジェクトの読み情報とが一致しない場合、認識対象となるオブジェクトに対応する位置に、読み情報を表示する機能部である。 The display unit 302 is a functional unit that displays the reading information at a position corresponding to the object to be recognized when the recognition result does not match the reading information of the object to be recognized.
また、表示部３０２は、認識結果と認識対象となるオブジェクトの読み情報とが一致しない場合、認識対象となるオブジェクトよりも後ろに表示される当該オブジェクトと同じオブジェクトに対応する位置に、読み情報を表示する機能部である。 Further, when the recognition result and the reading information of the object to be recognized do not match, the display unit 302 displays the reading information at a position corresponding to the same object as the object displayed behind the object to be recognized. It is a functional part to be displayed.
また、表示部３０２は、オブジェクトの難易度に応じた回数に従って、認識対象となるオブジェクトの読み情報を繰り返し表示する機能部である。 The display unit 302 is a functional unit that repeatedly displays reading information of an object to be recognized according to the number of times according to the difficulty level of the object.
また、表示部３０２は、ユーザのレベルに応じた回数に従って、認識対象となるオブジェクトに読み情報を繰り返し表示する機能部である。 The display unit 302 is a functional unit that repeatedly displays reading information on an object to be recognized according to the number of times according to the user's level.
また、認識結果と認識対象となるオブジェクトの読み情報が一致しない場合、回数を増やす機能部である。 In addition, the function unit increases the number of times when the recognition result does not match the reading information of the object to be recognized.
また、表示部３０２は、認識結果と認識対象となるオブジェクトの読み情報とが一致しなかったオブジェクトをまとめて表示する機能部である。 The display unit 302 is a functional unit that collectively displays objects whose recognition results and reading information of objects to be recognized do not match.
また、読み情報を表示しない識別表示モードにおいて、表示部３０２は、識別表示モードの場合に、ユーザに読ませるべく、認識対象のオブジェクトであり、かつ前記読み情報を表示しないオブジェクトを識別表示する機能部である。 In the identification display mode in which reading information is not displayed, the display unit 302 has a function of identifying and displaying an object that is a recognition target object and that does not display the reading information so that the user can read in the identification display mode. Part.
また、表示部３０２は、音声受付部３０１で受け付けた音声の認識結果と当該オブジェクトの読み情報とが一致する場合に、当該オブジェクトの識別表示を抑止し、認識結果と認識対象となるオブジェクトの読み情報が一致しない場合に当該読み情報を表示する機能部である。 Further, the display unit 302 suppresses the identification display of the object when the voice recognition result received by the voice receiving unit 301 matches the reading information of the object, and reads the recognition result and the object to be recognized. This is a functional unit that displays the reading information when the information does not match.
また、表示部３０２は、音声受付部３０１で受け付けた音声の認識結果と当該オブジェクトの読み情報とが一致する場合に、当該オブジェクトよりも後ろに表示される当該オブジェクトと同じオブジェクトの識別表示を抑止する機能部である。 Further, the display unit 302 suppresses the identification display of the same object as the object displayed behind the object when the speech recognition result received by the audio receiving unit 301 matches the reading information of the object. It is a functional part to do.
図１０は、電子書籍ファイル１１００におけるルビ記述とそのルビ表示の一例を示す図である。なお、本実施形態において、「ルビ」とは漢字の「読み」方を示すものであり、以下において、「ルビ」と「読み」、「ルビ情報」と「読み情報」はそれぞれ同義である。
FIG. 10 is a diagram showing an example of ruby description and its ruby display in the
電子書籍は、ＥＰＵＢ、ＸＭＬ、ＨＴＭＬなどのフォーマットで提供される。ここでは、ＨＴＭＬ形式でのルビ表示方法について説明する。「東京」という漢字にルビを振りたい場合、ＨＴＭＬ形式ではサンプルルビ１００１のように＜ｒｕｂｙ＞東＜ｒｔ＞とう＜／ｒｔ＞＜／ｒｕｂｙ＞＜ｒｕｂｙ＞京＜ｒｔ＞きょう＜／ｒｔ＞＜／ｒｕｂｙ＞と記述することで、画面出力１００２のように、テキストデータ「東」の上にそのルビ情報「とう」が、テキストデータ「京」の上にそのルビ情報「きょう」が、ルビとして表示される。なお、電子書籍ファイル１１００は、これらのフォーマットに限定するものではなく、電子書籍を表示するアプリケーション独自のフォーマットであってもよい。
図４は、ユーザ登録画面４００の一例を示す図である。
Electronic books are provided in formats such as EPUB, XML, and HTML. Here, a ruby display method in the HTML format will be described. If you want to add ruby to the Chinese character “Tokyo”, in the HTML format, as in
FIG. 4 is a diagram illustrating an example of the
図４を用いて、ユーザ登録処理について説明する。ユーザ登録画面４００は、電子書籍端末１０１において、電子書籍を読むユーザを登録する画面である。
The user registration process will be described with reference to FIG. The
電子書籍メニュー（不図示）から「ユーザ登録」が選択されると、電子書籍端末１０１はユーザ登録画面４００を表示する。
When “user registration” is selected from an electronic book menu (not shown), the electronic book terminal 101 displays a
ユーザ登録画面４００には、「名前テキストボックス４０１」「学年セレクトボックス４０２」があり、それぞれに登録するユーザの名前を入力し、学年を選択し、登録ボタン４０３を押下することで、ユーザマスタテーブル７００にレコードが登録される。
The
具体的には、名前テキストボックス４０１に「太郎」を入力し、学年セレクトボックス４０２から「小３」を選択して、登録ボタン４０３を押下することで、ユーザマスタテーブル７００に小学３年生である「太郎」のユーザレコード７０１が登録される。
Specifically, “Taro” is input in the
なお、学年セレクトボックス４０２の選択肢には、「未就学／小１／小２／小３／小４／小５／小６／中学／高校以上」がある。ここでは、学年セレクトボックス４０２の選択肢は、上記のように９種類としたが、９種類に限定するものではなく、「未就学／小１／小２／小３／小４／小５／小６／中１／中２／中３／高１／高２／高３／大学／社会人」のように細分化してもよいし、「未就学／小学低学年／小学高学年／中学以上」のようにまとめてもよい。また、「学年」でなく「年齢」としてもよいし、「漢字検定○級」「日本語検定○級」「来日○年目」のようにユーザの漢字能力のレベルを示すものであってもよい。
Note that the choice of the
図５は、本発明による電子書籍画面遷移の一例を示す図である。図６は、ルビ表示処理を示すフローチャートである。図７は、ユーザマスタテーブル７００のレイアウトの一例を示す図である。図８は、漢字マスタテーブル８００のレイアウトの一例を示す図である。図９は、ルビテーブル９００の値の遷移の一例を示す図である。 FIG. 5 is a diagram illustrating an example of electronic book screen transition according to the present invention. FIG. 6 is a flowchart showing ruby display processing. FIG. 7 is a diagram showing an example of the layout of the user master table 700. FIG. 8 is a diagram showing an example of the layout of the kanji master table 800. FIG. 9 is a diagram illustrating an example of transition of values in the ruby table 900.
図５、図７、図８、図９を参照しながら、図６のフローチャートの処理について説明する。 The processing of the flowchart of FIG. 6 will be described with reference to FIGS. 5, 7, 8, and 9.
ステップＳ６０１において、電子書籍端末１０１のＣＰＵ２０１は、ユーザによって入力されたユーザＩＤを受け付け、ログイン処理を行う。この実施形態では、ユーザＩＤ＝００３が入力され、図４でユーザ登録されていた「太郎」のログイン処理を行う。
In step S601, the
ステップＳ６０２において、ＣＰＵ２０１は、受け付けたユーザＩＤを検索キーにして、ユーザマスタテーブル７００を検索し、ユーザレコード７０１を取得しＲＡＭ２０２に記憶する。具体的には、ユーザＩＤ＝００３を検索キーにして、ユーザマスタテーブル７００を検索し、ユーザ「太郎」のユーザレコード７０１を取得しＲＡＭ２０２に記憶する。
In step S <b> 602, the
ステップＳ６０３において、ＣＰＵ２０１は、書籍一覧画面（不図示）を表示し、ユーザによって選択された書籍ファイル名を受け付ける。例えば、ここではユーザによって「サンプル書籍」という書籍ファイルが選択されたとする。
In step S603, the
ステップＳ６０４において、ＣＰＵ２０１は、外部メモリ２１１からユーザによって選択された書籍の電子書籍ファイル１１００を読み込み、電子書籍ファイル１１００に含まれるテキストデータとテキストデータのルビ情報をＲＡＭ２０２に記憶する。この実施形態においては、テキストデータには漢字が含まれており、すべての漢字にはルビ情報が設定されているとする。この実施形態では、ユーザによって選択された「サンプル書籍」という電子書籍ファイル１１００が「サンプル書籍．ｈｔｍｌ」ファイル（図１１の１１００）であるとし、このファイルに記載されているデータをＲＡＭ２０２に記憶することで、「サンプル書籍」のテキストデータとテキストデータのルビ情報が記憶される。
In step S <b> 604, the
ステップＳ６０５において、ＣＰＵ２０１は、ＲＡＭ２０２に記憶されたテキストデータを先頭から１文字ずつ取得する。具体的には、ＲＡＭ２０２に記憶されたテキストデータ「崖のうえをあるく。（以下省略）」の１文字目「崖」を取得する。
In step S605, the
ステップＳ６０６において、ＣＰＵ２０１は、取得したテキストデータにルビ情報が設定されているか否か判定する。具体的には、取得したテキストデータが＜ｒｕｂｙ＞＜／ｒｕｂｙ＞タグに囲まれており、取得したテキストデータの直後に＜ｒｔ＞が記述されていれば、ルビ情報が設定されていると判定し、＜ｒｔ＞が記述されていなければ、ルビ情報が設定されていないと判定する。
In step S606, the
ルビ情報が設定されていないと判定された場合は、ステップＳ６０７において、取得したテキストデータ１文字をディスプレイ装置２１０に出力し、ステップＳ６０５に戻る。
If it is determined that the ruby information is not set, in step S607, the acquired text data is output to the
ルビ情報が設定されていると判定された場合は、ステップＳ６０８において、ＣＰＵ２０１は、取得したテキストデータの直後の＜ｒｔ＞＜／ｒｔ＞タグで囲まれたルビ情報として認識し、ルビテーブル９００を「ユーザＣＤ」「漢字（＝当該テキストデータ）」「ルビ情報」の検索キーで検索し、ルビレコードを取得する。具体的には、ルビテーブル９００から「ユーザＣＤ＝００３」「漢字＝崖」「ルビ情報＝がけ」の検索キーで検索し、ルビレコードを取得する。
If it is determined that the ruby information has been set, in step S608, the
ステップＳ６０９において、ルビテーブル９００からルビレコードを取得できたか否か判定する。 In step S609, it is determined whether or not a ruby record has been acquired from the ruby table 900.
ルビレコードを取得できたと判定した場合は、ステップＳ６１２に進む If it is determined that the ruby record has been acquired, the process proceeds to step S612.
ルビレコードを取得できなかったと判定した場合は、ステップＳ６１０において、ＣＰＵ２０１は、その漢字を検索キーとして漢字マスタテーブル８００を検索し、漢字情報を取得する。具体的には、「漢字＝崖」を検索キーとして漢字マスタテーブル８００を検索し、漢字レコード８０１を取得する。
If it is determined that the ruby record could not be acquired, in step S610, the
なお、漢字マスタテーブル８００には、漢字ＣＤを主キーとして、あらゆる漢字が登録されており、各漢字を学習する学年「修学年」（漢字の難易度）も記憶されている。また、この実施形態においては、漢字の「修学年」を「小１／小２／小３／小４／小５／小６／中学／高校以上／常用漢字外」の９種類としたが、これら９種類に限定するものではなく、「小１／小２／小３／小４／小５／小６／中１／中２／中３／高１／高２／高３／常用漢字外」のように細分化してもよいし、「小学低学年／小学高学年／中学以上」のようにまとめてもよい。また、「修学年」でなく「年齢」としてもよいし、「漢字検定○級」「日本語検定○級」のように漢字の難易度を識別するものであってもよい。
In the kanji master table 800, all kanji are registered with the kanji CD as the main key, and the grade “school year” (kanji difficulty level) for learning each kanji is also stored. Further, in this embodiment, there are nine types of “school year” of kanji, “small 1 / small 2 / small 3 / small 4 / small 5 / small 6 / junior high school / high school and above / outside regular kanji”. Not limited to these nine types, "small 1 / small 2 / small 3 / small 4 / small 5 / small 6 /
ステップＳ６１１において、ＣＰＵ２０１は、漢字マスタテーブル８００を検索し取得した漢字レコード８０１をＲＡＭ２０２に記憶する。取得した漢字レコード８０１の修学年の値と、ステップＳ６０２においてＲＡＭ２０２に記憶したユーザレコード７０１の学年（ユーザのレベル）とを比較し、その比較結果に従って、その漢字のルビを表示する回数「ルビ残回数」を決定し、「ユーザＣＤ」「漢字ＣＤ」「ルビ情報」「ルビ残回数」を１レコードとしてルビテーブル９００に登録する。すなわち、ステップＳ６１１は、ユーザのレベルに応じた回数に従って、音声認識対象となるオブジェクトに読み情報を繰り返し表示する処理の一例を示すステップである。
In step S <b> 611, the
ルビテーブル９００の主キーは、「ユーザＣＤ」「漢字ＣＤ」「ルビ情報」である。図９のルビテーブル９００には、「漢字ＣＤ」の右に「漢字」欄を設けているが、あくまで発明の説明のために記述したものであり、ルビテーブル９００には「漢字ＣＤ」カラムがあればよく、「漢字」カラムは無くてもよい。 The main keys of the ruby table 900 are “user CD”, “kanji CD”, and “ruby information”. In the ruby table 900 of FIG. 9, a “kanji” column is provided to the right of “kanji CD”. However, this is only described for the purpose of explaining the invention. The ruby table 900 has a “kanji CD” column. There may be no “kanji” column.
なお、この電子書籍アプリケーションを初めて利用する場合、ルビテーブル９００に登録されているレコード数は０件である。つまり、この電子書籍アプリケーションを利用し、ユーザによって読まれる電子書籍の文章に、「漢字」とその「ルビ情報」の組み合わせに新な組み合わせが見つかる度に、ステップＳ６１１でルビテーブル９００にルビレコードを登録していく。 When this electronic book application is used for the first time, the number of records registered in the ruby table 900 is zero. That is, each time a new combination is found in the combination of “kanji” and its “ruby information” in the text of the electronic book read by the user using this electronic book application, a ruby record is added to the ruby table 900 in step S611. Register.
具体的には、漢字レコード８０１（＝崖」の修学年は「７」（＝中学で学習する漢字）であり、ユーザレコード７０１（＝太郎）の学年は「３」（＝小学３年生）であり、漢字修学年＞ユーザ学年であるため、「ルビ残回数」を１と決定し、「ユーザＣＤ」「漢字ＣＤ」「ルビ情報」「ルビ残回数」をそれぞれ「００３」「３３３３」「がけ」「１」の１レコードとしてルビテーブル９００に追加する。（図９の９０１） Specifically, the kanji record 801 (= cliff) has a grade of “7” (= kanji learned in junior high school), and the user record 701 (= taro) has a grade of “3” (= third grade) Yes, since Kanji study year> User grade, “Rubi remaining number” is determined as 1, and “User CD”, “Kanji CD”, “Rubi information”, and “Rubi remaining number” are set to “003”, “3333”, “Gake”, respectively. "1" is added to the ruby table 900 as one record (901 in FIG. 9).
なお、「ルビ残回数」の決定方法は、図９の９０２に記載されているように、「漢字修学年≦ユーザ学年」であれば、この漢字は学習済であるとして「０」（＝ルビは表示しない）、「漢字修学年＞ユーザ学年」であれば未学習として「１」（＝ルビを１回表示）、漢字修学年＝９（常用漢字外）」であれば読むのが困難として「２」（＝ルビを２回表示）のように決定する。 As described in 902 of FIG. 9, the method for determining the “number of remaining ruby” is “0” (= ruby) assuming that the kanji has already been learned if “Kanji study year ≦ user grade”. Is not displayed), “1” (= ruby is displayed once) if “Kanji study year> user grade”, and “Kanji study year = 9 (outside regular kanji)” is considered difficult to read. It is determined as “2” (= ruby is displayed twice).
また、「ルビ残回数」の決定方法は、この方法に限定するものではなく、「漢字修学年＞ユーザ学年＋３」であれば３年後に学習するため、読むのが困難として「２」（＝ルビを２回表示）、「漢字修学年＞ユーザ学年＋５」であれば５年後に学習するため、読むのが更に困難として「３」（＝ルビを３回表示）、というように漢字修学年とユーザ学年の差の大小に従って決定するとしてもよい。また、ユーザが事前に「漢字修学年」に応じて設定しておいた所定の数に従って決定してもよい。 The method for determining the “number of remaining rubies” is not limited to this method. If “Kanji study year> user grade + 3”, it will be learned three years later, so it is difficult to read “2” (= Ruby is displayed twice), “Kanji school year> User grade + 5” will be learned after 5 years, so it is more difficult to read “3” (= Ruby is displayed 3 times), and so on. It may be determined according to the difference between the user grade and the user grade. Alternatively, it may be determined according to a predetermined number set in advance according to the “kanji study year” by the user.
また、ユーザの学年に関係なく、漢字修学年にのみ応じて「ルビ残回数」を決定してもよい。すなわち、ステップＳ６１１は、オブジェクトの難易度に応じた回数に従って、音声認識対象となるオブジェクトに読み情報を繰り返し表示する処理の一例を示すステップである。 Further, the “ruby remaining number” may be determined only in accordance with the kanji study year regardless of the grade of the user. That is, step S611 is a step showing an example of processing for repeatedly displaying reading information on an object to be speech-recognized according to the number of times corresponding to the difficulty level of the object.
ステップＳ６１２において、ＣＰＵ２０１は、ステップＳ６０８でルビテーブル９００から取得したルビレコードのルビ残回数、またはステップＳ６１１で決定したルビ残回数が、１以上であるか否か判定する。
In step S612, the
１以上でない、つまり０である場合、学習済の漢字または正しく読むことができた漢字であるため、ステップＳ６１３において、ディスプレイ装置２１０にルビ無でその漢字を表示する。また、その時、ルビ無でその漢字を表示したことをＲＡＭ２０２に記憶しておく。具体的には、漢字＝感（図９の９０３）のルビ残回数は０であるため、ルビ無で表示するが、ステップＳ６０４でＲＡＭ２０２に記憶された電子書籍ファイル１１００のデータ＜ｒｕｂｙ＞感＜ｒｔ＞かん＜／ｒｔ＞＜／ｒｕｂｙ＞を、＜ｒｕｂｙ＞感＜！−−非表示＜ｒｔ＞かん＜／ｒｔ＞非表示−−＞＜／ｒｕｂｙ＞のようにルビ情報を“＜！−−非表示”と“非表示−−＞”で囲むように変換しＲＡＭ２０２に記憶しておくことで、ルビ無にしていることを記録することができ、後述するルビ無の漢字を判定する際の判断基準として利用することができる。
If it is not 1 or more, that is, 0, it is a learned kanji or a kanji that can be read correctly, and in step S613, the kanji is displayed on the
１以上である場合、未学習の漢字または正しく読むことができなかった漢字であるため、ステップＳ６１４において、当該漢字と、そのルビ情報をルビとして、共に表示する。すなわち、ステップＳ６１４は、読み情報を表示する処理の一例を示すステップである。この実施形態において、ルビの表示位置は、当該漢字の右側に表示する。具体的には、漢字＝崖（図５の５１３）の右側にルビ情報「がけ」をルビとして表示する。このルビ表示によって、未学習の漢字または正しく読むことができなかった漢字についても、ルビを読むことで文章を理解するとともに、その漢字の読み方を学ぶことができる。また、ルビが表示されていることで、ユーザは、その漢字が未学習の漢字または正しく読むことができなかった漢字であることが認識できるため、覚える意識が生まれ、漢字学習の意欲が向上するとともに、効果的な学習が可能になる。 If the number is 1 or more, it is an unlearned Chinese character or a Chinese character that could not be read correctly. In step S614, the Chinese character and its ruby information are displayed together as ruby. That is, step S614 is a step showing an example of processing for displaying reading information. In this embodiment, the display position of ruby is displayed on the right side of the Chinese character. Specifically, the ruby information “Gake” is displayed as ruby on the right side of kanji = cliff (513 in FIG. 5). With this ruby display, even for an unlearned kanji or a kanji that could not be read correctly, it is possible to understand the text by reading the ruby and learn how to read the kanji. In addition, since the ruby is displayed, the user can recognize that the kanji is an unlearned kanji or a kanji that could not be read correctly, thereby creating a sense of remembering and improving motivation for kanji learning. At the same time, effective learning becomes possible.
また、この実施形態では、漢字の右側にルビを表示するとしたが、右側に限定するものではなく、左・上・下など漢字の位置に従った位置に表示するとしてもよい。ルビの表示方法は、ＨＴＭＬ、スタイルシート、ＪａｖａＳｃｒｉｐｔ（登録商標）、ＤｙｎａｍｉｃＨＴＭＬ、ＡｃｔｉｖｅＸなどの技術を利用し、ルビ情報をルビとして表示する。また、それらの方法以外にも、漢字とルビ情報が一体となった画像を用意しておき、その画像を表示するなど、画像を用いた方法でもよい。 In this embodiment, ruby is displayed on the right side of the kanji, but the display is not limited to the right side, and may be displayed at a position according to the position of the kanji such as left, upper, and lower. The ruby display method uses a technique such as HTML, style sheet, JavaScript (registered trademark), DynamicHTML, ActiveX, or the like, and displays ruby information as ruby. In addition to these methods, a method using an image such as preparing an image in which kanji and ruby information are integrated and displaying the image may be used.
ステップＳ６１５において、ステップＳ６１４でルビ表示したため、ステップＳ６１０で取得した漢字情報のルビ残回数を１減算し、ＲＡＭ２０２に記憶する。また、「ユーザＣＤ」「漢字ＣＤ」「ルビ情報」をキーとして、ルビテーブル９００の該当レコードの「ルビ残回数」を更新する。
In step S615, since the ruby display is performed in step S614, 1 is subtracted from the remaining ruby count of the kanji information acquired in step S610, and the result is stored in the
以上のステップＳ６０６〜ステップＳ６１５を、ページ内に表示するテキストデータの文字の数だけ繰り返すことで、ページ内のテキストデータとルビ情報が表示されたことになる（図５の５１２）。 By repeating the above steps S606 to S615 as many times as the number of characters of the text data displayed in the page, the text data and ruby information in the page are displayed (512 in FIG. 5).
また、現在のページ番号と全ページ数を画面に表示する（図５の５１１）。 Further, the current page number and the total number of pages are displayed on the screen (511 in FIG. 5).
また、ＲＡＭ２０２に記憶された電子書籍ファイル１１００のデータのうち、現在の画面に表示中のテキストの範囲がわかるように、“＜！−−ここから表示−−＞“と” ＜！−−ここまで表示−−＞“のような表示に影響しないタグで、現在の画面に表示中のテキストを囲むように変換してＲＡＭ２０２に記憶しておく。
Further, among the data of the
また、ユーザが学習済の漢字または読むことができた漢字にはルビを振らず、ユーザが未学習の漢字または読むことができなかった漢字にはルビを振ることで、読める漢字と読めない漢字を認識させることができる。 In addition, the user does not shake ruby for kanji that has been learned or can be read, and kanji that cannot be read by shaking ruby for kanji that the user has not learned or could not read. Can be recognized.
また、１ページ目のテキストデータとルビ情報がすべて表示された時点では、ルビテーブル９００の「ルビ残回数」カラムは図９の９０４の状態である。また、２ページ目のテキストデータとルビ情報がすべて表示された時点では、ルビテーブル９００の「ルビ残回数」カラムは図９の９０７の状態である。 Further, at the time when the text data and ruby information on the first page are all displayed, the “ruby remaining count” column of the ruby table 900 is in a state of 904 in FIG. At the time when all the text data and ruby information on the second page are displayed, the “ruby remaining count” column of the ruby table 900 is in the state of 907 in FIG.
ステップＳ６１６において、ＣＰＵ２０１は、音声入力コントローラ２１２を介して、マイク２１３からの入力を制御し、音声を受け付ける。すなわち、ステップＳ６１６は、音声を受け付ける処理の一例を示すステップである。
In step S616, the
ステップＳ６１７において、音声入力コントローラ２１２は、マイク２１３から入力された音声を音声認識し、文字列データに変換する。なお、音声認識については周知の技術であるため、詳細の説明は省略する。ＣＰＵ２０１は、音声認識で得られた文字列データを、ＲＡＭ２０２に記憶されたテキストデータおよびテキストデータのルビ情報と比較し、テキストデータのどのテキストをユーザが読んでいるのかを判定し、ディスプレイ装置２１０において現在読まれているテキストの位置に矢印（図５の５１４）を表示し、ユーザに音声認識が正しく行われていることをユーザが識別できるようにする。
In step S617, the
なお、この実施形態では、現在読まれているテキストに矢印を表示するとしたが、矢印に限定するものではなく、ユーザが識別できるようにするものであれば他の方法であってもよい。現在読まれているテキストの横に矢印以外の印や線を表示してもよいし、テキストの色を反転させるなど、色を変えたり、テキストのフォントを大きくしたり太くしたりすることで、現在読まれているテキストの位置をユーザが識別できるようにする。 In this embodiment, an arrow is displayed on the currently read text. However, the present invention is not limited to the arrow, and other methods may be used as long as the user can identify the text. You can display a mark or line other than an arrow next to the text that is currently being read, change the color, such as reversing the color of the text, and make the text font larger or thicker. Allows the user to identify the position of the text that is currently being read.
ステップＳ６１８において、ＣＰＵ２０１は、ルビ無の漢字を正しく読めたか否か判定する。具体的には、ステップＳ６１３において、ルビ無の漢字は、ＲＡＭ２０２に記憶された電子書籍ファイル１１００のデータを＜ｒｕｂｙ＞感＜！−−非表示＜ｒｔ＞かん＜／ｒｔ＞非表示−−＞＜／ｒｕｂｙ＞のように変換しておいたため、“＜！−−非表示＜ｒｔ＞”と“＜／ｒｔ＞非表示−−＞”で囲まれたルビ情報が音声認識で得られた文字列データと一致するか否かを判定することで、ルビ無の漢字を正しく読めたかどうか判定する。
In step S618, the
なお、音声受付で所定の時間内に正しい音声入力がされなかった場合、正しく読めなかったと判定する。また、「あ〜」とか「え〜と」など、音声認識によって文字列データに変換できなかった等の場合も、正しく読めなかったと判定するとしてもよい。 In addition, when correct voice input is not performed within a predetermined time in voice reception, it is determined that reading is not correct. In addition, it may be determined that the data could not be read correctly even when it cannot be converted into character string data by voice recognition, such as “A” or “E”.
なお、この実施形態において、１ページ目のルビ無の漢字を正しく読めたかどうかについて、図９の９０５に示す。また、２ページ目のルビ無の漢字を正しく読めたかどうかについて、図９の９０８に示す。
In this embodiment,
ステップＳ６１８にて、ルビ無の漢字を正しく読めた場合、すなわちルビ情報が音声認識で得られた文字列データと一致した場合は、ステップＳ６２３に進む。 If it is determined in step S618 that a kanji without ruby can be read correctly, that is, if the ruby information matches the character string data obtained by speech recognition, the process proceeds to step S623.
ステップＳ６１８にて、ルビ無の漢字を正しく読めなかった場合は、すなわちルビ情報が音声認識で得られた文字列データと一致しなかった場合、ステップＳ６１９において、当該漢字の右側にルビ情報をルビとして表示する。すなわち、ステップＳ６１９は、音声認識結果と音声認識対象となるオブジェクトの読み情報とが一致しない場合、音声認識対象となるオブジェクトに対応する位置に、読み情報を表示する処理の一例を示すステップである。具体的には、ＲＡＭ２０２に記憶された電子書籍ファイル１１００のデータは、＜ｒｕｂｙ＞感＜！−−非表示＜ｒｔ＞かん＜／ｒｔ＞非表示−−＞＜／ｒｕｂｙ＞のように変換されているため、“＜！−−非表示”と“非表示−−＞”を消去してＲＡＭ２０２に記憶し、この電子書籍ファイル１１００のデータを用いてディスプレイ装置２１０に再描画することで、ルビ情報である「かん」を漢字＝感（図５の５１５）の右側にルビとして表示する。このルビ表示によって、ユーザは読み方が間違ったことを即座に認識し、その場で正しい読み方を覚え直すことができ、漢字の読み方の学習を効率的にすることができる。
In step S618, if the kanji without ruby cannot be read correctly, that is, if the ruby information does not match the character string data obtained by speech recognition, the ruby information is displayed on the right side of the kanji in step S619. Display as. That is, step S619 is a step showing an example of a process for displaying reading information at a position corresponding to the object to be speech recognition when the speech recognition result and the reading information of the object to be speech recognition do not match. . Specifically, the data of the
この実施形態では、漢字の右側にルビを表示するとしたが、右側に限定するものではなく、左・上・下など漢字の位置に従った位置に表示するとしてもよい。ルビの表示方法は、スタイルシート、ＪａｖａＳｃｒｉｐｔ、ＤｙｎａｍｉｃＨＴＭＬ、ＡｃｔｉｖｅＸなどの技術を利用し、動的にルビ情報をルビとして表示する。また、それらの方法以外にも、漢字とルビ情報が一体となった画像を用意しておき、その画像を漢字が表示されていた位置に表示するなど、画像を用いた方法でもよい。 In this embodiment, ruby is displayed on the right side of the kanji, but the display is not limited to the right side, and may be displayed at a position according to the position of the kanji such as left, upper, and lower. The ruby display method uses a technique such as a style sheet, JavaScript, DynamicHTML, or ActiveX, and dynamically displays ruby information as ruby. In addition to these methods, a method using an image such as preparing an image in which kanji and ruby information are integrated and displaying the image at a position where the kanji was displayed may be used.
ステップＳ６２０において、現在読まれているテキストの位置以降に表示中のテキストに、正しく読めなかったルビ無の漢字とそのルビ情報の組み合わせが存在するか否かを判定する。具体的には、ＲＡＭ２０２に記憶された電子書籍ファイル１１００のデータのうち、“＜！−−ここから表示−−＞“と” ＜！−−ここまで表示−−＞“範囲内に、現在読まれたデータ＜ｒｕｂｙ＞感＜！−−非表示＜ｒｔ＞かん＜／ｒｔ＞非表示−−＞＜／ｒｕｂｙ＞以降に、＜ｒｕｂｙ＞感＜！−−非表示＜ｒｔ＞かん＜／ｒｔ＞非表示−−＞＜／ｒｕｂｙ＞の記述が存在するか否かを判定する。
In step S620, it is determined whether or not there is a combination of ruby-free kanji characters that could not be read correctly and the ruby information in the text being displayed after the position of the currently read text. Specifically, among the data of the
存在した場合は、ステップＳ６２１において、最初に見つかった漢字にルビを表示する。すなわち、ステップＳ６２１は、音声認識結果と音声認識対象となるオブジェクトの読み情報とが一致しない場合、音声認識対象となるオブジェクトよりも後ろに表示される当該オブジェクトと同じオブジェクトに対応する位置に、読み情報を表示する処理の一例を示すステップである。具体的には、最初に見つかった＜ｒｕｂｙ＞感＜！−−非表示＜ｒｔ＞かん＜／ｒｔ＞非表示−−＞＜／ｒｕｂｙ＞の記述から、“＜！−−非表示”と“非表示−−＞”を消去してＲＡＭ２０２に記憶し、この電子書籍ファイル１１００のデータを用いてディスプレイ装置２１０に再描画することで、当該漢字の右側にルビ情報をルビとして表示する。
If it exists, in step S621, ruby is displayed for the first Chinese character found. That is, in step S621, when the speech recognition result and the reading information of the object to be speech recognition do not match, the reading is performed at a position corresponding to the same object as the object displayed behind the object to be speech recognition target. It is a step which shows an example of the process which displays information. Specifically, the first <ruby> feeling <! --Hidden <rt> kan </ rt> Hidden --------------------------------- "Hidden" and "Hidden->" are erased and stored in the
存在しなかった場合は、ステップＳ６２２において、ステップＳ６０２でＲＡＭ２０２に記憶したユーザレコード７０１の「学年」と、ステップＳ６１１でＲＡＭ２０２に記憶した漢字レコード８０１の「修学年」とを比較し、ステップＳ６１１と同様に「ルビ残回数」を決定し、「ユーザＣＤ」「漢字ＣＤ」「ルビ情報」をキーとして、ルビテーブル９００の該当レコードの「ルビ残回数」を更新する。これにより、正しく読めなかった漢字について、「ルビ残回数」が増えるため、以降のページにおいて、正しく読めなかった漢字にルビ情報がルビとして表示される。これにより、正しく読めなかった漢字について、ユーザにとって難易度の高い漢字はルビ表示回数が多くなり、ユーザにとって難易度の低い漢字はルビ表示回数が少なくなるため、学習意欲を削ぐことなく、学習効果を高めることができる。
If not, in step S622, the “school year” of the
この実施形態としては、正しく読めなかった漢字の「ルビ残回数」をユーザ学年と漢字修学年に従って増加させたが、これに限定するものではなく、単純に１増加させたり、ユーザが事前に設定しておいた所定の数の分だけ増加させたりしてもよい。すなわち、ステップＳ６２２は、音声認識結果と音声認識対象となるオブジェクトの読み情報が一致しない場合、読み情報を表示する回数を増やす処理の一例を示すステップである。 In this embodiment, the “ruby remaining count” of the kanji that could not be read correctly was increased according to the user grade and kanji study year, but this is not limited to this, and it is simply increased by 1 or set in advance by the user. It may be increased by a predetermined number. That is, step S622 is a step showing an example of processing for increasing the number of times of displaying the reading information when the voice recognition result does not match the reading information of the object to be recognized.
これにより、正しく読めなかった漢字が次に表示する際には、ルビが表示されることになる。 As a result, ruby is displayed the next time a Chinese character that could not be read correctly is displayed.
ステップＳ６２３において、ＣＰＵ２０１は、音声による読み上げがページの終わりまで到達したか否か判定する。
In step S623, the
ページの終わりまで到達していなかった場合は、ステップＳ６１７に戻り、音声の受付を続行する。 If the end of the page has not been reached, the process returns to step S617 to continue accepting audio.
ページの終わりまで到達した場合は、ステップＳ６２４において、表示していたページが最終ページかどうか判定する。具体的には、次に表示すべきテキストデータが存在しない場合、表示していたページが最終ページであると判定できる。 If the end of the page has been reached, it is determined in step S624 whether the displayed page is the last page. Specifically, when there is no text data to be displayed next, it can be determined that the displayed page is the last page.
表示していたページが最終ページでない、つまり表示するテキストデータが残っている場合は、ステップＳ６２５において画面をクリアしてページめくりを実施し、ステップＳ６０５に戻り、次のページのテキストデータとルビを表示する。また、次のページへの画面遷移は、上記のように音声認識によって判定してもよいし、図５の５１６のようなページ送りボタンがユーザによって押下された時に、実施してもよい。 If the displayed page is not the last page, that is, there is remaining text data to be displayed, the screen is cleared in step S625, the page is turned, the process returns to step S605, and the text data and ruby of the next page are displayed. indicate. Further, the screen transition to the next page may be determined by voice recognition as described above, or may be performed when a page feed button such as 516 in FIG. 5 is pressed by the user.
この時点で、１ページ目の場合、ルビテーブル９００は図９の９０６の状態である。また、２ページ目の場合、ルビテーブル９００は図９の９０９の状態である。
At this time, in the case of the first page, the ruby table 900 is in the
表示していたページが最終ページであった場合は、ステップＳ６２６に進む。 If the displayed page is the last page, the process proceeds to step S626.
ステップＳ６２６において、これから行う確認テストの出題内容を決定するために、ルビテーブル９００からルビ残回数≧１の漢字を抽出する。具体的には、ルビテーブル９００を「ユーザＣＤ」「ルビ残回数≧１」で検索し、ルビレコードを取得し、ＲＡＭ２０２に記憶しておく。これにより、ユーザがまだ正しく読むことができていないと思われる漢字を確認テストとして出題するために抽出することができる（図９の９１０）。
In step S626, in order to determine the content of the question for the confirmation test to be performed in the future, kanji with the remaining ruby count ≧ 1 is extracted from the ruby table 900. Specifically, the ruby table 900 is searched for “user CD” “remaining ruby count ≧ 1”, a ruby record is acquired, and stored in the
なお、この実施形態では、ルビテーブル９００からルビ残回数≧１の漢字を抽出するとしたが、この抽出には、過去に何度も間違っていたが最後の１回だけ正しく読めた漢字については、ルビ残回数＝０であるため含まれていない。よって、ルビテーブル９００に「ルビ残回数」だけでなく、「間違った回数」を記憶しておき、その「間違った回数」に従って漢字を抽出するとしてもよい。これにより、うろ覚えの漢字についても、確認テストとして抽出することができる。 In this embodiment, the kanji with the remaining ruby count ≧ 1 is extracted from the ruby table 900. For this extraction, the kanji that was read many times in the past but was read correctly only once is Not included because the number of remaining ruby = 0. Therefore, not only “the number of remaining ruby” but also “the wrong number” may be stored in the ruby table 900, and kanji may be extracted according to the “wrong number”. As a result, the kanji that has been remembered can be extracted as a confirmation test.
ステップＳ６２７において、ＣＰＵ２０１は、ディスプレイ装置２１０にステップＳ６２６で抽出したルビレコードの漢字をルビ無で出力する（図５の５３０）。すなわち、ステップＳ６２７は、音声認識結果と音声認識対象となるオブジェクトの読み情報とが一致しなかったオブジェクトをまとめて表示する処理の一例を示すステップである。これにより、ユーザがまだ正しく読むことができていない漢字のみの確認テストが行えるため、一般の漢字テストのように、わかりきっている漢字を出題されることもなく、学習時間の無駄が生じないため、学習を効率的にすることができる。
In step S627, the
ステップＳ６２８において、ＣＰＵ２０１は、音声入力コントローラ２１２を介して、マイク２１３からの入力を制御し、音声を受け付ける。
In step S628, the
ステップＳ６２９において、音声入力コントローラ２１２は、マイク２１３から入力された音声を音声認識し、文字列データに変換する。
In step S629, the
音声認識および音声の文字列データへの変換は、ステップＳ６１７にて説明したとおりであるため、ここでの説明は省略する。 Since the voice recognition and the conversion to voice character string data are as described in step S617, the description thereof is omitted here.
ステップＳ６３０において、ＣＰＵ２０１は、確認テストのルビ無の漢字を正しく読めたか否か判定する。正しく読めたか否かの判定方法については、ステップＳ６２６において、ＲＡＭ２０２に記憶しておいた確認テストとして出題したルビレコードの「ルビ情報」と音声認識で得られた文字列データと一致するか否かによって判定する。（図９の９１１）
In step S630, the
なお、ステップＳ６１８の判定と同様に、音声受付で所定の時間内に正しい音声入力がされなかった場合、「あ〜」とか「え〜と」など、音声認識によって文字列データに変換できないが、ユーザが迷っていると認識した場合についても、正しく読めなかったと判定してもよい。 Similar to the determination in step S618, if correct voice input is not received within a predetermined time during voice reception, it cannot be converted into character string data by voice recognition, such as “A ~” or “U ~”. Even when the user recognizes that he / she is at a loss, it may be determined that the user has not read correctly.
正しく読めた場合は、ステップＳ６３２において、ＲＡＭ２０２に記憶しておいた漢字情報のルビ残回数を０にし、ＲＡＭ２０２に記憶する。また、「ユーザＣＤ」「漢字ＣＤ」「ルビ情報」をキーとして、ルビテーブル９００の該当レコードの「ルビ残回数」を０に更新する。これにより、確認テストで正しく読むことができた漢字についても、「ルビ残回数」が０であるため、次に表示される場合はルビ無で表示される。
If it can be read correctly, in step S 632, the number of remaining rubies in the kanji information stored in the
正しく読めなかった場合は、ステップＳ６３１において、当該漢字の右側にルビ情報をルビとして表示する。具体的には、漢字＝妻（図５の５３１）の右側に「つま」をルビとして表示する。このルビ表示によって、ユーザは読み方が間違ったことを即座に認識し、その場で正しい読み方を覚え直すことができ、漢字の読み方の学習を効率的にすることができる。また、確認テストで正しく読むことができなかった漢字は、「ルビ残回数≧１」のままであるため、次に表示される場合はルビ有で表示される。 If it cannot be read correctly, ruby information is displayed as ruby on the right side of the kanji in step S631. Specifically, “tsuma” is displayed as ruby on the right side of the kanji = wife (531 in FIG. 5). By this ruby display, the user can immediately recognize that the reading is wrong, and can learn the correct reading on the spot, thereby efficiently learning how to read kanji. In addition, since the kanji that could not be read correctly in the confirmation test remains “ruby remaining count ≧ 1”, it is displayed with ruby when it is displayed next.
確認テストが完了した時点で、ルビテーブル９００は図９の９１２の状態である。
以上で、図６のルビ表示処理の説明を完了する。
When the confirmation test is completed, the ruby table 900 is in a
This completes the description of the ruby display process of FIG.
以上により、音声認識により読み情報の表示を制御することで、ユーザが文字を読めるようにする仕組みを提供することができる。 As described above, it is possible to provide a mechanism that allows the user to read characters by controlling the display of reading information by voice recognition.
〔第２の実施形態〕
次に、第２の実施形態について説明する。第１の実施形態を「通常モード」と呼ぶとすると、第２の実施形態は読むことができない漢字を第１の実施形態よりも速く学ぶことができる「速習モード」である。言い換えると、第１の実施形態は、文章のすべての文字の音声認識により読み情報の表示を制御することで、ユーザが文字を読めるようにする仕組みであるが、第２の実施形態はルビ無の文字の音声認識により読み情報の表示を制御することで、ユーザが文字を読めるようにする仕組みである。
[Second Embodiment]
Next, a second embodiment will be described. If the first embodiment is called a “normal mode”, the second embodiment is a “quick learning mode” in which kanji characters that cannot be read can be learned faster than the first embodiment. In other words, the first embodiment is a mechanism that allows a user to read characters by controlling the display of reading information by voice recognition of all characters of a sentence. However, the second embodiment has no ruby. This is a mechanism that allows the user to read the characters by controlling the display of the reading information by voice recognition of the characters.
図１２は、第２の実施形態に係る電子書籍画面遷移の一例を示す図である。 なお、第２の実施形態では、第１の実施形態における図６のフローチャートを図１３に置き換え、第１の実施形態のステップと同じ処理については、同じステップ番号を付与し説明を省略する。 FIG. 12 is a diagram illustrating an example of electronic book screen transition according to the second embodiment. In the second embodiment, the flowchart of FIG. 6 in the first embodiment is replaced with FIG. 13, and the same process as the step of the first embodiment is assigned the same step number and the description is omitted.
図１２および図１３を用いて、第２の実施形態について説明する。 The second embodiment will be described with reference to FIGS. 12 and 13.
図１３のステップＳ１３０１において、ＣＰＵ２０１は、ユーザによるモードの選択を受け付ける。具体的には、モード選択ボタン１２０１（図１２）のようなボタンによって、「通常モード」と「速習モード」の選択を受け付ける。図１２では、モード選択ボタン１２０１が「速習モード」と表示されているため、現在「速習モード」であることがわかる。なお、モード選択ボタン１２０１の押下を受け付けた場合、「速習モード」から「通常モード」に、再度押下を受け付けた場合、「通常モード」から「速習モード」に変える。以下において、「速習モード」について説明する。なお、この実施形態においては、第２の実施形態を「速習モード」と呼ぶが、第２の実施形態は、読み情報を表示しない漢字を識別して表示するモードであるため、第２の実施形態を「識別表示モード」と呼ぶとしてもよい。
In step S1301 of FIG. 13, the
ステップＳ１３０１により受け付けたモードが「通常モード」の場合、図６のステップＳ６０５に進み、第１の実施形態を実行する。「速習モード」の場合、図１３のステップＳ６０５に進み、第２の実施形態を実行する。 If the mode received in step S1301 is the “normal mode”, the process proceeds to step S605 in FIG. 6 to execute the first embodiment. In the “quick learning mode”, the process proceeds to step S605 in FIG. 13 to execute the second embodiment.
ステップＳ１３０２において、ＣＰＵ２０１は、ステップＳ６０８でルビテーブル９００から取得したルビレコードのルビ残回数、またはステップＳ６１１で決定したルビ残回数が、−１以下、０、１以上のいずれかを判定する。
In step S1302, the
−１以下の場合、「速習モード」において正しく読むことができた漢字であると捉え、ステップＳ１３０３において、ディスプレイ装置２１０にルビ無でその漢字を表示する。０の場合、学習済の漢字または「通常モード」において正しく読むことができた漢字である、つまり「速習モード」で音読する漢字であると捉え、ステップＳ６１３において、ディスプレイ装置２１０にルビ無でその漢字を表示する。１以上の場合、未学習の漢字または「通常モード」で正しく読むことができなかった漢字であるため、ステップＳ６１４において、当該漢字と、そのルビ情報をルビとして、共に表示する。
If it is −1 or less, it is considered that the kanji is correctly read in the “quick learning mode”, and the kanji is displayed on the
ステップＳ１３０４において、ＣＰＵ２０１は、ステップＳ６１３にて表示したルビ無の漢字を大きく表示し、「速習モード」で音読する漢字であることをユーザが識別できるよう表示する（図１２の１２０２）。すなわち、ステップＳ１３０４は、識別表示モードの場合に、ユーザに読ませるべく、認識対象のオブジェクトであり、かつ前記読み情報を表示しないオブジェクトを識別表示する処理の一例を示すステップである。
In step S1304, the
具体的には、漢字＝美（図１２の１２０３）のルビ残回数は０（図９の９０４）であるため、ルビ無で表示し（ステップＳ６１３）、ステップＳ６０４でＲＡＭ２０２に記憶された電子書籍ファイル１１００のデータ＜ｒｕｂｙ＞美＜ｒｔ＞うつく＜／ｒｔ＞＜／ｒｕｂｙ＞を、＜ｒｕｂｙ＞＜ｆｏｎｔ ｓｉｚｅ＝＋５＞美＜／ｆｏｎｔ＞＜！−−非表示＜ｒｔ＞うつく＜／ｒｔ＞非表示−−＞＜／ｒｕｂｙ＞のように「速習モード」で音読する漢字を“＜ｆｏｎｔ ｓｉｚｅ＝＋５＞”と“＜／ｆｏｎｔ＞”で囲むように変換しておくことで、「速習モード」で音読する漢字であることを記録することができ、ステップＳ１３０５の説明で後述する「大きく表示されている漢字」を判定する際の判断基準として利用することができる。また、この実施形態では、大きく表示するフォントのサイズを“＋５”としたが、このサイズは例であり、通常の文字と「速習モード」で音読する漢字を識別できる大きさであれば他のサイズでもよい。
Specifically, since the remaining ruby count of Kanji = Beauty (1203 in FIG. 12) is 0 (904 in FIG. 9), it is displayed without ruby (step S613), and is stored in the
また、この実施形態では、「大きく表示」するとしたが、この方法に限定するものではなく、ユーザが「速習モード」で音読する漢字を識別できるようにする方法であれば他の方法であってもよい。当該漢字の色を反転させるなど、色を変えたり、当該漢字のフォントをを大きくしたり太くしたりすることで、「速習モード」で音読する漢字をユーザが識別できるようにする。 In this embodiment, “largely displayed” is used. However, the present invention is not limited to this method, and any other method may be used as long as the user can identify the kanji to be read aloud in “quick learning mode”. May be. By changing the color, such as reversing the color of the kanji, or by increasing or decreasing the font size of the kanji, the user can identify the kanji to be read aloud in the “quick learning mode”.
また、ルビ無の漢字を識別して表示する処理は、第１の実施形態（図６のステップＳ６１３）において実施してもよい。これにより、音声認識により正しく読むことができたか否かを判定する文字を識別表示することができる。 Further, the process of identifying and displaying kanji without ruby may be performed in the first embodiment (step S613 in FIG. 6). As a result, it is possible to identify and display a character for determining whether or not it has been correctly read by voice recognition.
ステップＳ１３０５において、ＣＰＵ２０１は、大きく表示されている漢字のうち、先頭の漢字に矢印を表示する。具体的には、ステップＳ１３０４にて、ＲＡＭ２０２に記憶された電子書籍ファイル１１００のデータを、＜ｒｕｂｙ＞＜ｆｏｎｔ ｓｉｚｅ＝＋５＞美＜／ｆｏｎｔ＞＜！−−非表示＜ｒｔ＞うつく＜／ｒｔ＞非表示−−＞＜／ｒｕｂｙ＞のように変換したため、ＲＡＭ２０２に記憶された電子書籍ファイル１１００のデータにおいて、“＜ｆｏｎｔ ｓｉｚｅ＝＋５＞”と“＜／ｆｏｎｔ＞”に囲まれている漢字のうち先頭の漢字の位置を特定し、ユーザがこれから音読すべき漢字を識別できるように矢印（図１２の１２０４）を表示する。以上により、ユーザは「速習モード」で音読する漢字以外の文章を音読する必要がなくなり、「速習モード」で音読する漢字のみを音読すればよいため、第１の実施形態「通常モード」よりも漢字の読み方の学習を効率的にすることができる。
In step S1305, the
なお、この実施形態では、ユーザがこれから音読すべき漢字に「矢印」を表示するとしたが、「矢印」に限定するものではなく、ユーザが識別できるようにするものであれば他の方法であってもよい。ユーザがこれから音読すべき漢字の横に矢印以外の印や線を表示してもよいし、当該漢字の色を反転させるなど、色を変えたり、当該漢字のフォントを大きくしたり太くしたりすることで、ユーザがこれから音読すべき漢字の位置をユーザが識別できるようにする。 In this embodiment, it is assumed that the user displays “arrows” on kanji characters that should be read aloud from now on. May be. The user may display a mark or line other than an arrow next to the kanji that should be read aloud, or change the color, such as inverting the color of the kanji, or make the kanji font larger or thicker Thus, the user can identify the position of the Chinese character to be read aloud from now on.
ステップＳ１３０６において、ＣＰＵ２０１は、ステップＳ６１８にて正しく読むことができた漢字の大きさを通常の大きさに戻す。すなわち、ステップＳ１３０６およびステップＳ６１９は、受け付けた音声の認識結果とオブジェクトの読み情報とが一致する場合に、当該オブジェクトの識別表示を抑止し、認識結果と認識対象となるオブジェクトの読み情報が一致しない場合に当該読み情報を表示する処理の一例を示すステップである。
In step S1306, the
具体的には、ステップＳ１３０４にて、ＲＡＭ２０２に記憶された電子書籍ファイル１１００のデータを、＜ｒｕｂｙ＞＜ｆｏｎｔ ｓｉｚｅ＝＋５＞美＜／ｆｏｎｔ＞＜！−−非表示＜ｒｔ＞うつく＜／ｒｔ＞非表示−−＞＜／ｒｕｂｙ＞のように変換したため、“＜ｆｏｎｔ ｓｉｚｅ＝＋５＞”と“＜／ｆｏｎｔ＞”を削除し、元のデータと同一の＜ｒｕｂｙ＞美＜！−−非表示＜ｒｔ＞うつく＜／ｒｔ＞非表示−−＞＜／ｒｕｂｙ＞に変換してＲＡＭ２０２に記憶し、この電子書籍ファイル１１００のデータを用いてディスプレイ装置２１０に再描画することで識別表示を解除する。
Specifically, in step S1304, the data of the
ステップＳ１３０６において、ＣＰＵ２０１は、当該ルビ無漢字の「ルビ残回数」を、「速習モード」において正しく読むことができた漢字であることを示す“−１”に更新する。具体的には、「ユーザＣＤ」「漢字ＣＤ」「ルビ情報」をキーとして、ルビテーブル９００の該当レコードの「ルビ残回数」を“−１”に更新する。例えば、図１２の１２０４の「花」は、ルビ残回数が０（図９の９０４）であるため大きく表示された（ステップＳ１３０４）後、正しく音読され（図１３のステップＳ６１８）、通常の大きさに戻して表示された（ステップＳ１３０６）状態であり、「ルビ残回数」を“−１”に更新した（ステップＳ１３０７）ことによって、図１２の１２０５の「花」はルビ無で表示される（ステップＳ１３０３）。
In step S <b> 1306, the
以上により、当該ルビ無漢字以降の文章の表示において、当該漢字が「速習モード」において正しく読むことができた漢字であることを判定可能になるため、ステップＳ１３０３において、ディスプレイ装置２１０に当該漢字をルビ無で表示できるようになる。すなわち、ステップＳ１３０３は、受け付けた音声の認識結果とオブジェクトの読み情報とが一致する場合に、当該オブジェクトよりも後ろに表示される当該オブジェクトと同じオブジェクトの識別表示を抑止する処理の一例を示すステップである。これにより、「速習モード」において正しく読むことができた漢字は、再度音読する必要が無くなるため、漢字の読み方の学習を第１の実施形態「通常モード」よりも効率的にすることができる。
以上で、図１３のルビ表示処理の説明を完了する。
As described above, in the display of the text after the ruby-free kanji, it becomes possible to determine that the kanji is a kanji that can be read correctly in the “quick learning mode”. Therefore, in step S1303, the
This completes the explanation of the ruby display process of FIG.
以上により、音声認識により読み情報の表示を制御することで、ユーザが文字を読めるようにする仕組みを提供することができる。 As described above, it is possible to provide a mechanism that allows the user to read characters by controlling the display of reading information by voice recognition.
なお、この実施形態では、「漢字」と「ルビ情報」の組み合わせを例として挙げたが、その組み合わせに限定するものではなく、外国語と発音記号、記号と読み方、標識と名称、絵と単語、手話の形と意味、九九などの計算式と答え、クイズと答えなどの組み合わせであってもよい。 In this embodiment, the combination of “kanji” and “ruby information” is given as an example. However, the present invention is not limited to this combination, and it is not limited to the combination. It may be a combination of sign language shape and meaning, calculation formula and answer such as multiplication table, quiz and answer.
つまり、文字・記号・絵・問題・クイズなどの「オブジェクト」と、その読み方や答えなどの「ルビ情報」の組み合わせであれば、今回の実施形態の「漢字」と「ルビ情報」のように、ユーザが「オブジェクト」を読めた場合は「ルビ情報」を表示せず、読めなかった場合は「ルビ情報」を表示することで、読めた「オブジェクト」と、読めなかった「オブジェクト」を認識することができるため、学習効率の向上を図ることができる。 In other words, if it is a combination of “objects” such as letters, symbols, pictures, problems, quizzes and “ruby information” such as how to read and answer them, like “kanji” and “ruby information” in this embodiment When the user can read “object”, “ruby information” is not displayed, and when it cannot be read, “ruby information” is displayed to recognize the read “object” and the unreadable “object”. Therefore, learning efficiency can be improved.
具体的には、漢字マスタテーブル８００をオブジェクトマスタテーブル｛オブジェクトＣＤ、オブジェクト、難易度｝に、ルビテーブル９００を読みテーブル｛ユーザＣＤ、オブジェクトＣＤ、読み情報、読み残回数｝に置き換えることで、「オブジェクト」の位置に従ってオブジェクトの「読み情報」を表示・非表示に制御することが可能になる。 Specifically, by replacing the kanji master table 800 with the object master table {object CD, object, difficulty level} and the ruby table 900 with the reading table {user CD, object CD, reading information, remaining number of readings}, According to the position of the “object”, the “reading information” of the object can be controlled to be displayed / hidden.
つまり、この発明により、外国語の学習、幼児のためのことばの学習、道路交通標識の学習、手話の学習、暗算の練習など、多くの学習において学習を効率的にすることができる。 That is, according to the present invention, learning can be efficiently performed in many learning such as learning a foreign language, learning a language for an infant, learning road signs, learning sign language, and mental arithmetic.
以上のように、前述した実施形態の機能を実現するプログラムを記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に格納されたプログラムを読み出し、実行することによっても本発明の目的が達成されることは言うまでもない。 As described above, a recording medium that records a program that implements the functions of the above-described embodiments is supplied to a system or apparatus, and a computer (or CPU or MPU) of the system or apparatus stores the program stored in the recording medium. It goes without saying that the object of the present invention can also be achieved by reading and executing.
この場合、記録媒体から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記録した記録媒体は本発明を構成することになる。 In this case, the program itself read from the recording medium realizes the novel function of the present invention, and the recording medium recording the program constitutes the present invention.
プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＤＶＤ−ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＥＥＰＲＯＭ、シリコンディスク等を用いることが出来る。 As a recording medium for supplying the program, for example, a flexible disk, hard disk, optical disk, magneto-optical disk, CD-ROM, CD-R, DVD-ROM, magnetic tape, nonvolatile memory card, ROM, EEPROM, silicon A disk or the like can be used.
また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムの指示に基づき、コンピュータ上で稼働しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Further, by executing the program read by the computer, not only the functions of the above-described embodiments are realized, but also an OS (operating system) operating on the computer based on an instruction of the program is actually It goes without saying that a case where the function of the above-described embodiment is realized by performing part or all of the processing and the processing is included.
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Furthermore, after the program read from the recording medium is written to the memory provided in the function expansion board inserted into the computer or the function expansion unit connected to the computer, the function expansion board is based on the instructions of the program code. It goes without saying that the case where the CPU or the like provided in the function expansion unit performs part or all of the actual processing and the functions of the above-described embodiments are realized by the processing.
また、本発明は、複数の機器から構成されるシステムに適用しても、ひとつの機器から成る装置に適用しても良い。また、本発明は、システムあるいは装置にプログラムを供給することによって達成される場合にも適応できることは言うまでもない。この場合、本発明を達成するためのプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。 The present invention may be applied to a system constituted by a plurality of devices or an apparatus constituted by a single device. Needless to say, the present invention can be applied to a case where the present invention is achieved by supplying a program to a system or apparatus. In this case, by reading a recording medium storing a program for achieving the present invention into the system or apparatus, the system or apparatus can enjoy the effects of the present invention.
上記プログラムの形態は、オブジェクトコード、インタプリタにより実行されるプログラムコード、ＯＳ（オペレーティングシステム）に供給されるスクリプトデータ等の形態から成ってもよい。 The form of the program may be in the form of object code, program code executed by an interpreter, script data supplied to an OS (operating system), and the like.
さらに、本発明を達成するためのプログラムをネットワーク上のサーバ、データベース等から通信プログラムによりダウンロードして読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。 Furthermore, by downloading and reading a program for achieving the present invention from a server, database, etc. on a network using a communication program, the system or apparatus can enjoy the effects of the present invention. In addition, all the structures which combined each embodiment mentioned above and its modification are also included in this invention.
１０１ 電子書籍端末
１０２ 外部装置
１０３ ネットワーク
101 electronic book terminal 102 external device 103 network
Claims (13)
音声を受け付ける音声受付手段と、
前記読み情報を表示する表示手段とを備え、
前記表示手段は、前記音声受付手段で受け付けた音声の認識結果と認識対象となるオブジェクトの読み情報とが一致する場合に当該読み情報を表示することなく、前記認識結果と認識対象となるオブジェクトの読み情報が一致しない場合に当該読み情報を表示することを特徴とする情報処理装置。 An information processing apparatus that displays reading information for a sentence to be displayed,
Voice receiving means for receiving voice;
Display means for displaying the reading information,
The display means displays the recognition result and the object to be recognized without displaying the reading information when the speech recognition result received by the sound receiving means matches the reading information of the object to be recognized. An information processing apparatus that displays reading information when the reading information does not match.
当該認識対象となるオブジェクトに対応する位置に、前記読み情報を表示することを特徴とする請求項１に記載の情報処理装置。 The display means, when the recognition result and the reading information of the object to be recognized do not match,
The information processing apparatus according to claim 1, wherein the reading information is displayed at a position corresponding to the object to be recognized.
前記認識対象となるオブジェクトよりも後ろに表示される当該オブジェクトと同じオブジェクトに対応する位置に、前記読み情報を表示することを特徴とする請求項１または２に記載の情報処理装置。 The display means, when the recognition result and the reading information of the object to be recognized do not match,
The information processing apparatus according to claim 1, wherein the reading information is displayed at a position corresponding to the same object as the object displayed behind the object to be recognized.
前記表示手段は、前記識別表示モードの場合に、ユーザに読ませるべく、前記認識対象のオブジェクトであり、かつ前記読み情報を表示しないオブジェクトを識別表示することを特徴とする請求項１乃至７のいずれか１項に記載の情報処理装置。 An identification display mode for identifying and displaying an object that does not display the reading information;
8. The display unit according to claim 1, wherein, in the identification display mode, the object that is the object to be recognized and does not display the reading information is identified and displayed so that a user can read it. The information processing apparatus according to any one of claims.
前記情報処理装置が、
音声を受け付ける音声受付ステップと、
前記読み情報を表示する表示ステップとを実行し、
前記表示ステップは、
前記音声受付ステップで受け付けた音声の認識結果と認識対象となるオブジェクトの読み情報とが一致する場合に当該読み情報を表示することなく、前記認識結果と認識対象となるオブジェクトの読み情報が一致しない場合に当該読み情報を表示することを特徴とする情報処理方法。 An information processing method in an information processing apparatus for displaying reading information for a sentence to be displayed,
The information processing apparatus is
A voice reception step for receiving voice;
A display step for displaying the reading information;
The display step includes
If the speech recognition result received in the speech receiving step matches the reading information of the object to be recognized, the reading result does not display and the reading information of the object to be recognized does not match. An information processing method characterized by displaying the reading information in some cases.
前記情報処理装置を、
音声を受け付ける音声受付手段と、
前記読み情報を表示する表示手段として機能させ、
前記表示手段は、
前記音声受付手段で受け付けた音声の認識結果と認識対象となるオブジェクトの読み情報とが一致する場合に当該読み情報を表示することなく、前記認識結果と認識対象となるオブジェクトの読み情報が一致しない場合に当該読み情報を表示することを特徴とするプログラム。 A program that can be executed by an information processing apparatus that displays reading information for a sentence to be displayed,
The information processing apparatus;
Voice receiving means for receiving voice;
Function as a display means for displaying the reading information;
The display means includes
When the voice recognition result received by the voice receiving unit matches the reading information of the object to be recognized, the reading result does not display and the reading information of the object to be recognized does not match. A program characterized by displaying the reading information in some cases.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014236046A JP6229645B2 (en) | 2013-11-20 | 2014-11-20 | Information processing apparatus, information processing method, and program thereof |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013239414 | 2013-11-20 | ||
| JP2013239414 | 2013-11-20 | ||
| JP2014236046A JP6229645B2 (en) | 2013-11-20 | 2014-11-20 | Information processing apparatus, information processing method, and program thereof |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2015121781A true JP2015121781A (en) | 2015-07-02 |
| JP2015121781A5 JP2015121781A5 (en) | 2016-03-10 |
| JP6229645B2 JP6229645B2 (en) | 2017-11-15 |
Family
ID=53533404
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014236046A Active JP6229645B2 (en) | 2013-11-20 | 2014-11-20 | Information processing apparatus, information processing method, and program thereof |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6229645B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020194512A1 (en) * | 2019-03-26 | 2020-10-01 | 一般社団法人瞬読協会 | Training system for improving reading speed, computer program, and training method for improving reading speed |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4891011A (en) * | 1988-07-13 | 1990-01-02 | Cook Graham D | System for assisting the learning of a subject |
| JPH1139298A (en) * | 1997-07-18 | 1999-02-12 | Nippon Telegr & Teleph Corp <Ntt> | Reading kana controller |
| JP2001125892A (en) * | 1999-10-26 | 2001-05-11 | Sharp Corp | Device and method for displaying reading kana and medium recording reading kana display program |
| JP2001265210A (en) * | 2000-03-16 | 2001-09-28 | Takayuki Takada | Method and device for assisting sutra chanting and evolving of the holly name and recording medium |
| JP2002503353A (en) * | 1997-06-02 | 2002-01-29 | カーネギー・メロン・ユニバーシティ | Reading aloud and pronunciation guidance device |
| JP2004054784A (en) * | 2002-07-23 | 2004-02-19 | Toshiba Corp | Kana-kanji conversion processing system and program |
| JP2004334207A (en) * | 2003-05-01 | 2004-11-25 | Microsoft Corp | Assistance for dynamic pronunciation for training of japanese and chinese speech recognition system |
-
2014
- 2014-11-20 JP JP2014236046A patent/JP6229645B2/en active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4891011A (en) * | 1988-07-13 | 1990-01-02 | Cook Graham D | System for assisting the learning of a subject |
| JP2002503353A (en) * | 1997-06-02 | 2002-01-29 | カーネギー・メロン・ユニバーシティ | Reading aloud and pronunciation guidance device |
| JPH1139298A (en) * | 1997-07-18 | 1999-02-12 | Nippon Telegr & Teleph Corp <Ntt> | Reading kana controller |
| JP2001125892A (en) * | 1999-10-26 | 2001-05-11 | Sharp Corp | Device and method for displaying reading kana and medium recording reading kana display program |
| JP2001265210A (en) * | 2000-03-16 | 2001-09-28 | Takayuki Takada | Method and device for assisting sutra chanting and evolving of the holly name and recording medium |
| JP2004054784A (en) * | 2002-07-23 | 2004-02-19 | Toshiba Corp | Kana-kanji conversion processing system and program |
| JP2004334207A (en) * | 2003-05-01 | 2004-11-25 | Microsoft Corp | Assistance for dynamic pronunciation for training of japanese and chinese speech recognition system |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020194512A1 (en) * | 2019-03-26 | 2020-10-01 | 一般社団法人瞬読協会 | Training system for improving reading speed, computer program, and training method for improving reading speed |
| JPWO2020194512A1 (en) * | 2019-03-26 | 2020-10-01 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6229645B2 (en) | 2017-11-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10671251B2 (en) | Interactive eReader interface generation based on synchronization of textual and audial descriptors | |
| KR101728699B1 (en) | Service Providing Method For E-Book And System thereof, Portable Device supporting the same | |
| WO2012086357A1 (en) | Electronic comic viewer device, electronic comic reading system, viewer program, recording medium having viewer program recorded thereon, and electronic comic display method | |
| US9684641B1 (en) | Presenting content in multiple languages | |
| AU2013201645A1 (en) | Learning support device, learning support method and storage medium in which learning support program is stored | |
| US9137483B2 (en) | Video playback device, video playback method, non-transitory storage medium having stored thereon video playback program, video playback control device, video playback control method and non-transitory storage medium having stored thereon video playback control program | |
| KR20180094637A (en) | System and method for review through handwriting note and voice note | |
| KR102129785B1 (en) | Method and apparatus to support the reading comprehension | |
| JP6056938B2 (en) | Program, processing method, and information processing apparatus | |
| JP6229645B2 (en) | Information processing apparatus, information processing method, and program thereof | |
| Stefanov et al. | An Overview of some popular devices and technologies designed for blind and visually impaired people | |
| TW201816636A (en) | Digitized book content interaction system and method capable of adding digitized values to physical texts and providing teachers with effective digitized assistance in teaching | |
| JP2005070939A (en) | Character string processor, character string processing method, program, and recording medium | |
| JP2007127798A (en) | Electronic document reproduction device, server, electronic document reproduction system, electronic document reproduction method, electronic document reproduction program, and recoding medium with the electronic document reproduction program recoded thereon | |
| US9253436B2 (en) | Video playback device, video playback method, non-transitory storage medium having stored thereon video playback program, video playback control device, video playback control method and non-transitory storage medium having stored thereon video playback control program | |
| CN110990419A (en) | Electronic dictionary device and electronic dictionary search method | |
| CN111027280A (en) | Method and system for generating and rendering digital publication and readable storage medium | |
| US20110078561A1 (en) | Method and system of formatting text in an electronic document to increase reading speed | |
| JP6696134B2 (en) | Information acquisition device and program | |
| TWM575595U (en) | E-book apparatus with audible narration | |
| KR101038571B1 (en) | Sensing device comprising buttons for selection of learning information and method for providing learning information using the sensing device | |
| KR20220151502A (en) | Method and apparatus for providing lecturing contents for licensed real estate agent | |
| JP7293782B2 (en) | ELECTRONIC DEVICE, TEXT DISPLAY METHOD AND PROGRAM | |
| KR20220134248A (en) | Method and device for providing korean language self-directed learning contents | |
| JP2018036684A (en) | Content display device and control method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20150410 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151222 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160122 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20161101 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20161101 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170113 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170124 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170327 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170919 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171002 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6229645 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |