JP2013003719A - Electronic book viewing system and in-vehicle unit - Google Patents
Electronic book viewing system and in-vehicle unit Download PDFInfo
- Publication number
- JP2013003719A JP2013003719A JP2011132315A JP2011132315A JP2013003719A JP 2013003719 A JP2013003719 A JP 2013003719A JP 2011132315 A JP2011132315 A JP 2011132315A JP 2011132315 A JP2011132315 A JP 2011132315A JP 2013003719 A JP2013003719 A JP 2013003719A
- Authority
- JP
- Japan
- Prior art keywords
- information
- electronic book
- image
- character
- character information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
Description
本発明は、電子書籍視聴システムおよび車載機に係り、特に、車載機における電子書籍の視聴に好適な電子書籍視聴システムおよび車載機に関する。 The present invention relates to an electronic book viewing system and an in-vehicle device, and more particularly to an electronic book viewing system and an in-vehicle device suitable for viewing an electronic book in the in-vehicle device.
従来から、外部接続機器を利用した車載エンターテイメントシステムに関する種々の提案がなされているが、その１つとして、タブレット端末等の携帯型情報端末を車載機に接続した上で、携帯型情報端末によって取得された電子書籍を、車載機の表示部に表示するとともに、テキスト読み上げ（ＴＴＳ：text to speech）によって車載機のスピーカから音声出力する技術が着目されている。 Various proposals for in-vehicle entertainment systems using externally connected devices have been made. One of them is obtained by connecting a portable information terminal such as a tablet terminal to the in-vehicle device and then using the portable information terminal. Attention has been focused on a technique for displaying the electronic book on the display unit of the in-vehicle device and outputting sound from a speaker of the in-vehicle device by text-to-speech (TTS).
このような技術によれば、電子書籍の内容を、視覚のみでなく聴覚も利用して把握することができるので、例えば、子供に絵本を読み聞かせるようなことを、自動で行うことができる。 According to such a technique, the contents of the electronic book can be grasped using not only the visual sense but also the auditory sense, so that, for example, the child can automatically read the picture book. .
なお、電子書籍の文字情報を読み上げる技術については、これまでにも種々の提案がなされている（例えば、特許文献１参照）。 Various techniques have been proposed so far for reading out character information of electronic books (see, for example, Patent Document 1).
しかしながら、電子書籍をそのまま車載機の表示部に表示する場合には、とりわけ走行中において細かい文字を認識することが難しく、また、挿絵や写真等の画像が含まれている場合には、読み上げられている文章と画像との関連性が分かり難い場合があり、さらに、画像が小さく表示されて見づらくなる場合があるといった問題が生じることになる。 However, when displaying an electronic book as it is on the display unit of the in-vehicle device, it is difficult to recognize fine characters especially during traveling, and when an image such as an illustration or a photograph is included, it is read out. In some cases, it may be difficult to understand the relationship between a sentence and an image, and it may be difficult to see the image because it is displayed in a small size.
そこで、本発明は、このような問題点に鑑みなされたものであり、電子書籍の内容を容易かつ正確に把握することができ、ひいては、車内空間において電子書籍を十分に楽しむことができる電子書籍視聴システムおよび車載機を提供することを目的とするものである。 Therefore, the present invention has been made in view of such a problem, and can easily and accurately grasp the contents of an electronic book, and thus can sufficiently enjoy the electronic book in a vehicle interior space. An object of the present invention is to provide a viewing system and an in-vehicle device.
前述した目的を達成するため、本発明に係る電子書籍視聴システムおよび車載機は、携帯型情報端末において表示される電子書籍を、前記携帯型情報端末に接続された車載機において表示および音声出力することによって、前記車載機における前記電子書籍の視聴が可能とされ、前記車載機は、前記携帯型情報端末から電子書籍情報を取得する電子書籍情報取得手段と、この電子書籍情報取得手段によって取得された前記電子書籍情報から、文字情報を抽出する文字情報抽出手段と、この文字情報抽出手段によって抽出された前記文字情報の読み上げを行う読み上げ手段と、前記取得された電子書籍情報から、画像情報を抽出する画像情報抽出手段と、この画像情報抽出手段によって抽出された前記画像情報に対応する画像を、当該画像情報に関連するとみなされる前記文字情報が前記読み上げ手段によって読み上げられる期間中に限定的に表示する画像表示手段とを備えたことを特徴としている。 In order to achieve the above-described object, an electronic book viewing system and an in-vehicle device according to the present invention display and audio-output an electronic book displayed on a portable information terminal on the in-vehicle device connected to the portable information terminal. Accordingly, the electronic book can be viewed on the in-vehicle device, and the in-vehicle device is acquired by the electronic book information acquisition unit that acquires the electronic book information from the portable information terminal, and the electronic book information acquisition unit. Character information extraction means for extracting character information from the electronic book information, reading means for reading out the character information extracted by the character information extraction means, and image information from the acquired electronic book information. An image information extracting unit to extract and an image corresponding to the image information extracted by the image information extracting unit Is characterized in that said character information considered relevant is an image display means for limiting the display during the period when read by said reading means.
そして、このような構成によれば、電子書籍中の画像を、これに関連する文字情報の読み上げ期間中に、時間的な限定性および表示対象としての限定性を以て読み上げ内容との関連性を認識しやすいように且つ視認しやすいように大きく表示することができるので、電子書籍の内容を容易かつ正確に把握することが可能となる。 According to such a configuration, an image in an electronic book is recognized as being related to the content read out with a temporal limitation and a limitation as a display target during the reading period of the character information related thereto. Therefore, it is possible to easily and accurately grasp the contents of the electronic book.
また、前記画像表示手段は、前記画像情報と前記文字情報との前記電子書籍情報中における配置状態に基づいて、前記画像情報に関連するとみなされる前記文字情報を判別し、この判別の結果に基づいて、前記文字情報の読み上げの期間中における前記画像の表示を行ってもよい。 Further, the image display means determines the character information considered to be related to the image information based on an arrangement state of the image information and the character information in the electronic book information, and based on the determination result Then, the image may be displayed during the reading of the character information.
そして、このような構成によれば、文字情報の読み上げに対応した画像表示を適切に行うことが可能となる。 And according to such a structure, it becomes possible to perform appropriately the image display corresponding to the reading-out of character information.
さらに、前記車載機は、前記読み上げ手段によって読み上げられる前記文字情報を前記携帯型情報端末に通知する文字情報通知手段を備え、前記携帯型情報端末は、自らが表示中の前記電子書籍における前記文字情報通知手段によって通知された前記文字情報に対応する文字を強調表示する文字強調手段を備えてもよい。 The in-vehicle device further includes character information notifying means for notifying the portable information terminal of the character information read by the reading means, and the portable information terminal is configured to display the characters in the electronic book being displayed by the portable information terminal. You may provide the character emphasis means which highlights the character corresponding to the said character information notified by the information notification means.
そして、このような構成によれば、車載機において読み上げ中の文字情報を携帯型情報端末側で容易に把握することが可能となる。 And according to such a structure, it becomes possible to grasp | ascertain easily the character information currently being read in the vehicle equipment by the portable information terminal side.
さらにまた、前記車載機は、前記画像表示手段によって表示される前記画像に対応する画像情報を前記携帯型情報端末に通知する画像情報通知手段を備え、前記携帯型情報端末は、自らが表示中の前記電子書籍における前記画像情報通知手段によって通知された前記画像情報に対応する画像を強調表示する画像強調手段を備えてもよい。 Furthermore, the in-vehicle device includes image information notification means for notifying the portable information terminal of image information corresponding to the image displayed by the image display means, and the portable information terminal is being displayed by itself. The electronic book may include image enhancement means for highlighting an image corresponding to the image information notified by the image information notification means.
そして、このような構成によれば、車載機において表示中の画像を携帯型情報端末側でも容易に把握することが可能となる。 And according to such a structure, it becomes possible to grasp | ascertain easily the image currently displayed in the vehicle equipment by the portable information terminal side.
また、前記携帯型情報端末は、タブレット端末であってもよい。 The portable information terminal may be a tablet terminal.
そして、このような構成によれば、電子書籍の表示に便利なタブレット端末を車内空間で活用することが可能となる。 And according to such a structure, it becomes possible to utilize the tablet terminal convenient for the display of an electronic book in vehicle interior space.
本発明によれば、電子書籍の内容を容易かつ正確に把握することができ、ひいては、車内空間において電子書籍を十分に楽しむことができる。 According to the present invention, the contents of an electronic book can be easily and accurately grasped, and as a result, the electronic book can be fully enjoyed in a vehicle interior space.
以下、本発明に係る電子書籍視聴システムおよび車載機の実施形態について、図１乃至図６を参照して説明する。 Embodiments of an electronic book viewing system and an in-vehicle device according to the present invention will be described below with reference to FIGS.
図１に示すように、本実施形態における電子書籍視聴システム１は、携帯型情報端末２と車載機３とによって構成されている。 As shown in FIG. 1, an electronic book viewing system 1 according to this embodiment includes a portable information terminal 2 and an in-vehicle device 3.
携帯型情報端末２は、タブレット端末であってもよい。タブレット端末としては、スマートフォン・タブレット等を採用することができる。 The portable information terminal 2 may be a tablet terminal. As the tablet terminal, a smartphone, a tablet, or the like can be used.
図１に示すように、携帯型情報端末２は、通信部４および携帯側電子書籍情報取得部５を有している。携帯側電子書籍情報取得部５は、通信部４を用いた無線通信等によって、インターネット上のＷｅｂサーバ等の情報源から、不図示の入力操作手段（タッチパネル等）を用いたユーザ操作によって選択された電子書籍情報を取得するようになっている。なお、本実施形態において対応し得る電子書籍は、ダウンロード型のものであってもよいし、ストリーミング型のものであってもよい。また、電子書籍のファイル形式についても、コンセプトに応じた種々の形式（例えば、ｅＰｕｂ等）のものを採用することができる。 As shown in FIG. 1, the portable information terminal 2 includes a communication unit 4 and a portable electronic book information acquisition unit 5. The portable-side electronic book information acquisition unit 5 is selected by a user operation using an input operation unit (not shown) (not shown) from an information source such as a Web server on the Internet by wireless communication using the communication unit 4 or the like. E-book information is acquired. Note that the electronic book that can be handled in the present embodiment may be a download type or a streaming type. Also, various file formats (e.g., ePub) according to the concept can be adopted as the file format of the electronic book.
また、図１に示すように、携帯型情報端末２は、電子書籍情報表示処理部６および携帯側表示部７を有している。電子書籍情報表示処理部６は、携帯側電子書籍情報取得部５によって取得された電子書籍情報に対応する電子書籍を、携帯側表示部７に表示するようになっている。このとき、電子書籍情報表示処理部６は、電子書籍が複数頁分ある場合には、入力操作手段を用いた改頁操作にともなって改頁を行うようにしてもよい。 As shown in FIG. 1, the portable information terminal 2 includes an electronic book information display processing unit 6 and a portable side display unit 7. The electronic book information display processing unit 6 displays an electronic book corresponding to the electronic book information acquired by the mobile side electronic book information acquisition unit 5 on the mobile side display unit 7. At this time, the electronic book information display processing unit 6 may perform a page break along with a page break operation using the input operation unit when there are a plurality of electronic books.
さらに、図１に示すように、携帯型情報端末２は、電子書籍情報送信処理部８および車載機接続部９を有している。電子書籍情報送信処理部８は、車載機接続部９に車載機３が接続された状態において、携帯側電子書籍情報取得部５によって取得された電子書籍情報を、車載機接続部９を介して車載機３に送信するようになっている。なお、車載機接続部９は、Bluetooth（登録商標）モジュール等の無線接続手段であってもよい。 Further, as shown in FIG. 1, the portable information terminal 2 includes an electronic book information transmission processing unit 8 and an in-vehicle device connection unit 9. The electronic book information transmission processing unit 8 transmits the electronic book information acquired by the portable-side electronic book information acquisition unit 5 via the in-vehicle device connection unit 9 in a state where the in-vehicle device 3 is connected to the in-vehicle device connection unit 9. It transmits to the vehicle equipment 3. The in-vehicle device connection unit 9 may be a wireless connection unit such as a Bluetooth (registered trademark) module.
一方、図１に示すように、車載機３は、携帯型情報端末接続部１０および電子書籍情報取得手段としての車載側電子書籍情報取得部１１を有している。携帯型情報端末接続部１０は、車載機接続部９と共通の接続方法（例えば、Bluetooth等）によって、携帯型情報端末２との接続を確立するようになっている。車載側電子書籍情報取得部１１は、携帯型情報端末接続部１０に車載機接続部９を介して携帯型情報端末２が接続されている状態において、携帯型情報端末２から送信された電子書籍情報を、携帯型情報端末接続部１０を介して受信して取得するようになっている。このような車載機３側における電子書籍情報の取得は、車載機３側での不図示の入力操作手段を用いた所定のユーザ操作に応じて車載側電子書籍情報取得部１１が携帯型情報端末２に対して電子書籍情報の要求信号を送信し、この要求信号に対する携帯型情報端末２の応答処理として行われるものであってもよい。 On the other hand, as shown in FIG. 1, the in-vehicle device 3 includes a portable information terminal connection unit 10 and an in-vehicle side electronic book information acquisition unit 11 as an electronic book information acquisition unit. The portable information terminal connection unit 10 establishes a connection with the portable information terminal 2 by a common connection method (for example, Bluetooth) with the in-vehicle device connection unit 9. The in-vehicle-side electronic book information acquisition unit 11 is an electronic book transmitted from the portable information terminal 2 in a state where the portable information terminal 2 is connected to the portable information terminal connection unit 10 via the in-vehicle device connection unit 9. Information is received and acquired via the portable information terminal connection unit 10. Such acquisition of electronic book information on the in-vehicle device 3 side is performed by the in-vehicle electronic book information acquisition unit 11 in accordance with a predetermined user operation using an input operation means (not shown) on the in-vehicle device 3 side. 2 may be performed as a response process of the portable information terminal 2 in response to the request signal of the electronic book information transmitted to the request signal 2.
また、図１に示すように、車載機３は、文字情報抽出手段としての文字情報抽出部１２を有している。この文字情報抽出部１２は、車載側電子書籍情報取得部１１によって取得された電子書籍情報を解析して、当該電子書籍情報中の文字情報を公知の抽出方法によって抽出するようになっている。 Moreover, as shown in FIG. 1, the vehicle equipment 3 has the character information extraction part 12 as a character information extraction means. The character information extraction unit 12 analyzes the electronic book information acquired by the in-vehicle side electronic book information acquisition unit 11, and extracts character information in the electronic book information by a known extraction method.
さらに、図１に示すように、車載機３は、画像情報抽出手段としての画像情報抽出部１３を有している。この画像情報抽出部１３は、車載側電子書籍情報取得部１１によって取得された電子書籍情報を解析して、当該電子書籍情報中の画像情報を公知の抽出方法によって抽出するようになっている。 Furthermore, as shown in FIG. 1, the in-vehicle device 3 has an image information extraction unit 13 as image information extraction means. The image information extraction unit 13 analyzes the electronic book information acquired by the in-vehicle side electronic book information acquisition unit 11 and extracts image information in the electronic book information by a known extraction method.
さらにまた、図１に示すように、車載機３は、読み上げ手段としてのＴＴＳ処理部１４および音声出力部１５を有している。ＴＴＳ処理部１４は、文字情報抽出部１２によって抽出された文字情報を、公知のＴＴＳ技術を用いたテキスト読み上げによって、音声出力部１５を介して音声出力するようになっている。 Furthermore, as shown in FIG. 1, the in-vehicle device 3 includes a TTS processing unit 14 and an audio output unit 15 as reading means. The TTS processing unit 14 outputs the character information extracted by the character information extraction unit 12 as a voice via the voice output unit 15 by reading out text information using a known TTS technique.
また、図１に示すように、車載機３は、画像表示手段としての画像表示処理部１６および車載側表示部１７を有している。なお、車載側表示部１７は、前部座席用（車載機本体）の表示部とは別個に備えられた後部座席用（リアエンターテイメントシステム用）の表示部であってもよい。画像表示処理部１６は、画像情報抽出部１３によって抽出された画像情報に対応する画像を、当該画像情報に関連するとみなされる文字情報（以下、関連文字情報と称する）がＴＴＳ処理部１４によって読み上げられる期間中に、車載側表示部１７に限定的に表示するようになっている。このとき、画像表示処理部１６は、画像情報抽出部１３によって抽出された画像情報と文字情報抽出部１２によって抽出された文字情報との電子書籍情報中における配置状態に基づいて関連文字情報を判別し、この判別結果に基づいて、関連文字情報の読み上げ期間中における画像の表示を行うようになっている。例えば、画像表示処理部１６は、電子書籍情報における画像情報と同一頁に含まれる全文字情報が関連文字情報であると判別し、当該関連文字情報の読み上げ期間中に、当該画像情報に対応する画像を表示するようにしてもよい。また、画像表示処理部１６は、同一頁中に複数の画像情報が抽出された場合には、各画像情報にそれぞれ位置的に近い一群の文字情報（例えば、段落や枠線等によって区分されたもの）が、各画像情報にそれぞれ対応する関連文字情報であると判別し、各関連文字情報の読み上げ期間中に、各関連文字情報に対応する画像を順次表示するようにしてもよい。 As shown in FIG. 1, the in-vehicle device 3 includes an image display processing unit 16 and an in-vehicle side display unit 17 as image display means. The in-vehicle side display unit 17 may be a display unit for the rear seat (for the rear entertainment system) provided separately from the display unit for the front seat (in-vehicle device main body). The image display processing unit 16 reads the image corresponding to the image information extracted by the image information extraction unit 13 from the character information (hereinafter referred to as related character information) considered to be related to the image information by the TTS processing unit 14. During the displayed period, the display is limited to the on-vehicle side display unit 17. At this time, the image display processing unit 16 determines related character information based on the arrangement state in the electronic book information of the image information extracted by the image information extracting unit 13 and the character information extracted by the character information extracting unit 12. On the basis of the determination result, the image is displayed during the reading period of the related character information. For example, the image display processing unit 16 determines that all character information included in the same page as the image information in the electronic book information is related character information, and corresponds to the image information during the reading period of the related character information. An image may be displayed. In addition, when a plurality of pieces of image information are extracted on the same page, the image display processing unit 16 is grouped by a group of character information (for example, paragraphs, frame lines, etc.) that are close to each image information. May be determined to be related character information corresponding to each image information, and images corresponding to each related character information may be sequentially displayed during the reading-out period of each related character information.
このような構成によれば、例えば、図２（ａ）に示すように、携帯型情報端末２側で、電子書籍として挿絵が含まれた絵本を取得した場合には、図２（ｂ）に示すように、車載機３側で、文章を含まずに挿絵のみを全画面表示することができるとともに、この挿絵に関連した内容の文章を読み上げることができる。 According to such a configuration, for example, as illustrated in FIG. 2A, when a picture book including an illustration as an electronic book is acquired on the portable information terminal 2 side, As shown in the figure, on the in-vehicle device 3 side, only the illustration can be displayed on the full screen without including the sentence, and the sentence having the contents related to the illustration can be read out.
上記構成に加えて、更に、本実施形態において、車載機３は、図１に示すように、文字情報通知手段としての文字情報通知部１８を有している。この文字情報通知部１８は、ＴＴＳ処理部１４によってこれから読み上げられるべき所定文字数分の文字情報を、携帯型情報端末接続部１０を介して携帯型情報端末２に通知するようになっている。 In addition to the above configuration, in the present embodiment, the in-vehicle device 3 further includes a character information notification unit 18 as character information notification means, as shown in FIG. The character information notification unit 18 notifies the portable information terminal 2 of character information for a predetermined number of characters to be read out by the TTS processing unit 14 via the portable information terminal connection unit 10.
これに対して、図１に示すように、携帯型情報端末２は、文字強調手段としてのハイライト表示処理部１９を有している。このハイライト表示処理部１９は、前述のようにして車載機３側に送信した電子書籍を携帯型情報端末２側においても表示する際に、表示中の電子書籍における文字情報通知部１８によって通知された文字情報に対応する文字を、ハイライト表示によって強調表示するようになっている。 On the other hand, as shown in FIG. 1, the portable information terminal 2 has a highlight display processing unit 19 as character emphasis means. When the highlight display processing unit 19 displays the electronic book transmitted to the in-vehicle device 3 side as described above also on the portable information terminal 2 side, the highlight display processing unit 19 notifies the character information notification unit 18 of the displayed electronic book. Characters corresponding to the character information thus displayed are highlighted by highlight display.
さらに、図１に示すように、車載機３は、画像情報通知手段としての画像情報通知部２０を有している。この画像情報通知部２０は、画像表示処理部１６によってこれから表示されるべき画像に対応する画像情報を、携帯型情報端末接続部１０を介して携帯型情報端末２に通知するようになっている。 Further, as shown in FIG. 1, the in-vehicle device 3 includes an image information notification unit 20 as image information notification means. The image information notification unit 20 notifies the portable information terminal 2 of image information corresponding to an image to be displayed by the image display processing unit 16 via the portable information terminal connection unit 10. .
これに対して、ハイライト表示処理部１９は、画像強調手段としても機能し、車載機３側に送信した電子書籍を携帯型情報端末２側においても表示する際に、表示中の電子書籍における画像情報通知部２０によって通知された画像情報に対応する画像を、ハイライト表示によって強調表示するようになっている。 On the other hand, the highlight display processing unit 19 also functions as an image emphasizing unit. When the electronic book transmitted to the in-vehicle device 3 side is also displayed on the portable information terminal 2 side, the highlight display processing unit 19 An image corresponding to the image information notified by the image information notification unit 20 is highlighted by highlight display.
このような構成によれば、例えば、図３に示すように、携帯型情報端末２に表示されている電子書籍としての絵本のうち、車載機３側で現在読み上げが行われている所定文字数分（１行分）の文章と、これに関連する挿絵とをハイライトさせることができる。また、このようなハイライト表示は、図４に示すように、電子書籍として新聞を表示する場合や、図５に示すように、電子書籍として漫画を表示する場合においても同様である。ただし、図４および図５中の複数の画像に付されている番号は、車載機３側（ＴＴＳ処理部１４）での文章の読み上げの進行にともなって車載機３側（画像表示処理部１６）で順次表示される画像の表示順である。したがって、図４および図５に示す携帯型情報端末２側（ハイライト表示処理部１９）での複数の画像のハイライトも、車載機３側での文章の読み上げの進行に応じて、画像に付されている番号順に行われることになる。 According to such a configuration, for example, as shown in FIG. 3, among picture books as electronic books displayed on the portable information terminal 2, a predetermined number of characters currently being read out on the in-vehicle device 3 side. The sentence (for one line) and the illustration related thereto can be highlighted. Such highlighting is the same when displaying a newspaper as an electronic book as shown in FIG. 4 or when displaying a comic as an electronic book as shown in FIG. However, the numbers given to the plurality of images in FIGS. 4 and 5 are the numbers on the in-vehicle device 3 side (image display processing unit 16) as the text is read out on the in-vehicle device 3 side (TTS processing unit 14). ) Is the display order of images sequentially displayed. Therefore, the highlights of a plurality of images on the portable information terminal 2 side (highlight display processing unit 19) shown in FIGS. 4 and 5 are also displayed on the image according to the progress of the text reading on the in-vehicle device 3 side. It will be performed in the order of the attached numbers.
なお、携帯型情報端末２における通信部４としては、この種の端末に適用される公知の通信モジュールを採用することができる。また、この他、携帯型情報端末２における前述した各構成部５，６，８，１９は、ＣＰＵ、ＣＰＵの実行プログラムが記憶されたＲＯＭおよびデータの一次保存等に用いられるＲＡＭ等によって実現してもよい。さらに、車載機３の前述した各構成部１１，１２〜１４、１６，１８，２０も、ＣＰＵ、ＲＯＭおよびＲＡＭ等によって実現してもよい。 As the communication unit 4 in the portable information terminal 2, a known communication module applied to this type of terminal can be employed. In addition, the above-described components 5, 6, 8, and 19 in the portable information terminal 2 are realized by a CPU, a ROM that stores an execution program of the CPU, a RAM that is used for primary storage of data, and the like. May be. Furthermore, each of the above-described components 11, 12 to 14, 16, 18, and 20 of the in-vehicle device 3 may also be realized by a CPU, a ROM, a RAM, and the like.
次に、本実施形態の主要な作用について説明する。 Next, main operations of the present embodiment will be described.
ただし、初期状態においては、便宜上、携帯型情報端末２と車載機３との接続状態が確立されていて、携帯型情報端末２側で通信によって電子書籍情報が取得されているものとする。 However, in the initial state, for the sake of convenience, it is assumed that the connection state between the portable information terminal 2 and the vehicle-mounted device 3 is established, and the electronic book information is acquired by communication on the portable information terminal 2 side.
そして、このような初期状態から、まず、図６のステップ１（ＳＴ１）において、車載側電子情報取得部１１により、携帯型情報端末２側から電子書籍情報を取得する。 And from such an initial state, electronic book information is first acquired from the portable information terminal 2 side by the vehicle-mounted side electronic information acquisition part 11 in step 1 (ST1) of FIG.
次いで、ステップ２（ＳＴ２）において、文字情報抽出部１２により、ステップ１（ＳＴ１）において取得された電子書籍情報から文字情報を抽出するとともに、画像情報抽出部１３により、当該電子書籍情報から画像情報を抽出する。 Next, in step 2 (ST2), the character information extraction unit 12 extracts character information from the electronic book information acquired in step 1 (ST1), and the image information extraction unit 13 extracts image information from the electronic book information. To extract.
次いで、ステップ３（ＳＴ３）において、画像表示処理部１６により、ステップ２（ＳＴ２）において画像情報が抽出されたか否かを判定する。そして、ステップ３（ＳＴ３）において肯定的な判定結果が得られた場合には、ステップ４（ＳＴ４）に進み、否定的な判定結果が得られた場合には、ステップ１２（ＳＴ１２）に進む。 Next, in step 3 (ST3), the image display processing unit 16 determines whether image information is extracted in step 2 (ST2). If a positive determination result is obtained in step 3 (ST3), the process proceeds to step 4 (ST4). If a negative determination result is obtained, the process proceeds to step 12 (ST12).
ここで、ステップ４（ＳＴ４）以降の処理について先に説明すると、まず、ステップ４（ＳＴ４）においては、画像表示処理部１６により、画像情報と文字情報との対応関係を解析して、関連文字情報を判別する。 Here, the processing after step 4 (ST4) will be described first. First, in step 4 (ST4), the image display processing unit 16 analyzes the correspondence between the image information and the character information, and the related characters. Determine the information.
次いで、ステップ５（ＳＴ５）において、画像表示処理部１６により、関連文字情報のＴＴＳ処理部１４による読み上げが開始されたか否かを判定する。そして、ステップ５（ＳＴ５）において肯定的な判定結果が得られた場合には、ステップ６（ＳＴ６）に進み、否定的な判定結果が得られた場合には、ステップ５（ＳＴ５）を繰り返す。 Next, in step 5 (ST5), the image display processing unit 16 determines whether or not the TTS processing unit 14 has started reading related character information. If a positive determination result is obtained in step 5 (ST5), the process proceeds to step 6 (ST6). If a negative determination result is obtained, step 5 (ST5) is repeated.
次いで、ステップ６（ＳＴ６）において、画像表示処理部１６により、ステップ５（ＳＴ５）において読み上げが開始されたと判定された関連文字情報に関連する画像情報に対応する画像（関連画像）の表示を開始する。また、このとき、携帯型情報端末２側においても、ハイライト表示処理部１９により、車載機３側で読み上げられる関連文字情報に対応する文字のハイライト表示および車載機３側で表示される関連画像のハイライト表示を開始する。 Next, in step 6 (ST6), the image display processing unit 16 starts displaying an image (related image) corresponding to the image information related to the related character information determined to be read out in step 5 (ST5). To do. At this time, also on the portable information terminal 2 side, the highlight display processing unit 19 highlights characters corresponding to the related character information read out on the in-vehicle device 3 side and the related information displayed on the in-vehicle device 3 side. Start highlighting the image.
次いで、ステップ７（ＳＴ７）において、画像表示処理部１６により、ステップ６（ＳＴ６）において開始した関連文字情報の読み上げが終了したか否かを判定する。そして、ステップ７（ＳＴ７）において肯定的な判定結果が得られた場合には、ステップ８（ＳＴ８）に進み、否定的な判定結果が得られた場合には、ステップ７（ＳＴ７）を繰り返す。 Next, in step 7 (ST7), the image display processing unit 16 determines whether or not the reading of the related character information started in step 6 (ST6) has been completed. If a positive determination result is obtained in step 7 (ST7), the process proceeds to step 8 (ST8). If a negative determination result is obtained, step 7 (ST7) is repeated.
次いで、ステップ８（ＳＴ８）において、画像表示処理部１６により、ステップ６（ＳＴ６）において開始した関連画像の表示を終了する。また、このとき、携帯型情報端末２側においても、車載機３側での読み上げおよび画像表示の終了にともなってハイライト表示を終了する。 Next, in step 8 (ST8), the image display processing unit 16 ends the display of the related image started in step 6 (ST6). At this time, also on the portable information terminal 2 side, the highlight display ends with the end of the reading and image display on the in-vehicle device 3 side.
次いで、ステップ９（ＳＴ９）において、ＴＴＳ処理部１４により、次に読み上げられるべき文字情報が存在するか否かを判定する。そして、ステップ９（ＳＴ９）において肯定的な判定結果が得られた場合には、ステップ１０（ＳＴ１０）に進み、否定的な判定結果が得られた場合には、処理を終了する。 Next, in step 9 (ST9), the TTS processor 14 determines whether there is character information to be read out next. If a positive determination result is obtained in step 9 (ST9), the process proceeds to step 10 (ST10). If a negative determination result is obtained, the process is terminated.
次いで、ステップ１０（ＳＴ１０）において、画像表示処理部１６により、次に読み上げられるべき文字情報が、電子書籍情報における次に表示されるべき画像情報に関連するとみなされる次の関連文字情報であるか否かを判定する。そして、ステップ１０（ＳＴ１０）において肯定的な判定結果が得られた場合には、ステップ５（ＳＴ５）に進んで、次に表示されるべき画像情報に対して、前回表示した画像情報と同様の処理を行い、否定的な判定結果が得られた場合には、ステップ１１（ＳＴ１１）に進む。 Next, in step 10 (ST10), whether the character information to be read out next by the image display processing unit 16 is the next related character information considered to be related to the image information to be displayed next in the electronic book information. Determine whether or not. If an affirmative determination result is obtained in step 10 (ST10), the process proceeds to step 5 (ST5), and the image information to be displayed next is the same as the previously displayed image information. When the process is performed and a negative determination result is obtained, the process proceeds to step 11 (ST11).
次いで、ステップ１１（ＳＴ１１）において、ＴＴＳ処理部１４により、次に読み上げられるべき文字情報の読み上げおよびハイライト表示処理部１９による当該文字情報のハイライトを行ってステップ９（ＳＴ９）に戻る。 Next, in step 11 (ST11), the TTS processing unit 14 reads out the character information to be read out next, and highlights the character information in the highlight display processing unit 19, and returns to step 9 (ST9).
次に、ステップ１２（ＳＴ１２）においては、ＴＴＳ処理部１４により、ステップ２（ＳＴ２）において抽出された文字情報の読み上げおよびハイライト表示処理部１９による当該文字情報のハイライトを行ってステップ９（ＳＴ９）に進む。 Next, in step 12 (ST12), the TTS processing unit 14 reads out the character information extracted in step 2 (ST2) and highlights the character information by the highlight display processing unit 19. Go to ST9).
以上述べたように、本発明によれば、電子書籍中の画像を、これに関連する文字情報の読み上げ期間中に、時間的な限定性および表示対象としての限定性を以て読み上げ内容との関連性を認識しやすいように且つ視認しやすいように大きく表示することができる。この結果、ユーザは、電子書籍の内容を容易かつ正確に把握することができ、電子書籍を車内空間において十分に楽しむことができる。 As described above, according to the present invention, the relevance of the image in the electronic book to the contents read out with the temporal limitation and the limitation as the display target during the reading period of the character information related thereto. Can be displayed in a large size so that it can be easily recognized and visually recognized. As a result, the user can easily and accurately grasp the contents of the electronic book, and can fully enjoy the electronic book in the vehicle interior space.
なお、本発明は、前述した実施の形態に限定されるものではなく、本発明の特徴を損なわない限度において種々変更することができる。 In addition, this invention is not limited to embodiment mentioned above, A various change can be made in the limit which does not impair the characteristic of this invention.
例えば、携帯型情報端末２側での電子書籍の改頁処理に、車載機３側での読み上げ／画像表示頁の改頁処理を連動させてもよい。ただし、この場合には、車載機３側で、携帯型情報端末２側での電子書籍の表示頁を通信を介して認識させることが必要となる。 For example, the page break process of the electronic book on the portable information terminal 2 side may be linked to the page break process of the reading / image display page on the in-vehicle device 3 side. However, in this case, it is necessary for the in-vehicle device 3 side to recognize the display page of the electronic book on the portable information terminal 2 side through communication.
また、文字強調手段および画像強調手段は、ハイライト以外の方法（例えば、マーク、線または枠を付すること等）によって対象となる文字・画像を強調するようにしてもよい。 In addition, the character emphasizing unit and the image emphasizing unit may emphasize a target character / image by a method other than highlighting (for example, adding a mark, a line, or a frame).
１ 電子書籍視聴システム
２ 携帯型情報端末
３ 車載機
１２ 文字情報抽出部
１３ 画像情報抽出部
１４ ＴＴＳ処理部
１６ 画像表示処理部
DESCRIPTION OF SYMBOLS 1 Electronic book viewing system 2 Portable information terminal 3 Car equipment 12 Character information extraction part 13 Image information extraction part 14 TTS process part 16 Image display process part
Claims (7)
前記車載機は、
前記携帯型情報端末から電子書籍情報を取得する電子書籍情報取得手段と、
この電子書籍情報取得手段によって取得された前記電子書籍情報から、文字情報を抽出する文字情報抽出手段と、
この文字情報抽出手段によって抽出された前記文字情報の読み上げを行う読み上げ手段と、
前記取得された電子書籍情報から、画像情報を抽出する画像情報抽出手段と、
この画像情報抽出手段によって抽出された前記画像情報に対応する画像を、当該画像情報に関連するとみなされる前記文字情報が前記読み上げ手段によって読み上げられる期間中に限定的に表示する画像表示手段と
を備えたことを特徴とする電子書籍視聴システム。 An electronic book viewing system in which an electronic book displayed on a portable information terminal is displayed and voice-output on an in-vehicle device connected to the portable information terminal, thereby enabling viewing of the electronic book on the on-vehicle device. Because
The in-vehicle device is
Electronic book information acquisition means for acquiring electronic book information from the portable information terminal;
Character information extraction means for extracting character information from the electronic book information acquired by the electronic book information acquisition means,
Read-out means for reading out the character information extracted by the character information extraction means;
Image information extraction means for extracting image information from the acquired electronic book information;
Image display means for limitedly displaying an image corresponding to the image information extracted by the image information extraction means during a period in which the character information considered to be related to the image information is read by the reading means. An electronic book viewing system characterized by that.
を特徴とする請求項１に記載の電子書籍視聴システム。 The image display means determines the character information considered to be related to the image information based on the arrangement state of the image information and the character information in the electronic book information, and based on the determination result, The electronic book viewing system according to claim 1, wherein the image is displayed during a period of reading out the character information.
前記読み上げ手段によって読み上げられる前記文字情報を前記携帯型情報端末に通知する文字情報通知手段を備え、
前記携帯型情報端末は、
自らが表示中の前記電子書籍における前記文字情報通知手段によって通知された前記文字情報に対応する文字を強調表示する文字強調手段を備えたこと
を特徴とする請求項１または請求項２に記載の電子書籍視聴システム。 The in-vehicle device is
Character information notifying means for notifying the portable information terminal of the character information read by the reading means,
The portable information terminal is
The character emphasizing means for emphasizing and displaying the character corresponding to the character information notified by the character information notifying means in the electronic book being displayed by itself is provided. Electronic book viewing system.
前記画像表示手段によって表示される前記画像に対応する画像情報を前記携帯型情報端末に通知する画像情報通知手段を備え、
前記携帯型情報端末は、
自らが表示中の前記電子書籍における前記画像情報通知手段によって通知された前記画像情報に対応する画像を強調表示する画像強調手段を備えたこと
を特徴とする請求項１乃至請求項３のいずれか１項に記載の電子書籍視聴システム。 The in-vehicle device is
Image information notifying means for notifying the portable information terminal of image information corresponding to the image displayed by the image display means;
The portable information terminal is
4. The image enhancement means for highlighting an image corresponding to the image information notified by the image information notification means in the electronic book being displayed by the electronic book. The electronic book viewing system according to Item 1.
を特徴とする請求項１乃至請求項４のいずれか１項に記載の電子書籍視聴システム。 The electronic book viewing system according to any one of claims 1 to 4, wherein the portable information terminal is a tablet terminal.
前記携帯型情報端末から電子書籍情報を取得する電子書籍情報取得手段と、
この電子書籍情報取得手段によって取得された前記電子書籍情報から、文字情報を抽出する文字情報抽出手段と、
この文字情報抽出手段によって抽出された前記文字情報の読み上げを行う読み上げ手段と、
前記取得された電子書籍情報から、画像情報を抽出する画像情報抽出手段と、
この画像情報抽出手段によって抽出された前記画像情報に対応する画像を、当該画像情報に関連するとみなされる前記文字情報が前記読み上げ手段によって読み上げられる期間中に限定的に表示する画像表示手段と
を備えたことを特徴とする車載機。 An in-vehicle device capable of viewing the electronic book by displaying and outputting an electronic book displayed on the portable information terminal in a state where the portable information terminal is connected;
Electronic book information acquisition means for acquiring electronic book information from the portable information terminal;
Character information extraction means for extracting character information from the electronic book information acquired by the electronic book information acquisition means,
Read-out means for reading out the character information extracted by the character information extraction means;
Image information extraction means for extracting image information from the acquired electronic book information;
Image display means for limitedly displaying an image corresponding to the image information extracted by the image information extraction means during a period in which the character information considered to be related to the image information is read by the reading means. In-vehicle device characterized by that.
を特徴とする請求項６に記載の車載機。 The image display means determines the character information considered to be related to the image information based on the arrangement state of the image information and the character information in the electronic book information, and based on the determination result, The in-vehicle device according to claim 6, wherein the image is displayed during a period of reading out the character information.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011132315A JP5726647B2 (en) | 2011-06-14 | 2011-06-14 | Electronic book viewing system and in-vehicle device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011132315A JP5726647B2 (en) | 2011-06-14 | 2011-06-14 | Electronic book viewing system and in-vehicle device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2013003719A true JP2013003719A (en) | 2013-01-07 |
| JP5726647B2 JP5726647B2 (en) | 2015-06-03 |
Family
ID=47672247
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011132315A Active JP5726647B2 (en) | 2011-06-14 | 2011-06-14 | Electronic book viewing system and in-vehicle device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5726647B2 (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014160387A (en) * | 2013-02-20 | 2014-09-04 | Yahoo Japan Corp | Terminal device, audio output method, and audio output program |
| JP2015035687A (en) * | 2013-08-08 | 2015-02-19 | 株式会社ニコン | Data processor |
| JP2019149101A (en) * | 2018-02-28 | 2019-09-05 | シナノケンシ株式会社 | Electronic book browsing program and electronic book browsing device |
| JP2023043552A (en) * | 2021-09-16 | 2023-03-29 | 三和書籍有限会社 | Electronic book reading device and electronic book reading program |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001175273A (en) * | 1999-10-05 | 2001-06-29 | Toshiba Corp | Electronic equipment for reading book aloud, authoring system for the same, semiconductor media card and information providing system |
| JP2002202786A (en) * | 2000-12-28 | 2002-07-19 | Casio Comput Co Ltd | Digital book apparatus and voice reproducing system |
| JP2004362167A (en) * | 2003-06-03 | 2004-12-24 | Karekku:Kk | System for creating voiced movie content based on text/image object data conversion |
| JP2006053739A (en) * | 2004-08-11 | 2006-02-23 | Alpine Electronics Inc | Electronic book read-out device |
| JP2006243521A (en) * | 2005-03-04 | 2006-09-14 | Sony Corp | Document output device, and method and program for document output |
| JP2007193459A (en) * | 2006-01-18 | 2007-08-02 | Hitachi Ltd | Behavior information acquiring device, display terminal, and behavior information notification system |
| JP2010093515A (en) * | 2008-10-07 | 2010-04-22 | Alpine Electronics Inc | A plurality of monitor selection transfer systems of mobile device data |
-
2011
- 2011-06-14 JP JP2011132315A patent/JP5726647B2/en active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001175273A (en) * | 1999-10-05 | 2001-06-29 | Toshiba Corp | Electronic equipment for reading book aloud, authoring system for the same, semiconductor media card and information providing system |
| JP2002202786A (en) * | 2000-12-28 | 2002-07-19 | Casio Comput Co Ltd | Digital book apparatus and voice reproducing system |
| JP2004362167A (en) * | 2003-06-03 | 2004-12-24 | Karekku:Kk | System for creating voiced movie content based on text/image object data conversion |
| JP2006053739A (en) * | 2004-08-11 | 2006-02-23 | Alpine Electronics Inc | Electronic book read-out device |
| JP2006243521A (en) * | 2005-03-04 | 2006-09-14 | Sony Corp | Document output device, and method and program for document output |
| JP2007193459A (en) * | 2006-01-18 | 2007-08-02 | Hitachi Ltd | Behavior information acquiring device, display terminal, and behavior information notification system |
| JP2010093515A (en) * | 2008-10-07 | 2010-04-22 | Alpine Electronics Inc | A plurality of monitor selection transfer systems of mobile device data |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014160387A (en) * | 2013-02-20 | 2014-09-04 | Yahoo Japan Corp | Terminal device, audio output method, and audio output program |
| JP2015035687A (en) * | 2013-08-08 | 2015-02-19 | 株式会社ニコン | Data processor |
| JP2019149101A (en) * | 2018-02-28 | 2019-09-05 | シナノケンシ株式会社 | Electronic book browsing program and electronic book browsing device |
| JP2023043552A (en) * | 2021-09-16 | 2023-03-29 | 三和書籍有限会社 | Electronic book reading device and electronic book reading program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5726647B2 (en) | 2015-06-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP2490213A1 (en) | Method for converting character text messages to audio files with respective titles for their selection and reading aloud with mobile devices | |
| JP2012023510A5 (en) | ||
| JP5726647B2 (en) | Electronic book viewing system and in-vehicle device | |
| RU2010132214A (en) | METHODS AND DEVICES FOR IMPLEMENTING DISTRIBUTED MULTIMODAL APPLICATIONS | |
| US20160080298A1 (en) | Method for generating emoticon and electronic device supporting the same | |
| WO2014154097A1 (en) | Automatic page content reading-aloud method and device thereof | |
| US20100030424A1 (en) | View control system and view control method | |
| JP2009294801A5 (en) | ||
| RU2010137821A (en) | ADVERTISING BASED ON THE LOCATION OF THE CAR | |
| WO2016203805A1 (en) | Information processing device, information processing system, information processing method, and program | |
| CN103796181A (en) | Playing method of sending message, system and related equipment thereof | |
| JP2018151533A5 (en) | ||
| JP2014123353A (en) | Method for providing help, computer program and computer | |
| JP2009110479A (en) | Contents creating server, contents creating system, contents creating method, and contents creating program | |
| US9712471B2 (en) | Mail sending/receiving apparatus, method, and recording medium recording program | |
| KR101110644B1 (en) | A reading speed improvement method and apparatus of e-book | |
| JP2008146755A (en) | On-board audio system, and its information imaging and transmitting method | |
| JP3188999U (en) | Audio output system | |
| JP2006331276A (en) | Translation system | |
| JP5878006B2 (en) | Mobile communication terminal and mobile communication method | |
| KR20140109551A (en) | Apparatus and method for learning foreign language by using augmented reality | |
| JP6717268B2 (en) | Information processing apparatus and information processing program | |
| CN114550430A (en) | Character reminding method and device based on AR technology | |
| JP5848930B2 (en) | Information processing system and program | |
| JP5522248B2 (en) | Information output system, information output restriction device, information output restriction method, and computer program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140207 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140909 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140910 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150331 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150401 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5726647 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |